《面向大数据应用的数据采集技术研究》属于大数据采集方面的著作,主要由大数据概念、大数据采集重要性、大数据采集的特点和相关技术、大数据采集架构、大数据迁移技术、大数据采集实例等部分组成,全书以大数据采集为研究对象,对面向大数据应用的数据采集技术从数据采集、数据预处理、数据分析及数据可视化的综合应用作出分析,并提出大数据采集技术的相关要点。对大数据采集研究者以及从事大数据相关工作的工程技术人员具有学习和参考价值。
第一章 大数据时代与数据采集
第一节 什么是大数据
第二节 大数据的特征
第三节 大数据分析
第四节 大数据国家战略
第五节 大数据产业链分析
第六节 大数据采集总体需求
第二章 大数据采集系统概述
第一节 大数据采集系统整体设计的基本原则
第二节 采集器硬件通用框架模型
第三节 硬件设计的基本原则
第四节 软硬件开发环境
第五节 软硬件开发工具
第六节 大数据采集系统的整体架构
第三章 面向大数据应用的数据采集和导入
第一节 Flume
第二节 Kafka
第三节 Sqoop
第四节 Storm
第五节 Splunk
第四章 面向大数据应用的数据串行端口采集
第一节 数字信号的异步串行传送
第二节 MSComm控件应用
第三节 Rs-485总线模块RM417编程
第四节 EDA9033E电参数模块的数据采集
第五章 面向大数据应用的全球定位系统数据采集
第一节 GPS的组成
第二节 WGS 84大地坐标系与2000中国大地坐标系
第三节 NMEA 0183协议
第四节 GR-213U接收机简介
第五节 SPComm串口通信控件简介
第六节 GPS数据采集
第六章 基于USB-CAN总线模块的数据采集
第一节 USB概述
第二节 CAN总线概述
第三节 K85系列CAN总线数据采集模块简介
第四节 CANuSB-Ⅰ/Ⅱ工业级接口模块
第五节 基于CANUSB-I与K-8512模块的数据采集
第七章 面向大数据应用的数据采集系统的抗干扰技术
第一节 数据采集系统中常见的干扰
第二节 供电系统的抗干扰
第三节 模拟信号输入通道的抗干扰
第四节 接地问题
第五节 微机总线的抗干扰
第六节 数据采集软件的抗干扰
第八章 面向大数据应用的数据采集分析
第一节 数据科学
第二节 预测分析
第三节 机器学习
第四节 Spark MLlib
第五节 深入了解算法
第九章 大数据采集技术应用案例分析
第一节 大数据时代下留守儿童心理健康教育数据采集
第二节 全国儿童营养与健康检测数据采集
第三节 珠心算教育对儿童脑功能影响的数据采集
第四节 环保大数据采集
第五节 公安大数据采集
参考文献