第一章 大数据时代与数据采集 1
第一节 什么是大数据 1
第二节 大数据的特征 2
第三节 大数据分析 3
第四节 大数据国家战略 4
第五节 大数据产业链分析 6
第六节 大数据采集总体需求 10
第二章 大数据采集系统概述 14
第一节 大数据采集系统整体设计的基本原则 14
第二节 采集器硬件通用框架模型 15
第三节 硬件设计的基本原则 16
第四节 软硬件开发环境 17
第五节 软硬件开发工具 18
第六节 大数据采集系统的整体架构 20
第三章 面向大数据应用的数据采集和导入 22
第一节 Flume 22
第二节 Kafka 29
第三节 Sqoop 34
第四节 Storm 39
第五节 Splunk 48
第四章 面向大数据应用的数据串行端口采集 49
第一节 数字信号的异步串行传送 49
第二节 MSComm控件应用 71
第三节 RS-485总线模块RM417编程 75
第四节 EDA9033E电参数模块的数据采集 84
第五章 面向大数据应用的全球定位系统数据采集 91
第一节 GPS的组成 91
第二节 WGS 84大地坐标系与2000中国大地坐标系 100
第三节 NMEA 0183协议 109
第四节 GR-213U接收机简介 119
第五节 SPComm串口通信控件简介 123
第六节 GPS数据采集 125
第六章 基于USB-CAN总线模块的数据采集 133
第一节 USB概述 133
第二节 CAN总线概述 140
第三节 K85系列CAN总线数据采集模块简介 144
第四节 CANUSB-Ⅰ/Ⅱ工业级接口模块 153
第五节 基于CANUSB-Ⅰ与K-8512模块的数据采集 159
第七章 面向大数据应用的数据采集系统的抗干扰技术 162
第一节 数据采集系统中常见的干扰 162
第二节 供电系统的抗干扰 168
第三节 模拟信号输入通道的抗干扰 172
第四节 接地问题 200
第五节 微机总线的抗干扰 204
第六节 数据采集软件的抗干扰 206
第八章 面向大数据应用的数据采集分析 212
第一节 数据科学 213
第二节 预测分析 219
第三节 机器学习 222
第四节 Spark MLlib 227
第五节 深入了解算法 237
第九章 大数据采集技术应用案例分析 240
第一节 大数据时代下留守儿童心理健康教育数据采集 240
第二节 全国儿童营养与健康检测数据采集 242
第三节 珠心算教育对儿童脑功能影响的数据采集 244
第四节 环保大数据采集 246
第五节 公安大数据采集 260
参考文献 264