前言:本文以《大数据技术入门》一书为基础,在梳理全书内容的同时,融入了来自不同方面的知识,旨在帮助初学者更全面、更快速、更有效的了解大数据相关的知识。
big data
以下为文章目录,具体内容见:https://mp.weixin.qq.com/s/G1K8ITpLxT18qssYOqfT-Q
第一章 大数据时代... 1
1.1 大数据五大特征... 1
1.2 大数据类型... 1
1.3 大数据商用化... 2
1.4 大数据产业链分析... 2
第二章 大数据软件框架... 3
2.1 Hadoop 框架... 3
2.1.1 Hadoop的功能... 3
2.1.2 Hadoop生态系统概述... 4
2.1.3 两大核心组件介绍... 6
2.2 Spark框架(内存计算框架)... 9
2.2.1 Spark简介... 9
2.2.2 Spark架构... 9
2.2.3 Spark VS Hadoop. 10
2.2.4 Spark core. 11
2.3 实时流处理框架... 11
2.4 框架选择... 12
第三章 安装与配置大数据软件... 12
第四章 大数据存储:文件系统... 13
第五章 大数据存储:数据库... 14
第六章 大数据访问:SQL引擎层... 14
6.1 Phoenix. 14
6.2 Hive. 14
6.3 Pig. 15
6.4 ElasticSearch. 17
第七章 大数据采集与导入... 17
7.1 Flume. 17
7.2 Kafka. 18
7.3 Sqoop. 19
7.4 Storm... 20
7.5 Splunk. 21
第八章 大数据管理平台... 22
8.1 大数据建设框架... 22
8.2 EasyDoop案例分析... 23
第九章 Spark技术... 24
9.1 Spark简介... 24
9.2 Spark和Hadoop生态关系... 25
第十章 大数据分析... 27
10.1 数据科学... 27
10.2 预测分析... 27
10.3 机器学习... 27
10.4 Spark MLib. 27
10.5 深入了解算法... 28
第十一章 案例分析... 28
11.1 环保大数据... 28
11.2 公安大数据... 28
第十二章 大数据安全... 29