【内容特点】（1）内容全面，结构合理：全面细致介绍大数据技术及大数据专业人才应具备的能力。（2）注重学生数据素养的培养，全书着重体现大数据的应用以及大数据能力的重要性。【资源特点】重点难点知识微课，配套题库、PPT、程序源代码、习题答案等。【服务特点】作者提供QQ服务群等支持，定期举办直播进行教学培训。
林子雨，博士，国内高校知名大数据教师，厦门大学计算机科学与技术系副教授，厦门大学计算机科学与技术系数据库实验室负责人，中国计算机学会数据库专委会委员，中国计算机学会信息系统专委会委员，入选“2021年高校计算机专业优秀教师奖励计划”，荣获“2022 年福建省高等教育教学成果奖特等奖(个人排名第一)”和“2018 年福建省高等教育教学成果奖二等奖(个人排名第一)”，出版 12 本大数据系列教材，被国内 500 多所高校采用，建设了国内高校首个大数据课程公共服务平台，平台累计访问量超过 2300 万次，成为全国高校大数据教学知名品牌，主持的“大数据技术原理与应用"课程获评国家精品在线开放课程和国家级线上一流本科课程，主持的“Spark 编程基础课程狭评国家级一流本科课程。
本书详细阐述了培养复合型大数据专业人才所需要的大数据相关知识。全书共10章，内容包括大数据概述、大数据与其他新兴技术的关系、大数据基础知识、大数据的应用、大数据的硬件环境、数据采集与预处理、数据存储与管理、数据处理与分析、数据可视化、大数据分析综合案例。在大数据基础知识部分，本书详细介绍了与培养学生的数据素养相关的知识，包括大数据安全、大数据思维、大数据伦理、数据共享、数据开放、大数据交易和大数据治理。 本书可以作为高等院校大数据专业的导论课教材，也可供相关技术人员参考。
第1章 大数据概述 11.1 数据 11.1.1 数据的概念 11.1.2 数据的类型 21.1.3 数据的组织形式 31.1.4 数据的生命周期 31.1.5 数据的使用 31.1.6 数据的价值 41.1.7 数据爆炸 51.1.8 数商 51.2 大数据时代 61.2.1 第三次信息化浪潮 71.2.2 信息科技为大数据时代提供技术支撑 71.2.3 数据产生方式的变革促成大数据时代的来临 81.3 大数据的发展历程 91.4 世界各国的大数据发展战略 111.4.1 美国 121.4.2 英国 131.4.3 欧盟 131.4.4 韩国 141.4.5 日本 141.4.6 中国 141.5 大数据的概念 171.5.1 数据量大 171.5.2 数据类型繁多 181.5.3 处理速度快 191.5.4 价值密度低 201.6 大数据的影响 201.6.1 大数据对科学研究的影响 201.6.2 大数据对社会发展的影响 221.6.3 大数据对就业市场的影响 231.6.4 大数据对人才培养的影响 231.7 大数据的应用 251.7.1 大数据在各个领域的应用 251.7.2 大数据应用的3个层次 261.8 大数据产业 271.9 大数据与数字经济 291.9.1 数字经济 291.9.2 大数据与数字经济的紧密关系 321.10 高校的大数据专业 331.10.1 大数据专业概述 341.10.2 大数据专业体系 351.10.3 大数据专业的编程语言 361.11 本章小结 381.12 习题 39第2章 大数据与其他新兴技术的关系 402.1 云计算 402.1.1 云计算的概念 402.1.2 云计算的服务模式和类型 432.1.3 云计算数据中心 432.1.4 云计算的应用和产业 452.2 物联网 462.2.1 物联网的概念 462.2.2 物联网的关键技术 472.2.3 物联网的应用 492.2.4 物联网产业链 502.3 大数据与云计算、物联网的关系 502.4 人工智能 512.4.1 人工智能的概念 522.4.2 人工智能的关键技术 522.4.3 人工智能的应用 562.4.4 人工智能产业 602.4.5 大数据与人工智能的关系 632.5 区块链 632.5.1 比特币概述 642.5.2 区块链的原理 642.5.3 区块链的定义和应用 702.5.4 大数据与区块链的关系 712.6 元宇宙 732.6.1 元宇宙的概念 732.6.2 元宇宙的基本特征 742.6.3 元宇宙的核心技术 752.6.4 大数据与元宇宙的关系 772.7 本章小结 772.8 习题 77第3章 大数据基础知识 793.1 大数据安全 793.1.1 传统数据安全 803.1.2 大数据安全与传统数据安全的不同 803.1.3 大数据时代数据安全面临的挑战 813.1.4 大数据安全问题分类 823.1.5 大数据面临的具体安全威胁 843.1.6 典型案例 863.2 大数据思维 893.2.1 传统的思维方式 893.2.2 大数据时代需要新的思维方式 893.2.3 大数据思维方式 913.2.4 运用大数据思维方式的具体实例 943.3 大数据伦理 1013.3.1 大数据伦理的概念 1013.3.2 大数据伦理的典型案例 1023.3.3 大数据的伦理问题 1053.4 数据共享 1103.4.1 数据孤岛问题 1103.4.2 数据孤岛问题产生的原因 1113.4.3 消除数据孤岛的重要意义 1123.4.4 实现数据共享所面临的挑战 1123.4.5 推进数据共享开放的举措 1143.4.6 数据共享案例 1153.5 数据开放 1193.5.1 政府开放数据的理论基础 1193.5.2 政府信息公开与政府数据开放的联系与区别 1223.5.3 政府数据开放的重要意义 1233.6 大数据交易 1253.6.1 大数据交易概述 1253.6.2 大数据交易的发展现状 1263.6.3 大数据交易平台 1283.7 大数据治理 1323.7.1 概述 1323.7.2 大数据治理要素和治理原则 1383.7.3 大数据治理的范围 1403.8 本章小结 1433.9 习题 143第4章 大数据的应用 1454.1 大数据在互联网领域的应用 1454.2 大数据在生物医学领域的应用 1464.2.1 流行病预测 1464.2.2 智慧医疗 1484.2.3 生物信息学 1484.3 大数据在物流领域的应用 1494.3.1 智能物流的概念 1494.3.2 大数据是智能物流的关键 1494.3.3 中国智能物流骨干网—菜鸟 1504.4 大数据在城市管理领域的应用 1514.4.1 智能交通 1514.4.2 环保监测 1514.4.3 城市规划 1524.4.4 安防 1534.5 大数据在金融领域的应用 1534.5.1 高频交易 1534.5.2 市场情绪分析 1544.5.3 信贷风险分析 1544.5.4 大数据征信 1554.6 大数据在汽车领域的应用 1564.7 大数据在零售领域的应用 1564.7.1 发现关联购买行为 1574.7.2 客户群体细分 1574.7.3 供应链管理 1584.8 大数据在餐饮领域的应用 1584.8.1 餐饮领域拥抱大数据 1594.8.2 餐饮O2O 1594.9 大数据在电信和能源领域的应用 1604.10 大数据在体育和娱乐领域的应用 1614.10.1 训练球队 1624.10.2 投拍影视作品 1624.10.3 预测比赛结果 1634.11 大数据在安全领域的应用 1634.11.1 大数据与国家安全 1634.11.2 应用大数据技术防御网络攻击 1644.11.3 警察应用大数据工具预防犯罪 1644.12 大数据在日常生活中的应用 1654.13 本章小结 1674.14 习题 167第5章 大数据的硬件环境 1685.1 服务器的性能指标 1685.2 服务器的分类及选购 1705.3 系统的性能评估 1715.3.1 CPU 1725.3.2 内存 1735.3.3 存储 1745.3.4 网卡 1775.4 硬件系统分析 1785.5 网络设备 1795.6 系统组网方案设计 1815.6.1 网络需求分析 1815.6.2 网络结构设计 1825.7 数据中心 1835.7.1 数据中心的分类 1845.7.2 数据中心的组成 1845.7.3 数据中心的上线 1855.8 本章小结 1855.9 习题 186第6章 数据采集与预处理 1876.1 数据采集 1876.1.1 数据采集的概念 1876.1.2 数据采集的三大要点 1886.1.3 数据采集的数据源 1886.1.4 数据采集方法 1896.1.5 网络爬虫 1916.2 数据清洗 1966.2.1 数据清洗的应用领域 1966.2.2 数据清洗的实现方式 1966.2.3 数据清洗的内容 1976.2.4 数据清洗的注意事项 1986.2.5 数据清洗的基本流程 1986.2.6 数据清洗的评价标准 1996.2.7 数据清洗的行业发展 1996.3 数据集成和数据转换 2006.3.1 数据集成 2006.3.2 数据转换 2016.4 数据归约 2046.5 数据脱敏 2056.6 本章小结 2076.7 习题 207第7章 数据存储与管理 2087.1 传统的数据存储与管理技术 2087.1.1 文件系统 2087.1.2 关系数据库 2097.1.3 数据仓库 2107.1.4 并行数据库 2127.2 大数据时代的数据存储与管理技术 2137.2.1 分布式文件系统 2137.2.2 NewSQL和NoSQL数据库 2137.2.3 云数据库 2157.2.4 数据湖 2167.3 大数据处理架构Hadoop 2207.3.1 Hadoop的特性 2207.3.2 Hadoop生态系统 2217.4 分布式文件系统HDFS 2237.4.1 HDFS的设计目标 2237.4.2 HDFS的体系结构 2247.5 NoSQL数据库 2257.5.1 键值数据库 2267.5.2 列族数据库 2277.5.3 文档数据库 2277.5.4 图数据库 2287.6 云数据库 2297.6.1 云数据库的概念 2297.6.2 云数据库的特性 2307.6.3 云数据库与其他数据库的关系 2317.6.4 代表性的云数据库产品 2327.7 分布式数据库HBase 2327.7.1 Bigtable概述 2327.7.2 HBase简介 2337.7.3 HBase的数据模型 2337.7.4 HBase的系统架构 2357.8 Spanner 2367.9 OceanBase 2377.10 本章小结 2387.11 习题 239第8章 数据处理与分析 2408.1 数据处理与分析的概念 2408.2 基于统计学方法的数据分析 2428.2.1 常见的数据分析方法 2428.2.2 数据分析的主流工具 2448.3 机器学习和数据挖掘算法 2468.3.1 概述 2468.3.2 分类 2478.3.3 聚类 2488.3.4 回归分析 2498.3.5 关联规则 2498.3.6 协同过滤 2508.4 数据挖掘的方法体系 2518.4.1 可挖掘的知识 2518.4.2 数据挖掘系统的体系结构 2528.4.3 数据挖掘流程 2538.5 大数据处理与分析技术 2548.5.1 技术分类 2558.5.2 流计算 2568.5.3 图计算 2588.6 大数据处理与分析的代表性产品 2608.6.1 分布式计算框架MapReduce 2608.6.2 数据仓库Hive 2618.6.3 数据仓库Impala 2638.6.4 基于内存的分布式计算框架Spark 2648.6.5 机器学习框架TensorFlowOnSpark 2788.6.6 流计算框架Flink 2808.6.7 大数据编程框架Beam 2838.6.8 查询分析系统Dremel 2848.7 本章小结 2858.8 习题 286第9章 数据可视化 2879.1 可视化概述 2879.1.1 数据可视化简介 2879.1.2 可视化的发展历程 2889.1.3 可视化的重要作用 2889.2 可视化图表 2909.3 可视化工具 2919.3.1 入门级工具 2919.3.2 信息图表工具 2919.3.3 地图工具 2939.3.4 时间线工具 2939.3.5 高级分析工具 2949.4 本章小结 2949.5 习题 295第10章 大数据分析综合案例 29610.1 案例任务 29610.2 系统设计 29710.2.1 系统总体设计 29710.2.2 数据库设计 29710.2.3 系统网站设计 29810.2.4 算法设计 29910.3 技术选择 30110.4 系统实现 30310.5 本章小结 30410.6 习题 304参考文献 305
