林子雨（1978－），男，博士，厦门大学计算机科学系助理教授，厦门大学云计算与大数据研究中心创始成员，海峡云计算与大数据应用研究中心副主任。中国高校首个“数字教师”提出者和建设者

全国高校大数据教学知名教师以多年大数据教学经验为基础的倾心之作。

全国众多高校开课教材《大数据技术原理与应用》唯一指定配套实验指导书。

教程官网提供全书实验代码、相关软件、授课视频等资源一站式免费下载。

高校大数据课程公共服务平台为本教程提供数字化教学资源全方位配套服务。

第1章大数据技术概述/1

1.1大数据时代/1

1.2大数据关键技术/2

1.3大数据软件/3

1.3.1Hadoop/4

1.3.2Spark/5

1.3.3NoSQL数据库/5

1.4内容安排/6

1.5在线资源/8

1.6本章小结/10

第2章Linux系统的安装和使用/11

2.1Linux系统简介/11

2.2Linux系统安装/11

2.2.1下载安装文件/12

2.2.2Linux系统的安装方式/12

2.2.3安装Linux虚拟机/13

2.2.4生成Linux虚拟机镜像文件/35

2.3Linux系统及相关软件的基本使用方法/36

2.3.1Shell/36

2.3.2root用户/37

2.3.3创建普通用户/37

2.3.4sudo命令/38

2.3.5常用的Linux系统命令/38

2.3.6文件解压缩/39

2.3.7常用的目录/39

2.3.8目录的权限/40

2.3.9更新APT/40

2.3.10切换中英文输入法/42

2.3.11vim编辑器的使用方法/42

2.3.12在Windows系统中使用SSH方式登录Linux系统/43

2.3.13在Linux系统中安装Eclipse/46

2.3.14其他使用技巧/47

2.4关于本书内容的一些约定/47

2.5本章小结/48

第3章Hadoop的安装和使用/49

3.1Hadoop简介/49

3.2安装Hadoop前的准备工作/49

3.2.1创建hadoop用户/50

3.2.2更新APT/50

3.2.3安装SSH/50

3.2.4安装Java环境/51

3.3安装Hadoop/52

3.3.1下载安装文件/53

3.3.2单机模式配置/53

3.3.3伪分布式模式配置/54

3.3.4分布式模式配置/61

3.4本章小结/70

第4章HDFS操作方法和基础编程/71

4.1HDFS操作常用的Shell命令/71

4.1.1查看命令的用法/71

4.1.2HDFS操作/73

4.2利用HDFS的Web管理界面/75

4.3HDFS编程实践/75

4.3.1在Eclipse中创建项目/75

4.3.2为项目添加需要用到的JAR包/76

4.3.3编写Java应用程序/79

4.3.4编译运行程序/82

4.3.5应用程序的部署/83

4.4本章小结/86

第5章HBase的安装和基础编程/88

5.1安装HBase/88

5.1.1下载安装文件/88

5.1.2配置环境变量/89

5.1.3添加用户权限/89

5.1.4查看HBase版本信息/89

5.2HBase的配置/90

5.2.1单机模式配置/90

5.2.2伪分布式模式配置/92

5.3HBase常用的Shell命令/94

5.3.1在HBase中创建表/94

5.3.2添加数据/94

5.3.3查看数据/95

5.3.4删除数据/96

5.3.5删除表/97

5.3.6查询历史数据/97

5.3.7退出HBase数据库/97

5.4HBase编程实践/98

5.4.1在Eclipse中创建项目/98

5.4.2为项目添加需要用到的JAR包/100

5.4.3编写Java应用程序/102

5.4.4编译运行程序/105

5.5本章小结/106

第6章典型NoSQL数据库的安装和使用/108

6.1Redis的安装和使用/108

6.1.1Redis简介/108

6.1.2安装Redis/108

6.1.3Redis实例演示/110

6.2MongoDB的安装和使用/111

6.2.1MongDB简介/111

6.2.2安装MongoDB/112

6.2.3使用Shell命令操作MongoDB/113

6.2.4Java API编程实例/118

6.3本章小结/122

第7章MapReduce基础编程/123

7.1词频统计任务要求/123

7.2MapReduce程序编写方法/124

7.2.1编写Map处理逻辑/124

7.2.2编写Reduce处理逻辑/124

7.2.3编写main方法/125

7.2.4完整的词频统计程序/126

7.3编译打包程序/127

7.3.1使用命令行编译打包词频统计程序/128

7.3.2使用Eclipse编译打包词频统计程序/128

7.4运行程序/136

7.5本章小结/139

第8章数据仓库Hive的安装和使用/140

8.1Hive的安装/140

8.1.1下载安装文件/140

8.1.2配置环境变量/141

8.1.3修改配置文件/141

8.1.4安装并配置MySQL/142

8.2Hive的数据类型/144

8.3Hive基本操作/145

8.3.1创建数据库、表、视图/145

8.3.2删除数据库、表、视图/146

8.3.3修改数据库、表、视图/147

8.3.4查看数据库、表、视图/148

8.3.5描述数据库、表、视图/148

8.3.6向表中装载数据/149

8.3.7查询表中数据/149

8.3.8向表中插入数据或从表中导出数据/149

8.4Hive应用实例: WordCount/150

8.5Hive编程的优势/151

8.6本章小结/151

第9章Spark的安装和基础编程/152

9.1基础环境/152

9.2安装Spark/152

9.2.1下载安装文件/152

9.2.2配置相关文件/153

9.3使用 Spark Shell编写代码/154

9.3.1启动Spark Shell/154

9.3.2读取文件/155

9.3.3编写词频统计程序/156

9.4编写Spark独立应用程序/157

9.4.1用Scala语言编写Spark独立应用程序/157

9.4.2用Java语言编写Spark独立应用程序/161

9.5本章小结/164

……