内容简介

本书通过两个基本项目介绍了Scala语言的基本语法、函数式编程、高阶函数、模式匹配等相关知识和技术；通过12个实训项目，介绍了Spark的技术栈，内容涵盖Spark Core、Spark SQL、Spark结构化流和Spark机器学习库等相关模块和技术。每个项目相对独立、完整，分为若干个任务，围绕具体的任务来介绍相关的理论知识，并进行应用分析，有利于读者更好地理解、掌握课程知识。

考虑到职业教育的特点以及大数据发展的趋势，本书的理论知识以实用、够用为主，不追求面面俱到，同时又保持一定的技术先进性和前瞻性。

本书适合作为高职高专院校计算机及相关专业的教材或参考书，也可作为程序员、数据分析师、相关专业学生以及想进入大数据处理技术行业的读者学习的参考用书。

本书配有电子课件、源代码等教学资源。教师可登录机械工业出版社教育服务网（www.cmpedu.com）注册后免费下载或联系编辑（010-88379807）咨询。

  目录

前 言

学习单元 1........................................................1

项目1 搭建Scala开发环境....................................................3

项目2 实现一个简单的商品管理系统（CMS）........................11

单元小结..................................................................................44

学习单元 2.....................................................47

项目1 搭建Spark standalone集群.......................................................49

项目2 部署和运行Spark作业.....................................................55

项目3 安装和使用基于Web的notebook开发工具..................................61

项目4 安装和使用IntelliJ IDEA集成开发环境..............................66

单元小结.................................................................................81

学习单元 3.....................................................83

项目1 电商wangzhan用户行为分析........................................85

项目2 分析电影评分数据集............................................96

单元小结..........................................................................102

学习单元 4...................................................105

项目1 分析电影数据集........................................................107

项目2 分析银   行   客   户   数   据....................................................121

单元小结...............................................................................127

学习单元 5...................................................129

项目1 实时检测与分析物联网设备故障.................................131

项目2 股票仪表板实现......................................................140

单元小结.............................................................................149

学习单元 6....................................................151

项目1 数据探索 ..............................................................153

项目2 数据准备 ...................................................................165

单元小结.........................................................................179

参考文献......................................................180