Spark大数据开发（职业教育计算机系列教材）

图书标准信息

• 作者 唐春玲；周桥；陈小龙
• 出版社 同济大学出版社
• 出版时间 2023-06
• 版次 1
• ISBN 9787576505917
• 定价 68.00元
• 装帧 其他
• 开本 16开
• 纸张 胶版纸
• 页数 229页
• 字数 374.000千字

【内容简介】

本书基于Spark数据处理工作流程，从不同的学习情景中提炼出典型的工作环节，通过理论与实践相结合的方式，体现了大数据技术在各种环境下的实际应用。本书内容主要包括搭建Spark开发环境、使用Scala与RDD统计平台数据、使用Spark SQL分析用人单位数据、使用Spark Streaming分析平台数据、使用GraphX与ML分析平台数据共六个学习情境并在书末附有工作任务单。本书适用于职业院校计算机类以及大数据技术相关专业，也可作为Spark大数据开发的初学者的参考用书。

【作者简介】

唐春玲，1981年2月出生，女，吉林省汪清人，工学硕士，现为重庆工商职业学院电子信息工程学院副教授，国家“双高计划”高水平专业群建设小组核心成员，校专业带头人。主要从事软件技术，数字信号处理，大数据及人工智能算法等方向研究。曾获重庆市教学成果奖两项，主持科研项目两项、出版3本教材，主持两门校网络课程资源建设，发表论文10余篇。 国家“双高计划”高水平专业群建设小组核心成员 首批国家级职业教育

【目录】

学情境一 搭建spark开发环境

1．1 典型工作环节1：需求分析

1．2 典型工作环节2：步骤分析

1．3 典型工作环节3：认识spark

1．4 典型工作环节4：调研spark应用场景

1．5 典型工作环节5：准备集群系统

1．6 典型工作环节6：搭建spark台环境

1．7 归纳结与拓展提高

1．8 课后练

学情境二 使用scala统计台数据

2．1 典型工作环节1：需求分析

2．2 典型工作环节2：步骤分析

2．3 典型工作环节3：优选系统开发语言

2．4 典型工作环节4：了解scala语言

2．5 典型工作环节5：搭建开发环境

2．6 典型工作环节6：学scala语言

2．7 典型工作环节7：统计大数据台岗位数据

2．8 归纳结与拓展提高

2．9 课后练

学情境三 使用rdd统计台数据

3．1 典型工作环节1：需求分析

3．2 典型工作环节2：步骤分析

3．3 典型工作环节3：学rdd架构与入门

3．4 典型工作环节4：学spark rdd编程基础

3．5 典型工作环节5：使用rdd统计台职位数据

3．6 归纳结与拓展提高

3．7 课后练

学情境四 使用spark sql分析用人单位数据

4．1 典型工作环节1：需求分析

4．2 典型工作环节2：步骤分析

4．3 典型工作环节3：认识hive和spark sql

4．4 典型工作环节4：系统开发环境搭建

4．5 典型工作环节5：导入数据到hive

4．6 典型工作环节6：使用spark sql分析台数据

4．7 归纳结与拓展提高

4．8 课后练

学情境五 使用spark streaming分析台数据

5．1 典型工作环节1：需求分析

5．2 典型工作环节2：步骤分析

5．3 典型工作环节3：学流计算

5．4 典型工作环节4：学spark streaming

5．5 典型工作环节5：系统开发环境搭建

5．6 典型工作环节6：使用spark streaming分析台数据

5．7 归纳结与拓展提高

5．8 课后练

学情境六 使用graphx与ml分析台数据

6．1 典型工作环节1：需求分析

6．2 典型工作环节2：步骤分析

6．3 典型工作环节3：认识graphx

6．4 典型工作环节4：使用graphx分析台数据

6．5 典型工作环节5：认识machine learning

6．6 典型工作环节6：常用spark mllib机器学库api

6．7 典型工作环节7：使用ml分析台数据

6．8 归纳结与拓展提高

6．9 课后练

工作任务单1

工作任务单2

工作任务单3

工作任务单4

工作任务单5

工作任务单6

参文献