Hadoop大数据平台构建与应用

图书标准信息

• 作者 米洪、陈永 编
• 出版社 高等教育出版社
• 出版时间 2018-02
• 版次 1
• ISBN 9787040491005
• 定价 24.80元
• 装帧 平装
• 开本 16开
• 纸张 胶版纸
• 页数 179页
• 字数 260千字
• 正文语种 简体中文
• 丛书 云计算技术与应用专业校企合作系列教材

【内容简介】

　　《Hadoop大数据平台构建与应用（云计算技术与应用专业校企合作系列教材）》以“高职院校学情分析”系统为项目原型，以任务驱动为主线，基于Hadoop大数据平台，讲解大数据平台的搭建与运维、大数据的采集与存储、大数据的处理、数据的分析、数据的可视化等完整的大数据应用案例，全面详细地讲述Hadoop、MapReduee、HDFS、Hive和Sqoop等技术的相关知识，并详细讨论了Mahout大数据分析中的常用算法——K—means聚类算法、Canopy聚类算法、欧氏距离算法、余弦距离算法、皮尔逊相关系数算法、TF—IDF加权算法等的使用及相关学情分析系统中算法的实现等。
　　《Hadoop大数据平台构建与应用/云计算技术与应用专业校企合作系列教材》具有较强的实用性和可操作性，语言精练，通俗易懂，操作步骤描述详尽，并配有大量操作图例。
　　《Hadoop大数据平台构建与应用/云计算技术与应用专业校企合作系列教材》可作为高等职业院校大数据应用专业、软件技术专业、云计算技术与应用专业的大数据分析与软件开发等相关课程的教材，也可作为从事大数据分析、云计算应用等系统开发与分析技术人员的参考用书。

【目录】

项目1 认识大数据，实现学情分析
系统设计与环境搭建
学习目标
学习情境
任务1．1 设计学情分析系统
任务描述
任务目标
知识准备
任务实施
项目实训
任务1．2 构建学情分析系统开发
环境
任务描述
任务目标
知识准备
任务实施
项目实训
项目小结

项目2 Hadoop大数据平台的构建
学习目标
学习情境
任务2．1 搭建Ambari Hadoop
系统
任务描述
任务目标
知识准备
任务实施
项目实训
任务2．2 使用Apache Ambari
管理Had0叩集群
任务描述
任务目标
知识准备
任务实施
项目买训
项目小结

项目3 就业岗位数据的采集和
存储
学习目标
学习情境
任务3．1 使用网络爬虫采集岗位
招聘数据
任务描述
任务目标
知识准备
任务实施
项目实训
任务3．2 将采集的数据上传到
HDFS
任务描述
任务目标
知识准备
任务实施
项目实训
任务3．3 使用Sqoop转换MySQL
中的学生成绩数据到
Hive中
任务描述
任务目标
知识准备
任务实施
项目实训
项目小结

项目4 岗位数据的处理
学习目标
学习情境
任务4．1 使用Hadoop MR对数据
进行清洗
任务描述
任务目标
知识准备
任务实施
项目实训
任务4．2 使用命令行对Hive进行
数据查询和过滤
任务描述
任务目标
知识准备
任务实施
项目实训
任务4．3 使用Java API对Hive
进行连接与操作
任务描述
任务目标
知识准备
任务实施
项目实训
项目小结

项目5 岗位和技能数据的
分析
学习目标
学习情境
任务5．1 使用Mahout命令进行
岗位聚类分析
任务描述
任务目标
知识准备
任务实施
项目实训
任务5．2 使用Mahout的Java API
进行岗位分析聚类
开发
任务描述
任务目标
知识准备
任务实施
项目实训
任务5．3 使用：Mahout推荐工作
岗位
任务描述
任务目标
知识准备
任务实施
项目实训
项目小结

项目6 数据的可视化
学习目标
学习情境
任务6．1 使用Excel可视化
数据
任务描述
任务目标
知识准备
任务实施
项目实训
任务6．2 使用EChaas可视化
数据
任务描述
任务目标
知识准备
任务实施
项目实训
任务6．3 使用D3．js可视化
数据
任务描述
任务目标
知识准备
任务实施
项目实训
项目小结
参考文献