大数据预处理技术

图书标准信息

• 作者 陈觎 主编；蔡茜
• 出版社 电子工业出版社
• 出版时间 2023-11
• 版次 1
• ISBN 9787121454196
• 定价 42.00元
• 装帧 其他
• 开本 16开
• 页数 204页

【内容简介】

本书围绕大数据预处理业务背景及相关技术，以学情境的方式，首先介绍了使用 python、panda对各种数据源的读写，然后介绍了数据的清洗、集成、规约、变换四个处理数据方式，后介绍了使用kettle工具和mapreduce编程对数据进行处理的技术，通过理论结合实际、循序渐进的学方式，让读者学并掌握大数据预处理技术及应用。本书理论分析相对较少，侧重动手实践，适合应用型本科、高职高专大数据技术专业和希望快速进入大数据领域的读者参使用。

【作者简介】

蔡茜，"双高计划”高水专业群建设小组核心成员，重量职业教育教师创新团队核心成员，重庆工商职业学院专业带头人、骨。曾获职业院校信息化大赛网络课程、省部级成果奖、各一项；主持省部级课程1门；主持省部级级教改项目2项。作为主编编写教材6本，其中获"十二五”规划教材1本、重庆市重点建设教材1本。公开发表ei检索5篇、中文核心2篇；主持省部级教委科研项目1项，主研市级科研项目3项；授权实用新型专利5项。

【目录】

导    言
单元1  数据读写
学情境1  使用python读写职业能力大数据分析台【岗位】数据
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
学情境2  使用pandas读写职业能力大数据分析台【技能】数据
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元2  数据清洗
学情境3  使用正则表达式从网页中提取招聘联系人的邮箱地址
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
学情境4  使用pandas对职业能力大数据分析台【工资】表进行清洗
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元3  数据集成
学情境5  使用pandas实现对职业能力大数据分析台多个信息
      数据源进行集成
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元4  数据规约
学情境6  使用numpy+pandas实现对工资数据进行数量规约
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元5  数据变换
学情境7  使用pandas+sklearn对实现数据规范化
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元6  kettle工具使用
学情境8  使用etl工具kettle对职业能力大数据分析台信息
      数据进行清洗
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
单元7  mapreduce数据处理
学情境9  使用mapreduce合并职业能力大数据分析台【技能】数据
学情境描述
学目标
任务书
获取信息
工作计划
进行决策
知识准备
相关案例
工作实施
评价反馈
拓展思
参文献