大数据基础编程实验和案例教程林子雨清华大学出版社9787302472094

目录

章大数据技术概述/1

1.1大数据时代/1

1.2大数据关键技术/2

1.3大数据软件/3

1.3.1Hadoop/4

1.3.2Spark/5

1.3.3NoSQL数据库/5

1.3.4数据可视化/6

1.4内容安排/7

1.5在线资源/8

1.5.1在线资源一览表/9

1.5.2下载专区/9

1.5.3在线,/10

1.5.4拓展阅读/11

1.5.5大数据课程公共服务平台/11

1.6本章小结/12第2章Linux系统的安装和使用/13

2.1Linux系统简介/13

2.2Linux系统安装/13

2.2.1下载安装文件/14

2.2.2Linux系统的安装方式/14

2.2.3安装Linux虚拟机/15

2.2.4生成Linux虚拟机镜像文件/36

2.3Linux系统及相关软件的基本使用方法/38

2.3.1Shell/38

2.3.2root用户/38

2.3.3创建普通用户/38〖2〗〖4〗大数据基础编程、实验和案例教程目录〖3〗2.3.4sudo命令/39

2.3.5常用的Linux系统命令/40

2.3.6文件解压缩/40

2.3.7常用的目录/41

2.3.8目录的权限/41

2.3.9更新APT/41

2.3.10切换中英文输入法/43

2.3.11vim编辑器的使用方法/43

2.3.12在Windows系统中使用SSH方式登录Linux系统/44

2.3.13在Linux中安装Eclipse/48

2.3.14其他使用技巧/49

2.4关于本书内容的一些约定/49

2.5本章小结/50第3章Hadoop的安装和使用/51

3.1Hadoop简介/51

3.2安装Hadoop前的准备工作/52

3.2.1创建hadoop用户/52

3.2.2更新APT/52

3.2.3安装SSH/52

3.2.4安装Java环境/53

3.3安装Hadoop/55

3.3.1下载安装文件/55

3.3.2单机模式配置/56

3.3.3伪分布式模式配置/57

3.3.4分布式模式配置/66

3.3.5使用Docker搭建Hadoop分布式集群/75

3.4本章小结/87第4章HDFS操作方法和基础编程/88

4.1HDFS操作常用Shell命令/88

4.1.1查看命令使用方法/88

4.1.2HDFS目录操作/90

4.2利用HDFS的Web管理界面/92

4.3HDFS编程实践/92

4.3.1在Eclipse中创建项目/93

4.3.2为项目添加需要用到的JAR包/94

4.3.3编写Java应用程序/96

4.3.4编译运行程序/98

4.3.5应用程序的部署/100

4.4本章小结/102第5章HBase的安装和基础编程/103

5.1安装HBase/103

5.1.1下载安装文件/103

5.1.2配置环境变量/104

5.1.3添加用户权限/104

5.1.4查看HBase版本信息/104

5.2HBase的配置/105

5.2.1单机模式配置/105

5.2.2伪分布式配置/107

5.3HBase常用Shell命令/109

5.3.1在HBase中创建表/109

5.3.2添加数据/110

5.3.3查看数据/110

5.3.4删除数据/111

5.3.5删除表/112

5.3.6查询历史数据/112

5.3.7退出HBase数据库/112

5.4HBase编程实践/113

5.4.1在Eclipse中创建项目/113

5.4.2为项目添加需要用到的JAR包/116

5.4.3编写Java应用程序/117

5.4.4编译运行程序/123

5.4.5应用程序的部署/124

5.5本章小结/124第6章典型NoSQL数据库的安装和使用/125

6.1Redis安装和使用/125

6.1.1Redis简介/125

6.1.2安装Redis/125

6.1.3Redis实例演示/127

6.2MongoDB的安装和使用/128

6.2.1MongDB简介/129

6.2.2安装MongoDB/129

6.2.3使用Shell命令操作MongoDB/130

6.2.4Java API编程实例/136

6.3本章小结/139第7章MapReduce基础编程/140

7.1频统计任务要求/140

7.2MapReduce程序编写方法/141

7.2.1编写Map处理逻辑/141

7.2.2编写Reduce处理逻辑/141

7.2.3编写main方法/142

7.2.4完整的频统计程序/143

7.3编译包程序/144

7.3.1使用命令行编译包频统计程序/145

7.3.2使用Eclipse编译运行频统计程序/145

7.4运行程序/154

7.5本章小结/156第8章数据仓库Hive的安装和使用/157

8.1Hive的安装/157

8.1.1下载安装文件/157

8.1.2配置环境变量/158

8.1.3修改配置文件/158

8.1.4安装并配置MySQL/159

8.2Hive的数据类型/161

8.3Hive基本操作/162

8.3.1创建数据库、表、视图/162

8.3.2删除数据库、表、视图/163

8.3.3修改数据库、表、视图/164

8.3.4查看数据库、表、视图/165

8.3.5描述数据库、表、视图/165

8.3.6向表中装载数据/166

8.3.7查询表中数据/166

8.3.8向表中插入数据或从表中导出数据/166

8.4Hive应用实例: WordCount/167

8.5Hive编程的优势/167

8.6本章小结/168第9章Spark的安装和基础编程/169

9.1基础环境/169

9.2安装Spark/169

9.2.1下载安装文件/169

9.2.2配置相关文件/170

9.3使用 Spark Shell编写代码/171

9.3.1启动Spark Shell/171

9.3.2读取文件/172

9.3.3编写频统计程序/174

9.4编写Spark独立应用程序/174

9.4.1用Scala语言编写Spark独立应用程序/175

9.4.2用Java语言编写Spark独立应用程序/178

9.5本章小结/1820章典型的可视化工具的使用方法/183

10.1Easel.ly信息图制作方法/183

10.1.1信息图/183

10.1.2信息图制作基本步骤/183

10.2D3可视化库的使用方法/186

10.2.1D3可视化库的安装/187

10.2.2基本操作/187

10.3可视化工具Tableau使用方法/194

10.3.1安装Tableau/195

10.3.2界面功能介绍/195

10.3.3Tableau简单操作/197

10.4使用