大数据技术入门到商业实战——Hadoop+Spark+Flink全解析

【写作背景】
次工业革命是以蒸汽机、汽船、火车为代表，标志着人类进入蒸汽时代，大大加强了世界各地之间的联系，改变了世界面貌。第二次工业革命是以电力、内燃机、飞机、汽车为代表，标志着人类进入电气时代。而随着第三次工业革命的深入展开，计算机、原子能、航空航天等各个领域取得了长足发展。第四次工业革命则对人工智能、清洁能源、无人控制技术、量子信息技术等多个领域进行了深耕。
无论是第三次还是第四次工业革命，都能看到计算机软件的发展起到了重要作用，从信息革命到人工智能，从大数据到深度学习等各个领域都取得了非常大的成就。特别是近几年在大数据技术的不断进步下，海量的数据处理发展迅速，通过挖掘海量数据的深度价值，训练机器学习更加精准的模型，可以实现海量数据的实时处理，提高数据的处理效率。
有很多的公司对大数据技术比较陌生，不太了解大数据究竟能够给公司带来什么样的价值，如何利用大数据技术来实现对公司海量数据的治理，如何使用大数据技术实现公司海量数据的价值挖掘等。这些顾虑都在制约着公司选择使用大数据的技术，从而阻止了大数据技术为公司创造更大的利润和价值。
为了让大家快速掌握大数据技术，学习大数据的系统理论知识，掌握大数据的应用案例进行实践，我们组织编撰了此书，希望让越来越多的人能够了解到大数据技术，尽快接受大数据的技术价值，从而为公司创造更大的利润和价值。

【内容特色】
随着信息化建设的速度越来越快，产生的数据越来越多，在过去的两年里，人类创造的数据比之前整个人类历史上存在的数据还要多，地球上平均每人将以约17MB/s的速度创造数据。面对每天产生的海量数据，传统的数据处理手段越来越难以满足人们对数据处理的速度、效率、准确性等的要求。因此，以大数据技术手段来对海量的数据进行处理，已成为全球所有数据处理工程师的普遍选择。
大数据的技术繁杂、技术难度较大，从初的Hadoop分布式文件存储系统，到Hive、Hbase、Spark、Flink等各种计算和存储的技术框架，每一个框架都有其特定的应用场景，在哪种场景下应该选择使用哪一项技术成为众多数据处理人员必须面对的棘手问题。本书内容由浅入深，全面讲解主流框架的技术特性以及适用场景。让读者能够轻松掌握大数据的技术选型以及每一项大数据技术的运用场景。本书涵盖内容全面，基本上覆盖了目前常用的各种大数据技术框架，能够让读者全面系统地学习大数据常用的技术框架，轻松做到“一书在手，大数据技术全都有”，更好地掌握大数据技术的方方面面。

【编写人员安排及致谢】
在本书中，编者向读者展示了大数据各项技术的使用详解以及运用场景，涉及的技术框架繁多，每一个技术都亲自动手实践，尽量避免错误以及纰漏。但是编者水平有限，且多人写作也会造成一定的协作问题，因此书中难免存在一定的问题，欢迎大家进行指正。
本书的编写人员安排如下：刘雪松负责编写第1~2章，李伟杰负责编写第3~4章，王超负责编写第5~7章，李沙负责编写第8~10章，全书由李沙统稿。在编写本书期间，感谢开课吧科技股份有限公司提供的平台，感谢其他编者的辛苦付出，感谢家人的默默陪伴，是他们的全力支持，才得以让本书顺利出版，希望本书能够为大家带来帮助。

编者

本书全面详细地介绍了大数据生态系统中的主流技术。全书共10章，主要包括大数据生态系统概述、大数据采集技术、大数据存储技术、大数据分析处理技术等内容，书中涵盖了Hadoop、Hive、Hbase、Kafka、Spark、Flink等技术的原理和实践，其中重点介绍了Hadoop技术、Spark技术及Flink技术。
本书详细介绍了主流大数据技术框架的基本原理、环境搭建、操作使用和在典型行业中的具体应用，使读者不仅能够在宏观上全面认知大数据生态系统，而且还能在微观上深入理解大数据技术细节。
本书不仅适合大数据技术初学者阅读，还可以帮助金融、电信、电商、能源、政府部门的大数据应用决策和技术人员，以及IT经理、CTO、CIO等快速学习大数据技术，并能作为大数据相关岗位培训的教程。