Storm实时数据处理

图书标准信息

• 作者 [澳]安德森（Quinton Anderson） 著；卢誉声 译
• 出版社 机械工业出版社
• 出版时间 2014-06
• 版次 1
• ISBN 9787111466635
• 定价 49.00元
• 装帧 平装
• 开本 16开
• 纸张 胶版纸
• 页数 191页
• 正文语种 简体中文
• 原版书名 Storm Real-Time Processing Cookbook
• 丛书 大数据技术丛书

【内容简介】

　　在大数据领域，Hadoop无疑是最炙手可热的技术。作为分布式系统架构，Hadoop具有高可靠性、高扩展性、高效性、高容错性和低成本的优点。然而随着数据体积越来越大，实时处理能力成为了许多机构需要面对的首要挑战。Hadoop是一个批处理系统，在实时计算处理方面显得十分乏力。storm是一个类似于Hadoop勺实时数据处理框架，也是一个非常有效的开源实时计算工具，通常被比作“实时的Hadoop”。
　　《大数据技术丛书：Storm实时数据处理》通过丰富的实例，系统讲解Storm的基础知识和实时数据处理的最佳实践方法，内容涵盖Storm本地开发环境搭建、日志流数据处理、Trident、分布式远程过程调用、Topology在不同编程语言中的实现方法、Storm与Hadoop的集成方法、实时机器学习、持续交付和如何在AWS上部署Storm。此外，《大数据技术丛书：Storm实时数据处理》旨在围绕Storm技术促进DevOps实践，使读者能够开发Storm解决方案，同时可靠地交付有价值的产品。
　　《大数据技术丛书：Storm实时数据处理》适合想学习实时处理技术或者想通过Storm实现实时处理方法的开发者阅读。

【作者简介】

　　QuintonAnderson，软件工程师，专注实时计算系统开发。他在构建防御系统的实时通信系统，以及财务与银行服务中的企业级应用程序方面有丰富的经验。他热衷于开源，是Storm社区的活跃分子，乐于交付各种基于Storm的解决方案。

 

 

译者简介　
　　卢誉声，资深软件开发工程师，现就职于思科系统（中国）研发中心云产品研发部。他曾参与多个项目协议级别定义、SDK及服务器后端和前端的设计与研发，在下一代实时云计算协作平台的研发过程中积累了丰富的敏捷实践与开发经验。此外，他还从事C／C++开发工作，对Clojare、JavaScript、Lua，以及移动开发平台等也有一定研究。

【目录】

译者序
前言
第1章搭建开发环境
1.1简介
1.2搭建开发环境
1.3分布式版本控制
1.4创建“HelloWorld”Topology
1.5创建Storm集群——配置机器
1.6创建Storm集群——配置Storm
1.7获取基本的点击率统计信息
1.8对Bolt进行单元测试
1.9实现集成测试
1.10将产品部署到集群

第2章日志流处理
2.1简介
2.2创建日志代理
2.3创建日志Spout
2.4基于规则的日志流分析
2.5索引与持久化日志数据
2.6统计与持久化日志统计信息
2.7为日志流集群创建集成测试
2.8创建日志分析面板

第3章使用Trident计算单词重要度
3.1简介
3.2使用Twitter过滤器创建URL流
3.3从文件中获取整洁的词流
3.4计算每个单词的相对重要度

第4章分布式远程过程调用
4.1简介
4.2通过DPRC实现所需处理流程
4.3对TridentTopology进行集成测试
4.4实现滚动窗口Topology
4.5在集成测试中模拟时间

第5章在不同语言中实现Topology
5.1简介
5.2在Qt中实现多语言协议
5.3在Qt中实现SplitSentenceBolt
5.4在Ruby中实现计数Bolt
5.5在Clojure中实现单词计数Topology

第6章Storm与Hadoop集成
6.1简介
6.2在Hadoop中实现TF-IDF算法
6.3持久化来自Storm的文件
6.4集成批处理与实时视图

第7章实时机器学习
7.1简介
7.2实现事务性Topology
7.3在R中创建随机森林分类模型
7.4基于随机森林的事务流业务分类
7.5在R中创建关联规则模型
7.6创建推荐引擎
7.7实时在线机器学习

第8章持续交付
8.1简介
8.2搭建CI服务器
8.3搭建系统环境
8.4定义交付流水线
8.5实现自动化验收测试

第9章在AWS上部署Storm
9.1简介
9.2使用Pallet在AWS上部署Storm
9.3搭建虚拟私有云
9.4使用Vagrant在虚拟私有云上部署Storm