Storm分布式实时计算模式 [Storm Blueprints Patterns for Distributed Real-Time Computation] 下载 mobi epub pdf 电子书 2024

☆☆☆☆☆
简体网页||繁体网页



点击这里下载

类似图书 点击查看全场最低价

---

产品特色

内容简介

　　《Storm分布式实时计算模式》由Apache Storm 项目核心贡献者吉奥兹、奥尼尔亲笔撰 写，融合了作者丰富的Storm实战经验，通过大量 示例，全面而系统地讲解使用Storm进行分布式实 时计算的核心概念及应用，并针对不同的应用场 景，给出多种基于Storm的设计模式，为读者快速 掌握Storms分布式实时计算提供系统实践指南。
　　《Storm分布式实时计算模式》分为10章：第l章介绍使用storm建立一 个分布式流式计算应用所涉及的核心概念，包括 storm的数据结构、开发环境的搭建，以及Storm 程序的开发和调试技术等；第2章详细讲解storm 集群环境的安装和搭建，以及如何将topology部署 到分布式环境中；第3章通过传感器数据实例详细 介绍Trident topology；第4章讲解如何使用Storm 和Tridentj挂行实时趋势分析；第5章介绍如何使用 Storm进行图形分析，将数据持久化存储在图形数 据库中，通过查询数据来发现其中潜在的联系；第 6章讲解如何在Storm上使用递归实现一个典型的人 工智能算法；第7章演示集成Storm和非事务型系统 的复杂性，通过集成Storm和开源探索性分析架构 Druid实现一个可配置的实时系统来分析金融事件。
　　第8章探讨Lambda体系结构的实现方法，讲解如何 将批处理机制和实时处理引擎结合起来构建一个可 纠错的分析系统；第9章讲解如何将Pig脚本转化为 topology，并且使用Storm-YARN部署topology，从 而将批处理系统转化为实时系统；第10章介绍如 何在云服务提供商提供的主机环境下部署和运行 Storm。

内页插图

目录

前言
作者简介
第1章 分布式单词计数
1.1 Storm topology的组成部分——stream、spout和bolt
1.1.1 Storm
1.1.2 spout
1.1.3 bolt
1.2 单词计数topology的数据流
1.2.1 语句生成bolt
1.2.2 语句分割bolt
1.2.3 单词计割bolt
1.2.4 上报bolt
1.3 实现单词计数top
1.3.1 配置开发环境
1.3.2 实现Sentence
1.3.3 实现语句分割bolt
1.3.4 实现单词计割bolt
1.3.5 实现上报bolt
1.3.6 实现单词计数topo
1.4 Storm的并发机制
1.4.1 WordCountTopology的并发机制
1.4.2 给topology增加woker
1.4.3 配置executor和task
1.5 理解数据流分组
1.6 有保障机制的数据处理
1.6.1 spout的可靠性
1.6.2 bolt的可靠性
1.6.3 可靠的单词计数
总结

第2章 配置Storm集群
2.1 Storm集群的框架
2.1.1 理解nimbus守护进程
2.1.2 supervisor守护进程的工作方式
2.1.3 Apache ZooKeeper简介
……
第3章 Trident和传感器数据
第4章 实时趋势分析
第5章 实时图形分析
第6章 人工智能
第7章 整合Druid进行金融分析
第8章 自然语言处理
第9章 在Hadoop上部署Storm进行广告分析
第10章 云环境下的S

前言/序言

　　目前对信息高时效性、可操作性的需求不断增长，这要求软件系统在更少的时间内能处理更多的数据。随着可连接设备数量不断增加，以及在众多行业领域广泛应用，这种信息需求已无处不在。传统企业的运营系统被迫处理原先只有互联网企业才会遇到的大规模数据。这种重大转变正不断瓦解传统架构和解决方案，传统上会将在线事务处理和离线分析分割开来。与此同时，人们正在重新勾勒从数据中提取信息的意义和价值。软件框架和基础设施也在不断进化，以适应这种新场景。　　具体地说，数据的生成可以看作一连串发生的离散事件，这些事件流会伴随着不同的数据流、操作和分析，都会由一个通用的软件框架和基础设施来处理。　　Storm正是最流行的实时流计算框架之一，它提供了可容错分布式计算所要求的基本原语和保障机制，可以满足大容量关键业务应用的需求。它不但是一套技术的整合，也是一种数据流和控制的机制。很多大公司都将Storm作为大数据处理平台的核心部分。　　尝试使用本书中介绍的设计模式，你将学到开发、部署、运营数据处理的流程，它具有每天或者每小时处理上亿次事务的能力。　　本书介绍了多种分布式计算相关的主题，包括设计和集成的模式，还介绍了这些技术常见的适用领域和具体应用。本书通过实际示例，从最简单的topology出发，首先向用户介绍了Storm基础，然后通过更复杂的示例，逐步引入Storm的高级概念、更细致的部署方案以及运营中需要关注的事项。　　主要内容　　第1章介绍了使用Storm进行分布式流式计算的核心概念。分布式单词计数这个例子中展示的数据结构、技术和设计模式都是后续进行更复杂计算的基础。在该章中，我们会对Storm计算架构有一个基本了解。还将学会搭建Storm开发环境，了解开发和调试Storm应用的技术。　　第2章进一步介绍Storm技术架构和安装部署Storm集群的过程。在该章中，我们会通过配置工具Puppet来自动化安装和部署一个多节点Storm集群。　　第3章主要介绍Trident topology。Trident在Storm基础之上提供了高级抽象，抽象了事务处理和状态管理的细节。该章使用Trident框架处理、聚合、过滤来自传感器的数据，以检测传染病是否爆发。　　第4章介绍使用Storm和Trident进行实时趋势分析。实时趋势分析引入了在数据流中进行识别的模式。在该章中，你将会整合Apache Kafka队列并且通过实现一个滑动窗口来计算移动平均数。　　第5章介绍了使用Storm进行基于图的数据分析，首先将数据持久化到图形数据库，再通过查询数据来发现关系。图形数据库将数据按照顶点、边、属性的图形结构进行存储，聚焦于实体间的关系。在该章中，我们将Strom和一种流行的图形数据库Titan进行整合，使用Twitter作为数据源。　　第6章介绍在Storm上使用递归实现一个典型的人工智能算法。该章展现了Strom的局限性，并检视设计模式来适应这些局限。通过分布式远程调用（Distributed Remote Procedure Call， DRPC），你会实现一个提供同步查询服务的Storm topology，用来决定井字棋游戏下一步怎样走最好。　　第7章演示整合Storm和非事务型系统的复杂性。为了支持这种整合，介绍一种通过ZooKeeper进行分布式状态管理的设计模式。该章通过整合Strom和开源探索性分析架构Druid，实现一个可配置的实时系统来分析金融事件。　　第8章介绍Lambda系统架构的概念，结合实时系统和批处理来构建一个可纠错的分析系统。在第7章的基础上，你将会融入Hadoop的基础设施并且检视如何使用一个MapReduce job对Druid中可能出现的主机故障事件进行纠错。　　第9章演示将一个Hadoop上运行的Pig语言编写的批处理job转化为一个实时的Storm topology。你可以利用Storm-YARN来实现这个功能，这个工具可以使用户使用YARN来部署和运行Storm集群。在Hadoop上运行Storm系统，企业可以在同一套基础设施上同时运行与利用实时和批处理系统。　　第10章提供了在云环境下运行和部署Storm系统的最佳实践。详细地说，你可利用一套为云计算服务的库Apache Whirr，在Amazon Web Services（AWS）Elastic Compute Cloud（EC2）上部署和配置Storm及其相关的支撑组件。此外，你还可以利用Vagrant工具在虚拟机环境下建立开发和测试的集群环境。　　……


Storm分布式实时计算模式 [Storm Blueprints Patterns for Distributed Real-Time Computation] 下载 mobi epub pdf txt 电子书 格式

评分☆☆☆☆☆

不错不错。值得学习！

评分☆☆☆☆☆

此用户未填写评价内容

评分☆☆☆☆☆

东西收到啦，还行还行，给个好评吧。。。。。。

评分☆☆☆☆☆

不错，质量很好

评分☆☆☆☆☆

原理性东西太少，很空洞

评分☆☆☆☆☆

想了解一下storm，希望有收获

评分☆☆☆☆☆

还没看 应该不错

评分☆☆☆☆☆

Storm的基础知识

评分☆☆☆☆☆

还不错的书 学习大数据可以看看

类似图书 点击查看全场最低价