关键词：
Storm主要的应用场景就是流式数据处理，例如实时推荐系统，实时监控系统等。
storm中的相关概念
在storm中，分布式的计算结构指的是一个topology(拓扑)，一个topology由流式数据，spouts(流生产者)，以及bolts(具体操作者)组成。Storm的topologies和其他的批处理任务系统很类似，例如Hadoop，这类批处理任务都定义了清晰的开始和结束点，然而storm的topologies是永不停息的在运行的，除非杀死或者反部署这个topologies。
Topology：storm都是以topology为单位运行的，topology就相当于网络中的拓扑图一样。
Tuple:tuple是storm结构中的核心数据，一个tuple可以简单的理解为一系列的的键值对(key-value pairs)，是storm结构中最小的数据单元。如果你对CEP(complex event processing)熟悉的话，你可以认为tuples就是事件集。
Streams：streams是由无限的tuples组成。
Spouts：spouts代表一个storm topology的数据入口，spouts扮演者适配器的作用，连接着一个个的数据源，并将数据转换成tuples，同时以数据流的方式发送tuples。数据源的来源有如下几种：1、网络或者是移动应用；2、推特或者是微博等社交网络；3、传感器输出；4、应用日志事件。典型的spouts不会实现任何的特定业务逻辑，所以spouts可以经常被重复交叉的被多个topologies使用
Bolts：bolts可以想象成计算的操作者或者是一个函数，他们可以接收任意的数据流或者被处理过的数据，而且还可以随意的发送一个或多个tuples，bolts可以订阅spouts或者是其他bolts发送过来的数据流，bolts可以创造一个复杂的数据传输网络。bolts的典型作用如下：1、过滤tuples；2、连接或者是聚合；3、计算
一个简单的topology如下图所示：
（转发）storm入门原理介绍
1.hadoop有master与slave，Storm与之对应的节点是什么？2.Storm控制节点上面运行一个后台程序被称之为什么？3.Supervisor的作用是什么？4.Topology与Worker之间的关系是什么？5.Nimbus和Supervisor之间的所有协调工作有master来完成，还是Zookeeper... 查看详情
storm介绍及安装部署
本节内容：ApacheStorm是什么ApacheStorm核心概念Storm原理架构Storm集群安装部署启动stormui、Nimbus和Supervisor 一、ApacheStorm是什么ApacheStorm是自由开源的分布式实时计算系统，擅长处理海量数据，适用于数据实时处理而非批处理。批... 查看详情
storm简单介绍
Nimbus：负责资源分配和任务调度,把任务相关的元信息写入Zookeeper对应文件夹。Supervisor：负责接受nimbus分配的任务，启动和停止属于自己管理的worker进程。Worker：执行详细处理组件逻辑的进程。Executor：执行spout/bolt的线程Task：wor... 查看详情
storm介绍及核心组件和编程模型
离线计算离线计算：批量获取数据、批量传输数据、周期性批量计算数据、数据展示代表技术：Sqoop批量导入数据、HDFS批量存储数据、MapReduce批量计算数据、Hive批量计算数据、azkaban/oozie任务调度 流式计算流式计算：数据实... 查看详情
storm入门
前面介绍了流计算，在流计算领域，一个热门的计算框架就是-Storm。还是先介绍概念。。。一、Storm是什么在流处理过程中，我们除了考虑最重要的数据处理的逻辑，还需要维护消息队列和消费者，考虑消息怎么流、怎么序列化... 查看详情
storm简介——实时流式计算介绍
概念实时流式计算： 大数据环境下，流式数据将作为一种新型的数据类型，这种数据具有连续性、无限性和瞬时性。是实时数据处理所面向的数据类型，对这种流式数据的实时计算就是实时流式计算。 ... 查看详情
storm中什么是-acker，acker工作流程介绍
概述我们知道storm一个很重要的特性是它能够保证你发出的每条消息都会被完整处理，完整处理的意思是指：一个tuple被完全处理的意思是：这个tuple以及由这个tuple所导致的所有的tuple都被成功处理。而一个tuple会被认为处理失败... 查看详情
storm性能优化
...性Storm并行度Storm消息机制StormUI解析性能优化场景假设在介绍Storm的性能调优方法之前，假设一个场景：项目组部署了3台机器，计划运行且仅运行Storm(1.0.1)+Kafka(0.9.0.1)+Redis(3.2.1)的小规模实验集群，集群的配置情况如下表：|主机... 查看详情
storm
官网：http://www.cnblogs.com/langtianya/p/5199529.html总体介绍：http://www.cnblogs.com/langtianya/p/5199529.html逻辑图：http://www.cnblogs.com/xymqx/p/4374909.html 查看详情
storm集群安装配置
本文详细介绍了Storm集群的安装配置方法。如果需要在AWS上安装Storm，你应该看一下 storm-deploy 项目。storm-deploy 可以自动完成E2上Storm集群的准备、配置、安装的全部过程，同时还设置好了Ganglia，方便监控CPU、磁盘以及... 查看详情
storm学习笔记
1、storm介绍 storm是一种用于事件流处理的分布式计算框架，它是有BackType公司开发的一个项目，于2014年9月加入了Apahche孵化器计划并成为其旗下的顶级项目之一。Storm可以方便地在一个计算机集群中编写与扩... 查看详情
storm系列storm集群部署和配置(代码片段)
Storm系列（三）Storm集群部署和配置本章中主要介绍了Storm的部署过程以及相关的配置信息。通过本章内容，帮助读者从零开始搭建一个Storm集群。相关的过程和主要的配置选项是Storm的运维人员需要重点关注的，对部署和配置选... 查看详情
storm学习：storm简介
...用任意编程语言来开发应用。本教程是一本对storm的基础介绍手册，希望帮助所有愿意使用实时流处理框架的技术同仁。 一、实时流计算 互联网从诞生的第一时间起，对世界的最大的改变就是让信息能够实时交互，... 查看详情
apachestorm集群安装配置(代码片段)
...篇文章：ApacheStorm实时计算系统中对Storm进行了简要的介绍，本篇文章主要介绍Storm的集群部署。安装环境要安装部署Storm，有以下几个步骤：安装Java1.7+安装Zookeeper集群安装ApacheStorm由于本人机器环境已经安装了... 查看详情
1storm知识汇总(代码片段)
...少了60%性能如何提升,提升了哪些方面?自动反压机制反压介绍zoonkeeper是瓶颈.Pacemaker-HeartbeatServer自己处理心 查看详情
storm集群搭建
上一篇随笔中我介绍了Storm中的几个重要概念：Topology,tuple,Spout和Bolt。这几个核心概念是与Storm运算相关的，由于上节课关于单词计数的实例实在单机环境下通过核心包（storm-core-0.10.2.jar）模拟集群环境的，所以实际上并没... 查看详情
storm的集群安装与配置
storm集群安装机器：(storm及zookeeper都是这3台机器)192.168.80.20192.168.80.21192.168.80.22须要准备的软件有：zookeeper(zookeeper-3.4.4.tar.gz),storm(storm-0.8.1.zip),jdk1、配置zookeeper这里就不介绍了 查看详情
storm入门
650)this.width=650;"src="https://s4.51cto.com/wyfs02/M00/07/68/wKiom1nJCuaj-oZNAAJiqWhXXkM324.png"style="float:none;"title="Storm第01天-01.介绍[00_20_26][20170925-210956-0].PNG"alt="wKiom1nJCuaj-oZNAAJiqW 查看详情