Storm

Apache Storm 是一个免费、开源的分布式实时计算系统，让处理无限数据流的工作变得简单可靠，可完成 Hadoop 在批处理上所需的实时处理。它非常简单，可用于任何编程语言。

核心功能

• 使用 ZeroMQ 传送消息，消除中间排队，消息直接流动。
• 有保障的消息处理，每个元组都经拓扑结构全面处理。
• 任务级故障检测，任务故障时消息自动重新分配。
• 实现数据流模型，数据持续流经转换实体网络。
• 喷嘴（Spout）将数据从外部来源流入，螺栓（Bolt）实现转换。
• 比 Hadoop 更智能的处理管理，由监管员确保资源使用。
• 支持多语言，可用于任何编程语言构建拓扑。
• 可实现 MapReduce 等功能的实时版本，如词频统计。

适用场景

适用于需要低延迟处理无限数据流的实时计算场景。对实时风控、流式 ETL 与持续聚合等需求较为合适。

技术规格与支持平台

• Apache Storm
• 多语言
• 实时计算
• 授权形态：商业软件（需授权使用）