YARN

Apache Hadoop YARN（Yet Another Resource Negotiator）是 Hadoop 为完善大数据处理推出的新型集群资源管理框架。相较经典的 MapReduce，YARN 提供更优的资源管理器，让 Storm 等流处理框架也能运行在 Hadoop 集群之上，作为一类集群操作系统负责资源管理。该产品面向 Hadoop 平台运维与开发者。

核心功能

• 提供比经典 MapReduce 更优的资源管理能力
• 支持批处理 MapReduce、流式 Storm 与实时服务共存
• 集群资源共享，多框架利用同一 Hadoop 集群与数据
• 解决经典 MapReduce 的 JobTracker 可伸缩性瓶颈
• 替代固定 map/reduce slot，提升计算资源利用率
• 提供新应用管理器实现，扩展应用类型
• 作为云操作系统统筹集群资源

适用场景

适用于 Hadoop 集群的资源统一调度，支撑批处理、流处理与实时服务混合负载。适合希望在同一集群运行多种计算框架的团队。

技术规格与支持平台

• 作为 Apache Hadoop 的资源管理子项目，开源
• 支持与 Hadoop 数据存储模型共享