Hadoop

Hadoop是一个允许跨集群的分布式处理大型数据集的开源软件。它的目的是扩大从单一服务器到成千上万的机器,每一个地方计算和存储，而不是依赖硬件交付高可用性。Hadoop本身的目的是为服务集群的计算机，提供在应用程序层检测和处理失败。Hadoop是一个能够让用户轻松架构和使用的分布式计算平台。用户可以轻松地在Hadoop上开发和运行处理海量数据的应用程序。

核心功能

• 可以创建、删除、移动或重命名文件，等等。
• 它负责管理文件系统名称空间和控制外部客户机的访问。
• 对于较常见的3个复制块，个复制块存储在同一机架的不同节点上，较后一个复制块存储在不同机架的某个节点上。
• 它的目的是扩大从单一服务器到成千上万的机器,每一个地方计算和存储，而不是依赖硬件交付高可用性。
• 但是HDFS的架构是基于一组特定的节点构建的，这是由它自身的特点决定的。
• 高扩展性 ——Hadoop是在可用的计算机集簇间分配数据并完成计算任务的，这些集簇可以方便地扩展到数以千计的节点中。
• 高效性 ——Hadoop能够在节点之间动态地移动数据，并保证各个节点的动态平衡，因此处理速度非常快。
• Hadoop本身的目的是为服务集群的计算机，提供在应用程序层检测和处理失败。

适用场景

适用于企业应用与系统集成中的工业数据采集软件相关能力场景，例如在对应的业务系统中以组件或 SDK 形式直接集成调用。

技术规格与支持平台

• 授权/交付形态：商业