大数据-Hadoop-搭建-(三)：CDH大数据全家桶统一配置与管理HDFS、YARN等6.3.3及以上版本工具

一、Cloudera Manager产生的背景

1、Apache版本的大数据组件

Apache开源版本的Hadoop最初由Apache开发，其在国内的应用范围非常广泛。

Apache版本的Hadoop集群的优势包括：

• 源代码完全公开，且更新迭代速度较快
• 在大数据组件的部署过程中，能够深入掌握其内部运行机制
• 有助于理解各个组件之间的相互依赖关系

Apache版本的Hadoop集群的劣势有：

• 部署流程极为繁琐，当节点数量超过20个时，手动操作将变得异常繁重
• 各个组件部署完成后各自独立运行，缺乏统一的操作管理平台
• 组件间的依赖关系错综复杂，环环相扣，使整个部署过程充满挑战
• 缺乏统一的监控指标可视化界面，例如无法直观查看HDFS所占用的磁盘空间、IO性能以及整体运行状态等信息
• 系统优化需用户依据具体业务需求自行调整配置，需手动为每个节点进行修改和设置，效率低下。理想情况下应能通过单一配置实现对所有节点的自动分发与更新

2、CDH版本大数据组件

为应对Apache原生版本所存在的诸多不足，CDH版本应运而生，该版本能够通过Cloudera Manager进行统一管理。CDH作为Apache Hadoop及相关项目中最为完善、稳定且经过充分验证的发行版本，已广受用户青睐。Cloude