Hadoop 之 HDFS 分布式集群配置及使用（三）

Hadoop 之 分布式集群

• 一. 集群实例的建立

  • 二. 系统设置

    • • 1. 搭建三个基于 Anolis 的虚拟机环境
      • • 1. 更改主机名称
        • 2. 实现无密码登录，设置之前
    • 2. 设置命名节点
      • • 1. 在 nd1 和 nd2 上安装 Hadoop 软件
        • 2. 完成相关配置
    • 3. 查询集群状态信息

  • 三. 功能验证

    • • 1. 使用 Shell 命令进行操作
      • 2. Java 编程与 MapReduce 测试

一.集群实例创建

    以三个 Hadoop 实例创建集群，可以用虚拟机，或者Docker容器来实现。本教程直接使用虚拟机演示
    集群架构可参考下图：客户端、命名节点和数据节点
    
    
      
      
    

    查看 Hadoop 配置文件目录：ll $HADOOP_HOME/etc/hadoop