构建Hadoop-3.2.3集群环境
发布时间
阅读量:
阅读量
Hadoop-3.2.3集群搭建
一、准备工作
搭建三台仅安装基础系统的Linux服务器环境:(单节点伪分布式集群可通过一台虚拟机实现,HDFS配置中副本数量设定为1,且仅包含一个工作节点。)
| ipaddress | hostname |
|---|---|
| 192.168.116.10 | hadoop1 |
| 192.168.116.20 | hadoop2 |
| 192.168.116.30 | hadoop3 |
所有计算节点应安装Centos7.9或Ubuntu2004LTS的最小化版本。(单台主机内存需不低于4G)
1、确保网络连通性,为每台设备配置固定的IP地址及DNS等相关网络参数
2、设置主机名hostname,并完成对应的主机名解析配置
3、调整时区设置并配置时间服务器,以保障集群内部时间保持同步
4、进行系统层面的优化,停用非必要的服务并对文件系统实施基础优化操作
5、创建hadoop用户(若使用root用户则可省略此步骤,在Ubuntu系统中需注意adduser与useradd命令的区别,建议采用adduser命令进行操作)
# adduser hadoop
# su - hadoop
6、设置用户无密码登录
7、获取Oracle
全部评论 (0)
还没有任何评论哟~
