hadoop入门五步

第一步 部署Hadoop集群

• 1、配置JDK环境，目前采用的是JDK8版本，而JDK9、10、11由于会移除部分类库，可能导致Hadoop集群部署失败，具体安装过程在此不再详述
• 2、关于Hadoop的安装流程
• 需特别注意：若NameNode与ResourceManger运行在不同的服务器上，则不能在NameNode节点启动Yarn服务，而应选择ResourceManger所在主机进行Yarn的启动操作。 第二步 掌握相关概念及Hadoop的架构模型

第三步 进行实际操作 *1、 直接在服务器端执行命令，利用Hadoop工具完成一些基本操作

提供一个将文件上传至HDFS以及从HDFS下载到本地系统的示例

• 2、执行一个hadoop的基础示例，以熟悉map-reduce的工作原理 首先提供相关命令，在执行时需确保使用hadoop用户，即配置hadoop时所设定的用户

hadoop jar /opt/hadoop3/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.1.jar wordcount /user/input/word.txt /user/output

上述命令中，通过hadoop jar方式运行