Advertisement

在调试环境中构建Hadoop源码

阅读量:

此前曾尝试在ubuntu系统中搭建过相关环境,此次希望在windows平台上构建一个源码阅读的开发环境,于是开始着手准备。通过查阅网络上的相关资料,并结合自身实际情况,最终完成了一套可行的方案,具体步骤如下:

一.获取hadoop的安装包并进行解压操作,随后下载winutils.exe和hadoop.dll这两个文件,并将其放置于hadoop安装目录下的bin文件夹内。

下载链接如下:

链接:https://pan.baidu.com/s/1TnwIbXdVzGWD2qa2saCVjQ
提取码:q5ve

二.在系统环境变量中设置hadoop_home参数,并将%hadoop_home%\bin路径添加至path变量中。

三.在idea开发工具中引入需要进行调试的代码模块,本次调试的是word count程序。

复制代码
 import java.io.IOException;

    
 import java.util.StringTokenizer;
    
  
    
 import org.apache.hadoop.conf.Configuration;
    
 import org.apache.hadoop.fs.Path;
    
 import org.apache.hadoop.io.IntWritable;
    
 import

全部评论 (0)

还没有任何评论哟~