Eclipse开发MR环境搭建

不想你离开。 提交于 2020-01-11 04:48:13

1.jdk环境配置 
   jdk安装后好后配置相关JAVA_HOME环境变量,并将bin目录配置到path 

2. 下载hadoop-2.7.1.tar.gz

解压hadoop-2.7.1.tar.gz到 D:\XXXX\workspace\hadoop-2.7.1

下载地址:http://archive.apache.org/dist/hadoop/common/hadoop-2.7.1/  

3. 下载hadoop2x-eclipse-plugin 
  百度下载hadoop2x-eclipse-plugin开发插件,如果下载的不好用,可以自己编译一个自己目前在用hadoop版本的插件。

自行编译插件可以参考地址:

http://www.cnblogs.com/beststrive/p/8275932.html

4.下载hadoop-common-2.7.1.bin.zip

解压hadoop-common-2.7.1.bin.zip并将hadoop.dll和winutils.exe文件分别放到D:\XXXX\workspace\hadoop-2.7.1\bin 

和C:\Windows\System32目录下

5.拷贝插件到eclipse插件目录下

hadoop-eclipse-plugin-2.6.0.jar拷贝至eclipse的plugins目录下,然后重启eclipse 

6.设置Hadoop目录

打开菜单Window--Preference--Hadoop Map/Reduce进行配置hadoop目录,如下图所示:

7.配置hadoop视图

显示Hadoop连接配置窗口:Window--Show View--Other-MapReduce Tools,如下图所示: 

8.配置连接Hadoop

查看是否连接成功,能看到如下信息,这种表示连接失败(因为刚把集群关掉),如果连接成功,会显示目录信息。 

9.配置hadoop环境变量

添加环境变量HADOOP_HOME=D:\XXX\workspace\hadoop-2.7.1
追加环境变量path内容:%HADOOP_HOME%/bin

 

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!