hadoop2.2.0

【推荐】2019 Java 开发者跳槽指南.pdf(吐血整理) >>> 在安装好hadoop2.2.0集群后，依次执行start-dfs.sh和start-yarn.sh脚本启动hadoop相关的服务。各个服务均能正常启动。但是过了一段时间后会发现nodemanager会自动失败退出。 检查日志信息发现一直报本机与一个0.0.0.0的连接失败，然后继续与进行通信尝试一段时间后nodemanager失败。具体信息如下： org.apache.hadoop.yarn.exceptions.YarnRuntimeException: java.net.ConnectException: Call From node2/222.18.159.123 to 0.0.0.0:8031 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused Caused by: java.net.ConnectException: Call From node2/222.18.159.123 to 0.0.0.0:8031 failed on connection

Hadoop 编译 在apache官网提供的hadoop2.x的编译后的hadoop项目，但是官方提供的编译后的项目是在32bit电脑上编译的，那么在64bit的电脑上，hadoop程序的运行还和本地环境有关，所以建议大家去官网下载hadoop2.x的源代码，然后在自己的环境上编译hadoop2.x项目。 一般出现以下错误，需要在本地编译hadoop项目： WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 在源代码的根目录下有一个帮助文档，BUILDING.txt在里面有详细的hadoop编译步骤，其内容如下： Build instructions for Hadoop ---------------------------------------------------------------------------------- Requirements: * Unix System * JDK 1.6+ * Maven 3.0 or later * Findbugs 1.3.9 (if running findbugs) * ProtocolBuffer 2.5.0 *