Hadoop安装部署文档

1、1.系统版本版本机器masterLinuxhadooopl2.6.32-431.el6.x86_64#1SMPSunNov1022:19:54EST2013x86_64x86_64x86_64GNU/Linux机器slaveLinuxhadooop12.6.32-431.el6.x86_64#1SMPSunNov1022:19:54EST2013x86_64x86_64x86_64GNU/LinuxHadopphadoop-2.5.22.环境规划IpUser/pwdHostnme45Hadoop/123123Hmaster45Hadoop/123123Hslave下面将在Hmaster所执行的

2、命令使用黑色框,Hslave执行的命令使用灰色框.分别使用root用户，设置两台机器的主机名在Hmaster保存设置，并检查：然后，设置主机名和对应关系:在Hslave保存设置，并检查：然后，设置主机名和对应关系:.分别创建用户Hmaster、Hslave在Hmaster使用root用户创建Hadoop组，Hadoop用户在Hslave使用root用户创建Hadoop组，Hadoop用户.设置两台机器ssh无密码登录一般系统是默认安装了ssh命令的，如果没有,自行安装。在Hmaster，切换到Hadoop用户第一步：产生密钥第二步：导入authorized_keys第三步：ssh无密码连接测试

3、第一次登录需要密码，退出后，重新登录不需要如果出现提示Theauthenticityofhosthmaster(192.15S.124,145)can:beestablished.FSAkeyfingerprintis49:3c:fe：0b:a6:23:7b:64:36:2f:93:7b:Qa:e5:69:de.Meyousu白youtocontinueconnectingfyes/nn)?|同样，在Hslave,切换到Hadoop用户产生密钥导入authorizedkeysssh无密码连接测试第四步：设置Hmaster与Hslave机器相互无密访问进入Hmaster机器Hadoop用户的.s

4、sh目录（Hadoop用户）输入Hslave机器Hadoop的密码（Hadoop用户）进入Hslave机器Hadoop的.ssh目录（Hadoop用户）输入Hmaster机器Hadoop的密码（Hadoop用户）进入Hmaster机器Hadoop用户的.ssh目录（Hadoop用户）第五步：互相测试无密登录在Hmaster机器（Hadoop用户）成功。在Hslave机器（Hadoop用户）成功。.安装jdk上传jdk到Hmaster及Hslave机器，并执行以下命令（Hadoop用户）复制jdk解压路径，设置Hadoop用户环境变量.安装hadoop-2.5.2.解压在Hmaser机器，解压h

5、ado叩-2.5.2.tar.gz，并创建以下文件夹（Hado叩用户）.修改配置文件进入/home/Hadoop/hadoop-2.5.2/etc/hadoop目录（Hadoop用户）2.12.1.修改core-site.xml修改hdfs-site.xmlnamapred-site.xml2.52.5.修改slaves2.4.修改yarn-site.xml8088为访问hadoop端口修改hadoop-env.sh修改yarn-env.sh3.将hadoop-2.5.2文件夹传输到Hslave.格式化文件系统在机器Hmaster及Hslave注意：这里的格式化文件系统并不是硬盘格式化，只是针

6、对主服务器hdfs-site.xft.dir和dfs.datanode.data.dir目录做相应的清理工作。.启动hdfs:在Hmaster如果提示util.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform则上传hadoop-native-64-2.5.2所以文件覆盖至/home/Hadoop/hadoop-2.5.2/lib/native/下载地址( HYPERLINK /sequenceiq/sequenceiq-bin/ /sequenceiq/sequenceiq-bin/).启动yarn:在Hmaster.查看进程信息在HmasterHadoopiaHiiaEtersbin$=jps8661ResourceManager8916Jps8418NameNode在HslaveHadoopiaHslavehadoop*jps7877Jps7652DataMode7765NodeM