一、下載hadoop二進(jìn)制包

下載地址：http://mirrors.hust.edu.cn/apache/hadoop/common/

二、環(huán)境準(zhǔn)備

1、安裝JDK(1.8.0_151)

2、安裝openssh-clients

注意： CentOS6.7 默認(rèn)沒有安裝openssh-clients，導(dǎo)致系統(tǒng)沒有ssh命令，而hadoop腳本中會使用ssh命令，如果不裝openssh-clients，啟動服務(wù)器時會報錯

三、安裝hadoop

tar?zxf?hadoop-2.7.5.tar.gz?-C?/usr/local/ mv?/usr/local/hadoop-2.7.5??/usr/local/hadoop cd?/usr/local/hadoop/etc/hadoop

1、修改hadoop-env.sh，配置JAVA_HOME

export?JAVA_HOME=/usr/java/jdk1.8.0_151

2、修改core-site.xml文件，在configuration標(biāo)簽中加入以下配置

<configuration> <property><name>fs.default.name</name><value>hdfs://localhost:9000</value> </property> <property><name>hadoo.tmp.dir</name><value>/usr/local/hadoop/tmp</value> </property> </configuration>

3、修改hdfs-site.xml文件，加入以下配置

<configuration> <property><name>dfs.http.address</name><value>192.168.115.237:50070</value></property><property><name>dfs.replication</name><value>1</value></property><property><name>dfs.namenode.name.dir</name><value>file:/usr/local/hadoop/tmp/dfs/name</value></property><property><name>dfs.datanode.data.dir</name><value>file:/usr/local/hadoop/tmp/dfs/data</value></property> </configuration>

4、修改marped-site.xml文件

cp?mapred-site.xml.template?mapred-site.xml vim?mapred-site.xml

<configuration> <property>??<name>marped.job.tracker</name>??<value>localhost:9001</value>?? </property> </configuration>

5、格式化hadoop的HDFS文件系統(tǒng)，在hadoop文件中輸入

./bin/hadoop?namenode?-format

6、如果第5步?jīng)]有報錯，則執(zhí)行下面的命令，啟動hadoop服務(wù)

sbin/start-all.sh

啟動時，會多次登錄本機(jī)，要求輸入root賬戶的密碼，可以使用公鑰認(rèn)證的方式，進(jìn)行免密碼登錄。這里不介紹任何設(shè)置

如果服務(wù)正常啟動，輸入jps能看到以下進(jìn)程

訪問http://ip:50070?可以查看hadoop集群狀態(tài)

參考：http://blog.csdn.net/qq_32554863/article/details/79409433

轉(zhuǎn)載于:https://blog.51cto.com/zengestudy/2087276

總結(jié)

以上是生活随笔為你收集整理的CentOS6.7 安装hadoop2.7.5的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。