這篇文章給大家分享的是有關(guān)hadoop如何實(shí)現(xiàn)偽分布安裝的內(nèi)容。小編覺(jué)得挺實(shí)用的,因此分享給大家做個(gè)參考,一起跟隨小編過(guò)來(lái)看看吧。
為橋東等地區(qū)用戶提供了全套網(wǎng)頁(yè)設(shè)計(jì)制作服務(wù),及橋東網(wǎng)站建設(shè)行業(yè)解決方案。主營(yíng)業(yè)務(wù)為網(wǎng)站建設(shè)、成都網(wǎng)站設(shè)計(jì)、橋東網(wǎng)站設(shè)計(jì),以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務(wù),秉承以專業(yè)、用心的態(tài)度為用戶提供真誠(chéng)的服務(wù)。我們深信只要達(dá)到每一位用戶的要求,就會(huì)得到認(rèn)可,從而選擇與我們長(zhǎng)期合作。這樣,我們也可以走得更遠(yuǎn)!
1.hadoop的偽分布安裝
1.1 設(shè)置ip地址
執(zhí)行命令 service network restart
驗(yàn)證: ifconfig
1.2 關(guān)閉防火墻
執(zhí)行命令 service iptables stop
驗(yàn)證: service iptables status
1.3 關(guān)閉防火墻的自動(dòng)運(yùn)行
執(zhí)行命令 chkconfig iptables off
驗(yàn)證: chkconfig --list | grep iptables
1.4 設(shè)置主機(jī)名
執(zhí)行命令
(1)hostname hadoop
(2)vi /etc/sysconfig/network
1.5 ip與hostname綁定
執(zhí)行命令 vi /etc/hosts
驗(yàn)證: ping hadoop
1.6 設(shè)置ssh免密碼登陸
執(zhí)行命令
(1)ssh-keygen -t rsa
(2)cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
驗(yàn)證: ssh hadoop
1.7 安裝jdk
執(zhí)行命令
(1)cd /usr/local
(2)chmod u+x jdk-6u24-linux-i586.bin
(3)./jdk-6u24-linux-i586.bin
(4)mv jdk-1.6.0_24 jdk
(5)vi /etc/profile 增加內(nèi)容如下:
export JAVA_HOME=/usr/local/jdk
export PATH=.:$JAVA_HOME/bin:$PATH
(6)source /etc/profile
驗(yàn)證: java -version
1.8 安裝hadoop
執(zhí)行命令
(1)tar -zxvf hadoop-1.1.2.tar.gz
(2)mv hadoop-1.1.2 hadoop
(3)vi /etc/profile 增加內(nèi)容如下:
export JAVA_HOME=/usr/local/jdk
export HADOOP_HOME=/usr/local/hadoop
export PATH=.:$HADOOP_HOME/bin:$JAVA_HOME/bin:$PATH
(4)source /etc/profile
(5)修改conf目錄下的配置文件hadoop-env.sh、core-site.xml、hdfs-site.xml、mapred-site.xml
1.hadoop-env.sh export JAVA_HOME=/usr/local/jdk/
2.core-site.xml
fs.default.name hdfs://hadoop:9000 hadoop.tmp.dir /usr/local/hadoop/tmp
3.hdfs-site.xml
dfs.replication 1 dfs.permissions false
4.mapred-site.xml
mapred.job.tracker hadoop:9001
(6)hadoop namenode -format
(7)start-all.sh
驗(yàn)證:
(1)執(zhí)行命令jps 如果看到5個(gè)新的java進(jìn)程,分別是NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker
(2)在瀏覽器查看,http://hadoop:50070 http://hadoop:50030
1.9 啟動(dòng)時(shí)沒(méi)有NameNode的可能原因:
(1)沒(méi)有格式化
(2)環(huán)境變量設(shè)置錯(cuò)誤
(3)ip與hostname綁定失敗
感謝各位的閱讀!關(guān)于“hadoop如何實(shí)現(xiàn)偽分布安裝”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,讓大家可以學(xué)到更多知識(shí),如果覺(jué)得文章不錯(cuò),可以把它分享出去讓更多的人看到吧!