環(huán)境準(zhǔn)備:4臺(tái)機(jī)器
目前創(chuàng)新互聯(lián)公司已為近1000家的企業(yè)提供了網(wǎng)站建設(shè)、域名、雅安服務(wù)器托管、綿陽(yáng)服務(wù)器托管、企業(yè)網(wǎng)站設(shè)計(jì)、武邑網(wǎng)站維護(hù)等服務(wù),公司將堅(jiān)持客戶導(dǎo)向、應(yīng)用為本的策略,正道將秉承"和諧、參與、激情"的文化,與客戶和合作伙伴齊心協(xié)力一起成長(zhǎng),共同發(fā)展。192.168.217.174 node1 -----namenode
192.168.217.175 node2 -----secondary namenode
192.168.217.176 node3 -----datanode
192.168.217.177 node4 -----datanode
1. 4臺(tái)機(jī)器免密碼登錄
1.1-先在node1機(jī)器上做免密碼
在每天機(jī)器vim /etc/hosts中互相添加對(duì)方的ip和機(jī)器名
192.168.217.174 node1
192.168.217.175 node2
192.168.217.176 node3
192.168.217.177 node4
#ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 1. 注:生成密鑰
#cat ~/.ssh/id_dsa.pub >>~/.ssh/authorized_keys 2.注:密鑰寫入認(rèn)證機(jī)制
1.2-其他3臺(tái)機(jī)器做免密碼
把在node1機(jī)器生成的公鑰拷貝到其他3臺(tái)機(jī)器,最后在放入每天機(jī)器的認(rèn)證機(jī)制
#scp ./id_dsa.pub root@node(2,3,4):/opt/ #在node1上操作
#ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa #3臺(tái)機(jī)器都執(zhí)行這條命令
#cat/opt/id_dsa.pub >> ~/.ssh/authorized_keys #3臺(tái)機(jī)器都執(zhí)行這條命令
拷貝遇到問題:
bash: scp:command not found #yum install openssh-clients 4臺(tái)都裝
2.開始安裝
2.1-安裝JDK:------------4臺(tái)都安裝
#上傳jdk-7u79-linux-x64.rpm到/home目錄
#rpm –ivh jdk-7u79-linux-x64.rpm
#cd /home/hadoop-2.5.1
# vim~/.bash_profile 添加環(huán)境變量
export PATH
export JAVA_HOME=/usr/java/jdk1.7.0_79
exportPATH=$PATH:$JAVA_HOME/bin
exportHADOOP_HOME=/home/hadoop-2.5.1
exportPATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
# source ~/.bash_profile
2.2-安裝hadoop
#上傳hadoop-2.5.1_x64.tar.gz到/home目錄 【在node1操作】
#tar zxvfhadoop-2.5.1_x64.tar.gz
#vim /home/hadoop-2.5.1/etc/hadoop/hadoop-env.sh #namenode主機(jī)名
exportJAVA_HOME=/usr/java/jdk1.7.0_79/ (添加)
#vim /home/hadoop-2.5.1/etc/hadoop/core-site.xml
#vim /home/hadoop-2.5.1/etc/hadoop/hdfs-site.xml
#vim /home/hadoop-2.5.1/etc/hadoop/slaves # 配置datanode主機(jī)名
node2
node3
node4
#vim masters # 創(chuàng)建配置secondary namenode主機(jī)名
node2
#rm -rf hadoop-2.5.1/share/doc/ 刪除這個(gè)目錄方便拷貝給其他機(jī)器
2.3-拷貝給其他機(jī)器
在/home目錄下
#scp -r hadoop-2.5.1 root@node(234):/home/
在/home/hadoop-2.5.1
# scp~/.bash_profile root@node(234):/root/
啟動(dòng)之前先格式化hdfs文件系統(tǒng)
# hdfs namenode-format 只能在指定的namenode(node1)機(jī)器上用
#start-dfs.sh 在任何目錄下都可以啟動(dòng)
瀏覽器訪問:192.168.217.174:50070
(如果不能打開,就關(guān)閉防火墻# serviceiptables stop)
到此,hadoop集群安裝完畢
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。