真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

hadoop安裝與配置

1.檢查JDK版本

創(chuàng)新互聯(lián)公司專注于額濟納企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站開發(fā),商城網(wǎng)站定制開發(fā)。額濟納網(wǎng)站建設(shè)公司,為額濟納等地區(qū)提供建站服務(wù)。全流程定制設(shè)計,專業(yè)設(shè)計,全程項目跟蹤,創(chuàng)新互聯(lián)公司專業(yè)和態(tài)度為您提供的服務(wù)

2.時間同步

3.設(shè)置免密碼登錄

#生成密鑰(node1,node2,node3,node4)
ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
cd ~/.ssh/
ls
#說明
##id_ds 私鑰
##is_dsa.pub 公鑰
#將公鑰文件追加到本地的認證文件中(node1,node2,node3,node4)
cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys
ssh 192.168.2.136
#Last login: Sun Jul  9 14:14:35 2017 from 192.168.2.136,表示登錄成功,并且是不需要輸入密碼的
exit
#logout 退出
將node1中的公鑰復(fù)制到node2,node3,node4中
 scp ./id_dsa.pub root@192.168.2.137:/opt/
 scp ./id_dsa.pub root@192.168.2.138:/opt/
 scp ./id_dsa.pub root@192.168.2.139:/opt/
將/opt/id_dsa.pub添加到node2,node3,node4的認證文件中
 cat /opt/id_dsa.pub >> ~/.ssh/authorized_keys

4.設(shè)置node1為NameNode,node2,node3,node4為datanode

將hadoop壓縮包上傳到node1的/root目錄
tar -zxvf hadoop-2.5.1_x64.tar.gz

mv hadoop-2.5.1 /home/
cd /home/
ls
cd hadoop-2.5.1
ls
cd etc/hadoop

#配置1,修改hadoopenv.sh
vi hadoop-env.sh
#將jdk的安裝目錄添加到這個文件
export JAVA_HOME=/usr/java/jdk1.7.0_79

#配置2,修改core-site.xml
    vi core-site.xml
		
		    
		        fs.defaultFS
		        hdfs://192.168.2.136:9000
		    
		    
		        hadoop.tmp.dir
		        /opt/hadoop-2.5
		    
		

	#配置3,修改hdfs-site.xml
		vi hdfs-site.xml
		
		    
		        dfs.namenode.secondary.http-address
		        192.168.2.137:50090
		    
		    
		        dfs.namenode.secondary.https-address
		        192.168.2.137:50091
		    
		

	#配置4,修改slaves
		vi slaves
		192.168.2.137
		192.168.2.138
		192.168.2.139

	#配置5,修改masters
		vi masters
		192.168.2.137

5.復(fù)制文件

scp -r hadoop-2.5.1/ root@192.168.2.137:/home/
scp -r hadoop-2.5.1/ root@192.168.2.138:/home/
scp -r hadoop-2.5.1/ root@192.168.2.139:/home/

6.配置hadoop環(huán)境變量 

vi ~/.bash_profile
export HADOOP_HOME=/home/hadoop-2.5.1
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

7.復(fù)制文件

scp ~/.bash_profile root@192.168.2.137:/root/
scp ~/.bash_profile root@192.168.2.138:/root/
scp ~/.bash_profile root@192.168.2.139:/root/

8.重新加載~/.bash_profile

source ~/.bash_profile

9.格式化hdf文件系統(tǒng),只能在NameNode(node1)上使用

hdfs namenode -format

10.查看生成文件fsp_w_picpath

cd /opt/hadoop-2.5/dfs/name/current
ls -l

11.啟動節(jié)點

start-dfs.sh
#start-all.sh

12.關(guān)閉防火墻

service iptables stop

13.監(jiān)控頁面進行訪問

http://192.168.2.136:50070/dfshealth.html#tab-overview

14.說明:保證/etc/hosts下的配置正確


分享標(biāo)題:hadoop安裝與配置
本文URL:http://weahome.cn/article/jgpgih.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部