真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

DKhadoop環(huán)境的安裝配置步驟-創(chuàng)新互聯(lián)

這篇文章主要講解了“DKhadoop環(huán)境的安裝配置步驟”,文中的講解內(nèi)容簡單清晰,易于學(xué)習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學(xué)習“DKhadoop環(huán)境的安裝配置步驟”吧!

創(chuàng)新互聯(lián)公司2013年開創(chuàng)至今,先為桑珠孜等服務(wù)建站,桑珠孜等地企業(yè),進行企業(yè)商務(wù)咨詢服務(wù)。為桑珠孜企業(yè)網(wǎng)站制作PC+手機+微官網(wǎng)三網(wǎng)同步一站式服務(wù)解決您的所有建站問題。

1.修改權(quán)限

步驟:在準備工作中拷貝安裝包DKHPlantform.zip到主節(jié)點/root/目錄后,解壓并修改文件權(quán)限(文件所有者可讀可寫可執(zhí)行,與文件所有者屬于一個用戶組的其他用戶可讀可執(zhí)行,其他用戶組可讀可執(zhí)行)。

命令:  

cd /root/

unzip DKHPlantform.zip

chmod -R 755 DKHPlantform

2. 搭建hadoop集群設(shè)置SSH免密登錄

步驟:

修改主機名  vi /etc/sysconfig/network  reboot

(1)修改本機hosts文件,寫入對應(yīng)關(guān)系

命令:

vi /etc/hosts

通過按鍵盤上的insert或是I鍵進入編輯模式,編輯完成后按一下Esc鍵然后按一下按Shift+:鍵,輸入wq 后回車就可以保存。輸入q!后回車則是放棄保存并退出.

進入編輯模式后,按照規(guī)則寫入主機與ip的對應(yīng)關(guān)系(主機名稱dk41是自己命名的,如下圖)例:

    192.168.1.41    dk41

192.168.1.42    dk42

192.168.1.43    dk43

 DKhadoop環(huán)境的安裝配置步驟

編輯完后,保存退出。把對應(yīng)關(guān)系拷到其他兩臺機器上。

命令:

scp  -r  /etc/hosts  192.168.1.42:/etc

scp  -r  /etc/hosts  192.168.1.43:/etc

(2)執(zhí)行集群之間免密前的準備工作   

a)執(zhí)行sshpass.sh的腳本的時候會去讀sshhosts和sshslaves這兩個文件,替換sshpass.sh中的master和slave文件。                                         

修改文件sshhosts,輸入全部機器的主機名,每行一個主機名(如下圖)

命令:

vi /root/DKHPlantform/autossh/sshhosts

通過按鍵盤上的insert或是I鍵進入編輯模式,編輯完成后按一下Esc鍵然后按一下按Shift+:鍵,輸入wq,后回車就可以保存。輸入q!后回車則是放棄保存并退出.

 DKhadoop環(huán)境的安裝配置步驟

修改文件sshslaves,寫入除主機名之外的所有機器名(如下圖)

命令:

vi /root/DKHPlantform/autossh/sshslaves

通過按鍵盤上的insert或是I鍵進入編輯模式,編輯完成后按一下Esc鍵然后按一下按Shift+:鍵,輸入wq,后回車就可以保存。輸入q!后回車則是放棄保存并退出.

 DKhadoop環(huán)境的安裝配置步驟

b)執(zhí)行insExpect.sh,系統(tǒng)會裝兩個rpm包,在執(zhí)行sshpass.sh的過程中無需再輸密碼和yes,腳本自動繼續(xù)執(zhí)行。

命令:

cd /root/DKHPlantform/autossh

./insExpect.sh

按照提示多次輸入yes和密碼(如下圖)

 DKhadoop環(huán)境的安裝配置步驟

c)執(zhí)行changeMaster.sh腳本為了清空/root/.ssh目錄下的所有文件(在/root/DKHPlantform/autossh目錄下),避免在執(zhí)行sshpass.sh腳本時產(chǎn)生的新密鑰時與舊的密鑰發(fā)生沖突。

命令:

./changeMaster.sh                                                   

按照提示輸入(如下圖)

 DKhadoop環(huán)境的安裝配置步驟

(3)執(zhí)行集群免密(SSH)

a)執(zhí)行SSH:

命令:

cd /root/

./sshpass.sh 密碼

123456為集群密碼,根據(jù)自己實際情況輸入。

 DKhadoop環(huán)境的安裝配置步驟

b)防止訪問服務(wù)器時某些服務(wù)被攔截,需關(guān)閉防火墻。

命令:

cd /root/DKHPlantform/autossh

./offIptables.sh

 DKhadoop環(huán)境的安裝配置步驟

3.安裝雙機熱備份的MySQL

目的:存放Hive的元數(shù)據(jù)

步驟:

(1)從主節(jié)點分發(fā)mysql安裝目錄到第二節(jié)點

命令:

scp -r /root/DKHPlantform/mysqlInst/ 192.168.1.42:/root/

(2)主節(jié)點執(zhí)行: 

命令:                                                                                                                                                                                                                                                                                                                                           

cd /root/DKHPlantform/mysqlInst/

./mysql.sh 1

ssh前往第二臺機器(從節(jié)點)并執(zhí)行:

命令:

cd /root/mysqlInst/

./mysql.sh 2

(3)執(zhí)行成功之后執(zhí)行熱備份(兩臺機器上都要執(zhí)行,兩個ip互換,41上寫42,42上寫41,密碼是Mysql的密碼為:123456。平臺內(nèi)已經(jīng)設(shè)定好,請勿修改):

命令:

source /etc/profile

./sync.sh 192.168.1.xxx(另一臺mysql地址) root 123456

4.創(chuàng)建數(shù)據(jù)庫

 步驟:

(1)導(dǎo)入MySQL數(shù)據(jù)表,只在主節(jié)點執(zhí)行:

命令:

mysql -uroot -p123456 < { 此處為sql文件,主目錄下文件: dkh.sql}

如:mysql -uroot -p123456

(2)執(zhí)行完后查看一下兩臺mysql的數(shù)據(jù)表是否存在,從節(jié)點查看執(zhí)行:

命令:

mysql  -uroot  -p123456
show databases;

 DKhadoop環(huán)境的安裝配置步驟

感謝各位的閱讀,以上就是“DKhadoop環(huán)境的安裝配置步驟”的內(nèi)容了,經(jīng)過本文的學(xué)習后,相信大家對DKhadoop環(huán)境的安裝配置步驟這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是創(chuàng)新互聯(lián),小編將為大家推送更多相關(guān)知識點的文章,歡迎關(guān)注!


本文名稱:DKhadoop環(huán)境的安裝配置步驟-創(chuàng)新互聯(lián)
URL網(wǎng)址:http://weahome.cn/article/cdephd.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部