小編給大家分享一下Hadoop如何安裝,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
成都創(chuàng)新互聯(lián)專(zhuān)注于汾西企業(yè)網(wǎng)站建設(shè),自適應(yīng)網(wǎng)站建設(shè),成都做商城網(wǎng)站。汾西網(wǎng)站建設(shè)公司,為汾西等地區(qū)提供建站服務(wù)。全流程按需網(wǎng)站開(kāi)發(fā),專(zhuān)業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,成都創(chuàng)新互聯(lián)專(zhuān)業(yè)和態(tài)度為您提供的服務(wù)
一、Hadoop的安裝
1. 下載地址:https://archive.apache.org/dist/hadoop/common/我下載的是hadoop-2.7.3.tar.gz版本。
2. 在/usr/local/ 創(chuàng)建文件夾zookeeper
mkdir hadoop
3.上傳文件到Linux上的/usr/local/source目錄下
3.解壓縮
運(yùn)行如下命令:
tar -zxvf hadoop-2.7.3.tar.gz-C /usr/local/hadoop
4. 修改配置文件
進(jìn)入到cd /usr/local/hadoop/hadoop-2.7.3/etc/hadoop/
, 修改hadoop-env.sh
運(yùn)行 vimhadoop-env.sh
,修改JAVA_HOME
5.將Hadoop的執(zhí)行命令加入到我們的環(huán)境變量里
在/etc/profile文件中加入:
export PATH=$PATH:/usr/local/hadoop/hadoop-2.7.3/bin:/usr/local/hadoop/hadoop-2.7.3/sbin
執(zhí)行/etc/profile文件:
source /etc/profile
6. 將npfdev1機(jī)器上的hadoop復(fù)制到npfdev2和npfdev3和npfdev4機(jī)器上。使用下面的命令:
首先分別在npfdev2和npfdev3和npfdev4機(jī)器上,建立/usr/local/hadoop目錄,然后在npfdev1上分別執(zhí)行下面命令:
scp -r /usr/local/hadoop/hadoop-2.7.3/ npfdev2:/usr/local/hadoop/
scp -r /usr/local/hadoop/hadoop-2.7.3/ npfdev3:/usr/local/hadoop/
scp -r /usr/local/hadoop/hadoop-2.7.3/ npfdev4:/usr/local/hadoop/
記住:需要各自修改npfdev2和npfdev3和npfdev4的/etc/profile文件:
在/etc/profile文件中加入:
export PATH=$PATH:/usr/local/hadoop/hadoop-2.7.3/bin:/usr/local/hadoop/hadoop-2.7.3/sbin
執(zhí)行/etc/profile文件:
source /etc/profile
然后分別在npfdev1和npfdev2和npfdev3和npfdev4機(jī)器上,執(zhí)行hadoop命令,看是否安裝成功。并且關(guān)閉防火墻。
7. 確定所有機(jī)器之間可以相互ping通,使用下面的命令:
(1). ping npfdev1
(2). ping npfdev2
(3). ping npfdev3
(4). ping npfdev4
8. 啟動(dòng)hadoop:
我們這里將npfdev1作為master,npfdev2和npfdev3和npfdev4分別作為三臺(tái)slave。
(1).修改配置文件core-site.xml
進(jìn)入 cd /usr/local/hadoop/hadoop-2.7.3/etc/hadoop
具體配置如下:
(2).在master機(jī)器npfdev1上啟動(dòng)namenode
首先需要格式化namenode,第一次使用需要格式化,后來(lái)就不需要了。
hdfs namenode -format
然后啟動(dòng)namenode:
hadoop-daemon.sh start namenode
通過(guò)jps命令查看,如果有namenode的java進(jìn)程,就說(shuō)明我們啟動(dòng)namenode成功。
(3).在slave機(jī)器npfdev2,npfdev3,npfdev4上啟動(dòng)datanode
以上是“Hadoop如何安裝”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對(duì)大家有所幫助,如果還想學(xué)習(xí)更多知識(shí),歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道!