這篇文章主要介紹了啟動hadoop時的提示信息是什么意思,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
在阿爾山等地區(qū),都構(gòu)建了全面的區(qū)域性戰(zhàn)略布局,加強發(fā)展的系統(tǒng)性、市場前瞻性、產(chǎn)品創(chuàng)新能力,以專注、極致的服務理念,為客戶提供網(wǎng)站設(shè)計制作、網(wǎng)站設(shè)計 網(wǎng)站設(shè)計制作按需設(shè)計,公司網(wǎng)站建設(shè),企業(yè)網(wǎng)站建設(shè),品牌網(wǎng)站建設(shè),成都全網(wǎng)營銷推廣,成都外貿(mào)網(wǎng)站建設(shè),阿爾山網(wǎng)站建設(shè)費用合理。
#啟動hadoop分布式系統(tǒng)(在namenode上運行) start-dfs.sh #輸入信息如下:
1。下面這句說明了當前這個命令的功能:啟動namenode
Starting namenodes on [namenode.hadoop.ymxx]
2。namenode反饋啟動信息,并告訴啟動namenode的日志文件存放在哪里
out改成log即是對應的日志文件,冒號 : 前面是目標節(jié)點(IP或者機器名),冒號 : 后面是目標節(jié)點的反饋信息
namenode.hadoop.ymxx: starting namenode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-namenode-namenode.hadoop.ymxx.out
3。datanode反饋啟動信息,同樣告訴啟動datanode的日志存放在datanode節(jié)點上的哪個目錄下(我這里配置了四個datanode節(jié)點)
datanode4nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode4nodemanager.hadoop.ymxx.out datanodenodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanodenodemanager.hadoop.ymxx.out datanode2nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode2nodemanager.hadoop.ymxx.out datanode3nodemanager.hadoop.ymxx: starting datanode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-datanode-datanode3nodemanager.hadoop.ymxx.out
4。啟動secondary namenode
Starting secondary namenodes [secondarynamenode.hadoop.ymxx]
5。seconary namenode反饋啟動信息,并告知日志信息
secondarynamenode.hadoop.ymxx: starting secondarynamenode, logging to /cluster/hadoop-2.2.0/logs/hadoop-root-secondarynamenode-secondarynamenode.hadoop.ymxx.out
注:
1。信息里的日志目錄是目標節(jié)點上的目錄,而不是namenode上的目錄
2。可以通過jps命令到目標機器上查看,對應的進程有無啟動(通常從啟動時控制臺打印的信息是看不出來有沒有啟動成功的,必須通過jps去查看有無相關(guān)進程)
3。如果發(fā)現(xiàn)沒有啟動,應該立即查看目標節(jié)點上的日志文件,分析啟動失敗的原因
4。這里說明下,網(wǎng)上很多搭建hadoop分布式計算平臺的例子都是將NameNode和ResoureManger放在同一臺機器上的,所以搭建好了之后,可以在同一臺機器上運行start-dfs.sh和start-yarn.sh來啟動整個分布式系統(tǒng),這個做法給人一個錯覺仿佛start-dfs.sh,start-yarn.sh都在NameNode上執(zhí)行了就行了,事實上這是錯誤的理解方式,start-dfs.sh應該在NameNode所在的機器上執(zhí)行,而start-yarn.sh應該在ResourceManager所在的機器上執(zhí)行,這個很重要。我被這個錯覺害的很慘,都怪自己沒有好好的看官方文檔,其實官方文檔里說的很清楚:
#翻譯下就是:使用下面的命令啟動yarn,在被指定為資源管理器的機器上使用yarn這個用戶運行 #唉,不看文檔,盲目跟風活受罪啊 Start the YARN with the following command, run on the designated ResourceManager as yarn: [yarn]$ $HADOOP_YARN_HOME/sbin/yarn-daemon.sh --config $HADOOP_CONF_DIR start resourcemanager
感謝你能夠認真閱讀完這篇文章,希望小編分享的“啟動hadoop時的提示信息是什么意思”這篇文章對大家有幫助,同時也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識等著你來學習!