真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

hadoop學(xué)習(xí)筆記1---Hadoop體系介紹

1、Namenode

創(chuàng)新互聯(lián)專注于天心網(wǎng)站建設(shè)服務(wù)及定制,我們擁有豐富的企業(yè)做網(wǎng)站經(jīng)驗。 熱誠為您提供天心營銷型網(wǎng)站建設(shè),天心網(wǎng)站制作、天心網(wǎng)頁設(shè)計、天心網(wǎng)站官網(wǎng)定制、小程序開發(fā)服務(wù),打造天心網(wǎng)絡(luò)公司原創(chuàng)品牌,更為您提供天心網(wǎng)站排名全網(wǎng)營銷落地服務(wù)。

HDFS的守護進(jìn)程

記錄文件時如何分割成數(shù)據(jù)塊的,以及這些數(shù)據(jù)塊被存儲到哪些節(jié)點上

對內(nèi)存和I/O進(jìn)行集中管理

是個單點,發(fā)生故障將使集群崩潰

2、Secondary Namenode

監(jiān)控HDFS狀態(tài)的輔助后臺程序

每個集群都有一個

與NameNode進(jìn)行通訊定期保存HDFS元數(shù)據(jù)快照

當(dāng)NameNode故障可以作為備用NameNode使用

3、DataNode

每臺從服務(wù)器都運行一個

負(fù)責(zé)把HDFS數(shù)據(jù)塊讀寫到本地文件系統(tǒng)

4、JobTracker

用于處理作業(yè)(用戶提交代碼)的后臺程序

決定有哪些文件參與處理,然后切割task并分配節(jié)點

監(jiān)控task,重啟失敗的task(于不同的幾點)

每個集群只有唯一一個JobTracker,位于Master節(jié)點

5、TaskTracker

位于slave節(jié)點上,與datanode結(jié)合(代碼與數(shù)據(jù)一起的原則)

管理各自節(jié)點上的task(由jobtracker分配)

每個節(jié)點只有一個tasktracker,但一個tasktracker可以啟動多個JVM,用于并行執(zhí)行map或reduce任務(wù)

與jobtracker交互

1.6、Master和Slave

Master:Namenode、Secondary Namenode、jobtracker。瀏覽器(用于觀看管理界面),其它Hadoop工具

Slave:Tasktracker、Datenode

Master不是唯一的


分享名稱:hadoop學(xué)習(xí)筆記1---Hadoop體系介紹
本文網(wǎng)址:http://weahome.cn/article/jhcggc.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部