【io.file.buffer.size】(core-site.xml)

作為一家“創(chuàng)意+整合+營銷”的成都網(wǎng)站建設機構，我們在業(yè)內(nèi)良好的客戶口碑。創(chuàng)新互聯(lián)建站提供從前期的網(wǎng)站品牌分析策劃、網(wǎng)站設計、成都網(wǎng)站設計、網(wǎng)站建設、創(chuàng)意表現(xiàn)、網(wǎng)頁制作、系統(tǒng)開發(fā)以及后續(xù)網(wǎng)站營銷運營等一系列服務，幫助企業(yè)打造創(chuàng)新的互聯(lián)網(wǎng)品牌經(jīng)營模式與有效的網(wǎng)絡營銷方法,創(chuàng)造更大的價值。

用來設置緩存的大小，較大的緩存提供更高效的數(shù)據(jù)傳輸，但也意味著更大的內(nèi)存消耗和延遲

默認值為4KB，一般情況下設置為64KB(65536)

【dfs.balance.bandwidthPerSec】

HDFS平衡器檢測集群中使用過度或者使用不足的DataNode，并在這些DataNode之間轉(zhuǎn)移數(shù)據(jù)塊來保證負載均衡。該參數(shù)定義了每個DataNode平衡操作所允許的最大使用帶寬，單位是byte，網(wǎng)絡帶寬單位一般是bit

【dfs.block.size】

默認值為67108864，即64MB；參考值為134217728(128M)

【dfs.DataNode.du.reserved】

由于mapred.local.dir經(jīng)常與DataNode共享可用的硬盤資源，因此我們需要為MapReduce任務保留一些硬盤資源。建議每個硬盤都為map任務保留最小10GB的資源，即10737418240.

【dfs.NameNode.handler.count】

NameNode有一個工作線程池用來處理客戶端的遠程過程調(diào)用及集群守護進程的調(diào)用。默認值為10，一般講該值設置為集群大小的自然對數(shù)乘以20，即20logN。

該值設置過小明顯的癥狀就是DataNode在連接NameNode的時候總是超時或者連接被拒

【dfs.DataNode.failed.volumes.tolerated】

當DataNode的任意一個本地磁盤故障時，默認認定整個DataNode失效。該參數(shù)默認值為0，意味著只要有一個磁盤出現(xiàn)故障就會導致整個DataNode 不可用。參考值為1

【dfs.hosts】

通過含有DataNode主機名列表的文件來確認允許連接并加入集群的DataNode

【dfs.host.exclude】

把相關節(jié)點排除在HDFS外，可卸載DataNode

【fs.trash.interval】(core-site.xml)

定義.Trash目錄下文件被永久刪除前保留的時間(分鐘數(shù))，默認為0，即垃圾回收站功能關閉，參考值為1440(24小時)