這篇文章主要為大家展示了“DKHadoop安裝前需要準備什么”,內(nèi)容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“DKHadoop安裝前需要準備什么”這篇文章吧。
目前創(chuàng)新互聯(lián)建站已為1000多家的企業(yè)提供了網(wǎng)站建設(shè)、域名、網(wǎng)絡(luò)空間、綿陽服務(wù)器托管、企業(yè)網(wǎng)站設(shè)計、伊犁網(wǎng)站維護等服務(wù),公司將堅持客戶導(dǎo)向、應(yīng)用為本的策略,正道將秉承"和諧、參與、激情"的文化,與客戶和合作伙伴齊心協(xié)力一起成長,共同發(fā)展。Hadoop運行環(huán)境配置的坑只有走過的人才懂,不過發(fā)現(xiàn)了一個比較有意思的國產(chǎn)hadoop發(fā)行版——大快的DKH發(fā)行版DKHadoop。DKHadoop將開源社區(qū)里多種常用組建包括:HDFS,Hbase,Storm,F(xiàn)lume,Kafka,Mahout,ES等都集成到了這一個平臺里,所以整個運行環(huán)境的配置安裝就大大被簡化了。
我把此前安裝的過程整理了一下分享給感興趣的朋友,主要分為:準備階段、服務(wù)器操作系統(tǒng)配置、DKH系統(tǒng)安裝、常見問題解決方法四個部門。由于文章偏于較長,本篇重點為大家分享第一部分——準備階段。
第一部分:準備工作
1、 大數(shù)據(jù)平臺所需配置:
(1) 系統(tǒng):CentOS 6.5 64位(需默認安裝Desktop)
(2) CPU :intel E3及以上。
(3) 內(nèi)存:建議最小8G,用圖計算建議32G,推薦128G。
(4) 硬盤:256G以上,推薦使用固態(tài)硬盤。
(5) 系統(tǒng)分區(qū)要求: 如無特殊需求,除swap分區(qū)外,可將剩余空間全部分配 到/ (根) 分區(qū)
(6) 網(wǎng)絡(luò)要求:如無特殊情況,盡量可以接入外網(wǎng)。
(7) 至少三臺服務(wù)器(三臺服務(wù)器名字任意起,密碼須一致)。
(8)安裝使用root用戶作為默認用戶
2、 遠程上傳和遠程連接工具:
(1) 若直接使用個人PC開啟的虛擬機作為服務(wù)器的基礎(chǔ),直接拷貝到虛擬機下即可。
(2) 若是使用機房服務(wù)器作平臺搭建的服務(wù)器,如若不能直接接觸到服務(wù)器,則需要使用遠程工具連接并發(fā)送安裝包。
以上是“DKHadoop安裝前需要準備什么”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注創(chuàng)新互聯(lián)-成都網(wǎng)站建設(shè)公司行業(yè)資訊頻道!