一、hadoop發(fā)行版介紹
成都創(chuàng)新互聯(lián)公司是一家集網(wǎng)站建設(shè),達(dá)茂旗企業(yè)網(wǎng)站建設(shè),達(dá)茂旗品牌網(wǎng)站建設(shè),網(wǎng)站定制,達(dá)茂旗網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營銷,網(wǎng)絡(luò)優(yōu)化,達(dá)茂旗網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競爭力??沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿,時(shí)刻以成就客戶成長自我,堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。目前Hadoop發(fā)行版非常多,有Intel發(fā)行版,華為發(fā)行版、Cloudera發(fā)行版(CDH)、Hortonworks版本等,所有這些發(fā)行版均是基于Apache Hadoop衍生出來的,之所以有這么多的版本,是由于Apache Hadoop的開源協(xié)議決定的:任何人可以對其進(jìn)行修改,并作為開源或商業(yè)產(chǎn)品發(fā)布/銷售。
目前而言,不收費(fèi)的Hadoop版本主要有三個(gè),都是國外廠商,分別是:
Apache(最原始的版本,所有發(fā)行版均基于這個(gè)版本進(jìn)行改進(jìn))
Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,簡稱CDH)
Hortonworks版本(Hortonworks Data Platform,簡稱“HDP”)
對于國內(nèi)用戶而言,絕大多數(shù)選擇CDH版本,Cloudera的CDH和Apache的Hadoop的區(qū)別如下:
(1) CDH對Hadoop版本的劃分非常清晰,截止目前為止,CDH共有5個(gè)版本,其中,前三個(gè)已經(jīng)不再更新,最近的兩個(gè),分別是CDH4和CDH5,CDH4基于Hadoop2.0,CDH5基于hadoop2.2/2.3/2.5/2.6.相比而言,Apache版本則混亂得多;同時(shí),CDH發(fā)行版比Apache hadoop在兼容性,安全性,穩(wěn)定性上有很大增強(qiáng)。
(2)CDH3是CDH第三個(gè)版本,基于Apache hadoop0.20.2改進(jìn)而來,并融入了最新的patch,CDH4版本是基于Apache hadoop2.0.0改進(jìn)的,CDH總是并應(yīng)用了最新Bug修復(fù)或者Feature的Patch,并比Apache hadoop同功能版本提早發(fā)布,更新速度比Apache官方快。
(3)CDH支持Kerberos安全認(rèn)證,apache hadoop則使用簡陋的用戶名匹配認(rèn)證.
(4)CDH文檔完善清晰,很多采用Apache版本的用戶都會閱讀CDH提供的文檔,包括安裝文檔、升級文檔等。
(5)CDH支持yum/apt包,RPM包,tar包,Cloudera Manager三種方式安裝,Apache hadoop只支持Tar包安裝。
二、CDH發(fā)行版本介紹
CDH首先是100%開源,基于Apache協(xié)議。基于Apache Hadoop和相關(guān)projiect開發(fā)。可以做批量處理,交互式sql查詢和及時(shí)查詢,基于角色的權(quán)限控制。在企業(yè)中使用最廣的Hadoop分發(fā)版本。
Cloudera完善了CDH的版本,并提供了對hadoop的發(fā)布、配置和管理,監(jiān)控,診斷工具,在官網(wǎng)提供了多種集成發(fā)行版。如下圖所示:
1、單純CDH版本下載,目前最新版本為CDH5.8.2,可自由下載并免費(fèi)無限制使用。
2、Cloudera Express,可免費(fèi)下載使用,包含了CDH,以及Cloudera Manager(簡稱CM),CM提供了對集群的管理功能,比如自動化部署,中心化管理,監(jiān)控,診斷功能等。CM屬于非開源產(chǎn)品,Cloudera提供有限功能使用,之前對管理的數(shù)據(jù)節(jié)點(diǎn)限制為50個(gè),目前已經(jīng)取消了此限制,可無限增加數(shù)據(jù)節(jié)點(diǎn)。
3、Cloudera Enterprise是官方的收費(fèi)產(chǎn)品,可免費(fèi)試用60天全功能版本,過期后需要注冊碼才能繼續(xù)使用,否則將變?yōu)镃loudera Express版本,包含CDH,以及Cloudera Manager。Cloudera Enterprise在發(fā)布、配置和管理,監(jiān)控,診斷,集成四個(gè)部分的功能是相同的。只有在高級管理功能中有區(qū)別,Cloudera Enterprise擁有這些功能,而Cloudera Express則沒有。
三、CDH發(fā)行版下載地址
可到官方網(wǎng)站下載頁面:http://www.cloudera.com/downloads.html, 也可以知道到下面地址下載不同版本:
http://archive.cloudera.com/cdh/
http://archive.cloudera.com/cdh5/
http://archive.cloudera.com/cdh6/
四、CDH與操作系統(tǒng)的依賴
CDH發(fā)行版本與操作系統(tǒng)的關(guān)系如下:
經(jīng)驗(yàn)推薦:
hadoop-2.3.0-cdh6.1.5以及之前的版本,推薦linux操作系統(tǒng)版本為Centos6.x以上
hadoop-2.5.0-cdh6.2.0以及之后的版本,推薦linux操作系統(tǒng)版本為Centos7.x(Centos7.1/7.2,7.0不支持)以上。
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場景需求。