本篇內(nèi)容主要講解“Ambari和ClouderaManager是什么”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實(shí)用性強(qiáng)。下面就讓小編來帶大家學(xué)習(xí)“Ambari和ClouderaManager是什么”吧!
為蘭坪等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計(jì)制作服務(wù),及蘭坪網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務(wù)為做網(wǎng)站、成都網(wǎng)站建設(shè)、蘭坪網(wǎng)站設(shè)計(jì),以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務(wù),秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務(wù)。我們深信只要達(dá)到每一位用戶的要求,就會得到認(rèn)可,從而選擇與我們長期合作。這樣,我們也可以走得更遠(yuǎn)!
1 、什么是CDH,Ambari?
Apache Ambari是一種基于Web的工具,支持Apache Hadoop集群的供應(yīng)、管理和監(jiān)控。Ambari已支持大多數(shù)Hadoop組件,包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。
Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理。也是5個頂級hadoop管理工具之一。Ambari能夠安裝安全的(基于Kerberos)Hadoop集群,以此實(shí)現(xiàn)了對Hadoop 安全的支持,提供了基于角色的用戶認(rèn)證、授權(quán)和審計(jì)功能,并為用戶管理集成了LDAP和Active Directory。
CDH簡介
? Cloudera's Distribution, including Apache Hadoop
? 是Hadoop眾多分支中的一種,由Cloudera維護(hù),基于穩(wěn)定版本的Apache Hadoop構(gòu)建
? 提供了Hadoop的核心
– 可擴(kuò)展存儲
– 分布式計(jì)算
? 基于Web的用戶界面
CDH的優(yōu)點(diǎn)
? 版本劃分清晰
? 版本更新速度快
? 支持Kerberos安全認(rèn)證
? 文檔清晰
? 支持多種安裝方式(Cloudera Manager方式
2 、為什么需要他們
? 1000臺服務(wù)器的集群,最少要花費(fèi)多長時間來搭建好Hadoop集群,包括Hive、Hbase、Flume、Kafka、Spark等等
? 只給你一天時間,完成以上工作?
? 對于以上集群進(jìn)行hadoop版本升級,你會選擇什么升級方案,最少要花費(fèi)多長時間?
? 新版本的Hadoop,與Hive、Hbase、Flume、Kafka、Spark等等兼容?
大數(shù)據(jù)集群管理方式分為手工方式(Apache hadoop)和工具方式(Ambari + hdp 和Cloudera Manger + CDH)。
手工部署呢,需配置太多參數(shù),但是,好理解其原理,建議初學(xué)這樣做,能學(xué)到很多。該方式啊,均得由用戶執(zhí)行,細(xì)節(jié)太多,切當(dāng)設(shè)計(jì)多個組件時,用戶須自己解決組件間版本兼容問題。
工具部署呢,比如Ambari或Cloudera Manger。(當(dāng)前兩大最主流的集群管理工具,前者是Hortonworks公司,后者是Cloudera公司)使用工具來,可以說是一鍵操作,難點(diǎn)都在工具Ambari或Cloudera Manger本身部署上。
手工方式和工具方式比較:
比較點(diǎn) | 手工方式 | 工具方式 |
難易度 | 難,幾乎不可能成功 | 簡單,易行 |
兼容性 | 自己解決組件兼容性問題 | 自動安裝兼容組件 |
組件支持?jǐn)?shù) | 支持全部組件 | 支持常用組件 |
優(yōu)點(diǎn) | 對組件和集群管理深刻 | 簡單、容易、可行 |
缺點(diǎn) | 太復(fù)雜,不容易成功 | 屏蔽太多細(xì)節(jié),妨礙對組件理解 |
工具比較:
詳細(xì)對比情況如下:
出版商:
hortonworks研發(fā)了Ambari和hdp的大數(shù)據(jù)分析集成平臺
cloudera研發(fā)了cloudera manger和cdh大數(shù)據(jù)分析集成平臺
穩(wěn)定性:
cloudera相對來說比較穩(wěn)定
ambari相對來說不穩(wěn)定(頁面打開速度慢)
資源消耗:
cloudera manager的server端Xmx是2G,agent是1G,但是有host monitor和service monitor總共大概1G
ambari的server端Xmx是2G,metric的ams和hbase的env大概也就是2G
集群重啟:
cloudera支持滾動重啟(hdfs需要設(shè)計(jì)成ha,才能滾動重啟)
ambari支持滾動重啟(hdfs需要設(shè)計(jì)成ha,才能滾動重啟)
集群升級(一般來講不要輕易升級集群):
cloudera不支持滾動升級服務(wù)
ambari支持滾動升級服務(wù)(這個是ambari的優(yōu)點(diǎn),hdfs必須是ha)
二次開發(fā):
cloudera不支持
ambari支持
服務(wù)版本:
cloudera較老
ambari較新
服務(wù)集成性:
cloudera較弱
ambari較強(qiáng),支持es、redis、presto、kylin等
體驗(yàn)效果:
cloudera好
ambari相對差
安裝過程:
cloudera復(fù)雜
ambari簡單
郵件報警:
cloudera支持不好
ambari支持很好
安裝包:
cloudera是parcel包
ambari是rpm包
到此,相信大家對“Ambari和ClouderaManager是什么”有了更深的了解,不妨來實(shí)際操作一番吧!這里是創(chuàng)新互聯(lián)網(wǎng)站,更多相關(guān)內(nèi)容可以進(jìn)入相關(guān)頻道進(jìn)行查詢,關(guān)注我們,繼續(xù)學(xué)習(xí)!