這篇文章主要介紹了hive架構(gòu)及知識體系的示例分析,具有一定借鑒價值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
為紅旗等地區(qū)用戶提供了全套網(wǎng)頁設(shè)計制作服務,及紅旗網(wǎng)站建設(shè)行業(yè)解決方案。主營業(yè)務為成都網(wǎng)站建設(shè)、網(wǎng)站建設(shè)、紅旗網(wǎng)站設(shè)計,以傳統(tǒng)方式定制建設(shè)網(wǎng)站,并提供域名空間備案等一條龍服務,秉承以專業(yè)、用心的態(tài)度為用戶提供真誠的服務。我們深信只要達到每一位用戶的要求,就會得到認可,從而選擇與我們長期合作。這樣,我們也可以走得更遠!
1、Hive架構(gòu)與基本組成
Hive的體系結(jié)構(gòu)可以分為以下幾部分:
(1)用戶接口主要有三個:CLI,Client 和
WUI。其中最常用的是CLI。Client是Hive的客戶端,用戶連接至Hive
Server。在啟動 Client模式的時候,需要指出Hive Server所在節(jié)點,并且在該節(jié)點啟動Hive Server。
WUI是通過瀏覽器訪問Hive。
(2)Hive將元數(shù)據(jù)存儲在數(shù)據(jù)庫中,如MySQL、derby。hive 的元數(shù)據(jù)結(jié)構(gòu)描述信息庫,可選用不同的關(guān)系型數(shù)據(jù)庫來存儲,通過配置文件修改、查看數(shù)據(jù)庫配置信息。(hive-site.xml 統(tǒng)一元數(shù)據(jù)管理)Hive中的元數(shù)據(jù)包括表的名字,表的列和分區(qū)及其屬性,表的屬性(是否為外部表等),表的數(shù)據(jù)所在目錄等。
hive-site.xml
(3)解釋器、編譯器、優(yōu)化器完成HQL查詢語句從詞法分析、語法分析、編譯、優(yōu)化以及查詢計劃的生成。生成的查詢計劃存儲在HDFS中,并在隨后有MapReduce調(diào)用執(zhí)行。
(4)Hive的數(shù)據(jù)存儲在HDFS中,大部分的查詢、計算由MapReduce完成(包含*的查詢,比如select * from tbl不會生成MapRedcue任務)。
Hive將元數(shù)據(jù)存儲在RDBMS中
2.知識體系
感謝你能夠認真閱讀完這篇文章,希望小編分享的“hive架構(gòu)及知識體系的示例分析”這篇文章對大家有幫助,同時也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識等著你來學習!