這篇文章主要介紹了Hive中向量化查詢的示例分析,具有一定借鑒價(jià)值,感興趣的朋友可以參考下,希望大家閱讀完這篇文章之后大有收獲,下面讓小編帶著大家一起了解一下。
創(chuàng)新互聯(lián)是一家專注于成都網(wǎng)站制作、做網(wǎng)站、外貿(mào)營銷網(wǎng)站建設(shè)與策劃設(shè)計(jì),五龍口網(wǎng)站建設(shè)哪家好?創(chuàng)新互聯(lián)做網(wǎng)站,專注于網(wǎng)站建設(shè)十多年,網(wǎng)設(shè)計(jì)領(lǐng)域的專業(yè)建站公司;建站業(yè)務(wù)涵蓋:五龍口等地區(qū)。五龍口做網(wǎng)站價(jià)格咨詢:18982081108
Hive中的向量化查詢執(zhí)行大大減少了典型查詢操作(如掃描,過濾器,聚合和連接)的CPU使用率。
標(biāo)準(zhǔn)查詢執(zhí)行系統(tǒng)一次處理一行,在處理下一行之前,單行數(shù)據(jù)會被查詢中的所有運(yùn)算符進(jìn)行處理,導(dǎo)致CPU使用效率非常低。在向量化查詢執(zhí)行中,數(shù)據(jù)行被批處理在一起(默認(rèn)=> 1024行),表示為一組列向量。
要使用向量化查詢執(zhí)行,必須以O(shè)RC格式(CDH 5)存儲數(shù)據(jù),并設(shè)置以下變量。
SET hive.vectorized.execution.enabled=true
在CDH 6中默認(rèn)啟用Hive查詢向量化,啟用查詢向量化后,還可以設(shè)置其他屬性來調(diào)整查詢向量化的方式
感謝你能夠認(rèn)真閱讀完這篇文章,希望小編分享的“Hive中向量化查詢的示例分析”這篇文章對大家有幫助,同時(shí)也希望大家多多支持創(chuàng)新互聯(lián),關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,更多相關(guān)知識等著你來學(xué)習(xí)!