如何使用apache pig 處理chukwa收集的數(shù)據(jù)，很多新手對此不是很清楚，為了幫助大家解決這個難題，下面小編將為大家詳細(xì)講解，有這方面需求的人可以來學(xué)習(xí)下，希望你能有所收獲。

創(chuàng)新互聯(lián)主要從事成都網(wǎng)站建設(shè)、成都做網(wǎng)站、網(wǎng)頁設(shè)計、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)多倫,10余年網(wǎng)站建設(shè)經(jīng)驗,價格優(yōu)惠、服務(wù)專業(yè),歡迎來電咨詢建站服務(wù):028-86922220

        公司使用chukwa收集每個服務(wù)器數(shù)據(jù)的，數(shù)據(jù)收集到的hdfs以后被寫成sequencefile,想用pig處理這些數(shù)據(jù)，pig本身不支持這種數(shù)據(jù)結(jié)構(gòu)的，查看chukwa源碼發(fā)現(xiàn)，本身有帶有pig腳本，是hicc用來做數(shù)據(jù)統(tǒng)計的腳本，hicc一直不好使，也懶得搭理這玩意。

        1、chukwa/script/pig/DF.pig

                define chukwaLoader org.apache.hadoop.chukwa.pig.ChukwaLoader();

               源碼在：chukwa/contrib/chukwa-pig下邊

        本身chkwa支持的pig版本比較老，使用pig腳本加載這個jar包，執(zhí)行壓根不好使,把代碼放到pig下進(jìn)行編譯，就可以直接使用了。

看完上述內(nèi)容是否對您有幫助呢？如果還想對相關(guān)知識有進(jìn)一步的了解或閱讀更多相關(guān)文章，請關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道，感謝您對創(chuàng)新互聯(lián)的支持。