這篇文章主要介紹“MapReduce的二次排序使用什么參數(shù)”，在日常操作中，相信很多人在MapReduce的二次排序使用什么參數(shù)問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對(duì)大家解答”MapReduce的二次排序使用什么參數(shù)”的疑惑有所幫助！接下來，請(qǐng)跟著小編一起來學(xué)習(xí)吧！

創(chuàng)新互聯(lián)服務(wù)項(xiàng)目包括福海網(wǎng)站建設(shè)、福海網(wǎng)站制作、福海網(wǎng)頁制作以及福海網(wǎng)絡(luò)營銷策劃等。多年來，我們專注于互聯(lián)網(wǎng)行業(yè)，利用自身積累的技術(shù)優(yōu)勢(shì)、行業(yè)經(jīng)驗(yàn)、深度合作伙伴關(guān)系等，向廣大中小型企業(yè)、政府機(jī)構(gòu)等提供互聯(lián)網(wǎng)行業(yè)的解決方案，福海網(wǎng)站推廣取得了明顯的社會(huì)效益與經(jīng)濟(jì)效益。目前，我們服務(wù)的客戶以成都為中心已經(jīng)輻射到福海省份的部分城市，未來相信會(huì)繼續(xù)擴(kuò)大服務(wù)區(qū)域并繼續(xù)獲得客戶的支持與信任！

關(guān)于二次排序主要涉及到這么幾個(gè)東西：

在0.20.0 以前使用的是

setPartitionerClass 

setOutputkeyComparatorClass

setOutputValueGroupingComparator 

 在0.20.0以后使用是

job.setPartitionerClass(Partitioner p);

job.setSortComparatorClass(RawComparator c);

job.setGroupingComparatorClass(RawComparator c);

   map的最后階段先使用setPartitionerClass進(jìn)行對(duì)應(yīng)reducer分區(qū)，每個(gè)分區(qū)使用setSortComparatorClass排序
   reducer接收到所有map輸出后，使用setSortComparatorClass進(jìn)行總排序，然后使用setGroupingComparatorClass對(duì)數(shù)據(jù)分組構(gòu)造value的迭代器。

到此，關(guān)于“MapReduce的二次排序使用什么參數(shù)”的學(xué)習(xí)就結(jié)束了，希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí)，快去試試吧！若想繼續(xù)學(xué)習(xí)更多相關(guān)知識(shí)，請(qǐng)繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站，小編會(huì)繼續(xù)努力為大家?guī)砀鄬?shí)用的文章！