本篇文章給大家分享的是有關(guān)Spark API編程中怎么以本地模式進(jìn)行Spark API實(shí)戰(zhàn)map、filter,小編覺(jué)得挺實(shí)用的,因此分享給大家學(xué)習(xí),希望大家閱讀完這篇文章后可以有所收獲,話(huà)不多說(shuō),跟著小編一起來(lái)看看吧。
作為一家“創(chuàng)意+整合+營(yíng)銷(xiāo)”的成都網(wǎng)站建設(shè)機(jī)構(gòu),我們?cè)跇I(yè)內(nèi)良好的客戶(hù)口碑。創(chuàng)新互聯(lián)公司提供從前期的網(wǎng)站品牌分析策劃、網(wǎng)站設(shè)計(jì)、成都網(wǎng)站建設(shè)、成都網(wǎng)站制作、創(chuàng)意表現(xiàn)、網(wǎng)頁(yè)制作、系統(tǒng)開(kāi)發(fā)以及后續(xù)網(wǎng)站營(yíng)銷(xiāo)運(yùn)營(yíng)等一系列服務(wù),幫助企業(yè)打造創(chuàng)新的互聯(lián)網(wǎng)品牌經(jīng)營(yíng)模式與有效的網(wǎng)絡(luò)營(yíng)銷(xiāo)方法,創(chuàng)造更大的價(jià)值。
首先以spark的本地模式測(cè)試spark API,以local的方式運(yùn)行spark-shell:
下面看下 filter操作:
我們用最正宗的scala函數(shù)式編程的風(fēng)格:
從結(jié)果 可以看出來(lái),與之前那種分步奏方式結(jié)果是一樣的
但采用這種方式,即是復(fù)合scala風(fēng)格的寫(xiě)法,也是符合spark的應(yīng)用程序風(fēng)格的寫(xiě)法,在spark的編程中,大多數(shù)功能的實(shí)現(xiàn)都是只要一行代碼即可完成。
以上就是Spark API編程中怎么以本地模式進(jìn)行Spark API實(shí)戰(zhàn)map、filter,小編相信有部分知識(shí)點(diǎn)可能是我們?nèi)粘9ぷ鲿?huì)見(jiàn)到或用到的。希望你能通過(guò)這篇文章學(xué)到更多知識(shí)。更多詳情敬請(qǐng)關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道。