這篇文章主要介紹“Flink提交作業(yè)運(yùn)行的模式有哪些”,在日常操作中,相信很多人在Flink提交作業(yè)運(yùn)行的模式有哪些問(wèn)題上存在疑惑,小編查閱了各式資料,整理出簡(jiǎn)單好用的操作方法,希望對(duì)大家解答”Flink提交作業(yè)運(yùn)行的模式有哪些”的疑惑有所幫助!接下來(lái),請(qǐng)跟著小編一起來(lái)學(xué)習(xí)吧!
成都創(chuàng)新互聯(lián)長(zhǎng)期為近1000家客戶(hù)提供的網(wǎng)站建設(shè)服務(wù),團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年,關(guān)注不同地域、不同群體,并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù);打造開(kāi)放共贏平臺(tái),與合作伙伴共同營(yíng)造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為祁連企業(yè)提供專(zhuān)業(yè)的成都做網(wǎng)站、成都網(wǎng)站制作,祁連網(wǎng)站改版等技術(shù)服務(wù)。擁有十年豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開(kāi)發(fā)。
基于 Flink-1.12.x
這個(gè)不用多說(shuō),也就是起一個(gè) session,然后會(huì)有多個(gè)程序提交到這一個(gè) session 中。
好處:集群資源僅分配一次,充分利用資源,程序App 啟動(dòng)較快
壞處:可能會(huì)連鎖式的重啟,jobManager 負(fù)載大
使用的比較多,一個(gè) application 一個(gè) flink cluster
好處: 資源隔離,粒度更細(xì),方便管理單個(gè) job
壞處:當(dāng)某個(gè)機(jī)器上有多個(gè) client 時(shí),會(huì)有較高的網(wǎng)絡(luò)負(fù)載( 下載 jar 、傳輸 jar )以及消費(fèi)大量的 CPU 來(lái)執(zhí)行 main方法
Application Mode 與 Per-Job Mode 類(lèi)似,主要是為了解決 Per-Job Mode 的不足,通過(guò) yarn.provided.lib.dirs
另外 client 是在 JobManager 上執(zhí)行的,可以避免 帶寬、CPU 的熱點(diǎn)問(wèn)題。
并且相比于 Per-Job Mode 來(lái)說(shuō),更強(qiáng)大,可以提交多個(gè) job
到此,關(guān)于“Flink提交作業(yè)運(yùn)行的模式有哪些”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識(shí),請(qǐng)繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會(huì)繼續(xù)努力為大家?guī)?lái)更多實(shí)用的文章!