本篇內(nèi)容介紹了“Flink的MaxBy怎么用”的有關(guān)知識,在實際案例的操作過程中,不少人都會遇到這樣的困境,接下來就讓小編帶領(lǐng)大家學(xué)習(xí)一下如何處理這些情況吧!希望大家仔細(xì)閱讀,能夠?qū)W有所成!
你所需要的網(wǎng)站建設(shè)服務(wù),我們均能行業(yè)靠前的水平為你提供.標(biāo)準(zhǔn)是產(chǎn)品質(zhì)量的保證,主要從事成都網(wǎng)站制作、成都做網(wǎng)站、企業(yè)網(wǎng)站建設(shè)、手機(jī)網(wǎng)站制作設(shè)計、網(wǎng)頁設(shè)計、品牌網(wǎng)站制作、網(wǎng)頁制作、做網(wǎng)站、建網(wǎng)站。成都創(chuàng)新互聯(lián)公司擁有實力堅強(qiáng)的技術(shù)研發(fā)團(tuán)隊及素養(yǎng)的視覺設(shè)計專才。
maxBy聚合:獲取一組數(shù)據(jù)流算子中最大的記錄行(和max的區(qū)別,max是返回計算字段的最大值)
示例環(huán)境
java.version: 1.8.x flink.version: 1.11.1
示例數(shù)據(jù)源 (項目碼云下載)
Flink 系例 之 搭建開發(fā)環(huán)境與數(shù)據(jù)
MaxBy.java
import com.flink.examples.DataSource; import org.apache.flink.api.common.typeinfo.Types; import org.apache.flink.api.java.functions.KeySelector; import org.apache.flink.api.java.tuple.Tuple3; import org.apache.flink.streaming.api.datastream.DataStream; import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment; import java.util.List; /** * @Description maxBy聚合:獲取一組數(shù)據(jù)流算子中最大的記錄行(和max的區(qū)別,max是返回計算字段的最大值) */ public class MaxBy { /** * 遍歷集合,返回每個性別分區(qū)下最大年齡數(shù)據(jù)記錄 * @param args * @throws Exception */ public static void main(String[] args) throws Exception { final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); List> tuple3List = DataSource.getTuple3ToList(); DataStream > dataStream = env.fromCollection(tuple3List) .returns(Types.TUPLE(Types.STRING, Types.STRING,Types.INT)) .keyBy((KeySelector , String>) k ->k.f1) //按數(shù)量窗口滾動,每3個輸入數(shù)據(jù)流,計算一次 .countWindow(3) //注意:計算變量為f2 .maxBy(2); dataStream.print(); env.execute("flink MaxBy job"); } }
打印結(jié)果
4> (劉六,girl,32) 2> (吳八,man,30)
“Flink的MaxBy怎么用”的內(nèi)容就介紹到這里了,感謝大家的閱讀。如果想了解更多行業(yè)相關(guān)的知識可以關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編將為大家輸出更多高質(zhì)量的實用文章!