這篇文章將為大家詳細講解有關(guān)如何實現(xiàn)Storm-kafka,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。
10年的合水網(wǎng)站建設(shè)經(jīng)驗,針對設(shè)計、前端、開發(fā)、售后、文案、推廣等六對一服務(wù),響應(yīng)快,48小時及時工作處理。成都營銷網(wǎng)站建設(shè)的優(yōu)勢是能夠根據(jù)用戶設(shè)備顯示端的尺寸不同,自動調(diào)整合水建站的顯示方式,使網(wǎng)站能夠適用不同顯示終端,在瀏覽器中調(diào)整網(wǎng)站的寬度,無論在任何一種瀏覽器上瀏覽網(wǎng)站,都能展現(xiàn)優(yōu)雅布局與設(shè)計,從而大程度地提升瀏覽體驗。創(chuàng)新互聯(lián)從事“合水網(wǎng)站設(shè)計”,“合水網(wǎng)站推廣”以來,每個客戶項目都認真落實執(zhí)行。
實現(xiàn)細節(jié)如下:
public static Iterable> generateTuples( KafkaConfig kafkaConfig, Message msg) { Iterable
> tups; ByteBuffer payload = msg.payload(); ByteBuffer key = msg.key(); if (key != null && kafkaConfig.scheme instanceof KeyValueSchemeAsMultiScheme) { tups = ((KeyValueSchemeAsMultiScheme) kafkaConfig.scheme) .deserializeKeyAndValue(Utils.toByteArray(key), Utils.toByteArray(payload)); } else { tups = kafkaConfig.scheme.deserialize(Utils.toByteArray(payload)); } return tups; }
1 :方法內(nèi)部 Iterable> 類型的tups對象
2 : Message對象是kafka的Message。 包括了Key,以及palyload負載
3 : 在生成元組的時候,需要拿到kafkaConfig.scheme 當中的Scheme,一旦Scheme instanceof
KeyValueSchemeAsMultiScheme,將強制性轉(zhuǎn)換為 KeyValueSchemeAsMultiScheme,并且調(diào)用deserializeKeyAndValue 方法將其反序列化 List
細節(jié)上,讓我們查看一下 KeyValueSchemeAsMultiScheme 對象
package com.mixbox.storm.kafka; import backtype.storm.spout.SchemeAsMultiScheme; import java.util.Arrays; import java.util.List; @SuppressWarnings("serial") public class KeyValueSchemeAsMultiScheme extends SchemeAsMultiScheme{ public KeyValueSchemeAsMultiScheme(KeyValueScheme scheme) { super(scheme); } //把一個key value 進行反序列化 public Iterable> deserializeKeyAndValue(final byte[] key, final byte[] value) { List
首先, KeyValueSchemeAsMultiScheme 繼承自SchemeAsMultiScheme,SchemeAsMultiScheme是Storm自身所帶有的一個class實現(xiàn),以上的2個class 都實現(xiàn)了Storm之中【MultiScheme】
關(guān)于“如何實現(xiàn)Storm-kafka”這篇文章就分享到這里了,希望以上內(nèi)容可以對大家有一定的幫助,使各位可以學(xué)到更多知識,如果覺得文章不錯,請把它分享出去讓更多的人看到。