這篇文章將為大家詳細(xì)講解有關(guān)如何實(shí)現(xiàn)Storm-kafka,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
10年的合水網(wǎng)站建設(shè)經(jīng)驗(yàn),針對(duì)設(shè)計(jì)、前端、開發(fā)、售后、文案、推廣等六對(duì)一服務(wù),響應(yīng)快,48小時(shí)及時(shí)工作處理。成都營(yíng)銷網(wǎng)站建設(shè)的優(yōu)勢(shì)是能夠根據(jù)用戶設(shè)備顯示端的尺寸不同,自動(dòng)調(diào)整合水建站的顯示方式,使網(wǎng)站能夠適用不同顯示終端,在瀏覽器中調(diào)整網(wǎng)站的寬度,無論在任何一種瀏覽器上瀏覽網(wǎng)站,都能展現(xiàn)優(yōu)雅布局與設(shè)計(jì),從而大程度地提升瀏覽體驗(yàn)。創(chuàng)新互聯(lián)從事“合水網(wǎng)站設(shè)計(jì)”,“合水網(wǎng)站推廣”以來,每個(gè)客戶項(xiàng)目都認(rèn)真落實(shí)執(zhí)行。
實(shí)現(xiàn)細(xì)節(jié)如下:
public static Iterable<List<Object>> generateTuples( KafkaConfig kafkaConfig, Message msg) { Iterable<List<Object>> tups; ByteBuffer payload = msg.payload(); ByteBuffer key = msg.key(); if (key != null && kafkaConfig.scheme instanceof KeyValueSchemeAsMultiScheme) { tups = ((KeyValueSchemeAsMultiScheme) kafkaConfig.scheme) .deserializeKeyAndValue(Utils.toByteArray(key), Utils.toByteArray(payload)); } else { tups = kafkaConfig.scheme.deserialize(Utils.toByteArray(payload)); } return tups; }
1 :方法內(nèi)部 Iterable<List<Object>> 類型的tups對(duì)象
2 : Message對(duì)象是kafka的Message。 包括了Key,以及palyload負(fù)載
3 : 在生成元組的時(shí)候,需要拿到kafkaConfig.scheme 當(dāng)中的Scheme,一旦Scheme instanceof
KeyValueSchemeAsMultiScheme,將強(qiáng)制性轉(zhuǎn)換為 KeyValueSchemeAsMultiScheme,并且調(diào)用deserializeKeyAndValue 方法將其反序列化 List<Object>
細(xì)節(jié)上,讓我們查看一下 KeyValueSchemeAsMultiScheme 對(duì)象
package com.mixbox.storm.kafka; import backtype.storm.spout.SchemeAsMultiScheme; import java.util.Arrays; import java.util.List; @SuppressWarnings("serial") public class KeyValueSchemeAsMultiScheme extends SchemeAsMultiScheme{ public KeyValueSchemeAsMultiScheme(KeyValueScheme scheme) { super(scheme); } //把一個(gè)key value 進(jìn)行反序列化 public Iterable<List<Object>> deserializeKeyAndValue(final byte[] key, final byte[] value) { List<Object> o = ((KeyValueScheme)scheme).deserializeKeyAndValue(key, value); if(o == null) return null; else return Arrays.asList(o); } }
首先, KeyValueSchemeAsMultiScheme 繼承自SchemeAsMultiScheme,SchemeAsMultiScheme是Storm自身所帶有的一個(gè)class實(shí)現(xiàn),以上的2個(gè)class 都實(shí)現(xiàn)了Storm之中【MultiScheme】
關(guān)于“如何實(shí)現(xiàn)Storm-kafka”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,使各位可以學(xué)到更多知識(shí),如果覺得文章不錯(cuò),請(qǐng)把它分享出去讓更多的人看到。
網(wǎng)頁(yè)名稱:如何實(shí)現(xiàn)Storm-kafka
文章地址:http://chinadenli.net/article34/gdoepe.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站策劃、企業(yè)網(wǎng)站制作、網(wǎng)站導(dǎo)航、品牌網(wǎng)站設(shè)計(jì)、網(wǎng)站設(shè)計(jì)、企業(yè)建站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)