今天小編給大家分享的是Kafka的安裝配置,相信大部分人都不太了解,為了讓大家更加了解,小編給大家總結(jié)了以下內(nèi)容,話不多說(shuō),一起往下看吧。
創(chuàng)新互聯(lián)建站專注于駐馬店企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站,商城開發(fā)。駐馬店網(wǎng)站建設(shè)公司,為駐馬店等地區(qū)提供建站服務(wù)。全流程定制網(wǎng)站開發(fā),專業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,創(chuàng)新互聯(lián)建站專業(yè)和態(tài)度為您提供的服務(wù)安裝 Kafka 服務(wù)
直接到 kafka 官網(wǎng) , 下載最新的
wget https://mirror.bit.edu.cn/apache/kafka/2.5.0/kafka_2.13-2.5.0.tgz
解壓,進(jìn)入目錄
tar -zxvf kafka_2.13-2.5.0.tgz cd kafka_2.13-2.5.0
啟動(dòng) Kafka 服務(wù)
使用安裝包中的腳本啟動(dòng)單節(jié)點(diǎn) Zookeeper 實(shí)例
bin/zookeeper-server-start.sh -daemon config/zookeeper.properties
使用 kafka-server-start.sh 啟動(dòng) kafka 服務(wù)
bin/kafka-server-start.sh config/server.properties
創(chuàng)建 topic
bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
查看 topic 列表,檢查是否創(chuàng)建成功
bin/kafka-topics.sh --list --zookeeper localhost:2181 $ test
生產(chǎn)者,發(fā)送消息
bin/kafka-console-producer.sh --broker-list 127.0.0.1:9092 --topic test
服務(wù)方面到這里就差不多了,接下來(lái)就是 php 的事了。
安裝 PHP 擴(kuò)展
rdkafka 安裝需要依賴 librdkafka , 所以先安裝 librdkafka
git clone https://github.com/edenhill/librdkafka.git cd librdkafka ./configure make && make install
安裝 php-rdkafka 擴(kuò)展
git clone https://github.com/arnaud-lb/php-rdkafka.git cd php-rdkafka phpize ./configure --with-php-config=/usr/local/Cellar/php@7.2/7.2.24/bin/php-config ## 這里根據(jù)自己的情況填寫路徑 make && make install
在 php-ini 加上
extension=rdkafka.so
重啟,php-fpm,就應(yīng)該可以看到該擴(kuò)展。
使用Kafka
創(chuàng)建一個(gè)生產(chǎn)者類
set('metadata.broker.list', self::$brokerList); $producer = new \RdKafka\Producer($conf); $topic = $producer->newTopic($topic); $topic->produce(RD_KAFKA_PARTITION_UA, 0, json_encode($message)); $producer->poll(0); $result = $producer->flush(10000); if (RD_KAFKA_RESP_ERR_NO_ERROR !== $result) { throw new \RuntimeException('Was unable to flush, messages might be lost!'); } } }
創(chuàng)建一個(gè)消費(fèi)類
set('group.id', 'test'); $rk = new \RdKafka\Consumer($conf); $rk->addBrokers("127.0.0.1"); $topicConf = new \RdKafka\TopicConf(); $topicConf->set('auto.commit.interval.ms', 100); $topicConf->set('offset.store.method', 'broker'); $topicConf->set('auto.offset.reset', 'smallest'); $topic = $rk->newTopic('test', $topicConf); $topic->consumeStart(0, RD_KAFKA_OFFSET_STORED); while (true) { $message = $topic->consume(0, 120*10000); switch ($message->err) { case RD_KAFKA_RESP_ERR_NO_ERROR: var_dump($message); break; case RD_KAFKA_RESP_ERR__PARTITION_EOF: echo "No more messages; will wait for more\n"; break; case RD_KAFKA_RESP_ERR__TIMED_OUT: echo "Timed out\n"; break; default: throw new \Exception($message->errstr(), $message->err); break; } } } }
總結(jié)
1、 No Java runtime present, requesting install
因?yàn)?kafka 需要 java 環(huán)境支持,所以安裝 java 環(huán)境??梢缘?javase-jdk14-downloads 選擇自己的版本進(jìn)行下載安裝
2、創(chuàng)建 topic 出現(xiàn):Replication factor: 1 larger than available brokers: 0
意思是至少有一個(gè) brokers. 也就是說(shuō)并沒(méi)有有效的 brokers 可以用。你要確保你的 kafka 已經(jīng)啟動(dòng)了。
以上就是Kafka的安裝配置的步驟,內(nèi)容較為全面,小編相信有部分知識(shí)點(diǎn)可能是我們?nèi)粘9ぷ骺赡軙?huì)見到或用到的。希望你能通過(guò)這篇文章學(xué)到更多知識(shí)。
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務(wù)器15元起步,三天無(wú)理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。