真实的国产乱ⅩXXX66竹夫人,五月香六月婷婷激情综合,亚洲日本VA一区二区三区,亚洲精品一区二区三区麻豆

成都創(chuàng)新互聯(lián)網(wǎng)站制作重慶分公司

RocketMQ中怎么判斷消息堆積

這期內(nèi)容當(dāng)中小編將會給大家?guī)碛嘘P(guān)RocketMQ中怎么判斷消息堆積,文章內(nèi)容豐富且以專業(yè)的角度為大家分析和敘述,閱讀完這篇文章希望大家可以有所收獲。

創(chuàng)新互聯(lián)專業(yè)為企業(yè)提供云龍網(wǎng)站建設(shè)、云龍做網(wǎng)站、云龍網(wǎng)站設(shè)計、云龍網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計與制作、云龍企業(yè)網(wǎng)站模板建站服務(wù),10年云龍做網(wǎng)站經(jīng)驗,不只是建網(wǎng)站,更提供有價值的思路和整體網(wǎng)絡(luò)服務(wù)。

一 機器部署

1、機器組成

7臺機器,均為16G內(nèi)存  

每臺服務(wù)器均有4個CPU,2核

RocketMQ中怎么判斷消息堆積

2、運行環(huán)境配置

RocketMQ中怎么判斷消息堆積

3、刷盤方式

每臺機器master機器均采用異步刷盤方式

RocketMQ中怎么判斷消息堆積

RocketMQ中怎么判斷消息堆積

二 性能評測

1、評測目的

   測試rocketmq是否存在消息堆積場景。

2、評測指標(biāo)

    producer發(fā)送消息的maxOffset與consumer消費消息的currOffset的差異值

    給定的常量消息堆積數(shù)值。

3、評測邏輯

  若消息offset的差異值 大于 常量堆積數(shù)值,則認(rèn)為存在消息堆積的情況。

    反之則不存在消息堆積。

4、評測過程

       (1)producer端向topic名稱為“orderTopicTest”的隊列發(fā)送海量消息,定為40000條。

    (2)consumer端訂閱特定名稱的topic,并進行消費。每次消費消息,記錄當(dāng)前消息的Offset;并根據(jù)“MAX_OFFSET”關(guān)鍵字,從當(dāng)前消息對象獲取消息最大偏移量的屬性值,然后計算偏移量MAX_OFFSET與offset的差異值。關(guān)鍵代碼如下:

RocketMQ中怎么判斷消息堆積

(3)發(fā)送消息,記錄發(fā)送的消息及其相關(guān)日志。

      如果消息偏移量offset的差異值 大于 給定的消息堆積個數(shù)值,則記錄日志,說明存在消息堆積的情況。反之則不存在消息堆積。產(chǎn)生的日志如下

RocketMQ中怎么判斷消息堆積

RocketMQ中怎么判斷消息堆積

RocketMQ中怎么判斷消息堆積

   (4)消息堆積處理

    從日志看出,因producer端先運行了好一會兒,已經(jīng)產(chǎn)生了741個消息擠壓;

    隨著consumer消費服務(wù)開啟,消息一邊產(chǎn)生,一邊消費,整體來說消息消費的速率高于消息產(chǎn)生的速率,所以消息offset的差異值在不斷的減少,故第二個截圖的情況存在:消息offset的差異值小于閾值100,所以存在正常消費與消息堆積的混合情況。

    consumer繼續(xù)消費消息,producer產(chǎn)生消息的速率跟不上consumer的消費速率,故第三圖就已經(jīng)是正常消息消費了,即此時的消息堆積的那一部分消息已被消費。

    (5)注意事項

    rocketmq官網(wǎng)文檔指出,集群在有Slave情況下,Master一旦發(fā)現(xiàn)Consumer訪問堆積在磁盤的數(shù)據(jù)時,訪問堆積在磁盤的數(shù)據(jù)時,回向consumer下達(dá)一個指令,命令consumer從slave拉取數(shù)據(jù),這樣使得正常發(fā)消息的consumer與正常消費消息的consumer都不會收到影響。

   此種情況前提:

    A)集群存在salve機器

    B)consumer存在消息堆積

    C)consumer因某種原因訪問磁盤數(shù)據(jù)(而非訪問pageCache等內(nèi)存數(shù)據(jù))

    這種情況的場景要求苛刻,需要在高并發(fā)的場景下才可能出現(xiàn);此外,生產(chǎn)環(huán)境的集群配置,出現(xiàn)消息堆積的情況,還有可能是受到磁盤大小、網(wǎng)絡(luò)因素等等原因,本次測試并未深入到此場景,留待后續(xù)進一步測試。

二 評測結(jié)果

     1、消息堆積是一個相對值,針對consumer消費消息,某個topic隊列中最大的maxOffset與當(dāng)前消費消息的currOffset的差異值,大于某個特定的閾值,才會出現(xiàn)消息堆積。

    2、當(dāng)發(fā)送消息高于消息消費的速率,則可能出現(xiàn)消息堆積。

    3、其他條件保存正常水平,存在消息堆積的那一部分消息會隨著時間不斷減少直至消息被消費。

    4、針對過多的消息堆積,可以選擇丟棄不重要的消息,即僅僅記錄日志,而不真正消費,以此保證消息的完整性,以此來特殊處理消息的堆積情況。

上述就是小編為大家分享的RocketMQ中怎么判斷消息堆積了,如果剛好有類似的疑惑,不妨參照上述分析進行理解。如果想知道更多相關(guān)知識,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道。


當(dāng)前名稱:RocketMQ中怎么判斷消息堆積
URL地址:http://weahome.cn/article/gjgpes.html

其他資訊

在線咨詢

微信咨詢

電話咨詢

028-86922220(工作日)

18980820575(7×24)

提交需求

返回頂部