黄视频网站在线免费观看-黄视频网站在线看-黄视频网站在线观看-黄视频网站免费看-黄视频网站免费观看-黄视频网站免费

千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  技術干貨  > 使用RocketMQ實現消息順序消費

使用RocketMQ實現消息順序消費

來源:千鋒教育
發布人:syq
時間: 2022-12-30 10:19:07 1672366747

  消息的順序消費在很多交易型的業務場景中都會被要求實現,而且,消息隊列的順序消費解決方案在很多互聯網公司的面試中經常會被問到。

  在使用了多個消息隊列后發現,雖然每個消息隊列都有各自的順序消費解決方案,但是RocketMQ經過了多年電商的洗禮,其功能性的要求,已經設計的非常全面。這樣的全面可以通過RocketMQ消息模型的架構設計得以體現。我們看看RocketMQ是怎么解決消息的順序消費。

使用RocketMQ

  一、RocketMQ的消息模型

  1.技術架構

32

  RocketMQ架構上主要分為四部分,如上圖所示:

  NameServer:NameServer是一個非常簡單的Topic路由注冊中心,其角色類似Dubbo中的zookeeper,支持Broker的動態注冊與發現。主要包括兩個功能:Broker管理,NameServer接受Broker集群的注冊信息并且保存下來作為路由信息的基本數據。然后提供心跳檢測機制,檢查Broker是否還存活;路由信息管理,每個NameServer將保存關于Broker集群的整個路由信息和用于客戶端查詢的隊列信息。然后Producer和Conumser通過NameServer就可以知道整個Broker集群的路由信息,從而進行消息的投遞和消費。NameServer通常也是集群的方式部署,各實例間相互不進行信息通訊。Broker是向每一臺NameServer注冊自己的路由信息,所以每一個NameServer實例上面都保存一份完整的路由信息。當某個NameServer因某種原因下線了,Broker仍然可以向其它NameServer同步其路由信息,Producer,Consumer仍然可以動態感知Broker的路由的信息。

  Producer:消息的發布者,支持分布式集群方式部署。消息發布者通過消息隊列的負載均衡模塊選擇相應的Broker集群進行消息投遞,投遞的過程低延遲并且支持快速失敗。

  Consumer:消息的消費者,支持分布式集群方式部署。RocketMQ同時支持push推和pull拉的兩種消息消費模式。消息消費者也支持集群和廣播兩種消費方式,同時提供了實時消息的訂閱機制,滿足大多數用戶的需求。

  BrokerServer:Broker主要負責消息的存儲、投遞和查詢以及服務高可用保證,為了實現這些功能,Broker包含了以下幾個重要子模塊。

  Remoting Module:整個Broker的實體,負責處理來自clients端的請求。

  Client Manager:負責管理客戶端(Producer/Consumer)和維護Consumer的Topic訂閱信息。

  Store Service:提供方便簡單的API接口處理消息存儲到物理硬盤和查詢功能。

  HA Service:高可用服務,提供Master Broker 和 Slave Broker之間的數據同步功能。

  Index Service:根據特定的Message key對投遞到Broker的消息進行索引服務,以提供消息的快速查詢。

32.2

  2. 部署架構

33

  RocketMQ 網絡部署特點

  NameServer是一個幾乎無狀態節點,可集群部署,節點之間無任何信息同步。

  Broker部署相對復雜,Broker分為Master與Slave,一個Master可以對應多個Slave,但是一個Slave只能對應一個Master,Master與Slave 的對應關系通過指定相同的BrokerName,不同的BrokerId 來定義,BrokerId為0表示Master,非0表示Slave。Master也可以部署多個。每個Broker與NameServer集群中的所有節點建立長連接,定時注冊Topic信息到所有NameServer。注意:當前RocketMQ版本在部署架構上支持一Master多Slave,但只有BrokerId=1的從服務器才會參與消息的讀負載。

  Producer與NameServer集群中的其中一個節點(隨機選擇)建立長連接,定期從NameServer獲取Topic路由信息,并向提供Topic 服務的Master建立長連接,且定時向Master發送信息。Producer完全無狀態,可集群部署。

  Consumer與NameServer集群中的其中一個節點(隨機選擇)建立長連接,定期從NameServer獲取Topic路由信息,并向提供Topic服務的Master、Slave建立長連接,且定時向Master、Slave發送信息。Consumer既可以從Master訂閱消息,也可以從Slave訂閱消息,消費者在向Master拉取消息時,Master服務器會根據拉取偏移量與最大偏移量的距離(判斷是否讀老消息,產生讀I/O),以及從服務器是否可讀等因素建議下一次是從Master還是Slave拉取。

  結合部署架構圖,描述集群工作流程:

  啟動NameServer,NameServer起來后監聽端口,等待Broker、Producer、Consumer連上來,相當于一個路由控制中心。

  Broker啟動,跟所有的NameServer保持長連接,定時發送心跳包。心跳包中包含當前Broker信息(IP+端口等)以及存儲所有Topic信息。注冊成功后,NameServer集群中就有Topic跟Broker的映射關系。

  收發消息前,先創建Topic,創建Topic時需要指定該Topic要存儲在哪些Broker上,也可以在發送消息時自動創建Topic。

  Producer發送消息,啟動時先跟NameServer集群中的其中一臺建立長連接,并從NameServer中獲取當前發送的Topic存在哪些Broker上,輪詢從隊列列表中選擇一個隊列,然后與隊列所在的Broker建立長連接從而向Broker發消息。

  Consumer跟Producer類似,跟其中一臺NameServer建立長連接,獲取當前訂閱Topic存在哪些Broker上,然后直接跟Broker建立連接通道,開始消費消息。

  二、順序消息的應用場景

  順序消費的應用場景有很多,無論是在面試,或是實際生產環境中要解決順序消費問題,都需要對消息隊列的應用場景有一定的理解。

  1.AIOT中消息的順序消費

  比如有這么一個物聯網的應用場景,IOT中的設備在初始化時需要按順序接收這樣的消息:

  操作1:設置設備名稱

  操作2:設置設備的網絡

  操作3:重啟設備使配置生效

  如果這個順序顛倒了,可能就沒有辦法讓設備的配置生效,因為只有重啟設備才能讓配置生效,但重啟的消息卻在設置設備消息之前被消費。

  2.用戶服務中的順序消費

  應用為了提高用戶粘合度,往往通過積分制度提供用戶活躍度。比如接下來有這一系列的場景:

  操作1:新注冊用戶,將用戶積分設置為10分。

  操作2:獎勵行為,比如用戶完善了個人信息,則積分+5分。

  操作3:懲罰行為,比如用戶發表違規言論,則積分-3分。

  如果上述的操作是順序進行的,則用戶積分為12分。如果上述操作的步驟順序發生了變化,比如消費者先消費了操作2的消息,再消費操作1和3的消息,則分數變為7分,此時就出現了因為亂序消費導致的錯誤結果。

  三、如何實現順序消息

  順序消息要求消費者消費消息的順序按照發送者發送消息的順序執行。RocketMQ中實現的消息順序有兩個維度,分別是局部有序和全局有序。

  1.局部有序

34

  局部消息指的是消費者消費某個topic的某個隊列中的消息是順序的。在圖上的八個隊列中,消費者可以隨機的消費這8個隊列,也就是說消費者不能保證消費隊列的順序。但是消費者在消費某一個隊列的時候,一定可以進行順序消費。也就是說,在消費者兩次訪問一個隊列中的消息時,一定是按照從左到右的順序依次消費消息。所以針對于某一個隊列來講,消費是順序的。但如果把問題定位在整個隊列中時,不同的消息在不同的隊列中,又不能保證消息的有序性,不如消息A到了隊列2,消息B到了隊列1,消費者先消費了隊列1再消費隊列2,就不能保證有序性。但如果消息C隨著消息B進入隊列1,那么消息C一定是在消息B之后被消費。

  消費者使用MessageListenerOrderly類做消息監聽,實現局部順序。

35

  2.全局有序

  消費者消費全部消息都是順序的,只能通過一個某個topic只有一個隊列才能實現,這種應用場景較少,且性能較差。

36

  3.亂序消費

  消費者消費消息不需要關注消息的順序。消費者使用MessageListenerConcurrently類做消息監聽。

37

tags:
聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
免费毛片基地| 欧美国产日韩精品| 黄视频网站在线看| 国产视频一区二区在线播放| 国产精品免费精品自在线观看| 亚洲爆爽| 国产一区二区精品| 可以免费看毛片的网站| 青青久久精品国产免费看| 国产不卡在线看| 亚飞与亚基在线观看| 99久久精品国产免费| 天天做人人爱夜夜爽2020| 国产极品精频在线观看| 免费国产在线视频| 国产91视频网| 国产成人精品综合久久久| 亚洲精品久久久中文字| 国产伦精品一区二区三区无广告| 尤物视频网站在线观看| 成人免费网站久久久| 成人免费观看的视频黄页| 国产一区二区精品尤物| 久久精品免视看国产明星| 亚洲 激情| 亚洲第一色在线| 四虎影视久久久| 久久国产精品自由自在| 久久99爰这里有精品国产| 日韩女人做爰大片| 国产成a人片在线观看视频| 日本伦理黄色大片在线观看网站| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 日本在线不卡视频| 欧美日本免费| 99热视热频这里只有精品| 亚洲www美色| 亚洲爆爽| 久草免费在线视频| 国产伦精品一区二区三区无广告| 国产极品精频在线观看| 四虎久久影院| 色综合久久久久综合体桃花网| 香蕉视频久久| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 91麻豆精品国产自产在线 | 天天色色网| 天天色色网| 久久国产一区二区| 国产高清在线精品一区二区| 在线观看导航| 日韩在线观看免费完整版视频| 四虎影视精品永久免费网站| 欧美夜夜骑 青草视频在线观看完整版 久久精品99无色码中文字幕 欧美日韩一区二区在线观看视频 欧美中文字幕在线视频 www.99精品 香蕉视频久久 | 国产网站免费| 免费国产在线观看| 可以免费看污视频的网站| 天天做人人爱夜夜爽2020| 国产网站在线| 日韩中文字幕一区| 亚洲精品影院久久久久久| 精品视频在线看 | 久久国产精品永久免费网站| 精品国产亚一区二区三区| 成人免费福利片在线观看| 国产成人精品综合在线| 亚洲 激情| 亚洲精品影院一区二区| 台湾美女古装一级毛片| 二级特黄绝大片免费视频大片| 日韩avdvd| 日韩avdvd| 999久久狠狠免费精品| 欧美激情在线精品video| 国产福利免费观看| 成人av在线播放| 国产a一级| 国产极品精频在线观看| 亚洲精品影院| 欧美国产日韩精品| 四虎影视库| 九九干| 麻豆污视频| 一级片免费在线观看视频| 国产精品免费久久| 成人免费网站视频ww| 成人影院一区二区三区| 欧美日本免费| 韩国三级视频网站| 国产精品1024永久免费视频| 免费毛片基地| 欧美18性精品| 麻豆污视频| 成人影院一区二区三区| 国产美女在线一区二区三区| 精品在线视频播放| 日本免费区| 青青久热| 美国一区二区三区| 你懂的在线观看视频| 欧美电影免费看大全| 国产91精品系列在线观看| 尤物视频网站在线| 国产一区二区精品久久91| 亚洲第一色在线| 欧美激情一区二区三区视频高清| 国产成人精品一区二区视频| 天堂网中文在线| 九九久久国产精品大片| 日本在线播放一区| 精品国产亚洲人成在线| 成人免费观看男女羞羞视频| 成人a大片在线观看| 好男人天堂网 久久精品国产这里是免费 国产精品成人一区二区 男人天堂网2021 男人的天堂在线观看 丁香六月综合激情 | 欧美a级片视频| 亚洲天堂一区二区三区四区| 日本在线www| 精品国产亚洲人成在线| 日本特黄特黄aaaaa大片| 一 级 黄 中国色 片| 精品视频一区二区| 日日夜夜婷婷| 日韩综合| 亚欧成人乱码一区二区| 成人高清免费| 九九精品久久久久久久久| 国产一区二区精品在线观看| 999久久66久6只有精品| 精品在线观看一区| 99热视热频这里只有精品| 精品国产香蕉伊思人在线又爽又黄| 韩国毛片 免费| 一级毛片视频播放| 精品在线免费播放| 成人免费高清视频| 欧美α片无限看在线观看免费| 亚洲女人国产香蕉久久精品| 韩国毛片 免费| 国产美女在线一区二区三区| 日韩男人天堂| 国产精品12| 久久成人综合网| 国产91精品一区| 日韩一级黄色大片| 可以免费看毛片的网站| 成人a大片在线观看| 日本伦理网站| 国产亚洲精品成人a在线| 可以免费看污视频的网站| 成人在激情在线视频| 国产成人精品一区二区视频| 亚欧视频在线| 成人免费一级纶理片 | 亚欧成人毛片一区二区三区四区| 国产精品自拍在线| 精品视频在线观看一区二区三区| 韩国三级视频网站| 精品毛片视频| 九九久久99| 国产一区免费在线观看| 亚洲精品影院一区二区| 日本久久久久久久 97久久精品一区二区三区 狠狠色噜噜狠狠狠狠97 日日干综合 五月天婷婷在线观看高清 九色福利视频 | 99色视频| 高清一级淫片a级中文字幕| 中文字幕一区二区三区 精品| 中文字幕97| 天堂网中文在线| 91麻豆国产| 久久国产精品自由自在| 四虎影视精品永久免费网站| 欧美国产日韩一区二区三区| 一本高清在线| 国产原创中文字幕| 精品视频免费观看| 亚洲第一色在线| 可以免费看污视频的网站| 精品国产亚洲人成在线| 日韩在线观看免费| 久久99这里只有精品国产| 成人免费网站久久久| 久久99中文字幕| 国产不卡高清| 美女免费精品视频在线观看| 精品国产亚洲人成在线| 国产不卡在线看| 国产精品1024永久免费视频| 台湾美女古装一级毛片| 日本特黄一级| 二级特黄绝大片免费视频大片| 日韩在线观看视频黄| 国产美女在线一区二区三区| 欧美激情一区二区三区在线| 四虎久久影院| 亚飞与亚基在线观看| 久久99爰这里有精品国产| 成人a大片在线观看| 午夜久久网| 韩国三级一区| 成人免费高清视频| 一级片片|