AVt天堂网 手机版,亚洲va久久久噜噜噜久久4399,天天综合亚洲色在线精品,亚洲一级Av无码毛片久久精品

當前位置:首頁 > 科技  > 軟件

聊聊消息中間件MQ

來源: 責編: 時間:2023-10-24 09:00:15 342觀看
導讀一、概念圖片 消息中間件MQ(Message Queue)是一種常用的異步通信技術,它通過將消息存儲在隊列中,實現(xiàn)生產(chǎn)者和消費者之間的解耦。MQ的主要作用是保證消息的可靠傳輸和冪等性。本質是隊列,遵循FIFO先進先出原則。只不過隊

一、概念

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

   消息中間件MQ(Message Queue)是一種常用的異步通信技術,它通過將消息存儲在隊列中,實現(xiàn)生產(chǎn)者和消費者之間的解耦。MQ的主要作用是保證消息的可靠傳輸和冪等性。本質是隊列,遵循FIFO先進先出原則。只不過隊列中存放的內容是message而已,還是一種跨進程的通信機制,用于上下游傳遞消息。在互聯(lián)網(wǎng)架構中,MQ是一種非常常見的上下游“邏輯解耦+物理解耦”的消息通信服務。使用了MQ之后,消息發(fā)送上游只需要依賴MQ,不用依賴其他服務。9n128資訊網(wǎng)——每日最新資訊28at.com

    主要是利用高效可靠的消息傳遞機制進行與平臺無關的數(shù)據(jù)交流,并基于數(shù)據(jù)通信來進行分布式系統(tǒng)的集成。9n128資訊網(wǎng)——每日最新資訊28at.com

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

二、常見的消息隊列

     當前業(yè)界比較流行的開源消息中間件包括:ActiveMQ、RabbitMQ、RocketMQ、Kafka、 ZeroMQ等,其中應用最為廣泛的要數(shù)RabbitMQ、RocketMQ、Kafka這三款。9n128資訊網(wǎng)——每日最新資訊28at.com

圖片9n128資訊網(wǎng)——每日最新資訊28at.com

三、優(yōu)缺點對比

3.1、RabbitMQ

    RabbitMQ是一套開源(MPL)的消息隊列服務軟件,是由 LShift 提供的一個 Advanced Message Queuing Protocol (AMQP) 的開源實現(xiàn),由以高性能、健壯以及可伸縮性出名的 Erlang 寫成。9n128資訊網(wǎng)——每日最新資訊28at.com

圖片9n128資訊網(wǎng)——每日最新資訊28at.com

優(yōu)點:9n128資訊網(wǎng)——每日最新資訊28at.com

erlang語言開發(fā),性能極其好,延時很低;9n128資訊網(wǎng)——每日最新資訊28at.com

吞吐量到萬級,MQ功能比較完備;9n128資訊網(wǎng)——每日最新資訊28at.com

健壯、穩(wěn)定、易用、跨平臺、支持多種語言、文檔齊全;9n128資訊網(wǎng)——每日最新資訊28at.com

有消息確認機制和持久化機制,可靠性高;9n128資訊網(wǎng)——每日最新資訊28at.com

高度可定制的路由;9n128資訊網(wǎng)——每日最新資訊28at.com

管理界面較豐富,在互聯(lián)網(wǎng)公司也有較大規(guī)模的應用;9n128資訊網(wǎng)——每日最新資訊28at.com

社區(qū)活躍度高,幾乎每個月都發(fā)布幾個版本。9n128資訊網(wǎng)——每日最新資訊28at.com

缺點:9n128資訊網(wǎng)——每日最新資訊28at.com

實現(xiàn)了代理架構,意味著消息在發(fā)送到客戶端之前可以在中央節(jié)點上排隊。此特性使得RabbitMQ易于使用和部署,但是使得其運行速度較慢,因為中央節(jié)點增加了延遲,消息封裝后也比較大。9n128資訊網(wǎng)——每日最新資訊28at.com

erlang語言開發(fā),很難看懂源碼,無法進行源碼級別的研究和定制,不利于二次維護和開發(fā)。9n128資訊網(wǎng)——每日最新資訊28at.com

rabbitmq集群動態(tài)擴展比較麻煩。9n128資訊網(wǎng)——每日最新資訊28at.com

3.2、RocketMQ

    RocketMQ 出自 阿里公司的開源產(chǎn)品,用 Java 語言實現(xiàn),在設計時參考了 Kafka,并做出了自己的一些改進,消息可靠性上比 Kafka 更好。RocketMQ在阿里集團被廣泛應用在訂單,交易,充值,流計算,消息推送,日志流式處理,binglog分發(fā)等場景。9n128資訊網(wǎng)——每日最新資訊28at.com

優(yōu)點:9n128資訊網(wǎng)——每日最新資訊28at.com

  • 單機支持 1 萬以上持久化隊列;
  • RocketMQ 的所有消息都是持久化的,先寫入系統(tǒng) PAGECACHE,然后刷盤,可以保證內存與磁盤都有一份數(shù)據(jù),訪問時,直接從內存讀取;
  • 模型簡單,接口易用(JMS 的接口很多場合并不太實用);
  • 性能非常好,可以大量堆積消息在broker中;
  • 支持多種消費,包括集群消費、廣播消費等;
  • 各個環(huán)節(jié)分布式擴展設計,主從HA;
  • 開發(fā)度較活躍,版本更新很快。

缺點:9n128資訊網(wǎng)——每日最新資訊28at.com

  • 支持的客戶端語言不多,目前是java及c++,其中c++不成熟;
  • RocketMQ社區(qū)關注度及成熟度也不及前兩者;
  • 沒有web管理界面,提供了一個CLI(命令行界面)管理工具帶來查詢、管理和診斷各種問題;
  • 沒有在 mq 核心中去實現(xiàn)JMS等接口。

9n128資訊網(wǎng)——每日最新資訊28at.com

3.3、Kafka

    Apache Kafka是一個分布式消息發(fā)布訂閱系統(tǒng)。它最初由LinkedIn公司基于獨特的設計實現(xiàn)為一個分布式的提交日志系統(tǒng)( a distributed commit log),,之后成為Apache項目的一部分。Kafka系統(tǒng)快速、可擴展并且可持久化。它的分區(qū)特性,可復制和可容錯都是其不錯的特性。9n128資訊網(wǎng)——每日最新資訊28at.com

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

9n128資訊網(wǎng)——每日最新資訊28at.com

優(yōu)點:9n128資訊網(wǎng)——每日最新資訊28at.com

客戶端語言豐富,支持java、、php、ruby、python、go等多種語言;9n128資訊網(wǎng)——每日最新資訊28at.com

性能卓越,單機寫入TPS約在百萬條/秒,消息大小10個字節(jié);9n128資訊網(wǎng)——每日最新資訊28at.com

提供完全分布式架構, 并有replica機制, 擁有較高的可用性和可靠性, 理論上支持消息無限堆積;9n128資訊網(wǎng)——每日最新資訊28at.com

支持批量操作;9n128資訊網(wǎng)——每日最新資訊28at.com

消費者采用Pull方式獲取消息, 消息有序, 通過控制能夠保證所有消息被消費且僅被消費一次;9n128資訊網(wǎng)——每日最新資訊28at.com

有優(yōu)秀的第三方Kafka Web管理界面Kafka-Manager;9n128資訊網(wǎng)——每日最新資訊28at.com

在日志領域比較成熟,被多家公司和多個開源項目使用。9n128資訊網(wǎng)——每日最新資訊28at.com

缺點:9n128資訊網(wǎng)——每日最新資訊28at.com

Kafka單機超過64個隊列/分區(qū),Load會發(fā)生明顯的飆高現(xiàn)象,隊列越多,load越高,發(fā)送消息響應時間變長;9n128資訊網(wǎng)——每日最新資訊28at.com

使用短輪詢方式,實時性取決于輪詢間隔時間;9n128資訊網(wǎng)——每日最新資訊28at.com

消費失敗不支持重試;9n128資訊網(wǎng)——每日最新資訊28at.com

支持消息順序,但是一臺代理宕機后,就會產(chǎn)生消息亂序;9n128資訊網(wǎng)——每日最新資訊28at.com

社區(qū)更新較慢。9n128資訊網(wǎng)——每日最新資訊28at.com

四、主要應用場景

4.1、流量削峰

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

    常用于高并發(fā)場景,進行削峰。例如:現(xiàn)在有一個訂單系統(tǒng),高峰期訂單量過多,而系統(tǒng)最多只能處理1w次/s。此時可以通過消息隊列使得這些超出處理能力的下單請求處于隊列中進行等待,而不至于將所有的請求全部一次性打到訂單系統(tǒng)中,造成訂單系統(tǒng)宕機。這就相當于將實際一秒鐘內的訂單拆分成多個段來進行處理,這樣的處理方式雖然加長了等待時間,但是有缺點總比不能用好。這樣可以緩解業(yè)務量對系統(tǒng)帶來的沖擊,避免系統(tǒng)宕機而造成不能使用。9n128資訊網(wǎng)——每日最新資訊28at.com

     Redis緩存預熱。緩存預熱實際上是將熱點數(shù)據(jù)提前緩存到Redis中進行儲存,避免高峰期數(shù)據(jù)請求直接下達到數(shù)據(jù)庫造成數(shù)據(jù)庫崩潰。同樣流量消峰,也是達到此效果,只不過一個針對的是數(shù)據(jù)庫方面,一個針對的是服務層的請求。9n128資訊網(wǎng)——每日最新資訊28at.com

參考案例:springBoot對接kafka,批量、并發(fā)、異步獲取消息,并動態(tài)、批量插入庫表9n128資訊網(wǎng)——每日最新資訊28at.com

4.2、應用解耦

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

    若訂單系統(tǒng)耦合調用支付系統(tǒng)、庫存系統(tǒng)或者物流系統(tǒng),一旦這三個系統(tǒng)發(fā)生故障,訂單系統(tǒng)就會處于不可用的狀態(tài)。如果轉變?yōu)橛孟㈥犃刑幚碚{用請求,可以減少很多問題。當故障發(fā)生時,子系統(tǒng)要處理的內存會被緩存在消息隊列中,而用戶的下單操作還是可以正常完成;故障處理完之后,再處理用戶的訂單信息即可。整個過程中的故障對于用戶來說是無感的,可以提高系統(tǒng)的可用性。9n128資訊網(wǎng)——每日最新資訊28at.com

4.3、異步處理

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

    當A需要調用B,B需要花很長時間來處理調用,A需要得知B何時處理完畢。可以實現(xiàn)的方式很多,但是很不方便。使用消息隊列可以很輕松實現(xiàn)。只需要監(jiān)聽B處理完成的消息即可,當B處理完畢,將處理完畢的信息發(fā)送給消息隊列,之后消息隊列將消息反饋給A即可。這樣的方式,A既不用循環(huán)調用B的查詢API,也不需要B提供callback API(回調API),同時B也不用完成這些操作;A還能及時得到B服務處理完成的信息。9n128資訊網(wǎng)——每日最新資訊28at.com

參考案例:springBoot對接kafka,批量、并發(fā)、異步獲取消息,并動態(tài)、批量插入庫表9n128資訊網(wǎng)——每日最新資訊28at.com

五、選哪一種中間件?

圖片圖片9n128資訊網(wǎng)——每日最新資訊28at.com

個人建議:對于大部分公司,可以優(yōu)選選擇使用RabbitMQ,其次選擇Kafka,相比Kafka,RabbitMQ適合對數(shù)據(jù)一致性、穩(wěn)定性和可靠性要求很高的場景,有消息確認機制和持久化機制,可靠性非常高。9n128資訊網(wǎng)——每日最新資訊28at.com

六、詳細對比參數(shù)

圖片 圖片 9n128資訊網(wǎng)——每日最新資訊28at.com

本文鏈接:http://www.tebozhan.com/showinfo-26-14727-0.html聊聊消息中間件MQ

聲明:本網(wǎng)頁內容旨在傳播知識,若有侵權等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 讓圖片完美適應:掌握 CSS 的object-fit與object-position

下一篇: 如何從單體架構遷移到微服務架構:挑戰(zhàn)和最佳實踐

標簽:
  • 熱門焦點
  • 7月安卓手機性能榜:紅魔8S Pro再奪榜首

    7月份的手機市場風平浪靜,除了紅魔和努比亞帶來了兩款搭載驍龍8Gen2領先版處理器的新機之外,別的也想不到有什么新品了,這也正常,通常6月7月都是手機廠商修整的時間,進入8月份之
  • 十個可以手動編寫的 JavaScript 數(shù)組 API

    JavaScript 中有很多API,使用得當,會很方便,省力不少。 你知道它的原理嗎? 今天這篇文章,我們將對它們進行一次小總結。現(xiàn)在開始吧。1.forEach()forEach()用于遍歷數(shù)組接收一參
  • 摸魚心法第一章——和配置文件說拜拜

    為了能摸魚我們團隊做了容器化,但是帶來的問題是服務配置文件很麻煩,然后大家在群里進行了“親切友好”的溝通圖片圖片圖片圖片對比就對比,簡單對比下獨立配置中心和k8s作為配
  • .NET 程序的 GDI 句柄泄露的再反思

    一、背景1. 講故事上個月我寫過一篇 如何洞察 C# 程序的 GDI 句柄泄露 文章,當時用的是 GDIView + WinDbg 把問題搞定,前者用來定位泄露資源,后者用來定位泄露代碼,后面有朋友反
  • 大廠卷向扁平化

    來源:新熵作者丨南枝 編輯丨月見大廠職級不香了。俗話說,兵無常勢,水無常形,互聯(lián)網(wǎng)企業(yè)調整職級體系并不稀奇。7月13日,淘寶天貓集團啟動了近年來最大的人力制度改革,目前已形成一
  • 小米公益基金會捐贈2500萬元馳援北京、河北暴雨救災

    8月2日消息,今日小米科技創(chuàng)始人雷軍在其微博上發(fā)布消息稱,小米公益基金會宣布捐贈2500萬元馳援北京、河北暴雨救災。攜手抗災,京冀安康!以下為公告原文
  • 網(wǎng)傳小米汽車開始篩選交付中心 建筑面積不低于3000平方米

    7月7日消息,近日有微博網(wǎng)友@長三角行健者爆料稱,據(jù)經(jīng)銷商集團反饋,小米汽車目前已經(jīng)開始了交付中心的篩選工作,要求候選場地至少有120個車位,建筑不能低
  • 滴滴違法違規(guī)被罰80.26億 共存在16項違法事實

    滴滴違法違規(guī)被罰80.26億 存在16項違法事實開始于2121年7月,歷經(jīng)一年時間,網(wǎng)絡安全審查辦公室對“滴滴出行”網(wǎng)絡安全審查終于有了一個暫時的結束。據(jù)“網(wǎng)信
  • 蘋果MacBook Pro 2021測試:仍不支持平滑滾動

    據(jù)10月30日9to5 Mac 消息報道,蘋果新的 14 英寸和 16 英寸 MacBook Pro 2021 上市后獲得了不錯的評價,亮點包括行業(yè)領先的性能,令人印象深刻的電池續(xù)航,精美豐
Top