日韩成人免费在线_国产成人一二_精品国产免费人成电影在线观..._日本一区二区三区久久久久久久久不

當前位置:首頁 > 科技  > 軟件

聊聊消息中間件MQ

來源: 責編: 時間:2023-10-24 09:00:15 290觀看
導讀一、概念圖片 消息中間件MQ(Message Queue)是一種常用的異步通信技術,它通過將消息存儲在隊列中,實現生產者和消費者之間的解耦。MQ的主要作用是保證消息的可靠傳輸和冪等性。本質是隊列,遵循FIFO先進先出原則。只不過隊

一、概念

圖片圖片Lmk28資訊網——每日最新資訊28at.com

   消息中間件MQ(Message Queue)是一種常用的異步通信技術,它通過將消息存儲在隊列中,實現生產者和消費者之間的解耦。MQ的主要作用是保證消息的可靠傳輸和冪等性。本質是隊列,遵循FIFO先進先出原則。只不過隊列中存放的內容是message而已,還是一種跨進程的通信機制,用于上下游傳遞消息。在互聯網架構中,MQ是一種非常常見的上下游“邏輯解耦+物理解耦”的消息通信服務。使用了MQ之后,消息發送上游只需要依賴MQ,不用依賴其他服務。Lmk28資訊網——每日最新資訊28at.com

    主要是利用高效可靠的消息傳遞機制進行與平臺無關的數據交流,并基于數據通信來進行分布式系統的集成。Lmk28資訊網——每日最新資訊28at.com

圖片圖片Lmk28資訊網——每日最新資訊28at.com

二、常見的消息隊列

     當前業界比較流行的開源消息中間件包括:ActiveMQ、RabbitMQ、RocketMQ、Kafka、 ZeroMQ等,其中應用最為廣泛的要數RabbitMQ、RocketMQ、Kafka這三款。Lmk28資訊網——每日最新資訊28at.com

圖片Lmk28資訊網——每日最新資訊28at.com

三、優缺點對比

3.1、RabbitMQ

    RabbitMQ是一套開源(MPL)的消息隊列服務軟件,是由 LShift 提供的一個 Advanced Message Queuing Protocol (AMQP) 的開源實現,由以高性能、健壯以及可伸縮性出名的 Erlang 寫成。Lmk28資訊網——每日最新資訊28at.com

圖片Lmk28資訊網——每日最新資訊28at.com

優點:Lmk28資訊網——每日最新資訊28at.com

erlang語言開發,性能極其好,延時很低;Lmk28資訊網——每日最新資訊28at.com

吞吐量到萬級,MQ功能比較完備;Lmk28資訊網——每日最新資訊28at.com

健壯、穩定、易用、跨平臺、支持多種語言、文檔齊全;Lmk28資訊網——每日最新資訊28at.com

有消息確認機制和持久化機制,可靠性高;Lmk28資訊網——每日最新資訊28at.com

高度可定制的路由;Lmk28資訊網——每日最新資訊28at.com

管理界面較豐富,在互聯網公司也有較大規模的應用;Lmk28資訊網——每日最新資訊28at.com

社區活躍度高,幾乎每個月都發布幾個版本。Lmk28資訊網——每日最新資訊28at.com

缺點:Lmk28資訊網——每日最新資訊28at.com

實現了代理架構,意味著消息在發送到客戶端之前可以在中央節點上排隊。此特性使得RabbitMQ易于使用和部署,但是使得其運行速度較慢,因為中央節點增加了延遲,消息封裝后也比較大。Lmk28資訊網——每日最新資訊28at.com

erlang語言開發,很難看懂源碼,無法進行源碼級別的研究和定制,不利于二次維護和開發。Lmk28資訊網——每日最新資訊28at.com

rabbitmq集群動態擴展比較麻煩。Lmk28資訊網——每日最新資訊28at.com

3.2、RocketMQ

    RocketMQ 出自 阿里公司的開源產品,用 Java 語言實現,在設計時參考了 Kafka,并做出了自己的一些改進,消息可靠性上比 Kafka 更好。RocketMQ在阿里集團被廣泛應用在訂單,交易,充值,流計算,消息推送,日志流式處理,binglog分發等場景。Lmk28資訊網——每日最新資訊28at.com

優點:Lmk28資訊網——每日最新資訊28at.com

  • 單機支持 1 萬以上持久化隊列;
  • RocketMQ 的所有消息都是持久化的,先寫入系統 PAGECACHE,然后刷盤,可以保證內存與磁盤都有一份數據,訪問時,直接從內存讀取;
  • 模型簡單,接口易用(JMS 的接口很多場合并不太實用);
  • 性能非常好,可以大量堆積消息在broker中;
  • 支持多種消費,包括集群消費、廣播消費等;
  • 各個環節分布式擴展設計,主從HA;
  • 開發度較活躍,版本更新很快。

缺點:Lmk28資訊網——每日最新資訊28at.com

  • 支持的客戶端語言不多,目前是java及c++,其中c++不成熟;
  • RocketMQ社區關注度及成熟度也不及前兩者;
  • 沒有web管理界面,提供了一個CLI(命令行界面)管理工具帶來查詢、管理和診斷各種問題;
  • 沒有在 mq 核心中去實現JMS等接口。

Lmk28資訊網——每日最新資訊28at.com

3.3、Kafka

    Apache Kafka是一個分布式消息發布訂閱系統。它最初由LinkedIn公司基于獨特的設計實現為一個分布式的提交日志系統( a distributed commit log),,之后成為Apache項目的一部分。Kafka系統快速、可擴展并且可持久化。它的分區特性,可復制和可容錯都是其不錯的特性。Lmk28資訊網——每日最新資訊28at.com

圖片圖片Lmk28資訊網——每日最新資訊28at.com

Lmk28資訊網——每日最新資訊28at.com

優點:Lmk28資訊網——每日最新資訊28at.com

客戶端語言豐富,支持java、、php、ruby、python、go等多種語言;Lmk28資訊網——每日最新資訊28at.com

性能卓越,單機寫入TPS約在百萬條/秒,消息大小10個字節;Lmk28資訊網——每日最新資訊28at.com

提供完全分布式架構, 并有replica機制, 擁有較高的可用性和可靠性, 理論上支持消息無限堆積;Lmk28資訊網——每日最新資訊28at.com

支持批量操作;Lmk28資訊網——每日最新資訊28at.com

消費者采用Pull方式獲取消息, 消息有序, 通過控制能夠保證所有消息被消費且僅被消費一次;Lmk28資訊網——每日最新資訊28at.com

有優秀的第三方Kafka Web管理界面Kafka-Manager;Lmk28資訊網——每日最新資訊28at.com

在日志領域比較成熟,被多家公司和多個開源項目使用。Lmk28資訊網——每日最新資訊28at.com

缺點:Lmk28資訊網——每日最新資訊28at.com

Kafka單機超過64個隊列/分區,Load會發生明顯的飆高現象,隊列越多,load越高,發送消息響應時間變長;Lmk28資訊網——每日最新資訊28at.com

使用短輪詢方式,實時性取決于輪詢間隔時間;Lmk28資訊網——每日最新資訊28at.com

消費失敗不支持重試;Lmk28資訊網——每日最新資訊28at.com

支持消息順序,但是一臺代理宕機后,就會產生消息亂序;Lmk28資訊網——每日最新資訊28at.com

社區更新較慢。Lmk28資訊網——每日最新資訊28at.com

四、主要應用場景

4.1、流量削峰

圖片圖片Lmk28資訊網——每日最新資訊28at.com

    常用于高并發場景,進行削峰。例如:現在有一個訂單系統,高峰期訂單量過多,而系統最多只能處理1w次/s。此時可以通過消息隊列使得這些超出處理能力的下單請求處于隊列中進行等待,而不至于將所有的請求全部一次性打到訂單系統中,造成訂單系統宕機。這就相當于將實際一秒鐘內的訂單拆分成多個段來進行處理,這樣的處理方式雖然加長了等待時間,但是有缺點總比不能用好。這樣可以緩解業務量對系統帶來的沖擊,避免系統宕機而造成不能使用。Lmk28資訊網——每日最新資訊28at.com

     Redis緩存預熱。緩存預熱實際上是將熱點數據提前緩存到Redis中進行儲存,避免高峰期數據請求直接下達到數據庫造成數據庫崩潰。同樣流量消峰,也是達到此效果,只不過一個針對的是數據庫方面,一個針對的是服務層的請求。Lmk28資訊網——每日最新資訊28at.com

參考案例:springBoot對接kafka,批量、并發、異步獲取消息,并動態、批量插入庫表Lmk28資訊網——每日最新資訊28at.com

4.2、應用解耦

圖片圖片Lmk28資訊網——每日最新資訊28at.com

    若訂單系統耦合調用支付系統、庫存系統或者物流系統,一旦這三個系統發生故障,訂單系統就會處于不可用的狀態。如果轉變為用消息隊列處理調用請求,可以減少很多問題。當故障發生時,子系統要處理的內存會被緩存在消息隊列中,而用戶的下單操作還是可以正常完成;故障處理完之后,再處理用戶的訂單信息即可。整個過程中的故障對于用戶來說是無感的,可以提高系統的可用性。Lmk28資訊網——每日最新資訊28at.com

4.3、異步處理

圖片圖片Lmk28資訊網——每日最新資訊28at.com

    當A需要調用B,B需要花很長時間來處理調用,A需要得知B何時處理完畢。可以實現的方式很多,但是很不方便。使用消息隊列可以很輕松實現。只需要監聽B處理完成的消息即可,當B處理完畢,將處理完畢的信息發送給消息隊列,之后消息隊列將消息反饋給A即可。這樣的方式,A既不用循環調用B的查詢API,也不需要B提供callback API(回調API),同時B也不用完成這些操作;A還能及時得到B服務處理完成的信息。Lmk28資訊網——每日最新資訊28at.com

參考案例:springBoot對接kafka,批量、并發、異步獲取消息,并動態、批量插入庫表Lmk28資訊網——每日最新資訊28at.com

五、選哪一種中間件?

圖片圖片Lmk28資訊網——每日最新資訊28at.com

個人建議:對于大部分公司,可以優選選擇使用RabbitMQ,其次選擇Kafka,相比Kafka,RabbitMQ適合對數據一致性、穩定性和可靠性要求很高的場景,有消息確認機制和持久化機制,可靠性非常高。Lmk28資訊網——每日最新資訊28at.com

六、詳細對比參數

圖片 圖片 Lmk28資訊網——每日最新資訊28at.com

本文鏈接:http://www.www897cc.com/showinfo-26-14713-0.html聊聊消息中間件MQ

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: 如何從單體架構遷移到微服務架構:挑戰和最佳實踐

下一篇: 讓圖片完美適應:掌握 CSS 的object-fit與object-position

標簽:
  • 熱門焦點
  • Redmi Pad評測:紅米充滿野心的一次嘗試

    從Note系列到K系列,從藍牙耳機到筆記本電腦,紅米不知不覺之間也已經形成了自己頗有競爭力的產品體系,在中端和次旗艦市場上甚至要比小米新機的表現來得更好,正所謂“大丈夫生居
  • 這款新興工具平臺,讓你的電腦效率翻倍

    隨著信息技術的發展,我們獲取信息的渠道越來越多,但是處理信息的效率卻成為一個瓶頸。于是各種工具應運而生,都在爭相解決我們的工作效率問題。今天我要給大家介紹一款效率
  • 微軟邀請 Microsoft 365 商業用戶,測試視頻編輯器 Clipchamp

    8 月 1 日消息,微軟近日宣布即將面向 Microsoft 365 商業用戶,開放 Clipchamp 應用,邀請用戶通過該應用來編輯視頻。微軟于 2021 年收購 Clipchamp,隨后開始逐步整合到 Microsof
  • 花7萬退貨退款無門:誰在縱容淘寶珠寶商家造假?

    來源:極點商業作者:楊銘在淘寶購買珠寶玉石后,因為保證金不夠賠付,店鋪關閉,退貨退款難、維權無門的比比皆是。“提供相關產品鑒定證書,支持全國復檢,可以30天無理由退換貨。&
  • 大廠卷向扁平化

    來源:新熵作者丨南枝 編輯丨月見大廠職級不香了。俗話說,兵無常勢,水無常形,互聯網企業調整職級體系并不稀奇。7月13日,淘寶天貓集團啟動了近年來最大的人力制度改革,目前已形成一
  • 當家的盒馬,加速謀生

    來源 | 價值星球Planet作者 | 歸去來自己“當家”的盒馬,開始加速謀生了。據盒馬官微消息,盒馬計劃今年開放生鮮供應鏈,將其生鮮商品送往食堂。目前,盒馬在上海已經與
  • OPPO K11評測:旗艦級IMX890加持 2000元檔最強影像手機

    【Techweb評測】中端機型用戶群體巨大,占了中國目前手機市場的大頭,一直以來都是各手機品牌的“必爭之地”,其中OPPO K系列機型一直以來都以高品質、
  • 質感不錯!OPPO K11渲染圖曝光:旗艦IMX890傳感器首次下放

    一直以來,OPPO K系列機型都保持著較為均衡的產品體驗,歷來都是2K價位的明星機型,去年推出的OPPO K10和OPPO K10 Pro兩款機型憑借各自的出色配置,堪稱有
  • 北京:科技教育體驗基地開始登記

      北京“科技館之城”科技教育體驗基地登記和認證工作日前啟動。首批北京科技教育體驗基地擬于2023年全國科普日期間掛牌,后續還將開展常態化登記。  北京科技教育體驗基
Top 主站蜘蛛池模板: 辉南县| 甘谷县| 日喀则市| 兖州市| 石渠县| 潢川县| 株洲县| 宜兴市| 勐海县| 惠安县| 巫山县| 双城市| 黄陵县| 游戏| 舒城县| 赣州市| 竹山县| 罗平县| 绥中县| 四平市| 绥德县| 海阳市| 治县。| 岳西县| 延吉市| 额敏县| 张家口市| 曲阜市| 阜城县| 宣武区| 文登市| 建宁县| 沅陵县| 中西区| 资阳市| 农安县| 华阴市| 清水河县| 板桥市| 浏阳市| 广州市|