Go工程師體系課 014【學習筆記】

rocketmq 快速入門

去我們的各種配置(podman)看是怎麼安裝的


概念介紹

RocketMQ 是阿里開源、Apache 頂級項目的分布式消息中間件,核心組件:

  • NameServer:服務發現與路由
  • Broker:消息存儲、投遞、拉取
  • Producer:消息生產者(發送消息)
  • Consumer:消息消費者(訂閱並消費消息)
  • Topic/Tag:主題/標籤,用於消息分組與過濾

生產與消費模型:Producer 將消息發送到某個 Topic;Broker 進行持久化並供 Consumer 拉取;Consumer 以集群或廣播模式消費。

代碼示例本章以 Go 為例(偽代碼/示意),不同 SDK 方法名略有差異,請以實際版本為準。


按照發送的特點分

1. 同步發送

同步發送會等待 Broker 返回發送結果,適合對可靠性有要求的場景(如下單、創建訂單事件)。

// 同步發送
msg := rocketmq.NewMessage("OrderTopic", []byte("order-created"))
res, err := producer.SendSync(context.Background(), msg)
if err != nil {
    // 失敗處理/重試
}
log.Printf("SendOK: %v", res)

2. 異步發送

異步發送不會阻塞主線程,通過回調獲取結果,適合鏈路較長或吞吐要求高的場景。

// 異步發送
msg := rocketmq.NewMessage("LogTopic", []byte("user-action"))
producer.SendAsync(context.Background(), msg, func(res *SendResult, err error) {
    if err != nil {
        // 記錄失敗,後續重試
        return
    }
    log.Printf("AsyncSendOK: %v", res)
})

3. 單向發送(OneWay)

單向發送只負責把消息“盡力而為”地發出,不關心結果,適用於日誌收集、埋點等對可靠性要求低的場景。

// 單向發送
_ = producer.SendOneWay(context.Background(), rocketmq.NewMessage("TraceTopic", []byte("trace")))

按照使用功能特點分

1. 普通消息(訂閱)

最常見的發佈/訂閱模型。消費者可採用集群模式(負載均衡)或廣播模式(每個消費者都收到)。

// 消費者訂閱普通消息
consumer.Subscribe("OrderTopic", rocketmq.FilterByTag("created"), func(msg *MessageExt) ConsumeResult {
    // 冪等處理
    // 業務邏輯...
    return ConsumeSuccess
})

要點:

  • 冪等性:用業務唯一鍵或去重表避免重復消費
  • 重試與死信:失敗返回重試,超過閾值進入 DLQ

2. 順序消息

順序消息分為全局順序和分區順序。常見做法是按業務鍵(如訂單號)將消息路由到同一個隊列,保證“同一訂單”的消息有序。

// 生產者按業務鍵選擇隊列(示意)
shardingKey := orderID
msg := rocketmq.NewMessage("OrderSeqTopic", []byte("status-changed"))
msg.WithShardingKey(shardingKey)
_, _ = producer.SendSync(ctx, msg)

注意:要保證同一業務鍵落在同一隊列,消費者通常單線程或按隊列串行處理。

3. 延時消息(定時/延遲)

用於在指定時間後再投遞給消費者,例如“訂單超時取消”“支付結果稍後檢查”等。

// 發送 30s 後可見的延時消息(不同 SDK 可用 delayLevel 或 deliverTime)
msg := rocketmq.NewMessage("DelayTopic", []byte("close-order"))
msg.SetDelay(time.Second * 30)
_, _ = producer.SendSync(ctx, msg)

實踐要點:

  • 合理的延遲等級/絕對投遞時間
  • 消費端仍需冪等與補償

4. 事務消息(分布式事務)

用於保證“本地事務 + 消息”最終一致。流程:發送半消息 → 執行本地事務 → 根據結果 Commit/Rollback;Broker 未收到確認會回查業務狀態。

sequenceDiagram
  participant P as Producer
  participant MQ as RocketMQ
  participant DB as LocalDB
  P->>MQ: 發送半消息
  P->>DB: 執行本地事務
  alt 成功
    P->>MQ: Commit
    MQ->>C: 投遞正式消息
  else 失敗
    P->>MQ: Rollback
  end
  MQ->>P: 回查未確認事務

更多細節可參考本倉庫 013.md 中“事務消息”與“TCC/本地消息表”等章節。


生產者與消費者快速示例

// Producer 初始化(示意)
producer, _ := rocketmq.NewProducer(rocketmq.ProducerConfig{
    NameServer: []string{"127.0.0.1:9876"},
    Group:      "demo-producer-group",
})
defer producer.Shutdown()

// Consumer 初始化(示意)
consumer, _ := rocketmq.NewPushConsumer(rocketmq.ConsumerConfig{
    NameServer: []string{"127.0.0.1:9876"},
    Group:      "demo-consumer-group",
    Model:      rocketmq.Clustering, // 或 Broadcasting
})
defer consumer.Shutdown()

分布式事務消息的優勢

  • 解耦:上下游通過事件協作,降低強耦合
  • 彈性與可擴展:異步削峰,支持高併發
  • 可靠性:消息持久化,失敗可重試/對賬
  • 最終一致:在 AP 取捨下通過補償與回查達到一致

適用場景:訂單創建/支付、庫存扣減、積分/優惠券發放、資金記賬、狀態同步等。


常見實踐建議

  • 消費端冪等:唯一業務鍵、去重表、樂觀鎖
  • 失敗重試與死信隊列(DLQ)配置
  • 監控與告警:積壓、失敗率、耗時
  • 結合延時消息實現“超時關閉/回查”
  • 事務消息只在關鍵鏈路使用,其餘用本地消息表或最大努力通知

主題測試文章,只做測試使用。發佈者:Walker,轉轉請注明出處:https://walker-learn.xyz/archives/4787

(0)
Walker的頭像Walker
上一篇 2025年11月25日 14:00
下一篇 2025年11月25日 12:00

相關推薦

  • 深入理解ES6 013【學習筆記】

    用模塊封裝代碼 javascript用“共享一切”的方法加載代碼,這是該語言中最容易出錯且另人感到困惑的地方。其他語言使用諸如包這樣的概念來定義代碼作用域。在es6以前,在應用程序的每一個js中定義的一切都共享一個全局作用域。隨著web應用程序變得更加複雜,js代碼的使用量也開始增長,這一做法會引起問題,如命名衝突和安全問題。es6的一個目標是解決作用域問題…

    個人 2025年3月8日
    1.1K00
  • Go工程師體系課 protoc-gen-validate【學習筆記】

    protoc-gen-validate 簡介與使用指南 ✅ 甚麼是 protoc-gen-validate protoc-gen-validate(簡稱 PGV)是一個 Protocol Buffers 插件,用於在生成的 Go 代碼中添加結構體字段的驗證邏輯。 它通過在 .proto 文件中添加 validate 規則,自動為每個字段生成驗證代碼,避免你手…

    個人 2025年11月25日
    1.3K00
  • Nuxt3_掃盲 入門與原理介紹【學習筆記】

    Nuxt 3 入門與原理介紹 💡 甚麼是 Nuxt 3? Nuxt 3 是基於 Vue 3 和 Vite 打造的全棧前端框架,支持: 服務端渲染(SSR) 靜態站點生成(SSG) 單頁應用(SPA) 構建全棧應用(支持 API) Nuxt 3 是 Vue 的“加強版”,幫你簡化項目結構和開發流程。 🔧 核心原理 功能 Nuxt 如何處理 ✅ 頁面路由 自動根…

    個人 2025年4月6日
    2.1K00
  • Go工程師體系課 004【學習筆記】

    需求分析 後台管理系統 商品管理 商品列表 商品分類 品牌管理 品牌分類 訂單管理 訂單列表 用戶信息管理 用戶列表 用戶地址 用戶留言 輪播圖管理 電商系統 登錄頁面 首頁 商品搜索 商品分類導航 輪播圖展示 推薦商品展示 商品詳情頁 商品圖片展示 商品描述 商品規格選擇 加入購物車 購物車 商品列表 數量調整 刪除商品 結算功能 用戶中心 訂單中心 我的…

    2025年11月25日
    21300
  • 無畏前行,拳釋力量 🥊💪

    拼搏,是一種態度 生活就像一場比賽,沒有捷徑可走,只有不斷訓練、突破、超越,才能站上屬於自己的舞台。這不僅是一種對抗,更是一種自我的覺醒——敢於迎戰,敢於挑戰,敢於成為更強的自己。 運動中的拼搏精神 無論是拳擊、跑步,還是力量訓練,每一次出拳、每一次揮汗、每一次咬牙堅持,都是對身體與心靈的磨煉。拼搏不是單純的對抗,而是一種態度——面對挑戰,不退縮;面對失敗,…

    個人 2025年2月26日
    1.3K00
簡體中文 繁體中文 English
歡迎🌹 Coding never stops, keep learning! 💡💻 光臨🌹