当前位置:首页 > 科技  > 软件

三分钟白话RocketMQ系列—— 如何发送消息

来源: 责编: 时间:2023-08-05 11:46:05 5772观看
导读我们知道RocketMQ主要分为消息 生产、存储(消息堆积)、消费 三大块领域。那接下来,我们白话一下,RocketMQ是如何发送消息的,揭秘消息生产全过程。注意,如果白话中不小心提到相关代码配置与类名,请参考RocketMQ 4.9.4版本关键

我们知道RocketMQ主要分为消息 生产、存储(消息堆积)、消费 三大块领域。59y28资讯网——每日最新资讯28at.com

那接下来,我们白话一下,RocketMQ是如何发送消息的,揭秘消息生产全过程。59y28资讯网——每日最新资讯28at.com

注意,如果白话中不小心提到相关代码配置与类名,请参考RocketMQ 4.9.4版本59y28资讯网——每日最新资讯28at.com

关键字摘要

  • 哪些消息类型?
  • 发给谁?
  • 怎么发?
  • 怎么知道发成功了还是失败了?
  • 发失败了怎么办?

Q1: RocketMQ有哪些消息类型?

RocketMQ生产消息时,支持多种「消息类型」:59y28资讯网——每日最新资讯28at.com

  • 普通消息:发送普通消息。
SendResult send(final Message msg);
  • 普通有序消息:发送普通有序消息,通过指定「消息筛选器selector」,动态决定发送哪个队列。
SendResult send(final Message msg, final MessageQueueSelector selector, final Object arg);
  • 严格有序消息:发送严格有序消息,通过指定队列,保证严格有序。
SendResult send(final Message msg, final MessageQueue mq);
  • 事务消息:实现分布式事务。(属于分布式事务范畴,区别较大,本文不再展开讨论,后面单独写一篇针对「事务消息」的分析)

上面列举的三种send方法,都是以同步发送模式为例。定时/延迟消息从发送方式角度来说,不算一种独立的消息类型。59y28资讯网——每日最新资讯28at.com

Q2:RocketMQ怎么知道一条消息要发送给谁?

一般我们要发送一条消息给RocketMQ,需要创建这样一个消息体。59y28资讯网——每日最新资讯28at.com

Message msg = new Message( "TestTopic", "Hello World".getBytes() );

在这个消息体里面,我们只单纯指定了要发送的Topic名字,以及要发送的消息内容。59y28资讯网——每日最新资讯28at.com

那么,RocketMQ-client怎么知道这条消息要发送到RocketMQ集群中的哪一个broker上呢?59y28资讯网——每日最新资讯28at.com

这里需要了解下RocketMQ中Topic的「路由注册与发现机制」。59y28资讯网——每日最新资讯28at.com

RocketMQ基本架构RocketMQ基本架构59y28资讯网——每日最新资讯28at.com

Topic 路由注册与发现:59y28资讯网——每日最新资讯28at.com

  • Broker 每30秒向 NameServer 发送心跳包,里面包含Topic的路由信息,包括主题的读写队列数和操作权限等。NameServer会保存这些路由信息,并记录最后一次收到 Broker 心跳包的时间(NameServer每10秒根据记录的时间戳清理已经失联120秒以上的 Broker)。
  • 生产者每30秒获取一次主题的路由信息。这意味着消息生产者不会立即知道有新的 Broker 加入或者被移除。

Topic路由信息Topic路由信息59y28资讯网——每日最新资讯28at.com

Topic的路由信息,包括了Topic的 队列queue和broker的映射关系 ,那么如何利用这个Topic的路由信息呢?59y28资讯网——每日最新资讯28at.com

我们需要根据前面的不同「消息类型」进行分别讨论:59y28资讯网——每日最新资讯28at.com

  • 普通消息:默认采用轮询机制,消息会依次发送到Topic的每个可用的 Broker 的某个队列queue上,以实现负载均衡。
  • 普通有序消息:根据传递的 MessageQueueSelector 和消息体 msg 内容,计算可以投递的队列queue,然后发送消息。(可以类比分库分表中的分表计算写入的方式)
  • 严格有序消息:根据传递的 MessageQueue 信息,强制消息发送到对应队列queue上。(可以类比分库分表中,强制指定物理表写入的方式)

根据消息类型获取到目标队列queue后,就可以根据Topic路由信息发送消息到指定broker上了。59y28资讯网——每日最新资讯28at.com

Q3:怎么发送一条消息?

从发送模式角度来说,RocketMQ有三种「消息发送模式」:59y28资讯网——每日最新资讯28at.com

  • 同步发送:调用发送消息方法后,同步阻塞,直到返回SendResult。
SendResult send(final Message msg);
  • 异步发送:调用发送消息方法后,立即返回,发送结果会通过开发者自己注册的回调函数SendCallback进行处理。
void send(final Message msg, final SendCallback sendCallback);
  • 单向发送:这种方法完全不关心发送后的返回结果。显然,它具有最大吞吐量,但也存在消息丢失的潜在风险。
void sendOneway(final Message msg);

上面列举的三种send方法,都是以「普通消息」为例。59y28资讯网——每日最新资讯28at.com

「消息类型」 和 「消息发送模式」 是 N*M 的关系,所以聪明的你一定已经想到了,存在9种不同组合(不包括事物消息),RocketMQ也是在接口中定义了9种不同方法。59y28资讯网——每日最新资讯28at.com

Q4: 发送后,怎么知道消息发成功了还是失败了?

前面介绍了三种「消息发送模式」,其中「单向发送」属于不可靠发送,我们无法知道是否发送成功。59y28资讯网——每日最新资讯28at.com

而「同步发送」和「异步发送」都是可靠发送,我们能够获取发送状态,知道是否成功。59y28资讯网——每日最新资讯28at.com

在「同步发送」中,我们可以根据SendResult中的sendStatus属性判断是否发送成功。59y28资讯网——每日最新资讯28at.com

SendResult类属性SendResult类属性59y28资讯网——每日最新资讯28at.com

在「异步发送」中,我们可以自定义实现SendCallback的onSuccess()方法和onException()方法,来判断消息是否发送成功。59y28资讯网——每日最新资讯28at.com

SendCallback接口定义SendCallback接口定义59y28资讯网——每日最新资讯28at.com

Q5: 消息发送失败了怎么办?

如果消息发送失败了,RocketMQ-client默认有重试机制,以确保消息的高可用性。59y28资讯网——每日最新资讯28at.com

前面提到,生产者每30秒获取一次主题的路由信息,所以即使某个 Broker 宕机,消息发送者可能无法立即察觉到它的宕机状态。59y28资讯网——每日最新资讯28at.com

但是,当消息发送者向某个 Broker 发送消息后,如果返回异常,生产者会在接下来的一段时间内(例如5分钟)避免再次选择该 Broker 上的队列来发送消息。这样做的目的是规避可能发生故障的 Broker。59y28资讯网——每日最新资讯28at.com

当然了,用户也能根据返回的异常,自己定义业务重试、补偿机制。59y28资讯网——每日最新资讯28at.com

需要注意的是,不同「消息类型」和「消息发送模式」的RocketMQ-client默认重试机制不同。59y28资讯网——每日最新资讯28at.com

消息类型:59y28资讯网——每日最新资讯28at.com

  • 普通消息:无顺序性要求,异常时RocketMQ-client默认重试。
  • 普通有序消息:异常时RocketMQ-client默认不重试,可以用户自己捕获异常重试,并发送到其他队列。
  • 严格有序消息:保证严格有序,异常时RocketMQ-client默认不重试,可以用户自己捕获异常重试。

注意:有序消息异常时RocketMQ-client都是默认不重试59y28资讯网——每日最新资讯28at.com

消息发送模式:59y28资讯网——每日最新资讯28at.com

  • 同步发送:配置retryTimesWhenSendFailed默认重试次数。
  • 异步发送:配置retryTimesWhenSendAsyncFailed默认重试次数。
  • 单向发送:无重试机制,存在丢失消息的风险。

注意:单向发送模式异常时RocketMQ-client默认不重试59y28资讯网——每日最新资讯28at.com

总结

  • 有哪些消息类型:普通消息、有序消息、事务消息
  • 发给谁?:Topic路由信息注册与发现机制、普通消息轮询发送、有序消息指定selector或者queue发送
  • 怎么发?:同步发送、异步发送、单向发送
  • 怎么知道发成功了还是失败了?:同步&异步都能够获取发送状态(可靠发送)、单向发送不可靠
  • 发失败了怎么办?: 失败重试机制

本文链接:http://www.28at.com/showinfo-26-144-0.html三分钟白话RocketMQ系列—— 如何发送消息

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 使用Webdriver-manager解决浏览器与驱动不匹配所带来自动化无法执行的问题

下一篇: 从零到英雄:高并发与性能优化的神奇之旅

标签:
  • 热门焦点
  • 一加Ace2 Pro官宣:普及16G内存 引领24G

    一加官方今天继续为本月发布的新机一加Ace2 Pro带来预热,公布了内存方面的信息。“淘汰 8GB ,12GB 起步,16GB 普及,24GB 引领,还有呢?#一加Ace2Pro#,2023 年 8 月,敬请期待。”同时
  • 十个可以手动编写的 JavaScript 数组 API

    JavaScript 中有很多API,使用得当,会很方便,省力不少。 你知道它的原理吗? 今天这篇文章,我们将对它们进行一次小总结。现在开始吧。1.forEach()forEach()用于遍历数组接收一参
  • 把LangChain跑起来的三个方法

    使用LangChain开发LLM应用时,需要机器进行GLM部署,好多同学第一步就被劝退了,那么如何绕过这个步骤先学习LLM模型的应用,对Langchain进行快速上手?本片讲解3个把LangChain跑起来
  • 分布式系统中的CAP理论,面试必问,你理解了嘛?

    对于刚刚接触分布式系统的小伙伴们来说,一提起分布式系统,就感觉高大上,深不可测。而且看了很多书和视频还是一脸懵逼。这篇文章主要使用大白话的方式,带你理解一下分布式系统
  • 使用LLM插件从命令行访问Llama 2

    最近的一个大新闻是Meta AI推出了新的开源授权的大型语言模型Llama 2。这是一项非常重要的进展:Llama 2可免费用于研究和商业用途。(几小时前,swyy发现它已从LLaMA 2更名为Lla
  • 猿辅导与新东方的两种“归途”

    作者|卓心月 出品|零态LT(ID:LingTai_LT)如何成为一家伟大企业?答案一定是对“势”的把握,这其中最关键的当属对企业战略的制定,且能够站在未来看现在,即使这其中的
  • 网红炒股不为了赚钱,那就是耍流氓!

    来源:首席商业评论6月26日高调宣布入市,网络名嘴大v胡锡进居然进军了股市。在一次财经媒体峰会上,几个财经圈媒体大佬就“胡锡进炒股是否知道认真报道”展开讨论。有
  • 疑似小米14外观设计图曝光:后置相机模组变化不大

    下半年的大幕已经开启,而谁将成为下半年手机圈的主角就成为了大家关注的焦点,其中被传有望拿下新一代骁龙8 Gen3旗舰芯片的小米14系列更是备受大家瞩
  • OPPO Reno10 Pro英雄联盟定制礼盒公布:萨勒芬妮同款配色梦幻十足

    5月24日,OPPO推出了全新的OPPO Reno 10系列,包含OPPO Reno10、OPPO Reno10 Pro和OPPO Reno10 Pro+三款新机,全系标配了超光影长焦镜头,是迄今为止拍照
Top