网站首页 > 技术文章 正文
MQ 从生产到消费会经历三个环节:
- 生产阶段:生产 -> MQ服务器
- 存储阶段:MQ 服务器存储
- 消费阶段:MQ -> 消费
JMQ 不丢失#
生产者发送消息过程中出现异常,业务程序应当重新发此条消息。 消费方处理异常后,JMQ 会重试消费。
RabbitMQ 不丢失#
生产者丢消息:
可以选择使用 RabbitMQ 提供的事务功能,就是生产者在发送数据之前开启事务,然后发送消息,如果消息没有成功被 RabbitMQ 接收到,那么生产者会受到异常报错,这时就可以回滚事务,尝试重新他发送;如果收到了消息,就可以提交事务。
缺点: 开启事务后,就会变成同步阻塞操作,生产者会阻塞等待是否发送成功,太耗性能会造成吞吐量的下降。
开启 confirm 模式,消息成功后会回传一个 ack 消息。
MQ 丢数据:
设置 queue 持久化。
消费者丢数据:
使用 RabbitMQ 的 ack 机制,首先关闭自动 ack,处理完成后代码里手动调用 ack。
Kafka 不丢失#
生产者丢消息:
设置 ack=all,要求 leader 收到消息后,所有 follower 都同步了消息之后,才认为本次写成功了。如果没有满足这个条件,生产者会自动不断重试,重试无限次。
MQ 服务丢数据:
设置 top 的副本参数,设置 acks=all,设置 retries=MAX
消费者丢消息:
关闭自动提交 offset,处理完成后手动提交 offset。
猜你喜欢
- 2024-10-17 一次教会你如何解决RabbitMQ消息丢失问题
- 2024-10-17 RabbitMQ消息可靠性分析和应用 rabbitmq消息数据类型
- 2024-10-17 基于本地消息表实现MQ最终一致性 本地消息表(异步确保)
- 2024-10-17 Java面试必备!RabbitMQ 常用知识点总结,纯手绘23张图带你拿下
- 2024-10-17 SpringBoot+RabbitMQ 实现 RPC 调用
- 2024-10-17 RabbitMQ消息更多细节 rabbitmq消息堆积怎么解决
- 2024-10-17 springboot+rabbitmq+消息发送确认
- 2024-10-17 Rabbitmq消费端实战 rabbitmq官网
- 2024-10-17 每日学习~RabbitMQ消息应答机制 rabbit mq五种消息模型
- 2024-10-17 一文搞懂消息推送技术选型 消息推送的几种实现方式
你 发表评论:
欢迎- 11-19零基础学习!数据分析分类模型「支持向量机」
- 11-19机器学习 | 算法笔记(三)- 支持向量机算法以及代码实现
- 11-19我以前一直没有真正理解支持向量机,直到我画了一张图
- 11-19研一小姑娘分享机器学习之SVM支持向量机
- 11-19[机器学习] sklearn支持向量机
- 11-19支持向量机
- 11-19初探支持向量机:用大白话解释、原理详解、Python实现
- 11-19支持向量机的核函数
- 最近发表
- 标签列表
-
- oraclesql优化 (66)
- 类的加载机制 (75)
- feignclient (62)
- 一致性hash算法 (71)
- dockfile (66)
- 锁机制 (57)
- javaresponse (60)
- 查看hive版本 (59)
- phpworkerman (57)
- spark算子 (58)
- vue双向绑定的原理 (68)
- springbootget请求 (58)
- docker网络三种模式 (67)
- spring控制反转 (71)
- data:image/jpeg (69)
- base64 (69)
- java分页 (64)
- kibanadocker (60)
- qabstracttablemodel (62)
- java生成pdf文件 (69)
- deletelater (62)
- com.aspose.words (58)
- android.mk (62)
- qopengl (73)
- epoch_millis (61)
本文暂时没有评论,来添加一个吧(●'◡'●)