网站首页 > 技术文章 正文
一、背景
现在互联网公司内各个服务错综复杂,一般都会依赖别人的服务。一些核心服务实时性较高的会通过消息去订阅,不会影响其性能。非核心服务会通过rpc去调用,一般Dubbo用地最多,还有thrift用地也比较多(美团),这个可以跨语言。那么消息如何确保可送达及幂等操作呢。
二、消息如何确保可送达
rabbitMq有confirm机制,即发送消息后会回调传送ack去确认消息。即可保证。但是消息一般是基于内存的,也会积攒一些消息批量持久化。内存到磁盘这个过程中也可能会丢消息。所以一般会发消息前提前持久化,比如持久话到redis,redis cluster可以保证其消息可送达。redis消息写完,再发消息即可。消息回调确认后从redis去ack。针对回调ack过程中丢消息,可以增加一个补偿定时的任务去确认消息。即隔一段时间去检查redis有发送中的消息积压。消息侧针对异常也可以做一些消息重试,比如三次,再失败后去catch异常后处理。如此一来即可确保消息可投递成功
上面换成kafka也可以。kafka没有ack,也是提前redis去处理,异常通过定时任务补偿去操作即可。
互联网中重要服务一般都是多写,所以一般很少丢数据,丢了就是大bad case。
三、如何确保消息幂等操作
其实一般是加了一个版本号去做消息的update或者insert操作即可。
eg update order set sales_con = sales_con - 1 , version = version + 1
where id = XXX and version = 1;
如果网络抖动或者下游服务重试即可避免重复消费问题
猜你喜欢
- 2024-10-17 一次教会你如何解决RabbitMQ消息丢失问题
- 2024-10-17 RabbitMQ消息可靠性分析和应用 rabbitmq消息数据类型
- 2024-10-17 基于本地消息表实现MQ最终一致性 本地消息表(异步确保)
- 2024-10-17 MQ怎么确保不丢数据 mq防止数据丢失
- 2024-10-17 Java面试必备!RabbitMQ 常用知识点总结,纯手绘23张图带你拿下
- 2024-10-17 SpringBoot+RabbitMQ 实现 RPC 调用
- 2024-10-17 RabbitMQ消息更多细节 rabbitmq消息堆积怎么解决
- 2024-10-17 springboot+rabbitmq+消息发送确认
- 2024-10-17 Rabbitmq消费端实战 rabbitmq官网
- 2024-10-17 每日学习~RabbitMQ消息应答机制 rabbit mq五种消息模型
你 发表评论:
欢迎- 11-19零基础学习!数据分析分类模型「支持向量机」
- 11-19机器学习 | 算法笔记(三)- 支持向量机算法以及代码实现
- 11-19我以前一直没有真正理解支持向量机,直到我画了一张图
- 11-19研一小姑娘分享机器学习之SVM支持向量机
- 11-19[机器学习] sklearn支持向量机
- 11-19支持向量机
- 11-19初探支持向量机:用大白话解释、原理详解、Python实现
- 11-19支持向量机的核函数
- 最近发表
- 标签列表
-
- oraclesql优化 (66)
- 类的加载机制 (75)
- feignclient (62)
- 一致性hash算法 (71)
- dockfile (66)
- 锁机制 (57)
- javaresponse (60)
- 查看hive版本 (59)
- phpworkerman (57)
- spark算子 (58)
- vue双向绑定的原理 (68)
- springbootget请求 (58)
- docker网络三种模式 (67)
- spring控制反转 (71)
- data:image/jpeg (69)
- base64 (69)
- java分页 (64)
- kibanadocker (60)
- qabstracttablemodel (62)
- java生成pdf文件 (69)
- deletelater (62)
- com.aspose.words (58)
- android.mk (62)
- qopengl (73)
- epoch_millis (61)
本文暂时没有评论,来添加一个吧(●'◡'●)