消息堆积与消费延迟：为什么 Kafka 最怕上游猛发下游跟不上
很多人开始认真补“消息堆积与消费延迟”，往往不是出于兴趣，而是因为线上已经出事了。系统平时也能跑，可一到高峰、发布、切换、批量任务或者局部抖动时，问题就集中冒出来。这个时候你会发现，故障类主题真正难的...
分类：中间件与分布式
Leader 选举与故障恢复：Broker 挂了之后 Kafka 是怎么扛住的
当你开始学“Leader 选举与故障恢复”这类设计主题时，通常意味着单纯会操作已经不够了。系统开始变大、对象开始变多、协作开始变复杂，你会越来越频繁地遇到一种情况：看起来好像每个方案都能做，但真正难的...
顺序消息与分区键：为什么 Kafka 的有序性从来都不是全局的
当你开始学“顺序消息与分区键”这类设计主题时，通常意味着单纯会操作已经不够了。系统开始变大、对象开始变多、协作开始变复杂，你会越来越频繁地遇到一种情况：看起来好像每个方案都能做，但真正难的是判断哪种更...
重复消费、丢消息与乱序：消息系统里最经典的三类问题怎么理解
很多人开始认真补“重复消费、丢消息与乱序”，往往不是出于兴趣，而是因为线上已经出事了。系统平时也能跑，可一到高峰、发布、切换、批量任务或者局部抖动时，问题就集中冒出来。这个时候你会发现，故障类主题真正...
幂等生产者与事务：Kafka 为什么能逼近 exactly-once
当你开始学“幂等生产者与事务”这类设计主题时，通常意味着单纯会操作已经不够了。系统开始变大、对象开始变多、协作开始变复杂，你会越来越频繁地遇到一种情况：看起来好像每个方案都能做，但真正难的是判断哪种更...
Retention 与日志清理：Kafka 为什么不是“消息读完就删”的队列
当你开始学“Retention 与日志清理”这类设计主题时，通常意味着单纯会操作已经不够了。系统开始变大、对象开始变多、协作开始变复杂，你会越来越频繁地遇到一种情况：看起来好像每个方案都能做，但真正难...
批量、压缩与吞吐优化：Kafka 为什么能扛住那么大的流量
当你开始学“批量、压缩与吞吐优化”这类设计主题时，通常意味着单纯会操作已经不够了。系统开始变大、对象开始变多、协作开始变复杂，你会越来越频繁地遇到一种情况：看起来好像每个方案都能做，但真正难的是判断哪...
Offset 与提交机制：消费进度到底是怎么被记录下来的
很多人学“Offset 与提交机制”这类机制主题时，最容易有一种错觉：好像自己在学一堆抽象原理，离真实工程很远。可只要你把它放回系统运行过程里，就会发现它其实一直在回答非常具体的问题：请求为什么会这么...
重平衡机制：为什么消费者扩缩容时系统有时会突然抖一下
很多人学“重平衡机制”这类机制主题时，最容易有一种错觉：好像自己在学一堆抽象原理，离真实工程很远。可只要你把它放回系统运行过程里，就会发现它其实一直在回答非常具体的问题：请求为什么会这么走、数据为什么...
重试、死信与错误处理：消费失败后消息应该往哪走
很多人开始认真补“重试、死信与错误处理”，往往不是出于兴趣，而是因为线上已经出事了。系统平时也能跑，可一到高峰、发布、切换、批量任务或者局部抖动时，问题就集中冒出来。这个时候你会发现，故障类主题真正难...