kafka如何解决重复消费?

浏览

先说重复消费现象的成因，再说可选的解决方案。

一. Kafka 重复消费的产生原因生产端和消费端均有可以导致重复消费的场景。

1.1 生产过程产生重复消息生产者发出一条消息，Broker 正常存储该消息，但之后有可能因为各种因素未正常响应生产者（比如网络问题、Broker宕机等等）。

此时，若生产者不想冒消息丢失的风险，那它将只有一个选择：重试。

当 Broker 将该消息正常存储后，Kafka 中便有了两条重复的消息，进而引发消费端多次…。

kafka如何解决重复消费?