基础
Kafka 是一套流处理系统,可以让后端服务轻松的相互沟通,是微服务架构中常用的组件。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 生产者消费者
生产者服务 Producer 向 Kafka 发送消息,消费者服务 Consumer 监听 Kafka 接收消息。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 一个服务可以同时为生产者和消费者。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 Topics 主题
Topic 是生产者发送消息的目标地址,是消费者的监听目标。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 一个服务可以监听、发送多个 Topics。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 Kafka 中有一个【consumer-group(消费者组)】的概念。
这是一组服务,扮演一个消费者。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 如果是消费者组接收消息,Kafka 会把一条消息路由到组中的某一个服务。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 这样有助于消息的负载均衡,也方便扩展消费者。
Topic 扮演一个消息的队列。
首先,一条消息发送了。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 然后,这条消息被记录和存储在这个队列中,不允许被修改。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 接下来,消息会被发送给此 Topic 的消费者。
但是,这条消息并不会被删除,会继续保留在队列中。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 继续发送消息。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 像之前一样,这条消息会发送给消费者、不允许被改动、一直呆在队列中。
(消息在队列中能呆多久,可以修改 Kafka 的配置)
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 Partitions 分区
上面 Topic 的描述中,把 Topic 看做了一个队列,实际上,一个 Topic 是由多个队列组成的,被称为【Partition(分区)】。
这样可以便于 Topic 的扩展。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 生产者发送消息的时候,这条消息会被路由到此 Topic 中的某一个 Partition。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区 消费者监听的是所有分区。
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区
图解 Kafka,画得太好了!基础生产者消费者Topics 主题Partitions 分区