Kafka的主题分区的疑惑
kafka主题有分区,分区是防止消息过多,一台服务扛不住。所以疑惑的地方如下:
1、单机kafka会不会分区
2、分区是不是比如有一个拥有三个kafka节点的集群,那么一个主题的分区,就会有三个,集群中每台机器都包含一个分区。
kafka主题有分区,分区是防止消息过多,一台服务扛不住。所以疑惑的地方如下:
1、单机kafka会不会分区
2、分区是不是比如有一个拥有三个kafka节点的集群,那么一个主题的分区,就会有三个,集群中每台机器都包含一个分区。
首先,kafka的分区是用来保证系统的可用性的,类似高并发下的分片。每一个分区又会有多个副本,这些副本分布在不同的节点上,保证了kafka的高可用。
单机的kafka也可以分区,当我们创建topic时是可以指定分区和副本的。只不过这些分区和副本都在一个节点上。和不分区的效果是一样的。集群中一个kafka的分区也是一样的,同时由我们自己指定,可以指定超过集群节点数的分区。