如何在Kubernetes中管理和操作Kafka集群

正文

请到「今天看啥」查看全文

该公司将 Kafka 用于日志和事件收集以及作为流媒体平台。Kafka 集群中的每一个代理 (broker) 都有一个身份，这个身份可以被用来寻找集群中的其他代理。代理同样需要一个数据库来存储分区日志。所以为 Kafka 配置一个持久卷非常重要，否则你便会丢失日志。

Nenad Bogojevic 谈到如何使用 Kubernetes ConfigMap 或 CustomResource 来分配和配置 Kafka 集群，并用它们来描述参数，比如名称、分区数、复制因子和主题 (topic) 属性如保存时间（以毫秒表示）等。它们能够帮助自动化主题的分配或反分配过程。它们同样能够确保开发和运营阶段以及集群重启时的配置一致性。

Bogojevic 还谈到了如何使用 Kubernetes StatefulSet 特性来设置 Kafka 和 ZooKeeper 集群元素。Kubernetes StatefulSet 特性提供了如下能力：

• 稳定的 pod 身份

请到「今天看啥」查看全文