Reddit如何将PB级Kafka从EC2迁移到Kubernetes

Reddit如何将PB级Kafka从EC2迁移到Kubernetes

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

Kafka的元数据无法从头重建,ZooKeeper管理代理信息和数据存储位置。新代理必须加入现有集群,以保持系统可用性。

🎯

关键要点

  • Kafka的元数据无法从头重建。
  • Apache Kafka维护详细的内部状态,称为元数据。
  • 元数据包括关于现有代理、数据存储位置和数据副本的信息。
  • ZooKeeper负责管理这些元数据。
  • 没有支持的方法可以在保持系统可用的情况下重建新的集群的元数据。
  • 新代理必须加入现有集群,而不是替换它。
➡️

继续阅读