Sai Srirampur：企业级从Postgres到Azure Event Hubs的复制
内容提要
PeerDB发布了Azure Event Hubs连接器，提供了一种快速、简单和可靠的将Postgres数据复制到Azure Event Hubs的方法。PeerDB解决了使用Debezium复制Postgres到Event Hubs时的挑战，包括配置能力有限、设置和维护成本高以及不适用于Azure Event Hubs等问题。PeerDB提供了简单易用的SQL层，支持高可靠的CDC管道设置。它还实现了多个优化，提供亚秒级延迟和高吞吐量。此外，PeerDB还提供了高度可配置的功能，包括自定义分区键和分区计数，以及对JSON和JSONB列的扁平化处理。PeerDB还提供了企业级的安全性和隔离性，以及生产就绪的可观察性和Azure Monitor集成。
延伸解读
Debezium 的局限与 PeerDB 的针对性改进
文章指出，使用 Debezium 将 Postgres 复制到 Azure Event Hubs 存在配置能力有限、设置和维护成本高、非原生支持等问题。PeerDB 针对这些痛点，提供了更简单的 SQL 层、更高的可配置性以及原生集成，旨在降低企业级 CDC 的复杂度和成本。
性能与延迟：亚秒级与高吞吐的优化
PeerDB 通过多项优化实现了亚秒级延迟和 10K+ TPS 的高吞吐量，满足 IoT 等延迟敏感场景的需求。这些优化包括对复制过程的深度调优，但文章未透露具体技术细节，仅强调其性能表现。
企业级安全与隔离：多租户场景的关键
PeerDB 支持将不同表的数据复制到跨命名空间和订阅的独立主题，确保多租户 SaaS 应用中的严格隔离。同时，企业版提供自托管方案，可在用户自己的 VNET 内通过 AKS 部署，满足安全合规要求。
可观察性与运维支持
PeerDB 提供全面的 UI 监控复制作业的吞吐量、延迟、日志和 Postgres 原生指标，并支持告警。企业版可运行在 AKS 上，与 Azure Monitor 集成，简化运维。这些功能有助于生产环境的稳定运行。
Q&A
PeerDB的Azure Event Hubs连接器有什么优势？
PeerDB的Azure Event Hubs连接器提供快速、简单和可靠的Postgres数据复制，解决了Debezium在配置和维护上的挑战，并支持高可靠的CDC管道设置。
使用PeerDB进行Postgres到Azure Event Hubs的复制需要哪些步骤？
只需运行几个SQL命令，如CREATE PEER和CREATE MIRROR，即可设置高可靠的CDC管道。
PeerDB如何确保数据的安全性和隔离性？
PeerDB提供了保证隔离的功能，允许将多个Postgres表的数据复制到不同的Azure Event Hubs主题，确保多租户SaaS应用中的数据隔离。
PeerDB在性能方面有哪些优化？
PeerDB实现了多个优化，提供亚秒级延迟和高吞吐量，支持每秒超过10,000次的事务处理。
PeerDB支持哪些数据格式的处理？
PeerDB支持对JSON和JSONB列的扁平化处理，可以将其转换为单独的键值对。
PeerDB的用户界面提供哪些监控功能？
PeerDB的用户界面可以监控复制作业的性能、日志和Postgres原生指标，并支持创建警报。
