Amazon DocumentDB 与 Amazon OpenSearch Service 的零 ETL 集成现已推出
内容提要
Amazon推出Amazon DocumentDB（兼容MongoDB），提供文本搜索和向量搜索功能。用户可通过Amazon OpenSearch Service进行高级搜索分析，包括模糊搜索、同义词搜索、跨集合搜索和多语言搜索。解决方案需满足先决条件，并配置管道参数。用户可监控管道状态并进行清理。
延伸解读
零 ETL 集成的核心价值
零 ETL 集成消除了在 Amazon DocumentDB 和 OpenSearch Service 之间构建和管理数据管道的需求，从而降低了运维复杂性和成本。它通过变更流实现近实时数据同步，让您能够专注于高级搜索功能，如模糊搜索和跨集合搜索，而无需担心底层数据移动。
实施前的关键考量
启用零 ETL 集成前，需确保满足先决条件：对 DocumentDB 集群进行集合扫描可能引起资源消耗上升，且变更流默认禁用，需在集合、数据库或集群级别启用。建议仅为必要集合启用变更流，以避免不必要的开销。
管道配置与扩展性
OpenSearch Ingestion 管道采用无服务器架构，可根据工作负载自动扩展。每个 OCU 约提供 8 GB 内存和 2 个 vCPU，每小时可处理约 8 GiB 数据，最大支持 96 个 OCU。配置时需设置计算资源、IAM 角色，并确保安全组允许访问 DocumentDB 端口。
监控与成本管理
通过 OpenSearch 控制台和 Amazon CloudWatch 监控管道状态和指标，可设置警报以预防异常。实施后，及时清理不再需要的资源，如 OpenSearch 域、管道和 S3 存储桶，以避免产生额外费用。
Q&A
Amazon DocumentDB 提供哪些搜索功能？
Amazon DocumentDB 提供原生的文本搜索和向量搜索功能。
如何在 Amazon DocumentDB 中启用变更流？
使用 mongo shell 连接到 Amazon DocumentDB，并运行代码启用变更流，例如：db.adminCommand({modifyChangeStreams: 1, database: 'inventory', collection: 'product', enable: true});
零 ETL 集成的优势是什么？
零 ETL 集成简化了架构，消除了构建和管理数据管道的相关成本。
OpenSearch Ingestion 是什么？
OpenSearch Ingestion 是一个完全托管的数据收集器，支持实时日志和跟踪数据的处理。
如何监控 Amazon DocumentDB 与 OpenSearch Service 的集成管道？
可以在 OpenSearch Service 控制台查看管道状态，并使用 Amazon CloudWatch 设置警报。
实施零 ETL 集成需要满足哪些先决条件？
需要对 Amazon DocumentDB 集群进行集合扫描并启用变更流。
