Databricks
·
BigQuery 增加对 Delta Lake 的一方支持
💡
原文英文，约700词，阅读约需3分钟。
📝
内容提要
Delta Lake on BigQuery是将存储在Delta Lake上的数据与BigQuery中的其他格式的数据结合在一起的解决方案，具有高级功能支持。Delta Lake是由超过10,000家公司使用的优化存储层，现在在Google Cloud上提供集成支持。Lakehouse架构将数据湖的灵活性与数据仓库的可靠性相结合。使用Delta Lake，您可以统一数据访问并在不同的处理引擎之间高效共享数据。在BigQuery中读取Delta Lake非常简单，可以同时使用Databricks和BigQuery，无需复制数据文件或手动维护表元数据。
🎯
关键要点
- Delta Lake on BigQuery是将Delta Lake上的数据与BigQuery中的其他格式数据结合的解决方案，支持高级功能。
- Delta Lake每月下载量超过2000万，现已在Google Cloud上提供集成支持。
- Delta Lake是一个优化的存储层，提升企业数据湖的性能和可靠性，超过10,000家公司使用，包括60%以上的财富500强企业。
- BigQuery支持Delta Lake，通过BigLake存储引擎实现数据湖和数据仓库的统一存储层。
- 使用Delta Lake可以统一数据访问，维护单一权威数据副本，支持Databricks和BigQuery的查询。
- Delta Lake支持在不同处理引擎之间高效共享数据，促进数据利用和协作。
- 在BigQuery中读取Delta Lake非常简单，只需创建Delta表并设置Cloud Storage连接。
- BigQuery自动检测数据和模式变化，无需手动刷新表元数据。
- Databricks将继续投资与Google Cloud的合作，帮助客户集成Databricks与BigQuery及其他Google Cloud服务。
➡️
