Hologres 实时湖仓能力增强,挑战5分钟加速分析OSS数据
💡
原文中文,约5400字,阅读约需13分钟。
📝
内容提要
介绍使用Hologres实时湖仓能力,直接读取存储于数据湖OSS上的数据,包括Hudi、Delta、Paimon等格式。通过配置环境和创建表,查询和处理OSS数据湖中的数据。介绍了MaxCompute湖仓一体的实践方法。
🎯
关键要点
-
介绍Hologres实时湖仓能力,支持直接读取OSS上的数据。
-
准备工作包括开通OSS、DLF和Hologres服务。
-
在OSS中创建存储空间并上传测试数据。
-
开通DLF服务并导入OSS测试数据,创建元数据库。
-
开通Hologres服务并配置环境,开启数据湖加速功能。
-
通过Hologres外部表查询OSS数据湖,数据存储在OSS中。
-
通过Hologres内部表查询OSS数据湖,数据存储在Hologres中以提高性能。
-
展示内表和外表查询的运行日志和结果。
-
MaxCompute也可以基于OSS数据进行湖仓一体实践,提供高效的数据分析服务。
🏷️
标签
➡️