宣布笔记本、工作流和Delta Live Tables的无服务器计算正式上线

宣布笔记本、工作流和Delta Live Tables的无服务器计算正式上线

💡 原文英文,约1500词,阅读约需6分钟。
📝

内容提要

Databricks在AWS和Azure上宣布了笔记本、作业和Delta Live Tables(DLT)的无服务器计算的一般可用性。该功能为ETL工作负载提供快速、简单和可靠的计算基础设施,包括Apache Spark和Delta Live Tables。无服务器计算使用户只需支付实际工作量,无需支付空闲时间。Databricks还提供无服务器计算的介绍性促销折扣,有效期至2024年10月31日。无服务器计算旨在解决管理计算基础设施的挑战,并提供快速启动、简单性和可靠性等优势。它包括管理员管理成本和预算的工具。Databricks计划进一步增强无服务器计算,包括GCP支持、私有网络和出口控制、可强制执行的归因、环境和Scala支持。

🔎

延伸解读

无服务器计算如何计费

无服务器计算采用弹性计费模式,仅当计算资源分配给工作负载时计费,不收取实例获取和初始化的空闲时间费用。智能自动扩展器会根据需求自动调整工作区容量,并在预测不再需要时减少配置容量,以优化资源使用。这种模式旨在帮助用户避免为闲置资源付费,从而可能降低成本。

迁移到无服务器计算的注意事项

无服务器计算使用Lakeguard隔离用户代码,并要求使用Unity Catalog进行数据安全访问。因此,部分工作负载可能需要代码更改才能运行。文章建议先在DBR 14.3+的经典集群上以共享访问模式测试工作负载,以检查其是否适合无服务器计算。这有助于提前发现兼容性问题。

无服务器计算的管理与成本控制

无服务器计算提供管理工具,帮助管理员控制成本和预算。使用情况和成本数据可在系统表中查看,并配有预构建仪表板用于总览和深入分析。管理员还可以使用预算警报(预览版)对成本进行分组并设置警报,通过友好的UI管理预算,避免意外超支。

未来增强功能

Databricks计划在未来几个月进一步增强无服务器计算,包括GCP支持(已开始私有预览)、私有网络和出口控制、可强制执行的归因、环境配置、成本与性能优化目标以及Scala支持。这些改进旨在扩展无服务器计算的适用场景,并让用户能够根据需求调整优化目标。

❓

Q&A

无服务器计算的主要优势是什么?

无服务器计算提供快速启动、简单性和可靠性,用户无需选择实例类型或配置集群。

Databricks的无服务器计算如何计费?

无服务器计算采用弹性计费模式,仅在计算分配给工作负载时收费,避免了空闲时间的费用。

Databricks提供的无服务器计算促销优惠是什么?

Databricks提供的促销优惠包括对无服务器计算的50%和30%的价格折扣,有效期至2024年10月31日。

无服务器计算如何解决计算基础设施管理的挑战?

无服务器计算简化了计算基础设施管理,用户无需配置和维护集群,Databricks会自动管理计算资源。

无服务器计算对ETL工作负载有什么影响?

无服务器计算为ETL工作负载提供快速、简单和可靠的计算基础设施,提高了工作效率。

Databricks未来对无服务器计算有哪些计划?

Databricks计划增强无服务器计算功能,包括GCP支持、私有网络和出口控制等。

🏷️

标签

➡️

继续阅读