使用 Databricks Workflows 进行模块化编排

使用 Databricks Workflows 进行模块化编排

💡 原文英文,约600词,阅读约需2分钟。
📝

内容提要

Databricks Workflows允许客户在Databricks Lakehouse平台上编排工作负载。通过将大型DAG拆分为较小的“子”作业,可以简化复杂的工作流程。这样可以让不同的团队在工作流程的不同部分上工作,并促进可重用性。创建名为“Run Job”的新任务类型的能力使团队能够创建模块化工作流程。现在,Databricks Workflows中可用的任务类型包括“Run Job”。

🏷️

标签

➡️

继续阅读