Maestro：Netflix 开源工作流编排器

Netflix开源了Maestro工作流编排器，旨在管理大规模工作流。

Maestro支持无环和有环工作流，能够处理多种可重用模式。

每天平均启动数千个工作流程实例，运行50万个任务。

支持ETL管道、机器学习工作流、AB测试管道等多种用例。

提供运行策略、参数支持、步骤依赖关系和信号、重试策略等功能。

支持断点、时间线、聚合视图和汇总等功能。

Maestro允许用户将业务逻辑打包成多种格式，如Docker镜像、Python等。

工作流定义采用JSON格式，包含属性和版本化工作流。

Maestro提供多种预定义的运行策略以控制工作流执行顺序。

支持动态参数和表达式语言，增强工作流的灵活性。

SEL是一种自制的安全表达语言，用于解决参数化工作流中的代码注入风险。

Maestro支持foreach循环、条件分支和子工作流功能，便于构建复杂工作流。

步骤运行时接口定义了执行时的作业行为和状态跟踪。

Maestro支持步骤依赖关系和信号，优化工作流执行。

允许用户在工作流步骤上设置断点，便于调试和人工干预。

提供步骤执行的时间线和重试策略，增强故障处理能力。

聚合视图和汇总功能帮助用户查看工作流实例的整体状态。

Maestro生成内部和外部事件，跟踪工作流和实例状态变化。