Ying’s Blog
·
DolphinScheduler笔记之3：工作流的生命周期
💡
原文中文，约1800字，阅读约需5分钟。
📝
内容提要
介绍任务调度系统中任务状态管理的重要性和Apache DolphinScheduler中任务状态的枚举值和状态转换规则。任务状态包括提交、运行、成功、失败等，但实际状态更为复杂。需要考虑正常和异常状态，还需要考虑一些功能上导致状态复杂的场景。
🎯
关键要点
- 任务状态管理在任务调度系统中至关重要，影响准确性和可靠性。
- Apache DolphinScheduler中任务状态有明确的枚举值，状态转换遵循固定规则。
- 任务状态包括提交、运行、成功、失败等，但实际状态更复杂，需考虑容错和依赖关系。
- 系统入口主要包括例行调度和任务恢复，后者针对任务失败场景的重试。
- 工作流状态由DAG构建，Master选择合适的Worker处理任务，面临分区容错问题。
- 任务状态处理应为单线程行为，Master负责更新状态和后续处理。
- 任务执行超时需监控，超时视为失败时需更新状态，DAG可设置禁用节点。
- 设计任务状态变换需考虑正常和异常情况，以构建扩展性好的调度系统。
➡️
