基于 Log 的通用增量 Checkpoint
原文中文,约10200字,阅读约需25分钟。发表于: 。本文将从 Checkpoint 的性能优化历程出发,介绍 ChangelogStateBackend 的基本机制、应用场景和未来规划,同时介绍最新版本在 State 上的一些优化工作。
阿里巴巴开发工程师俞航翔在 Flink Forward Asia 2022 核心技术专场分享了 Flink 中的 Checkpoint 机制和 Changelog 机制,未来将围绕性能优化、容错过程轻量化和易用化、为 Table Store 提供更高数据新鲜度三个方向进行优化。