TiDB_PingCAP 的博客 -
将一个 Changefeed 所有需要被同步的表，分发到不同的 TiCDC 节点上进行同步工作，以达到负载均衡的目的。维护每张表的同步进度，同时推进 Changefeed 的全局同步进度。本次介绍的 Scheduler 相关代码都在Coordinator 运行在 Changefeed，是 Scheduler 的全局调度中心，负责发送表调度任务，维护全部同步状态。Agent 运行在 Processor，它接收表调度任务，汇报当前节点上的表同步状态给 Coordinator。
TiCDC的Scheduler模块由Coordinator和Agent两部分组成，它们使用两阶段调度机制实现表调度任务，以减少挪动表过程耗时，降低对同步延迟的影响。Coordinator维护Capture的状态，ReplicationSet跟踪一张表在多个Capture上的表同步单元的状态，并且根据收到的Checkpoint和ResolvedTs保证二者均不会退。通过上述内容，读者可以对TiCDC的Scheduler模块有一个基本的了解。
热榜 Top10
最近读过
标签 Top100
全部语言模型 ai 神经网络 llm 开源 微软 linux 算法 数据集 .net python 人工智能 google 扩散模型 apple 苹果 机器学习 安全 java 深度学习 rust 建模 postgresql 机器人 android 谷歌 游戏 漏洞 ios mysql windows openai c# spring 函数 api 大模型 开发者 教程 gpt github chatgpt 卷积 数据库 windows 11 mongodb 内存 web nvidia microsoft 浏览器 强化学习 插件 iphone cloud 编码器 sql security 欧盟 docker 基准测试 联邦学习 大语言模型 黑客 程序员 wordpress 总结 postgres 无监督 视图 redis 入门 mac generative ai 一致性 工程师 c++ 重建 单片机 流量 sora 点云 解决方案 spring boot pdf 多智能体 网络安全 接口 前端 cve swift kubernetes 面试 git javascript 容器 visual studio 硬件 源码 chrome
赞助商
我也要赞助
|
|
|
|
推荐或自荐
正在访问的资源需要验证您是否真人。
或在微信中搜索公众号“小红花技术领袖”并关注
第二步：在公众号对话中发送验证码：