PipeWeaver：通过动态交错管道解决大规模多模态模型训练中的数据动态性

本研究针对大规模多模态模型训练中的管道阶段不平衡和数据动态性这两大问题，提出了PipeWeaver，一个动态管道调度框架。通过自适应模态感知分区和高效的管道调度搜索，PipeWeaver显著提高了训练效率，最高可达比最新系统提升97.3%的效果，尤其表现出对数据动态性的良好适应性。