本文提出了一项新任务——从视频和转录文本生成语音（VTTS），旨在推动多模态语音生成技术的发展。我们介绍了Visatronic解码器模型，该模型将视觉、文本和语音嵌入统一的变换器中，通过自回归损失进行学习，简化了传统方法的复杂性，并在多模态语音生成中表现优越。相关代码和数据集将发布以促进进一步研究。

该脚本使用Google Gemini API自动提取YouTube播放列表的转录文本，并将其格式化为Markdown文件。它包括提取转录和AI优化两个阶段，确保内容结构一致，支持多语言和批量处理。