小红花·文摘
  • 首页
  • AI Tokens🪙
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
沉浸式翻译 immersive translate
缓解 TTS 的重复与漏读:用注意力引导消除语音合成中的稳定性幻觉

论文针对基于大语言模型的语音合成在复杂文本上出现的重复、漏读等稳定性幻觉问题,提出通过注意力引导进行优化。作者从CosyVoice 2的自注意力中发现对齐注意力头,提出最优对齐分数(OAS)评估对齐质量,并据此强化前向注意力约束;同时利用伪对齐路径构建位置思维链,通过稀疏文本Token和进度条预测显式告知模型合成位置。实验表明,该方法在困难文本上词错误率相对下降约35%,且不损害自然度和说话人相似度。

缓解 TTS 的重复与漏读:用注意力引导消除语音合成中的稳定性幻觉

实时互动网 实时互动网 · 2026-07-28T07:21:37Z

本研究提出了InfuseNet框架,旨在解决图像生成中的身份保留问题,提升身份相似性及文本与图像的对齐质量。实验结果表明,InfiniteYou超越了现有基准,具有广泛的应用潜力。

Infinite You: Flexible Photo Reshaping While Preserving Your Identity

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2025-03-20T00:00:00Z

本文综述了跨语言词向量模型的类型、数据需求和评估方法,探讨了影响句子对齐的因素,指出词序和形态复杂度是重要预测因素。提出了一种基于多语言预训练模型的词语对齐方法,结合了对齐和联合训练框架,显著提高了对齐质量和模型性能,尤其在低资源语言应用中表现突出。

跨语言对齐的理解 -- 综述

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2024-04-09T00:00:00Z

该研究使用隐马尔可夫模型和GPU加速的前向后向算法进行神经网络训练,结果表明转移模型训练对识别性能没有提高,但对齐质量有积极影响,生成的对齐可用于维特比训练。

带有标签和转移概率的神经 HMM 的端到端训练

BriefGPT - AI 论文速递 BriefGPT - AI 论文速递 · 2023-10-04T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码