本研究解决了联邦域泛化中的知识共享问题,提出了新的方法——联邦学习通过服务器端匹配梯度(FedOMG)。该方法能够高效利用分布在不同客户端的域信息,通过最大化梯度内积来找到一个领域不变的梯度方向。实验结果表明,FedOMG在多个基准数据集上优于现有的最先进方法,显示出其有效性和广泛的应用潜力。
研究提出了一种名为Masked Audio Text Encoder (MATE)的多模态语言模型再评分方法,通过对比学习将声学表征融入MLM输入空间。即使在没有目标领域数据的情况下,MATE在ASR系统中表现出域泛化优势。在不同数据集上,MATE将词错误率降低了4%-16%,即使训练数据仅为0.8小时,也比基线系统降低8%-23%。
本研究解决了现有行人重识别(ReID)方法无法有效跨多个任务领域泛化的问题。提出的对齐发散路径方法(ADP)通过创建多分支架构、采用动态最大偏差自适应实例归一化模块,以及阶段性余弦混合学习率调度,实现了对多源域的有效泛化。研究结果表明,该方法在多个基准测试上超过了现有的最先进方法,展示了其在行人重识别任务中的广泛适用性和潜在影响。
本文通过引入自然语言表示提升多目标跟踪模型的泛化能力,提出视觉上下文提示和视觉-语言混合模块,生成实例级伪文字描述。在MOT17上训练并在MOT20上验证,显著提升了跟踪器的性能。
该研究提出了一种新的半监督域泛化框架,通过改进伪标签策略和创建中间域,提高了模型在未见域上的表现。尽管在多个基准测试中性能显著提升,但论文未讨论任务复杂性、目标域数量对性能的影响,以及计算成本和训练时间等局限性。未来研究可探索提高框架效率的方法。
提出了一种基于 Spectral-dEcomposed Token (SET) 学习框架的方法,通过将 Vision Foundation Model (VFM) 特征在频域分解为幅度和相位组件,并使用可学习的 token 进行任务特定信息提取,进一步优化了样式无关特征的学习,在推理过程中通过注意力优化方法解决了样式变化对特征增强的影响,通过大量跨域实验证明其具有最先进的性能。
双梯度反转网络(DGRN)通过对未知模式的伪故障特征进行对抗训练和对比学习来实现域通用化,辅以对特征进行自适应实例标准化,从而达到对多模故障的有效诊断。
本文研究了随机特征模型和Transformer的域外泛化能力。研究发现,对于小特征规模下的RF模型,在未见域泛化设置中,收敛到布尔情况下的最小度插值器。稀疏目标规模与小特征规模有关,对于q元数据标记的稀疏规模,如果数据嵌入了单位根,则RF模型学习到最小度插值器,否则可能不会。布尔情况和单位根泛化是学习过程中最小度插值器的特殊情况。整数和实数情况仍需进一步研究。
本文提出了一种使用标签和环境因果独立(LECI)的方法,通过联合最大化标签和环境信息以解决之前方法中面临的识别因果和不变子图的挑战,并进一步开发了一种对抗训练策略来共同优化这两个特性,从而实现对因果子图的发现。该方法在合成和现实数据集上显著优于先前的方法,成为一种实用和有效的解决方案。
该文章介绍了基于域泛化的人脸反欺诈技术,通过重新定义领域、学习身份不变的活体表示和引入风格多样性模块和减弱对风格变化敏感性模块,以及提出的对比损失方法,解决了活体样本和欺诈样本之间的不对称性。实验证明该方法在跨数据集和有限源数据集情况下达到了最先进的性能,并具有良好的可扩展性。
领域泛化通过提高模型鲁棒性来开发具有分布偏移上稳定性的模型。我们提出了一种名为XDomainMix的跨域特征增强方法,通过增加样本多样性和学习不变表示来实现领域泛化。实验证明我们的方法能够实现最先进的性能。
我们提出了一种名为PLDG的新型无标签领域通用化框架,通过无监督领域发现和提示学习,实现了对医学图像分类的领域通用化。在三个医学图像分类任务和一个去偏任务上进行了广泛实验,证明了我们的方法在不依赖领域标签的情况下实现了与传统DG算法相媲美甚至更好的性能。
本文提出了利用不变特征子空间恢复(ISR)实现域泛化的算法。ISR-Mean和ISR-Cov可以从一阶和二阶矩中识别不变特征所涵盖的子空间,并在训练集为d_s+1时实现可证明的域泛化。相比Invariant Risk Minimization (IRM),ISR算法避免了非凸性问题,并具有全局收敛性保证。实验结果表明ISR算法在合成基准测试和图像与文本三个真实数据集上,都能作为简单但有效的后处理方法来提高训练模型对假冗余和组偏差的最坏情况准确性。
医学数据分布变化导致深度学习模型性能下降。研究提出了一种新的医学图像分类方法,利用对比解缠绕和样式正则化提取特征。该方法在多中心组织病理图像分类任务上超过最先进方法1%,表现更稳定。
利用大型语言模型和文本到图像生成技术,我们介绍了一种领域外推方法,通过合成全新领域的高保真、逼真的图像来显著提高域泛化数据集的训练效果,实现了单一和多领域泛化任务上的显著改进,甚至在没有任何收集数据的条件下,超过了监督设置的表现。
该研究介绍了一种新的自适应领域泛化(ADG)任务,通过将预先训练的源模型与具有先验领域知识的目标领域进行适应。研究人员构建了一个包含39万个真实领域图像的新数据集DomainVerse,并提出了两种免调优的自适应领域泛化方法。实验证明了数据集的重要性和方法的有效性。
本文介绍了物体中心表示学习的概念,并在多目标数据集上进行了无监督模型的训练和评估。研究发现物体中心表示对下游任务有用,但在分布变化不规则时性能可能受到影响。
该论文提出了一个新的深度补全框架,利用虚拟模式投影范例和现代立体网络的概括能力来实现深度补全。该框架可无缝插入到任何立体网络或传统立体匹配器中,对未来立体领域具有先进性。通过详尽实验支持,认为该框架能够帮助深度补全达到新的实施场景。
本文针对开放领域泛化问题,通过使用单个网络以及预训练的头部和两个正则化项进行特征提取、分类和模型修改,使模型适应未知领域并提高对未知类别的检测能力,最终在多个基准测试中取得了有竞争力的性能。
本文提出了一种基于领域增强和特征对齐的元学习方法,用于改善单一领域泛化模型的性能。实验证明,MetaDefa在未知多个目标领域中具有显著的泛化性能优势。
完成下面两步后,将自动完成登录并继续当前操作。