小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

本研究提出了一种无损标记剪枝方法,以解决后交互神经信息检索模型(如ColBERT)在存储文档标记时的高内存需求。通过引入三种正则化损失和两种剪枝策略,确保在仅使用30%标记的情况下,模型性能得以保持。

Towards Lossless Token Pruning in Late-Interaction Retrieval Models

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-04-17T00:00:00Z

本文提出了一种新的方法,通过全局边界对齐和局部纹理保护模块来解耦全局边界对齐和局部纹理保护任务,并通过一致性损失协调局部流场和全局边界对齐。通过预测身体部位的可见性掩模来处理遮挡,以防止纹理扭曲。引入了新的正则化损失(NIPR)来惩罚纹理完整性受损的区域,保持局部邻域中的纹理规则和连贯变形。在虚拟试穿数据集上的评估表明,该方法性能强于当前的 SOTA 方法。

通过顺序变形实现压缩性虚拟试穿

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-12-26T00:00:00Z

该文介绍了深度神经网络中学习表示的信息最小性和不变性,以及通过正则化损失限制过拟合项的两种等效方式。作者展示了神经网络中学习到的表示组件的不变性和独立性在权重中的信息上限和下限是有界的。该理论能够量化和预测使用正则化损失时欠拟合和过拟合之间的尖锐相变,并阐明了损失函数、学习表示和泛化误差之间的关系。

透明信息瓶颈下的解耦表示学习

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-11-03T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码