原文英文,约1200词,阅读约需5分钟。
📝
内容提要
我们发布了第五代嵌入模型jina-embeddings-v5-text,提供677M和239M参数的两个版本,支持32K上下文和四种任务特定的LoRA适配器。v5-text-small在MMTEB上得分67.0,超越其他小于1B的模型,且体积更小。该模型在多语言和英语任务中表现优异,适合内存受限的部署。
🔎
延伸解读
模型参数与性能对比
jina-embeddings-v5-text提供677M和239M两个版本,前者在MMTEB上得分67.0,后者得分65.5。值得注意的是,239M的nano模型在检索质量上与双倍参数的模型相当,显示出较小模型在性能上的潜力。
适应内存受限环境
v5-text-small和v5-text-nano模型特别适合内存受限的部署场景。通过使用GOR正则化,模型在进行二进制量化时几乎无损,这使得它们在边缘设备和移动应用中具有更高的实用性。
任务特定适配器的优势
这两个模型支持四种任务特定的LoRA适配器,分别用于检索、文本匹配、分类和聚类。这种设计允许用户根据具体任务选择合适的适配器,从而提高了模型的灵活性和效率。
❓
Q&A
jina-embeddings-v5-text模型有哪些参数版本?
该模型提供677M和239M参数的两个版本。
v5-text-small在MMTEB上的得分是多少?
v5-text-small在MMTEB上得分67.0。
这款模型适合什么样的部署环境?
该模型适合内存受限的部署环境。
v5-text-small与v4模型相比有什么优势?
v5-text-small在检索任务上与3.8B的jina-embeddings-v4相当,但体积小5.6倍。
模型的训练方法是什么?
模型经过Qwen3-Embedding-4B的蒸馏训练,结合了对比损失和蒸馏损失。
Elastic Inference Service的作用是什么?
Elastic Inference Service提供了快速的生产环境使用方式,支持直接生成嵌入。
🏷️