voyage-3与voyage-3-lite:新一代小巧而强大的通用嵌入模型

voyage-3与voyage-3-lite:新一代小巧而强大的通用嵌入模型

💡 原文英文,约800词,阅读约需3分钟。
📝

内容提要

我们推出了voyage-3和voyage-3-lite嵌入模型,提升了检索质量并降低了成本。voyage-3在多个领域的表现超越OpenAI v3 large 7.55%,成本降低2.2倍;voyage-3-lite在检索准确性上比OpenAI v3 large高出3.82%,成本降低6倍。两者支持32K-token上下文长度,适合多种应用场景。

🎯

关键要点

  • 推出了voyage-3和voyage-3-lite嵌入模型,提升了检索质量并降低了成本。
  • voyage-3在多个领域的表现超越OpenAI v3 large 7.55%,成本降低2.2倍。
  • voyage-3-lite在检索准确性上比OpenAI v3 large高出3.82%,成本降低6倍。
  • 两者支持32K-token上下文长度,适合多种应用场景。
  • voyage-3和voyage-3-lite是通过改进架构、从更大模型中提炼、使用超过2T高质量标记进行预训练以及通过人类反馈对检索结果进行对齐等研究创新的结果。
  • voyage-3在多语言检索质量上仅略逊于voyage-multilingual-2,且延迟更低,成本减半。
  • voyage-3-lite在检索准确性上超越所有非Voyage模型,表现优于OpenAI v3 large、Cohere multilingual v3和Multilingual E5。

延伸问答

voyage-3和voyage-3-lite的主要优势是什么?

voyage-3和voyage-3-lite在检索质量上显著提升,同时降低了成本,voyage-3在多个领域超越OpenAI v3 large 7.55%,而voyage-3-lite在检索准确性上高出3.82%。

voyage-3和voyage-3-lite适合哪些应用场景?

这两个模型支持32K-token上下文长度,适合多种应用场景,包括代码、法律、金融和多语言检索等领域。

voyage-3和voyage-3-lite的成本优势如何?

voyage-3的成本降低了2.2倍,而voyage-3-lite的成本降低了6倍,提供了更具性价比的选择。

voyage-3在多语言检索方面的表现如何?

voyage-3在多语言检索质量上仅略逊于voyage-multilingual-2,且延迟更低,成本减半。

voyage-3和voyage-3-lite是如何开发的?

这两个模型是通过改进架构、从更大模型中提炼、使用超过2T高质量标记进行预训练以及通过人类反馈对检索结果进行对齐等研究创新的结果。

voyage-3-lite与其他模型相比有什么优势?

voyage-3-lite在检索准确性上超越所有非Voyage模型,表现优于OpenAI v3 large、Cohere multilingual v3和Multilingual E5。

➡️

继续阅读