小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
使用Transformers.js和句子嵌入构建语义搜索

本文介绍了如何使用Transformers.js和句子嵌入构建客户端语义搜索引擎,包括句子嵌入的工作原理、余弦相似度的计算、嵌入的生成与缓存,以及可重用的SemanticSearch类的创建。通过比较句子的语义而非关键词,语义搜索提高了搜索结果的相关性。

使用Transformers.js和句子嵌入构建语义搜索

MachineLearningMastery.com
MachineLearningMastery.com · 2026-06-05T12:00:01Z
使用LLM嵌入和元数据构建上下文感知的Python搜索

本文介绍了如何使用Python构建上下文感知的语义搜索引擎,结合嵌入式相似性和结构化元数据过滤。内容涵盖句子嵌入和余弦相似度的原理,构建元数据感知的搜索索引,以及索引的持久化方法。这些技术能够有效找到与用户查询相关的文档,同时考虑上下文约束。

使用LLM嵌入和元数据构建上下文感知的Python搜索

MachineLearningMastery.com
MachineLearningMastery.com · 2026-05-22T12:00:56Z

本文介绍了如何使用Python和NumPy从零构建向量搜索引擎。向量搜索通过将文本表示为高维空间中的点,利用几何接近度编码语义相似性。文章详细讲解了数据集设置、索引构建、查询运行和结果可视化,展示了如何通过余弦相似度进行高效搜索。读者可以尝试用真实数据替换模拟嵌入,进一步探索向量搜索的应用。

如何在Python中从零构建向量搜索

KDnuggets
KDnuggets · 2026-05-08T12:00:32Z
余弦相似度是如何工作的?大型语言模型背后的数学解析

余弦相似度是大型语言模型判断句子相似性的关键工具,通过测量向量间的角度评估文本相似性,公式为:余弦相似度(A, B) = (A · B) / (||A|| * ||B||)。该方法广泛应用于语义搜索、聚类和推荐系统,尽管存在一些局限性,但仍是自然语言处理的重要基础。

余弦相似度是如何工作的?大型语言模型背后的数学解析

freeCodeCamp.org
freeCodeCamp.org · 2025-09-18T01:12:39Z
如何使用句子变换器进行句子相似性检查

句子相似性在自然语言处理中的重要性不言而喻。通过句子变换器,可以高效比较句子的语义。本文介绍了句子相似性的概念、句子变换器的原理及其在Python中的实现,包括加载预训练模型、将句子转换为嵌入和计算余弦相似度等。句子相似性广泛应用于语义搜索、重复检测和推荐系统等领域。

如何使用句子变换器进行句子相似性检查

freeCodeCamp.org
freeCodeCamp.org · 2025-09-03T16:29:56Z
从零开始实现向量搜索:一步一步的教程

本文介绍了如何从零开始实现向量搜索。向量搜索通过将查询和文档转换为数值向量,匹配语义而非关键词,从而提高搜索智能性。文章详细讲解了向量表示、相似度计算和检索步骤,并提供了Python实现示例,包括数据集创建、向量转换和余弦相似度计算。最终,读者将掌握向量搜索的基本原理及其应用。

从零开始实现向量搜索:一步一步的教程

MachineLearningMastery.com
MachineLearningMastery.com · 2025-06-10T14:49:47Z
Correlations:图形界面中的嵌入效果测试

本文介绍了一款名为“Correlations”的开源工具,用于调试和可视化嵌入。该工具生成交互式热图,展示文本或图像之间的余弦相似度,支持区域选择和阈值过滤,适用于内容去重、引用验证和跨模态分析,帮助用户深入理解语义关系。

Correlations:图形界面中的嵌入效果测试

Jina AI
Jina AI · 2025-05-28T05:27:37Z
重现Hacker News写作风格指纹

一名学生利用余弦相似度分析Hacker News评论中的高频词,以识别相似账户。作者通过Python脚本处理数据,应用Burrows-Delta方法生成用户风格向量,并将其存储在Redis中。研究表明,使用150到500个高频词能够有效区分用户的写作风格。

重现Hacker News写作风格指纹

<antirez>
<antirez> · 2025-04-16T13:53:16Z
文本嵌入的长度偏见及其在搜索中的影响

文本嵌入模型的相似性评分受输入长度偏见影响,长文本通常得分较高,导致相关性评估不准确。即使相似文本得分更高,长文本的偏见使得相似性评分不可靠。因此,应结合其他方法判断文本的实际相关性,而非仅依赖余弦相似度。

文本嵌入的长度偏见及其在搜索中的影响

Jina AI
Jina AI · 2025-04-16T01:40:03Z
理解嵌入模型及其在搜索中的应用

嵌入模型是一种机器学习技术,用于将分类数据转化为连续向量,从而提升搜索效果。通过理解用户查询和文档的语义,嵌入模型能够提供更精准的搜索结果。Word2Vec是常用的嵌入模型,通过局部上下文学习单词表示。使用Python和Gensim库,可以实现基于Word2Vec的搜索应用,计算查询向量与文档向量的余弦相似度,返回相关文档。

理解嵌入模型及其在搜索中的应用

DEV Community
DEV Community · 2025-04-14T15:48:30Z
基于协同过滤的推荐系统

本文探讨了推荐系统,重点介绍协同过滤和余弦相似度在物品推荐中的应用,并通过Python库实现用户-物品矩阵和用户相似度矩阵的计算。

基于协同过滤的推荐系统

DEV Community
DEV Community · 2025-04-07T08:04:50Z
余弦相似度如何帮助我的命令行界面决定文件归属(messy-folder-reorganizer-ai)

在版本0.2的messy-folder-reorganizer-ai中,使用Qdrant向量数据库进行相似向量搜索。余弦相似度因其关注方向而非大小,适合高维嵌入,有效比较文件和文件夹名称的相似性。

余弦相似度如何帮助我的命令行界面决定文件归属(messy-folder-reorganizer-ai)

DEV Community
DEV Community · 2025-03-28T15:41:57Z
数据归类工具

文本相似度归类方法包括Levenshtein、Jaccard、余弦相似度和Jaro-Winkler等,适用于拼写检查、关键词匹配和文档推荐等场景。选择合适算法可提升文本处理效率。

数据归类工具

Raz1ner
Raz1ner · 2025-03-24T00:42:40Z
数据归类工具

本文介绍了编辑距离、Jaccard相似度、余弦相似度和Jaro-Winkler相似度等文本相似度计算算法,详细阐述了各算法的优缺点及适用场景,以帮助用户选择合适的算法进行数据归类和匹配。

数据归类工具

Raz1ner
Raz1ner · 2025-03-24T00:42:40Z
向量搜索分析 - Google BigQuery 与 Azure AI 搜索

随着生成式AI的普及,搜索技术逐渐成为焦点。传统搜索依赖文本匹配,而生成式AI引入向量搜索,提升了自然语言搜索体验。分析显示,余弦相似度在图像语义搜索中优于欧几里得距离,且Google BigQuery的搜索结果更接近人类搜索。两者仍在持续发展中。

向量搜索分析 - Google BigQuery 与 Azure AI 搜索

DEV Community
DEV Community · 2025-02-09T18:10:40Z
余弦相似度可能没用?对于某些线性模型,相似度甚至不唯一

研究表明,余弦相似度在高维对象的相似性测量中可能导致无意义的结果,尤其在深度学习模型中。因此,建议谨慎使用余弦相似度,并提出欧几里得距离和点积等替代方案,以提高相似度计算的可靠性。

余弦相似度可能没用?对于某些线性模型,相似度甚至不唯一

机器之心
机器之心 · 2025-01-14T06:24:00Z

本研究提出了一种新型面部识别技术,针对佩戴口罩和不佩戴口罩的面孔识别问题。通过引入基于余弦相似度的Masked-Unmasked Face Matching Model (MUFM),结合VGG16模型和K-最近邻算法,显著提高了识别准确性,具有重要应用价值。

A Novel Facial Recognition Technique Focusing on Masked Faces

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-01-08T00:00:00Z

Ava和Leo通过余弦相似度分析用户偏好,构建了一个实时系统,利用Kafka、Redis和Apache Flink处理数据,显著提升了用户体验和参与度,展示了技术与统计的结合效果。

余弦相似度

dotNET跨平台
dotNET跨平台 · 2024-12-27T00:03:55Z
[论文实现] 快速形状模板匹配

本文介绍了一种基于形状的快速模板匹配算法,利用经典图像处理技术检测无纹理物体。该算法通过计算物体的梯度方向生成模板数据,并使用余弦相似度评估与测试图像的匹配程度,兼顾速度与准确性,适合实时处理。实现代码可在GitHub上获取。

[论文实现] 快速形状模板匹配

DEV Community
DEV Community · 2024-12-22T11:26:04Z
文本嵌入无法捕捉词序及其修正方法

LAION AI创始人Christoph Schuhmann指出,文本嵌入模型对词序和词义变化不敏感,随机打乱词语后余弦相似度仍高,这对搜索等应用构成挑战。研究显示模型在处理方向、时间、因果、比较和否定等语义时存在局限性,微调模型可改善其性能。

文本嵌入无法捕捉词序及其修正方法

Jina AI
Jina AI · 2024-12-17T15:30:27Z
  • <<
  • <
  • 1 (current)
  • 2
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码