京东零售技术团队在2024年发表多篇AI论文,涉及目标检测和排序模型等,提出新框架和方法以提升电商搜索和推荐系统性能,解决长尾商品和用户偏好问题,推动技术进步。
信息检索系统常用学习排序模型响应用户查询,但面临冷启动和用户行为变化的问题。我们提出BayesCNS,一种贝叶斯方法,通过在线学习解决这些挑战。BayesCNS估计用户与项目的交互先验分布,并通过排名模型指导探索相关项目。实验表明,该方法在大规模搜索系统中有效,提高了新项目的交互和整体成功率。
本文介绍了一种结合传统特征与深度卷积神经网络的多模式学习排序模型,旨在提升电子商务搜索结果的排名质量。研究表明,该模型在多个数据集上表现优越,并成功应用于美团外卖等平台,显著改善了用户搜索体验及产品排序的准确性与多样性。
AIxiv专栏介绍了排序模型中的双编码器和交叉编码器架构,以及以ColBERT为代表的延迟交互模型。ColBERT采用双编码器策略,提供高效的排序性能和精准的搜索排序结果。Infinity数据库提供了端到端的ColBERT方案,通过Tensor数据类型和Tensor Index技术优化计算性能。评测结果表明,ColBERT作为Reranker能够显著提升搜索结果质量。ColBERT及其延迟交互模型在RAG场景具有应用价值。
本文介绍了基于ERNIE-Gram模型训练的排序模型和基于RocketQA的CrossEncoder训练的单塔模型。排序模型使用双塔模型和margin_ranking_loss进行训练,评估指标为AUC。训练环境依赖于Python和PaddlePaddle等库。代码结构包括部署、环境依赖、代码结构、数据介绍等部分。基于RocketQA的CrossEncoder训练的单塔模型用于搜索的排序阶段,对召回的结果进行重新排序。CrossEncoder模型与Pairwise模型的区别在于输入方式、训练方式、处理效率和应用场景等。
完成下面两步后,将自动完成登录并继续当前操作。