本文介绍使用Modal无服务器GPU训练SPLADE稀疏嵌入模型。基于亚马逊ESCI数据集,将Exact和Substitute对作为正样本,通过SpladeLoss结合对比学习与稀疏正则化,控制查询约30词、文档100-400词。产品文本以品牌括号和竖线分隔格式化。10万样本在A100上训练约6分钟、成本不足1美元,检查点存入持久卷,支持断连续跑和并行超参搜索。
完成下面两步后,将自动完成登录并继续当前操作。