ARTHURCHIAO'S BLOG
·
以旅行规划（Trip Planning）为例，看 DeepSeek-V3.2 如何合成高质量训练数据（2025）
内容提要
DeepSeek-V3.2通过自动合成高质量旅行规划数据，提升行程规划能力。该流程包括数据集准备和模型微调，采用无人工干预生成任务，确保数据质量和数量，最终生成的任务可验证，适用于强化学习训练。
关键要点
-
DeepSeek-V3.2通过自动合成高质量旅行规划数据，提升行程规划能力。
-
该流程包括数据集准备和模型微调，采用无人工干预生成任务。
-
高质量数据集的准备分为人工标注和自动合成两种方式。
-
考虑到人工标注成本高且可扩展性差，选择自动合成方式。
-
自动合成高质量旅行规划数据的流程包括获取基础旅游数据、生成旅行规划任务和验证生成的规划。
-
Agent通过动态执行生成的代码来筛选出符合用户要求的高质量结果。
-
DeepSeek-V3.2的工作流程包括环境和工具集构建、任务合成和解决方案生成。
-
生成的任务具有挑战性且易于验证，确保了数据的质量和数量。
-
最终生成了1,827个环境和4,417个任务，覆盖多个领域。
-
样本筛选标准为在100次随机尝试中至少能成功一次的任务才保留。
延伸解读
自动合成的优势
DeepSeek-V3.2通过自动合成旅行规划数据，显著降低了人工标注的成本和时间。这种方法不仅提高了数据的生成效率，还确保了数据的多样性和质量，适应了大规模强化学习的需求。
任务验证的重要性
在DeepSeek-V3.2的工作流程中，生成的任务必须经过验证，以确保其符合用户需求。这种验证机制不仅提高了模型的可靠性，也为后续的强化学习提供了有效的反馈，确保训练数据的有效性。
挑战与可扩展性
尽管自动合成方法在数据生成上具有优势，但仍需关注生成任务的复杂性和可验证性。随着任务难度的增加，确保每个任务都能被有效验证是一个持续的挑战，这对模型的训练效果至关重要。
延伸问答
DeepSeek-V3.2如何提升旅行规划能力？
DeepSeek-V3.2通过自动合成高质量旅行规划数据，提升行程规划能力，确保数据质量和数量。
自动合成高质量旅行规划数据的流程是什么？
流程包括获取基础旅游数据、生成旅行规划任务和验证生成的规划，确保任务可验证且具有挑战性。
为什么选择自动合成而非人工标注？
因为人工标注成本高且可扩展性差，自动合成可以在保证质量的同时增加样本数量。
DeepSeek-V3.2生成的任务有什么特点？
生成的任务具有挑战性且易于验证，确保了数据的质量和数量。
DeepSeek-V3.2的工作流程包括哪些步骤？
工作流程包括环境和工具集构建、任务合成和解决方案生成。
DeepSeek-V3.2最终生成了多少个环境和任务？
最终生成了1,827个环境和4,417个任务，覆盖多个领域。
