内容提要
Databricks推出AI Extract的Precision Mode,结合定制模型与智能代理,解决长文档、复杂模式提取难题。在约9000份文档测试中,准确率达94.7%,超越GPT-5.6 Sol等前沿模型7个百分点,适用于金融、医疗等领域,现已开放使用。
延伸解读
为何需要“精度模式”
现有大模型或规则方法在长文档、复杂模式提取上常因上下文限制或规则僵化而失效。Databricks的Precision Mode结合定制模型与智能代理,专门应对超长文档、大量输出和推理密集型模式,弥补了传统方法的不足。
基准测试的启示
在约9000份文档的测试中,Precision Mode准确率达94.7%,比最强的分块合并基线(GPT-5.6 Sol)高出7个百分点。这显示,对于复杂提取任务,单一模型调用或简单分块合并可能不够,需要更稳健的代理式方法。
适用场景与限制
该模式适用于金融、医疗等领域的复杂文档,如10-K文件、提单、临床记录等。但需注意,测试基于特定基准,实际效果可能因文档类型和模式而异。用户应评估自身需求,并参考官方文档了解具体用法。
Q&A
Databricks的AI Extract Precision Mode是什么?
Precision Mode是Databricks文档提取API ai_extract中的一种新模式,结合定制训练模型和智能代理,旨在提高长文档、复杂模式提取的准确性。
Precision Mode在测试中的准确率是多少?
在约9000份复杂文档的基准测试中,Precision Mode的准确率达到94.7%,比最强的前沿模型基线(GPT-5.6 Sol)高出7个百分点。
Precision Mode主要解决哪些提取难题?
它主要解决三类难题:长文档(如超过模型上下文限制)、大型输出(如数千行项目的发票)、以及需要推理的复杂模式(如跨文档交叉引用)。
Precision Mode与传统的分块合并方法相比有什么优势?
相比分块合并方法,Precision Mode通过智能代理机制避免了分块超时、输出截断和合并不完整等操作失败,同时定制模型保证了提取的准确性和效率。
哪些客户使用了Databricks Document Intelligence?
包括Panasonic、EY-Parthenon和Intercontinental Exchange(NYSE)等客户,他们每周处理数百万份文档。
如何启用AI Extract的Precision Mode?
在调用ai_extract函数时将模式设置为precision,或者在Agents页面的Information Extraction UI中打开precision模式开关。