PP-ChatOCRv2赋能期刊出版,打造千家杂志社数字阅读新体验
内容提要
杂志铺与3000多家杂志社合作,提供7000多种杂志,为500多万读者提供阅读资源。杂志铺计划构建一个SaaS系统,利用AI技术优化期刊的阅读助读和知识拓展功能。该系统基于飞桨,通过OCR技术帮助用户识别和扫描内容,实现了文章解读、作文批改、图片识别等功能。系统面临的难点包括复杂的版面布局、多样的杂志文档格式和版式、多语言支持以及阅读顺序恢复问题。为解决这些问题,杂志铺采用飞桨低代码开发工具中的文档场景信息抽取模型产线作为解决方案。经过模型训练和性能调优,最终版面分析模型的精度提升了11%。杂志铺表示,使用PaddleX工具大大节省了人力成本,提高了工作效率。
延伸解读
技术选型:为何选择PP-ChatOCRv2_doc产线
杂志铺的SaaS系统需要处理复杂版面、多样格式和多语言杂志,传统OCR难以满足。飞桨低代码工具中的文档场景信息抽取产线融合了通用OCR和版面分析技术,并集成文心大模型能力,可完成全文摘要和智能推荐。该产线包含版面分析、文本检测、文本识别和表格识别四大模块,共六个模型,提供高精度server和高效mobile版本,适合杂志场景。
模型优化:从63.8%到74.9%的精度提升
初始版面分析模型mAP@0.5为63.8%,对复杂插图和排版页面检测效果不佳。通过badcase分析,团队扩充了500张复杂场景杂志版面图像,并复用超参数训练100、200、500轮次,最终模型最高精度达到74.9%,较之前提升11个百分点。这一过程表明,针对性的数据扩充和超参数调试能有效提升模型在真实场景中的表现。
部署灵活性:在线API与离线定制
星河零代码产线简化了模型部署,用户可一键将模型权重部署为在线服务API,供联网设备调用,并支持单图测试验证效果。对于需要深度定制的场景,PaddleX提供离线部署包,包含模型权重和示例代码,用户可基于输出坐标信息编写后处理代码,实现阅读顺序恢复等定制功能,满足不同设备的部署需求。
实际效益:效率提升与成本节省
杂志铺用户反馈,此前每篇文章录入需约10分钟,人工消耗大。使用PaddleX训练高精度模型后,信息录入仅需几秒,且接入大模型可获得准确推荐结果,大幅节省人工标注成本。用户表示,即使没有模型训练经验,也能在官方指引下轻松完成数据标注和模型训练,将更多精力投入创作。
Q&A
杂志铺与多少家杂志社合作?
杂志铺与3000多家杂志社合作。
PP-ChatOCRv2系统的主要功能是什么?
该系统利用OCR技术实现文章解读、作文批改和图片识别等功能。
杂志铺在构建SaaS系统时面临哪些挑战?
面临复杂版面布局、多样文档格式、多语言支持和阅读顺序恢复等问题。
如何提升版面分析模型的精度?
通过数据校验和模型训练,使用1300张高质量标准数据进行微调,最终精度提升至74.9%。
使用PaddleX工具后,杂志铺的工作效率如何变化?
使用PaddleX后,信息录入效率大幅提升,节省了人力成本。
未来杂志铺对PaddleX的期望是什么?
杂志铺期待PaddleX在更多场景中的应用,探索更多可能性。