支付宝AI新进展：发布多模态医疗大模型，携手20家机构发起AI医疗共建计划
内容提要
支付宝在2024世界人工智能大会上发布了多模态医疗大模型，旨在提升医疗服务效率。该模型能够处理音频、视频和图文数据，并与多家机构合作推出AI医疗共建计划，具备智能问答和辅助诊断功能，同时保障数据隐私安全。支付宝希望通过AI技术普惠医疗服务，已服务超过6亿患者。
延伸解读
多模态医疗大模型的技术突破
支付宝医疗大模型基于蚂蚁百灵大模型，具备原生多模态能力，可处理音频、视频、图文等数据。通过添加百亿级中英文图文、千亿级医疗文本语料及千万级高质量医疗知识图谱，模型在中文医疗LLM评测榜单promptCBLUE中位列A榜第一、B榜第二，中英文医疗考试基准测试达到或超过GPT4水准。全栈自研医疗多模态结构使图像识别准确率达90%以上，相关成果发表于CVPR、KDD、ECCV等顶尖会议。
医疗可信一体机与可信云方案
针对医疗场景对数据隐私和安全的高要求，支付宝推出“医疗可信一体机+可信云”解决方案。百灵医疗可信一体机核心解决医院算力不足痛点，开箱即用、训推一体，支持国产算力，软硬件协同优化加速。医疗大模型可信云方案通过公有云与专有云部署密态推理，聚焦数据隐私安全和商业机密保护，实现医疗数据可用不可见，让机构保管更安全。
AI医疗共建计划与生态合作
支付宝联合人民卫生出版社、北京大学医学部、浙江省卫生健康委等20多家机构，发起AI医疗共建计划，共同探索大模型应用及专科模型创新研发。此前，浙江卫健委应用支付宝“AI就医助理”方案打造数字健康人“安诊儿”，已服务1000多家医疗机构；上海市第一人民医院上线语音交互“数字陪诊师”和生成式电子病历，将文书工作从10分钟缩减到15秒。这些案例展示了AI在医疗领域的实际落地效果。
支付宝医疗服务的普惠基础
支付宝自2014年支持全国第一笔远程挂号缴费以来，已服务超6亿看病就医人群，成为国内规模最大的医保第三方在线服务平台和一站式医疗健康服务平台。目前，全国300多个城市、超3600家医院在支付宝上提供一站式数字医疗服务。支付宝副总裁张俊杰表示，希望用最顶尖的技术做最普惠的服务，让AI像“扫码支付”一样便利每个人的生活，持续开放AI技术与行业解决方案，推动智能医疗走向普惠、普及。
Q&A
支付宝的多模态医疗大模型有什么主要功能？
该模型具备智能问答、辅助诊断、病历结构化和检索等功能，能够识别复杂医学报告和药品。
支付宝如何保障医疗数据的隐私安全？
支付宝推出了医疗可信一体机和可信云方案，通过密态计算与存储，确保医疗数据可用不可见。
支付宝的医疗大模型在准确率上表现如何？
医疗大模型的识别准确率达90%以上，能够有效处理复杂医学报告和药品信息。
支付宝与哪些机构合作发起了AI医疗共建计划？
支付宝与人民卫生出版社、北京大学医学部、浙江省卫生健康委等20家机构合作发起了该计划。
支付宝的医疗大模型如何提升医疗服务效率？
通过智能问答和辅助诊断功能，医疗大模型能够嵌入医院等机构的全流程，提升运营效率。
支付宝在医疗领域的AI技术应用有哪些实例？
例如，浙江卫健委应用了AI就医助理，上海市第一人民医院推出了可语音交互的数字陪诊师。
