支付宝推出全新医疗大模型 引领医疗行业进入多模态AI新时代

【ITBEAR科技资讯】7月5日消息，支付宝于今日宣布在医疗领域AI技术布局的重大进展，推出了国内首批多模态医疗大模型之一。

这款医疗大模型以蚂蚁集团的蚂蚁百灵大模型为基础构建。蚂蚁百灵大模型已展现出强大的原生多模态能力，能够直接理解和训练包括音频、视频、图像和文本在内的多种数据形式，据蚂蚁集团大模型应用部总经理顾进杰详细介绍。

在此坚实基础上，支付宝医疗大模型进一步整合了百亿级的中英文图文医疗数据、千亿级的医疗文本资料，以及千万级的高质量医疗知识图谱。顾进杰补充指出，该模型在中英文医疗考试及基准测试中已达到或超越GPT4的水平。

全栈自研的医疗多模态结构使得该模型在识别报告、药品、毛发等图像的准确率高达90%以上。相关技术成果已经在多个行业顶尖的技术期刊和会议上发布，如CVPR、KDD、ECCV等。

据ITBEAR科技资讯了解，该多模态医疗大模型功能全面，不仅支持智能问答、病历结构化与检索、辅助诊断，还能识别并解读药品及众多复杂的医学报告，甚至能进行毛发健康检测。这些功能可以无缝嵌入到医院等医疗机构的整个流程中。

顾进杰强调，在医疗场景下，技术的可靠性和数据的隐私安全至关重要。为此，支付宝为行业推出了全新的“医疗可信一体机+可信云”解决方案，该方案利用密态计算与存储技术，确保医疗数据在使用过程中保持隐私安全，为医疗机构提供更高级别的数据保护。

此外，为了解决医院可能面临的算力不足问题，支付宝还推出了百灵医疗可信一体机，这款设备即插即用，支持国产算力，并实现软硬件的协同优化。同时，医疗大模型可信云方案则聚焦解决数据隐私和商业机密保护的问题，支持公有云和专有云的密态推理部署。

支付宝自2014年开始支持全国首笔远程挂号缴费以来，经过十年的发展，其平台已经为超过6亿的就医人群提供服务。目前，全国范围内已有超过3600家医院通过支付宝提供一站式的数字医疗服务。