当前位置:首页 >> 学术资讯 >> 科研信息

清华大学清华团队与上海交大医工交叉团队合作研制多模态眼成像大模型EyeFM

2025/09/05

文章导读
你是否想过,一只眼睛的影像能预示全身慢性病的发展?全球首个融合多模态眼成像与临床语言信息的大模型EyeFM诞生了!它不仅突破AI医疗“单模态、难验证、难协作”的三大瓶颈,更通过覆盖四大洲的前瞻性研究和中国本土随机对照试验,首次为AI赋能基层与专科诊疗提供高级别循证证据。由清华与上海交大团队联合研发,这项登顶《自然·医学》的成果,正构建AI大模型临床落地的“中国范式”——不是替代医生,而是让AI真正融入诊疗回路,开启智慧眼健康管理新纪元。
— 内容由好学术AI分析文章内容生成,仅供参考。

当前,基础大模型(Foundation Model, FM)已成为医疗人工智能临床应用的核心驱动力,但三大关键瓶颈始终制约其从实验室走向真实诊疗场景。第一,现有医疗FM多依赖单模态数据训练,难以像临床医生那样融合多模态医学信息实现跨模态对齐,无法适配实际诊疗中“多影像协同诊断”的需求;第二,多数研究仅停留在回顾性数据验证阶段,缺乏覆盖多人群、多场景的前瞻性验证,更鲜有通过随机对照试验(RCT)这一金标准的检验,导致临床落地可行性与实际价值大打折扣;第三,医疗领域复杂的伦理、法律与社会挑战明确了AI的辅助定位,但现有研究多聚焦AI独立诊断能力,忽视了人机协作模式在真实临床流程中的实际意义和重要性。眼科学因常规应用多模态影像检查(如彩色眼底照、光学相干断层扫描等),成为突破上述瓶颈的理想领域。

近日,清华大学团队与上海交通大学医工交叉团队攻关,成功研发全球首个多模态视觉-语言眼部成像基础大模型EyeFM,并构建首个经临床验证的医疗AI大模型落地路线图,为大模型临床转化提供“可复制、可推广”的解决方案。

针对“如何通过眼成像刻画慢性病发展规律、赋能智慧诊疗”这一全球热点研究方向,研究团队依托超千万眼部影像及多模态诊疗数据,成功构建多模态眼成像基础大模型(EyeFM)。随后,团队通过云端协同模式前瞻性部署基于该大模型的数字化平台,并采用“人在回路”(Human-in-the-Loop)的临床验证设计,在全球不同地域(涵盖亚洲、北美、欧洲及非洲)的基层及眼科医生中,前瞻性验证了该大模型对诊疗能力的提升效果。与此同时开展了一项基于中国临床真实场景的随机临床研究,实现临床自适应的健康指导与智能交互服务。此次全球合作研究,首次为AI医学领域提供了大模型赋能基层与专科诊疗的高级别循证证据,同时为未来更多可临床转化的基础模型研发与验证提供了全新范式,有效推动该类新技术从实验室研究阶段迈向临床实际应用场景。

清华大学清华团队与上海交大医工交叉团队合作研制多模态眼成像大模型EyeFM

EyeFM为基于眼成像的AI大模型落地全球诊疗提供中国方案

研究成果以“眼成像基础大模型赋能临床诊疗:随机对照试验”(An eyecare foundation model for clinical assistance: a randomized controlled trial)为题,于8月28日发表于《自然·医学》(Nature Medicine)。

清华大学医学院教授黄天荫和上海交通大学计算机学院教授盛斌为论文共同通讯作者。清华大学八年制临床医学2017级学生吴漪澜,上海交通大学计算机学院钱波、李庭瑶,清华大学医学院秦义明,上海市交通大学医学院管洲榆,上海市保健医疗中心主任医师陈婷丽,美国俄勒冈健康与科学大学Yali Jia,美国俄亥俄州立大学张平以及清华大学医学院曾典为论文共同第一作者。研究得到北京市视觉科学与转化医学研究中心、新加坡国立眼科中心等机构专家的联合指导和支持。


版权声明:
文章来源清华大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年智慧交通与检测技术国际会议(ITDT 2026)(2026-03-25)

2026年第六届智能机器人系统国际会议(ISoIRS 2026)(2026-03-27)

2026年人工智能教育技术与数据科学国际学术会议(AIETDS 2026)(2026-03-27)

2026年IEEE第八届软件工程和计算机科学国际会议(CSECS 2026)(2026-04-17)

第十五届春季国际工程与技术大会 (SCET 2026)(2026-04-17)

2026年金融科技、创新与信息技术国际会议(2026-04-18)

2026年多尺度人工智能国际会议(MAI 2026)(2026-04-24)

第三届机器学习与智能计算国际学术会议(MLIC 2026)(2026-04-24)

2026 空天信息与产业创新国际学术研讨会暨第二届中国——塞尔维亚空天技术与产业应用研讨会(ISA3I 2026)(2026-04-24)

数字化教育系统与计算机科学国际学术会议(2026-04-24)

2026年艺术文化与社会发展国际会议(ACSD 2026)(2026-4-27)

2026年社会科学,教育与哲学历史国际会议(ICSSEPH 2026)(2026-4-27)

2026年第15届计算与模式识别国际会议(ICCPR 2026)(2026-10-29)

2026年智能电网与能源电力国际学术会议(ICSGEP 2026)(2026-4-29)

2026年体育教育与心理健康国际会议(ICPEMH 2026)(2026-3-27)

2026绿色建材、岩土工程与力学测试国际会议(ICGBMG 2026)(2026-4-28)

2026动力、材料与供应链管理国际会议(ICPMSCM 2026)(2026-4-28)

2026虚拟现实、信号处理与人工智能国际会议(ICVRSPAI 2026)(2026-3-29)

2026微电子、电气技术与自动化工程国际会议(ICMETAE 2026)(2026-4-30)

2026生物技术、生物医学与食品安全国际学术会议(ICBBFS 2026)(2026-3-30)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。
综合推荐区

学术科研网址导航,430+站,定制学术书签

2026年第五届云计算、计算机视觉和图像处理.

2026年动力学与机械工程国际学术研讨会 (.

2026年IEEE第八届软件工程和计算机科学.

2026年第八届计算机图形学、图像与可视化国.

第八届信息科学、电气与自动化工程国际学术会议.

第三届机器学习与智能计算国际学术会议(MLI.

第六届自动化控制、算法与智能仿生国际学术会议.

2026 年第三届计算,机器学习与数据科学国.

第十三届先进制造技术与材料工程国际学术会议 .

第二届人工智能与产品设计国际学术会议 (AI.

2026年多尺度人工智能国际会议(MAI 2.

2026年量子计算与人工智能国际学术会议(I.

2026年第六届计算机视觉与模式分析国际学术.

第七届机械仪表与自动化国际学术会议(ICMI.

2026年第四届亚洲机器学习、算法与神经网络.

2026年第四届亚洲计算机视觉、图像处理与模.

2026年人工智能与数据挖掘国际学术会议(A.

2026年IEEE第七届计算,网络与物联网国.

2026年第五届网络、通信与信息技术国际会议.

2026年智能机器人与控制技术国际会议(CI.

2026年传感器技术、自动化与智能制造国际会.

2026年智能系统与计算国际会议 (ICIS.

2026年电子, 通信与计算机科学国际会议 .

2026年IEEE第三届先进机器人, 自动化.

2026年第七届控制, 机器人与智能系统国际.