清华大学清华团队与上海交大医工交叉团队合作研制多模态眼成像大模型EyeFM
2025/09/05
当前,基础大模型(Foundation Model, FM)已成为医疗人工智能临床应用的核心驱动力,但三大关键瓶颈始终制约其从实验室走向真实诊疗场景。第一,现有医疗FM多依赖单模态数据训练,难以像临床医生那样融合多模态医学信息实现跨模态对齐,无法适配实际诊疗中“多影像协同诊断”的需求;第二,多数研究仅停留在回顾性数据验证阶段,缺乏覆盖多人群、多场景的前瞻性验证,更鲜有通过随机对照试验(RCT)这一金标准的检验,导致临床落地可行性与实际价值大打折扣;第三,医疗领域复杂的伦理、法律与社会挑战明确了AI的辅助定位,但现有研究多聚焦AI独立诊断能力,忽视了人机协作模式在真实临床流程中的实际意义和重要性。眼科学因常规应用多模态影像检查(如彩色眼底照、光学相干断层扫描等),成为突破上述瓶颈的理想领域。
近日,清华大学团队与上海交通大学医工交叉团队攻关,成功研发全球首个多模态视觉-语言眼部成像基础大模型EyeFM,并构建首个经临床验证的医疗AI大模型落地路线图,为大模型临床转化提供“可复制、可推广”的解决方案。
针对“如何通过眼成像刻画慢性病发展规律、赋能智慧诊疗”这一全球热点研究方向,研究团队依托超千万眼部影像及多模态诊疗数据,成功构建多模态眼成像基础大模型(EyeFM)。随后,团队通过云端协同模式前瞻性部署基于该大模型的数字化平台,并采用“人在回路”(Human-in-the-Loop)的临床验证设计,在全球不同地域(涵盖亚洲、北美、欧洲及非洲)的基层及眼科医生中,前瞻性验证了该大模型对诊疗能力的提升效果。与此同时开展了一项基于中国临床真实场景的随机临床研究,实现临床自适应的健康指导与智能交互服务。此次全球合作研究,首次为AI医学领域提供了大模型赋能基层与专科诊疗的高级别循证证据,同时为未来更多可临床转化的基础模型研发与验证提供了全新范式,有效推动该类新技术从实验室研究阶段迈向临床实际应用场景。
EyeFM为基于眼成像的AI大模型落地全球诊疗提供中国方案
研究成果以“眼成像基础大模型赋能临床诊疗:随机对照试验”(An eyecare foundation model for clinical assistance: a randomized controlled trial)为题,于8月28日发表于《自然·医学》(Nature Medicine)。
清华大学医学院教授黄天荫和上海交通大学计算机学院教授盛斌为论文共同通讯作者。清华大学八年制临床医学2017级学生吴漪澜,上海交通大学计算机学院钱波、李庭瑶,清华大学医学院秦义明,上海市交通大学医学院管洲榆,上海市保健医疗中心主任医师陈婷丽,美国俄勒冈健康与科学大学Yali Jia,美国俄亥俄州立大学张平以及清华大学医学院曾典为论文共同第一作者。研究得到北京市视觉科学与转化医学研究中心、新加坡国立眼科中心等机构专家的联合指导和支持。
文章来源清华大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
-
第五届传感、测量、通信与物联网技术国 42
-
2026年9月优质国际学术会议推荐 263
-
2026年第15届计算与模式识别国际 212
-
2026年第二届计算机视觉与机器学习 2124
-
2026年无人机遥感与人工智能国际会 472
-
2026资源、化学化工与应用材料国际 3740
-
2026年图像处理与数字创意设计国际 3525
-
2026年机械工程,新能源与电气技术 8084
-
2026年材料科学、低碳技术与动力工 3712
-
第三届国际会议语言学、心理学与创意教 08-07
-
2026年建筑科学、材料工程与可持续 08-07
-
2026年国际会议金融科技、市场营销 08-07
-
第三届国际社会科学与文化研究会议平行 08-07
-
ICSSCS 2026 - 子论坛: 08-07
-
第三届社会科学与文化研究国际会议平行 08-07
-
2026 JCR影响因子正式发布1135
-
中国科协发布2025年《重要学术1583
-
2026年新锐分区(原中科院期刊8243
-
2025年两院院士增选有效候选人6001
-
好学术:科研网址导航|学术头条分7917
-
2025年国际期刊预警名单发布!8062
-
2025年中科院期刊分区表重磅发28351
-
吉林大学校长张希:学术会议中的提9122
-
清华大学计算机系高性能所获得IE07-31
-
北京大学生命科学学院伊成器课题组07-31
-
北京大学罗欢、李阿明、方方课题组07-31
-
北京大学生命科学学院郭强团队与合07-31
-
清华大学集成电路学院任天令团队合07-31
-
清华大学5位清华人当选“202607-31
-
研究揭示热带雨林优势树种望天树幼07-31
-
桥梁工程与技术网 21772

-
甘肃方舟旅游公司 24535

-
兰州理工大学 23735

-
安徽省合肥市中国科学技术大学自动 23724

-
吉林省政府会议办公室 2510

-
实姓名实姓名实姓名 23361

-
云南省昆明博世会展有限公司 18643

-
中国科学院科学时报社 23691

-
广州国际大健康博览会高峰论坛 18989

-
广州健世医疗器械有限公司 2582

-
江苏满程千渠会展服务有限公司 11154

-
39蜂疗网 24729

-
webcheck 23609

-
万怡会展 23479

-
大连百奥泰科技 23395

-
中山大学附属第一医院 21593

-
上海大学 2406

-
iwmsme2017 organ 24466

-
北京爱博国际展览有限公司 8761

-
北京爱迪时尚影像公司 18392





















414








































