当前位置:首页 >> 学术资讯 >> 科研信息

未来技术学院陈良怡实验室开发混合物理模型与深度学习的结构光超分辨重构算法

2024/04/11

近年来,超分辨率荧光显微镜的发展极大地推动了人类对亚细胞结构的研究。其中,基于结构光照明的超分辨率荧光显微镜(SR-SIM)凭借其光子转化效率高等优点,非常适合活细胞的超分辨率成像。然而,北京大学陈良怡实验室2018年的工作提出,尽管结构光的光子转化成为超分辨的效率比其他类型的超分辨率显微镜更高,但是由于它存在的反卷积重建过程会放大图像中噪声产生伪影,从而影响超分辨率图像的可信度和定量化分析。在其提出利用时空连续性作为先验知识开发的基于海森正则化项的迭代重建方法后,其他许多研究组也开发了不同的抑制伪影的方法。已有的基于物理模型或通用先验知识的方法能够抑制噪声导致的伪影,但背景失焦引起的蜂窝状伪影、光照散射引起的伪影等不能完全抑制。而深度神经网络重建方法虽然能够更好地抑制重建超分辨率图像导致的各种伪影,但可能会产生局部失真和分辨率降低。

2023年1月,北京大学未来技术学院陈良怡教授团队结合了物理模型和深度学习两种重建方法的优点,通过利用全深度变分(TDV)网络作为重构目标函数的正则化项,将其与SIM物理模型相结合,提出了一种混合重建方法(TDV-SIM),能够在抑制伪影的同时保持分辨率。在处理不同细胞结构的图像时,TDV-SIM较单纯的深度学习方法能够更好地保留真实信号,同时比基于物理模型的方法能够更有效地去除伪影。相关工作以题为“Hybrid reconstruction of the physical model with the deep learning that improves structured illumination microscopy”(doi:10.1117/1.APN.2.1.016012)的论文发表于Advanced Photonics Nexus上。

研究团队将TDV-SIM与其他重建方法进行了比较,包括基于物理模型(Wiener 反卷积,HiFi-SIM,Hessian-SIM)和基于深度学习的方法(scU-Net,DFCAN)。在短曝光时候,研究人员观察活细胞中肌动蛋白丝、内质网以及线粒体等结构的动态变化发现,基于物理模型的降噪方法在低信噪比背景区域由于噪声放大仍然产生伪影。另一方面,虽然基于深度学习方法重建伪影较低,但它的分辨率和结构相似度值都会降低,同时常常在复杂结构如肌动蛋白和内质网的交叉点处以及线粒体内嵴处等地方产生不准确的推断,也就是常说的“幻觉效应”。这些问题可以被结合了物理模型约束的TDV-SIM很好地抑制。总体来说,TDV-SIM可以重构出更多的连续肌动蛋白丝,且伪影更少,其结构相似度值和分辨率与传统重建方法相当。

在深度学习盛行的今天,AI for science已经深入人心。尽管如此,团队的研究发现,纯数据驱动方法在预测不断变化的不规则和复杂样品结构时存在困难,在这种情况下考虑成像系统的物理模型约束变得至关重要。正如研究人员展示的:在面对结构复杂、动态的样品时,TDV-SIM方法较纯深度学习方法具有明显的优势。总的来说,TDV-SIM从混合重建的角度出发,为低信噪比图像的高分辨率高保真重建提供了一种新的解决方案。由于减少了成像时的光子剂量和相关的光毒性,提高了成像速度,延长了成像持续时间,TDV-SIM对于SR成像活细胞亚细胞结构动力学至关重要。

北京大学软件与微电子学院硕士生王建勇(已毕业)、重庆邮电大学计算机学院副教授范骏超、北京大学未来技术学院博士生周博为本文的共同第一作者。陈良怡和北京大学跨学部生物医学工程系黄小帅研究员为本文通讯作者。本研究得到国家科技重大专项计划、国家自然科学基金、北京市自然科学基金、临港实验室等经费支持。


版权声明:
文章来源北京大学新闻网,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年智慧交通与检测技术国际会议(ITDT 2026)(2026-03-25)

2026年第六届智能机器人系统国际会议(ISoIRS 2026)(2026-03-27)

2026年人工智能教育技术与数据科学国际学术会议(AIETDS 2026)(2026-03-27)

2026年IEEE第八届软件工程和计算机科学国际会议(CSECS 2026)(2026-04-17)

第十五届春季国际工程与技术大会 (SCET 2026)(2026-04-17)

2026年金融科技、创新与信息技术国际会议(2026-04-18)

2026年多尺度人工智能国际会议(MAI 2026)(2026-04-24)

第三届机器学习与智能计算国际学术会议(MLIC 2026)(2026-04-24)

2026 空天信息与产业创新国际学术研讨会暨第二届中国——塞尔维亚空天技术与产业应用研讨会(ISA3I 2026)(2026-04-24)

数字化教育系统与计算机科学国际学术会议(2026-04-24)

2026年矿产资源、地质勘探与测绘技术国际会议(IMGET 2026)(2026-3-29)

2026年第七届教育技术中的人工智能国际会议 (AIET 2026)(2026-7-29)

2026年电磁学、声学与应用物理学国际会议(EAAP 2026)(2026-3-28)

2026年教育技术、人文发展与社会科学国际会议(IETHD 2026)(2026-4-28)

2026年海洋工程、材料与智能船舶国际会议(OEMIS 2026)(2026-3-29)

2026年5G通信、物联网与边缘计算国际会议(TECIC 2026)(2026-4-28)

2026年电气技术、可再生能源与电力系统国际会议(IETRPS 2026)(2026-4-29)

2026年供应链韧性与风险管理国际会议(SCRRM 2026)(2026-3-29)

2026年生物医学与生命健康国际会议(ICBLH 2026)(2026-5-28)

2026年可再生能源、智能电网与能源存储国际会议(IRESG 2026)(2026-4-27)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。
综合推荐区

学术科研网址导航,430+站,定制学术书签

2026年第五届云计算、计算机视觉和图像处理.

2026年动力学与机械工程国际学术研讨会 (.

2026年IEEE第八届软件工程和计算机科学.

2026年第八届计算机图形学、图像与可视化国.

第八届信息科学、电气与自动化工程国际学术会议.

第三届机器学习与智能计算国际学术会议(MLI.

第六届自动化控制、算法与智能仿生国际学术会议.

2026 年第三届计算,机器学习与数据科学国.

第十三届先进制造技术与材料工程国际学术会议 .

第二届人工智能与产品设计国际学术会议 (AI.

2026年多尺度人工智能国际会议(MAI 2.

2026年量子计算与人工智能国际学术会议(I.

2026年第六届计算机视觉与模式分析国际学术.

第七届机械仪表与自动化国际学术会议(ICMI.

2026年第四届亚洲机器学习、算法与神经网络.

2026年第四届亚洲计算机视觉、图像处理与模.

2026年人工智能与数据挖掘国际学术会议(A.

2026年IEEE第七届计算,网络与物联网国.

2026年第五届网络、通信与信息技术国际会议.

2026年智能机器人与控制技术国际会议(CI.

2026年传感器技术、自动化与智能制造国际会.

2026年智能系统与计算国际会议 (ICIS.

2026年电子, 通信与计算机科学国际会议 .

2026年IEEE第三届先进机器人, 自动化.

2026年第七届控制, 机器人与智能系统国际.