- 大学不同年级发表SCI论文的一般 57
- 会议论文的见刊时间可以考虑的几个 68
- 探讨选择学术会议时需考虑的因素有 55
- 论文发表代理可靠吗? 43
- 清华大学 材料学院团队在陶瓷位错 41
- 中南大学在高强耐热铝合金设计领域 60
- 关于如何更好地参加学术会议的建议 54
- 怎么查到sci期刊信息 41
- 介绍一些优秀的内科学论文题目 31
- original paper是几 48
- 清华大学 化工系胡山鹰课题组在资 29
- 浅析论文润色是否合法的问题 45
- 事关英文期刊投稿说明 71
- 材料科学与工程学院于海峰课题组在 57
- 投稿《INTERNATIONAL 47
- 黑龙江龙房川律师事务所 1397
- 澳門大學 23386
- 易观国际 20403
- 武汉华联帕博文化有限公司 22383
- 美国科研出版社 1399
- 上海国隆投资管理有限公司 17425
- 环境保护不核与辐射安全中心 20377
- 天津市电子学会 20372
- 昆明中国国旅 22379
- 武汉创世源电气 17396
- 上海电机制造协会 17405
- 山东工商学院煤炭经济研究院 20369
- 北京科爱森蓝文化传播有限公司 7414
- 中国视延有限责任公司 20394
- IETP-Association 23387
- 国际工学技术出版协会 22375
- 合肥市华锋公司 17408
- RH 7373
- 利欧展览(上海)有限公司 7393
- 嘉定优势会展服务社 17379
清华大学深圳国际研究生院关迅团队在医学影像的图像超分辨研究中取得新进展
2024/03/21
医学影像技术为医生提供了疾病诊断的重要原材料,是癌症、肿瘤等分期评估与分期治疗的重要依据。然而,医学影像通常在成像空间分辨率、时间分辨率、成像范围(波长范围、深度、广度)、激光剂量(灵敏度)以及对生物组织的损伤之间存在着权衡。近年来,人工智能的介入允许研究人员在成像过程中牺牲某些指标来加强其他指标,对于成像结果采用深度学习的方法提升被牺牲的指标,从而优化整体性能。例如利用光声成像技术(photoacoustic)进行人体血管造影,原始空间分辨率为13um*13um*120um(长*宽*高)时,时间分辨率为4秒/帧。这样的时间分辨率无法支持实时的组织体动态监测。针对这一困境,可以通过降低成像的空间分辨率来提高时间分辨率,从而加速成像,即通过t倍欠采样,将时间分辨率提高t2倍。随后对低空间分辨率的成像结果进行基于深度学习的空间超分辨,来恢复欠采样导致退化的光声成像,进而得到时空分辨率均较高的结果。为此,需训练一个有效的超分辨模型来恢复空间分辨率。在医学影像中,超分辨模型通常面临着两个主要瓶颈,模型容量和数据容量。前者可以通过增加模型参数、改进算法来解决;而后者却困难重重,由于成像过程复杂、样本准备困难、医学的伦理限制和样本个体之间差异较大,很难获得足够数量的血管造影图像来有效地训练超分辨率神经网络。
为了应对这些挑战,清华大学深圳国际研究生院数据与信息研究院、清华-伯克利深圳学院关迅助理教授团队提出了一种名为DOVE(Doodled Vessel Enhancement)涂鸦血管数据集增强的方法,利用手绘的涂鸦训练光声血管造影超分辨率模型(图1为原理图)。该研究基于仅包含32张真实光声血管造影图像的训练数据集,首先构建一个扩散模型,将手绘涂鸦转换为具有极高真实度的血管图像;随后,利用图像聚类的方法(图2)筛选出优质的生成图像(图3);进而利用这些图像训练基于自相似性的超分辨模型。结果显示,即使在不同成像条件下收集的光声血管造影测试集上测试,这种基于生成图像的训练的模型也能恢复相对于原始分辨率0.8591均值的结构相似度(SSIM),超过了使用真实高分辨率图像训练的模型得分。
图1.(a)-(g)为DOVE的示意图,即利用手绘涂鸦生成的血管造影图像进行超分辨模型的训练。(a)为类似雨的噪声图像。(b)为手绘的涂鸦图像。(c)为(b)与(a)的重叠。(d)为归一化的高斯噪声图像。(e)为从(c)生成的光声血管造影图像。(f)为归一化的光声血管造影图像。(g)为重建的超分辨率图像。(a’)-(f’)对应左侧DOVE示意图的(a)-(f)。(a’)为类似雨的噪声图像。(b’)为高分辨率光声血管造影图像的随机截取图像。(c’)为(b’)与(a’)的叠加。(f’)为生成模型借助(c’)为输入而生成的光声血管造影图像。(i)为基于UNet的DeNN的结构
图2.借助优质的生成血管造影图像拥有类似的灰度直方图分布,研究人员利用聚类刷选优质的生成图像,并返回给超分辨模型,用于改善训练精度
图3.借助噪音图像生成血管造影图像的举例。图中噪音图像Noise images输入不同的生成模型M1,M2以及M3,生成不同的血管造影图像
这种借助生成模型训练其他模型的方法并不局限于医学影像,也可应用于其他小样本训练场景,从而为小样本的超分辨模型提供了新思路。同时,该研究显示,未来人工智能的训练可能会采用更加高效的方式开展,即人工智能模型借助生成模型,实现“自训练”。研究进一步提出,在深度学习中提供大量数据集“只是通过控制数据集来实现对人工智能模型训练的监督,而不是让人工智能模型真正了解现实世界的逻辑”,从而对传统深度学习中基于大量采集数据来训练优质模型这一传统思路和范式提出了挑战。
近日,该研究以“光声音血管造影术的超分辨率的涂鸦血管数据集增强方法”(Doodled vessel enhancement for photoacoustic angiography super resolution)为题,发表于人工智能与医学影像刊物《医学影像分析》(Medical Image Analysis)。
清华大学深圳国际研究生院数据与信息研究院、清华-伯克利深圳学院2022级博士生马远征为论文的第一作者,关迅为论文的通讯作者。论文的共同作者还包括西安电子科技大学副教授周王婷、华南师范大学教授杨思华,以及清华大学深圳国际研究生院数据和信息研究院、清华-伯克利深圳学院教授张晓平和助理教授唐彦嵩。该研究得到国家重点研发计划、广东省自然科学基金、广州市科技计划项目和深圳市自然科学基金科研经费的支持。
文章来源清华大学新闻,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
北京大学城环学院王志恒课题组在Science Advances发文揭示被子植物花对称性的时空格局
化学系郭兴伟团队、焦雷团队使用时间分辨电子顺磁共振技术直接观测光催化循环中的所有自由基中间体
清华大学生命学院吝易、杨雪瑞团队揭示相分离调控节律性蛋白翻译的分子机制
清华大学生命学院陈春来课题组合作揭示配体效能调控µ型阿片受体构象动态变化的分子机制
北京大学城市与环境学院朴世龙院士团队在《自然-地球科学》撰文揭示植被变绿通过跨区域水汽传输利好全球地表水资源
第四届计算机图形学、图像与虚拟化研究国际会议(ICCGIV 2024)(2024-05-17)
第九届机电控制技术与交通运输国际学术会议(ICECTT 2024)(2024-05-24)
2024年教育政策与实践研讨会(ICEPP 2024)(2024-05-24)
第三届机电一体化与机械工程国际会议(ICMME2024)(2024-05-24)
2024年电子器件、传感控制技术与光学机械工程国际学术会议(EDSCTOE 2024)(2024-05-25)
第十四届地质和地球物理学国际会议(ICGG 2024)(2024-05-31)
2024年食品工程与农业科学国际会议(ICFEAS 2024)(2024-06-02)
2024年第三届网络、通信与信息技术国际会议(CNCIT 2024)(2024-06-07)
第十届机械工程、材料和自动化技术国际会议(MMEAT 2024)(2024-06-21)
2024年先进机器人,自动化工程与机器学习国际会议(ARAEML 2024)(2024-06-28)
2024年心理学,科学教育与管理学国际会议(ICPSEM 2024)(2024-5-25)
2024年矿产资源、结构工程与土木国际学术会议(IACMRSECE 2024)(2024-5-30)
第七届积极心理与幸福论国际学术会议(CPPWb 2024)(2024-5-31)
2024年第二届管理创新与经济发展国际学术会议(MIED 2024)(2024-6-28)
2024年艺术设计、语言研究与数字化技术国际会议(ADLRDT 2024)(2024-5-25)
2024测绘、数据处理与机器人技术国际学术会议(ICSDPRT 2024)(2024-5-26)
2024土木建筑与土木工程研究国际会议(ICCACER 2024)(2024-6-20)
2024年金融管理与社会经济国际会议(ICFMS 2024)(2024-5-29)
2024年旅游与社会发展国际会议 (ICTSD 2024)(2024-5-29)
第六届模式识别与智能系统国际会议(PRIS 2024)(2024-7-25)