- 探讨《中国胸心血管外科临床杂志》 34
- 论文查重范围包不包括脚注 84
- 探讨如何组织在线学术会议呢 66
- 考研哪些专业比较好 70
- 订阅EI期刊时应注意哪些方面的事 33
- IEEE的会议是否属于被EI收录 70
- 清华大学 化学系刘凯、张洪杰团队 57
- 北京大学地空学院沈佳恒研究员在二 65
- 探讨中文核心期刊与英文期刊哪种期 60
- 我国学者在微创大面积神经接口构建 54
- 清华大学牵头的国家重点研发计划“ 68
- 关于《中国消毒学杂志》期刊内容 28
- 如何出版译著以增加评职称的成功机 65
- 《医院管理论坛》期刊信息指南 35
- 中科院期刊分区表和国际预警期刊名 333
- 世联博研(北京)科技有限公司 22443
- 北京国化新材料技术中心 7397
- 广州找塑料网络科技有限公司 7383
- 北京恒星瑞祥商贸有限公司 17373
- 武汉木上文化传播有限公司 7429
- 广州鑫亚展览有限公司 17383
- 重庆大学 7401
- 中文中文中文 17396
- 上海同巨文化传播有限公司 7360
- 武汉科技大学 22382
- IAASE 22357
- Northeastern Uni 17398
- 中国连锁经营协会 20401
- 山东省烟台大学 20424
- 北京东方华光文化交流有限公司 1387
- 上海市同济科技园 20372
- 兰州理工大学能源与动力工程学院 20392
- 香港科学与工程研究中心 22377
- 四川省重庆市西南大学 17407
- GRESGDS 23404
北理工团队在高光谱视频成像研究方面取得重要进展
2024/03/21
日前,北京理工大学光电学院王涌天教授、刘越教授团队成员徐怡博教授与来自谷歌公司和美国莱斯大学研究人员合作,开发了一种具有优异压缩比和吞吐量的基于单像素光电探测器的高光谱视频成像系统,成果发表于Nature Communications 15, 1456 (2024)。徐怡博教授为论文第一作者兼通讯作者,谷歌公司陆李阳博士、莱斯大学Saragadam 博士和Kevin Kelly博士也对此工作做出了贡献。
高光谱视频成像捕获场景的精细空间、光谱和时间信息,在生物荧光成像、遥感、监控、自动驾驶等领域中具有广泛应用。高光谱视频数据量极大,现有方法记录高维数据时占用大量传输带宽和存储空间,给无人机、手机、行星探测器和卫星等资源受限系统带来巨大压力。如何在保留信息的前提下最大限度减少采样数据量、大幅提升采样压缩比是高光谱视频成像中的关键问题。该研究利用四维高光谱视频的高度可压缩性,设计一种空间-光谱联合编码方案,提出基于四维空间信号稀疏度模型的优化重建和深度学习重建方法,实现了基于单像素探测器、可在低带宽下实现高通量的高光谱视频成像系统。如图1,优化重建方法先从包含互补图案的原始测量中重建灰度视频并提取光流,然后通过光流辅助四维全变分正则化优化方法实现高光谱视频重建。
图1 光流辅助四维全变分正则化高光谱视频重建过程示意图与流程图
实验中重建视频空间大小为128 × 128,具有64个光谱频道,帧率约4帧/秒,压缩比约为900:1。图2展示从重建的高光谱频帧中均匀选取16帧并转换为人工RGB图像,与彩色相机记录的画面对比,可见实现了高精度的重建。
图2 单像素成像实验优化算法重建结果
如图3,深度学习重建方法由两个阶段组成。先基于长短期记忆(LSTM)网络的模型利用5个相邻帧之间的时间相关性,从“结构化随机”编码测量中重建灰度视频。再基于残差连接的卷积神经网络(CNN)的高光谱重建网络,从深度空间-光谱联合压缩测量值及第一阶段的灰度视频中恢复高光谱帧。
图3 高光谱视频重建的深度学习方法示意图
如表1所示,对比基于两种方法重建高光谱帧的时间,可见深度学习方法在重建速度上有显著的提升。
表1 基于四维全变分的优化方法和深度学习方法的重构时间
原文信息:Xu, Y., Lu, L., Saragadam, V. et al. A compressive hyperspectral video imaging system using a single-pixel detector. Nat Commun 15, 1456 (2024). https://doi.org/10.1038/s41467-024-45856-1
文章来源北京理工大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
生命学院欧光朔课题组报道蛋白质与核酸的相分离调控生殖-寿命权衡的机理
北京大学物理学院杨金波课题组与合作者揭示轨道Rashba-Edelstein磁电阻效应
中国科学技术大学徐集贤教授团队与海外合作者在钙钛矿太阳电池新结构方面取得进展
清华大学牵头国家重点研发计划“电解水制氢耦合催化选择氧化的高效反应系统创制”项目启动
南京大学大气科学学院在植树造林-污染治理的协同气候效应研究方面取得进展
未来技术学院陈雷研究组揭示人源葡萄糖转运子SGLT1的抑制机制
第四届计算机图形学、图像与虚拟化研究国际会议(ICCGIV 2024)(2024-05-17)
第九届机电控制技术与交通运输国际学术会议(ICECTT 2024)(2024-05-24)
2024年教育政策与实践研讨会(ICEPP 2024)(2024-05-24)
第三届机电一体化与机械工程国际会议(ICMME2024)(2024-05-24)
2024年电子器件、传感控制技术与光学机械工程国际学术会议(EDSCTOE 2024)(2024-05-25)
第十四届地质和地球物理学国际会议(ICGG 2024)(2024-05-31)
2024年食品工程与农业科学国际会议(ICFEAS 2024)(2024-06-02)
2024年第三届网络、通信与信息技术国际会议(CNCIT 2024)(2024-06-07)
第十届机械工程、材料和自动化技术国际会议(MMEAT 2024)(2024-06-21)
2024年先进机器人,自动化工程与机器学习国际会议(ARAEML 2024)(2024-06-28)
2024年综合艺术、文化创新与社会科学国际会议(ICIACIS 2024)(2024-5-25)
2024年机械,电气与自动化技术国际会议(ICMEAT 2024)(2024-5-26)
2024年计算科学,智能系统与信息技术国际会议(CSISIT 2024)(2024-6-27)
2024年艺术鉴赏与媒体传播国际会议( ICAAMC 2024)(2024-5-31)
2024年网络安全与机器人应用国际学术会议(ICNSRA 2024)(2024-5-30)
2024年航天航空技术,能源与动力学国际会议(ICATED 2024)(2024-5-21)
2024年电子通信、自动控制技术与机械工程国际学术会议(ECACTME 2024)(2024-6-25)
2024地球科学、测量与环境遥感国际会议(ESERS 2024)(2024-5-21)
2024年控制科学、电气工程与机电一体化国际研讨会议(ISCSEEM 2024)(2024-6-28)
2024年公共卫生与现代医学国际会议(ICPHMM 2024)(2024-5-26)