- 医学论文审稿,一审和二审之间的区 36
- 国外出版的专著在国内是否被承认? 56
- 北京大学材料学院占肖卫课题组及合 53
- 研究生已发4篇sci论文,分享几 42
- 关于论文常用的技巧和指导 53
- 北京大学地空学院高克勤课题组发现 66
- 清华大学资源环境课题组张衍国教授 32
- EI会议与期刊的具体区别 45
- Agriculture影响因子和 74
- 关于SSCI特刊的可检索性 56
- 宪法学与行政法学的论文选题有哪些 61
- 关于学术会议总结的写作建议 66
- 找到适合的EI期刊投稿可采取的步 60
- 北京大学汇丰商学院许志伟副教授合 47
- 关于环境治理论文写作技巧有哪些? 54
- 澳门科技大学 7383
- 纳通医疗集团 17386
- 武汉科严文化发展有限公司 22372
- 首都经济贸易大学 7377
- 全国微创整形外科工作委员会 23408
- 北京市北京大学 17383
- 常州诚喝卫生设备厂 17388
- 中仿新联(北京)科技有限公司 17375
- 教育部教学仪器研究所 20423
- 天津天盛贵金属有限公司 17379
- 中国知识产权研究会 17400
- 百奥泰国际会议有限公司 1421
- 山东省潍坊学院 17390
- 中国环境科学学会 23354
- D2ME 23392
- 军事经济学院 22399
- 北京微旋基因技术有限公司 23395
- 青穆文化传播有限公司 22379
- 九江金桥旅行社有限公司 17398
- VDAE 7398
北理工团队在高光谱视频成像研究方面取得重要进展
2024/03/21
日前,北京理工大学光电学院王涌天教授、刘越教授团队成员徐怡博教授与来自谷歌公司和美国莱斯大学研究人员合作,开发了一种具有优异压缩比和吞吐量的基于单像素光电探测器的高光谱视频成像系统,成果发表于Nature Communications 15, 1456 (2024)。徐怡博教授为论文第一作者兼通讯作者,谷歌公司陆李阳博士、莱斯大学Saragadam 博士和Kevin Kelly博士也对此工作做出了贡献。
高光谱视频成像捕获场景的精细空间、光谱和时间信息,在生物荧光成像、遥感、监控、自动驾驶等领域中具有广泛应用。高光谱视频数据量极大,现有方法记录高维数据时占用大量传输带宽和存储空间,给无人机、手机、行星探测器和卫星等资源受限系统带来巨大压力。如何在保留信息的前提下最大限度减少采样数据量、大幅提升采样压缩比是高光谱视频成像中的关键问题。该研究利用四维高光谱视频的高度可压缩性,设计一种空间-光谱联合编码方案,提出基于四维空间信号稀疏度模型的优化重建和深度学习重建方法,实现了基于单像素探测器、可在低带宽下实现高通量的高光谱视频成像系统。如图1,优化重建方法先从包含互补图案的原始测量中重建灰度视频并提取光流,然后通过光流辅助四维全变分正则化优化方法实现高光谱视频重建。
图1 光流辅助四维全变分正则化高光谱视频重建过程示意图与流程图
实验中重建视频空间大小为128 × 128,具有64个光谱频道,帧率约4帧/秒,压缩比约为900:1。图2展示从重建的高光谱频帧中均匀选取16帧并转换为人工RGB图像,与彩色相机记录的画面对比,可见实现了高精度的重建。
图2 单像素成像实验优化算法重建结果
如图3,深度学习重建方法由两个阶段组成。先基于长短期记忆(LSTM)网络的模型利用5个相邻帧之间的时间相关性,从“结构化随机”编码测量中重建灰度视频。再基于残差连接的卷积神经网络(CNN)的高光谱重建网络,从深度空间-光谱联合压缩测量值及第一阶段的灰度视频中恢复高光谱帧。
图3 高光谱视频重建的深度学习方法示意图
如表1所示,对比基于两种方法重建高光谱帧的时间,可见深度学习方法在重建速度上有显著的提升。
表1 基于四维全变分的优化方法和深度学习方法的重构时间
原文信息:Xu, Y., Lu, L., Saragadam, V. et al. A compressive hyperspectral video imaging system using a single-pixel detector. Nat Commun 15, 1456 (2024). https://doi.org/10.1038/s41467-024-45856-1
文章来源北京理工大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
口腔医院张翼飞研究团队发现并命名人口腔来源二氧化碳噬纤维属新菌种
人工智能分型指导2型糖尿病精准治疗——内分泌权威学术期刊刊载北京大学人民医院纪立农教授团队最新研究成果
李明松与合作者研究发现西伯利亚火山岩省大量快速碳排放导致二叠纪末生物大灭绝
第四届计算机图形学、图像与虚拟化研究国际会议(ICCGIV 2024)(2024-05-17)
第九届机电控制技术与交通运输国际学术会议(ICECTT 2024)(2024-05-24)
2024年教育政策与实践研讨会(ICEPP 2024)(2024-05-24)
第三届机电一体化与机械工程国际会议(ICMME2024)(2024-05-24)
2024年电子器件、传感控制技术与光学机械工程国际学术会议(EDSCTOE 2024)(2024-05-25)
第十四届地质和地球物理学国际会议(ICGG 2024)(2024-05-31)
2024年食品工程与农业科学国际会议(ICFEAS 2024)(2024-06-02)
2024年第三届网络、通信与信息技术国际会议(CNCIT 2024)(2024-06-07)
第十届机械工程、材料和自动化技术国际会议(MMEAT 2024)(2024-06-21)
2024年先进机器人,自动化工程与机器学习国际会议(ARAEML 2024)(2024-06-28)
2024文化、设计与社会发展国际学术研讨会议(ISCDSD 2024)(2024-5-26)
2024年第七届国际通信与网络工程会议(ICCNE 2024)(2024-7-26)
2024年艺术,文化与传播学国际会议(ICACC 2024)(2024-5-30)
2024机械工程、材料科学与力学国际会议(IMES 2024)(2024-5-28)
2024年航空、航天技术与机械工程国际会议(ICASTME 2024)(2024-6-25)
2024能源工程、可持续发展与电气电力国际会议(ICESDP 2024)(2024-6-23)
2024年可再生资源与能源系统国际会议(ICRRES 2024)(2024-6-22)
2024年社会科学、公共服务与人文艺术国际会议(SPSHA 2024)(2024-6-22)
2024年数字经济与国际贸易国际研讨会(ISDEIT 2024)(2024-6-30)
2024测绘、遥感与地理信息国际会议(ICSRSGI 2024)(2024-6-30)