当前位置:首页 >> 学术资讯 >> 科研信息

精仪系杨原牧课题组实现基于单目超构表面相机的深度偏振四维成像

2024/04/15

普通相机只能拍摄物体的二维平面图像。近年来,三维立体视觉在消费电子、机器人、汽车智能化和工业自动化等新兴领域中开始扮演愈发重要的角色。三维空间维度之外,光场提供的额外信息维度,例如偏振、光谱等,可以揭示场景更加丰富的特征,对于目标识别与追踪、特征分析、图像增强等任务有着重要的作用。为获取额外维度光场信息,光学系统通常需要更大的体积、重量和功耗。例如,获取物体深度信息需要主动激光照明或采用多视角拍摄;获取物体偏振信息需要通过分振幅、分焦面等方式。通常单一光学系统难以同时记录多个维度的光场信息。

针对以上难题,清华大学精仪系光电工程研究所杨原牧副教授课题组提出利用一种基于半导体工艺制造的新型平面衍射光学元件“超构表面”(metasurface)替代传统相机镜头组,通过在亚波长尺度灵活设计超构表面结构单元,构造对场景深度、偏振敏感的成像系统点扩散函数,将多维光场信息编码在相机传感器上,结合相应计算成像算法,实现了一种新体制小型化多维光场相机,能够在无需主动激光照明的情况下,通过单次拍摄同时获取目标场景包含二维强度、深度、偏振在内的四维光场信息。

20230224-NatComm文章宣传-杨原牧-图1.jpg

图1. 单目超构表面相机被动快照式四维成像框架

该相机工作原理如图1所示。超构表面由半导体工艺加工的各向异性硅基纳米天线阵列构成,总口径为2毫米。通过对其点扩散函数进行精心设计与优化,目标场景会在像面上形成一对空间分离的正交偏振孪生图像。场景的深度信息与这对孪生图像与其几何像点的局部平移矢量一一对应,由此关系可以通过算法重建出场景的扩展景深二维图像、深度图像与偏振信息。该设计解决了以往单目三维成像工作中存在的重建精度差、重建耗时长及深度范围小等问题,并进一步实现了对目标场景偏振信息的获取。

20230224-NatComm文章宣传-杨原牧-图2.jpg

图2. 室内静态场景四维成像实验

本工作中的超构表面芯片和由其构成的相机系统实物如图2a-c所示。室内静态场景四维成像实验部分结果如图2d-f所示。利用该相机同时拍摄放置在不同深度的纸张、铁片和陶瓷物体,可以同时获取场景的四维光场信息,深度图误差仅为0.37%,并且通过偏振信息可以清晰区分金属与非金属材质。

20230224-NatComm文章宣传-杨原牧-图3.jpg

图3. 室外动态场景四维成像实验

室外动态场景四维成像实验部分结果如图3所示。在自然光照明下,对移动的玩具小车进行拍摄,可以获得场景的扩展景深偏振图像以及高精度的深度信息,从而揭示出动态三维场景的准确时空关系。

通过进一步利用超构表面的偏振及光谱响应,当前的单目四维成像技术框架有望进一步拓展至三维空间、偏振、光谱五维成像。当前单帧多维图像计算恢复时间约需0.3秒。通过优化算法框架,有望进一步提升恢复速度,实现对更复杂场景的多维光场重建。

该成果近日以“单目超构表面相机快照式被动四维成像”(Monocular metasurface camera for passive single-shot 4D imaging)为题发表在《自然·通讯》(Nature Communications)上。

该研究的完成单位为清华大学精密仪器系、精密测试技术与仪器国家重点实验室,第一作者为精仪系2021级博士研究生沈子程,通讯作者为杨原牧副教授。精仪系曹良才教授,博士后赵峰、靳淳淇、王帅为论文工作作出了重要贡献。

该研究得到国家自然科学基金和清华大学国强研究院的资助。相关成果正通过清华大学技术转移体系进行产业化落地,拟应用于机器人避障、人脸识别、手势交互等领域,于近日被知名行业媒体“光电汇”评为“2022中国十大光学产业技术”。


版权声明:
文章来源清华大学新闻,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年智慧交通与检测技术国际会议(ITDT 2026)(2026-03-25)

2026年第六届智能机器人系统国际会议(ISoIRS 2026)(2026-03-27)

2026年人工智能教育技术与数据科学国际学术会议(AIETDS 2026)(2026-03-27)

2026年IEEE第八届软件工程和计算机科学国际会议(CSECS 2026)(2026-04-17)

第十五届春季国际工程与技术大会 (SCET 2026)(2026-04-17)

2026年金融科技、创新与信息技术国际会议(2026-04-18)

2026年多尺度人工智能国际会议(MAI 2026)(2026-04-24)

第三届机器学习与智能计算国际学术会议(MLIC 2026)(2026-04-24)

2026 空天信息与产业创新国际学术研讨会暨第二届中国——塞尔维亚空天技术与产业应用研讨会(ISA3I 2026)(2026-04-24)

数字化教育系统与计算机科学国际学术会议(2026-04-24)

第七届人类遗传学与健康国际研讨会(HGH 2026)(2026-5-29)

2026能源利用、自动化与数据处理国际会议(ICEUADP 2026)(2026-4-30)

2026年化学、材料科学与机械工程国际会议(IACHFM 2026)(2026-3-27)

2026年智慧城市,建筑与管理学国际会议(ICSCAM 2026)(2026-3-28)

2026年区域链、金融创新与信息技术国际会议(FRCIT 2026)(2026-4-28)

2026年马克思主义与社会科学国际学术会议(IACMSS 2026)(2026-3-28)

2026年视频信号、数字媒体与影视国际会议(ICVSDMFT 2026)(2026-5-27)

2026年气候气象学、地球科学与天文学国际学术会议(CMESA 2026)(2026-3-29)

2026年数字化社会与风险管理国际会议(ICRMDS 2026)(2026-6-28)

2026年清洁能源、公共管理与低碳城市国际会议(CEPMLCC)(2026-4-30)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。
综合推荐区

学术科研网址导航,430+站,定制学术书签

2026年第五届云计算、计算机视觉和图像处理.

2026年动力学与机械工程国际学术研讨会 (.

2026年IEEE第八届软件工程和计算机科学.

2026年第八届计算机图形学、图像与可视化国.

第八届信息科学、电气与自动化工程国际学术会议.

第三届机器学习与智能计算国际学术会议(MLI.

第六届自动化控制、算法与智能仿生国际学术会议.

2026 年第三届计算,机器学习与数据科学国.

第十三届先进制造技术与材料工程国际学术会议 .

第二届人工智能与产品设计国际学术会议 (AI.

2026年多尺度人工智能国际会议(MAI 2.

2026年量子计算与人工智能国际学术会议(I.

2026年第六届计算机视觉与模式分析国际学术.

第七届机械仪表与自动化国际学术会议(ICMI.

2026年第四届亚洲机器学习、算法与神经网络.

2026年第四届亚洲计算机视觉、图像处理与模.

2026年人工智能与数据挖掘国际学术会议(A.

2026年IEEE第七届计算,网络与物联网国.

2026年第五届网络、通信与信息技术国际会议.

2026年智能机器人与控制技术国际会议(CI.

2026年传感器技术、自动化与智能制造国际会.

2026年智能系统与计算国际会议 (ICIS.

2026年电子, 通信与计算机科学国际会议 .

2026年IEEE第三届先进机器人, 自动化.

2026年第七届控制, 机器人与智能系统国际.