清华大学电子系方璐课题组在超快机器视觉领域取得进展
2024/04/10
随着人工神经网络应用的持续深化,机器视觉算法复杂度剧增,亟需高算力支持。然而,受制于摩尔定律放缓,现有电子计算性能趋于饱和,难以满足大规模智能算法对算力和能效日益增长的需求。用光子替代电子作为智能计算载体有望对当前视觉计算带来革命性的突破。然而,现有智能光计算架构往往依赖电子处理器作为计算中继,严重削弱了光计算高速高并行的计算优势,难以赋能超快机器视觉应用。
近日,清华大学电子系方璐副教授课题组建立了空时域超快智能光计算架构,提出了跨维度空时域匹配方法和联合空时域矩阵向量光计算模型,首次实现了三维空时域智能光计算系统,突破了数字内存读写的掣肘,将动态机器视觉处理速度提升三个数量级(达到纳秒量级)。

图1.空时域光计算模型
课题组通过刻画多维光场传播模型,首次建立空时域计算表征,同时在空间和时序维度完成连续光计算。针对空间光场和时序光场内在维度失配问题,提出空间复用和光谱复用计算模型,匹配空时域光计算维度。进一步建立时序矩阵乘加计算模型,扩展空时域光计算维度。所有空间和时序计算操作均在光学模拟域完成,因此空时域光计算的速度不受制于电子内存的传输和读写。该论文进一步提出了多变量全光非线性函数,成功构建多层非线性神经网络,支撑复杂视觉智能任务的高速推理。在多个视频数据集上的实验结果表明,空时域光计算能够将视频智能处理速度提升至数百兆赫兹量级,有望为后摩尔时代高性能智能计算以及瞬态科学现象的实时分析和控制等带来新的契机。

图2.高速目标追踪

图3. 纳秒超快计算
研究工作以“面向超快机器视觉的空时域光计算”(Ultrafast dynamic machine vision with spatiotemporal photonic computing)为题发表在国际期刊《科学·进展》(Science Advances)上,并入选期刊首页专题文章(feature article)。课题组博士生周天贶和吴蔚是本文共同第一作者,通讯作者为方璐副教授。

文章入选期刊首页专题文章
文章来源清华大学新闻,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
-
2025年11月优质学术会议推荐 16
-
2025年机器视觉、智能成像与模式识 392
-
2025年第七届控制与机器人国际会议 576
-
2025年智能光子学与应用技术国际学 1529
-
2025年机械工程,新能源与电气技术 1790
-
2025年计算机科学、图像分析与信号 2065
-
2025年材料化学与燃料电池技术国际 1861
-
2025年自动化前沿系统、智慧城市与 10-23
-
2025年信息光学、遥感技术与机器视 10-23
-
2025年数字人文、文化遗产与语言学 10-23
-
2025年神经科学、生物信息学与智能 10-23
-
2025年语言认知、人工智能与计算建 10-23
-
2025年社会科学、应用语言学与人文 10-23
-
2025年传统机械、动力学与智能装备 10-23
-
2025年图像处理、物理建模与结构设 10-23
-
2025年两院院士增选有效候选人1145
-
2025最新JCR分区及影响因子4758
-
好学术:科研网址导航|学术头条分2033
-
2025年国际期刊预警名单发布!1930
-
2025年中科院期刊分区表重磅发8447
-
中国科协《重要学术会议目录(205134
-
吉林大学校长张希:学术会议中的提2840
-
清华大学地学系阳坤课题组揭示全球10-20
-
历史时期极端干旱灾害的数据评估和10-20
-
“清华化学百年论坛:塑造化学的未10-20
-
研究揭示植物激素独脚金内酯作为跨10-20
-
清华大学联合研发的“46MW大容10-20
-
清华大学(软件学院)-九疆电力建10-20
-
中国农业大学土地学院马韫韬教授团10-20
-
电子科技大学光电学院本科生在一区10-20
-
武汉科严文化发展有限公司 1929

-
中国食文化研究会民族食文化委员会 21021

-
浙江南国大酒店 23160

-
北京京郊太美旅业服务公司 18114

-
哈尔滨鑫峰文件柜厂 21082

-
恒宇房地产公司 21301

-
中国医药教育协会 2027

-
2018第二届教育与社会发展国际 23116

-
北京外国语大学 21091

-
北京理工大学自动化学院 21093

-
中国科大出版社 18139

-
广东省唯港商务 18261

-
HKSME 23215

-
湖南科技大学 24002

-
北京亚太精达商贸有限公司 1958

-
武汉黄陂木兰湖度假酒店 1982

-
长安大学数字油田研究所 24243

-
中国科学院国际学术交流中心 21137

-
北京师范大学 24219

-
江南大学食品学院 8212

















607











































