当前位置:首页 >> 学术资讯 >> 科研信息

华中科技大学集成电路学院缪向水李祎团队在浮点精度存算一体系统研究方面取得新成果

2024/12/20

新闻网讯 近日,第70届国际电子器件会议(IEDM)会议在美国旧金山召开。该会议是全球最具影响力的半导体器件领域学术会议,议题涉及半导体材料与器件、器件制造工艺、集成电路技术与应用等领域。我校集成电路学院缪向水、李祎团队在会议上报告了团队在存算一体技术方面的最新研究成果“Demonstration of a Floating-point Deep Neural Matrix Equation Solver using 3D Vertical ReRAM with High Energy- and Area-Efficiency”。


我校这一成果实现了国际上首个基于三维集成阻变存储器阵列的浮点精度存算一体系统,为实现高能效、高精度的AI-for-Science计算应用提供了重要方案。我校集成电路学院2019级博士生李健聪(已毕业入站从事博士后研究)和2020级博士生任升广为论文共同第一作者,李祎教授、何毓辉教授和缪向水教授为论文共同通讯作者。我校是论文唯一完成单位。


求解矩阵方程Ax=b是科学计算和具身智能等领域的基础数学问题,核心在于对方程系数矩阵A进行求逆运算。近年来,AI-for-Science相关研究表明神经网络方法能够突破传统矩阵分解方法在时间复杂度上的瓶颈,实现高效的矩阵求逆计算。但是,传统冯·诺依曼架构的计算机系统在神经网络的训练和推理过程中,面临算力不足和硬件资源消耗过大的挑战(图1)。基于阻变存储器的存算一体技术被视为高效加速神经网络计算的潜力方案。然而,求解矩阵方程通常需要浮点计算以满足精度需求,而忆阻器阵列的擦写开销及低精度模拟计算机制成为制约存算一体技术实现浮点神经网络训推性能的关键瓶颈。此外,如何突破当前平面集成阵列的算力与能效极限是另一重要难题。


图1. 研究思路:基于神经网络逆运算的矩阵方程求解器


针对上述问题,我校团队构建了一套基于三维垂直堆叠的阻变存储器阵列(3D-V ReRAM)的存算一体神经网络训推软硬件系统,可以高效执行系数矩阵A的浮点精度逆运算及方程的浮点精度求解,并取得了系列进展。


在三维集成层面,团队设计并制备了4Kb规模、4层堆叠的高一致性高可靠性3D-V ReRAM阵列。阵列在操作功耗(16.4fJ)、擦写延时 (100ns) 、单片可扩展性(>493Mb)和多值编程特性(2-bit)等多方面指标均达到了国际先进水平,为实现高能效存算一体系统提供了硬件基础(图2)。


图2. 4 Kb三维集成阻变存储器阵列


在计算架构及电路层面,针对网络高精度低开销训推这一关键挑战,团队提出了阻变器件本征随机性驱动的混合精度训练架构,实现了神经网络求解器的高效求逆。同时,为支持方程的高精度求解,将3D-V ReRAM阵列与任意精度存算一体技术(Arbitrary-Precision Computing-in-Memory, ArPCIM)结合,构建了支持原位单精度浮点计算的存算一体单元,突破了低精度器件实现浮点精度计算的难题(图3)。


图3. 神经网络求解器的混合精度训练框架及原位浮点计算架构


团队所构建的存算一体原型系统实验演示了阵列中的原位FP32精度矩阵乘法计算,一维对流扩散方程的高精度求解计算误差低于10-13,相当于双精度浮点求解系统。性能评估结果表明,在22nm节点工艺下,上述系统预期可实现11.5 TFLOPS/W的 FP32精度计算能效和大于0.63 TFLOPS/mm2的单位面积算力,相对当前最先进的NIVIDA H100 GPU可实现132倍的能效提升和7.6倍的面积效率提升(图4)。


4.存算一体系统及浮点计算任务评估


本论文是继忆阻稀疏矩阵方程求解器(Sci. Adv. 2023)、快速欠定矩阵方程求解器(IEDM 2023)、任意精度存算一体加速器(IEEE TCASI 2024)之后,我校团队在存算一体技术方向取得的又一新突破。上述研究工作得到了国家科技创新2030重大研究计划、国家重点研发计划、我校基础研究支持计划等项目的资助,以及国家集成电路产教融合创新平台、先进存储器湖北省重点实验室等平台的支持。


版权声明:
文章来源华中科技大学网,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年矿产资源、勘探技术与地球科学国际会议(ICRTS 2026)(2026-02-28)

2026年能源、电力与可持续发展国际学术会议(EESD 2026)(2026-03-06)

第三届光电信息与光学工程国际学术会议(OIOE 2026)(2026-03-06)

第九届大数据与应用统计国际学术研讨会(ISBDAS 2026)(2026-03-06)

第五届网络安全、人工智能与数字经济国际学术会议(CSAIDE 2026)(2026-03-06)

第五届材料工程与应用力学国际学术会议(ICMEAAE 2026)(2026-03-06)

2026年社会心理学、行为科学与教育国际会议(SPBSE 2026)(2026-03-09)

2026年智慧交通与检测技术国际会议(ITDT 2026)(2026-03-25)

2026年第六届智能机器人系统国际会议(ISoIRS 2026)(2026-03-27)

2026年第五届算法、计算和机器学习国际会议(CACML 2026)(2026-03-27)

2026年金融、工商管理与企业发展国际会议(FBAED 2026)(2026-3-16)

2026分子生物学、生态学与遗传学国际会议(MBEG 2026)(2026-3-15)

2026矿产资源、地质学与资源勘探国际会议(ICMRGRE 2026)(2026-2-17)

2026年电力、可再生能源与节能技术国际会议(EREET 2026)(2026-2-27)

2026年现代化教育与法学国际会议(ICMEL 2026)(2026-4-21)

2026年现代管理、物流与供应链国际会议(MMLSC 2026)(2026-4-17)

2026年教育、知识与管理科学国际会议(ICEKMS 2026)(2026-2-14)

2026物理、化学化工与勘探开发国际会议(PCCEED 2026)(2026-2-13)

2026年人工智能、大数据与电气自动化国际学术会议(AIBDEA 2026)(2026-5-8)

2026年城市建设、环境工程与区域经济国际会议(ICERU 2026)(2026-2-10)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。