当前位置:首页 >> 学术资讯 >> 科研信息

清华大学计算机系存储实验室团队获得MLSys 2026大模型推理优化赛事冠军

2026/06/06

清华大学计算机系存储实验室团队获得MLSys 2026大模型推理优化赛事冠军

文章导读
还在为团队的大模型推理速度慢到用户流失而焦虑?90%的人都在死磕硬件升级,以为换H100就能解决问题。但清华存储实验室用一个被忽略的软件技巧,在AWS上把Qwen3-30B的端到端推理从14.9秒压到了3.5秒——直接击败斯坦福、MIT等顶级队伍。他们没换任何昂贵设备,只是在一个叫“专家分片”的环节做了件反直觉的事:把数据布局重构了。如果你也想不烧钱就让模型快4倍,这篇文章里藏着那个能让你们效率翻倍、但90%的团队都踩错方向的关键步骤。
— 内容由好学术AI分析文章内容生成,仅供参考。

近日,第九届机器学习与系统会议(MLSys 2026)在美国华盛顿州贝尔维尤举行。由清华大学计算机系存储实验室博士生高世伟、范如文、任庭旭、罗以彬等组成,计算机系教授舒继武、副教授陆游游担任指导教师,腾讯AI系统专家里德(Reed提供技术支持的参赛团队,在会议举办的混合专家模型内核优化挑战赛中获得冠军。

本次比赛面向Qwen3-30B-A3B混合专家模型的真实解码推理场景,吸引了来自斯坦福大学、麻省理工学院、加州大学伯克利分校、卡内基梅隆大学、加州大学洛杉矶分校、康奈尔大学等高校组队参赛。比赛中,计算机系存储实验室团队成员基于亚马逊AWS提供的NKI编程框架,围绕专家分片、矩阵向量乘特化、片上数据布局重构、跨算子融合和自动化算子优化等关键技术,对推理解码阶段进行了系统优化,将端到端推理时间从14.91秒降至3.56秒,实现约4.1倍加速,最终获得冠军。

这是计算机系存储实验室团队继2025年获得ASPLOS/EuroSys大模型推理优化竞赛冠军后,再次在国际顶级学术会议举办的大模型推理优化赛事中夺冠。

MLSys是机器学习系统领域的国际顶级学术会议之一,聚焦机器学习与计算机系统的交叉研究,涵盖大模型训练与推理、AI编译器、计算机体系结构、分布式系统、专用AI硬件等前沿方向。


版权声明:
文章来源清华大学,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。

相关学术资讯
近期会议

2026年第9届信息系统与计算机辅助教育国际会议(ICISCAE 2026)(2026-09-27)

2026年艺术设计与视觉表达国际会议(AEVD 2026)(2026-09-28)

2026年第五届算法、数据挖掘和信息技术国际会议(ADMIT 2026)(2026-10-16)

2026年人工智能与机器人系统国际会议(ICAIRS 2026)(2026-10-23)

2026年第三届先进机器人, 自动化工程与机器学习国际会议(ARAEML 2026)(2026-10-23)

2026年第六届控制理论与应用国际会议(ICoCTA-2026)(2026-10-23)

2026年人工智能、大数据与云计算国际会议 (AIBDCC 2026)(2026-10-30)

2026年国际可再生、可持续能源和智能技术会议(2026-10-30)

2026年土木水利材料与高性能结构国际会议 (CHMHS 2026)(2026-10-30)

2026年农田水利、灌溉工程与节水技术国际会议(ICIEWTFWC 2026)(2026-10-30)

2026智能优化、神经网络与人工智能国际会议(IONNAI 2026)(2026-9-28)

2026年信号处理与光学工程国际会议(SPOE 2026)(2026-9-26)

2026年计算机图形学与计算摄影国际学术会议(CGCP 2026)(2026-9-6)

2026建筑信息、水利工程与工程管理国际会议(BIHEEM 2026)(2026-9-30)

2026年神经科学与医药研究国际会议(ICNMR 2026)(2026-9-23)

2026计算机应用、电力电子与信息系统国际会议(CAPEIS 2026)(2026-9-29)

2026年机械工程与新材料国际学术会议(ICMENM 2026)(2026-9-30)

2026年波形反演、AI地震学与智能预警系统国际会议(AISWI 2026)(2026-9-28)

2026年水利水电、结构工程与工业建筑国际会议(WRHSEIC 2026)(2026-9-25)

2026年计算机、电子材料与信息工程国际会议(CEMIE 2026)(2026-9-29)

小贴士:学术会议云是学术会议查询检索的第三方门户网站。它是会议组织发布会议信息、众多学术爱好者参加会议、找会议的双向交流平台。它可提供国内外学术会议信息预报、分类检索、在线报名、论文征集、资料发布以及了解学术资讯,查找会服机构等服务,支持PC、微信、APP,三媒联动。