浙江大学教授团队在跨媒体智能计算领域取得进展
2024/03/21
830 |
图 基于多重知识表达的音-视频跨媒体感知算法，获ACM Multimedia 2023唯一最佳论文奖（1/3072）
跨媒体智能计算综合了人工智能与多媒体计算的相关核心技术，主要研究多媒体内容的对齐、表达、理解和推理等理论与方法，目标是实现对外部世界的智能化感知、认知与重现，对具身智能、元宇宙等领域的发展具有重要推动作用。
在国家自然科学基金项目（批准号：62293554、U2336212、61976185、U19B2043）等资助下，浙江大学杨易教授和肖俊教授项目组深入探索新一代跨媒体智能基础理论和计算框架，取得进展。项目组针对基于多重知识表达的跨媒体计算框架展开系统性研究，突破了纯数据驱动的跨媒体智能计算在可控性、可解释性、鲁棒性等方面的瓶颈；通过在跨媒体学习过程中综合深度特征表达、语义结构知识、知识图谱、大模型世界知识等不同抽象层次的知识，克服了以往单一知识形态无法兼顾强表征与易解释的不足，构建了更加可靠、可解释的跨媒体表达。与国内外跨媒体建模和计算技术相比，提高了跨媒体智能算法在复杂开放环境下的泛化能力、解释能力和推理能力。相关研究成果为跨媒体智能研究提供了新思路、新理论，推动了基于多重知识表达的新型跨媒体智能计算的技术发展，有望助力我国在知识和数据双轮驱动的人工智能方向上取得突破。
相关研究成果在《IEEE模式分析与机器智能汇刊（TPAMI）》（SCI一区、影响因子23.6、CCF-A类）、《神经信息处理系统大会（NeurIPS）》（CCF-A类、H5-index 309）、《IEEE国际计算机视觉与模式识别会议（CVPR）》（CCF-A类、H5-index 422）、《计算机视觉国际大会（ICCV）》（CCF-A类、H-index 254）等人工智能领域的国际期刊和会议上发表，并获得2023年多媒体领域国际学术会议ACM Multimedia（CCF-A类）唯一最佳论文奖（图）以及2021年浙江省科学技术进步奖一等奖，以及十余项CCF-A类会议国际学术竞赛的世界冠军，应邀在多个CCF-A类会议做学术报告。被来自哈佛、普林斯顿、卡内基梅隆、牛津、剑桥等高校和微软、Meta、亚马逊等企业的研究团队引用，获得多位国际学者的正面评价。成功应用于华为跨媒体搜索引擎，以及阿里、百度、海康威视等企业的业务场景。
鏂囩珷鏉ユ簮国家自然科学基金委员会锛屽垎浜彧涓哄鏈氦娴侊紝濡傛秹鍙婁镜鏉冮棶棰樿鑱旂郴鎴戜滑锛屾垜浠皢鍙婃椂淇敼鎴栧垹闄ゃ
-
2025骞11鏈堜紭璐ㄥ鏈細璁帹鑽 16
-
2025骞存満鍣ㄨ瑙夈佹櫤鑳芥垚鍍忎笌妯″紡璇 392
-
2025骞寸涓冨眾鎺у埗涓庢満鍣ㄤ汉鍥介檯浼氳 576
-
2025骞存櫤鑳藉厜瀛愬涓庡簲鐢ㄦ妧鏈浗闄呭 1529
-
2025骞存満姊板伐绋嬶紝鏂拌兘婧愪笌鐢垫皵鎶鏈 1790
-
2025骞磋绠楁満绉戝銆佸浘鍍忓垎鏋愪笌淇″彿 2065
-
2025骞存潗鏂欏寲瀛︿笌鐕冩枡鐢垫睜鎶鏈浗闄 1861
-
2025骞磋嚜鍔ㄥ寲鍓嶆部绯荤粺銆佹櫤鎱у煄甯備笌 10-23
-
2025骞翠俊鎭厜瀛︺侀仴鎰熸妧鏈笌鏈哄櫒瑙 10-23
-
2025骞存暟瀛椾汉鏂囥佹枃鍖栭仐浜т笌璇█瀛 10-23
-
2025骞寸缁忕瀛︺佺敓鐗╀俊鎭涓庢櫤鑳 10-23
-
2025骞磋瑷璁ょ煡銆佷汉宸ユ櫤鑳戒笌璁＄畻寤 10-23
-
2025骞寸ぞ浼氱瀛︺佸簲鐢ㄨ瑷瀛︿笌浜烘枃 10-23
-
2025骞翠紶缁熸満姊般佸姩鍔涘涓庢櫤鑳借澶 10-23
-
2025骞村浘鍍忓鐞嗐佺墿鐞嗗缓妯′笌缁撴瀯璁 10-23
2025骞存櫤鑳借澶囦笌鑷富绯荤粺鍥介檯瀛︽湳浼氳锛圛.
绗笁灞婃暟瀛︿笌鏈哄櫒瀛︿範鍥介檯瀛︽湳浼氳 (ICMM.
2025鏈烘銆佽溅杈嗕笌鏅鸿兘鎺у埗鍥介檯瀛︽湳浼氳锛圛.
绗簲灞婅绠楁満绉戝銆佺數瀛愪俊鎭伐绋嬪拰鏅鸿兘鎺у埗鎶鏈.
绗笁灞婁俊鍙峰鐞嗕笌鏅鸿兘璁＄畻鍥介檯瀛︽湳浼氳(SPI.
绗簩灞婂ぇ鏁版嵁鍒嗘瀽涓庝汉宸ユ櫤鑳藉簲鐢ㄥ鏈細璁紙BD.
ACM鍑虹増 | 绗簩灞婂ぇ鏁版嵁鍒嗘瀽涓庝汉宸ユ櫤鑳藉簲.
绗簲灞婄數姘斿伐绋嬩笌鎺у埗绉戝鍥介檯瀛︽湳浼氳 (IC.
绗笁灞婁汉宸ユ櫤鑳藉畨鍏ㄤ笌闅愮鍥介檯瀛︽湳浼氳锛圓IS.
绗簩灞婂ぇ鏁版嵁銆佺缁忕綉缁滀笌娣卞害瀛︿範鐮旇浼氾紙BD.
绗笁灞婂簲鐢ㄧ粺璁°佸缓妯′笌鍏堣繘绠楁硶鍥介檯瀛︽湳浼氳锛.
2025骞寸鍥涘眾閫氫俊锛屼俊鎭郴缁熶笌鏁版嵁绉戝鍥介檯.
绗叚灞婅绠楁満宸ョ▼涓庢櫤鑳介氫俊鍥介檯鐮旇浼氾紙ISC.
绗洓灞婂湴鐞嗕俊鎭笌閬ユ劅鎶鏈浗闄呭鏈細璁紙GIR.
2025骞存暟鎹瀛︿笌鏅鸿兘绯荤粺鍥介檯浼氳(DSI.
绗洓灞婃暟鐞嗙粺璁′笌缁忔祹鍒嗘瀽鍥介檯瀛︽湳浼氳 (MS.
绗笁灞婁俊鎭寲鏁欒偛涓庝汉宸ユ櫤鑳藉浗闄呭鏈細璁紙IC.
绗簲灞婃娴嬫妧鏈笌鏅鸿兘绯荤粺鍥介檯瀛︽湳浼氳锛圖TI.
2025 骞寸浜屽眾浜氭床鏅鸿兘鐢电綉锛岀豢鑹茶兘婧愪笌搴.
绗簲灞婄幆澧冩薄鏌撲笌娌荤悊鍥介檯瀛︽湳浼氳 (ICEP.
绗簩灞婂厛杩涙帶鍒剁郴缁熶笌鑷姩鍖栨妧鏈浗闄呭鏈細璁(.
2025骞寸鍥涘眾鍏堣繘鐨勭數鍔涚郴缁熷拰鑳芥簮宸ョ▼鍥介檯.
2025骞寸浜屽眾IEEE浜氭床鍏堣繘鐢垫皵涓庣數鍔涘伐.
绗簲灞婄數瀛愰氫俊涓庤绠楁満绉戝鎶鏈浗闄呭鏈細璁紙.
-
2025骞翠袱闄㈤櫌澹閫夋湁鏁堝欓変汉1145
-
2025鏈鏂癑CR鍒嗗尯鍙婂奖鍝嶅洜瀛4758
-
濂藉鏈:绉戠爺缃戝潃瀵艰埅|瀛︽湳澶存潯鍒2033
-
2025骞村浗闄呮湡鍒婇璀﹀悕鍗曞彂甯!1930
-
2025骞翠腑绉戦櫌鏈熷垔鍒嗗尯琛ㄩ噸纾呭彂8447
-
涓浗绉戝崗銆婇噸瑕佸鏈細璁洰褰曪紙205134
-
鍚夋灄澶у鏍￠暱寮犲笇锛氬鏈細璁腑鐨勬彁2840
-
娓呭崕澶у鍦板绯婚槼鍧よ棰樼粍鎻ず鍏ㄧ悆10-20
-
鍘嗗彶鏃舵湡鏋佺骞叉棻鐏惧鐨勬暟鎹瘎浼板拰10-20
-
鈥滄竻鍗庡寲瀛︾櫨骞磋鍧涳細濉戦犲寲瀛︾殑鏈10-20
-
鐮旂┒鎻ず妞嶇墿婵绱犵嫭鑴氶噾鍐呴叝浣滀负璺10-20
-
娓呭崕澶у鑱斿悎鐮斿彂鐨勨46MW澶у10-20
-
娓呭崕澶у锛堣蒋浠跺闄級-涔濈枂鐢靛姏寤10-20
-
涓浗鍐滀笟澶у鍦熷湴瀛﹂櫌椹煫闊暀鎺堝洟10-20
-
鐢靛瓙绉戞妧澶у鍏夌數瀛﹂櫌鏈鐢熷湪涓鍖10-20
-
中国生物医学工程学 21053
-
中国兵工学会 21230
-
Faculty of Music 8296
-
VDSGER 1918
-
VERBI软件.德国(柏林)社会 21482
-
湖北研学博科文化传播有限公司 8114
-
西安石油大学 22948
-
武汉依埃斯威广告有限公司 8049
-
扬州大学信息工程学院 18120
-
WILL 23982
-
大连四叶草会展有限公司 8109
-
北京学苑新报 18165
-
可持续城市与社区研究会 24253
-
农科传媒 8143
-
北京工业大学 2100
-
test0730 18006
-
传神语联网网络科技股份有限公司 8671
-
四川省达州市职工旅行社有限公司 18038
-
工业和信息化部工业文化发展中心 24008
-
湖北文理学院 21168
