北京大学高歌课题组开发出基于自适应卷积核的新卷积学习方法
2024/04/28
深度学习是机器学习的一种,通常指基于表示学习的深度神经网络,如基于卷积神经层构建的卷积神经网络、基于递归神经层构建的递归神经网络等。它适合用来发现海量高维数据背后的复杂模式。近十年来,随着计算机算力的大幅提升,深度学习在图像识别、自然语言处理等领域取得了众多成果,其中可以捕捉数据局部特征的卷积神经网络已被广泛应用于组学序列数据分析、生物影像处理等多个生命科学相关领域。
卷积神经网络可利用卷积层中一系列卷积核来自动识别输入序列上频繁出现的序列片段,并通过将这些片段组合以发现其中的序列motif。然而,目前卷积层只能使用预设固定长度的卷积核,难以适应海量组学数据中复杂多变的信号模式。为此,目前的主流实现中常用多种不同大小的卷积核分层叠加以应对,但由此导致的模型参数膨胀又显著提升了训练难度。

论文截图
近日,北京大学生物医学前沿创新中心(BIOPIC)、北京未来基因诊断高精尖创新中心(ICG)、北京大学生命科学学院生物信息中心(CBI)、蛋白质与植物基因研究国家重点实验室高歌研究员课题组,在生物信息学期刊Briefings in Bioinformatics发表了题为“Identifying complex motifs in massive omics data with a variable-convolutional layer in deep neural network”的生物信息学论文,提出能够在训练中自动调整卷积核长度的新型变长卷积层vConv。vConv通过在原始卷积核上叠乘两条形状可训练的对向S型曲线,来动态遮蔽卷积核两侧元素、进而实时学习卷积核的有效长度。

vConv层结构:为了生成掩码矩阵(mask matrix),vConv使用两个对称的sigmoid函数生成了两个矩阵(A和B),然后通过叠加这两个矩阵获得了掩码矩阵(C)。在此基础上,vConv把该掩码矩阵与原始的卷积核做Hadamard积,获得了掩码内核(D),再将该掩码内核与输入序列进行卷积(E)
序列motif(sequence motif)通常是指与特定生物学功能相关的一段序列片段、及其相关碱基/氨基酸分布模式,如转录因子结合位点、蛋白质功能域等。识别、鉴定与发现序列motif是生物信息学与计算生物学的经典问题之一。多组模拟与真实数据集的测试显示,基于vConv的神经网络可于Gb级别海量组学数据中准确识别鉴定序列motif,性能显著优于经典工具及基于传统卷积层的神经网络。
vConv可直接加入现有多层神经网络模型中,可作为传统卷积层的直接替代广泛应用于数据挖掘、图像识别等多个领域。为方便使用,相关Python代码及教程已通过GitHub开源发布(https://github.com/gao-lab/vConv),与课题组前期发布的池化层ePooling方法(https://github.com/gao-lab/ePooling)相结合,可为相关应用提供平滑升级路径。
北京大学生命科学学院博士生李静一、实习生金燊(现为美国卡内基梅隆大学计算生物学系硕士)为该论文的共同第一作者,高歌、军事科学院军事医学研究院辐射医学研究所博士后丁阳为共同通讯作者,北京大学生命科学学院本科生屠鑫明在代码测试上提供了大力支持。该研究得到国家科技部、北京未来基因诊断高精尖创新中心、蛋白质与植物基因研究国家重点实验室的支持,计算分析工作于北京大学高性能计算校级公共平台与ICG高性能计算平台完成。
文章来源北京大学新闻网,分享只为学术交流,如涉及侵权问题请联系我们,我们将及时修改或删除。
-
2026年10月优质国际学术会议推荐 280
-
第五届传感、测量、通信与物联网技术国 435
-
2026年第15届计算与模式识别国际 690
-
2026年计算科学与学习技术前沿国际 519
-
2026年第三届计算机网络与云计算国 2966
-
2026资源、化学化工与应用材料国际 4066
-
2026年图像处理与数字创意设计国际 3769
-
2026年机械工程,新能源与电气技术 8771
-
2026年材料科学、低碳技术与动力工 4236
-
2026年文化产业管理、创意经济与城 09-16
-
2026年统计建模、数据分析与机器学 09-16
-
2026年机械工程、结构动力学与智能 09-16
-
2026年数字金融、区块链技术与产业 09-16
-
2026年计算机视觉与工业图像检测国 09-16
-
2026年桥隧建设、地下工程与岩土力 09-16
-
2026 JCR影响因子正式发布1932
-
中国科协发布2025年《重要学术2007
-
2026年新锐分区(原中科院期刊10469
-
2025年两院院士增选有效候选人6502
-
好学术:科研网址导航|学术头条分9003
-
2025年国际期刊预警名单发布!8859
-
2025年中科院期刊分区表重磅发30088
-
吉林大学校长张希:学术会议中的提9934
-
科研人员构建人造光合水凝胶微球09-16
-
科研人员构建bridge RNA09-16
-
海洋热浪生态效应研究取得进展09-16
-
科研人员提出机器学习辅助的“材料09-16
-
研究揭示芭蕉科染色体演化机制与花09-16
-
科研人员研发混合集成气体传感芯片09-16
-
西安交大孟令杰/党东锋团队联合 09-16
-
杭州远成会议服务有限公司 24766

-
北京泛地能源咨询 21823

-
2018年经济管理与绿色发展国际 23644

-
亚太科学工程学会 23947

-
辽宁铁岭福香居 21719

-
河南纳智博研会务有限公司 8930

-
天津金泽大酒店 23745

-
亚洲理工学院 3023

-
中国医药化工网 25138

-
7801研究所 18783

-
西南石油大学建筑工程学院 23818

-
上海屹桥文化传播有限公司 9083

-
上海英致商务咨询有限公司 2627

-
上海麦峰医学科技有限公司 2693

-
湖南科技大学 21772

-
IAASE 23678

-
蚌埠市会展中心 24881

-
中国风险投资研究院 2740

-
中关村视界裸眼立体信息产业联盟 2761

-
武汉帕萨科技服务有限公司 23397





















974







































