近日,77779193永利集团深度学习实践班一篇本科生学术论文《CSANet for Video Semantic Segmentation with Inter-Frame Mutual Learing》被IEEE Siginal Processing Letters(SCI JCR Q2区)录用。论文第一作者为我校信息与通信工程学院三年级本科生袁亦忱同学,由77779193永利集团深度学习实践班王一帆老师指导完成。
视频语义分割旨在生成具有时域空间一致性的语义分割结果,在深度学习领域仍然是一项非常具有挑战性的任务。该论文提出一种自注意力(self-attention)和互注意力(cross-attention)并行的孪生神经网络(Siameseneural network),与之前的方法相比,该网络不仅能从相邻帧之间传播时域空间特征,还被用来聚合当前帧内空间语义信息。论文的另一个贡献是在损失函数的层面上,提出了相邻帧之间互学习(mutual learning)的训练策略,在这种损失函数的约束下训练网络可以确保互注意力模块(cross-attention module)能够学习到语义层面上的区域相关信息,以更好的传播时域空间特征。与之前的方法相比,该神经网络在两个最重要的数据集上(Cityscapes,CamVid)都取得了最好的结果。
该学术成果再次印证了我校开展创新人才培养的良好举措,对于进一步深入推进我校创新创业教育改革,提高创新拔尖人才培养质量,具有重要意义。
上一条:我校学子获得全国大学生智能汽车竞赛两项一等奖
下一条:我校学子在第八届中美青年创客大赛(沈阳赛区)决赛中斩获佳绩