首页|多尺度条形池化与通道注意力的图像语义分割

多尺度条形池化与通道注意力的图像语义分割

扫码查看
目的 针对自然场景下图像语义分割易受物体自身形状多样性、距离和光照等因素影响的问题,本文提出一种新的基于条形池化与通道注意力机制的双分支语义分割网络(strip pooling and channel attention net,SPCANet).方法 SPCANet从空间与内容两方面对图像特征进行抽取.首先,空间感知子网引入1维膨胀卷积与多尺度思想对条形池化技术进行优化改进,进一步在编码阶段增大水平与竖直方向上的感受野;其次,为了提升模型的内容感知能力,将在ImageNet数据集上预训练好的VGG16(Visual Geometry Group 16-layer network)作为内容感知子网,以辅助空间感知子网优化语义分割的嵌入特征,改善空间感知子网造成的图像细节信息缺失问题.此外,使用二阶通道注意力进一步优化网络中间层与高层的特征选择,并在一定程度上缓解光照产生的色差对分割结果的影响.结果 使用Cityscapes作为实验数据,将本文方法与其他基于深度神经网络的分割方法进行对比,并从可视化效果和评测指标两方面进行分析.SPCANet在目标分割指标mIoU(mean intersection over union)上提升了1.2%.结论 提出的双分支语义分割网络利用改进的条形池化技术、内容感知辅助网络和通道注意力机制对图像语义分割进行优化,对实验结果的提升起到了积极作用.
Semantic image segmentation by using multi-scale strip pooling and channel attention

马吉权、赵淑敏、孔凡辉

展开 >

黑龙江大学计算机科学与技术学院,哈尔滨 150080

黑龙江大学数据科学与技术学院,哈尔滨 150080

图像分割 注意力 条形池化 膨胀卷积 感受野

黑龙江省自然科学基金

LH2021F046

2022

中国图象图形学报
中国科学院遥感应用研究所,中国图象图形学学会 ,北京应用物理与计算数学研究所

中国图象图形学报

CSTPCDCSCD北大核心
影响因子:1.111
ISSN:1006-8961
年,卷(期):2022.27(12)
  • 2
  • 2