基于多尺度和级联的神经网络遥感影像语义分割方法

1.本发明涉及图像处理技术领域，具体而言，涉及一种基于多尺度和级联的神经网络遥感影像语义分割方法。


背景技术：

2.土地资源的合理利用有利于提高土地的使用效率，而充分熟悉土地资源是合理利用土地资源的前提，因此土地分类对于社会生产具有极其重要的作用。随着信息时代的不断发展，高分辨率遥感影像在土地分类方面发挥着重要的作用，它能够更好地体现土地风貌、植被分布等特征，展示更多的地面信息与细节特征。但同时高分辨率下图像的细节更多，在较为复杂的背景下，会给图像解译带来很多的困难。因此，遥感影像语义分割至关重要。
3.传统的遥感影像语义分割方法主要是基于超像素、聚类以及支持向量机等的分割方法，它们通常只能从遥感影像的浅层特征出发，难以充分挖掘遥感影像的深层特征，具有很强的数据集依赖性，难以广泛使用。随着深度学习的发展，各类神经网络也开始用于遥感影像的语义分割，然而也存在着精确度较低的问题，例如全卷积神经网络存在未充分考虑上下文信息的问题，其它神经网络也存在诸如引入冗余信息、无法充分挖掘特征、没有考虑多尺度等问题。


技术实现要素：

4.本发明解决的问题是如何提高现有遥感影像语义分割的精确度。
5.为解决上述问题，本发明提供一种基于多尺度和级联的神经网络遥感影像语义分割方法，该方法包括：
6.获取待处理遥感影像；
7.将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果；所述语义分割网络包括编码网络、特征增强模块、解码网络、语义分割模块；其中，所述编码网络包括卷积块和多个多尺度特征提取模块；所述特征增强模块包括多个信道激活模块；所述解码网络为多个卷积块、多个反卷积块以及多个跨层特征选择模块通过多重级联方式构成；所述语义分割模块包括多尺度物体引导模块和语义分割头。
8.可选地，所述将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果包括：
9.在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征；
10.将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征；
11.在所述解码网络中对所述增强后的多尺度特征进行解码，分别获得第一特征、第二特征以及第三特征；
12.将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果。
13.可选地，所述在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征包括：
14.将所述待处理遥感影像进行卷积、批归一化以及激活函数处理，获得预处理特征；
15.将所述预处理特征输入多个所述多尺度特征提取模块构成的串联结构，输出所述多尺度特征。
16.可选地，所述将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征包括：
17.将所述多尺度特征分别输入多个所述信道激活模块，输出所述增强后的多尺度特征。
18.可选地，还包括：
19.在所述解码网络中，所述卷积块和所述跨层特征选择模块向下一层的所述卷积块传递特征前，采用双线性插值算法增大所传递特征的尺寸。
20.可选地，所述将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果包括：
21.将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征；
22.将所述引导特征和所述第三特征输入所述语义分割头，获得所述待处理遥感影像的所述语义分割结果。
23.可选地，所述将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征包括：
24.对所述第一特征和所述第二特征分别进行不同尺度的池化，然后通过1*1卷积和softmax函数分别获得所述第一特征和所述第二特征的权重；
25.利用最近邻插值算法增大所述第一特征和所述第二特征的权重，并分别与所述第一特征和所述第二特征相乘，从而获得所述引导特征。
26.可选地，所述多尺度特征提取模块的构建过程包括：
27.将所述多尺度特征提取模块的输入特征输至五个卷积分支，分别输出所述卷积分支的输出特征；
28.将所述卷积分支的所述输出特征按照信道维度进行拼接，获得拼接后的特征；
29.将所述拼接后的特征进行并行的1*1卷积和3*3卷积，然后相加得到所述多尺度特征提取模块的输出特征。
30.可选地，所述信道激活模块的构建过程包括：
31.将所述信道激活模块的输入特征先进行3*3卷积，然后采用全局最大池化和全局平均池化提取信道特征，最后依次通过1*1卷积、relu函数、层归一化、1*1卷积以及softmax函数处理提取信道权重；
32.将所述信道权重与所述信道激活模块的输入特征相乘，获得所述信道激活模块的输出。
33.可选地，所述跨层特征选择模块的构建过程包括：
34.将所述跨层特征选择模块的两个输入特征分别进行3*3卷积，获取卷积处理后的两个特征，然后相加并通过全局平均池化捕获全局特征信息，再利用多层感知机和softmax函数获取所述跨层特征选择模块的两个输入特征的权重；
35.将所述跨层特征选择模块的两个输入特征的权重和所述卷积处理后的两个特征相乘，然后相加并经过3*3卷积得到所述跨层特征选择模块的输出特征。
36.本发明所述的基于多尺度和级联的神经网络遥感影像语义分割方法的有益效果是：先通过编码网络对待处理遥感影像进行编码，具体地，利用多尺度特征提取模块进行综合性的特征提取，从而提高了网络对待处理遥感影像多尺度信息的理解能力。然后在特征增强模块中通过信道激活模块捕获特征中具有代表性和区分度的特征，以此来激活对应信道的特征。接着利用解码网络对特征进行逐层解码，多重级联的方式能够增加信息流的传递，增强解码网络的语义理解能力。最终在这些基础上利用语义分割模块实现语义分割，极大地提升了待处理遥感影像语义分割的精确度。
附图说明
37.图1为本发明实施例的一种基于多尺度和级联的神经网络遥感影像语义分割方法的流程示意图一；
38.图2为本发明实施例的语义分割网络的网络架构示意图；
39.图3为本发明实施例的一种基于多尺度和级联的神经网络遥感影像语义分割方法的流程示意图二；
40.图4为本发明实施例的一种基于多尺度和级联的神经网络遥感影像语义分割方法的流程示意图三；
41.图5为本发明实施例的多尺度特征提取模块的结构示意图；
42.图6为本发明实施例的信道激活模块的结构示意图；
43.图7为本发明实施例的跨层特征选择模块的结构示意图；
44.图8为本发明实施例的多尺度物体引导模块的结构示意图。
具体实施方式
45.为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。
46.图1为本发明实施例提供的一种基于多尺度和级联的神经网络遥感影像语义分割方法的流程示意图，如图1所示，该方法包含以下步骤：
47.步骤101、获取待处理遥感影像。
48.具体地，待处理遥感影像可以为一张或者多张。
49.步骤102、将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果；所述语义分割网络包括编码网络、特征增强模块、解码网络、语义分割模块；其中，所述编码网络包括卷积块和多个多尺度特征提取模块；所述特征增强模块包括多个信道激活模块；所述解码网络为多个卷积块、多个反卷积块以及多个跨层特征选择模块通过多重级联方式构成；所述语义分割模块包括多尺度物体引导模块和语义分割头。
50.参照图2，图2为本实施例中语义分割网络的网络架构示意图，具体地，在获取待处理遥感影像后，将该待处理遥感影像输入语义分割网络，即可获得该待处理遥感影像的语义分割结果。该语义分割网络包括四个部分，其中，编码网络的输入为待处理遥感影像，输
出为多尺度特征。特征增强模块的输入为多尺度特征，输出为增强后的多尺度特征。解码网络的输入为增强后的多尺度特征，输出为第一特征、第二特征以及第三特征。语义分割模块的输入为第一特征、第二特征以及第三特征，输出为待处理遥感影像的语义分割结果。编码网络中的卷积块即图2中待处理遥感影像输入的cbl模块，解码网络中的卷积块同样也是图2对应位置的cbl模块，需要说明的是，编码网络中的卷积块和解码网络中的卷积块结构相同，均包括卷积、批归一化以及leakyrelu函数。解码网络中的反卷积块即图2中的dbl模块，dbl模块包括反卷积、批归一化以及leakyrelu函数。解码网络通过多重级联的方式将卷积块、反卷积块以及跨层特征选择模块(cross-layer feature selection module，cfsm)连接起来，可以更好地对特征进行解码，获得更多的特征信息。
51.在本实施例中，先通过编码网络对待处理遥感影像进行编码，具体地，利用多尺度特征提取模块(multi-branch feature extraction module，mfem)进行综合性的特征提取，从而提高了网络对待处理遥感影像多尺度信息的理解能力。然后在特征增强模块中通过信道激活模块(channel activate module，cam)捕获特征中具有代表性和区分度的特征，以此来激活对应信道的特征。接着利用解码网络对特征进行逐层解码，多重级联的方式能够增加信息流的传递，增强解码网络的语义理解能力。最终在这些基础上利用语义分割模块实现语义分割，极大地提升了待处理遥感影像语义分割的精确度。
52.在一种可能的实施方式中，如图3所示，所述将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果包括：
53.步骤201、在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征。
54.参照图2，将待处理遥感影像输入语义分割网络，先在编码网络中对该待处理遥感影像编码，该编码网络即图2中一个cbl模块和五个mfem模块构成的编码网络，通过这五个mfem模块的输出获得多尺度特征。
55.在一种可能的实施方式中，所述在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征包括：
56.将所述待处理遥感影像进行卷积、批归一化以及激活函数处理，获得预处理特征；
57.将所述预处理特征输入多个所述多尺度特征提取模块构成的串联结构，输出所述多尺度特征。
58.具体地，先将待处理遥感影像通过一个卷积块即cbl模块调整信道数，得到预处理特征，其中，cbl模块包含卷积、批归一化以及leakyrelu函数，再经过多个mfem模块构成的串联结构进行编码。在将每个mfem模块的输出特征输入下一个mfem模块之前，对每个mfem模块的输出特征进行软池化，从而实现下采样。其中，软池化是一种池化操作的变体，其目的是对输入数据进行下采样并减少输出数据的维度。与传统的池化操作不同的是，软池化不是直接选取最大值或平均值，而是通过对输入数据进行softmax转换来获取每个元素的权重，并将加权和作为输出。
59.步骤202、将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征。
60.参照图2，特征增强模块即图2中五个cam构成的模块，将编码网络中五个mfem模块输出的特征即多尺度特征分别输入五个cam模块，通过这五个cam模块输出增强后的多尺度特征。
61.步骤203、在所述解码网络中对所述增强后的多尺度特征进行解码，获得第一特
征、第二特征以及第三特征。
62.参照图2，解码网络即图2中四个dbl模块、六个cbl模块以及三个cfsm模块构成的级联网络，其中，dbl模块即反卷积块包含反卷积、批归一化以及leakyrelu函数，cbl模块即卷积块包含卷积、批归一化以及leakyrelu函数，将特征增强模块输出的增强后的多尺度特征输入到解码网络的四个dbl模块中，通过三个cbl模块输出第一特征、第二特征以及第三特征。
63.步骤204、将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果。
64.参照图2，语义分割模块包含多尺度物体引导模块(multi-scale object guide module，mogm)以及语义分割头(segmentation head)，其中，语义分割头为卷积块即cbl模块，包括卷积、批归一化以及leakyrelu函数，将第一特征、第二特征以及第三特征输入语义分割模块，由此获得待处理遥感影像的语义分割结果。
65.在上述实施例中，先通过编码网络对待处理遥感影像进行编码，具体地，利用多尺度特征提取模块进行综合性的特征提取，从而提高了网络对待处理遥感影像多尺度信息的理解能力。然后在特征增强模块中捕获特征中具有代表性和区分度的特征，以此来激活对应信道的特征。接着利用解码网络对特征进行逐层解码，多重级联的方式能够增加信息流的传递，增强解码网络的语义理解能力。最终在这些基础上利用语义分割模块实现语义分割，极大地提升了待处理遥感影像语义分割的精确度。
66.在一种可能的实施方式中，如图4所示，所述多尺度特征提取模块的构建过程包括：
67.步骤301、将所述多尺度特征提取模块的输入特征输至五个卷积分支，分别输出所述卷积分支的输出特征。
68.参照图5，将多尺度特征提取模块的输入特征输至五个卷积分支，这五个卷积分支分别从不同尺度上提取特征。其中，在第一个卷积分支对多尺度特征提取模块的输入特征进行1*1卷积，在第二个卷积分支对多尺度特征提取模块的输入特征依次进行最大池化、1*1卷积，在第三个卷积分支对多尺度特征提取模块的输入特征依次进行1*1卷积以及扩张速率为1的3*3卷积，在第四个卷积分支对多尺度特征提取模块的输入特征依次进行1*1卷积、扩张速率为1的3*3卷积以及扩张速率为2的3*3卷积，在第五个卷积分支对多尺度特征提取模块的输入特征依次进行1*1卷积、扩张速率为1的3*3卷积、扩张速率为2的3*3卷积以及扩张速率为5的3*3卷积，从而获取五个卷积分支的输出特征。其中，扩张速率也称为空洞卷积率，是深度学习中卷积神经网络中卷积操作的一个参数，用于控制卷积核在输入特征图上的采样步长。扩张速率的作用是在不增加卷积核大小和参数数量的情况下，扩大卷积核感受野的范围。
69.步骤302、将所述卷积分支的所述输出特征按照信道维度进行拼接，获得拼接后的特征。
70.参照图5，将五个卷积分支的输出特征进行拼接，从而获得拼接后的特征。
71.步骤303、将所述拼接后的特征进行并行的1*1卷积和3*3卷积，然后相加得到所述多尺度特征提取模块的输出特征。
72.参照图5，将拼接后的特征通过并行的1*1卷积以及扩张速率为1的3*3卷积，然后
逐元素相加获得多尺度特征提取模块的输出特征，其中，图5中的逐元素相加是指矩阵对应位置的元素逐个相加，需要说明的是，多尺度特征提取模块的输出特征和输入特征相比，通道数扩大一倍。
73.在上述实施例中，通过多尺度特征提取模块实现基于多尺度和多感受野的综合性特征提取，从而提高了网络对遥感影像多尺度信息的理解能力。
74.在一种可能的实施方式中，所述将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征包括：
75.将所述多尺度特征分别输入多个所述信道激活模块，输出所述增强后的多尺度特征。
76.参照图2，特征增强模块即图2中五个cam构成的模块，将多尺度特征分别输入五个cam模块，通过这五个cam模块输出增强后的多尺度特征。
77.在一种可能的实施方式中，所述信道激活模块的构建过程包括：
78.将所述信道激活模块的输入特征先进行3*3卷积，然后采用全局最大池化和全局平均池化提取信道特征，最后依次通过1*1卷积、relu函数、层归一化、1*1卷积以及softmax函数处理提取信道权重；
79.将所述信道权重与所述信道激活模块的输入特征相乘，获得所述信道激活模块的输出。
80.参照图6，将信道激活模块的输入特征先进行3*3卷积，然后分别进行全局最大池化(global max pooling，gmp)和全局平均池化(global average pooling，gap)后进行逐元素相加，再进行1*1卷积、relu激活函数、层归一化(layer norm)处理，接着进行1*1卷积以及通过softmax函数处理获得信道权重。将获取的信道权重与信道激活模块的输入特征相乘，从而获得信道激活模块的输出。
81.在上述实施例中，通过全局平均池化和全局最大池化两种池化，充分地捕获特征中具有代表性和区分度的特征，从而实现对多尺度特征进行信道层面的特征增强。
82.在一种可能的实施方式中，还包括：
83.在所述解码网络中，所述卷积块和所述跨层特征选择模块向下一层的所述卷积块传递特征前，采用双线性插值算法增大所传递特征的尺寸。
84.具体地，采用双线性插值算法增大所传递特征的长和宽，从而实现对所传递特征的上采样。
85.在一种可能的实施方式中，所述跨层特征选择模块的构建过程包括：
86.将所述跨层特征选择模块的两个输入特征分别进行3*3卷积，获取卷积处理后的两个特征，然后相加并通过全局平均池化捕获全局特征信息，再利用多层感知机和softmax函数获取所述跨层特征选择模块的两个输入特征的权重；
87.将所述跨层特征选择模块的两个输入特征的权重和所述卷积处理后的两个特征相乘，然后相加并经过3*3卷积得到所述跨层特征选择模块的输出特征。
88.如图2所示，cfsm模块的两个输入特征分别是从cam模块、dbl模块或cbl模块输出的。参照图7，将跨层特征选择模块的两个输入特征分别进行3*3卷积，得到卷积处理后的两个特征，将这两个特征逐元素相加并进行全局平均池化,然后通过多层感知机(multilayer perceptron，mlp)以及softmax函数获取跨层特征选择模块的两个输入特征的权重w1和w2，
分别将w1和w2与对应卷积处理后的特征相乘，然后逐元素相加并进行3*3卷积，从而获得跨层特征选择模块的输出特征。其中，多层感知机是一种基于前向人工神经网络的机器学习模型，它由一个或多个全连接的隐藏层和一个输出层组成，每个隐藏层包含多个神经元，也称为感知机，输出层的神经元数目通常与任务的类别数相等，多层感知机具有改变隐藏层层数的作用。
89.在上述实施例中，跨层特征选择模块通过利用多层感知机提取特征的权重，提高了网络对于重要特征的关注度，增强了网络的表征能力。
90.在一种可能的实施方式中，所述将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果包括：
91.将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征；
92.将所述引导特征和所述第三特征输入所述语义分割头，获得所述待处理遥感影像的所述语义分割结果。
93.参照图2，将第一特征和第二特征输入mogm模块，通过该mogm模块输出引导特征，将引导特征和第三特征均输入语义分割头，其中，语义分割头为cbl模块，即卷积块，通过该语义分割头输出待处理遥感影像的语义分割结果。
94.在一种可能的实施方式中，所述将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征包括：
95.对所述第一特征和所述第二特征分别进行不同尺度的池化，然后通过1*1卷积和softmax函数分别获得所述第一特征和所述第二特征的权重；
96.利用最近邻插值算法增大所述第一特征和所述第二特征的权重，并分别与所述第一特征和所述第二特征相乘，从而获得所述引导特征。
97.参照图8，将第一特征和第二特征分别进行不同尺度的池化，示例性地，可以将第一特征和第二特征的长和宽分别池化到原来的1/32和1/4大小，本实施例对此不做具体限制，可以根据实际情况进行具体设置，然后进行1*1卷积和softmax函数处理，获得第一特征和第二特征的权重。
98.最近邻插值算法是将变换后的图像中原像素点最邻近像素的灰度值赋给原像素点的方法，采用最近邻插值算法增大第一特征和第二特征的权重，并分别与第一特征和第二特征相乘，然后逐元素相加即可获得引导特征。
99.在上述实施例中，利用多尺度物体引导模块在两种尺度上进行特征引导，提高了网络对于遥感影像中不同大小物体的辨别能力，最后通过语义分割头获得待处理遥感影像的语义分割结果，提高了待处理遥感影像语义分割的精确度。
100.虽然本发明披露如上，但本发明的保护范围并非仅限于此。本领域技术人员在不脱离本发明的精神和范围的前提下，可进行各种变更与修改，这些变更与修改均将落入本发明的保护范围。

技术特征：
1.一种基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，包括：获取待处理遥感影像；将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果；所述语义分割网络包括编码网络、特征增强模块、解码网络、语义分割模块；其中，所述编码网络包括卷积块和多个多尺度特征提取模块；所述特征增强模块包括多个信道激活模块；所述解码网络为多个卷积块、多个反卷积块以及多个跨层特征选择模块通过多重级联方式构成；所述语义分割模块包括多尺度物体引导模块和语义分割头。2.根据权利要求1所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述将所述待处理遥感影像输入构建好的语义分割网络，输出所述待处理遥感影像的语义分割结果包括：在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征；将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征；在所述解码网络中对所述增强后的多尺度特征进行解码，分别获得第一特征、第二特征以及第三特征；将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果。3.根据权利要求2所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述在所述编码网络中对所述待处理遥感影像进行编码，得到多尺度特征包括：将所述待处理遥感影像进行卷积、批归一化以及激活函数处理，获得预处理特征；将所述预处理特征输入多个所述多尺度特征提取模块构成的串联结构，输出所述多尺度特征。4.根据权利要求2所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述将所述多尺度特征输入所述特征增强模块，输出增强后的多尺度特征包括：将所述多尺度特征分别输入多个所述信道激活模块，输出所述增强后的多尺度特征。5.根据权利要求2所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，还包括：在所述解码网络中，所述卷积块和所述跨层特征选择模块向下一层的所述卷积块传递特征前，采用双线性插值算法增大所传递特征的尺寸。6.根据权利要求2所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述将所述第一特征、所述第二特征以及所述第三特征输入语义分割模块，输出所述待处理遥感影像的所述语义分割结果包括：将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征；将所述引导特征和所述第三特征输入所述语义分割头，获得所述待处理遥感影像的所述语义分割结果。7.根据权利要求6所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述将所述第一特征和所述第二特征输入所述多尺度物体引导模块，输出引导特征包括：对所述第一特征和所述第二特征分别进行不同尺度的池化，然后通过1*1卷积和softmax函数分别获得所述第一特征和所述第二特征的权重；
利用最近邻插值算法增大所述第一特征和所述第二特征的权重，并分别与所述第一特征和所述第二特征相乘，从而获得所述引导特征。8.根据权利要求1所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述多尺度特征提取模块的构建过程包括：将所述多尺度特征提取模块的输入特征输至五个卷积分支，分别输出所述卷积分支的输出特征；将所述卷积分支的所述输出特征按照信道维度进行拼接，获得拼接后的特征；将所述拼接后的特征进行并行的1*1卷积和3*3卷积，然后相加得到所述多尺度特征提取模块的输出特征。9.根据权利要求1所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述信道激活模块的构建过程包括：将所述信道激活模块的输入特征先进行3*3卷积，然后采用全局最大池化和全局平均池化提取信道特征，最后依次通过1*1卷积、relu函数、层归一化、1*1卷积以及softmax函数处理提取信道权重；将所述信道权重与所述信道激活模块的输入特征相乘，获得所述信道激活模块的输出。10.根据权利要求1所述的基于多尺度和级联的神经网络遥感影像语义分割方法，其特征在于，所述跨层特征选择模块的构建过程包括：将所述跨层特征选择模块的两个输入特征分别进行3*3卷积，获取卷积处理后的两个特征，然后相加并通过全局平均池化捕获全局特征信息，再利用多层感知机和softmax函数获取所述跨层特征选择模块的两个输入特征的权重；将所述跨层特征选择模块的两个输入特征的权重和所述卷积处理后的两个特征相乘，然后相加并经过3*3卷积得到所述跨层特征选择模块的输出特征。

技术总结
本发明涉及图像处理技术领域，提供一种基于多尺度和级联的神经网络遥感影像语义分割方法，包括：获取待处理遥感影像；将待处理遥感影像输入构建好的语义分割网络，输出语义分割结果；语义分割网络包括编码网络、特征增强模块、解码网络、语义分割模块；其中，编码网络包括卷积块和多个多尺度特征提取模块；特征增强模块包括多个信道激活模块；解码网络为多个卷积块、多个反卷积块以及多个跨层特征选择模块通过多重级联方式构成；语义分割模块包括多尺度物体引导模块和语义分割头。本发明的语义分割网络获取特征中具有代表性和区分度的特征，采用级联方式的解码网络对特征逐层解码，增强解码网络的语义理解能力，提高了遥感影像语义分割的精确度。分割的精确度。分割的精确度。


技术研发人员：李显巨 周引 李天屹 陈伟涛 唐厂 冯如意 王力哲 陈刚
受保护的技术使用者：中国地质大学（武汉）
技术研发日：2023.05.12
技术公布日：2023/8/28