一种图像去噪处理系统的制作方法
未命名
09-24
阅读:47
评论:0
1.本发明涉及图像处理领域,特别是涉及一种图像去噪处理系统。
背景技术:
2.图像去噪任务旨在去除噪声图像中的干扰噪声,得到清晰、高质量的图像,被广泛用于异质人脸识别、图像风格迁移等各种计算机视觉应用中。
3.在人脸图像的去噪任务中,由于人脸素描图像可以提供人脸的轮廓信息,现有技术通常基于深度网络提取人脸素描图像中的素描图像特征,根据素描图像特征对含噪声的人脸图像进行去噪,来提高去噪结果的准确性。但是,由于人脸素描图像的表达能力有限,当人脸图像中的干扰噪声较多时,无法提供人脸肤色和发色等颜色信息,导致去噪后的人脸图像中可能包含错误的颜色信息,从而降低了去噪结果的准确性。
4.因此,在人脸图像的去噪场景中,如何提高去噪结果的准确性成为亟待解决的问题。
技术实现要素:
5.针对上述技术问题,本发明采用的技术方案为一种图像去噪处理系统,包括:含噪人脸图像a、a对应的中间素描图像特征集合b={b1,b2,
……
,bn,
……
,bm}和文本特征c、处理器和存储有计算机程序的存储器,其中,bn为第n个中间素描图像特征,n=1,2,
……
,m,m为大于2的整数,m为中间素描图像特征的数量,处理器包括若干个上采样层和若干个下采样层,上采样层的数量和上采样层的数量均为m,当计算机程序被处理器执行时,实现以下步骤:s1,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1。
6.s2,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,其中,i=1,2,
……
,m-1。
7.s3,通过注意力模块对dm和c进行注意力特征提取,得到注意力图像特征e。
8.s4,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1。
9.s5,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,其中,j=1,2,
……
,m-2。
10.s6,通过第m个上采样层对f
m-1
和d1进行上采样,得到预测噪声图像g。
11.s7,使用a中任一像素点的像素点值减去g中对应位置的像素点值,得到去噪人脸图像。
12.本发明至少具有以下有益效果:通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,通过注意力模块对dm和c进行注意力特征提取,得到注意力图像特征e,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,通过第m个上采样层对f
m-1
和d1进行上
采样,得到预测噪声图像g,使用a中任一像素点的像素点值减去g中对应位置的像素点值,得到去噪人脸图像,基于b在图像模态下对a中的人脸轮廓信息进行表征,基于c在文本模态下对a中的人脸肤色、发色等颜色信息进行表征,使用双模态下的特征信息提高了对a的表征能力,并在对a进行特征提取和去噪时将b、c与a进行信息融合,将b和c作为对a进行去噪的特征基础,提高了对a进行去噪结果的准确性。
附图说明
13.为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
14.图1为本发明实施例提供的一种图像去噪处理系统的执行计算机程序的流程图。
具体实施方式
15.下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
16.需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
17.如图1所示,本实施例一提供了一种图像去噪处理系统,包括:含噪人脸图像a、a对应的中间素描图像特征集合b={b1,b2,
……
,bn,
……
,bm}和文本特征c、处理器和存储有计算机程序的存储器,其中,bn为第n个中间素描图像特征,n=1,2,
……
,m,m为大于2的整数,m为中间素描图像特征的数量,处理器包括若干个上采样层和若干个下采样层,上采样层的数量和上采样层的数量均为m,当计算机程序被处理器执行时,实现以下步骤:s1,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1。
18.其中,含噪声人脸图像a是需要进行去噪的彩色图像,中间素描图像特征集合b是通过对a对应的人脸素描图像进行特征提取得到的特征集合,在本实施例中,中间素描图像特征集合b包括m个中间素描图像特征{b1,b2,
……
,bi,
……
,bm},其中,bi为第i个中间素描图像特征,i=1,2,
……
,m-1,人脸素描图像是通过黑色线条对对应的人脸图像中的人脸轮廓进行描绘的图像,可以提供人脸的轮廓信息。
19.文本特征c是通过对a对应的描述文本进行特征提取得到的特征,该描述文本可以由人为判断含噪人脸图像中的人脸肤色和发色等颜色,并使用文本对人脸图像中的人脸肤色、发色等颜色信息进行描述得到,通过对描述文本进行特征提取,可以得到对应的文本特
征。
20.本实施例获取a对应的b和c,基于b在图像模态下对a中的人脸轮廓信息进行表征,基于c在文本模态下对a中的人脸肤色、发色等颜色信息进行表征,使用双模态下的特征信息提高了对a的表征能力,并在对a进行特征提取和去噪时将b、c与a进行信息融合,作为对a进行去噪处理的特征基础,提高了对a进行去噪结果的准确性。
21.本实施例首先对图像模态下的b与a共同进行图像特征的提取,具体地,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,作为图像特征的提取基础。
22.在一个具体的实施方式中,系统还包括m个第二下采样层,a对应的中间素描图像特征集合b通过如下步骤获取:通过第一个第二下采样层对a对应的人脸素描图像进行下采样,得到第一个中间素描图像特征b1;通过第z个第二下采样层对b
z-1
进行下采样,得到bz,其中,z=2,3,
……
,m。
23.其中,系统还包括m个第二下采样层,使用m个第二下采样层对a对应的人脸素描图像进行下采样,来提取人脸素描图像对应的中间素描图像特征集合b。
24.具体地,通过第一个第二下采样层对a对应的人脸素描图像进行下采样,得到第一个中间素描图像特征b1,然后将b1作为第二个第二下采样层的输入,通过第二个第二下采样层对b1进行下采样,得到b2;以此类推,直至通过第n个第二下采样层对b
m-1
进行下采样,得到bm,作为对a进行去噪的特征基础。
25.本实施例对a和第一个中间素描图像特征b1进行下采样,来提取第一个中间图像特征d1,将人脸素描图像中表征的人脸轮廓信息与含噪人脸图像中包含的图像信息相融合,提高了对a中人脸信息的表征能力。
26.s2,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,其中,i=1,2,
……
,m-1。
27.其中,为了提高对a的特征提取准确性,本实施例将上一个下采样层输出的中间图像特征,以及对应的中间素描图像特征作为下一个上采样层的输入,输出下一个上采样层对应的中间图像特征。
28.具体地,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,其中,i=1,2,
……
,m-1,与第一个中间图像特征d1相结合,即可得到m个中间图像特征{d1,d2,
……
,di,
……
,dm},作为对a进行去噪的特征基础。
29.在一个具体的实施方式中,在s2步骤中还包括如下步骤:当i=m-1时,通过第m个下采样层对d
m-1
和b
m-1
进行下采样,得到采样结果;对采样结果和bm进行特征融合,得到dm。
30.其中,当i=m-1时,通过第m个下采样层对d
m-1
和b
m-1
进行下采样,将b
m-1
表征的人脸轮廓信息融合进a的图像特征提取结果中,得到采样结果,然后对采样结果和bm进行特征融合,进一步将bm表征的人脸轮廓信息融合进a的图像特征提取结果中,得到dm,以充分地将提取到的人脸轮廓信息融合进a的图像特征提取结果中,提高了dm对a中人脸信息的表征能力。
31.在一个具体的实施方式中,对采样结果和bm进行特征融合,得到dm,包括:将采样结果和bm进行特征相加,以特征相加结果作为dm。
32.其中,对应层数的下采样层和第二下采样层的模型结构一致,输出的采样结果和bm的特征维度一致,因此,直接将采样结果和bm进行特征相加,以特征相加结果作为dm。
33.本实施例将上一个下采样层输出的中间图像特征,以及对应的中间素描图像特征作为下一个上采样层的输入,对a和b进行特征迭代提取,得到m个中间图像特征{d1,d2,
……
,di,
……
,dm},将人脸素描图像中表征的人脸轮廓信息与含噪人脸图像中包含的图像信息相融合,提高了对a中人脸信息的表征能力。
34.s3,通过注意力模块对dm和c进行注意力特征提取,得到注意力图像特征e。
35.其中,dm为融合了a中的人脸信息和人脸素描图像中的人脸轮廓信息的图像模态下的特征,c为表征a中的人脸肤色、发色等颜色信息的文本模态下的特征,注意力模块用于对两种模态下的dm和c进行交叉注意力计算,得到注意力图像特征e,可以描述dm和c之间的关联关系,从而将人脸轮廓信息、肤色和发色等颜色信息等图像信息相融合,提高了对a进行特征提取的丰富性和准确性。
36.在一个具体的实施方式中,系统还包括文本编码器和a对应的描述文本,a对应的文本特征c通过如下步骤获取:使用文本编码器对描述文本进行特征提取,得到c。
37.其中,描述文本可以由使用文本对人脸图像中的人脸肤色、发色等颜色信息进行描述得到,文本编码器用于对描述文本进行特征提取,得到文本特征c来表征a中的肤色和发色等颜色信息,并存储至数据库中作为对a进行去噪的特征基础,在图像模态之外增加了文本模态的特征来表征a中的人脸特征信息,提高了对a中人脸特征的提取准确性以及对a进行去噪的准确性。
38.本实施例在图像模态下的b和{d1,d2,
……
,di,
……
,dm}特征之外,增加了文本模态的c特征来表征a中的人脸特征信息,提高了对a中人脸特征的提取准确性以及对a进行去噪的准确性。
39.s4,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1。
40.其中,针对含噪人脸图像a,可以通过预测a中的噪声组成的图像来完成对a的去噪,因此,为了提高去噪结果的准确性,本实施例在e的基础上,使用m个上采样层逐步预测得到噪声图像,具体地,首先通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1。
41.s5,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,其中,j=1,2,
……
,m-2。
42.其中,为了提高中间噪声图像特征的准确性,本实施例将上一个上采样层输出的中间噪声图像特征,以及对应的中间图像特征作为下一个上采样层的输入,输出下一个上采样层对应的中间噪声图像特征。
43.具体地,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,其中,j=1,2,
……
,m-2,结合第一个中间噪声图像特征f1,即可得到m-1个中间噪声图像特征{f1,f2,
……
,f
j+1
,
……
,f
m-1
},作为对a进行去噪的基础。
44.本实施例将上一个上采样层输出的中间噪声图像特征,以及对应的融合了人脸素描图像中的人脸轮廓信息以及含噪人脸图像中的图像信息的中间图像特征作为下一个上采样层的输入,得到m-1个中间噪声图像特征{f1,f2,
……
,f
j+1
,
……
,f
m-1
},提高了中间噪声
图像特征的准确性。
45.s6,通过第m个上采样层对f
m-1
和d1进行上采样,得到预测噪声图像g。
46.其中,将第m-1个上采样层输出的f
m-1
,以及融合了人脸素描图像中的人脸轮廓信息以及含噪人脸图像中的图像信息的d1输入至第m个上采样层中进行上采样,得到预测噪声图像g,提高了预测噪声图像的准确性。g即为预测的a中的噪声组成的图像,作为对a进行去噪的噪声基础。
47.在一个具体的实施方式中,m个下采样层和m个上采样层的训练过程包括:获取噪声图像和若干个真实人脸图像,将噪声图像与每个真实人脸图像进行叠加,得到对应真实人脸图像的加噪人脸图像;针对任一加噪人脸图像,使用m个下采样层对加噪人脸图像进行下采样,得到样本中间图像特征集合d0;使用m个上采样层对d0进行上采样,得到预测噪声样本;根据预测噪声样本和噪声图像对m个下采样层和m个上采样层进行训练,得到经训练的m个下采样层和经训练的m个上采样层。
48.其中,噪声图像是由高斯噪声组成的图像,真实人脸图像是不含噪声的人脸图像,本实施例将噪声图像与每个真实人脸图像进行叠加,可以得到在真实人脸图像的基础上添加噪声的加噪人脸图像,并将加噪人脸图像作为m个下采样层和m个上采样层的训练过程中的训练样本,将噪声图像作为对应的训练标签,对m个下采样层和m个上采样层进行训练,以得到经训练的m个下采样层和经训练的m个上采样层来,作为对a进行去噪的模型基础。
49.具体地,针对任一加噪人脸图像,首先使用m个下采样层对加噪人脸图像进行下采样,得到样本中间图像特征集合d0,用来表征加噪人脸图像中的图像特征信息,然后使用m个上采样层对d0进行上采样,得到预测噪声样本,作为预测的加噪人脸图像中叠加的噪声。则可根据预测噪声样本和噪声图像对m个下采样层和m个上采样层进行训练,得到经训练的m个下采样层和经训练的m个上采样层。
50.在一个具体的实施方式中,d0={d
10
,d
20
,
……
,d
m0
,
……
,d
m0
},其中,dm0为第m个下采样层输出的样本中间图像特征,m=2,3,
……
,m;使用m个下采样层对加噪人脸图像进行下采样,得到样本中间图像特征集合d0,包括:通过第一个下采样层对加噪人脸图像进行下采样,得到d
10
;通过第m个下采样层对d
m-10
进行下采样,得到d
m0
。
51.其中,样本中间图像特征集合d0={d
10
,d
20
,
……
,d
m0
,
……
,d
m0
},其中,dm0为第m个下采样层输出的样本中间图像特征,具体地,首先通过第一个下采样层对加噪人脸图像进行下采样,得到d
10
,然后通过第二个下采样层对d
10
进行下采样,得到d
20
,以此类推,直至通过第m个下采样层对d
m-10
进行下采样,得到d
m0
,即可得到样本中间图像特征集合d0作为噪声的预测基础。
52.在一个具体的实施方式中,f0={f
10
,f
20
,
……
,f
m0
,
……
,f
m0
},f0为m个上采样层的输出结果的集合,其中,fm0为第m个上采样层输出的样本中间噪声图像特征,m=2,3,
……
,m;使用m个上采样层对d0进行上采样,得到预测噪声样本,包括:
通过第一个上采样层对d
m0
进行上采样,得到f
10
;通过第m个上采样层对f
m-10
进行上采样,得到f
m0
;将f
m0
确定为预测噪声样本。
53.其中,d
m0
为第m个下采样层输出的样本中间图像特征,是对加噪人脸图像的特征表征能力最强的图像特征,因此,首先通过第一个上采样层对d
m0
进行上采样,得到f
10
,然后通过第二个上采样层对f
10
进行上采样,得到f
20
,以此类推,直至通过第m个上采样层对f
m-10
进行上采样,得到f
m0
作为预测噪声样本,完成对加噪人脸图像中叠加的噪声的预测。
54.在一个具体的实施方式中,根据预测噪声样本和噪声图像对m个下采样层和m个上采样层进行训练,得到经训练的m个下采样层和经训练的m个上采样层,包括:根据预测噪声样本和噪声图像计算损失函数;根据损失函数更新m个下采样层和m个上采样层的参数,直至损失函数收敛,得到经训练的m个下采样层和经训练的m个上采样层。
55.其中,m个下采样层和m个上采样层的准确性越高,预测噪声样本和噪声图像之间的相似性越高,因此,本实施例通过计算预测噪声样本和噪声图像之间的交叉熵损失作为损失函数,来更新m个下采样层和m个上采样层的参数,直至损失函数收敛,得到经训练的m个下采样层和经训练的m个上采样层,作为对对a进行去噪的模型基础。来提高去噪结果的准确性。
56.s7,使用a中任一像素点的像素点值减去g中对应位置的像素点值,得到去噪人脸图像。
57.其中,g是由预测到的a中的噪声组成的图像,因此,使用a中任一像素点的像素点值减去g中对应位置的像素点值,可以得到去噪人脸图像,减少了a中的干扰噪声,提高了人脸图像的质量。
58.在一个具体的实施方式中,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,包括:将a作为目标图像,通过第一个下采样层对目标图像和b1进行下采样,得到第一个中间图像特征d1;在s7步骤之后,还包括:将去噪人脸图像作为目标图像,返回执行通过第一个下采样层对目标图像和b1进行下采样,得到第一个中间图像特征d1的步骤,直至满足预设条件,得到目标去噪图像,将目标去噪图像作为去噪人脸图像。
59.其中,上述步骤将a片作为去噪对象,执行步骤s1-s7完成了对a的一次去噪,为了提高去噪效果,本实施例将去噪人脸图像作为去噪对象,重复执行步骤s1-s7,得到目标去噪图像作为最终的去噪人脸图像。
60.具体地,将a作为目标图像,通过第一个下采样层对目标图像和b1进行下采样,得到第一个中间图像特征d1,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,通过注意力模块对dm和c进行注意力特征提取,得到注意力图像特征e,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,通过第m个上采样层对f
m-1
和d1进行上采样,得到预测噪声图像g,使用a中任一像素点的像素点值减去g中对应位置的像素点
值,得到去噪人脸图像。
61.然后将去噪人脸图像作为目标图像,返回执行根据目标图像,得到素描图像特征的步骤,直至满足预设条件,得到目标去噪图像,并将目标去噪图像作为去噪人脸图像。
62.优选的,预设条件可以是去噪操作的执行次数满足预设次数,相应地,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,包括:将执行次数初始化为0,将a作为目标图像,通过第一个下采样层对目标图像和b1进行下采样,得到第一个中间图像特征d1;在s7步骤之后,还包括:将执行次数加1,将去噪人脸图像作为目标图像,返回执行通过第一个下采样层对目标图像和b1进行下采样,得到第一个中间图像特征d1的步骤,直至执行次数等于预设次数,得到目标去噪图像,将目标去噪图像作为去噪人脸图像。
63.其中,预设次数可以根据实际情况进行设定,例如,预设次数可以是5、10或者15等整数。
64.具体地,在执行步骤s1-s7之前,先将执行次数初始化为0,在执行一次步骤s1-s7,得到去噪人脸图像之后,将执行次数加1,从而在执行预设次数的步骤s1-s7之后,得到最终的目标去噪图像,并将目标去噪图像作为去噪人脸图像,以提高去噪结果的准确性。
65.本实施例通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,通过第i+1个下采样层对di和bi进行下采样,得到第i+1个中间图像特征d
i+1
,通过注意力模块对dm和c进行注意力特征提取,得到注意力图像特征e,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1,通过第j+1个上采样层对fj和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,通过第m个上采样层对f
m-1
和d1进行上采样,得到预测噪声图像g,使用a中任一像素点的像素点值减去g中对应位置的像素点值,得到去噪人脸图像,基于b在图像模态下对a中的人脸轮廓信息进行表征,基于c在文本模态下对a中的人脸肤色、发色等颜色信息进行表征,使用双模态下的特征信息提高了对a的表征能力,并在对a进行特征提取和去噪时将b、c与a进行信息融合,将b和c作为对a进行去噪的特征基础,提高了对a进行去噪结果的准确性。
66.虽然已经通过示例对本发明的一些特定实施例进行了详细说明,但是本领域的技术人员应该理解,以上示例仅是为了进行说明,而不是为了限制本发明的范围。本领域的技术人员还应理解,可以对实施例进行多种修改而不脱离本发明的范围和精神。本发明开的范围由所附权利要求来限定。
技术特征:
1.一种图像去噪处理系统,其特征在于,所述系统包括:含噪人脸图像a、a对应的中间素描图像特征集合b={b1,b2,
……
,b
n
,
……
,b
m
}和文本特征c、处理器和存储有计算机程序的存储器,其中,b
n
为第n个中间素描图像特征,n=1,2,
……
,m,m为大于2的整数,m为中间素描图像特征的数量,处理器包括若干个上采样层和若干个下采样层,上采样层的数量和上采样层的数量均为m,当所述计算机程序被处理器执行时,实现以下步骤:s1,通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1;s2,通过第i+1个下采样层对d
i
和b
i
进行下采样,得到第i+1个中间图像特征d
i+1
,其中,i=1,2,
……ꢀ
,m-1;s3,通过注意力模块对d
m
和c进行注意力特征提取,得到注意力图像特征e;s4,通过第一个上采样层对e进行上采样,得到第一个中间噪声图像特征f1;s5,通过第j+1个上采样层对f
j
和d
m-j
进行上采样,得到第j+1个中间噪声图像特征f
j+1
,其中,j=1,2,
……ꢀ
,m-2;s6,通过第m个上采样层对f
m-1
和d1进行上采样,得到预测噪声图像g;s7,使用a中任一像素点的像素点值减去g中对应位置的像素点值,得到去噪人脸图像。2.根据权利要求1所述的系统,其特征在于,所述系统还包括m个第二下采样层,a对应的中间素描图像特征集合b通过如下步骤获取:通过第一个第二下采样层对a对应的人脸素描图像进行下采样,得到第一个中间素描图像特征b1;通过第z个第二下采样层对b
z-1
进行下采样,得到b
z
,其中,z=2,3,
……
,m。3.根据权利要求1所述的系统,其特征在于,所述系统还包括文本编码器和a对应的描述文本,a对应的文本特征c通过如下步骤获取:使用所述文本编码器对所述描述文本进行特征提取,得到c。4.根据权利要求1所述的系统,其特征在于,在s2步骤中还包括如下步骤:当i=m-1时,通过第m个下采样层对d
m-1
和b
m-1
进行下采样,得到采样结果;对所述采样结果和b
m
进行特征融合,得到d
m
。5.根据权利要求4所述的系统,其特征在于,所述对所述采样结果和b
m
进行特征融合,得到d
m
,包括:将所述采样结果和b
m
进行特征相加,以特征相加结果作为d
m
。6.根据权利要求1所述的系统,其特征在于,m个下采样层和m个上采样层的训练过程包括:获取噪声图像和若干个真实人脸图像,将所述噪声图像与每个真实人脸图像进行叠加,得到对应真实人脸图像的加噪人脸图像;针对任一加噪人脸图像,使用所述m个下采样层对所述加噪人脸图像进行下采样,得到样本中间图像特征集合d0;使用所述m个上采样层对d0进行上采样,得到预测噪声样本;根据所述预测噪声样本和所述噪声图像对所述m个下采样层和所述m个上采样层进行训练,得到经训练的m个下采样层和经训练的m个上采样层。7.根据权利要求6所述的系统,其特征在于,d0={d
10
,d
20
,
……
,d
m0
,
……
,d
m0
},其中,dm0为第m个下采样层输出的样本中间图像特征,m=2,3,
……
,m;
所述使用所述m个下采样层对所述加噪人脸图像进行下采样,得到样本中间图像特征集合d0,包括:通过第一个下采样层对所述加噪人脸图像进行下采样,得到d
10
;通过第m个下采样层对d
m-10
进行下采样,得到d
m0
。8.根据权利要求6所述的系统,其特征在于,f0={f
10
,f
20
,
……
,f
m0
,
……
,f
m0
},f0为m个上采样层的输出结果的集合,其中,fm0为第m个上采样层输出的样本中间噪声图像特征,m=2,3,
……
,m;所述使用所述m个上采样层对d0进行上采样,得到预测噪声样本,包括:通过第一个上采样层对d
m0
进行上采样,得到f
10
;通过第m个上采样层对f
m-10
进行上采样,得到f
m0
;将f
m0
确定为预测噪声样本。9.根据权利要求6所述的系统,其特征在于,根据所述预测噪声样本和所述噪声图像对所述m个下采样层和所述m个上采样层进行训练,得到经训练的m个下采样层和经训练的m个上采样层,包括:根据所述预测噪声样本和所述噪声图像计算损失函数;根据所述损失函数更新所述m个下采样层和所述m个上采样层的参数,直至所述损失函数收敛,得到经训练的m个下采样层和经训练的m个上采样层。10.根据权利要求1所述的系统,其特征在于,所述通过第一个下采样层对a和b1进行下采样,得到第一个中间图像特征d1,包括:将a作为目标图像,通过第一个下采样层对所述目标图像和b1进行下采样,得到第一个中间图像特征d1;在s7步骤之后,还包括:将所述去噪人脸图像作为所述目标图像,返回执行通过第一个下采样层对所述目标图像和b1进行下采样,得到第一个中间图像特征d1的步骤,直至满足预设条件,得到目标去噪图像,将所述目标去噪图像作为所述去噪人脸图像。
技术总结
本发明涉及图像处理领域,尤其涉及一种图像去噪处理系统,包括:含噪人脸图像A、中间素描图像特征集合B=(B1,B2,
技术研发人员:王磊 徐楠 郝艳妮 陈博 李军锋 曹家 罗引
受保护的技术使用者:北京中科闻歌科技股份有限公司
技术研发日:2023.08.02
技术公布日:2023/9/22
版权声明
本文仅代表作者观点,不代表航家之家立场。
本文系作者授权航家号发表,未经原创作者书面授权,任何单位或个人不得引用、复制、转载、摘编、链接或以其他任何方式复制发表。任何单位或个人在获得书面授权使用航空之家内容时,须注明作者及来源 “航空之家”。如非法使用航空之家的部分或全部内容的,航空之家将依法追究其法律责任。(航空之家官方QQ:2926969996)
航空之家 https://www.aerohome.com.cn/
航空商城 https://mall.aerohome.com.cn/
航空资讯 https://news.aerohome.com.cn/