图像质量的标注方法、装置、电子设备及存储介质与流程

1.本公开涉及计算机技术领域，特别涉及一种图像质量的标注方法、装置、电子设备及存储介质。


背景技术：

2.随着计算机技术的发展，互联网中图像的规模也越来越大。在图像的获取、压缩、传输和显示的过程中，图像可能会产生失真，导致图像的质量降低。因此，如何准确的标注图像的质量是一个需要解决的问题。
3.相关技术中，通常由专业人员作为目标对象来对图像进行评分，然后图像的评分来标注图像的质量。例如，采用绝对等级评分(acr，absolute category rating)的方法，向目标对象逐个展示待评分的图像，由目标对象对看到的图像进行5级质量评分，将图像的平均得分标注为表示图像的质量参数。其中，1分表示图像的质量非常差，2分表示图像的质量差，3分表示图像的质量一般，4分表示图像的质量好，5分表示图像的质量非常好。
4.但是，采用上述方法，需要目标对象对大规模的图像进行评分，人工成本较高，导致为图像添加质量标注的效率低下。


技术实现要素：

5.本公开提供一种图像质量的标注方法、装置、电子设备及存储介质，能够提高为图像添加质量标注的效率。本公开的技术方案如下：
6.根据本公开实施例的一方面，提供一种图像质量的标注方法，包括：
7.获取目标图像集，所述目标图像集包括多个图像；
8.更新所述多个图像中每个图像的质量参数，所述质量参数用于表示目标对象对所述图像的质量的主观评价；
9.响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，所述质量标注用于表示所述图像的质量；
10.其中，每次更新时，所述多个图像基于实时的质量参数分别构成多个图像对，由所述目标对象对所述多个图像对分别进行主观评价，所述图像对中的两个图像的质量参数之间的差值小于差值阈值，所述多个图像对中的图像互不相同。
11.在一些实施例中，所述更新所述多个图像中每个图像的质量参数，包括对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，i为大于等于1的正整数；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，所述评价结果用于指示所述两个图像中质量较高的图像。
12.在一些实施例中，所述对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，包括对于任一图像对，基于质量分布系数和所述图像对中两个图像的质量参数之间的差值，分别确定所述两个图像的质量优胜概
率，所述质量分布系数用于控制所述质量优胜概率的分布形状，所述质量优胜概率用于表示所述图像对中一个图像的质量高于另一个图像的质量的概率；基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数。
13.在一些实施例中，所述基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数，包括对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数；基于所述质量变化参数，更新所述图像的质量参数。
14.在一些实施例中，所述对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数，包括基于所述多个评价结果中每个评价结果的评价权重，确定平均评价结果，所述平均评价结果用于指示所述两个图像中质量较高的图像，所述评价权重用于表示所述评价结果的置信程度；对于任一图像，确定所述平均评价结果和所述图像的质量优胜概率的概率差值；将所述概率差值与所述更新步长的乘积，确定为所述图像的质量变化参数。
15.在一些实施例中，所述基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数，包括对于任一评价结果，基于所述评价结果和所述图像的质量优胜概率，得到所述评价结果对应的质量变化参数；对所述多个评价结果对应的质量变化参数进行求和，得到所述图像的质量变化参数。
16.在一些实施例中，所述对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，包括对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，对所述各个图像进行排序，得到所述各个图像的质量参数次序；将质量参数次序相邻且质量参数的差值小于所述差值阈值的两个图像构成图像对，得到多个图像对，所述多个图像对中的图像互不相同。
17.在一些实施例中，所述对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，包括对于第i+1次更新，对于任一图像，基于第i次更新后所述目标图像集中各个图像的质量参数，在所述目标图像集中未构成图像对的多个图像中，确定与所述图像的质量参数的差值小于所述差值阈值的至少一个备选图像；将所述至少一个备选图像中与所述图像的质量参数的差值最小的备选图像和所述图像构成图像对。
18.在一些实施例中，所述响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，包括响应于更新结束，对于任一图像，基于所述图像当前的质量参数和每次更新后所述图像的质量参数，确定所述图像的平均质量参数；基于所述平均质量参数，为所述图像添加质量标注。
19.在一些实施例中，所述方法还包括将所述目标图像集中各个图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定多个图像对；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的初始质量参数；响应于所述各个图像的初始质量参数更新完成，确定第一次更新后所述目标图像集中各个图像的质量参数。
20.在一些实施例中，所述方法还包括对于任一新增图像，基于第j次更新后所述新增图像的质量参数，从所述目标图像集中确定已添加质量标注的第一图像，所述第一图像用
于与所述新增图像构成第一图像对，所述第一图像的质量参数和所述新增图像的质量参数之间的差值小于所述差值阈值，j为大于等于1的正整数；基于所述目标对象对所述第一图像对的多个评价结果，更新所述新增图像的质量参数；响应于更新结束，基于所述新增图像的质量参数，为所述新增图像添加质量标注。
21.在一些实施例中，所述基于第j次更新后所述新增图像的质量参数，从所述目标图像集中确定已添加标注质量标注的第一图像之前，所述方法还包括将所述新增图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定第二图像，所述第二图像用于与所述新增图像构成第二图像对；基于所述目标对象对所述第二图像对的多个评价结果，更新所述新增图像的初始质量参数，得到第一次更新后所述新增图像的质量参数。
22.根据本公开实施例的另一方面，提供一种图像质量的标注装置，包括：
23.获取单元，被配置为获取目标图像集，所述目标图像集包括多个图像；
24.更新单元，被配置为更新所述多个图像中每个图像的质量参数，所述质量参数用于表示目标对象对所述图像的质量的主观评价；
25.标注单元，被配置为响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，所述质量标注用于表示所述图像的质量；
26.其中，每次更新时，所述多个图像基于实时的质量参数分别构成多个图像对，由所述目标对象对所述多个图像对分别进行主观评价，所述图像对中的两个图像的质量参数之间的差值小于差值阈值，所述多个图像对中的图像互不相同。
27.在一些实施例中，所述更新单元，包括：
28.确定子单元，被配置为对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，i为大于等于1的正整数；
29.更新子单元，被配置为对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，所述评价结果用于指示所述两个图像中质量较高的图像。
30.在一些实施例中，所述更新子单元，被配置为对于任一图像对，基于质量分布系数和所述图像对中两个图像的质量参数之间的差值，分别确定所述两个图像的质量优胜概率，所述质量分布系数用于控制所述质量优胜概率的分布形状，所述质量优胜概率用于表示所述图像对中一个图像的质量高于另一个图像的质量的概率；基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数。
31.在一些实施例中，所述更新子单元，包括：
32.确定子子单元，被配置为对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数；
33.更新子子单元，被配置为基于所述质量变化参数，更新所述图像的质量参数。
34.在一些实施例中，所述确定子子单元，被配置为基于所述多个评价结果中每个评价结果的评价权重，确定平均评价结果，所述平均评价结果用于指示所述两个图像中质量较高的图像，所述评价权重用于表示所述评价结果的置信程度；对于任一图像，确定所述平均评价结果和所述图像的质量优胜概率的概率差值；将所述概率差值与所述更新步长的乘积，确定为所述图像的质量变化参数。
35.在一些实施例中，所述确定子子单元，被配置为对于任一评价结果，基于所述评价
结果和所述图像的质量优胜概率，得到所述评价结果对应的质量变化参数；对所述多个评价结果对应的质量变化参数进行求和，得到所述图像的质量变化参数。
36.在一些实施例中，所述确定子单元，被配置为对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，对所述各个图像进行排序，得到所述各个图像的质量参数次序；将质量参数次序相邻且质量参数的差值小于所述差值阈值的两个图像构成图像对，得到多个图像对，所述多个图像对中的图像互不相同。
37.在一些实施例中，所述确定子单元，被配置为对于第i+1次更新，对于任一图像，基于第i次更新后所述目标图像集中各个图像的质量参数，在所述目标图像集中未构成图像对的多个图像中，确定与所述图像的质量参数的差值小于所述差值阈值的至少一个备选图像；将所述至少一个备选图像中与所述图像的质量参数的差值最小的备选图像和所述图像构成图像对。
38.在一些实施例中，所述标注单元，被配置为响应于更新结束，对于任一图像，基于所述图像当前的质量参数和每次更新后所述图像的质量参数，确定所述图像的平均质量参数；基于所述平均质量参数，为所述图像添加质量标注。
39.在一些实施例中，所述更新单元，被配置为将所述目标图像集中各个图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定多个图像对；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的初始质量参数；响应于所述各个图像的初始质量参数更新完成，确定第一次更新后所述目标图像集中各个图像的质量参数。
40.在一些实施例中，所述更新单元，被配置为对于任一新增图像，基于第j次更新后所述新增图像的质量参数，从所述目标图像集中确定已添加质量标注的第一图像，所述第一图像用于与所述新增图像构成第一图像对，所述第一图像的质量参数和所述新增图像的质量参数之间的差值小于所述差值阈值，j为大于等于1的正整数；基于所述目标对象对所述第一图像对的多个评价结果，更新所述新增图像的质量参数；响应于更新结束，基于所述新增图像的质量参数，为所述新增图像添加质量标注。
41.在一些实施例中，所述更新单元，被配置为将所述新增图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定第二图像，所述第二图像用于与所述新增图像构成第二图像对；基于所述目标对象对所述第二图像对的多个评价结果，更新所述新增图像的初始质量参数，得到第一次更新后所述新增图像的质量参数。
42.根据本公开实施例的另一方面，提供一种电子设备，该电子设备包括：
43.一个或多个处理器；
44.用于存储该处理器可执行程序代码的存储器；
45.其中，该处理器被配置为执行该程序代码，以实现上述图像质量的标注方法。
46.根据本公开实施例的另一方面，提供一种计算机可读存储介质，当该计算机可读存储介质中的程序代码由电子设备的处理器执行时，使得电子设备能够执行上述图像质量的标注方法。
47.根据本公开实施例的另一方面，提供了一种计算机程序产品，包括计算机程序/指令，该计算机程序/指令被处理器执行时实现上述图像质量的标注方法。
48.本公开实施例提供了一种图像质量的标注方案，通过在每次更新时，根据各个图
像实时的质量参数，从目标图像集中将质量参数相近的两个图像确定为一个图像对，得到多个图像对，相较于将每个图像均与其他图像配对的方案，极大的减少了图像对的数量。进一步的减少了目标对象对多个图像对进行主观评价时的工作量，能够降低人工成本，提高了评价结果的准确性，进而提高了为图像添加质量标注的效率。
49.应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
50.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理，并不构成对本公开的不当限定。
51.图1是根据一示例性实施例示出的一种实施环境示意图。
52.图2是根据一示例性实施例示出的一种图像质量的标注方法的流程图。
53.图3是根据一示例性实施例示出的另一种图像质量的标注方法的流程图。
54.图4是根据一示例性实施例示出的一种图像质量标注的流程图。
55.图5是根据一示例性实施例示出的一种图像对的示意图。
56.图6是根据一示例性实施例示出的一种图像质量的标注装置框图。
57.图7是根据一示例性实施例示出的另一种图像质量的标注装置框图。
58.图8是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
59.为了使本领域普通人员更好地理解本公开的技术方案，下面将结合附图，对本公开实施例中的技术方案进行清楚、完整地描述。
60.需要说明的是，本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
61.需要说明的是，本公开所涉及的信息(包括但不限于用户设备信息、用户个人信息等)、数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)以及信号，均为经用户授权或者经过各方充分授权的，且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。例如，本公开中涉及到的目标图像集和待标注图像是在充分授权的情况下获取的。
62.图1是根据一示例性实施例示出的一种实施环境示意图。参见图1，该实施环境具体包括：终端101和服务器102。
63.终端101可以为智能手机、智能手表、台式电脑、手提电脑、mp3播放器(moving picture experts group audio layer iii，动态影像专家压缩标准音频层面3)、mp4(moving picture experts group audio layer iv，动态影像专家压缩标准音频层面4)播放器和膝上型便携计算机等设备中的至少一种。在本公开实施例中，终端101上可以安装并
运行有应用程序，该应用程序用于展示多个图像对和获取目标对象对图像对的评价结果。目标对象可以通过终端101登录该应用程序来对多个图像对进行评价。终端101可以通过无线网络或有线网络与服务器102相连。服务器102为该应用程序提供后台服务。
64.终端101可以泛指多个终端中的一个，本实施例以终端101来举例说明。本领域技术人员可以知晓，上述终端的数量可以更多或更少。比如上述终端可以为几个，或者上述终端为几十个或几百个，或者更多数量，本公开实施例对终端的数量和设备类型均不加以限定。
65.服务器102为一台服务器、多台服务器、云计算平台和虚拟化中心中的至少一种。可选地，上述服务器的数量可以更多或更少，本公开实施例对此不加以限定。当然，服务器102还可以包括其他功能服务器，以便提供更全面且多样化的服务。在一些实施例中，服务器102承担主要计算工作，终端101承担次要计算工作；或者，服务器102承担次要计算工作，终端101承担主要计算工作；或者，服务器102和终端101二者之间采用分布式计算架构进行协同计算。服务器102可以通过无线网络或有线网络与终端101和其他终端相连，可选地，上述服务器的数量可以更多或更少，本公开实施例对此不加以限定。
66.图2是根据一示例性实施例示出的一种图像质量的标注方法的流程图，如图2所示，该方法由电子设备执行，包括以下步骤：
67.在步骤s201中，电子设备获取目标图像集，该目标图像集包括多个图像。
68.在本公开实施例中，目标图像集包括的多个图像为待添加质量标注的图像。其中，待添加质量标注的图像可以是内容互不相同的图像，也可以是源图像和对源图像进行图像增强或者图像压缩处理后得到的图像。其中，目标图像集中各个图像的质量并不一致，并且图像的质量受分辨率、色彩深度和失真度等多种指标的影响。因此，为了更准确的量化图像的质量，可以通过初始质量参数来表示待添加质量标注的图像的质量。需要说明的是，该初始质量参数用于作为基准参数以供参考，并不能准确表示图像的实际质量。后续还需要在该初始质量参数的基础上，根据目标对象对该图像的评价结果不断更新图像的质量参数，直至得到能够准确表示该图像的实际质量的质量参数。
69.在步骤s202中，电子设备更新多个图像中每个图像的质量参数，质量参数用于表示目标对象对图像的质量的主观评价，其中，每次更新时，多个图像基于实时的质量参数分别构成多个图像对，由目标对象对多个图像对分别进行主观评价，图像对中的两个图像的质量参数之间的差值小于差值阈值，多个图像对中的图像互不相同。
70.在本公开实施例中，电子设备通过多次更新的方式更新各个图像的质量参数。在多次更新的过程中，电子设备根据目标对象对每个图像的主观评价，分别更新每个图像的质量参数。示意性的，若某个图像的质量较高，该图像给目标对象的视觉感受较好，则目标对象对该图像的质量的主观评价也较高。相应地，电子设备在更新的过程中，增加该图像的初始质量参数。相反的，若某个图像的质量较低，该图像给目标对象的视觉感受较差，则目标对象对该图像的质量的主观评价也较低。相应地，电子设备在更新的过程中，减少该图像的初始质量参数。
71.在一些实施例中，在每次更新时，电子设备基于多个图像实时的质量参数，从目标图像集中选取质量参数之间的差值小于差值阈值的两个图像构成一个图像对。其中，差值阈值可以为一个预设的数值，如30、60或者100，本公开实施例对此不作限制。电子设备向目
标对象逐对展示上述多个图像对，由目标对象对多个图像对分别进行主观评价。目标对象在观看展示的任一图像对中，目标对象根据自己的主观感受，选择该图像对中质量较高的一个图像。因此可以认为，被选择的图像的质量高于未被选择的图像的质量。相应地，电子设备在进行本次更新时，增加被选择的图像的质量参数，减少未被选择的图像的质量参数。
72.需要说明的是，上述更新过程可以为迭代过程。相应地，一次更新即为一轮迭代。电子设备在每轮迭代中更新一次图像的质量参数。
73.在步骤s203中，响应于更新结束，对于任一图像，电子设备基于该图像的质量参数，为该图像添加质量标注，质量标注用于表示图像的质量。
74.在本公开实施例中，在目标图像集中各个图像的质量参数相对稳定时，表明当前的质量参数能够准确地表示图像的质量，满足更新结束条件，更新结束。其中，相对稳定可以是各个图像的质量参数保持不变，也可以是各个图像的质量参数次序保持不变，本公开实施例对此不作限制。响应于更新结束，对于任一图像，电子设备对该图像的质量参数进行后处理操作，得到能够准确地表示该图像的实际质量的质量标注。其中，后处理操作包括但不限于对该图像的质量参数进行归一化和对该图像的质量参数进行加权平均等。
75.本公开实施例提供了一种图像质量的标注方法，通过在每次更新时，根据各个图像实时的质量参数，从目标图像集中将质量参数相近的两个图像确定为一个图像对，得到多个图像对，相较于将每个图像均与其他图像配对的方案，极大的减少了图像对的数量。进一步的减少了目标对象对多个图像对进行主观评价时的工作量，能够降低人工成本，提高了评价结果的准确性，进而提高了为图像添加质量标注的效率。
76.在一些实施例中，更新多个图像中每个图像的质量参数，包括对于第i+1次更新，基于第i次更新后目标图像集中各个图像的质量参数，从目标图像集中确定多个图像对，i为大于等于1的正整数；对于任一图像对，基于目标对象对图像对的多个评价结果，更新图像对中两个图像的质量参数，评价结果用于指示两个图像中质量较高的图像。
77.在本公开实施例中，通过多次更新的方式，能够在中间任一次更新的过程中，基于上一次更新后的质量参数，将质量参数相近的两个图像构成图像对，再通过目标对象对任一图像对的评价结果，更新该图像对中两个图像的质量参数。因此，采用多次更新的方式更新图像的质量参数，能够在多次更新的过程中，使得图像的质量参数却来越准确。
78.在一些实施例中，对于任一图像对，基于目标对象对图像对的多个评价结果，更新图像对中两个图像的质量参数，包括对于任一图像对，基于质量分布系数和图像对中两个图像的质量参数之间的差值，分别确定两个图像的质量优胜概率，质量分布系数用于控制质量优胜概率的分布形状，质量优胜概率用于表示图像对中一个图像的质量高于另一个图像的质量的概率；基于多个评价结果和两个图像的质量优胜概率，分别更新两个图像的质量参数。
79.在本公开实施例中，通过评价结果和质量优胜概率更新图像的质量参数，能够兼顾目标对象的主观评价结果和图像的理论优胜概率，从而较为准确的更新图像的质量参数。
80.在一些实施例中，基于多个评价结果和两个图像的质量优胜概率，分别更新两个图像的质量参数，包括对于任一图像，基于多个评价结果、图像的质量优胜概率以及更新步长，确定图像的质量变化参数；基于质量变化参数，更新图像的质量参数。
81.在本公开实施例中，通过设置更新步长，在更新图像的质量参数时，能够控制更新的幅度，提升图像的质量参数的精度。
82.在一些实施例中，对于任一图像，基于多个评价结果、图像的质量优胜概率以及更新步长，确定图像的质量变化参数，包括基于多个评价结果中每个评价结果的评价权重，确定平均评价结果，平均评价结果用于指示两个图像中质量较高的图像，评价权重用于表示评价结果的置信程度；对于任一图像，确定平均评价结果和图像的质量优胜概率的概率差值；将概率差值与更新步长的乘积，确定为图像的质量变化参数。
83.在本公开实施例中，通过为评价结果设置评价权重，能够使得置信度较高的评价结果对平均评价结果的影响大于置信度较低的评价结果，从而提升评价结果的置信度，通过置信度较高的评价结果，能够更加准确地确定图像的质量变化参数。
84.在一些实施例中，基于多个评价结果、图像的质量优胜概率以及更新步长，确定图像的质量变化参数，包括对于任一评价结果，基于评价结果和图像的质量优胜概率，得到评价结果对应的质量变化参数；对多个评价结果对应的质量变化参数进行求和，得到图像的质量变化参数。
85.在本公开实施例中，通过确定每个评价结果对应的质量变化参数，能够直观地表示不同的评价结果对质量参数的变化的影响。
86.在一些实施例中，对于第i+1次更新，基于第i次更新后目标图像集中各个图像的质量参数，从目标图像集中确定多个图像对，包括基于第i次更新后目标图像集中各个图像的质量参数，对各个图像进行排序，得到各个图像的质量参数次序；将质量参数次序相邻且质量参数的差值小于差值阈值的两个图像构成图像对，得到多个图像对，多个图像对中的图像互不相同。
87.在本公开实施例中，质量参数次序相邻的两个图像的质量参数之间的差值较小，通过先确定质量参数次序相邻的图像，再从质量参数相邻的图像中，将质量参数的差值小于差值阈值的两个图像构成一个图像对，在保证图像对中的两个图像的质量参数相近的情况下，还能够提升确定图像对的效率。
88.在一些实施例中，对于第i+1次更新，基于第i次更新后目标图像集中各个图像的质量参数，从目标图像集中确定多个图像对，包括对于任一图像，基于第i次更新后目标图像集中各个图像的质量参数，在目标图像集中未构成图像对的多个图像中，确定与图像的质量参数的差值小于差值阈值的至少一个备选图像；将至少一个备选图像中与图像的质量参数的差值最小的备选图像和图像构成图像对。
89.在本公开实施例中，对于任一图像，通过确定与该图像的质量参数的差值小于差值阈值的多个备选图像，且将差值最小的备选图像为该图像构成图像对，能够保证构成的图像对中两个图像的质量参数的差值最相近。
90.在一些实施例中，响应于更新结束，对于任一图像，基于图像的质量参数，为图像添加质量标注，包括响应于更新结束，对于任一图像，基于图像当前的质量参数和每次更新后图像的质量参数，确定图像的平均质量参数；基于平均质量参数，为图像添加质量标注。
91.在本公开实施例中，通过确定图像的平均质量参数，能够减少在多次更新的过程中目标对象进行多次主观评价产生的影响，从而减少随机误差，提高图像的质量标注的准确性。
92.在一些实施例中，方法还包括将目标图像集中各个图像的质量参数初始化为初始质量参数；从目标图像集中随机确定多个图像对；对于任一图像对，基于目标对象对图像对的多个评价结果，更新图像对中两个图像的初始质量参数；响应于各个图像的初始质量参数更新完成，确定第一次更新后目标图像集中各个图像的质量参数。
93.在本公开实施例中，通过将各个图像的质量参数初始化为初始质量参数，并且将该初始质量参数作为基准参数，在第一次更新的过程中，以该初始参数为基准更新各个图像的质量参数，能够将目标对象对该图像的评价结果量化为质量参数的更新情况，从而初步得到能够表示各个图像的实际质量的质量参数。
94.在一些实施例中，方法还包括对于任一新增图像，基于第j次更新后新增图像的质量参数，从目标图像集中确定已添加质量标注的第一图像，第一图像用于与新增图像构成第一图像对，第一图像的质量参数和新增图像的质量参数之间的差值小于差值阈值，j为大于等于1的正整数；基于目标对象对第一图像对的多个评价结果，更新新增图像的质量参数；响应于更新结束，基于新增图像的质量参数，为新增图像添加质量标注。
95.在本公开实施例中，通过将新增图像与目标图像集中已添加质量标注的图像构建图像对，并根据目标对象对图像对的评价结果更新新增图像的质量参数，能够持续动态对新的图像进行质量标注，且理论标注成本较低，便于构建大规模的已添加质量标注的图像数据集。
96.在一些实施例中，基于第j次更新后新增图像的质量参数，从目标图像集中确定已添加标注质量标注的第一图像之前，方法还包括将新增图像的质量参数初始化为初始质量参数；从目标图像集中随机确定第二图像，第二图像用于与新增图像构成第二图像对；基于目标对象对第二图像对的多个评价结果，更新新增图像的初始质量参数，得到第一次更新后新增图像的质量参数。
97.在本公开实施例中，通过将各个新增图像的质量参数初始化为初始质量参数，并且将该初始质量参数作为基准参数，在第一次更新的过程中，以该初始参数为基准更新各个新增图像的质量参数，能够将目标对象对该新增图像的评价结果量化为质量参数的更新情况，从而初步得到能够表示各个新增图像的实际质量的质量参数。
98.上述图2所示为本公开的基本流程，下面对本公开提供的图像质量的标注方案进行进一步阐述，图3是根据一示例性实施例示出的另一种图像质量的标注方法的流程图，该方法由电子设备执行，参见图3，该方法包括：
99.在步骤s301中，电子设备获取目标图像集，该目标图像集包括多个图像。
100.在本公开实施例中，目标图像集为对真实场景的图像数据进行收集和整理，得到的待添加质量标注的图像数据集。目标图像集包括的多个图像可以是内容互不相同的图像，也可以是源图像和对源图像进行图像增强或者图像压缩处理后得到的图像。电子设备可以从本地存储获取该目标图像集，也可以从其他电子设备获取该目标图像集，本公开实施例对此不进行限制。
101.在步骤s302中，电子设备将目标图像集中各个图像的质量参数初始化为初始质量参数。
102.在本公开实施例中，目标图像集中各个图像的质量并不一致，并且图像的质量受分辨率、色彩深度和失真度等多种指标的影响。因此，为了更准确的量化图像的质量和对图
像的质量进行标注，可以通过质量参数来表示图像的质量。图像的质量越高，该图像给用户的视觉感受更好，该图像的质量参数也越高；图像的质量越低，该图像给用户的视觉感受越差，图像的质量参数也就越低。
103.电子设备将目标图像集中各个图像的质量参数初始化为初始质量参数。其中，各个图像的初始质量参数可以相同也可以不同。该初始质量参数用于作为基准参数以供参考，并不能准确表示图像的实际质量。后续还需要在该初始质量参数的基础上，根据目标对象对该图像的评价结果不断更新图像的质量参数，直至得到能够准确表示该图像的实际质量的质量参数。
104.例如，在初始质量参数相同的情况下，电子设备将各个图像的初始质量参数均初始化为1400分，后续在1400分的基础上，根据评价结果增加或者减少各个图像的质量参数，直至得到各个图像较为准确的质量参数。可选地，在初始质量参数不同的情况下，电子设备在一定的参数范围内，随机赋予目标图像集中各个图像不同的初始质量参数。例如，电子设备在1200分-1600分的范围内，随机赋予各个图像不同的初始质量参数。
105.需要说明的是，电子设备将、各个图像的质量参数初始化为初始质量参数之后，需要进行多次更新，在每次更新过程中，根据目标对象对各个图像的评价结果，不断更新图像的质量参数，直至得到该图像较为准确的质量参数。在一些实施例中，更新过程可以为迭代过程。相应地，一次更新即为一轮迭代。电子设备在每轮迭代中更新一次图像的质量参数。
106.在步骤s303中，对于第1次更新，电子设备从目标图像集中随机确定多个图像对。
107.在本公开实施例中，以初始质量参数相同为例进行说明。在第1次更新过程中，电子设备从目标图像集中，随机选取两个图像构成一个图像对。通过这种随机选取的方式，能够确定多个图像对，并且图像对中的图像互不相同，能够避免同一张图像出现在两个图像对中的情况。
108.例如，目标图像集中包括n个图像，在n为偶数的情况下，能够确定n/2个图像对；在n为奇数的情况下，能够确定(n-1)/2个图像对，未成对的单个图像先暂时不参与本次更新，在下次更新过程中，该图像对再与目标图像集中的任一图像组成图像对。
109.在步骤s304中，对于任一图像对，电子设备基于目标对象对该图像对的多个评价结果，更新图像对中两个图像的初始质量参数，得到第1次更新后目标图像集中各个图像的质量参数。
110.在本公开实施例中，电子设备向目标对象逐对展示上述多个图像对，由目标对象对多个图像对分别进行主观评价。目标对象在观看展示的任一图像对中，目标对象根据自己的主观视觉感受，选择该图像对中质量较高的一个图像。因此可以认为，被选择的图像的质量高于未被选择的图像的质量。相应地，电子设备在进行第1次更新的过程中，在初始质量参数的基础上，增加被选择的图像的初始质量参数，减少未被选择的图像的初始质量参数，从而得到该图像对中两个图像在第一次更新后的质量参数。通过将各个图像的质量参数初始化为初始质量参数，并且将该初始质量参数作为基准参数，在第1次更新的过程中，以该初始参数为基准更新各个图像的质量参数，能够将目标对象对该图像的评价结果量化为质量参数的更新情况，从而初步得到能够表示各个图像的实际质量的质量参数。
111.在步骤s305中，对于第i+1次更新，电子设备基于第i次更新后目标图像集中各个图像的质量参数，从目标图像集中确定多个图像对，i为大于等于1的正整数。
112.在本公开实施例中，在第i+1次更新的过程中，电子设备获取第i次更新得到的各个图像的质量参数。电子设备基于各个图像的质量参数确定多个图像对。其中，图像对中的图像互不相同，从而避免同一张图像同时出现在两个图像对中。
113.在一些实施例中，电子设备能够将质量参数相近的两个图像构成一个图像对。在第i+1次更新的过程中，电子设备基于第i次更新后目标图像集中各个图像的质量参数，对各个图像进行排序，得到各个图像的质量参数次序。其中，排序的方式可以是由高到低进行排序，也可以是由低到高进行排序。相应的，质量参数最高的图像的质量参数次序可以是第一名，也可以是最后一名。电子设备将质量参数次序相邻且质量参数的差值小于差值阈值的两个图像构成图像对，得到多个图像对，多个图像对中的图像互不相同。差值阈值可以为一个预设的数值，如30、60或者100，本公开实施例对此不作限制。其中，质量参数次序相邻的两个图像的质量参数之间的差值较小，通过先确定质量参数次序相邻的图像，再从质量参数相邻的图像中，将质量参数的差值小于差值阈值的两个图像构成一个图像对，在保证图像对中的两个图像的质量参数相近的同时，还能够提升确定图像对的效率。
114.在一些实施例中，对于任一图像，电子设备能够确定该由图像构成的图像对。在第i+1次更新的过程中，电子设备基于第i次更新后目标图像集中各个图像的质量参数，在目标图像集中未构成图像对的多个图像中，确定与图像的质量参数的差值小于差值阈值的至少一个备选图像。电子设备将至少一个备选图像中与图像的质量参数的差值最小的备选图像和图像构成图像对。例如，对于任一图像，该图像在第i次更新后的质量参数为1480，则电子设备将第i次更新后质量参数为1472、1464和1496的三个图像作为备选图像，上述备选图像与该图像的质量参数之间的差值分别为8、16和16。电子设备将差值最小的备选图像，即质量参数为1472的备选图像和该图像构成图像对。对于任一图像，通过确定与该图像的质量参数的差值小于差值阈值的多个备选图像，且将差值最小的备选图像为该图像构成图像对，能够保证构成的图像对中两个图像的质量参数的差值最相近。
115.在步骤s306中，对于任一图像对，电子设备基于目标对象对图像对的多个评价结果，更新图像对中两个图像的质量参数，评价结果用于指示两个图像中质量较高的图像。
116.在本公开实施例中，在第i+1次更新的过程中，电子设备从目标图像集中确定多个图像对之后，向目标对象逐对展示上述多个图像对，由目标对象对多个图像对分别进行主观评价。目标对象在观看展示的任一图像对中，目标对象根据自己的主观视觉感受，选择该图像对中质量较高的一个图像，作为目标对象的评价结果。因此，评价结果能够指示目标对象认为的两个图像中质量较高的图像。
117.相应地，电子设备在进行第i+1次更新的过程中，在第i次更新后两个图像的质量参数的基础上，增加被选择的图像的质量参数，减少未被选择的图像的质量参数，从而得到两个图像在第i+1次更新后的质量参数。通过多次更新的方式，能够在中间任一次更新的过程中，基于上一次更新后的质量参数，将质量参数相近的两个图像构成图像对，再通过目标对象对任一图像对的评价结果，更新该图像对中两个图像的质量参数。因此，采用多次更新的方式更新图像的质量参数，能够在多次更新的过程中，使得图像的质量参数却来越准确。
118.在一些实施例中，对于任一图像对，电子设备能够根据评价结果和该图像对中两个图像的质量优胜概率，分别更新两个图像的质量参数。电子设备基于质量分布系数和图像对中两个图像的质量参数之间的差值，分别确定两个图像的质量优胜概率。其中，质量分
布系数用于控制质量优胜概率的分布形状，质量分布系数越大，质量优胜概率的分布曲线越平缓；质量分布系数越小，质量优胜概率的分布曲线越陡峭。质量优胜概率用于表示图像对中一个图像的质量高于另一个图像的质量的概率。通过评价结果和质量优胜概率更新图像的质量参数，能够兼顾目标对象的主观评价结果和图像的理论优胜概率，从而较为准确的更新图像的质量参数。
119.例如，电子设备能够通过下述公式(1)分别确定图像对(ia,ib)中图像ia的质量优胜概率p
a＞b
和图像ib的质量优胜概率p
b＞a
。
[0120][0121]
其中，m为质量分布系数，m的数值默认为400，也可以根据质量优胜概率的分布的需要，设置m为其他数值，如200、300或者500，本公开实施例对此不做限制。ra和rb分别为图像ia和图像ib的质量参数。p
a＞b
为图像ia的质量优胜概率，即图像ia的质量高于图像ib的质量的概率。p
b＞a
为图像ib的质量优胜概率，即图像ib的质量高于图像ia的质量的概率。可以看到，若图像ia和图像ib的质量相近，即ra≈rb，那么p
a＞b
＝p
b＞a
＝0.5，也即是两个图像的质量优胜概率近似相等；若两个图像的质量相差较大，设ra＞＞rb，则有p
a＞b
≈1且p
b＞a
≈0，即图像ia的质量高于图像ib的质量的概率无限接近于1。
[0122]
第i+1次更新的过程中，在目标对象对图像对进行主观选择，得到多个评价结果之后，电子设备基于目标对象的多个评价结果和两个图像在第i次更新后的质量优胜概率，分别更新两个图像的质量参数。其中，多个评价结果为多个目标对象分别对同一图像对做出主观评价得到的多个评价结果。
[0123]
在一些实施例中，对于任一图像，电子设备基于多个评价结果、图像的质量优胜概率以及更新步长，确定图像的质量变化参数。其中，更新步长用于控制每次更新过程中质量参数更新的幅度。电子设备基于质量变化参数，更新图像的质量参数。通过设置更新步长，在更新图像的质量参数时，能够控制更新的幅度，提升图像的质量参数的精度。
[0124]
其中，电子设备能够通过下述两种方式，确定图像的质量变化参数。
[0125]
方式一、电子设备基于多个评价结果中每个评价结果的评价权重，确定平均评价结果。平均评价结果用于指示两个图像中质量较高的图像。其中，由于不同的目标对象的专业程度不一样，因此不同的目标对象对同一图像对的评价结果具有不同的评价权重。评价权重用于表示评价结果的置信程度。对于专业程度较高的目标对象，该目标对象的评价结果的置信程度较高，评价权重也较高；对于专业程度较一般的目标对象，该目标对象的评价结果的置信程度也一般，评价权重也较为适中。其中，平均评价结果可以用0或1来表示，两个图像中质量较高的图像的平均评价结果为1，反之，质量较低的图像的平均评价结果为0。对于任一图像，电子设备确定该图像的平均评价结果和该图像的质量优胜概率的概率差值。电子设备将概率差值与更新步长的乘积，确定为图像的质量变化参数。通过为评价结果设置评价权重，能够使得置信度较高的评价结果对平均评价结果的影响大于置信度较低的评价结果，从而提升评价结果的置信度，通过置信度较高的评价结果，能够更加准确地确定图像的质量变化参数。
[0126]
例如，电子设备能够通过下述(2)所示的更新规则，基于平均评价结果、图像的质量优胜概率以及更新步长，确定图像的质量变化参数。
[0127][0128]
其中，ra和rb分别为图像ia和图像ib在第i次更新后的质量参数。t为更新步长，t默认为16。在更新过程中，也可以根据更新速度，将t设置为其他数值，如8、20或者32，本公开实施例对此不做限制。sa和sb分别为图像ia和ib的平均评价结果，p
a＞b
和p
b＞a
分别为图像ia和图像ib的质量优胜概率。如果平均评价结果指示图像ia的质量较高，则sa＝1，sb＝0，反之，如果指示图像ib的质量较高，则sa＝0，sb＝1。对于任一图像，通过将该图像的平均评价结果和质量优胜概率的差值与更新步长相乘，能够确定该图像的质量变化参数。
[0129]
方式二、对于任一评价结果，电子设备基于评价结果和图像的质量优胜概率，得到评价结果对应的质量变化参数。其中，该评价结果用于表示该评价结果对应的目标对象对图像的主观评价。因此，电子设备还需要对多个评价结果对应的质量变化参数进行求和，得到图像的质量变化参数。通过确定每个评价结果对应的质量变化参数，能够直观地表示不同的评价结果对质量参数的变化的影响。
[0130]
例如，对于指示图像ia的质量较高的第一评价结果和指示图像ib的质量较高的第二评价结果。首先，电子设备基于第一评价结果，确定第一评价结果对应的两个图像的质量变化参数分别为t
×
(s
a1-p
a＞b
)和t
×
(s
b1-p
b＞a
)。其中s
a1
＝1，s
b1
＝0，然后，电子设备基于第二评价结果，确定第二评价结果对应的两个图像的质量变化参数分别为t
×
(s
a2-p
a＞b
)和t
×
(s
b2-p
b＞a
)。其中，s
a2
＝0，s
b2
＝1。电子设备对上述质量变化参数进行求和，得到两个图像的质量变化参数分别为t
×
(s
a1
+s
a2-2*p
a＞b
)和t
×
(s
b1
+s
b2-2*p
b＞a
)。
[0131]
在步骤s307中，响应于更新结束，对于任一图像，电子设备基于图像当前的质量参数和每次更新后图像的质量参数，确定图像的平均质量参数。
[0132]
在本公开实施例中，在目标图像集中各个图像的质量参数相对稳定时，表明当前的质量参数能够准确地表示图像的质量，满足更新结束条件，更新结束。其中，相对稳定可以是各个图像的质量参数保持不变，也可以是各个图像的质量参数次序保持不变，本公开实施例对此不作限制。响应于更新结束，对于任一图像，电子设备基于该图像当前的质量参数和每次更新后该图像的质量参数，确定图像的平均质量参数。通过确定图像的平均质量参数，能够减少在多次更新的过程中目标对象进行多次主观评价产生的影响，从而减少随机误差。
[0133]
例如，电子设备能够通过下述公式(3)，确定任一图像的平均质量参数。
[0134][0135]
其中，k为总更新次数，为图像ia在第i次更新后的质量参数，为图像ia的平均质量参数。
[0136]
在步骤s308中，电子设备基于平均质量参数，为图像添加质量标注。
[0137]
在本公开实施例中，对于任一图像，电子设备对图像的平均质量参数进行后处理操作，得到能够准确地表示该图像的实际质量的质量标注。其中，后处理操作包括但不限于对该图像的质量参数进行归一化和对该图像的质量参数进行加权平均等。
[0138]
例如，电子设备通过下述公式(4)，对图像的平均质量参数进行归一化操作，将平均质量参数放缩到1-5分的范围内，得到该图像的质量标注。
[0139][0140]
其中，为目标图像集中各个图像的质量参数的最小值，为各个图像的质量参数的最大值。mosa为图像ia的质量标注，mosa的取值范围为[1,5]。
[0141]
本公开实施例提供的图像质量的标注方法，能够应用在图像的主观质量评价的场景下。为了更清楚的说明对图像进行主观质量评价的过程，下面结合图4所示的图像质量标注的流程图，对为目标图像集中各个图像添加质量标注的流程进行说明。
[0142]
如图4所示，首先收集大量真实场景的图像，建立待评价的目标图像数据集。然后根据itu-r rec.bt.500标准(一种图像的主观质量评价标准)所规定的观察距离、观察角度以及目标对象的数量等，线下布置主观评测环境，并将各个待评价图像的质量参数初始化为初始质量参数。然后随机匹配质量参数相近的图像组成图像对，向目标对象展示图像对，由目标对象对观察到的图像对进行主观评价，选出每个图像对中质量更优的图像。然后在多次更新的过程中，电子设备根据评价结果，动态调整各个图像的质量参数。在各个图像的质量参数收敛时，也即是各个图像的质量参数相对稳定时，结束更新，并对各个图像的质量参数进行后处理，得到各个图像的质量标注。
[0143]
通过将质量参数相近的图像作为待评价的图像对，无需重复与目标图像集中其他图像进行对比，不仅能够减少更新的次数，降低标注成本，还能够避免在标注内容不同但质量相近的图像时，标注的质量参数差异较大的问题，从而提升标注的准确性。例如，如图5所示的图像对，该图像对中的两个图像虽然内容不同，但图像的质量较为相近。采用绝对等级评分(acr)对该图像对进行标注时，得到的质量标注分别为3.21和4.45，二者相差较大；而采用本公开实施例提供的方法，得到的质量标注分别为4.75和4.87，二者相差较小。因此，本公开实施例提供图像质量的标注方法，在一定程度上能够避免环境因素和实验人员主观偏见的影响，实现对内容不同但质量相近的图像进行更为准确的质量标注。
[0144]
需要说明的是，在为目标图像集中的各个图像添加质量标注之后，还能够基于该目标图像集，对新增图像进行标注，从而实现动态补充目标图像集。下面对上述为新增图像添加质量标注的过程进行说明。
[0145]
电子设备将新增图像的质量参数初始化为初始质量参数。电子设备从目标图像集中随机确定第二图像，第二图像用于与新增图像构成第二图像对。电子设备基于目标对象对第二图像对的多个评价结果，更新新增图像的初始质量参数，得到第一次更新后新增图像的质量参数。对于任一新增图像，电子设备基于第j次更新后新增图像的质量参数，从目标图像集中确定已添加质量标注的第一图像，第一图像用于与新增图像构成第一图像对，第一图像的质量参数和新增图像的质量参数之间的差值小于差值阈值，j为大于等于1的正整数。其中，j用于表示对新增图像添加质量标注的更新次数。电子设备基于目标对象对第一图像对的多个评价结果，更新新增图像的质量参数。响应于更新结束，电子设备基于新增图像的质量参数，为新增图像添加质量标注。通过将新增图像与目标图像集中已添加质量标注的图像构建图像对，并根据目标对象对图像对的评价结果更新新增图像的质量参数，能够持续动态对新的图像进行质量标注，且理论标注成本较低，便于构建大规模的已添加
质量标注的图像数据集。
[0146]
假设目标对象的数量为n，总更新次数为k，每次更新过程中每张图像需要主观评价的次数为m，目标图像集的图像总数为b，对于任意新增图像，其理论标注成本为n
×k×
m。采用绝对等级评分(acr)的方法，根据itu-r bt.500-11标准，n》15，由于acr中目标对象直接给出绝对等级分，并不会构建图像对，因此每个图像只需要在一次更新的过程中被主观评价一次，所以k＝m＝1，每个新增图像的理论标注成本为n。而采用本公开实施例提供的方法，n通常小于5，且每次更新过程中每张图像需要主观评价的次数为一次，m＝1。因此，每个新增图像的理论标注成本k，与目标图像集的数据规模b无关。其中，电子设备能够通过下述公式(5)确定最大的总更新次数k。
[0147][0148]
其中，为各个图像的质量参数的最大值，t为更新步长。即最大的总更新次数k为该新增图像的质量参数从初始质量参数1400到超过目标图像集中最大质量参数的次数，k一般不超过10。
[0149]
本公开实施例提供了一种图像质量的标注方法，通过在每次更新时，根据各个图像实时的质量参数，从目标图像集中将质量参数相近的两个图像确定为一个图像对，得到多个图像对，相较于将每个图像均与其他图像配对的方案，极大的减少了图像对的数量。进一步的减少了目标对象对多个图像对进行主观评价时的工作量，能够降低人工成本，提高了评价结果的准确性，进而提高了为图像添加质量标注的效率。
[0150]
上述所有可选技术方案，可以采用任意结合形成本公开的可选实施例，在此不再一一赘述。
[0151]
图6是根据一示例性实施例示出的一种图像质量的标注装置框图。如图6所示，该装置包括：获取单元601、更新单元602以及标注单元603。
[0152]
获取单元601，被配置为获取目标图像集，所述目标图像集包括多个图像；
[0153]
更新单元602，被配置更新所述多个图像中每个图像的质量参数，所述质量参数用于表示目标对象对所述图像的质量的主观评价；
[0154]
标注单元603，被配置为响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，所述质量标注用于表示所述图像的质量；
[0155]
其中，每次更新时，所述多个图像基于实时的质量参数分别构成多个图像对，由所述目标对象对所述多个图像对分别进行主观评价，所述图像对中的两个图像的质量参数之间的差值小于差值阈值，多个图像对中的图像互不相同。
[0156]
在一些实施例中，图7是根据一示例性实施例示出的另一种图像质量的标注装置框图，如图7所示，更新单元602，包括：
[0157]
确定子单元6021，被配置为对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，i为大于等于1的正整数；
[0158]
更新子单元6022，被配置为对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，所述评价结果用于指示所述两个图像中质量较高的图像。
[0159]
在一些实施例中，更新子单元6022，被配置为对于任一图像对，基于质量分布系数和所述图像对中两个图像的质量参数之间的差值，分别确定所述两个图像的质量优胜概
率，所述质量分布系数用于控制所述质量优胜概率的分布形状，所述质量优胜概率用于表示所述图像对中一个图像的质量高于另一个图像的质量的概率；基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数。
[0160]
在一些实施例中，如图7所示，更新子单元6022，包括：
[0161]
确定子子单元60221，被配置为对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数；
[0162]
更新子子单元60222，被配置为基于所述质量变化参数，更新所述图像的质量参数。
[0163]
在一些实施例中，确定子子单元60221，被配置为基于所述多个评价结果中每个评价结果的评价权重，确定平均评价结果，所述平均评价结果用于指示所述两个图像中质量较高的图像，所述评价权重用于表示所述评价结果的置信程度；对于任一图像，确定所述平均评价结果和所述图像的质量优胜概率的概率差值；将所述概率差值与所述更新步长的乘积，确定为所述图像的质量变化参数。
[0164]
在一些实施例中，确定子子单元60221，被配置为对于任一评价结果，基于所述评价结果和所述图像的质量优胜概率，得到所述评价结果对应的质量变化参数；对所述多个评价结果对应的质量变化参数进行求和，得到所述图像的质量变化参数。
[0165]
在一些实施例中，确定子单元6021，被配置为对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，对所述各个图像进行排序，得到所述各个图像的质量参数次序；将质量参数次序相邻且质量参数的差值小于所述差值阈值的两个图像构成图像对，得到多个图像对，所述多个图像对中的图像互不相同。
[0166]
在一些实施例中，确定子单元6021，被配置为对于第i+1次更新，对于任一图像，基于第i次更新后所述目标图像集中各个图像的质量参数，在所述目标图像集中未构成图像对的多个图像中，确定与所述图像的质量参数的差值小于所述差值阈值的至少一个备选图像；将所述至少一个备选图像中与所述图像的质量参数的差值最小的备选图像和所述图像构成图像对。
[0167]
在一些实施例中，标注单元603，被配置为响应于更新结束，对于任一图像，基于所述图像当前的质量参数和每次更新后所述图像的质量参数，确定所述图像的平均质量参数；基于所述平均质量参数，为所述图像添加质量标注。
[0168]
在一些实施例中，更新单元602，被配置为将所述目标图像集中各个图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定多个图像对；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的初始质量参数；响应于所述各个图像的初始质量参数更新完成，确定第一次更新后所述目标图像集中各个图像的质量参数。
[0169]
在一些实施例中，更新单元602，被配置为对于任一新增图像，基于第j次更新后所述新增图像的质量参数，从所述目标图像集中确定已添加质量标注的第一图像，所述第一图像用于与所述新增图像构成第一图像对，所述第一图像的质量参数和所述新增图像的质量参数之间的差值小于所述差值阈值，j为大于等于1的正整数；基于所述目标对象对所述第一图像对的多个评价结果，更新所述新增图像的质量参数；标注单元603，被配置为响应于更新结束，基于所述新增图像的质量参数，为所述新增图像添加质量标注。
[0170]
在一些实施例中，更新单元602，被配置为将所述新增图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定第二图像，所述第二图像用于与所述新增图像构成第二图像对；基于所述目标对象对所述第二图像对的多个评价结果，更新所述新增图像的初始质量参数，得到第一次更新后所述新增图像的质量参数。
[0171]
本公开实施例提供了一种图像质量的标注装置，通过在每次更新时，根据各个图像实时的质量参数，从目标图像集中将质量参数相近的两个图像确定为一个图像对，得到多个图像对，相较于将每个图像均与其他图像配对的方案，极大的减少了图像对的数量。进一步的减少了目标对象对多个图像对进行主观评价时的工作量，能够降低人工成本，提高了评价结果的准确性，进而提高了为图像添加质量标注的效率。
[0172]
需要说明的是，上述实施例提供的图像质量的标注装置，仅以上述各功能单元的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元完成，即将电子设备的内部结构划分成不同的功能单元，以完成以上描述的全部或者部分功能。另外，上述实施例提供的图像质量的标注装置与图像质量的标注方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
[0173]
关于上述实施例中的图像质量的标注装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
[0174]
图8是根据一示例性实施例示出的一种电子设备的框图。通常，电子设备800包括有：处理器801和存储器802。
[0175]
处理器801可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器801可以采用dsp(digital signal processing，数字信号处理)、fpga(field－programmable gate array，现场可编程门阵列)、pla(programmable logic array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器801也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称cpu(central processing unit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器801可以在集成有gpu(graphics processing unit，图像处理器)，gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器801还可以包括ai(artificial intelligence，人工智能)处理器，该ai处理器用于处理有关机器学习的计算操作。
[0176]
存储器802可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器802还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器802中的非暂态的计算机可读存储介质用于存储至少一个程序代码，该至少一个程序代码用于被处理器801所执行以实现本公开中方法实施例提供的图像质量的标注方法。
[0177]
在一些实施例中，电子设备800还可选包括有：外围设备接口803和至少一个外围设备。处理器801、存储器802和外围设备接口803之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口803相连。具体地，外围设备包括：射频电路804、显示屏805、摄像头组件806、音频电路807和电源808中的至少一种。
[0178]
外围设备接口803可被用于将i/o(input/output，输入/输出)相关的至少一个外围设备连接到处理器801和存储器802。在一些实施例中，处理器801、存储器802和外围设备
接口803被集成在同一芯片或电路板上；在一些其他实施例中，处理器801、存储器802和外围设备接口803中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
[0179]
射频电路804用于接收和发射rf(radio frequency，射频)信号，也称电磁信号。射频电路804通过电磁信号与通信网络以及其他通信设备进行通信。射频电路804将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路804包括：天线系统、rf收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路804可以通过至少一种无线通信协议来与其它电子设备进行通信。该无线通信协议包括但不限于：城域网、各代移动通信网络(2g、3g、4g及5g)、无线局域网和/或wifi(wireless fidelity，无线保真)网络。在一些实施例中，射频电路804还可以包括nfc(near field communication，近距离无线通信)有关的电路，本公开对此不加以限定。
[0180]
显示屏805用于显示ui(user interface，用户界面)。该ui可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏805是触摸显示屏时，显示屏805还具有采集在显示屏805的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器801进行处理。此时，显示屏805还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏805可以为一个，设置电子设备800的前面板；在另一些实施例中，显示屏805可以为至少两个，分别设置在电子设备800的不同表面或呈折叠设计；在再一些实施例中，显示屏805可以是柔性显示屏，设置在电子设备800的弯曲表面上或折叠面上。甚至，显示屏805还可以设置成非矩形的不规则图形，也即异形屏。显示屏805可以采用lcd(liquid crystal display，液晶显示屏)、oled(organic light-emitting diode，有机发光二极管)等材质制备。
[0181]
摄像头组件806用于采集图像或视频。可选地，摄像头组件806包括前置摄像头和后置摄像头。通常，前置摄像头设置在电子设备的前面板，后置摄像头设置在电子设备的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及vr(virtual reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件806还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
[0182]
音频电路807可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器801进行处理，或者输入至射频电路804以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在电子设备800的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器801或射频电路804的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路807还可以包括耳机插孔。
[0183]
电源808用于为电子设备800中的各个组件进行供电。电源808可以是交流电、直流
电、一次性电池或可充电电池。当电源808包括可充电电池时，该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
[0184]
本领域技术人员可以理解，图8中示出的结构并不构成对电子设备800的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
[0185]
在示例性实施例中，还提供了一种包括指令的计算机可读存储介质，例如包括指令的存储器802，上述指令可由终端800的处理器801执行以完成上述图像质量的标注方法。可选地，计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。
[0186]
一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述图像质量的标注方法。
[0187]
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
[0188]
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

技术特征：
1.一种图像质量的标注方法，其特征在于，所述方法包括：获取目标图像集，所述目标图像集包括多个图像；更新所述多个图像中每个图像的质量参数，所述质量参数用于表示目标对象对所述图像的质量的主观评价；响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，所述质量标注用于表示所述图像的质量；其中，每次更新时，所述多个图像基于实时的质量参数分别构成多个图像对，由所述目标对象对所述多个图像对分别进行主观评价，所述图像对中的两个图像的质量参数之间的差值小于差值阈值，所述多个图像对中的图像互不相同。2.根据权利要求1所述的图像质量的标注方法，其特征在于，所述更新所述多个图像中每个图像的质量参数，包括：对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，i为大于等于1的正整数；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，所述评价结果用于指示所述两个图像中质量较高的图像。3.根据权利要求2所述的图像质量的标注方法，其特征在于，所述对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的质量参数，包括：对于任一图像对，基于质量分布系数和所述图像对中两个图像的质量参数之间的差值，分别确定所述两个图像的质量优胜概率，所述质量分布系数用于控制所述质量优胜概率的分布形状，所述质量优胜概率用于表示所述图像对中一个图像的质量高于另一个图像的质量的概率；基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数。4.根据权利要求3所述的图像质量的标注方法，其特征在于，所述基于所述多个评价结果和所述两个图像的质量优胜概率，分别更新所述两个图像的质量参数，包括：对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数；基于所述质量变化参数，更新所述图像的质量参数。5.根据权利要求4所述的图像质量的标注方法，其特征在于，所述对于任一图像，基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数，包括：基于所述多个评价结果中每个评价结果的评价权重，确定平均评价结果，所述平均评价结果用于指示所述两个图像中质量较高的图像，所述评价权重用于表示所述评价结果的置信程度；对于任一图像，确定所述平均评价结果和所述图像的质量优胜概率的概率差值；将所述概率差值与所述更新步长的乘积，确定为所述图像的质量变化参数。6.根据权利要求4所述的图像质量的标注方法，其特征在于，所述基于所述多个评价结果、所述图像的质量优胜概率以及更新步长，确定所述图像的质量变化参数，包括：
对于任一评价结果，基于所述评价结果和所述图像的质量优胜概率，得到所述评价结果对应的质量变化参数；对所述多个评价结果对应的质量变化参数进行求和，得到所述图像的质量变化参数。7.根据权利要求2所述的图像质量的标注方法，其特征在于，所述对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，包括：对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，对所述各个图像进行排序，得到所述各个图像的质量参数次序；将质量参数次序相邻且质量参数的差值小于所述差值阈值的两个图像构成图像对，得到多个图像对，所述多个图像对中的图像互不相同。8.根据权利要求2所述的图像质量的标注方法，其特征在于，所述对于第i+1次更新，基于第i次更新后所述目标图像集中各个图像的质量参数，从所述目标图像集中确定多个图像对，包括：对于第i+1次更新，对于任一图像，基于第i次更新后所述目标图像集中各个图像的质量参数，在所述目标图像集中未构成图像对的多个图像中，确定与所述图像的质量参数的差值小于所述差值阈值的至少一个备选图像；将所述至少一个备选图像中与所述图像的质量参数的差值最小的备选图像和所述图像构成图像对。9.根据权利要求1所述的图像质量的标注方法，其特征在于，所述响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，包括：响应于更新结束，对于任一图像，基于所述图像当前的质量参数和每次更新后所述图像的质量参数，确定所述图像的平均质量参数；基于所述平均质量参数，为所述图像添加质量标注。10.根据权利要求1所述的图像质量的标注方法，其特征在于，所述方法还包括：将所述目标图像集中各个图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定多个图像对；对于任一图像对，基于所述目标对象对所述图像对的多个评价结果，更新所述图像对中两个图像的初始质量参数；响应于所述各个图像的初始质量参数更新完成，确定第一次更新后所述目标图像集中各个图像的质量参数。11.根据权利要求1所述的图像质量的标注方法，其特征在于，所述方法还包括：对于任一新增图像，基于第j次更新后所述新增图像的质量参数，从所述目标图像集中确定已添加质量标注的第一图像，所述第一图像用于与所述新增图像构成第一图像对，所述第一图像的质量参数和所述新增图像的质量参数之间的差值小于所述差值阈值，j为大于等于1的正整数；基于所述目标对象对所述第一图像对的多个评价结果，更新所述新增图像的质量参数；响应于更新结束，基于所述新增图像的质量参数，为所述新增图像添加质量标注。12.根据权利要求11所述的图像质量的标注方法，其特征在于，所述基于第j次更新后
所述新增图像的质量参数，从所述目标图像集中确定已添加质量标注的第一图像之前，所述方法还包括：将所述新增图像的质量参数初始化为初始质量参数；从所述目标图像集中随机确定第二图像，所述第二图像用于与所述新增图像构成第二图像对；基于所述目标对象对所述第二图像对的多个评价结果，更新所述新增图像的初始质量参数，得到第一次更新后所述新增图像的质量参数。13.一种图像质量的标注装置，其特征在于，所述装置包括：获取单元，被配置为获取目标图像集，所述目标图像集包括多个图像；更新单元，被配置为更新所述多个图像中每个图像的质量参数，所述质量参数用于表示目标对象对所述图像的质量的主观评价；标注单元，被配置为响应于更新结束，对于任一图像，基于所述图像的质量参数，为所述图像添加质量标注，所述质量标注用于表示所述图像的质量；其中，每次更新时，所述多个图像基于实时的质量参数分别构成多个图像对，由所述目标对象对所述多个图像对分别进行主观评价，所述图像对中的两个图像的质量参数之间的差值小于差值阈值，所述多个图像对中的图像互不相同。14.一种电子设备，其特征在于，所述电子设备包括：一个或多个处理器；用于存储所述处理器可执行程序代码的存储器；其中，所述处理器被配置为执行所述程序代码，以实现如权利要求1至12任一项所述的图像质量的标注方法。15.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至12任一项所述的图像质量的标注方法。

技术总结
本公开提供了一种图像质量的标注方法、装置、电子设备及存储介质，属于计算机技术领域。方法包括：获取目标图像集，目标图像集包括多个图像；更新多个图像中每个图像的质量参数，质量参数用于表示目标对象对图像的质量的主观评价；响应于更新结束，对于任一图像，基于图像的质量参数，为图像添加质量标注，质量标注用于表示图像的质量；其中，每次更新时，多个图像基于实时的质量参数分别构成多个图像对，由目标对象对多个图像对分别进行主观评价，图像对中的两个图像的质量参数之间的差值小于差值阈值，多个图像对中的图像互不相同。上述方案能够提高为图像添加质量标注的效率。案能够提高为图像添加质量标注的效率。案能够提高为图像添加质量标注的效率。


技术研发人员：赵恺 袁坤 孙明
受保护的技术使用者：北京达佳互联信息技术有限公司
技术研发日：2023.04.23
技术公布日：2023/7/20