人物辨别方法、人物辨别系统以及人物辨别程序与流程

1.本公开涉及组合照相机图像和通信来辨别包含于该照相机图像的人物的方法、系统以及程序。


背景技术：

2.日本特开2016-122300号公报公开组合照相机图像和通信来辨别包含于照相机图像的人物的系统。该以往的系统包括：信标装置，设置于摄像装置(照相机)的附近，将探测信号发送给用户的便携终端；以及图像处理装置，进行人物的辨别处理。在从信标装置接收到探测信号的情况下，用户的便携终端将该信标装置的识别信息和用户信息发送给图像处理装置。在该用户信息中，包括对用户赋予的识别信息、用户的脸图像等特征信息、或者这些信息的组合。
3.在图像处理装置进行的辨别处理中，根据信标装置的识别信息和取得了用户信息的时刻信息，预测在设置于该信标装置的附近的照相机的视场角内存在用户。另外，在辨别处理中，通过使用该照相机取得的照相机图像和取得了用户信息的时刻信息的辨识处理，从照相机图像提取人物。而且，对照该提取出的人物的特征信息和包含于用户信息的特征信息，由此确定包含于照相机图像的用户。
4.现有技术文献
5.专利文献
6.专利文献1：日本特开2016-122300号公报
7.专利文献2：日本特开2012-008802号公报
8.专利文献3：日本特开2020-194295号公报


技术实现要素：

9.考虑将以往的系统中的信标装置置换为能够发送接收数据的天线的情况。在该情况下，天线例如通过与便携终端的近距离无线通信取得用户信息，通过远距离通信将其发送到外部装置(例如图像处理装置)。根据包括这样的天线的系统，能够与以往的系统同样地，组合照相机图像和通信来辨别包含于照相机图像的人物。
10.在此，根据包含于照相机图像的人物的监护、使用照相机图像的防止犯罪等观点，优选增加构成系统的照相机的设置数。另外，如果天线的设置数增加，则便携终端(即用户)的位置信息的正确性提高，期待包含于照相机图像的人物的辨别精度提高。其另一方面，在天线的设置数增加时，在成本增加的方面存在担忧。因此，期待开发用于即使在天线比照相机的设置总数少的状况下也能够辨别包含于照相机图像的人物的技术。
11.本公开的1个目的在于，提供即使在发送接收用户信息的天线比照相机的设置总数少的情况下也能够辨别包含于照相机图像的人物的技术。
12.第1观点是辨别包含于照相机图像的人物的方法，具有如下的特征。
13.所述方法包括：
14.通过使用天线的近距离无线通信取得对用户终端赋予的用户信息，通过使用该天线的远距离通信将该用户信息发送到外部的步骤；
15.使用第1照相机，取得包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围的图像的步骤；
16.使用第2照相机，取得不包括所述近距离无线通信的范围的第2范围的图像的步骤；
17.辨别包含于所述第1范围的图像的人物的步骤；以及
18.辨别包含于所述第2范围的图像的人物的步骤。
19.辨别包含于所述第1范围的图像的人物的步骤包括：
20.生成包含于所述第1范围的图像的人物的辨识信息的步骤；
21.根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的图像的步骤；以及
22.在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息的步骤。
23.辨别包含于所述第2范围的图像的人物的步骤包括：
24.生成包含于所述第2范围的图像的人物的辨识信息的步骤；以及
25.根据包含于所述第2范围的图像的人物的辨识信息、和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像的步骤。
26.第2观点在第1观点中还具有如下的特征。
27.所述追踪支援信息包括判定为包含于所述第1范围的图像的用户的用户信息、取得了所述第1范围的图像的第1照相机的位置的信息、以及通过该第1照相机取得了所述第1范围的图像的时刻的信息。
28.辨别包含于所述第2范围的图像的人物的步骤还包括：
29.根据包含于所述追踪支援信息的取得了所述第1范围的图像的时刻的信息、包含于所述追踪支援信息的取得了所述第1范围的图像的第1照相机的位置的信息、取得了所述第2范围的图像的时刻的信息、以及所述第2照相机的位置的信息，缩减所述追踪支援信息的步骤。
30.缩减所述追踪支援信息的步骤包括：
31.提取根据在从取得了所述第2范围的图像的时刻追溯预定时间的期间中通过位于从所述第2照相机的位置起预定距离以内的第1照相机取得的所述第1范围的图像生成的追踪支援信息的步骤。
32.第3观点在第1或者2的观点中还具有如下的特征。
33.所述第2照相机包括至少2台照相机。
34.辨别包含于所述第2范围的图像的人物的步骤还包括：
35.在判定为与判定为包含于所述第1范围的图像的用户相同的用户包含于所述第2范围的图像的情况下，生成该用户的追踪确认信息的步骤，所述追踪确认信息包括：判定为包含于所述第2范围的图像的用户的用户信息、取得了所述第2范围的图像的第2照相机的
位置的信息、以及通过该第2照相机取得了所述第2范围的图像的时刻的信息；以及
36.根据包含于所述追踪确认信息的取得了所述第2范围的图像的时刻的信息、包含于所述追踪确认信息的所述第2照相机的位置的信息、取得了作为人物辨别的对象的所述第2范围的图像的时刻的信息、以及取得了作为人物辨别的对象的所述第2范围的图像的所述第2照相机的位置的信息，缩减所述追踪确认信息的步骤。
37.缩减所述追踪支援信息的步骤包括：
38.提取追踪确认信息的步骤，该追踪确认信息是根据在从取得了作为人物辨别的对象的所述第2范围的图像的时刻追溯预定时间的期间中通过位于从取得了作为人物辨别的对象的所述第2范围的图像的所述第2照相机的位置起预定距离以内的其他第2照相机取得的所述第2范围的图像生成的。
39.第4观点在第1～3的观点的任意1个中还具有如下的特征。
40.所述第1照相机包括至少2台照相机。
41.所述方法还包括：
42.在判定为在通过所述至少2台第1照相机取得的所述第1范围的图像内的至少2个图像中包括同一用户的情况下，根据取得了所述至少2个图像的第1照相机的各位置的信息和取得了所述至少2个图像的各时刻的信息，计算该用户的移动方向的步骤。
43.辨别包含于所述第1范围的图像的人物的步骤还包括：
44.在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，判定是否计算出该用户的移动方向的信息的步骤；以及
45.在判定为计算出所述移动方向的信息的情况下，根据该移动方向的信息，将在从取得了所述第1范围的图像的第1照相机来看位于所述移动方向的前方的第2照相机的识别信息追加到所述追踪支援信息的步骤。
46.辨别包含于所述第2范围的图像的人物的步骤还包括：
47.判定位于所述移动方向的前方的第2照相机的识别信息是否包含于所述追踪支援信息的步骤；以及
48.在判定为位于所述移动方向的前方的第2照相机的识别信息包含于所述追踪支援信息的情况下，根据该第2照相机的识别信息，缩减包含于所述第2范围的图像的人物的步骤。
49.第5观点是辨别包含于照相机图像的人物的系统，具有如下的特征。
50.所述系统具备天线、第1以及第2照相机、以及管理服务器。
51.所述天线通过近距离无线通信取得对用户终端赋予的用户信息，通过远距离通信将该用户信息发送到外部。
52.所述第1照相机拍摄包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围。
53.所述第2照相机拍摄不包括所述近距离无线通信的范围的第2范围。
54.所述管理服务器进行辨别包含于所述第1范围的图像的人物的第1辨别处理、和辨别包含于所述第2范围的图像的人物的第2辨别处理。
55.所述管理服务器在所述第1辨别处理中，
56.生成包含于所述第1范围的图像的人物的辨识信息，
57.根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的图像，
58.在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息。
59.所述管理服务器在所述第2辨别处理中，
60.生成包含于所述第2范围的图像的人物的辨识信息，
61.根据包含于所述第2范围的图像的人物的辨识信息和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像。
62.第6观点在第5观点中还具有如下的特征。
63.所述追踪支援信息包括判定为包含于所述第1范围的图像的用户的用户信息、取得了所述第1范围的图像的第1照相机的位置的信息、以及通过该第1照相机取得了所述第1范围的图像的时刻的信息。
64.所述管理服务器在所述第2辨别处理中还进行：
65.根据包含于所述追踪支援信息的取得了所述第1范围的图像的时刻的信息、包含于所述追踪支援信息的取得了所述第1范围的图像的第1照相机的位置的信息、取得了所述第2范围的图像的时刻的信息、以及所述第2照相机的位置的信息，缩减所述追踪支援信息的处理。
66.所述管理服务器在缩减所述追踪支援信息的处理中，
67.提取根据在从取得了所述第2范围的图像的时刻追溯预定时间的期间中通过位于从所述第2照相机的位置起预定距离以内的第1照相机取得的所述第1范围的图像生成的追踪支援信息。
68.第7观点在第5或者6的观点中还具有如下的特征。
69.所述第2照相机包括至少2台照相机。
70.所述管理服务器在所述第2辨别处理中，进而，
71.在判定为与判定为包含于所述第1范围的图像的用户相同的用户包含于所述第2范围的图像的情况下，生成该用户的追踪确认信息。所述追踪确认信息包括：判定为包含于所述第2范围的图像的用户的用户信息、取得了所述第2范围的图像的第2照相机的位置的信息、以及通过该第2照相机取得了所述第2范围的图像的时刻的信息。
72.所述管理服务器在所述第2辨别处理中，进而还进行：
73.根据包含于所述追踪确认信息的取得了所述第2范围的图像的时刻的信息、包含于所述追踪确认信息的所述第2照相机的位置的信息、取得了作为所述第2辨别处理的对象的所述第2范围的图像的时刻的信息、以及取得了作为所述第2辨别处理的对象的所述第2范围的图像的所述第2照相机的位置的信息，缩减所述追踪确认信息的处理。
74.所述管理服务器在缩减所述追踪确认信息的处理中，
75.提取追踪确认信息，该追踪确认信息是根据在从取得了作为所述第2辨别处理的对象的所述第2范围的图像的时刻追溯预定时间的期间中通过位于从取得了作为所述第2辨别处理的对象的所述第2范围的图像的所述第2照相机的位置起预定距离以内的其他第2照相机取得的所述第2范围的图像生成的。
76.第8观点在第5～7的观点的任意1个中还具有如下的特征。
77.所述第1照相机包括至少2台照相机。
78.所述管理服务器进而，
79.在判定为在通过所述至少2台第1照相机取得的所述第1范围的图像内的至少2个图像中包括同一用户的情况下，根据取得了所述至少2个图像的第1照相机的各位置的信息和取得了所述至少2个图像的各时刻的信息，计算该用户的移动方向。
80.所述管理服务器在所述第1辨别处理中，进而，
81.在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，判定是否计算出该用户的移动方向的信息，
82.在判定为计算出所述移动方向的信息的情况下，根据该移动方向的信息，将在从取得所述第1范围的图像的第1照相机来看位于所述移动方向的前方的第2照相机的识别信息追加到所述追踪支援信息。
83.所述管理服务器在所述第2辨别处理中，进而，
84.判定位于所述移动方向的前方的第2照相机的识别信息是否包含于所述追踪支援信息，
85.在判定为位于所述移动方向的前方的第2照相机的识别信息包含于所述追踪支援信息的情况下，根据该第2照相机的识别信息，缩减包含于所述第2范围的图像的人物。
86.第9观点是使计算机执行包含于照相机图像的人物的辨别的程序，具有如下的特征。
87.所述程序使计算机执行：
88.通过使用天线的近距离无线通信取得对用户终端赋予的用户信息，通过使用该天线的远距离通信将该用户信息发送到外部的处理；
89.使用第1照相机，取得包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围的图像的处理；
90.使用第2照相机，取得不包括所述近距离无线通信的范围的第2范围的图像的处理；
91.辨别包含于所述第1范围的图像的人物的处理；以及
92.辨别包含于所述第2范围的图像的人物的处理。
93.辨别包含于所述第1范围的图像的人物的处理包括：
94.生成包含于所述第1范围的图像的人物的辨识信息的处理；
95.根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的图像的处理；以及
96.在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息的处理。
97.辨别包含于所述第2范围的图像的人物的处理包括：
98.生成包含于所述第2范围的图像的人物的辨识信息的处理；以及
99.根据包含于所述第2范围的图像的人物的辨识信息和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像的处
理。
100.根据第1、5或者8观点，在包含于第1范围的图像的人物的辨别处理(第1辨别处理)中，判定为与用户终端关联起来的用户包含于第1范围的图像的情况下，生成该用户的追踪支援信息。该追踪支援信息在包含于第2范围的图像的人物的辨别处理(第2辨别处理)中，被用于判定与判定为包含于第1范围的图像的用户相同的用户是否包含于第2范围的图像。因此，即使在天线的设置总数比照相机的设置总数少的情况下，也能够辨别包含于第2范围的用户。这对基础设施资源受限的环境下的用户的高效的追踪作出贡献。
101.根据第2或者6观点，缩减追踪支援信息。因此，能够削减执行第2辨别处理的计算机的处理负荷。这对用户的更高效的追踪作出贡献。
102.根据第3或者7观点，在第2辨别处理中，在判定为与判定为包含于第1范围的图像的用户相同的用户包含于第2范围的图像的情况下，生成该用户的追踪确认信息。该追踪确认信息被用于与第2辨别处理不同的第2辨别处理。因此，通过反复第2辨别处理以及其他的第2辨别处理，能够持续追踪该用户。
103.根据第4或者8观点，根据用户的移动方向，将位于该移动方向的前方的第2照相机的识别信息追加到追踪支援信息。因此，能够削减执行第2辨别处理的计算机的处理负荷。这对用户的更高效的追踪作出贡献。
附图说明
104.图1是说明在本公开的实施方式所涉及的系统中进行的人物辨别的概要的图。
105.图2是说明实施方式设想的状况的图。
106.图3是示出实施方式所涉及的系统的整体结构例的框图。
107.图4是示出图3所示的管理服务器的功能结构例的框图。
108.图5是说明在第2辨别处理中使用的追踪支援信息的缩减例的图。
109.图6是说明具有追加到追踪支援信息的识别信息的照相机的确定手法的一个例子的图。
110.图7是示出由管理服务器(处理器)执行的第1辨别处理的流程的一个例子的流程图。
111.图8是示出由管理服务器(处理器)执行的第2辨别处理的流程的一个例子的流程图。
112.(符号说明)
113.1、11、12、1x：天线；2、21、22：用户终端；3、31、32、33、34、35、36、37、38、39、3y：照相机；4、41、42、43、44、45、4z：照相机；5：管理服务器；51：处理器；52：存储器；u、u1、u2：用户；du：移动方向；cr1、cr11、cr12、cr1x：通信范围；sr3、sr31、sr32、sr3y：拍摄范围；sr4、sr41、sr42、sr4z：拍摄范围；ant：天线信息；cam1、cam2：照相机信息；idn：辨别信息；tra：追踪支援信息；trc：追踪确认信息；usr：用户信息。
具体实施方式
114.以下，参照附图，说明本公开的实施方式所涉及的人物辨别方法、人物辨别系统以及人物辨别程序。此外，实施方式所涉及的人物辨别方法通过在实施方式所涉及的人物辨
别系统中进行的计算机处理实现。实施方式所涉及的人物辨别程序是用于使计算机执行实施方式所涉及的人物辨别方法的程序。在各图中，对同一或者相当的部分附加同一符号，简化或者省略其说明。
115.1.实施方式的概要
116.1-1.人物辨别
117.图1是说明在本公开的实施方式所涉及的系统(以下还简称为“系统”)中进行的人物辨别的概要的图。实施方式所涉及的系统具备至少2台天线。在图1中，作为至少2台天线的一个例子，描绘了天线11、12以及1x。以下，在不特别区分它们的情况下，将天线11、12以及1x总称为“天线1”。天线1与实施方式所涉及的系统提供的服务(例如人物监护服务、人物追踪服务)的用户u携带的终端(以下还称为“用户终端”)进行通信。
118.在图1中，作为用户终端的一个例子，描绘了用户终端21以及22。用户终端21是用户u1携带的终端，用户终端22是用户u2携带的终端。以下，在不特别区分它们的情况下，用户终端21以及22被总称为“用户终端2”。例如，通过天线1按照近距离无线通信与用户终端2进行通信。在此，在近距离无线通信中，利用通信距离为几米至几十米的通信方式。作为具体的通信方式，例示bluetooth(注册商标，蓝牙)、zigbee(注册商标，紫蜂)等。
119.在与用户终端2的近距离无线通信中，天线1取得与用户u有关的信息(以下还称为“用户信息”)。作为用户信息，例示对用户u赋予的识别信息。例如，在服务的初次的利用时，通过实施方式所涉及的系统，针对每个用户终端2设定识别信息。用户终端2的识别信息的设定也可以以一定的周期(例如每1日)复位。在用户信息中，还包括从天线1至用户终端2的距离和用户终端2相对天线1的方位的信息(即用户终端2的位置的信息)。
120.也可以在用户信息中包括用户u的脸图像等特征信息。例如，由用户u设定特征信息。特征信息也可以根据在由用户u利用服务的过程中进行的通过管理服务器(后述)辨识人物的结果设定。在该情况下，例如，根据人物辨识的结果设定的特征信息被追加到用户终端2具有的用户信息。
121.天线1还在与网络上的基站(未图示)之间进行远距离通信。在此，在远距离通信中，利用通信距离为几km至几十km的通信方式。作为具体的通信方式，例示各种lpwa(low power wide area，低功耗广域)、lte(long term evolution，长期演进)等。在经由基站的天线1的连接目的地中，包括管理服务器(后述)。也可以在天线1与基站之间存在wi-fi(注册商标)等中继模块。该中继模块也可以在基站与管理服务器之间也存在。
122.在与基站的远距离通信中，天线1发送该天线1的识别信息。作为天线1的识别信息，例示设置有天线1的位置的信息、利用该天线1的近距离无线通信的范围(cr11、cr12以及cr1x。以下在不特别区分范围cr11、cr12以及cr1x的情况下将它们总称为“通信范围cr1”)的信息等。在从用户终端2取得了用户信息的情况下，天线1将该用户信息和取得了该用户信息的时刻的信息发送给基站。
123.天线1的识别信息、该天线1取得的用户信息、以及取得了该用户信息的时刻的信息是包含于“天线信息ant”(后述)的信息的一个例子。
124.实施方式所涉及的系统还具备至少2台照相机。在图1中，作为至少2台照相机的一个例子，描绘了照相机31、32以及3y。照相机31拍摄包括利用天线11的通信范围cr11的至少一部分的范围sr31。照相机32拍摄包括利用天线12的通信范围cr12的至少一部分的范围
sr32。照相机3y拍摄包括利用天线1x的通信范围cr1x的至少一部分的范围sr3y。以下，在不特别区分照相机31、32以及3y的情况下，将它们总称为“照相机3”。另外，在不特别区分范围sr31、sr32以及sr3y的情况下，将它们总称为“拍摄范围sr3”。
125.照相机3安装于屋内或者屋外的构造物而观测其周围。照相机3的拍摄方向既可以固定于一点，也可以拍摄方向在水平或者垂直方向上移动。照相机3还在与网络上的基站之间进行远距离通信。在该远距离通信中，利用与天线1利用的通信方式相同的方式。在与基站的远距离通信中，照相机3发送该照相机3的识别信息和该照相机3取得的图像信息。作为照相机3的识别信息，例示设置有照相机3的位置的信息。照相机3取得的图像信息典型地是运动图像，但也可以是静止图像。在照相机3取得的图像信息中，还包括取得了该图像信息的时刻的信息。
126.照相机3的识别信息以及该照相机3取得的图像信息是包含于“照相机信息cam1”(后述)的信息的一个例子。
127.在实施方式所涉及的系统中，在管理服务器(后述)中进行辨别包含于拍摄范围sr3的图像的人物的“辨别处理”。在辨别处理中，例如，进行辨识包含于拍摄范围sr3的图像的人物的处理。在辨识到包含于拍摄范围sr3的图像的人物的情况下，生成该人物的辨识信息。作为辨识信息，例示辨识到的人物的位置的信息。也可以在辨识信息中，包括辨识到的人物的脸图像等特征信息。另外，在辨别处理中，根据包含于拍摄范围sr3的图像的人物的辨识信息、天线1的识别信息、以及该天线1取得的用户信息，判定在该拍摄范围sr3的图像中是否包括用户u。
128.1-2.辨别处理的特征
129.在此，考虑增加照相机3以及天线1的设置数。根据包含于拍摄范围sr3的图像的人物的监护、使用照相机3取得的图像信息的防止犯罪等观点，优选增加照相机3的设置数。另外，如果天线1的设置数增加，则用户终端2的位置信息的正确性提高，期待包含于拍摄范围sr3的图像的人物的辨别精度提高。其另一方面，在天线1的设置数增加时，在成本增加的方面存在担忧。
130.因此，在实施方式中，考虑天线1的设置总数比照相机少的状况。在此，照相机3的拍摄范围sr3包括利用天线1的通信范围cr1的至少一部分。因此，在天线1的设置总数比照相机少的状况下，存在拍摄不包括通信范围cr1的范围的照相机。
131.图2是说明实施方式设想的状况的图。在图2中，除了图1所示的天线1以及照相机3以外，还描绘了照相机41、42以及4z。照相机41、42以及4z是分别拍摄不包括通信范围cr1的范围sr41、42以及4z的照相机的一个例子。照相机41、42以及4z的基本的结构与照相机3相同。以下，在不特别区分照相机41、42以及4z的情况下，将它们总称为“照相机4”。另外，在不特别区分范围sr41、sr42以及sr4z的情况下，将它们总称为“拍摄范围sr4”。
132.在与基站的远距离通信中，照相机4发送该照相机4的识别信息和该照相机4取得的图像信息。作为照相机4的识别信息，例示设置有照相机4的位置的信息。照相机4取得的图像信息典型地是运动图像，但也可以是静止图像。在照相机4取得的图像信息中，还包括取得了该图像信息的时刻的信息。
133.照相机4的识别信息以及该照相机4取得的图像信息是包含于“照相机信息cam2”(后述)的信息的一个例子。
134.在实施方式中，在辨别处理中，除了包含于拍摄范围sr3的图像的人物的辨别以外，还进行包含于拍摄范围sr4的图像的人物的辨别。以下，为便于说明，将用于辨别前者的处理还称为“第1辨别处理”，将后者的处理还称为“第2辨别处理”。关于第1辨别处理的概要如上所述，在第1辨别处理中，还生成用户u的“追踪支援信息”。追踪支援信息的生成在判定为在拍摄范围sr3的图像中包括用户u的情况下进行。
135.追踪支援信息例如包括判定为包含于拍摄范围sr3的图像的用户u的用户信息(具体而言用户终端2的识别信息以及位置的信息)、取得了该拍摄范围sr3的图像的照相机3的识别信息、以及取得了该图像的时刻的信息。在生成了追踪支援信息的情况下，该追踪支援信息被用于第2辨别处理。
136.在第2辨别处理中，进行辨识包含于拍摄范围sr4的图像的人物的处理。在辨识到包含于拍摄范围sr4的图像的人物的情况下，生成该人物的辨识信息。作为辨识信息，例示辨识到的人物的位置的信息。也可以在辨识信息中包括辨识到的人物的脸图像等特征信息。另外，在第2辨别处理中，根据包含于拍摄范围sr4的图像的人物的辨识信息和追踪支援信息，判定在该拍摄范围sr4的图像中是否包括用户u。
137.这样，根据实施方式所涉及的系统，在第1辨别处理中生成的追踪支援信息在第2辨别处理中被用于包含于拍摄范围sr4的图像的人物的辨别。因此，即使在天线1的设置总数比照相机的设置总数少的情况下，也能够辨别包含于拍摄范围sr4的用户u。这对基础设施资源受限的环境下的用户u的高效的追踪作出贡献。
138.在实施方式所涉及的系统中，也可以在第2辨别处理中生成用户u的“追踪确认信息”。“追踪支援信息”的生成在判定为在拍摄范围sr3的图像中包括用户u的情况下进行。相对于此，“追踪确认信息”的生成在判定为在拍摄范围sr4的图像中包括用户u的情况下进行。追踪确认信息例如包括判定为包含于拍摄范围sr4的图像的用户u的用户信息、取得了该拍摄范围sr4的图像的照相机4的识别信息、以及取得了该图像的时刻的信息。在生成了追踪确认信息的情况下，该追踪确认信息被用于“其他的第2辨别处理”。
139.其他的第2辨别处理是指，将与生成了追踪确认信息的第2辨别处理不同的拍摄范围sr4的图像作为对象的第2辨别处理或者将与生成了追踪确认信息的第2辨别处理共同的拍摄范围sr的图像作为对象的第2辨别处理、且是在与生成了追踪确认信息的第2辨别处理不同的时刻进行的第2辨别处理。
140.以下，更详细地说明实施方式所涉及的系统。
141.2.人物辨别系统的结构例
142.2-1.整体结构例
143.图3是示出实施方式所涉及的系统的整体结构例的框图。在图3所示的例子中，实施方式所涉及的系统具备天线1、照相机3以及4、管理服务器5、和显示器6。
144.天线1是设置于屋内或者屋外的构造物的通信装置。天线1的总设置数是至少2个。天线1与用户终端2进行近距离无线通信。在该近距离无线通信中，利用通信距离为几米至几十米的通信方式。在近距离无线通信中，天线1从用户终端2取得用户信息usr。在用户信息usr中，例如，包括用户终端2的识别信息、从天线1至用户终端2的距离、以及用户终端2相对天线1的方位的信息。也可以在用户信息usr中，包括用户u的脸图像等特征信息。
145.天线1还经由网络7与管理服务器5进行远距离通信。在远距离通信中，利用通信距
离为几km至几十km的通信方式。在该远距离通信中，天线1向管理服务器5发送天线信息ant。在该天线信息ant中，例如，包括天线1的识别信息。在天线1取得了用户信息usr的情况下，在天线信息ant中追加该用户信息usr。
146.照相机3以及4是安装于屋内或者屋外的构造物的观测装置。照相机3的总设置数是至少2个，照相机4的总设置数也是至少2个。将照相机3以及4合计的总设置数比天线1的总设置数多。照相机3拍摄包括利用天线1的通信范围cr1的至少一部分的范围(即拍摄范围sr3)。另一方面，照相机4拍摄不包括通信范围cr1的范围(即拍摄范围sr4)。
147.照相机3以及4经由网络7与管理服务器5分别进行远距离通信。在该远距离通信中，照相机3将照相机信息cam1发送给管理服务器5。在照相机信息cam1中，例如，包括照相机3的识别信息以及该照相机3取得的图像信息。另一方面，照相机4将照相机信息cam2发送给管理服务器5。在照相机信息cam2中，例如，包括照相机4的识别信息以及该照相机4取得的图像信息。
148.在此，说明实施方式和本公开的观点的对应关系。照相机3与本公开的观点的“第1照相机”对应，照相机4与本公开的观点的“第2照相机”对应。另外，拍摄范围sr3与本公开的观点的“第1范围”对应，拍摄范围sr4与本公开的观点的“第2范围”对应。
149.管理服务器5是管理实施方式所涉及的系统提供的服务的计算机。管理服务器5进行基于从天线1、照相机3以及4接收到的各种信息(天线信息ant、照相机信息cam1以及cam2)的信息处理。作为进行信息处理的结构，管理服务器5具备至少1个处理器51和至少1个存储器52。处理器51包括cpu(central processing unit，中央处理单元)。存储器52是ddr存储器等易失性的存储器，进行处理器51使用的各种程序的展开以及各种信息的临时保存。管理服务器5从天线1、照相机3以及4接收到的各种信息被储存到存储器52。
150.处理器51通过执行储存于存储器52的人物辨别用的程序，进行与第1以及第2辨别处理关联的各种处理。另外，处理器51进行用于将第1以及第2辨别处理的结果输出给显示器6的显示控制。
151.显示器6是被输出通过显示控制生成的图像数据dimg的显示装置。显示器6设置于提供实施方式所涉及的服务的运营商的设施。显示器6是进行用户u的监护等的用户u的保护者的终端的显示装置。在前者的情况下，与管理服务器5以有线或者无线方式连接。在后者的情况下，显示器6经由网络7与管理服务器5连接。显示器6的总数没有特别限定，例如，在前者的情况下是至少2个，在后者的情况下是至少1个。
152.2-2.管理服务器的功能结构例
153.图4是示出图3所示的管理服务器5的功能结构例的框图。在图4所示的例子中，管理服务器5具备信息取得部53、第1辨别部54、第1显示控制部55、第2辨别部56、以及第2显示控制部57。此外，图3所示的块的各功能通过由处理器51执行储存于存储器52的预定的程序来实现。此外，在图4中将第1辨别部54以及第1显示控制部55各描绘了1个，但也可以根据照相机3的总设置数设定这些功能。这还适用于第2辨别部56以及第2显示控制部57的功能。
154.2-2-1.信息取得部
155.信息取得部53从外部取得各种信息并储存到存储器52。在各种信息中，包括天线信息ant和照相机信息cam1以及cam2。另外，信息取得部53读出储存于存储器52的各种信息。进而，信息取得部53将天线信息ant发送给第1辨别部54以及第2辨别部56，将照相机信
息cam1发送给第1辨别部54以及第1显示控制部55，将照相机信息cam2发送给第2辨别部56以及第2显示控制部57。
156.2-2-2.第1辨别部
157.第1辨别部54进行第1辨别处理。在第1辨别处理中，进行辨识包含于照相机信息cam1的图像(即拍摄范围sr3的图像)中包含的人物的处理。在辨识到包含于拍摄范围sr3的图像的人物的情况下，生成该人物的辨识信息。作为辨识信息，例示辨识到的人物的位置的信息。也可以在辨识信息中，包括辨识到的人物的脸图像等特征信息。
158.在第1辨别处理中还取得与照相机3对应的天线1的天线信息ant。与照相机3对应的天线1是指，其通信范围dr1的一部分包含于拍摄范围sr3的天线1。例如，根据设置有照相机3的位置的信息、设置有天线1的位置的信息、以及该天线1的通信范围cr1的信息，确定与照相机3对应的天线1。此外，从照相机3的识别信息取得设置有照相机3的位置的信息。从天线1的识别信息取得设置有天线1的位置的信息和该天线1的通信范围cr1的信息。
159.如果取得了与照相机3对应的天线1的天线信息ant，则对照包含于该天线信息ant的用户信息和包含于拍摄范围sr3的图像的人物的辨识信息。在该对照中，例如，比较天线1取得的用户信息usr(具体而言用户终端2的位置的信息)和辨识到的人物的位置的信息。同时，比较天线1取得了用户信息的时刻的信息和取得了包含于照相机信息cam1的图像的时刻的信息。而且，在关于位置以及时刻用户信息和辨识信息一致的情况下，辨别为辨识到的人物是用户u。此外，也可以考虑天线1、照相机3的设计误差，对位置以及时刻设定余量。
160.在拍摄范围sr3的图像中辨别出用户u的情况下，在第1辨别处理中，对辨识的人物赋予辨别信息idn。辨别信息idn是由实施方式所涉及的系统设定的信息，由与用户终端2的识别信息不同的信息构成。此外，辨别信息idn的赋予在本公开中并非必须，能够将辨识到的人物和用户终端2的识别信息关联起来的其他信息也可以赋予给该辨识到的人物。辨别信息idn被发送给第1显示控制部55。
161.在拍摄范围sr3的图像中辨别出用户u的情况下，在第1辨别处理中，还生成追踪支援信息tra。在追踪支援信息tra中，例如，包括在拍摄范围sr3的图像中辨别出的用户u的用户信息usr(具体而言用户终端2的识别信息以及位置的信息)、取得了该拍摄范围sr3的图像的照相机3的识别信息、以及取得了该图像的时刻的信息。追踪支援信息tra被发送给第2辨别部56。
162.2-2-3.第1显示控制部
163.第1显示控制部55进行第1显示控制。在第1显示控制中，根据在由第1辨别部54执行的第1辨别处理中处理的拍摄范围sr3的图像生成图像数据dimg，输出给外部装置(例如显示器6)。在对在第1辨别处理中辨别出的用户u赋予了辨别信息idn的情况下，在第1显示控制中，在包含于拍摄范围sr3的图像的用户u的附近重叠辨别信息idn。
164.2-2-4.第2辨别部
165.第2辨别部56进行第2辨别处理。在第2辨别处理中，进行辨识包含于照相机信息cam2的图像(即拍摄范围sr4的图像)中包含的人物的处理。在辨识到包含于拍摄范围sr4的图像的人物的情况下，生成该人物的辨识信息。作为辨识信息，例示辨识到的人物的位置的信息。也可以在辨识信息中，包括辨识到的人物的脸图像等特征信息。
166.另外，在第2辨别处理中，取得与照相机4对应的照相机3的追踪支援信息tra。作为
与照相机4对应的照相机3，例示设置于照相机4的周边的照相机3。例如，根据设置有照相机4的位置的信息和照相机3的位置的信息，确定与照相机4对应的照相机3。此外，从照相机3以及4的各识别信息取得设置有照相机3以及4的位置的信息。
167.如果取得了与照相机4对应的照相机3的追踪支援信息tra，则比较包含于该追踪支援信息tra的照相机3的位置的信息和照相机4的位置的信息。同时，比较该照相机3取得了拍摄范围sr3的图像的时刻的信息和照相机4取得了拍摄范围sr4的图像的时刻的信息。此外，也可以考虑照相机3以及4的设计误差，对位置以及时刻设定余量。
168.而且，例如，在存在从照相机4的距离为预定距离以内且从取得了拍摄范围sr4的图像的时刻至取得了拍摄范围sr3的图像的时刻的时间差为预定时间以内的取得了该拍摄范围sr3的图像的照相机3的情况下，辨别为在该拍摄范围sr4的图像中辨识到的人物是根据该拍摄范围sr3的图像生成的追踪支援信息tra中包含的用户u。为了提高该辨别的精度，也可以还进行在拍摄范围sr4的图像中辨识到的人物的特征信息和包含于追踪支援信息tra的用户u的特征信息的比较。
169.在拍摄范围sr4的图像中辨别出用户u的情况下，在第2辨别处理中，对辨识到的人物赋予辨别信息idn。关于辨别信息idn，既可以原样地赋予从第1辨别部54接收到的辨别信息idn，也可以赋予在拍摄范围sr4的图像中独自设定的辨别信息idn。为了高效地追踪用户u，辨别信息idn优选挪用从第1辨别部54接收到的信息。辨别信息idn被发送给第2显示控制部57。
170.另外，在拍摄范围sr4的图像中辨别出用户u的情况下，也可以在第2辨别处理中，生成追踪确认信息trc。在追踪确认信息trc中，例如，包括在拍摄范围sr4的图像中辨别出的用户u的用户信息usr(具体而言用户终端2的识别信息以及位置的信息)、取得了该拍摄范围sr4的图像的照相机4的识别信息、以及取得了该图像的时刻的信息。
171.在生成了追踪确认信息trc的情况下，在第2辨别处理中，比较包含于该追踪确认信息trc的照相机4(以下还称为“比较对象照相机”)的位置的信息和取得了作为第2辨别处理的对象的拍摄范围sr4的图像的照相机4(以下还称为“处理对象照相机”)的位置的信息。同时，比较比较对象照相机取得了拍摄范围sr4的图像的时刻的信息和处理对象照相机取得了拍摄范围sr4的图像的时刻的信息。
172.而且，例如，在存在从处理对象照相机的距离为预定距离以内且取得了拍摄范围sr4的图像的时刻彼此的时间差为预定时间以内的比较对象照相机的情况下，辨别为在处理对象照相机取得的拍摄范围sr4的图像中辨识到的人物是包含于根据比较对象照相机的信息生成的追踪确认信息trc的用户u。为了提高该辨别的精度，也可以还进行在拍摄范围sr4的图像中辨识到的人物的特征信息和包含于追踪确认信息trc的用户u的特征信息的比较。
173.2-2-5.第2显示控制部
174.第2显示控制部57进行第2显示控制。在第2显示控制中，根据在由第2辨别部56执行的第2辨别处理中处理的拍摄范围sr4的图像生成图像数据dimg，并输出给外部装置(例如显示器6)。在对在第2辨别处理中辨别出的用户u赋予了辨别信息idn的情况下，在第2显示控制中，在包含于拍摄范围sr4的图像的用户u的附近重叠辨别信息idn。
175.2-2-6.第2辨别部的其他例子
176.在此，第2辨别部56也可以针对在第2辨别处理中使用的追踪支援信息tra或者追踪确认信息trc进行缩减。以下，以追踪支援信息tra为代表例，说明缩减的例子。
177.图5是说明在第2辨别处理中使用的追踪支援信息tra的缩减例的图。在该缩减例中，着眼于照相机41，假设为在时刻t1取得了拍摄范围sr41的图像。在该缩减例中，设定从时刻t1追溯预定时间tp的过去的时刻(t4-tp)。而且，以设置有照相机41的位置为中心，设定预定时间tp
×
v的圆ca1(v为一般的行人的移动速度)。由此，确定位于该圆ca1的内侧的照相机3(在图5所示的例子中照相机31～35)。
178.在图5所示的例子中，提取根据位于圆ca1的内侧的照相机3的拍摄范围sr3的图像生成的追踪支援信息tra。在图5所示的例子中，还在该追踪支援信息tra中仅提取根据在从时刻(t1-tp)至时刻t1取得的拍摄范围sr3的图像生成的信息。
179.2-2-7.第1以及第2辨别部的其他例子
180.如以上说明，照相机3的设置总数是2个。因此，设想在通过2台照相机3取得的拍摄范围sr3的各图像中辨别同一用户u的情形。在这样的情况下，能够根据2台照相机3的各位置的信息和通过这些照相机3取得了2个种类的拍摄范围sr3的图像的各时刻的信息，预测该用户的移动方向(动作路线的方向)。通过处理器51另行计算该移动方向的预测。
181.在该例子中，考虑计算移动方向的情况。第1辨别部54在拍摄范围sr3的图像中辨别出用户u的情况下，取得该用户u的移动方向的信息。另外，第1辨别部54根据该移动方向的信息，确定在从取得了拍摄范围sr3的图像的照相机3来看时位于该移动方向的前方的照相机4。而且，第1辨别部54将该照相机4的识别信息(例如设置有照相机4的位置的信息)追加到追踪支援信息tra。
182.图6是说明具有追加到追踪支援信息tra的识别信息的照相机4的确定手法的一个例子的图。在图6所示的例子中，着眼于照相机34以及38。在图6所示的例子中，还假设为在时刻t2取得了拍摄范围sr38的图像并且在时刻t2以后的时刻t3取得了拍摄范围sr34的图像。
183.在作为基于在时刻t3取得的拍摄范围sr34的图像的第1辨别处理的结果辨别出用户u的情况下，第1辨别部54判定是否计算出该用户u的移动方向du。而且，在判定为计算出移动方向du的情况下，第1辨别部54确定在该移动方向du的前方存在的照相机4(在图6所示的例子中照相机41以及45)。在确定照相机4时，既可以进行基于一般的行人的移动速度v的缩减，也可以进行基于用户u的移动速度vu的缩减。例如，能够根据照相机34以及38的位置的信息和时刻t2以及t3的时间差计算移动速度vu。
184.如以上说明，在追踪支援信息tra中，包括在拍摄范围sr3的图像中辨别出的用户u的用户信息usr。因此，通过将在移动方向du的前方存在的照相机4的识别信息追加到追踪支援信息tra，在基于通过该照相机4取得的拍摄范围sr4的图像的第2辨别处理中，易于辨别用户u。
185.第2辨别部56在取得了与照相机4对应的照相机3的追踪支援信息tra的情况下，判定在该追踪支援信息tra中是否包括处理对象照相机的识别信息。而且，在判定为处理对象照相机的识别信息包含于追踪支援信息tra的情况下，根据该识别信息，缩减在拍摄范围sr4的图像中辨识到的人物。
186.2-3.由管理服务器执行的处理例
187.图7是示出由管理服务器5(处理器51)执行的第1辨别处理的流程的一个例子的流程图。例如，针对每个照相机3，以预定的周期反复执行图7所示的处理例程。
188.在图7所示的例程中，首先，取得信息(步骤s11)。在步骤s11的处理中，例如，取得天线信息ant以及照相机信息cam1。如以上说明，在天线信息ant中，例如，包括天线1的识别信息(位置信息以及通信范围cr1的信息)、该天线1取得的用户信息usr(用户终端2的识别信息)、以及取得了该用户信息usr的时刻的信息。在照相机信息cam1中，例如，包括照相机3的识别信息(位置信息)以及该照相机3取得的图像信息(拍摄范围sr3的图像和取得了该图像信息的时刻)。
189.接着步骤s11的处理，辨识包含于拍摄范围sr3的图像的人物(步骤s12)。在步骤s12的处理中，根据公知的图像处理，辨识包含于拍摄范围sr3的图像的人物的位置。在辨识了包含于拍摄范围sr3的图像的人物的位置的情况下，生成该人物的辨识信息。在步骤s12的处理中，也可以除了包含于拍摄范围sr3的图像的人物的位置的辨识以外，还辨识该人物的特征。在该情况下，特征信息被追加到辨识信息。
190.接着步骤s12的处理，判定是否辨识到包含于拍摄范围sr3的图像的人物(步骤s13)。例如，根据在步骤s12中是否有人物的辨识信息的生成，判定步骤s13的处理。在步骤s13的判定结果为否定的情况下，结束第1辨别处理。否则，进入到步骤s14的处理。
191.在步骤s14的处理中，判定在与照相机3对应的天线1的天线信息ant中是否包括用户信息usr。如以上说明，与照相机3对应的天线1是指，其通信范围dr1的一部分包含于拍摄范围sr3的天线1。在步骤s14的判定结果为否定的情况下，结束第1辨别处理。否则，进入到步骤s15的处理。
192.在步骤s15的处理中，比较在步骤s12的处理中生成的辨识信息和用户信息usr。具体而言，比较包含于辨识信息的人物的位置和包含于用户信息usr的用户u的位置。同时，比较取得了设为步骤s12的处理的对象的拍摄范围sr3的图像的时刻和取得了用户信息usr的时刻。而且，在关于位置以及时刻辨识信息和用户信息usr一致的情况下，辨别为包含于辨识信息的人物是用户u。此外，也可以考虑天线1、照相机3的设计误差，对位置以及时刻设定余量。
193.在步骤s15的处理中，在无与辨识信息一致的用户信息usr的情况下，不进行关于包含于该辨识信息的人物的辨别，结束第1辨别处理。此外，在该情况下，也可以将包含于辨识信息的人物并非用户u的意思的信息赋予给该人物。
194.在步骤s15的处理中进行了人物的辨别的情况下，对该人物赋予辨别信息idn(步骤s16)。如以上说明，辨别信息idn是通过实施方式所涉及的系统设定的任意的信息，由与用户终端2的识别信息不同的信息构成。另外，在步骤s16的处理中，将用户信息usr和辨别信息idn关联起来记录到预定的存储器。作为预定的存储器，例示如高速缓存存储器的比存储器52更上位的存储器。
195.接着步骤s16的处理，生成追踪支援信息tra(步骤s17)。如以上说明，在追踪支援信息tra中，例如，包括在拍摄范围sr3的图像中辨别出的用户u的用户信息usr(具体而言用户终端2的识别信息以及位置的信息)、取得了该拍摄范围sr3的图像的照相机3的识别信息、以及取得了该图像的时刻的信息。另外，在步骤s17的处理中，将生成的追踪支援信息tra记录到预定的存储器。
196.在步骤s17的处理中，也可以根据在图6中说明的移动方向du的信息，确定在该移动方向du的前方存在的照相机4。另外，在照相机4被确定的情况下，也可以将该照相机4的辨识信息追加到追踪支援信息tra。
197.图8是示出由管理服务器5(处理器51)执行的第2辨别处理的流程的一个例子的流程图。例如，针对每个照相机4，以预定的周期反复执行图8所示的处理例程。
198.在图8所示的例程中，首先，进行步骤s21～s23的处理。步骤s21的处理的内容与图7的步骤s11相同，步骤s22的处理的内容与图7的步骤s12相同，步骤s23的处理的内容与图7的步骤s13相同。在步骤s23的判定结果为否定的情况下，结束第2辨别处理。否则，进入到步骤s24的处理。
199.在步骤s24的处理中，判定是否存在与照相机4对应的照相机3的追踪支援信息tra。如以上说明，作为与照相机4对应的照相机3，例示设置于照相机4的周边的照相机3。在步骤s24的判定结果为否定的情况下，结束第2辨别处理。否则，进入到步骤s25的处理。
200.也可以在步骤s24的处理中，在判定是否存在追踪支援信息tra之前进行在图5中说明的追踪支援信息tra的缩减。在该情况下，例如，根据设置有照相机4的位置的信息、取得了设为步骤s22的处理的对象的拍摄范围sr4的图像的时刻的信息、设置有与该照相机4对应的照相机3的位置的信息、以及追踪支援信息tra中的根据通过该照相机3取得的拍摄范围sr3的图像生成的信息，进行缩减。
201.在步骤s25的处理中，比较追踪支援信息tra和照相机4的识别信息以及取得了设为步骤s22的处理的对象的拍摄范围sr4的图像的时刻的信息。具体而言，比较取得了包含于追踪支援信息tra的拍摄范围sr3的图像的照相机3的位置和照相机4的位置。同时，比较取得了该拍摄范围sr3的图像的时刻和取得了拍摄范围sr4的图像的时刻。
202.而且，例如，在存在从照相机4的距离为预定距离以内且从取得了拍摄范围sr4的图像的时刻至取得了拍摄范围sr3的图像的时刻的时间差为预定时间以内的取得了该拍摄范围sr3的图像的照相机3的情况下，辨别为在步骤s22的处理中辨识到的人物是包含于追踪支援信息tra的用户u。
203.在步骤s24以及s25的处理中，也可以代替追踪支援信息tra而根据追踪确认信息trc，辨别包含于拍摄范围sr4的图像的人物。在该情况下的说明中，在上述步骤s24以及s25的说明中，将“照相机3”改写为“比较对象照相机”，将“照相机4”改写为“处理对象照相机”即可。
204.在步骤s25的处理中，也可以使用包含于在图6中说明的追踪支援信息tra的照相机4的识别信息，缩减在设为步骤s22的对象的拍摄范围sr4的图像中识别出的人物。
205.在步骤s25的处理中进行了人物的辨别的情况下，对该人物赋予辨别信息idn(步骤s26)。步骤s26的处理的内容与图7的步骤s16的处理相同。
206.接着步骤s26的处理，生成追踪确认信息trc(步骤s27)。如以上说明，在追踪支援信息tra中，例如，包括判定为包含于拍摄范围sr4的图像的用户u的用户信息、取得了该拍摄范围sr4的图像的照相机4的识别信息、以及取得了该图像的时刻的信息。另外，在步骤s27的处理中，将生成的追踪确认信息trc记录到预定的存储器。
207.3.效果
208.根据以上说明的实施方式，在用于辨别包含于拍摄范围sr3的图像的人物的处理
(第1辨别处理)中辨别出用户u的情况下，生成追踪支援信息tra。而且，该追踪支援信息tra在用于辨别包含于拍摄范围sr4的图像的人物的处理(第2辨别处理)中被使用。因此，即使在天线1的设置总数比照相机的设置总数少的情况下，也能够辨别包含于拍摄范围sr4的用户u。这对基础设施资源受限的环境下的用户u的高效的追踪作出贡献。
209.另外，根据实施方式，在用于辨别包含于拍摄范围sr4的图像的人物的处理(第2辨别处理)中辨别出用户u的情况下，既可以生成追踪确认信息trc，也可以将该追踪确认信息trc用于其他的第2辨别处理。在该情况下，如果在第1辨别处理中一旦辨别用户u，则通过反复第2辨别处理以及其他的第2辨别处理，能够持续追踪该用户u。这对服务的便利性的提高作出贡献。
210.另外，根据实施方式，也可以进行在图5中说明的追踪支援信息tra的缩减、在图6中说明的照相机4的识别信息的向追踪支援信息tra的追加。在该情况下，能够削减执行第2辨别处理的计算机的处理负荷。这对用户u的更高效的追踪作出贡献。

技术特征：
1.一种人物辨别方法，辨别包含于照相机图像的人物，其特征在于，包括：通过使用天线的近距离无线通信取得对用户终端赋予的用户信息，通过使用该天线的远距离通信将该用户信息发送到外部的步骤；使用第1照相机，取得包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围的图像的步骤；使用第2照相机，取得不包括所述近距离无线通信的范围的第2范围的图像的步骤；辨别包含于所述第1范围的图像的人物的步骤；以及辨别包含于所述第2范围的图像的人物的步骤，辨别包含于所述第1范围的图像的人物的步骤包括：生成包含于所述第1范围的图像的人物的辨识信息的步骤；根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的图像的步骤；以及在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息的步骤，辨别包含于所述第2范围的图像的人物的步骤包括：生成包含于所述第2范围的图像的人物的辨识信息的步骤；以及根据包含于所述第2范围的图像的人物的辨识信息和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像的步骤。2.根据权利要求1所述的人物辨别方法，其特征在于，所述追踪支援信息包括判定为包含于所述第1范围的图像的用户的用户信息、取得了所述第1范围的图像的第1照相机的位置的信息、以及通过该第1照相机取得了所述第1范围的图像的时刻的信息，辨别包含于所述第2范围的图像的人物的步骤还包括：根据包含于所述追踪支援信息的取得了所述第1范围的图像的时刻的信息、包含于所述追踪支援信息的取得了所述第1范围的图像的第1照相机的位置的信息、取得了所述第2范围的图像的时刻的信息、以及所述第2照相机的位置的信息，缩减所述追踪支援信息的步骤，缩减所述追踪支援信息的步骤包括：提取根据在从取得了所述第2范围的图像的时刻追溯预定时间的期间中通过位于从所述第2照相机的位置起预定距离以内的第1照相机取得的所述第1范围的图像生成的追踪支援信息的步骤。3.根据权利要求1或者2所述的人物辨别方法，其特征在于，所述第2照相机包括至少2台照相机，辨别包含于所述第2范围的图像的人物的步骤还包括：在判定为与判定为包含于所述第1范围的图像的用户相同的用户包含于所述第2范围的图像的情况下，生成该用户的追踪确认信息的步骤，所述追踪确认信息包括：判定为包含于所述第2范围的图像的用户的用户信息、取得了所述第2范围的图像的第2照相机的位置的信息、以及通过该第2照相机取得了所述第2范围的图像的时刻的信息；以及
根据包含于所述追踪确认信息的取得了所述第2范围的图像的时刻的信息、包含于所述追踪确认信息的所述第2照相机的位置的信息、取得了作为人物辨别的对象的所述第2范围的图像的时刻的信息、以及取得了作为人物辨别的对象的所述第2范围的图像的所述第2照相机的位置的信息，缩减所述追踪确认信息的步骤，缩减所述追踪支援信息的步骤包括：提取追踪确认信息的步骤，该追踪确认信息是根据在从取得了作为人物辨别的对象的所述第2范围的图像的时刻追溯预定时间的期间中通过位于从取得了作为人物辨别的对象的所述第2范围的图像的所述第2照相机的位置起预定距离以内的其他第2照相机取得的所述第2范围的图像生成的。4.根据权利要求1～3中的任意一项所述的人物辨别方法，其特征在于，所述第1照相机包括至少2台照相机，所述人物辨别方法还包括：在判定为在通过所述至少2台第1照相机取得的所述第1范围的图像内的至少2个图像中包括同一用户的情况下，根据取得了所述至少2个图像的第1照相机的各位置的信息和取得了所述至少2个图像的各时刻的信息，计算该用户的移动方向的步骤，辨别包含于所述第1范围的图像的人物的步骤还包括：在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，判定是否计算出该用户的移动方向的信息的步骤；以及在判定为计算出所述移动方向的信息的情况下，根据该移动方向的信息，将在从取得了所述第1范围的图像的第1照相机来看位于所述移动方向的前方的第2照相机的识别信息追加到所述追踪支援信息的步骤，辨别包含于所述第2范围的图像的人物的步骤还包括：判定位于所述移动方向的前方的第2照相机的识别信息是否包含于所述追踪支援信息的步骤；以及在判定为位于所述移动方向的前方的第2照相机的识别信息包含于所述追踪支援信息的情况下，根据该第2照相机的识别信息，缩减包含于所述第2范围的图像的人物的步骤。5.一种人物辨别系统，辨别包含于照相机图像的人物，其特征在于，所述人物辨别系统具备：天线，通过近距离无线通信取得对用户终端赋予的用户信息，通过远距离通信将该用户信息发送到外部；第1照相机，拍摄包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围；第2照相机，拍摄不包括所述近距离无线通信的范围的第2范围；以及管理服务器，进行辨别包含于所述第1范围的图像的人物的第1辨别处理和辨别包含于所述第2范围的图像的人物的第2辨别处理，所述管理服务器在所述第1辨别处理中，生成包含于所述第1范围的图像的人物的辨识信息，根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的
图像，在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息，所述管理服务器在所述第2辨别处理中，生成包含于所述第2范围的图像的人物的辨识信息，根据包含于所述第2范围的图像的人物的辨识信息和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像。6.根据权利要求5所述的人物辨别系统，其特征在于，所述追踪支援信息包括判定为包含于所述第1范围的图像的用户的用户信息、取得了所述第1范围的图像的第1照相机的位置的信息、以及通过该第1照相机取得了所述第1范围的图像的时刻的信息，所述管理服务器在所述第2辨别处理中还进行：根据包含于所述追踪支援信息的取得了所述第1范围的图像的时刻的信息、包含于所述追踪支援信息的取得了所述第1范围的图像的第1照相机的位置的信息、取得了所述第2范围的图像的时刻的信息、以及所述第2照相机的位置的信息，缩减所述追踪支援信息的处理，所述管理服务器在缩减所述追踪支援信息的处理中，提取根据在从取得了所述第2范围的图像的时刻追溯预定时间的期间中通过位于从所述第2照相机的位置起预定距离以内的第1照相机取得的所述第1范围的图像生成的追踪支援信息。7.根据权利要求5或者6所述的人物辨别系统，其特征在于，所述第2照相机包括至少2台照相机，所述管理服务器在所述第2辨别处理中，进而，在判定为与判定为包含于所述第1范围的图像的用户相同的用户包含于所述第2范围的图像的情况下，生成该用户的追踪确认信息，所述追踪确认信息包括：判定为包含于所述第2范围的图像的用户的用户信息、取得了所述第2范围的图像的第2照相机的位置的信息、以及通过该第2照相机取得了所述第2范围的图像的时刻的信息，所述管理服务器在所述第2辨别处理中，进而还进行：根据包含于所述追踪确认信息的取得了所述第2范围的图像的时刻的信息、包含于所述追踪确认信息的所述第2照相机的位置的信息、取得了作为所述第2辨别处理的对象的所述第2范围的图像的时刻的信息、以及取得了作为所述第2辨别处理的对象的所述第2范围的图像的所述第2照相机的位置的信息，缩减所述追踪确认信息的处理，所述管理服务器在缩减所述追踪确认信息的处理中，提取追踪确认信息，该追踪确认信息是根据在从取得了作为所述第2辨别处理的对象的所述第2范围的图像的时刻追溯预定时间的期间中通过位于从取得了作为所述第2辨别处理的对象的所述第2范围的图像的所述第2照相机的位置起预定距离以内的其他第2照相机取得的所述第2范围的图像生成的。8.根据权利要求5～7中的任意一项所述的人物辨别系统，其特征在于，
所述第1照相机包括至少2台照相机，所述管理服务器进而，在判定为在通过所述至少2台第1照相机取得的所述第1范围的图像内的至少2个图像中包括同一用户的情况下，根据取得了所述至少2个图像的第1照相机的各位置的信息和取得了所述至少2个图像的各时刻的信息，计算该用户的移动方向，所述管理服务器在所述第1辨别处理中，进而，在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，判定是否计算出该用户的移动方向的信息，在判定为计算出所述移动方向的信息的情况下，根据该移动方向的信息，将在从取得所述第1范围的图像的第1照相机来看位于所述移动方向的前方的第2照相机的识别信息追加到所述追踪支援信息，所述管理服务器在所述第2辨别处理中，进而，判定位于所述移动方向的前方的第2照相机的识别信息是否包含于所述追踪支援信息，在判定为位于所述移动方向的前方的第2照相机的识别信息包含于所述追踪支援信息的情况下，根据该第2照相机的识别信息，缩减包含于所述第2范围的图像的人物。9.一种人物辨别程序，使计算机执行包含于照相机图像的人物的辨别，其特征在于，所述人物辨别程序使计算机执行：通过使用天线的近距离无线通信取得对用户终端赋予的用户信息，通过使用该天线的远距离通信将该用户信息发送到外部的处理；使用第1照相机，取得包括利用所述天线的近距离无线通信的范围的至少一部分的第1范围的图像的处理；使用第2照相机，取得不包括所述近距离无线通信的范围的第2范围的图像的处理；辨别包含于所述第1范围的图像的人物的处理；以及辨别包含于所述第2范围的图像的人物的处理，辨别包含于所述第1范围的图像的人物的处理包括：生成包含于所述第1范围的图像的人物的辨识信息的处理；根据包含于所述第1范围的图像的人物的辨识信息、所述天线的识别信息、以及所述天线取得的所述用户信息，判定与所述用户终端关联起来的用户是否包含于所述第1范围的图像的处理；以及在判定为与所述用户终端关联起来的用户包含于所述第1范围的图像的情况下，生成该用户的追踪支援信息的处理，辨别包含于所述第2范围的图像的人物的处理包括：生成包含于所述第2范围的图像的人物的辨识信息的处理；以及根据包含于所述第2范围的图像的人物的辨识信息和所述追踪支援信息，判定与判定为包含于所述第1范围的图像的用户相同的用户是否包含于所述第2范围的图像的处理。

技术总结
本公开提供人物辨别方法、人物辨别系统以及人物辨别程序。提供即使在发送接收用户信息的天线比照相机的设置总数少的情况下也能够辨别包含于照相机图像的人物的技术。进行第1以及第2辨别处理。在第1辨别处理中，对照包含于第1照相机拍摄的第1范围的图像的人物的辨识信息和包含于与第1照相机对应的天线的天线信息的用户信息。在关于位置以及时刻辨识信息和用户信息一致的情况下，辨别为包含于第1范围的图像的人物是用户，生成该用户的追踪支援信息。在第2辨别处理中，比较包含于第2照相机拍摄的第2范围的图像的人物的辨识信息和与第2照相机对应的第1照相机的追踪支援信息，判定与判定为包含于第1范围的图像的用户相同的用户是否包含于第2范围。户是否包含于第2范围。户是否包含于第2范围。


技术研发人员：小堀训成
受保护的技术使用者：丰田自动车株式会社
技术研发日：2023.03.14
技术公布日：2023/9/20