安全绳穿戴的检测方法及装置与流程

1.本发明实施例涉及通信领域，具体而言，涉及一种安全绳穿戴的检测方法及装置。


背景技术：

2.高空作业场景下，人员作业安全一直是各企业所重点关注的，尤其是作业人员有无穿戴安全带、安全帽以及安全带是否系挂在安全绳上。因此通过监控相机对人员是否穿戴这些安全装置进行识别显得尤为必要。对于安全带和安全帽检测，由于穿戴物相对比较明显，相对来说比较容易检测。然而安全绳由于非常细长，在监控图像上，尤其是光线不佳情况下，难以观察到。因此高空做作业人员穿戴安全绳检测一直是业界难点问题。
3.针对上述问题，目前尚未存在有效的解决方案。


技术实现要素：

4.本发明实施例提供了一种安全绳穿戴的检测方法及装置，以至少解决相关技术中无法检测高空做作业人员是否穿戴安全绳的问题。
5.根据本发明的一个实施例，提供了一种安全绳穿戴的检测方法，包括：对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；检测所述目标区域内是否存在标识对象；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳。
6.在一个示例性实施例中，在检测结果为高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域，包括：在所述安全绳的使用场景是高挂低用的情况下，将所述检测结果中的人体检测框的外扩区域确定为所述目标区域；在所述安全绳的使用场景是低挂高用的情况下，将可固定磁力吸盘区域确定为所述目标区域，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定。
7.在一个示例性实施例中，检测所述目标区域内是否存在标识对象，包括：在所述安全绳的使用场景是所述高挂低用的情况下，检测所述外扩区域是否存在标识球，其中，所述标识对象包括：所述标识球，所述安全绳上挂载了所述标识球；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳，包括：在所述外扩区域存在所述标识球的情况下，确定所述作业人员穿戴所了所述安全绳。
8.在一个示例性实施例中，检测所述目标区域内是否存在标识对象，还包括：在所述安全绳的使用场景是所述低挂高用的情况下，检测所述可固定磁力吸盘区域是否存在磁力吸盘，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定；在所述可固定磁力吸盘区域存在所述磁力吸盘的情况下，确定所述作业人员穿戴所了所述安全绳。
9.在一个示例性实施例中，检测所述目标区域内是否存在标识对象，包括：将所述目标区域输入目标网络模型，通过所述目标网络模型的注意力网络提取所述目标区域的特征，得到目标区域特征；根据所述目标区域特征，确定所述目标区域内是否存在所述标识对
象。
10.在一个示例性实施例中，在所述根据安全绳的使用场景，确定目标区域之前，所述方法还包括：在检测结果为所述高空作业区域内存在作业人员的情况下，获取所述检测结果中的人体检测框；通过所述人体检测框确定所述作业人员的朝向；在所述作业人员的朝向为正面或者背面的情况下，检测所述人体检测框内的作业人员是否穿戴安全带。
11.在一个示例性实施例中，所述方法还包括：在确定所述人体检测框内的作业人员穿戴了所述安全带的情况下，根据安全绳的使用场景，确定目标区域；在所述人体检测框内的作业人员未穿戴所述安全带的情况下，发送报警信息。
12.在一个示例性实施例中，所述方法还包括：在所述目标区域内不存在所述标识对象的情况下，发送报警信息。
13.根据本发明的另一个实施例，提供了一种安全绳穿戴的检测装置，包括：第一检测模块，用于对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；第一确定模块，用于在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；第二检测模块，用于检测所述目标区域内是否存在标识对象；第二确定模块，用于在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳。
14.根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现上述任一项中所述的方法的步骤。
15.根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
16.通过本发明，通过对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；在检测结果为高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；检测目标区域内是否存在标识对象；在目标区域内存在标识对象的情况下，确定作业人员穿戴了所述安全绳。以此达到了通过高空作业区域拍摄得到的目标视频对作业人员是否穿戴安全绳进行检测的目的。因此，可以解决无法检测高空做作业人员是否穿戴安全绳的问题。
附图说明
17.图1是本发明实施例的一种安全绳穿戴的检测方法的移动终端的硬件结构框图；
18.图2是根据本发明实施例的安全绳穿戴的检测方法的流程图；
19.图3是根据本发明实施例的高挂低用场景安全绳检测流程图；
20.图4是根据本发明实施例的低挂高用场景安全绳检测流程图；
21.图5是根据本发明实施例的yolov5检测网络改进示意图
22.图6是根据本发明实施例的安全绳穿戴的检测装置的结构框图。
具体实施方式
23.下文中将参考附图并结合实施例来详细说明本发明的实施例。
24.需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
25.本技术实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图1是本发明实施例的一种安全绳穿戴的检测方法的移动终端的硬件结构框图。如图1所示，移动终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器mcu或可编程逻辑器件fpga等的处理装置)和用于存储数据的存储器104，其中，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。
26.存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本发明实施例中的安全绳穿戴的检测方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
27.传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端的通信供应商提供的无线网络。在一个实例中，传输设备106包括一个网络适配器(network interface controller，简称为nic)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输设备106可以为射频(radio frequency，简称为rf)模块，其用于通过无线方式与互联网进行通讯。
28.在本实施例中提供了一种运行于上述计算机终端或网络架构的安全绳穿戴的检测方法，图2是根据本发明实施例的安全绳穿戴的检测方法的流程图，如图2所示，该流程包括如下步骤：
29.步骤s202，对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；
30.上述目标视频是摄像头对高空作业区域进行拍摄得到的视频，摄像头通过网络将拍摄的目标视频发送至移动终端，计算机终端获取到目标视频后，可以利用yolov5检测网络对视频图像中的作业人员进行检测，输出检测结果，检测结果中包括人体检测框。
31.步骤s204，在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；
32.在检测结果为所述高空作业区域内存在作业人员的情况下，获取所述检测结果中的人体检测框；通过所述人体检测框确定所述作业人员的朝向；在所述作业人员的朝向为正面或者背面的情况下，检测所述人体检测框内的作业人员是否穿戴安全带。
33.可以使用inception分类网络对检测到的人体检测框中的人体朝向进行分类，判断人体在视频画面中中是处于正面、背面还是侧面状态。当判断人体检测框中的人体为正面和背面时，再利用yolov5检测网络，对人体框区域进一步检测人员是否穿戴安全带。因为安全绳必须要通过安全钩系挂到安全带上才算系上安全绳，如果未检测到安全带，则直接
报警人员未系安全绳。
34.作为一个可选的实施方式，在确定所述人体检测框内的作业人员穿戴了所述安全带的情况下，根据安全绳的使用场景，确定目标区域；在所述人体检测框内的作业人员未穿戴所述安全带的情况下，发送报警信息。
35.安全绳的使用场景包括但不限于：高挂低用、低挂高用。
36.在所述安全绳的使用场景是高挂低用的情况下，将所述检测结果中的人体检测框的外扩区域确定为所述目标区域。在所述安全绳的使用场景是低挂高用的情况下，将可固定磁力吸盘区域确定为所述目标区域，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定。
37.步骤s206，检测所述目标区域内是否存在标识对象；
38.检测所述目标区域内是否存在标识对象，包括：在所述安全绳的使用场景是所述高挂低用的情况下，检测所述外扩区域是否存在标识球，其中，所述标识对象包括：所述标识球，所述安全绳上挂载了所述标识球；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳，包括：在所述外扩区域存在所述标识球的情况下，确定所述作业人员穿戴所了所述安全绳。
39.如图3所示是高挂低用场景安全绳检测流程图，如果安全绳是高挂低用场景，检测到人员已经穿戴安全带，则对人体检测框的左右及上方各外扩一倍，在外扩区域内通过yolov5检测网络检测是否存在标识球。如果未检测到标识球，说明此时没有系安全绳，则系统报警登高人员未系安全绳。如果检测到人体检测框中的作业人员不管运动到哪，在人体检测框的外扩区域内都能够持续检测到标识球，说明标识球在跟随人运动，进一步表明人员已系上安全绳。
40.检测所述目标区域内是否存在标识对象，还包括：在所述安全绳的使用场景是所述低挂高用的情况下，检测所述可固定磁力吸盘区域是否存在磁力吸盘，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定；在所述可固定磁力吸盘区域存在所述磁力吸盘的情况下，确定所述作业人员穿戴所了所述安全绳。
41.如图4所示是低挂高用场景安全绳检测流程图，如果是安全绳低挂高用场景，通过人体检测框检测到作业人员已经穿戴安全带后，则对可固定磁力吸盘区域进行抠图，然后对抠图区域采用yolov5检测网络检测磁力吸盘，如果检测到磁力吸盘，说明人员已系安全绳，如果未检测磁力吸盘，说明人员未系安全绳，则产生报警。
42.作为一个可选的实施方式，将所述目标区域输入目标网络模型，通过所述目标网络模型的注意力网络提取所述目标区域的特征，得到目标区域特征；根据所述目标区域特征，确定所述目标区域内是否存在所述标识对象。
43.举例来说，如图5所示是yolov5检测网络改进示意图，对于安全绳检测，虽然业务上进行了改造转换识别更易检测的标识球或者磁力吸盘，但是对于一些大场景或者背景复杂的高空作业场景，标识球和磁力吸盘仍然可能会存在检测不到的问题，针对这种情况可以对检测标识球和磁力吸盘的yolov5检测网络进行改进，通过在网络的neck部分最后三个输出层添加coordatt注意力网络，使得标识球和磁力吸盘更容易检测到。具体添加位置如下图所示。
44.步骤s208，在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了
所述安全绳。
45.作为一个可选的实施方式，在所述目标区域内不存在所述标识对象的情况下，发送报警信息。
46.可选地，上述步骤的执行主体可以是后台处理器，或者其他的具备类似处理能力的设备，还可以是至少集成有图像获取设备以及数据处理设备的机器，其中，图像获取设备可以包括摄像头等图形采集模块，数据处理设备可以包括计算机、手机等终端，但不限于此。
47.本技术通过对高挂低用和低挂高用两种实际业务中存在应用场景分别进行创新设计，方案覆盖更多业务场景。对应高挂低用场景，通过在安全绳上系挂标识球，通过识别标识球有无来判断有无系安全绳，安全绳识别率显著提升。对于低挂高用场景，通过将安全绳挂钩改造为易于识别的磁力吸盘，通过识别磁力吸盘有无来判断有无系安全绳，安全绳识别率显著提升。同时结合人体朝向分析和人体是否系安全带检测逻辑，保障了识别准确率。通过对检测标识球和磁力吸盘的yolov5检测网络进行了改进，通过增加注意力机制，对标识球和磁力吸盘检测更灵敏。
48.通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
49.在本实施例中还提供了一种安全绳穿戴的检测装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
50.图6是根据本发明实施例的安全绳穿戴的检测装置的结构框图，如图6所示，该装置包括：第一检测模块62，用于对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；第一确定模块64，用于在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；第二检测模块66，用于检测所述目标区域内是否存在标识对象；第二确定模块68，用于在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳。
51.在一个示例性实施例中，上述装置还用于在所述安全绳的使用场景是高挂低用的情况下，将所述检测结果中的人体检测框的外扩区域确定为所述目标区域；在所述安全绳的使用场景是低挂高用的情况下，将可固定磁力吸盘区域确定为所述目标区域，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定。
52.在一个示例性实施例中，上述装置还用于在所述安全绳的使用场景是所述高挂低用的情况下，检测所述外扩区域是否存在标识球，其中，所述标识对象包括：所述标识球，所述安全绳上挂载了所述标识球；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳，包括：在所述外扩区域存在所述标识球的情况下，确定所述作业人员穿戴所了所述安全绳。
53.在一个示例性实施例中，上述装置还用于在所述安全绳的使用场景是所述低挂高用的情况下，检测所述可固定磁力吸盘区域是否存在磁力吸盘，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定；在所述可固定磁力吸盘区域存在所述磁力吸盘的情况下，确定所述作业人员穿戴所了所述安全绳。
54.在一个示例性实施例中，上述装置还用于将所述目标区域输入目标网络模型，通过所述目标网络模型的注意力网络提取所述目标区域的特征，得到目标区域特征；根据所述目标区域特征，确定所述目标区域内是否存在所述标识对象。
55.在一个示例性实施例中，上述装置还用于在所述根据安全绳的使用场景，确定目标区域之前，在检测结果为所述高空作业区域内存在作业人员的情况下，获取所述检测结果中的人体检测框；通过所述人体检测框确定所述作业人员的朝向；在所述作业人员的朝向为正面或者背面的情况下，检测所述人体检测框内的作业人员是否穿戴安全带。
56.在一个示例性实施例中，上述装置还用于在确定所述人体检测框内的作业人员穿戴了所述安全带的情况下，根据安全绳的使用场景，确定目标区域；在所述人体检测框内的作业人员未穿戴所述安全带的情况下，发送报警信息。
57.在一个示例性实施例中，上述装置还用于在所述目标区域内不存在所述标识对象的情况下，发送报警信息。
58.需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
59.本发明的实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现上述任一项中所述的方法的步骤。
60.在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：u盘、只读存储器(read-only memory，简称为rom)、随机存取存储器(random access memory，简称为ram)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
61.本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
62.在一个示例性实施例中，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
63.本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。
64.显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
65.以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技
术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

技术特征：
1.一种安全绳穿戴的检测方法，其特征在于，包括：对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；检测所述目标区域内是否存在标识对象；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳。2.根据权利要求1所述的方法，其特征在于，在检测结果为高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域，包括：在所述安全绳的使用场景是高挂低用的情况下，将所述检测结果中的人体检测框的外扩区域确定为所述目标区域；在所述安全绳的使用场景是低挂高用的情况下，将可固定磁力吸盘区域确定为所述目标区域，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定。3.根据权利要求2所述的方法，其特征在于，检测所述目标区域内是否存在标识对象，包括：在所述安全绳的使用场景是所述高挂低用的情况下，检测所述外扩区域是否存在标识球，其中，所述标识对象包括：所述标识球，所述安全绳上挂载了所述标识球；在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳，包括：在所述外扩区域存在所述标识球的情况下，确定所述作业人员穿戴所了所述安全绳。4.根据权利要求2所述的方法，其特征在于，检测所述目标区域内是否存在标识对象，还包括：在所述安全绳的使用场景是所述低挂高用的情况下，检测所述可固定磁力吸盘区域是否存在磁力吸盘，其中，所述可固定磁力吸盘区域用于通过磁力吸盘对所述安全绳进行固定；在所述可固定磁力吸盘区域存在所述磁力吸盘的情况下，确定所述作业人员穿戴所了所述安全绳。5.根据权利要求1所述的方法，其特征在于，检测所述目标区域内是否存在标识对象，包括：将所述目标区域输入目标网络模型，通过所述目标网络模型的注意力网络提取所述目标区域的特征，得到目标区域特征；根据所述目标区域特征，确定所述目标区域内是否存在所述标识对象。6.根据权利要求1所述的方法，其特征在于，在所述根据安全绳的使用场景，确定目标区域之前，所述方法还包括：在检测结果为所述高空作业区域内存在作业人员的情况下，获取所述检测结果中的人体检测框；通过所述人体检测框确定所述作业人员的朝向；在所述作业人员的朝向为正面或者背面的情况下，检测所述人体检测框内的作业人员是否穿戴安全带。7.根据权利要求6所述的方法，其特征在于，所述方法还包括：在确定所述人体检测框内的作业人员穿戴了所述安全带的情况下，根据安全绳的使用场景，确定目标区域；
在所述人体检测框内的作业人员未穿戴所述安全带的情况下，发送报警信息。8.根据权利要求1至7中任一项所述的方法，其特征在于，所述方法还包括：在所述目标区域内不存在所述标识对象的情况下，发送报警信息。9.一种安全绳穿戴的检测装置，其特征在于，包括：第一检测模块，用于对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；第一确定模块，用于在检测结果为所述高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；第二检测模块，用于检测所述目标区域内是否存在标识对象；第二确定模块，用于在所述目标区域内存在标识对象的情况下，确定所述作业人员穿戴了所述安全绳。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现所述权利要求1至8任一项中所述的方法的步骤。11.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至8任一项中所述的方法。

技术总结
本发明实施例提供了一种安全绳穿戴的检测方法及装置，包括：对获取到的目标视频进行人体检测，得到检测结果，其中，所述目标视频是对高空作业区域进行拍摄得到的视频；在检测结果为高空作业区域内存在作业人员的情况下，根据安全绳的使用场景，确定目标区域；检测目标区域内是否存在标识对象；在目标区域内存在标识对象的情况下，确定作业人员穿戴了所述安全绳。通过本发明，解决了相关技术中无法检测高空做作业人员是否穿戴安全绳问题。空做作业人员是否穿戴安全绳问题。空做作业人员是否穿戴安全绳问题。


技术研发人员：郑佳 潘华东 温淳
受保护的技术使用者：浙江大华技术股份有限公司
技术研发日：2023.07.28
技术公布日：2023/9/20