一种基于AVM全景影像的停车后开车门安全提醒方法与流程

一种基于avm全景影像的停车后开车门安全提醒方法
技术领域
1.本发明涉及汽车智能图像辅助系统的技术领域，尤其涉及一种基于avm全景影像的停车后开车门安全提醒方法。


背景技术：

2.随着汽车智能化水平的不断提高，现在越来越多车型开始配置智能辅助驾驶功能，其中基于图像的辅助就有多视角模式、全景模式、透明机舱等，一般的智能辅助泊车系统，大多数都是基于汽车环视影像系统(即avm系统)实现智能化泊车；avm系统一般借助汽车的左上角、右上角、左下角、右下角四个摄像头进行系统成像以向用户呈现车身周边环境；avm全景影像像素间的距离可以真实反应现实世界中对应位置的距离。在停车时，开车不小心时可能会触碰到障碍物(墙、台阶等)导致剐蹭，更甚至会有非机动车来时造成更严重的事故。


技术实现要素：

3.本发明的目的是提供一种通过计算利用avm全景影像系统对车身和对车周围的障碍物进行距离判断，从而避免开车门过程带来的剐蹭或者事故发生，起到预警效果的停车后开车门安全提醒方法。
4.为了实现上述目的，本发明采用了如下技术方案：
5.一种基于avm全景影像的停车后开车门安全提醒方法，步骤如下：
6.步骤1：在车身上安装avm全景影像，通过摄像头采集前、后、左、右四张图像，并对采集到的前、后、左、右图像进行去畸变、视觉转换等操作，得到对应的现实距离；
7.步骤2：基于深度网络对步骤1中采集到的全景影像中车周围的障碍物进行定位；
8.步骤3：在完成步骤2后，计算障碍物与车的图像距离s，具体计算过程如下：
9.步骤31：确定相机的参数，包括焦距、主点、像素大小、图像分辨率等；
10.步骤32：通过图像处理技术，确定障碍物在图像中的位置，可以使用特征检测、边缘检测、目标跟踪等方法；
11.步骤33：利用立体视觉的原理，通过双目摄像头或多目摄像头获取障碍物图像在不同摄像头下的图像坐标，进一步推算目标物理空间的三维坐标；
12.步骤34：计算障碍物与车的实际距离；
13.步骤4：结合距离s和车门打开范围，对车门碰撞进行估计，当s≤车门打开范围时，出发报警，禁止开车门，从而达到提前预警的目的，具体实现过程如下：
14.步骤41：根据avm全景影像数据，确定车辆周围的障碍物位置信息，计算出障碍物与车的图像距离；
15.步骤42：根据车型和车门设计，确定车门打开的最大范围，包括车门打开的角度和距离；
16.步骤43：根据车门打开的角度和距离，计算出车门的开启范围，并将车门开启范围
与障碍物与车的图像距离进行综合判断；
17.步骤44：如果障碍物与车的图像距离小于车门开启范围，说明车门打开有碰撞风险，车门打开不安全，需要发出警告或阻止车门继续打开；
18.步骤45：如果障碍物与车的图像距离大于车门开启范围，则车门打开相对安全，车门可以正常打开。
19.优选地，所述s34步骤中，通过采用三角测量、深度学习、回归模型进行计算。
20.优选地，所述三角测量通过已知的距离及摄像头角度计算未知物体在相机坐标系下的三维坐标，再通过相机的内参和外参进行转换，得到物体在车体坐标系下的距离。
21.优选地，所述深度网络是一种基于多层神经元结构的人工智能学习模型，它的基本结构由多个隐藏层组成，每个隐藏层都包含多个神经元，其中输入层接收数据传入处理，输出层输出最终结果；深度网络通过不断迭代更新参数，使得其具备良好的泛化能力和鲁棒性，可以广泛应用于图像识别、语音识别、自然语言处理等领域；在深度网络应用中，resnet50是一种常用的深度学习模型，用于解决深度网络层数过多导致梯度消失和退化的问题，可以用于图像分类、目标检测等任务。
22.优选地，所述障碍物包括非机动车、行人。
23.与现有技术相比，本发明具备以下有益效果：
24.本发明通过在车身上安装avm全景影像，通过采集的图像在基于“深度网络”这种基于多层神经元结构的人工智能学习模型，采用resnet50深度学习模型，对采集到的全景影像中车周围的障碍物进行定位，确定障碍物在图像中的位置，然后计算障碍物与车的图像距离s；再根据车门打开的角度和距离计算出障碍物与车门的图像距离，显示车门打开后的安全系数，从而判断此时车门是否可以打开，并通过发出警告或阻止车门继续打开。本发明利用avm全景影像系统可以实时看到当前车周围情况，对车身和对车周围的障碍物进行距离的判断，当距离小于预设值时，发出预警，避免了开车门过程带来的剐蹭或者事故发生。
具体实施方式
25.下面将结合本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。
26.本发明提供了一种基于avm全景影像的停车后开车门安全提醒方法，步骤如下：
27.步骤1：在车身上安装avm全景影像，通过摄像头采集车身前、后、左、右四张图像，并对采集到的前、后、左、右图像进行去畸变、视觉转换等操作，得到对应的现实距离；
28.步骤2：基于深度网络对步骤1中采集到的全景影像中车周围的障碍物进行定位；
29.步骤3：在完成步骤2后，计算障碍物与车的图像距离s，具体计算过程如下：
30.步骤31：确定相机的参数，包括焦距、主点、像素大小、图像分辨率等；
31.步骤32：通过图像处理技术，确定障碍物在图像中的位置，可以使用特征检测、边缘检测、目标跟踪等方法；
32.步骤33：利用立体视觉的原理，通过双目摄像头或多目摄像头获取障碍物图像在不同摄像头下的图像坐标，进一步推算目标物理空间的三维坐标；
33.步骤34：计算障碍物与车的实际距离；
34.步骤4：结合距离s和车门打开范围，对车门碰撞进行估计，当s≤车门打开范围时，出发报警，禁止开车门，从而达到提前预警的目的，具体实现过程如下：
35.步骤41：根据avm全景影像数据，确定车辆周围的障碍物位置信息，计算出障碍物与车的图像距离；
36.步骤42：根据车型和车门设计，确定车门打开的最大范围，包括车门打开的角度和距离；
37.步骤43：根据车门打开的角度和距离，计算出车门的开启范围，并将车门开启范围与障碍物与车的图像距离进行综合判断；
38.步骤44：如果障碍物与车的图像距离小于车门开启范围，说明车门打开有碰撞风险，车门打开不安全，需要发出警告或阻止车门继续打开；
39.步骤45：如果障碍物与车的图像距离大于车门开启范围，则车门打开相对安全，车门可以正常打开。
40.需要注意的是，具体判断车门是否安全打开还需综合考虑多种因素，如车辆载荷、停放位置、停放斜坡度、环境光线等，以及特定场景下的应对措施。因此，判断车门是否安全打开的模型需要不断优化和完善，以实现更加准确和可靠的结果。
41.进一步，在s34步骤中，通过采用三角测量、深度学习、回归模型进行计算。三角测量通过已知的距离及摄像头角度计算未知物体在相机坐标系下的三维坐标，再通过相机的内参和外参进行转换，得到物体在车体坐标系下的距离。
42.本发明中描述的深度网络是一种基于多层神经元结构的人工智能学习模型，它的基本结构由多个隐藏层组成，每个隐藏层都包含多个神经元，其中输入层接收数据传入处理，输出层输出最终结果；深度网络通过不断迭代更新参数，使得其具备良好的泛化能力和鲁棒性，可以广泛应用于图像识别、语音识别、自然语言处理等领域；resnet50是一种常用的深度学习模型，用于解决深度网络层数过多导致梯度消失和退化的问题，可以用于图像分类、目标检测等任务。深度网络是一种基于神经元结构的学习模型，resnet50采用残差块的设计思想，解决了深度网络层数过多导致的问题，并在许多场景中得到广泛的应用。
43.本发明中所述的障碍物包括非机动车、行人等。
44.本发明通过在车身上安装avm全景影像，通过采集的图像在基于“深度网络”这种基于多层神经元结构的人工智能学习模型，采用resnet50深度学习模型，对采集到的全景影像中车周围的障碍物进行定位，确定障碍物在图像中的位置，然后计算障碍物与车的图像距离s；再根据车门打开的角度和距离计算出障碍物与车门的图像距离，从而给出车门是否可以打开的安全系数，并通过发出警告或阻止车门继续打开。本发明利用avm全景影像系统可以实时看到当前车周围情况，对车身和对车周围的障碍物进行距离判断，当距离小于预设值时，发出预警，避免了开车门过程带来的剐蹭或者事故发生。
45.在本发明的描述中，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
46.以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其
发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

技术特征：
1.一种基于avm全景影像的停车后开车门安全提醒方法，其特征在于，步骤如下：步骤1：在车身上安装avm全景影像，通过摄像头采集车身前、后、左、右四张图像，并对采集到的前、后、左、右图像进行去畸变、视觉转换等操作，得到对应的现实距离；步骤2：基于深度网络对步骤1中采集到的全景影像中车周围的障碍物进行定位；步骤3：在完成步骤2后，计算障碍物与车的图像距离s，具体计算过程如下：步骤31：确定相机的参数，包括焦距、主点、像素大小、图像分辨率等；步骤32：通过图像处理技术，确定障碍物在图像中的位置，可以使用特征检测、边缘检测、目标跟踪等方法；步骤33：利用立体视觉的原理，通过双目摄像头或多目摄像头获取障碍物图像在不同摄像头下的图像坐标，进一步推算目标物理空间的三维坐标；步骤34：计算障碍物与车的实际距离；步骤4：结合距离s和车门打开范围，对车门碰撞进行估计，当s≤车门打开范围时，出发报警，禁止开车门，从而达到提前预警的目的，具体实现过程如下：步骤41：根据avm全景影像数据，确定车辆周围的障碍物位置信息，计算出障碍物与车的图像距离；步骤42：根据车型和车门设计，确定车门打开的最大范围，包括车门打开的角度和距离；步骤43：根据车门打开的角度和距离，计算出车门的开启范围，并将车门开启范围与障碍物与车的图像距离进行综合判断；步骤44：如果障碍物与车的图像距离小于车门开启范围，说明车门打开有碰撞风险，车门打开不安全，需要发出警告或阻止车门继续打开；步骤45：如果障碍物与车的图像距离大于车门开启范围，则车门打开相对安全，车门可以正常打开。2.根据权利要求1所述的一种基于avm全景影像的停车后开车门安全提醒方法，其特征在于，所述s34步骤中，通过采用三角测量、深度学习、回归模型进行计算。3.根据权利要求2所述的一种基于avm全景影像的停车后开车门安全提醒方法，其特征在于，所述三角测量通过已知的距离及摄像头角度计算未知物体在相机坐标系下的三维坐标，再通过相机的内参和外参进行转换，得到物体在车体坐标系下的距离。4.根据权利要求1所述的一种基于avm全景影像的停车后开车门安全提醒方法，其特征在于，所述深度网络是一种基于多层神经元结构的人工智能学习模型，它的基本结构由多个隐藏层组成，每个隐藏层都包含多个神经元，其中输入层接收数据传入处理，输出层输出最终结果；深度网络通过不断迭代更新参数，使得其具备良好的泛化能力和鲁棒性，可以广泛应用于图像识别、语音识别、自然语言处理等领域；在深度网络应用中，resnet50是一种常用的深度学习模型，用于解决深度网络层数过多导致梯度消失和退化的问题，可以用于图像分类、目标检测等任务。5.根据权利要求1所述的一种基于avm全景影像的停车后开车门安全提醒方法，其特征在于，所述障碍物包括非机动车、行人。

技术总结
本发明公开了一种基于AVM全景影像的停车后开车门安全提醒方法，方法如下步骤1：在车身上安装AVM全景影像，通过摄像头采集车身前、后、左、右四张图像，并对采集到的前、后、左、右图像进行去畸变、视觉转换等操作，得到对应的现实距离；步骤2：基于深度网络对步骤1中采集到的全景影像中车周围的障碍物进行定位；步骤3：在完成步骤2后，计算障碍物与车的图像距离S；步骤4：结合距离S和车门打开范围，对车门碰撞进行估计，当S≤车门打开范围时，出发报警，禁止开车门，从而达到提前预警的目的。本发明利用AVM全景影像系统可以实时看到当前车周围情况，对车身和对车周围的障碍物进行距离判断，从而避免开车门过程带来的剐蹭或者事故发生。生。


技术研发人员：琚明明 陶聚 杨文超
受保护的技术使用者：长城汽车股份有限公司
技术研发日：2023.08.09
技术公布日：2023/9/22