一种感应式车载媒体的控制方法、系统和存储介质与流程

1.本发明涉及一种车载多媒体设备领域，更具体地，涉及一种感应式车载媒体的控制方法、系统和存储介质。


背景技术：

2.随着电子技术的飞速进步，以智能平板为代表的多媒体设备的发展速度尤为迅速，智能平板设备集成了音频输出、视频播放、人机交互等多种功能。伴随着客运行业的快速发展，越来越多的多媒体设备出现在客运工具上，满足乘客在搭乘过程中的体验需求。在汽车、高铁、飞机等客运工具中， 通常通过搭载智能平板提高乘客的搭乘体验。
3.然而，现有的车载多媒体设备需要通过乘客手动开启或关闭。也就存在不管有没有乘客上车多媒体设备处于开启运行状态的现象，甚至播放影音内容，导致了电能浪费。同时，长时间的持续性工作，也对车载多媒体的使用寿命存在一定影响。因此，亟需一种能根据乘客状态自适应调整车载多媒体运行状态的控制方法，在乘客需要进行人机交互时，给予优质的视听体验，在乘客不需要使用时，进入节电休息状态。


技术实现要素：

4.鉴于上述问题，本发明的目的在于提供一种感应式车载媒体的控制方法、系统和存储介质，能够检测多媒体设备前是否有乘客，以及根据乘客的眼部状态，智能控制多媒体设备的启动与关闭、多媒体设备的屏幕亮度。给予乘客良好的操作体验感的同时，达到节省电能保护多媒体设备寿命的目的。
5.本发明第一方面提供了种感应式车载媒体的控制方法，包括：获取红外感应信息；根据红外感应信息得到第一距离信息和热辐射信息；根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；当为所述乘客模式状态时，获取眼部图像信息；根据眼部图像信息得到第二距离信息和视角信息；根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。
6.本方案中，所述根据所述第一距离信息和所述热辐射信息判断设置为无人模式或乘客模式，具体为：判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则判断所述热辐射信息是否超过预设的热辐射阈值；若是，则设置当前模式为乘客模式；若否，则设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则设置当前模式为无人模式；
设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。
7.本方案中，所述根据所述第二距离信息和所述视角信息判断设置为听觉模式或视听模式，具体为：判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则判断所述视角信息是否位于预设的空间范围内；若是，则设置当前模式为视听模式；若否，则设置当前模式为听觉模式；设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。
8.本方案中，所述自适应调整多媒体屏幕亮度值，具体为：当为所述视听模式时；获取环境亮度信息；根据所述环境亮度信息设置多媒体屏幕亮度值；获取时间信息；根据所述时间信息设置多媒体屏幕进入白天模式或黑夜模式。
9.本方案中，还包括：当为所述乘客模式时；当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间；判断所述第一持续时间是否超过第一持续时间阈值；若超过，关闭多媒体屏幕。
10.本方案中，还包括：当为所述乘客模式时；当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕多次被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；根据所述第二距离信息调整所述第二距离阈值。
11.本发明第二方面提供了一种基于双频组合的低功耗定位系统，包括感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被所述处理器执行时实现如下步骤：获取红外感应信息；根据红外感应信息得到第一距离信息和热辐射信息；根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；当为所述乘客模式状态时，获取眼部图像信息；根据眼部图像信息得到第二距离信息和视角信息；
根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。
12.本方案中，所述根据第一距离信息和热辐射信息判断进入乘客模式，具体为：判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则判断所述热辐射信息是否超过预设的热辐射阈值；若是，则设置当前模式为乘客模式；若否，则设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则设置当前模式为无人模式；设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。
13.本方案中，所述根据第二距离信息和视角信息判断设置为听觉模式或视听模式，具体为：判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则判断所述视角信息是否位于预设的空间范围内；若是，则设置当前模式为视听模式；若否，则设置当前模式为听觉模式；设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。
14.本发明第三方面提供了一种计算机可读存储介质，所述计算机可读存储介质中包括一种感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被处理器执行时，实现如上述任一项所述的感应式车载媒体的控制方法的步骤。
15.本发明提供了一种感应式车载媒体的控制方法、系统和存储介质，首先，根据红外感应信息得到第一距离信息和热辐射信息，用以检测多媒体设备前是否有乘客；然后，根据乘客的眼部图像信息得到第二距离信息和视角信息，用以智能控制多媒体设备的启动与关闭、多媒体设备的屏幕亮度；给予乘客良好的操作体验感的同时，达到节省电能和保护多媒体设备寿命的目的。
附图说明
16.为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定。
17.图1示出了本发明一种感应式车载媒体的控制方法的流程图；图2示出了的红外感应信息的判断控制方法的流程图；图3示出了的眼部图像信息的判断控制方法的流程图；图4示出了本发明一种感应式车载媒体的控制系统的框图。
具体实施方式
18.下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于
本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
19.除非另有定义，本发明实施例使用的所有术语(包括技术和科学术语) 具有与本发明所属领域的普通技术人员共同理解的相同含义。还应当理解，诸如在通常字典里定义的那些术语应当被解释为具有与它们在相关技术的上下文中的含义相一致的含义，而不应用理想化或极度形式化的意义来解释，除非本发明实施例明确地这样定义。
20.本发明实施例中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“一个”、“一”或者“该”等类似词语也不表示数量限制，而是表示存在至少一个。同样，“包括”或者“包含”等类似的词语意指出现该词前面的元件或者物件涵盖出现在该词后面列举的元件或者物件及其等同，而不排除其他元件或者物件。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。本发明实施例的方法前面或后面的步骤不一定按照顺序来精确的进行。相反，可以按照倒序或同时处理各种步骤。同时，也可以将其他操作添加到这些过程中，或从这些过程移除某一步或数步。
21.另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
22.图1示出了本发明一种感应式车载媒体的控制方法的流程图。
23.如图1所示，本发明公开了一种基于双频组合的低功耗定位方法，包括：s102，获取红外感应信息；s104，根据红外感应信息得到第一距离信息和热辐射信息；s106，根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；s108，当为所述乘客模式状态时，获取眼部图像信息；s110，根据眼部图像信息得到第二距离信息和视角信息；s112，根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。
24.需要说明的是，首先，通过红外线传感器利用红外线来进行数据处理获取红外感应信息。红外线传感器常用于无接触温度测量，气体成分分析和无损探伤，例如采用红外线传感器远距离测量人体表面温度的热像图，可以发现温度异常的部位。第一距离信息，是通过红外线传感器测量到的人体距离车载多媒体设备的距离；热辐射信息，是通过红外线传感器测量到的指定方向及角度的一个或多个位置的温度信息，也可以是通过红外线传感器测量到热像图信息。也就是说，通过距离信息可以判断有没有物体在多媒体设备设定的服务区域内；通过热辐射信息可以分析在多媒体设备设定的服务区域内的物体是否在合适的温度区间；再综合实用场景，可以认定在多媒体设备设定的服务区域内的温度合适的对象为乘客。当被认定为有乘客时，即可对多媒体设备的工作状态进行设置。
25.然后，当认定为有乘客在车载多媒体设备前时，通过车载多媒体设备的摄像头捕捉乘客的图像。针对乘客的图像进行处理分析，获得眼部图像的信息。分析眼部图像得到第二距离信息和视角信息，其中，第二距离信息是眼部图像信息中上眼睑到下眼睑的距离，用于判断乘客的睁眼情况；视角信息是眼瞳望向的角度，可用判断乘客眼睛是否看向车载多
媒体设备。通过乘客睁眼情况和视角状态对多媒体设备的工作状态进行设置。
26.图2示出了的红外感应信息的判断控制方法的流程图。
27.根据本发明实施例，如图2所示，所述根据所述第一距离信息和所述热辐射信息判断设置为无人模式或乘客模式，具体为：s202，判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则执行s204，判断所述热辐射信息是否超过预设的热辐射阈值；若是，则执行s208，设置当前模式为乘客模式；若否，则执行s206，设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则执行s206，设置当前模式为无人模式；需要说明的是，设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。
28.通过红外线传感器利用红外线来进行数据处理获取红外感应信息，计算得到第一距离信息和热辐射信息。首先，通过第一距离信息可用于测定多媒体设备前方距离最近的物体的距离。多媒体设备前方有没物体的判定标准被设定为测量到的最近的物体的距离是否超过第一距离阈值。也就是说，被设定为测量距离不超过第一距离阈值的情况，表示多媒体设备前有物体；测量距离超过第一距离阈值的情况，表示多媒体设备前无物体。例如，设定距离阈值为0.5米，当测量到的距离不超过0.5米时，表示在多媒体设备前方0.5米距离内有物体；当测量到的距离超过0.5米时，表示在多媒体设备前方0.5米距离内没有物体。然后，热辐射信息，是通过红外线传感器测量到的指定方向及角度的一个或多个位置的温度信息，也可以是通过红外线传感器测量到热像图信息。判断热辐射物体是否为人体的方法，可以通过测量指定方向及角度的一个或多个位置的温度信息，设定热辐射阈值为温度范围例如为35摄氏度至42摄氏度。假如测量的温度值在阈值温度范围内，则可认定是人体；假如测量的温度在阈值温度范围外，则认定为非人体。判断热辐射物体是否为人体的方法，还可以根据红外线传感器处理得到的热像图作为热辐射信息，通过判断对热像图进行图像处理及识别，描绘热像图形轮廓，可判断被测物体是否能被认定为人体。
29.当认定在多媒体设备前没有物体时，将多媒体设备设定为无人模式，即关闭多媒体屏幕显示及扬声器输出，达到节电的目的。当认定在多媒体设备前有物体，且认定物体为非人体时，表明该物体不是多媒体设备的服务对象，将多媒体设备设定为无人模式，即关闭多媒体屏幕显示及扬声器输出，达到节电的目的。当认定在多媒体设备前有物体，且认定物体为人体时，将多媒体设备设置为乘客模式时，默认不开启多媒体屏幕和开启扬声器输出，表示此时存在多媒体音频服务的对象。
30.图3示出了的红外感应信息的判断控制方法的流程图。
31.根据本发明实施例，如图3所示，所述根据所述第二距离信息和所述视角信息判断设置为听觉模式或视听模式，具体为：s302，判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则执行s304，判断所述视角信息是否位于预设的空间范围内；若是，则执行s308，设置当前模式为视听模式；若否，则执行s306，设置当前模式为听觉模式。
32.需要说明的是，设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。
33.当认定为有乘客在车载多媒体设备前时，通过多媒体设备的摄像头捕捉乘客的图像。针对乘客的图像进行处理分析，获得眼部图像的信息，用以分析眼部图像得到第二距离信息和视角信息。首先，第二距离信息是眼部图像信息中上眼睑到下眼睑的距离，用于判断乘客的睁眼情况。当第二信息距离超过设定阈值时，表示乘客处于睁眼状态；当第二信息距离超过设定阈值时，表示乘客处于闭眼状态。例如，假设设定的第二距离阈值为5mm，当所得到的上眼睑到下眼睑的距离大于5mm时，表示处于睁眼状态；当所得到的上眼睑到下眼睑的距离不大于5mm时，表示处于闭眼状态。然后，视角信息是眼瞳望向的角度，当乘客处于睁眼状态时候，通过判断乘客眼瞳望向的区域，是否在屏幕区域内，可认定乘客的眼睛是否看向屏幕。当乘客眼睛看向的屏幕，认定为乘客需要进行人机交互；当乘客眼睛未看向屏幕，认定为乘客不需要屏幕提供服务。
34.当乘客处于闭眼状态时，表示乘客不需要对屏幕进行操作，保持为乘客模式，保持屏幕处于关闭状态和开启扬声器输出，也就是说，保留声音输出的功能。关闭显示屏以节省电能，保持音频输出功能以满足乘客闭眼听音乐的需求。当乘客处于睁眼状态，并且未看向车载处理器显示屏时，设置为听觉模式，此时的显示屏设置为亮度最低的状态，并且保持扬声器输出。当乘客未看向屏幕时，则通过屏幕调暗，达到节省电能的目的。当乘客处于睁眼状态，并且看向显示屏时，设置为视听模式，用以满足乘客进行人机交互的需求。此时显示屏的亮度是跟随环境亮度自适应调整的，以提高乘客的使用体验。
35.根据本发明实施例，所述自适应调整多媒体屏幕亮度值，具体为：当为所述视听模式时；获取环境亮度信息；根据所述环境亮度信息设置多媒体屏幕亮度值；获取时间信息；根据所述时间信息设置多媒体屏幕进入白天模式或黑夜模式。
36.需要说明的是，当设备处理视听模式时，通过车载多媒体设备的摄像头采集环境亮度，根据环境亮度自适应调整屏幕的亮度值。在环境亮度较高的情况下，调高屏幕的亮度值，为乘客提供清晰的显示服务；在环境亮度较低的情况下，调低屏幕的亮度值，减少刺眼的感觉，并且达到节省电能的目的。另外，还会根据当地时间，将屏幕设置为白天模式或黑夜模式。白天模式可设定为背景色为白色等较亮的颜色，黑夜模式可设定为背景色为黑色等较暗的颜色，从而提升乘客的观看体验。
37.根据本发明实施例，还包括：当为所述乘客模式时；当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间；判断所述第一持续时间是否超过第一持续时间阈值；若超过，关闭多媒体屏幕。
38.需要说明的是，当乘客被认定为闭眼状态，同时检测到多媒体显示屏被主动触碰
激活时：首先，点亮显示屏，并且执行周期性获取眼部图像信息操作，例如每隔100毫秒对眼部图像进行采集分析。根据眼部图像信息得到第二距离信息，并且记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间。第一持续时间是乘客保持闭眼状态的时间，也就是说记录多多媒体屏幕被触碰后，乘客仍处于闭眼状态的时间。若乘客保持闭眼状态的持续时间超过设定的第一持续时间阈值，比如保持闭眼状态的时间超过3秒，此时认定为屏幕被误操作，乘客无屏幕使用需求。关闭多媒体屏幕，以达到不影响乘客休息和节省电能的目的。
39.根据本发明实施例，还包括：当为所述乘客模式时；当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕多次被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；根据所述第二距离信息调整所述第二距离阈值。
40.需要说明的是，存在部分乘客由于上眼睑和下眼睑的距离要小于一般乘客的情况，俗称小眼睛。小眼睛乘客可能存在生理上处于睁眼状态但被多媒体设备认定为闭眼状态的情况。当乘客被认定为闭眼状态，同时检测到多媒体显示屏被多次主动触碰激活时：首先，点亮显示屏，并且执行周期性获取眼部图像信息操作，例如每隔100毫秒对眼部图像进行采集分析。其中，多次主动触碰可以是一定时间内被连续激活大于等于2次，比如3秒内显示屏被连续触碰2次。多次主动触碰还可以是屏幕被唤醒后执行关闭操作后，短时间内再次被唤醒，例如，第一次触碰屏幕将屏幕唤醒，多媒体设备检测为闭眼状态关闭显示屏后2秒内再次被激活。这种情况下，多媒体打印机认定乘客为小眼睛乘客，此时，根据眼部图像得到的第二距离信息，调整第二距离阈值。例如，原来第二距离阈值以5mm判断睁眼状态，被判断为小眼睛乘客后，根据此前得到第二距离信息的平均值为3mm为基准，将第二阈值信息设置为2.5mm。
41.值得一提的是，还包括：当为影视播放状态时，获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息和所述视角信息；记录所述第二距离信息不超过预设的第二距离阈值或所述视角信息不在所述预设的空间范围内的第二持续时间；判断所述第二持续时间是否超过第二持续时间阈值；若超过，退出影视播放状态。
42.需要说明的是，第二持续时间是多媒体设备处于影视播放状态时，乘客处于闭眼状态或未看向屏幕的持续时间。当多媒体设备处于影视播放状态时，其中包括播放视频或开启了其他互动程序，例如游戏、短视频程序，记录第二距离信息不超过预设的第二距离阈值或视角信息不在预设的空间范围内的第二持续时间，也就是处于闭眼状态或未看向屏幕的持续时间。当第二持续时间超过预设的第二持续时间阈值时，表示乘客不需要多媒体设备进行影视播放，关闭当前视频或互动程序；当第二持续时间未超过预设的第二持续时间
阈值时，表示乘客只是临时移开视角或眼部休息，保持影视播放状态。例如，乘客保持闭眼或为看向屏幕的持续时间超过1分钟，则关闭多媒体屏幕。
43.值得一提的是，还包括：当为所述乘客模式，获取所述眼部图像信息失败时；根据预设的时间周期分别获取所述第一距离信息和所述热辐射信息，判断所述第一距离信息和所述热辐射信息的变化幅度情况；若所述变化幅度超过预设的变化阈值，则开启显示屏，保持扬声器输出模式；若所述变化幅度不超过预设的变化阈值，根据用户设定的扬声器音量调节模式，对扬声器的输出音量进行调整。
44.需要说明的是，当为乘客模式，却获取眼部图像信息失败时，也就意味着乘客眼部前方存在遮挡物，例如墨镜、眼罩。通过判断所述第一距离信息和所述热辐射信息的变化幅度情况，用于认定乘客是处于佩戴墨镜仍然需要进行人机交互，还是乘客处于佩戴眼罩进入休息状态。根据周期获取红外感应信息得到第一距离信息和热辐射信息，用第一距离信息的变化幅度来表示乘客在垂直于屏幕方向上的变化情况，用热辐射信息对应的热像图来表示乘客在平行于屏幕方向上的变化情况。当屏幕垂直方向或水平方向上任一方向均检测到超过变化阈值的变化幅度时，认定为戴墨镜状态，保持显示屏的人机交互状态。当屏幕垂直方向和水平方向上均检测到不超过变化阈值的变化幅度时，认定为戴眼罩状态，根据乘客预设的音量调节模式，对扬声器输出音量进行调节。例如，乘客带眼罩且姿态持续一段时间没变化，表示乘客进入休息或睡眠状态，此时扬声器的音量就可按照用户设定的方式进行调整，例如每1分钟降低1个等级的音量值。
45.值得一提的是，还包括：从所述乘客模式、所述听觉模式或所述视听模式进入到所述无人模式时，开启计时器，并保存多媒体的工作状态；记录从所述无人模式重新进入到所述乘客模式、所述听觉模式或所述视听模式的间隔时间；判断所述间隔时间是否大于预设的间隔时间阈值；若不大于，恢复多媒体的工作状态。
46.需要说明的是，当检测到乘客离开时，开始定时器计时，并存储当前多媒体的工作状态，例如视频播放、游戏、短视频程序。当检测到乘客再次出现在多媒体设备前，结束计时。也就是说，记录乘客从离开，到下次出现的间隔时间。判断间隔时间是否超过预设的间隔阈值，若不超过，则恢复乘客离开前的工作状态，例如视频播放、游戏、短视频程序。
47.图4示出了本发明一种感应式车载媒体的控制系统的框图。
48.如图4所示，本发明公开了一种感应式车载媒体的控制系统4，包括存储器和处理器，所述存储器中包括感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被所述处理器执行时实现如下步骤：获取红外感应信息；根据红外感应信息得到第一距离信息和热辐射信息；根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；
当为所述乘客模式状态时，获取眼部图像信息；根据眼部图像信息得到第二距离信息和视角信息；根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。
49.需要说明的是，首先，通过红外线传感器利用红外线来进行数据处理获取红外感应信息。红外线传感器常用于无接触温度测量，气体成分分析和无损探伤，例如采用红外线传感器远距离测量人体表面温度的热像图，可以发现温度异常的部位。第一距离信息，是通过红外线传感器测量到的人体距离车载多媒体设备的距离；热辐射信息，是通过红外线传感器测量到的指定方向及角度的一个或多个位置的温度信息，也可以是通过红外线传感器测量到热像图信息。也就是说，通过距离信息可以判断有没有物体在多媒体设备设定的服务区域内；通过热辐射信息可以分析在多媒体设备设定的服务区域内的物体是否在合适的温度区间；再综合实用场景，可以认定在多媒体设备设定的服务区域内的温度合适的对象为乘客。当被认定为有乘客时，即可对多媒体设备的工作状态进行设置。
50.然后，当认定为有乘客在车载多媒体设备前时，通过车载多媒体设备的摄像头捕捉乘客的图像。针对乘客的图像进行处理分析，获得眼部图像的信息。分析眼部图像得到第二距离信息和视角信息，其中，第二距离信息是眼部图像信息中上眼睑到下眼睑的距离，用于判断乘客的睁眼情况；视角信息是眼瞳望向的角度，可用判断乘客眼睛是否看向车载多媒体设备。通过乘客睁眼情况和视角状态对多媒体设备的工作状态进行设置。
51.根据本发明实施例，所述根据第一距离信息和热辐射信息判断进入乘客模式，具体为：判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则判断所述热辐射信息是否超过预设的热辐射阈值；若是，则设置当前模式为乘客模式；若否，则设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则设置当前模式为无人模式。
52.需要说明的是，设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。
53.通过红外线传感器利用红外线来进行数据处理获取红外感应信息，计算得到第一距离信息和热辐射信息。首先，通过第一距离信息可用于测定多媒体设备前方距离最近的物体的距离。多媒体设备前方有没物体的判定标准被设定为测量到的最近的物体的距离是否超过第一距离阈值。也就是说，被设定为测量距离不超过第一距离阈值的情况，表示多媒体设备前有物体；测量距离超过第一距离阈值的情况，表示多媒体设备前无物体。例如，设定距离阈值为0.5米，当测量到的距离不超过0.5米时，表示在多媒体设备前方0.5米距离内有物体；当测量到的距离超过0.5米时，表示在多媒体设备前方0.5米距离内没有物体。然后，热辐射信息，是通过红外线传感器测量到的指定方向及角度的一个或多个位置的温度信息，也可以是通过红外线传感器测量到热像图信息。判断热辐射物体是否为人体的方法，可以通过测量指定方向及角度的一个或多个位置的温度信息，设定热辐射阈值为温度范围例如为35摄氏度至42摄氏度。假如测量的温度值在阈值温度范围内，则可认定是人体；假如测量的温度在阈值温度范围外，则认定为非人体。判断热辐射物体是否为人体的方法，还可
以根据红外线传感器处理得到的热像图作为热辐射信息，通过判断对热像图进行图像处理及识别，描绘热像图形轮廓，可判断被测物体是否能被认定为人体。
54.当认定在多媒体设备前没有物体时，将多媒体设备设定为无人模式，即关闭多媒体屏幕显示及扬声器输出，达到节电的目的。当认定在多媒体设备前有物体，且认定物体为非人体时，表明该物体不是多媒体设备的服务对象，将多媒体设备设定为无人模式，即关闭多媒体屏幕显示及扬声器输出，达到节电的目的。当认定在多媒体设备前有物体，且认定物体为人体时，将多媒体设备设置为乘客模式时，默认不开启多媒体屏幕和开启扬声器输出，表示此时存在多媒体音频服务的对象。
55.根据本发明实施例，所述根据第二距离信息和视角信息判断设置为听觉模式或视听模式，具体包括：为：判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则判断所述视角信息是否位于预设的空间范围内；若是，则设置当前模式为视听模式；若否，则设置当前模式为听觉模式；设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出。
56.需要说明的是，设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。
57.当认定为有乘客在车载多媒体设备前时，通过多媒体设备的摄像头捕捉乘客的图像。针对乘客的图像进行处理分析，获得眼部图像的信息，用以分析眼部图像得到第二距离信息和视角信息。首先，第二距离信息是眼部图像信息中上眼睑到下眼睑的距离，用于判断乘客的睁眼情况。当第二信息距离超过设定阈值时，表示乘客处于睁眼状态；当第二信息距离超过设定阈值时，表示乘客处于闭眼状态。例如，假设设定的第二距离阈值为5mm，当所得到的上眼睑到下眼睑的距离大于5mm时，表示处于睁眼状态；当所得到的上眼睑到下眼睑的距离不大于5mm时，表示处于闭眼状态。然后，视角信息是眼瞳望向的角度，当乘客处于睁眼状态时候，通过判断乘客眼瞳望向的区域，是否在屏幕区域内，可认定乘客的眼睛是否看向屏幕。当乘客眼睛看向的屏幕，认定为乘客需要进行人机交互；当乘客眼睛未看向屏幕，认定为乘客不需要屏幕提供服务。
58.当乘客处于闭眼状态时，表示乘客不需要对屏幕进行操作，保持为乘客模式，保持屏幕处于关闭状态和开启扬声器输出，也就是说，保留声音输出的功能。关闭显示屏以节省电能，保持音频输出功能以满足乘客闭眼听音乐的需求。当乘客处于睁眼状态，并且未看向车载处理器显示屏时，设置为听觉模式，此时的显示屏设置为亮度最低的状态，并且保持扬声器输出。当乘客未看向屏幕时，则通过屏幕调暗，达到节省电能的目的。当乘客处于睁眼状态，并且看向显示屏时，设置为视听模式，用以满足乘客进行人机交互的需求。此时显示屏的亮度是跟随环境亮度自适应调整的，以提高乘客的使用体验。
59.根据本发明实施例，所述自适应调整多媒体屏幕亮度值，具体为：当为所述视听模式时；获取环境亮度信息；根据所述环境亮度信息设置多媒体屏幕亮度值；获取时间信息；根据所述时间信息设置多媒体屏幕进入白天模式或黑夜模式。
60.需要说明的是，当设备处理视听模式时，通过车载多媒体设备的摄像头采集环境
亮度，根据环境亮度自适应调整屏幕的亮度值。在环境亮度较高的情况下，调高屏幕的亮度值，为乘客提供清晰的显示服务；在环境亮度较低的情况下，调低屏幕的亮度值，减少刺眼的感觉，并且达到节省电能的目的。另外，还会根据当地时间，将屏幕设置为白天模式或黑夜模式。白天模式可设定为背景色为白色等较亮的颜色，黑夜模式可设定为背景色为黑色等较暗的颜色，从而提升乘客的观看体验。
61.根据本发明实施例，还包括：当为所述乘客模式时；当所述第二距离信息不超过所述预设的第二距离阈值，且检测到多媒体屏幕被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间；判断所述第一持续时间是否超过第一持续时间阈值；若超过，关闭多媒体屏幕。
62.需要说明的是，当乘客被认定为闭眼状态，同时检测到多媒体显示屏被主动触碰激活时：首先，点亮显示屏，并且执行周期性获取眼部图像信息操作，例如每隔100毫秒对眼部图像进行采集分析。根据眼部图像信息得到第二距离信息，并且记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间。第一持续时间是乘客保持闭眼状态的时间，也就是说记录多多媒体屏幕被触碰后，乘客仍处于闭眼状态的时间。若乘客保持闭眼状态的持续时间超过设定的第一持续时间阈值，比如保持闭眼状态的时间超过3秒，此时认定为屏幕被误操作，乘客无屏幕使用需求。关闭多媒体屏幕，以达到不影响乘客休息和节省电能的目的。
63.根据本发明实施例，还包括：当为所述乘客模式时；当所述第二距离信息不超过所述预设的第二距离阈值，且检测到多媒体屏幕多次被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；根据所述第二距离信息调整所述第二距离阈值。
64.需要说明的是，存在部分乘客由于上眼睑和下眼睑的距离要小于一般乘客的情况，俗称小眼睛。小眼睛乘客可能存在生理上处于睁眼状态但被多媒体设备认定为闭眼状态的情况。当乘客被认定为闭眼状态，同时检测到多媒体显示屏被多次主动触碰激活时：首先，点亮显示屏，并且执行周期性获取眼部图像信息操作，例如每隔100毫秒对眼部图像进行采集分析。其中，多次主动触碰可以是一定时间内被连续激活大于等于2次，比如3秒内显示屏被连续触碰2次。多次主动触碰还可以是屏幕被唤醒后执行关闭操作后，短时间内再次被唤醒，例如，第一次触碰屏幕将屏幕唤醒，多媒体设备检测为闭眼状态关闭显示屏后2秒内再次被激活。这种情况下，多媒体打印机认定乘客为小眼睛乘客，此时，根据眼部图像得到的第二距离信息，调整第二距离阈值。例如，原来第二距离阈值以5mm判断睁眼状态，被判断为小眼睛乘客后，根据此前得到第二距离信息的平均值为3mm为基准，将第二阈值信息设
置为2.5mm。
65.值得一提的是，还包括：当为影视播放状态时，获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息和所述视角信息；记录所述第二距离信息不超过所述预设的第二距离阈值或所述视角信息不在所述预设的空间范围内的第二持续时间；判断所述第二持续时间是否超过第二持续时间阈值；若超过，退出影视播放状态。
66.需要说明的是，第二持续时间是多媒体设备处于影视播放状态时，乘客处于闭眼状态或未看向屏幕的持续时间。当多媒体设备处于影视播放状态时，其中包括播放视频或开启了其他互动程序，例如游戏、短视频程序，记录第二距离信息不超过预设的第二距离阈值或视角信息不在预设的空间范围内的第二持续时间，也就是处于闭眼状态或未看向屏幕的持续时间。当第二持续时间超过预设的第二持续时间阈值时，表示乘客不需要多媒体设备进行影视播放，关闭当前视频或互动程序；当第二持续时间未超过预设的第二持续时间阈值时，表示乘客只是临时移开视角或眼部休息，保持影视播放状态。例如，乘客保持闭眼或为看向屏幕的持续时间超过1分钟，则关闭多媒体屏幕。
67.值得一提的是，还包括：当为所述乘客模式，获取所述眼部图像信息失败时；根据预设的时间周期分别获取所述第一距离信息和所述热辐射信息，判断所述第一距离信息和所述热辐射信息的变化幅度情况；若所述变化幅度超过预设的变化阈值，则开启显示屏，保持扬声器输出模式；若所述变化幅度不超过预设的变化阈值，根据用户设定的扬声器音量调节模式，对扬声器的输出音量进行调整。
68.需要说明的是，当为乘客模式，却获取眼部图像信息失败时，也就意味着乘客眼部前方存在遮挡物，例如墨镜、眼罩。通过判断所述第一距离信息和所述热辐射信息的变化幅度情况，用于认定乘客是处于佩戴墨镜仍然需要进行人机交互，还是乘客处于佩戴眼罩进入休息状态。根据周期获取红外感应信息得到第一距离信息和热辐射信息，用第一距离信息的变化幅度来表示乘客在垂直于屏幕方向上的变化情况，用热辐射信息对应的热像图来表示乘客在平行于屏幕方向上的变化情况。当屏幕垂直方向或水平方向上任一方向均检测到超过变化阈值的变化幅度时，认定为戴墨镜状态，保持显示屏的人机交互状态。当屏幕垂直方向和水平方向上均检测到不超过变化阈值的变化幅度时，认定为戴眼罩状态，根据乘客预设的音量调节模式，对扬声器输出音量进行调节。例如，乘客带眼罩且姿态持续一段时间没变化，表示乘客进入休息或睡眠状态，此时扬声器的音量就可按照用户设定的方式进行调整，例如每1分钟降低1个等级的音量值。
69.值得一提的是，还包括：从所述乘客模式、所述听觉模式或所述视听模式进入到所述无人模式时，开启计时器，并保存多媒体的工作状态；记录从所述无人模式重新进入到所述乘客模式、所述听觉模式或所述视听模式的
间隔时间；判断所述间隔时间是否大于预设的间隔时间阈值；若不大于，恢复多媒体的工作状态。
70.需要说明的是，当检测到乘客离开时，开始定时器计时，并存储当前多媒体的工作状态，例如视频播放、游戏、短视频程序。当检测到乘客再次出现在多媒体设备前，结束计时。也就是说，记录乘客从离开，到下次出现的间隔时间。判断间隔时间是否超过预设的间隔阈值，若不超过，则恢复乘客离开前的工作状态，例如视频播放、游戏、短视频程序。
71.本发明第三方面提供了一种计算机可读存储介质，所述计算机可读存储介质中包括一种感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被处理器执行时，实现如上述任一项所述的感应式车载媒体的控制方法的步骤。
72.本发明提供了一种感应式车载媒体的控制方法、系统和存储介质，首先，根据红外感应信息得到第一距离信息和热辐射信息，用以检测多媒体设备前是否有乘客；然后，根据乘客的眼部图像信息得到第二距离信息和视角信息，用以智能控制多媒体设备的启动与关闭、多媒体设备的屏幕亮度；给予乘客良好的操作体验感的同时，达到节省电能和保护多媒体设备寿命的目的。
73.所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器（rom，read-only memory）、随机存取存储器（ram，random access memory）、磁碟或者光盘等各种可以存储程序代码的介质。
74.以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

技术特征：
1.一种感应式车载媒体的控制方法，其特征在于，所述方法包括：获取红外感应信息；根据红外感应信息得到第一距离信息和热辐射信息；根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；当为所述乘客模式状态时，获取眼部图像信息；根据眼部图像信息得到第二距离信息和视角信息；根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。2.根据权利要求1所述的一种感应式车载媒体的控制方法，其特征在于，所述根据所述第一距离信息和所述热辐射信息判断设置为无人模式或乘客模式，具体为：判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则判断所述热辐射信息是否超过预设的热辐射阈值；若是，则设置当前模式为乘客模式；若否，则设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则设置当前模式为无人模式；设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。3.根据权利要求1所述的一种感应式车载媒体的控制方法，其特征在于，所述根据所述第二距离信息和所述视角信息判断设置为听觉模式或视听模式，具体为：判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则判断所述视角信息是否位于预设的空间范围内；若是，则设置当前模式为视听模式；若否，则设置当前模式为听觉模式；设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。4.根据权利要求3所述的一种感应式车载媒体的控制方法，其特征在于，所述自适应调整多媒体屏幕亮度值，具体为：当为所述视听模式时；获取环境亮度信息；根据所述环境亮度信息设置多媒体屏幕亮度值；获取时间信息；根据所述时间信息设置多媒体屏幕进入白天模式或黑夜模式。5.根据权利要求1所述的一种感应式车载媒体的控制方法，其特征在于，还包括：当为所述乘客模式时；当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；记录所述第二距离信息不超过所述预设的第二距离阈值的第一持续时间；判断所述第一持续时间是否超过第一持续时间阈值；若超过，关闭多媒体屏幕。6.根据权利要求1所述的一种感应式车载媒体的控制方法，其特征在于，还包括：当为所述乘客模式时；
当所述第二距离信息不超过预设的第二距离阈值，且检测到多媒体屏幕多次被主动激活时：开启多媒体屏幕，并获取所述眼部图像信息；根据所述眼部图像信息得到所述第二距离信息；根据所述第二距离信息调整所述第二距离阈值。7.一种感应式车载媒体的控制系统，其特征在于，所述系统包括存储器和处理器，所述存储器中包括感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被所述处理器执行时实现如下步骤：获取红外感应信息；根据红外感应信息得到第一距离信息和热辐射信息；根据所述第一距离信息和所述热辐射信息，设置当前模式为无人模式或乘客模式；当为所述乘客模式状态时，获取眼部图像信息；根据眼部图像信息得到第二距离信息和视角信息；根据所述第二距离信息和所述视角信息，设置当前模式为听觉模式或视听模式。8.根据权利要求7所述的一种感应式车载媒体的控制系统，其特征在于，所述根据第一距离信息和热辐射信息判断进入乘客模式，具体为：判断所述第一距离信息是否超过预设的第一距离阈值；若所述第一距离信息不超过所述预设的第一距离阈值；则判断所述热辐射信息是否超过预设的热辐射阈值；若是，则设置当前模式为乘客模式；若否，则设置当前模式为无人模式；若所述第一距离信息超过所述预设的第一距离阈值，则设置当前模式为无人模式；设置为所述无人模式时，关闭多媒体屏幕和关闭扬声器输出；设置为所述乘客模式时，关闭多媒体屏幕和开启扬声器输出。9.根据权利要求7所述的一种感应式车载媒体的控制系统，其特征在于，所述根据第二距离信息和视角信息判断设置为听觉模式或视听模式，具体为：判断所述第二距离信息是否超过预设的第二距离阈值；若所述第二距离信息超过所述预设的第二距离阈值；则判断所述视角信息是否位于预设的空间范围内；若是，则设置当前模式为视听模式；若否，则设置当前模式为听觉模式；设置为所述听觉模式时，多媒体屏幕亮度值调整为最低值，且保持扬声器输出；设置为所述视听模式时，自适应调整多媒体屏幕亮度值，且保持扬声器输出。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机可读存储介质中包括一种感应式车载媒体的控制方法程序，所述感应式车载媒体的控制方法程序被处理器执行时，实现如权利要求1至6中任一项所述的感应式车载媒体的控制方法的步骤。

技术总结
本发明提供了一种感应式车载媒体的控制方法、系统和存储介质，首先，根据红外感应信息得到第一距离信息和热辐射信息，用以检测多媒体设备前是否有乘客；然后，根据乘客的眼部图像信息得到第二距离信息和视角信息，用以智能控制多媒体设备的启动与关闭、多媒体设备的屏幕亮度；给予乘客良好的操作体验感的同时，达到节省电能和保护多媒体设备寿命的目的。到节省电能和保护多媒体设备寿命的目的。到节省电能和保护多媒体设备寿命的目的。


技术研发人员：郑洪明 臧永昌
受保护的技术使用者：深圳市江元科技（集团）有限公司
技术研发日：2023.09.08
技术公布日：2023/10/15