CN113867527A - 车窗控制方法、装置、电子设备及存储介质 - Google Patents
车窗控制方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113867527A CN113867527A CN202111131695.3A CN202111131695A CN113867527A CN 113867527 A CN113867527 A CN 113867527A CN 202111131695 A CN202111131695 A CN 202111131695A CN 113867527 A CN113867527 A CN 113867527A
- Authority
- CN
- China
- Prior art keywords
- target
- vehicle
- window
- image
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 230000009471 action Effects 0.000 claims abstract description 85
- 238000001514 detection method Methods 0.000 claims description 44
- 230000000391 smoking effect Effects 0.000 claims description 41
- 230000006399 behavior Effects 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 10
- 230000001815 facial effect Effects 0.000 claims description 4
- 239000000779 smoke Substances 0.000 description 11
- 239000011521 glass Substances 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000003062 neural network model Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 235000019504 cigarettes Nutrition 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- PICXIOQBANWBIZ-UHFFFAOYSA-N zinc;1-oxidopyridine-2-thione Chemical class [Zn+2].[O-]N1C=CC=CC1=S.[O-]N1C=CC=CC1=S PICXIOQBANWBIZ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- E—FIXED CONSTRUCTIONS
- E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
- E05F—DEVICES FOR MOVING WINGS INTO OPEN OR CLOSED POSITION; CHECKS FOR WINGS; WING FITTINGS NOT OTHERWISE PROVIDED FOR, CONCERNED WITH THE FUNCTIONING OF THE WING
- E05F15/00—Power-operated mechanisms for wings
- E05F15/70—Power-operated mechanisms for wings with automatic actuation
- E05F15/73—Power-operated mechanisms for wings with automatic actuation responsive to movement or presence of persons or objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Power-Operated Mechanisms For Wings (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种车窗控制方法、装置、电子设备及存储介质，该车窗控制方法包括：获取反映车内环境的待检测图像；基于所述待检测图像，确定所述车内的目标人员的视线注视区域；在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。本公开实施例，通过将车内目标人员的视线注视区域以及目标控制信息相结合，实现了对车窗的自动控制，避免了手动操作，提高了驾乘体验。
Description
技术领域
本公开涉及车辆控制技术领域，具体而言，涉及一种车窗控制方法、装置、电子设备和存储介质。
背景技术
目前，在车辆设计制造过程中，越来越侧重于车辆的舒适性、便捷操控性以及智能化控制。现有的车辆车窗控制中，多采用一键升降开关，通过一键升降开关触发开关信号，使车辆控制单元，控制车窗升降电机运转，进而将车窗调整至关闭或是开启状态。因此，现有技术中的车窗控制系统中，大都采用人为开关控制，难以根据驾乘人员的意图自动化地调节车窗状态。
发明内容
本公开实施例至少提供一种车窗控制方法、装置、电子设备及存储介质。
第一方面，本公开实施例提供了一种车窗控制方法，包括：
获取反映车内环境的待检测图像；
基于所述待检测图像，确定所述车内的目标人员的视线注视区域；
在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
本公开实施例中，通过将车内人员的视线注视区域以及控制信息相结合，实现了对车窗的自动控制，提升了驾驶员的驾驶体验以及乘客的乘车体验。
根据第一方面，在一种可能的实施方式中，所述基于所述待检测图像，确定车内的目标人员的视线注视区域，包括：
基于所述待检测图像，检测所述车内的人员是否存在抽烟行为；
在检测到所述车内的人员存在抽烟行为的情况下，基于待检测图像，确定所述车内的目标人员的视线注视区域；
所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作，包括：
控制所述目标车窗打开。
根据第一方面，在一种可能的实施方式中，所述基于所述待检测图像，确定所述车内的目标人员的视线注视区域，包括：
基于所述待检测图像，确定抽烟的所述目标人员的视线注视区域。
根据第一方面，在一种可能的实施方式中，在检测到所述车内的人员存在抽烟行为的情况下，所述方法还包括：
发出目标提示信息。
根据第一方面，在一种可能的实施方式中，所述发出目标提示信息，包括：
基于所述待检测图像，确定所述车内的人员的属性特征；
确定与所述车内的人员的属性特征对应的目标提示信息，并发送所述目标提示信息。
根据第一方面，在一种可能的实施方式中，所述基于所述待检测图像，确定所述车内的人员的属性特征，包括：
基于所述待检测图像，确定所述车内的抽烟人员的属性特征；
所述确定与所述车内的人员的属性特征对应的目标提示信息，包括：
在所述抽烟人员的属性特征指示所述抽烟人员的年龄小于预设年龄的情况下，确定与年龄小于预设年龄的抽烟人员对应的目标提示信息。
根据第一方面，在一种可能的实施方式中，所述确定与所述车内的人员的属性特征对应的目标提示信息，包括：
在所述车内的人员的属性特征指示所述车内存在预设的受保护人员的情况下，确定与所述受保护人员对应的目标提示信息。
根据第一方面，在一种可能的实施方式中，所述控制所述目标车窗打开，包括：
获取所述目标车窗的状态信息；
基于所述状态信息，控制所述目标车窗打开的幅度。
根据第一方面，在一种可能的实施方式中，所述基于所述位置状态信息，控制所述目标车窗打开，包括：
获取车辆所处位置的天气信息；
基于所述状态信息以及所述天气信息，控制所述目标车窗打开的幅度。
根据第一方面，在一种可能的实施方式中，所述获取车辆所处位置的天气信息，包括：
获取所述车辆的雨刮器的状态信息；
根据所述雨刮器的状态信息，确定所述车辆所处位置的天气信息。
根据第一方面，在一种可能的实施方式中，所述基于所述待检测图像，确定所述车内的目标人员的视线注视区域，包括：
基于所述待检测图像进行人脸检测；
根据所述人脸检测结果确定目标人员的人脸图像；
基于所述目标人员的人脸图像确定所述目标人员的视线注视区域。
根据第一方面，在一种可能的实施方式中，在所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，所述方法还包括：
根据所述待检测图像检测所述目标人员的手势动作；
根据所述手势动作的检测结果，确定所述目标人员是否发出所述指示车窗执行目标动作的手势控制信息。
根据第一方面，在一种可能的实施方式中，在所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，所述方法还包括：
获取所述车内的语音信息；
识别所述语音信息的对应说话人和说话内容；
在所述语音信息对应的说话人是所述目标人员的情况下，根据所述说话内容的识别结果，确定所述目标人员是否发出所述指示车窗执行目标动作的语音控制信息。
根据第一方面，在一种可能的实施方式中，在所述目标人员包括驾驶员和乘客的情况下，所述驾驶员输出的控制信息的优先级高于所述乘客输出的控制信息的优先级；
所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作，包括：
根据所述目标人员的优先级，控制与所述车窗位置区域对应的目标车窗执行所述目标动作。
第二方面，本公开实施例提供了一种车窗控制装置，包括：
图像获取模块，用于获取反映车内环境的待检测图像；
视线检测模块，用于基于所述待检测图像，确定所述车内的目标人员的视线注视区域；
车窗控制模块，用于在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
根据第二方面，在一种可能的实施方式中，所述视线检测模块具体用于：
基于所述待检测图像，检测所述车内的人员是否存在抽烟行为；
在检测到所述车内的人员存在抽烟行为的情况下，基于待检测图像，确定所述车内的目标人员的视线注视区域；
所述车窗控制模块具体用于：
控制所述目标车窗打开。
根据第二方面，在一种可能的实施方式中，视线检测模块具体用于：
基于所述待检测图像，确定抽烟的所述目标人员的视线注视区域。
根据第二方面，在一种可能的实施方式中，所述车窗控制装置还包括信息发送模块；所述信息发送模块用于：
发出目标提示信息。
根据第二方面，在一种可能的实施方式中，信息发送模块具体用于：
基于所述待检测图像，确定所述车内的人员的属性特征；
确定与所述车内的人员的属性特征对应的目标提示信息，并发送所述目标提示信息。
根据第二方面，在一种可能的实施方式中，信息发送模块具体用于：
基于所述待检测图像，确定所述车内的抽烟人员的属性特征；
在所述抽烟人员的属性特征指示所述抽烟人员的年龄小于预设年龄的情况下，确定与年龄小于预设年龄的抽烟人员对应的目标提示信息。
根据第二方面，在一种可能的实施方式中，信息发送模块具体用于：
在所述车内的人员的属性特征指示所述车内存在预设的受保护人员的情况下，确定与所述受保护人员对应的目标提示信息。
根据第二方面，在一种可能的实施方式中，所述车窗控制模块具体用于：
获取所述目标车窗的状态信息；
基于所述状态信息，控制所述目标车窗打开的幅度。
根据第二方面，在一种可能的实施方式中，所述车窗控制模块具体用于：
获取车辆所处位置的天气信息；
基于所述状态信息以及所述天气信息，控制所述目标车窗打开的幅度。
根据第二方面，在一种可能的实施方式中，所述车窗控制模块具体用于：
获取所述车辆的雨刮器的状态信息；
根据所述雨刮器的状态信息，确定所述车辆所处位置的天气信息。
根据第二方面，在一种可能的实施方式中，视线检测模块具体用于：
基于所述待检测图像进行人脸检测；
根据所述人脸检测结果确定目标人员的人脸图像；
基于所述目标人员的人脸图像确定所述目标人员的视线注视区域。
根据第二方面，在一种可能的实施方式中，所述装置还包括手势检测模块，所述手势检测模块用于：
根据所述待检测图像检测所述目标人员的手势动作；
根据所述手势动作的检测结果，确定所述目标人员是否发出所述指示车窗执行目标动作的手势控制信息。
根据第二方面，在一种可能的实施方式中，所述装置还包括语音检测模块，所述语音检测模块用于：
获取所述车内的语音信息；
识别所述语音信息的对应说话人和说话内容；
在所述语音信息对应的说话人是所述目标人员的情况下，根据所述说话内容的识别结果，确定所述目标人员是否发出所述指示车窗执行目标动作的语音控制信息。
根据第二方面，在一种可能的实施方式中，在所述目标人员包括驾驶员和乘客的情况下，所述驾驶员输出的控制信息的优先级高于所述乘客输出的控制信息的优先级；所述车窗控制模块具体用于：
根据所述目标人员的优先级，控制与所述车窗位置区域对应的目标车窗执行所述目标动作。
第三方面，本公开实施例提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面所述的车窗控制方法的步骤。
第四方面，本公开实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面所述的车窗控制方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种车窗控制方法的流程图；
图2示出了本公开实施例所提供的另一种车窗控制方法的流程图；
图3示出了本公开实施例所提供的一种控制目标车窗打开的方法流程图；
图4示出了本公开实施例所提供的一种基于天气信息控制目标车窗打开的方法流程图；
图5示出了本公开实施例所提供的再一种车窗控制方法的流程图；
图6示出了本公开实施例所提供的一种发送目标提示信息的方法流程图。
图7示出了本公开实施例所提供的一种确定手势控制信息的方法流程图；
图8示出了本公开实施例所提供的一种确定语音控制信息的方法流程图
图9示出了本公开实施例所提供的一种车窗控制装置的结构示意图；
图10示出了本公开实施例所提供的另一种车窗控制装置的结构示意图；
图11示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”，仅仅是描述一种关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
目前，在车辆设计制造过程中，越来越侧重于车辆的舒适性、便捷操控性以及智能化控制。现有的车辆车窗控制中，多采用一键升降开关，通过一键升降开关触发开关信号，使车辆控制单元，控制车窗升降电机运转，进而将车窗调整至关闭或是所需的开启幅度。因此，现有技术中的车窗控制系统中，大都采用人为开关控制，以调节车窗的开启幅度。
经研究发现，手动调节方式，不仅会分散驾驶员的注意力，还需要车内人员靠近车窗才能实现车窗的手动调节，因此，不仅影响了驾驶员的驾驶体验，还影响了车内乘客的乘车体验。
基于上述研究，本公开提供了一种车窗控制方法，首先获取反映车内环境的待检测图像；接着基于所述待检测图像，确定所述车内的目标人员的视线注视区域；然后在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。如此，通过将车内人员的视线注视区域以及控制信息相结合，实现了对车窗的自动控制，提升了驾驶员的驾驶体验以及乘客的乘车体验。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种车窗控制方法进行详细介绍，本公开实施例所提供的车窗控制方法的执行主体一般为具有一定计算能力的电子设备，该电子设备例如包括：终端设备或服务器或其它处理设备，终端设备可以为用户终端、手持设备、计算设备、车载设备、可穿戴设备等。服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云存储、大数据和人工智能平台等基础云计算服务的云服务器。在一些可能的实现方式中，该车窗控制方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
参见图1所示，为本公开实施例提供的车窗控制方法的流程图，该车窗控制方法包括以下S101～S103：
S101，获取反映车内环境的待检测图像。
示例性地，可以获取图像采集部件(比如摄像头)采集的车内环境图像，得到待检测图像。其中，图像采集部件可以安装在车辆A柱或者车内后视镜等部位并且朝向车舱内安装，当然，图像采集部件也可以安装于车辆内部的其他部位，只要能够实现对车内环境图像的采集即可。另外，图像采集部件的数量在此不做限定，比如可以是一个、两个或者多个。
S102，基于所述待检测图像，确定所述车内的目标人员的视线注视区域。
其中，目标人员可以根据需求而预先设定，比如目标人员可以是驾驶员，也可以是乘客，还可以是车辆内部所乘坐的所有人员，包括驾驶员以及乘客。或者，可以对待检测图像进行人员检测，将检测出的乘车人员中的一个或多个作为目标人员。又或者，目标人员是具有特定特征的人员，例如身份特征、行为特征、外貌特征、年龄特征等中的至少一个，这种情况下可以从待检测图像中检测出具有该特定的特征的人员作为目标人员。此外，目标人员的数量也不做限定，比如可以是一个也可以是多个。目标人员的视线注视区域是指目标人员的目光注视方向与车辆内部所交叠的区域。
示例性地，可以基于所述待检测图像进行人脸检测，然后根据所述人脸检测结果分割出目标人员的人脸图像，再基于所述目标人员的人脸图像确定所述目标人员的视线注视区域。
具体地，可以采用人脸检测模型，对待检测图像进行人脸检测识别，得到人脸检测结果，然后再将人脸检测结果与目标人员的人脸图像进行匹配，确定目标人员的人脸图像，进而基于目标人员的人脸图像中的眼睛部位以及面部方向等，确定目标人员的视线注视区域。
目标人员的视线注视区域可以采用神经网络模型来预测，例如将目标人员的人脸图像和/或眼部图像输入至预先训练的视线方向检测模型，得到目标人员的视线方向。然后根据包含车窗在内的车内结构部件的三维空间位置、以及车内图像的摄像头的标定参数，以及视线方向确定目标人员的视线落点，从而确定出目标人员在车内的视线注视的区域，进而判断目标人员的视线注视区域是否为车窗位置区域。
S103，在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
示例性地，视线注视区域为车窗位置区域是指，所述视线注视区域与车窗区域存在交集。可以理解，由于车辆包括多个车窗，根据视线注视区域，可以从多个车窗中确定目标车窗。
其中，车窗执行打开动作是指车窗的玻璃下降的动作，该打开可以是完全打开，也可以是打开一部分，只要车窗的玻璃相对于初始状态下降了，即可认为车窗执行了打开动作。同理，车窗执行关闭动作是指车窗的玻璃上升的动作，该关闭可以是完全关闭，也可以是关闭一部分，只要车窗的玻璃相对于初始状态上升了，即可认为车窗执行了关闭动作。
所述手势控制信息可以是预先定义的用于控制车窗的手势信息，比如“OK”的手势信息、“剪刀”手势信息或者“拳头”手势信息，在此不做限定。语音控制信息的具体内容语言种类不做限定，例如，可以是“请打开车窗”、“请关闭车窗”、“open the window”等，在此不做限定。具体地，控制信息可以指包括手势控制信息，也可以只包括语音控制信息，还可以同时包括手势控制信息和语音控制信息。
手势控制信息可以通过待检测图像或车内的其他摄像头采集的图像进行识别。具体地，在确定车内的目标人员的情况下，可以基于一帧或多帧待检测图像或车内的其他摄像头采集的图像识别该目标人员的手势动作，例如分割出目标人员的图像，之后检测手部区域并提取手部特征，进而根据手部特征识别手势。
语音控制信息可以采用语音识别技术对车内的音频信号进行识别得出。示例性地，可以对车内的音频采集设备采集到的音频信号进行降噪处理，提取出人声信号，基于人声信号识别语音内容，得到语音控制信息。
在一些实施方式中，在所述目标人员包括驾驶员和乘客的情况下，所述驾驶员输出的控制信息的优先级高于所述乘客输出的信息的优先级。也即，在目标人员既包括驾驶员也包括非驾驶员的乘客的情况下，根据所述目标人员的优先级，控制与所述车窗位置区域对应的目标车窗执行所述目标动作，优先响应驾驶员输出的控制信息。如此，可以避免在同时接收到多个目标人员输的目标控制信息不同时，而引起冲突的情况发生。另外，由于驾驶员通常为车辆的车主，对车辆较为熟悉，输出的目标控制信息具有更高的精准度。
需要说明的是，本实施例中目标人员控制的车窗可以是与其座位位置对应的车窗，或者也可以是全车的任意一扇车窗。例如副驾驶可控制副驾驶一侧的车窗，也可以控制其他车窗。在一些实施例中，可以通过对不同座位上的乘车人或注册身份信息的乘车人的车窗控制权限进行配置，确定允许每个座位的乘车人/每个注册身份信息的乘车人通过视线结合语音或手势控制的车窗，在实际行车过程中根据待检测图像识别目标人员的座位或身份，读取相应的车窗控制权限信息判断目标人员是否具有控制目标车窗的权限，如果具有权限，则执行控制目标车窗执行目标动作，否则不对目标车窗执行控制或进一步确认乘车人的意图或指令后再执行目标车窗的控制。
本公开实施例中，通过将车内目标人员的视线注视区域以及手势和/或控制信息相结合，实现了多模态信息融合的车窗自动控制，提升了驾驶员的驾驶体验以及乘客的乘车体验。
请参阅图2，为本公开实施例提供的另一种车窗控制方法的流程图，该车窗控制方法包括以下S201～S204：
S201，获取反映车内环境的待检测图像。
该步骤与前述步骤S101类似，在此不再赘述。
S202，基于所述待检测图像，检测所述车内的人员是否存在抽烟行为；若是，则执行步骤S203；若否，则返回继续执行步骤S202。
示例性地，可以先对待检测图像进行人脸检测识别，在检测出人脸图像之后，可以对车内的人员的抽烟行为进行检测。在一些实施方式中，可以基于预先训练的头肩检测模型，检测车内的人员的头肩属性特征；基于所述头肩属性特征，对车内的人员进行抽烟行为检测。
其中，头肩检测模型为一种神经网络模型，其可以通过采集大量的抽烟行为所对应的头肩行为的数据样本进行学习训练而获得。例如，可以采集抽烟所对应的大量的头肩区域的行为特征的样本，然后通过对这些样本进行训练，而得到相应的神经网络模型。如此，在通过该头肩检测模型对人脸图像进行检测时，即可识别出人脸图像中的具体的头肩行为特征。
其中，抽烟行为对应的是嘴部动作特征、头部动作特征及肩部动作特征。具体地，在抽烟时，目标人员的嘴部会张开再闭合以将香烟放入口中，且在放入香烟抽吸香烟以及将香烟从嘴部取出的时候，头部及肩部的行为都会发生变化。
S203，基于待检测图像，确定所述车内的目标人员的视线注视区域。
该步骤与前述步骤S102类似，在此不再赘述。
可以理解，由于烟雾是因抽烟的人员所引起的，为了方便烟雾尽快散出，可打开靠近抽烟的目标人员的车窗，因此，在一些实施方式中，可以基于待检测图像，确定抽烟的所述目标人员的视线注视区域。其中，抽烟的目标人员可以是驾驶员，也可以是乘客，在此不做限定。也即，在存在多个目标人员的情况下，以抽烟的目标人员的视线注视区域为准，如此，不仅方便烟雾尽快散出，还可以提高目标车窗确认的精准度。
S204，控制与所述车窗位置区域对应的目标车窗打开。
可以理解，由于前述已检测到车内的人员存在抽烟行为，为了方便烟雾散出，应控制车窗打开。
其中，在一些实施例中，若车内存在多个人员，则可以在一个人员抽烟的情况下，车窗内任意一个乘车人(包括抽烟的人员)都可以通过视线注视区域和控制信息来控制车窗打开，这时在检测到车内的任意一个乘车人员(可以是抽烟的人员或其他乘车人员)注视车窗位置区域时将该乘车人员作为目标人员；在另一些实施例中，若车内只存在一个人员且存在抽烟行为，则通过抽烟的目标人员的视线注视区域和控制信息来控制车窗打开。
本公开实施例中，可以在检测到车内人员抽烟的情况下，根据目标人员输出的控制信息将车窗打开，如此，方便乘车人员自由地控制车窗打开以便于烟雾快速删除，且无需乘车人手动触控，进一步提升了驾乘体验。
下面将结合具体实施例对上述S204进行详细介绍。
针对上述S204，在控制与所述车窗位置区域对应的目标车窗打开时，如图3所示，可以包括以下S2041～S2042：
S2041，获取所述目标车窗的状态信息。
S2042，基于所述状态信息，控制所述目标车窗打开的幅度。
其中，目标车窗打开的幅度是指，目标车窗执行打开动作的过程的相对幅度。
示例性地，在控制车窗执行打开动作之前，需要获取目标车窗的状态信息，一些实施方式中，车窗的状态信息是指车窗的玻璃的位置状态信息，如此，可以针对不同的位置状态信息，控制目标车窗打开过程的相对幅度。
例如，以目标车窗最终的打开幅度为二分之一为例进行说明，若目标车窗的玻璃的初始状态为未打开状态，则控制目标车窗打开一半即可，也即目标车窗打开的相对幅度为二分之一；若目标车窗的玻璃的初始状态为打开四分之一，则只需控制目标车窗的玻璃继续打开四分之一即可，也即此时目标车窗打开的相对幅度为四分之一，如此，不论目标车窗的玻璃的初始状态如何，目标车窗的玻璃最终打开幅度都为二分之一，使得车窗打开后的最后位置符合需求，进一步提升了驾乘体验。
在一些实施方式中，针对上述S2042，在基于所述位置状态信息，控制所述目标车窗打开的幅度时，如图4所示，可以包括以下S20421～S20422：
S20421，获取车辆所处位置的天气信息。
S20422，基于所述状态信息以及所述天气信息，控制所述目标车窗打开的幅度。
在一些实施方式中，车辆所处位置的天气信息可以通过提供天气信息服务的服务器获取，或者，可以通过发布于各网站、应用程序中的天气信息版块的内容获取车辆所处地理位置的天气信息。
示例性地，可以依据天气信息确定目标车窗的最终打开幅度，例如，若车辆当前所处的天气信息为晴天，则目标车窗的最终打开幅度可以大一些(如四分之三)，而若车辆当前所处的天气信息为雨天，则目标车窗的最终打开幅度可以小一些(比如四分之一)；在根据天气信息确定最终的打开幅度之后，再基于目标车窗的状态信息，确定目标车窗打开的相对幅度。
在一些实施方式中，可以获取所述车辆的雨刮器的状态信息，并根据雨刮器的状态信息来确定所述车辆所处的位置的天气信息。具体地，可以根据雨刮器的摆动频率确定当前车辆所处位置的雨量的大小，进而根据雨量的大小来确定目标车窗的最终打开幅度。例如，在车辆所处位置下小雨时或者不下雨时可以将车窗打开较大的幅度，而车辆所处位置下中雨时可以将车窗打开较小的幅度。如此，可以根据车辆自身的信号来分析外部的天气状况，无需联网获取天气信息。
本公开实施例中，结合天气信息和目标车窗的状态信息，来确定目标车窗的打开幅度，可以使得目标车窗的打开位置与天气状况匹配，更加符合实际需求，进一步提高驾乘体验。
请参阅图5，为本公开实施例提供的再一种车窗控制方法的流程图，与图2中所示的车窗控制方法不同的是，还包括以下S205：
S205，发出目标提示信息。
示例性地，在检测到车内人员存在抽烟行为的情况下，可以发出目标提示信息，以对抽烟人员进行提示，如此，有利于实现座舱的智能化。
示例性地，参见图6所示，针对步骤S205，在发出目标提示信息时，可以包括以下S2051～S2052：
S2051，基于所述待检测图像，确定所述车内的人员的属性特征。
示例性地，可以通过对待检测图像进行人脸检测，得到人脸图像，然后基于人脸图像，确定所述车内的抽烟人员的属性特征。当然，还可以基于人脸图像确定车内任意的一个或多个人员的属性特征。
S2052，确定与所述车内的人员的属性特征对应的目标提示信息，并发送所述目标提示信息。
具体地，在一些实施方式中，可以通过对待检测图像进行人脸识别，得到人脸图像，基于人脸图像分析目标人员属性特征，该属性特征包括但不限于年龄、性别、情绪、是否处于睡眠状态等。若步骤S2051中，所述抽烟人员的属性特征指示所述抽烟人员的年龄小于预设年龄的情况下，则确定与年龄小于预设年龄的抽烟人员对应的目标提示信息。比如目标提示信息可以是“您是未成年人，请勿吸烟”。
若步骤S2051中，所述车内的人员的属性特征指示所述车内存在预设的受保护人员的情况下，确定与所述受保护人员对应的目标提示信息。其中，受保护人员包括但不限于儿童、孕妇和病人等中的至少一个。比如，通过对人脸图像分析，确定车内人员中包括儿童或者孕妇的情况下，可以发出“请勿吸烟”的目标提示信息。如此，基于车内人员的属性特征，发送相对应的目标提示信息，可以使得所发送的目标提示信息更加具有针对性。
在另一些实施方式中，在检测到所述目标人员存在抽烟行为后，还可以基于待检测图像对抽烟的人员在预设时间段内的抽烟行为的发生频次进行统计分析；在所述频次到达预设频次的情况下，发出对应的目标提示信息。例如，若检测到目标人员连续抽烟大于3次以上，则发送“您的抽烟次数过多，请勿过多吸烟”的目标提示信息。
下面针对前述提到的手势控制信息以及语音控制信息的确定进行详细介绍。
参见图7所示，为本公开实施例提供的一种确定手势控制信息的方法流程图，可以理解，在步骤S103，所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，如图7所示，所述车窗控制方法还包括以下S301～S302：
S301，根据所述待检测图像检测所述目标人员的手势动作。
S302，根据所述手势动作的检测结果，确定所述目标人员是否发出所述指示车窗执行目标动作的手势控制信息。
示例性地，可以采用神经网络模型对待检测图像进行检测识别，得到目标人员的手势动作的检测结果，在目标人员的手势动作的检测结果和预设的手势动作匹配的情况下，确定目标人员发出所述指示车窗执行目标动作的手势控制信息。
参见图8所示，为本公开实施例提供的一种确定语音控制信息的方法流程图，可以理解，在步骤S103，所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，如图8所示，所述车窗控制方法还包括以下S401～S403：
S401，获取所述车内的语音信息。
示例性地，可以通过车内安装的声音采集装置(比如麦克风)来获取车内的语音信息。
S402，识别所述语音信息的对应说话人和说话内容。
示例性地，可以采用音频处理技术识别所述语音信息对应的说话人和说话内容。比如可以通过音色来确定语音信息的对应说话人，若语音信息的音色和预设的目标人员的音色匹配，则确定语音信息对应的说话人是所述目标人员。
S403，在所述语音信息对应的说话人是所述目标人员的情况下，根据所述说话内容的识别结果确定所述目标人员是否发出所述指示车窗执行目标动作的语音控制信息。
示例性地，若说话内容的识别结果与预设的语音内容匹配，则确定目标人员发出所述指示车窗执行目标动作的语音控制信息。其中，语音内容匹配是指内容的意思相近，并不需要内容完全相同，比如，若预设语音内容为“打开车窗”，而说话内容为“开窗”则确定匹配。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一技术构思，本公开实施例中还提供了与车窗控制方法对应的车窗控制装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述车窗控制方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图9所示，为本公开实施例提供的一种车窗控制装置500的示意图，该车窗控制装置500包括：
图像获取模块501，用于获取反映车内环境的待检测图像；
视线检测模块502，用于基于所述待检测图像，确定所述车内的目标人员的视线注视区域；
车窗控制模块503，用于在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
在一种可能的实施方式中，所述视线检测模块502具体用于：
基于所述待检测图像，检测所述车内的人员是否存在抽烟行为；
在检测到所述车内的人员存在抽烟行为的情况下，基于待检测图像，确定所述车内的目标人员的视线注视区域；
所述车窗控制模块503具体用于：
控制所述目标车窗打开。
在一种可能的实施方式中，视线检测模块502具体用于：
基于所述待检测图像，确定抽烟的所述目标人员的视线注视区域。
在一种可能的实施方式中，所述车窗控制装置500还包括信息发送模块504；所述信息发送模块504用于：
发出目标提示信息。
在一种可能的实施方式中，信息发送模块504具体用于：
基于所述待检测图像，确定所述车内的人员的属性特征；
确定与所述车内的人员的属性特征对应的目标提示信息，并发送所述目标提示信息。
在一种可能的实施方式中，信息发送模块504具体用于：
基于所述待检测图像，确定所述车内的抽烟人员的属性特征；
在所述抽烟人员的属性特征指示所述抽烟人员的年龄小于预设年龄的情况下，确定与年龄小于预设年龄的抽烟人员对应的目标提示信息。
在一种可能的实施方式中，信息发送模块504具体用于：
在所述车内的人员的属性特征指示所述车内存在预设的受保护人员的情况下，确定与所述受保护人员对应的目标提示信息。
在一种可能的实施方式中，所述车窗控制模块503具体用于：
获取所述目标车窗的状态信息；
基于所述状态信息，控制所述目标车窗打开的幅度。
在一种可能的实施方式中，所述车窗控制模块503具体用于：
获取车辆所处位置的天气信息；
基于所述状态信息以及所述天气信息，控制所述目标车窗打开的幅度。
在一种可能的实施方式中，所述车窗控制模块503具体用于：
获取所述车辆的雨刮器的状态信息；
根据所述雨刮器的状态信息，确定所述车辆所处位置的天气信息。
在一种可能的实施方式中，视线检测模块502具体用于：
基于所述待检测图像进行人脸检测；
根据所述人脸检测结果确定目标人员的人脸图像；
基于所述目标人员的人脸图像确定所述目标人员的视线注视区域。
在一种可能的实施方式中，所述装置还包括手势检测模块505，所述手势检测模块用于：
根据所述待检测图像检测所述目标人员的手势动作；
根据所述手势动作的检测结果，确定所述目标人员是否发出所述指示车窗执行目标动作的手势控制信息。
在一种可能的实施方式中，所述装置还包括语音检测模块506，所述语音检测模块用于：
获取所述车内的语音信息；
识别所述语音信息的对应说话人和说话内容；
在所述语音信息对应的说话人是所述目标人员的情况下，根据所述说话内容的识别结果，确定所述目标人员是否发出所述指示车窗执行目标动作的语音控制信息。
在一种可能的实施方式中，在所述目标人员包括驾驶员和乘客的情况下，所述驾驶员输出的控制信息的优先级高于所述乘客输出的控制信息的优先级；所述车窗控制模块503具体用于：
根据所述目标人员的优先级，控制与所述车窗位置区域对应的目标车窗执行所述目标动作。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
基于同一技术构思，本公开实施例还提供了一种电子设备。参照图11所示，为本公开实施例提供的电子设备700的结构示意图，包括处理器701、存储器702、和总线703。其中，存储器702用于存储执行指令，包括内存7021和外部存储器7022；这里的内存7021也称内存储器，用于暂时存放处理器701中的运算数据，以及与硬盘等外部存储器7022交换的数据，处理器701通过内存7021与外部存储器7022进行数据交换。
本申请实施例中，存储器702具体用于存储执行本申请方案的应用程序代码，并由处理器701来控制执行。也即，当电子设备700运行时，处理器701与存储器702之间通过总线703通信，使得处理器701执行存储器702中存储的应用程序代码，进而执行前述任一实施例中所述的方法。
其中，存储器702可以是，但不限于，随机存取存储器(Random Access Memory，RAM)，只读存储器(Read Only Memory，ROM)，可编程只读存储器(Programmable Read－Only Memory，PROM)，可擦除只读存储器(Erasable Programmable Read－Only Memory，EPROM)，电可擦除只读存储器(Electric Erasable Programmable Read－Only Memory，EEPROM)等。
处理器701可能是一种集成电路芯片，具有信号的处理能力。上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(NetworkProcessor，NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
可以理解的是，本申请实施例示意的结构并不构成对电子设备700的具体限定。在本申请另一些实施例中，电子设备700可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中的车窗控制方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品，该计算机程序产品承载有程序代码，所述程序代码包括的指令可用于执行上述方法实施例中的车窗控制方法的步骤，具体可参见上述方法实施例，在此不再赘述。
其中，上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software Development Kit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。
Claims (17)
1.一种车窗控制方法，其特征在于，包括：
获取反映车内环境的待检测图像；
基于所述待检测图像，确定所述车内的目标人员的视线注视区域；
在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
2.根据权利要求1所述的方法，其特征在于，所述基于所述待检测图像，确定车内的目标人员的视线注视区域，包括：
基于所述待检测图像，检测所述车内的人员是否存在抽烟行为；
在检测到所述车内的人员存在抽烟行为的情况下，基于待检测图像，确定所述车内的目标人员的视线注视区域；
所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作，包括：
控制所述目标车窗打开。
3.根据权利要求2所述的方法，其特征在于，所述基于所述待检测图像，确定所述车内的目标人员的视线注视区域，包括：
基于所述待检测图像，确定抽烟的所述目标人员的视线注视区域。
4.根据权利要求2或3所述的方法，其特征在于，在检测到所述车内的人员存在抽烟行为的情况下，所述方法还包括：
发出目标提示信息。
5.根据权利要求4所述的方法，其特征在于，所述发出目标提示信息，包括：
基于所述待检测图像，确定所述车内的人员的属性特征；
确定与所述车内的人员的属性特征对应的目标提示信息，并发送所述目标提示信息。
6.根据权利要求5所述的方法，其特征在于，所述基于所述待检测图像，确定所述车内的人员的属性特征，包括：
基于所述待检测图像，确定所述车内的抽烟人员的属性特征；
所述确定与所述车内的人员的属性特征对应的目标提示信息，包括：
在所述抽烟人员的属性特征指示所述抽烟人员的年龄小于预设年龄的情况下，确定与年龄小于预设年龄的抽烟人员对应的目标提示信息。
7.根据权利要求5所述的方法，其特征在于，所述确定与所述车内的人员的属性特征对应的目标提示信息，包括：
在所述车内的人员的属性特征指示所述车内存在预设的受保护人员的情况下，确定与所述受保护人员对应的目标提示信息。
8.根据权利要求2-7任一所述的方法，其特征在于，所述控制所述目标车窗打开，包括：
获取所述目标车窗的状态信息；
基于所述状态信息，控制所述目标车窗打开的幅度。
9.根据权利要求8所述的方法，其特征在于，所述基于所述状态信息，控制所述目标车窗打开，包括：
获取车辆所处位置的天气信息；
基于所述状态信息以及所述天气信息，控制所述目标车窗打开的幅度。
10.根据权利要求9所述的方法，其特征在于，所述获取车辆所处位置的天气信息，包括：
获取所述车辆的雨刮器的状态信息；
根据所述雨刮器的状态信息，确定所述车辆所处位置的天气信息。
11.根据权利要求1-10任一项所述的方法，其特征在于，所述基于所述待检测图像，确定所述车内的目标人员的视线注视区域，包括：
基于所述待检测图像进行人脸检测；
根据所述人脸检测结果确定目标人员的人脸图像；
基于所述目标人员的人脸图像确定所述目标人员的视线注视区域。
12.根据权利要求1-11任一项所述的方法，其特征在于，在所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，所述方法还包括：
根据所述待检测图像检测所述目标人员的手势动作；
根据所述手势动作的检测结果，确定所述目标人员是否发出所述指示车窗执行目标动作的手势控制信息。
13.根据权利要求1-12任一项所述的方法，其特征在于，在所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作之前，所述方法还包括：
获取所述车内的语音信息；
识别所述语音信息的对应说话人和说话内容；
在所述语音信息对应的说话人是所述目标人员的情况下，根据所述说话内容的识别结果，确定所述目标人员是否发出所述指示车窗执行目标动作的语音控制信息。
14.根据权利要求1所述的方法，其特征在于，在所述目标人员包括驾驶员和乘客的情况下，所述驾驶员输出的控制信息的优先级高于所述乘客输出的控制信息的优先级；
所述控制与所述车窗位置区域对应的目标车窗执行所述目标动作，包括：
根据所述目标人员的优先级，控制与所述车窗位置区域对应的目标车窗执行所述目标动作。
15.一种车窗控制装置，其特征在于，包括：
图像获取模块，用于获取反映车内环境的待检测图像；
视线检测模块，用于基于所述待检测图像，确定所述车内的目标人员的视线注视区域；
车窗控制模块，用于在确定所述视线注视区域为车窗位置区域、且接收到指示车窗执行目标动作的控制信息的情况下，控制与所述车窗位置区域对应的目标车窗执行所述目标动作；所述目标动作包括所述车窗的打开或者关闭动作；所述控制信息包括指示所述车窗执行所述目标动作的手势控制信息和/或语音控制信息。
16.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1-14任一所述的车窗控制方法。
17.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1-4任一所述的车窗控制方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111131695.3A CN113867527A (zh) | 2021-09-26 | 2021-09-26 | 车窗控制方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111131695.3A CN113867527A (zh) | 2021-09-26 | 2021-09-26 | 车窗控制方法、装置、电子设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113867527A true CN113867527A (zh) | 2021-12-31 |
Family
ID=78990936
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111131695.3A Pending CN113867527A (zh) | 2021-09-26 | 2021-09-26 | 车窗控制方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113867527A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114876312A (zh) * | 2022-05-25 | 2022-08-09 | 重庆长安汽车股份有限公司 | 一种基于眼动追踪的车窗升降控制系统及方法 |
| CN115059372A (zh) * | 2022-07-29 | 2022-09-16 | 中国第一汽车股份有限公司 | 车窗的控制方法、装置、设备和介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007284038A (ja) * | 2006-03-24 | 2007-11-01 | Calsonic Kansei Corp | 車両用空調装置 |
| CN110481419A (zh) * | 2019-08-16 | 2019-11-22 | 广州小鹏汽车科技有限公司 | 一种人车交互方法、系统、车辆及存储介质 |
| CN111724797A (zh) * | 2019-03-22 | 2020-09-29 | 比亚迪股份有限公司 | 基于图像和声纹识别的语音控制方法、系统和车辆 |
| CN113323539A (zh) * | 2021-06-23 | 2021-08-31 | 曼德电子电器有限公司 | 用于车辆排烟的方法、装置、存储介质、车辆及电子设备 |
-
2021
- 2021-09-26 CN CN202111131695.3A patent/CN113867527A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007284038A (ja) * | 2006-03-24 | 2007-11-01 | Calsonic Kansei Corp | 車両用空調装置 |
| CN111724797A (zh) * | 2019-03-22 | 2020-09-29 | 比亚迪股份有限公司 | 基于图像和声纹识别的语音控制方法、系统和车辆 |
| CN110481419A (zh) * | 2019-08-16 | 2019-11-22 | 广州小鹏汽车科技有限公司 | 一种人车交互方法、系统、车辆及存储介质 |
| CN113323539A (zh) * | 2021-06-23 | 2021-08-31 | 曼德电子电器有限公司 | 用于车辆排烟的方法、装置、存储介质、车辆及电子设备 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114876312A (zh) * | 2022-05-25 | 2022-08-09 | 重庆长安汽车股份有限公司 | 一种基于眼动追踪的车窗升降控制系统及方法 |
| CN115059372A (zh) * | 2022-07-29 | 2022-09-16 | 中国第一汽车股份有限公司 | 车窗的控制方法、装置、设备和介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102446686B1 (ko) | 승객 상태 분석 방법 및 장치, 차량, 전자 기기, 저장 매체 | |
| TWI741512B (zh) | 駕駛員注意力監測方法和裝置及電子設備 | |
| CN110337396B (zh) | 用于基于传感器数据操作车辆的系统及方法 | |
| US20190354192A1 (en) | Smart tutorial for gesture control system | |
| US10365648B2 (en) | Methods of customizing self-driving motor vehicles | |
| WO2020173213A1 (zh) | 车内人员危险动作识别方法和装置、电子设备、存储介质 | |
| US20200057487A1 (en) | Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness | |
| US20170330044A1 (en) | Thermal monitoring in autonomous-driving vehicles | |
| CN113867527A (zh) | 车窗控制方法、装置、电子设备及存储介质 | |
| US11034360B2 (en) | Method and apparatus that address motion sickness | |
| WO2018118958A1 (en) | A driver monitoring and response system | |
| JP2017168097A (ja) | 状況に特有の車両ドライバとの交信を提供するためのシステムおよび方法 | |
| CN113780062A (zh) | 一种基于情感识别的车载智能交互方法、存储介质及芯片 | |
| DE102018200244B4 (de) | Fahrerassistenzsystem und Verfahren zur individuellen Ermittlung der Langeweile | |
| US20150286952A1 (en) | Systems and methods for the detection of implicit gestures | |
| CN115205729A (zh) | 基于多模态特征融合的行为识别方法、系统 | |
| CN113655938A (zh) | 一种用于智能座舱的交互方法、装置、设备和介质 | |
| KR102625398B1 (ko) | 차량 및 그 제어방법 | |
| CN112837407A (zh) | 一种智能座舱全息投影系统及其交互方法 | |
| WO2021067380A1 (en) | Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness | |
| CN112820072A (zh) | 危险驾驶预警方法、装置、计算机设备及存储介质 | |
| CN112568904B (zh) | 车辆交互方法、装置、计算机设备及存储介质 | |
| JP2019182244A (ja) | 音声認識装置及び音声認識方法 | |
| WO2015153835A1 (en) | Systems and methods for the detection of implicit gestures | |
| CN113312958B (zh) | 一种基于司机状态的派单优先度调整方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |