CN116968671A - 一种车辆硬件的控制方法、装置、电子设备及存储介质 - Google Patents

一种车辆硬件的控制方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN116968671A
CN116968671A CN202310736013.4A CN202310736013A CN116968671A CN 116968671 A CN116968671 A CN 116968671A CN 202310736013 A CN202310736013 A CN 202310736013A CN 116968671 A CN116968671 A CN 116968671A
Authority
CN
China
Prior art keywords
user
information
vehicle
position information
riding position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310736013.4A
Other languages
English (en)
Inventor
汪英杰
王超
康博
胡桐铜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Changan Automobile Co Ltd
Original Assignee
Chongqing Changan Automobile Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Changan Automobile Co Ltd filed Critical Chongqing Changan Automobile Co Ltd
Priority to CN202310736013.4A priority Critical patent/CN116968671A/zh
Publication of CN116968671A publication Critical patent/CN116968671A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/593—Recognising seat occupancy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明涉及一种车辆硬件的控制方法、装置、电子设备及存储介质，方法包括：获取车内监控视频；根据车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；根据肢体动作信息和表情信息，确定用户感受信息；根据用户感受信息，确定与用户乘坐位置信息适配的车辆硬件的运行状态。本发明不需要额外增加检测设备，基于车内自带的监控设备即可识别用户乘坐位置信息以及用户感受信息，基于用户感受信息自动控制与用户乘坐位置信息适配的车内硬件的运行状态。

Description

一种车辆硬件的控制方法、装置、电子设备及存储介质
技术领域
本发明涉及车辆控制技术领域，具体涉及一种车辆硬件的控制方法、装置、电子设备及存储介质。
背景技术
随着科技的发展，人工智能的应用也越来越广泛。现车辆内的硬件，部分已可以通过人工智能进行控制。以车辆内的空调为例，车辆内加装红外摄像机，通过红外摄像机采集乘客上半身温度分布图，再通过图像处理器，检测算出乘客当前面部表面区域温度，将乘客当前面部表面区域温度与内置温度值进行比对得到比对分析结果，基于比对分析结果实现对空调的智能控制。或者通过车内监控视频对用户的手势进行识别，基于用户手势完成空调的控制。上述方法或者需要额外安装红外摄像机，增加成本，或者空调控制过程中过于繁琐，需要特定录入手势。
发明内容
鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种车辆硬件的控制方法、装置、电子设备及储存介质。
为了解决上述问题，第一方面，本发明实施例公开了一种车辆硬件的控制方法，所述方法包括：
获取车内监控视频；
根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；
根据所述肢体动作信息和表情信息，确定用户感受信息；
根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个空调，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的空调按照第一制冷档位进行制冷；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的空调按照第一制热档位进行制热。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个氛围灯，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的氛围灯显示第一颜色；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的氛围灯显示第二颜色。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个音响，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的音响播放第一预设语音；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的音响播放第二预设语音。
可选地，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当在预设时长内，用户感受信息表示用户感觉不舒适时，则控制与所述乘坐位置信息适配的氛围灯显示第三颜色进行警示。
可选地，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当在预设时长内，用户感受信息表示用户感觉不舒适时，判断所述车辆内是否有同行用户；
若所述车辆内有同行用户，则所述音响播放第三预设语音以提示同行用户所述车辆内有用户感觉不舒适；
若所述车辆内没有同行用户，则所述车辆自动拨打预先设置的紧急联系人电话。
可选地，所述根据所述肢体动作信息和表情信息，确定用户感受信息，包括：
获取肢体动作与用户感受信息的第一映射关系，以及面部表情与用户感受信息的第二映射关系；
根据所述监控视频识别得到的用户肢体动作、用户表情信息、第一映射关系和第二映射关系，确定用户感受信息。
第二方面，本发明实施例公开了一种车辆硬件的控制装置，所述装置包括：
监控视频获取模块，用于获取车内监控视频；
监控视频识别模块，用于根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；
感受信息确定模块，用于根据所述肢体动作信息和表情信息，确定用户感受信息；
车辆硬件控制模块，用于根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个空调，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的空调按照第一制冷档位进行制冷；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的空调按照第一制热档位进行制热。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个氛围灯，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的氛围灯显示第一颜色；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的氛围灯显示第二颜色。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个音响，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的音响播放第一预设语音；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的音响播放第二预设语音。
可选地，所述车辆硬件控制模块具体用于：当在预设时长内，用户感受信息表示用户感觉不舒适时，则控制与所述乘坐位置信息适配的氛围灯显示第三颜色进行警示。
可选地，所述车辆硬件控制模块具体用于：当在预设时长内，用户感受信息表示用户感觉不舒适时，判断所述车辆内是否有同行用户；若所述车辆内有同行用户，则所述音响播放第三预设语音以提示同行用户所述车辆内有用户感觉不舒适；若所述车辆内没有同行用户，则所述车辆自动拨打预先设置的紧急联系人电话。
可选地，所述感受信息确定模块具体用于：获取肢体动作与用户感受信息的第一映射关系，以及面部表情与用户感受信息的第二映射关系；根据所述监控视频识别得到的用户肢体动作、用户表情信息、第一映射关系和第二映射关系，确定用户感受信息。
第三方面，本发明实施例还公开了一种电子设备，包括：处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上述的车辆硬件的控制方法的步骤。
第四方面，本发明实施例还公开了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上述的车辆硬件的控制方法的步骤。
本发明的有益效果：
通过获取车内监控视频，并基于监控视频识别用户的乘坐位置信息、肢体动作信息和表情信息；根据肢体动作信息和表情信息，确定用户感受信息；根据用户感受信息，确定与用户乘坐位置信息适配的车辆硬件的运行状态。本发明不需要额外增加检测设备，基于车内自带的监控设备即可识别用户乘坐位置信息以及用户感受信息，基于用户感受信息自动控制与用户乘坐位置信息适配的车内硬件的运行状态。
附图说明
图1是本发明实施例提供的一种车辆硬件的控制方法的步骤流程图；
图2是本发明实施例提供的另一种车辆硬件的控制方法的步骤流程图；
图3是本发明实施例提供的一种车辆硬件的控制方法的流程图；
图4是本发明实施例提供的一种车辆硬件控制系统示意图；
图5是本发明实施例提供的一种车辆硬件的控制装置的结构框图。
具体实施方式
以下将参照附图和优选实施例来说明本发明的实施方式，本领域技术人员可由本说明书中所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。应当理解，优选实施例仅为了说明本发明，而不是为了限制本发明的保护范围。
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
鉴于相关技术中，车辆硬件的控制方法过于繁琐，本发明的核心构思之一在于基于车内已有硬件，实现对车内硬件更精确智能的控制。
参照图1，示出了本发明实施例提供的一种车辆硬件的控制方法的步骤流程图，方法具体可以包括如下步骤：
步骤101，获取车内监控视频。
车辆内一般安装有摄像设备，通过摄像设备可以获取车内的监控视频。在一种实施例中，可以当用户进入车内时，车内摄像头对人体进行持续识别和捕捉，并将捕捉到的画面传送给车机系统，以让车机系统对画面进行后续的识别过程。
步骤102，根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息。
获取车内监控视频后，可以对监控视频进行识别，以获取车内用户的乘坐位置信息、肢体动作信息和表情信息。以四车座为例，用户的乘坐位置信息可以包括：用户在左前方车座(驾驶座)、用户在右前方车座(副驾驶座)、用户在左后方车座、用户在右后方车座。对于其它多车座车辆，用户的乘坐位置信息可以以此类推。肢体动作信息可以包括：擦汗、用手扇风、脱衣服、穿衣服、裹紧衣服、打冷颤，发抖等动作信息。表情信息可以包括：面部有汗、脸颊颜色过红等表情信息。
在一种实施例中，可以通过前期预设一些通用的基本动作和面部表情，并将预设的基本动作和面部表情存储在车机系统内部，后期通过将长期乘坐的用户的动作及面部表情上传到云端，通过云端对用户一些特定的表情及动作进行标定学习，然后远程分发到车机系统进行识别过程的优化。
步骤103，根据所述肢体动作信息和表情信息，确定用户感受信息。
根据识别到的用户肢体动作信息和表情信息，可以得到用户感受信息。用户感受信息可以包括：用户感觉热的信息、用户感觉冷的信息、用户感觉舒适的信息、用户感觉不舒适的信息等。例如，当识别到用户有发抖的肢体动作，则可以确定用户感受信息为用户感觉冷；当识别到用户有皱眉的面部表情，则可以确定用户感受信息为用户感觉不舒适。
在一种实施例中，可以预先获取肢体动作与用户感受信息的第一映射关系，以及面部表情与用户感受信息的第二映射关系；根据监控视频识别得到的用户肢体动作、用户表情信息、第一映射关系和第二映射关系，确定用户感受信息。
步骤104，根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
根据用户感受信息，可以调整与用户乘坐位置对应的车辆硬件的运行状态。车辆硬件可以包括：空调、氛围灯、音响等。
以四车座为例，车辆内部区域会被分为左前、右前、左后、右后四个分区。而在四个分区会分别设置有分区空调、分区氛围灯、分区音响。当确定了用户乘坐位置信息和用户感受信息后，可以根据用户感受信息，调整与用户乘坐位置对应的分区空调，和/或分区氛围灯，和/或分区音响的运行状态。
在一种实施例中，当识别到用户进入车内，并且确定用户感受信息表示用户感觉热或用户感觉冷时，对与用户乘坐位置信息适配的车辆硬件的运行状态进行第一次调整。当与用户乘坐位置信息适配的车辆硬件的运行状态进行第一次调整后，继续对用户的肢体动作信息以及表情信息进行识别，若在预设时间后根据用户的肢体动作信息以及表情信息，得到用户感受信息表示用户感觉舒适或用户感觉不舒适时，对与用户乘坐位置信息适配的车辆硬件的运行状态进行第二次调整。
本发明实施例通过获取车内监控视频，并基于监控视频识别用户的乘坐位置信息、肢体动作信息和表情信息；根据肢体动作信息和表情信息，确定用户感受信息；根据用户感受信息，确定与用户乘坐位置信息适配的车辆硬件的运行状态。本发明不需要额外增加检测设备，基于车内自带的监控设备即可识别用户乘坐位置信息以及用户感受信息，基于用户感受信息自动控制与用户乘坐位置信息适配的车内硬件的运行状态。
参照图2，示出了本发明实施例提供的另一种车辆硬件的控制方法的步骤流程图，方法具体可以包括如下步骤：
步骤201，获取车内监控视频。
步骤202，根据车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息。
步骤203，根据肢体动作信息和表情信息，确定用户感受信息。
本发明实施例的步骤201-203的具体实施过程与步骤101-103类似，在此不多加赘述。
步骤204，当用户感受信息表示用户感觉热时，控制与乘坐位置信息适配的空调按照第一制冷档位进行制冷；控制与乘坐位置信息适配的氛围灯显示第一颜色；控制与乘坐位置信息适配的音响播放第一预设语音。
当用户感受信息表示用户感觉热时，可以控制与乘坐位置信息适配的空调按照第一制冷档位进行制冷，第一制冷档位可以为高档制冷档位或中档制冷档位；控制与乘坐位置信息适配的氛围灯显示第一颜色，第一颜色可以为冷色调颜色，例如蓝色或紫色；控制与乘坐位置信息适配的音响播放第一预设语音，第一预设语音可以为降雪或降雨的声音。
步骤205，当用户感受信息表示用户感觉冷时，控制与乘坐位置信息适配的空调按照第一制热档位进行制热；控制与乘坐位置信息适配的氛围灯显示第二颜色；控制与乘坐位置信息适配的音响播放第二预设语音。
当用户感受信息表示用户感觉冷时，可以控制与乘坐位置信息适配的分区空调按照第一制热档位进行制热，第一制热档位可以为高档制热档位或中档制热档位；控制与乘坐位置信息适配的氛围灯显示第二颜色，第二颜色可以为暖色调颜色，例如红色或橙色；控制与乘坐位置信息适配的音响播放第二预设语音，第二预设语音可以为木材燃烧的声音。
在一种实施例中，当用户感受信息表示用户感觉热，而车辆对与乘坐位置信息适配的空调、氛围灯、音响进行第一次调节后，可以继续针对车内摄像头捕捉到的画面进行实时识别判断，若在预设时间后判断得到用户感受信息表示用户感觉舒适和放松时，可以控制与乘坐位置信息适配的空调按照第二制冷档位进行制冷，第二制冷档位低于第一制冷档位；控制与乘坐位置信息适配的氛围灯显示第四颜色，第四颜色用于表示用户的状态为舒适状态，第四颜色可以为绿色；控制与乘坐位置信息适配的音响播放第三预设语音，第三预设语音可以为舒适平缓的音乐。
当用户感受信息表示用户感觉冷，而车辆对与乘坐位置信息适配的空调、氛围灯、音响进行第一次调节后，可以继续针对车内摄像头捕捉到的画面进行实时识别判断，若在预设时间后判断得到用户感受信息表示用户感觉舒适和放松时，可以控制与乘坐位置信息适配的空调按照第二制热档位进行制冷，第二制热档位低于第一制热档位；控制与乘坐位置信息适配的氛围灯显示第四颜色，第四颜色用于表示用户的状态为舒适状态，第三颜色可以为绿色；控制与乘坐位置信息适配的音响播放第三预设语音，第三预设语音可以为舒适平缓的音乐。
本发明实施例在不额外增加设备的情况下实现了智能空调系统的简单快捷的开启和关闭，以及通过视觉、听觉、触觉多模态的感知，提升用户的使用感受。
在一种实施例中，当在预设时长内，用户感受信息表示用户感觉不舒适时，则控制与乘坐位置信息适配的氛围灯显示第三颜色进行警示。若识别到车内有用户，且在预设时长内，用户感受信息都是表示用户感觉不舒适时，可以控制与用户乘坐位置信息适配的氛围灯显示第三颜色进行警示，第三颜色可以为红色。本发明实施例在不增加成本的情况下实现了用户状态预警功能，一定程度上保障用户的健康安全。
在一种实施例中，当在预设时长内，用户感受信息表示用户感觉不舒适时，判断车辆内是否有同行用户；若车辆内有同行用户，则音响播放第三预设语音以提示同行用户车辆内有用户感觉不舒适；若车辆内没有同行用户，则车辆自动拨打预先设置的紧急联系人电话。若识别到车内有用户，且在预设时长内，用户感受信息都是表示用户感觉不舒适时，可以判断车辆内是否有同行用户。若有同行用户，则控制与同行用户乘坐位置信息适配的音响播放第三预设语音，第三预设语音可以为：您旁边/后面/前面的同伴身体状态不舒适，请注意。若没有同行用户，则自动拨打预先设置的紧急联系人电话。紧急联系人电话可以是用户预先设置的该用户的亲属联系电话等，若该用户没有预先设置紧急联系人电话，则紧急联系人电话可以默认为急救电话。本发明实施例在不增加成本的情况下实现了用户状态预警功能，一定程度上保障用户的健康安全。
参照图3，示出了本发明实施例提供的一种车辆硬件的控制方法的流程图。车辆包括：车内摄像头：车内已有的摄像头，负责对车内乘客的肢体动作和面部表情进行实时捕捉；车机系统：负责对摄像头捕捉的画面及温度传感器的输入进行综合决策；车身控制器：负责接收车机系统的信号，对分区空调、分区音响及分区氛围灯进行控制；分区空调：车辆自带分区空调，按照常规分区分为左前、右前、左后、右后四个分区，接收车身控制器信号，对不同的分区空调进行打开、关闭等相应的控制调节，对分区空调的控制调节分为低、中二档调节；分区音响：接收车身控制器的信号，在不同的分区发出相对应的声音；分区氛围灯：接收车机系统信号，在不同的分区可以呈现出对应的颜色。
车内摄像头对乘客表情以及肢体动作持续捕捉识别，车内摄像头将捕捉的画面发送至车机系统，车机系统对画面进行实时判断。若识别得到该分区乘客有脱衣服等动作或表情时，判断该分区乘客较热，车机系统将信号发送至车身控制器，车身控制器将信号再发送至与乘客乘坐位置对应的分区空调、分区音响以及分区氛围灯。分区空调接收信号后，开至中档为该分区乘客提供冷风，同时分区音响播放降雪或降雨等让乘客从听觉上感觉舒适的声音，同时分区氛围灯显示蓝色等让乘客感觉舒适的颜色。车机系统继续对车内摄像头识别到的内容进行实时判断，若识别到该分区乘客经过一定时间后，其面部表情或肢体动作表示该乘客呈现出一种舒适的状态或趋势时，车机系统将信号发送至车身控制器，车身控制器将信号再发送至与乘客乘坐位置对应的分区空调、分区音响以及分区氛围灯。分区空调接收信号后，开至低档为该分区乘客提供冷风，同时分区音响播放平缓等让乘客从听觉上感觉舒适的声音，同时分区氛围灯显示绿色等颜色以提醒该分区乘客已处于舒适的状态。若车机系统识别到该分区乘客经过一定时间后，其面部表情或肢体动作表示该乘客一直处于不舒适的状态。则车机系统将信号发送至车身控制器，车身控制器将信号再发送至车内音响以及与乘客乘坐位置对应的分区氛围灯。分区氛围灯显示红色等警告性的颜色，车内音响播放提示音，提示同行乘客，若没有同行乘客，则车机系统拨打紧急联系人电话。车机系统判断出分区乘客较冷时，过程与上述类似，在此不多加赘述。
参照图4，示出了本发明实施例提供的一种车辆硬件控制系统示意图。车内摄像头激活，开始对乘客肢体动作以及面部表情进行捕捉，摄像头捕捉的画面上传至车机系统，车机系统将画面再上传至云端系统，云端系统对乘客一些特定的表情及动作进行标定学习，然后远程分发到车机系统，对车机系统进行优化。车机系统根据乘客肢体动作以及面部表情判断乘客感受，并根据乘客感受通过车身控制器(BCM)对车内分区空调、氛围灯、音响进行调控。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图5，示出了本发明实施例提供的一种车辆硬件的控制装置的结构框图，具体可以包括如下模块：
监控视频获取模块301，用于获取车内监控视频；
监控视频识别模块302，用于根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；
感受信息确定模块303，用于根据所述肢体动作信息和表情信息，确定用户感受信息；
车辆硬件控制模块304，用于根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个空调，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的空调按照第一制冷档位进行制冷；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的空调按照第一制热档位进行制热。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个氛围灯，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的氛围灯显示第一颜色；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的氛围灯显示第二颜色。
可选地，所述车辆硬件包括分别针对不同乘坐位置的多个音响，所述车辆硬件控制模块204具体用于：当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的音响播放第一预设语音；当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的音响播放第二预设语音。
可选地，所述车辆硬件控制模块304具体用于：当在预设时长内，用户感受信息表示用户感觉不舒适时，则控制与所述乘坐位置信息适配的氛围灯显示第三颜色进行警示。
可选地，所述车辆硬件控制模块304具体用于：当在预设时长内，用户感受信息表示用户感觉不舒适时，判断所述车辆内是否有同行用户；若所述车辆内有同行用户，则所述音响播放第三预设语音以提示同行用户所述车辆内有用户感觉不舒适；若所述车辆内没有同行用户，则所述车辆自动拨打预先设置的紧急联系人电话。
可选地，所述感受信息确定模块303具体用于：获取肢体动作与用户感受信息的第一映射关系，以及面部表情与用户感受信息的第二映射关系；根据所述监控视频识别得到的用户肢体动作、用户表情信息、第一映射关系和第二映射关系，确定用户感受信息。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了一种电子设备，包括：
包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述车辆硬件的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现上述车辆硬件的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种车辆硬件的控制方法、装置、电子设备及储存介质，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种车辆硬件的控制方法，其特征在于，所述方法包括：
获取车内监控视频；
根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；
根据所述肢体动作信息和表情信息，确定用户感受信息；
根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
2.根据权利要求1所述的车辆硬件的控制方法，其特征在于，所述车辆硬件包括分别针对不同乘坐位置的多个空调，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的空调按照第一制冷档位进行制冷；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的空调按照第一制热档位进行制热。
3.根据权利要求1所述的车辆硬件的控制方法，其特征在于，所述车辆硬件包括分别针对不同乘坐位置的多个氛围灯，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的氛围灯显示第一颜色；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的氛围灯显示第二颜色。
4.根据权利要求1所述的车辆硬件的控制方法，其特征在于，所述车辆硬件包括分别针对不同乘坐位置的多个音响，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当用户感受信息表示用户感觉热时，则控制与所述乘坐位置信息适配的音响播放第一预设语音；
当用户感受信息表示用户感觉冷时，则控制与所述乘坐位置信息适配的音响播放第二预设语音。
5.根据权利要求3所述的车辆硬件的控制方法，其特征在于，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当在预设时长内，用户感受信息表示用户感觉不舒适时，则控制与所述乘坐位置信息适配的氛围灯显示第三颜色进行警示。
6.根据权利要求4所述的车辆硬件的控制方法，其特征在于，所述根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态，包括：
当在预设时长内，用户感受信息表示用户感觉不舒适时，判断所述车辆内是否有同行用户；
若所述车辆内有同行用户，则所述音响播放第三预设语音以提示同行用户所述车辆内有用户感觉不舒适；
若所述车辆内没有同行用户，则所述车辆自动拨打预先设置的紧急联系人电话。
7.根据权利要求1所述的车辆硬件的控制方法，其特征在于，所述根据所述肢体动作信息和表情信息，确定用户感受信息，包括：
获取肢体动作与用户感受信息的第一映射关系，以及面部表情与用户感受信息的第二映射关系；
根据所述监控视频识别得到的用户肢体动作、用户表情信息、第一映射关系和第二映射关系，确定用户感受信息。
8.一种车辆硬件的控制装置，其特征在于，所述装置包括：
监控视频获取模块，用于获取车内监控视频；
监控视频识别模块，用于根据所述车内监控视频，识别用户的乘坐位置信息、肢体动作信息和表情信息；
感受信息确定模块，用于根据所述肢体动作信息和表情信息，确定用户感受信息；
车辆硬件控制模块，用于根据所述用户感受信息，确定与所述乘坐位置信息适配的车辆硬件的运行状态。
9.一种电子设备，其特征在于，包括：处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1-7中任一项所述的车辆硬件的控制方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1-7中任一项所述的车辆硬件的控制方法的步骤。
CN202310736013.4A 2023-06-20 2023-06-20 一种车辆硬件的控制方法、装置、电子设备及存储介质 Pending CN116968671A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310736013.4A CN116968671A (zh) 2023-06-20 2023-06-20 一种车辆硬件的控制方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310736013.4A CN116968671A (zh) 2023-06-20 2023-06-20 一种车辆硬件的控制方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN116968671A true CN116968671A (zh) 2023-10-31

Family

ID=88482286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310736013.4A Pending CN116968671A (zh) 2023-06-20 2023-06-20 一种车辆硬件的控制方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116968671A (zh)

Similar Documents

Publication Publication Date Title
CN109416733B (zh) 便携式个性化
CN108725357B (zh) 基于人脸识别的参数控制方法、系统与云端服务器
JP4305289B2 (ja) 車両用制御装置およびその装置を備える車両用制御システム
CN110239557A (zh) 基于乘客个性化信息的车辆设备的控制方法和装置
CN111885547A (zh) 一种车载人机交互系统
CN107757480B (zh) 车用天窗投影系统、车辆及投影方法
TWI738132B (zh) 基於動作分析的人機交互方法、車載裝置
CN113780062A (zh) 一种基于情感识别的车载智能交互方法、存储介质及芯片
WO2021254141A1 (zh) 一种车辆交互方法和一种车辆
CN113459943A (zh) 车辆控制方法、装置、设备和存储介质
DE102018207849A1 (de) System zur Steuerung von Ausgabeeinheiten in einem Fahrzeug, Fahrzeug und Verfahren zur Steuerung von Ausgabeeinheiten in einem Fahrzeug
WO2019230426A1 (ja) 感情データ取得装置および感情操作装置
CN112009200A (zh) 一种车内空调的控制方法和装置
CN114286479A (zh) 基于场景的车内灯光控制方法、系统及可读存储介质
CN115352385A (zh) 汽车的声场调节方法、装置、电子设备及存储介质
CN114771442A (zh) 一种车辆个性化设置方法及车辆
CN114194198A (zh) 一种车辆的控制方法及装置、车辆和存储介质
CN113665514A (zh) 一种车辆服务系统及其服务方法
CN116968671A (zh) 一种车辆硬件的控制方法、装置、电子设备及存储介质
CN116580661A (zh) 车辆内的终端颜色调整方法、系统、电子设备和存储介质
CN112721565A (zh) 车载空调控制方法、车辆和介质
CN116691546A (zh) 车载设备的控制方法、装置、车辆及存储介质
CN112203903A (zh) 车载设备的控制装置和控制方法
WO2022217500A1 (zh) 一种车载影院模式的控制方法、装置、设备及存储介质
WO2022270234A1 (ja) 移動体用装置及び移動体用制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination