CN111310551B - 用于识别特定于乘员的设置的方法及用于执行该方法的车辆 - Google Patents

用于识别特定于乘员的设置的方法及用于执行该方法的车辆 Download PDF

Info

Publication number
CN111310551B
CN111310551B CN201911266950.8A CN201911266950A CN111310551B CN 111310551 B CN111310551 B CN 111310551B CN 201911266950 A CN201911266950 A CN 201911266950A CN 111310551 B CN111310551 B CN 111310551B
Authority
CN
China
Prior art keywords
vehicle
occupant
data
descriptors
descriptor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911266950.8A
Other languages
English (en)
Other versions
CN111310551A (zh
Inventor
汤姆斯·科勒
马提亚斯·施托克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
eSolutions GmbH
Original Assignee
eSolutions GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by eSolutions GmbH filed Critical eSolutions GmbH
Publication of CN111310551A publication Critical patent/CN111310551A/zh
Application granted granted Critical
Publication of CN111310551B publication Critical patent/CN111310551B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1172Identification of persons based on the shapes or appearances of their bodies or parts thereof using fingerprinting
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176Recognition of faces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70Multimodal biometrics, e.g. combining information from different biometric modalities
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/04Training, enrolment or model building

Abstract

公开了一种用于识别车辆(1)的特定于乘员的设置(15)的方法,包括:检测(101)车辆乘员;收集(110)检测到的车辆乘员的生物特征识别乘员数据(20,30);至少部分地基于收集到的乘员数据来汇编(120)描述符(11);将所述描述符存储(220)到数据库(10)中;和基于已汇编的描述符(11)来更新(240)所述数据库中的描述符的聚类(13),其中,被分组在所述聚类中的描述符彼此接近,并且所述聚类对应于检测到的车辆乘员。基于所述聚类,可以将已汇编的描述符分配给所述聚类,并且可以计算与所述聚类相关联进行存储的车辆设置数据。所述车辆设置数据对应于车辆的特定于乘员的设置(15)。还公开了一种车辆,其包括能够执行这种方法的系统。

Description

用于识别特定于乘员的设置的方法及用于执行该方法的车辆
技术领域
本发明涉及一种用于识别车辆的特定于乘员的设置的方法以及能够执行这种方法的车辆。特别地,本发明涉及一种以无监督的方式来识别特定于乘员的设置的方法以及能够执行这种方法的车辆。
背景技术
一些车辆具有基于存储的设置来调节特定的车辆设置(例如座椅位置、方向盘位置、镜体位置等)的能力。这种存储的设置可以基于用户身份,使得多个乘员(驾驶员和/或乘客)可以定制特定的车辆项目(item)。
车辆乘员的身份通常是根据乘员的明确的身份来确定的。例如,乘员的身份基于预先注册的设备(例如密钥、令牌或移动电话)来确定,或者基于通过姓名、密码等可识别的预先注册的用户配置文件来确定,或者基于不变的生物特征识别数据(例如指纹、虹膜、语音等)来确定。这种识别系统需要有受监督的学习阶段,在此期间,将创建乘员账户并将其存储在车辆系统中。
发明内容
本发明的目的在于提供一种更有效地识别车辆的特定于乘员的设置的方法。
该目的由本公开所限定的方法、计算机可读介质以及车辆来解决:
根据一个方面,本公开提供了一种用于识别车辆的特定于乘员的设置的方法,所述方法包括:检测车辆乘员;收集检测到的车辆乘员的生物特征识别乘员数据(biometricoccupant data);基于收集到的所述生物特征识别乘员数据的至少一部分来汇编描述符;将所述描述符存储到数据库中;和基于已汇编的描述符来更新所述数据库中的描述符的聚类,其中,被分组在所述聚类中的描述符彼此接近,并且其中所述聚类对应于所述检测到的车辆乘员。
在其中一些实施例中,本公开提供了一种用于识别车辆的特定于乘员的设置的方法,包括以下步骤:检测车辆乘员,例如驾驶员或乘客,以及收集检测到的车辆乘员的生物特征识别乘员数据。车辆乘员的检测涉及检测车辆乘员的存在性,但不包括检测特定车辆乘员的身份。例如,该方法并不需要基于独特的乘员数据,如密钥或(射频识别的)令牌来检测特定的车辆乘员。
该方法还包括:(一旦检测到车辆乘员的存在和/或其他事件已触发了对生物特征识别乘员数据进行收集)基于收集到的乘员数据的至少一部分来汇编(assemble)描述符(descriptor)、将所述描述符存储在数据库中、以及基于已汇编的描述符来更新数据库中的描述符的聚类。描述符数值化地(numerically)存储至少一个特征,例如生物特征识别特征,并且在存在车辆乘员的多个特征的情况下,所述描述符存储并将不同的特征数值化地组合为向量。在聚类中分组的描述符彼此接近,例如,彼此之间的距离低于预限定的阈值,并且聚类对应于检测到的车辆乘员。换句话说,数据库具有(存储)至少两个可以相互比较的描述符。如果两个或更多的描述符彼此接近(close to each other),那么这些描述符可以一起被分组在聚类中,表示检测到的车辆乘员。
因此,所述数据库可以进一步存储多个聚类,即,多个描述符被分组为两个或多个聚类,分别表示两个或多个车辆乘员。由于不需要在之前的用户配置文件设置中输入个人信息,因此提供了以无监督的方式来识别车辆乘员。新的或未知的车辆乘员可以被“即时(on-the-fly)”识别,即不需要初始的用户配置文件设置,只需在数据库中补充一个附加的聚类,所述附加的聚类以到已在数据库中的每一个描述符的距离均超过预限定阈值的描述符为起点。这允许对车辆乘员的识别,而不会干扰乘员,尤其是车辆的驾驶员。此外,车辆乘员的生物特征识别数据可能是相当通用的类型。例如,由于对车辆乘员的不同特征进行收集并且将同一车辆乘员的多个描述符存储在聚类中,因此并不需要车辆乘员操作特定的传感器设备,例如指纹传感器和虹膜传感器等。这进一步允许识别不具有单个明确或独特的生物特征识别的车辆乘员。
对车辆乘员或与之相关的生物特征识别和/或其他特征的数值解释可包括:储存传感器值数据,如重量、高度(相对于车辆中固定的物体,如座椅靠背)和安全带长度,和/或储存基于传感器数据的计算的数据,如平均头发颜色、皮肤颜色,虹膜或类似物的颜色、乘员躯干轮廓的曲率、乘员声音的具体特征等。额外的或可替代的,描述符可以包括基于捕获的三维(3D)图像的数据,例如车辆乘员的头部、面部、四肢、躯干等的3D几何形状和/或形貌。例如,描述符可以包括表示了眼睛的距离、眼睛和鼻子和/或耳朵的距离、耳朵的大小、头部和/或四肢的体积等的数据。应当理解的是,所述描述符可以进一步存储指纹传感器和/或虹膜传感器的生物特征识别数据或从指纹传感器和/或虹膜传感器导出的生物特征识别数据。
额外的或可替代的,所述描述符可以包括数据驱动的特征,如通过人工神经网络计算的嵌入(embeddings),和/或应用在表示车辆乘员的面部、身体、语音等的(传感器)数据上的相关机器学习方法。
在一种实施方式的变体中,更新所述描述符的聚类可以包括:计算所述已汇编的描述符与存储在所述数据库中的至少一个其他描述符之间的距离,并且如果所述距离低于预限定的阈值或者低于由系统随时间评估(学习)的阈值,则将所述已汇编的描述符与由所述至少一个其他描述符限定的聚类相关联。换句话说,在对所述至少一个其他描述符进行分组的数据库中可能已经存在一个聚类,因此聚类的每一个其他描述符可以用于标识该聚类。在描述符中,可以使用任何合适的距离测量法(例如,计算欧几里得距离、测地线距离等)来计算描述符之间的空间距离。因此,可以通过分析表示特定乘员的描述符到表示其他乘员的描述符的距离,例如通过在描述符空间中找到具有最小距离的最佳匹配,来识别车辆的乘员。所述描述符之间的距离可以基于构成描述符的特征来计算。换句话说,基于描述符中的对应的特征之间的距离来计算描述符之间的距离。因此,即使特征变化,如头发颜色,仍然可以识别出车辆乘员。
额外的或可替代的,可以计算已汇编的描述符与表示了聚类中的所有描述符的平均值的平均描述符之间的距离,并将该距离与预限定的阈值进行比较。这可以避免增加聚类的“尺寸”(size),即避免了同一聚类的两个描述符之间的距离超过预限定距离的倍数(amultiple of the predefined distance)。这减少了假的正结果(false positives)的计算,即,由于一个聚类中的描述符与均值(平均值)之间的偏差过大,从而导致因超大的聚类而引起的对所谓的车辆乘员的识别。
在本公开中,将描述符之间的距离和/或描述符与聚类的均值(平均值)之间的距离作为参考。应理解的是,代替距离或除了距离之外,该方法也可以依赖于相似性测量(描述符的相似性)和/或概率测量(两个描述符表示同一车辆乘员的概率)。因此,对于小距离的情况,将采用紧密相似性和高概率。
此外,将已汇编的描述符与聚类相关联可以包括:存储用于描述符或具有描述符(例如,用聚类标识补充描述符)的聚类标识和/或存储构成了聚类的所有描述符的描述符标识,例如存储描述符和聚类的映射表。
在另一个实施方式的变体中,所述生物特征识别乘员数据包括强生物特征识别数据和/或弱生物特征识别数据。由于在聚类中存储了表示乘员随时间的弱生物特征识别数据的变化,即使监测到同一乘员的这种弱生物特征识别数据的变化,对所述强生物特征识别数据和所述弱生物特征识别数据进行区别使得能够可靠地识别特定的车辆乘员。例如,强生物特征识别数据可以包括:面部特征数据(例如,乘员面部的几何特征)、语音数据、虹膜数据和/或指纹数据。所述强生物特征识别数据(例如虹膜和指纹数据)对于乘员是独特的。所述弱生物特征识别数据可以包括:体重数据、身高数据和/或安全带长度数据。所述安全带长度数据可以取决于乘员的身高,因此,其表示弱生物特征识别数据,其可以改变或随时间变化。
由于车辆乘员识别是基于整个描述符的,因此该方法不仅依赖于强生物特征识别数据。即使不能导出特定的生物特征识别数据项,所述描述符仍然可以被存储和聚类,因为其提供了车辆乘员的标识。由于为识别车辆乘员而聚类的描述符的多样性,即使没有强生物特征识别数据,可靠的识别也是可能的。根据进一步的变体,如果描述符与数据库中的其他描述符的距离超过(预限定或已学习的)阈值和/或在描述符被汇编和/或存储时可用的生物特征识别数据的特征或类型的数目低于另一阈值,则可以丢弃该描述符。
因此,可以基于描述了乘员的各种特征来识别车辆的乘员,而不需要独特的标识(如令牌或密钥)。此外,不需要乘员的身份识别,例如姓名、年龄、性别等,这避免了数据保护的问题。换句话说,尽管可以识别车辆乘员,由于信息不包含有关车辆乘员的任何个人信息,因此该信息是匿名的。
构成描述符的数据可以包括所有已收集的生物特征识别乘员数据,或者可替代地,可以包括已收集的生物特征识别乘员数据的子集。例如,基于该方法的预限定的设置,可以仅使用弱生物特征识别数据来汇编描述符,可以仅使用强生物特征识别数据来汇编描述符,可以仅使用强和/或弱生物特征识别数据的某些特征来汇编描述符。换句话说,通过将不同的特征组合为向量,车辆乘员由描述符来进行数值化地建模。这些特征可以基于真实的传感器特征识别数据或其抽象的数学描述。组合多个特征(即,使用多个生物特征识别乘员数据)来汇编描述符,提供了车辆乘员的更具区分性的描述符。
根据一个变体,可以自动地执行收集生物特征识别乘员数据、汇编描述符、存储所述描述符以及所述更新所述描述符的聚类的步骤中的至少一个步骤,而不需要用户发起和/或用户干预。例如,这些步骤的执行可以由车辆系统在特定时间点(例如行程的开始、车辆发动机的启动)以一定的时间间隔(例如,每小时一次、每天一次、每周一次等)触发,和/或当车辆的状态变化时,例如当门打开和/或关闭时,当安全带被扣住时,和/或当车辆的座位中的重量传感器的信号变化时,和/或指示重量的变化超过(预限定的)阈值时来触发。
在进一步的实施方式的变体中,可以选择一个聚类算法用来对已汇编的描述符进行聚类。例如,可以基于预先设置的任务设置来选择聚类算法。根据第一种设置,如果乘员的数量(因此聚类的数量)是已知的或可预测的,则采用基于质心的方法,如k-均值方法。根据第二种设置,如果车辆乘员的数量((因此聚类的数量)是未知且大量随机的,例如,在由多个驾驶员使用的大型车队的车辆中,则使用分层聚类。
在进一步的实施方式的变体中,聚类(聚类算法)是由某些事件来触发的。例如,在收集/汇编了预限定数目的描述符后,聚类被更新。预限定的数目可以是1,但在可替代的实施方式中,例如在收集/汇编5个描述符之后或者在收集/汇编10个描述符之后,该数目可以大于1。额外的或可替代的,在车辆乘员调整特定车辆设置,例如调整座椅位置、调整镜体等之后,可以更新聚类。
根据另一个变体,该方法还可以包括:将描述符与至少一个当前车辆设置相关联。例如,存储描述符可以包括:存储与至少一个车辆设置相关联的描述符。存储可能发生在存储描述符和聚类的相同的数据库中。车辆设置可以涉及车辆中可被调整和/或被个性化的任何项目,如座椅位置、靠背位置、头枕位置、镜体位置、方向盘位置、安全带卡扣或导向装置的位置、空调系统的温度和/或容积流量、收音机和/或电视台或信息娱乐系统的其他设置等。
根据另一种实施方案的变体,该方法还可以包括:计算已汇编的描述符到数据库中每一个聚类的距离,以及将计算出的距离与阈值(例如预限定的阈值)进行比较。描述符与聚类之间的距离可以基于构成聚类的描述符的每个特征的平均值。换句话说,将汇编的描述符与由聚类表示的车辆乘员的平均值描述进行比较。距离可以基于逐个特征来计算。
如果计算出的距离超过阈值,则假定已检测的车辆乘员对于系统是未知的。在这种情况下,该方法包括存储与表示新的车辆乘员的新聚类相关联的已汇编的描述符。可替代地,已汇编的描述符可以与未知的描述符的聚类相关联进行存储,其将在稍后的时间点进行评估,例如在距离低于阈值的两个未知聚类被汇编和存储的时间点。无论如何,系统的学习阶段被启用,其中新的乘员通过描述符来描述,并且为新的乘员存储车辆设置。可替代的,可以丢弃该描述符,例如,如果可用于该相应描述符的特征的数目(生物特征识别数据的数目)低于预限定阈值,则丢弃该描述符。
此外,该方法还包括:如果计算出的距离不超过阈值,则选择在数据库中存储的最佳匹配聚类,并且基于最佳匹配聚类来计算车辆设置。换句话说,最佳匹配聚类表示通过已汇编的描述符已经识别的车辆乘员,即被识别为在车辆的特定座位上的特定的乘员。
一旦已计算,计算出的车辆设置可以被用于调整至少一个车辆项目。因此,一旦特定的乘员通过已汇编的描述符和存储在数据库中的聚类(以匹配聚类的形式而不是如传统的系统中的特定标识的形式)被检测出和识别出,就可以基于为最佳匹配聚类(即为特定乘员)存储的车辆设置信息来自动的调整车辆项目。
计算车辆设置可以基于导出用于特定乘员的最佳车辆设定的任何函数。根据一个变体,计算车辆设置包括:从数据库中检索至少一个最佳匹配聚类的聚类项,即与数据库中的最佳匹配聚类相关联存储的至少一个聚类项。每个聚类项可以包括至少一个车辆设置。车辆设置的计算还可以包括:基于检索到的至少一个聚类项的至少一个车辆设置来计算至少一个特定于乘员的车辆设置。换句话说,与特定聚类相关联的聚类项可以是表示与特定聚类相关联的一个或多个车辆项目的设置的特征向量。与特定聚类的关联指定了由聚类项标识的特定车辆项目的特定于乘员的车辆设置。
根据另一个变体,计算至少一个特定于乘员的车辆设置包括:确定最新存储的车辆设置(例如最后一个调谐收音机和/或电视台)、计算检索到的至少一个聚类项的预限定数目的车辆设置的平均值或中间值或模式(mode),如座位位置的平均座椅位置、中间值或模式;镜体位置的平均镜体位置、中间值或模式;温度设置的平均温度设置、中间值或模式等、和/或基于传感器数据来确定车辆设置,例如根据当前的温度测量结果从多个存储的空调设置(从已存储的聚类项)中选择空调设置(在这种情况下,当特定的空调设置被设置和存储时,聚类项必须与温度测量结果一起存储)。车辆设置的模式是在检索到的至少一个聚类项中发生次数最多的特定设置。
每当描述符被汇编和/或描述符被存储在数据库中时,可以存储一个或多个聚类项。因此,不仅随时间来监测车辆乘员,以便构建表示车辆乘员的描述符聚类,而且可以随时间来监测一个或多个车辆设置。与表示车辆乘员的描述符一样,一个或多个车辆设置可以被存储在描述符中,该描述符被聚类并且与表示车辆乘员的聚类相关联。因此,不仅可以根据特定的车辆乘员来设置一个或多个车辆项目,还可以根据外部温度、下雨、阳光、行进速度、当前使用的道路类型等进一步的影响因素来设置车辆项目。
根据另一方面,一种计算机可读介质,其被配置以存储可执行指令,当所述可执行指令被处理器执行时,所述可执行指令使得所述处理器执行根据所披露的(实施的)变体中的一个变体所述的方法。所述计算机可读介质可以是任何易失性或非易失性存储介质。
根据又一方面,一种车辆包括:处理器、包括有数据库的存储设备以及至少一个被配置以假设特定设置的可调节车辆项目。所述处理器被配置以执行根据所披露的(实施的)变体中的一个变体所述的方法。
所述车辆还可以包括至少一个传感器,该传感器被配置以感测生物特征识别乘员数据。所述至少一个传感器可以可选地包括:摄像头、麦克风、重量传感器和/或指纹传感器。所述车辆还可包括至少一个被配置以感测车辆周围环境特征的传感器,如温度传感器、水传感器、振动传感器、陀螺仪等。由一个或多个额外的传感器检测的该环境特征可由处理器加以利用,以基于环境影响因素来计算车辆设置。
在一个实施方式的变体中,所述处理器被进一步地配置以,每当所述车辆开始行程(start a journey)时,开始执行根据所披露的(实施的)变体中的一个的方法。
本公开不限于所描述的方面、变体、实施变体和可替代方案,而是所描述的方面、变体、实施变体和可替代方案的汇编。
附图说明
参考以下示意性的附图,对用于理解所披露的用于识别车辆的特定于乘员的设置的方法及相应的车辆的优选示例进行更详细的描述,其中:
图1描述了用于识别表示检测到的车辆乘员的最佳匹配聚类的推断阶段的示意性流程图;
图2描述了用于汇编和存储描述符的学习阶段的示意性流程图,其中所述描述符描述了检测到的车辆乘员;
图3描述了用于检索车辆的特定于乘员的设置的检索阶段的示意性流程图;
图4示意性地示出了包括有能够执行根据图1至图3的阶段的方法的系统的车辆;
图5示意性地示出了用于描述检测到的车辆乘员的描述符。
具体实施方式
图1描述了用于识别表示检测到的车辆乘员的最佳匹配聚类(cluster)的推断阶段100的示意性流程图。推断阶段100假定数据库10已经存储了车辆特定于乘员的数据,例如表示乘员的数据11和表示车辆设置的数据12。在步骤101中,检测车辆乘员,例如,由于传感器(例如摄像头41或麦克风41和/或重量传感器42(参见图4))信号的变化,而检测到车辆乘员。
一旦检测到车辆乘员(或者可替代地,不同的事件触发推断阶段100,例如由环境传感器(未示出)检测到的环境特征的变化),则收集检测到的车辆乘员的生物特征识别数据(步骤110)。对这些数据进行收集可以包括强和/或弱生物特征识别乘员数据,其进一步用于在步骤120中汇编描述符11。对描述符11进行汇编可以包括:对将要被存储为描述符项的特征值进行计算,如将结合图5所描述的那样。
然后,该方法计算(130)汇编的描述符11到从数据库10检索到的聚类13的距离“d”。聚类13是一组描述符11,它们具有彼此之间低于预限定阈值的距离,使得聚类13表示车辆乘员。在步骤140中,确定计算出的描述符11到聚类13的距离是否超过预限定的阈值d0
如果描述符11到特定聚类13的距离未超过阈值,则在步骤150,选择最佳匹配聚类13。对于最佳匹配聚类13的选择可以包括:选择具有到汇编的描述符11最小距离的聚类13。换句话说,最佳匹配聚类13表示已经基于存储在数据库10中的描述符11数据和聚类13数据进行识别的车辆乘员。基于最佳匹配聚类13,开始检索阶段300。
如果汇编的描述符11到存储在数据库10中的每一个聚类13的距离“d”超过预限定的阈值d0,则开始图2示意性示出的学习阶段200。可替代地,当检测101到车辆乘员时,可以开始学习阶段200,即,由于与启用推断阶段100相同的触发器,可以开始学习阶段200。此外,对车辆乘员的检测101可以基于与关于推断阶段100所描述的相同的评估。
同样地,对生物特征识别乘员数据的收集110以及对描述符11的汇编120,可以对应于推断阶段100的步骤。例如,当学习阶段200被启用于推断阶段100的步骤140时,该方法可以(在点“A”处)直接开始步骤210,即将汇编的描述符11与一个或多个车辆设置12相关联。将汇编的描述符11与一个或多个车辆设置12相关联210可以基于在汇编描述符11或者将描述符11存储220在数据库10中时所设置的车辆设置12。
可替代地,可以跳过将描述符11与车辆设置12进行关联210,并且方法(以步骤220开始或)继续进行步骤220,即(仅)将描述符11存储在数据库10中。如果新的(空的)数据库10不包含任何或多个描述符11,则使得在将针对车辆乘员(其由已存储的描述符11来表示)而存储的车辆设置12进行个性化之前,首先使用描述了一个或多个车辆乘员的描述符11来填充数据库10,这可能是有用的。
例如,在步骤230中,可以确定是否应继续进行学习阶段200,或者是否应进一步评估和/或分析已存储的220描述符11。因此,该方法可以在步骤110重复开始,即收集生物特征识别乘员数据。否则,该方法可以继续执行步骤240,即对汇编的和已存储的描述符11的聚类13进行更新(或对汇编的和已存储的描述符11进行聚类)。聚类13被用于对彼此接近的描述符11(即彼此之间的距离低于预限定的阈值(例如阈值d0))进行分组。可替代地,具有到聚类13的平均值、中间值或模式的距离低于预限定的阈值(例如d0)的描述符11在聚类13中被分组。因此,聚类13对应于检测到的车辆乘员,并且描述了该车辆乘员的特征。
图3描述了用于检索车辆1的特定于乘员的设置15的检索阶段300的示意性流程图。检索阶段300从最匹配聚类13(例如在步骤150(图1)中选择的聚类)开始。基于最佳匹配聚类13,在步骤310中从数据库10中检索至少一个聚类项,其中每一个聚类项包括至少一个车辆设置12。
此后,根据检索到的一个或多个聚类项,即检索到的一个或多个设置,计算320(所需的)车辆设置。对于至少一个特定于乘员的车辆设置15的计算320可以包括:确定最新存储的车辆设置12、计算检索到的至少一个聚类项的预限定数目的车辆设置12的平均值、和/或基于传感器数据(例如检测环境特征的传感器的数据)来确定车辆设置12。
一旦计算出所需的一个或多个车辆设置(步骤320),在步骤330中,将对应的一个或多个车辆项目(例如车辆座椅60(图4))调整到计算出的车辆设置。检索阶段300随后被终止。
图4示意性地示出了车辆1,其包括能够执行根据推断阶段100、学习阶段200和检索阶段300中的一个或多个阶段的方法的系统50。系统50可以是处理器,并且还可以包括能够存储描述符11、车辆设置12和聚类13的数据库10。此外,系统50还可以包括存储设备,例如计算机可读介质,其被配置以存储可执行指令,当所述指令被处理器执行时,阶段100、200、300中的一个或多个阶段被执行。
系统50可以是车辆1的一部分,例如可以被集成到构成车辆1的一部分的电子控制单元(ECU)中。
此外,车辆还可包括至少一个传感器41、42,其被配置以感测生物特征识别乘员数据。图4示例性地描述了摄像头或麦克风41以及被安装在车辆1的座椅60中或座椅60上的重量传感器42。座椅60进一步示出了一个示例性车辆项目,该项目可以针对检测到的车辆乘员进行调整或个性化。换句话说,可以在检索阶段300检索特定于乘员的车辆设置15,并且可以例如通过处理器系统50使用该车辆设置来调整车辆项目60的设置。
图5示意性地示出了用于描述检测到的车辆乘员的描述符11。存储在描述符11中和/或与描述符11一起存储的数据可以包括(强)生物特征识别数据(生物特征识别属性)20和弱生物特征识别数据(生物特征识别属性)30。(强)生物特征识别数据20可以包括:面部特征数据21、语音数据22、虹膜数据和/或指纹数据,而弱生物特征识别数据30可以包括:乘员身体的重量数据31、身高数据32和/或安全带长度数据。
与描述符11类似的数据结构可以用于存储车辆设置12。换句话说,类似的描述符可以存储在数据库10中,该数据库10中包含表示特定车辆项目的设置的数据和数据值,例如,可以针对相应乘员进行调整或个性化的、与描述符11和/或与聚类13相关联的车辆中的任何项目。

Claims (13)

1.一种用于识别车辆(1)的特定于乘员的设置(15)的方法,所述方法包括:
检测(101)车辆乘员的存在性,但不检测特定车辆乘员的身份;
收集(110)检测到的车辆乘员的生物特征识别乘员数据(20,30);
基于收集到的所述生物特征识别乘员数据(20,30)的至少一部分来汇编(120)描述符(11);
将所述描述符(11)存储(220)到数据库(10)中;
基于已汇编的描述符(11)来更新(240)所述数据库(10)中的描述符的聚类(13),其中,被分组在所述聚类(13)中的描述符(11)彼此接近,并且其中所述聚类(13)对应于所述检测到的车辆乘员;
计算(130)所述已汇编的描述符(11)到所述数据库(10)中的每一个聚类(13)的距离;
将计算出的距离与阈值进行比较(140);和
如果所述计算出的距离未超过所述阈值,则:
-选择(150)存储在所述数据库(10)中的最佳匹配的聚类(13);和
-基于所述最佳匹配的聚类(13)来计算(300)车辆设置(12);
其中所述计算(300)车辆设置(12)包括:
-从所述数据库(10)中检索(310)所述最佳匹配的聚类(13)的至少一个聚类项,每一个聚类项包括至少一个车辆设置(12);和
-基于检索到的至少一个聚类项中的所述至少一个车辆设置(12)来计算(320)至少一个特定于乘员的车辆设置(15)。
2.根据权利要求1所述的方法,其特征在于,更新(240)所述数据库(10)中的描述符的聚类(13)包括:计算所述已汇编的描述符(11)与存储在所述数据库(10)中的至少一个其他描述符(11)之间的距离,和/或如果所述距离低于预限定的阈值,则将所述已汇编的描述符(11)与由所述至少一个其他描述符(11)限定的聚类(13)相关联。
3.根据权利要求1所述的方法,其特征在于,所述生物特征识别乘员数据(20、30)包括:强生物特征识别数据(20)和/或弱生物特征识别数据(30),所述强生物特征识别数据(20)包括面部特征数据(21)和/或语音数据(22),所述弱生物特征识别数据(30)包括体重数据(31)、身高数据(32)和/或安全带长度数据。
4.根据权利要求1所述的方法,其特征在于,收集(110)检测到的车辆乘员的生物特征识别乘员数据(20,30)、汇编(120)描述符(11)、存储(220)所述描述符(11)以及所述更新(240)所述数据库(10)中的描述符(11)的聚类(13)的步骤中的至少一个步骤是自动执行的,而不需要用户发起和/或用户干预。
5.根据权利要求1所述的方法,其特征在于,还包括:
将所述描述符(11)与至少一个当前的车辆设置(12)相关联(210);
其中,存储(220)所述描述符(11)包括:存储与所述至少一个当前的车辆设置(12)相关联的描述符(11)。
6.根据权利要求1所述的方法,其特征在于,所述选择(150)存储在所述数据库(10)中的最佳匹配的聚类(13)包括:选择(150)到所述已汇编的描述符(11)的距离最小的聚类(13)。
7.根据权利要求1所述的方法,其特征在于,还包括:
-基于计算出的车辆设置(12)来调整(330)至少一个车辆项目(60)。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述计算(320)至少一个特定于乘员的车辆设置(15)包括:
-确定最新储存的车辆设置(12);
-计算所述检索到的至少一个聚类项中的预限定数目的车辆设置(12)的平均值;
-计算所述检索到的至少一个聚类项中的预限定数目的车辆设置(12)的中间值;
-计算所述检索到的至少一个聚类项中的预限定数目的车辆设置(12)的模式;和/或
-基于传感器数据来确定车辆设置(12)。
9.一种计算机可读介质,其被配置以存储可执行指令,当所述可执行指令被处理器(50)执行时,使所述处理器(50)执行根据权利要求1至8中任一项所述的方法。
10.一种车辆(1),包括:
处理器(50);
存储设备(10),其包括数据库(10);和
至少一个可调节车辆项目(60),其被配置以假设特定设置;
其中,所述处理器(50)被配置以执行根据权利要求1至8中任一项所述的方法。
11.根据权利要求10所述的车辆(1),其特征在于,还包括:
至少一个传感器(41,42),其被配置以感测生物特征识别乘员数据(20,30)。
12.根据权利要求11所述的车辆(1),其特征在于,所述至少一个传感器(41、42)包括:摄像头(41)、麦克风(41)和/或重量传感器(42)。
13.根据权利要求10至12中任一项所述的车辆(1),其特征在于,所述处理器(50)被进一步地配置以,每当所述车辆(1)开始行程时,开始执行根据权利要求1至8中任一项所述的方法。
CN201911266950.8A 2018-12-11 2019-12-11 用于识别特定于乘员的设置的方法及用于执行该方法的车辆 Active CN111310551B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP18211653.3 2018-12-11
EP18211653.3A EP3666596B1 (en) 2018-12-11 2018-12-11 Method for identifying occupant-specific settings and vehicle for performing method for identifying occupant-specific settings

Publications (2)

Publication Number Publication Date
CN111310551A CN111310551A (zh) 2020-06-19
CN111310551B true CN111310551B (zh) 2023-07-18

Family

ID=64664885

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911266950.8A Active CN111310551B (zh) 2018-12-11 2019-12-11 用于识别特定于乘员的设置的方法及用于执行该方法的车辆

Country Status (3)

Country Link
US (1) US11679730B2 (zh)
EP (1) EP3666596B1 (zh)
CN (1) CN111310551B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018206717A1 (de) * 2018-05-02 2019-11-07 Audi Ag Verfahren zum fahrsituationsabhängigen Betreiben eines Kraftfahrzeugsystems eines Kraftfahrzeugs, Personalisierungseinrichtung und Kraftfahrzeug
US11238067B2 (en) * 2018-07-17 2022-02-01 Intel Corporation Systems, methods and apparatus to cluster and classify individuals in groups
US11613218B2 (en) 2020-12-14 2023-03-28 Ford Global Technologies, Llc Seat adjustment
JP2022185424A (ja) * 2021-06-02 2022-12-14 マツダ株式会社 体型クラス特定装置および該方法ならびに運転姿勢設定装置および該方法
EP4300443A1 (de) * 2022-06-29 2024-01-03 Volkswagen Ag Verfahren zur vorhersage eines fahrzeugspezifischen parameters, verfahren zum erstellen eines modells, computerprogrammprodukt und system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103280108A (zh) * 2013-05-20 2013-09-04 中国人民解放军国防科学技术大学 基于视觉感知和车联网的客车安全预警系统
CN105976140A (zh) * 2016-04-27 2016-09-28 大连海事大学 大规模流式数据环境下的车货实时匹配方法
EP3159853A1 (en) * 2015-10-23 2017-04-26 Harman International Industries, Incorporated Systems and methods for advanced driver assistance analytics
CN107924494A (zh) * 2015-07-31 2018-04-17 实耐宝公司 用于基于可替代的维修指示符来聚类维修订单的方法和系统
CN108734129A (zh) * 2018-05-21 2018-11-02 上海应用技术大学 手机及车辆定位分析方法及系统

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6810309B2 (en) * 2002-04-25 2004-10-26 Visteon Global Technologies, Inc. Vehicle personalization via biometric identification
DE102005021171A1 (de) 2005-05-06 2006-11-16 Daimlerchrysler Ag Verfahren zur Einstellung eines Insassenschutz- und/oder Komfortsystems sowie Insassenschutz- und/oder Komfortsystem
DE102010002928B4 (de) * 2010-03-16 2023-11-02 Bayerische Motoren Werke Aktiengesellschaft Kraftfahrzeugkonfigurationssystem
JP2015505284A (ja) 2011-12-29 2015-02-19 インテル コーポレイション 車両の乗員を識別するシステム、方法、及び装置
WO2013133791A1 (en) * 2012-03-05 2013-09-12 Intel Corporation User identification and personalized vehicle settings management system
CN103065151B (zh) * 2012-11-04 2017-02-22 北京工业大学 一种基于深度信息的车辆识别方法
CN103310233B (zh) * 2013-06-28 2016-03-23 青岛科技大学 同类行为多视图间相似度挖掘方法及行为识别方法
US9193359B2 (en) 2013-08-12 2015-11-24 GM Global Technology Operations LLC Vehicle systems and methods for identifying a driver
US20150046060A1 (en) * 2013-08-12 2015-02-12 Mitsubishi Electric Research Laboratories, Inc. Method and System for Adjusting Vehicle Settings
US9475496B2 (en) * 2013-11-22 2016-10-25 Ford Global Technologies, Llc Modified autonomous vehicle settings
DE102015207774A1 (de) * 2015-04-28 2016-11-03 Volkswagen Aktiengesellschaft Vorrichtung zur Identifizierung eines Fahrers und Fahrzeug
DE102016008339A1 (de) * 2016-06-21 2017-02-09 Daimler Ag Verfahren zur Identifikation eines Fahrzeugnutzers in einem Fahrzeug
US10850693B1 (en) * 2018-04-05 2020-12-01 Ambarella International Lp Determining comfort settings in vehicles using computer vision
US10953850B1 (en) * 2018-04-05 2021-03-23 Ambarella International Lp Seatbelt detection using computer vision
US11040619B1 (en) * 2018-04-05 2021-06-22 Ambarella International Lp Limiting car behavior based on a pre-set driver profile enabled by face recognition
US10867218B2 (en) * 2018-04-26 2020-12-15 Lear Corporation Biometric sensor fusion to classify vehicle passenger state
US10949659B2 (en) * 2019-04-16 2021-03-16 GM Global Technology Operations LLC Vehicle occupant detection
EP3864383A4 (en) * 2019-07-10 2021-12-22 Vibrant Corporation DIGITAL TWIN MODEL INVERSION FOR TEST

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103280108A (zh) * 2013-05-20 2013-09-04 中国人民解放军国防科学技术大学 基于视觉感知和车联网的客车安全预警系统
CN107924494A (zh) * 2015-07-31 2018-04-17 实耐宝公司 用于基于可替代的维修指示符来聚类维修订单的方法和系统
EP3159853A1 (en) * 2015-10-23 2017-04-26 Harman International Industries, Incorporated Systems and methods for advanced driver assistance analytics
CN105976140A (zh) * 2016-04-27 2016-09-28 大连海事大学 大规模流式数据环境下的车货实时匹配方法
CN108734129A (zh) * 2018-05-21 2018-11-02 上海应用技术大学 手机及车辆定位分析方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
An Unsupervised Random Forest Clustering Technique for Automatic Traffic Scenario Categorization;F. Kruber等;《2018 21st International Conference on Intelligent Transportation Systems (ITSC)》;2811-2818 *
车联网条件下驾驶员行为识别方法;陈珂;《中国优秀硕士学位论文全文数据库:工程科技Ⅱ辑》(第4期);C034-744 *

Also Published As

Publication number Publication date
US20200180534A1 (en) 2020-06-11
CN111310551A (zh) 2020-06-19
US11679730B2 (en) 2023-06-20
EP3666596B1 (en) 2021-04-28
US20230148445A9 (en) 2023-05-11
EP3666596A1 (en) 2020-06-17

Similar Documents

Publication Publication Date Title
CN111310551B (zh) 用于识别特定于乘员的设置的方法及用于执行该方法的车辆
CN108189804B (zh) 一种用于车辆的人脸识别系统及人脸识别方法
US8238617B2 (en) Vehicle operation control device and method, as well as, program
JP4267584B2 (ja) 機器制御装置及びその方法
US9663112B2 (en) Adaptive driver identification fusion
US9573541B2 (en) Systems, methods, and apparatus for identifying an occupant of a vehicle
EP2836410B1 (en) User identification and personalized vehicle settings management system
US8437919B2 (en) Vehicle personalization system
JP2019531560A (ja) 自動運転者識別システムおよび方法
KR101165106B1 (ko) 얼굴 인식에 기반한 운전자 인증 장치 및 방법
US20140266623A1 (en) Systems, methods, and apparatus for learning the identity of an occupant of a vehicle
US20150046060A1 (en) Method and System for Adjusting Vehicle Settings
EP1434163A2 (en) Apparatus and method for acquisition, validation and verification of biometric features
JP6855266B2 (ja) 顔認証システム、顔認証方法、及び顔認証プログラム
CN111382665B (zh) 信息处理装置以及计算机可读存储介质
KR20220042886A (ko) 스마트 운전 자세 제어 시스템 및 방법
US20220375261A1 (en) Driver recognition to control vehicle systems
JP2021146759A (ja) 移動体用認証システム及び移動体用認証プログラム
CN111655547A (zh) 一种配置调整方法、装置、可移动平台及存储介质
US20200077256A1 (en) Computer-implemented identification method
CN116279238A (zh) 驾驶辅助装置的位置调整方法、装置及驾驶装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant