CN117022142A - 车载功能控制方法、装置、设备及可读存储介质 - Google Patents

车载功能控制方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN117022142A
CN117022142A CN202310973950.1A CN202310973950A CN117022142A CN 117022142 A CN117022142 A CN 117022142A CN 202310973950 A CN202310973950 A CN 202310973950A CN 117022142 A CN117022142 A CN 117022142A
Authority
CN
China
Prior art keywords
function key
driver
function
controlled
display color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310973950.1A
Other languages
English (en)
Inventor
张强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Original Assignee
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Geely Holding Group Co Ltd, Zhejiang Zeekr Intelligent Technology Co Ltd filed Critical Zhejiang Geely Holding Group Co Ltd
Priority to CN202310973950.1A priority Critical patent/CN117022142A/zh
Publication of CN117022142A publication Critical patent/CN117022142A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种车载功能控制方法、装置、设备及可读存储介质,通过追踪驾驶员的视线方向,根据驾驶员视线停留信息预锁定车载中控屏幕上的目标功能按键,并在接收到确认执行的指示后启用所述目标功能,使得驾驶员可以通过眼神实现与中控屏幕的交互,减小了对行车视线的遮挡,提高了车辆行驶的安全性。

Description

车载功能控制方法、装置、设备及可读存储介质
技术领域
本申请涉及车辆控制技术领域,尤其涉及一种车载功能控制方法、装置、设备及可读存储介质。
背景技术
随着汽车领域的智能化发展,车辆搭载的中控屏幕功能越来越丰富,为行车提供便利。然而,驾驶员在驾车行驶过程中使用该中控屏幕时,通常需要伸手操控该屏幕以启用相应的车载功能,此种交互方式容易遮挡驾驶员行车视线,从而影响行车安全。
发明内容
有鉴于此,为解决上述技术问题,本申请提供一种车载功能控制方法、装置、设备及可读存储介质。
具体地,本申请是通过如下技术方案实现的:
根据本申请实施例的第一方面,提供一种车载功能控制方法,所述方法包括:
响应于接收到激活指令,检测驾驶员的视线方向;
在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
可选地,在所述视线方向移动至车辆的中控屏幕的情况下,所述方法还包括:
控制启动车辆的自动驾驶功能,并控制采集设备收集驾驶员的视线在所述中控屏幕上的视线停留信息。
可选地,所述第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个功能键区域的第一注视时长记录;所述根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,包括:
根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,所述显示颜色根据单次记录的第一注视时长和连续记录的次数进行调整;
确定显示颜色最深的功能键区域为待控制功能键区域。
可选地,所述根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,包括:
对任一所述功能键区域,响应于连续多次记录的第一注视时长满足设定时长,则调整所述功能键区域的显示颜色为所述各个功能键区域中最深的显示颜色,并停止对其他各个功能键区域的颜色调整。
可选地,在确定显示颜色最深的功能键区域为待控制功能键区域之前,所述方法还包括:
获取所述中控屏幕上使用频率最高的历史功能键,所述历史功能键是指大数据统计的同类型车辆在当前工况下使用频率最高的功能键,或者所述历史功能键是指大数据统计的所述驾驶员在当前工况下的使用频率最高的功能键;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键一致,则确定所述显示颜色最深的功能键区域为待控制功能键区域;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键不一致,则根据所述第一注视时长记录,从所述历史功能键所在区域与所述显示颜色最深的功能键区域中确定出待控制功能键区域。
可选地,所述第一注视时长记录可以通过下述方式得到:
确定驾驶员的视线方向在所述中控屏幕上的注视点位置;
根据该注视点位置与所述中控屏幕上各个功能键的位置的距离,确定距离该注视点最近的功能键为单次记录对应的驾驶员的视线停留区域;
根据该距离该注视点最近的功能键、以及注视时长,得到单条第一注视时长记录。
可选地,所述根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,包括:
根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,并在中控屏幕上放大所述目标界面;
在获取到驾驶员确认选定所述目标界面的指示信息时,根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
可选地,第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个设定区域的第二注视时长记录;所述根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,包括:
根据所述第二注视时长记录,调整所述各个设定区域对应的显示界面的显示颜色,所述显示颜色根据单次记录的第二注视时长和连续记录的次数进行调整;确定显示颜色最深的设定区域对应的显示界面为所述目标界面。
根据本申请实施例的第二方面,提供一种车载功能控制装置,所述装置包括:
检测模块,用于响应于接收到激活指令,检测驾驶员的视线方向;
功能键确定模块,用于在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
控制模块,用于在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
可选地,在所述视线方向移动至车辆的中控屏幕的情况下,所述装置还包括:控制启动车辆的自动驾驶功能,并控制采集设备收集驾驶员的视线在所述中控屏幕上的视线停留信息。
可选地,所述第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个功能键区域的第一注视时长记录;所述功能键确定模块包括:
调整模块,用于根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,所述显示颜色根据单次记录的第一注视时长和连续记录的次数进行调整;
第一确定模块,用于确定显示颜色最深的功能键区域为待控制功能键区域。
可选地,所述调整模块具体用于:
对任一所述功能键区域,响应于连续多次记录的第一注视时长满足设定时长,则调整所述功能键区域的显示颜色为所述各个功能键区域中最深的显示颜色,并停止对其他各个功能键区域的颜色调整。
可选地,在确定显示颜色最深的功能键区域为待控制功能键区域之前,所述装置还包括:
获取所述中控屏幕上使用频率最高的历史功能键,所述历史功能键是指大数据统计的同类型车辆在当前工况下使用频率最高的功能键,或者所述历史功能键是指大数据统计的所述驾驶员在当前工况下的使用频率最高的功能键;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键一致,则确定所述显示颜色最深的功能键区域为待控制功能键区域;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键不一致,则根据所述第一注视时长记录,从所述历史功能键所在区域与所述显示颜色最深的功能键区域中确定出待控制功能键区域。
可选地,所述第一注视时长记录可以通过下述方式得到:
确定驾驶员的视线方向在所述中控屏幕上的注视点位置;
根据该注视点位置与所述中控屏幕上各个功能键的位置的距离,确定距离该注视点最近的功能键为单次记录对应的驾驶员的视线停留区域;
根据该距离该注视点最近的功能键、以及注视时长,得到单条第一注视时长记录。
可选地,所述功能键确定模块包括:
目标界面确定模块,用于根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,并在中控屏幕上放大所述目标界面;
第二确定模块,用于在获取到驾驶员确认选定所述目标界面的指示信息时,根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
可选地,第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个设定区域的第二注视时长记录;所述目标界面确定模块具体用于:
根据所述第二注视时长记录,调整所述各个设定区域对应的显示界面的显示颜色,所述显示颜色根据单次记录的第二注视时长和连续记录的次数进行调整;确定显示颜色最深的设定区域对应的显示界面为所述目标界面。
根据本申请实施例的第三方面,提供一种电子设备,所述电子设备包括:存储器和处理器;所述存储器,用于存储计算机程序;所述处理器,用于通过调用所述计算机程序,执行上述车载功能控制方法。
根据本申请实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现上述车载功能控制方法。
本申请实施例提供的技术方案可以包括以下有益效果:
在本申请提供的技术方案中,通过追踪驾驶员的视线方向,根据驾驶员视线停留信息预锁定车载中控屏幕上的目标功能按键,并在接收到确认执行的指示后启用所述目标功能,使得驾驶员可以通过眼神实现与中控屏幕的交互,减小了对行车视线的遮挡,提高了车辆行驶的安全性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的和解释性的,并不能限制本申请。此外,本申请中的任一实施例并不需要达到上述的全部效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1是本申请一示例性实施例示出的一种车载功能控制方法流程示意图;
图2是本申请一示例性实施例示出的一种确定待控制功能键的流程示意图;
图3是本申请一示例性实施例示出的另一种确定待控制功能键的流程示意图;
图4是本申请一示例性实施例示出的一种车载中控屏幕的界面示意图;
图5是本申请一示例性实施例示出的另一种车载功能控制方法流程示意图;
图6是本申请一示例性实施例示出的一种车载功能控制装置的结构示意图;
图7是本申请一示例性实施例示出的一种电子设备的硬件示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一注视时长记录也可以被称为第二注视时长记录,类似地,第二注视时长记录也可以被称为第一注视时长记录。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本申请提供一种车载功能控制方法,该方法应用于车辆的控制设备或装置,如车身处理器。如图1所示,该车载功能控制方法可以包括以下步骤:
S101,响应于接收到激活指令,检测驾驶员的视线方向;
激活指令用于指示车辆进入驾驶员通过视线控制车载屏幕的操作模式,实时追踪驾驶员的眼神以获取驾驶员的视线方向。该激活指令可以通过下述任一种方式发出:
该激活指令可以由独立于车辆的触摸板发出,该触摸板与车辆之间可以进行通信,触摸板在检测到用户输入时,向车辆发送激活指令。其中,所述用户输入包括但不限于用户输入的特定手势、语音等信息。
或者,该激活指令可以由车辆自身在检测到预先设定的用户输入时发出,控制开始检测驾驶员的视线方向。例如,可以在方向盘上设置一个触摸感应区域或功能按键,检测到用于发出激活指令的用户输入时,车辆生成激活指令。
驾驶员的视线方向可以利用车载视线采集设备获取并进行检测。比如说,可以直接利用驾驶员监控系统DMS视线追踪传感器实时跟踪驾驶员的视线方向;或者,还可以通过车载摄像装置拍摄驾驶员面部图像,根据图像中驾驶员的眼睛特征确定驾驶员的视线方向。
S102,在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
视线停留信息用于记录驾驶员的视线与中控屏幕的交互情况;当驾驶员的视线方向朝向车辆的中控屏幕时,利用已装载的相关设备跟踪检测驾驶员的视线,获取视线在该屏幕上的停留信息,比如说驾驶员的视线在屏幕上的注视点位置、停留在该注视点的注视时长等信息;依据该视线停留信息,可以确定出驾驶员当前注视的功能键区域,所述待控制功能键区域中包含一个功能键,从而将该功能键作为已确定的待控制功能键,将该功能键关联的功能作为驾驶员可能期望启用的车载功能。
提示用户已确定的待控制功能键可以包括但不限于下述任一种方式:可以在中控屏幕上放大待控制功能键,或者可以控制待控制功能键以闪烁的方式呈在屏幕,又或者通过语音播报的形式提示驾驶员。
S103,在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
该指示信息和上述激活指令的发出方式类似,如使用触摸板发送指示信息或者车辆自身检测到驾驶员的特定输入时发出指示信息。响应于获取到确认启用的指示信息,则表示驾驶员期望启用该待控制功能键对应的功能,因此基于该指示信息,控制车辆打开该功能键关联的功能,可以通过发送控制指令到车辆处理器以启用该功能。
若接收到指示信息表示不启用所述功能键,则可以在中控屏幕上再次提示驾驶员是否确认不启用该功能键;并在再次提示得到的结果为不启用该功能键时,可以根据第一视线停留信息,从除该功能键区域外的其他功能键区域中确定新的待控制功能键区域。
在本公开实施例中,在车辆支持视线交互的情况下,通过追踪驾驶员的视线方向,根据驾驶员的视线在中控屏幕的停留信息,预锁定屏幕上的目标功能按键,并依据驾驶员的是否执行指示信息进行功能按键启用二重验证,实现了驾驶员可以通过眼神实现与中控屏幕的交互,并能够准确控制打开相应的车载功能,使得驾驶员在车辆行驶过程中无需通过手动方式控制该中控屏幕,减小了对行车视线的遮挡,提高了车辆行驶的安全性。
在一些实施例中,上述步骤S102中所述的第一视线停留信息至少可以包括驾驶员的视线停留于中控屏幕上各个功能键区域的第一注视时长记录;如图2所示,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,可以通过下述步骤实现:
S1021,根据该第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,所述显示颜色根据单次记录的第一注视时长和连续记录的次数进行调整;
该第一注视时长记录用于统计驾驶员的视线落点于中控屏幕上的不同功能键所在区域时所对应的注视时长以及对同一功能键区域的注视次数等信息,可以根据实时检测到的驾驶员的视线在该中控屏幕上的注视点、以及在该注视点的注视时长进行不断更新,将所述注视点映射于屏幕上的一个功能键所在区域,得到一条关于该功能键所在区域的注视时长记录。
调整功能键区域对应的界面显示颜色,可以是根据第一注视时长记录调整至少一个功能键区域的当前显示颜色的深浅;其中,显示颜色的深浅单次调整幅度可以预先设置。在首次对功能键区域的界面显示颜色进行调整之前,对当前各个功能键区域的显示颜色进行初始化颜色深浅的调整,控制所述屏幕上各个功能键区域的显示颜色的深浅度保持一致。
预先配置停止调整该功能键区域的显示颜色的条件,比如说,可以设置一个调整周期如10s;或者,可以设置为在第一注视时长记录包含M条记录时,停止显示颜色的调整。
根据第一注视时长记录调整功能键区域对应的界面显示颜色,可以包括下述至少一种实施方式:
根据该注视时长记录中的单条记录,确定是否加深该单条记录对应的功能键区域的显示颜色,并执行对应操作;
通过该方式调整功能键区域的显示颜色时,可以在每获取到一条注视时长记录,即根据该记录调整对应的功能键区域的显示颜色深浅;若单次记录的注视时长满足设定时长,将该单次记录对应的功能键区域的显示颜色加深;在处理设定数目的单次记录后,停止对各个功能键区域的显示颜色的调整。
或者,基于该注视时长记录中的连续多条记录,确定出一个待调整显示颜色的功能键区域,并将其显示颜色加深;
例如,可以响应于存在连续N条注视时长记录对应同一功能键区域,则将该功能键区域的显示颜色加深;N大于或等于2。
S1022,确定显示颜色最深的功能键区域为待控制功能键区域。
举例来讲,假设设定时长为1秒,若驾驶员第一次注视“空调”键区域1秒,第二次注视“空调”键区域3秒,则依据上述第一种显示颜色调整方式,若设定数目取值2,则在停止调整时,确定显示颜色最深的功能键区域为“空调”键区域,将其作为待控制功能键区域。
在本公开实施例中,基于获取的第一注视时长记录,在中控屏幕的各功能键区域的显示颜色初始深浅一致时,按照预设的深浅度调整幅度对至少一个功能键区域的显示颜色进行调整,得到存在明显颜色深浅对比的各功能键区域,从而将显示颜色最深的功能键区域作为待控制功能键区域,通过颜色深浅对比直观表示驾驶员的视线在中控屏幕上停留位置及时长,便于快速地确定出驾驶员期望启用的功能键。
在一些实施例中,所述第一注视时长记录可以通过下述方式得到:
确定驾驶员的视线方向在所述中控屏幕上的注视点位置;根据该注视点位置与所述中控屏幕上各个功能键位置的距离,确定距离该注视点最近的功能键为单次记录对应的驾驶员的视线停留区域;根据该距离该注视点最近的功能键、以及注视时长,得到单条第一注视时长记录。
在本公开实施例中,通过注视点位置与各功能键位置的距离远近,确定单次记录所对应的功能键区域,增强了获取的第一注视时长记录的精准度。
在一些实施例中,上述步骤S1021所述的根据第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,还可以包括下述方式:
对任一所述功能键区域,响应于连续多次记录的第一注视时长满足设定时长,则调整所述功能键区域的显示颜色为所述各个功能键区域中最深的显示颜色,并停止对其他各个功能键区域的颜色调整。
也即,对所述第一注视时长记录,判断是否存在连续多次注视时长记录均对应于同一功能按键、且该连续多次注视时长记录中的每次注视时长都满足设定时长,则若存在唯一的功能键区域,则直接将该功能键区域对应的显示颜色调整为各个功能键区域中最深;或者若存在至少两个功能键区域,则可以根据单次记录中的注视时长比对,确定出唯一的功能键区域,并将该功能键区域的对应的显示颜色调整为各个功能键区域中最深。
如,驾驶员连续三次注视“音乐”键区域、且三次注视时长都大于设定时长,则直接将该“音乐”键区域的显示颜色调整为中控屏幕上各功能键中最深的。
在本公开实施例中,通过存在连续多条注视时长记录以及各单条记录中注视时长满足设定时长两重判定条件确定显示颜色最深的功能键区域,减小了驾驶员误操作影响,提高了待控制功能键区域确定的准确性。
在一些实施例中,在执行上述步骤S1022所述的确定显示颜色最深的功能键区域为待控制功能键区域之前,该方法还可以包括下述处理步骤:
获取所述中控屏幕上使用频率最高的历史功能键,所述历史功能键是指大数据统计的同类型车辆在当前工况下使用频率最高的功能键,或者所述历史功能键是指大数据统计的所述驾驶员在当前工况下的使用频率最高的功能键;
判断所述历史功能键与所述显示颜色最深的功能键区域中的功能键是否一致;若是,则确定所述显示颜色最深的功能键区域为待控制功能键区域;
若否,则根据所述第一注视时长记录,从所述历史功能键所在区域与所述显示颜色最深的功能键区域中确定出待控制功能键区域。
也即,为了提高确定待控制功能键区域的准确性,在得到显示颜色最深的功能键区域时,增加利用使用频率最高的历史功能键实现的判定逻辑,通过判断相同工况下该历史功能键与所述显示颜色最深的功能键区域中的功能键是否一致,确定出待控制功能键区域。
对于历史功能键与所述显示颜色最深的功能键区域中的功能键不一致的情况,可以根据关于显示颜色最深的功能键区域的第一注视时长记录,确定驾驶员视线在中控屏幕上的注视点位置与两个功能键距离的远近,将距离最近的功能键区域为待控制功能键区域。
例如,历史功能键为A,显示颜色最深的功能键区域中的功能键为B,根据关于B的注视时长记录,获取驾驶员视线停留在屏幕上的注视点位置C;可以根据单条记录,分别确定注视点位置C与A的距离、以及C与B的距离,整体计算得到与C距离最近的功能键,将该功能键区域作为待控制功能键区域。
在本公开实施例中,通过增加利用使用频率最高的历史功能键实现的判定逻辑,在获取到显示颜色最深的功能键区域的基础上作进一步判定,从而得到待控制功能键区域,提高了确定待控制功能键区域的准确性。
在一些实施例中,前述步骤S102所述的根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,参见图3,还可以通过下述方式实现:
S1021a,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,并在中控屏幕上放大所述目标界面;
该待控制目标界面是指包含至少一个功能键的显示界面。例如,中控屏幕分为导航、音乐、空调三个显示界面模块,空调界面上包括打开和关闭两个功能键,该导航、音乐、空调三个显示界面中任一项均可作为所述待控制目标界面。
S1022b,在获取到驾驶员确认选定所述目标界面的指示信息时,根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
确认选定所述目标界面的指示信息,表示驾驶员期望启用的功能键位于该目标界面内,进一步地,基于放大的目标界面,依据驾驶员在该目标界面上的视线停留信息,确定出待控制功能键区域。
其中,上述根据第一视线停留信息确定该目标界面、以及根据第二视线停留信息确定待控制功能键区域的实现原理相同。
在一个示例中,所述视线停留信息包括对设定区域的第二注视时长记录;所述设定区域为中控屏幕上各个功能界面区域或者目标界面上各个功能键区域;根据驾驶员在所述设定区域的注视时长记录确定待控制设定区域,可以包括下述方式:根据该第二注视时长记录,调整所述设定区域对应的显示界面的显示颜色,所述显示颜色根据单次记录的第二注视时长和连续记录的次数进行调整;确定显示颜色最深的设定区域为待控制设定区域。
在一个示例中,响应于待控制目标界面只包含一个功能键,则直接确定该功能键所在区域为目标待控制功能键区域;响应于待控制目标界面包含至少两个功能键,则根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
具体实现方式参见前述实施例相关步骤的描述,本实施例对此不再赘述。
在本公开实施例中,先确定待控制目标界面并放大,并基于驾驶员的指示信息,获取驾驶员在目标界面上的视线停留信息进一步确定待控制功能键,通过逐层缩小区域范围结合驾驶员的确认指示信息的方式,提高了确定待控制功能键的准确性。
在一些实施例中,对上述步骤S1022b的另一种情况,即指示信息表示驾驶员不选中所述目标界面,则可以在中控屏幕上再次提示驾驶员是否确认不选中目标界面,以避免上述指示信息是由于驾驶员误操作产生的;若再次提示得到的结果为不选中所述目标界面,则根据第一视线停留信息,从除目标界面外的其他界面中确定新的目标界面。
在一些实施例中,对前述实施例中步骤S102所述的所述视线方向移动至车辆的中控屏幕的情况,该方法还可以包括下述步骤:控制启动车辆的自动驾驶功能,并控制采集设备收集驾驶员的视线在所述中控屏幕上的视线停留信息。
在本公开实施例中,在驾驶员视线移向中控屏幕时启动自动驾驶功能,车辆的方向盘处于自动控制状态,避免驾驶员视线转移导致带来的空间操控误差,提高行车的安全性。
在一些实施例中,对前述实施例中步骤S102的另一种情况,即检测到驾驶员的视线方向没有移动至车辆的中控屏幕,则可以维持当前的视线检测状态,直到检测到驾驶员的视线方向朝向中控屏幕;或者,可以在设定周期内没有检测到驾驶员的视线方向朝向中控屏幕时,发出提示信息,如控制在中控屏幕上弹出提示窗、语音提示等。
在一些实施例中,对前述步骤中确定待控制目标界面或者待控制功能键区域之后,可以在抬头显示系统HUD中发出提示信息,以确定是否显示所述已确定的目标界面或功能键区域,并在接收到用户确认显示的指示信息后,将选定的目标界面或功能键区域在HUD显示。
在本公开实施例中,通过在抬头显示系统HUD中显示已确定的目标界面或功能键区域,减少了驾驶员利用视线与中控屏幕交互方式对行车视线的遮挡,以提高车辆行驶的安全。
在一些实施例中,在前述实施例步骤S103所述的控制打开所述待控制功能键对应的功能之后,该车载功能控制方法还可以包括步骤:记录本次启用该待控制功能键时的车辆工况信息以及启用该待控制功能键的整个流程节点,并将记录结果存储至对应的云服务器,以便于在对应的返程中优先推荐待控制功能键对应的功能。该记录结果也可以作为本车或者其他车辆在相同工况下确定待控制功能键区域的参考信息。
接下来以车辆的中控屏幕包括音乐、地图、天气、广播以及其他功能五个功能界面为例,对本申请实施例提供的车载功能控制方法作示例性说明,如图4所示,各功能界面包含至少一个功能键区域。驾驶员在车辆驾驶过程中,采用本实施例提供的方法打开上述任一车载功能,参见图5,可以包括下述步骤:
S501,驾驶员在设定区域提供用户输入,触发激活指令;
该设定区域可以是独立于车辆的触摸板屏幕,将该触摸板设置在驾驶员的驾驶操作范围内以便于在不影响行车的情况下实现用户输入;或者该设定区域可以是设置驾驶操作范围内的用户输入检测区域,如设置方向盘的触摸检测区域或一个触发按钮等。
S502,车辆控制器在接收到激活指令时,实时追踪驾驶员的视线方向;
S503,响应于所述视线方向移动至中控屏幕,记录驾驶员视线在该屏幕上的注视点位置以及注视时长,得到第三注视时长记录;
所述注视时长记录可以包括视线注视点位置、单次注视时长等信息,注视点位置与单次注视时长一一对应。
例如,驾驶员期望打开空调,将视线方向移动至图4“空调启动/关闭”按键所在区域,可以根据已装载的设备确定驾驶员的视线注视点在中控屏幕上的位置信息,从而可以确定出注视点位置所对应的功能界面或功能按键。假设驾驶员不改变注视点位置,第一次注视该区域2秒,第二次注视该区域3秒,第一注视时长包括该注视点位置和两次注视时长。
S504,调整中控屏幕上各个功能界面的显示颜色的深浅度保持一致,并根据第三注视时长记录,调整至少一个功能界面的显示颜色的深浅,并在第三注视时长记录满足设定条件的情况下停止对功能界面显示颜色的调整;
所述设定条件可以包括但不限于下述任一条件:获取第三注视时长记录的时间满足设定周期;第三注视时长记录中的记录条数满足设定数量;第三注视时长记录中存在连续多条记录对应同一功能界面;第三注视时长记录中存在至少两条记录对应的注视时长满足时长阈值。
S505,确定显示颜色最深的一个功能界面为目标功能界面,控制在中控屏幕放大该目标功能界面;
仍以上述视线方向移动至图4中“空调启动/关闭”按键所在区域为例,在根据第三注视时长记录调整显示颜色之前,先将图4中五个功能界面的显示颜色的深浅度调整一致;根据第三注视时长记录,将“空调启动/关闭”按键所在的其他功能这个界面的显示颜色加深;在停止调整显示颜色时,若该其他功能这个界面显示颜色最深,则将其他功能这个界面作为目标功能界面,并放大显示该其他功能界面。
S506,驾驶员提供设定输入,以生成第一指示信息,所述第一指示信息用于表示是否选中该目标功能界面;
S507,在第一指示信息表示确认选中该目标功能界面时,继续追踪驾驶员的视线方向,记录驾驶员视线在该目标功能界面的上注视点位置以及注视时长,得到第四注视时长记录;
S508,调整目标功能界面上各个功能键区域的显示颜色的深浅度保持一致,并根据第四注视时长记录,调整至少一个功能键区域的显示颜色的深浅,并在第四注视时长记录满足设定条件的情况下停止对功能键区域显示颜色的调整;
其中,根据第四注视时长记录调整功能键区域的显示颜色的方式跟上述调整功能界面的显示颜色方式一致。
S509,确定显示颜色最深的功能键区域中的功能键为目标功能键,并在第二指示信息表示确认启用该目标功能键时,控制打开该目标功能键对应的功能。
仍以上述确定“其他功能”为目标功能界面为例,该目标功能界面包括“设置”、“倒车后视”、“空调启用/关闭”、“车载蓝牙”以及“音量”这五个功能按键区域。中控屏幕上放大显示该“其他功能”这个界面,追踪驾驶员的视线方向获取在中控屏幕上的注视点位置,将注视点位置映射到“其他功能”的其中功能键区域,记录该功能键区域及注视时长,得到第四注视时长记录,如第一次注视“空调启动/关闭”区域3秒,第二次注视“空调启动/关闭”区域2秒;根据第四注视时长记录将“空调启动/关闭”区域的显示颜色加深;在停止调整显示颜色时,若“空调启动/关闭”区域的显示颜色最深,则将“空调启动/关闭”键作为目标功能键。
基于相同的方式和原理,若驾驶员期望打开地图,则首先通过第三注视时长记录确定“地图”功能界面为目标功能界面,并获取驾驶员视线在该目标功能界面上的第四注视时长记录,确定“进入地图”为目标功能键,并控制打开该目标功能键。
在本公开实施例中,根据获取的注视时长记录调整功能界面、以及功能界面上的功能键区域的显示颜色的深浅,通过颜色深浅对比和通过逐层缩小区域范围方式,便于快速准确地确定出驾驶员期望启用的功能键,实现了驾驶员可以通过眼神实现与中控屏幕的交互,并能够准确控制打开相应的车载功能,使得驾驶员在车辆行驶过程中无需通过手动方式控制该中控屏幕,减小了对行车视线的遮挡,提高了车辆行驶的安全性。
与前述车载功能控制方法的实施例相对应,参见图6所示,本申请还提供了车载功能控制装置的实施例,所述装置包括:
检测模块601,用于响应于接收到激活指令,检测驾驶员的视线方向;
功能键确定模块602,用于在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
控制模块603,用于在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
在一些实施例中,在所述视线方向移动至车辆的中控屏幕的情况下,所述装置还包括:控制启动车辆的自动驾驶功能,并控制采集设备收集驾驶员的视线在所述中控屏幕上的视线停留信息。
在一些实施例中,所述第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个功能键区域的第一注视时长记录;所述功能键确定模块包括:
调整模块,用于根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,所述显示颜色根据单次记录的第一注视时长和连续记录的次数进行调整;
第一确定模块,用于确定显示颜色最深的功能键区域为待控制功能键区域。
在一些实施例中,所述调整模块具体用于:
对任一所述功能键区域,响应于连续多次记录的第一注视时长满足设定时长,则调整所述功能键区域的显示颜色为所述各个功能键区域中最深的显示颜色,并停止对其他各个功能键区域的颜色调整。
在一些实施例中,在确定显示颜色最深的功能键区域为待控制功能键区域之前,所述装置还包括:
获取所述中控屏幕上使用频率最高的历史功能键,所述历史功能键是指大数据统计的同类型车辆在当前工况下使用频率最高的功能键,或者所述历史功能键是指大数据统计的所述驾驶员在当前工况下的使用频率最高的功能键;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键一致,则确定所述显示颜色最深的功能键区域为待控制功能键区域;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键不一致,则根据所述第一注视时长记录,从所述历史功能键所在区域与所述显示颜色最深的功能键区域中确定出待控制功能键区域。
在一些实施例中,所述第一注视时长记录可以通过下述方式得到:
确定驾驶员的视线方向在所述中控屏幕上的注视点位置;
根据该注视点位置与所述中控屏幕上各个功能键的位置的距离,确定距离该注视点最近的功能键为单次记录对应的驾驶员的视线停留区域;
根据该距离该注视点最近的功能键、以及注视时长,得到单条第一注视时长记录。
在一些实施例中,所述功能键确定模块包括:
目标界面确定模块,用于根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,并在中控屏幕上放大所述目标界面;
第二确定模块,用于在获取到驾驶员确认选定所述目标界面的指示信息时,根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
在一些实施例中,第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个设定区域的第二注视时长记录;所述目标界面确定模块具体用于:
根据所述第二注视时长记录,调整所述各个设定区域对应的显示界面的显示颜色,所述显示颜色根据单次记录的第二注视时长和连续记录的次数进行调整;确定显示颜色最深的设定区域对应的显示界面为所述目标界面。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本申请实施例还提供了一种电子设备,该电子设备的结构示意图如图7所示,该电子设备700包括至少一个处理器701、存储器702和总线703,至少一个处理器701均与存储器702电连接;存储器702被配置用于存储有至少一个计算机可执行指令,处理器701被配置用于执行该至少一个计算机可执行指令,从而执行如本申请中任意一个实施例或任意一种可选实施方式提供的任意一种车载功能控制方法的步骤。
进一步,处理器701可以是FPGA(Field-Programmable Gate Array,现场可编程门阵列)或者其它具有逻辑处理能力的器件,如MCU(Microcontroller Unit,微控制单元)、CPU(Central Process Unit,中央处理器)。
在本申请提供的技术方案中,通过追踪驾驶员的视线方向,根据驾驶员视线停留信息预锁定车载中控屏幕上的目标功能按键,并在接收到确认执行的指示后启用所述目标功能,使得驾驶员可以通过眼神实现与中控屏幕的交互,减小了对行车视线的遮挡,提高了车辆行驶的安全性。
本申请实施例还提供了另一种可读存储介质,存储有计算机程序,该计算机程序用于被处理器执行时实现本申请中任意一个实施例或任意一种可选实施方式提供的任意一种车载功能控制方法的步骤。
本申请实施例提供的可读存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory,只读存储器)、RAM(Random AccessMemory,随即存储器)、EPROM(Erasable Programmable Read-Only Memory,可擦写可编程只读存储器)、EEPROM(Electrically Erasable Programmable Read-Only Memory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,可读存储介质包括由设备(例如,计算机)以能够读的形式存储或传输信息的任何介质。
在本申请提供的技术方案中,通过追踪驾驶员的视线方向,根据驾驶员视线停留信息预锁定车载中控屏幕上的目标功能按键,并在接收到确认执行的指示后启用所述目标功能,使得驾驶员可以通过眼神实现与中控屏幕的交互,减小了对行车视线的遮挡,提高了车辆行驶的安全性。
由此,主题的特定实施例已被描述。其他实施例在所附权利要求书的范围以内。在某些情况下,权利要求书中记载的动作可以以不同的顺序执行并且仍实现期望的结果。此外,附图中描绘的处理并非必需所示的特定顺序或顺次顺序,以实现期望的结果。在某些实现中,多任务和并行处理可能是有利的。
虽然本说明书包含许多具体实施细节,但是这些不应被解释为限制任何发明的范围或所要求保护的范围,而是主要用于描述特定发明的具体实施例的特征。本说明书内在多个实施例中描述的某些特征也可以在单个实施例中被组合实施。另一方面,在单个实施例中描述的各种特征也可以在多个实施例中分开实施或以任何合适的子组合来实施。此外,虽然特征可以如上所述在某些组合中起作用并且甚至最初如此要求保护,但是来自所要求保护的组合中的一个或多个特征在一些情况下可以从该组合中去除,并且所要求保护的组合可以指向子组合或子组合的变型。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (10)

1.一种车载功能控制方法,其特征在于,所述方法包括:
响应于接收到激活指令,检测驾驶员的视线方向;
在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
2.根据权利要求1所述的方法,其特征在于,在所述视线方向移动至车辆的中控屏幕的情况下,所述方法还包括:
控制启动车辆的自动驾驶功能,并控制采集设备收集驾驶员的视线在所述中控屏幕上的视线停留信息。
3.根据权利要求1所述的方法,其特征在于,所述第一视线停留信息至少包括驾驶员的视线停留于中控屏幕上各个功能键区域的第一注视时长记录;
所述根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,包括:
根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,所述显示颜色根据单次记录的第一注视时长和连续记录的次数进行调整;
确定显示颜色最深的功能键区域为待控制功能键区域。
4.根据权利要求3所述的方法,其特征在于,所述根据所述第一注视时长记录,调整所述各个功能键区域对应的界面显示颜色,包括:
对任一所述功能键区域,响应于连续多次记录的第一注视时长满足设定时长,则调整所述功能键区域的显示颜色为所述各个功能键区域中最深的显示颜色,并停止对其他各个功能键区域的颜色调整。
5.根据权利要求3所述的方法,其特征在于,在确定显示颜色最深的功能键区域为待控制功能键区域之前,所述方法还包括:
获取所述中控屏幕上使用频率最高的历史功能键,所述历史功能键是指大数据统计的同类型车辆在当前工况下使用频率最高的功能键,或者所述历史功能键是指大数据统计的所述驾驶员在当前工况下的使用频率最高的功能键;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键一致,则确定所述显示颜色最深的功能键区域为待控制功能键区域;
若所述历史功能键与所述显示颜色最深的功能键区域中的功能键不一致,则根据所述第一注视时长记录,从所述历史功能键所在区域与所述显示颜色最深的功能键区域中确定出待控制功能键区域。
6.根据权利要求3-5任一项所述的方法,其特征在于,所述第一注视时长记录通过下述方式得到:
确定驾驶员的视线方向在所述中控屏幕上的注视点位置;
根据该注视点位置与所述中控屏幕上各个功能键的位置的距离,确定距离该注视点最近的功能键为单次记录对应的驾驶员的视线停留区域;
根据该距离该注视点最近的功能键、以及注视时长,得到单条第一注视时长记录。
7.根据权利要求1所述的方法,其特征在于,所述根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,包括:
根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制目标界面,并在中控屏幕上放大所述目标界面;
在获取到驾驶员确认选定所述目标界面的指示信息时,根据驾驶员在所述目标界面上的第二视线停留信息确定待控制功能键区域。
8.一种车载功能控制装置,其特征在于,所述装置包括:
检测模块,用于响应于接收到激活指令,检测驾驶员的视线方向;
功能键确定模块,用于在所述视线方向移动至车辆的中控屏幕的情况下,根据驾驶员在所述中控屏幕上的第一视线停留信息确定待控制功能键区域,并提示用户已确定的待控制功能键;
控制模块,用于在获取到驾驶员确认启用所述功能键的指示信息时,控制打开所述待控制功能键对应的功能。
9.一种电子设备,其特征在于,包括:存储器、处理器;
所述存储器,用于存储计算机程序;
所述处理器,用于调用所述计算机程序以实现如权利要求1-7任一项所述的车载功能控制方法。
10.一种可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7任一项所述的车载功能控制方法。
CN202310973950.1A 2023-08-03 2023-08-03 车载功能控制方法、装置、设备及可读存储介质 Pending CN117022142A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310973950.1A CN117022142A (zh) 2023-08-03 2023-08-03 车载功能控制方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310973950.1A CN117022142A (zh) 2023-08-03 2023-08-03 车载功能控制方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN117022142A true CN117022142A (zh) 2023-11-10

Family

ID=88623795

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310973950.1A Pending CN117022142A (zh) 2023-08-03 2023-08-03 车载功能控制方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN117022142A (zh)

Similar Documents

Publication Publication Date Title
CN109466545B (zh) 自动泊车方法及车载控制系统
CN108140319B (zh) 停车辅助方法及停车辅助装置
US10293816B2 (en) Automatic park and reminder system and method of use
CN109493632B (zh) 基于多车位检测的自动泊车方法及车载控制系统
JP2021500259A (ja) 駐車プロセスを制御するための方法
KR101916515B1 (ko) 원격 전자동 주차지원시스템에서의 주차모드 안내 방법
CN108137059A (zh) 驾驶辅助装置
WO2019184837A1 (zh) 车载显示设备的控制方法及控制设备
CN110466509A (zh) 自动泊车模式选择方法、电子设备及汽车
CN112041201B (zh) 用于控制对车辆特征的访问的方法、系统和介质
US20180050689A1 (en) System and method for controlling parking functions of a motor vehicle
US20160307056A1 (en) Arrangement for creating an image of a scene
US20160288712A1 (en) Vehicle departure support system and method
CN110461678A (zh) 自动车辆道路水检测
CN105150965A (zh) 汽车座椅调整方法及装置
EP3363706A1 (en) Method and system for activating at least one function of a vehicle
CN110271538B (zh) 自动泊车切换方法、电子设备及汽车
CN114212026B (zh) 车辆后视镜调节方法、装置、车辆及存储介质
JP4743251B2 (ja) 追従制御装置
JP2019182046A (ja) 自動運転装置、方法及びプログラム、並びに、車両及びシステム
EP3472642B1 (en) Overtake acceleration aid for adaptive cruise control in vehicles
JP4225352B2 (ja) 追従制御装置
US9644986B2 (en) Drive support system and drive support method
CN117022142A (zh) 车载功能控制方法、装置、设备及可读存储介质
CN106945671B (zh) 具有多个设定点的车辆巡航控制

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination