CN110861580A - 驾驶方法及相关产品 - Google Patents

驾驶方法及相关产品 Download PDF

Info

Publication number
CN110861580A
CN110861580A CN201911137234.XA CN201911137234A CN110861580A CN 110861580 A CN110861580 A CN 110861580A CN 201911137234 A CN201911137234 A CN 201911137234A CN 110861580 A CN110861580 A CN 110861580A
Authority
CN
China
Prior art keywords
target
driver
image
target area
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911137234.XA
Other languages
English (en)
Other versions
CN110861580B (zh
Inventor
贾书军
程帅
杨春阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pateo Connect and Technology Shanghai Corp
Original Assignee
Shanghai Pateo Electronic Equipment Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Pateo Electronic Equipment Manufacturing Co Ltd filed Critical Shanghai Pateo Electronic Equipment Manufacturing Co Ltd
Priority to CN201911137234.XA priority Critical patent/CN110861580B/zh
Publication of CN110861580A publication Critical patent/CN110861580A/zh
Application granted granted Critical
Publication of CN110861580B publication Critical patent/CN110861580B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种驾驶方法及相关产品,该方法包括:获取驾驶员的第一面部图像;根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。采用本申请实施例有利于提高驾驶安全。

Description

驾驶方法及相关产品
技术领域
本申请涉及智能驾驶领域,具体涉及一种驾驶方法及相关产品。
背景技术
随着科技的发展,经济水平的提高,私有车辆越来越普及。因此,驾车出行已经成为人们生活中一部分,尤其是节假日,大多用户选择驾车出游。
然而,驾车出行的时候,不可避免在高速公路上行驶,由于,高速公路两边的风景比较单一,驾驶员盯着道路前方一段时间后,就会产生视觉疲劳,导致疲劳驾驶,进而影响交通安全。
发明内容
本申请实施例提供了一种驾驶方法及相关产品,通过动态投影目标图像,进而缓解驾驶员的视觉疲劳,提高驾驶安全。
第一方面,本申请实施例提供一种驾驶方法,包括:
获取驾驶员的第一面部图像;
根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
第二方面,本申请实施例提供一种车载装置,包括:
获取单元,用于获取驾驶员的第一面部图像;
识别单元,用于根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
投影单元,用于在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
第三方面,本申请实施例提供一种电子设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如第一方面所述的方法中的步骤的指令。
第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序使得计算机执行如第一方面所述的方法。
第五方面,本申请实施例提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机可操作来使计算机执行如第一方面所述的方法。
实施本申请实施例,具有如下有益效果:
可以看出,在本申请实施例中,当确定出驾驶员处于疲劳驾驶时,向前挡风玻璃上的多个目标区域循环投影目标图像,通过循环投影以转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,进而提高用户的驾驶体验,提升交通安全。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种车载系统的结构示意图;
图2为本申请实施例提供的一种驾驶方法的流程示意图;
图3为本申请实施例提供的另一种驾驶方法的流程示意图;
图4为本申请实施例提供的一种目标区域的示意图;
图5为本申请实施例提供的一种投影角度的流程示意图;
图6为本申请实施例提供的另一种驾驶方法的流程示意图;
图7为本申请实施例提供的另一种驾驶方法的流程示意图;
图8为本申请实施例提供的一种车载装置的结构示意图;
图9为本申请实施例提供的一种车载装置的功能单元组成框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及所述附图中的术语“第一”、“第二”、“第三”和“第四”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结果或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
参阅图1,图1为本申请实施例提供的一种车载系统的结构示意图,车载系统100包括设置于车辆上的第一摄像头110(内置)、设置于车辆上的第二摄像头120(外置)、设置于车辆上的平视显示器130(Head Up Display,HUD)和车载装置140,其中:
当车载装置140确定车辆行驶在预设道路(例如,高速公路)上时,控制第一摄像头110获取驾驶员的第一面部图像,车载装置140根据该第一面部图像对所述驾驶员进行疲劳驾驶的识别,在识别出该驾驶员处于疲劳驾驶时,控制HUD130按照预设的投影间隔向车辆的前挡风玻璃上的多个目标区域投影目标图像,即依次向多个目标区域进行动态投影,该目标图像可以为第二摄像头120拍摄到的该车辆周围的图像,也可以为用户预置的图像。
可以看出,在本申请实施方案中,当确定出驾驶员处于疲劳驾驶时,控制HUD向前挡风玻璃上的多个目标区域进行动态投影,通过动态投影来转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,进而提高用户的驾驶体验,提升交通安全。
参阅图2,图2为本申请实施例提供的一种驾驶方法的流程示意图,本实施例的方法包括以下步骤:
201:获取驾驶员的第一面部图像。
通过安装在车辆的第一摄像头获取该驾驶员的第一面部图像。
202:根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别。
可选的,对该第一面部图像进行特征提取,得到特征图像,根据该特征图像对该驾驶员进行疲劳识别,得到识别结果。其中,对特征提取可以通过神经网络进行提取,该神经网络可以为卷积神经网络、循环神经网络,等等。
举例来说,可获取该驾驶员的上下眼皮之间的距离,将该距离作为特征信息,当该距离小于阈值时,则确定该驾驶员处理疲劳驾驶状态。
203:在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
其中,可以通过HUD投影目标图像,也可以通过投影仪或者其他投影设备进行投影,本申请以通过HUD投影为例说明,但不对投影方式做唯一限定。
当然,驾驶员也可以通过手动操作,控制车载装置按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,无需进行疲劳驾驶的识别。本申请对投影目标图像的启动条件不做限定。
可选的,相对驾驶员的驾驶位置来说将前挡风玻璃划分为三个区域,即左侧区域、中间区域和右侧区域。然后,向三个区域依次循环投影目标图像。
需要说明的是,本申请提及的目标区域即投影目标图像时在该三个区域上的具体投影区域。如,左侧区域的目标区域可以为左侧区域的中间部分,等等。
其中,该目标区域可以是由用户提前设定好的固定区域,也可以是根据驾驶员的驾驶高度实时确定出的区域,本申请对此不做限定。
其中,该目标图像包括一张或多张图像。例如,目标图像可以为用户提前设定好的图像或者图像集;也可以为实时获取到的图像或者图像集;还可以是用户设备实时上传的图像或者图像集。本申请对此不做限定。
其中,多个目标区域之间对应的投影时长可以相同,也可以不同。例如,每个目标区域对应的投影时长均为5s,即向一个目标区域投影5s,然后切换,向另外一个目标区域投影5s。再如,由于距离驾驶员较远的目标区域驾驶员的视觉效果差,故可按照与该驾驶员距离由近及远的顺序,依次降低每个目标区域的投影时长,如左侧区域对应的投影时长为8s、中间区域对应的投影时长为6s、右侧区域为4s,等等。本申请对投影时长的设置方式不做限定。
可以看出,在本申请实施方案中,当确定出驾驶员处于疲劳驾驶时,向前挡风玻璃的多个目标区域进行动态投影,通过动态投影目标图像来转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,提高用户的驾驶体验,提升交通安全。
在一些可能的实施方式中,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,所述方法还包括:
获取车辆的行驶参数;
根据该行驶参数确定车辆的行驶状态;
当控制车辆变道时,接收外置摄像头采集的周围图像,根据该周围图像确定变道路线,生成与该变道路线对应的导航图,将该导航图作为该目标图像。
通过HUD显示变道路线对应的导航图,可以解决驾驶员因视野盲区而造成的变道安全问题,提高驾驶员的变道效率以及安全性。
在一些可能的实施方式中,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,所述方法还包括:
获取车辆周围的环境亮度;
获取与所述环境亮度对应的显示亮度,所述显示亮度为HUD对每个目标区域进行投影时,目标图像的显示亮度;
获取与所述显示亮度对应的工作功率;
控制HUD按照每个目标区域的投影时长,以及与所述显示亮度对应的工作功率依次向每个目标区域循环投影目标图像。
获取与环境亮度对应的显示亮度,并控制HUD与该显示亮度对应的工作功率投影目标图像,从而保证投影后的目标图像显示亮度与该环境亮度匹配,进而提高驾驶的观看效果,提高用户体验。
参阅图3,图3为本申请实施例提供的另一种驾驶方法的流程示意图。该实施例中与图2所示的实施例相同的内容,此处不再重复描述。本实施例的方法包括以下步骤:
301:获取驾驶员的第一面部图像。
302:根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别。
303:在识别出所述驾驶员处于疲劳驾驶时,根据所述面部图像、摄像头的拍摄角度以及所述摄像头的安装高度确定多个目标区域。
该摄像头为深度摄像头,如图4所示,则可根据该面部图像中的深度信息确定驾驶员与摄像头的相对距离d,其确定距离的方式为现有技术;根据该相对距离以及该摄像头的拍摄角度α,确定驾驶员与所述摄像头的第一相对高度h1,即先确定(h1+h2)=d*tanα/2,然后,获取该第一面部图像的长度L,故可确定出缩放比例K=2(h1+h2)/L,又可以获取驾驶员所在区域的长度为L1(图像中的高度),故可确定出h2=L1*K,则h1=(d*tanα/2)-h2=(d*tanα/2)-L1*2(h1+h2)/L;根据该第一相对高度h1以及所述摄像头的安装高度H,确定驾驶员与车辆的前挡风玻璃的第二相对高度(h2+h),即驾驶员此时的高度,(h2+h)=H-h1=H-(d*tanα/2)+L1*2(h1+h2)/L。
进一步地,在得到该第二相对高度后,可知道该驾驶员平视前防风玻璃时的高度,故可将该前挡风玻璃与该第二相对高度对应的区域为该多个目标区域。
进一步地,驾驶员在车辆的左侧,因此可将该前挡风玻璃的左侧区域对应的目标区域,以及中间区域对应的目标区域作为最终的目标区域,在该两个目标区域上动态投影目标图像,以便驾驶员直接观察到该目标图像,无需视线的偏移,影响驾驶安全。当然,如该两个目标区域中某个目标区域由于外在因素的影响不适合投影时,例如,太阳光直射到该目标区域时,则可将右侧区域对应的目标区域替换该目标区域进行投影。
304:控制HUD按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
可以看出,在本申请实施方案中,当确定出驾驶员处于疲劳驾驶时,向前挡风玻璃上的多个目标区域进行动态投影,通过动态投影目标图像以转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,进而提高用户的驾驶体验,提升交通安全;另外,该目标区域是根据驾驶员的高度确定出来的,无论什么样身高的驾驶员驾驶该车辆时,均可直视到投影到前挡风玻璃上的目标图像,从而可适应各个驾驶员,进而提高每个驾驶员的视觉体验。
在一些可能的实施方式中,HUD的数量为一个。一般来说,在该HUD的数量为一个时,将HUD设置于前挡风玻璃的中心区域,则确定该HUD投影到每个目标区域所需的投影角度,即基于每个目标区域对应的高度以及方向确定该HUD投影到每个目标区域所需的投影角度,该投影角度包括仰角和偏移角度。如图5所示,x方向为该HUD投影方向的正前方,β为仰角,γ为偏移角度,当该HUD投影到左侧区域的目标区域时,则γ为左偏移角度,当该HUD投影右侧区域的目标区域时,则β为右偏移角度。
在一些可能的实施方式中,HUD的数量为多个。例如,可以在前挡风玻璃的左侧区域、中间区域以及右侧区域各设置一个对应的HUD,左侧的HUD用于将目标图像投影到前挡风玻璃的左侧区域的目标区域、右侧的HUD用于将目标图像投影到前挡风玻璃的右侧区域的目标区域。因此,在确定出每个区域的目标区域后,并根据每个目标区域的高度确定该目标区域的HUD所需的投影角度。由于该目标区域的HUD能投影的区域范围包括该目标区域所在的整个区域,故该投影角度为仰角,即仅调整该目标区域的HUD的投影仰角即可将目标图像投影到该目标区域。然后,在每个目标区域的预设投影时长内,控制每个目标区域的HUD向该目标区域投影目标图像,从而实现动态投影。
参阅图6,图6为本申请实施例提供的另一种驾驶方法的流程示意图该实施例中与图2、图3所示的实施例相同的内容,此处不再重复描述。本实施例的方法包括以下步骤:
601:获取车辆当前的位置信息。
602:根据所述当前的位置信息确定所述车辆当前所行驶的道路的类型。
其中,道路的类型包括包括:城市道路类型、公路类型、景观类型和地理地形类型。
城市道路类型可以包括:快速路、主干路和支路中的一种或多种。公路类型可以包括:高速公路、一级公路、二级公路和三级公路中的一种或多种。景观类型可以包括:乡村道路、郊区道路、城市道路和都市道路中的一种或多种。地理地形类型可以包括:高原、山地、平原、盆地和丘陵中的一种或多种。
由于每种道路两边的风景不同,所以,驾驶员在不同的道路上驾驶车辆时,产生视觉疲劳所需的时间不同。故对每种道路设置各自的时间阈值,可对每种道路上的驾驶员的视觉疲劳作出精准判断,进而提高驾驶疲劳识别的准确度。
603:获取与所述类型对应的时长阈值。
604:在所述当前所行驶的道路的行驶时长大于所述时长阈值时,获取驾驶员的第一面部图像。
605:根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别。
606:在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
可以看出,在本申请实施方案中,当确定出驾驶员处于疲劳驾驶时,向前挡风玻璃上动态投影目标图像,以转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,进而提高用户的驾驶体验,提升交通安全;另外,对每种道路设置各自的时间阈值,可提高驾驶疲劳识别的准确度。
参阅图7,图7为本申请实施例提供的另一种驾驶方法的流程示意图该实施例中与图2、图3、图6所示的实施例相同的内容,此处不再重复描述。本实施例的方法包括以下步骤:
701:获取驾驶员的第一面部图像。
702:根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别。
703:在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
704:获取所述驾驶员的第二面部图像。
705:对所述第二面部图像进行识别,得到所述驾驶员的瞳孔中心点。
具体来说,对该第二面部图像进行处理,得到该第二面部图像中的眼睛区域;然后,对该第二面部图像区域进行灰度区域,得到灰度图像;基于该灰度图像对该眼睛区域进行边缘分割,得到瞳孔边缘对应的若干个像素点;对该若干个进行拟合,得到类椭圆曲线,将该类椭圆曲线的中心点作为该瞳孔中心点。
706:根据所述瞳孔中心点确定所述驾驶员的视线角度,所述视线角度为所述驾驶员的视线方向与水平方向的夹角。
根据该瞳孔中心点可确定出该驾驶员的视线方向,由该视线方向与水平方向的夹角,得到该驾驶员的视线角度。
707:如所述视线角度大于预设角度时,停止向所述目标区域投影所述目标图像。
可以看出,在本申请实施方案中,当确定出驾驶员处于疲劳驾驶时,向前挡风玻璃动态投影目标图像,以转移驾驶员的视觉注意力,缓解驾驶员的视觉疲劳,进而提高用户的驾驶体验,提升交通安全;另外,在投放目标图像后,当驾驶员的注意力过多的投放到该目标图像上时,会影响驾驶安全,因此,为了保证驾驶安全,实时检测驾驶员的瞳孔中心点,在视线角度大于阈值时,即驾驶员的视线大部分集中在目标图像上时,停止向前挡风动态投影目标图像,进而保证驾驶安全。
图8为本申请实施例提供的一种车载装置800的结构示意图。如图8所示,车载装置800包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序不同于上述一个或多个应用程序,且上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行以下步骤的指令:
获取驾驶员的第一面部图像;
根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
在一些可能的实施方式中,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,上述程序还用于执行以下步骤的指令:
根据所述面部图像确定所述驾驶员与摄像头的相对距离;
根据所述相对距离以及所述摄像头的拍摄角度,确定所述驾驶员与所述摄像头的第一相对高度;
根据所述第一相对高度以及所述摄像头的安装高度,确定所述驾驶员与车辆的前挡风玻璃的第二相对高度;
根据所述第二相对高度确定所述前挡风玻璃上的所述多个目标区域。
在一些可能的实施方式中,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像方面,上述程序具体用于执行以下步骤的指令:
控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
在一些可能的实施方式中,在控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像方面,上述程序具体用于执行以下步骤的指令:
在所述HUD的数量为一个时,获取所述HUD投影至每个所述目标区域所需的投影角度,在每个所述目标区域对应的投影时长内,控制所述HUD按照所述投影角度向每个所述目标区域投影所述目标图像;
在所述HUD的数量为多个,且每个HUD对应一个所述目标区域时,获取每个所述目标区域对应的HUD投影至该目标区域所需的投影角度,在该目标区域对应的投影时长内,控制该目标区域对应的HUD按照该投影角度向该目标区域投影所述目标图像。
在一些可能的实施方式中,在获取驾驶员的第一面部图像之前,上述程序还用于执行以下步骤的指令:
获取车辆当前的位置信息;
根据所述当前的位置信息确定所述车辆当前所行驶的道路的类型;
获取与所述类型对应的时长阈值;
在所述当前所行驶的道路的行驶时长大于所述时长阈值时,获取所述驾驶员的第一面部图像。
在一些可能的实施方式中,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,上述程序还用于执行以下步骤的指令:
获取车辆周围的道路图像,将所述道路图像作为所述目标图像;
和/或,接收用户设备上传的图像,将所述图像作为所述目标图像。
在一些可能的实施方式中,上述程序还用于执行以下步骤的指令:
获取所述驾驶员的第二面部图像;
对所述第二面部图像进行识别,得到所述驾驶员的瞳孔中心点;
根据所述瞳孔中心点确定所述驾驶员的视线角度,所述视线角度为所述驾驶员的视线方向与水平方向的夹角;
如所述视线角度大于预设角度时,停止向每个所述目标区域投影目标图像。
参阅图9,图9示出了上述实施例中所涉及的车载装置900的一种可能的功能单元组成框图,车载装置900包括:获取单元910、识别单元920和投影单元930,其中:
获取单元910,用于获取驾驶员的第一面部图像;
识别单元920,用于根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
投影单元930,用于在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
在一些可能的实施方式中,车载装置900还包括确定单元940,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,确定单元940,用于:
根据所述面部图像确定所述驾驶员与摄像头的相对距离;
根据所述相对距离以及所述摄像头的拍摄角度,确定所述驾驶员与所述摄像头的第一相对高度;
根据所述第一相对高度以及所述摄像头的安装高度,确定所述驾驶员与车辆的前挡风玻璃的第二相对高度;
根据所述第二相对高度确定所述前挡风玻璃上的所述多个目标区域。
在一些可能的实施方式中,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像方面,投影单元930,具体用于:
控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
在一些可能的实施方式中,在控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像方面,投影单元930,具体用于:
在所述HUD的数量为一个时,获取所述HUD投影至每个所述目标区域所需的投影角度,在每个所述目标区域对应的投影时长内,控制所述HUD按照所述投影角度向每个所述目标区域投影所述目标图像;
在所述HUD的数量为多个,且每个HUD对应一个所述目标区域时,获取每个所述目标区域对应的HUD投影至该目标区域所需的投影角度,在该目标区域对应的投影时长内,控制该目标区域对应的HUD按照该投影角度向该目标区域投影所述目标图像。
在一些可能的实施方式中,在获取驾驶员的第一面部图像之前,获取单元910,还用于,:
获取车辆当前的位置信息;
根据所述当前的位置信息确定所述车辆当前所行驶的道路的类型;
获取与所述类型对应的时长阈值;
在所述当前所行驶的道路的行驶时长大于所述时长阈值时,获取所述驾驶员的第一面部图像。
在一些可能的实施方式中,在按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,投影单元930,还用于:
获取车辆周围的道路图像,将所述道路图像作为所述目标图像;
和/或,接收用户设备上传的图像,将所述图像作为所述目标图像。
在一些可能的实施方式中,获取单元910,还用于获取所述驾驶员的第二面部图像;
识别单元920,还用于对所述第二面部图像进行识别,得到所述驾驶员的瞳孔中心点;
确定单元940,还用于根据所述瞳孔中心点确定所述驾驶员的视线角度,所述视线角度为所述驾驶员的视线方向与水平方向的夹角;
如所述视线角度大于预设角度时,投影单元930,用于停止向每个所述目标区域投影目标图像。
本申请实施例还提供一种计算机存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现如上述方法实施例中记载的任何一种驾驶方法的部分或全部步骤。
本申请实施例还提供一种计算机程序产品,所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,所述计算机程序可操作来使计算机执行如上述方法实施例中记载的任何一种驾驶方法的部分或全部步骤。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件程序模块的形式实现。
所述集成的单元如果以软件程序模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种驾驶方法,其特征在于,包括:
获取驾驶员的第一面部图像;
根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
2.根据权利要求1所述的方法,其特征在于,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,所述方法还包括:
根据所述面部图像确定所述驾驶员与摄像头的相对距离;
根据所述相对距离以及所述摄像头的拍摄角度,确定所述驾驶员与所述摄像头的第一相对高度;
根据所述第一相对高度以及所述摄像头的安装高度,确定所述驾驶员与车辆的前挡风玻璃的第二相对高度;
根据所述第二相对高度确定所述前挡风玻璃上的所述多个目标区域。
3.根据权利要求1或2所述的方法,其特征在于,所述按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,包括:
控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像。
4.根据权利要求3所述的方法,其特征在于,所述控制平视显示器HUD,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,包括:
在所述HUD的数量为一个时,获取所述HUD投影至每个所述目标区域所需的投影角度,在每个所述目标区域对应的投影时长内,控制所述HUD按照所述投影角度向每个所述目标区域投影所述目标图像;
在所述HUD的数量为多个,且每个HUD对应一个所述目标区域时,获取每个所述目标区域对应的HUD投影至该目标区域所需的投影角度,在该目标区域对应的投影时长内,控制该目标区域对应的HUD按照该投影角度向该目标区域投影所述目标图像。
5.根据权利要求1-4中任一项所述的方法,其特征在于,在获取驾驶员的第一面部图像之前,所述方法还包括:
获取车辆当前的位置信息;
根据所述当前的位置信息确定所述车辆当前所行驶的道路的类型;
获取与所述类型对应的时长阈值;
在所述当前所行驶的道路的行驶时长大于所述时长阈值时,执行获取所述驾驶员的第一面部图像的步骤。
6.根据权利要求1-5中任一项所述的方法,其特征在于,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像之前,所述方法还包括:
获取车辆周围的道路图像,将所述道路图像作为所述目标图像;
和/或,接收用户设备上传的图像,将所述图像作为所述目标图像。
7.根据权利要求1-6中任一项所述的方法,其特征在于,所述方法还包括:
获取所述驾驶员的第二面部图像;
对所述第二面部图像进行识别,得到所述驾驶员的瞳孔中心点;
根据所述瞳孔中心点确定所述驾驶员的视线角度,所述视线角度为所述驾驶员的视线方向与水平方向的夹角;
如所述视线角度大于预设角度时,停止向每个所述目标区域投影目标图像。
8.一种车载装置,其特征在于,包括:
获取单元,用于获取驾驶员的第一面部图像;
识别单元,用于根据所述第一面部图像对所述驾驶员进行疲劳驾驶识别;
投影单元,用于在识别出所述驾驶员处于疲劳驾驶时,获取多个目标区域中每个所述目标区域对应的预设投影时长,按照每个所述目标区域对应的预设投影时长依次向每个所述目标区域投影目标图像,每个所述目标区域为前挡风玻璃上的区域。
9.一种电子设备,其特征在于,包括处理器、存储器、通信接口以及一个或多个程序,其中,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行权利要求1-7任一项方法中的步骤的指令。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行以实现如权利要求1-7任一项所述的方法。
CN201911137234.XA 2019-11-19 2019-11-19 驾驶方法及相关产品 Active CN110861580B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911137234.XA CN110861580B (zh) 2019-11-19 2019-11-19 驾驶方法及相关产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911137234.XA CN110861580B (zh) 2019-11-19 2019-11-19 驾驶方法及相关产品

Publications (2)

Publication Number Publication Date
CN110861580A true CN110861580A (zh) 2020-03-06
CN110861580B CN110861580B (zh) 2022-07-22

Family

ID=69655208

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911137234.XA Active CN110861580B (zh) 2019-11-19 2019-11-19 驾驶方法及相关产品

Country Status (1)

Country Link
CN (1) CN110861580B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030128436A1 (en) * 2001-12-28 2003-07-10 Yazaki Corporation Display apparatus for a vehicle
CN204340874U (zh) * 2014-12-29 2015-05-20 信利半导体有限公司 车载平视显示系统
CN105691389A (zh) * 2014-12-15 2016-06-22 通用汽车环球科技运作有限责任公司 驾驶员辅助系统
CN106627366A (zh) * 2016-09-12 2017-05-10 北京新能源汽车股份有限公司 汽车后视野显示系统、方法及汽车
CN107571797A (zh) * 2017-10-09 2018-01-12 周永业 前车行驶信息抬头显示方法及系统
CN108415161A (zh) * 2017-02-10 2018-08-17 威斯通全球技术公司 用于前挡风玻璃的显示系统和用于配置显示系统的方法
CN108639055A (zh) * 2017-03-15 2018-10-12 株式会社斯巴鲁 车辆的显示系统及车辆的显示系统的控制方法
CN110126740A (zh) * 2019-05-29 2019-08-16 辽宁科大物联科技有限公司 一种汽车电子后视镜的控制方法及装置
CN110244458A (zh) * 2018-03-07 2019-09-17 和硕联合科技股份有限公司 抬头显示系统及其控制方法
JP2019160081A (ja) * 2018-03-15 2019-09-19 本田技研工業株式会社 輸送機器およびその走行制御方法
CN110254442A (zh) * 2019-07-03 2019-09-20 北京百度网讯科技有限公司 用于控制车辆显示的方法和装置
CN110401825A (zh) * 2018-04-24 2019-11-01 长城汽车股份有限公司 车辆投影方法和装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030128436A1 (en) * 2001-12-28 2003-07-10 Yazaki Corporation Display apparatus for a vehicle
CN105691389A (zh) * 2014-12-15 2016-06-22 通用汽车环球科技运作有限责任公司 驾驶员辅助系统
CN204340874U (zh) * 2014-12-29 2015-05-20 信利半导体有限公司 车载平视显示系统
CN106627366A (zh) * 2016-09-12 2017-05-10 北京新能源汽车股份有限公司 汽车后视野显示系统、方法及汽车
CN108415161A (zh) * 2017-02-10 2018-08-17 威斯通全球技术公司 用于前挡风玻璃的显示系统和用于配置显示系统的方法
CN108639055A (zh) * 2017-03-15 2018-10-12 株式会社斯巴鲁 车辆的显示系统及车辆的显示系统的控制方法
CN107571797A (zh) * 2017-10-09 2018-01-12 周永业 前车行驶信息抬头显示方法及系统
CN110244458A (zh) * 2018-03-07 2019-09-17 和硕联合科技股份有限公司 抬头显示系统及其控制方法
JP2019160081A (ja) * 2018-03-15 2019-09-19 本田技研工業株式会社 輸送機器およびその走行制御方法
CN110281954A (zh) * 2018-03-15 2019-09-27 本田技研工业株式会社 输送设备及其行驶控制方法
CN110401825A (zh) * 2018-04-24 2019-11-01 长城汽车股份有限公司 车辆投影方法和装置
CN110126740A (zh) * 2019-05-29 2019-08-16 辽宁科大物联科技有限公司 一种汽车电子后视镜的控制方法及装置
CN110254442A (zh) * 2019-07-03 2019-09-20 北京百度网讯科技有限公司 用于控制车辆显示的方法和装置

Also Published As

Publication number Publication date
CN110861580B (zh) 2022-07-22

Similar Documents

Publication Publication Date Title
JP7332726B2 (ja) ヒートマップを使用したドライバーの注目の検出
KR102554643B1 (ko) 동적 범위를 확장하기 위한 다수의 동작 모드들
CN108515909B (zh) 一种汽车抬头显示系统及其障碍物提示方法
CN104272345B (zh) 车辆用显示装置和车辆用显示方法
EP2950521B1 (en) Camera capable of reducing motion blur in a low luminance environment and vehicle including the same
JP2021530820A (ja) 車両を含む3次元拡張現実
JP6082802B2 (ja) 物体検知装置
CN113276774B (zh) 无人车远程驾驶过程中视频画面的处理方法、装置及设备
CN107284356A (zh) 车辆视镜替代系统
CN111032413A (zh) 用于运行机动车的屏幕的方法以及机动车
CN110834667A (zh) 车辆转向控制方法、装置、车辆、终端设备及存储介质
CN108245863B (zh) 滑雪盲区安全提示系统及其控制方法
CN114750696A (zh) 车辆视觉呈现的方法、车载设备及车辆
JP2019040634A (ja) 画像表示装置、画像表示方法及び画像表示制御プログラム
CN108609012B (zh) 车辆变道方法及其车载中控系统
CN110727269B (zh) 车辆控制方法及相关产品
CN110861580B (zh) 驾驶方法及相关产品
CN112677740A (zh) 处理挡风玻璃使其隐形的装置和方法
KR101975565B1 (ko) 일인칭 시점의 알씨카 레이싱 시스템
CN111152721B (zh) 一种绘制车道的引导线的方法、装置及抬头显示系统
CN112770139A (zh) 车辆虚拟竞赛系统及方法
JP2016052837A (ja) ヘッドアップディスプレイ装置
JP7273438B1 (ja) 鮮明化装置、鮮明化プログラムおよび鮮明化方法
CN110012351A (zh) 标签数据获取方法、存储器、终端、车辆以及车联网系统
CN111932687B (zh) 车内混合现实显示方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 201821 room 208, building 4, No. 1411, Yecheng Road, Jiading Industrial Zone, Jiading District, Shanghai

Applicant after: Botai vehicle networking technology (Shanghai) Co.,Ltd.

Address before: Room 208, building 4, 1411 Yecheng Road, Jiading Industrial Zone, Jiading District, Shanghai, 201800

Applicant before: SHANGHAI PATEO ELECTRONIC EQUIPMENT MANUFACTURING Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 3701, No. 866 East Changzhi Road, Hongkou District, Shanghai, 200000

Patentee after: Botai vehicle networking technology (Shanghai) Co.,Ltd.

Country or region after: China

Address before: 201821 room 208, building 4, No. 1411, Yecheng Road, Jiading Industrial Zone, Jiading District, Shanghai

Patentee before: Botai vehicle networking technology (Shanghai) Co.,Ltd.

Country or region before: China