CN114495542B - 一种辅助驾驶方法、装置及存储介质 - Google Patents
一种辅助驾驶方法、装置及存储介质 Download PDFInfo
- Publication number
- CN114495542B CN114495542B CN202111671454.8A CN202111671454A CN114495542B CN 114495542 B CN114495542 B CN 114495542B CN 202111671454 A CN202111671454 A CN 202111671454A CN 114495542 B CN114495542 B CN 114495542B
- Authority
- CN
- China
- Prior art keywords
- traffic sign
- pattern
- vehicle
- control
- sign pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000012545 processing Methods 0.000 claims description 65
- 230000000875 corresponding effect Effects 0.000 claims description 30
- 230000004044 response Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 206010039203 Road traffic accident Diseases 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000011022 operating instruction Methods 0.000 description 2
- 238000004886 process control Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007621 cluster analysis Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/10—Internal combustion engine [ICE] based vehicles
- Y02T10/40—Engine management systems
Landscapes
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Atmospheric Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Abstract
本申请提供了一种辅助驾驶方法、装置及存储介质,通过获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案;对目标行驶图像中含有的交通标志图案进行识别;若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案,以在TSR系统对行驶图像中的交通标志图案识别失败后,将识别失败的交通标志图案展示给驾驶员,及时提醒驾驶员根据该交通标志图案控制车辆行驶。
Description
技术领域
本申请涉及车辆控制技术领域,具体而言,涉及一种辅助驾驶方法、装置及存储介质。
背景技术
随着互联网技术的迅猛发展,车辆的控制也更加智能化。现有的车辆中大多安装有交通标志识别系统(Traffic Sign Recognition,TSR),在车辆行驶过程中对出现的道路交通标志信息进行采集和识别,及时向驾驶员做出指示或警告,亦或者直接控制车辆按照设置好的操控指令行驶,以保证交通通畅并预防事故的发生。
当前具有TSR功能的自动驾驶系统,如果因为现有数据库中没有相关类似图片,或这些新标志没有提前做过机器学习,或现有的机器学习模型无法准确判断出当前标志,则识别不出交通标志图案,通常会自动放弃或不执行任何操作,这样不能够及时提醒用户交通信息,存在发生交通事故的风险。
发明内容
有鉴于此,本申请的目的在于提供一种辅助驾驶方法、装置及存储介质,以在TSR系统对行驶图像中的交通标志图案识别失败后,将识别失败的交通标志图案展示给驾驶员,及时提醒驾驶员根据该交通标志图案控制车辆行驶。
第一方面,本申请提供了一种辅助驾驶方法,方法包括:获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案;对目标行驶图像中含有的交通标志图案进行识别;若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案。
优选的,通过以下项中的至少一项向车辆的驾驶员展示识别失败的交通标志图案:在车辆的中控屏上显示交通标志图案;在车辆的仪表盘上显示交通标志图案;通过车辆的抬头显示仪将交通标志图案投影到驾驶员前方的风挡玻璃上。
优选的,对目标行驶图像中含有的交通标志图案进行识别的步骤包括:从交通标志数据库中查找与交通标志图案相匹配的目标预设交通标志;若查找到相匹配的目标预设交通标志,则确定识别成功;若没有查找到相匹配的目标预设交通标志,则确定识别失败。
优选的,交通标志数据库中存储有多个预设交通标志以及与各预设交通标志对应的操控指令,其中,还包括:在识别成功之后,向驾驶员展示驾驶提示信息,驾驶提示信息包括与目标预设交通标志对应的操控指令,或者,控制车辆按照与目标预设交通标志对应的操控指令执行相应的动作。
优选的,在识别失败之后,显示用于对识别失败的交通标志图案进行处理的待处理界面,待处理界面包括标志展示区域以及第一处理控件,标志展示区域包括识别失败的交通标志图案;其中,第一处理控件用于针对识别失败的交通标志图案配置操控指令。
优选的,目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志,其中,待处理界面还包括操控定义区域,操控定义区域包括针对识别失败的交通标志图案的至少一个推荐操控指令,第一处理控件为针对至少一个推荐操控指令执行处理的控件,其中,还包括:接收针对至少一个推荐操控指令的第一选择操作;接收针对第一处理控件的第二选择操作;响应于第二选择操作,将识别失败的交通标志图案与所选择的至少一个推荐操控指令建立关联,并将识别失败的交通标志图案与所关联的至少一个推荐操控指令添加到交通标志数据库中。
优选的,将识别失败的交通标志图案与所关联的至少一个推荐操控指令上传至车辆的后台服务器,其中,识别失败的交通标志图案以及至少一个推荐操控指令由后台服务器执行以下处理:显示识别失败的交通标志图案以及针对交通标志图案的至少一个推荐操控指令;接收针对任一推荐操控指令的编辑操作,获得编辑后的推荐操控指令;用编辑后的推荐操控指令对交通标志数据库中与交通标志图案关联的该推荐操控指令进行更新优化操控指令优化操控指令。
优选的,待处理界面还包括第二处理控件,第二处理控件为针对识别失败的交通标志图案执行处理的控件,其中,还包括;接收针对第二处理控件的第三选择操作;响应于第三选择操作,将识别失败的交通标志图案上传至车辆的后台服务器。
优选的,针对目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志,其中,识别失败的交通标志图案由后台服务器执行以下处理:显示识别失败的交通标志图案;接收针对交通标志图案的优化操控指令;将交通标志图案以及优化操控指令,添加到交通标志数据库中。
第二方面,本申请提供了一种辅助驾驶装置,装置包括:
获取模块,用于获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案;
识别模块,用于对目标行驶图像中含有的交通标志图案进行识别;
展示模块,用于若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案。
第三方面,本申请还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述的辅助驾驶方法的步骤。
第四方面,本申请还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述的辅助驾驶方法的步骤。
本申请提供的辅助驾驶方法、装置及存储介质,获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案,对目标行驶图像中含有的交通标志图案进行识别,若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案,在交通标志图案识别失败的情况下,也将交通标志图案展示给驾驶员,以提醒驾驶员前方的交通信息,从而可以根据交通标志图案控制车辆的驾驶,避免发生交通事故,提高了车辆驾驶的安全性。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例所提供的一种辅助驾驶方法的流程图;
图2为本申请实施例所提供的一种识别交通标志图案的步骤的流程图;
图3为本申请实施例所提供的一种待处理界面的示意图;
图4为本申请实施例所提供的一种车辆控制器的处理步骤的流程图;
图5为本申请实施例所提供的一种服务器的处理步骤的流程图;
图6为本申请实施例所提供的另一种车辆控制器的处理步骤的流程图;
图7为本申请实施例所提供的另一种服务器的处理步骤的流程图;
图8为本申请实施例所提供的一种辅助驾驶装置的结构示意图;
图9为本申请实施例所提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的每个其他实施例,都属于本申请保护的范围。
首先,对本申请可适用的应用场景进行介绍。本申请可应用于安装有安全辅助驾驶系统的车辆的辅助驾驶或自动驾驶场景。
随着互联网技术的迅猛发展,车辆的控制也更加智能化。现有的车辆中大多安装有交通标志识别系统(Traffic Sign Recognition,TSR),在车辆行驶过程中对出现的道路交通标志信息进行采集和识别,及时向驾驶员做出指示或警告,亦或者直接控制车辆按照设置好的操控指令行驶,以保证交通通畅并预防事故的发生。
当前具有TSR功能的自动驾驶系统,如果因为现有数据库中没有相关类似图片,或这些新标志没有提前做过机器学习,或现有的机器学习模型无法准确判断出当前标志,则识别不出交通标志图案,通常会自动放弃或不执行任何操作,这样不能够及时提醒用户交通信息,存在发生交通事故的风险。
基于此,本申请实施例提供了一种辅助驾驶方法、装置及存储介质。
请参阅图1,图1为本申请实施例所提供的一种辅助驾驶方法的流程图。所如图1中所示,本申请实施例提供的辅助驾驶方法,包括:
S101、获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案。
该步骤中,可以通过当前车辆的前视摄像头实时拍摄当前车辆前方的行驶图像,针对每一帧行驶图像,若检测到该行驶图像中有交通标志图案,则确定该行驶图像为目标行驶图像。对于安装有安全辅助驾驶系统来说,其中的TSR系统一般通过车辆前视摄像头获取行驶图像,并对其中的交通标志图案进行检测和识别。
这里的交通标志图案指代的是道路上设置的交通标志指示牌的图案。
S102、对目标行驶图像中含有的交通标志图案进行识别。
该步骤中,通过安全辅助驾驶系统的TSR功能进行识别,以确定当前行驶图像中的交通标志图案具体为哪一个。其中可以通过以下几种方法实现交通标志图案的识别:模板匹配法、聚类分析法、神经网络法以及支持向量机法。
具体的,如图2所示,为本申请实施例提供的一种识别交通标志图案的步骤的流程图。这里以采用模板匹配法为例,识别交通标志图案的步骤,可以包括:
S1020、从交通标志数据库中查找与交通标志图案相匹配的目标预设交通标志。
这里的交通标志数据库为预设好的数据库,其中包括多个预设交通标志图案和对应的操控指令组成的数据对。其中一种预设交通标志图案对应可以对应一组操控指令,该组操控指令用于控制车辆执行对应的动作。示例性的,若交通标志图案为路面不平,对应的操控指令为将车辆的行驶速度降低至30km/h或将车辆的行驶速度降低至30km/h的同时,控制车辆变道。
具体的,可以通过像素遍历的方式,将交通标志数据库中每个预设交通标志与将当前的交通标志图案匹配,并选择误差最小的预设交通标志图案作为目标预设交通标志。
S1022、若查找到相匹配的目标预设交通标志,则确定识别成功。
这里,若找到的匹配的目标预设交通标志,则说明识别成功。在步骤S1022之后,还包括:
向驾驶员展示驾驶提示信息,或者,控制车辆按照与目标预设交通标志对应的操控指令执行相应的动作。
这里的驾驶提示信息包括与目标预设交通标志对应的操控指令,通过向驾驶员展示驾驶提示信息,可以辅助驾驶员根据当前的交通标志控制车辆行驶。或者,在自动驾驶的场景下,车辆控制器可以直接根据该目标预设交通标志对应的操控指令控制车辆执行相应的动作。
S1024、若没有查找到相匹配的目标预设交通标志,则确定识别失败。
若没有查找到匹配的目标预设交通标志,则说明识别失败。这里识别失败的原因可能是交通标志数据库中没有的交通标志,或者是交通标志数据库中存在的,当由于照片模糊或交通标志自身破损等情况造成识别失败的。
S103、若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案。
现有技术中,若识别失败则直接舍弃该识别结果。本申请中,在识别失败的情况下仍旧将识别失败的交通标志图案展示给驾驶员。
具体的,通过以下项中的至少一项向车辆的驾驶员展示识别失败的交通标志图案:
一种情况,可以在车辆的中控屏上显示交通标志图案。通过中控屏展示交通标志图案,可以更明确的将识别失败的交通标志图案展示给驾驶员。
或者在车辆的仪表盘上显示交通标志图案。通过在仪表盘上显示交通标志图案可让驾驶员更方便看到该交通标志图案。
还可以通过车辆的抬头显示仪将交通标志图案投影到驾驶员前方的风挡玻璃上。通过抬头显示仪投影的方式可以清晰展示交通标志的同时,更方便驾驶员的观看。
本申请实施例提供的辅助驾驶方法,获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案,对目标行驶图像中含有的交通标志图案进行识别,若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案,在交通标志图案识别失败的情况下,也将交通标志图案展示给驾驶员,以提醒驾驶员前方的交通信息,从而可以根据交通标志图案控制车辆的驾驶,避免发生交通事故,提高了车辆驾驶的安全性。
进一步的,在步骤S103之后,还可以显示用于对识别失败的交通标志图案进行处理的待处理界面,待处理界面包括标志展示区域以及第一处理控件,标志展示区域包括识别失败的交通标志图案。其中,第一处理控件用于针对识别失败的交通标志图案配置操控指令。
具体的,在向车辆驾驶员展示识别失败的交通标志图案的同时,还可以直接在车辆的中控屏直接弹出待处理界面。图3为本申请实施例的一种待处理界面的示意图,如图3所示,待处理界面中包括标志展示区域。这里的标志展示区域用于展示识别失败的交通标志图案。待处理界面还包括第一处理控件,这里的第一处理控件可以为一个或多个。第一处理控件用于针对识别失败的交通标志图案配置操控指令,这里的操控指令用于控制车辆的行驶状态,从而让用户自主为识别失败的交通标志图案配置关联的操控指令。
目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志。其中,待处理界面还包括操控定义区域,操控定义区域包括针对识别失败的交通标志图案的至少一个推荐操控指令,第一处理控件为针对至少一个推荐操控指令执行处理的控件。
具体的,在待处理界面上设置操控定义区域,操控定义区域内包括多个推荐操控指令,这里的推荐操控指令是在保证车辆行驶安全的情况下,根据交通规范提供的常用的操控指令。例如处理控件对应的操控指令可以为减速、刹车或忽略等操控指令,而不会提供可能造成车辆行驶安全问题的操控指令,例如“转弯”等对道路上其他车道行驶的车辆会造成较大影响的动作。
图4为本申请实施例提供的一种车辆控制器的处理步骤的流程图。其中,当用户通过操控定义区域处理交通标志图案时,如图4所示,可以通过车辆控制器执行以下处理步骤,包括:
S201、接收针对至少一个推荐操控指令的第一选择操作。
这里的第一选择操作可以是对一个或多个第一处理控件的单选或多选操作。这里的第一处理控件可以显示有“减速”、“减速到”、“刹车”、“30km/h”等字样,其中“减速到”和“30km/h”可以组成对应于“减速到30km/h”的操控。
S202、接收针对第一处理控件的第二选择操作。
这里的第二选择操作指代的用户确认配置的操作。
S203、响应于第二选择操作,将识别失败的交通标志图案与所选择的至少一个推荐操控指令建立关联,并将识别失败的交通标志图案与所关联的至少一个推荐操控指令添加到交通标志数据库中。
用户确定了当前选择的一个或多个推荐操控指令后,则可以将用户选择的一个或多个推荐操控指令与当前交通标志图案想关联,并存储在交通标志数据库中,这里的交通标志数据库指代的是当前车辆本地的数据库。这样,当前车辆再次识别到该交通标志图案时,则可以根据用户自主选择的操作控制车辆的行驶状态,能够在系统更新不及时的情况下,也能根据交通标志图案控制车辆规范安全行驶。
进一步的,在步骤S103之后,还可以生成用于对识别失败的交通标志图案进行处理的待办事项。在车辆的中控屏上显示针对待办事项的事项标识。其中,事项标识包括以下项中的至少一项:事项图标、事项提示信息,事项提示信息用于提示驾驶员存在未处理的代办事项。
具体的,为了避免生成的待处理界面占用中控屏,影响用户通过中控屏进行的其他操作,还可以根据识别失败的交通标志图案生成对应的待办事项,驾驶员可以在空闲的时候去该待办实现进行处理。这里可以在车辆的中控屏上显示针对待办事项的事项标识,可以是以事项图标的形式,例如在待办事项的事项图标或在待办事项图标上显示提醒图标,或新增待办事项的数量的图标。还可以直接将事项提示信息显示在中控屏上,这里的事项提示信息可以包括待办事项的主题,例如“有一个新的未识别交通标志需要处理”的字样,以避免影响中控屏的使用。进一步的,还可以将识别失败的交通标志图案与所关联的至少一个推荐操控指令上传至车辆的后台服务器。图5为本申请实施例提供的一种服务器的处理步骤的流程图。如图5所示,用户可以选择将自定义的推荐操控指令和关联的交通标志图案上传到后台服务器,此时识别失败的交通标志图案以及至少一个推荐操控指令由后台服务器执行以下处理:
S301、显示识别失败的交通标志图案以及针对交通标志图案的至少一个推荐操控指令。
这里可以是后台服务器向技术人员展示用户上传的交通标志图案和关联的推荐操控指令。
S302、接收针对任一推荐操控指令的编辑操作,获得编辑后的推荐操控指令。
这里可以由技术人员在用户自定义的推荐操控指令的基础上,进一步的进行操控指令的优化,以获得更具有代表性的、适用于多个用户的推荐操控指令。还可以针对同一个交通标志图案,将多个用户选择的推荐操控指令中重复率最高的,编辑为推荐操控指令。
S303、用编辑后的推荐操控指令对交通标志数据库中与交通标志图案关联的该推荐操控指令进行更新。
这里的交通标志数据库可以是车辆本地的数据库,也可以是后台服务器的数据库。可以理解的是,这里可以根据用户的选择,基于大数据不断的针对任一识别失败的交通标志指令关联的推荐操控指令进行实时更新,以获得更适合的操控指令,以保证车辆行驶的规范和安全平稳。
进一步的,在本申请的一个实施例中,在用户看到待办事项的事项标识后,可以进行处理。如图3所示,待处理界面还包括第二处理控件,第二处理控件为针对识别失败的交通标志图案执行处理的控件。这里的第二处理控件可以显示有“上传服务器”的字样,用于将交通标志图案上传给后台服务器。
图6为本申请实施例提供的另一种车辆控制器的处理步骤的流程图。如图6所示,当用户选择直接将识别失败的交通标志上传服务器时,可以通过车辆控制器执行以下操作,包括;
S401、接收针对第二处理控件的第三选择操作;
S402、响应于第三选择操作,将识别失败的交通标志图案上传至车辆的后台服务器。
这里可以由用户选择是否将识别失败的交通标志图案上传到后台服务器,这里的后台服务器可以为与L4(ROX01)系列自动驾驶车辆对应的云端ROX服务器。
具体的,目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志。图7为本申请实施例所提供的另一种服务器的处理步骤的流程图。如图7所示,识别失败的交通标志图案由后台服务器执行以下处理:
S501、显示识别失败的交通标志图案。
这里可以是后台服务器向技术人员展示识别失败的交通标志图案。
S502、接收针对交通标志图案的优化操控指令。
这里可以由技术人员对识别失败的交通标志图案进行配置,确定出对应的优化操控指令,并输入后台服务器。这里的优化操控指令指代的可以是有技术人员经过大数据统计,优化后的与该交通标志图案对应的操控指令,更适合广泛的应用于大量的自动驾驶车辆的控制,以保证自动驾驶车辆在识别到该交通标志时安全平稳的行驶。
S503、将交通标志图案以及优化操控指令,添加到交通标志数据库中。
后台服务器可以将该优化操控指令和对应的交通标志图案相关联,并更新至交通标志数据库中。这里的交通标志数据库可以指代后台服务器的数据库,也可以指代车辆本地的数据库。
进一步的,针对车辆本地的交通标志数据库,若任一交通标志图案同时存在关联的推荐操控指令和优化操控指令,再次识别到该交通标志图案时,需要优先以后台服务器端配置的优化操控指令为准,控制车辆的行驶状态。
具体的,交通标志数据库中可以将交通标志图案与关联的操控指令以数据对的行驶存储,还可以通过车辆控制器对本地的交通标志数据库进行去重,具体包括:
针对所述交通标志数据库中的每个数据对,确定是否存在交通标志图案相同的数据对;
若存在,则确定数据对中该交通标志图案关联的操控指令是否包括优化操控指令;
若包括优化操控指令,则将该优化操控指令对应的数据对保留,同时删除其他数据对。
优化操控指令优化操控指令优化操控指令优化操控指令基于同一发明构思,本申请实施例中还提供了与辅助驾驶方法对应的辅助驾驶装置,由于本申请实施例中的装置解决问题的原理与本申请实施例上述辅助驾驶方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
请参阅图8,图8为本申请实施例所提供的一种辅助驾驶装置的结构示意图。如图8中所示,所述辅助驾驶装置800包括:
获取模块810,用于获取车辆行驶前方的目标行驶图像,目标行驶图像中含有交通标志图案;
识别模块820,用于对目标行驶图像中含有的交通标志图案进行识别;
展示模块830,用于若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案。
在一优选实施例中,通过以下项中的至少一项向车辆的驾驶员展示识别失败的交通标志图案:在车辆的中控屏上显示交通标志图案;在车辆的仪表盘上显示交通标志图案;通过车辆的抬头显示仪将交通标志图案投影到驾驶员前方的风挡玻璃上。
在一优选实施例中,识别模块820具体用于:从交通标志数据库中查找与交通标志图案相匹配的目标预设交通标志;若查找到相匹配的目标预设交通标志,则确定识别成功;若没有查找到相匹配的目标预设交通标志,则确定识别失败。
在一优选实施例中,交通标志数据库中存储有多个预设交通标志以及与各预设交通标志对应的操控指令,其中,还包括控制模块(图中未示出):用于在识别成功之后,向驾驶员展示驾驶提示信息,驾驶提示信息包括与目标预设交通标志对应的操控指令,或者,控制车辆按照与目标预设交通标志对应的操控指令执行相应的动作。
在一优选实施例中,展示模块830:还用于在识别失败之后,显示用于对识别失败的交通标志图案进行处理的待处理界面,待处理界面包括标志展示区域以及第一处理控件,标志展示区域包括识别失败的交通标志图案;其中,第一处理控件用于针对识别失败的交通标志图案配置操控指令。
在一优选实施例中,目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志,其中,待处理界面还包括操控定义区域,操控定义区域包括针对识别失败的交通标志图案的至少一个推荐操控指令,第一处理控件为针对至少一个推荐操控指令执行处理的控件,其中,展示模块830还用于接收针对至少一个推荐操控指令的第一选择操作;接收针对第一处理控件的第二选择操作;响应于第二选择操作,将识别失败的交通标志图案与所选择的至少一个推荐操控指令建立关联,并将识别失败的交通标志图案与所关联的至少一个推荐操控指令添加到交通标志数据库中。
在一优选实施例中,将识别失败的交通标志图案与所关联的至少一个推荐操控指令上传至车辆的后台服务器,其中,识别失败的交通标志图案以及至少一个推荐操控指令由后台服务器执行以下处理:显示识别失败的交通标志图案以及针对交通标志图案的至少一个推荐操控指令;接收针对任一推荐操控指令的编辑操作,获得编辑后的推荐操控指令;用编辑后的推荐操控指令对交通标志数据库中与交通标志图案关联的该推荐操控指令进行更新优化操控指令优化操控指令。
在一优选实施例中,待处理界面还包括第二处理控件,第二处理控件为针对识别失败的交通标志图案执行处理的控件,其中,展示模块830还用于接收针对第二处理控件的第三选择操作;响应于第三选择操作,将识别失败的交通标志图案上传至车辆的后台服务器。
在一优选实施例中,目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与交通标志图案相匹配的目标预设交通标志,其中,识别失败的交通标志图案由后台服务器执行以下处理:显示识别失败的交通标志图案;接收针对交通标志图案的优化操控指令;将交通标志图案以及优化操控指令,添加到交通标志数据库中。
请参阅图9,图9为本申请实施例所提供的一种电子设备的结构示意图。如图9中所示,所述电子设备900包括处理器910、存储器920和总线930。
所述存储器920存储有所述处理器910可执行的机器可读指令,当电子设备900运行时,所述处理器910与所述存储器920之间通过总线930通信,所述机器可读指令被所述处理器910执行时,可以执行如上述图1以所示方法实施例中的辅助驾驶方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时可以执行如上述图1所示方法实施例中的辅助驾驶方法的步骤,具体实现方式可参见方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本申请的具体实施方式,用以说明本申请的技术方案,而非对其限制,本申请的保护范围并不局限于此,尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (7)
1.一种辅助驾驶方法,其特征在于,所述方法包括:
获取车辆行驶前方的目标行驶图像,所述目标行驶图像中含有交通标志图案;
对所述目标行驶图像中含有的交通标志图案进行识别;
若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案,并显示用于对识别失败的交通标志图案进行处理的待处理界面,所述待处理界面至少包括第一处理控件、第二处理控件、操控定义区域以及标志展示区域,所述操控定义区域包括针对识别失败的交通标志图案的至少一个推荐操控指令,所述推荐操控指令为保证车辆行驶安全同时不对其他车道行驶的车辆造成较大影响的操控指令,所述标志展示区域包括识别失败的交通标志图案,所述目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与所述交通标志图案相匹配的目标预设交通标志,所述第一处理控件为针对所述至少一个推荐操控指令执行处理的控件,所述第二处理控件为针对识别失败的交通标志图案执行处理的控件;
其中,还包括:
接收针对所述至少一个推荐操控指令的第一选择操作;接收针对第一处理控件的第二选择操作;响应于第二选择操作,将识别失败的交通标志图案与所选择的所述至少一个推荐操控指令建立关联,并将识别失败的交通标志图案与所关联的所述至少一个推荐操控指令添加到交通标志数据库中;或
接收针对第二处理控件的第三选择操作;响应于第三选择操作,将识别失败的交通标志图案上传至车辆的后台服务器,其中,识别失败的交通标志图案由后台服务器执行以下处理:
显示识别失败的交通标志图案;
接收针对所述交通标志图案的优化操控指令,所述优化操控指令为与所述交通标志图案对应的人工优化后的车辆的操控指令;
将所述交通标志图案以及所述优化操控指令,添加到所述交通标志数据库中。
2.根据权利要求1所述的方法,其特征在于,通过以下项中的至少一项向车辆的驾驶员展示识别失败的交通标志图案:
在车辆的中控屏上显示所述交通标志图案;
在车辆的仪表盘上显示所述交通标志图案;
通过车辆的抬头显示仪将所述交通标志图案投影到驾驶员前方的风挡玻璃上。
3.根据权利要求1所述的方法,其特征在于,对所述目标行驶图像中含有的交通标志图案进行识别的步骤包括:
从交通标志数据库中查找与所述交通标志图案相匹配的目标预设交通标志;
若查找到相匹配的目标预设交通标志,则确定识别成功;
若没有查找到相匹配的目标预设交通标志,则确定识别失败。
4.根据权利要求3所述的方法,其特征在于,所述交通标志数据库中存储有多个预设交通标志以及与各预设交通标志对应的操控指令,
其中,还包括:
在识别成功之后,向驾驶员展示驾驶提示信息,所述驾驶提示信息包括与目标预设交通标志对应的操控指令,或者,控制车辆按照与目标预设交通标志对应的操控指令执行相应的动作。
5.根据权利要求1所述的方法,其特征在于,还包括:将识别失败的交通标志图案与所关联的所述至少一个推荐操控指令上传至车辆的后台服务器,
其中,识别失败的交通标志图案以及所述至少一个推荐操控指令由后台服务器执行以下处理:
显示识别失败的交通标志图案以及针对所述交通标志图案的所述至少一个推荐操控指令;
接收针对所述任一推荐操控指令的编辑操作,获得编辑后的推荐操控指令;
用编辑后的推荐操控指令对所述交通标志数据库中与所述交通标志图案关联的该推荐操控指令进行更新。
6.一种辅助驾驶装置,其特征在于,所述装置包括:
获取模块,用于获取车辆行驶前方的目标行驶图像,所述目标行驶图像中含有交通标志图案;
识别模块,用于对所述目标行驶图像中含有的交通标志图案进行识别;
展示模块,用于若识别失败,则向车辆的驾驶员展示识别失败的交通标志图案,并显示用于对识别失败的交通标志图案进行处理的待处理界面,所述待处理界面包括操控定义区域、标志展示区域、第一处理控件以及第二处理控件,所述操控定义区域包括针对识别失败的交通标志图案的至少一个推荐操控指令,所述推荐操控指令为保证车辆行驶安全同时不对其他车道行驶造成较大影响的车辆的操控指令,所述标志展示区域包括识别失败的交通标志图案,所述目标行驶图像中含有的交通标志图案识别失败是指交通标志数据库中不存在与所述交通标志图案相匹配的目标预设交通标志,所述第一处理控件为针对所述至少一个推荐操控指令执行处理的控件,所述第二处理控件为针对识别失败的交通标志图案执行处理的控件;
其中,还包括:
接收针对所述至少一个推荐操控指令的第一选择操作;接收针对第一处理控件的第二选择操作;响应于第二选择操作,将识别失败的交通标志图案与所选择的所述至少一个推荐操控指令建立关联,并将识别失败的交通标志图案与所关联的所述至少一个推荐操控指令添加到交通标志数据库中;或
接收针对第二处理控件的第三选择操作;响应于第三选择操作,将识别失败的交通标志图案上传至车辆的后台服务器,其中,识别失败的交通标志图案由后台服务器执行以下处理:
显示识别失败的交通标志图案;
接收针对所述交通标志图案的优化操控指令,所述优化操控指令为与所述交通标志图案对应的人工优化后的车辆的操控指令;
将所述交通标志图案以及所述优化操控指令,添加到所述交通标志数据库中。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1至5任一所述辅助驾驶方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111671454.8A CN114495542B (zh) | 2021-12-31 | 2021-12-31 | 一种辅助驾驶方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111671454.8A CN114495542B (zh) | 2021-12-31 | 2021-12-31 | 一种辅助驾驶方法、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114495542A CN114495542A (zh) | 2022-05-13 |
CN114495542B true CN114495542B (zh) | 2023-06-23 |
Family
ID=81508417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111671454.8A Active CN114495542B (zh) | 2021-12-31 | 2021-12-31 | 一种辅助驾驶方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114495542B (zh) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105438184A (zh) * | 2015-12-22 | 2016-03-30 | 上海卓易科技股份有限公司 | 车辆及利用交通标志识别辅助驾驶的方法、系统 |
FI3676561T3 (fi) * | 2017-08-31 | 2023-12-15 | Univ Case Western Reserve | Järjestelmät ja menetelmät merkintöjen tekemiseksi |
CN110889263A (zh) * | 2019-10-24 | 2020-03-17 | 北京字节跳动网络技术有限公司 | 文档的待办事项生成方法、装置、设备及存储介质 |
CN112052778B (zh) * | 2020-09-01 | 2022-04-12 | 腾讯科技(深圳)有限公司 | 一种交通标志识别方法以及相关装置 |
-
2021
- 2021-12-31 CN CN202111671454.8A patent/CN114495542B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN114495542A (zh) | 2022-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220076577A1 (en) | Drive assist device | |
US10379536B2 (en) | Driving assistance method, and driving assistance device, information presentation device, and recording medium using same | |
US20220130153A1 (en) | Vehicle control method, apparatus, electronic device and vehicle | |
US8489353B2 (en) | Methods and systems for calibrating vehicle vision systems | |
KR101596751B1 (ko) | 운전자 맞춤형 사각 영역 표시 방법 및 장치 | |
WO2021143387A1 (zh) | 一种adas系统的处理方法及汽车诊断设备 | |
US20180345980A1 (en) | Driver monitoring system | |
EP3521124A1 (en) | Vehicle-mounted device, control method, and program | |
EP3090913B1 (en) | Vehicle control system and method | |
US11758096B2 (en) | Facial recognition for drivers | |
WO2015151457A1 (ja) | 情報表示システム | |
US10449898B2 (en) | Systems and methodologies for providing supplementary information based on alerts in a vehicle | |
JP2014149640A (ja) | ジェスチャ操作装置及びジェスチャ操作プログラム | |
CN110861654A (zh) | 一种提醒方法、装置、车辆、设备和存储介质 | |
CN114495542B (zh) | 一种辅助驾驶方法、装置及存储介质 | |
CN103121448A (zh) | 利用车辆前方和侧方图像的车道识别率提升系统及方法 | |
US11580870B2 (en) | Systems and methodologies for providing training on warnings in a vehicle | |
EP3744602A1 (en) | Method for controlling an autonomous driving configuration or driving assistance configuration | |
WO2023029469A1 (zh) | 车辆行驶预警方法及装置 | |
EP3088270B1 (en) | System, method, and computer program for detecting one or more activities of a driver of a vehicle | |
US20180124323A1 (en) | System and method for carrying out adjustment operations on a motor vehicle | |
CN111824170A (zh) | 用于获得车辆性能信息的方法、系统、装置及电子设备 | |
EP4230491A1 (en) | A computer-implemented method for providing a function recommendation in a vehicle, a vehicle and a system for implementing the method | |
JP2020149305A (ja) | 破損検出装置、破損検出方法、およびプログラム | |
US20240149875A1 (en) | Vehicle control method, vehicle control system, and vehicle speed management method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: A driving assistance method, device, and storage medium Granted publication date: 20230623 Pledgee: SHANDONG WEIQIAO PIONEERING GROUP Co.,Ltd. Pledgor: Shanghai Luoke Intelligent Technology Co.,Ltd. Registration number: Y2024980017205 |