CN112734944A - 无人驾驶汽车调试方法、系统、存储介质、计算机设备 - Google Patents
无人驾驶汽车调试方法、系统、存储介质、计算机设备 Download PDFInfo
- Publication number
- CN112734944A CN112734944A CN202110124771.1A CN202110124771A CN112734944A CN 112734944 A CN112734944 A CN 112734944A CN 202110124771 A CN202110124771 A CN 202110124771A CN 112734944 A CN112734944 A CN 112734944A
- Authority
- CN
- China
- Prior art keywords
- detection result
- result
- dimensional code
- unmanned
- debugging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000001514 detection method Methods 0.000 claims abstract description 60
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 39
- 230000008447 perception Effects 0.000 claims abstract description 15
- 230000003190 augmentative effect Effects 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 14
- 230000000007 visual effect Effects 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000008859 change Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 239000012141 concentrate Substances 0.000 abstract description 2
- 238000012360 testing method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000007547 defect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
- G06K17/0025—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement consisting of a wireless interrogation device in combination with a device for optically marking the record carrier
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明属于无人驾驶技术领域,公开了一种无人驾驶汽车调试方法、系统、存储介质、计算机设备,将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;观测到环境感知算法的检测结果和路径规划算法的结果。系统包括:检测结果与真实图像重叠模块,用于实现检测结果与真实图像的重叠;检测结果和路径规划算法结果输出模块,用于输出观测到环境感知算法的检测结果和路径规划算法的结果。本发明采用增强显示方式,将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠,使得测试员将注意力集中到真实道路环境中,并同时能观测到环境感知算法的检测结果和路径规划算法的结果。
Description
技术领域
本发明属于无人驾驶技术领域,尤其涉及一种无人驾驶汽车调试方法、系统、存储介质、计算机设备。
背景技术
目前,在无人驾驶汽车开发过程中,为了测试所使用的环境感知算法和路径规划算法的有效性和可靠性,都需要进行算法的实车测试。所采用的实车测试方法,都是将检测结果(车道线、行人、障碍物等)和规划结果(期望行驶轨迹、预瞄点等)显示到屏幕上供测试人员观测的方式。该调试方式需要测试人员不断在显示检测结果的屏幕与实际道路环境中切换视点,长时间工作容易造成疲劳,注意力不集中。而且,该显示方式不能够直观。
通过上述分析,现有技术存在的问题及缺陷为:目前实车测试方法存在不断在显示检测结果的屏幕与实际道路环境中切换视点,长时间工作容易造成疲劳,注意力不集中;而且,不能够直观。
解决以上问题及缺陷的难度为:如何将测试人员的视点方向于被测试无人驾驶汽车的视点方向融合,如何在测试人员的视线方向上构建一个虚拟显示屏幕,如何在虚拟显示屏幕上准确的显示出无人驾驶汽车检测和规划的结果,如何实时计算测试人员视点在无人驾驶汽车坐标系中的位置和姿态。
解决以上问题及缺陷的意义为:通过在测试人员的视线方向上构建虚拟显示屏幕,将无人驾驶汽车的检测结果和规划结果投影到测试人员的视野中,实现虚拟信息和测试人员看到的实际场景的完美融合。从而为测试人员提供一个直观、快速、准确的调试手段,减少测试人员低头看显示屏的时间,进而降低测试人员的工作强度,提高测试效率和测试过程中的安全性。
发明内容
针对现有技术存在的问题,本发明提供了一种无人驾驶汽车调试方法、系统、存储介质、计算机设备。
本发明是这样实现的,一种无人驾驶汽车调试方法,所述无人驾驶汽车调试方法包括:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
进一步,所述无人驾驶汽车调试方法还包括:
第一步,在无人驾驶汽车内部粘贴二维码;在无人驾驶汽车驾驶室内部粘贴二维码,二维码在一个平面上;调试过程中增强现实头盔在任意视角上能看到至少一个二维码;
第二步,标定每一个二维码相对于无人驾驶汽车摄像头的位置关系;
第三步:无人驾驶算法调试过程中,调试人员可以任意变换视角,同时,实时现实无人驾驶汽车摄像头检测结果到增强现实头盔;
进一步,所述标定每一个二维码相对于无人驾驶汽车摄像头的位置关系具体包括:
进一步,所述实时现实无人驾驶汽车摄像头检测结果到增强现实头盔具体包括:
(1)检测调试人员视线与内部二维码之间的位置关系由于在二维码布置过程中有足够数量的二维码分布于无人驾驶汽车内部,调试人员所关注的任意视野方向上都至少有一个二维码图片,计算出调试人员与某一个二维码之间的位置关系
本发明的另一目的在于提供一种计算机设备,所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
本发明的另一目的在于提供一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如下步骤:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
本发明的另一目的在于提供一种运行所述无人驾驶汽车调试方法的无人驾驶汽车调试系统,所述无人驾驶汽车调试系统包括:
检测结果与真实图像重叠模块,用于将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
检测结果和路径规划算法结果输出模块,用于输出观测到环境感知算法的检测结果和路径规划算法的结果。
本发明的另一目的在于提供一种汽车,所述汽车安装有所述的无人驾驶汽车调试系统。
本发明的另一目的在于提供一种信息数据处理终端,所述信息数据处理终端用于实现所述的无人驾驶汽车调试方法。
本发明的另一目的在于提供一种运行所述无人驾驶汽车调试系统的无人驾驶汽车调试装置,所述无人驾驶汽车调试装置包括:无人驾驶汽车,无人驾驶汽车计算机、增强现实头盔、激光雷达、摄像机、二维码、标定板。
结合上述的所有技术方案,本发明所具备的优点及积极效果为:本发明采用增强显示的方式,将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠,使得测试员能够将注意力集中到真实道路环境中,并同时能观测到环境感知算法的检测结果和路径规划算法的结果。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图做简单的介绍,显而易见地,下面所描述的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的无人驾驶汽车调试方法流程图。
图2是本发明实施例提供的无人驾驶汽车调试系统的结构示意图;
图中:1、检测结果与真实图像重叠模块;2、检测结果和路径规划算法结果输出模块。
图3是本发明实施例提供的无人驾驶汽车调试方法原理图。
图4是本发明实施例提供的仿真示意图。
图5和图6是本发明实施例提供的无人驾驶汽车调试方法的实现流程图。
图7是本发明实施例提供的无人驾驶汽车调试装置的结构示意图。
图8是本发明实施例提供的二维码标识示意图。
图9是本发明实施例提供的标定过程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
针对现有技术存在的问题,本发明提供了一种无人驾驶汽车调试方法、系统、存储介质、计算机设备,下面结合附图对本发明作详细的描述。
如图1所示,本发明提供的无人驾驶汽车调试方法包括以下步骤:
S101:将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
S102:观测到环境感知算法的检测结果和路径规划算法的结果。
本发明提供的无人驾驶汽车调试方法业内的普通技术人员还可以采用其他的步骤实施,图1的本发明提供的无人驾驶汽车调试方法仅仅是一个具体实施例而已。
如图2所示,本发明提供的无人驾驶汽车调试系统包括:
检测结果与真实图像重叠模块1,用于将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠。
检测结果和路径规划算法结果输出模块2,用于输出观测到环境感知算法的检测结果和路径规划算法的结果。
如图7所示,本发明涉及的硬件包括:无人驾驶汽车,无人驾驶汽车计算机、增强现实头盔、激光雷达、摄像机、二维码、标定板等,本发明分为以下步骤:
第一步:在无人驾驶汽车内部粘贴二维码:
在无人驾驶汽车驾驶室内部粘贴二维码,要求:1、二维码保证在一个平面上;2、调试过程中增强现实头盔在任意视角上能看到至少一个二维码。其效果如图8所示。
第二步:标定每一个二维码相对于无人驾驶汽车摄像头的位置关系
本标定过程首先固定增强现实头盔于驾驶内部,保证头盔上的摄像头可以同时看到车内的一个二维码和外部的标定板。标定过程如图9所示:
第三步:无人驾驶算法调试过程中,调试人员可以任意变换视角,同时,实时现实无人驾驶汽车摄像头检测结果到增强现实头盔
将无人驾驶汽车摄像头的检测结果投影到增强现实头盔需要以下几个步骤:
1:检测调试人员视线与内部二维码之间的位置关系由于在二维码布置过程中有足够数量的二维码分布于无人驾驶汽车内部,调试人员所关注的任意视野方向上都至少有一个二维码图片,所以可以计算出调试人员与某一个二维码之间的位置关系
在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上;术语“上”、“下”、“左”、“右”、“内”、“外”、“前端”、“后端”、“头部”、“尾部”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”等仅用于描述目的,而不能理解为指示或暗示相对重要性。
应当注意,本发明的实施方式可以通过硬件、软件或者软件和硬件的结合来实现。硬件部分可以利用专用逻辑来实现;软件部分可以存储在存储器中,由适当的指令执行系统,例如微处理器或者专用设计硬件来执行。本领域的普通技术人员可以理解上述的设备和方法可以使用计算机可执行指令和/或包含在处理器控制代码中来实现,例如在诸如磁盘、CD或DVD-ROM的载体介质、诸如只读存储器(固件)的可编程的存储器或者诸如光学或电子信号载体的数据载体上提供了这样的代码。本发明的设备及其模块可以由诸如超大规模集成电路或门阵列、诸如逻辑芯片、晶体管等的半导体、或者诸如现场可编程门阵列、可编程逻辑设备等的可编程硬件设备的硬件电路实现,也可以用由各种类型的处理器执行的软件实现,也可以由上述硬件电路和软件的结合例如固件来实现。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,都应涵盖在本发明的保护范围之内。
Claims (10)
1.一种无人驾驶汽车调试方法,其特征在于,所述无人驾驶汽车调试方法包括:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
2.如权利要求1所述的无人驾驶汽车调试方法,其特征在于,所述无人驾驶汽车调试方法还包括:
第一步,在无人驾驶汽车内部粘贴二维码;在无人驾驶汽车驾驶室内部粘贴二维码,二维码在一个平面上;调试过程中增强现实头盔在任意视角上能看到至少一个二维码;
第二步,标定每一个二维码相对于无人驾驶汽车摄像头的位置关系;
第三步:无人驾驶算法调试过程中,调试人员可以任意变换视角,同时,实时现实无人驾驶汽车摄像头检测结果到增强现实头盔。
5.一种计算机设备,其特征在于,所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
6.一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行如下步骤:
将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
观测到环境感知算法的检测结果和路径规划算法的结果。
7.一种运行权利要求1~4任意一项所述无人驾驶汽车调试方法的无人驾驶汽车调试系统,其特征在于,所述无人驾驶汽车调试系统包括:
检测结果与真实图像重叠模块,用于将检测结果和规划结果投影到测试员的头戴增强显示头盔中,实现检测结果与真实图像的重叠;
检测结果和路径规划算法结果输出模块,用于输出观测到环境感知算法的检测结果和路径规划算法的结果。
8.一种汽车,其特征在于,所述汽车安装有权利要求4所述的无人驾驶汽车调试系统。
9.一种信息数据处理终端,其特征在于,所述信息数据处理终端用于实现权利要求1~5任意一项所述的无人驾驶汽车调试方法。
10.一种运行权利要求7所述无人驾驶汽车调试系统的无人驾驶汽车调试装置,其特征在于,所述无人驾驶汽车调试装置包括:无人驾驶汽车,无人驾驶汽车计算机、增强现实头盔、激光雷达、摄像机、二维码、标定板。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110124771.1A CN112734944A (zh) | 2021-01-29 | 2021-01-29 | 无人驾驶汽车调试方法、系统、存储介质、计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110124771.1A CN112734944A (zh) | 2021-01-29 | 2021-01-29 | 无人驾驶汽车调试方法、系统、存储介质、计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112734944A true CN112734944A (zh) | 2021-04-30 |
Family
ID=75594706
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110124771.1A Pending CN112734944A (zh) | 2021-01-29 | 2021-01-29 | 无人驾驶汽车调试方法、系统、存储介质、计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112734944A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114494439A (zh) * | 2022-01-25 | 2022-05-13 | 襄阳达安汽车检测中心有限公司 | Hil仿真测试中摄像头位姿校准方法、装置、设备及介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999005580A2 (de) * | 1997-07-23 | 1999-02-04 | Duschek Horst Juergen | Verfahren zum kontrollieren eines unbemannten fortbewegungsmittels und unbemanntes fortbewegungsmittelsystem zum durchführen dieses verfahrens |
JP2011067277A (ja) * | 2009-09-24 | 2011-04-07 | Brother Industries Ltd | ヘッドマウントディスプレイ |
CN103802728A (zh) * | 2013-11-08 | 2014-05-21 | 广东好帮手电子科技股份有限公司 | 基于头盔显示器进行自动选景显示的驾驶辅助系统及方法 |
CN109064829A (zh) * | 2018-08-14 | 2018-12-21 | 山东省科学院自动化研究所 | 一种无人驾驶车辆视觉感知能力测试方法及系统 |
EP3454015A1 (en) * | 2017-09-11 | 2019-03-13 | BAE SYSTEMS plc | Apparatus and method for displaying an operational area |
CN111121818A (zh) * | 2019-12-11 | 2020-05-08 | 中山大学 | 一种无人车中相机与二维码的标定方法 |
-
2021
- 2021-01-29 CN CN202110124771.1A patent/CN112734944A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999005580A2 (de) * | 1997-07-23 | 1999-02-04 | Duschek Horst Juergen | Verfahren zum kontrollieren eines unbemannten fortbewegungsmittels und unbemanntes fortbewegungsmittelsystem zum durchführen dieses verfahrens |
JP2011067277A (ja) * | 2009-09-24 | 2011-04-07 | Brother Industries Ltd | ヘッドマウントディスプレイ |
CN103802728A (zh) * | 2013-11-08 | 2014-05-21 | 广东好帮手电子科技股份有限公司 | 基于头盔显示器进行自动选景显示的驾驶辅助系统及方法 |
EP3454015A1 (en) * | 2017-09-11 | 2019-03-13 | BAE SYSTEMS plc | Apparatus and method for displaying an operational area |
CN109064829A (zh) * | 2018-08-14 | 2018-12-21 | 山东省科学院自动化研究所 | 一种无人驾驶车辆视觉感知能力测试方法及系统 |
CN111121818A (zh) * | 2019-12-11 | 2020-05-08 | 中山大学 | 一种无人车中相机与二维码的标定方法 |
Non-Patent Citations (1)
Title |
---|
李丽丽: "关于无人机训练驾驶虚拟系统的优化设计", 《计算机仿真》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114494439A (zh) * | 2022-01-25 | 2022-05-13 | 襄阳达安汽车检测中心有限公司 | Hil仿真测试中摄像头位姿校准方法、装置、设备及介质 |
CN114494439B (zh) * | 2022-01-25 | 2023-08-15 | 襄阳达安汽车检测中心有限公司 | Hil仿真测试中摄像头位姿校准方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3967972A1 (en) | Positioning method, apparatus, and device, and computer-readable storage medium | |
US11400928B2 (en) | Driverless vehicle testing method and apparatus, device and storage medium | |
US10908051B2 (en) | Testing method and apparatus applicable to driverless vehicle | |
CN109949439B (zh) | 行车实景信息标注方法、装置、电子设备和介质 | |
CN106157572B (zh) | 汽车主动安全预警系统的测试方法及测试装置 | |
US20160019807A1 (en) | Vehicle risky situation reproducing apparatus and method for operating the same | |
CN103985282B (zh) | 驾驶人考试及培训三维虚拟监视方法用的监视系统 | |
JP6545279B2 (ja) | 衝突は発生しないかについて、車両が辿るべき目標軌跡を監視するための方法及び装置 | |
CN110136273B (zh) | 一种用于机器学习中的样本数据标注方法及装置 | |
CN105676452A (zh) | 用于车辆的增强现实hud显示方法和装置 | |
CN101236702A (zh) | 基于虚拟现实的驾驶员注视物体识别系统 | |
CN111460865A (zh) | 辅助驾驶方法、辅助驾驶系统、计算设备及存储介质 | |
US11828828B2 (en) | Method, apparatus, and system for vibration measurement for sensor bracket and movable device | |
JP7234026B2 (ja) | 隠された対象物の操作の支援 | |
CN109492566A (zh) | 车道位置信息获取方法、装置及存储介质 | |
CN110135396A (zh) | 地面标志的识别方法、装置、设备及介质 | |
TW202031538A (zh) | 輔助駕駛方法和系統 | |
CN110031975A (zh) | 在车辆中校准增强现实眼镜的方法和系统与增强现实眼镜 | |
CN112734944A (zh) | 无人驾驶汽车调试方法、系统、存储介质、计算机设备 | |
CN110210361B (zh) | 一种测试场景的创建方法及装置、车载终端 | |
KR20130052400A (ko) | 지능형 자동차의 스테레오 비전 시스템에 대한 시뮬레이션 장치 및 이를 이용한 카메라 교정 방법 | |
KR102095333B1 (ko) | 증강현실 기반 실차 테스트 방법 및 시스템 | |
CN112598756B (zh) | 路边传感器标定方法、装置和电子设备 | |
CN111125270A (zh) | 地图构建和加载的方法及装置 | |
KR102127252B1 (ko) | 주행 경로를 확보하기 위한 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210430 |