CN114434466B - 一种汽车智能驾舱性能评测仿真机器人 - Google Patents

一种汽车智能驾舱性能评测仿真机器人 Download PDF

Info

Publication number
CN114434466B
CN114434466B CN202210244133.8A CN202210244133A CN114434466B CN 114434466 B CN114434466 B CN 114434466B CN 202210244133 A CN202210244133 A CN 202210244133A CN 114434466 B CN114434466 B CN 114434466B
Authority
CN
China
Prior art keywords
image
voice
test
determining
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210244133.8A
Other languages
English (en)
Other versions
CN114434466A (zh
Inventor
周炜
董轩
贾红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Research Institute of Highway Ministry of Transport
Original Assignee
Research Institute of Highway Ministry of Transport
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Research Institute of Highway Ministry of Transport filed Critical Research Institute of Highway Ministry of Transport
Priority to CN202210244133.8A priority Critical patent/CN114434466B/zh
Publication of CN114434466A publication Critical patent/CN114434466A/zh
Application granted granted Critical
Publication of CN114434466B publication Critical patent/CN114434466B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M17/00Testing of vehicles
    • G01M17/007Wheeled or endless-tracked vehicles
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/01Assessment or evaluation of speech recognition systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details

Abstract

本发明提供一种汽车智能驾舱性能评测仿真机器人,包括:仿人形的本体、设置在本体的对应人体眼部的位置的图像采集模块、设置在本体的对应人体嘴部的位置的音频播放模块、设置在本体的对应人体耳部的位置的音频接收模块、设置在本体的外表面的压力传感器阵列、设置在本体内的处理模块和无线通讯模块;处理模块分别与图像采集模块、音频播放模块、音频接收模块、压力传感器阵列和无线通讯模块电连接。本发明的汽车智能驾舱性能评测仿真机器人,实现汽车智能驾舱各个性能的测试。

Description

一种汽车智能驾舱性能评测仿真机器人
技术领域
本发明涉及汽车检测技术领域,特别涉及一种汽车智能驾舱性能评测仿真机器人。
背景技术
目前,从上世纪80年代CAN总线系统用于车内ECU的数据通信,2012年电动车提供全新的交互和控制方式,2014年手机车机互联方案面世,到2019年跨智能设备资源共享实现,纵观智慧座舱产业(也称智能座舱、智能驾舱)的发展,可以看到多样化体验的快速渗透和广泛应用,智能驾舱是汽车智能化发展的必然产物。
智能驾舱主要构成包括车载信息娱乐系统、仪表盘、抬头显示(HUD)流媒体后视镜、语音控制等。智能座舱中各项功能未来将集成整合为一个系统。目前中国市场座舱智能配置水平的新车渗透率约为48.8%,到2025年预计可以超过75%,均高于全球市场的装配率水平。
随着智能驾舱的发展,车内显示屏不断增加,驾驶员与车辆的交互手段不断增加,因此对于传统的驾驶安全带来了挑战。主要存在以下问题:
(1)驾舱内各系统单独进行检测,驾舱整体性能以主观评价为主,缺乏驾舱整体性能测试方法。
(2)环视、BSD等间接视野系统无驾驶员视角的图像性能评测方法。
因此,如何对智能驾舱进行全面安全的检测是亟需解决的技术问题。
发明内容
本发明目的之一在于提供了一种汽车智能驾舱性能评测仿真机器人,实现汽车智能驾舱各个性能的测试。
本发明实施例提供的一种汽车智能驾舱性能评测仿真机器人,包括:仿人形的本体、设置在本体的对应人体眼部的位置的图像采集模块、设置在本体的对应人体嘴部的位置的音频播放模块、设置在本体的对应人体耳部的位置的音频接收模块、设置在本体的外表面的压力传感器阵列、设置在本体内的处理模块和无线通讯模块;处理模块分别与图像采集模块、音频播放模块、音频接收模块、压力传感器阵列和无线通讯模块电连接。
优选的,本体包括:
底座;
第一主体,固定设置在底座上;
双轴云台,固定设置在第一主体的远离底座的一端;
第二主体,转动设置在双轴云台上;
一对仿真机械臂,对称设置在第一主体两侧。
优选的,汽车智能驾舱性能评测仿真机器人,还包括:
柔性压力传感器,设置在仿真机械臂末端,与处理模块电连接。
优选的,第一主体包括:至少一个伸缩机构,伸缩机构的一端与底座固定连接,另一端通过万向轴与双轴云台固定连接。
优选的,汽车智能驾驶性能评测仿真机器人,还包括:
接触开关,设置在底座底端面,与处理模块电连接;
按键,设置在第一主体的一侧,与处理模块电连接;
车载电脑连接接口,设置在底座上,与处理模块电连接;
处理模块执行如下操作:
当通过按键或无线通讯模块接收到开机指令时,检测接触开关是否被触发;
当接触开关被触发后,开机并执行环境确认操作,否则,进入待机状态;
当环境确认操作执行通过后,执行双轴云台定位操作,否则,进入待机状态;
当双轴云台定位操作执行完成后,执行评测项目确定操作;
根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告。
优选的,处理模块执行环境确认操作,包括:
获取预设的双轴云台的第一控制指令集;
基于第一控制指令集控制双轴云台工作;
在双轴云台工作的过程中,通过图像采集模块采集多个第一图像;
将多个第一图像进行拼接,构建第一环境全局图;
获取预设的环境确认库;
将第一环境全局图与环境确认库内的第一标准图像进行匹配;
当存在匹配符合项时,环境操作执行通过。
优选的,处理模块执行双轴云台定位操作,包括:
获取环境确认库中与第一环境全局图相匹配的第一标准图像的图像编号;
基于图像编号,从通过无线通讯模块通讯连接的服务器上获取对应图像编号的定位调整库;
将第一环境全局图与定位调整库内的第二标准图像进行匹配,确定各个第二标准图像对应的第一匹配度;
获取定位调整库内的与第一环境全局图的第一匹配度最大的第二标准图像及其对应关联的第二控制指令集;
基于第二控制指令集控制伸缩机构的工作;
再次基于第一控制指令集控制双轴云台工作并通过图像采集模块采集多个第二图像,构建第二环境全局图;
确定第二环境全局图与获取的第二标准图像的第二匹配度;
获取预设的至少一个微调控制集;
基于微调控制集,控制伸缩机构的工作;
每次通过微调控制集控制伸缩机构的工作后,基于第一控制指令集控制双轴云台工作并通过图像采集模块采集多个第三图像,构建第三环境全局图;
确定第三环境全局图与获取的第二标准图像的第三匹配度;
基于第二匹配度和至少一个第三匹配度中最大值,确定双轴云台的最终位置。
优选的,处理模块执行评测项目确定操作,包括:
获取用户通过服务器输入的第一评测项目表;
解析第一评测项目表,确定各个评测项目;
和/或,
获取与第二标准图像对应关联的第二评测项目表;
解析第二评测项目表,确定各个评测项目;
其中,评测项目包括:语音交互功能测试、触屏显示功能测试、触屏识别功能测试、电子后视镜显示功能测试、流媒体后视镜显示功能测试、平视显示系统功能测试、驾驶平稳性测试其中一种或多种结合。
优选的,处理模块根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为语音交互功能测试时,通过无线通讯模块获取服务器发送的语音测试库和噪音测试库;
解析语音交互功能测试的测试要求,确定对应语音测试库的第一提取规则、对应噪音测试库的第二提取规则、多个语音合成规则、语音测试结果识别模板;
基于第一提取规则提取语音测试库内的测试语音;
基于第二提取规则提取噪音测试库内的噪声语音;
基于多个语音合成规则将测试语音和噪声语音合成,确定多组播放语音;同一组播放语音的测试语音和噪声语音的语音合成规则一致;
通过音频播放模块播放播放语音;
通过图像采集模块获取语音交互功能测试对应的测试设备的第三图像;
基于语音测试结果识别模板对获取的测试设备的第三图像进行识别,确定各个播放语音的语音识别结果;
当语音识别结果为识别正确或识别错误时,基于获取的测试设备的第三图像出现的时间与播放语音的播放时间差值,确定语音识别的反应时间;
基于各组播放语音的各个播放语音的语音识别结果,确定各组播放语音的识别率;
基于各组播放语音的各个播放语音的反应时间,确定各组播放语音的平均反应时间;
获取预设的对应各组播放语音的第一评分模板、第二评分模板和权重;
基于各组播放语音对应的识别率和第一评分模板,确定各组播放语音对应的第一评分值;
基于各组播放语音对应的平均反应时间和第二评分模板,确定各组播放语音对应的第二评分值;
基于各组播放语音对应的第一评分值、第二评分值和权重,确定语音交互功能测试的最终评分值。
优选的,处理模块根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为触屏显示功能测试时,通过图像采集模块拍摄的目标屏幕的显示画面的第四图像;
基于第四图像,测试显示画面上图标、文字的尺寸;
和/或,
当评测项目为触屏显示功能测试时,通过图像采集模块拍摄车载显示屏显示环视图像的第五图像;
基于第五图像,进行环视图像的图像质量参数测试;
和/或,
当评测项目为触屏识别功能测试时,基于预设的第三控制指令集控制仿真机械臂末端的点击触摸屏;
通过柔性压力传感器检测点击力度;
通过图像采集模块拍摄的目标屏幕接收点击后的第六图像;
基于第六图像,确定触屏点击效果;
基于点击力度、触屏点击效果,确定触屏识别功能;
和/或,
当评测项目为电子后视镜显示功能测试或流媒体后视镜显示功能测试时,通过图像采集模块拍摄电子后视镜显示的画面的第七图像;电子后视镜或流媒体后视镜的显示的画面为在车辆后方设置三排、每排三个目标物时的画面;
基于第七图像,确定电子后视镜显示功能测试或流媒体后视镜显示功能;
和/或,
当评测项目为平视显示系统功能测试时,通过图像采集模块拍摄平视显示系统显示的画面的第八图像;
基于第八图像,确定平视显示系统的图像质量。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种汽车智能驾舱性能评测仿真机器人的示意图;
图2为本发明实施例中一种汽车智能驾舱性能评测仿真机器人在智能驾舱内的设置的示意图;
图3为本发明实施例中一种语音交互评测项目表;
图4为本发明实施例中一种触屏显示功能测试的示意图;
图5为本发明实施例中一种电子后视镜显示功能测试或流媒体后视镜显示功能的测试示意图;
图6为本发明实施例中一种平视显示系统功能测试的示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
本发明实施例提供了一种汽车智能驾舱性能评测仿真机器人,如图1和图2所示,包括:仿人形的本体1、设置在本体1的对应人体眼部的位置的图像采集模块2、设置在本体1的对应人体嘴部的位置的音频播放模块3、设置在本体1的对应人体耳部的位置的音频接收模块4、设置在本体1的外表面的压力传感器阵列7、设置在本体1内的处理模块5和无线通讯模块6;处理模块5分别与图像采集模块2、音频播放模块3、音频接收模块4、压力传感器阵列7和无线通讯模块6电连接。
上述技术方案的工作原理及有益效果为:
通过仿人形的本体1实现模拟人体在智能驾舱的情形,基于图像采集模块2实现模拟人眼对外界的图像的获取,进而实现对智能驾舱内各个显示屏的显示画面的测试;通过音频接收模块4、音频播放模块3实现与智能驾舱内各个语音交互设备的语音交互测试;处理模块5为机器人的控制中枢;压力传感器阵列7用于在对汽车进行撞击测试时,确定人体各个部位所受到的打击力度,进而确定是否发生潜在威胁的测试;无线通讯模块6实现机器人与服务器的通讯连接,用于接收服务器传输的控制,实现用户的远程控制。其中,图像采集模块2仿人眼视觉设计。
本发明的汽车智能驾舱性能评测仿真机器人,实现了对智能驾舱的各个性能的测试。
在一个实施例中,本体1包括:
底座;通过底座实现本体1在驾驶座上的固定;为了避免机器人在驾驶座上的位置的偏移,底座需具有一定的配重,
第一主体,固定设置在底座上;
双轴云台,固定设置在第一主体的远离底座的一端;双轴云台是实现机器人模拟人体头部的运动;
第二主体,转动设置在双轴云台上;第二主体为仿人体头部形状;
一对仿真机械臂,对称设置在第一主体两侧。仿真机械臂实现模拟人体手臂,可以对方向盘进行操作、对触摸屏进行触摸等;机械臂末端为仿人体手部结构并且在指尖设置有仿人体皮肤构造,以实现触摸屏的触摸操作。本体1的外部包覆有仿人体皮肤层,并且压力传感器阵列7设置在仿人体皮肤层上。
其中,汽车智能驾舱性能评测仿真机器人,还包括:
柔性压力传感器,设置在仿真机械臂末端,与处理模块5电连接。柔性压力传感器检测机械臂触摸力度等;
第一主体包括:至少一个伸缩机构,伸缩机构的一端与底座固定连接,另一端通过万向轴与双轴云台固定连接。通过伸缩机构实现双轴云台的位置的调整,以模拟不同的人体身高,实现对应不同人体身高的驾驶舱性能测试。
在一个实施例中,汽车智能驾驶性能评测仿真机器人,还包括:
接触开关,设置在底座底端面,与处理模块5电连接;
按键,设置在第一主体的一侧,与处理模块5电连接;
车载电脑连接接口,设置在底座上,与处理模块5电连接;
处理模块5执行如下操作:
当通过按键或无线通讯模块6接收到开机指令时,检测接触开关是否被触发;
当接触开关被触发后,开机并执行环境确认操作,否则,进入待机状态;
当环境确认操作执行通过后,执行双轴云台定位操作,否则,进入待机状态;
当双轴云台定位操作执行完成后,执行评测项目确定操作;
根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告。
上述技术方案的工作原理及有益效果为:
在检测开始前,先要进行执行环境确认,以确定执行环境,当不是执行环境时,不进行测试,提高了机器人的智能性,并且可以防止测试数据的造价;在环境确认操作执行完成后,进行双轴云台定位操作,以使作为仿人体头部的第二主体位于合适位置,实现测试位置的自动调节;当完成位置调整后,就可以根据评测项目进行驾驶舱性能的评测。
在一个实施例中,处理模块5执行环境确认操作,包括:
获取预设的双轴云台的第一控制指令集;
基于第一控制指令集控制双轴云台工作;
在双轴云台工作的过程中,通过图像采集模块2采集多个第一图像;在第一控制指令集的控制下双轴云台带动第二主体模拟人体头部转动,头部每转动到一个预设位置就采集一次驾驶舱内的第一图像;
将多个第一图像进行拼接,构建第一环境全局图;
获取预设的环境确认库;环境确认库为事先构建,收录了各种车辆的智能驾驶舱内的环境全局图,并且一个车辆收录一个环境全局图;
将第一环境全局图与环境确认库内的第一标准图像进行匹配;匹配主要采用计算 第一环境全局图和第一标准图像之间的相似度实现;具体为:对第一环境全局图和第一标 准图像分别进行特征提取,基于提取的特征分别构建第一特征向量和第二特征向量;以第 一特征向量和第二特征向量的相似度为第一环境全局图与第一标准图像的相似度;当相似 度大于预设的相似度阈值(例如0.95)时,确定第一环境全局图与第一标准图像匹配;其中, 第一特征向量和第二特征向量的相似度计算公式如下:
Figure DEST_PATH_IMAGE001
;式中,
Figure DEST_PATH_IMAGE002
为第一特征向量和第二特征向量的相似度;
Figure DEST_PATH_IMAGE003
为第一特征向量的第
Figure DEST_PATH_IMAGE004
个数据值;
Figure DEST_PATH_IMAGE005
为第二特 征向量的第
Figure 794842DEST_PATH_IMAGE004
个数据值;
Figure DEST_PATH_IMAGE006
为第一特征向量或第二特征向量的数据维度;
当存在匹配符合项时,环境操作执行通过。没有匹配符合项时,环境操作不通过。
在一个实施例中,处理模块5执行双轴云台定位操作,包括:
获取环境确认库中与第一环境全局图相匹配的第一标准图像的图像编号;图像编号为预先为环境确认库内每个第一环境全局图对应关联;各个第一环境全局图的图像编号唯一;
基于图像编号,从通过无线通讯模块6通讯连接的服务器上获取对应图像编号的定位调整库;在服务器内定位调整库与图像编号关联,例如:不同的车辆的定位调整库是不同的,通过第一环境全局图确定出具体测试的车辆,然后根据图像编号进行车辆对应的定位调整库的调取;
将第一环境全局图与定位调整库内的第二标准图像进行匹配,确定各个第二标准图像对应的第一匹配度;定位调整库内的第二标准图像为同一个车辆从驾驶座位上各个距离上拍摄的驾驶室内的全局图;
获取定位调整库内的与第一环境全局图的第一匹配度最大的第二标准图像及其对应关联的第二控制指令集;第二控制指令集为第二标准图像对应的位置移动到预设的测试位置的各个伸缩机构的控制指令集合;
基于第二控制指令集控制伸缩机构的工作;
再次基于第一控制指令集控制双轴云台工作并通过图像采集模块2采集多个第二图像,构建第二环境全局图;
确定第二环境全局图与获取的第二标准图像的第二匹配度;
获取预设的至少一个微调控制集;
基于微调控制集,控制伸缩机构的工作;
每次通过微调控制集控制伸缩机构的工作后,基于第一控制指令集控制双轴云台工作并通过图像采集模块2采集多个第三图像,构建第三环境全局图;
确定第三环境全局图与获取的第二标准图像的第三匹配度;
基于第二匹配度和至少一个第三匹配度中最大值,确定双轴云台的最终位置。
上述技术方案的工作原理及有益效果为:
通过第二控制指令集实现伸缩机构的粗调,微调控制集实现了伸缩机构的微调;通过粗调和微调结合实现了伸缩机构的自动调整,以使双轴云台的最终位置准确停留在预设的测试位置上;进而在测试位置对智能驾舱内的各个设备的性能的测试。
在一个实施例中,处理模块5执行评测项目确定操作,包括:
获取用户通过服务器输入的第一评测项目表;
解析第一评测项目表,确定各个评测项目;
和/或,
获取与第二标准图像对应关联的第二评测项目表;
解析第二评测项目表,确定各个评测项目;
其中,评测项目包括:语音交互功能测试、触屏显示功能测试、触屏识别功能测试、电子后视镜显示功能测试、流媒体后视镜显示功能测试、平视显示系统功能测试、驾驶平稳性测试其中一种或多种结合。
上述技术方案的工作原理及有益效果为:
评测项目的确定可以是用户在服务器进行输入,也可以是通过预定的测试位置进行关联确定,即在测试位置可以进行哪种评测项目的评测就进行该评测项目的评测。驾驶平稳性测试可以通过机器人的机械臂把握方向盘,开过设置有各种坡度的直线路线;通过机器人的底座下表面的压力传感器阵列7检测的压力变化值,进而确定驾驶平稳性。
在一个实施例中,处理模块5根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为语音交互功能测试时,通过无线通讯模块6获取服务器发送的语音测试库和噪音测试库;
解析语音交互功能测试的测试要求,确定对应语音测试库的第一提取规则、对应噪音测试库的第二提取规则、多个语音合成规则、语音测试结果识别模板;第一提取规则限定语音测试库内提取的测试语音的数量、随机提取或按编号提取;第二提取规则限定语音测试库内提取的噪声语音的数量、随机提取或按编号提取;语音测试库中的每个测试语音都赋予唯一编号;噪音测试库中的每个噪声语音都赋予唯一编号;
基于第一提取规则提取语音测试库内的测试语音;
基于第二提取规则提取噪音测试库内的噪声语音;
基于多个语音合成规则将测试语音和噪声语音合成,确定多组播放语音;同一组播放语音的测试语音和噪声语音的语音合成规则一致;语音合成包括:确定噪声语音音量大小与测试语音的音量大小,然后进行混合;语音合成规则限定合成的噪声语音音量大小与测试语音的音量大小;
通过音频播放模块3播放播放语音;
通过图像采集模块2获取语音交互功能测试对应的测试设备的第三图像;
基于语音测试结果识别模板对获取的测试设备的第三图像进行识别,确定各个播放语音的语音识别结果;语音测试结果识别模板与测试语音相互关联;主要为测试语音被成功识别后显示屏的跳转画面;当获取的测试设备的第三图像与语音测试结果识别模板对应识别正确的图像一致时,确定识别正确;当显示屏画面未发生变化时,未识别出;当显示屏画面出现变化但是与语音测试结果识别模板对应识别正确的图像不一致时,确定识别错误;
当语音识别结果为识别正确或识别错误时,基于获取的测试设备的第三图像出现的时间与播放语音的播放时间差值,确定语音识别的反应时间;
基于各组播放语音的各个播放语音的语音识别结果,确定各组播放语音的识别率;
基于各组播放语音的各个播放语音的反应时间,确定各组播放语音的平均反应时间;在计算平均反应时间时需剔除未被识别的播放语音,只对识别正确或识别错误的播放语音进行平均值计算;
获取预设的对应各组播放语音的第一评分模板、第二评分模板和权重;
基于各组播放语音对应的识别率和第一评分模板,确定各组播放语音对应的第一评分值;第一评分模板规定了各个识别率对应的第一评分值;
基于各组播放语音对应的平均反应时间和第二评分模板,确定各组播放语音对应的第二评分值;第二评分模板规定了各个平均反应时间对应的第二评分值;
基于各组播放语音对应的第一评分值、第二评分值和权重,确定语音交互功能测试的最终评分值。最终评分值的计算公式如下:
Figure DEST_PATH_IMAGE007
其中,
Figure DEST_PATH_IMAGE008
为最终评分值;
Figure DEST_PATH_IMAGE009
为第
Figure DEST_PATH_IMAGE010
组播放语音对应的第一评分值;
Figure DEST_PATH_IMAGE011
为第
Figure 39878DEST_PATH_IMAGE010
组播放 语音对应的第二评分值;
Figure DEST_PATH_IMAGE012
为第
Figure 6566DEST_PATH_IMAGE010
组播放语音对应的权重;例如:噪音的音量越大、测试语音 的音量越小,对应的那组播放语音的权重越大;
通过测试语音与噪声语音的合成实现了模拟不同车速下驾驶员所处的噪声环境;以全面对成智能驾舱的语音交互能力进行评测。此外,还可以与音频接收模块4配合实现语音打断测试,即打断智能驾舱的播放语音。如图3所示,为一些语音交互评价测试的评测项。
在一个实施例中,处理模块5根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为触屏显示功能测试时,通过图像采集模块2拍摄的目标屏幕的显示画面的第四图像;
基于第四图像,测试显示画面上图标、文字的尺寸;测量眼球到屏幕的距离、屏幕上目标物的尺寸。如图4所示,h是目标物在屏幕上的宽度/高度,b是眼球到屏幕的距离,a为所需的夹角,通过反正弦公式可以获得a的值。从而获得屏幕上图标、文字的尺寸。
和/或,
当评测项目为触屏显示功能测试时,通过图像采集模块2拍摄车载显示屏显示环视图像的第五图像;
基于第五图像,进行环视图像的图像质量参数测试;模拟驾驶员的视觉位置,对车载显示屏环视图像的畸变、色彩、拼接、清晰度等图像质量参数进行评价。
和/或,
当评测项目为触屏识别功能测试时,基于预设的第三控制指令集控制仿真机械臂末端的点击触摸屏;
通过柔性压力传感器检测点击力度;
通过图像采集模块2拍摄的目标屏幕接收点击后的第六图像;
基于第六图像,确定触屏点击效果;
基于点击力度、触屏点击效果,确定触屏识别功能;第三控制指令集中多个控制指令,对应的点击力度不同;测试实现触屏的最小力度等。
和/或,
当评测项目为电子后视镜显示功能测试或流媒体后视镜显示功能测试时,通过图像采集模块2拍摄电子后视镜显示的画面的第七图像;电子后视镜或流媒体后视镜的显示的画面为在车辆后方设置三排、每排三个目标物时的画面;
基于第七图像,确定电子后视镜显示功能测试或流媒体后视镜显示功能;模拟驾驶员的视觉位置,对流媒体后视镜、电子后视镜的畸变、色彩等参数进行评价。如强制性标准SAE 158 、GB 15084要求:柱状的目标物,高0.8m直径0.3m,分别置于图5中红点的位置。分辨率要求:最远端的三个目标物通过显示器在驾驶员眼部的弧角平均值大于5弧分;所有目标物通过显示器在驾驶员眼部的弧角都大于3弧分;
和/或,
当评测项目为平视显示系统功能测试时,通过图像采集模块2拍摄平视显示系统显示的画面的第八图像;
基于第八图像,确定平视显示系统的图像质量。模拟驾驶员的视觉位置,对HUD、AR-HUD中的虚拟图标色彩、对比度、尺寸进行自动化测量。图6为平视显示系统的评测示意图。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (5)

1.一种汽车智能驾舱性能评测仿真机器人,其特征在于,包括:仿人形的本体、设置在所述本体的对应人体眼部的位置的图像采集模块、设置在所述本体的对应人体嘴部的位置的音频播放模块、设置在所述本体的对应人体耳部的位置的音频接收模块、设置在所述本体的外表面的压力传感器阵列、设置在所述本体内的处理模块和无线通讯模块、设置在仿真机械臂末端的柔性压力传感器;所述处理模块分别与所述图像采集模块、所述音频播放模块、所述音频接收模块、所述压力传感器阵列、所述柔性压力传感器和无线通讯模块电连接;
所述本体包括:
底座;
第一主体,固定设置在所述底座上;
双轴云台,固定设置在所述第一主体的远离所述底座的一端;
所述第一主体包括:至少一个伸缩机构,所述伸缩机构的一端与所述底座固定连接,另一端通过万向轴与所述双轴云台固定连接;
第二主体,转动设置在所述双轴云台上;
一对仿真机械臂,对称设置在所述第一主体两侧;
接触开关,设置在所述底座底端面,与所述处理模块电连接;
按键,设置在所述第一主体的一侧,与所述处理模块电连接;
车载电脑连接接口,设置在所述底座上,与所述处理模块电连接;
所述处理模块执行如下操作:
当通过所述按键或无线通讯模块接收到开机指令时,检测所述接触开关是否被触发;
当所述接触开关被触发后,开机并执行环境确认操作,否则,进入待机状态;
当环境确认操作执行通过后,执行双轴云台定位操作,否则,进入待机状态;
当双轴云台定位操作执行完成后,执行评测项目确定操作;
根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告;
所述处理模块执行环境确认操作,包括:
获取预设的所述双轴云台的第一控制指令集;
基于所述第一控制指令集控制所述双轴云台工作;
在所述双轴云台工作的过程中,通过所述图像采集模块采集多个第一图像;
将多个所述第一图像进行拼接,构建第一环境全局图;
获取预设的环境确认库;
将所述第一环境全局图与所述环境确认库内的第一标准图像进行匹配;
当存在匹配符合项时,所述环境操作执行通过。
2.如权利要求1所述的汽车智能驾舱性能评测仿真机器人,其特征在于,所述处理模块执行双轴云台定位操作,包括:
获取所述环境确认库中与所述第一环境全局图相匹配的所述第一标准图像的图像编号;
基于所述图像编号,从通过所述无线通讯模块通讯连接的服务器上获取对应所述图像编号的定位调整库;
将所述第一环境全局图与所述定位调整库内的第二标准图像进行匹配,确定各个所述第二标准图像对应的第一匹配度;
获取所述定位调整库内的与所述第一环境全局图的第一匹配度最大的所述第二标准图像及其对应关联的第二控制指令集;
基于所述第二控制指令集控制所述伸缩机构的工作;
再次基于所述第一控制指令集控制所述双轴云台工作并通过所述图像采集模块采集多个第二图像,构建第二环境全局图;
确定所述第二环境全局图与获取的所述第二标准图像的第二匹配度;
获取预设的至少一个微调控制集;
基于所述微调控制集,控制所述伸缩机构的工作;
每次通过所述微调控制集控制所述伸缩机构的工作后,基于所述第一控制指令集控制所述双轴云台工作并通过所述图像采集模块采集多个第三图像,构建第三环境全局图;
确定所述第三环境全局图与获取的所述第二标准图像的第三匹配度;
基于所述第二匹配度和至少一个所述第三匹配度中最大值,确定所述双轴云台的最终位置。
3.如权利要求2所述的汽车智能驾舱性能评测仿真机器人,其特征在于,所述处理模块执行评测项目确定操作,包括:
获取用户通过所述服务器输入的第一评测项目表;
解析所述第一评测项目表,确定各个评测项目;
和/或,
获取与所述第二标准图像对应关联的第二评测项目表;
解析所述第二评测项目表,确定各个评测项目;
其中,评测项目包括:语音交互功能测试、触屏显示功能测试、触屏识别功能测试、电子后视镜显示功能测试、流媒体后视镜显示功能测试、平视显示系统功能测试、驾驶平稳性测试其中一种或多种结合。
4.如权利要求3所述的汽车智能驾舱性能评测仿真机器人,其特征在于,所述处理模块根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为语音交互功能测试时,通过无线通讯模块获取所述服务器发送的语音测试库和噪音测试库;
解析所述语音交互功能测试的测试要求,确定对应所述语音测试库的第一提取规则、对应所述噪音测试库的第二提取规则、多个语音合成规则、语音测试结果识别模板;
基于所述第一提取规则提取所述语音测试库内的测试语音;
基于所述第二提取规则提取所述噪音测试库内的噪声语音;
基于多个所述语音合成规则将所述测试语音和噪声语音合成,确定多组播放语音;同一组所述播放语音的所述测试语音和所述噪声语音的所述语音合成规则一致;
通过所述音频播放模块播放所述播放语音;
通过所述图像采集模块获取所述语音交互功能测试对应的测试设备的第三图像;
基于所述语音测试结果识别模板对获取的所述测试设备的第三图像进行识别,确定各个所述播放语音的语音识别结果;
当语音识别结果为识别正确或识别错误时,基于获取的所述测试设备的第三图像出现的时间与所述播放语音的播放时间差值,确定语音识别的反应时间;
基于各组所述播放语音的各个所述播放语音的所述语音识别结果,确定各组所述播放语音的识别率;
基于各组所述播放语音的各个所述播放语音的所述反应时间,确定各组所述播放语音的平均反应时间;
获取预设的对应各组所述播放语音的第一评分模板、第二评分模板和权重;
基于各组所述播放语音对应的所述识别率和所述第一评分模板,确定各组所述播放语音对应的第一评分值;
基于各组所述播放语音对应的所述平均反应时间和所述第二评分模板,确定各组所述播放语音对应的第二评分值;
基于各组所述播放语音对应的所述第一评分值、所述第二评分值和所述权重,确定语音交互功能测试的最终评分值。
5.如权利要求3所述的汽车智能驾舱性能评测仿真机器人,其特征在于,所述处理模块根据评测项目确定操作确定,进行汽车智能驾驶舱性能评测并输出评测报告,包括:
当评测项目为触屏显示功能测试时,通过所述图像采集模块拍摄的目标屏幕的显示画面的第四图像;
基于所述第四图像,测试所述显示画面上图标、文字的尺寸;
和/或,
当评测项目为触屏显示功能测试时,通过所述图像采集模块拍摄车载显示屏显示环视图像的第五图像;
基于所述第五图像,进行环视图像的图像质量参数测试;
和/或,
当评测项目为触屏识别功能测试时,基于预设的第三控制指令集控制所述仿真机械臂末端的点击触摸屏;
通过所述柔性压力传感器检测点击力度;
通过图像采集模块拍摄的目标屏幕接收点击后的第六图像;
基于所述第六图像,确定触屏点击效果;
基于所述点击力度、所述触屏点击效果,确定触屏识别功能;
和/或,
当评测项目为电子后视镜显示功能测试或流媒体后视镜显示功能测试时,通过所述图像采集模块拍摄电子后视镜显示的画面的第七图像;所述电子后视镜或流媒体后视镜的显示的画面为在车辆后方设置三排、每排三个目标物时的画面;
基于所述第七图像,确定电子后视镜显示功能测试或流媒体后视镜显示功能;
和/或,
当评测项目为平视显示系统功能测试时,通过所述图像采集模块拍摄平视显示系统显示的画面的第八图像;
基于所述第八图像,确定平视显示系统的图像质量。
CN202210244133.8A 2022-03-14 2022-03-14 一种汽车智能驾舱性能评测仿真机器人 Active CN114434466B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210244133.8A CN114434466B (zh) 2022-03-14 2022-03-14 一种汽车智能驾舱性能评测仿真机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210244133.8A CN114434466B (zh) 2022-03-14 2022-03-14 一种汽车智能驾舱性能评测仿真机器人

Publications (2)

Publication Number Publication Date
CN114434466A CN114434466A (zh) 2022-05-06
CN114434466B true CN114434466B (zh) 2022-09-20

Family

ID=81358524

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210244133.8A Active CN114434466B (zh) 2022-03-14 2022-03-14 一种汽车智能驾舱性能评测仿真机器人

Country Status (1)

Country Link
CN (1) CN114434466B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117133096B (zh) * 2023-10-26 2024-01-09 中汽研汽车检验中心(宁波)有限公司 一种用于驾驶员注意力监测系统的测试系统及测试方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19949705A1 (de) * 1999-10-15 2001-05-23 Bosch Gmbh Robert Verfahren und Einrichtung zum Prüfen der Bremsanlage eines Fahrzeuges
KR20100128734A (ko) * 2009-05-29 2010-12-08 교통안전공단 차량시뮬레이터를 이용한 안전운전교육평가시스템 및 방법
CN112506170A (zh) * 2020-11-20 2021-03-16 北京赛目科技有限公司 一种基于驾驶员模型的测试方法及装置
CN113139269A (zh) * 2020-01-20 2021-07-20 斑马智行网络(香港)有限公司 车机仿真测试方法、装置、设备和介质

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6131436A (en) * 1999-03-01 2000-10-17 Lear Corporation Method and system for wear testing a seat by simulating human seating activity and robotic human body simulator for use therein
DE10013137B4 (de) * 2000-03-17 2005-11-24 Edelmann, Peter, Dr. Verfahren zur bildgesteuerten Prüfung und Bearbeitung von Produkten
JP2011117870A (ja) * 2009-12-04 2011-06-16 Kyoei Engineering Co Ltd 可動部位の試験装置及び試験方法
DE102011117297A1 (de) * 2011-11-01 2013-05-02 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Fahrerassistenzsystems und dazugehöriges Fahrerassistenzsystem
CN103335853B (zh) * 2013-07-18 2015-09-16 中国科学院自动化研究所 一种无人驾驶车辆认知能力测试系统及方法
JP6549892B2 (ja) * 2014-05-19 2019-07-24 株式会社堀場製作所 車両試験システム、試験管理装置、試験管理プログラム及び車両試験方法
KR102395276B1 (ko) * 2016-09-13 2022-05-09 현대자동차주식회사 운전자 지원 시스템 검사 장치 및 그 제어 방법
CN108184109A (zh) * 2017-12-19 2018-06-19 北京经纬恒润科技有限公司 一种车载信息娱乐系统的测试平台及测试方法
CN109307604A (zh) * 2018-10-20 2019-02-05 广州华工邦元信息技术有限公司 一种机动车检测线防作弊装置
CN109435955B (zh) * 2018-10-22 2020-08-25 百度在线网络技术(北京)有限公司 一种自动驾驶系统性能评估方法、装置、设备及存储介质
CN110531740B (zh) * 2019-09-06 2020-05-05 清华大学 一种智能车智能化程度量化测评方法
KR102234194B1 (ko) * 2019-11-08 2021-03-31 재단법인대구경북과학기술원 자율주행차동차의 제어권 전환 안전성 평가 장치 및 이를 이용하는 평가 방법
CN110779736A (zh) * 2019-12-03 2020-02-11 重庆车辆检测研究院有限公司 一种对车辆esc性能的测试系统
CN111497855A (zh) * 2020-04-13 2020-08-07 重庆车辆检测研究院有限公司 一种驾驶员监测装置的评价系统、方法、装置及评价器
CN213070114U (zh) * 2020-07-09 2021-04-27 交通运输部公路科学研究所 汽车试验监测用pda终端
CN111752261B (zh) * 2020-07-14 2021-07-06 同济大学 基于自主驾驶机器人的自动驾驶测试平台
CN112732585A (zh) * 2021-01-19 2021-04-30 北京三快在线科技有限公司 一种仿真测试的方法及装置
CN112945573A (zh) * 2021-02-02 2021-06-11 上汽通用汽车有限公司 驾驶机器人的驾驶操控方法、驾驶质量评估方法、电子设备
CN112882928B (zh) * 2021-02-02 2023-03-31 中国汽车技术研究中心有限公司 一种汽车智能座舱触控屏幕自动化测试方法及系统
CN113420952A (zh) * 2021-05-17 2021-09-21 同济大学 一种基于模拟驾驶的汽车人机交互测试与评估系统
CN113763926B (zh) * 2021-09-17 2024-03-15 中国第一汽车股份有限公司 一种整车语音交互性能测试系统
CN113771059A (zh) * 2021-09-26 2021-12-10 上海市格致中学 一种远程驾驶机器人
CN113900960A (zh) * 2021-12-02 2022-01-07 中汽研软件测评(天津)有限公司 智能车机机械臂测试平台系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19949705A1 (de) * 1999-10-15 2001-05-23 Bosch Gmbh Robert Verfahren und Einrichtung zum Prüfen der Bremsanlage eines Fahrzeuges
KR20100128734A (ko) * 2009-05-29 2010-12-08 교통안전공단 차량시뮬레이터를 이용한 안전운전교육평가시스템 및 방법
CN113139269A (zh) * 2020-01-20 2021-07-20 斑马智行网络(香港)有限公司 车机仿真测试方法、装置、设备和介质
CN112506170A (zh) * 2020-11-20 2021-03-16 北京赛目科技有限公司 一种基于驾驶员模型的测试方法及装置

Also Published As

Publication number Publication date
CN114434466A (zh) 2022-05-06

Similar Documents

Publication Publication Date Title
CN104755308B (zh) 具有手势识别的机动车操作接口
CN107844194A (zh) 基于vr技术的培训方法、装置及计算机可读存储介质
JP4921550B2 (ja) ゲームプレイ中にコンピュータ生成アバターに感情的特徴を与える方法
EP2378395B1 (en) Gesture cataloguing and recognition
US10086282B2 (en) Tracking device for use in obtaining information for controlling game program execution
US8819596B2 (en) Gesture control system
US8417384B2 (en) Information processing system, robot apparatus, and control method therefor
CN107784892A (zh) 一种基于虚拟现实技术的驾考培训方法及设备
JP5116679B2 (ja) 強度のコンピュータ画像および音声処理、ならびにコンピュータプログラムとインタフェースするための入力装置
CN114434466B (zh) 一种汽车智能驾舱性能评测仿真机器人
CN104656877A (zh) 基于手势和语音识别控制的人机交互方法及其设备和应用
CN106327946A (zh) 一种用于驾驶训练的虚拟现实一体机
CN108334871A (zh) 基于智能座舱平台的平视显示设备的交互方法及系统
US10810899B1 (en) Virtual instruction tool
CN114797085A (zh) 游戏控制方法及装置、游戏终端及存储介质
CN109968979A (zh) 车载投射处理方法、装置、车载设备及存储介质
CN108995590A (zh) 一种人车互动方法、系统及装置
JP5478205B2 (ja) ゲーム装置、ゲームプログラム、ゲームシステムおよびゲーム制御方法
CN106373568A (zh) 智能车载单元控制方法和装置
US20200082590A1 (en) Vehicle and control method thereof
CN207337401U (zh) 一种汽车座舱人机交互评估系统
CN115793852A (zh) 基于座舱区域获取操作指示的方法、显示方法及相关设备
CN110262662A (zh) 一种智能人机交互方法
KR102155103B1 (ko) 가상 환경에서 한글 문자를 입력할 수 있는 시스템 및 방법
CN114939272B (zh) 一种基于hud的车载互动游戏方法与系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant