CN105938657B - 一种无人驾驶车辆的听觉感知与智能决策系统 - Google Patents

一种无人驾驶车辆的听觉感知与智能决策系统 Download PDF

Info

Publication number
CN105938657B
CN105938657B CN201610483068.9A CN201610483068A CN105938657B CN 105938657 B CN105938657 B CN 105938657B CN 201610483068 A CN201610483068 A CN 201610483068A CN 105938657 B CN105938657 B CN 105938657B
Authority
CN
China
Prior art keywords
module
information
sound
automatic driving
driving vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610483068.9A
Other languages
English (en)
Other versions
CN105938657A (zh
Inventor
付云飞
胡倩
段珏媛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changzhou Jiamei Technology Co Ltd
Original Assignee
Changzhou Jiamei Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changzhou Jiamei Technology Co Ltd filed Critical Changzhou Jiamei Technology Co Ltd
Priority to CN201610483068.9A priority Critical patent/CN105938657B/zh
Publication of CN105938657A publication Critical patent/CN105938657A/zh
Application granted granted Critical
Publication of CN105938657B publication Critical patent/CN105938657B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种无人驾驶车辆的听觉感知与智能决策系统。该系统包括听觉感知系统和智能决策系统两部分,其中听觉感知系统包括声源定位系统和声音识别系统。通过声源定位系统定位发声源的位置和相对方位并将结果传送到声音识别系统和智能决策系统;通过声音识别系统对声源定位信息进行分类识别,并将结果传送到智能决策系统;智能决策系统的信息采集模块接收声源定位系统和声音识别系统传送的声音信息,通过信息处理和决策模块分析处理,计算出无人驾驶车辆的变道、避让方案,控制执行模块控制无人驾驶车辆的行为并做出有效的响应。

Description

一种无人驾驶车辆的听觉感知与智能决策系统
相关申请的交叉引用
本申请涉及2016年4月27日提交的申请号为201610269358.3的“一种基于云端数据库的无人驾驶车辆导航行车方法”,该申请提出的车辆定位系统等内容在此引用作为参考;
本申请涉及2015年7月3日提交的申请号为201510381349.9的“一种无人驾驶汽车的自主变道决策系统”,该申请提出的变道决策等内容在此引用作为参考;
本申请涉及2015年8月19日提交的申请号为201510511141.4的“一种无人驾驶汽车紧急避让的系统和方法”,该申请提出的紧急避让的系统和方法等内容在此引用作为参考。
技术领域
本发明涉及车辆智能系统领域,具体涉及一种无人驾驶车辆的听觉感知与智能决策系统。
背景技术
对于无人驾驶车辆技术的不断深入研究,听觉作为重要的信息获取手段,能够让无人驾驶车辆进一步提高对外部环境的感知能力,获取更多的外部信息,对实时路况以及驾驶情况做出更加及时有效的判断。
目前,针对无人驾驶车辆的研究,大部分信息采集都是由视觉导航获得,通过听觉获取信息的能力相对滞后,有的无人驾驶车辆甚至不具备听觉获取信息的能力,相当于“聋子”,然而在现实的行车环境中有许多声音(如喇叭声、警笛声)携带重要信息,需要无人驾驶车辆有所感知甚至做出响应。行车环境中声音所包含的重要信息,无法只通过视觉导航获得,需要无人驾驶车辆的听觉系统发挥作用。
发明内容
本发明提出了一种无人驾驶车辆的听觉感知与智能决策系统,该系统包括听觉感知系统和智能决策系统两部分,其中听觉感知系统包括声源定位系统和声音识别系统。
声源定位系统采用基于麦克风阵列的定位方法,其系统装置包括声源采集模块、声源提取模块、声源定位模块和声源输出模块,无人驾驶车辆周围道路的声音信息作为声源采集模块的输入端,声源采集模块的输出端连接声源提取模块的输入端,声源提取模块输出端连接声源定位模块的输入端,声源定位模块的输出端与声源输出模块的输入端连接,声源输出模块的输出端连接声音识别系统和智能决策系统,以上连接方式均为有线连接。
声源定位系统通过声源采集模块采集无人驾驶车辆周围的声音,并将声音信息传送到声源提取模块;声源提取模块接收采集到的声音信息,将干扰信息滤掉,并将处理后的声音信息传送到声源定位模块;声源定位模块定位发声源的位置和相对方位,并将发声源的定位信息传送到声源输出模块;声源输出模块将发声源的定位信息传送到声音识别系统和智能决策系统。
声源定位系统的声源采集模块包括至少四个麦克风组成的阵列,安装在无人驾驶车辆车体上,用于接收无人驾驶车辆周围行车环境中的声音信号。
声音识别系统包括:音频识别系统和语音识别系统。
音频识别系统主要识别车辆的鸣笛声,包括普通汽车的喇叭声和特殊车辆的警笛声,其中发出警笛声的车辆包括警车、消防车和救护车。音频识别系统采用基于基频拟合的算法识别,其系统包括特征提取模块、索引库、搜索与模糊匹配以及识别结果。音频识别系统中的索引库主要包括不同车辆的鸣笛基频变化规律。
语音识别系统主要识别特殊的语音指令,例如交警对车辆做出的语音指令。语音识别系统采用隐马尔可夫模型算法,其系统包括特征提取模块、模式匹配、参考模式库以及识别结果。语音识别系统中的参考模式库主要包括常用的特殊语音指令,例如:靠边停车、例行检查等。
智能决策系统包括信息采集模块、信息处理和决策模块、控制执行模块和本车信息反馈模块。
信息采集模块主要通过摄像机和雷达等设备采集无人驾驶车辆行车环境的路况信息和道路信息,将采集到的信息进行融合并发送到信息处理和决策模块;信息处理和决策模块将信息采集模块和本车信息反馈模块发送的本车行驶状态信息进行分析处理,计算出无人驾驶车辆的变道、避让等决策方案,然后将决策方案发送到控制执行模块;控制执行模块根据信息处理和决策模块传输的决策方案,通过控制器改变本车的速度和转向角,完成变道、避让等动作;本车信息反馈模块是将测得的转向角度和速度反馈回信息处理和决策模块,以便实时监测本车的运行状态。
信息采集模块除了采集无人驾驶车辆周围的路况信息和道路信息外,还接收声源定位系统的定位信息和声音识系统的识别信息,当声音类型为特殊语音指令时,信息采集模块的摄像头可以通过采集发声源的图像信息,判断发声源的人的身份是否是警察,是警察则应执行该特殊语音指令。
无人驾驶车辆通过听觉感知与智能决策系统感知并收集无人驾驶车辆周围行车环境的声音信息,将收集的声音信息发送到智能决策系统,通过智能决策系统控制无人驾驶车辆的行驶状态。
本发明涉及的一种无人驾驶车辆的听觉感知与智能决策系统能够使无人驾驶车辆在行驶过程中掌握本车附近及周边道路的声学环境信息,使无人驾驶车辆能够对更多的信息源进行处理。
附图说明
图1无人驾驶车辆听觉感知与智能决策系统图
图2声源定位系统图
图3声音识别系统图
图4不同车辆鸣笛基频变化规律图
图5智能决策系统图
图6无人驾驶车辆后方有消防车图
图7无人驾驶车辆后方有车辆鸣笛图
图8无人驾驶车辆听到特殊指令图
具体实施方式
本发明涉及一种无人驾驶车辆的听觉感知与智能决策系统1;该系统包括听觉感知系统2和智能决策系统3,其中听觉感知系统2包括声源定位系统4和声音识别系统5,如图1所示。无人驾驶车辆通过听觉感知与智能决策系统1感知无人驾驶车辆周围行车环境的声音信息并做出相应响应。
无人驾驶车辆在行驶过程中通过声源定位系统4实时感知车体周围以及周边道路的声学环境,并对发声源进行定位,将定位信息传送到声音识别系统5和智能决策系统3;声音识别系统5通过音频识别系统11和语音识别系统16识别发声源的类型,并将识别结果传送到智能决策系统3;智能决策系统3中的信息采集模块21接收声源定位系统4发送的声源定位信息和声音识别系统5发送的声音识别信息,以及信息采集模块21通过摄像机和雷达等设备采集的无人驾驶车辆行车环境中的路况信息和道路信息,并将采集和接收的信息进行信息融合发送到信息处理和决策模块23;信息处理和决策模块23将信息采集模块21和本车信息反馈模块22发送的无人驾驶车辆行驶状态信息进行分析处理,计算出无人驾驶车辆的变道、避让等决策方案,然后将决策方案输出到控制执行模块24;控制执行模块24根据信息处理和决策模块23传输的决策方案,通过控制器改变本车的速度和转向角,完成变道、避让等动作;本车信息反馈模块22是将测得的转向角度和速度反馈回信息处理和决策模块23,以便实时监测无人驾驶车辆的运行状态。
一、声源定位系统
无人驾驶车辆车体周围以及周边道路声学环境的信息可以通过声源定位系统4的定位获取,并将定位信息发送到声音识别系统5和智能决策系统3,通过智能决策系统3对声音信息的分析处理,计算出无人驾驶车辆的变道、避让等决策方案,并使无人驾驶车辆做出相应的方位反应(如避让声源方向的车辆等)。
声源定位系统4采用基于麦克风阵列定位的方法,其系统装置包括声源采集模块6、声源提取模块7、声源定位模块8和声源输出模块9,如图2所示。无人驾驶车辆周围的声音作为声源采集模块6的输入端,声源采集模块6的输出端连接声源提取模块7的输入端,声源提取模块7输出端连接声源定位模块8的输入端,声源定位模块8的输出端与声源输出模块9的输入端连接,声源输出模块9的输出端连接声音识别系统5和智能决策系统3,以上连接方式均为有线连接。声源定位系统4的声源采集模块6包括至少四个麦克风组成的阵列,安装在无人驾驶车辆车体上,用于接收周围行车环境中的声音信号。
声源定位系统4通过声源采集模块6采集无人驾驶车辆周围的声音,并将声音信息传送到声源提取模块7;声源提取模块7接收采集到的声音信息,将干扰信息滤掉,并将处理后的声音信息传送到声源定位模块8;声源定位模块8定位发声源的位置和相对方位,并将发声源的定位信息传送到声源输出模块9;声源输出模块9将发声源的位置信息传送到声音识别系统5和智能决策系统3。
二、声音识别系统
在现实行车环境中,车辆周围的声音信息极为丰富,对于无人驾驶车辆的声音识别系统5,则需要识别具有特殊含义的声音信息,无人驾驶车辆主要识别的声音信息分为两类:车辆发出的鸣笛信息和人发出的特殊语音信息。
声音识别系统5包括:音频识别系统11和语音识别系统16,如图3所示。
音频识别系统11主要识别车辆的鸣笛声,包括普通汽车的喇叭声和特殊车辆的警笛声,其中发出警笛声的车辆有警车、消防车和救护车,可以根据不同车辆鸣笛基频变化规律的不同来区分。音频识别系统11采用基于基频拟合的算法识别,其系统包括:特征提取模块12、索引库13、搜索与模式匹配14以及识别结果15。音频识别系统11中的索引库13主要包括不同车辆鸣笛基频变化规律,如图4所示。
语音识别系统16主要识别特殊的语音指令,例如交警对无人驾驶车辆做出的语音指令。语音识别系统16采用隐马尔可夫模型算法,其系统包括:特征提取模块17、参考模式库18、模式匹配19以及识别结果20。语音识别系统16中的参考模式库18主要包括常用的特殊语音指令,例如:靠边停车、前方危险等。
声音识别系统5通过语音识别系统16识别出声音信息为特殊语音指令,并将识别结果发送到智能决策系统3的信息采集模块21,信息采集模块21通过摄像头采集发声源的图像信息,识别发出特殊语音指令的人的身份信息,如果是警察发出的指令则应执行。
具体识别方式与步骤:
步骤1、声源定位系统4采集并定位的声音中包含了噪音、电流干扰等信号,声音识别系统5不能直接提取特征,需要进行前期预处理。前期预处理模块10包括预滤波、采样和量化、分针、加窗、预加重、端点检测;
步骤2、对经过预处理的声音数据进行特征参数提取;
步骤3、将提取出的特征参数与索引库13(参考模式库19)进行搜索对比匹配;
步骤4、得出结果,并将结果传送到智能决策系统3。
语音识别系统16是将声源定位系统4传送的定位信息作为语音信号,经过预处理提取特征参数,对特征参数进行处理后,为每个词条得到一个模板,保存为模板库,在识别阶段,语音信号经过相同的通道得到语音参数,生成测试模板,与参考模板逐一进行比较,获得最佳匹配的参考模板作为识别结果。
三、智能决策系统
无人驾驶车辆周边行车环境中包含了丰富的声音信息,通过声源定位系统4可以定位发声源的位置和相对方位,通过声音识别系统5可以识别发声源的声音类型,将声源定位信息和声音类型信息传送到智能决策系统3,通过分析、判断接收的声音信息,控制无人驾驶车辆的行为。
智能决策系统3包括:信息采集模块21、本车信息反馈模块22、信息处理和决策模块23和控制执行模块24,如图5所示。
信息采集模块21主要通过摄像机和雷达等设备采集无人驾驶车辆行车环境的路况信息和道路信息,将采集到的信息进行融合并发送到信息处理和决策模块23;信息处理和决策模块23将信息采集模块21和本车信息反馈模块22发送的本车行驶状态信息进行分析处理,计算出无人驾驶车辆的变道、避让等决策方案,然后将决策方案发送到控制执行模块24;控制执行模块24根据信息处理和决策模块23传输的决策方案,通过控制器改变本车的速度和转向角,完成变道、避让等动作;本车信息反馈模块22是将测得的转向角度和速度反馈回信息处理和决策模块23,以便实时监测本车的运行状态。
信息采集模块21除了采集无人驾驶车辆周围的路况信息和道路信息外,还接收声源定位系统4的定位信息和声音识系统5的识别信息,当声音类型为特殊语音指令时,信息采集模块21的摄像头可以通过采集发声源的图像信息,判断发声源的人的身份是否是警察,是警察则应执行该特殊语音指令。
《中华人民共和国道路交通安全法》第53条规定,救护车、警车、消防车、工程救险车在执行紧急任务时,拥有道路优先通行权。
当无人驾驶车辆检测到警笛声时,根据声源定位系统4,对鸣响警笛的车辆进行定位,当鸣响警笛的车辆在无人驾驶车辆的同车道后方,则无人驾驶车辆观察相邻车道周围路况与道路信息,选择向具有合适避让空间的车道变道;当无人驾驶车辆与鸣响警笛的车辆不在同一车道,则无人驾驶车辆避免变道、超车等行为;当无人驾驶车辆行驶的道路没有车道线,则无人驾驶车辆靠右行驶让出车道并适当降低车速,必要时可停靠在路边让出车道,让鸣响警笛的车辆先行通过。
为使本发明的目的、技术方案和优点更加清楚明白,将结合具体实施例,并参照附图,对本发明进一步详细说明。
具体实例:无人驾驶车辆在行驶过程中遇到三种情况。
1、无人驾驶车辆行驶过程中遇到消防车
无人驾驶车辆在双向六车道上行驶,同车道后方有一辆鸣响警笛的消防车。无人驾驶车辆的听觉感知系统2感知无人驾驶车辆周围声音,通过声源定位系统4定位发声源来自车体后方,并将定位结果发送到智能决策系统3,由声音识别系统5识别声源发出的声音类型为消防车警笛声,并将识别结果15传送至智能决策系统3,智能决策系统3根据接收的声音信息做出决策,控制无人驾驶车辆做出响应。
当无人驾驶车辆检测到后方有鸣响警笛的车辆时,智能决策系统3中的信息采集模块21将采集的信息(声音信息、路况信息、道路信息)进行融合并发送到信息处理和决策模块23,通过分析、判断无人驾驶车辆是否具备变道条件并计算出决策方案,信息处理和决策模块23将决策方案传送到控制执行模块24,如果变道条件满足,控制执行模块24控制无人驾驶车辆向具有合适避让空间的车道变道,并通过本车信息反馈模块22将无人驾驶车辆的运行状态反馈回信息处理和决策模块23。
(1)当无人驾驶车辆与消防车同在最右侧车道,无人驾驶车辆在检测到后方有鸣响警笛的消防车时,无人驾驶车辆应靠边停车,等待鸣响警笛的消防车驶离后方可重新行驶,并且不能近距离尾随。
(2)当无人驾驶车辆与消防车同在中间车道,无人驾驶车辆检测到后方有鸣响警笛的消防车时,观察相邻车道周围路况与道路信息,选择向具有合适避让空间的车道变道,如图6所示。
(3)当无人驾驶车辆与消防车同在最左侧车道,无人驾驶车辆在检测到后方有鸣响警笛的消防车时,观察相邻右侧车道周围路况与道路信息,当相邻右侧车道具有可变道条件时,无人驾驶车辆向相邻右侧车道变道,给鸣响警笛的消防车让出车道。
2、无人驾驶车辆行驶过程中遇到后方车辆鸣笛
无人驾驶车辆在双向四车道上行驶,同车道后方有一辆汽车鸣笛,无人驾驶车辆的听觉感知系统2感知车辆周围外界声音,通过声源定位系统4定位发声源来自车体后方,并将定位结果发送到智能决策系统3,由声音识别系统5识别声源发出的声音类型为汽车鸣笛声,并将识别结果15传送至智能决策系统3,智能决策系统3根据接收的声音信息做出决策,控制无人驾驶车辆做出响应。
当无人驾驶车辆检测到后方有鸣笛车辆时,智能决策系统3中的信息采集模块21将采集的信息(声音信息、路况信息、道路信息)进行融合并发送到信息处理和决策模块23,通过分析、判断无人驾驶车辆是否具备变道条件并计算出决策方案,信息处理和决策模块23将决策方案传送到控制执行模块24,如果变道条件满足,控制执行模块24控制无人驾驶车辆向具有合适避让空间的车道变道,并通过本车信息反馈模块22将无人驾驶车辆的运行状态反馈回信息处理和决策模块23。
3、无人驾驶车辆听到靠边停车指令
在现实行车环境中有许多声音,无人驾驶车辆通过声音识别系统5的音频识别系统11可以分辨出特殊车辆的警笛声和车辆的鸣笛声,而对于特殊的语音指令信息需要通过语音识别系统16来识别。
当无人驾驶车辆在双向六车道上行驶,右侧非机动车道上有交警做出“靠边停车”的手势,如图6所示,无人驾驶车辆智能决策系统中的信息采集模块通过摄像头捕捉到交警做出的手势动作,并将信息发送到信息处理和决策模块23,信息处理和决策模块23通过分析、判断,计算出无人驾驶车辆靠边停车的决策方案,并将决策方案传送到控制执行模块24,控制执行模块24控制无人驾驶车辆靠边停车。停车后,无人驾驶车辆听觉感知系统2的语音识别系统16识别交警发出特殊语音指令(例如:停车检查等),并将识别结果20发送到智能决策系统3,智能决策系统3根据接收到声音信息做出决策,控制无人驾驶车辆做出响应。
以上所述的具体实施例,对本发明的目的、技术方案进行了进一步详细说明,应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进,均应包含在本发明的保护范围之内。

Claims (4)

1.一种无人驾驶车辆的听觉感知与智能决策系统,其特征在于,该系统包括听觉感知系统和智能决策系统两部分;所述的听觉感知系统包括声源定位系统和声音识别系统;
所述的智能决策系统包括信息采集模块、信息处理和决策模块、控制执行模块和本车信息反馈模块;
信息采集模块主要通过摄像头和雷达采集无人驾驶车辆行车环境的路况信息、道路信息,将采集到的信息进行融合并发送到信息处理和决策模块;
信息处理和决策模块将信息采集模块和本车信息反馈模块发送的本车行驶状态信息进行分析处理,计算出无人驾驶车辆变道和避让的决策方案,然后将决策方案发送到控制执行模块;
控制执行模块根据信息处理和决策模块传输的决策方案,通过控制器改变本车的速度和转向角,完成变道和避让;
本车信息反馈模块是将测得的转向角度和速度反馈回信息处理和决策模块,以便实时监测本车的运行状态;
所述的信息采集模块、信息处理和决策模块、控制执行模块、本车信息反馈模块的连接方式均为有线连接;
所述的信息采集模块接收声音识别系统的识别信息,当声音类型为特殊语音指令时,信息采集模块的摄像头通过采集发声源的图像信息,判断发声源的人的身份是否是警察,是警察则应执行该特殊语音指令。
2.如权利要求1所述的一种无人驾驶车辆的听觉感知与智能决策系统,其特征在于,所述的声源定位系统采用基于麦克风阵列的定位方法,声源定位系统装置包括声源采集模块、声源提取模块、声源定位模块和声源输出模块;
无人驾驶车辆周围道路的声音信息作为声源采集模块的输入端,声源采集模块的输出端连接声源提取模块的输入端,声源提取模块输出端连接声源定位模块的输入端,声源定位模块的输出端与声源输出模块的输入端连接,声源输出模块的输出端连接声音识别系统和智能决策系统,以上连接方式均为有线连接;
声源定位系统通过声源采集模块采集无人驾驶车辆周围的声音,并将声音信息传送到声源提取模块;声源提取模块接收采集到的声音信息,将干扰信息滤掉,并将处理后的声音信息传送到声源定位模块;声源定位模块定位发声源的位置和相对方位,并将发声源的定位信息传送到声源输出模块;声源输出模块将发声源的定位信息传送到声音识别系统和智能决策系统;
声源定位系统的声源采集模块包括至少四个麦克风组成的阵列,安装在无人驾驶车辆车体上,用于接收无人驾驶车辆周围行车环境中的声音信号。
3.如权利要求1所述的一种无人驾驶车辆的听觉感知与智能决策系统,其特征在于,所述的声音识别系统包括:音频识别系统和语音识别系统;
音频识别系统主要识别车辆的鸣笛声,包括普通汽车的喇叭声和特殊车辆的警笛声,其中发出警笛声的车辆有警车、消防车和救护车;
音频识别系统采用基于基频拟合的算法识别,音频识别系统包括:特征提取模块、索引库、搜索与模糊匹配以及识别结果;音频识别系统中的索引库主要包括不同车辆的鸣笛基频变化规律;
语音识别系统主要识别特殊的语音指令;
语音识别系统采用隐马尔可夫模型算法,语音识别系统包括特征提取模块、参考模式库、模式匹配以及识别结果;语音识别系统中的参考模式库主要包括常用的特殊语音指令。
4.如权利要求1所述的一种无人驾驶车辆的听觉感知与智能决策系统,其特征在于,所述的信息采集模块除了采集无人驾驶车辆行车环境的路况信息和道路信息外,还接收声源定位系统的定位信息和声音识系统的识别信息。
CN201610483068.9A 2016-06-27 2016-06-27 一种无人驾驶车辆的听觉感知与智能决策系统 Active CN105938657B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610483068.9A CN105938657B (zh) 2016-06-27 2016-06-27 一种无人驾驶车辆的听觉感知与智能决策系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610483068.9A CN105938657B (zh) 2016-06-27 2016-06-27 一种无人驾驶车辆的听觉感知与智能决策系统

Publications (2)

Publication Number Publication Date
CN105938657A CN105938657A (zh) 2016-09-14
CN105938657B true CN105938657B (zh) 2018-06-26

Family

ID=56873331

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610483068.9A Active CN105938657B (zh) 2016-06-27 2016-06-27 一种无人驾驶车辆的听觉感知与智能决策系统

Country Status (1)

Country Link
CN (1) CN105938657B (zh)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180137756A1 (en) * 2016-11-17 2018-05-17 Ford Global Technologies, Llc Detecting and responding to emergency vehicles in a roadway
CN106504764A (zh) * 2016-11-18 2017-03-15 苏州三星电子电脑有限公司 音频预警方法和音频预警装置
CN108732539B (zh) * 2017-04-24 2021-11-16 腾讯科技(深圳)有限公司 一种鸣笛车辆的标记方法及装置
US10319228B2 (en) * 2017-06-27 2019-06-11 Waymo Llc Detecting and responding to sirens
CN107678427A (zh) * 2017-09-25 2018-02-09 驭势科技(北京)有限公司 一种用于控制车辆行驶的方法与设备
JP6766086B2 (ja) 2017-09-28 2020-10-07 キヤノン株式会社 撮像装置およびその制御方法
CN108198568B (zh) * 2017-12-26 2020-10-16 太原理工大学 一种多声源定位的方法及系统
JP2019186630A (ja) 2018-04-03 2019-10-24 キヤノン株式会社 撮像装置及びその制御方法及びプログラム
CN108710368B (zh) * 2018-05-23 2021-07-23 北京新能源汽车股份有限公司 一种无人驾驶系统及电动汽车
CN109061655B (zh) * 2018-06-01 2022-09-06 湖南工业大学 一种智能驾驶车辆全声频感知系统及其智能控制方法
CN110550037B (zh) * 2018-06-01 2022-11-11 奥迪股份公司 用于车辆的驾驶辅助系统及驾驶辅助系统方法
CN109186620A (zh) * 2018-08-14 2019-01-11 奇酷互联网络科技(深圳)有限公司 一种智能导航方法、导航终端及存储介质
US10976748B2 (en) * 2018-08-22 2021-04-13 Waymo Llc Detecting and responding to sounds for autonomous vehicles
US10685563B2 (en) * 2018-11-08 2020-06-16 Toyota Motor North America, Inc. Apparatus, systems, and methods for detecting, alerting, and responding to an emergency vehicle
CN110379191B (zh) * 2018-11-08 2020-12-22 北京京东尚科信息技术有限公司 一种为无人设备推送道路信息的方法和装置
CN109460007B (zh) * 2018-11-28 2021-05-25 科力远混合动力技术有限公司 混合动力汽车异响诊断及驾驶决策方法
CN109552328B (zh) * 2018-12-26 2020-12-15 广州小鹏汽车科技有限公司 一种自动避让特种车辆的控制方法及车载系统
CN109920404A (zh) * 2019-01-31 2019-06-21 安徽智佳信息科技有限公司 拥有智能感知作用的自助售货广告管理系统的信息采集装置及采集方法
CN109849784A (zh) * 2019-02-27 2019-06-07 江苏大学 一种基于行车环境声音识别和定位的辅助驾驶系统
CN110155064B (zh) * 2019-04-22 2020-12-18 江苏大学 基于声音信号的特种车辆行驶车道识别与自车变道决策系统及方法
CN110599803A (zh) * 2019-09-19 2019-12-20 肖凯 车辆间信息传输预警系统及方法
CN110718093B (zh) * 2019-10-16 2021-11-16 联想(北京)有限公司 针对车辆鸣笛的处理方法和第一车辆
CN111311948B (zh) * 2020-02-19 2021-07-13 广州小马智行科技有限公司 自动驾驶车辆的控制方法和装置、存储介质和运载工具
CN111572540A (zh) * 2020-04-09 2020-08-25 大连理工大学 一种检测视野外是否来车的安全辅助驾驶系统、车辆
CN111409644A (zh) * 2020-04-10 2020-07-14 新石器慧通(北京)科技有限公司 自动驾驶车辆及其声音反馈调节方法
KR20210145881A (ko) * 2020-05-25 2021-12-03 현대자동차주식회사 자율주행차량의 비상정차 제어 방법
CN112060089B (zh) * 2020-08-31 2022-03-18 深圳优地科技有限公司 一种特种车辆的避让方法、装置、机器人及存储介质
CN111824159A (zh) * 2020-09-21 2020-10-27 李斯特技术中心(上海)有限公司 车辆控制方法、装置、车辆和计算机可读存储介质
CN112339760A (zh) * 2020-11-06 2021-02-09 广州小鹏汽车科技有限公司 车辆行驶控制方法、控制装置、车辆和可读存储介质
CN113002420A (zh) * 2021-04-21 2021-06-22 谭宗才 一种无人车喇叭智能系统
CN113256998A (zh) * 2021-05-18 2021-08-13 哈尔滨翼成科技有限公司 一种特种车辆及其工作状态识别方法及设备
CN113192352B (zh) * 2021-06-03 2023-07-14 山东交通学院 一种接收交管人员指令的自动驾驶方法及系统
CN114202948A (zh) * 2021-12-08 2022-03-18 北京理工大学 一种无人车声图识别定位变道方法、系统、设备及终端
CN115179930B (zh) * 2022-07-15 2023-10-17 小米汽车科技有限公司 车辆控制方法、装置、车辆及可读存储介质
CN116558850B (zh) * 2023-05-30 2023-11-24 北京速度时空信息有限公司 一种自动驾驶测试系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102509545A (zh) * 2011-09-21 2012-06-20 哈尔滨工业大学 一种实时声学事件检测系统及检测方法
US9154893B1 (en) * 2011-12-28 2015-10-06 Intelligent Technologies International, Inc. Sound sensing techniques
CN102541061B (zh) * 2012-02-07 2014-02-19 清华大学 基于视听觉信息的缩微智能车
CN103065627B (zh) * 2012-12-17 2015-07-29 中南大学 基于dtw与hmm证据融合的特种车鸣笛声识别方法
CN103996312B (zh) * 2014-05-23 2015-12-09 北京理工大学 具有社会行为交互的无人驾驶汽车控制系统
CN104267721A (zh) * 2014-08-29 2015-01-07 陈业军 一种智能汽车的无人驾驶系统
CN204196777U (zh) * 2014-10-30 2015-03-11 长城汽车股份有限公司 驾驶路况识别控制系统及车辆
CN104916289A (zh) * 2015-06-12 2015-09-16 哈尔滨工业大学 行车噪声环境下快速声学事件的检测方法

Also Published As

Publication number Publication date
CN105938657A (zh) 2016-09-14

Similar Documents

Publication Publication Date Title
CN105938657B (zh) 一种无人驾驶车辆的听觉感知与智能决策系统
CN107608388B (zh) 自主警车
EP3757875A1 (en) Obstacle avoidance method and device used for driverless vehicle
US11468574B2 (en) Image processing apparatus and image processing method
KR102205240B1 (ko) 예상치 못한 임펄스 변화 충돌 검출기
CN112180921B (zh) 自动驾驶算法训练系统及方法
CN109964264A (zh) 用于机动车的驾驶员辅助系统
US20200234191A1 (en) Travel model generation system, vehicle in travel model generation system, and processing method
JP4935589B2 (ja) 状態判定装置およびプログラム
US11282299B2 (en) Method for determining a driving instruction
CN106125731A (zh) 一种基于后方车辆行驶意图识别的无人驾驶车辆运动控制系统及方法
Lethaus et al. Using pattern recognition to predict driver intent
US11200795B2 (en) Information processing apparatus, information processing method, moving object, and vehicle
Alluhaibi et al. Driver behavior detection techniques: A survey
KR102184598B1 (ko) 자율주행차량의 운전자 응급상황발생판단에 기반한 주행예측 및 안전주행시스템
CN110371018A (zh) 使用其他车辆车灯的信息改善车辆行为
WO2021090897A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
US20200082187A1 (en) Method, Apparatus and Device for Identifying Passenger State in Unmanned Vehicle, and Storage Medium
CN114187676A (zh) 一种巡检方法、装置、设备、系统和存储介质
KR20200092462A (ko) 주행상황 정보융합 기반 주행경로 가변화 방법 및 시스템
KR20160131196A (ko) 장애물 감지 장치
WO2022024803A1 (ja) 学習モデルの生成方法、情報処理装置、情報処理システム
CN109131356B (zh) 人机混合增强智能驾驶系统及电动汽车
CN112351154A (zh) 无人驾驶汽车路况识别系统
CN111572540A (zh) 一种检测视野外是否来车的安全辅助驾驶系统、车辆

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant