CN112420058B - 人车协同系统及其实施流程 - Google Patents

人车协同系统及其实施流程 Download PDF

Info

Publication number
CN112420058B
CN112420058B CN202011479170.4A CN202011479170A CN112420058B CN 112420058 B CN112420058 B CN 112420058B CN 202011479170 A CN202011479170 A CN 202011479170A CN 112420058 B CN112420058 B CN 112420058B
Authority
CN
China
Prior art keywords
data
module
voice interaction
interaction system
planning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011479170.4A
Other languages
English (en)
Other versions
CN112420058A (zh
Inventor
舒方硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202011479170.4A priority Critical patent/CN112420058B/zh
Publication of CN112420058A publication Critical patent/CN112420058A/zh
Application granted granted Critical
Publication of CN112420058B publication Critical patent/CN112420058B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00Speaker identification or verification
    • G10L17/22Interactive procedures; Man-machine interfaces
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096725Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/096805Systems involving transmission of navigation instructions to the vehicle where the transmitted instructions are used to compute a route

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)

Abstract

一种人车协同系统及其实施流程,由感知模块1、规划模块2、执行模块3、介入装置5、语音交互系统4和显示屏6所组成。具体为:感知模块1的输出端分别与规划模块2的输入端、语音交互系统4的输入端电路连接,规划模块2的输出端与执行模块3的输入端电路连接,介入装置5的输出端与语音交互系统4的输入端电路连接,语音交互系统4的输出端分别与显示屏6的输入端、规划模块2的输入端电路连接。所述语音交互系统4实时将所述人车对话数据传给所述规划模块2,所述规划模块2对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块3替换原规划数据予以执行。

Description

人车协同系统及其实施流程
所属技术领域
本发明涉及无人驾驶汽车控制系统,是一种人车协同系统及其实施流程。
技术背景
目前,各国对无人驾驶汽车控制系统的路车协同、车车协同技术做了比较深入的研究和开发,但对人车协同的概念至今都还没有公开资料提及。
公知的无人驾驶汽车控制系统由感知、规划和控制三大基本模块所组成,在无人驾驶汽车行驶过程中出现各种随机情况需要人车协同时,因缺乏人工介入的设置而无法实现人车协同。例如,车辆行驶中乘员突然想起要弯一段路,需要在前方路口左转,而事先规划的路径是直行;再如,车辆行驶中感知交通信号灯没有光亮显示不知怎么处理;又如,车辆在达到路段最高限速的速度行驶时,有乘员感到不适,需要降低车速行驶等等。如此诸多情形下如果没有介入装置供乘员操作,所述问题就不能得到解决,人车就无法协同。达到L5级技术水平的无人驾驶汽车控制系统,不但要车路协同、车车协同,还应该能实时与乘员对话,协作解决随机出现的一些无人驾驶汽车自身不能解决的问题,做到人车协同。
发明内容
本发明所述人车协同的概念是:无人驾驶汽车尤其是无人驾驶乘用汽车,在行驶中随机出现需要人车沟通协调才能解决的问题时,其车上乘员或所述无人驾驶汽车控制系统中的感知模块通过语音交互系统实时发起人车对话,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述人车对话数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
为了实现人车协同,本发明提供一种人车协同系统及其实施流程。
人车协同系统:本发明由感知模块、规划模块、执行模块、介入装置、语音交互系统和显示屏所组成。具体为:所述感知模块的输出端分别与所述规划模块的输入端、语音交互系统的输入端电路连接,所述规划模块的输出端与所述执行模块的输入端电路连接,所述介入装置的输出端与所述语音交互系统的输入端电路连接,所述语音交互系统的输出端分别与所述显示屏的输入端、所述规划模块的输入端电路连接。所述介入装置包括麦克风和介入启动键。所述显示屏上配置有喇叭。按下所述介入启动键,所述麦克风与所述语音交互系统、所述显示屏电接通。所述感知模块向所述语音交互系统发出询问或建议数据时,所述语音交互系统与所述显示屏电接通。
人车协同系统的实施流程:1、自然人通过所述麦克风向所述语音交互系统输入人类语言,发起人车对话。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上。同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。2、配置有本发明的无人驾驶汽车行驶中遇到无法决策或需要其乘员配合的情况时,所述感知模块即向所述语音交互系统发出询问或建议数据,所述语音交互系统实时将所述询问或建议数据通过处理器转变成语音从所述显示屏上的喇叭播出,还实时转变成文字显示于所述显示屏上,从而发起人车对话。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上。同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。所述感知模块发起所述人车对话后,由所述语音交互系统代替所述感知模块与所述自然人实施对话。
实施本发明的有益效果是:及时处理无人驾驶汽车行驶中出现的各种随机问题,消除隐患,促进无人驾驶汽车安全、高效行驶。
附图说明
附图1是本发明的系统及其实施流程示意图。
图中:1、感知模块,2、规划模块,3、执行模块,4、语音交互系统,5、介入装置,6、显示屏。
具体实施方式
实施方式一 配置有本发明的无人驾驶汽车行驶中,车上乘员有情况需要车辆改变预设路径行驶,于是有乘员按下所述介入启动键道:“前方左转”,所述车辆开始缓慢减速的同时所述语音交互系统:“现在本车辆与第一个路口的距离依规已经不允许变更车道,在第二个路口左转行吗”,所述乘员:“可以”,所述语音交互系统:“好的”。本车在第二个路口顺利左转。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
实施方式二 配置有本发明的无人驾驶汽车行驶中需要变更目的地,于是有乘员按下所述介入启动键道:“去一医院”,所述车辆开始缓慢减速的同时所述语音交互系统:“是省一医院还是市一医院”,所述乘员:“市一医院”,所述语音交互系统:“好的”。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
实施方式三 配置有本发明的无人驾驶汽车行驶到路口,感知交通信号灯没有光亮显示,所述感知模块即向所述语音交互系统发出“怎么办”数据,所述语音交互系统实时通过处理器将所述数据转变成语音从所述显示屏上的喇叭播出,还实时转变成文字显示于所述显示屏上。乘员观察了一下车外情况后按下所述介入启动键道:“跟上前车有序通过”,所述语音交互系统:“好的”。本车启动顺利通过所述路口。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
实施方式四 配置有本发明的无人驾驶汽车在狭窄道路上行驶,遇前方道路塌陷无法通过,所述感知模块即向所述语音交互系统发出“怎么办”数据,所述语音交互系统实时通过处理器将所述数据转变成语音从所述显示屏上的喇叭播出,还实时转变成文字显示于所述显示屏上。有乘员按下所述介入启动键道:“调头吧”。所述车辆调头中停下,所述感知模块即向所述语音交互系统发出“道路狭窄,建议所有乘员下车,等调头完毕再上车”数据,所述语音交互系统实时通过处理器将所述数据转变成语音从所述显示屏上的喇叭播出,还实时转变成文字显示于所述显示屏上。所述乘员道:“好的”,大家下车。所述车辆调头完毕停下,大家上车,有乘员按下所述介入启动键道:“开车”。所述语音交互系统:“好的”。本车启动。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
实施方式五 配置有本发明的无人驾驶汽车达到路段最高限速的速度行驶时,有乘员感到不适,需要降低速度行驶,于是按下所述介入启动键道:“慢点、慢点”,所述车辆开始缓慢减速的同时所述语音交互系统:“本路段最高限速是120公里,您需要降到时速多少公里”,所述乘员:“105公里”,所述语音交互系统:“好的。另外告诉您,在本路段,您每说一次慢点,时速就会下降两公里,但最多只能降到规定的最低时速80公里;同样,您每说一次快点,时速就会增加两公里,但最多只能增加到规定的最高时速120公里,请谨记”。当时速降到105公里时,所述语音交互系统便提示:“本路段最高限速是120公里,您已自主降到了105公里”。当所述车辆行驶到最高限速100公里的路段时,所述语音交互系统便提示:“本路段最高限速是100公里,您自主的105公里最高限速已经被强制降到了100公里”。当所述车辆行驶到最高限速110公里的路段时,所述语音交互系统便提示:“本路段最高限速是110公里,现在已恢复到您之前自主的最高限速105公里”。所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给所述规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给所述执行模块替换原规划数据予以执行。
以上是对本发明实施例的具体描述,需要理解的是,本发明并不局限于上述特定实施方式。本技术领域的技术人员可以在本发明的权利要求范围内对其做出各种变形或修改,但仍然落入本发明的保护范围内。

Claims (6)

1.一种人车协同系统,用于无人驾驶汽车,由感知模块、规划模块、执行模块、介入装置、语音交互系统和显示屏所组成,其特征在于:所述感知模块的输出端与所述规划模块的输入端电路连接,所述规划模块的输出端与所述执行模块的输入端电路连接,所述介入装置的输出端与所述语音交互系统的输入端电路连接,所述语音交互系统的输出端分别与所述显示屏的输入端、所述规划模块的输入端电路连接;
所述介入装置,用于无人驾驶汽车行驶过程中,出现各种随机情况需要人车协同时,发起人车对话。
2.一种人车协同系统,用于无人驾驶汽车,由感知模块、规划模块、执行模块、介入装置、语音交互系统和显示屏所组成,其特征在于:所述感知模块的输出端分别与所述规划模块的输入端、所述语音交互系统的输入端电路连接,所述规划模块的输出端与所述执行模块的输入端电路连接,所述语音交互系统的输出端分别与所述显示屏的输入端、所述规划模块的输入端电路连接;
所述感知模块,用于无人驾驶汽车行驶过程中,出现各种随机情况需要人车协同时,向所述语音交互系统发出询问或建议数据,从而发起人车对话。
3.根据权利要求1所述的人车协同系统,其特征在于:所述介入装置包括麦克风和介入启动键。
4.一种人车协同系统的实施方法,用于无人驾驶汽车,其特征在于:无人驾驶汽车行驶过程中,出现各种随机情况,需要人车协同时,自然人通过麦克风向语音交互系统输入人类语言,发起人车对话;所述人车对话实时从显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给执行模块替换原规划数据予以执行。
5.一种人车协同系统的实施方法,用于无人驾驶汽车,其特征在于:无人驾驶汽车行驶过程中,随机出现需要人车沟通协调才能解决的问题时,感知模块向语音交互系统发出询问或建议数据,所述语音交互系统实时将所述询问或建议数据通过处理器转变成语音从显示屏上的喇叭播出,还实时转变成文字显示于所述显示屏上,从而发起人车对话;所述人车对话实时从所述显示屏上的喇叭播出,所述语音交互系统还实时通过处理器将所述人车对话数据转变成文字显示于所述显示屏上;同时,所述语音交互系统实时将所述人车对话数据传给规划模块,所述规划模块对所述数据识别归纳出能修改原规划数据的数据,并使用该数据修改原规划数据,随即将修改后的规划数据传给执行模块替换原规划数据予以执行。
6.根据权利要求5所述的人车协同系统的实施方法,其特征在于:所述感知模块发起所述人车对话后,由所述语音交互系统代替所述感知模块与自然人实施对话。
CN202011479170.4A 2020-12-16 2020-12-16 人车协同系统及其实施流程 Active CN112420058B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011479170.4A CN112420058B (zh) 2020-12-16 2020-12-16 人车协同系统及其实施流程

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011479170.4A CN112420058B (zh) 2020-12-16 2020-12-16 人车协同系统及其实施流程

Publications (2)

Publication Number Publication Date
CN112420058A CN112420058A (zh) 2021-02-26
CN112420058B true CN112420058B (zh) 2024-01-19

Family

ID=74775157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011479170.4A Active CN112420058B (zh) 2020-12-16 2020-12-16 人车协同系统及其实施流程

Country Status (1)

Country Link
CN (1) CN112420058B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016997A (zh) * 2016-01-28 2017-08-04 邓国良 一种智能人车交互系统
CN110366710A (zh) * 2017-02-27 2019-10-22 华为技术有限公司 用于控制自动驾驶车辆操作以确定规划路径的规划系统和方法
WO2020052344A1 (zh) * 2018-09-12 2020-03-19 华为技术有限公司 一种智能驾驶方法及智能驾驶系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016997A (zh) * 2016-01-28 2017-08-04 邓国良 一种智能人车交互系统
CN110366710A (zh) * 2017-02-27 2019-10-22 华为技术有限公司 用于控制自动驾驶车辆操作以确定规划路径的规划系统和方法
WO2020052344A1 (zh) * 2018-09-12 2020-03-19 华为技术有限公司 一种智能驾驶方法及智能驾驶系统

Also Published As

Publication number Publication date
CN112420058A (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
JP7371671B2 (ja) 車両に安全に追い付けるように運転を支援するシステムおよび方法
WO2018058266A1 (zh) 一种基于移动终端的提示方法及系统
EP1853465B1 (de) Verfahren und vorrichtung zur sprachsteuerung eines gerätes oder eines systems in einem kraftfahrzeug
CN111439271A (zh) 基于语音控制的辅助驾驶方法及辅助驾驶设备
CN106898146A (zh) 交通系统、车载终端、可穿戴式终端和交通灯终端
CN107901828B (zh) 通过智能设备协作来实现的被超车提醒的方法和装置
US10053111B2 (en) Method for maintaining active control of an autonomous vehicle
CN103213550B (zh) 一种汽车刹车安全提示控制系统及安全提示控制方法
EP3509906B1 (de) Verfahren zur ansteuerung von massageeinheiten einer in einem sitz angeordneten massagevorrichtung, sitzanordnung für ein oder in einem fahrzeug
KR20190134906A (ko) 사용자의 운전 스타일을 반영한 자율 주행 장치 및 방법
CN117302198A (zh) 驾驶辅助装置以及车辆的控制方法
DE102015210780A1 (de) Verfahren und Steuereinheit zur Kommunikation zwischen einem autonomen Fahrzeug und einem Insassen
KR102118711B1 (ko) 후방차량용 알림시스템 및 방법
CN112420058B (zh) 人车协同系统及其实施流程
CN212579832U (zh) 车辆行驶安全的人机交互系统及车辆
DE102007029862A1 (de) Navigationsvorrichtung und Verfahren zunm Betreiben einer Navigationsvorrichtung
CN110077417A (zh) 一种汽车路牌信息获取提示的方法及系统
DE102015016494B4 (de) Kraftfahrzeug mit Ausgabeeinrichtung und Verfahren zum Ausgeben von Hinweisen
CN105270259B (zh) 一种基于电动助力转向系统的方向盘主动提醒装置
DE102019105588A1 (de) Minimalinvasive Integration von Messagingdiensten in Fahrzeugen
DE102019105590B3 (de) Cross-Platform Messaging in Fahrzeugen
CN111959519B (zh) 一种辅助驾驶功能设置方法、装置、设备及介质
WO2018058263A1 (zh) 一种驾驶方法及系统
US20230099464A1 (en) Systems and methods for transmitting inter-vehicle communications to facilitate traffic flow
WO2019166102A1 (en) Driver attention system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant