CN114599566A - 远程辅助系统、车载装置、远程辅助方法以及远程辅助程序 - Google Patents
远程辅助系统、车载装置、远程辅助方法以及远程辅助程序 Download PDFInfo
- Publication number
- CN114599566A CN114599566A CN202080073441.8A CN202080073441A CN114599566A CN 114599566 A CN114599566 A CN 114599566A CN 202080073441 A CN202080073441 A CN 202080073441A CN 114599566 A CN114599566 A CN 114599566A
- Authority
- CN
- China
- Prior art keywords
- remote assistance
- vehicle
- autonomous vehicle
- operator
- autonomous
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 62
- 238000004891 communication Methods 0.000 claims abstract description 127
- 230000007613 environmental effect Effects 0.000 claims abstract description 30
- 230000008859 change Effects 0.000 claims description 32
- 238000013461 design Methods 0.000 claims description 23
- 230000009471 action Effects 0.000 claims description 10
- 230000005856 abnormality Effects 0.000 claims description 7
- 238000005259 measurement Methods 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 description 52
- 230000006870 function Effects 0.000 description 36
- 238000010586 diagram Methods 0.000 description 22
- 238000012545 processing Methods 0.000 description 22
- 230000015654 memory Effects 0.000 description 15
- 238000010276 construction Methods 0.000 description 6
- 238000005401 electroluminescence Methods 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/005—Handover processes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0098—Details of control systems ensuring comfort, safety or stability not otherwise provided for
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/0022—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2720/00—Output or target parameters relating to overall vehicle dynamics
- B60W2720/10—Longitudinal speed
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明的远程辅助系统(90)具备:获取部(21A),获取管理信息(25B),上述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的自动驾驶辅助中心与自动驾驶车辆之间的通信状态以及在管理对象区域内的自动驾驶车辆能够行驶的多个地点的自动驾驶车辆的周围的环境状态的至少一方;和执行部(21B),基于根据管理信息得到的通信状态以及环境状态的至少一方,对进行针对自动驾驶车辆的远程辅助的操作员执行能够由操作员实施的远程辅助的限制所需的动作。
Description
相关申请的交叉引用
本申请基于在2019年10月22日申请的日本申请号2019-192349号,此处引用其记载内容。
技术领域
本公开涉及远程辅助系统、车载装置、远程辅助方法以及远程辅助程序。
背景技术
例如,在专利文献1中记载了自动驾驶辅助中心与自动驾驶车辆定期通信从而监视自动驾驶车辆的车辆状态的远程监视系统。根据该远程辅助系统,自动驾驶车辆在与自动驾驶辅助中心的通信中断的情况下,自动停止,对自动驾驶辅助中心发送车辆停止信号以及相机影像。在自动驾驶辅助中心,确认相机影像并确认是否可以重新开始自动驾驶。自动驾驶车辆若从自动驾驶辅助中心接收到起步信号,则重新开始自动驾驶。
专利文献1:日本特开2019-87015号公报。
另外,根据自动驾驶车辆的通信状态以及环境状态,有时可实施的远程辅助受到限制。例如,在通信状态不稳定、产生影像的延迟的情况下,难以进行“在十字路口的右转的支持”等那样的时机控制。因此,在这样的情况下,优选限制时机控制。在上述专利文献1所记载的技术中,能够进行自动驾驶车辆的远程辅助。然而,如上述那样,没有考虑根据自动驾驶车辆的通信状态以及环境状态,限制能够实施的远程辅助。
发明内容
本公开的目的在于提供能够根据自动驾驶车辆的通信状态以及环境状态,适当地进行对自动驾驶车辆的远程辅助的远程辅助系统、车载装置、远程辅助方法以及远程辅助程序。
本公开的第一方式所涉及的远程辅助系统具备:获取部,获取管理信息,上述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的上述自动驾驶辅助中心与在上述自动驾驶车辆之间的通信状态以及上述管理对象区域内的上述自动驾驶车辆能够行驶的多个地点的上述自动驾驶车辆的周围的环境状态的至少一方;和执行部,基于根据上述管理信息得到的上述通信状态以及上述环境状态的至少一方,对进行针对上述自动驾驶车辆的远程辅助的操作员执行能够由上述操作员实施的远程辅助的限制所需的动作。
本公开的第二方式所涉及的车载装置是搭载于由第一方式所涉及的远程辅助系统进行远程辅助的自动驾驶车辆的车载装置,具备:接收部,接收上述管理信息;变更部,在基于上述管理信息,预测到本车辆将在与上述自动驾驶辅助中心的通信状态不稳定的位置停车的情况下,将本车辆的停车位置变更为与上述自动驾驶辅助中心的通信状态稳定的位置;以及发送部,从由上述变更部变更后的停车位置发送本车辆的辅助请求。
本公开的第三方式所涉及的远程辅助方法包括:获取管理信息,上述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的上述自动驾驶辅助中心与上述自动驾驶车辆之间的通信状态以及在上述管理对象区域内的上述自动驾驶车辆能够行驶的多个地点的上述自动驾驶车辆的周围的环境状态的至少一方;基于根据上述管理信息得到的上述通信状态以及上述环境状态的至少一方,对进行针对上述自动驾驶车辆的远程辅助的操作员执行能够由上述操作员实施的远程辅助的限制所需的动作。
本公开的第四方式所涉及的远程辅助程序使计算机作为获取部以及执行部发挥功能,上述获取部获取管理信息,上述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点中的上述自动驾驶辅助中心与上述自动驾驶车辆之间的通信状态以及在上述管理对象区域内的上述自动驾驶车辆能够行驶的多个地点的上述自动驾驶车辆的周围的环境状态的至少一方,上述执行部基于根据上述管理信息得到的上述通信状态以及上述环境状态的至少一方,对进行针对上述自动驾驶车辆的远程辅助的操作员执行能够由上述操作员实施的远程辅助的限制所需的动作。
根据公开的技术,具有如下效果:能够根据自动驾驶车辆的通信状态以及环境状态,适当地进行对自动驾驶车辆的远程辅助。
附图说明
参照附图并通过下述的详细的描述,关于本公开的上述目的以及其它的目的、特征、优点变得更加明确。其附图如下述那样。
图1是表示第一实施方式的远程辅助系统的电结构的一个例子的图。
图2是表示第一实施方式的远程辅助系统的功能性结构的一个例子的框图。
图3是表示实施方式的操作员终端的UI画面的一个例子的主视图。
图4是表示实施方式的限制了一部分功能的状态的UI画面的一个例子的主视图。
图5是表示实施方式的测量信息的一个例子的图表。
图6是表示实施方式的操作员管理表的一个例子的图。
图7是表示由第一实施方式的远程辅助程序进行的处理的流程的一个例子的流程图。
图8是表示由第一实施方式的操作员侧控制程序进行的处理的流程的一个例子的流程图。
图9是表示由第一实施方式的车辆侧控制程序进行的处理的流程的一个例子的流程图。
图10是表示第二实施方式的远程辅助系统的功能性结构的一个例子的框图。
图11是用于说明从实施方式的服务器装置对自动驾驶车辆进行行驶的指示的情况下的处理的图。
图12是用于说明从实施方式的服务器装置对自动驾驶车辆进行行驶的指示的情况下的另一处理的图。
图13是用于说明从实施方式的服务器装置对自动驾驶车辆进行行驶的指示的情况下的又一处理的图。
图14是用于说明从实施方式的服务器装置对自动驾驶车辆进行行驶的指示的情况下的又一处理的图。
图15是表示由第二实施方式的远程辅助程序进行的处理的流程的一个例子的流程图。
图16是表示由第二实施方式的车辆侧控制程序进行的处理的流程的一个例子的流程图。
图17是表示第三实施方式的远程辅助系统的功能性结构的一个例子的框图。
图18的(A)是表示实施方式的自动驾驶车辆的变更前的停车位置的图。图18的(B)是表示实施方式的自动驾驶车辆的变更后的停车位置的图。
具体实施方式
以下,参照附图,对用于实施本公开的技术的方式的一个例子进行详细说明。
[第一实施方式]
图1是表示第一实施方式的远程辅助系统90的电结构的一个例子的图。
如图1所示,本实施方式的远程辅助系统90具备搭载于自动驾驶车辆的车载装置10、设置于自动驾驶辅助中心的服务器装置20、设置于调度室的操作员终端30以及现场工作人员可携带的工作人员终端40。此外,调度室可以处于自动驾驶辅助中心内,也可以处在与自动驾驶辅助中心不同的场所。
车载装置10、服务器装置20、操作员终端30以及工作人员终端40经由网络N可通信地连接。在网络N中,作为一个例子,应用因特网、WAN(Wide Area Network:广域网)等。另外,车载装置10以及工作人员终端40分别经由无线通信与网络N连接。服务器装置20以及操作员终端30分别经由有线通信或无线通信与网络N连接。
自动驾驶车辆是在规定的条件下能够不依赖于驾驶车辆的操作而自动行驶的车辆。车载装置10具备基于住所或纬度经度等目的地的信息,生成包括到目的地的行驶路线的行驶计划的功能以及控制本车辆的自动驾驶的功能。车载装置10具备CPU(CentralProcessing Unit:中央处理器)11、存储器12、操作部13、显示部14、存储部15、传感器组16以及通信部17。
CPU11是处理器的一个例子。这里所说的处理器是指广义的处理器,包括通用的处理器(例如,CPU)、专用的处理器(例如,GPU:Graphics Processing Unit、ASIC:Application Specific Integrated Circuit、FPGA:Field Programmable Gate Array、可编程逻辑设备等)。存储器12由ROM(Read Only Memory:只读存储器)、RAM(Random AccessMemory:随机存取存储器)等构成。
在存储部15中例如使用HDD(Hard Disk Drive:硬盘驱动器)、SSD(Solid StateDrive:固态驱动器)、闪存等。在存储部15中存储有用于进行自动驾驶的控制的车辆侧控制程序15A。车辆侧控制程序15A例如也可以预先安装于车载装置10。车辆侧控制程序15A也可以通过存储于非易失性的非过渡性(non-transitory)记录介质,或者经由网络N分发,并适当地安装于车载装置10来实现。此外,作为非易失性的非过渡性记录介质的例子,假定有CD-ROM(Compact Disc Read Only Memory:只读光盘)、光磁盘、HDD、DVD-ROM(DigitalVersatile Disc Read Only Memory:数字多功能光盘只读存储器)、闪存、存储卡等。另外,在存储部15中储存有自动驾驶的行驶计划的生成所需的地图信息。
传感器组16由用于掌握本车辆的周围的状况的各种传感器构成。传感器组16包括拍摄车辆的规定方向的规定范围的多个相机、向车辆外部的规定范围发送探查波的毫米波雷达、至少扫描车辆前方的规定范围的LIDAR(Light Detection and Ranging/LaserImaging Detection and Ranging:激光雷达)。另外,在传感器组16中也可以包括搭载于本车辆的GPS(Global Positioning System:全球定位系统)接收机。通过该GPS接收机,获取本车辆的当前位置以及当前时刻等信息。
操作部13构成为用于接受对车载装置10的操作输入的接口。在显示部14中例如使用液晶显示器(LCD:Liquid Crystal Display)、有机EL(Electro Luminescence:电致发光)显示器等。显示部14也可以一体地具有触摸面板。
通信部17是与因特网、WAN等网络N连接,用于与服务器装置20进行通信的通信接口。
此外,车载装置10与自动驾驶所需的行驶装置(省略图示)连接,通过控制该行驶装置进行自动驾驶。在该行驶装置中,作为一个例子,包括电动动力转向装置、电子控制制动器、电子控制节气门等。
车载装置10控制本车辆的驱动、转向操纵以及制动,以根据本车辆的行驶计划进行自动驾驶。此外,自动驾驶的方法本身存在各种公知的方法,在本实施方式中没有特别限定。
服务器装置20通过与自动驾驶车辆的车载装置10定期通信来监视自动驾驶车辆的车辆状态,在从自动驾驶车辆有辅助请求的情况下,控制为对自动驾驶车辆进行远程辅助。在服务器装置20中,作为一个例子,应用服务器计算机、个人计算机(PC:PersonalComputer)等通用的计算机装置。服务器装置20具备CPU21、存储器22、操作部23、显示部24、存储部25以及通信部26。
CPU21是处理器的一个例子。这里所说的处理器如上述那样是指广义的处理器,包括通用的处理器、专用的处理器。存储器22由ROM、RAM等构成。
在存储部25中例如使用HDD、SSD、闪存等。在存储部25中存储有用于进行自动驾驶车辆的远程辅助的远程辅助程序25A。远程辅助程序25A例如也可以预先安装于服务器装置20。远程辅助程序25A也可以通过存储于非易失性的非过渡性记录介质,或者经由网络N分发,并适当地安装于服务器装置20来实现。
操作部23构成为用于接受对服务器装置20的操作输入的接口。在显示部24中例如使用液晶显示器(LCD)、有机EL显示器等。显示部24也可以一体地具有触摸面板。
通信部26是与因特网、WAN等网络N连接,用于与车载装置10、操作员终端30以及工作人员终端40的各个进行通信的通信接口。
操作员终端30例如构成为对自动驾驶车辆进行远程辅助的操作员所使用的专用终端。操作员终端30在从自动驾驶车辆有辅助请求的情况下,接受来自服务器装置20的操作员呼叫。操作员终端30与车载装置10进行通信,显示自动驾驶车辆的影像,并且根据操作员的操作进行远程辅助。操作员终端30具备CPU31、存储器32、操作部33、显示部34、存储部35以及通信部36。
CPU31是处理器的一个例子。这里所说的处理器如上述那样是指广义的处理器,包括通用的处理器、专用的处理器。存储器32由ROM、RAM等构成。
在存储部35中例如使用HDD、SSD、闪存等。在存储部35中存储有操作员侧控制程序35A。操作员侧控制程序35A例如也可以预先安装于操作员终端30。操作员侧控制程序35A也可以通过存储于非易失性的非过渡性记录介质,或者经由网络N分发,并适当地安装于操作员终端30来实现。
操作部33构成为用于接受对操作员终端30的操作输入的接口。在显示部34中例如使用液晶显示器(LCD)、有机EL显示器等。显示部34也可以一体地具有触摸面板。
通信部36是与因特网、WAN等网络N连接,用于与服务器装置20以及工作人员终端40的各个进行通信的通信接口。此外,操作员终端30能够经由服务器装置20与车载装置10进行通信,但也可以不经由服务器装置20而与车载装置10直接通信。
工作人员终端40构成为现场工作人员可携带的终端装置。此外,现场工作人员是指能够赶到并应对自动驾驶车辆的辅助担当者。在工作人员终端40中,作为一个例子,应用智能手机、平板终端等。工作人员终端40具备CPU41、存储器42、操作部43、显示部44、存储部45以及通信部46。
此外,工作人员终端40能够与因特网、WAN等网络N连接,与服务器装置20以及操作员终端30的各个进行通信。
接下来,参照图2,对远程辅助系统90的功能性结构进行说明。
图2是表示第一实施方式的远程辅助系统90的功能性结构的一个例子的框图。
如图2所示,本实施方式的服务器装置20的CPU21作为获取部21A和执行部21B发挥功能。这些获取部21A和执行部21B通过CPU21读出远程辅助程序25A并执行来实现。
另外,本实施方式的车载装置10的CPU11作为自动驾驶控制部11A发挥功能。该自动驾驶控制部11A通过CPU11读出车辆侧控制程序15A并执行来实现。
另外,本实施方式的操作员终端30的CPU31作为远程辅助控制部31A发挥功能。该远程辅助控制部31A通过CPU31读出操作员侧控制程序35A并执行来实现。
首先,对服务器装置20的功能性结构进行说明。
在存储部25中存储有管理信息25B。在管理信息25B中包括基于自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点中的自动驾驶辅助中心与自动驾驶车辆之间的通信状态。该通信状态表示为与远程辅助的运行设计区域(ODD:OperationalDesign Domain)相关的信息。在该通信状态中,作为一个例子,包括区域、通信速度、通信延迟等。另外,在管理信息25B中也可以包括基于自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点中的自动驾驶车辆的周围的环境状态。该环境状态与上述通信状态同样,表示为与远程辅助的运行设计区域(ODD)相关的信息。在该环境状态中,作为一个例子,包括道路曲率、死角等。管理信息25B是管理这些通信状态以及环境状态的至少一方的信息。
另外,管理信息25B也可以包括与自动驾驶车辆的运行设计区域(ODD)相关的信息。具体而言,在该信息中,作为一个例子,包括行路条件、道路形状、气象、路面状态、交通状况等。在行路条件中,作为一个例子,包括步车分离、铺装状态等。在道路形状中,作为一个例子,包括坡度、车道宽度等。在气象中,作为一个例子,包括雨、雪、风速等。在路面状态中,作为一个例子,包括冻结、淹水等。在交通状况中,作为一个例子,包括施工、事故、路上停车等。
另外,在存储部25中存储有后述的操作员管理表25C。
获取部21A从存储部25获取管理信息25B。另外,获取部21A从自动驾驶车辆的车载装置10获取自动驾驶车辆的位置信息以及时刻信息。另外,获取部21A从自动驾驶车辆的车载装置10获取自动驾驶车辆的影像。此外,获取部21A所获取到的影像从服务器装置20被发送到操作员终端30。
执行部21B基于根据管理信息25B得到的通信状态以及环境状态的至少一方,对进行针对自动驾驶车辆的远程辅助的操作员执行能够由操作员实施的远程辅助的限制所需的动作。具体而言,远程辅助的限制所需的动作是指对操作员通知通信状态以及环境状态的至少一方的异常的内容的动作。例如,在操作员终端30的UI(User Interface:用户界面)画面上显示“产生通信延迟!”的消息。此外,在该通知中,也可以根据异常的内容,包含操作员接下来应采取的动作的提示。
另外,远程辅助的限制所需的动作也可以是限制操作员所使用的操作员终端30所具有的远程辅助的功能的动作。例如,在操作员终端30的UI画面中,也可以使用于远程辅助的一部分按钮不可用(不可按压),或者使一部分按钮不显示(消隐)。此外,若突然进行该功能的限制,则操作员有可能混乱。因此,优选功能的限制例如在使“由于产生通信延迟,因此限制功能〇。”的消息显示之后执行。
另外,执行部21B也可以在通信状态是产生了一定时间(例如1秒)以上的通信延迟的状态的情况下,限制控制远程辅助的定时的功能。执行部21B也可以在环境状态是施工区间长、前方视野不良、以及后方视野不良的任一状态的情况下,限制控制远程辅助的定时的功能。这里所说的定时,作为一个例子,包含超车时的逆向车道的逆向车或者邻接车道的后方车的安全确认的定时等。
图3是表示本实施方式的操作员终端30的UI画面34A的一个例子的主视图。
图3所示的UI画面34A是未进行功能限制的情况下的画面。在UI画面34A的中央显示自动驾驶车辆的多个影像(例如动画)。在图3的例子中,显示自动驾驶车辆的左前方、前方、右前方、左后方、车室内、以及右后方的影像。另外,在UI画面34A的下侧,作为用于远程辅助的多个按钮的一个例子,显示有车道变更[左]、允许超出超车、车道变更[右]、不需要辅助、以及辅助结束。车道变更[左]按钮是用于指示向左侧的车道的变更的按钮。允许超出超车按钮是用于指示从行驶车道超出超车的按钮。车道变更[右]按钮是用于指示向右侧的车道的变更的按钮。不需要辅助按钮是用于通知不需要远程辅助的按钮。辅助结束按钮是用于通知远程辅助的结束的按钮。
另外,在UI画面34A的右下端显示有管理远程辅助的操作日志的“操作日志”。另外,在UI画面34A的右侧,作为根据需要而使用的多个按钮的一个例子,显示有车内通话、急救通报、警察通报、以及工作人员派遣。车内通话按钮是用于与自动驾驶车辆的乘员进行通话的按钮。急救通报按钮是用于进行119号通报的按钮。警察通报按钮是用于进行110号通报的按钮。工作人员派遣按钮是用于联络现场工作人员的按钮。
图4是表示本实施方式的一部分功能被限制的状态的UI画面34A的一个例子的主视图。
图4所示的UI画面34A表示在左前方的影像中产生通信延迟(例如1秒以上的延迟)的状态。该情况下,优选限制向左侧的车道的变更。因此,在图4的例子中,在左前方的影像中显示“产生通信延迟!”的消息,并且,车道变更[左]按钮不可使用。
另外,作为一个例子,执行部21B也可以基于图5所示的测量信息,设定限制远程辅助的功能的内容。该测量信息是管理信息25B所包含的信息。该测量信息是在一定期间内测量表示通信状态的指标而得到的信息。这里所说的表示通信状态的指标作为一个例子包括通信速度、通信延迟等。
图5是表示本实施方式的测量信息的一个例子的图表。在图5中,纵轴表示通信延迟(t:时间),横轴表示时刻(t)。
例如,若根据通信状态频繁切换功能限制的有效和无效,则有时操作员无法进行正确的判断。因此,如图5所示,测量一定期间的通信质量(在图5的例子中通信延迟),使用与通信质量差的一侧匹配的值来设定功能限制的内容。具体而言,在对于通信延迟为T1(秒),限制功能〇及功能×,对于通信延迟为T2秒(<T1秒),限制功能〇的情况下,根据通信质量差的一侧的T1秒,设定对于通信延迟为T2秒也限制功能〇及功能×的内容。
另外,执行部21B也可以基于操作员的技能以及经验年数的至少一方,使限制远程辅助的功能的内容不同。该情况下,作为一个例子,使用图6所示的操作员管理表25C。
图6是表示本实施方式的操作员管理表25C的一个例子的图。
图6所示的操作员管理表25C是针对每个操作员,登记有技能、经验年数、以及功能限制的内容的表。如图6所示,技能(在图6的例子中等级1最高)越高的操作员,可以越减少被限制的功能,经验年数越长的操作员,可以越减少被限制的功能。
另外,执行部21B也可以在通信状态是持续一定期间通信中断的状态、或者无法确保一定以上的通信频带的状态的情况下,代替操作员,对能够赶到应对自动驾驶车辆的现场工作人员进行指示。具体而言,对现场工作人员的指示通过在工作人员终端40的显示部44上显示消息等来进行。
此外,本实施方式的获取部21A以及执行部21B设置于服务器装置20,但这些获取部21A以及执行部21B也可以设置于操作员终端30。
接下来,对车载装置10以及操作员终端30的功能性结构进行说明。
车载装置10的自动驾驶控制部11A进行本车辆的自动驾驶的控制。另外,自动驾驶控制部11A在从操作员接受到远程辅助的情况下,根据来自操作员终端30的远程辅助信号进行自动驾驶的控制。
操作员终端30的远程辅助控制部31A进行自动驾驶车辆的远程辅助的控制。具体而言,远程辅助控制部31A在操作员进行远程辅助的情况下,对自动驾驶车辆发送远程辅助信号来进行远程辅助的控制。
接下来,参照图7,对第一实施方式的服务器装置20的作用进行说明。
图7是表示由第一实施方式的远程辅助程序25A进行的处理的流程的一个例子的流程图。
首先,若对服务器装置20指示自动驾驶车辆的车辆状态的监视,则启动远程辅助程序25A,执行以下的各步骤。
在图7的步骤100中,CPU21从自动驾驶车辆的车载装置10获取自动驾驶车辆的位置信息以及时刻信息。
在步骤101中,CPU21从存储部25获取管理信息25B。
在步骤102中,CPU21判定与自动驾驶车辆的通信状态是否为持续一定期间通信中断的状态。在判定为不是持续一定期间通信中断的状态的情况下(否定判定的情况),移至步骤103,在判定为持续一定期间通信中断的情况下(肯定判定的情况),移至步骤107。此外,在这里,判定是否是产生了持续一定期间通信中断的状态,但也可以判定是否是无法确保一定以上的通信频带的状态。也就是说,例如,在通过QoS(Quality of Service:服务质量)等能够确保充分的通信频带的情况下,移至步骤103,在无法确保充分的通信频带的情况下,移至步骤107。
在步骤103中,CPU21判定是否从自动驾驶车辆接收到辅助请求。在判定为从自动驾驶车辆接收到辅助请求的情况下(肯定判定的情况),移至步骤104,在判定为未从自动驾驶车辆接收到辅助请求的情况下(否定判定的情况),返回到步骤100,反复处理。
在步骤104中,CPU21对操作员终端30进行操作员的呼叫。
在步骤105中,CPU21判定是否需要远程辅助的限制。需要远程辅助的限制的情况基于管理信息25B来判定。在需要远程辅助的限制的情况中,作为一个例子,包括(1)预测到自动驾驶车辆在成本(后述)高的路线上行驶的情况、(2)自动驾驶车辆的影像产生一定时间(例如1秒)以上的通信延迟的情况、(3)预测到自动驾驶车辆将在前方视野或者后方视野不良的位置停车的情况、(4)预测到自动驾驶车辆将在与自动驾驶辅助中心的通信状态不稳定的位置停车的情况等。在判定为需要远程辅助的限制的情况下(肯定判定的情况),移至步骤106,在判定为不需要远程辅助的限制的情况下(否定判定的情况),移至步骤108。
在步骤106中,CPU21对操作员终端30执行远程辅助的限制所需的动作,移至步骤108。所谓的远程辅助的限制所需的动作,作为一个例子,如上述的图4所示,是对操作员终端30显示通知通信状态以及环境状态的至少一方的异常的内容的消息的动作、或者是限制操作员终端30所具有的远程辅助的功能的动作。
另一方面,在步骤107中,CPU21对现场工作人员携带的工作人员终端40指示进行对自动驾驶车辆的赶到应对,移至步骤108。作为一个例子,如上述那样,CPU21通过在工作人员终端40的显示部44上显示消息等进行指示。
在步骤108中,CPU21判定远程辅助的结束定时是否到来。在判定为远程辅助的结束定时没有到来的情况下(否定判定的情况),返回到步骤100,反复处理,在判定为远程辅助的结束定时到来的情况下(肯定判定的情况),结束基于本远程辅助程序25A的一系列的处理。
接下来,参照图8,对第一实施方式的操作员终端30的作用进行说明。
图8是表示由第一实施方式的操作员侧控制程序35A进行的处理的流程的一个例子的流程图。
在图8的步骤110中,CPU31判定是否从服务器装置20有操作员的呼叫。在判定为有操作员的呼叫的情况下(肯定判定的情况),移至步骤111,在判定为没有操作员的呼叫的情况下(否定判定的情况),在步骤110中待机。
在步骤111中,CPU31对上述步骤110中的操作员呼叫进行响应。
在步骤112中,CPU31判定是否从服务器装置20有表示通信状态以及环境状态的至少一方的异常的内容的通知。此外,在该通知中,如上述那样,也可以根据异常的内容,包含操作员接下来应采取的动作的提示。在判定为有通知的情况下(肯定判定的情况),移至步骤113,在判定为没有通知的情况下(否定判定的情况),移至步骤116。
在步骤113中,CPU31根据上述步骤112的通知,作为一个例子,将上述的图4所示的“产生通信延迟!”那样的消息显示为通知内容。
在步骤114中,CPU31判定是否从服务器装置20有远程辅助的功能限制的指示。在判定为有远程辅助的功能限制的指示的情况下(肯定判定的情况),移至步骤115,在判定为没有远程辅助的功能限制的指示的情况下(否定判定的情况),移至步骤116。
在步骤115中,CPU31根据上述步骤114的指示,作为一个例子,像上述的图4所示的“车道变更[左]按钮”那样,限制远程辅助的功能。
时间
在步骤116中,CPU31根据操作员的操作,对自动驾驶车辆执行远程辅助。
在步骤117中,CPU31判定远程辅助的结束定时是否到来。在判定为远程辅助的结束定时没有到来的情况下(否定判定的情况),返回到步骤110,反复处理,在判定为远程辅助的结束定时到来的情况下(肯定判定的情况),结束基于本操作员侧控制程序35A的一系列的处理。
接下来,参照图9,对第一实施方式的车载装置10的作用进行说明。
图9是表示由第一实施方式的车辆侧控制程序15A进行的处理的流程的一个例子的流程图。
在图9的步骤120中,CPU11对服务器装置20发送远程辅助的辅助请求。
在步骤121中,CPU11判定针对在上述步骤120中发送的辅助请求,是否有来自操作员终端30的远程辅助。在判定为有来自操作员终端30的远程辅助的情况下(肯定判定的情况),移至步骤122,在判定为没有来自操作员终端30的远程辅助的情况下(否定判定的情况),移至步骤123。
在步骤122中,CPU11根据来自操作员所使用的操作员终端30的远程辅助进行控制。
在步骤123中,CPU11判定远程辅助的结束定时是否到来。在判定为远程辅助的结束定时没有到来的情况下(否定判定的情况),返回到步骤120,反复处理,在判定为远程辅助的结束定时到来的情况下(肯定判定的情况),结束基于本车辆侧控制程序15A的一系列的处理。
这样,根据本实施方式,在针对来自自动驾驶车辆的辅助请求需要限制远程辅助的情况下,对操作员执行远程辅助的限制所需的动作。因此,能够防止操作员进行错误的远程辅助。
[第二实施方式]
在上述第一实施方式中,对在针对来自自动驾驶车辆的辅助请求需要限制远程辅助的情况下,对操作员执行远程辅助的限制所需的动作的方式进行了说明。与此相对,在本实施方式中,对在操作员难以应对的情况下,从自动驾驶辅助中心指示自动驾驶车辆的行驶的方式进行说明。
图10是表示第二实施方式的远程辅助系统91的功能性结构的一个例子的框图。此外,对具有与在上述第一实施方式中说明的远程辅助系统90同样的功能的构成要素标注相同的附图标记,省略其反复的说明。
如图10所示,本实施方式的服务器装置20的CPU21作为指示部21C发挥功能。该指示部21C通过CPU21读出远程辅助程序25A并执行来实现。服务器装置20具备指示部21C这一点与上述第一实施方式的远程辅助系统90不同。
指示部21C在操作员难以应对或者可能产生困难的状况的情况下,对自动驾驶车辆进行行驶的指示。在这里,远程辅助不是始终需要,在自动驾驶车辆单体无法应对的情况下需要。因此,在需要远程辅助的状况且远程辅助困难的情况下,会产生自动驾驶车辆抛锚等的问题。所谓的需要远程辅助的状况,作为一个例子,也有事先知晓地点起火的辅助、施工区间的旗语应对等的情况,另外,也有乘客的急救应对、因产生路上停车而引起的超出超车等突发性地在任意场所发生的情况。因此,优选进行避开远程辅助困难的风险高的(可能产生困难的状况)路线的指示。参照图11~图14,具体地说明对自动驾驶车辆进行行驶的指示的方式。此外,操作员难以应对或者可能产生困难的状况的情况(以下,统称为“操作员难以应对的情况”)基于管理信息25B来判定。在操作员难以应对的情况中,作为一个例子,包括(1)预测到自动驾驶车辆在成本高的路线上行驶的情况、(2)自动驾驶车辆的影像产生一定时间(例如1秒)以上的通信延迟的情况、(3)预测到自动驾驶车辆将在前方视野或者后方视野不良的位置停车的情况、(4)预测到自动驾驶车辆将在位置停车的情况等。
图11是用于说明从本实施方式的服务器装置20对自动驾驶车辆进行行驶的指示的情况下的处理的图。
在图11中,地点S表示自动驾驶车辆的出发地点,地点G表示自动驾驶车辆的目标地点。路线R1~R3表示连接地点S~地点G的多个路线。
通信状态以及环境状态如上述那样表示为与远程辅助的运行设计区域相关的信息。管理信息25B包括与远程辅助的运行设计区域相关的信息、和与自动驾驶车辆的运行设计区域相关的信息。
自动驾驶车辆能够行驶的多个路线的各个分配有反映与远程辅助的运行设计区域相关的信息以及与自动驾驶车辆的运行设计区域相关的信息的成本。具体而言,在图11中,“车道宽度窄”是与自动驾驶车辆的运行设计区域相关的信息的一个例子,“通信环境差”以及“后方有死角”是与远程辅助的运行设计区域相关的信息的一个例子。例如,对于“车道宽度窄”预先设定成本“3”,对于“通信环境差”预先设定成本“2”,对于“后方有死角”预先设定成本“2”。该情况下,路线R2包括“车道宽度窄”,因此被分配成本“3”。路线R3包括“通信环境差”以及“后方有死角”,因此被分配合计后的成本“4”。路线R1不包括与远程辅助的运行设计区域相关的信息以及与自动驾驶车辆的运行设计区域相关的信息,因此被分配成本“0”。
指示部21C在预测到自动驾驶车辆将在成本为阈值以上的路线上行驶的情况下,进行将自动驾驶车辆行驶的路线变更为成本成为最小的路线的指示。具体而言,在图11的例子中,将阈值设为“3”,在预测到自动驾驶车辆将在路线R2上行驶的情况下,进行变更为成本成为最小的路线、即路线R1的指示。
即,通过来自自动驾驶辅助中心的指示,能够将自动驾驶车辆行驶的路线变更为通信状态以及环境状态良好的路线。因此,在由操作员进行远程辅助的情况下,能够在通信状态以及环境状态良好的状态下进行。
图12是用于说明从本实施方式的服务器装置20对自动驾驶车辆进行行驶的指示的情况下的另一处理的图。
在图12中,地点S表示自动驾驶车辆的出发地点,地点G表示自动驾驶车辆的目标地点。路线R1~R3表示连接地点S~地点G的多个路线。“车道宽度窄”以及“施工区间”是与自动驾驶车辆的运行设计区域相关的信息的一个例子,“通信环境差”以及“后方有死角”是与远程辅助的运行设计区域相关的信息的一个例子。
指示部21C在操作员监视的自动驾驶车辆的影像产生一定时间以上的通信延迟的情况下,进行使自动驾驶车辆的速度降低的指示。具体而言,在图12的例子中,假定自动驾驶车辆在路线R1上行驶的情况。路线R1包括“通信环境差”,是在该“通信环境差”的位置产生了1秒以上的通信延迟的状态。该情况下,使在路线R1上行驶的自动驾驶车辆的速度降低。
即,通过来自自动驾驶辅助中心的指示,使自动驾驶车辆的速度降低,从而能够降低与逆向车的相对速度。因此,在由操作员进行远程辅助的情况下,能够在通信状态恢复的状态下进行。
图13是用于说明从本实施方式的服务器装置20对自动驾驶车辆进行行驶的指示的情况下的又一处理的图。
在图13中,地点S表示自动驾驶车辆的出发地点,地点G表示自动驾驶车辆的目标地点。路线R1~R3表示连接地点S~地点G的多个路线。“车道宽度窄”以及“施工区间”是与自动驾驶车辆的运行设计区域相关的信息的一个例子,“后方有死角”是与远程辅助的运行设计区域相关的信息的一个例子。
指示部21C在预测到自动驾驶车辆将在后方视野不良的位置停车的情况下,进行将自动驾驶车辆的停车位置设定或者变更为自动驾驶车辆的后方视野良好的位置的指示。例如,在停车位置的设定比预测靠前的情况下(乘客的目的地等),进行变更,在停车位置的设定比预测靠后的情况下(乘客的急救应对等),进行新设定。具体而言,在图13的例子中,假定自动驾驶车辆在路线R1上暂时停车的情况。路线R1包括“后方有死角”,表示该“后方有死角”的停车位置(变更前)是后方视野不良的位置。在该停车位置(变更前),例如设定有来自乘客的希望停车地点、急救时的暂时停止地点等。在该停车位置(变更前),重新开始行驶时后方有死角,因此发车判断困难。该情况下,将自动驾驶车辆的停车位置从后方视野差的位置变更为后方视野良好的位置。此外,停车位置(变更后)表示后方视野良好的位置。
即,通过来自自动驾驶辅助中心的指示,能够将自动驾驶车辆的停车位置从后方视野差的位置变更为后方视野良好的位置。因此,在由操作员进行远程辅助的情况下,能够进行重新开始行驶时的发车判断。
图14是用于说明从本实施方式的服务器装置20对自动驾驶车辆进行行驶的指示的情况下的又一处理的图。
在图14中,地点S表示自动驾驶车辆的出发地点,地点G表示自动驾驶车辆的目标地点。路线R1~R3表示连接地点S~地点G的多个路线。“车道宽度窄”以及“施工区间”是与自动驾驶车辆的运行设计区域相关的信息的一个例子,“有大型停车车辆”以及“后方有死角”是与远程辅助的运行设计区域相关的信息的一个例子。
指示部21C在预测到自动驾驶车辆将在前方视野不良的位置停车的情况下,进行将自动驾驶车辆的停车位置设定或者变更为自动驾驶车辆的前方视野良好的位置的指示。具体而言,在图14的例子中,假定自动驾驶车辆在路线R1上暂时停车的情况。路线R1包括“有大型停车车辆”,表示该“有大型停车车辆”的停车位置(变更前)由于大型停车车辆是前方视野不良的位置。该停车位置(变更前)例如设定大型停车车辆的跟前的位置。在该停车位置(变更前),无法掌握大型停车车辆的前方的状况,因此超车判断困难。该情况下,将自动驾驶车辆的停车位置从前方视野差的位置变更为前方视野良好的位置,在图14的例子中,变更为比停车位置(变更前)靠近前侧的位置。此外,停车位置(变更后)表示前方视野良好的位置。
即,通过来自自动驾驶辅助中心的指示,能够将自动驾驶车辆的停车位置从前方视野差的位置变更为前方视野良好的位置。因此,在由操作员进行远程辅助的情况下,能够进行大型停车车辆等的超车判断。
另外,指示部21C在预测到自动驾驶车辆将在与自动驾驶辅助中心的通信状态不稳定的位置停车的情况下,也可以进行将自动驾驶车辆的停车位置设定或者变更为与自动驾驶辅助中心的通信状态稳定的位置的指示。例如,如上述那样,在停车位置的设定比预测靠前的情况下(乘客的目的地等),进行变更,在停车位置的设定比预测靠后的情况下(乘客的急救应对等),进行新设定。具体而言,在上述的图12的例子中,假定自动驾驶车辆在路线R1上暂时停车的情况。路线R1包括“通信环境差”,是在该“通信环境差”的位置产生1秒以上的通信延迟的状态。该情况下,将自动驾驶车辆的停车位置从通信状态不稳定的位置变更为通信状态稳定的位置。
即,通过来自自动驾驶辅助中心的指示,能够将自动驾驶车辆的停车位置从通信状态不稳定的位置变更为通信状态稳定的位置。因此,在由操作员进行远程辅助的情况下,能够在通信状态稳定的状态下进行。
此外,该情况下,指示部21C也可以从通过来自自动驾驶辅助中心的指示而变更后的停车位置接受自动驾驶车辆的辅助请求。由此,能够可靠地接收辅助请求。
接下来,参照图15,对第二实施方式的服务器装置20的作用进行说明。
图15是表示由第二实施方式的远程辅助程序25A进行的处理的流程的一个例子的流程图。
首先,若对服务器装置20指示自动驾驶车辆的车辆状态的监视,则启动远程辅助程序25A,执行以下的各步骤。
在图15的步骤130中,CPU21从自动驾驶车辆的车载装置10获取自动驾驶车辆的位置信息以及时刻信息。
在步骤131中,CPU21从存储部25获取管理信息25B。
在步骤132中,CPU21判定与自动驾驶车辆的通信状态是否是持续一定期间通信中断的状态。在判定为不是持续一定期间通信中断的状态的情况下(否定判定的情况),移至步骤133,在判定为持续一定期间通信中断的情况下(肯定判定的情况),移至步骤138。此外,判定是否是产生了持续一定期间通信中断的状态,但也可以判定是否是无法确保一定以上的通信频带的状态。
在步骤133中,CPU21判定是否从自动驾驶车辆接收到辅助请求。在判定为从自动驾驶车辆接收到辅助请求的情况下(肯定判定的情况),移至步骤134,在判定为未从自动驾驶车辆接收到辅助请求的情况下(否定判定的情况),返回到步骤130,反复处理。
在步骤134中,CPU21判定操作员应对是否困难。操作员应对困难的情况如上述那样基于管理信息25B来判定。在判定为操作员应对不困难、即操作员能够应对的情况下(否定判定的情况),移至步骤135,在判定为操作员应对困难的情况下(肯定判定的情况),移至步骤139。
在步骤135中,CPU21对操作员终端30进行操作员的呼叫。
在步骤136中,CPU21判定是否需要远程辅助的限制。需要远程辅助的限制的情况如上述那样基于管理信息25B来判定。在判定为需要远程辅助的限制的情况下(肯定判定的情况),移至步骤137,在判定为不需要远程辅助的限制的情况下(否定判定的情况),移至步骤140。
在步骤137中,CPU21对操作员终端30执行远程辅助的限制所需的动作,移至步骤140。所谓的远程辅助的限制所需的动作,作为一个例子,如上述的图4所示,是对操作员终端30显示通知通信状态以及环境状态的至少一方的异常的内容的消息的动作、或者限制操作员终端30所具有的远程辅助的功能的动作。
另一方面,在步骤138中,CPU21对现场工作人员携带的工作人员终端40指示进行对自动驾驶车辆的赶到应对,移至步骤140。作为一个例子,如上述那样,CPU21通过在工作人员终端40的显示部44上显示消息等来进行指示。
另一方面,在步骤139中,作为一个例子,如上述的图11~图14所示,CPU21对自动驾驶车辆进行行驶的指示,返回到步骤134,反复处理。
在步骤140中,CPU21判定远程辅助的结束定时是否到来。在判定为远程辅助的结束定时没有到来的情况下(否定判定的情况),返回到步骤130,反复处理,在判定为远程辅助的结束定时到来的情况下(肯定判定的情况),结束基于本远程辅助程序25A的一系列的处理。
接下来,参照图16,对第二实施方式的车载装置10的作用进行说明。
图16是表示由第二实施方式的车辆侧控制程序15A进行的处理的流程的一个例子的流程图。
在图16的步骤150中,CPU11对服务器装置20发送远程辅助的辅助请求。
在步骤151中,CPU11判定根据在上述步骤150中发送的辅助请求,是否从自动驾驶辅助中心的服务器装置20有行驶的指示。在判定为有行驶的指示的情况下(肯定判定的情况),移至步骤152,在判定为没有行驶的指示的情况下(否定判定的情况),移至步骤153。
在步骤152中,CPU11根据来自自动驾驶辅助中心的服务器装置20的行驶指示进行控制。
在步骤153中,CPU11判定是否从操作员所使用的操作员终端30有远程辅助。在判定为有远程辅助的情况下(肯定判定的情况),移至步骤154,在判定为没有远程辅助的情况下(否定判定的情况),移至步骤155。
在步骤154中,CPU11根据来自操作员所使用的操作员终端30的远程辅助进行控制。
在步骤155中,CPU21判定远程辅助的结束定时是否到来。在判定为远程辅助的结束定时没有到来的情况下(否定判定的情况),返回到步骤150,反复处理,在判定为远程辅助的结束定时到来的情况下(肯定判定的情况),结束基于本车辆侧控制程序15A的一系列的处理。
这样,根据本实施方式,在操作员难以应对的情况下,从自动驾驶辅助中心指示自动驾驶车辆的行驶。因此,即使是操作员难以应对的情况,也能够成为能够由操作员进行远程辅助的状态。
[第三实施方式]
在本实施方式中,对车载装置从自动驾驶辅助中心获取管理信息,并使用管理信息,使本车辆停在通信状态良好的场所的方式进行说明。
图17是表示第三实施方式的远程辅助系统92的功能性结构的一个例子的框图。此外,对具有与在上述第二实施方式中说明的远程辅助系统91同样的功能的构成要素标注相同的附图标记,省略其反复的说明。
如图17所示,本实施方式的车载装置10的CPU11作为接收部11B、变更部11C、以及发送部11D发挥功能。这些接收部11B、变更部11C、以及发送部11D通过CPU11读出车辆侧控制程序15A并执行来实现。
接收部11B从服务器装置20接收管理信息25B。
变更部11C在基于管理信息25B,预测到本车辆将在与自动驾驶辅助中心的通信状态不稳定的位置停车的情况下,将本车辆的停车位置变更为与自动驾驶辅助中心的通信状态稳定的位置。
发送部11D从由变更部11C变更后的停车位置发送本车辆的辅助请求。
图18的(A)是表示本实施方式的自动驾驶车辆的变更前的停车位置的图。图18的(B)是表示本实施方式的自动驾驶车辆的变更后的停车位置的图。在图18的(A)以及图18的(B)中,范围L1表示能够与自动驾驶辅助中心进行通信的范围,范围L2表示通信状态不稳定的范围。
如图18的(A)所示,自动驾驶车辆的车载装置10基于管理信息25B,预测到本车辆在范围L2停车。该情况下,如图18的(B)所示,车载装置10变更本车辆的停车位置,以使本车辆包含于范围L1且在范围L2的近前处停车。而且,车载装置10从变更后的停车位置对自动驾驶辅助中心发送辅助请求。
这样,根据本实施方式,使用从自动驾驶辅助中心获取到的管理信息,将自动驾驶车辆的停车位置变更到通信状态良好的位置,从变更后的停车位置发送辅助请求。因此,能够对自动驾驶辅助中心可靠地发送辅助请求。
以上,例示并说明了实施方式的远程辅助系统。实施方式也可以是用于使计算机执行远程辅助系统所具备的各部的功能的程序的方式。实施方式也可以是存储有这些程序的计算机可读取的非过渡性记录介质的方式。
另外,在上述实施方式中进行说明的远程辅助系统的结构是一个例子,也可以在不脱离主旨的范围内根据状况进行变更。
另外,在上述实施方式中进行说明的程序的处理的流程也是一个例子,也可以在不脱离主旨的范围内删除不必要的步骤,或者追加新的步骤,或者置换处理顺序。
另外,在上述实施方式中,对通过执行程序,利用计算机通过软件结构来实现实施方式的处理的情况进行了说明,但并不限于此。实施方式例如也可以通过硬件结构、硬件结构和软件结构的组合来实现。
本公开以实施方式为基准进行了描述,但应理解为本公开并不限定于该实施方式、结构。本公开也包含各种变形例、等同范围内的变形。其中,各种组合、方式,进一步仅包含它们中一个要素、一个以上、或一个以下的其它组合、方式也纳入到本公开的范畴、思想范围。
Claims (15)
1.一种远程辅助系统(90),其中,具备:
获取部(21A),获取管理信息(25B),所述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的所述自动驾驶辅助中心与所述自动驾驶车辆之间的通信状态、以及在所述管理对象区域内的所述自动驾驶车辆能够行驶的多个地点的所述自动驾驶车辆的周围的环境状态中的至少一方;和
执行部(21B),基于根据所述管理信息得到的所述通信状态以及所述环境状态的至少一方,对进行针对所述自动驾驶车辆的远程辅助的操作员执行能够由所述操作员实施的远程辅助的限制所需的动作。
2.根据权利要求1所述的远程辅助系统(90),其中,
所述远程辅助的限制所需的动作是通知所述通信状态以及所述环境状态的至少一方的异常的内容的动作。
3.根据权利要求1或2所述的远程辅助系统(90),其中,
所述远程辅助的限制所需的动作是限制所述操作员所使用的操作员终端所具有的远程辅助的功能的动作。
4.根据权利要求3所述的远程辅助系统(90),其中,
所述管理信息包括一定期间内测量表示所述通信状态的指标而得到的测量信息,
所述执行部基于所述测量信息,设定限制所述远程辅助的功能的内容。
5.根据权利要求3所述的远程辅助系统(90),其中,
所述执行部基于所述操作员的技能以及经验年数的至少一方,使限制所述远程辅助的功能的内容不同。
6.根据权利要求1所述的远程辅助系统(91),其中,
还具备指示部(21C),所述指示部在所述操作员难以应对或者可能产生困难的状况的情况下,对所述自动驾驶车辆进行行驶的指示。
7.根据权利要求6所述的远程辅助系统(91),其中,
所述通信状态以及所述环境状态表示为与所述远程辅助的运行设计区域相关的信息,
所述管理信息包括与所述远程辅助的运行设计区域相关的信息、和与所述自动驾驶车辆的运行设计区域相关的信息,
所述自动驾驶车辆能够行驶的多个路线的各个路线被分配反映了与所述远程辅助的运行设计区域相关的信息以及与所述自动驾驶车辆的运行设计区域相关的信息的成本,
所述指示部在预测到所述自动驾驶车辆将在所述成本成为阈值以上的路线上行驶的情况下,进行将所述自动驾驶车辆行驶的路线变更为所述成本成为最小的路线的指示。
8.根据权利要求6所述的远程辅助系统(91),其中,
所述指示部在所述操作员监视的所述自动驾驶车辆的影像产生了一定时间以上的通信延迟的情况下,进行使所述自动驾驶车辆的速度降低的指示。
9.根据权利要求6所述的远程辅助系统(91),其中,
所述指示部在预测到所述自动驾驶车辆将在前方视野或者后方视野不良的位置停车的情况下,进行将所述自动驾驶车辆的停车位置设定或者变更为所述自动驾驶车辆的前方视野或者后方视野良好的位置的指示。
10.根据权利要求6所述的远程辅助系统(91),其中,
所述指示部在预测到所述自动驾驶车辆将在与所述自动驾驶辅助中心的通信状态不稳定的位置停车的情况下,进行将所述自动驾驶车辆的停车位置设定或者变更为与所述自动驾驶辅助中心的通信状态稳定的位置的指示。
11.根据权利要求10所述的远程辅助系统(91),其中,
所述指示部从由所述指示变更后的停车位置接受所述自动驾驶车辆的辅助请求。
12.根据权利要求1所述的远程辅助系统(90),其中,
所述执行部在所述通信状态是持续一定期间通信中断的状态、或者无法确保一定以上的通信频带的状态的情况下,代替所述操作员,对能够赶到应对所述自动驾驶车辆的现场工作人员进行指示。
13.一种车载装置(10),搭载于由权利要求1~12中任一项所记载的远程辅助系统(92)进行远程辅助的自动驾驶车辆,
所述车载装置(10)具备:
接收部(11B),接收所述管理信息;
变更部(11C),在基于所述管理信息,预测到本车辆将在与所述自动驾驶辅助中心的通信状态不稳定的位置停车的情况下,将本车辆的停车位置变更为与所述自动驾驶辅助中心的通信状态稳定的位置;以及
发送部(11D),从由所述变更部变更后的停车位置发送本车辆的辅助请求。
14.一种远程辅助方法,其中,包括:
获取管理信息,所述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的所述自动驾驶辅助中心与所述自动驾驶车辆之间的通信状态、以及在所述管理对象区域内的所述自动驾驶车辆能够行驶的多个地点的所述自动驾驶车辆的周围的环境状态中的至少一方,
基于根据所述管理信息得到的所述通信状态以及所述环境状态的至少一方,对进行针对所述自动驾驶车辆的远程辅助的操作员执行能够由所述操作员实施的远程辅助的限制所需的动作。
15.一种远程辅助程序(25A),用于使计算机作为获取部(21A)以及执行部(21B)发挥功能,其中,
所述获取部(21A)获取管理信息(25B),所述管理信息管理在自动驾驶辅助中心的管理对象区域内的自动驾驶车辆能够行驶的多个地点的所述自动驾驶辅助中心与所述自动驾驶车辆之间的通信状态、以及在所述管理对象区域内的所述自动驾驶车辆能够行驶的多个地点的所述自动驾驶车辆的周围的环境状态中的至少一方,
所述执行部(21B)基于根据所述管理信息得到的所述通信状态以及所述环境状态的至少一方,对进行针对所述自动驾驶车辆的远程辅助的操作员执行能够由所述操作员实施的远程辅助的限制所需的动作。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019192349A JP7276072B2 (ja) | 2019-10-22 | 2019-10-22 | 遠隔支援システム、車載装置、遠隔支援方法、及び遠隔支援プログラム |
JP2019-192349 | 2019-10-22 | ||
PCT/JP2020/038491 WO2021079776A1 (ja) | 2019-10-22 | 2020-10-12 | 遠隔支援システム、車載装置、遠隔支援方法、及び遠隔支援プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114599566A true CN114599566A (zh) | 2022-06-07 |
Family
ID=75619853
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080073441.8A Pending CN114599566A (zh) | 2019-10-22 | 2020-10-12 | 远程辅助系统、车载装置、远程辅助方法以及远程辅助程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220242447A1 (zh) |
JP (1) | JP7276072B2 (zh) |
CN (1) | CN114599566A (zh) |
WO (1) | WO2021079776A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022123831A1 (ja) * | 2020-12-10 | 2022-06-16 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報処理方法、及び、情報処理システム |
KR20220152475A (ko) * | 2021-05-07 | 2022-11-16 | 현대자동차주식회사 | 자율 주행 원격 제어 관리 장치, 그를 포함하는 시스템 및 그 방법 |
WO2023176903A1 (ja) * | 2022-03-18 | 2023-09-21 | パナソニックIpマネジメント株式会社 | 情報出力方法、プログラム、及び情報出力システム |
WO2023223918A1 (ja) * | 2022-05-18 | 2023-11-23 | パナソニックIpマネジメント株式会社 | 情報処理方法、プログラム、及び情報処理システム |
WO2024090422A1 (ja) * | 2022-10-28 | 2024-05-02 | 株式会社日立製作所 | 運転支援装置および運転支援方法 |
KR102523600B1 (ko) * | 2022-11-09 | 2023-04-20 | 재단법인 지능형자동차부품진흥원 | 위험도 기반의 운영설계영역을 공유하는 자율주행 안전 시스템 및 그 방법 |
DE102022212701A1 (de) | 2022-11-28 | 2024-05-29 | Robert Bosch Gesellschaft mit beschränkter Haftung | Verfahren zum Erzeugen von Infrastrukturassistenzdaten |
JP7387077B1 (ja) | 2023-04-24 | 2023-11-27 | 三菱電機株式会社 | レーザ装置およびレーザ加工機 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103538588A (zh) * | 2013-09-24 | 2014-01-29 | 吴江智远信息科技发展有限公司 | 一种基于北斗/gps双模卫星定位的车载驾驶辅助系统 |
CN108137054A (zh) * | 2015-10-20 | 2018-06-08 | 罗伯特·博世有限公司 | 传感器测量数据的替换 |
CN108700876A (zh) * | 2015-11-04 | 2018-10-23 | 祖克斯有限公司 | 用于自主车辆轨迹修改的远程操作系统和方法 |
CN109421794A (zh) * | 2017-08-25 | 2019-03-05 | 本田技研工业株式会社 | 驾驶支援装置、驾驶支援方法及存储介质 |
CN109562764A (zh) * | 2016-08-10 | 2019-04-02 | 日立汽车系统株式会社 | 车辆控制装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016071585A (ja) * | 2014-09-30 | 2016-05-09 | パナソニックIpマネジメント株式会社 | 運転制御システム、運転制御装置、および、遠隔操作装置 |
DK3158553T3 (en) * | 2015-03-31 | 2019-03-18 | Sz Dji Technology Co Ltd | Authentication systems and methods for identifying authorized participants |
JP6650386B2 (ja) * | 2016-11-09 | 2020-02-19 | 本田技研工業株式会社 | 遠隔運転制御装置、車両制御システム、遠隔運転制御方法、および遠隔運転制御プログラム |
-
2019
- 2019-10-22 JP JP2019192349A patent/JP7276072B2/ja active Active
-
2020
- 2020-10-12 WO PCT/JP2020/038491 patent/WO2021079776A1/ja active Application Filing
- 2020-10-12 CN CN202080073441.8A patent/CN114599566A/zh active Pending
-
2022
- 2022-04-20 US US17/660,003 patent/US20220242447A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103538588A (zh) * | 2013-09-24 | 2014-01-29 | 吴江智远信息科技发展有限公司 | 一种基于北斗/gps双模卫星定位的车载驾驶辅助系统 |
CN108137054A (zh) * | 2015-10-20 | 2018-06-08 | 罗伯特·博世有限公司 | 传感器测量数据的替换 |
CN108700876A (zh) * | 2015-11-04 | 2018-10-23 | 祖克斯有限公司 | 用于自主车辆轨迹修改的远程操作系统和方法 |
CN109562764A (zh) * | 2016-08-10 | 2019-04-02 | 日立汽车系统株式会社 | 车辆控制装置 |
CN109421794A (zh) * | 2017-08-25 | 2019-03-05 | 本田技研工业株式会社 | 驾驶支援装置、驾驶支援方法及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US20220242447A1 (en) | 2022-08-04 |
JP7276072B2 (ja) | 2023-05-18 |
WO2021079776A1 (ja) | 2021-04-29 |
JP2021068132A (ja) | 2021-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114599566A (zh) | 远程辅助系统、车载装置、远程辅助方法以及远程辅助程序 | |
JP6893140B2 (ja) | 制御装置、制御方法、制御プログラム及び制御システム | |
US9824588B2 (en) | Electronic device, control method for electronic device, and control program for electronic device | |
US9594373B2 (en) | Apparatus and method for continuously establishing a boundary for autonomous driving availability and an automotive vehicle comprising such an apparatus | |
US20180319402A1 (en) | System and method for automatic activation of driver assistance feature | |
US11249473B2 (en) | Remote driving managing apparatus, and computer readable storage medium | |
JP6402684B2 (ja) | 表示装置 | |
CN110395253B (zh) | 车辆控制装置以及计算机可读存储介质 | |
JP6500724B2 (ja) | 危険情報報知システム、サーバ及びコンピュータプログラム | |
US20170168483A1 (en) | Method and device for receiving data values and for operating a vehicle | |
JP7448624B2 (ja) | 運転支援装置、運転支援方法、およびプログラム | |
JP2010117315A (ja) | 運転支援装置および運転支援プログラム | |
JP6293420B2 (ja) | 制御プログラムおよび情報処理方法 | |
WO2022039022A1 (ja) | 車両用表示制御装置、車両用表示制御システム、及び車両用表示制御方法 | |
JP2019169083A (ja) | 判定装置及び方法 | |
CN112950995B (zh) | 泊车辅助装置、辅助装置、相应方法及车辆和服务器 | |
JP2018169945A (ja) | 運転支援装置、運転支援方法及び運転支援プログラム | |
JP6997006B2 (ja) | 車載装置、サーバ、情報システム | |
JP2021009611A (ja) | 情報提供装置、情報提供方法、およびプログラム | |
US11535279B2 (en) | Vehicle position sensing system | |
JP7116670B2 (ja) | 走行制御装置、制御方法およびプログラム | |
JPWO2019167257A1 (ja) | 通知システムおよび通知方法 | |
JP4983612B2 (ja) | エコドライブ評価装置およびエコドライブ評価装置におけるアイドリングストップ判定方法 | |
JP7410848B2 (ja) | 車両用認識システムおよび認識方法 | |
US20230182764A1 (en) | Vehicle display control device, vehicle display control system, and vehicle display control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |