WO2023085202A1 - 車両遠隔運転システム、および、車両遠隔運転方法 - Google Patents

車両遠隔運転システム、および、車両遠隔運転方法 Download PDF

Info

Publication number
WO2023085202A1
WO2023085202A1 PCT/JP2022/041142 JP2022041142W WO2023085202A1 WO 2023085202 A1 WO2023085202 A1 WO 2023085202A1 JP 2022041142 W JP2022041142 W JP 2022041142W WO 2023085202 A1 WO2023085202 A1 WO 2023085202A1
Authority
WO
WIPO (PCT)
Prior art keywords
remote
vehicle
driving
driver
abnormality
Prior art date
Application number
PCT/JP2022/041142
Other languages
English (en)
French (fr)
Inventor
拓弥 久米
一輝 和泉
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2022171811A external-priority patent/JP2023072662A/ja
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Publication of WO2023085202A1 publication Critical patent/WO2023085202A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04QSELECTING
    • H04Q9/00Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom

Definitions

  • Patent Document 1 a technology is known in which a remote driver remotely drives a vehicle.
  • Patent Literature 2 discloses a system for remotely monitoring an autonomous vehicle. The remote monitoring system disclosed in Patent Document 2 automatically stops an autonomous vehicle when communication with the remote monitoring center is interrupted.
  • the present disclosure has been made based on this situation, and its purpose is to provide a vehicle remote driving system and a vehicle remote driving method that allow the vehicle to continue running even if there is an abnormality on the remote side. to do.
  • a vehicle remote driving system for controlling a remotely driven vehicle capable of remote driving by a remote driver and in-vehicle driving by operating an in-vehicle operating member comprising: a remote side abnormality determination unit that sequentially determines whether there is an abnormality in a remote side determination target that is at least one of the remote side system operated by the remote side operator and the remote side system; and an in-vehicle operation permission unit that permits in-vehicle operation when the remote side abnormality determination unit determines that there is an abnormality in the remote side determination target.
  • a vehicle remote operation method for controlling a remotely operated vehicle capable of remote operation by a remote driver and in-vehicle operation by operating an in-vehicle operation member comprising: sequentially determining whether there is an abnormality in the remote side determination target, which is at least one of the remote driver and the remote side system operated by the remote driver; This is a method of remotely operating a vehicle that permits driving inside the vehicle when it is determined that there is an abnormality in a remote side determination target.
  • in-vehicle driving is permitted when there is an abnormality in the object to be determined on the remote side. Therefore, even if there is an abnormality in the object to be judged on the remote side, the remote-operated vehicle can continue to run by operating the vehicle interior operation member by the passenger.
  • the figure which shows the structure of the vehicle remote driving system 5 of 1st Embodiment. 4 is a diagram showing the configuration of a remote system 30; FIG. The figure which shows the structure of the vehicle side system 100.
  • FIG. The figure which shows the function which automatic driving ECU142 performs. 4 is a flowchart showing processing executed by a remote control device 36; 4 is a flowchart showing processing executed by the vehicle-side system 100; FIG. 7 is a flow chart showing a process executed subsequent to FIG. 6;
  • the figure which shows the structure of the vehicle remote driving system 5 of 2nd Embodiment. 4 is a diagram showing the configuration of a remote system 30; FIG. The figure which shows the structure of the vehicle side system 100.
  • FIG. 4 is a flow chart showing processing executed by the vehicle-side system 100 when the remote driver 21 changes.
  • 4 is a flowchart showing a process of notifying a remote driver 21 or the like that an abnormality has occurred in the remote-operated vehicle 10.
  • FIG. 4 is a flowchart showing a process executed by a remote control device 36 when an abnormality occurs in a remotely operated vehicle 10 that travels in a row.
  • FIG. 1 shows the configuration of a vehicle remote driving system 5 according to the first embodiment.
  • the vehicle remote driving system 5 includes a vehicle side system 100 mounted on a remotely driven vehicle 10 and a remote side system 30 installed at a remote driving facility 20 .
  • the remotely driven vehicle 10 can be remotely driven by a remote driver 21 operating a remote side system 30 .
  • the remote driving vehicle 10 can be driven by an in-vehicle driver 12 sitting in the driver's seat 11 of the remote driving vehicle 10 operating the in-vehicle operating member 13 . Operating the in-vehicle operation member 13 to drive the remote-operated vehicle 10 is referred to as in-vehicle driving.
  • the remote driving car 10 should be capable of remote driving and in-vehicle driving.
  • Various classes of vehicles are applicable to the remotely driven vehicle 10 .
  • remotely operated vehicles 10 include cars, buses, and trucks.
  • the remotely operated vehicle 10 may be a vehicle that travels on a dedicated road.
  • the remotely operated vehicle 10 may be a vehicle that is not driven by an occupant during normal times and is driven inside the vehicle by an occupant only in an emergency.
  • In-vehicle operation means operating the in-vehicle operation member 13 to control the movement of the remotely operated vehicle 10 .
  • Driving includes only slowing the remotely driven vehicle 10 to a stop without accelerating or steering.
  • the remote driving car 10 can be driven manually and automatically during both remote driving and in-vehicle driving.
  • the remotely operated vehicle 10 of the present embodiment is capable of autonomous driving at level 3 and lower.
  • the vehicle-side system 100 performs all driving operations in the Operational Design Domain.
  • the operation design domain is hereinafter referred to as ODD.
  • Levels 1 and 2 automated driving is driving in which the driver is the main driver of operation and monitoring of surroundings. Incidentally, when simply describing a driver, it means a driver who may be the remote driver 21 or the in-vehicle driver 12 .
  • the in-vehicle operation member 13 are a steering wheel, an accelerator pedal, and a brake pedal.
  • the remotely operated vehicle 10 may be a vehicle that a passenger drives in the vehicle only in an emergency
  • the in-vehicle operating member 13 may not include a steering wheel or a member having the same function as the steering wheel.
  • the in-vehicle operating member 13 also includes a button for slowing down and stopping the remotely operated vehicle 10 .
  • the remote operation vehicle 10 can switch between remote operation and in-vehicle operation, and both operations are not executed at the same time.
  • the in-vehicle operation member 13 and the actuator operated by the in-vehicle operation member 13 (hereinafter referred to as the corresponding actuator) are designed so that the traveling of the remote-operated vehicle 10 does not change even if the in-vehicle operation member 13 is operated during remote operation. electrically connected. During remote operation, communication between the in-vehicle operation member 13 and the corresponding actuator is cut off.
  • FIG. 2 shows the configuration of the remote system 30.
  • the remote side system 30 includes a remote operation member 31 , a remote driver monitoring device 32 , a remote communication device 33 , a manager notification device 34 , a remote driver notification device 35 and a remote control device 36 .
  • the remote control member 31 is a member operated by the remote driver 21 when performing remote operation.
  • the remote operation member 31 can be, for example, a steering wheel, an accelerator pedal, and a brake pedal, like the in-vehicle operation member 13 .
  • a rod-shaped operating body can be used instead of the steering wheel. Buttons can also be used in place of the accelerator pedal and brake pedal.
  • the remote driver monitoring device 32 sequentially monitors whether the remote driver 21 is in a state suitable for remote driving. Whether the state is suitable for remote driving is determined from the arousal level and driving posture of the remote driver 21 .
  • the remote driver monitoring device 32 includes, for example, a near-infrared light source, a near-infrared camera, and a control unit for controlling them.
  • the remote driver monitoring device 32 uses a near-infrared camera to photograph the head of the remote driver 21 irradiated with near-infrared light from the near-infrared light source. An image captured by the near-infrared camera is image-analyzed by the control unit. The control unit successively determines the arousal level of the driver based on the image analysis results.
  • the remote driver monitoring device 32 is in a state in which the remote driver 21 can take over the driving according to the system request. Continuously monitor whether there is If the arousal level of the remote driver 21 is sufficiently high and the posture of the remote driver 21 is such that the remote operation member 31 can be operated immediately, the remote driver 21 can take over the driving.
  • the remote communication device 33 is a communication device that wirelessly communicates with the vehicle-mounted communication device 180 provided in the vehicle-side system 100 .
  • the remote communication device 33 may communicate with the vehicle-mounted communication device 180 via a public network, or may communicate directly with the vehicle-mounted communication device 180 .
  • the administrator notification device 34 is a device that gives various notifications to the administrator who manages the remote driver 21 (see FIG. 8, remote administrator 25).
  • the administrator is a person who is different from the remote operator 21 but who can operate the remote side system 30 .
  • the administrator notification device 34 has a display 341 and a speaker 342 .
  • the display 341 and speaker 342 are installed at positions where the administrator can easily recognize them.
  • the remote driver notification device 35 is a device that gives various notifications to the remote driver 21 .
  • the remote driver notification device 35 has a display 351 and a speaker 352 . These display 351 and speaker 352 are installed near the seat where the remote driver 21 sits. Incidentally, when the administrator is near the remote driver 21, the remote driver notification device 35 may also serve as the administrator notification device 34. FIG.
  • the remote control device 36 can be realized by a configuration with at least one processor.
  • remote controller 36 may be implemented by a computer including a processor, non-volatile memory, RAM, I/O, bus lines connecting these components, and the like.
  • a program for operating a general-purpose computer as the remote control device 36 is stored in the nonvolatile memory.
  • the processor executes the program stored in the non-volatile memory while using the temporary storage function of the RAM, so that the remote control device 36 acquires the driving information acquisition unit 361, the remote driver status notification unit 362, the driving instruction value It operates as an acquisition unit 363 . Execution of these operations means that the method corresponding to the program is executed.
  • the driving information acquisition unit 361 acquires the driving information from the remote communication device 33 and causes the display 351 to output the acquired driving information.
  • the driving information is information necessary for remotely driving the remotely driven vehicle 10 and is transmitted from the remotely driven vehicle 10 .
  • the driving information includes an image of the surroundings of the remotely driven vehicle 10, the vehicle speed of the remotely driven vehicle 10, and information indicating the steering angle.
  • the remote driver status notification unit 362 acquires from the remote driver monitoring device 32 the monitoring results that the remote driver monitoring device 32 sequentially judges. Then, the obtained monitoring result is transmitted from the remote communication device 33 to the remotely operated vehicle 10 .
  • the monitoring results include whether the remote driver 21 is in a suitable condition for driving and the alertness level of the remote driver 21 .
  • the remote driver status notification unit 362 outputs an alarm from the remote driver notification device 35 when the obtained monitoring result indicates that the remote driver 21 is not in a state suitable for remote driving. If the judgment result of the remote driver monitoring device 32 does not change even if the alarm is output from the remote driver notification device 35, the remote driver status notification unit 362 notifies the administrator notification device 34 that the remote driver 21 is abnormal. output that
  • the driving instruction value acquisition unit 363 acquires the driving instruction value from the remote control member 31 and transmits the acquired driving instruction value from the remote communication device 33 to the remotely driven vehicle 10 .
  • the driving instruction value is a value that instructs how to drive the remotely operated vehicle 10 .
  • the driving instruction value is, for example, a value that instructs the amount of accelerator operation, the amount of brake operation, and the amount of steering operation.
  • the vehicle-side system 100 includes an in-vehicle driver monitoring device 120, an in-vehicle notification unit 130, an automatic driving system 140, a travel control ECU 150, a peripheral monitoring sensor 160, a locator 170, an in-vehicle communication device 180, and communication that communicably connects these.
  • a bus 190 is provided.
  • the in-vehicle driver monitoring device 120 sequentially monitors whether the in-vehicle driver 12 is in a state suitable for driving while the in-vehicle driver 12 is driving.
  • the configuration of the in-vehicle driver monitoring device 120 may be the same as that of the remote driver monitoring device 32 . Whether or not the driver 12 inside the vehicle is in a state suitable for driving can be determined from the posture and arousal level of the driver 12 inside the vehicle. Further, the in-vehicle driver monitoring device 120 sequentially monitors whether or not the in-vehicle driver 12 can take over the driving while the remote-driven vehicle 10 is remotely driven at automatic driving level 3.
  • the in-vehicle notification unit 130 gives various notifications to the driver.
  • In-vehicle notification unit 130 includes speaker 131 and display 132 .
  • the speaker 131 outputs sound toward the cabin of the remotely operated vehicle 10 .
  • One or more displays 132 are provided. At least one display 132 is arranged at a position visible to the driver. For example, one display 132 is located on the instrument panel.
  • the automated driving system 140 performs automated driving control on the remotely driven vehicle 10 when the remotely driven vehicle 10 automatically drives at least at automated driving level 3. Further, the automatic driving system 140 may automatically control the remotely driven vehicle 10 at an automatic driving level of level 4 or higher.
  • the driver is not obligated to monitor the surroundings. However, at autonomous driving level 3, the driver is required to be in a state where he can take over driving if requested by the system. In this embodiment, the driver is either the remote driver 21 or the in-vehicle driver 12 .
  • ODD is required.
  • the automatic driving system 140 determines that the ODD is no longer satisfied during automatic driving at automatic driving level 3, it requests the driver to take over driving.
  • ODD can be set in various ways. One or more of road conditions, geographical conditions, environmental conditions, and other conditions can be set for ODD. An example of ODD is to limit the road type to expressways.
  • the driver takes the lead in driving the remotely operated vehicle 10, and the automated driving system 140 assists the driver in driving.
  • the driver is naturally obligated to monitor the surroundings.
  • the automatic driving system 140 includes a driving support ECU 141 and an automatic driving ECU 142.
  • the driving support ECU 141 is an ECU (Electronic Control Unit) that sequentially determines vehicle control when the automatic driving system 140 executes automatic driving corresponding to driving support.
  • the automatic driving ECU 142 is an ECU that sequentially determines vehicle control when the automatic driving system 140 executes automatic driving at a level where the driver is not obligated to monitor the surroundings.
  • the automatic driving ECU 142 is a computer including a processing unit 143, a RAM 144, a storage unit 145, an input/output interface 146, and a bus connecting these.
  • the driving support ECU 141 is also a computer including a processing unit, a RAM, a storage unit, an input/output interface, and a bus connecting them.
  • the processing unit 143 includes at least one processor.
  • the processing unit 143 accesses the RAM 144 to execute various processes for realizing the vehicle remote driving method of the present disclosure.
  • the storage unit 145 stores various programs (vehicle remote driving program, etc.) executed by the processing unit 143 .
  • the automatic driving ECU 142 implements the functions of each unit shown in FIG. The contents of FIG. 4 will be described later.
  • the travel control ECU 150 which is a travel control unit, is an electronic control device that mainly includes a microcontroller.
  • the travel control ECU 150 has at least the functions of a brake control ECU, a drive control ECU, and a steering control ECU.
  • the travel control ECU 150 controls the braking force and the on-vehicle power source based on any one of a driving instruction value based on the driving operation of the in-vehicle driver 12 or the remote driver 21, and a control instruction value of the driving support ECU 141 or the automatic driving ECU 142. Continuously implement output control and steering angle control.
  • the driving instruction value based on the driving operation of the driver 12 inside the vehicle is the detection value detected by the operation amount detection sensor 151 .
  • the operation amount detection sensor 151 is a sensor that detects the operation amount of the in-vehicle operation member 13 . Therefore, the detection value detected by the operation amount detection sensor 151 indicates the operation amount by which the in-vehicle operation member 13 is operated.
  • a driving instruction value based on the driving operation of the remote driver 21 is transmitted from the remote side system 30 via the in-vehicle communication device 180 .
  • the travel control ECU 150 performs travel control based on a driving instruction value based on the driving operation of the remote driver 21 during remote driving.
  • the travel control ECU 150 sequentially acquires the detection values detected by the operation amount detection sensor 151 during remote operation, in other words, even when the in-vehicle operation permission unit 1422 does not permit in-vehicle operation. This is to quickly execute travel control that reflects the driving operation of the driver 12 inside the vehicle when the vehicle is switched to driving inside the vehicle.
  • the traveling control ECU 150 generates vehicle speed information indicating the current traveling speed of the remotely operated vehicle 10 based on detection signals from wheel speed sensors provided at the hub portions of each wheel, and transmits the generated vehicle speed information to the communication bus 190. sequentially output to
  • the surroundings monitoring sensor 160 is an autonomous sensor that monitors the surroundings of the remotely driven vehicle 10.
  • Perimeter monitoring sensor 160 can detect moving and stationary objects from a detection range around the vehicle.
  • the perimeter monitoring sensor 160 is capable of detecting at least forward vehicles, rear vehicles, side vehicles, etc. traveling around the remotely operated vehicle 10 .
  • the surroundings monitoring sensor 160 provides the driving support ECU 141, the automatic driving ECU 142, and the like with detection information of objects around the own vehicle, that is, the remotely driven vehicle 10.
  • Perimeter monitoring sensor 160 includes one or more of camera unit 161, millimeter wave radar 162, lidar 163 and sonar 164, for example.
  • Camera unit 161 includes a front camera system and a surround camera system.
  • the front camera system is mounted on the remotely operated vehicle 10 so as to photograph the front range of the remotely operated vehicle 10 .
  • the surround camera system has a front camera, a rear camera, a left side camera, and a right side camera, and can photograph the road surface all around the remotely driven vehicle 10 .
  • the millimeter wave radar 162 emits millimeter waves or quasi-millimeter waves toward the surroundings of the vehicle.
  • the millimeter wave radar 162 outputs detection information generated by a process of receiving reflected waves reflected by moving objects, stationary objects, and the like.
  • the lidar 163 emits laser light toward the surroundings of the vehicle.
  • the lidar 163 outputs detection information generated by a process of receiving laser light reflected by a moving object, a stationary object, or the like existing within the irradiation range.
  • the sonar 164 emits ultrasonic waves around the vehicle.
  • the sonar 164 outputs detection information generated by a process of receiving ultrasonic waves reflected by moving and stationary objects existing near the vehicle.
  • the locator 170 is configured to include a GNSS (Global Navigation Satellite System) receiver, an inertial sensor, and the like.
  • the locator 170 combines the positioning signals received by the GNSS receiver, the measurement results of the inertial sensor, the vehicle speed information output to the communication bus 190, and the like, and sequentially locates the current position, traveling direction, and the like of the remotely operated vehicle 10.
  • the locator 170 sequentially outputs the position information and direction information of the remotely driven vehicle 10 based on the positioning result to the communication bus 190 as locator information.
  • GNSS Global Navigation Satellite System
  • the locator 170 further has a map database (hereinafter referred to as map DB) 171 that stores map data.
  • map DB 171 is mainly composed of a large-capacity storage medium storing a large amount of three-dimensional map data and two-dimensional map data.
  • the three-dimensional map data is a so-called HD (High Definition) map and includes road information necessary for automatic driving control.
  • the 3D map data includes information necessary for advanced driving assistance and automatic driving, such as 3D shape information of roads and detailed information of each lane.
  • the locator 170 reads the map data around the current position from the map DB 171, and provides the driving support ECU 141, the automatic driving ECU 142, etc. with the locator information.
  • the in-vehicle communication device 180 is an external communication unit mounted on the remote driving vehicle 10 and functions as a V2X (Vehicle to Everything) communication device.
  • Onboard communicator 180 communicates with remote communicator 33 either through the public network or directly.
  • the vehicle-mounted communication device 180 may transmit and receive information by wireless communication with a roadside device installed on the side of the road.
  • FIG. 4 shows functions executed by the automatic driving ECU 142 .
  • the automatic driving ECU 142 implements the functions of a remote side abnormality determination unit 1421 , an in-vehicle driving permission unit 1422 , an automatic driving control execution unit 1423 , and a driving information acquisition unit 1424 by executing a program by the processing unit 143 .
  • the remote side abnormality determination unit 1421 sequentially determines whether there is an abnormality in the remote side determination target during remote operation.
  • the remote side determination target is at least one of the remote driver 21 and the remote side system 30 . It is preferable that both the remote driver 21 and the remote system 30 are to be judged on the remote side. That the remote driver 21 has an abnormality means that the remote driver 21 is not in a state suitable for driving. Whether or not the remote driver 21 has an abnormality is determined by whether or not the remote side system 30 notifies that the remote driver 21 is not in a state suitable for driving.
  • the remote side abnormality determination unit 1421 determines that there is no abnormality in the remote driver 21, it also sequentially determines whether the remote driver 21 has any signs of abnormality.
  • a sign of abnormality is determined based on the alertness level of the remote driver 21 . Having a sign of abnormality means that the arousal level is close to abnormal, although it does not become abnormal. For example, it is assumed that the condition for determining that the remote driver 21 is abnormal is that the ratio of time during which the arousal level of the remote driver 21 is within the abnormal range is equal to or greater than the first ratio.
  • the remote driver 21 is given a sign of abnormality.
  • the remote driver 21 is somewhat sleepy, there is an indication that the remote driver 21 is abnormal.
  • the remote side abnormality determination unit 1421 determines whether or not there is an abnormality in the remote side system 30 based on whether information is periodically transmitted from the remote side system 30 . If information is not periodically transmitted from the remote side system 30 in spite of remote operation, it is determined that the remote side system 30 has an abnormality. Moreover, when the signal which notifies abnormality of a system is acquired from the remote side system 30, the automatic operation control execution part 1423 may judge that abnormality has generate
  • FIG. An example of an abnormality in the remote system 30 is an abnormality in the remote communication device 33 .
  • the in-vehicle driving permission unit 1422 sequentially determines whether the in-vehicle driver 12 is permitted to drive the remotely operated vehicle 10 .
  • the remote side abnormality determination unit 1421 has not determined that there is an abnormality in the remote side determination target, the in-vehicle driver 12 is not permitted to drive the remotely operated vehicle 10 .
  • the in-vehicle driving permission unit 1422 compares the arousal levels of the remote driver 21 and the in-vehicle driver 12 when remote driving is in progress and the remote driver 21 has signs of abnormality. Then, the side with the higher arousal level is permitted to drive the remotely operated vehicle 10 .
  • the in-vehicle driving permission unit 1422 sequentially checks whether the remote driver 21 can take over the driving. to decide. Even if the remote driver 21 is not in a state where the driving can be taken over (hereinafter referred to as a driving takeover state), if the in-vehicle driver 12 is in the driving takeover state, the automatic driving control execution unit 1423 continues automatic driving level 3. direct to. However, the driver scheduled to take over the driving is switched to the in-vehicle driver 12 .
  • the in-vehicle driving permission unit 1422 outputs information indicating whether the remote driver 21 is permitted to drive or whether the in-vehicle driver 12 is permitted to drive to the travel control ECU 150 .
  • the travel control ECU 150 does not use the value detected by the operation amount detection sensor 151 for travel control, and uses the driving instruction value transmitted from the remote side system 30 to perform remote driving. Run control of the car 10 is performed.
  • the in-vehicle driving permitting unit 1422 permits in-vehicle driving, that is, when switching from remote driving to in-vehicle driving
  • the in-vehicle notification unit 130 outputs a notification to that effect.
  • the automatic driving control execution unit 1423 combines detection information obtained from the surroundings monitoring sensor 160, locator information and map data obtained from the locator 170, traffic congestion information obtained from the in-vehicle communication device 180, etc., and executes automatic driving. Recognize the driving environment required for The automatic driving control execution unit 1423 sequentially determines the automatic driving level to be currently executed based on the recognized driving environment and ODD. If the determined automatic driving level is an automatic driving level that does not require surroundings monitoring, the automatic driving control execution unit 1423 issues a control command for executing vehicle control for automatically driving the remotely driven vehicle 10 based on the recognized driving environment. are sequentially output to the travel control ECU 150 . However, the automatic driving control execution unit 1423, if the determined automatic driving level is automatic driving level 3, the driver is in a state that can take over the driving according to the request from the system Sequentially judge do.
  • the driving information acquisition unit 1424 acquires driving information and transmits the acquired driving information from the in-vehicle communication device 180 to the remote side system 30 .
  • the driving information includes information indicating the image of the surroundings of the remotely driven vehicle 10, the vehicle speed of the remotely driven vehicle 10, and the steering angle.
  • An image of the surroundings of the remotely driven vehicle 10 is obtained from the surroundings monitoring sensor 160 .
  • the vehicle speed and steering angle of the remotely operated vehicle 10 are obtained from the travel control ECU 150 .
  • FIG. 5 shows the processing performed by the remote control device 36.
  • the remote control device 36 repeatedly executes the processing shown in FIG. 5 during remote operation.
  • the driving information acquisition unit 361 acquires the driving information transmitted from the vehicle-side system 100 from the remote communication device 33 and displays the acquired driving information on the display 351 .
  • the driving information includes information indicating the image of the surroundings of the remotely driven vehicle 10, the vehicle speed of the remotely driven vehicle 10, and the steering angle.
  • the remote driver status notification unit 362 executes S2 to S6.
  • the monitoring result of the remote driver 21 is acquired from the remote driver monitoring device 32 .
  • the monitoring results include whether the remote driver 21 is in a state suitable for driving and the arousal level of the remote driver 21 .
  • a warning is output from the remote driver notification device 35.
  • the monitoring result of the remote driver 21 is acquired from the remote driver monitoring device 32, and it is determined whether or not the remote driver 21 has returned to a state suitable for driving. If the determination result of S5 is also NO, the process proceeds to S6.
  • the administrator notification device 34 outputs that the remote driver 21 is abnormal.
  • the driving instruction value acquisition unit 363 acquires the driving instruction value from the remote control member 31 .
  • S8 is executed by the remote driver status notification unit 362 and the driving instruction value acquisition unit 363 .
  • the remote information is transmitted from the remote communication device 33 to the vehicle side system 100.
  • FIG. The remote information includes whether the remote driver 21 is in a state suitable for driving, the arousal level of the remote driver 21, and driving instruction values.
  • FIGS. 6 and 7 show processing executed by the vehicle-side system 100 when the remotely operated vehicle 10 is remotely operated.
  • the travel control ECU 150 executes S17.
  • Other processes are executed by the automatic driving ECU 142 .
  • the remote side abnormality determination section 1421 determines whether or not the remote information transmitted from the remote side system 30 has been acquired. If the determination result in S11 is NO, the process proceeds to S21 in FIG. 7, which will be described later. If the judgment result of S11 is YES, it will progress to S12.
  • the remote side abnormality determination unit 1421 determines whether the remote side system 30 is normal based on the remote information. If the determination result of S12 is NO, that is, if it is determined that the remote system 30 is abnormal, the process proceeds to S21 of FIG. If it is determined that the remote information cannot be acquired (S11: NO), it is also determined that the remote side system 30 is abnormal. If the judgment result of S12 is YES, it will progress to S13.
  • the remote side abnormality determination unit 1421 determines whether the remote driver 21 is in a state suitable for driving based on the remote information. Also when the determination result of S13 is NO, it progresses to S21 of FIG. If the judgment result of S13 is YES, it will progress to S14.
  • the remote side abnormality determination unit 1421 determines whether or not the remote driver 21 has an abnormality symptom based on the remote driver's 21 arousal level included in the remote information. If the judgment result of S14 is YES, it will progress to S15.
  • the in-vehicle driving permission unit 1422 compares the arousal level of the remote driver 21 and the arousal level of the in-vehicle driver 12. Then, it is determined whether or not the remote driver 21 has a higher arousal level. If the determination result of S15 is NO, the process proceeds to S21 of FIG. If the arousal levels of the two can be compared and the arousal level of the remote driver 21 is higher, the determination result in S15 is YES. Also, when the arousal level of the driver 12 in the vehicle cannot be obtained, such as when the driver 12 in the vehicle is not in the driver's seat 11, the determination result of S15 becomes YES. If the judgment result of S15 is YES, it will progress to S16. Moreover, when the determination result of S14 is NO, it also progresses to S16.
  • the in-vehicle driving permission unit 1422 disallows in-vehicle driving.
  • the travel control ECU 150 acquires the operation amount of the in-vehicle operation member 13 from the operation amount detection sensor 151 .
  • the automatic operation control execution part 1423 outputs the driving instruction value transmitted from the remote side system 30 to driving control ECU150.
  • the travel control ECU 150 performs travel control based on the driving instruction value transmitted from the remote system 30, and does not use the operation amount acquired in S17 for control.
  • the driving information acquisition unit 1424 acquires driving information and transmits the acquired driving information from the vehicle-mounted communication device 180 to the remote system 30 .
  • Fig. 7 will be explained.
  • the travel control ECU 150 executes S33.
  • Other processes are executed by the in-vehicle driving permission unit 1422 .
  • the remotely operated vehicle 10 determines whether or not automatic operation level 3 is being executed. If the automatic driving level 3 is being executed, the determination result of S21 becomes YES and the process proceeds to S22.
  • the state of the driver 12 inside the vehicle is acquired from the driver monitoring device 120 inside the vehicle.
  • the in-vehicle notification unit 130 may notify the switching to in-vehicle driving before executing S22.
  • the driver 12 in the vehicle determines whether or not it is possible to take over driving in response to a request from the automatic driving system 140 . If the judgment result of S23 is YES, it will progress to S24.
  • the remote-driven vehicle 10 is being remotely driven at an automatic driving level of automatic driving level 2 or lower.
  • the state of the driver 12 inside the vehicle is obtained from the driver monitoring device 120 in the vehicle, as in S22. Further, as in the case of executing S22, before executing S27, the in-vehicle notification unit 130 may notify that the vehicle is switched to the driving inside the vehicle.
  • S28 it is determined whether the driver 12 inside the vehicle is in a state suitable for driving. If the determination result of S28 is NO, the process proceeds to S29. If the determination result of S23 is NO, the process also proceeds to S29. In S29, the travel control ECU 150 is instructed to stop the remotely operated vehicle 10 in an emergency. After that, in S30, the traveling control ECU 150 is notified of the permission of driving inside the vehicle. The travel control ECU 150 automatically shifts to an in-vehicle operation mode in which the remotely-operated vehicle 10 travels when the in-vehicle operation member 13 is operated after the remote-operated vehicle 10 is stopped.
  • the in-vehicle notification unit 130 notifies that the vehicle has been switched to in-vehicle driving.
  • the content of notification in S31 is different from that in S26.
  • the automatic driving level is 2 or less. Therefore, the notification at S31 is a notification that makes the user recognize that the urgency is higher than the notification at S26.
  • the notification at S31 may have a louder volume than the notification at S26, or the image may be more conspicuous than the notification at S26.
  • S32 the traveling control ECU 150 is notified of the permission of driving inside the vehicle.
  • S33 travel control is executed using the latest operation amount stored in S17. After that, the process proceeds to S31 described above, and the in-vehicle notification unit 130 notifies that the vehicle has been switched to the in-vehicle operation.
  • the in-vehicle driving permission section 1422 does not permit in-vehicle driving (S16). As a result, it is possible to prevent the in-vehicle driver 12 from performing a driving operation unintended by the remote driver 21 during remote driving.
  • the traveling control ECU 150 sequentially acquires and stores signals indicating the amount of operation of the in-vehicle operation member 13 even when the in-vehicle operation permission unit 1422 does not permit in-vehicle operation (S17). Then, when the in-vehicle driving permission unit 1422 permits the in-vehicle driving, travel control is performed using the stored operation amount.
  • the driver 12 inside the vehicle feels an abnormality in the object to be judged on the remote side and operates the inside operating member 13 before driving inside the vehicle is permitted, the operation is reflected and the remotely driven vehicle 10 is driven. Therefore, the in-vehicle driver 12 can drive the remotely operated vehicle 10 in response to the abnormality to be determined on the remote side.
  • the in-vehicle driving permission unit 1422 Driving operation is permitted on the side with a higher value (S15). Therefore, it is possible to prevent a driver with a low arousal level from driving the remotely operated vehicle 10 .
  • In-vehicle driving permission unit 1422 permits in-vehicle driving when remote side abnormality determination unit 1421 determines that there is an abnormality in the remote side determination target during remote driving at automatic driving level 3 (S11 to S13: NO). (S25).
  • the driver 12 in the vehicle is ready to take over the driving (S23: YES)
  • the driver who notifies the driver in the vehicle 12 of taking over the driving is switched to the driver 12 in the vehicle, and the vehicle continues to run at the automatic driving level 3. (S24).
  • S24 the automatic driving level 3.
  • the in-vehicle driving permission unit 1422 determines that the remote side abnormality determination unit 1421 has determined that there is an abnormality in the remote side determination target (S11 to S13: NO), and if the automatic driving level is 2 or lower (S21: NO), first the remote driving vehicle 10 is stopped (S29). After that, driving inside the vehicle is permitted, and when the in-vehicle operating member 13 is operated, the vehicle automatically shifts to an in-vehicle driving mode in which the remote-operated vehicle 10 travels (S30). Therefore, after the remote-driven vehicle 10 stops, the in-vehicle driver 12 can drive the remotely-driven vehicle 10 by operating the in-vehicle operation member 13 without requiring operation mode switching operation.
  • the in-vehicle driving permission unit 1422 notifies the in-vehicle driving from the in-vehicle notification unit 130 ( S26, S31). Thereby, the occupant of the remotely operated vehicle 10 can recognize that the operation has been switched to the in-vehicle operation.
  • the in-vehicle driving permission unit 1422 determines that there is an abnormality in the remote side determination target when automatic driving level 3 is executed and when automatic driving level 2 or lower is executed. are made different (S26, S31). Specifically, when automatic driving level 2 or lower is being executed, a notification is given to make the driver recognize that the situation is more urgent (S31). As a result, when automatic driving level 2 or lower is being executed, there is a high possibility that the occupant of the remotely driven vehicle 10 can quickly respond to travel control at automatic driving level 2 or lower.
  • the administrator notification device 34 notifies that the remote driver 21 is not in a state suitable for driving based on the indication that the remote driver 21 is not in a state suitable for remote driving. As a result, the remote operation facility 20 can quickly take measures such as changing the remote operator 21 .
  • one remote side system 30 manages the operations of a plurality (a large number) of remotely driven vehicles 10 .
  • the vehicle remote driving system 5 includes a plurality of infrastructure side systems 60 in addition to the remote side system 30 and the plurality of remotely driven vehicles 10 .
  • a remote manager 25 manages operation of a plurality of remotely operated vehicles 10 under the control of the remote side system 30 .
  • a remote driver 21 remotely steers a remotely driven vehicle 10 by monitoring each remotely driven vehicle 10 and taking over a Dynamic Driving Task from the automated driving system 140 when necessary.
  • One remote operator 21 is the main remote operator 22 .
  • the main remote operator 22 preferentially performs remote operation of the remotely operated vehicle 10 when an abnormality occurs in the remotely operated vehicle 10 .
  • the other remote operator 21 is a sub-remote operator 23 .
  • the sub-remote operator 23 remotely operates the remotely-operated vehicles 10 instead of the remote operator 21 when the main remote-operator 22 has an abnormality, or when an abnormality occurs in a plurality of remotely-operated vehicles 10. to implement.
  • the remotely driven vehicle 10 is capable of autonomous driving corresponding to automated driving level 3 while being remotely monitored by the remote driver 21 .
  • the remote driving vehicle 10 is an unmanned automatic driving vehicle that can travel without a driver on board. If the remotely operated vehicle 10 is a vehicle for mobility services, the occupants 14 of the remotely operated vehicle 10 are all passengers.
  • the remote driving vehicle 10 includes at least an automatic driving mode in which the vehicle travels by the automatic driving function while being remotely monitored, a remote controlled mode in which the remote driver 21 remotely controls, and an in-vehicle driving mode in which the in-vehicle driver 12 controls.
  • the cruise control state is switched.
  • the current travel control state of the remotely operated vehicle 10 is displayed on the vehicle exterior display unit 135 mounted on the remotely operated vehicle 10 and notified to pedestrians, cyclists, drivers, etc. around the remotely operated vehicle 10 .
  • the infrastructure-side system 60 is equipped with a surveillance camera 61.
  • the infrastructure-side system 60 is installed on the travel route of the remotely operated vehicle 10 .
  • a large number of infrastructure-side systems 60 may be installed so that the entire travel route of the remote-driven vehicle 10 can be captured without omission, or they may be installed only at specific points such as stops and intersections on the travel route. .
  • the infrastructure-side system 60 can communicate with the remote-side system 30 via a public communication line network.
  • the infrastructure-side system 60 transmits the monitoring video of the travel route captured by the monitoring camera 61 to the remote-side system 30 as infrastructure information.
  • the infrastructure-side system 60 may include an infrastructure sensor different from the surveillance camera 61 . In such a form, the infrastructure sensor detection information is transmitted from the infrastructure side system 60 to the remote side system 30 as infrastructure information.
  • the remote side system 30 of the second embodiment shown in FIGS. 8 and 9 includes a remote control member 31, a remote driver monitoring device 32, a remote communication device 33, an administrator notification device 34, a remote A driver notification device 35 and a remote control device 36 are provided.
  • Two remote control members 31, two remote operator monitoring devices 32, and two remote operator notification devices 35 are provided for the main remote operator 22 and the sub remote operator 23, respectively.
  • the remote driver monitoring device 32 or the remote driver notification device 35 performs identification processing to determine whether the remote driver 21 is a pre-registered authorized person.
  • the identification processing may be face authentication processing using the remote driver monitoring device 32 or authentication processing of an ID and a password input to the remote driver notification device 35 . Through such identification processing, only authorized persons who have been authenticated can perform remote monitoring and remote driving as the remote driver 21 .
  • the administrator notifying device 34 may perform identification processing to determine whether the remote administrator 25 is a legitimate person.
  • the remote control device 36 operates as a remote monitoring unit 366, a presentation control unit 367, and a remote support operation unit 368 by executing programs stored in nonvolatile memory.
  • the remote monitoring unit 366 includes the functions of the driving information acquisition unit 361 (see FIG. 2) of the first embodiment.
  • the remote monitoring unit 366 sequentially acquires the operational information and infrastructure information received by the remote communication device 33 .
  • the driving information is information necessary for remote monitoring and remote driving of the remotely driven vehicle 10 and is transmitted by each remotely driven vehicle 10 .
  • the infrastructure information is a real-time monitoring image of the traveling route of the remotely operated vehicle 10 and is transmitted by each infrastructure-side system 60 .
  • the presentation control unit 367 includes the function of the remote driver state notification unit 362 (see FIG. 2) of the first embodiment.
  • the presentation control unit 367 controls presentation of information to the remote administrator 25 by the administrator notification device 34 and presentation of information to the main remote operator 22 and the sub remote operator 23 by the two remote operator notification devices 35. .
  • the presentation control unit 367 causes the displays 341 and 351 to display the driving information and infrastructure information acquired by the remote monitoring unit 366 .
  • the displays 341 and 351 at least the image from the camera unit 161 (see FIG. 3) and the image from the monitoring camera 61 are displayed.
  • the presentation control unit 367 grasps through the remote support operation unit 368 that an abnormality of the remote driver 21 has been detected.
  • the presentation control unit 367 detects an abnormality of the remote driver 21, the presentation control unit 367 controls the remote driver notification device 35 and issues a warning.
  • the presentation control unit 367 sends not only the remote operator notification device 35 of the main remote operator 22 but also the remote operator notification device 35 of the sub remote operator 23 and the management
  • the person notifying device 34 also issues a warning.
  • the presentation control unit 367 outputs not only the remote-driver notification device 35 of the sub-remote operator 23 but also the remote-driver notification device of the main remote operator 22. 35 and administrator notification device 34 also issue a warning.
  • the remote support operation unit 368 includes the function of the driving instruction value acquisition unit 363 (see FIG. 2) of the first embodiment.
  • the remote support operation unit 368 remotely detects the occurrence of an abnormality in the remotely operated vehicle 10. It is grasped through the communication device 33 and the remote monitoring unit 366 .
  • the remote support operation unit 368 starts remote operation in cooperation with the vehicle-side system 100 based on the abnormality detection of the remotely operated vehicle 10 .
  • the remote support operation unit 368 determines which of the main remote operator 22 and the sub remote operator 23 will be the remote operator 21, and gives driving instructions from the remote operation member 31 linked to the remote operator 21. get the value.
  • the remote support operation unit 368 transmits the acquired driving instruction value to the specific remotely operated vehicle 10 in which an abnormality has occurred through the remote communication device 33 .
  • the remote support control unit 368 acquires the monitoring results of the remote driver 21 from the remote driver monitoring device 32 .
  • the remote support operation unit 368 cooperates with the presentation control unit 367 to issue a warning to the remote driver 21 using the remote driver notification device 35. . If the abnormal state of the remote driver 21 is not improved even after the warning, the remote support control unit 368 determines whether the remote driver 21 is abnormal.
  • the remote support operation unit 368 notifies each remotely operated vehicle 10 through the remote communication device 33 that an abnormality has occurred in the remote driver 21 based on the definite determination.
  • the remote support operation unit 368 sends information indicating that the authority of remote operation has been transferred to the sub remote operator 23 (hereinafter referred to as replacement information) to each remote operator. Send to car 10 .
  • the remote support operation unit 368 determines whether or not there is a backup remote operator 21 (hereinafter referred to as a substitute) who can take over remote operation when an abnormality is confirmed in the main remote operator 22 or the sub-remote operator 23. to each remotely operated vehicle 10.
  • a vehicle-side system 100 of the second embodiment shown in FIGS. 8 and 10 includes an in-vehicle notification unit 130, a travel control ECU 150, a surrounding monitoring sensor 160, a locator 170, an in-vehicle communication device 180, and an automatic A driving ECU 142 is provided.
  • the vehicle-side system 100 further includes an occupant information acquisition device 220 and an exterior display unit 135 .
  • the occupant information acquisition device 220 includes the functions of the in-vehicle driver monitoring device 120 (see FIG. 3) of the first embodiment.
  • the occupant information acquisition device 220 monitors the interior of the vehicle (passenger cabin) of the remotely operated vehicle 10 and detects the occurrence of sudden illness, injury, and the like.
  • the occupant information acquisition device 220 sequentially monitors whether the driver 12 in the vehicle is in a state suitable for driving while the driver 12 in the vehicle is driving.
  • the occupant information acquisition device 220 acquires occupant information on a specific occupant 14 (hereinafter referred to as a specific occupant 14s) who is seated in the driver's seat 11 and attempts to operate the in-vehicle operation member 13 when driving inside the vehicle is permitted. .
  • the occupant information acquisition device 220 captures the face of the specified occupant 14s and the driver's license presented by the specified occupant 14s, and acquires the face image and the driver's license image.
  • the face image and license image are used as passenger information of the specific passenger 14s, and are transmitted to the remote side system 30 through the automatic driving ECU 142 and the in-vehicle communication device 180.
  • the vehicle exterior display unit 135 displays information toward the exterior of the remotely driven vehicle 10 as described above.
  • the vehicle-exterior display unit 135 may be a display capable of displaying characters, or may be configured to indicate information by changing the light emission mode.
  • At least one of a front display section 136 , a side display section 137 , and a rear display section 138 is provided as a vehicle exterior display section 135 in the remote driving vehicle 10 .
  • the front display unit 136 is installed in front of the remotely driven vehicle 10 with a display surface facing forward of the remotely driven vehicle 10 .
  • the side display units 137 are installed on the left and right sides of the remote-driven vehicle 10, respectively.
  • the rear display unit 138 is installed on the rear surface of the remotely operated vehicle 10 with the display surface facing the rear of the remotely operated vehicle 10 .
  • the automatic operation ECU 142 has the function of a remote monitoring operation type automatic operation device.
  • the automatic driving ECU 142 implements the functions of a state determination unit 1426, a mode switching unit 1427, a vehicle monitoring unit 1428, and a driving execution unit 1429 by executing a program by the processing unit 143 (see FIG. 3).
  • the state determination unit 1426 includes the function of the remote side abnormality determination unit 1421 (see FIG. 4) of the first embodiment. Based on the information from the remote system 30 received by the in-vehicle communication device 180, the state determination unit 1426 continuously monitors the remote side determination target. When the state determination unit 1426 determines that an abnormality has occurred in the remote determination target, the state determination unit 1426 shares information on the occurrence of the abnormality with the mode switching unit 1427 . Anomalies to be judged on the remote side include anomaly or signs of anomaly in one of the two remote drivers 21, an anomaly in communication with the remote system 30, and the like. Communication anomalies include, in addition to deterioration of the communication state, hijacking of communication by a malicious third party (session hijacking). When the state determination unit 1426 determines that the abnormality has been resolved or determines that the abnormality was an erroneous detection, the state determination unit 1426 shares information on the resolution of the abnormality with the mode switching unit 1427 .
  • the mode switching unit 1427 includes the function of the in-vehicle driving permission unit 1422 (see FIG. 4) of the first embodiment.
  • the mode switching unit 1427 cooperates with the travel control ECU 150 to switch the travel control state of the vehicle-side system 100 among a plurality of modes including the above-described automatic driving mode, remote control mode, and in-vehicle driving mode.
  • the mode switching unit 1427 switches the driving control state from the automatic driving mode to the remote control mode in a scene where the driving execution unit 1429 cannot continue autonomous driving at automatic driving level 3 or higher.
  • the mode switching unit 1427 decides to suspend the automatic driving mode based on the suspension proposal presented by the vehicle monitoring unit 1428, and switches to the remote control mode.
  • the mode switching unit 1427 transmits a request for operation (Request for Operation) to the remote system 30 through the in-vehicle communication device 180, that is, a request for remote operation.
  • Mode switching unit 1427 receives information indicating the occurrence of an abnormality from state judgment unit 1426, and when it grasps the abnormality of the remote side judgment object, similar to the first embodiment, the mode switching unit 1427 switches from the remote control mode to the in-vehicle operation mode. Toggle control state. Also in the second embodiment, the mode switching unit 1427 does not switch to the in-vehicle operation mode when there is no abnormality in the remote side determination target.
  • the driving control ECU 150 drives the remotely driven vehicle 10 based on the control command input from the driving execution unit 1429 . Further, when the travel control state is the remote control mode, the travel control ECU 150 causes the remotely operated vehicle 10 to travel based on the driving instruction value received from the remote side system 30 through the in-vehicle communication device 180 . Further, when the travel control state is the in-vehicle operation mode, the travel control ECU 150 causes the remotely operated vehicle 10 to travel based on the driving instruction value input from the operation amount detection sensor 151 .
  • the mode switching unit 1427 switches the driving control state
  • the automatic driving ECU 142 and the driving control ECU 150 always bring the remotely driven vehicle 10 into a stopped state.
  • the mode switching unit 1427 performs the process of starting and ending the remote operation mode or the in-vehicle operation mode while the remote operation vehicle 10 is stopped.
  • the handover of driving between the automatic driving ECU 142 and the remote driver 21 and the handover of driving between the remote driver 21 and the in-vehicle driver 12 are performed while the remotely driven vehicle 10 is stopped. .
  • the mode switching unit 1427 controls information notification by the in-vehicle notification unit 130 and the external display unit 135.
  • the mode switching unit 1427 uses the in-vehicle notification unit 130 to notify the passenger 14 of the switching before the remote-driven vehicle 10 stops.
  • the mode switching unit 1427 causes the vehicle exterior display unit 135 to display the current travel control state.
  • the vehicle monitoring unit 1428 includes the functions of the driving information acquisition unit 1424 (see FIG. 4) of the first embodiment.
  • the vehicle monitoring unit 1428 acquires various types of information indicating the environment outside the vehicle, the environment inside the vehicle, and the vehicle state of the remotely operated vehicle 10, and monitors the acquired information.
  • the vehicle monitoring unit 1428 acquires an image of the surroundings of the remotely operated vehicle 10 from the camera unit 161 (see FIG. 3), and together with information indicating the running state of the remotely operated vehicle 10, the remote side system image is transmitted through the in-vehicle communication device 180. 30 sequentially.
  • the vehicle monitoring unit 1428 proposes suspension of the automatic driving mode to the mode switching unit 1427 based on information detected by the surroundings monitoring sensor 160 and the like.
  • the vehicle monitoring unit 1428 detects obstacles that are difficult to recognize or avoid on the planned travel route of the remote-driven vehicle 10, or when the detection capability of the perimeter monitoring sensor 160 is significantly degraded due to bad weather or the like. , proposes to suspend the autonomous driving mode.
  • the vehicle monitoring unit 1428 grasps the state of the occupant 14 based on the information acquired from the occupant information acquisition device 220.
  • the vehicle monitoring unit 1428 requests the operation execution unit 1429 to temporarily stop the remotely operated vehicle 10, and notifies the occurrence of an abnormality in the passenger compartment via in-vehicle communication.
  • the remote side system 30 is notified through the machine 180 .
  • the driving execution unit 1429 includes the functions of the automatic driving control execution unit 1423 (see FIG. 4) of the first embodiment.
  • the driving execution unit 1429 recognizes the driving environment using detection information obtained from the surroundings monitoring sensor 160 and locator information and map data obtained from the locator 170, and executes automatic driving in the automatic driving mode.
  • the driving execution unit 1429 generates control commands for executing vehicle control for automatically driving the remotely operated vehicle 10 based on the recognized driving environment, and sequentially outputs the generated control commands to the driving control ECU 150 .
  • the driving execution unit 1429 may be capable of implementing autonomous driving control of automatic driving level 4 or higher, or may be capable of implementing driving support control of less than automatic driving level 3.
  • FIG. 11 to 13 the details of each process executed by the automatic driving ECU 142 will be described based on FIGS. 11 to 13 and with reference to FIGS. 9 and 10.
  • FIG. 9 the details of each process executed by the automatic driving ECU 142 will be described based on FIGS. 11 to 13 and with reference to FIGS. 9 and 10.
  • the automatic driving ECU 142 executes the processing shown in FIG. 11 (hereinafter referred to as remote abnormality handling processing) based on the start of the remote control mode to prepare for the occurrence of an abnormality targeted for remote determination.
  • remote abnormality handling processing the processing shown in FIG. 11 (hereinafter referred to as remote abnormality handling processing) based on the start of the remote control mode to prepare for the occurrence of an abnormality targeted for remote determination.
  • the state determination unit 1426 determines whether or not an abnormality in the remote side determination target has been detected.
  • state determination unit 1426 allows erroneous detection of abnormalities, and detects not only definite abnormalities but also abnormalities with low accuracy. If the determination result of S201 is NO, the state determination unit 1426 continues the abnormality detection of S201.
  • the process proceeds to S202.
  • S ⁇ b>202 when it is determined that there is an abnormality in the remote determination target, the travel control ECU 150 stops the remotely driven vehicle 10 based on a command from the mode switching unit 1427 or the driving execution unit 1429 .
  • the state determination unit 1426 determines whether or not the abnormality detected in S201 has been resolved.
  • the state determination unit 1426 determines that the abnormality has been resolved. determine that it has been resolved.
  • the process proceeds to S204. Also, when it is confirmed that the abnormality detected in S201 is an erroneous detection, the process proceeds to S204.
  • the mode switching unit 1427 determines continuation of the remote operation mode and permits resumption of remote operation.
  • the traveling control ECU 150 restarts traveling by remote control based on the remote operation instruction value.
  • the control flow returns to S201, and the abnormality detection by the state determination unit 1426 is continued. According to the above, even when the remote-driven vehicle 10 stops due to an erroneous detection, it can resume traveling based on confirmation of an erroneous detection.
  • the state determination unit 1426 determines in S205 whether or not timeout has occurred. The state determination unit 1426 waits for the abnormality to be resolved until timeout occurs. If the timeout occurs while the abnormality is not resolved and the determination result in S205 becomes YES, the mode switching unit 1427 determines to end the remote control mode in S206. The mode switching unit 1427 permits in-vehicle driving by switching the traveling control state from the remote control mode to the in-vehicle driving mode in S206.
  • the vehicle monitoring unit 1428 cooperates with the occupant information acquisition device 220 to acquire occupant information regarding the specific occupant 14s sitting in the driver's seat 11 .
  • the vehicle monitoring unit 1428 provides the acquired occupant information to the remote side system 30 by transmission.
  • the occupant information is displayed on displays 341 and 351 by remote side system 30 and presented to remote operator 21 or remote administrator 25 .
  • the remote driver 21 or the remote manager 25 determines whether or not to allow the specific crew member 14 s to drive in the vehicle based on the displayed crew information, and inputs the judgment result to the remote side system 30 .
  • the remote driver 21 or the remote manager 25 can determine that the specific crew member 14s is the holder of the driver's license based on the photograph of the driver's license and the face image of the specific crew member 14s. If possible, allow driving inside the vehicle.
  • the determination result of the remote side system 30 is transmitted to the automatic driving ECU 142 .
  • the mode switching unit 1427 uses the passenger information to further determine whether or not to permit the specific passenger 14s to drive inside the vehicle. In S208, the mode switching unit 1427 determines whether or not to allow the specified passenger 14s to drive in the vehicle according to the determination result obtained from the remote system 30, which is based on the passenger information. However, when communication with the remote system 30 is interrupted, the mode switching unit 1427 may itself determine whether to permit driving in the vehicle using the passenger information. In this case, the mode switching unit 1427 permits the specific crew member 14s to drive inside the vehicle when it can be verified that the face photograph on the driver's license is the photograph of the specific crew member 14s. If the determination result of S208 is NO, the remote abnormality handling process is terminated. In this case, the remotely operated vehicle 10 is in a standby state while stopped. On the other hand, if the determination result of S208 is YES, the process proceeds to S209.
  • the vehicle monitoring unit 1428 registers the specific passenger 14s as the driver 12 in the vehicle.
  • the occupant information of the specific occupant 14 s is stored in at least one of the remote control device 36 and the automatic driving ECU 142 .
  • the mode switching unit 1427 and the travel control ECU 150 set travel restrictions. Specifically, when the mode switching unit 1427 permits in-vehicle driving, the traveling speed of the remotely operated vehicle 10 is restricted more than when traveling by remote operation. As an example, if the remotely operated vehicle 10 is a vehicle traveling on a general road, the traveling speed is limited to approximately half the speed limit of the road (approximately 30 km/h). In addition, when the remotely operated vehicle 10 is a low-speed vehicle, the running speed is limited to 5-10 km/h. Then, in S211, the mode switching unit 1427 starts the in-vehicle driving. As a result, the travel control ECU 150 restarts the travel of the remote-operated vehicle 10 based on the operation instruction value for in-vehicle operation. With the above, the remote abnormality handling process ends.
  • the mode switching unit 1427 executes the process shown in FIG. 12 (hereinafter referred to as vehicle-exterior display process) based on activation of the vehicle-side system 100 .
  • the mode switching unit 1427 continues the vehicle exterior display process until the vehicle system 100 is powered off.
  • the vehicle exterior display unit 135 continuously displays the driving state information indicating whether the remotely operated vehicle 10 is traveling by automatic driving, remote driving, or in-vehicle driving.
  • the travel control state is grasped. Then, in S232, based on the traveling control state grasped in S232, the operating mode in operation is discriminated. If the travel control state is the automatic driving mode, the mode switching unit 1427 displays characters or an image indicating that the remote-driven vehicle 10 is automatically driving outside the vehicle in S233 as an automatic driving display. Displayed on the display unit 135 . On the other hand, if the travel control state is the remote control mode, the mode switching unit 1427 displays text or an image indicating that the remote-controlled vehicle 10 is currently being remotely controlled on the external display unit 135 in S234. display.
  • the mode switching unit 1427 displays characters or an image indicating that the remote-operated vehicle 10 is driving in the vehicle on the exterior display unit 135 in S235 as an in-vehicle driving display. display.
  • the automatic driving mode is a travel control state in which the remotely operated vehicle 10 is traveling without anomalies. Therefore, the mode switching unit 1427 does not have to display automatic driving. That is, the mode switching unit 1427 may use the vehicle exterior display unit 135 to perform only the display during remote driving and the display during driving inside the vehicle.
  • the mode switching unit 1427 executes the process shown in FIG. 13 (hereinafter referred to as vehicle-side process) based on the start of the remote operation mode.
  • vehicle-side processing the automatic driving ECU 142 remotely monitors the state of the remote driver 21 .
  • the mode switching unit 1427 cooperates with the state judgment unit 1426 to grasp the abnormality of the remote operator 21 of the remote operation facility 20 .
  • the mode switching unit 1427 determines whether there is replacement information indicating replacement of the remote operator 21 at the remote operation facility 20 . If there is no change information, the determination of S251 is continued.
  • the mode switching unit 1427 uses the in-vehicle notification unit 130 to perform notification based on the replacement information in S252.
  • the mode switching unit 1427 cooperates with the state determination unit 1426 to ascertain whether or not there is a replacement worker for remote operation.
  • the mode switching unit 1427 determines that there is no substitute (S253: NO).
  • the mode switching unit 1427 determines that there is a substitute operator (S253: YES ).
  • the process returns to S251 to continue the vehicle-side processing.
  • the mode switching unit 1427 cooperates with the travel control ECU 150 to limit part of the traveling functions of the remotely operated vehicle 10 in S254.
  • the mode switching unit 1427 sets the upper limit of the running speed of the remote-driven vehicle 10 lower than when there is a replacement worker.
  • the mode switching unit 1427 may apply restrictions such as prohibiting a lane change to an overtaking lane, or permitting only the operation of opening the door of the remote-driven vehicle 10 to prohibit the traveling itself.
  • the mode switching unit 1427 may perform vehicle-side processing even while the vehicle is running in the automatic driving mode. In this case, the mode switching unit 1427 restricts the driving function of automatic driving by the driving execution unit 1429 in consideration of the deterioration of the monitoring ability of the remote driver 21 .
  • FIG. 14 and 15 the details of each process executed by the remote system 30 will be described based on FIGS. 14 and 15 with reference to FIGS. 9 and 10.
  • FIG. 14 and 15 the details of each process executed by the remote system 30 will be described based on FIGS. 14 and 15 with reference to FIGS. 9 and 10.
  • FIG. 14 and 15 the details of each process executed by the remote system 30 will be described based on FIGS. 14 and 15 with reference to FIGS. 9 and 10.
  • the remote monitoring unit 366 grasps the details of the abnormality that has occurred in the remotely operated vehicle 10. At S ⁇ b>271 , the remote monitoring unit 366 further grasps whether or not a remote driving execution request has been acquired from the remotely driven vehicle 10 . In S272, the presentation control unit 367 notifies the remote operator 21 and the remote administrator 25 of the content of the abnormality grasped in S271.
  • the remote monitoring unit 366 determines whether or not requests for remote driving have been obtained from a plurality of remotely driven vehicles 10. If the determination result of S273 is NO, the process proceeds to S276. On the other hand, if the determination result in S273 is YES, the remote monitoring unit 366 determines the priority of remote operation of each remotely operated vehicle 10 based on the state of abnormality occurring in each remotely operated vehicle 10 in S274. do.
  • the remote monitoring unit 366 assigns the remotely driven vehicle 10 that has encountered a scene related to a traffic accident to be the remotely driven vehicle 10 with the highest remote driving priority.
  • the remote monitoring unit 366 gives the second highest remote driving priority to the remotely driven vehicle 10 that encounters a scene in which if it were to stop, it would block the road and impede the passage of other vehicles. Assume that the remote driving vehicle 10 is used.
  • the remote monitoring unit 366 sets the remotely driven vehicle 10 blocking the road by stopping as the remotely driven vehicle 10 with the third highest remote driving priority.
  • the priority of the remotely-driven vehicle 10 that encountered the abnormality first may be set higher.
  • the presentation control unit 367 notifies the remote driver 21 of the remote-driven vehicle 10 with a high priority for remote driving, along with the details of the abnormality occurring in this remote-driven vehicle 10 .
  • the remote driver 21 refers to the notification of the priority and determines the remotely operated vehicle 10 to be remotely operated, that is, the remotely operated vehicle 10 to which the remote support operation unit 368 provides remote operation instruction values.
  • the remote monitoring unit 366 determines whether the abnormality has been resolved. If one or more remotely operated vehicles 10 are still in an abnormal state (276: NO), return to S271 to continue anomaly and priority notification. On the other hand, if all the abnormalities have been resolved (276: YES), the abnormality notification is terminated in S277. In S277, the resolution of the abnormality may be notified.
  • the remote control device 36 starts the processing (hereinafter referred to as row management processing) shown in FIG. 15 .
  • Platooning is a state in which a plurality of (two or more) remotely operated vehicles 10 are running in a row while automatically maintaining a distance between them.
  • the remote monitoring unit 366 ascertains the content of the abnormality occurring in the remotely operated vehicle 10 (hereinafter referred to as the abnormal vehicle) and the location of the abnormal vehicle in the platoon. Furthermore, in S292, the remote monitoring unit 366 determines whether or not the vehicle with the abnormality can continue running. If the determination result of S292 is NO, the row management process ends. In this case, the remote operation facility 20 is required to temporarily stop all of the remotely operated vehicles 10 in the platoon and move the passengers 14 boarding the abnormal vehicle to other normal remotely operated vehicles 10. (Remote operator 21 or remote administrator 25).
  • the remote monitoring unit 366 determines in S293 whether or not the vehicle with the abnormality is the front remote vehicle.
  • a front remote vehicle is a remotely driven vehicle 10 that travels ahead of other remotely driven vehicles 10 .
  • the remote support control unit 368 provides a platoon change instruction to each remotely operated vehicle 10 in the platoon in S294.
  • the platoon change instruction is an instruction to switch the front-rear positions of the front remote vehicle, which is the abnormal vehicle, and the rear remote vehicle, which is the normal remote-driven vehicle 10 .
  • the normal remotely operated vehicle 10 overtakes the stopped abnormal vehicle and moves in front of the abnormal vehicle. As described above, platooning is continued with the abnormal vehicle following the normal remotely operated vehicle 10 .
  • the remote support operation unit 368 provides each remotely operated vehicle 10 with an instruction to maintain formation in S295. As described above, the platooning is continued in such a manner that the abnormal vehicle follows the normal remotely operated vehicle 10 .
  • the remote monitoring unit 366 determines whether the abnormal vehicle is the leading vehicle or the last vehicle in the platoon. If the malfunctioning vehicle is the leading or trailing vehicle, remote assistance controls 368 provide instructions to each remotely operated vehicle 10 to move the malfunctioning vehicle to the middle of the platoon. As described above, the platooning is continued while the abnormal vehicle is protected in front and behind by the normal remotely operated vehicles 10 .
  • the second embodiment described above also has the same effect as the first embodiment.
  • the traveling control ECU 150 that controls the traveling of the remotely operated vehicle 10 makes the traveling speed of the remotely operated vehicle 10 higher than when traveling by remote operation. Limit (S210). Therefore, even after the in-vehicle driver 12, who is less accustomed to driving than the remote driver 21, takes over the control of the driving operation, the remotely operated vehicle 10 can continue to run stably.
  • the mode switching unit 1427 further determines whether or not to permit the specific passenger 14s to drive inside the vehicle based on the passenger information regarding the specific passenger 14s who attempts to operate the in-vehicle operation member 13 when the operation inside the vehicle is permitted ( S208). Therefore, it is possible to avoid a situation in which the right of control of the driving operation is taken over by an unfavorable passenger 14 .
  • the mode switching unit 1427 acquires from the remote side system 30 the determination result based on the occupant information, which determines whether or not the specific occupant 14s is permitted to drive inside the vehicle. Then, the mode switching unit 1427 determines whether or not to permit the specific passenger 14s to drive in the vehicle according to the acquired determination result (S208). According to the above, whether or not the specific crew member 14s is suitable for driving the remotely operated vehicle 10 can be determined more appropriately. As a result, the remotely operated vehicle 10 can continue to run stably even after shifting to in-vehicle operation.
  • the mode switching unit 1427 uses the in-vehicle notification unit 130 provided in the remote-driven vehicle 10 to change the change. A notification based on the information is made (S252). According to the above, even if a change in behavior occurs due to the change of the remote driver 21, the occupant 14 of the remote-operated vehicle 10 is less likely to feel uneasy.
  • the mode switching unit 1427 ascertains whether or not there is a substitute for the remote driver 21 who performs remote driving, and if there is no substitute, restricts some of the traveling functions of the remotely driven vehicle 10 (S254). According to the above, appropriate risk management is possible even in a form in which the operations of a plurality of remotely operated vehicles 10 are managed by the remote side system 30 .
  • the remote support control unit 368 provides driving instruction values for remote operation to a specific remotely operated vehicle 10 among the plurality of remotely operated vehicles 10 under the control of the remote side system 30 .
  • the presentation control unit 367 notifies the remote driving vehicle 10 with a high priority for remote driving to the remote driver 21 (S275). According to the above, even if the operation of a plurality of remotely operated vehicles 10 is managed by the remote side system 30, the remote driver 21 can select the remotely operated vehicle 10 to be remotely operated by taking over the driving operation. , can be selected appropriately.
  • the remote support control unit 368 can Instructions are provided to the rear remote vehicle and the front remote vehicle to switch the front and rear positions (S294). According to the above, it is possible to continue platooning even when a slight abnormality occurs. As a result, the convenience of the occupant 14 can be ensured while appropriately managing risks.
  • the mode switching unit 1427 causes the vehicle exterior display unit 135, which displays information to the outside of the vehicle, to display driving state information indicating whether the remotely driven vehicle 10 is running by remote driving or in-vehicle driving. According to the above, pedestrians and the like around the remotely operated vehicle 10 are less likely to feel uneasy about the remotely operated vehicle 10 .
  • the occupant information acquisition device 220 corresponds to the "in-vehicle driver monitoring device”
  • the travel control ECU 150 corresponds to the "travel control unit”
  • the presentation control unit 367 corresponds to the "notification control unit”.
  • the remote support control unit 368 corresponds to the "instruction providing unit”.
  • the state determination unit 1426 corresponds to the "remote side abnormality determination unit”
  • the mode switching unit 1427 corresponds to the "in-vehicle driving permission unit”.
  • In-vehicle driving permitting section 1422 may allow the occupant only to operate the brake as in-vehicle driving when permitting in-vehicle driving.
  • the remote driving vehicle 10 may output different notifications from the administrator notification device 34 depending on whether automatic driving level 3 or lower is being executed. . Specifically, the notification is made to recognize that the urgency is higher when automatic driving level 2 or lower is being performed than when automatic driving level 3 is being performed.
  • driving operation by the in-vehicle operating member 13 may be disabled by locking or disconnecting the mechanical mechanism between the in-vehicle operating member 13 and the corresponding actuator.
  • the remote side abnormality determination unit 1421 determines whether the remote driver 21 and the remote side system 30 are abnormal. However, the remote side abnormality determination section 1421 may determine that only one of the remote driver 21 and the remote side system 30 is abnormal.
  • the remote driving car 10 may be a car without the driver's seat 11. It is conceivable that the driver's seat 11 may not be necessary, such as when the in-vehicle operating member 13 is only a button for stopping the remote-operated vehicle 10 .
  • the ECU and control device described in this disclosure are the control units described below.
  • the controller and techniques thereof may be implemented by a special purpose computer comprising a processor programmed to perform one or more functions embodied by a computer program.
  • the controller and techniques described in this disclosure may be implemented by dedicated hardware logic circuitry.
  • the controller and techniques described in this disclosure may be implemented by one or more dedicated computers configured by a combination of a processor executing a computer program and one or more hardware logic circuits.
  • Hardware logic circuits are, for example, ASICs and FPGAs.
  • the storage medium for storing computer programs is not limited to ROM.
  • Various programs may be stored in a computer-readable non-transitory tangible storage medium as instructions executed by a computer.
  • the program may be stored in a flash memory.
  • the form of the storage medium may be changed as appropriate.
  • Such a storage medium is not limited to a configuration provided on a circuit board, but is provided in the form of a memory card or the like, is inserted into a slot, and is electrically connected to a control circuit such as an automatic driving ECU or a remote control device. may be configured to be
  • the storage medium may be an optical disk or hard disk drive, etc., which is the source of copying or distributing the program to the autonomous driving ECU or the remote control device.
  • a remote side abnormality determination unit (1421, 1426) for sequentially determining whether or not there is an abnormality in a remote side determination target, which is at least one of the remote driver and the remote side system (30) operated by the remote driver;
  • an in-vehicle operation permission unit (1422, 1427) for permitting the in-vehicle operation when the remote side abnormality determination unit determines that the remote side determination object has an abnormality.
  • the remote side abnormality determination unit sequentially determines whether there is an abnormality in the remote driver and whether there is an abnormality in the remote system, The vehicle remote driving system, wherein the in-vehicle driving permission unit does not permit the in-vehicle driving when the remote abnormality determination unit determines that neither the remote driver nor the remote system is abnormal.
  • a vehicle remote driving system according to technical idea 2
  • a travel control unit (150) provided in the remote-operated vehicle for controlling travel of the remote-operated vehicle based on the driving instruction value acquired from the remote-side system
  • the travel control unit can also control travel of the remote-operated vehicle based on the amount of operation of the in-vehicle operation member, and when the in-vehicle operation permission unit does not permit the in-vehicle operation, Also, when the in-vehicle operation permission unit permits the in-vehicle operation, the remote operation is performed based on the acquired signal indicating the operation amount.
  • a remote vehicle driving system that controls the driving of a vehicle.
  • the remote-operated vehicle includes a driver's seat (11) in which the in-vehicle operating member is operated, and an in-vehicle driver monitoring device (120) that sequentially determines the arousal level of the in-vehicle driver sitting in the driver's seat. , 220) and The remote side abnormality determination unit sequentially determines whether or not at least the remote driver has an abnormality, and also sequentially determines whether or not the remote driver has an abnormality symptom based on the remote driver's arousal level.
  • the in-vehicle driving permission unit determines the arousal level of the in-vehicle driver when the remote side abnormality determination unit determines that the remote driver has a symptom of an abnormality.
  • a vehicle remote driving system that permits a driving operation to a side of the remote driver and the in-vehicle driver with a higher arousal level, if there is one. (Technical idea 5)
  • a vehicle remote driving system according to any one of technical ideas 1 to 3 The remote driving vehicle is capable of automatic driving without monitoring obligation, which requires the driver to be in a state where the driver can take over the driving, although the driver is not obligated to monitor the surroundings, and is capable of sitting down when operating the in-vehicle operation member.
  • the in-vehicle driving permission unit permits the in-vehicle driving when the remote side abnormality determination unit determines that the remote side determination target has an abnormality during the remote operation and the automatic operation without monitoring obligation.
  • a vehicle remote driving system that, when the driver in the vehicle is in a state where the driver can take over the driving, switches the driver in the automatic driving without monitoring obligation to the driver in the vehicle and continues the automatic driving without monitoring obligation. .
  • (Technical idea 6) A vehicle remote driving system according to any one of technical ideas 1 to 4, The in-vehicle remote driving system, wherein the in-vehicle operation permission unit permits only a brake operation as the in-vehicle operation.
  • (Technical idea 7) A vehicle remote driving system according to any one of technical ideas 1 to 6, A travel control unit (150) for controlling travel of the remote-operated vehicle; The vehicle remote driving system, wherein when the in-vehicle driving permission unit permits the in-vehicle driving, the driving control unit limits the driving speed of the remote driving vehicle more than when the vehicle is driven by the remote driving.
  • the vehicle remote driving system according to technical idea 6 or 7, The in-vehicle driving permission unit further determines whether or not to allow the specific occupant (14s) to attempt to operate the in-vehicle operation member when the in-vehicle driving is permitted. Decide, vehicle remote driving system.
  • a vehicle remote driving system according to technical idea 8 The in-vehicle driving permission unit Acquiring from the remote side system a determination result based on the occupant information, which determines whether or not the specific occupant is permitted to drive in the vehicle; A vehicle remote driving system that determines whether or not to permit the specific passenger to drive in the vehicle according to the determination result.
  • (Technical idea 10) A vehicle remote driving system according to any one of technical ideas 1 to 9, The in-vehicle driving permission unit stopping the remote-operated vehicle when the remote-side abnormality determination unit determines that the remote-side determination object has an abnormality; A vehicle remote driving system that permits resuming of traveling by remote driving when a resolution process for resolving the abnormality to be determined on the remote side is performed after the remote driving vehicle is stopped. (Technical idea 11) A vehicle remote driving system according to any one of technical ideas 1 to 10, The in-vehicle operation permission unit stops the remote-operated vehicle when the remote-side abnormality determination unit determines that there is an abnormality in the remote-side determination target, and then permits the in-vehicle operation.
  • a vehicle remote driving system that, when operated, automatically transitions to an in-vehicle driving mode in which the remotely driven vehicle travels.
  • the in-vehicle driving permission unit uses an in-vehicle notification unit (130) provided in the remote-operated vehicle when the shift information indicating the shift of the remote driver who performs the remote driving is acquired from the remote system.
  • a vehicle remote driving system that performs notification based on the shift information.
  • (Technical idea 13) A vehicle remote driving system according to technical idea 12, The vehicle remote driving system, wherein the in-vehicle driving permission unit grasps whether or not there is a substitute for the remote driver who performs the remote driving, and restricts a part of the driving function of the remotely driven vehicle when there is no substitute for the remote driver. .
  • (Technical idea 14) A vehicle remote driving system according to any one of technical ideas 1 to 13, The in-vehicle driving permitting unit instructs the in-vehicle driving from an in-vehicle notification unit (130) provided in the remote-operated vehicle when the remote-side abnormality determination unit determines that there is an abnormality in the remote-side determination target. A vehicle remote driving system that notifies you of switching.
  • the vehicle remote driving system according to Technical Thought 14,
  • the remote driving vehicle is capable of switching between automatic driving without a monitoring obligation, in which the remote driver is not obligated to monitor the surroundings, and automatic driving with a monitoring obligation, in which the remote driver is obligated to monitor the surroundings,
  • the in-vehicle operation permission unit determines whether the remote side abnormality determination unit detects an abnormality in the remote side determination target when the automatic driving without monitoring obligation is being performed and when the automatic driving with monitoring obligation is being performed.
  • a vehicle remote driving system that varies the notification content when it is determined that there is (Technical idea 16)
  • a vehicle remote driving system according to any one of technical ideas 1 to 15, a remote driver monitoring device (32) for sequentially monitoring whether the remote driver is in a state suitable for remote driving; Based on the fact that the monitoring result of the remote driver monitoring device indicates that the remote driver is not in a state suitable for remote driving, the remote driver is not in a state suitable for remote driving.
  • a vehicle remote driving system comprising: a manager notification device (34) for notifying a manager (25) who is a person who can operate the remote side system and who is different from the remote driver.
  • the remote driving vehicle is capable of switching between automatic driving without a monitoring obligation, in which the remote driver is not obligated to monitor the surroundings, and automatic driving with a monitoring obligation, in which the remote driver is obligated to monitor the surroundings,
  • the remote-side abnormality determination unit determines whether the remote driver has an abnormality when the automatic operation without the monitoring obligation is being performed or when the automatic operation with the monitoring obligation is being performed.
  • a vehicle remote driving system that changes the notification content when it is determined that there is.
  • a vehicle remote driving system according to any one of technical ideas 1 to 17, an instruction providing unit (368) for providing a driving instruction value for the remote operation to a specific remotely operated vehicle among the plurality of remotely operated vehicles under the control of the remote system; a notification control unit (367) for notifying the remote driver of the remote-operated vehicle having a high priority for performing the remote operation when requests for performing the remote operation are obtained from a plurality of the remote-operated vehicles; , vehicle remote driving system.
  • a vehicle remote driving system according to any one of technical ideas 1 to 18, an instruction providing unit (368) for providing a driving instruction value for the remote operation to a specific remote-operated vehicle among the plurality of remotely-operated vehicles under the control of the remote system;
  • the instruction providing unit selects the normal remote-operated vehicle when an abnormality occurs in a front remote-operated vehicle traveling ahead of other remote-operated vehicles among the plurality of remote-operated vehicles traveling in platoon.
  • a vehicle remote driving system for providing an instruction to the rear remote vehicle and the front remote vehicle to switch the fore-and-aft positions of the rear remote vehicle and the front remote vehicle.
  • the vehicle remote driving system according to any one of technical ideas 1 to 19,
  • the in-vehicle driving permission unit is an external display unit of the remotely operated vehicle that displays driving state information indicating whether the remotely operated vehicle is traveling by the remote operation or the in-vehicle operation, toward the outside of the vehicle.
  • Vehicle Remote Driving System displayed at (135).

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

遠隔運転者による遠隔運転と、車内にある車内操作部材を操作して運転する車内運転とが可能な遠隔運転車を制御する車両遠隔運転システムであって、遠隔運転者および遠隔運転者が操作する遠隔側システムの少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断する遠隔側異常判断部(1421)と、遠隔側異常判断部(1421)が遠隔側判断対象に異常があると判断した場合に、車内運転を許可する車内運転許可部(1422)とを備える。

Description

車両遠隔運転システム、および、車両遠隔運転方法 関連出願の相互参照
 この出願は、2021年11月12日に日本に出願された特許出願第2021-185009号、および、2022年10月26日に日本に出願された特許出願第2022-171811号を基礎としており、基礎の出願の内容を、全体的に、参照により援用している。
 車両を遠隔運転するシステムおよび方法に関する。
 特許文献1に開示されているように、遠隔運転者が車両を遠隔運転する技術が知られている。特許文献2には、自律走行車両を遠隔監視するシステムが開示されている。特許文献2に開示されている遠隔監視システムでは、遠隔監視センターとの間の通信が途絶した場合に自律走行車両を自動停止させる。
特開2019-168893号公報 特開2019-087015号公報
 特許文献1に開示されているような遠隔運転者が車両を遠隔運転するシステムにおいて、遠隔側に異常があった場合、特許文献2に開示されているように、車両を停止させることが考えられる。しかし、遠隔側に異常があっても車両が走行を継続できることが好ましい。
 本開示は、この事情に基づいて成されたものであり、その目的とするところは、遠隔側に異常があっても車両が走行を継続できる車両遠隔運転システム、および、車両遠隔運転方法を提供することにある。
 上記目的は独立請求項に記載の特徴の組み合わせにより達成され、また、下位請求項は更なる有利な具体例を規定する。請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的態様との対応関係を示すものであって、開示した技術的範囲を限定するものではない。さらに、特に組み合わせに支障が生じなければ、請求の範囲において明示していない請求項同士の組み合せも可能である。
 上記目的を達成するための車両遠隔運転システムに係る1つの開示は、
 遠隔運転者による遠隔運転と、車内にある車内操作部材を操作して運転する車内運転とが可能な遠隔運転車を制御する車両遠隔運転システムであって、
 遠隔運転者および遠隔運転者が操作する遠隔側システムの少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断する遠隔側異常判断部と、
 遠隔側異常判断部が遠隔側判断対象に異常があると判断した場合に、車内運転を許可する車内運転許可部と、を備える車両遠隔運転システムである。
 上記目的を達成するための車両遠隔運転方法に係る1つの開示は、
 遠隔運転者による遠隔運転と、車内にある車内操作部材を操作して運転する車内運転とが可能な遠隔運転車を制御する車両遠隔運転方法であって、
 遠隔運転者および遠隔運転者が操作する遠隔側システムの少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断し、
 遠隔側判断対象に異常があると判断した場合に、車内運転を許可する、車両遠隔運転方法である。
 これら車両遠隔運転システムおよび車両遠隔運転方法によれば、遠隔側判断対象に異常がある場合には車内運転が許可される。よって、遠隔側判断対象に異常があっても、遠隔運転車は、乗員が車内操作部材を操作する車内運転により走行を継続できる。
第1実施形態の車両遠隔運転システム5の構成を示す図。 遠隔側システム30の構成を示す図。 車両側システム100の構成を示す図。 自動運転ECU142が実行する機能を示す図。 遠隔制御装置36が実行する処理を示すフローチャート。 車両側システム100が実行する処理を示すフローチャート。 図6に続いて実行する処理を示すフローチャート。 第2実施形態の車両遠隔運転システム5の構成を示す図。 遠隔側システム30の構成を示す図。 車両側システム100の構成を示す図。 遠隔側の異常に対応するために自動運転ECU142が実行する処理を示すフローチャート。 車外表示部135の表示を切り替える処理を示すフローチャート。 遠隔運転者21が交代した場合に車両側システム100が実行する処理を示すフローチャート。 遠隔運転車10に異常が生じたことを遠隔運転者21等に通知する処理を示すフローチャート。 隊列走行を行う遠隔運転車10に異常が生じた場合に遠隔制御装置36が実行する処理を示すフローチャート。
 以下、複数の実施形態を図面に基づいて説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合せることができる。
 (第1実施形態)
 〔全体構成〕
 図1に、第1実施形態の車両遠隔運転システム5の構成を示す。車両遠隔運転システム5は、遠隔運転車10に搭載される車両側システム100と、遠隔運転施設20に設置される遠隔側システム30を備えている。遠隔運転車10は、遠隔運転者21が遠隔側システム30を操作して遠隔運転することができる。加えて、遠隔運転車10は、遠隔運転車10の運転席11に座っている車内運転者12が車内操作部材13を操作することで運転することもできる。車内操作部材13を操作して遠隔運転車10を運転することを車内運転とする。
 遠隔運転車10は、遠隔運転と車内運転ができればよい。遠隔運転車10には、種々の分類の車を適用可能である。たとえば、遠隔運転車10には、乗用車、バス、トラックが含まれる。また、遠隔運転車10は、専用の道路を走行する車であってもよい。また、遠隔運転車10は、通常時は乗員が運転せず、非常時のみ乗員が車内運転する車であってもよい。車内運転は、車内操作部材13を操作して遠隔運転車10の動きを操作することを意味する。加速および操舵はなく遠隔運転車10を減速させて停止させるのみも運転に含まれる。
 遠隔運転車10は、遠隔運転時および車内運転時ともに手動運転と自動運転とが可能である。本実施形態の遠隔運転車10は自動運転レベル3およびそれよりも低いレベルの自動運転が可能である。自動運転レベル3では、運行設計領域(Operational Design Domain)において車両側システム100が運転操作をすべて行う。運行設計領域を以下、ODDと記載する。レベル1、2の自動運転は、運転者が操作および周辺監視の主体となる運転である。尚、単に運転者と記載する場合、遠隔運転者21でも車内運転者12でもよい運転者を意味する。
 車内操作部材13の具体例は、ステアリングホイール、アクセルペダル、ブレーキペダルである。ただし、遠隔運転車10は、非常時のみ乗員が車内運転する車でもよいことから、車内操作部材13に、ステアリングホイールまたはステアリングホイールと同じ機能の部材が含まれていなくてもよい。たとえば、車内操作部材13は、遠隔運転車10を減速させて停止させるボタンも含まれる。
 遠隔運転車10は、遠隔運転と車内運転が切り替え可能であり、同時に両方の運転は実行されない。遠隔運転時には車内操作部材13が操作されても遠隔運転車10の走行が変化しないようにするために、車内操作部材13と、車内操作部材13により操作されるアクチュエータ(以下、対応アクチュエータ)とは電気的に接続されている。遠隔運転時は、車内操作部材13と対応アクチュエータとの間は遮断される。
 〔遠隔側システム30の構成〕
 図2に遠隔側システム30の構成を示す。遠隔側システム30は、遠隔操作部材31、遠隔運転者監視装置32、遠隔通信機33、管理者通知装置34、遠隔運転者通知装置35、遠隔制御装置36を備えている。
 遠隔操作部材31は、遠隔運転者21が遠隔運転する際に操作する部材である。遠隔操作部材31は、たとえば、車内操作部材13と同様、ステアリングホイール、アクセルペダル、ブレーキペダルとすることができる。また、ステアリングホイールに代えて、棒状の操作体を用いることもできる。アクセルペダル、ブレーキペダルに代えて、ボタンを用いることもできる。
 遠隔運転者監視装置32は、遠隔運転者21が遠隔運転に適した状態であるかを逐次監視する。遠隔運転に適した状態であるかは、遠隔運転者21の覚醒レベルと運転姿勢から判断する。遠隔運転者監視装置32は、たとえば、近赤外光源および近赤外カメラと、これらを制御する制御ユニットとを含む構成である。遠隔運転者監視装置32は、近赤外光源によって近赤外光を照射された遠隔運転者21の頭部を近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、画像解析結果に基づいて、運転者の覚醒レベルを逐次判断する。
 加えて、遠隔運転により遠隔運転車10を自動運転レベル3で自動運転している場合、遠隔運転者監視装置32は、遠隔運転者21がシステムの要求に応じて運転を引き継ぐことができる状態であるかどうかを逐次監視する。遠隔運転者21の覚醒レベルが十分に高く、かつ、遠隔運転者21の姿勢がすぐに遠隔操作部材31を操作ができる姿勢であれば、遠隔運転者21は運転を引き継ぐことができる状態であるとする。
 遠隔通信機33は、車両側システム100が備える車載通信機180と無線通信する通信機である。遠隔通信機33は、公衆通信回線網を介して車載通信機180と通信してもよく、直接、車載通信機180と通信してもよい。
 管理者通知装置34は、遠隔運転者21を管理する管理者(図8,遠隔管理者25参照)に向けて種々の通知をする装置である。管理者は、遠隔運転者21とは別の者であるが遠隔側システム30を操作可能な者である。管理者通知装置34は、ディスプレイ341とスピーカ342とを備えている。これらディスプレイ341とスピーカ342は、管理者が認識しやすい位置に設置される。
 遠隔運転者通知装置35は、遠隔運転者21に向けて種々の通知をする装置である。遠隔運転者通知装置35は、ディスプレイ351とスピーカ352とを備えている。これらディスプレイ351とスピーカ352は、遠隔運転者21が座る座席の付近に設置される。尚、遠隔運転者21の近くに管理者がいる場合、遠隔運転者通知装置35が管理者通知装置34を兼ねてもよい。
 遠隔制御装置36は、少なくとも1つのプロセッサを備えた構成により実現できる。たとえば、遠隔制御装置36は、プロセッサ、不揮発性メモリ、RAM、I/O、およびこれらの構成を接続するバスラインなどを備えたコンピュータにより実現できる。不揮発性メモリには、汎用的なコンピュータを遠隔制御装置36として作動させるためのプログラムが格納されている。プロセッサが、RAMの一時記憶機能を利用しつつ、不揮発性メモリに記憶されたプログラムを実行することで、遠隔制御装置36は、運転情報取得部361、遠隔運転者状態通知部362、運転指示値取得部363として作動する。これらの作動が実行されることは、プログラムに対応する方法が実行されることを意味する。
 運転情報取得部361は、遠隔通信機33から運転情報を取得し、取得した運転情報をディスプレイ351から出力させる。運転情報は、遠隔運転車10を遠隔運転するために必要な情報であり、遠隔運転車10から送信される。運転情報には、遠隔運転車10の周辺の画像、遠隔運転車10の車速、操舵角を示す情報が含まれる。
 遠隔運転者状態通知部362は、遠隔運転者監視装置32が逐次判断している監視結果を、遠隔運転者監視装置32から取得する。そして、取得した監視結果を遠隔通信機33から遠隔運転車10へ送信する。監視結果には、遠隔運転者21が運転に適した状態であるか、および、遠隔運転者21の覚醒レベルが含まれる。遠隔運転者状態通知部362は、取得した監視結果が、遠隔運転者21が遠隔運転に適した状態でないことを示している場合、遠隔運転者通知装置35から警報を出力する。遠隔運転者通知装置35から警報を出力しても、遠隔運転者監視装置32の判断結果が変化しない場合、遠隔運転者状態通知部362は、管理者通知装置34から、遠隔運転者21が異常であることを出力する。
 運転指示値取得部363は、遠隔操作部材31から運転指示値を取得し、取得した運転指示値を遠隔通信機33から遠隔運転車10へ送信する。運転指示値は、遠隔運転車10をどのように走行させるかを指示する値である。運転指示値は、たとえば、アクセル操作量、ブレーキ操作量、ステアリング操作量を指示する値である。
 〔車両側システム100の構成〕
 次に図3を用いて車両側システム100の構成を説明する。車両側システム100は、車内運転者監視装置120、車内通知部130、自動運転システム140、走行制御ECU150、周辺監視センサ160、ロケータ170、車載通信機180、および、これらを通信可能に接続する通信バス190を備えている。
 車内運転者監視装置120は、車内運転者12が運転しているとき、車内運転者12が運転に適した状態であるかを逐次監視する。車内運転者監視装置120の構成は、遠隔運転者監視装置32と同じでよい。車内運転者12が運転に適した状態であるかは、車内運転者12の姿勢と覚醒レベルとから判断できる。また、車内運転者監視装置120は、遠隔運転車10が自動運転レベル3にて遠隔運転しているとき、車内運転者12が運転を引き継ぐことができる状態であるか否かを逐次監視する。
 車内通知部130は、運転者に種々の通知をする。車内通知部130は、スピーカ131とディスプレイ132とを備えている。スピーカ131は、遠隔運転車10の車室に向けて音を出力する。ディスプレイ132は、1つ以上備えられる。少なくとも1つのディスプレイ132は、運転者が視認可能な位置に配置される。たとえば、1つのディスプレイ132は、インスツルメントパネルに配置される。
 自動運転システム140は、少なくとも自動運転レベル3にて遠隔運転車10が自動運転する際に、遠隔運転車10に対して自動運転制御を行う。また、自動運転システム140は、自動運転レベル4以上の自動運転レベルで遠隔運転車10を自動運転制御してもよい。
 自動運転レベル3は、運転者に周辺監視義務はない。しかし、自動運転レベル3では、運転者は、システムからの要求があった場合には運転を引き継ぐことができる状態であることが要求される。本実施形態において、運転者は、遠隔運転者21および車内運転者12のうちのいずれかである。
 自動運転レベル3では、ODDを満たすことが要求される。自動運転システム140は、自動運転レベル3での自動運転を実行中にODDを満たさなくなると判断すると、運転者に運転を引き継ぐことを要求する。ODDは、種々に設定可能である。ODDには、道路条件、地理条件、環境条件、その他の条件を1つ以上、設定可能である。ODDの一例は、道路種別を高速道路に限定するというものである。
 自動運転レベル2では、運転者が主体となって遠隔運転車10を運転させ、自動運転システム140は運転者の運転支援を行う。自動運転レベル2では、当然に運転者に周辺監視義務がある。
 自動運転システム140は、運転支援ECU141と自動運転ECU142とを備えている。運転支援ECU141は、自動運転システム140が運転支援に相当する自動運転を実行する際に車両制御を逐次決定するECU(Electronic Control Unit)である。自動運転ECU142は、自動運転システム140が運転者には周辺監視義務がないレベルの自動運転を実行する際に車両制御を逐次決定するECUである。
 自動運転ECU142は、処理部143、RAM144、記憶部145、入出力インターフェース146およびこれらを接続するバス等を備えたコンピュータである。尚、運転支援ECU141も、処理部、RAM、記憶部、入出力インターフェースおよびこれらを接続するバス等を備えたコンピュータである。
 処理部143は、少なくとも1つのプロセッサを備えている。処理部143は、RAM144へのアクセスにより、本開示の車両遠隔運転方法を実現するための種々の処理を実行する。記憶部145には、処理部143によって実行される種々のプログラム(車両遠隔運転プログラム等)が格納されている。処理部143によるプログラムの実行により、自動運転ECU142は、図4に示す各部の機能を実現する。図4の内容は後述する。
 走行制御部である走行制御ECU150は、マイクロコントローラを主体として含む電子制御装置である。走行制御ECU150は、ブレーキ制御ECU、駆動制御ECUおよび操舵制御ECUの機能を少なくとも有している。走行制御ECU150は、車内運転者12または遠隔運転者21の運転操作に基づく運転指示値、運転支援ECU141または自動運転ECU142の制御指示値のいずれか一つに基づき、ブレーキ力制御、車載動力源の出力制御、操舵角制御を継続的に実施する。
 車内運転者12の運転操作に基づく運転指示値は、操作量検出センサ151が検出した検出値である。操作量検出センサ151は、車内操作部材13の操作量を検出するセンサである。よって、操作量検出センサ151が検出した検出値は車内操作部材13材が操作された操作量を示す。
 遠隔運転者21の運転操作に基づく運転指示値は、車載通信機180を介して遠隔側システム30から送信される。走行制御ECU150は、遠隔運転時は、遠隔運転者21の運転操作に基づく運転指示値に基づいて走行制御を行う。ただし、走行制御ECU150は、遠隔運転時、換言すれば、車内運転許可部1422が車内運転を許可していないときにも操作量検出センサ151が検出した検出値を逐次取得する。車内運転に切り替えられたときに、速やかに、車内運転者12の運転操作を反映した走行制御を実行するためである。
 加えて走行制御ECU150は、各輪のハブ部分に設けられた車輪速センサの検出信号に基づき、遠隔運転車10の現在の走行速度を示す車速情報を生成し、生成した車速情報を通信バス190に逐次出力する。
 周辺監視センサ160は、遠隔運転車10の周辺環境を監視する自律センサである。周辺監視センサ160は、車両周囲の検出範囲から移動物体および静止物体を検出可能である。周辺監視センサ160は、遠隔運転車10の周囲を走行する前方車両、後方車両および側方車両等を少なくとも検出可能である。周辺監視センサ160は、自車すなわち遠隔運転車10の周囲の物体の検出情報を運転支援ECU141および自動運転ECU142等に提供する。
 周辺監視センサ160には、たとえば、カメラユニット161、ミリ波レーダ162、ライダ163およびソナー164のうちの1つまたは複数が含まれている。カメラユニット161は、前方カメラシステムと、サラウンドカメラシステムとを備えている。フロントカメラシステムは、遠隔運転車10の前方範囲を撮影可能なように遠隔運転車10に搭載されている。サラウンドカメラシステムは、前方カメラ、後方カメラ、左側方カメラ、および右側方カメラを有しており、遠隔運転車10の全周囲の路面を撮影可能である。ミリ波レーダ162は、ミリ波または準ミリ波を自車周囲へ向けて照射する。ミリ波レーダ162は、移動物体および静止物体等で反射された反射波を受信する処理によって生成した検出情報を出力する。ライダ163は、自車周囲へ向けてレーザ光を照射する。ライダ163は、照射範囲に存在する移動物体および静止物体等で反射されたレーザ光を受信する処理によって生成した検出情報を出力する。ソナー164は、自車周囲へ向けて超音波を発射する。ソナー164は、自車近傍に存在する移動物体および静止物体等で反射された超音波を受信する処理によって生成した検出情報を出力する。
 ロケータ170は、GNSS(Global Navigation Satellite System)受信機および慣性センサ等を含む構成である。ロケータ170は、GNSS受信機で受信する測位信号、慣性センサの計測結果、および通信バス190に出力された車速情報等を組み合わせ、遠隔運転車10の現在位置および進行方向等を逐次測位する。ロケータ170は、測位結果に基づく遠隔運転車10の位置情報および方角情報を、ロケータ情報として通信バス190に逐次出力する。
 ロケータ170は、地図データを格納した地図データベース(以下、地図DB)171をさらに有している。地図DB171は、多数の3次元地図データおよび2次元地図データを格納した大容量の記憶媒体を主体とする構成である。3次元地図データは、いわゆるHD(High Definition)マップであり、自動運転制御に必要な道路情報を含んでいる。3次元地図データは、道路の3次元形状情報および各レーンの詳細情報等、高度運転支援および自動運転に必要な情報を含んでいる。ロケータ170は、現在位置周辺の地図データを地図DB171から読み出し、運転支援ECU141および自動運転ECU142等にロケータ情報とともに提供する。
 車載通信機180は、遠隔運転車10に搭載された車外通信ユニットであり、V2X(Vehicle to Everything)通信機として機能する。車載通信機180は、公衆通信回線網を介して、あるいは直接的に遠隔通信機33と通信する。また、車載通信機180は、道路脇に設置された路側機との間で無線通信によって情報を送受信してもよい。
 〔自動運転ECU142が実行する機能〕
 図4には、自動運転ECU142が実行する機能を示している。自動運転ECU142は、処理部143によるプログラムの実行により、遠隔側異常判断部1421、車内運転許可部1422、自動運転制御実行部1423、運転情報取得部1424の機能を実現する。
 遠隔側異常判断部1421は、遠隔運転中、遠隔側判断対象に異常があるかどうかを逐次判断する。遠隔側判断対象は、遠隔運転者21と遠隔側システム30の少なくとも一方である。遠隔側判断対象は、遠隔運転者21および遠隔側システム30の両方であることが好ましい。遠隔運転者21に異常があるとは、遠隔運転者21が運転に適した状態でないことを意味する。遠隔運転者21に異常があるかどうかは、遠隔運転者21が運転に適した状態でないことが、遠隔側システム30から通知されるかどうかにより決定する。
 遠隔側異常判断部1421は、遠隔運転者21に異常がないと判断したときは、遠隔運転者21に異常の兆候があるかどうかも逐次判断する。異常の兆候は、遠隔運転者21の覚醒レベルに基づいて判断する。異常の兆候があるとは、異常にはならないが、異常に近い覚醒レベルであることを意味する。たとえば、遠隔運転者21の覚醒レベルが、一定時間内において異常範囲に入っている時間比率が第1比率以上であることが、遠隔運転者21が異常であると判断する条件であるとする。この場合に、遠隔運転者21の覚醒レベルが、一定時間内において異常範囲に入っている時間比率が、第1比率よりも低く第2比率よりも高い場合に、遠隔運転者21に異常の兆候があるとする。遠隔運転者21がやや眠そうであるとき、遠隔運転者21に異常の兆候があることになる。
 遠隔側異常判断部1421は、遠隔側システム30に異常があるかどうかを、遠隔側システム30から定期的に情報が送信されてくるかどうかにより決定する。遠隔運転中であるにも関わらず、遠隔側システム30から定期的に情報が送信されてこない場合、遠隔側システム30に異常があると決定する。また、遠隔側システム30から、システムの異常を通知する信号を取得した場合に、自動運転制御実行部1423は、遠隔側システム30に異常が発生していると判断してもよい。遠隔側システム30の異常の一例は、遠隔通信機33の異常である。
 車内運転許可部1422は、車内運転者12に遠隔運転車10の運転を許可するかどうかを逐次決定する。遠隔運転中であって、遠隔側異常判断部1421が遠隔側判断対象に異常があると判断していない場合には、車内運転者12に遠隔運転車10の運転を許可しない。
 ただし、車内運転許可部1422は、遠隔運転中であり、遠隔運転者21に異常の兆候がある場合には、遠隔運転者21と車内運転者12の覚醒レベルを比較する。そして、覚醒レベルが高い側に遠隔運転車10の運転を許可する。
 さらに、車内運転許可部1422は、遠隔運転車10が自動運転レベル3で走行中であり、遠隔運転中である場合には、遠隔運転者21が運転を引き継ぐことができる状態であるかを逐次判断する。遠隔運転者21が運転を引き継ぐことができる状態(以下、運転引き継ぎ状態)でない場合でも、車内運転者12が運転引き継ぎ状態であれば、自動運転レベル3を継続することを自動運転制御実行部1423に指示する。ただし、運転引き継ぎする予定の運転者は車内運転者12に切り替える。
 車内運転許可部1422は、遠隔運転者21に運転を許可しているか、車内運転者12に運転を許可しているかを示す情報を、走行制御ECU150に出力する。走行制御ECU150は、車内運転者12の運転が許可されていない場合、操作量検出センサ151が検出した値は走行制御に用いず、遠隔側システム30から送信された運転指示値を使って遠隔運転車10の走行制御を行う。
 車内運転許可部1422は、車内運転を許可した場合、すなわち、遠隔運転から車内運転に切り替えた場合、そのことを示す通知を車内通知部130から出力する。
 自動運転制御実行部1423は、周辺監視センサ160より取得する検出情報と、ロケータ170より取得するロケータ情報および地図データ、車載通信機180より取得する渋滞情報等を組み合わせて、自動運転を実行するために必要な走行環境を認識する。自動運転制御実行部1423は、認識した走行環境とODDとに基づき、現在実行する自動運転レベルを逐次決定する。自動運転制御実行部1423は、決定した自動運転レベルが周辺監視義務のない自動運転レベルであれば、認識した走行環境に基づき、遠隔運転車10を自動運転する車両制御を実行するための制御指令を、走行制御ECU150に逐次出力する。ただし、自動運転制御実行部1423は、決定した自動運転レベルが自動運転レベル3であれば、運転者が、システムからの要求に応じて運転を引き継ぐことができる状態であるか否かは逐次判断する。
 運転情報取得部1424は、運転情報を取得し、取得した運転情報を車載通信機180から遠隔側システム30へ送信する。運転情報には、前述したように、遠隔運転車10の周辺の画像、遠隔運転車10の車速、操舵角を示す情報が含まれる。遠隔運転車10の周辺の画像は、周辺監視センサ160から取得する。遠隔運転車10の車速、操舵角は走行制御ECU150から取得する。
 〔遠隔制御装置36が実行する処理〕
 図5に遠隔制御装置36が実行する処理を示す。遠隔制御装置36は、遠隔運転中、図5に示す処理を繰り返し実行する。S1では、運転情報取得部361が、車両側システム100から送信される運転情報を遠隔通信機33から取得し、取得した運転情報をディスプレイ351に表示する。運転情報は、前述したように、遠隔運転車10の周辺の画像、遠隔運転車10の車速、操舵角を示す情報が含まれている。
 S2からS6は遠隔運転者状態通知部362が実行する。S2では、遠隔運転者監視装置32から遠隔運転者21の監視結果を取得する。監視結果には、遠隔運転者21が運転に適した状態であるかと、遠隔運転者21の覚醒レベルが含まれている。
 S3では、S2で取得した結果をもとに、遠隔運転者21は運転に適した状態であるか否かを判断する。遠隔運転者21は運転に適した状態ではないと判断した場合、すなわちS3の判断結果がNOである場合にはS4に進む。
 S4では、遠隔運転者通知装置35から警告を出力する。その後、S5にて、遠隔運転者監視装置32から遠隔運転者21の監視結果を取得して、遠隔運転者21が運転に適した状態に復帰したか否かを判断する。S5の判断結果もNOであればS6へ進む。S6では、管理者通知装置34から、遠隔運転者21が異常であることを出力する。
 S3の判断結果、あるいは、S5の判断結果がYESであればS7に進む。S7では、運転指示値取得部363が、遠隔操作部材31から運転指示値を取得する。S8は、遠隔運転者状態通知部362と運転指示値取得部363が実行する。S8では、遠隔情報を遠隔通信機33から車両側システム100へ送信する。遠隔情報には、遠隔運転者21が運転に適した状態であるか、遠隔運転者21の覚醒レベル、運転指示値が含まれている。
 〔車両側システム100が実行する処理〕
 図6、図7に、遠隔運転車10が遠隔運転されているときに車両側システム100が実行する処理を示す。図6、図7に示す処理において、S17は走行制御ECU150が実行する。他の処理は自動運転ECU142が実行する。
 S11では、遠隔側システム30から送信される遠隔情報を取得できたか否かを遠隔側異常判断部1421が判断する。S11の判断結果がNOであれば後述する図7のS21へ進む。S11の判断結果がYESであればS12へ進む。
 S12では、遠隔側異常判断部1421が、遠隔情報をもとに、遠隔側システム30が正常であるか否かを判断する。S12の判断結果がNOである場合、すなわち、遠隔側システム30が異常であると判断した場合も図7のS21へ進む。尚、遠隔情報を取得できなくなったと判断した場合(S11:NO)も、遠隔側システム30が異常であると判断したことになる。S12の判断結果がYESであればS13に進む。
 S13では、遠隔側異常判断部1421が、遠隔情報をもとに、遠隔運転者21が運転に適した状態であるかを判断する。S13の判断結果がNOである場合も図7のS21へ進む。S13の判断結果がYESであればS14に進む。
 S14では、遠隔側異常判断部1421が、遠隔情報に含まれている遠隔運転者21の覚醒レベルをもとに、遠隔運転者21に異常の兆候があるか否かを判断する。S14の判断結果がYESであればS15に進む。
 S15では車内運転許可部1422が、遠隔運転者21の覚醒レベルと、車内運転者12の覚醒レベルを比較する。そして、遠隔運転者21の方が覚醒レベルが高いか否かを判断する。S15の判断結果がNOである場合、図7のS21へ進む。両者の覚醒レベルを比較でき、遠隔運転者21の方が覚醒レベルが高い場合にはS15の判断結果はYESになる。また、運転席11に車内運転者12がいないなど、車内運転者12の覚醒レベルが取得できない場合にも、S15の判断結果はYESになる。S15の判断結果がYESであればS16に進む。また、S14の判断結果がNOであった場合もS16に進む。
 S16では、車内運転許可部1422が車内運転を不許可にする。続くS17では、走行制御ECU150が車内操作部材13の操作量を操作量検出センサ151から取得する。続くS18では、自動運転制御実行部1423が、遠隔側システム30から送信されてきた運転指示値を走行制御ECU150へ出力する。S18が実行される場合、走行制御ECU150は、遠隔側システム30から送信された運転指示値をもとに走行制御を実行し、S17で取得した操作量は制御に使用しない。
 S19では、運転情報取得部1424が、運転情報を取得し、取得した運転情報を車載通信機180から遠隔側システム30へ送信する。
 次に図7を説明する。図7の処理においてS33は走行制御ECU150が実行する。その他の処理は車内運転許可部1422が実行する。S21では、遠隔運転車10は自動運転レベル3を実行中か否かを判断する。自動運転レベル3を実行中であればS21の判断結果がYESになりS22へ進む。
 S22では、車内運転者監視装置120から車内運転者12の状態を取得する。尚、S22を実行する前に、車内運転へ切り替えることを車内通知部130から通知してもよい。S23では、車内運転者12は、自動運転システム140からの要求に応じて運転を引き継ぐことができる状態であるかを判断する。S23の判断結果がYESであればS24に進む。
 S24では、運転引き継ぎを通知する運転者を車内運転者12に切り替えて、自動運転レベル3を継続する。そして、S25において、走行制御ECU150に車内運転許可を通知する。これにより、自動運転レベル3で走行中に車内運転者12によるオーバーライドが可能になる。そして、S26では、車内運転へ切り替えたことを車内通知部130から通知する。これにより、車内運転者12も車内運転が可能になったことを認識できる。
 S21の判断結果がNOであればS27に進む。S27に進む場合、遠隔運転車10は、自動運転レベル2以下の自動運転レベルにて遠隔運転されていることになる。S27では、S22と同じく、車内運転者監視装置120から車内運転者12の状態を取得する。また、S22を実行する場合と同じく、S27を実行する前に、車内運転へ切り替えることを車内通知部130から通知してもよい。
 S28では、車内運転者12が運転に適した状態であるかを判断する。S28の判断結果がNOである場合には29に進む。S23の判断結果がNOである場合もS29に進む。S29では、遠隔運転車10を緊急停止させることを走行制御ECU150へ指示する。その後、S30では、走行制御ECU150に車内運転許可を通知する。走行制御ECU150は、遠隔運転車10を停止後に、車内操作部材13が操作された場合に遠隔運転車10が走行する車内運転モードに自動的に移行する。
 S31では、車内運転へ切り替えたことを車内通知部130から通知する。S31での通知内容はS26とは相違する。S31では、自動運転レベルが2以下になっている。したがって、S31での通知は、S26での通知よりも緊急性の高いことを認識させる通知である。たとえば、S31での通知は、S26での通知よりも音量が大きくなっていたり、S26での通知よりも画像が目立つ画像になっていたりする。
 S28の判断結果がYESであればS32に進む。S32では、走行制御ECU150に車内運転許可を通知する。S33では、S17において記憶していた最新の操作量を用いて走行制御を実行する。その後、前述したS31へ進み、車内運転へ切り替えたことを車内通知部130から通知する。
 〔第1実施形態のまとめ〕
 以上、説明した第1実施形態では、遠隔側判断対象に異常がある場合には(S11~S13:NO)、車内運転が許可される(S25、S30、S32)。よって、遠隔側判断対象に異常があっても、遠隔運転車10は車内運転により走行を継続できる。
 一方、車内運転許可部1422は、遠隔側異常判断部1421が、遠隔運転者21および遠隔側システム30がともに異常ではないと判断している場合、車内運転を許可しない(S16)。これにより、遠隔運転中に、車内運転者12により、遠隔運転者21が意図しない運転操作がされてしまうことを抑制できる。
 走行制御ECU150は、車内運転許可部1422が車内運転を許可していないときにも、車内操作部材13が操作された操作量を示す信号を逐次取得して記憶する(S17)。そして、車内運転許可部1422が車内運転を許可した場合、記憶済みの操作量により走行制御を行う。これにより、車内運転者12が遠隔側判断対象に異常を感じ、車内運転が許可される前に車内操作部材13を操作した場合に、その操作が反映されて遠隔運転車10が運転される。よって、車内運転者12は遠隔側判断対象の異常に迅速に対応して遠隔運転車10を運転できる。
 車内運転許可部1422は、遠隔運転者21に異常の兆候があり(S14:YES)、車内運転者12の覚醒レベルが判断されている場合、遠隔運転者21と車内運転者12のうち覚醒レベルが高い側に運転操作を許可する(S15)。よって、遠隔運転車10を覚醒レベルが低い運転者が運転してしまうことを抑制できる。
 車内運転許可部1422は、自動運転レベル3で遠隔運転しているときに遠隔側異常判断部1421が遠隔側判断対象に異常があると判断した場合(S11~S13:NO)、車内運転を許可する(S25)。加えて、車内運転者12が運転を引き継ぐことができる状態である場合(S23:YES)、運転引き継ぎを通知する運転者を車内運転者12に切り替えて、自動運転レベル3での走行を継続する(S24)。これにより、遠隔側判断対象に異常があっても、自動運転レベル3を継続できる場合がある。
 車内運転許可部1422は、遠隔側異常判断部1421が遠隔側判断対象に異常があると判断した場合であって(S11~S13:NO)、自動運転レベル2以下である場合には(S21:NO)、まず遠隔運転車10を停止させる(S29)。その後、車内運転を許可し、車内操作部材13が操作された場合に遠隔運転車10が走行する車内運転モードに自動的に移行する(S30)。よって、車内運転者12は、遠隔運転車10が停止した後は、運転モード切り替え操作を必要とせず、車内操作部材13を操作すれば遠隔運転車10を運転できる。
 車内運転許可部1422は、遠隔側異常判断部1421が遠隔側判断対象に異常があると判断した場合(S11~S13:NO)、車内通知部130から、車内運転に切り替えたことを通知する(S26、S31)。これにより、遠隔運転車10の乗員は、車内運転に切り替えたことを認識できる。
 また、車内運転許可部1422は、自動運転レベル3が実行されている場合と、自動運転レベル2以下が実行されている場合とで、遠隔側判断対象に異常があると判断したときの通知内容を異ならせている(S26、S31)。具体的には、自動運転レベル2以下が実行されている場合には、より緊急性の高いことを認識させる通知をする(S31)。これにより、自動運転レベル2以下が実行されている場合には、遠隔運転車10の乗員が自動運転レベル2以下の走行制御に迅速に対応できる可能性が高くなる。
 遠隔運転者21が遠隔運転に適した状態でないことを示していることに基づいて、遠隔運転者21が運転に適した状態でないことを、管理者通知装置34から通知する。これにより、遠隔運転施設20にて、遠隔運転者21を交代させるなどの処置を迅速に実施することが可能になる。
 (第2実施形態)
 図8に示す第2実施形態の車両遠隔運転システム5では、1つの遠隔側システム30によって複数(多数)の遠隔運転車10の運行が管理されている。車両遠隔運転システム5には、遠隔側システム30および複数の遠隔運転車10に加えて、複数(多数)のインフラ側システム60が含まれている。
 遠隔側システム30が設置される遠隔運転施設20では、1人以上の遠隔管理者25と、2人以上の遠隔運転者21とが複数の遠隔運転車10の運行に従事している。遠隔管理者25は、遠隔側システム30の管理下にある複数台の遠隔運転車10の運行を管理している。遠隔運転者21は、各遠隔運転車10を監視し、必要な場合に動的な運転タスク(Dynamic Driving Task)を自動運転システム140から引き継ぐことで、遠隔運転車10を遠隔で操縦する。一方の遠隔運転者21は、メイン遠隔操縦者22である。メイン遠隔操縦者22は、遠隔運転車10に異常が発生した場合、遠隔運転車10の遠隔運転を優先的に実施する。他方の遠隔運転者21は、サブ遠隔操縦者23である。サブ遠隔操縦者23は、メイン遠隔操縦者22に異常があった場合、または複数台の遠隔運転車10に異常が生じた場合に、遠隔運転者21に代わって、遠隔運転車10の遠隔運転を実施する。
 遠隔運転車10は、第1実施形態と同様に、遠隔運転者21によって遠隔監視された状態で自動運転レベル3に相当する自律走行を実施可能である。遠隔運転車10は、運転者が搭乗していない状態で走行可能な無人自動運転車である。遠隔運転車10がモビリティサービス用の車両である場合、遠隔運転車10の乗員14は全て乗客となる。遠隔運転車10では、遠隔監視された状態で自動運転機能によって走行する自動運転モードと、遠隔運転者21が遠隔操縦する遠隔操縦モードと、車内運転者12が操縦する車内運転モードとを少なくとも含む複数のうちで、走行制御状態が切り替えられる。遠隔運転車10の現在の走行制御状態は、遠隔運転車10に搭載された車外表示部135に表示され、遠隔運転車10の周囲の歩行者、サイクリスト、およびドライバ等に通知される。
 インフラ側システム60は、監視カメラ61を備えている。インフラ側システム60は、遠隔運転車10の走行経路に設置されている。インフラ側システム60は、遠隔運転車10の走行経路全体を漏れなく撮影できるように多数設置されてもよく、または、走行経路にある停留所および交差点等の特定の地点のみに設置されていてもよい。
 インフラ側システム60は、公衆通信回線網を介して遠隔側システム30と通信可能である。インフラ側システム60は、監視カメラ61によって撮影された走行経路の監視映像を、インフラ情報として遠隔側システム30へ向けて送信する。インフラ側システム60は、監視カメラ61と異なるインフラセンサを備えていてもよい。こうした形態では、インフラセンサの検出情報が、インフラ情報としてインフラ側システム60から遠隔側システム30に送信される。
 〔遠隔側システム30の構成〕
 図8および図9に示す第2実施形態の遠隔側システム30は、第1実施形態と同様に、遠隔操作部材31、遠隔運転者監視装置32、遠隔通信機33、管理者通知装置34、遠隔運転者通知装置35、および遠隔制御装置36を備えている。遠隔操作部材31、遠隔運転者監視装置32、および遠隔運転者通知装置35は、メイン遠隔操縦者22およびサブ遠隔操縦者23のために、それぞれ2つずつ設けられている。
 遠隔運転者監視装置32または遠隔運転者通知装置35は、遠隔運転者21が予め登録された正規の人間か否かを判定する識別処理を実施する。識別処理は、遠隔運転者監視装置32を用いた顔認証処理であってもよく、遠隔運転者通知装置35へ入力されるIDおよびパスワードの認証処理であってもよい。こうした識別処理により、認証が成立した正規の人間のみが、遠隔運転者21として遠隔監視および遠隔運転を実施できる。また同様に、管理者通知装置34によって、遠隔管理者25が正規の人間か否かの識別処理が実施されてもよい。
 遠隔制御装置36は、不揮発性メモリに記憶されたプログラムの実行により、遠隔監視部366、提示制御部367、遠隔支援操縦部368として作動する。
 遠隔監視部366は、第1実施形態の運転情報取得部361(図2参照)の機能を含んでいる。遠隔監視部366は、遠隔通信機33にて受信される運転情報およびインフラ情報を逐次取得する。運転情報は、遠隔運転車10の遠隔監視および遠隔運転に必要な情報であり、各遠隔運転車10によって送信される。インフラ情報は、遠隔運転車10の走行経路を撮影したリアルタイムでの監視映像であり、各インフラ側システム60によって送信される。
 提示制御部367は、第1実施形態の遠隔運転者状態通知部362(図2参照)の機能を含んでいる。提示制御部367は、管理者通知装置34による遠隔管理者25への情報提示と、2つの遠隔運転者通知装置35によるメイン遠隔操縦者22およびサブ遠隔操縦者23への情報提示とを制御する。具体的に、提示制御部367は、遠隔監視部366にて取得される運転情報およびインフラ情報、各ディスプレイ341,351に表示させる。その結果、各ディスプレイ341,351には、カメラユニット161(図3参照)による映像と、監視カメラ61による映像とが少なくとも表示される。
 提示制御部367は、遠隔運転者21の異常が検知されたことを、遠隔支援操縦部368を通じて把握する。提示制御部367は、遠隔運転者21の異常を検知した場合、遠隔運転者通知装置35を制御し、警告を発する。提示制御部367は、メイン遠隔操縦者22の異常が検知された場合、メイン遠隔操縦者22の遠隔運転者通知装置35からだけでなく、サブ遠隔操縦者23の遠隔運転者通知装置35および管理者通知装置34からも警告を発する。同様に、サブ遠隔操縦者23の異常が検知された場合、提示制御部367は、サブ遠隔操縦者23の遠隔運転者通知装置35からだけでなく、メイン遠隔操縦者22の遠隔運転者通知装置35および管理者通知装置34からも警告を発する。
 遠隔支援操縦部368は、第1実施形態の運転指示値取得部363(図2参照)の機能を含んでいる。遠隔支援操縦部368は、遠隔側システム30の管理下にある複数の遠隔運転車10のうちで特定の遠隔運転車10に異常が生じた場合に、この遠隔運転車10の異常発生を、遠隔通信機33および遠隔監視部366を通じて把握する。遠隔支援操縦部368は、遠隔運転車10の異常把握に基づき、車両側システム100と連携した遠隔運転を開始する。この場合、遠隔支援操縦部368は、メイン遠隔操縦者22またはサブ遠隔操縦者23のうちで、遠隔運転者21とする一方を決定し、遠隔運転者21に紐づく遠隔操作部材31から運転指示値を取得する。遠隔支援操縦部368は、取得した運転指示値を、遠隔通信機33を通じて、異常が生じている特定の遠隔運転車10に送信する。
 また、遠隔支援操縦部368は、遠隔運転者21の監視結果を遠隔運転者監視装置32から取得する。上述したように、遠隔支援操縦部368は、遠隔運転者21に異常が生じた場合、提示制御部367と連携し、遠隔運転者通知装置35を用いた遠隔運転者21への警告を実施する。遠隔支援操縦部368は、警告後も遠隔運転者21の異常状態が改善しない場合、遠隔運転者21の異常の確定判定を行う。
 遠隔支援操縦部368は、確定判定に基づき、遠隔運転者21に異常が生じていることを、遠隔通信機33を通じて各遠隔運転車10に通知する。一例として、遠隔支援操縦部368は、メイン遠隔操縦者22の異常が確定した場合、サブ遠隔操縦者23に遠隔運転の権限が移譲されたことを示す情報(以下、交代情報)を各遠隔運転車10に送信する。さらに、遠隔支援操縦部368は、メイン遠隔操縦者22またはサブ遠隔操縦者23の異常が確定した場合、遠隔運転を引く継ぐことが可能な予備の遠隔運転者21(以下、交代要員)の有無を示す情報を各遠隔運転車10に送信する。
 〔車両側システム100の構成〕
 図8および図10に示す第2実施形態の車両側システム100は、第1実施形態と同様に、車内通知部130、走行制御ECU150、周辺監視センサ160、ロケータ170、車載通信機180、および自動運転ECU142を備えている。加えて車両側システム100は、乗員情報取得装置220および車外表示部135をさらに備えている。
 乗員情報取得装置220は、第1実施形態の車内運転者監視装置120(図3参照)の機能を含んでいる。乗員情報取得装置220は、遠隔運転車10の車室(客室)内を監視し、急病人および怪我人等の発生を検知する。また、乗員情報取得装置220は、車内運転者12が運転しているとき、車内運転者12が運転に適した状態であるかを逐次監視する。
 さらに、乗員情報取得装置220は、車内運転が許可された場合に、運転席11に着座して車内操作部材13の操作を試みる特定の乗員14(以下、特定乗員14s)に関する乗員情報を取得する。一例として、乗員情報取得装置220は、特定乗員14sの顔と、特定乗員14sによって提示される運転免許証とをそれぞれ撮影し、顔画像および免許証画像を取得する。顔画像および免許証画像は、特定乗員14sの乗員情報として利用され、自動運転ECU142および車載通信機180を通じて、遠隔側システム30に送信される。
 車外表示部135は、上述したように、遠隔運転車10の車外へ向けて情報を表示する。車外表示部135は、文字表示可能なディスプレイであってもよく、発光態様の変化によって情報を示す構成であってもよい。遠隔運転車10には、フロント表示部136、サイド表示部137、およびリヤ表示部138の少なくとも1つが車外表示部135として設けられている。フロント表示部136は、遠隔運転車10の前方に表示面を向けた姿勢で、遠隔運転車10の前面に設置されている。サイド表示部137は、遠隔運転車10の左右両側面にそれぞれ設置されている。リヤ表示部138は、遠隔運転車10の後方に表示面を向けた姿勢で、遠隔運転車10の後面に設置されている。
 自動運転ECU142は、遠隔監視操作型の自動運行装置の機能を備えている。自動運転ECU142は、処理部143(図3参照)によるプログラムの実行により、状態判断部1426、モード切替部1427、車両監視部1428、および運転実行部1429の機能を実現する。
 状態判断部1426は、第1実施形態の遠隔側異常判断部1421(図4参照)の機能を含んでいる。状態判断部1426は、車載通信機180にて受信される遠隔側システム30からの情報に基づき、遠隔側判断対象の監視を継続的に実施する。状態判断部1426は、遠隔側判断対象に異常が生じたと判定した場合、異常発生の情報をモード切替部1427と共有する。遠隔側判断対象の異常には、2人の遠隔運転者21のいずれかに異常またはその兆候があること、遠隔側システム30との通信に異常があること等が含まれる。さらに、通信の異常には、通信状態の悪化に加えて、悪意のある第3者による通信の乗っ取り(セッションハイジャック)等も含まれる。状態判断部1426は、異常が解消されたと判定した場合、または異常が誤検知であったと判定した場合、異常解消の情報をモード切替部1427と共有する。
 モード切替部1427は、第1実施形態の車内運転許可部1422(図4参照)の機能を含んでいる。モード切替部1427は、走行制御ECU150と連携し、上述した自動運転モード、遠隔操縦モード、および車内運転モードを含む複数のうちで、車両側システム100の走行制御状態を切り替える。
 モード切替部1427は、運転実行部1429による自動運転レベル3以上の自律走行が継続できないシーンにおいて、自動運転モードから遠隔操縦モードへと走行制御状態を切り替える。モード切替部1427は、車両監視部1428から提示される中断提案に基づき、自動運転モードの中断を決定し、遠隔操縦モードへの切り替えを実施する。この場合、モード切替部1427は、車載通信機180を通じて遠隔側システム30に運転交代の依頼(Request for Operation)、即ち、遠隔運転の実施要求を送信する。
 モード切替部1427は、異常発生を示す情報が状態判断部1426から提供され、遠隔側判断対象の異常を把握した場合に、第1実施形態と同様に、遠隔操縦モードから車内運転モードへと走行制御状態を切り替える。尚、第2実施形態でも、遠隔側判断対象に異常がない場合、モード切替部1427は、車内運転モードへの切り替えを実施しない。
 以上のモード切り替えによれば、走行制御状態が自動運転モードである場合、走行制御ECU150は、運転実行部1429から入力される制御指令に基づき、遠隔運転車10を走行させる。また、走行制御状態が遠隔操縦モードである場合、走行制御ECU150は、車載通信機180を通じて遠隔側システム30から受信する運転指示値に基づき、遠隔運転車10を走行させる。さらに、走行制御状態が車内運転モードである場合、走行制御ECU150は、操作量検出センサ151から入力される運転指示値に基づき、遠隔運転車10を走行させる。
 ここで、モード切替部1427が走行制御状態を切り替える場合、自動運転ECU142および走行制御ECU150は、遠隔運転車10を必ず停止状態にする。モード切替部1427は、遠隔運転車10が停止した状態で、遠隔操縦モードまたは車内運転モードの開始処理および終了処理を実施する。その結果、自動運転ECU142および遠隔運転者21の間での運転の引き継ぎ、および遠隔運転者21および車内運転者12の間での運転の引き継ぎは、遠隔運転車10が停止した状態で実施される。
 また、モード切替部1427は、車内通知部130および車外表示部135による情報通知を制御する。モード切替部1427は、走行制御状態を切り替える場合、車内通知部130を用いて、遠隔運転車10が停止する以前に、乗員14に切り替えを通知する。さらに、モード切替部1427は、現在の走行制御状態を車外表示部135に表示させる。
 車両監視部1428は、第1実施形態の運転情報取得部1424(図4参照)の機能を含んでいる。車両監視部1428は、遠隔運転車10の車外環境、車内環境、および車両状態を示す種々の情報を取得し、取得した情報を監視する。具体的に、車両監視部1428は、遠隔運転車10の周辺画像をカメラユニット161(図3参照)から取得し、遠隔運転車10の走行状態を示す情報とともに、車載通信機180を通じて遠隔側システム30に逐次送信する。
 車両監視部1428は、周辺監視センサ160の検出情報等に基づき、モード切替部1427に自動運転モードの中断提案を実施する。車両監視部1428は、遠隔運転車10の予定走行経路上に認識困難または回避困難な障害物が発生した場合、または、天候の悪化等によって周辺監視センサ160の検出能力が著しく低下した場合等に、自動運転モードの中断を提案する。
 車両監視部1428は、乗員情報取得装置220から取得する情報に基づき、乗員14の状態を把握する。乗員情報取得装置220にて乗員14の異常が検知された場合、車両監視部1428は、遠隔運転車10の一時停止を運転実行部1429に要求するとともに、客室内における異常の発生を、車載通信機180を通じて遠隔側システム30に通知する。
 運転実行部1429は、第1実施形態の自動運転制御実行部1423(図4参照)の機能を含んでいる。運転実行部1429は、周辺監視センサ160より取得する検出情報と、ロケータ170より取得するロケータ情報および地図データとを用いて走行環境を認識し、自動運転モードでの自動走行を実行する。運転実行部1429は、認識した走行環境に基づき、遠隔運転車10を自動運転する車両制御を実行するための制御指令を生成し、生成した制御指令を走行制御ECU150に逐次出力する。運転実行部1429は、自動運転レベル4以上の自律走行制御を実施可能であってもよく、または自動運転レベル3未満の運転支援制御を実施可能であってもよい。
 次に、自動運転ECU142によって実行される各処理の詳細を、図11~図13に基づき、図9および図10を参照しつつ説明する。
 〔遠隔側判断対象の異常時のモード切替処理〕
 自動運転ECU142は、遠隔操縦モードの開始に基づき、図11に示す処理(以下、遠隔異常対応処理)を実行し、遠隔側判断対象の異常発生に備える。遠隔異常対応処理のS201では、状態判断部1426が、遠隔側判断対象の異常を検知したか否かを判定する。S201にて、状態判断部1426は、異常の誤検知を許容し、確定的な異常だけでなく、確度の低い異常も検知対象とする。S201の判定結果がNOであれば、状態判断部1426は、S201の異常検知を継続する。一方、S201の判定結果がYESであれば、S202に進む。遠隔側判断対象に異常があると判断した場合のS202では、モード切替部1427または運転実行部1429の指令に基づき、走行制御ECU150が、遠隔運転車10を停止させる。
 S203では、状態判断部1426が、S201にて検知した異常が解消されたか否かを判断する。車両側システム100が異常を解消した場合、または、乗員14、遠隔運転者21、および遠隔管理者25のいずれかが異常解消のための解消処理を行った場合、状態判断部1426は、異常が解消したと判断する。こうしてS203の判断結果がYESとなると、S204に進む。また、S201にて検知した異常が誤検知であると確認できた場合も、S204に進む。
 S204では、モード切替部1427が、遠隔操作モードの継続を決定し、遠隔運転の再開を許可する。これにより、走行制御ECU150は、遠隔運転の運転指示値に基づき、遠隔操縦による走行を再開する。この場合、制御フローがS201に戻り、状態判断部1426による異常検知が継続される。以上によれば、遠隔運転車10は、誤検知で停止した場合でも、誤検知であることが確認したことに基づき、走行を再開できる。
 S203での判断結果がNOである場合、状態判断部1426は、S205にて、タイムアウトになったか否かの判定を行う。状態判断部1426は、タイムアウトとなるまで、異常の解消を待機する。異常が解消されないままタイムアウトとなり、S205の判定結果がYESとなると、S206にて、モード切替部1427が、遠隔操縦モードの終了を決定する。モード切替部1427は、S206にて、遠隔操縦モードから車内運転モードへと走行制御状態を切り替えることにより、車内運転を許可する。
 車内運転が許可された場合のS207では、車両監視部1428が、乗員情報取得装置220と連携し、運転席11に着座している特定乗員14sに関する乗員情報を取得する。車両監視部1428は、取得した乗員情報を遠隔側システム30に送信によって提供する。乗員情報は、遠隔側システム30によってディスプレイ341,351に表示され、遠隔運転者21または遠隔管理者25に提示される。遠隔運転者21または遠隔管理者25は、表示された乗員情報に基づき、特定乗員14sに車内運転を許可するか否かを判断し、判断結果を遠隔側システム30に入力する。一例として、遠隔運転者21または遠隔管理者25は、運転免許証の顔写真と、特定乗員14sの顔を写した顔画像とに基づき、特定乗員14sが運転免許の保有者であると判断できる場合に、車内運転を許可する。遠隔側システム30での判断結果は、自動運転ECU142に送信される。
 S208では、モード切替部1427が、乗員情報を用いて、特定乗員14sに車内運転を許可するか否かをさらに決定する。S208では、乗員情報に基づく判断結果であって、遠隔側システム30から取得した判断結果に従い、モード切替部1427は、車内運転を特定乗員14sに許可するか否かを決定する。ただし、遠隔側システム30との通信が途絶している場合、モード切替部1427は、乗員情報を用いた車内運転の許否判断を自ら実施してもよい。この場合、モード切替部1427は、運転免許証の顔写真が特定乗員14sの写真であると検証できた場合に、特定乗員14sに車内運転を許可する。S208の判断結果がNOである場合、遠隔異常対応処理は終了される。この場合、遠隔運転車10は、停止したままの待機状態となる。一方、S208の判断結果がYESである場合、S209に進む。
 S209では、車両監視部1428が、特定乗員14sを車内運転者12として登録する。この場合、特定乗員14sの乗員情報は、遠隔制御装置36および自動運転ECU142の少なくとも一方に保管される。
 S210では、モード切替部1427および走行制御ECU150が、走行制限を設定する。詳記すると、モード切替部1427が車内運転を許可する場合、遠隔運転によって走行する場合よりも、遠隔運転車10の走行速度が制限される。一例として、遠隔運転車10が一般道を走行する車両の場合、走行速度は、道路の制限速度の半分程度(30km/h程度)に制限される。また、遠隔運転車10が低速走行車両である場合、走行速度は、5~10km/hに制限される。そして、S211では、モード切替部1427が、車内運転を開始させる。これにより、走行制御ECU150は、車内運転の運転指示値に基づき、遠隔運転車10の走行を再開させる。以上により、遠隔異常対応処理は終了となる。
 〔走行制御状態の車外表示処理〕
 モード切替部1427は、車両側システム100の起動に基づき、図12に示す処理(以下、車外表示処理)を実行する。モード切替部1427は、車両側システム100の電源がオフ状態となるまで車外表示処理を継続する。車外表示処理により、自動運転、遠隔運転および車内運転のいずれによって遠隔運転車10が走行しているのかを示す運転状態情報が、車外表示部135に継続的に表示される。
 具体的に、車外表示処理のS231では、走行制御状態が把握される。そして、S232では、S232にて把握された走行制御状態に基づき、動作中の運転モードの判別が行われる。モード切替部1427は、走行制御状態が自動運転モードである場合、S233にて、モード切替部1427は、自動運転中表示として、遠隔運転車10が自動運転中であること示す文字または画像を車外表示部135に表示させる。一方、走行制御状態が遠隔操縦モードである場合、モード切替部1427は、S234にて、遠隔運転中表示として、遠隔運転車10が遠隔運転中であること示す文字または画像を車外表示部135に表示させる。さらに、走行制御状態が車内運転モードである場合、モード切替部1427は、S235にて、車内運転中表示として、遠隔運転車10が車内運転中であること示す文字または画像を車外表示部135に表示させる。
 尚、自動運転モードは、遠隔運転車10が異常なく走行している走行制御状態である。故に、モード切替部1427は、自動運転表示を実施しなくてもよい。即ち、モード切替部1427は、遠隔運転中表示および車内運転中表示のみを、車外表示部135を用いて実施してもよい。
 〔遠隔運転者の異常時の車両側処理〕
 モード切替部1427は、遠隔運転モードの開始に基づき、図13に示す処理(以下、車両側処理)を実行する。車両側処理では、自動運転ECU142が遠隔運転者21の状態を遠隔監視する。車両側処理のS251では、モード切替部1427が、状態判断部1426と連携し、遠隔運転施設20の遠隔運転者21の異常を把握する。具体的に、モード切替部1427は、S251にて、遠隔運転施設20での遠隔運転者21の交代を示す交代情報の有無を判定する。交代情報がない場合、S251の判定が継続される。一方、遠隔側システム30から交代情報を取得した場合、モード切替部1427は、S252にて、車内通知部130を用いて交代情報に基づく通知を行う。
 さらに、S253では、モード切替部1427が、状態判断部1426と連携し、遠隔運転の交代要員の有無を把握する。一例として、メイン遠隔操縦者22に異常があり、遠隔運転者21がサブ遠隔操縦者23のみである場合、言い替えれば、遠隔運転施設20に複数人の遠隔運転者21が存在しない場合、モード切替部1427は、交代要員がいない(S253:NO)と判断する。一方、メイン遠隔操縦者22に異常があっても、サブ遠隔操縦者23とは別の遠隔運転者21が遠隔運転施設20にいる場合、モード切替部1427は、交代要員がいる(S253:YES)と判断する。
 S253の判断結果がYESである場合、S251に戻り、車両側処理が継続される。一方、S253の判断結果がNOである場合、モード切替部1427は、S254にて、走行制御ECU150と連携し、遠隔運転での遠隔運転車10の走行機能の一部を制限する。たとえば、モード切替部1427は、交代要員がいる場合よりも、遠隔運転車10の走行速度の上限を低く設定する。さらに、モード切替部1427は、追越車線への車線変更を禁止する、遠隔運転車10のドアを開ける作動のみ可能として走行自体を禁止する等の制限を適用してもよい。
 尚、モード切替部1427は、自動運転モードでの走行中でも車両側処理を実施してもよい。この場合、遠隔運転者21による監視能力の低下を考慮し、モード切替部1427は、運転実行部1429による自動運転の走行機能を制限する。
 次に、遠隔側システム30によって実行される各処理の詳細を、図14および図15に基づき、図9および図10を参照しつつ説明する。
 〔異常同時発生時の遠隔対応処理〕
 遠隔制御装置36は、遠隔側システム30の管理下にある複数の遠隔運転車10のうちの1つから、異常発生を示す通知を取得した場合、図14に示す処理(以下、車両異常対応処理)を開始する。遠隔制御装置36は、車両異常対応処理の実行により、遠隔運転車10の異常の同時発生に備える。
 車両異常対応処理のS271では、遠隔監視部366が、遠隔運転車10に生じた異常の内容を把握する。S271にて、遠隔監視部366は、遠隔運転車10から遠隔運転の実施要求を取得しているか否かをさらに把握する。S272では、提示制御部367が、S271にて把握された異常の内容を、遠隔運転者21および遠隔管理者25に通知する。
 S273では、遠隔監視部366が、複数の遠隔運転車10から遠隔運転の実施要求を取得しているか否かを判断する。S273の判断結果がNOである場合、S276に進む。一方、S273の判断結果がYESである場合、遠隔監視部366は、S274にて、各遠隔運転車10に生じている異常の状態に基づき、各遠隔運転車10の遠隔運転の優先度を判定する。
 遠隔監視部366は、交通事故に関連したシーンに遭遇している遠隔運転車10を、遠隔運転の優先度が最も高い遠隔運転車10とする。また、遠隔監視部366は、仮に停止した場合、道路を塞いでしまい、他の車両の通行を妨げてしまうシーンに遭遇している遠隔運転車10を、遠隔運転の優先度が2番目に高い遠隔運転車10とする。さらに、遠隔監視部366は、停止によって道路を塞いでいる遠隔運転車10を、遠隔運転の優先度が3番目に高い遠隔運転車10とする。尚、同じ優先度の遠隔運転車10が発生した場合、先に異常に遭遇した遠隔運転車10の優先度が高く設定されてよい。
 S275では、提示制御部367が、遠隔運転を行う優先度の高い遠隔運転車10を、この遠隔運転車10に生じている異常の内容とともに遠隔運転者21に通知する。遠隔運転者21は、優先度の通知を参照し、遠隔運転を行う遠隔運転車10、即ち、遠隔支援操縦部368が遠隔運転の運転指示値を提供する遠隔運転車10を決定する。
 S276では、遠隔監視部366が、異常解消を判定する。1つまたは複数の遠隔運転車10が依然として異常状態にある場合(276:NO)、S271に戻り、異常および優先度の通知が継続される。一方、全ての異常が解消した場合(276:YES)、S277にて、異常通知が終了される。S277では、異常の解消が通知されてもよい。
 〔隊列走行時の異常対応処理〕
 遠隔制御装置36は、隊列走行を行っている複数の遠隔運転車10のうちの1つに異常が発生した場合に、図15に示す処理(以下、隊列管理処理)を開始する。隊列走行とは、複数(2台以上)の遠隔運転車10が連なって、自動で車間距離を保ちつつ走行している状態である。
 隊列管理処理のS291では、遠隔監視部366が、遠隔運転車10(以下、異常発生車両)に生じている異常の内容と、異常発生車両の隊列中における位置とを把握する。さらに、遠隔監視部366は、S292にて、異常発生車両について、走行の継続が可能か否かを判断する。S292の判断結果がNOである場合、隊列管理処理は終了される。この場合、隊列走行中の全ての遠隔運転車10を一旦停止させて、異常発生車両に搭乗していた乗員14を他の正常な遠隔運転車10に移動させるための処置が、遠隔運転施設20(遠隔運転者21または遠隔管理者25)の主導で実施される。
 一方、S292の判断結果がYESである場合、遠隔監視部366は、S293にて、異常発生車両が前側遠隔車か否かを判断する。前側遠隔車は、他の遠隔運転車10よりも前方を走行する遠隔運転車10である。S293の判断結果がYESである場合、遠隔支援操縦部368は、S294にて、隊列入替指示を、隊列中の各遠隔運転車10に提供する。隊列入替指示は、異常発生車両である前側遠隔車と、正常な遠隔運転車10である後側遠隔車との前後位置を入れ替えるための指示である。隊列入替指示によれば、正常な遠隔運転車10は、停止している異常発生車両を追い越し、異常発生車両の前方に移動する。以上により、異常発生車両が正常な遠隔運転車10を追従する形態で、隊列走行が継続される。
 対して、S293の判断結果がNOである場合、遠隔支援操縦部368は、S295にて、隊列を維持する指示を各遠隔運転車10に提供する。以上によっても、異常発生車両が正常な遠隔運転車10を追従する形態で、隊列走行が継続される。
 尚、3台以上の遠隔運転車10が隊列走行を行っている場合、遠隔監視部366は、異常発生車両について、隊列の先頭車両または最後尾車両か否かを判断する。異常発生車両が先頭車両または最後尾車両である場合、遠隔支援操縦部368は、異常発生車両を隊列の中間に移動させる指示を各遠隔運転車10に提供する。以上により、異常発生車両が正常な遠隔運転車10に前後を守られた形態で、隊列走行が継続される。
 〔第2実施形態のまとめ〕
 以上、説明した第2実施形態でも、第1実施形態と同様の効果を奏する。加えて第2実施形態では、遠隔運転車10の走行を制御する走行制御ECU150は、モード切替部1427が車内運転を許可する場合、遠隔運転によって走行する場合よりも遠隔運転車10の走行速度を制限する(S210)。故に、遠隔運転者21よりも運転に慣れてない車内運転者12が運転操作の制御権を引き継いだ後も、遠隔運転車10は、安定的な走行を継続できる。
 また、モード切替部1427は、車内運転を許可した場合に、車内操作部材13の操作を試みる特定乗員14sに関する乗員情報に基づき、車内運転を特定乗員14sに許可するか否かをさらに決定する(S208)。故に、好ましくない乗員14に運転操作の制御権が引き継がれてしまう事態は、回避され得る。
 さらに、モード切替部1427は、乗員情報に基づく判断結果であって、車内運転を特定乗員14sに許可するか否かを判断した判断結果を、遠隔側システム30から取得する。そして、モード切替部1427は、取得した判断結果に従い、車内運転を特定乗員14sに許可するか否かを決定する(S208)。以上によれば、特定乗員14sについて、遠隔運転車10の運転に適しているか否かが、より適切に判断され得る。その結果、車内運転への移行後も、遠隔運転車10は、安定的な走行を継続できる。
 また、モード切替部1427は、遠隔運転を行う遠隔運転者21の交代を示す交代情報を遠隔側システム30から取得した場合に、遠隔運転車10に備えられている車内通知部130を用いて交代情報に基づく通知を行う(S252)。以上によれば、遠隔運転者21の交代に起因した挙動変化が生じた場合でも、遠隔運転車10の乗員14は、不安を感じ難くなる。
 また、モード切替部1427は、遠隔運転を行う遠隔運転者21の交代要員の有無を把握し、交代要員がいない場合、遠隔運転車10の走行機能の一部を制限する(S254)。以上によれば、複数の遠隔運転車10の運行が遠隔側システム30によって管理される形態であっても、適切なリスク管理が可能になる。
 また、遠隔支援操縦部368は、遠隔側システム30の管理下にある複数の遠隔運転車10のうちの特定の遠隔運転車10に、遠隔運転の運転指示値を提供する。こうした複数の遠隔運転車10から遠隔運転の実施要求を取得した場合、提示制御部367は、遠隔運転を行う優先度の高い遠隔運転車10を遠隔運転者21に通知する(S275)。以上によれば、複数の遠隔運転車10の運行が遠隔側システム30によって管理される形態であっても、遠隔運転者21は、運転操作を引き継いで遠隔運転を実施すべき遠隔運転車10を、適切に選択できる。
 また、遠隔支援操縦部368は、隊列走行を行う複数の遠隔運転車10のうち、前側遠隔車に異常が生じた場合、正常な遠隔運転車10である後側遠隔車と前側遠隔車との前後位置を入れ替えるための指示を、後側遠隔車および前側遠隔車に提供する(S294)。以上によれば、軽微な異常が生じた場合でも、隊列走行が継続可能になる。その結果、リスクを適切に管理しつつ、乗員14の利便性が確保され得る。
 また、モード切替部1427は、遠隔運転および車内運転のいずれによって遠隔運転車10が走行しているのかを示す運転状態情報を、車外へ向けた情報表示を行う車外表示部135に表示させる。以上によれば、遠隔運転車10の周囲の歩行者等は、遠隔運転車10に不安を感じ難くなる。
 尚、上記の第2実施形態では、乗員情報取得装置220が「車内運転者監視装置」に相当し、走行制御ECU150が「走行制御部」に相当し、提示制御部367が「通知制御部」に相当し、遠隔支援操縦部368が「指示提供部」に相当する。また、状態判断部1426が「遠隔側異常判断部」に相当し、モード切替部1427が「車内運転許可部」に相当する。
 以上、複数の実施形態を説明したが、開示した技術は上述の実施形態に限定されるものではなく、次の変形例も開示した範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施できる。
 <変形例1>
 車内運転許可部1422は、車内運転を許可する場合、車内運転としてブレーキ操作のみ乗員に許可してもよい。
 <変形例2>
 遠隔運転車10が、S6において、管理者通知装置34から出力する通知を、自動運転レベル3が実行されている場合と、自動運転レベル2以下が実行されている場合とで異ならせてもよい。具体的には、自動運転レベル3が実行されているときよりも、自動運転レベル2以下が実行されているときのほうが、緊急性の高いことを認識させる通知とする。
 <その他の変形例>
 自動運転レベル3を実行中であっても、遠隔運転から車内運転に切り替える場合、一旦、遠隔運転車10を停止させてもよい。
 遠隔運転時、車内操作部材13と対応アクチュエータとの間の機械的機構がロックあるいは切断されることにより、車内操作部材13による運転操作が不能になっていてもよい。
 実施形態では、遠隔側異常判断部1421は、遠隔運転者21と遠隔側システム30の異常を判断していた。しかし、遠隔側異常判断部1421が遠隔運転者21と遠隔側システム30のいずれか一方のみの異常を判断してもよい。
 遠隔運転車10は運転席11を備えていない車でもよい。車内操作部材13が遠隔運転車10を停止させるボタンのみである場合など、運転席11が不要なことも考えられる。
 本開示に記載のECU、制御装置は下記に記載の制御部である。本開示において、制御部およびその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の制御部およびその手法は、専用ハードウエア論理回路により、実現されてもよい。もしくは、本開示に記載の制御部およびその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウエア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。ハードウエア論理回路は、たとえば、ASIC、FPGAである。
 コンピュータプログラムを記憶する記憶媒体はROMに限られない。各種プログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体(non-transitory tangible storage medium)に記憶されていればよい。たとえば、フラッシュメモリに上記プログラムが記憶されていてもよい。さらに、記憶媒体の形態は、適宜変更されてよい。こうした記憶媒体は、回路基板上に設けられた構成に限定されず、メモリカード等の形態で提供され、スロット部に挿入されて、自動運転ECUまたは遠隔制御装置等の制御回路に電気的に接続される構成であってよい。さらに、記憶媒体は、自動運転ECUまたは遠隔制御装置へのプログラムのコピー元または配信元となる光学ディスク又はハードディスクドライブ等であってもよい。
 (技術的思想の開示)
 この明細書は、以下に列挙する複数の項に記載された複数の技術的思想を開示している。いくつかの項は、後続の項において先行する項を択一的に引用する多項従属形式(a multiple dependent form)により記載されている場合がある。さらに、いくつかの項は、他の多項従属形式の項を引用する多項従属形式(a multiple dependent form referring to another multiple dependent form)により記載されている場合がある。これらの多項従属形式で記載された項は、複数の技術的思想を定義している。
 (技術的思想1)
 遠隔運転者(21)による遠隔運転と、車内にある車内操作部材(13)を操作して運転する車内運転とが可能な遠隔運転車(10)を制御する車両遠隔運転システム(5)であって、
 前記遠隔運転者および前記遠隔運転者が操作する遠隔側システム(30)の少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断する遠隔側異常判断部(1421,1426)と、
 前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記車内運転を許可する車内運転許可部(1422,1427)と、を備える車両遠隔運転システム。
 (技術的思想2)
 技術的思想1に記載の車両遠隔運転システムであって、
 前記遠隔側異常判断部は、前記遠隔運転者に異常があるかどうか、および、前記遠隔側システムに異常があるかどうかを逐次判断し、
 前記車内運転許可部は、前記遠隔側異常判断部が、前記遠隔運転者および前記遠隔側システムがともに異常ではないと判断している場合、前記車内運転を許可しない、車両遠隔運転システム。
 (技術的思想3)
 技術的思想2に記載の車両遠隔運転システムであって、
 前記遠隔運転車に備えられ、前記遠隔側システムから取得した運転指示値に基づいて、前記遠隔運転車の走行を制御する走行制御部(150)を備え、
 前記走行制御部は、前記車内操作部材が操作された操作量に基づいて前記遠隔運転車の走行を制御することも可能であり、前記車内運転許可部が前記車内運転を許可していないときにも、前記車内操作部材が操作された前記操作量を示す信号を逐次取得し、前記車内運転許可部が前記車内運転を許可した場合、取得済みの前記操作量を示す信号に基づいて前記遠隔運転車の走行を制御する、車両遠隔運転システム。
 (技術的思想4)
 技術的思想1~3のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔運転車は、前記車内操作部材を操作する際に座る運転席(11)と、前記運転席に座っている乗員である車内運転者の覚醒レベルを逐次判断する車内運転者監視装置(120,220)と、を備え、
 前記遠隔側異常判断部は、少なくとも前記遠隔運転者に異常があるかどうかを逐次判断し、かつ、前記遠隔運転者の覚醒レベルに基づき、前記遠隔運転者に異常の兆候があるか否かも逐次判断し、
 前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔運転者に異常の兆候があると判断した場合であって、前記車内運転者監視装置が前記車内運転者の覚醒レベルを判断している場合、前記遠隔運転者と前記車内運転者のうち覚醒レベルが高い側に運転操作を許可する、車両遠隔運転システム。
 (技術的思想5)
 技術的思想1~3のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔運転車は、運転者に周辺監視義務はないが運転を引き継ぐことができる状態であることが要求される監視義務なし自動運転が可能であり、前記車内操作部材を操作する際に座る運転席(11)と、前記運転席に座っている乗員である車内運転者が運転を引き継ぐことができる状態であるかを監視する車内運転者監視装置(120,220)と、を備え、
 前記車内運転許可部は、前記遠隔運転であって前記監視義務なし自動運転中に前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記車内運転を許可するとともに、前記車内運転者が運転を引き継ぐことができる状態である場合に、前記監視義務なし自動運転における運転者を前記車内運転者に切り替えて、前記監視義務なし自動運転を継続する、車両遠隔運転システム。
 (技術的思想6)
 技術的思想1~4のいずれか1項に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記車内運転としてブレーキ操作のみ許可する、車両遠隔運転システム。
 (技術的思想7)
 技術的思想1~6のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔運転車の走行を制御する走行制御部(150)を備え、
 前記走行制御部は、前記車内運転許可部が前記車内運転を許可する場合、前記遠隔運転によって走行する場合よりも前記遠隔運転車の走行速度を制限する、車両遠隔運転システム。
 (技術的思想8)
 技術的思想6または7に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記車内運転を許可した場合に、前記車内操作部材の操作を試みる特定乗員(14s)に関する乗員情報に基づき、前記車内運転を前記特定乗員に許可するか否かをさらに決定する、車両遠隔運転システム。
 (技術的思想9)
 技術的思想8に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、
 前記乗員情報に基づく判断結果であって、前記車内運転を前記特定乗員に許可するか否かを判断した前記判断結果を、前記遠隔側システムから取得し、
 前記判断結果に従い、前記車内運転を前記特定乗員に許可するか否かを決定する、車両遠隔運転システム。
 (技術的思想10)
 技術的思想1~9のいずれか1項に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、
 前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に前記遠隔運転車を停止させ、
 前記遠隔運転車の停止後、前記遠隔側判断対象の異常を解消する解消処理が行われた場合に、前記遠隔運転による走行の再開を許可する、車両遠隔運転システム。
 (技術的思想11)
 技術的思想1~10のいずれか1項に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に前記遠隔運転車を停止させ、その後、前記車内運転を許可し、前記車内操作部材が操作された場合に前記遠隔運転車が走行する車内運転モードに自動的に移行する、車両遠隔運転システム。
 (技術的思想12)
 技術的思想1に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記遠隔運転を行う前記遠隔運転者の交代を示す交代情報を前記遠隔側システムから取得した場合に、前記遠隔運転車に備えられている車内通知部(130)を用いて前記交代情報に基づく通知を行う、車両遠隔運転システム。
 (技術的思想13)
 技術的思想12に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記遠隔運転を行う前記遠隔運転者の交代要員の有無を把握し、前記交代要員がいない場合、前記遠隔運転車の走行機能の一部を制限する、車両遠隔運転システム。
 (技術的思想14)
 技術的思想1~13のいずれか1項に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記遠隔運転車に備えられている車内通知部(130)から、前記車内運転に切り替えたことを通知する、車両遠隔運転システム。
 (技術的思想15)
 技術的思想14に記載の車両遠隔運転システムであって、
 前記遠隔運転車は、前記遠隔運転者に周辺監視義務がない監視義務なし自動運転と、前記遠隔運転者に周辺監視義務がある監視義務あり自動運転とを切り替えて実行可能であり、
 前記車内運転許可部は、前記監視義務なし自動運転が実行されている場合と、前記監視義務あり自動運転が実行されている場合とで、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断したときの通知内容を異ならせる、車両遠隔運転システム。
 (技術的思想16)
 技術的思想1~15のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔運転者が前記遠隔運転に適した状態であるかを逐次監視する遠隔運転者監視装置(32)と、
 前記遠隔運転者監視装置の監視結果が、前記遠隔運転者が前記遠隔運転に適した状態でないことを示していることに基づいて、前記遠隔運転者が前記遠隔運転に適した状態でないことを、前記遠隔側システムを操作可能な者であり前記遠隔運転者とは別の管理者(25)に対して通知する管理者通知装置(34)と、を備える、車両遠隔運転システム。
 (技術的思想17)
 技術的思想16に記載の車両遠隔運転システムであって、
 前記遠隔運転車は、前記遠隔運転者に周辺監視義務がない監視義務なし自動運転と、前記遠隔運転者に周辺監視義務がある監視義務あり自動運転とを切り替えて実行可能であり、
 前記管理者通知装置は、前記監視義務なし自動運転が実行されている場合と、前記監視義務あり自動運転が実行されている場合とで、前記遠隔側異常判断部が前記遠隔運転者に異常があると判断したときの通知内容を異ならせる、車両遠隔運転システム。
 (技術的思想18)
 技術的思想1~17のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔側システムの管理下にある複数の前記遠隔運転車のうちの特定の前記遠隔運転車に、前記遠隔運転の運転指示値を提供する指示提供部(368)と、
 複数の前記遠隔運転車から前記遠隔運転の実施要求を取得した場合に、前記遠隔運転を行う優先度の高い前記遠隔運転車を前記遠隔運転者に通知する通知制御部(367)と、を備える、車両遠隔運転システム。
 (技術的思想19)
 技術的思想1~18のいずれか1項に記載の車両遠隔運転システムであって、
 前記遠隔側システムの管理下にある複数の前記遠隔運転車のうちの特定の前記遠隔運転車に、前記遠隔運転の運転指示値を提供する指示提供部(368)を備え、
 前記指示提供部は、隊列走行を行う複数の前記遠隔運転車のうちで、他の前記遠隔運転車よりも前方を走行する前側遠隔車に異常が生じた場合、正常な前記遠隔運転車である後側遠隔車と前記前側遠隔車との前後位置を入れ替えるための指示を、前記後側遠隔車および前記前側遠隔車に提供する、車両遠隔運転システム。
 (技術的思想20)
 技術的思想1~19のいずれか1項に記載の車両遠隔運転システムであって、
 前記車内運転許可部は、前記遠隔運転および前記車内運転のいずれによって前記遠隔運転車が走行しているのかを示す運転状態情報を、車外へ向けた情報表示を行う前記遠隔運転車の車外表示部(135)に表示させる、車両遠隔運転システム。

Claims (21)

  1.  遠隔運転者(21)による遠隔運転と、車内にある車内操作部材(13)を操作して運転する車内運転とが可能な遠隔運転車(10)を制御する車両遠隔運転システム(5)であって、
     前記遠隔運転者および前記遠隔運転者が操作する遠隔側システム(30)の少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断する遠隔側異常判断部(1421,1426)と、
     前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記車内運転を許可する車内運転許可部(1422,1427)と、を備える車両遠隔運転システム。
  2.  請求項1に記載の車両遠隔運転システムであって、
     前記遠隔側異常判断部は、前記遠隔運転者に異常があるかどうか、および、前記遠隔側システムに異常があるかどうかを逐次判断し、
     前記車内運転許可部は、前記遠隔側異常判断部が、前記遠隔運転者および前記遠隔側システムがともに異常ではないと判断している場合、前記車内運転を許可しない、車両遠隔運転システム。
  3.  請求項2に記載の車両遠隔運転システムであって、
     前記遠隔運転車に備えられ、前記遠隔側システムから取得した運転指示値に基づいて、前記遠隔運転車の走行を制御する走行制御部(150)を備え、
     前記走行制御部は、前記車内操作部材が操作された操作量に基づいて前記遠隔運転車の走行を制御することも可能であり、前記車内運転許可部が前記車内運転を許可していないときにも、前記車内操作部材が操作された前記操作量を示す信号を逐次取得し、前記車内運転許可部が前記車内運転を許可した場合、取得済みの前記操作量を示す信号に基づいて前記遠隔運転車の走行を制御する、車両遠隔運転システム。
  4.  請求項1~3のいずれか1項に記載の車両遠隔運転システムであって、
     前記遠隔運転車は、前記車内操作部材を操作する際に座る運転席(11)と、前記運転席に座っている乗員である車内運転者の覚醒レベルを逐次判断する車内運転者監視装置(120,220)と、を備え、
     前記遠隔側異常判断部は、少なくとも前記遠隔運転者に異常があるかどうかを逐次判断し、かつ、前記遠隔運転者の覚醒レベルに基づき、前記遠隔運転者に異常の兆候があるか否かも逐次判断し、
     前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔運転者に異常の兆候があると判断した場合であって、前記車内運転者監視装置が前記車内運転者の覚醒レベルを判断している場合、前記遠隔運転者と前記車内運転者のうち覚醒レベルが高い側に運転操作を許可する、車両遠隔運転システム。
  5.  請求項1~3のいずれか1項に記載の車両遠隔運転システムであって、
     前記遠隔運転車は、運転者に周辺監視義務はないが運転を引き継ぐことができる状態であることが要求される監視義務なし自動運転が可能であり、前記車内操作部材を操作する際に座る運転席(11)と、前記運転席に座っている乗員である車内運転者が運転を引き継ぐことができる状態であるかを監視する車内運転者監視装置(120,220)と、を備え、
     前記車内運転許可部は、前記遠隔運転であって前記監視義務なし自動運転中に前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記車内運転を許可するとともに、前記車内運転者が運転を引き継ぐことができる状態である場合に、前記監視義務なし自動運転における運転者を前記車内運転者に切り替えて、前記監視義務なし自動運転を継続する、車両遠隔運転システム。
  6.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記車内運転としてブレーキ操作のみ許可する、車両遠隔運転システム。
  7.  請求項1に記載の車両遠隔運転システムであって、
     前記遠隔運転車の走行を制御する走行制御部(150)を備え、
     前記走行制御部は、前記車内運転許可部が前記車内運転を許可する場合、前記遠隔運転によって走行する場合よりも前記遠隔運転車の走行速度を制限する、車両遠隔運転システム。
  8.  請求項6または7に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記車内運転を許可した場合に、前記車内操作部材の操作を試みる特定乗員(14s)に関する乗員情報に基づき、前記車内運転を前記特定乗員に許可するか否かをさらに決定する、車両遠隔運転システム。
  9.  請求項8に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、
     前記乗員情報に基づく判断結果であって、前記車内運転を前記特定乗員に許可するか否かを判断した前記判断結果を、前記遠隔側システムから取得し、
     前記判断結果に従い、前記車内運転を前記特定乗員に許可するか否かを決定する、車両遠隔運転システム。
  10.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、
     前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に前記遠隔運転車を停止させ、
     前記遠隔運転車の停止後、前記遠隔側判断対象の異常を解消する解消処理が行われた場合に、前記遠隔運転による走行の再開を許可する、車両遠隔運転システム。
  11.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に前記遠隔運転車を停止させ、その後、前記車内運転を許可し、前記車内操作部材が操作された場合に前記遠隔運転車が走行する車内運転モードに自動的に移行する、車両遠隔運転システム。
  12.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記遠隔運転を行う前記遠隔運転者の交代を示す交代情報を前記遠隔側システムから取得した場合に、前記遠隔運転車に備えられている車内通知部(130)を用いて前記交代情報に基づく通知を行う、車両遠隔運転システム。
  13.  請求項12に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記遠隔運転を行う前記遠隔運転者の交代要員の有無を把握し、前記交代要員がいない場合、前記遠隔運転車の走行機能の一部を制限する、車両遠隔運転システム。
  14.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断した場合に、前記遠隔運転車に備えられている車内通知部(130)から、前記車内運転に切り替えたことを通知する、車両遠隔運転システム。
  15.  請求項14に記載の車両遠隔運転システムであって、
     前記遠隔運転車は、前記遠隔運転者に周辺監視義務がない監視義務なし自動運転と、前記遠隔運転者に周辺監視義務がある監視義務あり自動運転とを切り替えて実行可能であり、
     前記車内運転許可部は、前記監視義務なし自動運転が実行されている場合と、前記監視義務あり自動運転が実行されている場合とで、前記遠隔側異常判断部が前記遠隔側判断対象に異常があると判断したときの通知内容を異ならせる、車両遠隔運転システム。
  16.  請求項1に記載の車両遠隔運転システムであって、
     前記遠隔運転者が前記遠隔運転に適した状態であるかを逐次監視する遠隔運転者監視装置(32)と、
     前記遠隔運転者監視装置の監視結果が、前記遠隔運転者が前記遠隔運転に適した状態でないことを示していることに基づいて、前記遠隔運転者が前記遠隔運転に適した状態でないことを、前記遠隔側システムを操作可能な者であり前記遠隔運転者とは別の管理者(25)に対して通知する管理者通知装置(34)と、を備える、車両遠隔運転システム。
  17.  請求項16に記載の車両遠隔運転システムであって、
     前記遠隔運転車は、前記遠隔運転者に周辺監視義務がない監視義務なし自動運転と、前記遠隔運転者に周辺監視義務がある監視義務あり自動運転とを切り替えて実行可能であり、
     前記管理者通知装置は、前記監視義務なし自動運転が実行されている場合と、前記監視義務あり自動運転が実行されている場合とで、前記遠隔側異常判断部が前記遠隔運転者に異常があると判断したときの通知内容を異ならせる、車両遠隔運転システム。
  18.  請求項1に記載の車両遠隔運転システムであって、
     前記遠隔側システムの管理下にある複数の前記遠隔運転車のうちの特定の前記遠隔運転車に、前記遠隔運転の運転指示値を提供する指示提供部(368)と、
     複数の前記遠隔運転車から前記遠隔運転の実施要求を取得した場合に、前記遠隔運転を行う優先度の高い前記遠隔運転車を前記遠隔運転者に通知する通知制御部(367)と、を備える、車両遠隔運転システム。
  19.  請求項1に記載の車両遠隔運転システムであって、
     前記遠隔側システムの管理下にある複数の前記遠隔運転車のうちの特定の前記遠隔運転車に、前記遠隔運転の運転指示値を提供する指示提供部(368)を備え、
     前記指示提供部は、隊列走行を行う複数の前記遠隔運転車のうちで、他の前記遠隔運転車よりも前方を走行する前側遠隔車に異常が生じた場合、正常な前記遠隔運転車である後側遠隔車と前記前側遠隔車との前後位置を入れ替えるための指示を、前記後側遠隔車および前記前側遠隔車に提供する、車両遠隔運転システム。
  20.  請求項1に記載の車両遠隔運転システムであって、
     前記車内運転許可部は、前記遠隔運転および前記車内運転のいずれによって前記遠隔運転車が走行しているのかを示す運転状態情報を、車外へ向けた情報表示を行う前記遠隔運転車の車外表示部(135)に表示させる、車両遠隔運転システム。
  21.  遠隔運転者(21)による遠隔運転と、車内にある車内操作部材(13)を操作して運転する車内運転とが可能な遠隔運転車(10)を制御する車両遠隔運転方法であって、
     前記遠隔運転者および前記遠隔運転者が操作する遠隔側システム(30)の少なくとも一方である遠隔側判断対象に異常があるかどうかを逐次判断し、
     前記遠隔側判断対象に異常があると判断した場合に、前記車内運転を許可する、車両遠隔運転方法。
PCT/JP2022/041142 2021-11-12 2022-11-04 車両遠隔運転システム、および、車両遠隔運転方法 WO2023085202A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2021185009 2021-11-12
JP2021-185009 2021-11-12
JP2022-171811 2022-10-26
JP2022171811A JP2023072662A (ja) 2021-11-12 2022-10-26 車両遠隔運転システム、および、車両遠隔運転方法

Publications (1)

Publication Number Publication Date
WO2023085202A1 true WO2023085202A1 (ja) 2023-05-19

Family

ID=86336000

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/041142 WO2023085202A1 (ja) 2021-11-12 2022-11-04 車両遠隔運転システム、および、車両遠隔運転方法

Country Status (1)

Country Link
WO (1) WO2023085202A1 (ja)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015151862A1 (ja) * 2014-04-01 2015-10-08 みこらった株式会社 自動車及び自動車用プログラム
WO2018087880A1 (ja) * 2016-11-11 2018-05-17 本田技研工業株式会社 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
JP2019016971A (ja) * 2017-07-10 2019-01-31 パイオニア株式会社 音出力装置
JP2020087260A (ja) * 2018-11-30 2020-06-04 株式会社デンソー 制御装置
JP2020204998A (ja) * 2019-06-19 2020-12-24 三菱電機株式会社 運転連携装置、運転連携方法、及び運転連携プログラム
JP2021018486A (ja) * 2019-07-17 2021-02-15 トヨタ自動車株式会社 車両制御装置
JP2021060764A (ja) * 2019-10-04 2021-04-15 トヨタ自動車株式会社 運転制御装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015151862A1 (ja) * 2014-04-01 2015-10-08 みこらった株式会社 自動車及び自動車用プログラム
WO2018087880A1 (ja) * 2016-11-11 2018-05-17 本田技研工業株式会社 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
JP2019016971A (ja) * 2017-07-10 2019-01-31 パイオニア株式会社 音出力装置
JP2020087260A (ja) * 2018-11-30 2020-06-04 株式会社デンソー 制御装置
JP2020204998A (ja) * 2019-06-19 2020-12-24 三菱電機株式会社 運転連携装置、運転連携方法、及び運転連携プログラム
JP2021018486A (ja) * 2019-07-17 2021-02-15 トヨタ自動車株式会社 車両制御装置
JP2021060764A (ja) * 2019-10-04 2021-04-15 トヨタ自動車株式会社 運転制御装置

Similar Documents

Publication Publication Date Title
US10845796B2 (en) Electronic control units, vehicles, and methods for switching vehicle control from an autonomous driving mode
US10392027B2 (en) Driving assistance control apparatus
JP6773046B2 (ja) 運転支援装置及び運転支援方法、並びに移動体
WO2018226821A1 (en) System and methods to enable user control of an autonomous vehicle
US20200326702A1 (en) Vehicle remote instruction system
CN111361552A (zh) 自动驾驶系统
CN111762168A (zh) 控制装置、控制方法以及存储介质
JP7053560B2 (ja) 駐車支援システムおよびその制御方法
CN111824175A (zh) 车辆控制系统
CN113401056B (zh) 显示控制装置、显示控制方法以及计算机可读取存储介质
US20230356746A1 (en) Presentation control device and non-transitory computer readable medium
JP7448624B2 (ja) 運転支援装置、運転支援方法、およびプログラム
CN113614805B (zh) 显示控制装置、显示控制方法以及存储介质
WO2023085202A1 (ja) 車両遠隔運転システム、および、車両遠隔運転方法
WO2022014198A1 (ja) 車両用表示制御装置、車両用表示制御システム、及び車両用表示制御方法
JP2023072662A (ja) 車両遠隔運転システム、および、車両遠隔運転方法
WO2024128037A1 (ja) 制御装置、自動運転装置及び走行制御装置
US20240083455A1 (en) Function control device, function control program, automated driving control device, and storage medium
JP7345007B1 (ja) 制御装置
US20240075963A1 (en) Automated driving control apparatus and automated driving control program
WO2023157515A1 (ja) 車両用表示制御装置及び車両用表示制御方法
JP2024086576A (ja) 制御装置、自動運転装置及び走行制御装置
WO2023157607A1 (ja) 自動運転制御装置、及び自動運転制御方法
CN113615256B (zh) 控制装置、控制方法以及存储介质
US20240059304A1 (en) Vehicle control device, vehicle control system, vehicle control method, and program

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22892701

Country of ref document: EP

Kind code of ref document: A1