WO2019077739A1 - 移動体制御システム - Google Patents

移動体制御システム Download PDF

Info

Publication number
WO2019077739A1
WO2019077739A1 PCT/JP2017/038001 JP2017038001W WO2019077739A1 WO 2019077739 A1 WO2019077739 A1 WO 2019077739A1 JP 2017038001 W JP2017038001 W JP 2017038001W WO 2019077739 A1 WO2019077739 A1 WO 2019077739A1
Authority
WO
WIPO (PCT)
Prior art keywords
control
mobile
information
control device
movement
Prior art date
Application number
PCT/JP2017/038001
Other languages
English (en)
French (fr)
Inventor
健太 前田
絢也 高橋
Original Assignee
株式会社日立製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社日立製作所 filed Critical 株式会社日立製作所
Priority to JP2019549080A priority Critical patent/JP6839770B2/ja
Priority to US16/754,831 priority patent/US20210197808A1/en
Priority to PCT/JP2017/038001 priority patent/WO2019077739A1/ja
Publication of WO2019077739A1 publication Critical patent/WO2019077739A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0097Predicting future conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • B60W30/18163Lane change; Overtaking manoeuvres
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G1/00Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data
    • G09G1/06Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data using single beam tubes, e.g. three-dimensional or perspective representation, rotation or translation of display pattern, hidden lines, shadows
    • G09G1/14Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data using single beam tubes, e.g. three-dimensional or perspective representation, rotation or translation of display pattern, hidden lines, shadows the beam tracing a pattern independent of the information to be displayed, this latter determining the parts of the pattern rendered respectively visible and invisible
    • G09G1/16Control arrangements or circuits, of interest only in connection with cathode-ray tube indicators; General aspects or details, e.g. selection emphasis on particular characters, dashed line or dotted line generation; Preprocessing of data using single beam tubes, e.g. three-dimensional or perspective representation, rotation or translation of display pattern, hidden lines, shadows the beam tracing a pattern independent of the information to be displayed, this latter determining the parts of the pattern rendered respectively visible and invisible the pattern of rectangular co-ordinates extending over the whole area of the screen, i.e. television type raster
    • G09G1/165Details of a display terminal using a CRT, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2400/00Indexing codes relating to detected, measured or calculated conditions or factors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00Output or target parameters relating to a particular sub-units
    • B60W2710/18Braking system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2710/00Output or target parameters relating to a particular sub-units
    • B60W2710/20Steering systems

Definitions

  • the present invention relates to a mobile object control system including a mobile object control apparatus for a mobile object capable of autonomous movement, and a control apparatus for remotely controlling movement of the mobile object when autonomous mobile movement can not be continued. .
  • the automatic travel control device (12) is mounted on an automatic traveling vehicle (10) which automatically travels along a route, and the control information acquisition means (20, 22)
  • a position acquisition means (20) and an automatic travel control means (22) are included
  • the control information acquisition means includes control information acquired by communication from a control device that controls the automatic traveling vehicle, and the automatic traveling vehicle is
  • the candidate position acquisition means acquires the candidate stop position where the automatic traveling vehicle may stop.
  • the automatic travel control means is based on the control information acquired by the control information acquisition means.
  • the automatic traveling vehicle is caused to automatically travel and communication with the control device is interrupted, the automatic traveling vehicle is automatically traveled to the stop candidate position acquired by the candidate position acquisition means. Obtained in advance from the control device, communication with the control apparatus even if the disrupted, by automatic operation to its stop position candidates, technology that enables the automatic operation as much as possible continuously is disclosed.
  • the automatic travel control device is information regarding the state of the own vehicle and the surroundings of the own vehicle, which is necessary for the automatic traveling to cause the own vehicle to travel toward the destination.
  • the means for acquiring the information, the traveling direction and the speed of the own vehicle are controlled based on the automatic traveling information, the automatic traveling means for automatically traveling, and the judging means for judging whether or not the problem regarding the automatic traveling information has occurred (S200, And S215), when a problem arises, according to the contents of the problem, changing means (S205, S210, S225 to S255) for changing the traveling state of the vehicle or the traveling state of another vehicle , And further includes a detection unit (S230) for detecting an evacuation area capable of stopping the own vehicle without interfering with the travel of the other vehicle.
  • Patent Document 1 and Patent Document 2 attempt to stop by autonomously moving to the candidate stop position and the evacuation area without receiving the support of the control device when communication interruption or moving object abnormality occurs. is there. And in order to realize this, it is necessary to have a high-performance and expensive control device which can appropriately control the own vehicle even when communication is interrupted and can appropriately determine an abnormal state (a state in which autonomous movement can not be continued) of the own vehicle. Do.
  • the present invention has been made in view of these circumstances, and the purpose of the present invention is to predict the inability to continue autonomous movement in the future on the control device side, before the autonomous movement can not be continued,
  • An object of the present invention is to provide a mobile control system that appropriately switches from autonomous control to remote control according to an instruction from a control device.
  • a mobile control system comprises a mobile control apparatus mounted on a mobile that can move autonomously, and a control apparatus for controlling the mobile from a remote location
  • the mobile control device includes external world information acquisition means for acquiring the external world information of the mobile body, movement information acquisition means for acquiring the movement information of the mobile body, the external world information and the movement information.
  • the control device includes communication control means for predicting a future state, and mobile unit communication means for communicating with the control device, and the control device includes control device communication means for communicating with the mobile control device, and the mobile control device.
  • Control simulator which predicts the future state of the mobile unit based on the external world information and the movement information received from the vehicle, and a ratio of the future states predicted by the control means and the control simulator And was a mobile control system and a autonomous mobile possibility determining means for determining whether to continue the autonomous movement of the movable body.
  • FIG. FIG. 2 is a functional block diagram of a mobile control system according to the first embodiment.
  • FIG. 7 is an explanatory view showing an example of calculating a deviation of a target traveling track in the first embodiment.
  • FIG. 7 is an explanatory view showing an example of calculating a deviation of a target velocity in the first embodiment.
  • FIG. 7 is an explanatory view showing an example of calculating a deviation of a target acceleration in the first embodiment.
  • FIG. 2 is an explanatory view showing an example of an operation information acquisition unit and a display unit in the first embodiment.
  • FIG. 6 is an explanatory view showing an operation example of the mobile control system according to the first embodiment.
  • FIG. 6 is an explanatory view showing an operation example of the mobile control system according to the first embodiment.
  • FIG. 6 is an explanatory view showing an operation example of the mobile control system according to the first embodiment.
  • Explanatory drawing which showed the whole structure of the mobile control system of Example 2.
  • FIG. 14 is an explanatory view showing an example of calculating the deviation of external world information in the second embodiment.
  • FIG. 13 is an explanatory drawing showing an example of calculating the deviation of the self position of the vehicle based on the fixed point observation camera in the second embodiment.
  • FIG. 13 is an explanatory view showing an example of calculating the deviation of the self position of the own vehicle based on the external world information acquisition unit of the other moving object in the second embodiment.
  • Explanatory drawing which shows the operation example of the mobile control system of Example 2.
  • FIG. Explanatory drawing which showed the whole structure of the mobile control system of Example 3.
  • FIG. Explanatory drawing which showed an example of the front image
  • FIG. 14 is an explanatory diagram showing an example of 3D point cloud information displayed on the display unit of the third embodiment.
  • the mobile control system according to the first embodiment will be described with reference to FIGS. 1 to 9, 17 and 18.
  • the moving object to be controlled by the moving object control system is the vehicle 21 that moves autonomously.
  • FIG. 1 is an overall configuration diagram of a vehicle 21 equipped with an on-vehicle control device 1 (mobile object control device) constituting the mobile object control system of the present embodiment, and is a view looking down on the vehicle 21 from above.
  • FL is the front left wheel
  • FR is the front right wheel
  • RL is the rear left wheel
  • RR is the rear right wheel.
  • the in-vehicle control device 1 incorporates a ROM, a RAM, a CPU, and an input / output device, and the CPU executes a program loaded from the ROM to the RAM to autonomously control each part of the vehicle 21 based on a travel plan described later. Even when the control device 2 to be described later remotely controls the vehicle 21, based on the remote control information 15 from the control device 2 received via the on-vehicle communication device 43 performing communication between road vehicles, The respective units of the vehicle 21 are controlled.
  • the on-vehicle control device 1 is an actuator such as the steering control mechanism 30, the brake control mechanism 33, and the drive control mechanism 40, which is necessary when the vehicle 21 travels according to the travel plan and the control device 2.
  • the steering control device 28 controls the steering control mechanism 30 sequentially
  • the braking control device 35 controls the brake control mechanism 33, and adjusts the distribution of the braking force of each wheel
  • the drive control mechanism 40 A desired autonomous travel is realized by outputting to a drive control device 39 that adjusts torque output of an actuator for driving such as an engine or a motor.
  • sensors 22, 23, 24, 25 for recognizing the outside are provided. These sensors are capable of detecting the relative distance and relative velocity with objects such as other vehicles, bicycles, pedestrians and obstacles present around the vehicle 21, and have, for example, a 180 ° viewing angle.
  • a fisheye camera can be used.
  • a sensor combined with an ultrasonic sensor, a stereo camera, an infrared camera or the like may be used, and furthermore, a laser radar mounted on the ceiling of the vehicle 21 and capable of sensing the surrounding 360 ° May be used.
  • the on-vehicle control device 1 creates a travel plan based on the external world information obtained from these sensors, and calculates a command value to the steering control mechanism 30 or the like based on the travel plan. Then, these command values are input to the steering control device 28 etc., so that the vehicle 21 can be autonomously moved according to the external world situation.
  • the travel plan and the like of the vehicle 21 may be displayed on the display device 44 provided in the driver's seat.
  • the driver depresses the brake pedal 32 with a brake booster (not shown) and the master cylinder (not shown) generates an oil pressure according to the force. .
  • the generated hydraulic pressure is supplied to the wheel cylinders 36FL, 36FR, 36RL, 36RR provided on the respective wheels through the brake control mechanism 33.
  • the wheel cylinders 36FL to 36RR are composed of cylinders, pistons, pads, disk rotors, etc. (not shown), and the hydraulic fluid supplied from the master cylinder urges the pistons, and the pads connected to the pistons press the disk rotors. Be done.
  • the disk rotor rotates with the wheels.
  • the brake torque acting on the disc rotor becomes the braking force acting between the wheel and the road surface.
  • the braking force can be generated on each wheel according to the driver's brake pedal operation.
  • the brake booster and the master cylinder need not necessarily be mounted.
  • the brake pedal 32 and the brake control mechanism 33 are directly connected, and the driver depresses the brake pedal 32 to operate the brake control mechanism 33 directly. It may be a mechanism.
  • the braking control device 35 includes, for example, a CPU, a ROM, a RAM, and an input / output device as the on-vehicle control device 1 does.
  • the braking control device 35 includes, for example, a combination sensor 34 capable of detecting longitudinal acceleration, lateral acceleration, and yaw rate, wheel speed sensors 31FL, 31FR, 31RL, 31RR installed on each wheel, and a steering control device 28 described later.
  • a sensor signal from the steering wheel angle detection device 41, a braking force command value from the in-vehicle control device 1, and the like are input.
  • the output of the brake control device 35 is connected to a pump (not shown) and a brake control mechanism 33 having a control valve, and generates an arbitrary braking force on each wheel independently of the driver's brake pedal operation. be able to.
  • the on-vehicle control device 1 can cause the vehicle 21 to generate an arbitrary braking force, and automatically brakes in an automatic operation in which no driver operation occurs. Play a role in
  • the present embodiment is not limited to the above-described braking control device, and other actuators such as a brake-by-wire may be used.
  • the steering control device 28 controls the motor 29 to generate assist torque.
  • the steering control device 28 also has, for example, a CPU, a ROM, a RAM, and an input / output device, which are not shown in detail in FIG.
  • the resultant of the steering torque of the driver and the assist torque by the motor 29 causes the steering control mechanism 30 to move and the front wheels (FL and FR) are turned off.
  • the reaction force from the road surface is transmitted to the steering control mechanism 30, and transmitted to the driver as a road surface reaction force.
  • the steering torque detection device 27 does not necessarily have to be mounted, and when the driver operates the steering wheel 26, the steering control device 28 does not operate and no assist torque is generated (so-called ) It may be a mechanism.
  • the steering control device 28 can control the steering control mechanism 30 by causing the motor 29 to generate torque independently of the driver's steering operation. Therefore, by communicating the steering force command (value) to the steering control device 28, the on-vehicle control device 1 can control the front wheels to an arbitrary turning angle, and automatically in automatic driving in which no driver operation occurs. Play a role in steering.
  • the present embodiment is not limited to the above-described steering control device, and other actuators such as a steer-by-wire may be used.
  • the depression amount of the driver's accelerator pedal 37 is detected by the stroke sensor 38 and input to the drive control device 39.
  • the drive control device 39 also has, for example, a CPU, a ROM, a RAM, and an input / output device, which are not shown in detail in FIG.
  • the drive control device 39 adjusts the throttle opening degree in accordance with the depression amount of the accelerator pedal 37, for example, to control the engine.
  • the vehicle 21 can be accelerated according to the driver's accelerator pedal operation.
  • the drive control device 39 can control the throttle opening independently of the accelerator operation of the driver.
  • the on-vehicle control device 1 can cause the vehicle 21 to generate any acceleration, and automatically in automatic driving where no driver operation occurs. It has a role to accelerate.
  • the vehicle of the present embodiment does not necessarily have to be an engine car, and the main drive device may be an electric motor.
  • the drive control device 39 calculates a motor torque command value according to the depression amount of the accelerator pedal 37, and performs current control so that the inverter device (not shown) realizes the motor torque command value.
  • the vehicle in which the steering wheel 26, the accelerator pedal 37, and the brake pedal 32 are mounted is described.
  • the vehicle may not be provided with these input devices.
  • the vehicle is a fully automatic driving vehicle in which the driver does not operate, or a remote driving vehicle that travels by receiving a travel command remotely.
  • FIG. 2 is a functional block diagram of a mobile control system according to this embodiment.
  • the mobile object control system of the present embodiment includes the on-vehicle control device 1 for controlling the vehicle 21 and the control device 2 installed at a remote place, and the communication unit 5 of the vehicle 21 and the control device By establishing wireless communication of the second communication unit 7, the on-vehicle control device 1 and the control device 2 can communicate with each other.
  • a communication method a communication method (radio wave beacon, light beacon or the like) dedicated to road-to-vehicle communication may be used, or a cellular line (4G line) or the like may be used.
  • the on-vehicle control device 1 further includes an external world information acquisition unit 3, a movement information acquisition unit 4, a communication unit 5, and a control unit 6. Part or all of these are realized by the CPU of the in-vehicle control device 1 executing a program loaded into the RAM.
  • the external world information acquisition unit 3 acquires external world information 12 from at least one of the sensors 22 to 25. Then, from the acquired external world information 12, position information and size of an object (obstacle or the like) around the vehicle 21 and, if the object is a moving body, position and speed information of the moving body are obtained. In addition, when a road sign, road surface paint, a traffic signal or the like is detected, the position and type thereof are obtained. For example, in the case of using the image data of the sensor 22 as the external world information 12, it is possible to simultaneously identify the types of a plurality of objects and acquire information. In particular, a stereo camera using two cameras is advantageous because it can also detect the relative distance and relative velocity of a moving object or an obstacle. Then, the outside world information 12 acquired here is stored in a storage device (not shown) such as a RAM in the on-vehicle control device 1.
  • a storage device not shown
  • the movement information acquisition unit 4 acquires the movement information 13 (the current position specifying information and the operating condition amount information) of the vehicle 21 and stores the information in a storage device such as a RAM.
  • a storage device such as a RAM.
  • the current position of the vehicle 21 is acquired by GPS (not shown), and the advancing angle is acquired by the passage of time of the position information if moving.
  • two GPSs are attached to the front and back of the vehicle 21, it is possible to acquire the advancing angle even while the vehicle is stopped.
  • the process of acquiring the operation state amount information for example, the speed, the longitudinal acceleration, the lateral acceleration, the yaw rate, the yaw angle, and the like are acquired from the combine sensor 34.
  • the communication unit 5 receives the remote control information 15 (described later) from the control device 2 via the in-vehicle communication device 43, and stores the information in a storage device such as a RAM. Further, the outside world information 12, the movement information 13, and the internal information 14 (described later) of the control unit 6 stored in the storage device are transmitted to the control device 2.
  • the external world information 12 transmitted to the control device 2 is at least a moving body detected on the periphery of the vehicle, road surface paint, sign information and the like, and the output value of the sensor mounted on the vehicle 21 may be transmitted as it is A recognition result obtained by applying a predetermined process to the output value of may be transmitted. Alternatively, both may be transmitted, or the type of data to be transmitted may be changed according to the communication status.
  • the movement information 13 transmitted to the control device 2 is the current position and the advancing angle of the vehicle 21.
  • the control unit 6 of the in-vehicle control device 1 calculates a travel plan using at least one of the external world information 12, the movement information 13, and the remote control information 15 (described later), and the vehicle to be controlled based on the calculated travel plan. Determine the operation of 21. Then, control command values of the respective actuators mounted on the vehicle 21 are calculated so as to realize this operation.
  • the on-vehicle control device 1 is configured to directly control the actuators, physical quantities for operating the respective actuators are calculated. For example, in the case of an inter-vehicle distance control system, the acceleration command value of the vehicle is calculated according to the setting of the inter-vehicle distance with the preceding vehicle, the setting of the maximum speed, etc. Control.
  • a traveling plan is a track and a speed at which the vehicle 21 is to travel, and a steering angle command value for satisfying the traveling plan and an acceleration command value of the vehicle are calculated.
  • control unit 6 transmits the calculated value inside the control unit as the internal information 14 to the control device 2 via the communication unit 5.
  • the internal information 14 a travel plan (a target travel track, a target speed, etc.), control command values of the respective actuators, etc. may be mentioned.
  • variable values during calculation, constant values, and the like may be included in the internal information 14.
  • a traveling range management unit (not shown) may be provided inside the control unit 6.
  • the travel range management unit generates a travelable range (not shown) of the vehicle 21 based on the external world information 12, the movement information 13, and the remote control information 15, and stores the generated range in the storage device.
  • the travelable range generated in advance may be acquired from the outside.
  • map information is used as the travelable range.
  • the map information is information on the road shape, traffic regulations, landmarks, etc. where the vehicle 21 is to travel, and is used when generating a travel plan of the vehicle 21 and controlling the travel of the vehicle 21 according to the travel plan. It is. For example, when the vehicle 21 performs a turning operation at an intersection, information on an intersection where the vehicle 21 turns to the left is acquired.
  • the intersection / road information includes, for example, the number of lanes of the road at the intersection, the road width, the intersection angle of the road, the lane width, the median width, the pedestrian crossing width, the setback amount from the pedestrian crossing, the presence or absence of traffic lights, etc. Can be mentioned.
  • the external world information 12 can obtain the position of an object around the vehicle 21 as a point group, information in which the point group is integrated may be defined as the travelable range.
  • control device 2 installed at a remote place also incorporates a CPU, a ROM, a RAM, and an input / output device, and the CPU executes the program loaded from the ROM to the RAM, thereby the communication unit 7 and the control simulator 8
  • the functions of the autonomous mobility determination unit 9, the operation information acquisition unit 17, the remote control unit 18, and the display unit 19 are realized.
  • the communication unit 7 transmits the remote control information 15 to the vehicle 21 via a cellular line or the like, acquires the external world information 12, the movement information 13 and the internal information 14 from the vehicle 21, and stores it in a storage unit such as a RAM (not shown).
  • a storage unit such as a RAM (not shown).
  • the control simulator 8 simulates the operation (calculation) of the control unit 6 of the in-vehicle control device 1. That is, the travel plan is calculated using the same means (algorithm) as the control unit 6 of the on-vehicle control device 1 using the external world information 12 and the movement information 13 acquired via the communication unit 7 and based on this travel plan The operation of the control target vehicle 21 is determined. Then, control command values of the respective actuators mounted on the vehicle 21 are calculated so as to realize this operation.
  • the CPU, the RAM, and the like of the control device 2 have higher performance than the CPU, the RAM, and the like of the on-vehicle control device 1 where cost reduction is strongly demanded.
  • the control simulator 8 is realized using a high-performance CPU, RAM, etc. of the control device 2, but simulates the performance equivalent to the CPU, RAM, etc. of the in-vehicle control device 1, and limits the performance.
  • the simulation may be executed, or the travel plan may be calculated using a means (algorithm) more advanced than the control unit 6 by making use of the fact that the performance is higher than that of the in-vehicle control device 1.
  • a travel plan using the same means as the control unit 6 and a travel plan using means higher than the control unit 6 may be simultaneously executed.
  • more information (judgment material) used for judgment by the autonomous mobility judgment unit 9 described later is increased, so that more reliable judgment is possible.
  • the autonomous movement possibility determination unit 9 compares the internal information 14 of the in-vehicle control device 1 with the control command value of each actuator calculated by the control simulator 8 and the calculated value inside, and the autonomously moving vehicle 21 can be controlled. It is determined whether or not it is in the In the following, the function of the autonomous mobility determining unit 9 will be described by being divided into the difference calculating unit 10 and the autonomous mobility calculating unit 11.
  • the difference calculation unit 10 calculates the difference between the internal information 14 of the on-vehicle control device 1 and the control command value of each actuator calculated by the control simulator 8 or the calculated value inside. Specifically, a travel plan (target travel track, target speed, etc.), control command values of the respective actuators, variable values during calculation, constant values, etc. are targets of deviation calculation in the difference calculation unit 10.
  • a deviation calculation method will be described using FIGS. 3 to 5.
  • FIG. 3 is an explanatory view showing a method of calculating a deviation of a target traveling track as an example of a deviation calculation method.
  • a stationary obstacle 60 shown here as a parked vehicle
  • the target traveling track is corrected It is assumed that the practice of
  • the information of the stationary obstacle 60 is acquired as the external world information 12 by the on-vehicle control device 1 using the sensor 22 or the like. Then, based on the position of the stationary obstacle 60, the control unit 6 generates a target traveling track 51 (a) so as to avoid a collision. At the same time, the target traveling track 51 (a) is transmitted to the control device 2 via the on-vehicle communication device 43 together with the external world information 12 as the internal information 14 of the control unit 6.
  • the control simulator 8 of the control device 2 also generates a target traveling track 51 (b) for avoiding a collision with the stationary obstacle 60 based on the external world information 12 and the movement information 13 acquired from the vehicle 21. Then, the deviation calculation unit 10 calculates a deviation 70 in which the difference between the target traveling track 51 (a) generated by the control unit 6 and the target traveling track 51 (b) generated by the control simulator 8 becomes maximum.
  • the variable value stored in the control unit 6 changes from the design value due to a failure or the like and the target traveling track 51 (a) is not calculated normally.
  • the deviation 70 exceeds the predetermined value, the trajectory of the autonomous movement of the vehicle 21 deviates greatly from the prediction of the control unit 6, and the possibility of occurrence of a defect such as a collision with the stationary obstacle 60 or other obstacles increases.
  • the autonomous movement possibility calculation unit 11 described later it is a situation that the continuation of the autonomous movement by the on-vehicle control device 1 should be recognized as impossible.
  • the maximum value of the positional deviation is illustrated as the deviation 70, an average value or variance may be used as the deviation 70.
  • FIG. 4 is an explanatory view showing a method of calculating the deviation of the target velocity as an example of the deviation calculation method.
  • the situation around the vehicle 21 is the same as that in FIG. 3.
  • the control unit 6 calculates the target velocity 52 (a) as the velocity at the time of avoiding the stationary obstacle 60.
  • the target velocity 52 (a) at this time is transmitted to the control device 2 as the internal information 14, together with the external world information 12 and the movement information 13, and the control simulator 8 calculates the target velocity 52 (b).
  • the difference calculating unit 10 calculates the deviation 70 of the target velocity.
  • FIG. 5 is explanatory drawing which shows the method of calculating the deviation of target acceleration as an example of a deviation calculation method.
  • the situation around the vehicle 21 is the same as in FIG. 3 and FIG. 4, and here, the control unit 6 calculates the target acceleration 53 (a) as the acceleration when avoiding the stationary obstacle 60.
  • the target acceleration 53 (a) is transmitted to the control device 2 together with the external world information 12 and the movement information 13 as the internal information 14, and the control simulator 8 also calculates the target acceleration 53 (b). Then, the difference calculating unit 10 calculates the deviation 70 of the target acceleration.
  • the autonomous movement of the vehicle 21 becomes a speed or acceleration greatly deviated from the prediction of the control unit 6, or the possibility of unexpected occurrence of failure increases.
  • the autonomous movement possibility calculation unit 11 described later is a situation where it is necessary to determine that the on-vehicle control device 1 can not continue the autonomous movement.
  • the maximum value of the deviation is illustrated as the deviation 70, an average value or variance may be used as the deviation 70.
  • the control target amount of each actuator may be compared using a target steering angle, a target accelerator opening degree, a target brake stroke, and the like.
  • the autonomous movement possibility calculation unit 11 determines the autonomous movement continuation possibility of the vehicle 21 based on the deviation 70 calculated by the difference calculation unit 10.
  • the determination result is an example of calculating 0 (no autonomous movement can not be continued) when deviation 70 is a predetermined value or more, and 1 (an autonomous movement can be continued) when it is less than a predetermined value, but deviation 70 is large It is also possible to calculate a continuous value such as a degree of reliability to lower the numerical value.
  • the calculated autonomous movement continuation possibility is transmitted as a part of the remote control information 15 to the in-vehicle control device 1 via the communication unit 7.
  • the in-vehicle control device 1 switches the control method of the vehicle 21 accordingly.
  • the operation information acquisition unit 17 is for the remote operator to input the operation information 16 and to remotely control the vehicle 21 when the autonomous mobility possibility calculation unit 11 determines that the autonomous mobility can not be continued.
  • the remote control unit 18 generates remote control information 15 for remotely controlling the vehicle 21 based on the operation information 16 input by the remote operator, and transmits the remote control information 15 to the on-vehicle control device 1 via the communication unit 7.
  • the remote control information 15 changes in accordance with the form of the operation information 16 from the remote operator. For example, when the remote operator directly operates the steering wheel, the accelerator and the brake to input the operation information 16, the target steering angle, the target accelerator opening degree, the target brake stroke and the like become the remote control information 15.
  • the remote control information 15 can also be a flag of 0 or 1 for instructing departure / stop, continuous value of target speed, or the like. Which remote control information 15 is to be used may be appropriately selected by the remote operator according to the situation.
  • the display unit 19 is a display, a tablet terminal or the like, and displays information necessary for remote control by the remote operator. From the information displayed on the display unit 19, the remote operator confirms the state of the vehicle 21 that has become unable to continue the autonomous movement and the surrounding conditions, and operates the vehicle 21 remotely or instructs to assist control. Input as operation information 16 or the like.
  • the image captured by the sensor 22 provided in front of the vehicle 21 is displayed on the display unit 19 of FIG. 6 and the remote operator operates the operation information acquisition unit 17 (the steering wheel 26, the accelerator pedal 37, the brake pedal 32). By doing this, the configuration in which the operation information 16 can be input is illustrated.
  • the stationary obstacle 60 (parked vehicle) is displayed on the target traveling track 51 of the vehicle 21 and the presence or absence of an oncoming vehicle due to the recognition ability of the external world information acquiring unit 3 is displayed on the display unit 19 of FIG.
  • the on-vehicle control device 1 can not determine whether overtaking can be performed.
  • the remote operator operates the steering wheel, the accelerator and the brake according to his own judgment while watching the image on the display 19, and remotely steers the vehicle 21 to overtake the stopped vehicle when there is no oncoming vehicle.
  • the display unit 19 of FIG. 6 the future course of the vehicle 21 based on the present steering angle of the steering wheel is shown as a remote control guide 80. This is because the size and characteristics of the vehicle 21 that the remote operator steers remotely varies, and even if the same operation is performed, the response differs from vehicle to vehicle, so that it is displayed as an aid so that the remote operator can steer appropriately. is there.
  • the remote operator directly designates the steering wheel, the accelerator, and the brake is illustrated here, only a part of these (for example, only the accelerator and the brake) may be instructed by the remote operator.
  • the function of the autonomous movement of the body control device 1 may be used, and the remote operator may instruct only departure / stop (or target speed).
  • the display unit 19 may be a touch panel type, and the operation information acquisition unit 17 may be configured to receive an operation input from a remote operator.
  • FIG. 7 shows a specific example 1 of the operation in which the control device 2 determines whether or not the future autonomous movement can not be continued during autonomous movement, and performs switching to remote control in advance.
  • the control device 2 determines whether or not the future autonomous movement can not be continued during autonomous movement, and performs switching to remote control in advance.
  • the in-vehicle control device 1 can not determine whether the stationary obstacle 60 can be passed without interrupting the path of the oncoming vehicle, and therefore stops autonomous movement and receives remote control by the remote operator.
  • the switching operation from the autonomous movement to the remote control and the overtaking operation after the remote control will be specifically described.
  • the vehicle 21 moving autonomously can not detect the stationary obstacle 60 at the position 21 (a), but detects the stationary obstacle 60 when it reaches 21 (b).
  • the outside information detection range 90 by the sensor 22 is shown in a fan shape.
  • the target speed 52 which is stopped at the position 21 (c) in front of the stationary obstacle 60 is calculated to decelerate the vehicle 21; It is not necessary to stop at the position c), and if it is determined that the remote operator can overtake from the image on the display unit 19, switching to remote control may be made during traveling, and the stationary obstacle 60 may be overtaken by the control of the remote operator.
  • the stationary obstacle 60 may be passed.
  • FIG. 8 is a second specific example of the operation in which the control device 2 determines whether or not the future autonomous movement can not be continued during autonomous movement, and performs switching to remote control in advance.
  • a stationary obstacle 60 (construction site) exists on the route of the vehicle 21 moving autonomously, and it is a scene where overtaking according to the guidance of the traffic guidance member 62 is necessary.
  • the on-vehicle control device 1 can not determine whether it is passing or stopping, so it is necessary to stop autonomous movement and receive remote control by the control device.
  • the vehicle 21 moving autonomously can not detect the stationary obstacle 60 and the traffic guidance member 62 at the position of 21 (a), but detects the stationary obstacle 60 and the traffic guidance member 62 when it reaches 21 (b) can do.
  • control device 2 determines that the autonomous movement of vehicle 21 can not be continued, control device 2 instructs on-vehicle control device 1 to decelerate through on-vehicle communication device 43. And request a switch from autonomous movement to remote control.
  • the vehicle stops according to the target speed 52 (a) generated by the control unit 6 as it is. , Move by remote control according to the operation of the remote operator.
  • FIG. 9 is a specific example 3 of the operation in which the control device 2 performs autonomous movement continuation determination judgment during autonomous movement and performs switching to remote control in advance.
  • a plurality of moving obstacles 61 partially interfering with the planned route of the vehicle 21 are present in front of the vehicle 21 moving autonomously.
  • the on-vehicle control device 1 acquires information such as the position, the velocity, the moving direction, and the size of the moving obstacle 61 as the external world information 12.
  • the future movement direction of the moving obstacle 61 is predicted, and if future interference is expected, the vehicle is smoothly decelerated in advance, and even if there is a sudden course change of the moving obstacle, it stops suddenly before contact It moves autonomously while calculating the speed at which it can stop.
  • the acceleration target 53 (a) decreases rapidly, which may result in control such that sudden braking is applied.
  • Such an event is, for example, a situation where the on-vehicle control device 1 omits the action prediction of the moving obstacle away from the host vehicle in order to omit the calculation ability, and the moving obstacle causes the sudden action change.
  • the autonomous movement continues in a situation such as the acceleration target 53 (a) where sudden braking occurs.
  • the action prediction is performed also in the control device 2 by the same algorithm as the control unit 6, but in the control device 2 having high calculation ability, as shown in FIG. (B) can be calculated. Then, in a situation where a sudden braking occurs in the target acceleration 53 (a) calculated by the on-vehicle control device 1, the control device 2 controls the vehicle 21 if the large deviation 70 is predicted from the target acceleration 53 (b). Can be switched from the autonomous movement to the remote control, and the pedestrian can be safely passed by the control of the remote operator.
  • FIG. 17 shows a scene where a stationary obstacle 60 (shown here as a parked vehicle) is present on the path of the vehicle 21 and it is required to overtake the center line, as in FIG.
  • the center line has been replaced by the yellow solid line 63 (b) from which the center line can be pushed out from the dashed broken line 63 (a), and overtaking of the lane out is prohibited in principle by traffic law. is there.
  • the stationary obstacle 60 it is necessary to extend the lane indicated by the yellow solid line, so in the on-vehicle control device 1 set to comply with traffic regulations, how to autonomously move Judgment is difficult. Therefore, when such a situation is encountered, the remote control is switched to overtaking the stationary obstacle 60 under the responsibility of the remote operator.
  • the stationary obstacle 60 stopped at the center of the lane ahead of the vehicle 21 is a leading vehicle stopping at a traffic jam or a parked vehicle stopping at an abnormal position.
  • the on-vehicle control device 1 there is a scene where it can not be determined whether to overtake. Also in this case, after the on-vehicle control device 1 temporarily recognizes the stationary obstacle 60 as the preceding vehicle and stops, if the preceding vehicle does not move even after a predetermined time has elapsed, switching to remote control And, by the operation of the remote operator, execute any appropriate response of stop continuation and overtaking.
  • the on-vehicle apparatus side can not properly detect the abnormality of the vehicle while suppressing the performance of the on-vehicle control device, the abnormality on the vehicle can be appropriately detected on the control apparatus side, and switching from autonomous movement to remote control is appropriate. Can be done.
  • FIGS. 10 to 13 Second Embodiment Next, a second embodiment of the present invention will be described using FIGS. 10 to 13. The same parts as in the first embodiment will not be described.
  • the vehicle 21 is controlled using the outside world information 12 acquired by the vehicle 21.
  • the control device 2 monitors a large number of vehicles and fixed points.
  • the said vehicle 21 can be controlled using the external world information which those other than the control object vehicle 21 acquired.
  • the outside world information from a large number of vehicles, fixed point observation cameras, etc. is also obtained, and when controlling the desired vehicle 21, the outside world information obtained by other vehicles etc. is also simultaneously.
  • the control device 2 of the present embodiment it is possible to realize a more reliable and smooth switching to remote control.
  • FIG. 10 is a functional block diagram showing the configuration of the mobile unit control system of the second embodiment, and differs from FIG. 2 of the first embodiment in that an external world information sharing unit 100 is added.
  • the outside world information acquired by the on-board controller 1 of the control target vehicle 21 is referred to as the outside world information 12A, and vehicles other than the control target vehicle 21 and fixed point observation cameras obtain it.
  • the input external world information is referred to as the external world information 12B.
  • FIG. 10 the details of FIG. 10 will be described focusing on the fact that the external world information 12B is involved.
  • the control simulator 8 simulates the operation (calculation) of the control unit 6 of the in-vehicle control device 1. That is, means (algorithm similar to that of the control unit 6 of the on-vehicle control device 1 using the outside world information 12A acquired via the communication unit 7 and the movement information 13 and the outside world information 12B acquired by the outside world information sharing unit 100 ) Is used to calculate the travel plan, and the operation of the control target vehicle 21 is determined based on this travel plan. Then, control command values of the respective actuators mounted on the vehicle 21 are calculated so as to realize this operation.
  • the autonomous movement possibility determination unit 9 compares the internal information 14 of the in-vehicle control device 1 with the control command value of each actuator calculated by the control simulator 8 and the calculated value inside, and the autonomously moving vehicle 21 can be controlled. It is determined whether or not it is in the Although this process is the same as that of the first embodiment, in this embodiment, the outside world information 12A and the outside world information 12B are compared, and the comparison result is also used to determine whether or not the autonomous movement can be continued. good. Furthermore, the movement information 13 from the in-vehicle control device 1 is compared with the information on the movement of the vehicle 21 included in the external world information 12B, and this comparison result is also used to determine whether or not the autonomous movement can be continued. Also good.
  • the difference calculating unit 10 calculates the difference between the internal information 14 and the control command value of each actuator calculated by the control simulator 8 or the internally calculated value. Specifically, a travel plan (target travel track, target speed, etc.), control command values of each actuator, variable values during calculation, constant values, etc. are targets of deviation calculation. This process is similar to that of the first embodiment, but in this embodiment, the difference between the outside world information 12A and the outside world information 12B may be calculated. Although details will be described later, positions, sizes, attributes, and the like of stationary obstacles and moving obstacles included in both pieces of external world information are targets of deviation calculation.
  • deviations are also made in the information such as the current position, the advancing angle, and the speed included in the movement information 13 from the in-vehicle control device 1 and the information such as the current position, the advancing angle and the speed of the vehicle 21 detected from the external world information 12B. It may be calculated.
  • FIG. 11 shows a vehicle 21 to be controlled and a moving obstacle 61 (pedestrian) present in front of it. Since the pedestrian is in the detection range 90 of the vehicle 21, the information shown in the moving obstacle 61 (a) can be acquired from the external world information 12A of the on-vehicle control device 1. In addition, since the pedestrian is within the detection range 102 of the fixed point observation camera 101 (or 3D sensor) installed on the roadside, the moving obstacle 61 (b) can be obtained from the external world information 12B of the fixed point observation camera 101. The information shown in can be obtained.
  • the difference calculating unit 10 compares the information of the moving obstacle 61 (a) and the information of the moving obstacle 61 (b), and determines whether or not the same object is the same from the size and attribute value of the moving obstacle 61. Then, after determining that they are the same object, the deviation 70 between the positions of the two is calculated.
  • the control device 2 needs to determine that the autonomous movement can not be continued and switch from the autonomous movement to the remote control.
  • the autonomous mobility possibility calculation unit 11 of the control device 2 determines that the autonomous mobility can not be continued, and remotely controls the on-vehicle control device 1 via the communication unit 7.
  • FIG. 12A shows a situation in which the vehicle 21 exists within the detection range 102 of the fixed point observation camera 101 (or 3D sensor) and the vehicle 21 is controlled using the external world information 12B obtained from the fixed point observation camera 101.
  • the deviation 70 can be obtained as the difference between the self position 110 of the vehicle 21 included in the movement information 13 and the self position 111 of the vehicle 21 detected by the fixed point observation camera 101, and the difference calculation unit 10 70 is calculated and transmitted to the autonomous mobility calculation unit 11.
  • the on-board controller 1 it is important that the on-board controller 1 can detect or estimate the correct self position, and if there is an error in the self position, some trouble may have occurred. . Therefore, the autonomous mobility possibility calculation unit 11 determines that the autonomous mobility can not be continued when the deviation 70 becomes equal to or more than the predetermined value.
  • the vehicle 21 exists in the detection range 105 of the sensor 104 (external world information acquisition unit) of the other moving object 103, and the vehicle 21 is controlled using the external world information 12B obtained from the sensor 104. Is shown.
  • the difference calculation unit 10 calculates the deviation 70 between the self position 110 of the vehicle 21 included in the movement information 13 and the self position 111 of the vehicle 21 detected by the sensor 104, and the autonomous mobility is possible.
  • the calculation unit 11 determines that the autonomous movement can not be continued when the deviation 70 becomes equal to or more than a predetermined value.
  • FIG. 13 shows a scene where a stationary obstacle 60 (construction site) exists on the route of the vehicle 21 moving autonomously, and it is necessary to travel according to the guidance of the traffic guidance member 62. If the instruction of the traffic guidance member 62 can not be determined by the ability of the sensor 22 ahead, the on-vehicle control device 1 can not determine whether it should pass or stop, so it is necessary to stop autonomous movement and receive remote control by the control device. .
  • the sensor 22 of the vehicle 21 can not detect the stationary obstacle 60, but the external world information 12B already held by the control device 2 contains information on the stationary obstacle 60.
  • the control device 2 can predict that the autonomous movement can not be continued when the vehicle 21 travels as it is. Then, when the vehicle 21 reaches 21 (b), the control device 2 transmits a switching command to remote control based on the determination that the autonomous movement can not be continued.
  • the stationary obstacle 60 and the traffic guiding member 62 are detected when the vehicle 21 reaches 21 (c). Then, in order to determine that the autonomous movement can not be continued after this position, the vehicle is decelerated from the deceleration start point 121 (a) as shown by 52 (a) in the lower part of FIG. On the other hand, in the present embodiment, as shown in 52 (b), since the vehicle can be decelerated from the deceleration start point 121 (b) before the deceleration start point 121 (a), the speed change (deceleration) should be more gradual. Is possible.
  • switching to remote control can be made in advance compared to the prior art, and the deceleration start point can be set in front, so that the speed change is smoothed. It is possible to Moreover, it is possible to detect that an error has occurred not only in the control unit 6 but also in the external world information acquisition unit 3 and the movement information acquisition unit 4 and it is possible to switch to more robust autonomous movement and reliable remote control. .
  • FIGS. 14 to 16 The same parts as those in the above embodiment will not be described.
  • the autonomous mobility possibility determination unit 9 of the first embodiment and the second embodiment uses the difference calculation unit 10 and the autonomous mobility possibility calculation unit 11 to determine that the autonomous mobility can not be continued.
  • the outside world information 12A, the movement information 13, and the inside information 14 from the moving body control device 1 are compared with the information calculated within the control device 2 or the outside world information 12B shared. And determine the possibility of continuing the autonomous movement based on the deviation.
  • the remote operator operating the control device 2 may compare the external world information 12 with the recognition result to determine the presence or absence of an error in the vehicle 21, that is, whether the autonomous movement can be continued or not.
  • FIG. 14 is a functional block diagram showing the configuration of the mobile control system according to this embodiment, and the difference calculator 10 and the autonomous mobility possibility calculator 11 are omitted, and the output signal of the operation information acquirer 17 is autonomous.
  • the third embodiment differs from the first and second embodiments in that it is input to the mobility determination unit 9.
  • the point at which the remote operator participates in the determination by the autonomous mobility determination unit 9 is extracted via the operation information acquisition unit 17, and the details of FIG. 14 will be described.
  • the autonomous mobility determining unit 9 determines whether or not the autonomous mobility can be continued.
  • the determination result is an example of calculating 0 (autonomous movement continuation impossible), 1 (autonomous movement continuation possible), but based on the operation information 16 of the remote operator, the reliability etc.
  • a continuous value may be calculated.
  • the calculated autonomous movement continuation possibility is transmitted as a part of the remote control information 15 to the on-vehicle control device 1 via the communication unit 7.
  • the display unit 19 is a means for displaying information necessary for the remote operator to input operation information 16 for remote control, and uses a display, a tablet terminal or the like.
  • the remote operator confirms the state of the vehicle 21 which has become unable to continue the autonomous movement and the surrounding conditions from the information of the display unit 19, and operates the instruction for remotely operating the vehicle 21 or assisting the control. input. Further, by displaying a screen for comparing the raw information of the sensor 22 with the recognition result of the external world information 12, the remote operator can determine whether the autonomous movement can be continued or not by these comparisons.
  • the 15A to 15C show an example of the operation information acquisition unit 17 and the display unit 19.
  • the display unit 19 superimposes and displays the front image acquired by the remote operator from the sensor 22 and the external world information recognition result acquired by the external world information acquisition unit 3.
  • This screen is, for example, a touch panel type, and also serves as the operation information acquisition unit 17.
  • the operation information acquisition unit 17 may alternatively be an input device such as a keyboard or a mouse, a control panel or the like.
  • FIG. 15A is a front image captured by the sensor 22 in front of the vehicle 21.
  • FIG. 15B shows the recognition result of the external world information 12 superimposed and displayed on FIG. 15A.
  • a broken line is an object detected by the external world information acquisition unit 3 and is superimposed on the stationary obstacle 60, the moving obstacle 61, the road surface paint 63, etc., and the leading vehicle 12 (a), the pedestrian 12 (b), the white line on the right 12 (c), center line 12 (d), and white line 12 (e) on the left side are displayed.
  • FIG. 15B when most of the objects visible by the remote operator can be acquired as the external world information 12, there is no problem even if the autonomous movement is continued, so the remote operator determines that the autonomous movement can be continued. Enter or do not enter anything.
  • the remote operator determines that the external world information acquisition unit 3 has some sort of error, and determines that the autonomous movement can not be continued. In this case, the remote operator issues an instruction to switch to remote control from the operation information acquisition unit 17.
  • the input may be such that the actual recognition result is drawn on the screen, and the autonomous movement possibility determination unit 9 may determine whether the autonomous movement can be continued or not based on the deviation from the detection result.
  • FIG. 16A, 16B show the case where the sensor 22 is a LiDAR-like sensor that acquires 3D point clouds.
  • the position of the vehicle 21 is drawn in the lower part of the display unit 19, and the 3D shape of the object in front of the vehicle 21 is indicated by a point cloud.
  • FIG. 16A shows the original image, and for example, the leading vehicle 61 (a), the oncoming vehicle 61 (b), the pedestrian 61 (c), the left white line 63 (a), the center line 63 (b), the right white line 63 (c) is visible to the eye of the remote operator.
  • the point cloud information can not see the area behind the shield, there is a possibility that only a part of the point cloud information can be seen, as in, for example, the preceding vehicle 61 (a).
  • FIG. 16B shows an example in which the information of the recognition result is added.
  • the area surrounded by the broken line is the area where the external world information acquisition unit 3 has detected an object, and the attribute (vehicle, pedestrian, line, etc.) estimated value is also displayed superimposed.
  • the remote operator looks as an unknown object instead of a car (false detection 12 (h)), the white line on the right side is undetected (not detected 12 (g)), etc.
  • the recognition error can be confirmed. If a large number of such recognition errors exist, the remote operator determines that an error has occurred in the external world information acquisition unit 3, and as in the method described above, it determines that the autonomous movement can not be continued.
  • the mobile control system of this embodiment it is possible to reliably detect that an error has occurred in the external world information acquisition unit 3 through the remote operator, and a more robust autonomous movement And it becomes possible to switch to reliable remote control.
  • or 3 the example of the road condition where an autonomous movement can not be continued is described about Example 1 thru
  • the stationary obstacle 60 here, shown as a parked vehicle
  • the vehicle 21 can not determine whether or not the stationary obstacle 60 can be overtaken without blocking the path of the oncoming vehicle, and stops the autonomous movement and receives remote control by the control device. It will be.
  • FIG. 8 describes a scene where a construction site exists as a stationary obstacle 60 on the route of the vehicle 21 and overtaking is performed over the center line according to the guidance of the traffic guider 62.
  • the vehicle 21 can not determine whether it is passing or stopping, and stops autonomous movement and receives remote control by the control device.
  • FIG. 9 describes the case where a situation is encountered where the performance of the on-vehicle control device is suppressed, such as a large number of moving obstacles being present in front of the vehicle 21.
  • the control may be suddenly changed or destabilized as a result of the abnormality being undetectable by the on-vehicle controller, but in the present embodiment, since the abnormality can be detected by the remote device, It is possible to switch to control.
  • the present technology is not applied to only a specific scene, but can be applied to any scene where it is difficult to continue autonomous movement. .
  • the automatic control of the vehicle has been described as an example of the travel control.
  • the travel control is not limited to the automatic drive.
  • the present invention is applicable to various forms of travel control such as distance control between vehicles (active cruise control), lane keeping, and automatic driving levels 2 to 5.
  • the present invention is applicable to any device that moves autonomously.
  • it can also be applied to construction machines (mine dumps etc.) that perform autonomous movement, autonomous mobile mobility (unmanned autonomous driving buses, single-seat small cars, golf carts, bikes, inverted pendulum type mobility etc.), autonomous mobile robots etc. .
  • the present invention is not limited to the embodiments described above, but includes various modifications.
  • the embodiments described above are described in detail in order to explain the present invention in an easy-to-understand manner, and are not necessarily limited to those having all the configurations described.
  • part of the configuration of one embodiment can be replaced with the configuration of another embodiment, and the configuration of another embodiment can be added to the configuration of one embodiment.

Abstract

自律移動継続不可の判定精度の向上と、よりスムーズな遠隔制御への移行の実現が可能となる移動体の制御システムをする。このため、自律移動可能な移動体に搭載した移動体制御装置と、移動体を遠隔地から管制する管制装置と、を備えた移動体制御システムであって、移動体制御装置は、移動体の外界情報を取得する外界情報取得手段と、移動体の移動情報を取得する移動情報取得手段と、外界情報および移動情報に基づき、移動体の将来状態を予測する制御手段と、管制装置と通信する移動体側通信手段と、を備えるとともに、管制装置は、移動体制御装置と通信する管制装置側通信手段と、移動体制御装置から受信した外界情報および移動情報に基づき、移動体の将来状態を予測する制御シミュレータと、制御手段と制御シミュレータが予測した将来状態を比較し、移動体の自律移動の継続可否を判定する自律移動可能性判定手段と、を備える移動体制御システムとした。

Description

移動体制御システム
 本発明は、自律移動可能な移動体の移動体制御装置と、この移動体が自律移動継続不能になった場合に移動体を遠隔で移動制御する管制装置と、を備えた移動体制御システムに関する。
 自律移動可能な移動体を制御する従来の移動体制御システムとして、移動体に異常が生じた場合や、管制装置との通信に異常が生じた場合に、既定の停止位置まで自律移動を継続する技術が知られている。
 例えば、特許文献1の要約書には、「自動走行制御装置(12)は、経路に沿って自動走行する自動走行車両(10)に搭載され、制御情報取得手段(20、22)と、候補位置取得手段(20)と、自動走行制御手段(22)と、を備えている。制御情報取得手段は、自動走行車両を管制する管制装置から通信により取得する制御情報を含み、自動走行車両を制御するための制御情報を取得する。候補位置取得手段は、自動走行車両が停止する可能性のある停止候補位置を取得する。自動走行制御手段は、制御情報取得手段が取得する制御情報に基づいて自動走行車両に自動走行させ、管制装置との通信が途絶すると、候補位置取得手段が取得する停止候補位置まで自動走行車両を自動走行させる。」と記載されており、停車候補位置を管制装置から予め取得しておき、管制装置との通信が途絶した場合であっても、その停車候補位置まで自動運転することで、自動運転を極力継続できるようにする技術が開示されている。
 また、特許文献2の要約書には、「自動走行制御装置は、自車両を目的地に向かって走行させる自動走行に必要となる、自車両及び自車両周辺の状態に関する情報である自動走行情報を取得する取得手段と、自動走行情報に基づき自車両の進行方向及び速度を制御し、自動走行を行う自動走行手段と、自動走行情報に関する問題が生じたか否かを判定する判定手段(S200,S215)と、問題が生じた場合には、該問題の内容に応じて、自車両の走行の状態、又は、他車両の走行の状態を変更させる変更手段(S205,S210,S225~S255)と、を備える。」と記載され、請求項5には「他車両の走行を妨げることなく自車両を停止させることができる退避エリアを検出する検出手段(S230)をさらに備え、前記変更手段は、前記問題が生じた場合には、前記代替自動走行により前記退避エリアまで自車両を移動させて停止させること、を特徴とする自動走行制御装置。」と記載されている。すなわち、同文献には、自動走行中の車両に、操舵異常や自己位置推定精度低下などの問題が発生した場合に、検索した退避エリアまで自動走行してから自動停車する技術が開示されている。
特開2016-181140号公報 特開2016-181031号公報
 特許文献1や特許文献2の従来技術は、通信途絶や移動体異常が発生した場合に、管制装置の支援を受けずに自律的に停止候補位置や退避エリアまで移動し、停車を試みるものである。そして、この実現には、通信途絶時であっても自車両を適切に制御でき、自車両の異常状態(自律移動継続不能な状態)を適切に判定できる高性能で高額な制御装置を必要とする。
 しかしながら、コスト制約により低性能な制御装置を移動体に搭載せざるを得ない場合、制御装置の冗長化不足や計算能力不足により、特許文献1や特許文献2に開示された、通信途絶時の自律移動の継続や、異常状態の適切な判定を実現できない可能性がある。
 本発明は、これらの事情に鑑みてなされたものであって、その目的とするところは、管制装置側で、将来の自律移動継続不能を予測することで、自律移動継続不能となる前に、管制装置からの指示で自律制御から遠隔制御に適切に切り替える移動体制御システムを提供することである。
 上記目的を達成するために、本発明に係る移動体制御システムは、自律移動可能な移動体に搭載した移動体制御装置と、前記移動体を遠隔地から管制する管制装置と、を備え、前記移動体制御装置は、前記移動体の外界情報を取得する外界情報取得手段と、前記移動体の移動情報を取得する移動情報取得手段と、前記外界情報および前記移動情報に基づき、前記移動体の将来状態を予測する制御手段と、前記管制装置と通信する移動体側通信手段と、を備えるとともに、前記管制装置は、前記移動体制御装置と通信する管制装置側通信手段と、前記移動体制御装置から受信した前記外界情報および前記移動情報に基づき、前記移動体の将来状態を予測する制御シミュレータと、前記制御手段と前記制御シミュレータが予測した将来状態を比較し、前記移動体の自律移動の継続可否を判定する自律移動可能性判定手段と、を備える移動体制御システムとした。
 本発明によれば、移動体が自律移動継続不能となる前に、管制装置の指示で自律制御から遠隔制御に切り替える移動体制御システムを提供することができる。
実施例1の移動体制御システムの制御対象である車両の全体構成図。 実施例1の移動体制御システムの機能ブロック図。 実施例1において、目標走行軌道の偏差を算出する一例を示す説明図。 実施例1において、目標速度の偏差を算出する一例を示す説明図。 実施例1において、目標加速度の偏差を算出する一例を示す説明図。 実施例1において、操作情報取得部及び表示部の一例を示す説明図。 実施例1の移動体制御システムの動作例を示す説明図。 実施例1の移動体制御システムの動作例を示す説明図。 実施例1の移動体制御システムの動作例を示す説明図。 実施例2の移動体制御システムの全体構成を示した説明図。 実施例2において、外界情報の偏差を算出する一例を示す説明図。 実施例2において、定点観測カメラに基づき自車両の自己位置の偏差を算出する一例を示す説明図。 実施例2において、他移動体の外界情報取得部に基づき自車両の自己位置の偏差を算出する一例を示す説明図。 実施例2の移動体制御システムの動作例を示す説明図。 実施例3の移動体制御システムの全体構成を示した説明図。 実施例3の表示部に表示される前面映像の一例を示した説明図。 図15Aの前面映像に付加した認識結果が正常である場合の説明図。 図15Aの前面映像に付加した認識結果が異常である場合の説明図。 実施例3の表示部に表示される3D点群情報の一例を示した説明図。 図16Aの3D点群情報に認識結果を付加した一例を示した説明図。 実施例1において、遠隔制御への切替時の道路状況の例を示した説明図。 実施例1において、遠隔制御への切替時の道路状況の例を示した説明図。
 以下、本発明の実施例を図面に基づいて説明する。
 実施例1の移動体制御システムについて、図1から図9、図17、図18を用いて説明する。なお、以下では、移動体制御システムの制御対象である移動体が、自律移動する車両21である例を説明する。
 図1は、本実施例の移動体制御システムを構成する車載制御装置1(移動体制御装置)を搭載した車両21の全体構成図であり、車両21を上方から見下ろした図である。この図において、FLは左前輪、FRは右前輪、RLは左後輪、RRは右後輪であり、各符号の後にFL等を付加することで、何れの車輪に関連する構成かを区別している。
 車載制御装置1は、ROM、RAM、CPU、入出力装置を内蔵しており、ROMからRAMにロードしたプログラムをCPUが実行することで、後述する走行計画に基づいて車両21の各部を自律制御するものであり、また、後述する管制装置2が車両21を遠隔制御するときも、路車間の通信を行う車載通信装置43を介して受信した管制装置2からの遠隔制御情報15に基づいて、車両21の各部を制御するものである。
 より具体的に説明すると、この車載制御装置1は、走行計画や管制装置2の指令に従って車両21を走行させる際に必要な、ステアリング制御機構30、ブレーキ制御機構33、駆動制御機構40等のアクチュエータの指令値を逐次演算し、ステアリング制御機構30を制御する操舵制御装置28と、ブレーキ制御機構33を制御し各輪のブレーキ力配分を調整する制動制御装置35と、駆動制御機構40を制御しエンジンやモータ等、駆動のためのアクチュエータのトルク出力を調整する駆動制御装置39と、に出力することで、所望の自律走行を実現するものである。
 車両21の前後左右には、外界を認識するセンサ22、23、24、25が設けられている。これらのセンサは、車両21の周囲に存在する、他の車両、自転車、歩行者、障害物等の物体との相対距離、相対速度を検出できるものであり、例えば、180゜視野角を持った魚眼カメラを用いることができる。また、魚眼カメラに代え、超音波センサ、ステレオカメラ、赤外線カメラなどとの組み合わせたセンサを用いても良く、更には、車両21の天井に載置した、周囲360゜をセンシング可能なレーザレーダを用いても良い。
 車載制御装置1は、これらのセンサから得た外界情報に基づき走行計画を作成し、走行計画に基づいてステアリング制御機構30等への指令値を演算する。そして、これらの指令値が、操舵制御装置28等に入力されることで、外界状況に応じて車両21を自律移動させることができる。なお、車両21の走行計画等を、運転席に設けた表示装置44に表示できるようにしても良い。
 次に、車両21のブレーキの動作について説明する。ドライバが車両21を運転している状態では、ドライバがブレーキペダル32を踏む踏力を、ブレーキブースタ(不図示)で倍力し、マスタシリンダ(不図示)によって、その力に応じた油圧を発生させる。発生した油圧は、ブレーキ制御機構33を介して、各輪に設けられたホイルシリンダ36FL、36FR、36RL、36RRに供給される。ホイルシリンダ36FL~36RRは、不図示のシリンダ、ピストン、パッド、ディスクロータ等から構成されており、マスタシリンダから供給された作動液によってピストンが推進され、ピストンに連結されたパッドがディスクロータに押圧される。尚、ディスクロータは、車輪とともに回転している。そのため、ディスクロータに作用したブレーキトルクは、車輪と路面との間に作用するブレーキ力となる。以上により、ドライバのブレーキペダル操作に応じて、各輪に制動力が発生させることができる。なお、本実施例の車両において、ブレーキブースタやマスタシリンダを搭載する必要は必ずしもなく、ブレーキペダル32とブレーキ制御機構33を直結させ、ドライバがブレーキペダル32を踏めば直接ブレーキ制御機構33が動作する機構であっても良い。
 制動制御装置35は、図1に詳細に示していないが、車載制御装置1と同様に、例えばCPU、ROM、RAM、及び入出力装置を有する。制動制御装置35には、例えば、前後加速度、横加速度、ヨーレートを検出可能なコンバインセンサ34、各輪に設置された車輪速センサ31FL、31FR、31RL、31RR、後述する操舵制御装置28を介したハンドル角検出装置41からのセンサ信号、車載制御装置1からのブレーキ力指令値などが入力されている。また、制動制御装置35の出力は、ポンプ(不図示)、制御バルブを有するブレーキ制御機構33に接続されており、ドライバのブレーキペダル操作とは独立に、各輪に任意の制動力を発生させることができる。車載制御装置1が、制動制御装置35にブレーキ指令(値)を通信することで、車両21に任意のブレーキ力を発生させることができ、ドライバの操作が生じない自動運転においては自動的に制動を行う役割を担っている。但し、本実施例は、上記制動制御装置に限定されるものではなく、ブレーキバイワイヤ等のほかのアクチュエータを用いてもよい。
 次に、車両21のステアリングの動作について説明する。ドライバが車両21を運転している状態では、ドライバがハンドル26を介して入力した操舵トルクとハンドル角をそれぞれ操舵トルク検出装置27とハンドル角検出装置41で検出し、それらの情報に基づいて、操舵制御装置28は、モータ29を制御してアシストトルクを発生させる。尚、操舵制御装置28も、図1に詳細に示していないが、車載制御装置1と同様に、例えばCPU、ROM、RAM、及び入出力装置を有する。上記ドライバの操舵トルクとモータ29によるアシストトルクの合力により、ステアリング制御機構30が可動し、前輪(FL輪、FR輪)が切られる。一方で、前輪の切れ角に応じて、路面からの反力がステアリング制御機構30に伝わり、路面反力としてドライバに伝わる構成となっている。なお、本実施例の車両において、操舵トルク検出装置27を搭載する必要は必ずしもなく、ドライバがハンドル26を操作する際には操舵制御装置28が動作せず、アシストトルクが発生しない(いわゆるオモステの)機構であっても良い。
 操舵制御装置28は、ドライバのステアリング操作とは独立に、モータ29によりトルクを発生させ、ステアリング制御機構30を制御することができる。従って、車載制御装置1は、操舵制御装置28に操舵力指令(値)を通信することで、前輪を任意の切れ角に制御することができ、ドライバの操作が生じない自動運転においては自動的に操舵を行う役割を担っている。但し、本実施例は、上記操舵制御装置に限定されるものではなく、ステアバイワイヤ等のほかのアクチュエータを用いてもよい。
 次に、車両21のアクセルの動作について説明する。ドライバのアクセルペダル37の踏み込み量はストロークセンサ38で検出され、駆動制御装置39に入力される。尚、駆動制御装置39も、図1に詳細に示していないが、車載制御装置1と同様に、例えばCPU、ROM、RAM、及び入出力装置を有する。駆動制御装置39は、例えば上記アクセルペダル37の踏み込み量に応じてスロットル開度を調節し、エンジンを制御する。以上により、ドライバのアクセルペダル操作に応じて車両21を加速させることができる。また、駆動制御装置39は、ドライバのアクセル操作とは独立にスロットル開度を制御することができる。従って、車載制御装置1は、駆動制御装置39に加速指令(値)を通信することで、車両21に任意の加速度を発生させることができ、ドライバの操作が生じない自動運転においては自動的に加速を行う役割を担っている。なお、本実施例の車両はエンジン車である必要は必ずしもなく、主要駆動装置が電気モータであっても良い。この場合、駆動制御装置39は、上記アクセルペダル37の踏み込み量に応じてモータトルク指令値を算出し、インバータ装置(不図示)が前記モータトルク指令値を実現するように電流制御を行う。
 なお、以上の説明では、車両にハンドル26、アクセルペダル37、ブレーキペダル32を搭載した車両を述べたが、これら入力装置が設置されていない車両であっても良い。この場合、本車両はドライバの操作が生じない完全自動運転車、遠隔で走行指令を受けて走行する遠隔運転車などとなる。
 図2は、本実施例の移動体制御システムの機能ブロック図である。ここに示すように、本実施例の移動体制御システムは、車両21を制御する車載制御装置1と、遠隔地に設置される管制装置2を含んでおり、車両21の通信部5と管制装置2の通信部7の無線通信を確立することで、車載制御装置1と管制装置2が相互に通信できる。なお、通信の方法としては、路車間通信専用の通信方式(電波ビーコン、光ビーコン等)を用いても良いし、セルラ回線(4G回線)等を用いても良い。
 また、車載制御装置1は、外界情報取得部3、移動情報取得部4、通信部5、制御部6を有している。これらの一部または全部は、車載制御装置1のCPUがRAMにロードされたプログラムを実行することで実現されるものである。
 外界情報取得部3は、センサ22乃至25の少なくとも1つから外界情報12を取得する。そして、取得した外界情報12から、車両21周辺の物体(障害物等)の位置情報、大きさ、前記物体が移動体である場合にはその移動体の位置、速度情報等を求める。また、道路標識、路面ペイント、信号機などを検出した場合、その位置や種別を求める。例えば、センサ22の画像データを外界情報12として用いる場合には、複数の物体に対して、同時にその種類を識別して、情報を取得することが可能である。特に、2つのカメラを用いたステレオカメラでは、移動体や障害物の相対距離、相対速度を検出することもできるため、優位である。そして、ここで取得した外界情報12を、車載制御装置1内のRAMなどの記憶装置(不図示)に記憶する。
 移動情報取得部4は、車両21の移動情報13(現在位置特定情報および動作状態量情報)を取得し、RAMなどの記憶装置に記憶する。現在位置特定情報の取得処理では、例えば、車両21の現在位置をGPS(不図示)により取得し、進行角を、移動中であれば、位置情報の時間経過により取得する。また、GPSを車両21の前後に2つ取り付ければ、停止中であっても進行角を取得することができる。一方、動作状態量情報の取得処理では、例えば、コンバインセンサ34から、速度、前後加速度、横方向加速度、ヨーレート、ヨー角等を取得する。
 通信部5は、車載通信装置43を介して、管制装置2からの遠隔制御情報15(後述)を受信し、RAMなどの記憶装置に記憶する。また、この記憶装置に記憶された外界情報12、移動情報13、制御部6の内部情報14(後述)を、管制装置2に送信する。管制装置2に送信される外界情報12は、少なくとも車両周辺に検出された移動体、路面ペイント、標識情報等であり、車両21に搭載したセンサの出力値をそのまま送信しても良いし、センサの出力値に所定の処理を施した認識結果を送信しても良い。あるいはその両方を送信する構成であっても良いし、通信状況応じて送信するデータの種類を変更しても良い。また、管制装置2に送信される移動情報13は、車両21の現在位置および進行角である。
 車載制御装置1の制御部6は、外界情報12、移動情報13、遠隔制御情報15(後述)の少なくとも1つを用いて走行計画を演算し、演算された走行計画に基づき、制御対象の車両21の動作を決定する。そして、この動作を実現するように、車両21に搭載された各アクチュエータの制御指令値を算出する。この車載制御装置1がアクチュエータを直接制御する構成である場合は、各アクチュエータを動作させるための物理量を算出する。例えば自動車間距離制御システムの場合、先行車との車間距離の設定、最高速度の設定などに従って、車両の加速度指令値を算出し、当該加速度指令値を実現するように、エンジンスロットルやブレーキ圧を制御する。自動運転システムに実施例1を適用する場合、走行計画は、車両21が走行予定の軌道および速度であり、前記走行計画を満たすための操舵角指令値、車両の加速度指令値を演算する。
 また、制御部6は、制御部内部における計算値を内部情報14として、通信部5を介して管制装置2に伝送する。内部情報14の例として、走行計画(目標走行軌道、目標速度等)、各アクチュエータの制御指令値などが挙げられる。その他、算出途中の変数値、定数値等を内部情報14に含めても良い。
 また、制御部6の内部に、走行範囲管理部(不図示)を備えても良い。この走行範囲管理部は、外界情報12、移動情報13、遠隔制御情報15に基づき、車両21の走行可能範囲(不図示)を生成し、記憶装置に記憶する。もしくは、予め生成した走行可能範囲を外部から取得しても良い。走行可能範囲として、例えば地図情報を用いる。地図情報は、車両21が走行する予定の道路形状、交通法規、ランドマーク等に関する情報であり、車両21の走行計画を生成し、前記走行計画に従って車両21の走行を制御する際に利用するものである。例えば、車両21がある交差点で右左折動作を行う場合、車両21が右左折する交差点に関する情報を取得する。交差点・道路情報としては、例えば、交差点の道路の車線数、道路幅、道路の交差角、車線幅、中央分離帯幅、横断歩道幅、横断歩道の交差点からのセットバック量、信号の有無などが挙げられる。あるいは、外界情報12が車両21周辺の物体の位置を点群として得られるならば、その点群を統合した情報を走行可能範囲として定義してもよい。
 一方、遠隔地に設置される管制装置2も、CPU、ROM、RAM、入出力装置を内蔵しており、ROMからRAMにロードしたプログラムをCPUが実行することで、通信部7、制御シミュレータ8、自律移動可能性判定部9、操作情報取得部17、遠隔制御部18、表示部19の各機能を実現する。
 通信部7は、セルラ回線などを介して、遠隔制御情報15を車両21に送信するとともに、車両21から外界情報12、移動情報13、内部情報14を取得し、図示しないRAMなどの記憶部に記憶させる。
 制御シミュレータ8は、車載制御装置1の制御部6の動作(計算)を模擬する。すなわち、通信部7を介して取得した外界情報12、移動情報13を使用し、車載制御装置1の制御部6と同様の手段(アルゴリズム)を用いて走行計画を演算し、この走行計画に基づき、管制対象の車両21の動作を決定する。そして、この動作を実現するように、車両21に搭載された各アクチュエータの制御指令値を算出する。
 通常、管制装置2のCPU、RAM等は、低コスト化が強く要望される車載制御装置1のCPU、RAM等に比べて高い性能を有する。上述したように、制御シミュレータ8は、管制装置2が持つ高性能のCPU、RAM等を用いて実現されるが、車載制御装置1のCPU、RAM等と同等の性能を模擬し、性能を限定したシミュレーションを実行しても良いし、車載制御装置1より性能の高いことを生かして、制御部6より高度な手段(アルゴリズム)を用いて走行計画を演算しても良い。もしくは、制御部6と同じ手段を用いた走行計画と、制御部6より高度な手段を用いた走行計画を同時に実行して良い。この場合、後述する自律移動可能性判定部9が判定に用いる情報(判断材料)が増えることから、より確実な判定が可能となる。
 自律移動可能性判定部9は、車載制御装置1の内部情報14と、制御シミュレータ8が算出した各アクチュエータの制御指令値や内部の計算値を比較し、管制対象の車両21が自律移動継続可能な状態にあるか否かを判定する。以下では、この自律移動可能性判定部9の機能を、差異算出部10と、自律移動可能性算出部11に分けて説明する。
 差異算出部10では、車載制御装置1の内部情報14と、制御シミュレータ8が算出した各アクチュエータの制御指令値や内部の計算値との差異を算出する。具体的には、走行計画(目標走行軌道、目標速度等)、各アクチュエータの制御指令値、算出途中の変数値、定数値等などが、差異算出部10での偏差算出の対象である。以下、図3乃至5を用いて、偏差算出方法の例を説明する。
 図3は、偏差算出方法の一例として、目標走行軌道の偏差を算出する方法を示す説明図である。本図では、車両21の自律移動中に、目標走行軌道(レーン)上に静止障害物60(ここでは駐車車両として図示)があり、この静止障害物60を回避するために目標走行軌道の修正を実施するという場面を想定している。
 まず、静止障害物60の情報は、センサ22等を用いて車載制御装置1に外界情報12として取得される。そして、制御部6は静止障害物60の位置に基づき、衝突を回避するように目標走行軌道51(a)を生成する。同時に、目標走行軌道51(a)は、制御部6の内部情報14として、外界情報12とともに車載通信装置43を介して管制装置2に伝送される。また、管制装置2の制御シミュレータ8でも、車両21から取得した外界情報12、移動情報13に基づき、静止障害物60との衝突を回避する目標走行軌道51(b)が生成される。そして、偏差算出部10では、制御部6が生成した目標走行軌道51(a)と、制御シミュレータ8が生成した目標走行軌道51(b)の差が最大となる偏差70を算出する。
 このような偏差70が生じる原因の一つとして、制御部6内に記憶された変数値が故障などによって設計値から変化し、目標走行軌道51(a)が正常に算出されなくなったことが考えられる。また、車載制御装置1の計算能力の限界で、適切な目標走行軌道51(a)が生成されていない可能性もある。偏差70が所定値以上となる場合、車両21の自律移動が制御部6の予測から大きく外れた軌道となり、静止障害物60あるいは他の障害物との衝突等の不具合発生の可能性が高まるため、後述する自律移動可能性算出部11では、車載制御装置1による自律移動の継続を不可と認定すべき状況である。なお、ここでは位置偏差の最大値を偏差70として図示したが、平均値や分散を偏差70として用いても良い。
 図4は、偏差算出方法の一例として、目標速度の偏差を算出する方法を示す説明図である。車両21の周囲の状況は図3と同様であり、ここでは静止障害物60を回避する際の速度として、制御部6が目標速度52(a)を演算している。この時の目標速度52(a)は内部情報14として、外界情報12、移動情報13と共に管制装置2に伝送され、制御シミュレータ8で目標速度52(b)を算出する。そして、差異算出部10は目標速度の偏差70を算出する。
 また、図5は、偏差算出方法の一例として、目標加速度の偏差を算出する方法を示す説明図である。車両21の周囲の状況は図3及び図4と同様であり、ここでは静止障害物60を回避する際の加速度として、制御部6が目標加速度53(a)を演算している。この目標加速度53(a)は内部情報14として、外界情報12、移動情報13とともに管制装置2に伝送され、制御シミュレータ8でも目標加速度53(b)を算出する。そして、差異算出部10は目標加速度の偏差70を算出する。
 図4や図5の偏差70が所定値以上に生じる場合も、車両21の自律移動が制御部6の予測から大きく外れた速度、または、加速度となり、想定しない不具合発生の可能性が高まるため、後述する自律移動可能性算出部11は、車載制御装置1による自律移動の継続を不可と認定すべき状況である。なお、ここでも、偏差の最大値を偏差70として図示したが、平均値や分散を偏差70として用いても良い。
 なお、図3から図5以外にも、偏差70としては、目標操舵角、目標アクセル開度、目標ブレーキストロークなどを用い、各アクチュエータの制御目標量を比較しても良い。
 自律移動可能性算出部11では、差異算出部10が算出した偏差70に基づき、車両21の自律移動継続可能性を判定する。判定結果は、偏差70が所定値以上の場合には0(自律移動継続不可)、所定値未満の場合には1(自律移動継続可)を算出するのが一例であるが、偏差70が大きいほど数値を低くする信頼度等の連続値を算出しても良い。算出した自律移動継続可能性は、遠隔制御情報15の一部として、通信部7を介して車載制御装置1に送信し、車載制御装置1はそれに従って車両21の制御方法を切り替える。
 操作情報取得部17は、自律移動可能性算出部11が自律移動継続不可を判定した場合に、遠隔オペレータが操作情報16を入力し、車両21を遠隔で制御するためのものである。
 遠隔制御部18は、遠隔オペレータが入力した操作情報16に基づき、車両21を遠隔制御するための遠隔制御情報15を生成し、通信部7を介して車載制御装置1に送信する。この時の遠隔制御情報15は、遠隔オペレータからの操作情報16の形態に合わせて変化する。例えば、遠隔オペレータがハンドル、アクセル、ブレーキを直接操作して操作情報16を入力する場合には、目標操舵角、目標アクセル開度、目標ブレーキストローク等が遠隔制御情報15となる。また、発車・停車を指示する0または1のフラグや、目標速度の連続値等も遠隔制御情報15となりうる。これらの何れの遠隔制御情報15を用いるかは、遠隔オペレータが状況に応じて適宜選択すれば良い。
 表示部19は、ディスプレイやタブレット端末などであり、遠隔オペレータによる遠隔制御に必要な情報を表示する。遠隔オペレータは、表示部19に表示された情報から、自律移動継続不可となった車両21の状態や周囲の状況を確認し、車両21を遠隔で操縦したり、制御を手助けするための指示を操作情報16として入力したりする。
 次に、図6を用いて、操作情報取得部17、遠隔制御部18、表示部19の一例を説明する。図6の表示部19には、車両21の前方に設けたセンサ22で撮影した映像が表示されており、遠隔オペレータが操作情報取得部17(ハンドル26、アクセルペダル37、ブレーキペダル32)を操作することで、操作情報16を入力できる構成を例示している。
 図6の表示部19に表示されるのは、車両21の目標走行軌道51上に静止障害物60(駐車車両)があり、かつ、外界情報取得部3の認識能力の関係で対向車の有無が分からないために、車載制御装置1では追い越しの可否の判断ができない状況である。このような状況の場合、遠隔オペレータは表示部19の映像を見ながら自らの判断でハンドル、アクセル、ブレーキを操作し、対向車がいない時に停止車両を追い抜くように、車両21を遠隔操縦する。なお、図6の表示部19には、現在のハンドルの切れ角に基づく車両21の将来の進路を、遠隔操作ガイド80として示している。これは、遠隔オペレータが遠隔操縦する車両21の大きさや特性がまちまちであり、同じ操作をしても車両毎に応答が異なるため、遠隔オペレータが適切に遠隔操縦できるよう、補助として表示するものである。
 なお、ここでは遠隔オペレータがハンドル、アクセル、ブレーキを直接指示する場合を図示しているが、これらの一部のみ(例えばアクセル、ブレーキのみ)を遠隔オペレータが指示する構成にしても良いし、移動体制御装置1の自律移動の機能は生かし、遠隔オペレータが発車・停車(もしくは目標速度)のみを指示する構成であっても良い。この場合、例えば表示部19をタッチパネル型にして、操作情報取得部17として遠隔オペレータからの操作入力を受け付ける構成にしてもよい。
 次に、図7乃至図9を用いて、本実施例の移動体制御システムの動作の一例を説明する。
<本実施例の移動体制御システムの動作の具体例1>
 図7は、自律移動中に管制装置2が将来の自律移動継続不可判定を行い、予め遠隔制御への切替を行う動作の具体例1である。ここでは、図3乃至図6同様に、自律移動中の車両21の進路上に静止障害物60(駐車車両)が存在し、センターラインを越えた追い越しが必要な場面である。前方のセンサ22の検知範囲が短い場合、車載制御装置1は対向車の進路を妨げることなく静止障害物60を追い越せるか判定できないため、自律移動を止めて遠隔オペレータによる遠隔制御を受ける。以下、自律移動から遠隔制御への切り替え動作と、遠隔制御後の追い越し動作を具体的に説明する。
 自律移動中の車両21は、21(a)の位置では静止障害物60を検出できないが、21(b)に差し掛かった際に、静止障害物60を検出する。なお、ここではセンサ22による外界情報検知範囲90を扇形で示している。静止障害物60が検知され、管制装置2が車両21の自律移動継続不可を判定すると、管制装置2は、車載通信装置43を介して、車載制御装置1に減速を指示するとともに、自律移動から遠隔制御への切替を要求する。
 本実施例では、自律移動から遠隔制御に切り替わる際に、静止障害物60の手前の21(c)の位置で停車するような目標速度52を算出して車両21を減速させるが、必ずしも21(c)の位置で停車する必要はなく、遠隔オペレータが表示部19の映像から追い越しできると判断すれば、走行中に遠隔制御に切り替え、遠隔オペレータの操縦で静止障害物60を追い越しても良い。一方、遠隔制御への切替に長時間を要する場合や、対向車等の存在で遠隔オペレータが追い越し開始を判断できなかった場合には、静止障害物60の手前の21(c)で一時停車した後、遠隔オペレータの操作に従って遠隔制御に切り替えてから、静止障害物60を追い越せば良い。
 そして、静止障害物60を追い越し、車両21が自律移動に復帰可能な21(d)の位置に達すると、自律移動可能性算出部11あるいは遠隔オペレータが自律移動可能性を改めて判定し可能である場合には、車載制御装置1に遠隔制御から自律移動への切替を要求し、車載制御装置1による自律移動を再開する。
<本実施例の移動体制御システムの動作の具体例2>
 図8は、自律移動中に管制装置2が将来の自律移動継続不可判定を行い、予め遠隔制御への切替を行う動作の具体例2である。ここでは、自律移動中の車両21の進路上に静止障害物60(工事現場)が存在し、交通誘導員62の誘導に従った追い越しが必要な場面である。前方のセンサ22の能力では交通誘導員62の指示が判別できない場合、車載制御装置1は通過か停車かの判断ができないため、自律移動を止めて管制装置による遠隔制御を受ける必要がある。
 自律移動中の車両21は、21(a)の位置では静止障害物60および交通誘導員62を検出できないが、21(b)に差し掛かった際に、静止障害物60および交通誘導員62を検出することができる。静止障害物60および交通誘導員62が検知され、管制装置2が車両21の自律移動継続不可を判定すると、管制装置2は、車載通信装置43を介して、車載制御装置1に減速を指示するとともに、自律移動から遠隔制御への切替を要求する。
 従来技術では、車載制御装置1側で自律移動の継続可否を判定するため、図8の目標速度52(a)に示すように、交通誘導員62の手前で一旦停車し、遠隔制御への切替を行った後に、改めて出発か待機かの判断を遠隔から行う必要がある。一方、本実施例では、移動中に遠隔に切り替わるため、遠隔に切り替わった後は必ずしも停車する必要はない。遠隔に切り替わった段階で、遠隔オペレータが交通誘導員62の進めの指示を確認できれば、図8の目標速度52(b)に示すように、停車せずにそのまま追い越しを行うことも可能である。一方、停車までに遠隔制御への切替が完了しなかった場合や、交通誘導員62が止まれの指示を出していた場合には、そのまま制御部6が生成した目標速度52(a)に従って停車し、遠隔オペレータの操作に従って遠隔制御で移動する。
 このように、本実施例では、従来技術で必ず停車が必要となった場面でも、必ずしも停車が必要ではなくなり、スムーズに通過できる場合があるという点で優位である。
<本実施例の移動体制御システムの動作の具体例3>
 図9は、自律移動中に管制装置2が自律移動継続不可判定を行い、予め遠隔制御への切替を行う動作の具体例3である。ここででは、自律移動中の車両21の前方に、車両21の予定進路と一部干渉する移動障害物61(歩行者)が複数存在する場面である。この時、車載制御装置1は、外界情報12として移動障害物61の位置、速度、移動方向、大きさ等の情報を取得する。そして、移動障害物61の将来の移動方向を予測し、将来の干渉が見込まれる場合には予め滑らかに減速するとともに、移動障害物の急な進路変更があった場合でも急停止で接触前に停車できる速度を算出しながら自律移動する。
 一般に移動障害物61の数が多いほど計算能力が必要となるが、コスト等の制約で車載制御装置1の計算能力が十分高くない場合、制御部6での演算が間に合わず、図9に示すように、加速度目標53(a)が急激に減少する場面があり、急ブレーキがかかるような制御となる可能性がある。このような事象は、例えば車載制御装置1が計算能力を省略するために自車から離れている移動障害物の行動予測を省略し、当該の移動障害物が急な行動変化を起こすような場面で発生しうる。従来技術では、このような加速度変化を予め異常値として設定していない場合には、急ブレーキが発生する加速度目標53(a)のような状況で自律移動が継続する可能性があった。
 一方、本実施例では、管制装置2でも制御部6と同様のアルゴリズムで行動予測を行うが、計算能力の高い管制装置2では、図9に示すように、より滑らかな減速となる目標加速度53(b)を算出できる。そして、車載制御装置1が算出した目標加速度53(a)では急ブレーキが発生する場面で、目標加速度53(b)との間に大きな偏差70が予測される場合、管制装置2は、車両21を自律移動から遠隔制御に切り替え、歩行者のそばを遠隔オペレータの制御によって安全に通過させることができる。
 このように、従来技術では、車載制御装置1側で異常検知できないまま車両21の制御が急変したり不安定化したりする場面であっても、本実施例では、遠隔装置2で車両21の異常を検知することができるため、適切な状況で、自律移動から遠隔制御に切り替えることができる。
<本実施例の移動体制御システムの動作の具体例4、具体例5>
 図7から図9の例以外にも、図17や図18の状況で自律移動から遠隔制御に切り替えても良い。
 図17は、図7と同様に、静止障害物60(ここでは駐車車両として図示)が車両21の進路上に存在し、センターラインを越えての追い越しが要求される場面である。ただし、センターラインが、はみ出し可能な破線63(a)から、はみ出し禁止の黄色実線63(b)に代わっており、車線をはみ出しての追い越しが、交通法規上、原則として禁止されている状況である。しかし、静止障害物60の大きさによっては黄色実線の車線をはみ出さざるを得ないため、交通法規を順守するように設定された車載制御装置1では、どのように自律移動すれば良いかの判断が難しい。そこで、このような状況に遭遇した場合は、遠隔制御に切り替え、遠隔オペレータの責任の元で、静止障害物60を追い越すようにしている。
 また、図18は、車両21の前方の車線中央に停止した静止障害物60が、渋滞で停止している先行車両なのか、異常な位置に停車している駐車車両であるのか判断できず、車載制御装置1では、追い越すべきかを判断できない場面がある。この場合も、車載制御装置1が、静止障害物60を先行車であると仮認識して停車した後、所定時間経過しても当該先行車が移動しなかった場合には、遠隔制御に切り替え、遠隔オペレータの操作によって、停止継続、追い越しの何れかの適切な対応を実行する。
 以上、説明したように、本実施例の移動体制御システムによれば、車両が停止する前に、自律移動から遠隔制御への切替が可能なことから、道路状況によっては必ずしも停車が必要ではなくなり、よりスムーズな運行が可能となる。
 また、車載制御装置の性能を抑え車載装置側では車両の異常を適切に検出できない場合であっても、管制装置側で車両の異常を適切に検知でき、自律移動から遠隔制御への切り替えを適切に行うことができる。
 次に、本発明の実施例2について、図10乃至図13を用いて説明する。なお、実施例1と同様の部分は説明を省略する。
 実施例1の管制装置2では、図2等に示すように、車両21が取得した外界情報12を用いて、当該の車両21を管制していたが、管制装置2が多数の車両や定点観測カメラ等を管制する場合は、管制対象の車両21以外が取得した外界情報も用いて、当該の車両21を管制することができる。
 そこで、本実施例の管制装置2では、多数の車両や定点観測カメラ等からの外界情報も併せて取得し、所望の車両21を管制する際に、他の車両等が取得した外界情報も同時に用いることで、より確実かつ滑らかな遠隔制御への切替を実現できるようにした。
 図10は、実施例2の移動体制御システムの構成を示す機能ブロック図であり、実施例1の図2と比べ、外界情報共有部100を追加した点で相違する。なお、図10では、管制対象の車両21の車載制御装置1が取得した外界情報を外界情報12Aと称し、管制対象の車両21以外の車両や定点観測カメラが取得し、外界情報共有部100に入力された外界情報を外界情報12Bと称している。以下では、外界情報12Bが関与する点に注目して、図10の詳細を説明する。
 制御シミュレータ8は、車載制御装置1の制御部6の動作(計算)を模擬する。すなわち、通信部7を介して取得した外界情報12A、移動情報13に加え、外界情報共有部100が取得した外界情報12Bを使用して、車載制御装置1の制御部6と同様の手段(アルゴリズム)を用いて走行計画を演算し、この走行計画に基づき、管制対象の車両21の動作を決定する。そして、この動作を実現するように、車両21に搭載された各アクチュエータの制御指令値を算出する。
 自律移動可能性判定部9は、車載制御装置1の内部情報14と、制御シミュレータ8が算出した各アクチュエータの制御指令値や内部の計算値を比較し、管制対象の車両21が自律移動継続可能な状態にあるか否かを判定する。この処理は実施例1と同様であるが、本実施例では、外界情報12Aと外界情報12Bを比較し、この比較結果も自律移動継続可能な状態にあるか否かの判定に利用しても良い。さらに、車載制御装置1からの移動情報13と、外界情報12Bに含まれる車両21の移動に関する情報を比較し、この比較結果も自律移動継続可能な状態にあるか否かの判定に利用しても良い。
 差異算出部10は、内部情報14と、制御シミュレータ8が算出した各アクチュエータの制御指令値や内部の計算値との差異を算出する。具体的には、走行計画(目標走行軌道、目標速度等)、各アクチュエータの制御指令値、算出途中の変数値、定数値等などが偏差算出の対象である。この処理は実施例1と同様であるが、本実施例では、外界情報12Aと外界情報12Bとの差異を算出しても良い。詳細は後述するが、両外界情報に含まれる静止障害物や移動障害物の位置、大きさ、属性などが偏差算出の対象である。さらに、車載制御装置1からの移動情報13に含まれる現在位置、進行角、速度などの情報と、外界情報12Bから検出された車両21の現在位置、進行角、速度などの情報についても偏差を算出しても良い。
 次に、図11を用いて、外界情報12Aと外界情報12Bの偏差算出処理の一例を説明する。図11は、管制対象の車両21と、その前方に存在する移動障害物61(歩行者)を示している。歩行者は、車両21の検知範囲90内に存在しているため、車載制御装置1の外界情報12Aからは、移動障害物61(a)に示す情報が取得できる。また、歩行者は、路側に設置された定点観測カメラ101(あるいは3Dセンサ)の検知範囲102内に存在しているため、定点観測カメラ101の外界情報12Bからは、移動障害物61(b)に示す情報が取得できる。
 この時、差異算出部10は、移動障害物61(a)と移動障害物61(b)の情報を比較し、移動障害物61の大きさや属性値などから同一物体か否かを判定する。そして、同一物体であると判定した後、両者の位置の偏差70を算出する。
 この偏差70が所定値以上となる場合には、車両21の外界情報取得部3に何らかのエラーが生じているか、移動情報13に含まれる自車位置にずれが生じている可能性があると考えられる。この場合、自律移動の継続に悪影響が生じる恐れがあるため、管制装置2は、自律移動継続不可と判定して自律移動から遠隔制御に切り替える必要がある。
 したがって、管制装置2の自律移動可能性算出部11は、所定値以上の偏差70が入力された場合は、自律移動継続不可と判定し、通信部7を介して、車載制御装置1に遠隔制御への切り替えを指令する。
 また、図12A、図12Bを用いて、管制対象の車両21の移動情報13から取得した車両21の自己位置と、外界情報12Bから取得した車両21の自己位置の偏差算出処理の一例を説明する。
 図12Aは、定点観測カメラ101(あるいは3Dセンサ)の検知範囲102内に車両21が存在し、定点観測カメラ101から得られる外界情報12Bを用いて当該の車両21を管制する状況を示している。この場合、偏差70は、移動情報13に含まれる車両21の自己位置110と、定点観測カメラ101が検出した車両21の自己位置111の差として求めることができ、差異算出部10は、この偏差70を算出して自律移動可能性算出部11に伝送する。自律移動の継続には、車載制御装置1が正確な自己位置を検知または推定できていることが重要であり、自己位置に誤差が生じている場合は、なんらかのトラブルが生じている可能性がある。したがって、自律移動可能性算出部11は偏差70が所定値以上となった場合に自律移動継続不可を判定する。
 一方、図12Bは、他移動体103のセンサ104(外界情報取得部)の検知範囲105内に車両21が存在し、センサ104から得られる外界情報12Bを用いて当該の車両21を管制する状況を示している。この場合、図12A同様に、差異算出部10は、移動情報13に含まれる車両21の自己位置110と、センサ104が検出した車両21の自己位置111の偏差70を算出し、自律移動可能性算出部11は当該偏差70が所定値以上となった場合に自律移動継続不可を判定する。
 次に、図13を用いて、外界情報12Bを用いることで、車両21の外界情報取得部3が物体検出する前に、予め将来の自律移動継続不可の判定を行い、遠隔制御への切替を行うことができる一例を示す。
 図13は、自律移動中の車両21の進路上に静止障害物60(工事現場)が存在し、交通誘導員62の誘導に従って走行する必要がある場面を示す。前方のセンサ22の能力では交通誘導員62の指示が判別できない場合、車載制御装置1は通過すべきか停車すべきかの判断ができないため、自律移動を止めて管制装置による遠隔制御を受ける必要がある。
 21(b)の位置では、車両21のセンサ22では静止障害物60を検知できないが、管制装置2が既に保持している外界情報12Bには、静止障害物60に関する情報が含まれているので、管制装置2は、車両21がそのまま進行した場合に、自律移動継続不可となることを予測できる。そして、管制装置2は、車両21が21(b)に差し掛かった際に、自律移動継続不可の判定に基づき、遠隔制御への切り替え指令を送信する。
 実施例1の図8では、車両21が21(c)に差し掛かった際に、静止障害物60と交通誘導員62を検出した。そして、この位置以降で自律移動継続不可の判断を行うため、図13の下図の52(a)に示すように、減速開始地点121(a)から減速することになる。一方、本実施例では、52(b)に示すように、減速開始地点121(a)より手前の減速開始地点121(b)から減速できるため、より速度変化(減速度)を緩やかにすることが可能である。
 以上、説明したように、本実施例の移動体制御システムによれば、従来技術と比べて前もって遠隔制御への切替が可能であり、減速開始地点をより手前に設定できることから、速度変化をなめらかにすることが可能となる。また、制御部6だけでなく、外界情報取得部3や移動情報取得部4になんらかのエラーが生じたことを検知可能であり、よりロバストな自律移動および確実な遠隔制御への切替が可能となる。
 次に、本発明の実施例3について、図14乃至図16を用いて説明する。なお、上述の実施例と同様の部分は説明を省略する。
 実施例1及び実施例2の自律移動可能性判定部9では、差異算出部10と、自律移動可能性算出部11を用いることで、自律移動継続不可の判定を行っていた。これに対し、本実施例では、移動体制御装置1からの外界情報12A、移動情報13、及び、内部情報14と、管制装置2内で計算された情報もしくは共有された外界情報12B等を比較し、偏差に基づき自律移動継続可能性を判定する。例えば、管制装置2を操作する遠隔オペレータが、外界情報12とその認識結果を見比べて車両21のエラーの有無、すなわち、自律移動継続可否を判定する構成であってもよい。
 図14は、本実施例に係る移動体制御システムの構成を示す機能ブロック図であり、差異算出部10と、自律移動可能性算出部11を省略し、操作情報取得部17の出力信号が自律移動可能性判定部9に入力される点で、実施例1、実施例2と相違する。以下では、操作情報取得部17を介して、遠隔オペレータが自律移動可能性判定部9での判定に関与する点を抽出して、図14の詳細を説明する
 操作情報取得部17は、遠隔オペレータが操作するものであり、車両21を遠隔で制御する操作情報16を入力する手段であるとともに、外界情報12の認識情報の信頼度や、遠隔オペレータが自らの判断に基づく自律移動継続可否判定の結果を入力する手段である。
 自律移動可能性判定部9は、遠隔オペレータの操作情報16に基づき、自律移動継続が可能な状態にあるか否かを判定する。実施例1及び実施例2同様、判定結果は0(自律移動継続不可)、1(自律移動継続可)を算出するのが一例であるが、遠隔オペレータの操作情報16に基づき、信頼度等の連続値を算出しても良い。算出した自律移動継続可能性は、遠隔制御情報15の一部として、通信部7を介して車載制御装置1に伝送する。
 表示部19は、遠隔オペレータが遠隔制御のための操作情報16を入力するために必要な情報を表示する手段であり、ディスプレイ、タブレット端末などを用いる。遠隔オペレータは、表示部19の情報から、自律移動継続不可となった車両21の状態や周囲の状況を確認し、車両21を遠隔で操縦したり、制御を手助けするための指示を操作情報16入力する。また、センサ22の生情報と、外界情報12の認識結果を比較するための画面を表示することで、遠隔オペレータはこれらの比較により自律移動継続可否を判定可能となる。
 図15A~図15Cは、操作情報取得部17及び表示部19の一例を示す。本図では、表示部19は遠隔オペレータがセンサ22から取得した前面の映像と、外界情報取得部3が取得した外界情報認識結果を重ねて表示している。この画面は例えばタッチパネル式になっており、操作情報取得部17も兼ねている。操作情報取得部17は他に、キーボードやマウスなどの入力装置、制御盤等であっても良い。
 まず、図15Aは、車両21の前方のセンサ22が撮影した前面映像である。
 図15Bは、図15Aに、外界情報12の認識結果を重ねて表示したものである。破線は、外界情報取得部3が検出した物体であり、静止障害物60、移動障害物61、路面ペイント63等に重ねて、先行車両12(a)、歩行者12(b)、右側の白線12(c)、センターライン12(d)、左側の白線12(e)が表示されている。図15Bのように、遠隔オペレータが目視できる物体のほとんどを外界情報12として取得できている場合は、自律移動を継続しても問題のない状況であるので、遠隔オペレータは自律移動継続可能の判定を入力するか、もしくは何も入力しない。
 一方、図15Cのように、外界情報取得部3の検出結果中に、物体の検知範囲のずれ12(f)、存在する物体の未検知12(g)、存在しない物体の誤検知12(h)など多数の不備が存在する場合、遠隔オペレータは、外界情報取得部3になんらかのエラーが生じていると判定し、自律移動継続不可の判定を行う。この場合、遠隔オペレータは遠隔制御への切替の指示を操作情報取得部17より行う。あるいは画面上に、実際の認識結果を描画するように入力することで、検知結果との偏差をもって自律移動可能性判定部9が自律移動継続可否を判定する構成であっても良い。
 図16A、図16Bは、センサ22が3D点群を取得するLiDARのようなセンサである場合を示す。車両21の位置を表示部19の下部に描画し、車両21の前方の物体の3D形状を点群で示している。図16Aは元画像を示しており、例えば先行車両61(a)、対向車両61(b)、歩行者61(c)、左側の白線63(a)、センターライン63(b)、右側の白線63(c)が遠隔オペレータの目には可視である。ただし点群情報は遮蔽物の奥の領域が見えないことから、例えば先行車61(a)のように、一部分のみが見える可能性もある。
 図16Bは認識結果の情報を付加した一例を示す。ここでは、図15同様に、破線に囲まれた領域が、外界情報取得部3が物体を検出した領域であり、その属性(車両、歩行者、線など)推定値も重ねて表示している。このような映像から、遠隔オペレータは例えば、車ではなく未知の物体として見えている(誤検知12(h))、右側の白線が未検知となっている(未検知12(g))などの認識誤差を確認可能である。このような認識誤差が多数存在する場合、遠隔オペレータは外界情報取得部3になんらかのエラーが生じていると判定し、前述した方法と同様に、自律移動継続不可の判定を行う。
 以上、説明したように、本実施例の移動体制御システムによれば、外界情報取得部3になんらかのエラーが生じたことを、遠隔オペレータを介して確実に検知可能であり、よりロバストな自律移動および確実な遠隔制御への切替が可能となる。
 以上、説明した実施例1乃至3について、自律移動が継続不可となる道路状況の例について述べる。まず、図7では、静止障害物60(ここでは駐車車両として図示)が車両21の進路上に存在し、センターラインを越えての追い越しが要求される場面について述べた。この時、センサ22の検知範囲が短い場合、車両21は対向車の進路を妨げることなく静止障害物60を追い越しできるか否かを判定できず、自律移動を止めて管制装置による遠隔制御を受けることになる。
 次に、図8では、静止障害物60として工事現場が車両21の進路上に存在し、交通誘導員62の誘導に従ってセンターラインを越えて追い越しを行う場面について述べた。この時、センサ22の能力では交通誘導員の指示が判別できない場合、車両21は通過か停車かの判断ができず、自律移動を止めて管制装置による遠隔制御を受けることになる。
 さらに、図9では、多数の移動障害物が車両21の前方に存在するなど、車載制御装置の性能を抑えた場面に遭遇した場合について述べた。この時、従来技術では車載制御装置側で異常検知できないまま結果的に制御が急変する、もしくは不安定化する可能性がある一方、本実施例では遠隔装置で異常検知可能なことから適切に遠隔制御に切り替えが可能である。
 以上説明したように、遠隔制御に切り替えうる場面は複数存在するが、本技術は特定の場面にのみ適用されるものではなく、自律移動の継続が困難となるあらゆる場面に適用しうるものである。
 また、以上説明した実施例1乃至3において、走行制御として自動車の自動運転を例にとって説明したが、走行制御は自動運転に限定されるものではない。自動車間距離制御(アクティブクルーズコントロール)、レーンキープ、自動運転レベル2乃至5など、さまざまな形態の走行制御に適用可能である。
 以上の実施例1乃至実施例3では、自動車を例にとって説明したが、本発明は、自律移動するあらゆる装置に適用可能である。例えば、自律移動を行う建設機械(鉱山ダンプなど)、自律移動モビリティ(無人自動運転バス、一人乗り小型自動車、ゴルフカート、バイク、倒立振子型モビリティなど)、自律移動ロボットなどへも適用可能である。
 なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
 1  車載制御装置, 2  管制装置, 3  外界情報取得部, 4  移動情報取得部, 5、7  通信部, 6  制御部, 8  制御シミュレータ, 9  自律移動可能性判定部, 10 差異算出部, 11 自律移動可能性算出部, 12、12A、12B 外界情報, 13 移動情報, 14 内部情報, 15 遠隔制御情報, 16 操作情報, 17 操作情報取得部, 18 遠隔制御部, 19 表示部, 21 車両, 22、23、24、25、104 センサ, 26 ハンドル, 27 操舵トルク検出装置, 28 操舵制御装置, 29 モータ, 30 ステアリング制御機構, 32 ブレーキペダル, 33 ブレーキ制御機構, 34 コンバインセンサ, 35 制動制御装置, 37 アクセルペダル, 38 ストロークセンサ, 39 駆動制御装置, 40 駆動制御機構, 41 ハンドル角検出装置, 43 車載通信装置, 44 表示装置, 60 静止障害物, 61 移動障害物, 62 交通誘導員, 70 偏差, 100 外界情報共有部, 101 定点観測カメラ, 103 他移動体

Claims (23)

  1.  自律移動可能な移動体に搭載した移動体制御装置と、
     前記移動体を遠隔地から管制する管制装置と、
     を備えた移動体制御システムであって、
     前記移動体制御装置は、
     前記移動体の外界情報を取得する外界情報取得手段と、
     前記移動体の移動情報を取得する移動情報取得手段と、
     前記外界情報および前記移動情報に基づき、前記移動体の将来状態を予測する制御手段と、
     前記管制装置と通信する移動体側通信手段と、を備えるとともに、
     前記管制装置は、
     前記移動体制御装置と通信する管制装置側通信手段と、
     前記移動体制御装置から受信した前記外界情報および前記移動情報に基づき、前記移動体の将来状態を予測する制御シミュレータと、
     前記制御手段と前記制御シミュレータが予測した将来状態を比較し、前記移動体の自律移動の継続可否を判定する自律移動可能性判定手段と、を備えることを特徴とする移動体制御システム。
  2.  請求項1に記載の移動体制御システムにおいて、
     前記管制装置が、前記移動体の自律移動の継続ができないと判定した場合、
     前記移動体制御装置は、前記移動体の走行中に、前記移動体の制御を自律移動と遠隔制御の間で切り替えることを特徴とする移動体制御システム。
  3.  移動体を制御する移動体制御装置と、前記移動体を遠隔地から完成する管制装置を備えた移動体制御システムであって、
     前記移動体制御装置は、
     前記移動体の周辺の外界情報を取得する外界情報取得手段と、
     前記移動体の移動情報を取得する移動情報取得手段と、
     前記外界情報、前記移動情報の少なくとも一つに基づき前記移動体の移動を制御する制御量を算出するとともに、前記管制装置から受信した遠隔制御情報に基づき、前記移動体の自律移動と遠隔制御を切り替える制御手段と、
     前記外界情報、前記移動情報、前記制御量の少なくとも一つを前記管制装置に送信し、前記管制装置から前記遠隔制御情報を受信する移動体側通信手段と、を備え、
     前記管制装置は、
     前記外界情報、前記移動情報、前記制御量の少なくとも一つを前記移動体制御装置から受信し、前記移動体制御装置に前記遠隔制御情報を送信する管制装置側通信手段と、
     前記移動体の自律移動可能性を将来にわたって判定し、その判定結果を含む前記遠隔制御情報を生成する自律移動可能性判定手段と、を備えることを特徴とする移動体制御システム。
  4.  前記管制装置は、前記外界情報と前記移動情報に基づき、前記制御手段の制御量を模擬する制御シミュレータを備え、
     前記自律移動可能性判定手段は、前記制御シミュレータが模擬した制御量と、前記移動体制御装置から取得した制御量の偏差に基づき、自律移動可能性を判定することを特徴とする請求項3に記載の移動体制御システム。
  5.  前記自律移動可能性判定手段は、前記移動体制御装置から取得した制御量である、前記移動体の目標走行軌道、目標速度、目標加速度の少なくとも一つを、前記制御シミュレータが模擬した制御量と比較し、偏差が所定値以上の場合に、自律移動不可と判定することを特徴とする請求項4に記載の移動体制御システム。
  6.  前記管制装置は、
     遠隔オペレータの操作に基づく操作情報を取得する操作情報取得手段と、
     前記操作情報、前記外界情報、前記移動情報の少なくとも一つに基づき前記移動体の移動を遠隔制御する遠隔制御量を算出する遠隔制御手段と、を備え、
     前記制御手段は、遠隔制御時には前記遠隔制御量の一部または全部を用いて前記制御量を決定することを特徴とする請求項3に記載の移動体制御システム。
  7.  前記制御手段は、前記外界情報、前記移動情報の少なくとも一つに基づき前記移動体の移動を制御するための制御量を算出し、
     前記管制装置は、前記外界情報と前記移動情報に基づき、前記制御手段の制御量を模擬する制御シミュレータが模擬した制御量または前記遠隔制御量の少なくとも一つと、前記制御手段から取得した制御量との偏差が所定値以上の場合に、自律移動不可と判定することを特徴とする請求項6に記載の移動体制御システム。
  8.  前記移動体制御装置は、
     前記管制装置から取得した将来の自律移動可否の判定に基づき、走行中に自律移動と遠隔制御の切替を行うことを特徴とする請求項3に記載の移動体制御システム。
  9.  前記管制装置は、
     他の移動体や環境に設置したセンシング装置から取得した外界情報を記憶する外界情報共有手段を備え、
     前記自律移動可能性判定手段は、前記移動体制御装置が取得した外界情報と、前記外界情報共有手段に記憶された外界情報との偏差が所定値以上の場合に、自律移動不可と判定することを特徴とする請求項3に記載の移動体制御システム。
  10.  前記自律移動可能性判定手段は、前記制御手段の内部情報における自己位置と、前記外界情報共有手段に記憶された前記移動体の自己位置との偏差が所定値以上の場合に、自律移動不可と判定することを特徴とする請求項9に記載の移動体制御システム。
  11.  前記制御手段は、前記管制装置から受信した遠隔制御情報に基づき、自律移動不可の原因となる状況を前記外界情報取得手段が取得する前に減速を開始することを特徴とする請求項9に記載の移動体制御システム。
  12.  前記制御手段は、前記管制装置から受信した遠隔制御情報に基づき、自律移動不可の原因となる状況を前記外界情報取得手段が取得する前に遠隔制御に切り替えることを特徴とする請求項9に記載の移動体制御システム。
  13.  前記管制装置は、
     前記外界情報を遠隔オペレータに対して表示する外界情報表示手段と、
     前記遠隔オペレータが認識した外界情報や自律移動可能性判定結果等の入力結果である操作情報を入力する操作情報取得手段と、を更に備え、
     前記自律移動可能性判定手段は、前記遠隔オペレータの操作情報に基づき、自律移動可能性を判定することを特徴とする請求項3に記載の移動体制御システム。
  14.  前記外界情報表示手段には、前記移動体に設置したカメラからの画像情報と、該画像情報を処理した外界情報の認識結果が表示され、
     前記遠隔オペレータは、前記画像情報と前記認識結果を照らし合わせて自律移動可能性を判定し、前記操作情報取得手段を用いて前記判定を入力することを特徴とする請求項13に記載の移動体制御システム。
  15.  前記外界情報表示手段には、前記移動体に設置したセンサからの二次元又は三次元の点群情報と、該点群情報を処理した外界情報の認識結果が表示し、
     前記遠隔オペレータは、前記点群情報と前記認識結果を照らし合わせて自律移動可能性を判定し、前記操作情報取得手段を用いて前記判定を入力することを特徴とする請求項13に記載の移動体制御システム。
  16.  前記移動体制御システムは、
     前記移動体の進路をふさぐ障害物を検知し、前記障害物を回避するため他移動体が対向方向に通過する領域に一時的に進入する際、前記他移動体との衝突の可能性がある場合に、遠隔制御に切り替えることを特徴とする請求項3に記載の移動体制御システム。
  17.  前記移動体制御システムは、
     前記移動体の進路をふさぐ障害物を検知し、前記障害物を回避するため他移動体が対向方向に通過する領域に一時的に進入する際、交通法規が前記領域への進入を禁止している場合に、遠隔制御に切り替えることを特徴とする請求項3に記載の移動体制御システム。
  18.  前記移動体制御システムは、
     前記移動体の進路をふさぐ障害物を検知し、前記障害物を回避するため他移動体が対向方向に通過する領域に一時的に進入する際、前記進入の可否を指示する人または信号が存在する場合に、遠隔制御に切り替えることを特徴とする請求項3に記載の移動体制御システム。
  19.  前記移動体制御システムは、
     前記移動体制御装置の異常動作を検知した場合に、遠隔制御に切り替えることを特徴とする請求項3に記載の移動体制御システム。
  20.  前記移動体制御システムは、
     前記移動体の前方を移動する他移動体が停止し、所定時間以上移動しなかった場合に、遠隔制御に切り替えることを特徴とする請求項3に記載の移動体制御システム。
  21.  移動体の周辺の外界情報を取得する外界情報取得手段と、
     前記移動体の移動情報を取得する移動情報取得手段と、
     前記外界情報、前記移動情報の少なくとも一つに基づき前記移動体の移動を制御する制御量を算出するとともに、受信した遠隔制御情報に基づき、前記移動体の自律移動と遠隔制御を切り替える制御手段と、
     前記外界情報、前記移動情報、前記制御量の少なくとも一つを送信し、遠隔制御情報を受信する通信手段と、を備えたことを特徴とする移動体制御装置。
  22.  移動体が取得した外界情報、前記移動体の移動状態を含む移動情報、及び、前記移動体の制御手段の制御情報を受信する通信手段と、
     前記移動体の自律移動可能性を将来にわたって判定し、前記通信手段を介して前記移動体に送信する自律移動可能性判定手段と、
     を備えることを特徴とする管制装置。
  23.  前記外界情報と前記移動情報に基づき、前記移動体の制御情報を模擬する制御シミュレータと、
     該制御シミュレータの制御情報と、受信した制御情報との偏差に基づき、前記移動体の自律移動の継続可否を、前記移動体の走行予定経路の状況から予測して判定する自律移動可能性判定手段と、
     を備えることを特徴とする請求項22に記載の管制装置。
PCT/JP2017/038001 2017-10-20 2017-10-20 移動体制御システム WO2019077739A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019549080A JP6839770B2 (ja) 2017-10-20 2017-10-20 移動体制御システム、および、管制装置
US16/754,831 US20210197808A1 (en) 2017-10-20 2017-10-20 Moving body control system
PCT/JP2017/038001 WO2019077739A1 (ja) 2017-10-20 2017-10-20 移動体制御システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/038001 WO2019077739A1 (ja) 2017-10-20 2017-10-20 移動体制御システム

Publications (1)

Publication Number Publication Date
WO2019077739A1 true WO2019077739A1 (ja) 2019-04-25

Family

ID=66173950

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/038001 WO2019077739A1 (ja) 2017-10-20 2017-10-20 移動体制御システム

Country Status (3)

Country Link
US (1) US20210197808A1 (ja)
JP (1) JP6839770B2 (ja)
WO (1) WO2019077739A1 (ja)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021018209A (ja) * 2019-07-23 2021-02-15 トヨタ自動車株式会社 車両位置検知システム
JP2021021661A (ja) * 2019-07-29 2021-02-18 トヨタ自動車株式会社 遠隔操作システム、プログラム及び車両
WO2021059715A1 (ja) * 2019-09-27 2021-04-01 株式会社デンソー 監視センタ、監視システム及び方法
JP2021056745A (ja) * 2019-09-30 2021-04-08 株式会社デンソー 監視センタ、監視システム及び方法
WO2021130880A1 (ja) * 2019-12-25 2021-07-01 三菱電機株式会社 遠隔操作装置、および、遠隔操作方法
CN113525411A (zh) * 2020-03-31 2021-10-22 本田技研工业株式会社 移动体控制装置、移动体控制方法及存储介质
CN113525410A (zh) * 2020-03-31 2021-10-22 本田技研工业株式会社 移动体控制装置、移动体控制方法及存储介质
JP2022048961A (ja) * 2020-09-15 2022-03-28 北京百度網訊科技有限公司 案内経路特定方法及び車両の走行制御方法、装置、機器、記憶媒体およびコンピュータプログラム
WO2022123831A1 (ja) * 2020-12-10 2022-06-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理方法、及び、情報処理システム
JP2022129233A (ja) * 2021-02-24 2022-09-05 トヨタ自動車株式会社 遠隔支援システム、遠隔支援方法、及び遠隔支援プログラム
JP2022140528A (ja) * 2022-07-20 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022140526A (ja) * 2022-07-20 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022140524A (ja) * 2021-09-28 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022171746A (ja) * 2019-07-09 2022-11-11 トヨタ自動車株式会社 車両制御システム、車両制御装置、車両制御方法、及び車両制御プログラム
WO2022244323A1 (ja) * 2021-05-21 2022-11-24 日立Astemo株式会社 外界認識異常判定システム、車載装置、および、外界認識異常判定方法
JP7349860B2 (ja) 2019-09-20 2023-09-25 株式会社フジタ 複数台の車両の管理システム
US11814082B2 (en) 2020-03-31 2023-11-14 Honda Motor Co., Ltd. Mobile object control method, mobile object control device, and storage medium
JP7425975B2 (ja) 2021-04-23 2024-02-01 トヨタ自動車株式会社 遠隔機能選択装置
JP7485521B2 (ja) 2020-02-28 2024-05-16 株式会社Subaru 車両用制御装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019087380A1 (ja) * 2017-11-06 2019-05-09 本田技研工業株式会社 車両制御装置
US11354406B2 (en) * 2018-06-28 2022-06-07 Intel Corporation Physics-based approach for attack detection and localization in closed-loop controls for autonomous vehicles
EP3914982A1 (en) * 2019-01-25 2021-12-01 Uber Technologies, Inc. Operator assistance for autonomous vehicles
JP7200864B2 (ja) * 2019-07-17 2023-01-10 トヨタ自動車株式会社 車両制御装置
CN114761301B (zh) * 2019-12-02 2023-05-09 日产自动车株式会社 车辆控制方法及车辆控制装置
US11634140B2 (en) * 2020-02-24 2023-04-25 Nissan Motor Co., Ltd. Vehicle control method and vehicle control device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007310698A (ja) * 2006-05-19 2007-11-29 Hitachi Ltd 無人車両
JP2010134499A (ja) * 2008-12-02 2010-06-17 Mitsubishi Electric Corp 遠隔地画像表示装置、遠隔操縦装置、車両制御装置、遠隔操縦システム、遠隔操縦方法、遠隔操縦プログラム、車両制御プログラム、遠隔地画像表示方法、遠隔地画像表示プログラム
JP2016182906A (ja) * 2015-03-26 2016-10-20 アルパイン株式会社 運転支援システム
WO2017145314A1 (ja) * 2016-02-25 2017-08-31 株式会社日立製作所 移動体の制御方法、移動体及び移動体の制御システム
JP2017174208A (ja) * 2016-03-24 2017-09-28 トヨタ自動車株式会社 自動運転車両を用いたタクシーサービスシステム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9720410B2 (en) * 2014-03-03 2017-08-01 Waymo Llc Remote assistance for autonomous vehicles in predetermined situations
US9524648B1 (en) * 2014-11-17 2016-12-20 Amazon Technologies, Inc. Countermeasures for threats to an uncrewed autonomous vehicle

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007310698A (ja) * 2006-05-19 2007-11-29 Hitachi Ltd 無人車両
JP2010134499A (ja) * 2008-12-02 2010-06-17 Mitsubishi Electric Corp 遠隔地画像表示装置、遠隔操縦装置、車両制御装置、遠隔操縦システム、遠隔操縦方法、遠隔操縦プログラム、車両制御プログラム、遠隔地画像表示方法、遠隔地画像表示プログラム
JP2016182906A (ja) * 2015-03-26 2016-10-20 アルパイン株式会社 運転支援システム
WO2017145314A1 (ja) * 2016-02-25 2017-08-31 株式会社日立製作所 移動体の制御方法、移動体及び移動体の制御システム
JP2017174208A (ja) * 2016-03-24 2017-09-28 トヨタ自動車株式会社 自動運転車両を用いたタクシーサービスシステム

Cited By (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022171746A (ja) * 2019-07-09 2022-11-11 トヨタ自動車株式会社 車両制御システム、車両制御装置、車両制御方法、及び車両制御プログラム
JP7400904B2 (ja) 2019-07-09 2023-12-19 トヨタ自動車株式会社 車両制御システム、車両制御装置、車両制御方法、及び車両制御プログラム
JP2021018209A (ja) * 2019-07-23 2021-02-15 トヨタ自動車株式会社 車両位置検知システム
US11535279B2 (en) 2019-07-23 2022-12-27 Toyota Jidosha Kabushiki Kaisha Vehicle position sensing system
JP2021021661A (ja) * 2019-07-29 2021-02-18 トヨタ自動車株式会社 遠隔操作システム、プログラム及び車両
JP7331531B2 (ja) 2019-07-29 2023-08-23 トヨタ自動車株式会社 遠隔操作システム、プログラム及び車両
JP7349860B2 (ja) 2019-09-20 2023-09-25 株式会社フジタ 複数台の車両の管理システム
CN114450732B (zh) * 2019-09-27 2024-03-22 株式会社电装 监视中心、监视系统以及方法
WO2021059715A1 (ja) * 2019-09-27 2021-04-01 株式会社デンソー 監視センタ、監視システム及び方法
CN114450732A (zh) * 2019-09-27 2022-05-06 株式会社电装 监视中心、监视系统以及方法
JP7180576B2 (ja) 2019-09-27 2022-11-30 株式会社デンソー 監視センタ、監視システム及び方法
JP2021056621A (ja) * 2019-09-27 2021-04-08 株式会社デンソー 監視センタ、監視システム及び方法
WO2021065165A1 (ja) * 2019-09-30 2021-04-08 株式会社デンソー 監視センタ、監視システム及び方法
JP7160010B2 (ja) 2019-09-30 2022-10-25 株式会社デンソー 監視センタ、監視システム及び方法
CN114514568A (zh) * 2019-09-30 2022-05-17 株式会社电装 监视中心、监视系统以及方法
JP2021056745A (ja) * 2019-09-30 2021-04-08 株式会社デンソー 監視センタ、監視システム及び方法
JPWO2021130880A1 (ja) * 2019-12-25 2021-07-01
JP7221420B2 (ja) 2019-12-25 2023-02-13 三菱電機株式会社 遠隔操作装置、および、遠隔操作方法
WO2021130880A1 (ja) * 2019-12-25 2021-07-01 三菱電機株式会社 遠隔操作装置、および、遠隔操作方法
JP7485521B2 (ja) 2020-02-28 2024-05-16 株式会社Subaru 車両用制御装置
US11814082B2 (en) 2020-03-31 2023-11-14 Honda Motor Co., Ltd. Mobile object control method, mobile object control device, and storage medium
JP7448400B2 (ja) 2020-03-31 2024-03-12 本田技研工業株式会社 移動体制御装置、移動体制御方法、およびプログラム
JP7406432B2 (ja) 2020-03-31 2023-12-27 本田技研工業株式会社 移動体制御装置、移動体制御方法、およびプログラム
CN113525411A (zh) * 2020-03-31 2021-10-22 本田技研工业株式会社 移动体控制装置、移动体控制方法及存储介质
CN113525410B (zh) * 2020-03-31 2024-04-30 本田技研工业株式会社 移动体控制装置、移动体控制方法及存储介质
CN113525410A (zh) * 2020-03-31 2021-10-22 本田技研工业株式会社 移动体控制装置、移动体控制方法及存储介质
JP7142739B2 (ja) 2020-09-15 2022-09-27 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド 案内経路特定方法及び車両の走行制御方法、装置、機器、記憶媒体およびコンピュータプログラム
JP2022048961A (ja) * 2020-09-15 2022-03-28 北京百度網訊科技有限公司 案内経路特定方法及び車両の走行制御方法、装置、機器、記憶媒体およびコンピュータプログラム
US11724716B2 (en) 2020-09-15 2023-08-15 Beijing Baidu Netcom Science Technology Co., Ltd. Method and apparatus of determining guide path, method and apparatus of controlling driving of vehicle, and electronic device
WO2022123831A1 (ja) * 2020-12-10 2022-06-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理方法、及び、情報処理システム
JP2022129233A (ja) * 2021-02-24 2022-09-05 トヨタ自動車株式会社 遠隔支援システム、遠隔支援方法、及び遠隔支援プログラム
JP7388376B2 (ja) 2021-02-24 2023-11-29 トヨタ自動車株式会社 遠隔支援システム、遠隔支援方法、及び遠隔支援プログラム
JP7425975B2 (ja) 2021-04-23 2024-02-01 トヨタ自動車株式会社 遠隔機能選択装置
WO2022244323A1 (ja) * 2021-05-21 2022-11-24 日立Astemo株式会社 外界認識異常判定システム、車載装置、および、外界認識異常判定方法
JP7298758B2 (ja) 2021-09-28 2023-06-27 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022140524A (ja) * 2021-09-28 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP7298760B2 (ja) 2022-07-20 2023-06-27 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022140528A (ja) * 2022-07-20 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP7298759B2 (ja) 2022-07-20 2023-06-27 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法
JP2022140526A (ja) * 2022-07-20 2022-09-26 トヨタ自動車株式会社 遠隔監視システム、車両制御装置、遠隔監視方法、及び、車両制御方法

Also Published As

Publication number Publication date
JPWO2019077739A1 (ja) 2020-08-13
JP6839770B2 (ja) 2021-03-10
US20210197808A1 (en) 2021-07-01

Similar Documents

Publication Publication Date Title
JP6839770B2 (ja) 移動体制御システム、および、管制装置
US20200307594A1 (en) Vehicle control device, vehicle control method, and storage medium
WO2016104198A1 (ja) 車両制御装置
JP7474314B2 (ja) 車両制御装置、車両制御方法、およびプログラム
US20230150509A1 (en) Vehicle control device, vehicle control method, and storage medium
US11613254B2 (en) Method to monitor control system of autonomous driving vehicle with multiple levels of warning and fail operations
US11312394B2 (en) Vehicle control device
WO2018173403A1 (ja) 車両制御装置及び車両制御方法
JP2019131077A (ja) 車両制御装置、車両制御方法、およびプログラム
WO2019039275A1 (ja) 車両制御装置
JP2019155974A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2019144691A (ja) 車両制御装置
RU2759277C1 (ru) Способ помощи при передвижении и устройство помощи при передвижении
CN112009480A (zh) 驾驶辅助系统
JP6765357B2 (ja) 走行制御装置、走行制御方法およびプログラム
JP6446245B2 (ja) 自動運転制御装置
US11420627B2 (en) Driving assistance device
JP7092955B1 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7220192B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP2020083019A (ja) 車両制御装置、車両制御方法、およびプログラム
JP2023148512A (ja) 車両制御装置、車両制御方法、およびプログラム
JP7425143B1 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7256216B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7201657B2 (ja) 車両制御装置、車両制御方法、およびプログラム
JP7483529B2 (ja) 制御装置、制御方法、およびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17929317

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019549080

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17929317

Country of ref document: EP

Kind code of ref document: A1