WO2018087880A1 - 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム - Google Patents

車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム Download PDF

Info

Publication number
WO2018087880A1
WO2018087880A1 PCT/JP2016/083508 JP2016083508W WO2018087880A1 WO 2018087880 A1 WO2018087880 A1 WO 2018087880A1 JP 2016083508 W JP2016083508 W JP 2016083508W WO 2018087880 A1 WO2018087880 A1 WO 2018087880A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
remote operation
occupant
unit
remote
Prior art date
Application number
PCT/JP2016/083508
Other languages
English (en)
French (fr)
Inventor
和之 金子
昭吾 赤羽
弦太 棒田
Original Assignee
本田技研工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 本田技研工業株式会社 filed Critical 本田技研工業株式会社
Priority to JP2018549712A priority Critical patent/JPWO2018087880A1/ja
Priority to PCT/JP2016/083508 priority patent/WO2018087880A1/ja
Priority to CN201680090384.8A priority patent/CN109891473A/zh
Priority to US16/346,130 priority patent/US20190265710A1/en
Publication of WO2018087880A1 publication Critical patent/WO2018087880A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0055Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements
    • G05D1/0061Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K31/00Vehicle fittings, acting on a single sub-unit only, for automatically controlling vehicle speed, i.e. preventing speed from exceeding an arbitrarily established velocity or maintaining speed at a particular velocity, as selected by the vehicle operator
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/082Selecting or switching between different modes of propelling
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0011Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0011Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement
    • G05D1/0022Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement characterised by the communication link
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0063Manual parameter input, manual setting means, manual initialising or calibrating means
    • B60W2050/0064Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/007Switching between manual and automatic parameter input, and vice versa
    • B60W2050/0071Controller overrides driver automatically
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/408
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/05Type of road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/10Number of lanes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/15Road slope
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/30Road curve radius
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/805Azimuth angle

Definitions

  • the present invention relates to a vehicle control device, a vehicle control system, a vehicle control method, and a vehicle control program.
  • Patent Documents 1 and 2 do not consider switching to manual driving when remote driving is being performed, and the burden on the vehicle occupant when switching from remote driving to manual driving is not considered. It can grow.
  • the present invention has been made in view of such circumstances, and provides a vehicle control device, a vehicle control system, a vehicle control method, and a vehicle control program capable of suppressing a burden on a vehicle occupant.
  • a vehicle control device a vehicle control system, a vehicle control method, and a vehicle control program capable of suppressing a burden on a vehicle occupant.
  • the communication unit that transmits the outside situation acquired by the acquisition unit to the outside facility, and a remote operation control unit that executes a remote operation that causes the vehicle to travel based on control information received from the outside facility ( 160), and when the remote operation control is executed by the remote operation control unit, when the state of the vehicle occupant detected by the detection unit satisfies a predetermined condition, Comprising switching control unit for switching the serial manual operation and (161), and a vehicle control device.
  • the invention according to claim 2 further includes an automatic operation control unit that executes an automatic operation for automatically controlling at least one of acceleration / deceleration or steering of the vehicle, and the remote operation by the remote operation control unit is performed. In the case of ending, when the vehicle occupant state detected by the detection unit does not satisfy a predetermined condition, the automatic operation is performed by the automatic operation control unit.
  • the Invention of Claim 3 is the vehicle control apparatus of Claim 1, Comprising:
  • the said predetermined condition is that the state of the passenger
  • a fourth aspect of the present invention is the vehicle control device according to the third aspect, wherein the detection unit acquires an image obtained by imaging an occupant of the vehicle, and the switching control unit images the occupant of the vehicle. Based on the obtained image, it is determined whether or not the state of the occupant of the vehicle is a state in which the manual operation can be performed.
  • Invention of Claim 5 is the vehicle control apparatus of Claim 3, Comprising: The said detection part acquires the operation state with respect to the said driving operator, The said switching control part is the operation state with respect to the said driving operator. Based on the above, it is determined whether or not the manual operation can be executed based on the operation of the vehicle occupant.
  • a sixth aspect of the present invention is the vehicle control apparatus according to the first aspect, wherein the remote driving is executed by the presenting unit for presenting information and the remote driving control unit. Confirms switching from the remote operation to the manual operation when it is necessary to switch from the remote operation to the manual operation.
  • a notification unit that causes the presenting unit to present information for performing, and an input unit that receives an input operation of an occupant of the vehicle, wherein the switching control unit is configured to switch from the remote operation to the manual operation by the input unit.
  • the Invention of Claim 7 is the vehicle control apparatus of Claim 1, Comprising: The said switching control part sets the timing which switches from the said remote operation to the said manual driving, The presentation part which presents information, The information processing apparatus further includes a notification unit that causes the presentation unit to present a period until the timing arrives.
  • the said switching control part is the information showing the period until the said timing arrives at the said communication part, the said timing. Is transmitted to the facility outside the vehicle.
  • a ninth aspect of the present invention is the vehicle control device according to the first aspect, wherein the remote operation control unit gradually reduces a control amount represented by the control information in a period until the timing arrives. It is.
  • the invention according to claim 10 is a vehicle control system comprising the vehicle control device according to claim 1 and the outside facility.
  • the computer (100) acquires a situation outside the vehicle, transmits the obtained situation outside the vehicle to the outside equipment (300), and receives the vehicle based on the control information received from the outside equipment.
  • the remote operation is performed, the state of the vehicle occupant is detected, and the detected state of the vehicle occupant satisfies a predetermined condition.
  • This is a vehicle control method for executing manual driving for running a vehicle based on an operation received by a driving operator (80) that is operated for manual driving by an occupant of the vehicle from remote driving.
  • the invention according to claim 12 causes the computer (100) to acquire the situation outside the vehicle, causes the obtained situation outside the vehicle to be transmitted to the outside equipment (300), and the vehicle based on the control information received from the outside equipment.
  • the remote operation is performed, the state of the vehicle occupant is detected, and the detected state of the vehicle occupant satisfies a predetermined condition
  • a vehicle control program for executing a manual driving for running a vehicle based on an operation received by a driving operator (80) that is operated for manual driving by an occupant of the vehicle from remote driving.
  • the vehicle when the remote operation is being executed, the vehicle is switched from the remote operation to the manual operation when the state of the vehicle occupant satisfies the predetermined condition. Therefore, the burden on the vehicle occupant can be suppressed.
  • the switching from the remote operation to the manual operation can be performed smoothly, and the burden on the vehicle occupant can be reduced. it can.
  • the information indicating the switching timing or the information indicating the period until the switching timing arrives is transmitted to the facility outside the vehicle, so that the switching from the remote operation to the manual driving can be performed smoothly. And the burden on the vehicle occupant can be reduced.
  • the vehicle occupant since the control amount represented by the control information is gradually reduced in the period until the switching timing arrives, the vehicle occupant is caused to perform the driving operation while switching from the remote driving to the manual driving. be able to.
  • the vehicle control system 1 it is possible to avoid suddenly ending the traveling of the vehicle M based on the control information when the switching timing arrives, and to reduce the burden on the vehicle occupant.
  • FIG. 1 is a conceptual diagram of a vehicle control system 1.
  • FIG. 2 is a diagram illustrating an example of a configuration mounted on a vehicle M.
  • FIG. It is a figure which shows a mode that a target track is produced
  • FIG. It is a figure which shows the structure of the remote control apparatus 320 typically.
  • FIG. 7 is a flowchart illustrating an example of a flow of switching processing from remote operation to manual operation. It is a figure which shows an example of the screen which requests
  • FIG. 1 is a conceptual diagram of the vehicle control system 1.
  • the vehicle control system 1 is realized by communicating a plurality of vehicles M-1 to Mn (n is an arbitrary natural number) and the remote operation management facility 300 via a network NW.
  • NW a network
  • the vehicle M is, for example, a vehicle such as a two-wheel, three-wheel, or four-wheel vehicle, and a drive source thereof is an internal combustion engine such as a diesel engine or a gasoline engine, an electric motor, or a combination thereof.
  • the electric motor operates using electric power generated by a generator connected to the internal combustion engine or electric discharge power of a secondary battery or a fuel cell.
  • the vehicle M is a vehicle capable of executing automatic driving for automatically controlling at least one of acceleration / deceleration and steering.
  • the network NW includes a base station, which is a wireless communication interface, a WAN (Wide Area Network), a LAN (Local Area Network), the Internet, a dedicated line, and the like.
  • a remote operation request is transmitted from the vehicle M to the remote operation management facility 300 or from one vehicle M to another vehicle M, and the remote operation of the vehicle M is executed accordingly.
  • FIG. 2 is a diagram illustrating an example of a configuration mounted on the vehicle M.
  • the vehicle M includes, for example, a camera 10, a radar device 12, a finder 14, an object recognition device 16, a communication device 20, an HMI (Human Machine Interface) 30, a navigation device 50, and an MPU (Micro-Processing).
  • Unit 60 a vehicle sensor 70, a driving operator 80, a vehicle interior camera 90, an automatic driving control unit 100, a traveling driving force output device 200, a brake device 210, and a steering device 220 are mounted. .
  • a multiple communication line such as a CAN (Controller Area Network) communication line, a serial communication line, a wireless communication network, or the like.
  • a multiple communication line such as a CAN (Controller Area Network) communication line, a serial communication line, a wireless communication network, or the like.
  • CAN Controller Area Network
  • serial communication line a serial communication line
  • wireless communication network a wireless communication network
  • FIG. 5 includes at least the camera 10, the communication device 20, the driving operator 80, the first control unit 120, the second control unit 140, and the remote operation control unit 160. It is an example.
  • the camera 10 is a digital camera using a solid-state imaging device such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor).
  • a solid-state imaging device such as a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor).
  • One or a plurality of cameras 10 are attached to any part of the vehicle M.
  • the camera 10 is attached to the upper part of the front windshield, the rear surface of the rearview mirror, or the like.
  • the camera 10 periodically and repeatedly images the periphery of the vehicle M.
  • the camera 10 may be a stereo camera.
  • the radar apparatus 12 radiates a radio wave such as a millimeter wave around the vehicle M and detects a radio wave (reflected wave) reflected by the object to detect at least the position (distance and azimuth) of the object.
  • a radio wave such as a millimeter wave around the vehicle M
  • a radio wave reflected wave
  • One or a plurality of radar devices 12 are attached to any part of the vehicle M.
  • the radar apparatus 12 may detect the position and velocity of the object by FM-CW (Frequency Modulated Continuous Wave) method.
  • FM-CW Frequency Modulated Continuous Wave
  • the finder 14 is a LIDAR (Light Detection and Ranging or Laser Imaging Detection and Ranging) that measures the scattered light with respect to the irradiated light and detects the distance to the target.
  • LIDAR Light Detection and Ranging or Laser Imaging Detection and Ranging
  • One or a plurality of finders 14 are attached to any part of the vehicle M.
  • the object recognition device 16 performs sensor fusion processing on the detection results of some or all of the camera 10, the radar device 12, and the finder 14 to recognize the position, type, speed, and the like of the object.
  • the object recognition device 16 outputs the recognition result to the automatic driving control unit 100.
  • the communication device 20 communicates with other vehicles around the vehicle M by using, for example, a cellular network, a Wi-Fi network, Bluetooth (registered trademark), DSRC (Dedicated Short Range Communication), or a wireless base station. It communicates with an external device such as the remote operation management facility 300 via the station.
  • a cellular network for example, a Wi-Fi network, Bluetooth (registered trademark), DSRC (Dedicated Short Range Communication), or a wireless base station. It communicates with an external device such as the remote operation management facility 300 via the station.
  • the HMI 30 includes a display unit 31 that presents various information to the occupant of the vehicle M, and an input unit 32 that receives an input operation by the occupant.
  • the HMI 30 includes various display devices, speakers, buzzers, touch panels, switches, keys, and the like.
  • the navigation device 50 includes, for example, a GNSS (Global Navigation Satellite System) receiver 51, a navigation HMI 52, and a route determination unit 53.
  • the first map information 54 is stored in a storage device such as an HDD (Hard Disk Drive) or a flash memory. Holding.
  • the GNSS receiver specifies the position of the vehicle M based on the signal received from the GNSS satellite. The position of the vehicle M may be specified or supplemented by INS (Inertial Navigation System) using the output of the vehicle sensor 70.
  • the navigation HMI 52 includes a display device, a speaker, a touch panel, keys, and the like. The navigation HMI 52 may be partly or wholly shared with the HMI 30 described above.
  • the route determination unit 53 determines a route from the position of the vehicle M specified by the GNSS receiver 51 (or any input position) to the destination input by the occupant using the navigation HMI 52. This is determined with reference to the map information 54.
  • the first map information 54 is information in which a road shape is expressed by, for example, a link indicating a road and nodes connected by the link.
  • the first map information 54 may include road curvature, POI (Point Of Interest) information, and the like.
  • the route determined by the route determination unit 53 is output to the MPU 60. Further, the navigation device 50 may perform route guidance using the navigation HMI 52 based on the route determined by the route determination unit 53.
  • the navigation apparatus 50 may be implement
  • the MPU 60 functions as, for example, the recommended lane determining unit 61 and holds the second map information 62 in a storage device such as an HDD or a flash memory.
  • the recommended lane determining unit 61 divides the route provided from the navigation device 50 into a plurality of blocks (for example, every 100 [m] with respect to the vehicle traveling direction), and refers to the second map information 62 for each block. Determine the recommended lane.
  • the recommended lane determining unit 61 performs determination such as what number of lanes from the left to travel.
  • the recommended lane determining unit 61 determines a recommended lane so that the vehicle M can travel on a reasonable route for proceeding to the branch destination when there is a branching point or a joining point in the route.
  • the second map information 62 is map information with higher accuracy than the first map information 54.
  • the second map information 62 includes, for example, information on the center of the lane or information on the boundary of the lane.
  • the second map information 62 may include road information, traffic regulation information, address information (address / postal code), facility information, telephone number information, and the like.
  • Road information includes information indicating the type of road such as expressway, toll road, national road, prefectural road, road lane number, width of each lane, road gradient, road position (longitude, latitude, height). Information including 3D coordinates), curvature of lane curves, lane merging and branch point positions, signs provided on roads, and the like.
  • the second map information 62 may be updated at any time by accessing another device using the communication device 20.
  • the vehicle sensor 70 includes a vehicle speed sensor that detects the speed of the vehicle M, an acceleration sensor that detects acceleration, a yaw rate sensor that detects angular velocity around the vertical axis, a direction sensor that detects the direction of the vehicle M, and the like.
  • the driving operator 80 includes, for example, an accelerator pedal, a brake pedal, a shift lever, a steering wheel, and other operators.
  • a sensor that detects the amount of operation or the presence or absence of an operation is attached to the driving operator 80, and the detection result is the automatic driving control unit 100, or the traveling driving force output device 200, the brake device 210, and the steering device. 220 is output to one or both of 220.
  • the driving operator 80 is provided with a touch sensor that detects the presence or absence of contact with the driving operator 80 in addition to the sensor that detects the presence or absence of the operation.
  • the touch sensor is, for example, a sensor built in a grip portion of the steering wheel. The touch sensor detects that an occupant's hand of the vehicle M has touched the steering wheel, and outputs the detection result to the automatic driving control unit 100.
  • the vehicle interior camera 90 images the upper body around the face of the occupant seated in the driver's seat. A captured image of the vehicle interior camera 90 is output to the automatic driving control unit 100.
  • the automatic operation control unit 100 includes, for example, a first control unit 120, a second control unit 140, and a remote operation control unit 160.
  • the first control unit 120, the second control unit 140, and the remote operation control unit 160 are each realized by a program (software) executed by a processor such as a CPU (Central Processing Unit).
  • a processor such as a CPU (Central Processing Unit).
  • some or all of the functional units of the first control unit 120, the second control unit 140, and the remote operation control unit 160 described below are LSI (Large Scale Integration) or ASIC (Application Specific Specific Integrated Circuit). It may be realized by hardware such as FPGA (Field-Programmable Gate Array) or may be realized by cooperation of software and hardware.
  • the 1st control part 120 is provided with the external world recognition part 121, the own vehicle position recognition part 122, and the action plan production
  • the external environment recognition unit 121 recognizes the position, speed, acceleration, and the like of surrounding vehicles based on information input from the camera 10, the radar 12, and the finder 14 via the object recognition device 16.
  • the position of the surrounding vehicle may be represented by a representative point such as the center of gravity or corner of the surrounding vehicle, or may be represented by an area expressed by the outline of the surrounding vehicle.
  • the “state” of the surrounding vehicle may include acceleration and jerk of the surrounding vehicle, or “behavioral state” (for example, whether or not the lane is changed or is about to be changed).
  • the external environment recognition unit 121 may recognize the positions of guardrails, utility poles, parked vehicles, pedestrians, and other objects.
  • the own vehicle position recognition unit 122 recognizes, for example, the lane (traveling lane) in which the vehicle M is traveling, and the relative position and posture of the vehicle M with respect to the traveling lane.
  • the own vehicle position recognition unit 122 for example, a road around the vehicle M recognized from a pattern of road marking lines (for example, an array of solid lines and broken lines) obtained from the second map information 62 and an image captured by the camera 10.
  • the travel lane is recognized by comparing the lane marking pattern. In this recognition, the position of the vehicle M acquired from the navigation device 50 and the processing result by INS may be taken into consideration.
  • the action plan generation unit 123 determines events to be sequentially executed in the automatic driving so that the recommended lane determination unit 61 determines the recommended lane and travels along the recommended lane, and can cope with the surrounding situation of the vehicle M.
  • Events include, for example, a constant speed event that travels in the same lane at a constant speed, a follow-up event that follows the preceding vehicle, a lane change event, a merge event, a branch event, an emergency stop event, and automatic driving There are handover events to switch to manual operation. Further, during execution of these events, actions for avoidance may be planned based on the surrounding situation of the vehicle M (the presence of surrounding vehicles and pedestrians, lane narrowing due to road construction, etc.).
  • the action plan generator 123 generates a target trajectory on which the vehicle M will travel in the future.
  • the target trajectory includes, for example, a velocity element.
  • the target trajectory is generated as a set of target points (orbit points) that should be set at a plurality of future reference times for each predetermined sampling time (for example, about 0 comma [sec]) and reach these reference times. The For this reason, when the space
  • FIG. 3 is a diagram illustrating a state in which a target track is generated based on the recommended lane.
  • the recommended lane is set so as to be convenient for traveling along the route to the destination.
  • the action plan generation unit 123 activates a lane change event, a branch event, a merge event, or the like when a predetermined distance before the recommended lane switching point (may be determined according to the type of event) is reached. If it becomes necessary to avoid an obstacle during the execution of each event, an avoidance trajectory is generated as shown in the figure.
  • the action plan generation unit 123 generates, for example, a plurality of target trajectory candidates, and selects an optimal target trajectory at that time based on the viewpoints of safety and efficiency.
  • the second control unit 140 includes a travel control unit 141.
  • the traveling control unit 141 controls the traveling driving force output device 200, the brake device 210, and the steering device 220 so that the vehicle M passes the target trajectory generated by the action plan generating unit 123 at a scheduled time. .
  • the remote operation control unit 160 transmits a remote operation request using the communication device 20, and automatically controls at least one of acceleration / deceleration or steering of the vehicle M based on the control information received from the remote operation management facility 300. Perform remote operation.
  • the remote operation control unit 160 includes a switching control unit 161 and a notification unit 162.
  • the switching control unit 161 executes control to end the remote operation and switch to the manual operation from the state where the remote operation is being executed.
  • the switching control part 161 performs control which starts a to-be-remote operation from the state which is performing manual operation.
  • the switching control unit 161 may execute control to start remote operation from the state in which automatic operation is being executed, and automatically terminates remote operation from the state in which remote operation is being executed. You may start driving.
  • the notification unit 162 uses the display unit 31 to present an image indicating whether the remote operation is being performed or the manual operation is being performed. In addition, the notification unit 162 presents an image for confirming switching from remote operation to manual operation.
  • the driving force output device 200 outputs a driving force (torque) for driving the vehicle to driving wheels.
  • the travel driving force output device 200 includes, for example, a combination of an internal combustion engine, an electric motor, a transmission, and the like, and an ECU that controls these.
  • the ECU controls the above configuration according to information input from the automatic operation control unit 100 or information input from the driving operator 80.
  • the brake device 210 includes, for example, a brake caliper, a cylinder that transmits hydraulic pressure to the brake caliper, an electric motor that generates hydraulic pressure in the cylinder, and a brake ECU.
  • the brake ECU controls the electric motor in accordance with information input from the automatic driving control unit 100 or information input from the driving operator 80 so that brake torque corresponding to the braking operation is output to each wheel.
  • the brake device 210 may include, as a backup, a mechanism that transmits the hydraulic pressure generated by operating the brake pedal included in the driving operation element 80 to the cylinder via the master cylinder.
  • the brake device 210 is not limited to the configuration described above, and may be an electronically controlled hydraulic brake device that controls the actuator according to information input from the travel control unit 141 and transmits the hydraulic pressure of the master cylinder to the cylinder. Good.
  • the steering device 220 includes, for example, a steering ECU and an electric motor.
  • the electric motor changes the direction of the steered wheels by applying a force to a rack and pinion mechanism.
  • the steering ECU drives the electric motor according to the information input from the automatic driving control unit 100 or the information input from the driving operator 80, and changes the direction of the steered wheels.
  • FIG. 4 is a diagram showing a device configuration in the remote operation management facility 300.
  • the remote operation management facility 300 includes an overall control device 310 that communicates with a vehicle M (remotely operated vehicle) via a network NW, and a plurality of remote operation devices 320-1, 320-2, 320-. 3, ... are provided.
  • the remote control device is not distinguished, it is simply expressed as the remote control device 320.
  • each remote control device 320 a remote operator is sitting and waiting in preparation for a remote control request.
  • the overall control device 310 transmits the information received from the vehicle M to the remote operation device 320 and causes the remote operator to perform the remote operation.
  • the information received from the vehicle M is information representing a vehicle situation such as an image, sound, speed, angular velocity, and vehicle type acquired by a device such as a camera mounted on the vehicle M.
  • the overall control device 310 generates control information based on the driving operation received by any one of the remote operation devices 320 and transmits the generated control information to the vehicle M.
  • the overall control device 310 of the remote operation management facility 300 refers to the remote operator list 312, selects a remote operator that matches the information received from the vehicle M, and operates the selected remote operator 320. To perform remote operation.
  • FIG. 5 is a diagram illustrating an example of the contents of the remote operator list 312.
  • the remote operator list 312 for example, in association with the remote operator ID that is identification information of the remote operator, the years of experience in remote operation, the latest evaluation of remote operation, the overall skill that comprehensively evaluated them, Information such as a flag indicating whether or not the remote operation is being executed is stored.
  • the overall control device 310 selects one of the remote operators who are not performing the remote operation based on the evaluation and the overall skill.
  • the overall control device 310 transmits the information received from the vehicle M to the remote operation device 320 operated by the selected remote operator, and transmits the control information received from the remote operation device 320 to the vehicle M. Thereby, the overall control device 310 and the remote operation device 320 execute remote operation.
  • the overall control device 310 generates control information for executing remote operation, and transmits the generated control information to the vehicle M when a predetermined condition is satisfied.
  • the overall control apparatus 310 refers to the remote operator list 312 and selects one of the plurality of remote operators registered in the remote operator list 312.
  • the overall control device 310 transmits control information generated by the remote operation device 320 operated by the selected remote operator to the vehicle M.
  • FIG. 6 is a diagram schematically showing the configuration of the remote control device 320.
  • the remote operation device 320 includes, for example, a display unit 321, a speaker 322, a seat 323, a steering wheel 324, pedals 325 such as an accelerator pedal and a brake pedal, and a remote operation control unit 330.
  • the display unit 321 displays an image captured by the camera of the vehicle M, the speed of the vehicle M, the engine speed, and the like.
  • the display unit 321 may be an HMD (HeadHeMount Display).
  • the speaker 322 emits a warning sound according to the approach of the obstacle recognized by the object recognition device 16 of the vehicle M to the vehicle M.
  • a remote operator O is seated on the seat 323.
  • the remote operator O performs a driving operation on driving operators such as the steering wheel 324 and the pedals 325. The operation amounts for these are detected by a sensor (not shown) and output to the remote operation control unit 330.
  • the driving operation element may be a driving operation element of another aspect such as a joystick.
  • the remote operation control unit 330 generates control information to be transmitted to the vehicle M based on the operation amount input from the driving operator.
  • the remote operation control unit 330 transmits the generated control information to the overall control device 310.
  • the overall control device 310 transmits the control information generated by the selected remote operation device 320 among the plurality of control information generated by the plurality of remote operation devices 320 to the vehicle M.
  • the driving operator is provided with a reaction force output device for applying a reaction force to be generated depending on the operation amount. In order to accurately determine the reaction force, information such as speed and angular velocity is preferably supplied from the vehicle M to the remote control device 320.
  • the control information transmitted to the vehicle M may be the operation amount itself with respect to the steering wheel 324 and the pedals 325, or is calculated based on the operation amount changed based on the vehicle speed and the turning angle of the vehicle M at that time. Or a control amount (for example, throttle opening, brake torque, output torque of the assist motor of the steering device 220, etc.) to be given to the travel driving force output device 200, the brake device 210, or the steering device 220.
  • a control amount for example, throttle opening, brake torque, output torque of the assist motor of the steering device 220, etc.
  • FIG. 7 is a flowchart illustrating an example of a flow of switching processing from remote operation to manual operation.
  • the automatic operation control unit 100 executes the remote operation by the remote operation control unit 160 (step S100).
  • the switching control unit 161 determines whether to switch to manual operation, for example, every predetermined period during execution of the remote operation (step S102). For example, when the communication state between the communication device 20 and the remote operation management facility 300 is interrupted, the switching control unit 161 causes the control information not being transmitted from the remote operation management facility 300 to exceed a predetermined period. It is determined to switch to manual operation.
  • the switching control unit 161 detects the state of the occupant of the vehicle M (step S104). For example, the switching control unit 161 detects the state of the occupant of the vehicle M such as the seating position of the occupant of the vehicle M and the posture of the occupant of the vehicle M based on the image captured by the vehicle interior camera 90. In addition, the switching control unit 161 acquires, for example, an operation state with respect to the driving operation element 80, and based on an operation state such as whether or not the occupant's hand of the vehicle M is gripping the steering wheel, the occupant of the vehicle M Detect state.
  • the switching control unit 161 determines whether the occupant state of the vehicle M detected in step S104 satisfies a predetermined condition (step S106).
  • the predetermined condition is a state in which manual operation is possible based on an operation of a passenger of the vehicle M.
  • the switching control unit 161 requests the occupant of the vehicle M to perform a manual operation (Step S108).
  • the notification unit 162 uses the display unit 31 to present an image requesting preparation for starting manual operation.
  • FIG. 8 is a diagram illustrating an example of a screen requesting to prepare for starting manual operation. This screen includes a message indicating that remote operation is being executed, a message for prompting preparation for starting manual operation, a button for accepting a confirmation operation, and the like.
  • the switching control unit 161 On the basis of the image captured by the vehicle interior camera 90, the switching control unit 161 is such that an occupant of the vehicle M is seated in the driver's seat and the occupant posture of the vehicle M is such as a steering wheel, an accelerator pedal, and a brake pedal.
  • the driving operator 80 When the driving operator 80 is in an operable posture, it is determined that a predetermined condition is satisfied. Further, the switching control unit 161 determines that the predetermined condition is satisfied when the hand of the passenger of the vehicle M holds the steering wheel and the accelerator pedal or the brake pedal can be operated.
  • the notification unit 162 presents a switching confirmation screen using the HMI 30 (step S110).
  • FIG. 9 is a diagram illustrating an example of the switching confirmation screen.
  • the switching confirmation screen includes a message indicating that the remote operation is being executed, a message confirming that the manual operation is started, a button for accepting a confirmation operation, and the like.
  • the switching control unit 161 determines whether or not a confirmation operation for starting a manual operation has been accepted (step S112), and when the confirmation operation is accepted, sets a switching timing from the remote operation to the manual operation (step S114). . That is, the switching control unit 161 determines that the state of the occupant of the vehicle M satisfies the predetermined condition when receiving an operation for confirming switching from the remote operation to the manual operation. For example, the switching control unit 161 sets the timing after a predetermined period from the time when the confirmation operation is received as the switching timing. The predetermined period is, for example, several minutes. When the switching control unit 161 does not accept the confirmation operation, the switching control unit 161 continues to present the switching confirmation screen.
  • the notification unit 162 notifies the occupant and the remote operator of the vehicle M of the remaining time until the switching timing (step S116).
  • FIG. 10 is a diagram illustrating an example of a screen for notifying the passenger of the vehicle M of the remaining time until the switching timing. This screen includes a message indicating that the remote operation is being executed, a message prompting to start the manual operation, a message indicating the remaining time until the end of the remote operation, and the like.
  • FIG. 11 is a diagram illustrating an example of a screen for notifying the remote operator of the remaining time until the switching timing.
  • This screen includes a front image, a right side image, a left side image, and a rear image transmitted from the vehicle M to the remote operation management facility 300, a message indicating the remaining time until the end of the remote operation, and the like.
  • the notification unit 162 displays a message indicating the remaining time until the end of the remote operation by transmitting the information indicating the switching timing or the information indicating the period until the switching timing arrives to the remote operation management facility 300.
  • the switching control unit 161 may notify the remaining time until the switching timing by voice.
  • the switching control unit 161 changes the control information transmitted to the remote operation management facility 300 (step S118). Dividing the control information corresponds to gradually reducing the operation amount or the control amount represented by the control information in the period until the switching timing comes.
  • FIG. 12 is a diagram illustrating an example of a temporal change in the ratio of the control amount based on the manual operation to the control amount based on the remote operation.
  • the switching control unit 161 linearly increases the ratio of the control amount based on the manual operation to the control amount based on the remote operation in the period until the time tch corresponding to the switching timing.
  • FIG. 13 is a flowchart illustrating an example of a flow of processing for terminating execution of remote operation and starting automatic operation or manual execution. In this flowchart, the same processes as those in FIG. 7 are denoted by the same reference numerals, and detailed description thereof is omitted.
  • the vehicle M determines whether or not to end the execution of the remote operation, for example, every predetermined period during the remote operation in which the remote operation is being executed (step S200). For example, when the communication state between the communication device 20 and the remote operation management facility 300 is interrupted, the switching control unit 161 causes the control information not being transmitted from the remote operation management facility 300 to exceed a predetermined period. Then, it is determined that the execution of the remote operation is finished.
  • the switching control unit 161 determines whether or not the state of the occupant of the vehicle M detected in step S104 satisfies a predetermined condition (step S106). When the predetermined condition is satisfied, the switching control unit 161 proceeds to the process after step S110 and starts executing the manual operation. When the predetermined condition is not satisfied, the switching control unit 161 requests the first control unit 120 to start executing automatic driving. Thereby, the 1st control part 120 starts automatic operation (Step S200).
  • FIG. 14 is a diagram conceptually illustrating a state in which a remote operation is performed by a vehicle occupant.
  • a vehicle M-1 is a vehicle that is executing the remote operation described above.
  • the driving operator is in a free state, and the driving operator that is originally used for driving the vehicle is a remote-operating driving operator. It can be used as a vehicle.
  • the remote operation management facility 300 may be interposed between the vehicles M-1 and M-2. That is, the remote operation request may be first transmitted to the remote operation management facility 300 and transferred to the vehicle M during automatic driving by the remote operation management facility 300.
  • FIG. 15 is a diagram illustrating an example of a configuration mounted on a vehicle M that performs remote operation.
  • the automatic driving control unit 100 mounted on the vehicle M that performs remote operation may have the same function as the automatic driving control unit 100 described above.
  • the vehicle M that performs remote operation is mounted with a HUD 40 and a remote operation control unit 180.
  • the remote operation control unit 180 causes the HUD 40 to display an image captured by the camera 10 of the vehicle M that is to be remotely operated, and based on the operation amount input from the driving operator 80 that is in a free state. Control information to be transmitted to the vehicle M performing the remote operation is generated.
  • the vehicle M performing the remote operation and the vehicle M performing the remote operation have been described separately, the vehicle M may be configured as having both of these functions. That is, the vehicle M may be capable of performing a remote operation when it is necessary to perform a remote operation and performing a remote operation in response to a request from another vehicle during the automatic operation.
  • the vehicle control system 1 since the remote operation is switched to the manual operation when the state of the occupant of the vehicle M satisfies the predetermined condition when the remote operation is being executed, the occupant of the vehicle M The burden can be suppressed.
  • the automatic operation control unit 100 executes the automatic operation, so that the burden on the occupant of the vehicle M can be further suppressed. .
  • the vehicle control system 1 since it is determined that the manual operation is possible based on the operation of the occupant of the vehicle M and the remote operation is switched to the manual operation, the vehicle control system 1 is in a state where the manual operation is difficult. Switching from remote operation to manual operation can be suppressed, and the burden on the passenger of vehicle M can be reduced.
  • the vehicle control system 1 it is necessary to present an image indicating that the vehicle M is performing the remote operation and to switch from the remote operation to the manual operation when the remote operation is being performed.
  • the state of the occupant of vehicle M is predetermined. Since it determines with satisfy
  • the switching from the remote operation to the manual operation can be performed smoothly, and the burden on the vehicle occupant can be reduced. it can.
  • the information indicating the switching timing or the information indicating the period until the switching timing arrives is transmitted to the remote operation management equipment 300, so that the switching from the remote operation to the manual operation is smoothly performed.
  • the burden on the passenger of the vehicle M can be reduced.
  • the control amount represented by the control information is gradually reduced in the period until the switching timing arrives, so that the driving operation on the driving operator 80 is performed in the middle of switching from the remote operation to the manual operation. Can be made.
  • the vehicle control system 1 it is possible to avoid suddenly ending the traveling of the vehicle M based on the control information when the switching timing arrives, and to reduce the burden on the passenger of the vehicle M. .
  • Vehicle control system 30 HMI 31 ... Display part 32 ... Input part 40 ... HUD 60 MPU 61.
  • Recommended lane determination unit 70 Vehicle sensor 100 Automatic driving control unit 120 First control unit 140 Second control unit 160 Remotely controlled unit 161 Switching control unit 162 Notification unit 180 Remote control unit 300 ⁇ Remote operation management equipment 310 ⁇ General control device 312 ⁇ Remote operator list 320 ⁇ Remote operation device 322 ⁇ Speaker 323 ⁇ Seat 324 ⁇ Steering wheel 325 ⁇ Pedals 330 ⁇ Remote operation control unit

Abstract

車両制御装置は、車外の状況を取得する取得部と、車両の乗員により手動運転のための操作がなされる運転操作子と、車両の乗員の状態を検出する検出部と、運転操作子により受け付けた操作に基づいて車両を走行させる手動運転を実行する手動運転制御部と、車外設備と通信する通信部であって、取得部により取得された車外の状況を車外設備に送信する通信部と、車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行する被遠隔運転制御部と、被遠隔運転制御部により被遠隔運転を実行している場合において、検出部により検出された車両の乗員の状態が所定条件を満たす場合に、被遠隔運転から手動運転に切り替える切替制御部と、を備える。

Description

車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
 本発明は、車両制御装置、車両制御システム、車両制御方法、および車両制御プログラムに関する。
 近年、加減速や操舵を自動的に行う自動運転について研究が進められている。これに関連し、自律志向型の自動運転を実行不可であると判断した場合に、車両が外部機器と通信し、遠隔操作による他律志向型の自動運転を実行する技術が開示されている(特許文献1参照)。また、車両の走行状態を各種のセンサにて検出し、検出信号を、通信機などを通じて制御センターに送り、遠隔操作者が車両を遠隔操作し、遠隔操作を行うための指令信号を車載遠隔制御装置に送ることで、遠隔操作を実行する技術が開示されている(特許文献2参照)。
国際公開第2016/038931号 特開2004-295360号公報
 しかしながら、特許文献1および2に開示された技術は、遠隔運転を実行している場合において手動運転に切り替わることは考慮されていなく、遠隔運転から手動運転に切り替わった場合に車両の乗員の負担が大きくなる可能性がある。
 本発明は、このような事情を考慮してなされたものであり、車両の乗員の負担を抑制することができる車両制御装置、車両制御システム、車両制御方法、および車両制御プログラムを提供することを目的の一つとする。
 請求項1記載の発明は、車外の状況を取得する取得部(10)と、車両の乗員により手動運転のための操作がなされる運転操作子(80)と、前記車両の乗員の状態を検出する検出部(90)と、前記運転操作子により受け付けた操作に基づいて車両を走行させる手動運転を実行する手動運転制御部(140)と、車外設備と通信する通信部(20)であって、前記取得部により取得された前記車外の状況を車外設備に送信する前記通信部と、前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行する被遠隔運転制御部(160)と、前記被遠隔運転制御部により前記被遠隔運転を実行している場合において、前記検出部により検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から前記手動運転に切り替える切替制御部(161)と、を備える、車両制御装置である。
 請求項2記載の発明は、前記車両の加減速または操舵のうち少なくとも一方を自動的に制御する自動運転を実行する自動運転制御部を更に備え、前記被遠隔運転制御部による前記被遠隔運転が終了する場合において、前記検出部により検出された前記車両の乗員の状態が所定条件を満たさない場合、前記自動運転制御部により前記自動運転が実行される。
 請求項3記載の発明は、請求項1に記載の車両制御装置であって、前記所定条件は、前記車両の乗員の状態が、前記手動運転を実行可能な状態であることである。
 請求項4記載の発明は、請求項3に記載の車両制御装置であって、前記検出部は、前記車両の乗員を撮像した画像を取得し、前記切替制御部は、前記車両の乗員を撮像した画像に基づいて、前記車両の乗員の状態が、前記手動運転を実行可能な状態であるか否かを判定する、ものである。
 請求項5記載の発明は、請求項3に記載の車両制御装置であって、前記検出部は、前記運転操作子に対する操作状態を取得し、前記切替制御部は、前記運転操作子に対する操作状態に基づいて、前記車両の乗員の操作に基づいて前記手動運転の実行が可能な状態であるか否かを判定する、ものである。
 請求項6記載の発明は、請求項1に記載の車両制御装置であって、情報を提示する提示部と、前記被遠隔運転制御部により前記被遠隔運転を実行している場合において、前記車両が被遠隔運転を実行していることを表す情報を前記提示部に提示させ、前記被遠隔運転から前記手動運転に切り替える必要がある場合に、前記被遠隔運転から前記手動運転に切り替えることを確認するための情報を前記提示部に提示させる通知部と、前記車両の乗員の入力操作を受け付ける入力部と、を更に備え、前記切替制御部は、前記入力部により前記被遠隔運転から手動運転に切り替えることを確認する操作を受け付けた場合に、前記車両の乗員の状態が所定条件を満たすと判定する、ものである。
 請求項7記載の発明は、請求項1に記載の車両制御装置であって、前記切替制御部は、前記被遠隔運転から前記手動運転に切り替えるタイミングを設定し、情報を提示する提示部と、前記タイミングが到来するまでの期間を前記提示部に提示させる通知部を更に備える、ものである。
 請求項8記載の発明は、請求項7に記載の車両制御装置であって、前記切替制御部は、前記通信部に、前記タイミングを表す情報、または前記タイミングが到来するまでの期間を表す情報を前記車外設備に送信させる、ものである。
 請求項9記載の発明は、請求項1に記載の車両制御装置であって、前記被遠隔運転制御部は、前記タイミングが到来するまでの期間において次第に前記制御情報が表す制御量を減らす、ものである。
 請求項10記載の発明は、請求項1記載の車両制御装置と、前記車外設備と、を備える車両制御システム、である。
 請求項11記載の発明は、コンピュータ(100)が、車外の状況を取得し、取得された前記車外の状況を車外設備(300)に送信し、前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行し、前記被遠隔運転を実行している場合において、前記車両の乗員の状態を検出し、検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から、前記車両の乗員により手動運転のための操作がなされる運転操作子(80)により受け付けた操作に基づいて車両を走行させる手動運転を実行する、車両制御方法である。
 請求項12記載の発明は、コンピュータ(100)に、車外の状況を取得させ、取得された前記車外の状況を車外設備(300)に送信させ、前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行させ、前記被遠隔運転を実行している場合において、前記車両の乗員の状態を検出させ、検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から、前記車両の乗員により手動運転のための操作がなされる運転操作子(80)により受け付けた操作に基づいて車両を走行させる手動運転を実行させる、車両制御プログラムである。
 請求項1、2、19、11、および12記載の発明によれば、被遠隔運転を実行している場合において、車両の乗員の状態が所定条件を満たす場合に被遠隔運転から手動運転に切り替えるので、車両の乗員の負担を抑制することができる。
 請求項3-5記載の発明によれば、車両の乗員の操作に基づいて手動運転が可能な状態であることを判定して被遠隔運転から手動運転に切り替えるので、手動運転が困難な状態において被遠隔運転から手動運転に切り替わることを抑制することができ、車両の乗員の負担を軽減することができる。
 請求項6記載の発明によれば、車両の乗員が被遠隔運転から手動運転に切り替えることを確認することができる。
 請求項7記載の発明によれば、切替タイミングが到来するまでの期間を提示するので、被遠隔運転から手動運転への切替をスムーズに行うことができ、車両の乗員の負担を軽減することができる。
 請求項8記載の発明によれば、切替タイミングを表す情報、または切替タイミングが到来するまでの期間を表す情報を車外設備に送信するので、被遠隔運転から手動運転への切替をスムーズに行うことができ、車両の乗員の負担を軽減することができる。
 請求項9記載の発明によれば、切替タイミングが到来するまでの期間において次第に制御情報が表す制御量を減らすので、被遠隔運転から手動運転に切り替えられる途中において車両の乗員に運転操作を行わせることができる。これにより、車両制御システム1によれば、切替タイミングの到来時に、急に制御情報に基づく車両Mの走行が終了することを回避することができ、車両の乗員の負担を軽減することができる。
車両制御システム1の概念図である。 車両Mに搭載される構成の一例を示す図である。 推奨車線に基づいて目標軌道が生成される様子を示す図である。 遠隔操作管理設備300における装置構成を示す図である。 遠隔操作者一覧312の内容の一例を示す図である。 遠隔操作装置320の構成を模式的に示す図である。 図7は、被遠隔運転から手動運転への切替処理の流れの一例を示すフローチャートである。 手動運転を開始する準備をすることを要求する画面の一例を示す図である。 切替確認画面の一例を示す図である。 車両Mの乗員に切替タイミングまでの残り時間を通知する画面の一例を示す図である。 遠隔操作者に切替タイミングまでの残り時間を通知する画面の一例を示す図である。 遠隔運転に基づく制御量に対する手動運転に基づく制御量の割合の時間的な変化の一例を示す図である。 遠隔運転の実行を終了して、自動運転または手動の実行を開始する処理の流れの一例を示すフローチャートである。 車両の乗員によって遠隔操作が実行される様子を概念的に示す図である。 遠隔操作を行う車両Mに搭載される構成の一例を示す図である。
 以下、図面を参照し、本発明の遠隔運転制御装置、車両制御システム、遠隔運転制御方法、および遠隔運転制御プログラムの実施形態について説明する。
 <第1実施形態>
 [システム構成]
 図1は、車両制御システム1の概念図である。車両制御システム1は、複数の車両M-1~M-n(nは任意の自然数)と、遠隔操作管理設備300とがネットワークNWを介して通信することで実現される。以下、車両を区別しないときは車両Mと称する。車両Mは、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジンなどの内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。また、車両Mは、加減速または操舵の少なくとも一方を自動的に制御する自動運転を実行可能な車両である。ネットワークNWは、無線通信のインターフェースである基地局、WAN(Wide Area Network)、LAN(Local Area Network)、インターネット、専用回線などを含む。
 車両制御システム1では、車両Mから遠隔運転管理設備300に、或いはある車両Mから他の車両Mに対して遠隔操作リクエストが送信され、それに応じて車両Mの遠隔操作が実行される。
 [車両構成]
 つぎに、車両Mに搭載される構成について説明する。図2は、車両Mに搭載される構成の一例を示す図である。車両Mには、例えば、カメラ10と、レーダ装置12と、ファインダ14と、物体認識装置16と、通信装置20と、HMI(Human Machine Interface)30と、ナビゲーション装置50と、MPU(Micro-Processing Unit)60と、車両センサ70と、運転操作子80と、車室内カメラ90と、自動運転制御ユニット100と、走行駆動力出力装置200と、ブレーキ装置210と、ステアリング装置220とが搭載される。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図5に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。図5に示す構成のうち、カメラ10、通信装置20、運転操作子80、第1制御部120、第2制御部140、および被遠隔運転制御部160を少なくとも含むものが、「車両制御装置」の一例である。
 カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両Mの任意の箇所に一つまたは複数が取り付けられる。前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、周期的に繰り返し車両Mの周辺を撮像する。カメラ10は、ステレオカメラであってもよい。
 レーダ装置12は、車両Mの周辺にミリ波などの電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。レーダ装置12は、車両Mの任意の箇所に一つまたは複数が取り付けられる。レーダ装置12は、FM-CW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。
 ファインダ14は、照射光に対する散乱光を測定し、対象までの距離を検出するLIDAR(Light Detection and Ranging、或いはLaser Imaging Detection and Ranging)である。ファインダ14は、車両Mの任意の箇所に一つまたは複数が取り付けられる。
 物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置、種類、速度などを認識する。物体認識装置16は、認識結果を自動運転制御ユニット100に出力する。
 通信装置20は、例えば、セルラー網やWi-Fi網、Bluetooth(登録商標)、DSRC(Dedicated Short Range Communication)などを利用して、車両Mの周辺に存在する他車両と通信し、或いは無線基地局を介して遠隔操作管理設備300などの外部装置と通信する。
 HMI30は、車両Mの乗員に対して各種情報を提示する表示部31と、乗員による入力操作を受け付ける入力部32とを備える。HMI30は、各種表示装置、スピーカ、ブザー、タッチパネル、スイッチ、キーなどを含む。
 ナビゲーション装置50は、例えば、GNSS(Global Navigation Satellite System)受信機51と、ナビHMI52と、経路決定部53とを備え、HDD(Hard Disk Drive)やフラッシュメモリなどの記憶装置に第1地図情報54を保持している。GNSS受信機は、GNSS衛星から受信した信号に基づいて、車両Mの位置を特定する。車両Mの位置は、車両センサ70の出力を利用したINS(Inertial Navigation System)によって特定または補完されてもよい。ナビHMI52は、表示装置、スピーカ、タッチパネル、キーなどを含む。ナビHMI52は、前述したHMI30と一部または全部が共通化されてもよい。経路決定部53は、例えば、GNSS受信機51により特定された車両Mの位置(或いは入力された任意の位置)から、ナビHMI52を用いて乗員により入力された目的地までの経路を、第1地図情報54を参照して決定する。第1地図情報54は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。第1地図情報54は、道路の曲率やPOI(Point Of Interest)情報などを含んでもよい。経路決定部53により決定された経路は、MPU60に出力される。また、ナビゲーション装置50は、経路決定部53により決定された経路に基づいて、ナビHMI52を用いた経路案内を行ってもよい。なお、ナビゲーション装置50は、例えば、ユーザの保有するスマートフォンやタブレット端末等の端末装置の機能によって実現されてもよい。また、ナビゲーション装置50は、通信装置20を介してナビゲーションサーバに現在位置と目的地を送信し、ナビゲーションサーバから返信された経路を取得してもよい。
 MPU60は、例えば、推奨車線決定部61として機能し、HDDやフラッシュメモリなどの記憶装置に第2地図情報62を保持している。推奨車線決定部61は、ナビゲーション装置50から提供された経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、第2地図情報62を参照してブロックごとに推奨車線を決定する。推奨車線決定部61は、左から何番目の車線を走行するといった決定を行う。推奨車線決定部61は、経路において分岐箇所や合流箇所などが存在する場合、車両Mが、分岐先に進行するための合理的な経路を走行できるように、推奨車線を決定する。
 第2地図情報62は、第1地図情報54よりも高精度な地図情報である。第2地図情報62は、例えば、車線の中央の情報あるいは車線の境界の情報等を含んでいる。また、第2地図情報62には、道路情報、交通規制情報、住所情報(住所・郵便番号)、施設情報、電話番号情報などが含まれてよい。道路情報には、高速道路、有料道路、国道、都道府県道といった道路の種別を表す情報や、道路の車線数、各車線の幅員、道路の勾配、道路の位置(経度、緯度、高さを含む3次元座標)、車線のカーブの曲率、車線の合流および分岐ポイントの位置、道路に設けられた標識等の情報が含まれる。第2地図情報62は、通信装置20を用いて他装置にアクセスすることにより、随時、アップデートされてよい。
 車両センサ70は、車両Mの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、車両Mの向きを検出する方位センサ等を含む。
 運転操作子80は、例えば、アクセルペダル、ブレーキペダル、シフトレバー、ステアリングホイールその他の操作子を含む。運転操作子80には、操作量あるいは操作の有無を検出するセンサが取り付けられており、その検出結果は、自動運転制御ユニット100、もしくは、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220のうち一方または双方に出力される。運転操作子80には、操作の有無を検出するセンサに加えて、運転操作子80に対する接触の有無を検出するタッチセンサが備えられている。タッチセンサは、例えば、ステアリングホイールの把持部分に内蔵されたセンサである。タッチセンサは、車両Mの乗員の手がステアリングホイールに触れたことを検出し、検出結果を自動運転制御ユニット100に出力する。
 車室内カメラ90は、運転席に着座した乗員の顔を中心として上半身を撮像する。車室内カメラ90の撮像画像は、自動運転制御ユニット100に出力される。
 自動運転制御ユニット100は、例えば、第1制御部120と、第2制御部140と、被遠隔運転制御部160とを備える。第1制御部120、第2制御部140、および被遠隔運転制御部160は、それぞれ、CPU(Central Processing Unit)などのプロセッサがプログラム(ソフトウェア)を実行することで実現される。また、以下に説明する第1制御部120、第2制御部140、および被遠隔運転制御部160の機能部のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)などのハードウェアによって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。
 第1制御部120は、例えば、外界認識部121と、自車位置認識部122と、行動計画生成部123とを備える。
 外界認識部121は、カメラ10、レーダ12、およびファインダ14から物体認識装置16を介して入力される情報に基づいて、周辺車両の位置、および速度、加速度等の状態を認識する。周辺車両の位置は、その周辺車両の重心やコーナー等の代表点で表されてもよいし、周辺車両の輪郭で表現された領域で表されてもよい。周辺車両の「状態」とは、周辺車両の加速度やジャーク、あるいは「行動状態」(例えば車線変更をしている、またはしようとしているか否か)を含んでもよい。また、外界認識部121は、周辺車両に加えて、ガードレールや電柱、駐車車両、歩行者その他の物体の位置を認識してもよい。
 自車位置認識部122は、例えば、車両Mが走行している車線(走行車線)、並びに走行車線に対する車両Mの相対位置および姿勢を認識する。自車位置認識部122は、例えば、第2地図情報62から得られる道路区画線のパターン(例えば実線と破線の配列)と、カメラ10によって撮像された画像から認識される車両Mの周辺の道路区画線のパターンとを比較することで、走行車線を認識する。この認識において、ナビゲーション装置50から取得される車両Mの位置やINSによる処理結果が加味されてもよい。
 行動計画生成部123は、推奨車線決定部61により決定されて推奨車線を走行するように、且つ、車両Mの周辺状況に対応できるように、自動運転において順次実行されるイベントを決定する。イベントには、例えば、一定速度で同じ走行車線を走行する定速走行イベント、前走車両に追従する追従走行イベント、車線変更イベント、合流イベント、分岐イベント、緊急停止イベント、自動運転を終了して手動運転に切り替えるためのハンドオーバイベントなどがある。また、これらのイベントの実行中に、車両Mの周辺状況(周辺車両や歩行者の存在、道路工事による車線狭窄など)に基づいて、回避のための行動が計画される場合もある。
 行動計画生成部123は、車両Mが将来走行する目標軌道を生成する。目標軌道は、例えば、速度要素を含んでいる。例えば、目標軌道は、所定のサンプリング時間(例えば0コンマ数[sec]程度)ごとに将来の基準時刻を複数設定し、それらの基準時刻に到達すべき目標地点(軌道点)の集合として生成される。このため、軌道点同士の間隔が広い場合、その軌道点の間の区間を高速に走行することを示している。
 図3は、推奨車線に基づいて目標軌道が生成される様子を示す図である。図示するように、推奨車線は、目的地までの経路に沿って走行するのに都合が良いように設定される。行動計画生成部123は、推奨車線の切り替わり地点の所定距離手前(イベントの種類に応じて決定されてよい)に差し掛かると、車線変更イベント、分岐イベント、合流イベントなどを起動する。各イベントの実行中に、障害物を回避する必要が生じた場合には、図示するように回避軌道が生成される。
 行動計画生成部123は、例えば、目標軌道の候補を複数生成し、安全性と効率性の観点に基づいて、その時点での最適な目標軌道を選択する。
 第2制御部140は、走行制御部141を備える。走行制御部141は、行動計画生成部123によって生成された目標軌道を、予定の時刻通りに車両Mが通過するように、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を制御する。
 被遠隔運転制御部160は、通信装置20を用いて遠隔操作リクエストを送信し、遠隔操作管理設備300から受信した制御情報に基づいて車両Mの加減速または操舵の少なくとも一方を自動的に制御する被遠隔運転を実行する。被遠隔運転制御部160は、切替制御部161と、通知部162を備える。切替制御部161は、被遠隔運転を実行している状態から、被遠隔運転を終了して手動運転に切り替える制御を実行する。また、切替制御部161は、手動運転を実行している状態から、被遠隔運転を開始する制御を実行する。なお、切替制御部161は、自動運転を実行している状態から、被遠隔運転を開始する制御を実行してよく、被遠隔運転を実行している状態から、被遠隔運転を終了して自動運転を開始してよい。通知部162は、表示部31を用いて、被遠隔運転を実行しているか、手動運転を実行しているか、を表す画像を提示する。また、通知部162は、被遠隔運転から手動運転に切り替えることを確認するための画像を提示する。
 走行駆動力出力装置200は、車両が走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、内燃機関、電動機、および変速機などの組み合わせと、これらを制御するECUとを備える。ECUは、自動運転制御ユニット100から入力される情報、或いは運転操作子80から入力される情報に従って、上記の構成を制御する。
 ブレーキ装置210は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキECUとを備える。ブレーキECUは、自動運転制御ユニット100から入力される情報、或いは運転操作子80から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ブレーキ装置210は、運転操作子80に含まれるブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置210は、上記説明した構成に限らず、走行制御部141から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する電子制御式油圧ブレーキ装置であってもよい。
 ステアリング装置220は、例えば、ステアリングECUと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングECUは、自動運転制御ユニット100から入力される情報、或いは運転操作子80から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。
 [遠隔操作管理設備300]
 以下、遠隔操作を行う側の車外設備について説明する。図4は、遠隔操作管理設備300における装置構成を示す図である。図示するように、遠隔操作管理設備300には、ネットワークNWを介して車両M(被遠隔操作車両)と通信する統括制御装置310と、複数の遠隔操作装置320-1、320-2、320-3、…とが設けられる。以下、遠隔操作装置を区別しないときは、単に遠隔操作装置320と表記する。
 それぞれの遠隔操作装置320では、遠隔操作者が遠隔操作リクエストに備えて着座して待機している。統括制御装置310は、車両Mから受信した情報を、遠隔操作装置320に送信し、遠隔操作者に遠隔操作を行わせる。車両Mから受信した情報は、車両Mに搭載されたカメラ等の機器により取得された画像、音声、速度、角速度、車種などの車両状況を表す情報である。統括制御装置310は、いずれかの遠隔操作装置320により受け付けた運転操作に基づいて制御情報を生成し、生成した制御情報を車両Mに送信する。
 遠隔操作管理設備300の統括制御装置310は、遠隔操作者一覧312を参照し、車両Mから受信した情報に合致する遠隔操作者を選択して、選択した遠隔操作者の操作する遠隔操作装置320に遠隔操作を行わせる。図5は、遠隔操作者一覧312の内容の一例を示す図である。遠隔操作者一覧312には、例えば、遠隔操作者の識別情報である遠隔操作者IDに対応付けて、遠隔操作の経験年数、遠隔操作の直近の評価、それらを総合的に評価した総合スキル、遠隔操作を実行中であるか否かを示すフラグなどの情報が格納される。統括制御装置310は、遠隔操作を実行していない遠隔操作者のうち、評価や総合スキルに基づいていずれかの遠隔操作者を選択する。統括制御装置310は、選択した遠隔操作者により操作されている遠隔操作装置320に車両Mから受信した情報を送信し、当該遠隔操作装置320から受信した制御情報を車両Mに送信する。これにより、統括制御装置310および遠隔操作装置320は、遠隔運転を実行する。
 統括制御装置310は、遠隔運転を実行するための制御情報を生成し、所定条件を満たした場合に、生成した制御情報を、車両Mに送信する。このために、統括制御装置310は、遠隔操作者一覧312を参照し、遠隔操作者一覧312に登録された複数の遠隔操作者のうちいずれかの遠隔操作者を選択する。統括制御装置310は、選択した遠隔操作者の操作する遠隔操作装置320により生成された制御情報を、車両Mに送信する。
 図6は、遠隔操作装置320の構成を模式的に示す図である。遠隔操作装置320は、例えば、表示部321と、スピーカ322と、シート323と、ステアリングホイール324と、アクセルペダルおよびブレーキペダルなどのペダル類325と、遠隔操作制御部330とを備える。
 表示部321は、車両Mのカメラにより撮像された画像、車両Mの速度やエンジン回転数などを表示する。なお、表示部321は、HMD(Head Mount Display)でもよい。スピーカ322は、車両Mの物体認識装置16により認識された障害物の車両Mへの接近に応じて警告音を発する。シート323には、遠隔操作者Oが着座する。遠隔操作者Oは、ステアリングホイール324やペダル類325などの運転操作子に対して運転操作を行う。これらに対する操作量は、図示しないセンサによって検出され、遠隔操作制御部330に出力される。運転操作子は、ジョイスティックなど、他の態様の運転操作子であってもよい。
 遠隔操作制御部330は、運転操作子から入力された操作量に基づいて、車両Mに送信する制御情報を生成する。遠隔操作制御部330は、生成した制御情報を統括制御装置310に送信する。統括制御装置310は、複数の遠隔操作装置320により生成された複数の制御情報のうち、選択された遠隔操作装置320が生成した制御情報を、車両Mに送信する。なお、運転操作子には、操作量によって生じるべき反力を作用させるための反力出力装置が付設されている。反力を正確に決定するために、車両Mから遠隔操作装置320に対して、速度や角速度などの情報が供給されると好適である。
 車両Mに送信される制御情報は、ステアリングホイール324やペダル類325に対する操作量そのものであってもよいし、その時点の車両Mの車速や旋回角度に基づいて変更した操作量に基づいて計算される、走行駆動力出力装置200、ブレーキ装置210、またはステアリング装置220に与えるべき制御量(例えば、スロットル開度、ブレーキトルク、ステアリング装置220のアシストモータの出力トルクなど)であってもよい。
 [被遠隔運転から手動運転への切替]
 以下、被遠隔運転を実行している状態において、被遠隔運転の実行を終了して、手動運転を開始する処理について説明する。図7は、被遠隔運転から手動運転への切替処理の流れの一例を示すフローチャートである。自動運転制御ユニット100は、被遠隔運転制御部160により被遠隔運転を実行している(ステップS100)。切替制御部161は、被遠隔運転を実行している最中に、例えば所定期間毎に、手動運転に切り替えるか否かを判定する(ステップS102)。切替制御部161は、例えば、通信装置20と遠隔操作管理設備300との間の通信状態が途絶することで遠隔操作管理設備300から制御情報が送信されていない期間が所定期間を超えた場合に、手動運転に切り替えると判定する。
 切替制御部161は、手動運転に切り替えると判定しない場合、被遠隔運転の実行を継続する。切替制御部161は、手動運転に切り換える場合、車両Mの乗員の状態を検出する(ステップS104)。切替制御部161は、例えば、車室内カメラ90により撮像された画像に基づいて、車両Mの乗員の着座位置、車両Mの乗員の姿勢などの車両Mの乗員の状態を検出する。また、切替制御部161は、例えば、運転操作子80に対する操作状態を取得し、車両Mの乗員の手がステアリングホイールを把持しているか否かなどの操作状態に基づいて、車両Mの乗員の状態を検出する。
 次に切替制御部161は、ステップS104において検出された車両Mの乗員の状態が所定条件を満たすか否かを判定する(ステップS106)。所定条件とは、車両Mの乗員の操作に基づいて手動運転が可能な状態であることである。切替制御部161は、所定条件を満たしていない場合、車両Mの乗員に手動運転を要求する(ステップS108)。通知部162は、例えば、表示部31を用いて、手動運転を開始する準備をすることを要求する画像を提示する。図8は、手動運転を開始する準備をすることを要求する画面の一例を示す図である。この画面には、遠隔運転が実行されている最中であることを表すメッセージ、手動運転を開始する準備を促すメッセージ、および確認の操作を受け付けるボタンなどが含まれている。
 切替制御部161は、車室内カメラ90により撮像された画像に基づいて、車両Mの乗員が運転席に着座しており、車両Mの乗員の姿勢がステアリングホイール、アクセルペダル、およびブレーキペダルなどの運転操作子80が操作可能な姿勢である場合に、所定条件を満たすことを判定する。切替制御部161は、さらに、車両Mの乗員の手がステアリングホイールを把持しており、アクセルペダル、またはブレーキペダルの操作が可能である場合に、所定条件を満たすことを判定する。通知部162は、車両Mの乗員の状態が所定条件を満たす場合、HMI30を用いて切替確認画面を提示する(ステップS110)。図9は、切替確認画面の一例を示す図である。切替確認画面には、遠隔運転が実行されている最中であることを表すメッセージ、手動運転を開始することを確認するメッセージ、および確認の操作を受け付けるボタンなどが含まれている。
 切替制御部161は、手動運転を開始する確認操作を受け付けたか否かを判定し(ステップS112)、確認操作を受け付けた場合に、遠隔運転から手動運転への切替タイミングを設定する(ステップS114)。すなわち、切替制御部161は、被遠隔運転から手動運転に切り替えることを確認する操作受け付けた場合に、車両Mの乗員の状態が所定条件を満たしたと判定する。切替制御部161は、例えば、確認操作を受け付けた時刻から所定期間後のタイミングを、切替タイミングとして設定する。所定期間は、例えば、数分である。切替制御部161は、確認操作を受け付けない場合、切替確認画面の提示を継続する。
 通知部162は、車両Mの乗員および遠隔操作者に、切替タイミングまでの残り時間を通知する(ステップS116)。図10は、車両Mの乗員に切替タイミングまでの残り時間を通知する画面の一例を示す図である。この画面には、遠隔運転が実行されている最中であることを表すメッセージ、手動運転を開始することを促すメッセージ、遠隔操作の終了までの残り時間を表すメッセージなどが含まれている。図11は、遠隔操作者に切替タイミングまでの残り時間を通知する画面の一例を示す図である。この画面には、車両Mから遠隔操作管理設備300に送信された前方画像、右側方画像、左側方画像、および後方画像、遠隔操作の終了までの残り時間を表すメッセージなどが含まれている。通知部162は、例えば、切替タイミングを表す情報、または切替タイミングが到来するまでの期間を表す情報を遠隔操作管理設備300に送信することで、遠隔操作の終了までの残り時間を表すメッセージを表示させる。なお、切替制御部161は、音声により切替タイミングまでの残り時間を通知してもよい。
 次に切替制御部161は、遠隔操作管理設備300に送信する制御情報を除変する(ステップS118)。制御情報を除変するとは、切替タイミングが到来するまでの期間において、次第に制御情報が表す操作量または制御量を減らすことに相当する。図12は、遠隔運転に基づく制御量に対する手動運転に基づく制御量の割合の時間的な変化の一例を示す図である。切替制御部161は、切替タイミングに相当する時刻tchに至るまでの期間において、遠隔運転に基づく制御量に対する手動運転に基づく制御量の割合を線形で増加させる。これにより、切替制御部161は、運転操作子80により受け付けた運転操作を次第に車両Mの走行状態に反映させることで、遠隔運転が終了し、手動運転が開始されていることを車両Mの乗員に伝えることができる。
 
 上述した自動運転制御ユニット100は、被遠隔運転が終了する場合において、検出部により検出された車両Mの乗員の状態が所定条件を満たさない場合、第1制御部120により自動運転が実行されてよい。図13は、遠隔運転の実行を終了して、自動運転または手動の実行を開始する処理の流れの一例を示すフローチャートである。なお、このフローチャートにおいて、図7と同じ処理については同一符号を付することで詳細な説明を省略する。車両Mは、被遠隔運転を実行している遠隔運転を実行している最中に、例えば所定期間毎に、被遠隔運転の実行を終了するか否かを判定する(ステップS200)。切替制御部161は、例えば、通信装置20と遠隔操作管理設備300との間の通信状態が途絶することで遠隔操作管理設備300から制御情報が送信されていない期間が所定期間を超えた場合に、被遠隔運転の実行が終了することを判定する。
 切替制御部161は、自動運転の実行を終了すると判定しない場合、被遠隔運転の実行を継続する。切替制御部161は、自動運転の実行を終了する場合、車両Mの乗員の状態を検出する(ステップS104)。次に切替制御部161は、ステップS104において検出された車両Mの乗員の状態が所定条件を満たすか否かを判定する(ステップS106)。切替制御部161は、所定条件を満たす場合、ステップS110以降の処理に移行し、手動運転の実行を開始する。切替制御部161は、所定条件を満たさない場合、第1制御部120に、自動運転を実行することを開始することを要求する。これにより、第1制御部120は、自動運転を開始する(ステップS200)。
 [車両からの遠隔操作]
 車両の遠隔操作は、遠隔操作管理設備300の遠隔操作装置320ではなく、自動運転中の車両の乗員によって行われてもよい。図14は、車両の乗員によって遠隔操作が実行される様子を概念的に示す図である。図中、車両M-1は、上記説明した被遠隔運転を実行中の車両である。また、車両M-2は、自動運転を実行しているため運転操作子がフリーの状態となっており、本来はその車両の運転操作に用いるための運転操作子を、遠隔操作の運転操作子として使用可能な車両である。この場合、車両M-2では、例えば、車両M-1から受信した画像をHUD(Head Up Display)などに表示し、あたかも車両M-1を運転しているような環境で遠隔操作が行われる。なお、この場合であっても、遠隔操作管理設備300が車両M-1とM-2の間に介在してもよい。すなわち、遠隔操作リクエストは、まず遠隔操作管理設備300に送信され、遠隔操作管理設備300によって、自動運転中の車両Mに転送されるようにしてもよい。
 図15は、遠隔操作を行う車両Mに搭載される構成の一例を示す図である。本図において、図2を用いて説明した機能と同様の機能を有するものに関しては、共通する符号を付している。すなわち、遠隔操作を行う車両Mに搭載される自動運転制御ユニット100は、上記説明した自動運転制御ユニット100と同様の機能を有してよい。
 遠隔操作を行う車両Mには、図2に示す構成の他、HUD40と、遠隔操作制御部180とが搭載される。遠隔操作制御部180は、被遠隔運転を行う車両Mのカメラ10により撮像された画像などをHUD40に表示させ、フリーの状態になっている運転操作子80から入力された操作量に基づいて、被遠隔運転を行う車両Mに送信する制御情報を生成する。
 なお、被遠隔運転を行う車両Mと、遠隔操作を行う車両Mとを別々に説明したが、これらの機能の双方を有するものとして車両Mが構成されてもよい。すなわち、車両Mは、被遠隔運転を行う必要がある場合には被遠隔運転を行うと共に、自動運転中に他車両からのリクエストに応じて遠隔操作を行うことができるものであってもよい。
 以上説明した車両制御システム1によれば、被遠隔運転を実行している場合において、車両Mの乗員の状態が所定条件を満たす場合に被遠隔運転から手動運転に切り替えるので、車両Mの乗員の負担を抑制することができる。
 さらに、車両制御システム1によれば、車両Mの乗員の状態が所定条件を満たさない場合、自動運転制御ユニット100により自動運転を実行するので、車両Mの乗員の負担をさらに抑制することができる。
 また、車両制御システム1によれば、車両Mの乗員の操作に基づいて手動運転が可能な状態であることを判定して被遠隔運転から手動運転に切り替えるので、手動運転が困難な状態において被遠隔運転から手動運転に切り替わることを抑制することができ、車両Mの乗員の負担を軽減することができる。
 さらに、車両制御システム1によれば、被遠隔運転を実行している場合において、車両Mが被遠隔運転を実行していることを表す画像を提示し、被遠隔運転から手動運転に切り替える必要がある場合に、被遠隔運転から手動運転に切り替えることを確認するための画像を提示し、被遠隔運転から手動運転に切り替えることを確認する操作を受け付けた場合に、車両Mの乗員の状態が所定条件を満たすと判定するので、車両Mの乗員が被遠隔運転から手動運転に切り替えることを確認することができる。
 さらに、車両制御システム1によれば、切替タイミングが到来するまでの期間を提示するので、被遠隔運転から手動運転への切替をスムーズに行うことができ、車両の乗員の負担を軽減することができる。
 さらに、車両制御システム1によれば、切替タイミングを表す情報、または切替タイミングが到来するまでの期間を表す情報を遠隔操作管理設備300に送信するので、被遠隔運転から手動運転への切替をスムーズに行うことができ、車両Mの乗員の負担を軽減することができる。
 さらに、車両制御システム1によれば、切替タイミングが到来するまでの期間において次第に制御情報が表す制御量を減らすので、被遠隔運転から手動運転に切り替えられる途中において運転操作子80に対する運転操作を行わせることができる。これにより、車両制御システム1によれば、切替タイミングの到来時に、急に制御情報に基づく車両Mの走行が終了することを回避することができ、車両Mの乗員の負担を軽減することができる。
 以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
1‥車両制御システム
30‥HMI
31‥表示部
32‥入力部
40‥HUD
60‥MPU
61‥推奨車線決定部
70‥車両センサ
100‥自動運転制御ユニット
120‥第1制御部
140‥第2制御部
160‥被遠隔運転制御部
161‥切替制御部
162‥通知部
180‥遠隔操作制御部
300‥遠隔操作管理設備
310‥統括制御装置
312‥遠隔操作者一覧
320‥遠隔操作装置
322‥スピーカ
323‥シート
324‥ステアリングホイール
325‥ペダル類
330‥遠隔操作制御部

Claims (12)

  1.  車外の状況を取得する取得部と、
     車両の乗員により手動運転のための操作がなされる運転操作子と、
     前記車両の乗員の状態を検出する検出部と、
     前記運転操作子により受け付けた操作に基づいて車両を走行させる手動運転を実行する手動運転制御部と、
     車外設備と通信する通信部であって、前記取得部により取得された前記車外の状況を車外設備に送信する前記通信部と、
     前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行する被遠隔運転制御部と、
     前記被遠隔運転制御部により前記被遠隔運転を実行している場合において、前記検出部により検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から前記手動運転に切り替える切替制御部と、
     を備える、車両制御装置。
  2.  前記車両の加減速または操舵のうち少なくとも一方を自動的に制御する自動運転を実行する自動運転制御部を更に備え、
     前記被遠隔運転制御部による前記被遠隔運転が終了する場合において、前記検出部により検出された前記車両の乗員の状態が所定条件を満たさない場合、前記自動運転制御部により前記自動運転が実行される、
     請求項1記載の車両制御装置。
  3.  前記所定条件は、前記車両の乗員の状態が、前記手動運転を実行可能な状態であることである、
     請求項1に記載の車両制御装置。
  4.  前記検出部は、前記車両の乗員を撮像した画像を取得し、
     前記切替制御部は、前記車両の乗員を撮像した画像に基づいて、前記車両の乗員の状態が、前記手動運転を実行可能な状態であるか否かを判定する、
     請求項2に記載の車両制御装置。
  5.  前記検出部は、前記運転操作子に対する操作状態を取得し、
     前記切替制御部は、前記運転操作子に対する操作状態に基づいて、前記車両の乗員の操作に基づいて前記手動運転の実行が可能な状態であるか否かを判定する、
     請求項2に記載の車両制御装置。
  6.  情報を提示する提示部と、
     前記被遠隔運転制御部により前記被遠隔運転を実行している場合において、前記車両が被遠隔運転を実行していることを表す情報を前記提示部に提示させ、前記被遠隔運転から前記手動運転に切り替える必要がある場合に、前記被遠隔運転から前記手動運転に切り替えることを確認するための情報を前記提示部に提示させる通知部と、
     前記車両の乗員の入力操作を受け付ける入力部と、を更に備え、
     前記切替制御部は、前記入力部により前記被遠隔運転から手動運転に切り替えることを確認する操作を受け付けた場合に、前記車両の乗員の状態が所定条件を満たすと判定する、
     請求項1に記載の車両制御装置。
  7.  前記切替制御部は、前記被遠隔運転から前記手動運転に切り替えるタイミングを設定し、
     情報を提示する提示部と、
     前記タイミングが到来するまでの期間を前記提示部に提示させる通知部を更に備える、
     請求項1に記載の車両制御装置。
  8.  前記切替制御部は、前記通信部に、前記タイミングを表す情報、または前記タイミングが到来するまでの期間を表す情報を前記車外設備に送信させる、
     請求項6に記載の車両制御装置。
  9.  前記被遠隔運転制御部は、前記タイミングが到来するまでの期間において次第に前記制御情報が表す制御量を減らす、
     請求項6に記載の車両制御装置。
  10.  請求項1記載の車両制御装置と、
     前記車外設備と、を備える車両制御システム。
  11.  コンピュータが、
     車外の状況を取得し、
     取得された前記車外の状況を車外設備に送信し、
     前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行し、
     前記被遠隔運転を実行している場合において、前記車両の乗員の状態を検出し、
     検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から、前記車両の乗員により手動運転のための操作がなされる運転操作子により受け付けた操作に基づいて車両を走行させる手動運転を実行する、
     車両制御方法。
  12.  コンピュータに、
     車外の状況を取得させ、
     取得された前記車外の状況を車外設備に送信させ、
     前記車外設備から受信した制御情報に基づいて車両を走行させる被遠隔運転を実行させ、
     前記被遠隔運転を実行している場合において、前記車両の乗員の状態を検出させ、
     検出された前記車両の乗員の状態が所定条件を満たす場合に、前記被遠隔運転から、前記車両の乗員により手動運転のための操作がなされる運転操作子により受け付けた操作に基づいて車両を走行させる手動運転を実行させる、
     車両制御プログラム。
PCT/JP2016/083508 2016-11-11 2016-11-11 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム WO2018087880A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2018549712A JPWO2018087880A1 (ja) 2016-11-11 2016-11-11 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
PCT/JP2016/083508 WO2018087880A1 (ja) 2016-11-11 2016-11-11 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
CN201680090384.8A CN109891473A (zh) 2016-11-11 2016-11-11 车辆控制装置、车辆控制系统、车辆控制方法及车辆控制程序
US16/346,130 US20190265710A1 (en) 2016-11-11 2016-11-11 Vehicle control device, vehicle control system, vehicle control method, and vehicle control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/083508 WO2018087880A1 (ja) 2016-11-11 2016-11-11 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム

Publications (1)

Publication Number Publication Date
WO2018087880A1 true WO2018087880A1 (ja) 2018-05-17

Family

ID=62109638

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/083508 WO2018087880A1 (ja) 2016-11-11 2016-11-11 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム

Country Status (4)

Country Link
US (1) US20190265710A1 (ja)
JP (1) JPWO2018087880A1 (ja)
CN (1) CN109891473A (ja)
WO (1) WO2018087880A1 (ja)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111497865A (zh) * 2019-01-30 2020-08-07 斯特拉德视觉公司 用于切换驾驶模式的远程控制自动驾驶车辆的方法及装置
JP2020164056A (ja) * 2019-03-29 2020-10-08 本田技研工業株式会社 制御装置、制御方法及びプログラム
WO2020250645A1 (ja) * 2019-06-12 2020-12-17 株式会社Jvcケンウッド 車載通信装置、車両遠隔操作システム、通信方法およびプログラム
JP2021015567A (ja) * 2019-07-16 2021-02-12 トヨタ自動車株式会社 車両制御装置及び車両制御システム
JP2021015568A (ja) * 2019-07-16 2021-02-12 トヨタ自動車株式会社 操作装置及び車両制御システム
JP2021018486A (ja) * 2019-07-17 2021-02-15 トヨタ自動車株式会社 車両制御装置
JP2021018209A (ja) * 2019-07-23 2021-02-15 トヨタ自動車株式会社 車両位置検知システム
JP2021022318A (ja) * 2019-07-30 2021-02-18 トヨタ自動車株式会社 操作選択装置
JP2021026569A (ja) * 2019-08-06 2021-02-22 トヨタ自動車株式会社 運転操作引継システム及び車両
JPWO2021111765A1 (ja) * 2019-12-06 2021-06-10
WO2023085202A1 (ja) * 2021-11-12 2023-05-19 株式会社デンソー 車両遠隔運転システム、および、車両遠隔運転方法
JP7432683B2 (ja) 2021-11-30 2024-02-16 株式会社日立製作所 遠隔操作可能な車両およびシステム
JP7438017B2 (ja) 2020-05-11 2024-02-26 Go株式会社 コンピュータプログラム、遠隔制御装置、及び遠隔制御方法

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11046332B2 (en) * 2016-11-09 2021-06-29 Honda Motor Co., Ltd. Vehicle control device, vehicle control system, vehicle control method, and storage medium
JP7063672B2 (ja) * 2018-03-27 2022-05-09 本田技研工業株式会社 情報処理装置及びプログラム
JP7086798B2 (ja) * 2018-09-12 2022-06-20 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
US11656617B1 (en) * 2018-12-27 2023-05-23 United Services Automobile Association (Usaa) Remote pilot of vehicle during unsafe driving conditions
JP7172892B2 (ja) * 2019-07-17 2022-11-16 トヨタ自動車株式会社 車両制御装置及び車両制御システム
JP2021017194A (ja) * 2019-07-23 2021-02-15 トヨタ自動車株式会社 操作部制御装置及び車両制御システム
JP7159991B2 (ja) * 2019-07-23 2022-10-25 トヨタ自動車株式会社 車両制御システム及び車両制御装置
JP7200870B2 (ja) * 2019-07-24 2023-01-10 トヨタ自動車株式会社 車両制御システム及び車両制御方法
JP7293949B2 (ja) * 2019-07-29 2023-06-20 トヨタ自動車株式会社 車両走行システム
JP7302360B2 (ja) * 2019-07-30 2023-07-04 トヨタ自動車株式会社 遠隔運転システム
JP7156217B2 (ja) * 2019-09-06 2022-10-19 トヨタ自動車株式会社 車両遠隔指示システム
JP7227113B2 (ja) * 2019-10-15 2023-02-21 トヨタ自動車株式会社 車両及び遠隔操作システム
CN111098863B (zh) * 2019-12-12 2022-03-29 长城汽车股份有限公司 自动驾驶车辆的远程驾驶请求方法、装置及用户终端
US20220342414A1 (en) * 2020-01-08 2022-10-27 Mitsubishi Electric Corporation Vehicle control device and vehicle control method
JP6936349B2 (ja) * 2020-01-29 2021-09-15 本田技研工業株式会社 車両制御装置、車両、および車両制御方法
CN111806254A (zh) * 2020-07-07 2020-10-23 江苏驰城环保科技有限公司 一种有人或无人驾驶装甲电动车
CN112037553B (zh) * 2020-08-31 2023-09-08 腾讯科技(深圳)有限公司 远程驾驶方法、装置、系统、设备及介质
JP2023031656A (ja) * 2021-08-25 2023-03-09 トヨタ自動車株式会社 報知システム、報知方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015182525A (ja) * 2014-03-21 2015-10-22 アイシン・エィ・ダブリュ株式会社 自動運転支援装置、自動運転支援方法及びプログラム
JP2016018238A (ja) * 2014-07-04 2016-02-01 株式会社デンソー 車両の運転モード制御装置
US20160139594A1 (en) * 2014-11-13 2016-05-19 Toyota Motor Engineering & Manufacturing North America, Inc. Remote operation of autonomous vehicle in unexpected environment
JP2016151815A (ja) * 2015-02-16 2016-08-22 株式会社デンソー 運転支援装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006045383B3 (de) * 2006-09-26 2007-12-13 Daimlerchrysler Ag Fahrzeug mit einer Ausstiegshilfe
JP4720781B2 (ja) * 2007-05-07 2011-07-13 株式会社デンソー 車両制御装置のデータ書換システム
CN101823435B (zh) * 2009-03-03 2012-12-12 珠海市智汽电子科技有限公司 便于外置安装、便于手动/自动切换的车辆自动驾驶系统
CN102069763A (zh) * 2010-12-28 2011-05-25 奇瑞汽车股份有限公司 一种车身控制器及其控制方法
CN102862568B (zh) * 2012-08-31 2015-05-20 天津菲利科电子技术有限公司 远程实景代驾系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015182525A (ja) * 2014-03-21 2015-10-22 アイシン・エィ・ダブリュ株式会社 自動運転支援装置、自動運転支援方法及びプログラム
JP2016018238A (ja) * 2014-07-04 2016-02-01 株式会社デンソー 車両の運転モード制御装置
US20160139594A1 (en) * 2014-11-13 2016-05-19 Toyota Motor Engineering & Manufacturing North America, Inc. Remote operation of autonomous vehicle in unexpected environment
JP2016151815A (ja) * 2015-02-16 2016-08-22 株式会社デンソー 運転支援装置

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111497865A (zh) * 2019-01-30 2020-08-07 斯特拉德视觉公司 用于切换驾驶模式的远程控制自动驾驶车辆的方法及装置
JP2020123341A (ja) * 2019-01-30 2020-08-13 株式会社ストラドビジョンStradvision,Inc. 自律走行モードと手動走行モードとの間の走行モードを変更するリモートコントロール自律走行自動車のための方法及び装置
JP2020164056A (ja) * 2019-03-29 2020-10-08 本田技研工業株式会社 制御装置、制御方法及びプログラム
CN111762168A (zh) * 2019-03-29 2020-10-13 本田技研工业株式会社 控制装置、控制方法以及存储介质
JP7154177B2 (ja) 2019-03-29 2022-10-17 本田技研工業株式会社 制御装置、制御方法及びプログラム
WO2020250645A1 (ja) * 2019-06-12 2020-12-17 株式会社Jvcケンウッド 車載通信装置、車両遠隔操作システム、通信方法およびプログラム
JP2021015568A (ja) * 2019-07-16 2021-02-12 トヨタ自動車株式会社 操作装置及び車両制御システム
US11565724B2 (en) 2019-07-16 2023-01-31 Toyota Jidosha Kabushiki Kaisha Operation device and vehicle control system
JP7099412B2 (ja) 2019-07-16 2022-07-12 トヨタ自動車株式会社 車両制御装置及び車両制御システム
JP2021015567A (ja) * 2019-07-16 2021-02-12 トヨタ自動車株式会社 車両制御装置及び車両制御システム
JP7140068B2 (ja) 2019-07-16 2022-09-21 トヨタ自動車株式会社 操作装置
JP2021018486A (ja) * 2019-07-17 2021-02-15 トヨタ自動車株式会社 車両制御装置
JP7200864B2 (ja) 2019-07-17 2023-01-10 トヨタ自動車株式会社 車両制御装置
US11535279B2 (en) 2019-07-23 2022-12-27 Toyota Jidosha Kabushiki Kaisha Vehicle position sensing system
JP7293945B2 (ja) 2019-07-23 2023-06-20 トヨタ自動車株式会社 車両位置検知システム
JP2021018209A (ja) * 2019-07-23 2021-02-15 トヨタ自動車株式会社 車両位置検知システム
JP2021022318A (ja) * 2019-07-30 2021-02-18 トヨタ自動車株式会社 操作選択装置
JP7151657B2 (ja) 2019-07-30 2022-10-12 トヨタ自動車株式会社 操作選択装置
US11505214B2 (en) 2019-08-06 2022-11-22 Toyota Jidosha Kabushiki Kaisha Driving operation handover system and vehicle
JP2021026569A (ja) * 2019-08-06 2021-02-22 トヨタ自動車株式会社 運転操作引継システム及び車両
JP7272164B2 (ja) 2019-08-06 2023-05-12 トヨタ自動車株式会社 運転操作引継システム及び車両
JPWO2021111765A1 (ja) * 2019-12-06 2021-06-10
WO2021111765A1 (ja) * 2019-12-06 2021-06-10 株式会社デンソー 車両運転システム
JP7322971B2 (ja) 2019-12-06 2023-08-08 株式会社デンソー 車両運転システム
JP7438017B2 (ja) 2020-05-11 2024-02-26 Go株式会社 コンピュータプログラム、遠隔制御装置、及び遠隔制御方法
WO2023085202A1 (ja) * 2021-11-12 2023-05-19 株式会社デンソー 車両遠隔運転システム、および、車両遠隔運転方法
JP7432683B2 (ja) 2021-11-30 2024-02-16 株式会社日立製作所 遠隔操作可能な車両およびシステム

Also Published As

Publication number Publication date
CN109891473A (zh) 2019-06-14
JPWO2018087880A1 (ja) 2019-09-26
US20190265710A1 (en) 2019-08-29

Similar Documents

Publication Publication Date Title
WO2018087880A1 (ja) 車両制御装置、車両制御システム、車両制御方法、および車両制御プログラム
JP6650386B2 (ja) 遠隔運転制御装置、車両制御システム、遠隔運転制御方法、および遠隔運転制御プログラム
JP6663506B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
CN108973976B (zh) 车辆控制系统及车辆控制方法
JP6646168B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6916647B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6428746B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6691032B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6496944B2 (ja) 車両用シート装置
JP6695999B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6738437B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
CN109890679B (zh) 车辆控制系统、车辆控制方法及存储介质
WO2018083778A1 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
WO2018100619A1 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP2018091711A (ja) 車両制御システム、サーバ装置、車両制御方法、および車両制御プログラム
JPWO2018142568A1 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
WO2018087801A1 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JPWO2018138765A1 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP2018124855A (ja) 車両制御システム、車両制御方法、および車両制御プログラム
WO2018123346A1 (ja) 車両制御装置、車両制御方法、及びプログラム
JPWO2018142566A1 (ja) 通過ゲート決定装置、車両制御システム、通過ゲート決定方法、およびプログラム
JP6663343B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP6676783B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
WO2018179277A1 (ja) 車両制御システム、サーバ装置、車両制御方法、および車両制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16920945

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018549712

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16920945

Country of ref document: EP

Kind code of ref document: A1