WO2023281958A1 - 車両用装置および車両制御方法 - Google Patents
車両用装置および車両制御方法 Download PDFInfo
- Publication number
- WO2023281958A1 WO2023281958A1 PCT/JP2022/022762 JP2022022762W WO2023281958A1 WO 2023281958 A1 WO2023281958 A1 WO 2023281958A1 JP 2022022762 W JP2022022762 W JP 2022022762W WO 2023281958 A1 WO2023281958 A1 WO 2023281958A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- vehicle
- sensor unit
- power supply
- sensor
- control
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 30
- 238000001514 detection method Methods 0.000 claims abstract description 47
- 230000002093 peripheral effect Effects 0.000 claims description 50
- 230000002159 abnormal effect Effects 0.000 claims description 32
- 230000005856 abnormality Effects 0.000 claims description 21
- 230000010354 integration Effects 0.000 claims description 17
- 230000008569 process Effects 0.000 claims description 14
- 238000003384 imaging method Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000015654 memory Effects 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 238000012935 Averaging Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 229910052739 hydrogen Inorganic materials 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 239000002253 acid Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 239000001257 hydrogen Substances 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
- B60W30/09—Taking automatic action to avoid collision, e.g. braking and steering
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
- B60W50/023—Avoiding failures by using redundant parts
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/02—Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
- B60W50/029—Adapting to failures or work around with other constraints, e.g. circumvention by avoiding use of failed parts
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/04—Monitoring the functioning of the control system
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/865—Combination of radar systems with lidar systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
- G01S13/867—Combination of radar systems with cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/408—Radar; Laser, e.g. lidar
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/80—Spatial relation or speed relative to objects
- B60W2554/801—Lateral distance
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9327—Sensor installation details
- G01S2013/93271—Sensor installation details in the front of the vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
- G01S2013/9327—Sensor installation details
- G01S2013/93274—Sensor installation details on the side of the vehicles
Definitions
- Patent Literature 1 discloses a device that includes an integration unit that integrates sensor information from a plurality of sensors and that determines an abnormality in the integration unit. Patent document 1 also discloses that the reliability of the integration unit is ensured by redundancy.
- the present disclosure has been made based on this situation, and the object thereof is to provide a vehicle that can continue running even when a sensor or the like becomes abnormal while suppressing an increase in the number of components.
- An object of the present invention is to provide an apparatus for vehicle control and a vehicle control method.
- a vehicle device for use in a vehicle comprising: a first power supply unit; a second power supply; a first sensor unit operated by being supplied with electric power from the first power supply unit to detect an obstacle in front of the vehicle and to detect lateral position information, which is information relating to the position of the vehicle in the road width direction; a first control device that is powered by the first power supply unit and operates to control the vehicle based on the detection result of the first sensor unit; a second sensor unit that is powered by a second power supply unit and operates to detect a forward obstacle and lateral position information; and a second control device that is operated by being supplied with electric power from a second power supply unit and that controls the vehicle based on the detection result of the second sensor unit.
- This vehicle control method is A first power supply unit, a second power supply unit, and operated by being supplied with electric power from the first power supply unit to detect obstacles in front of the vehicle and lateral position information, which is information related to the position of the vehicle in the road width direction. and a second sensor unit operated by being supplied with electric power from a second power supply unit to detect a forward obstacle and lateral position information, and executed by a processor.
- a vehicle control method comprising: When the first power supply unit, the first sensor unit, the second power supply unit and the second sensor unit are normal, the detection results regarding the front obstacle are acquired from the first sensor unit and the second sensor unit respectively, and the front obstacle is detected.
- restriction control can be executed to continue vehicle travel while detecting forward obstacles and lateral position information. Even if one or more of the second sensor unit, the second control device, and the second power supply unit become abnormal, the first sensor unit, the first control device, and the first power supply unit perform limit control. can.
- first sensor unit, the second sensor unit, the first power supply unit, and the second power supply unit are normal, vertical integration processing for integrating the detection result of the first sensor unit and the detection result of the second sensor unit. and lateral direction integrated processing, high-precision vehicle control can also be performed.
- This vehicle control method uses either the first sensor section or the second sensor section even when the vehicle runs in the event of an abnormality. Therefore, it is possible to keep the vehicle running even in the event of an abnormality while suppressing an increase in the number of components.
- FIG. 5 is a view for explaining sensor mounting positions and fields of view 51L and 51L of the front-side millimeter-wave radar 50;
- FIG. 5 is a diagram for explaining an imaging range of a peripheral camera 60;
- FIG. 4 shows a sensor that can be used for the first sensor unit or the second sensor unit;
- FIG. 7 shows a portion of the sensor shown in FIG. 6;
- FIG. 4 is a diagram showing combinations of sensors that can be realized by the first sensor unit and the second sensor unit;
- FIG. 1 is a diagram showing the configuration of a vehicle device 10 according to the first embodiment.
- the vehicle device 10 is mounted on a vehicle C shown in FIG.
- the vehicle device 10 controls the steering and/or speed of the vehicle C without requiring, at least temporarily, driver intervention.
- the vehicle device 10 can execute automatic driving at level 3 of automatic driving. At autonomous driving level 3, the device performs all driving operations under limited conditions. However, in an emergency, the driver performs the driving operation.
- the vehicular device 10 may be capable of executing automatic driving levels other than automatic driving level 3, automatic driving levels 1, 2, 4, and the like.
- the vehicle C can run even when the vehicle device 10 does not function, that is, when the automatic driving level is zero.
- the vehicle device 10 includes two power supply units, a first power supply unit 21 and a second power supply unit 22, a plurality of sensors for detecting the situation around the vehicle C, and an ECU 70.
- the first power supply section 21 and the second power supply section 22 are power supply sections independent of each other. Both the first power supply unit 21 and the second power supply unit 22 can be charged with electric power generated by a generator mounted on the vehicle C. As shown in FIG.
- the first power supply unit 21 and the second power supply unit 22 can employ batteries using various materials such as lead-acid batteries, nickel-hydrogen secondary batteries, and lithium-ion secondary batteries.
- the plurality of sensors for detecting the situation around the vehicle C includes the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, the peripheral camera 60;
- the forward millimeter-wave radar 30 irradiates millimeter waves as transmission waves in the field of view, and receives reflected waves generated by reflection of the transmission waves from objects.
- the front millimeter wave radar 30 detects the position and direction from the vehicle C to an external object based on the time difference between transmission and reception and the irradiation direction of the transmission wave.
- the field of view of the front millimeter wave radar 30 includes the front of the vehicle C, and the front millimeter wave radar 30 detects obstacles in front of the vehicle C.
- FIG. Obstacles include stationary objects and moving objects. An example of a moving object is a preceding vehicle traveling in the same lane as vehicle C.
- the mounting position of front millimeter wave radar 30 is, for example, the front end of vehicle C and the center in the vehicle width direction.
- An example of the viewing angle of the front millimeter-wave radar 30 is about ⁇ 60 degrees with the front of the vehicle C being 0 degrees.
- the front camera 40 is a monocular camera that captures the front of the vehicle C.
- the front camera 40 is used to detect lane boundaries.
- Lane boundaries define lane boundaries.
- An example of a lane boundary is the lane marking 8 shown in FIG.
- the road edge becomes the road boundary.
- the installation position of the front camera 40 is, for example, in the interior of the vehicle C and near the front end of the roof, as shown in FIG.
- the field of view of the front camera 40 is preferably a wide field of view of 100° or more so that the lane markings 8 can be detected in the vicinity of the vehicle C. However, since the lane markings 8 also extend forward along the vehicle C, the field of view may be narrower than 100 degrees.
- the front millimeter-wave radar 30 and the front camera 40 are the first sensor section that operates by being supplied with power from the first power supply section 21 .
- the front lateral millimeter wave radar 50 includes a left front lateral millimeter wave radar 50L and a right front lateral millimeter wave radar 50R.
- the left front side millimeter wave radar 50L and the right front side millimeter wave radar 50R are radars for detecting obstacles present on the left side and right side of the vehicle C, respectively.
- the left front side millimeter wave radar 50L is installed at the left front end of the vehicle C
- the right front side millimeter wave radar 50R is installed at the right front end of the vehicle C. Obstacles to the sides of the vehicle C must be detected over a wide range.
- FIG. 2 illustrates fields of view 51L and 51R of the front left lateral millimeter wave radar 50L and the right front lateral millimeter wave radar 50R.
- the left front side millimeter wave radar 50L and the right front side millimeter wave radar 50R each have a field of view front obliquely in front of the vehicle C. As shown in FIG.
- the front side millimeter wave radar 50 detects the position and direction from the vehicle C to an external object based on the time difference between transmission and reception of millimeter waves and the irradiation direction of the transmission wave.
- the field of view obtained by combining the two fields of view 51L and 51R includes the front of the vehicle C as well.
- the fields of view 51L and 51R are ⁇ 60° centered on the front direction of the left front lateral millimeter wave radar 50L and the right front lateral millimeter wave radar 50R.
- the peripheral cameras 60 include a front peripheral camera 60F, a left peripheral camera 60L, a right peripheral camera 60R, and a rear peripheral camera 60B.
- the front peripheral camera 60F is installed at the front end of the vehicle C and at the center in the vehicle width direction.
- the left peripheral camera 60L is installed on the lower surface of the left door mirror of the vehicle C.
- the right peripheral camera 60R is installed on the lower surface of the right door mirror of the vehicle C.
- the rear peripheral camera 60B is installed at the rear end of the vehicle C and at the center in the vehicle width direction.
- the four peripheral cameras 60 are provided for the purpose of coordinate-converting the images captured by these four peripheral cameras 60 to create a bird's-eye view image of the vehicle C viewed from above. Since it is a camera for this purpose, the range captured by the peripheral camera 60 is the periphery of the vehicle C. As shown in FIG. In other words, the imaging range of the peripheral camera 60 is closer to the vehicle C than the imaging range of the front camera 40 .
- FIG. 3 is a diagram for explaining the imaging range of the peripheral camera 60.
- the front peripheral camera 60F, the left peripheral camera 60L, the right peripheral camera 60R, and the rear peripheral camera 60B all have wide-angle fields of view. Therefore, the imaging range 61F of the front peripheral camera 60F, the imaging range 61L of the left peripheral camera 60L, the imaging range 61R of the right peripheral camera 60R, and the imaging range 61B of the rear peripheral camera 60B all correspond to the body of the vehicle C or its body. including the vicinity. Also, the shooting ranges 61F, 61L, 61R, and 61B partially overlap with two adjacent shooting ranges. Since the images of such photographing ranges 61F, 61L, 61R, and 61B are photographed, a bird's-eye view image can be created by subjecting the images photographed by the four peripheral cameras 60 to coordinate transformation.
- the front-side millimeter-wave radar 50 and the peripheral camera 60 are second sensor units that operate by being supplied with power from the second power supply unit 22 .
- the ECU 70 has two SoCs (System-on-a-chip) 71 and 72 .
- SoC 71 is a first control device
- SoC 72 is a second control device, each having a processor.
- SoCs 71 and 72 are configurations including processors, nonvolatile memories, RAMs, and bus lines connecting these configurations.
- the nonvolatile memory stores a vehicle control program executed by the processor.
- the SoCs 71 and 72 can each execute abnormal control, which will be described later, by the processor executing the program stored in the non-volatile memory while using the temporary storage function of the RAM.
- the SoC 71 and SoC 72 can also execute normal automatic operation control, which will be described later. Execution of these controls means execution of the vehicle control method corresponding to the program.
- the SoC 71 and SoC 72 are capable of executing the same control, but the power supplies are different from each other.
- the SoC 71 operates by being supplied with power from the first power supply unit 21 .
- the SoC 72 operates by receiving power from the second power supply unit 22 .
- Normal automatic operation control executed by the SoCs 71 and 72 will be described. Normal automatic operation control is executed by one of the SoC 71 and the SoC 72, which is set in advance. Below, it demonstrates that SoC71 performs automatic operation control at the time of normal.
- the normal automatic operation control is a control that is executed when the vehicle C is under automatic operation control and the SoC 71 has not detected an abnormality. Further, it is assumed that automatic driving control is control at automatic driving level 3.
- Fig. 4 shows the normal automatic operation control as a flow chart. Only S1 is executed by SoC 71 and SoC 72 together. SoCs 71 and 72 determine whether or not an abnormality has been detected. Targets for abnormality determination are the first power supply unit 21, the second power supply unit 22, the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, the peripheral camera 60, the SoC 71, and the SoC 72.
- Either the SoC 71 or 72 can determine whether the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, and the peripheral camera 60 are abnormal. Either the SoC 71 or 72 may determine whether the first power supply unit 21 or the second power supply unit 22 is abnormal. However, the SoC 72 that does not receive power supply from the first power supply unit 21 determines whether the first power supply unit 21 is abnormal, and the SoC 71 that does not receive power supply from the second power supply unit 22 determines whether the second power supply unit 22 is abnormal. It is preferable to determine whether The SoC 72 determines whether the SoC 71 is abnormal, and the SoC 71 determines whether the SoC 72 is abnormal.
- the power supply units 21 and 22 are abnormal means that the voltage within the specified range is not input. If disconnection, failure of the power supply units 21 and 22, or the like occurs, the voltage input to the ECU 70 falls below the prescribed range. Also, when a high voltage exceeding the specified range is input to the ECU 70, it is assumed that the power supply units 21 and 22 are abnormal. Whether or not front millimeter wave radar 30, front camera 40, front side millimeter wave radar 50, and peripheral camera 60 are abnormal is determined, for example, from the level of signals obtained from them. Of the SoCs 71 and 72, the side that is not executing normal automatic operation control is in a situation where control is not being executed, so the determination of whether there is an abnormality may be omitted.
- the SoC 71 advances the process to S2.
- the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, and the peripheral camera 60 are controlled to acquire sensor signals from these sensors.
- the detection results regarding the forward obstacle are determined for each sensor. Also, lateral position information is determined for each sensor.
- the detection result regarding the forward obstacle includes the presence or absence of the forward obstacle and the position of the forward obstacle (in other words, the distance to the forward obstacle). Further, the size of the forward obstacle and the type of the forward obstacle may be included in the forward obstacle detection result.
- sensors used to detect forward obstacles are the front millimeter wave radar 30 and the front side millimeter wave radar 50 .
- the SoC 71 determines the detection result regarding the forward obstacle based on the sensor signals acquired from the front millimeter wave radar 30 and the front lateral millimeter wave radar 50 .
- the lateral position information is information regarding the position of the vehicle C in the road width direction.
- An example of the lateral position information is a lane boundary existing on the side of the vehicle C.
- sensors used to detect lateral position information are the front camera 40 and the peripheral camera 60 .
- the front camera 40 and the peripheral camera 60 can capture an image including the lane boundary existing on the side of the vehicle C.
- the SoC 71 detects lane markings 8 or road edges from images captured by the front camera 40 or the peripheral camera 60 by image processing.
- the detection result and lateral position information regarding the forward obstacle are obtained from the first sensor section and the second sensor section, respectively. Therefore, integration processing is executed in S4 and S5.
- the process executed in S4 is the vertical integration process
- the process executed in S5 is the horizontal integration process.
- the detection results regarding the forward obstacle determined for each sensor in S3 are integrated. For example, the position of the forward obstacle is determined by simple averaging or weighted averaging the positions of the forward obstacle determined for each sensor.
- the lateral position information determined for each sensor in S3 is integrated.
- the position of the forward obstacle is determined by simple averaging or weighted averaging the lane boundary positions determined for each sensor.
- the integration processing of S4 and S5 is sometimes called sensor fusion.
- the SoC 71 also calculates the distance in the road width direction from the vehicle C to the lane boundary. Since the front camera 40 and peripheral camera 60 have fixed installation positions and fixed fields of view, there is a one-to-one correspondence between road surface positions corresponding to arbitrary positions on the image. Therefore, if it is possible to determine where the lane boundary exists in the image captured by the front camera 40 or the peripheral camera 60, the distance in the road width direction from the vehicle C to the lane boundary can be calculated.
- the vertical and horizontal movements of vehicle C are determined.
- the longitudinal movement of the vehicle C is meant to determine its speed.
- the lateral movement of vehicle C is meant to determine the steering angle of vehicle C.
- SoC 71 may decide to slow vehicle C when the distance to a forward obstacle decreases.
- the SoC 71 may also decide to change the steering angle to follow the shape of the lane markings 8 .
- the SoC 71 can use various information such as route information to the destination in addition to the detection result and lateral position information regarding the forward obstacle. Then, the SoC 71 may decide to steer to change lanes when the distance to the forward obstacle becomes short or for a left or right turn.
- FIG. 5 shows the abnormal control.
- information requesting the driver to take over driving is output. This information may be images, sounds, or both. For example, a message requesting to take over driving is displayed on a display arranged at a position where the driver of vehicle C can visually recognize.
- limit control is performed with normal components.
- the restriction control is control for continuing the automatic control of the vehicle C without using the configuration in which the abnormality was detected in the process of S1.
- the component to which power is supplied from the power supply units 21 and 22 in which the abnormality is detected is not used either.
- the SoC 72, not the SoC 71 that receives power supply from the first power supply unit 21, executes limit control.
- limit control there are one or more fewer configurations that can be used compared to normal times. Therefore, limit control is less reliable than normal automatic operation control. Therefore, the limit control executes control that is more limited than the normal automatic operation control.
- functions can be restricted, such as prohibiting lane changes. If the lane change is prohibited, the lane keeping control is continued. It is also possible to limit the upper speed limit for automatic operation. It is also possible to limit the amount of time that automatic driving is allowed.
- the restriction control controls both the longitudinal direction and the lateral direction of the vehicle C to prevent contact with an obstacle in front and also to deviate from the lane in which it is traveling. It is possible to control the vehicle without A front millimeter-wave radar 30 and a front camera 40 are provided as a first sensor section that receives power from the first power supply section 21, and a front side millimeter-wave radar 50 and peripheral sensors are provided as a second sensor section that receives power supply from the first power supply section 21. A camera 60 is provided. Therefore, even if one of these sensors becomes abnormal, or even if either the first power supply section 21 or the second power supply section 22 becomes abnormal, vertical and horizontal control can be continued. be.
- the take-over time may be a fixed time, or a time that varies depending on the configuration that caused the abnormality, the type of road on which the vehicle is traveling, or the like.
- An example takeover time is, for example, 15 seconds. If the judgment result of S13 is NO, it will progress to S14.
- the handover completion condition can be the fact that the driver's grip on the steering wheel with both hands can be detected by an in-vehicle camera or the like.
- the condition for completion of handover may be detection that the driver has pressed a handover completion button prepared in advance.
- S13 determines whether the takeover time has elapsed during the limit control. If the determination in S13 is YES, that is, if the takeover time has elapsed during the limit control, the process proceeds to S16.
- the vehicle C is brought to an emergency stop. Even if the takeover time has not passed, the vehicle C may be brought to an emergency stop when an abnormality occurs in a part of the configuration.
- the front millimeter wave radar 30, the front camera 40, and the SoC 71 are connected to the first power supply unit 21, and the front side millimeter wave radar 50, the peripheral camera 60, and the SoC 72 are connected to the second power supply unit 22. are connected.
- both the longitudinal and lateral directions of the vehicle C are controlled to allow the vehicle to continue running.
- the front millimeter wave radar 30, the front camera 40, the SoC 71, and the first power supply unit 21 can be controlled in both the longitudinal direction and the lateral direction as the limit control (S12), and the vehicle can continue running.
- the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, the peripheral camera 60, the first power supply unit 21, and the second power supply unit 22 are all normal, all the sensors are used for high accuracy detection. normal automatic operation control can be performed.
- the vehicle device 10 of the present embodiment is based on normal automatic driving control using all of the front millimeter wave radar 30, the front camera 40, the front side millimeter wave radar 50, and the peripheral camera 60.
- Limit control also uses the same sensor as normal automatic operation control. Therefore, while suppressing an increase in the number of components, the vehicle can continue to run by controlling both the vertical and horizontal directions even in the event of an abnormality.
- the vehicle device 10 includes a forward millimeter wave radar 30 and a forward camera 40 as first sensor units.
- the forward millimeter-wave radar 30 and the forward camera 40 are both front-system sensors, and are equipped for vehicle-to-vehicle distance control and lane keeping control even in vehicles that do not perform automatic driving level 3. Therefore, according to the configuration in which the front millimeter-wave radar 30 and the front camera 40 are used as the first sensor section, it becomes easy to add the second sensor section later and add the components constituting the vehicle device 10. .
- FIG. 6 shows sensors that can be used for the first sensor section or the second sensor section, including the sensors described in the first embodiment.
- the sensors with checkmarks for longitudinal control that is, V1 to V3 and VH
- the sensors with checkmarks for lateral control that is, H1 to H3 and VH
- the sensors with checkmarks for lateral control are sensors capable of detecting information necessary for lateral control of the vehicle C.
- the front millimeter wave radar 30 on the first line and the front side millimeter wave radar 50 on the second line have already been described in the first embodiment. These are sensors capable of detecting information necessary for longitudinal control of the vehicle C.
- FIG. The third line shows the Lidar 80 as a sensor capable of detecting information necessary for controlling the vehicle C in the longitudinal direction.
- FIG. 7 exemplifies the mounting position of the lidar 80 .
- the lidar 80 is mounted at the front end of the vehicle C and at the center in the width direction.
- the position of the lidar 80 is not limited to the position shown in FIG.
- the field of view of the lidar 80 may be the same field of view as the forward millimeter wave radar 30 .
- the field of view of the lidar 80 may be wider than the field of view of the front millimeter wave radar 30 , for example, the same field of view as the front camera 40 .
- the lidar 80 detects the position of an object by irradiating a field of view with laser light and receiving the reflected light of the laser light.
- the front camera 40 on the fourth line and the peripheral camera 60 on the fifth line in FIG. 6 have already been described in the first embodiment. These have been described as sensors capable of detecting information necessary for lateral control of the vehicle C.
- FIG. 1 The front camera 40 on the fourth line and the peripheral camera 60 on the fifth line in FIG. 6 have already been described in the first embodiment. These have been described as sensors capable of detecting information necessary for lateral control of the vehicle C.
- FIG. 1 The front camera 40 on the fourth line and the peripheral camera 60 on the fifth line in FIG. 6
- the sixth line shows the position detection sensor 90 as a sensor capable of detecting information necessary for controlling the vehicle C in the lateral direction.
- Position detection sensor 90 is used with map 91 .
- the position detection sensor 90 and the map 91 are illustrated in FIG.
- the position detection sensor 90 detects the current position of the vehicle C.
- a GNSS receiver is a specific example of the position detection sensor 90 .
- the position detection sensor 90 may be configured to sequentially detect the moving direction and moving distance of the vehicle C using an inertial sensor.
- the position detection sensor 90 may be configured by combining a GNSS receiver and an inertial sensor.
- the map 91 is digital map data that is stored in a predetermined storage memory and describes a road map that includes lane positions. All the digital map data may be stored in advance in the storage memory, or the data of the area determined by the current position of the vehicle C may be sequentially downloaded and stored.
- the ECU 70 functions as a position detection processing section 92 .
- the position detection processing unit 92 acquires a signal from the position detection sensor 90 and determines coordinates indicating the position of the vehicle C.
- FIG. Coordinates contain (x,y) information. Also, the coordinates may include height information.
- the position detection processing unit 92 uses the coordinates and the map 91 to sequentially determine the road width direction distance, which is the distance in the road width direction between the vehicle C and the road boundary closest to the vehicle C.
- Coordinates are an example of lateral position information because they contain (x, y) information. Using the lane positions contained in the map 91 along with the coordinates, the road width distance can be determined.
- the front camera 40 is shown on the 7th line in addition to the 4th line. However, in line 7, the distance detection processing unit 93 shown in FIG. 7 is used together with the front camera 40 . This allows both longitudinal and lateral control as shown in FIG.
- the distance detection processing unit 93 acquires image data captured by the front camera 40, which is a monocular camera, and calculates the distance to an object in the image from the image data. For example, the distance to the object is calculated using the fact that the shape of the blur differs before and after the focus position in the captured image. Also, for an object whose size can be specified or estimated, such as a vehicle, the distance can be calculated from the size shown in the image. Therefore, the distance to the forward obstacle can also be calculated, and longitudinal control becomes possible.
- FIG. 8 shows a sensor combination pattern that can be realized by the first sensor unit and the second sensor unit.
- the alphanumeric characters described in the "combination” column correspond to the alphanumeric characters shown in FIG.
- Each of the four or three sensors shown in “combination” includes two V's and two H's.
- the sensors shown in the "combination” are distributed to the first sensor section and the second sensor section such that one each of V and H is included.
- the first power supply unit 21 and SoC 71 are described in the row below the first sensor unit because power is supplied to the first sensor unit from the first power supply unit 21 and the SoC 71 is also the first power supply unit. It means that power is supplied from the power supply unit 21 .
- the second power supply unit 22 and SoC 72 are described in the row below the second sensor unit because power is supplied to the second sensor unit from the second power supply unit 22, and the SoC 72 is also supplied from the second power supply unit 22. Means that power is supplied.
- both the first sensor section and the second sensor section can be used to perform highly accurate normal automatic operation control.
- the first sensor unit includes the front side millimeter wave radar 50 and the front camera 40, and the second sensor unit includes the front millimeter wave radar 30 and the peripheral camera 60. Combining these will result in the same combination of sensors as in the first embodiment. Therefore, the combination in the second row of pattern 1 can perform the same normal automatic operation control as in the first embodiment.
- the first sensor unit includes the front side millimeter wave radar 50 and the front camera 40
- the second sensor unit includes the lidar 80, the position detection sensor 90 and the map 91.
- the first sensor section is the same as the first sensor section of the first embodiment. Therefore, it becomes easy to add the second sensor unit later and add a configuration that configures the vehicle device 10 .
- the first sensor unit since the first sensor unit has the front millimeter wave radar 30 and the second sensor unit has the lidar 80, the front millimeter wave radar 30 and the lidar 80 are used in normal automatic operation control. High-precision longitudinal control becomes possible.
- the second row of pattern 2 is the same as the first row of pattern 2 when the first sensor unit and the second sensor unit are combined. Therefore, as in the first line of Pattern 2, highly accurate longitudinal control using the forward millimeter wave radar 30 and the Lidar 80 is possible in normal automatic operation control.
- the first sensor unit includes the front side millimeter wave radar 50 and the front camera 40
- the second sensor unit includes the lidar 80 and the peripheral camera 60.
- the first sensor section is the same as the first sensor section of the first embodiment. Therefore, it becomes easy to add the second sensor unit later and add a configuration that configures the vehicle device 10 . Further, in the normal automatic operation control, highly accurate longitudinal control using the front millimeter wave radar 30 and the lidar 80 becomes possible.
- the second row of pattern 3 is the same as the first row of pattern 3 when the first sensor unit and the second sensor unit are combined. Therefore, even with this pattern, high-precision longitudinal control using the front millimeter-wave radar 30 and the lidar 80 is possible in normal automatic operation control.
- the first sensor unit is configured with the front camera 40 and the distance detection processing unit 93
- the second sensor unit is configured with the Lidar 80, the position detection sensor 90, and the map 91.
- the first sensor unit is configured with the front camera 40 and the distance detection processing unit 93
- the second sensor unit is also configured with the front camera 40 and the distance detection processing unit 93.
- both are VH.
- VH1 and VH2 they are indicated as VH1 and VH2 to indicate that they are different components.
- the front camera 40 included in the first sensor section is a first front camera
- the front camera 40 included in the second sensor section is a second front camera.
- Pattern 6 is a configuration in which the first sensor unit includes the front camera 40 and the distance detection processing unit 93 , and a configuration in which the second sensor unit includes the front side millimeter wave radar 50 and the peripheral camera 60 .
- the first sensor section includes the front and side millimeter wave radar 50 and the front camera 40
- the second sensor section includes the front and side millimeter wave radar 50, the position detection sensor 90, and the map 91. be.
- the first sensor section is the same as the first sensor section of the first embodiment. Therefore, it becomes easy to add the second sensor unit later and add a configuration that configures the vehicle device 10 .
- the first sensor unit includes the front side millimeter wave radar 50 and the front camera 40, and the second sensor unit includes the front millimeter wave radar 30, the position detection sensor 90 and the map 91.
- the second row of pattern 7 is the same as the first row of pattern 7 when the first sensor section and the second sensor section are combined.
- both SoC 71 and SoC 72 are capable of executing normal automatic operation control.
- only one of the SoC 71 and SoC 72 may be capable of executing normal automatic operation control.
- ⁇ Modification 2> when no abnormality is detected (S1: NO), vertical integration processing (S4) and horizontal integration processing (S5) are executed. However, either one of S4 and S5 may be omitted, and only one of the vertical integration process and the horizontal integration process may be executed.
- SoCs 71 and 72 described in the present disclosure are controllers described below.
- This controller and its techniques may be implemented by a special purpose computer comprising a processor programmed to perform one or more functions embodied by a computer program.
- the controller and techniques described in this disclosure may be implemented by dedicated hardware logic circuitry.
- the controller and techniques described in this disclosure may be implemented by one or more dedicated computers configured by a combination of a processor executing a computer program and one or more hardware logic circuits.
- Hardware logic circuits are, for example, ASICs and FPGAs.
- the storage medium for storing the computer program is not limited to the ROM, and may be stored in a computer-readable, non-transitional tangible recording medium as instructions executed by the computer.
- the program may be stored in a flash memory.
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Human Computer Interaction (AREA)
- Electromagnetism (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
車両用装置は、第1電源部(21)と、第2電源部(22)と、第1電源部(21)から電力が供給されて作動し、車両の前方障害物を検出するとともに車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部(30、40)と、第1電源部(21)から電力が供給されて作動し、第1センサ部の検出結果をもとに車両を制御するSoC(71)と、第2電源部(22)から電力が供給されて作動し、前方障害物を検出するとともに横位置情報を検出する第2センサ部(50、60)と、第2電源部(22)から電力が供給されて作動し、第2センサ部の検出結果をもとに車両を制御するSoC(72)とを備える。
Description
この出願は、2021年7月9日に日本に出願された特許出願第2021-114258号を基礎としており、基礎の出願の内容を、全体的に、参照により援用している。
車両用装置および車両制御方法に関する。
車両を制御する装置が種々知られている。特許文献1には、複数のセンサからのセンサ情報を統合する統合部を備え、かつ、この統合部の異常を判断する装置が開示されている。また、特許文献1には、統合部の信頼性を冗長化により担保することも開示されている。
統合部あるいは統合部が統合するセンサを冗長化することにより、どこかの構成に以上が生じても車両制御を継続できる可能性が高められる。しかし、冗長化することで、同じ精度で車両制御を行うための構成要素が増加する恐れがある。
本開示は、この事情に基づいて成されたものであり、その目的とするところは、構成要素の増加を抑制しつつ、センサ等が異常時になった場合にも車両走行を続けることができる車両用装置および車両制御方法を提供することにある。
上記目的は独立請求項に記載の特徴の組み合わせにより達成され、また、下位請求項は更なる有利な具体例を規定する。請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的態様との対応関係を示すものであって、開示した技術的範囲を限定するものではない。
上記目的を達成するための車両用装置に係る1つの開示は、
車両で用いられる車両用装置であって、
第1電源部と、
第2電源部と、
第1電源部から電力が供給されて作動し、車両の前方障害物を検出するとともに車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、
第1電源部から電力が供給されて作動し、第1センサ部の検出結果をもとに車両を制御する第1制御装置と、
第2電源部から電力が供給されて作動し、前方障害物を検出するとともに横位置情報を検出する第2センサ部と、
第2電源部から電力が供給されて作動し、第2センサ部の検出結果をもとに車両を制御する第2制御装置と、を備えた車両用装置である。
車両で用いられる車両用装置であって、
第1電源部と、
第2電源部と、
第1電源部から電力が供給されて作動し、車両の前方障害物を検出するとともに車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、
第1電源部から電力が供給されて作動し、第1センサ部の検出結果をもとに車両を制御する第1制御装置と、
第2電源部から電力が供給されて作動し、前方障害物を検出するとともに横位置情報を検出する第2センサ部と、
第2電源部から電力が供給されて作動し、第2センサ部の検出結果をもとに車両を制御する第2制御装置と、を備えた車両用装置である。
この車両用装置によれば、以下に示す車両制御方法が可能である。この車両制御方法は、
第1電源部と、第2電源部と、第1電源部から電力が供給されて作動し、車両の前方障害物を検出するとともに車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、第2電源部から電力が供給されて作動し、前方障害物を検出するとともに横位置情報を検出する第2センサ部とが搭載された車両において、プロセッサにより実行される車両制御方法であって、
第1電源部、第1センサ部、第2電源部および第2センサ部が正常である場合、第1センサ部および第2センサ部からそれぞれ前方障害物に関する検出結果を取得して、前方障害物に関する検出結果を統合する縦方向統合処理と、第1センサ部および第2センサ部からそれぞれ横位置情報を取得して、横位置情報を統合する横方向統合処理のいずれか少なくとも一方を実行し、
第2電源部および第2センサ部の少なくとも一方が異常であることを検出した場合、第2センサ部は用いず、第1センサ部を用いて、異常であることを検出していない場合に実行する正常時自動運転制御よりも制限されているが、前方障害物と横位置情報を検出しつつ車両を走行させる車両制御である制限制御を実行し、
第1電源部および第1センサ部の少なくとも一方が異常であることを検出した場合、第1センサ部は用いず、第2センサ部を用いて、制限制御を実行する、車両制御方法である。
第1電源部と、第2電源部と、第1電源部から電力が供給されて作動し、車両の前方障害物を検出するとともに車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、第2電源部から電力が供給されて作動し、前方障害物を検出するとともに横位置情報を検出する第2センサ部とが搭載された車両において、プロセッサにより実行される車両制御方法であって、
第1電源部、第1センサ部、第2電源部および第2センサ部が正常である場合、第1センサ部および第2センサ部からそれぞれ前方障害物に関する検出結果を取得して、前方障害物に関する検出結果を統合する縦方向統合処理と、第1センサ部および第2センサ部からそれぞれ横位置情報を取得して、横位置情報を統合する横方向統合処理のいずれか少なくとも一方を実行し、
第2電源部および第2センサ部の少なくとも一方が異常であることを検出した場合、第2センサ部は用いず、第1センサ部を用いて、異常であることを検出していない場合に実行する正常時自動運転制御よりも制限されているが、前方障害物と横位置情報を検出しつつ車両を走行させる車両制御である制限制御を実行し、
第1電源部および第1センサ部の少なくとも一方が異常であることを検出した場合、第1センサ部は用いず、第2センサ部を用いて、制限制御を実行する、車両制御方法である。
この車両制御方法によれば、第1センサ部、第1制御装置、第1電源部のいずれか1つ以上が異常になったとしても、第2センサ部、第2制御装置、第2電源部により、前方障害物と横位置情報を検出しつつ車両走行を継続する制限制御を実行できる。また、第2センサ部、第2制御装置、第2電源部のいずれか1つ以上が異常になったとしても、第1センサ部、第1制御装置、第1電源部により、制限制御を実行できる。
加えて、第1センサ部、第2センサ部、第1電源部、第2電源部が正常であれば、第1センサ部の検出結果と第2センサ部の検出結果を統合する縦方向統合処理と横方向統合処理の少なくとも一方を実行するので、高精度な車両制御を行うこともできる。この車両制御方法は、異常時の車両走行にも、第1センサ部、第2センサ部のいずれかを使う。したがって、構成要素の増加を抑制しつつ、異常時にも車両走行を続けることができる。
<第1実施形態>
以下、実施形態を図面に基づいて説明する。図1は、第1実施形態の車両用装置10の構成を示す図である。車両用装置10は図2に示す車両Cに搭載される。車両用装置10は、車両Cの操舵および速度の一方または両方を、少なくとも一時的に運転者の操作を必要としないで制御する。
以下、実施形態を図面に基づいて説明する。図1は、第1実施形態の車両用装置10の構成を示す図である。車両用装置10は図2に示す車両Cに搭載される。車両用装置10は、車両Cの操舵および速度の一方または両方を、少なくとも一時的に運転者の操作を必要としないで制御する。
車両用装置10は、自動運転レベル3の自動運転を実行できる。自動運転レベル3では、限定条件下で装置がすべての運転操作を行う。ただし、緊急時には、運転者が運転操作を行う。車両用装置10は、自動運転レベル3以外の自動運転レベル、自動運転レベル1、2、4などを実行できるようになっていてもよい。また、車両用装置10が機能しない状態、すなわち、自動運転レベル0でも車両Cは走行できる。
車両用装置10は、第1電源部21と第2電源部22の2つの電源部、車両Cの周辺の状況を検出するために複数のセンサ、ECU70を備える。第1電源部21と第2電源部22は、互いに独立した電源部である。第1電源部21と第2電源部22は、いずれも、車両Cに搭載された発電機により発電された電力により充電可能である。第1電源部21と第2電源部22は、鉛蓄電池、ニッケル水素二次電池、リチウムイオン二次電池など、種々の材料を用いた電池を採用できる。
車両Cの周辺の状況を検出するために複数のセンサは、具体的には、第1実施形態の車両用装置10では、前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60である。
前方ミリ波レーダ30は、ミリ波を送信波として視野範囲に照射しつつ、その送信波が物体に反射して生じた反射波を受信する。前方ミリ波レーダ30は、送受信の時間差と送信波の照射方向をもとに、車両Cから外部の物体までの位置と方向とを検出する。前方ミリ波レーダ30の視野範囲は車両Cの前方を含んでおり、前方ミリ波レーダ30は、車両Cの前方に存在する前方障害物を検出する。障害物には、静止物と移動物とが含まれる。移動物の一例は、車両Cと同じ車線を走行する前方車両である。前方ミリ波レーダ30の取り付け位置は、たとえば、車両Cの前端であって車幅方向の中央である。前方ミリ波レーダ30の視野角の一例は、車両Cの正面を0度とし、±60度程度である。
前方カメラ40は、車両Cの前方を撮影する単眼カメラである。本実施形態において、前方カメラ40は、車線境界を検出するために用いる。車線境界は車線の境界を定めるものである。車線境界の一例は、図2に示す車線区画線8である。車線区画線8が存在しない道路では道路端が道路境界になる。前方カメラ40の設置位置は、図2に示すように、たとえば、車両Cの車室内であって屋根前端付近である。前方カメラ40の視野は、車両Cの近傍において車線区画線8を検出できるように、100°あるいはそれ以上の広い視野が好ましい。ただし、車線区画線8は、車両Cに沿って前にも延びるので、100°よりも狭い視野であってもよい。
これら前方ミリ波レーダ30と前方カメラ40は、第1電源部21から電力が供給されて作動する第1センサ部である。
前側方ミリ波レーダ50は、左前側方ミリ波レーダ50Lと右前側方ミリ波レーダ50Rを含む。これら左前側方ミリ波レーダ50Lと右前側方ミリ波レーダ50Rは、車両Cの左側方および右側方に存在する障害物を検出するためのレーダである。左前側方ミリ波レーダ50Lは車両Cの左前端に設置され、右前側方ミリ波レーダ50Rは車両Cの右前端に設置される。車両Cの側方は、広い範囲に渡り障害物を検出する必要がある。そのため、左前側方ミリ波レーダ50Lおよび右前側方ミリ波レーダ50Rは、前方ミリ波レーダ30よりも視野が広角である。図2に、左前側方ミリ波レーダ50L、右前側方ミリ波レーダ50Rの視野51L、51Rを例示している。左前側方ミリ波レーダ50L、右前側方ミリ波レーダ50Rはそれぞれ、車両Cの斜め前を視野正面としている。
前側方ミリ波レーダ50は、前方ミリ波レーダ30と同様、ミリ波の送受信の時間差と送信波の照射方向をもとに、車両Cから外部の物体までの位置と方向とを検出する。
左前側方ミリ波レーダ50Lおよび右前側方ミリ波レーダ50Rの視野51L、51Rは広いので、2つの視野51L、51Rを組み合わせた視野は、車両Cの正面も含む視野となる。視野51L、51Rを具体的に例示すると、左前側方ミリ波レーダ50Lおよび右前側方ミリ波レーダ50Rの正面方向を中心として±60°である。
周辺カメラ60は、前方周辺カメラ60F、左側方周辺カメラ60L、右側方周辺カメラ60R、後方周辺カメラ60Bを含む。前方周辺カメラ60Fは車両Cの前端であって車幅方向の中央に設置されている。左側方周辺カメラ60Lは車両Cの左ドアミラーの下面に設置されている。右側方周辺カメラ60Rは車両Cの右ドアミラーの下面に設置されている。後方周辺カメラ60Bは車両Cの後端であって車幅方向の中央に設置されている。
4つの周辺カメラ60は、これら4つの周辺カメラ60が撮影した画像を座標変換して、車両Cを上方から見た鳥瞰画像を作成する目的で備えられている。この目的のためのカメラであるので、周辺カメラ60が撮影する範囲は車両Cの周辺である。換言すれば、周辺カメラ60の撮影範囲は、前方カメラ40の撮影範囲よりも車両Cに近い範囲である。
図3は、周辺カメラ60の撮影範囲を説明する図である。前方周辺カメラ60F、左側方周辺カメラ60L、右側方周辺カメラ60R、後方周辺カメラ60Bは、いずれも視野が広角である。そのため、前方周辺カメラ60Fの撮影範囲61F、左側方周辺カメラ60Lの撮影範囲61L、右側方周辺カメラ60Rの撮影範囲61R、後方周辺カメラ60Bの撮影範囲61Bは、いずれも、車両Cのボディあるいはその付近を含んでいる。また、撮影範囲61F、61L、61R、61Bは、隣接する2つの撮影範囲と一部重なる。このような撮影範囲61F、61L、61R、61Bの画像が撮影されるので、4つの周辺カメラ60が撮影する画像を座標変換することで鳥瞰画像が作成できる。
前側方ミリ波レーダ50と周辺カメラ60は、第2電源部22から電力が供給されて作動する第2センサ部である。
ECU70は、2つのSoC(System-on-a-chip)71、72を備えている。SoC71は第1制御装置であり、SoC72は第2制御装置であり、それぞれプロセッサを備えた構成である。たとえば、SoC71、72は、プロセッサ、不揮発性メモリ、RAMおよびこれらの構成を接続するバスラインなどを備えた構成である。不揮発性メモリには、プロセッサが実行する車両制御プログラムが格納されている。プロセッサが、RAMの一時記憶機能を利用しつつ、不揮発性メモリに記憶されたプログラムを実行することで、SoC71、72は、それぞれ後述する異常時制御を実行できる。また、SoC71およびSoC72は、後述する正常時自動運転制御も実行できる。これらの制御が実行されることは、プログラムに対応する車両制御方法が実行されることを意味する。
このように、SoC71とSoC72は、同じ制御を実行できるようになっているが、電源は互いに異なる。SoC71は第1電源部21から電力が供給されて作動する。SoC72は第2電源部22から電力が供給されて作動する。
〔正常時自動運転制御〕
次に、SoC71、72が実行する正常時自動運転制御を説明する。正常時自動運転制御はSoC71とSoC72のいずれか事前に設定されている一方が実行する。以下では、SoC71が正常時自動運転制御を実行するとして説明する。正常時自動運転制御は、車両Cが自動運転制御されているときであって、SoC71が異常を検出していないときに実行する制御である。また、自動運転制御は、自動運転レベル3での制御であるとする。
次に、SoC71、72が実行する正常時自動運転制御を説明する。正常時自動運転制御はSoC71とSoC72のいずれか事前に設定されている一方が実行する。以下では、SoC71が正常時自動運転制御を実行するとして説明する。正常時自動運転制御は、車両Cが自動運転制御されているときであって、SoC71が異常を検出していないときに実行する制御である。また、自動運転制御は、自動運転レベル3での制御であるとする。
図4に、正常時自動運転制御をフローチャートにして示す。S1のみ、SoC71とSoC72がともに実行する。SoC71、72は、異常を検出したか否かを判断する。異常を判断する対象は、第1電源部21、第2電源部22、前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60、SoC71、およびSoC72である。
前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60が異常であるかどうかは、SoC71、72のどちらが判断してもよい。第1電源部21、第2電源部22が異常であるかどうかも、SoC71、72のどちらが判断してもよい。ただし、第1電源部21から電力供給を受けないSoC72が、第1電源部21が異常かどうかを判断し、第2電源部22から電力供給を受けないSoC71が、第2電源部22が異常かどうかを判断することが好ましい。SoC71が異常であるかどうかはSoC72が判断し、SoC72が異常であるかどうかはSoC71が判断する。
電源部21、22が異常であるとは、規定された範囲の電圧が入力されないことを意味する。断線、電源部21、22の故障等が生じると、ECU70に入力される規定された範囲以下の電圧になる。また、規定された範囲を超えた高い電圧がECU70に入力される場合も、電源部21、22が異常であるとする。前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60が異常であるかどうかは、たとえば、それらから取得する信号のレベル等から判断する。なお、SoC71、72のうち、正常時自動運転制御を実行していない側については、制御を実行していない状況であるので、異常であるかどうかの判断を省略してもよい。
S1の判断結果がNOであれば、SoC71は処理をS2に進める。S2では、前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60を制御して、これらのセンサからセンサ信号を取得する。
続くS3では、S2で取得したセンサ信号をもとに、センサ別に、前方障害物に関する検出結果を決定する。また、センサ別に横位置情報を決定する。前方障害物に関する検出結果は、前方障害物の有無、前方障害物の位置(換言すれば前方障害物までの距離)を含む。また、前方障害物の大きさ、前方障害物の種類が、前方障害物の検出結果に含まれてもよい。本実施形態において、前方障害物を検出するために用いるセンサは、前方ミリ波レーダ30、前側方ミリ波レーダ50である。SoC71は、これら前方ミリ波レーダ30、前側方ミリ波レーダ50から取得するセンサ信号をもとに、前方障害物に関する検出結果を決定する。
横位置情報は、車両Cの道路幅方向における位置に関する情報である。横位置情報の一例は、車両Cの側方に存在する車線境界である。なお、ここでの側方には、真横だけでなく、斜め側方も含まれる。本実施形態において、横位置情報を検出するために用いるセンサは、前方カメラ40と周辺カメラ60である。これら前方カメラ40と周辺カメラ60は、車両Cの側方に存在する車線境界が含まれる画像を撮影できる。SoC71は画像処理により、前方カメラ40あるいは周辺カメラ60が撮影した画像から車線区画線8あるいは道路端を検出する。
S3を実行後はS4に進む。S4に進む場合、第1センサ部と第2センサ部から、それぞれ、前方障害物に関する検出結果と横位置情報とを取得している。そこで、S4、S5にて統合処理を実行する。S4で実行する処理は縦方向統合処理であり、S5で実行する処理は横方向統合処理である。S4では、S3でセンサ別に決定した前方障害物に関する検出結果を統合する。たとえば、センサ別に決定した前方障害物の位置を、単純平均あるいは加重平均することで、その前方障害物の位置を決定する。
S5では、S3でセンサ別に決定した横位置情報を統合する。たとえば、センサ別に決定した車線境界の位置を、単純平均あるいは加重平均することで、その前方障害物の位置を決定する。S4およびS5の統合処理は、センサフュージョンと呼ばれることもある。
また、SoC71は、車両Cから車線境界までの道路幅方向の距離を算出する。前方カメラ40および周辺カメラ60は、設置位置および視野が固定されているので、画像上の任意の位置に対応する路面位置は一対一に対応する。したがって、前方カメラ40あるいは周辺カメラ60が撮影した画像において車線境界がどこに存在するかが決定できれば、車両Cから車線境界までの道路幅方向の距離を算出できる。
S6では、S4、S5の処理結果を用い、車両Cに対する、縦方向および横方向の動きを決定する。車両Cの縦方向の動きは車両Cの速度を決定することを意味する。車両Cの横方向の動きは車両Cの操舵角を決定することを意味する。たとえば、SoC71は、前方障害物までの距離が短くなると、車両Cの速度を低下させる決定をすることがある。また、SoC71は、車線区画線8の形状に沿うように操舵角を変更する決定をすることがある。SoC71は、自動運転制御をするに際し、前方障害物に関する検出結果および横位置情報以外にも、目的地までの経路情報など種々の情報を用いることができる。そして、SoC71は、前方障害物までの距離が短くなった場合あるいは右左折のために、車線変更する操舵を決定することもある。
S7では、車両Cの加減速を制御する制御装置、および、車両Cの操舵を制御する制御装置に、S6で決定した動きを実行することを指示する。S7を実行後はS1へ戻る。
〔異常時制御〕
次に、図4のS1の判断結果がYESである場合に実行する異常時制御を説明する。図5に異常時制御を示す。S11では、運転者に運転引き継ぎを要求する情報を出力する。この情報は、画像と音の一方または両方である。たとえば、車両Cの運転者が視認できる位置に配置された表示器に、運転引き継ぎを要求するメッセージを表示する。
次に、図4のS1の判断結果がYESである場合に実行する異常時制御を説明する。図5に異常時制御を示す。S11では、運転者に運転引き継ぎを要求する情報を出力する。この情報は、画像と音の一方または両方である。たとえば、車両Cの運転者が視認できる位置に配置された表示器に、運転引き継ぎを要求するメッセージを表示する。
続くS12では、正常な構成要素で制限制御を実行する。制限制御は、S1の処理において異常を検出した構成を用いないで車両Cの自動制御を継続する制御である。電源部21、22の異常を検出した場合には、異常を検出した電源部21、22から電力が供給される構成要素も用いない。たとえば、第1電源部21が異常であることを検出した場合、前方ミリ波レーダ30、前方カメラ40も制御に用いない。また、第1電源部21が異常であることを検出した場合、第1電源部21から電力供給を受けるSoC71ではなく、SoC72が制限制御を実行する。制限制御では、第1センサ部である前方ミリ波レーダ30および前方カメラ40のいずれか一方のみが異常になった場合にも、第1センサ部全体を制御に用いないとしてもよい。同様に、制限制御では、第2センサ部である前側方ミリ波レーダ50および周辺カメラ60のいずれか一方のみが異常になった場合にも、第2センサ部全体を制御に用いないとしてもよい。制限制御による車両Cの自動運転は、縮退運転と呼ばれることもある。
制限制御は、正常時と比較すると、用いることができる構成が1つ以上少ない。そのため、制限制御は正常時自動運転制御よりも信頼性が劣る。そこで、制限制御は、正常時自動運転制御よりも制限した制御を実行する。制限の具体例として、車線変更を禁止するなど、機能を制限することができる。車線変更を禁止する場合、車線維持制御を継続することになる。また、自動運転する上限速度を制限することもできる。また、自動運転する時間を制限することもできる。
正常時自動運転制御よりも制限した制御ではあるが、制限制御は、車両Cの縦方向と横方向をともに制御して、前方障害物との接触を防止し、かつ、走行中の車線を逸脱しない車両制御は可能である。第1電源部21から電力供給を受ける第1センサ部として前方ミリ波レーダ30と前方カメラ40を備え、第1電源部21から電力供給を受ける第2センサ部として前側方ミリ波レーダ50と周辺カメラ60を備えている。そのため、これらのうちの1つのセンサが異常になっても、また、第1電源部21、第2電源部22のいずれかが異常になっても、縦方向と横方向の制御が継続できるのである。
S13では、S11にて運転者に引き継ぎを要求してからの経過時間が、事前に設定された引き継ぎ時間を経過したか否かを判断する。引き継ぎ時間は、一定時間でもよいし、異常となった構成が何であるか、または走行道路の種類などに応じて変化する時間でもよい。引き継ぎ時間の一例は、たとえば15秒である。S13の判断結果がNOであればS14に進む。
S14では、引き継ぎが完了したか否かを判断する。引き継ぎが完了したことを判断する手法は、種々の手法とすることができる。たとえば、運転者がステアリングホイールを両手で握ったことを、車内カメラ等により検出できたことを引き継ぎ完了の条件とすることができる。また、事前に用意されている引き継ぎ完了ボタンを運転者が押したことが検出されたことを、引き継ぎ完了の条件としてもよい。
S14の判断結果がYESであればS15に進む。S15では、手動制御に切り替える。したがって、制限制御は終了する。S14の判断結果がNOであればS12に戻り、制限制御を継続する。
S13の判断がYES、すなわち、制限制御中に引き継ぎ時間が経過した場合には、S16に進む。S16では、車両Cを緊急停止させる。なお、引き継ぎ時間が経過しなくても、一部の構成に異常が発生した場合には車両Cを緊急停止させてもよい。
〔実施形態のまとめ〕
以上、説明した本実施形態では、第1電源部21に、前方ミリ波レーダ30、前方カメラ40、SoC71を接続し、第2電源部22に、前側方ミリ波レーダ50、周辺カメラ60、SoC72を接続している。
以上、説明した本実施形態では、第1電源部21に、前方ミリ波レーダ30、前方カメラ40、SoC71を接続し、第2電源部22に、前側方ミリ波レーダ50、周辺カメラ60、SoC72を接続している。
したがって、前方ミリ波レーダ30、前方カメラ40、SoC71、第1電源部21のいずれか1つ以上が異常になったとしても、前側方ミリ波レーダ50、周辺カメラ60、SoC72、第2電源部22により、制限制御(S12)として車両Cの縦方向と横方向をともに制御して車両走行を継続できる。また、前側方ミリ波レーダ50、周辺カメラ60、SoC72、第2電源部22のいずれか1つ以上が異常になったとしても、前方ミリ波レーダ30、前方カメラ40、SoC71、第1電源部21により、制限制御(S12)として車両Cの縦方向と横方向をともに制御して車両走行を継続できる。
加えて、前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60、第1電源部21、第2電源部22が全部正常であれば、全部のセンサを用いて高精度な正常時自動運転制御を行うことができる。
別な言い方をすれば、本実施形態の車両用装置10は、前方ミリ波レーダ30、前方カメラ40、前側方ミリ波レーダ50、周辺カメラ60を全部用いる正常時自動運転制御を基準とすると、制限制御でも、正常時自動運転制御と同じセンサを用いる。したがって、構成要素の増加を抑制しつつ、異常時にも縦方向と横方向をともに制御して車両走行を続けることができる。
車両用装置10は、第1センサ部として前方ミリ波レーダ30と前方カメラ40を備えている。前方ミリ波レーダ30と前方カメラ40は、ともに前方系のセンサであり、自動運転レベル3を行わない車両でも、車間距離制御や車線維持制御のために装備される。したがって、これら前方ミリ波レーダ30と前方カメラ40とを第1センサ部とする構成によれば、後に第2センサ部を追加して、車両用装置10を構成する構成要素の追加が容易になる。
<その他の実施形態>
図6に、第1実施形態で説明したセンサも含め、第1センサ部または第2センサ部に使用できるセンサを示す。図6において縦方向制御にチェックマークが付与されているセンサ、すなわち、V1~V3とVHは、車両Cの縦方向制御するために必要な情報を検出できるセンサであることを意味する。図6において横方向制御にチェックマークが付与されているセンサ、すなわち、H1~H3とVHは、車両Cの横方向制御するために必要な情報を検出できるセンサであることを意味する。
図6に、第1実施形態で説明したセンサも含め、第1センサ部または第2センサ部に使用できるセンサを示す。図6において縦方向制御にチェックマークが付与されているセンサ、すなわち、V1~V3とVHは、車両Cの縦方向制御するために必要な情報を検出できるセンサであることを意味する。図6において横方向制御にチェックマークが付与されているセンサ、すなわち、H1~H3とVHは、車両Cの横方向制御するために必要な情報を検出できるセンサであることを意味する。
1行目の前方ミリ波レーダ30、2行目の前側方ミリ波レーダ50は、第1実施形態で説明済みである。これらは、車両Cの縦方向制御するために必要な情報を検出できるセンサである。3行目に、車両Cの縦方向制御するために必要な情報を検出できるセンサとしてLidar80を示している。図7にLidar80の搭載位置を例示している。図7では、Lidar80は、車両Cの前端であって幅方向中央に搭載されている。ただし、前方カメラ40の位置にLidar80が搭載されてもよいなど、Lidar80の位置は図7に示す位置に限られない。Lidar80の視野は、前方ミリ波レーダ30と同じ視野であってもよい。また、Lidar80の視野は、前方ミリ波レーダ30の視野よりも広い視野、たとえば、前方カメラ40と同じ視野であってもよい。Lidar80は、視野にレーザー光を照射して、そのレーザー光の反射光を受光することで物体の位置を検出する。
図6の4行目の前方カメラ40、5行目の周辺カメラ60も第1実施形態で説明済みである。これらは、車両Cの横方向制御するために必要な情報を検出できるセンサであるとして説明した。
6行目に、車両Cの横方向制御するために必要な情報を検出できるセンサとして位置検出センサ90を示している。位置検出センサ90は地図91とともに用いる。図7に、位置検出センサ90と地図91を図示している。位置検出センサ90は、車両Cの現在位置を検出するものである。たとえば、GNSS受信機が位置検出センサ90の具体例である。また、慣性センサにより、車両Cの移動方向および移動距離を逐次検出する構成を位置検出センサ90としてもよい。また、GNSS受信機と慣性センサとを組み合わせた構成を位置検出センサ90としてもよい。
地図91は、所定の記憶メモリに記憶されており、車線の位置を含んでいる道路地図が記述されたデジタル地図データである。記憶メモリには、全部のデジタル地図データが予め記憶されていてもよいし、車両Cの現在位置により定まる領域のデータが逐次ダウンロードされて保存されるようになっていてもよい。ECU70は、位置検出処理部92としての機能を備える。位置検出処理部92は、位置検出センサ90から信号を取得して車両Cの位置を示す座標を決定する。座標は(x、y)情報を含む。また、座標は高さ情報を含んでいてもよい。
さらに、位置検出処理部92は、その座標と地図91とを用いて、車両Cと、その車両Cに最も近い道路境界との間の道路幅方向における距離である道路幅方向距離を逐次決定する。座標は(x、y)情報を含むので、座標は横位置情報の一例である。座標とともに地図91に含まれている車線の位置を用いれば、道路幅方向距離を決定できる。
4行目に加えて7行目にも、前方カメラ40を示している。ただし、7行目では、図7に示す距離検出処理部93を前方カメラ40とともに用いる。これにより、図6に示すように縦方向制御と横方向制御の両方が可能になる。
距離検出処理部93の処理内容を説明する。距離検出処理部93は、単眼カメラである前方カメラ40が撮影した画像データを取得し、画像データから、画像に写っている物体までの距離を算出する。たとえば、撮影した画像において、ぼけの形状がピントの位置の前後で異なることを利用して、物体までの距離を算出する。また、車両など大きさを特定あるいは推定できる物体については、画像に示す大きさから距離を算出することもできる。したがって、前方障害物までの距離も算出でき、縦方向制御が可能になる。
図8に、第1センサ部、第2センサ部が実現できるセンサの組み合わせパターンを示す。図8において、「組み合わせ」の列に記載している英数字は、図6に示した英数字に対応する。「組み合わせ」に示す4つ、あるいは、3つのセンサは、それぞれVとHが2つずつ含まれている。第1センサ部と第2センサ部には、「組み合わせ」に示したセンサを、VとHがそれぞれ1つずつ含まれるように振り分けている。
図8において、第1センサ部の下の行に第1電源部21、SoC71と記載しているのは、第1センサ部には、第1電源部21から電力が供給され、SoC71も第1電源部21から電力が供給されることを意味する。第2センサ部の下の行に第2電源部22、SoC72と記載しているのは、第2センサ部には、第2電源部22から電力が供給され、SoC72も第2電源部22から電力が供給されることを意味する。
図8に示すようにセンサを組み合わせることで、第1実施形態と同様、第1センサ部、第1電源部21、SoC71のいずれか1つ以上が異常になったとしても、第2センサ部、第2電源部22、SoC72により、車両Cに対して縦方向制御と横方向制御とを継続できる。また、第2センサ部、第2電源部22、SoC72のいずれか1つ以上が異常になったとしても、第1センサ部、第1電源部21、SoC71により、車両Cに対して縦方向制御と横方向制御とを継続できる。加えて、第1センサ部と第2センサ部とが、ともに正常であれば、第1センサ部と第2センサ部とをともに用いて高精度な正常時自動運転制御を行うことができる。
パターン1の2行目は、第1センサ部が前側方ミリ波レーダ50と前方カメラ40を備え、第2センサ部が前方ミリ波レーダ30と周辺カメラ60を備える。これらを組み合わせると、第1実施形態と同じセンサの組み合わせになる。したがって、パターン1の2行目の組み合わせは、第1実施形態と同じ正常時自動運転制御ができる。
パターン2の1行目は、第1センサ部が前側方ミリ波レーダ50と前方カメラ40を備え、第2センサ部がLidar80、位置検出センサ90および地図91を備える。第1センサ部は、第1実施形態の第1センサ部と同じである。したがって、後に第2センサ部を追加して、車両用装置10を構成する構成の追加が容易になる。パターン2の1行目は、第1センサ部が前方ミリ波レーダ30を備え、第2センサ部がLidar80を備えているので、正常時自動運転制御では、前方ミリ波レーダ30とLidar80とを用いた高精度な縦方向制御が可能になる。
パターン2の2行目は、第1センサ部と第2センサ部とを組み合わせるとパターン2の1行目と同じになる。したがって、パターン2の1行目と同様、正常時自動運転制御において、前方ミリ波レーダ30とLidar80とを用いた高精度な縦方向制御が可能になる。
パターン3の1行目は、第1センサ部が前側方ミリ波レーダ50と前方カメラ40を備え、第2センサ部がLidar80と周辺カメラ60を備える。第1センサ部は、第1実施形態の第1センサ部と同じである。したがって、後に第2センサ部を追加して、車両用装置10を構成する構成の追加が容易になる。また、正常時自動運転制御では、前方ミリ波レーダ30とLidar80とを用いた高精度な縦方向制御が可能になる。
パターン3の2行目は、第1センサ部と第2センサ部とを組み合わせるとパターン3の1行目と同じになる。したがって、このパターンでも、正常時自動運転制御において、前方ミリ波レーダ30とLidar80とを用いた高精度な縦方向制御が可能になる。
パターン4は、第1センサ部が前方カメラ40と距離検出処理部93を備えた構成であり、第2センサ部がLidar80、位置検出センサ90および地図91を備えた構成である。
パターン5は、第1センサ部が前方カメラ40と距離検出処理部93を備えた構成であり、第2センサ部も前方カメラ40と距離検出処理部93を備えた構成である。図6に示す記号では、どちらもVHとなる。しかし、互いに異なる構成要素であることを示すために、図8ではVH1、VH2と記載している。第1センサ部が備える前方カメラ40は第1前方カメラであり、第2センサ部が備える前方カメラ40は第2前方カメラである。
パターン5の構成によれば、正常時自動運転制御では、2つの前方カメラ40を使うことができるので、これら2つの前方カメラ40をステレオカメラとして機能させることができる。
パターン6は、第1センサ部が前方カメラ40と距離検出処理部93を備えた構成であり、第2センサ部が前側方ミリ波レーダ50と周辺カメラ60を備えた構成である。
パターン7の1行目は、第1センサ部が前側方ミリ波レーダ50と前方カメラ40を備え、第2センサ部が前側方ミリ波レーダ50、位置検出センサ90および地図91を備えた構成である。第1センサ部は、第1実施形態の第1センサ部と同じである。したがって、後に第2センサ部を追加して、車両用装置10を構成する構成の追加が容易になる。
パターン7の2行目は、第1センサ部が前側方ミリ波レーダ50と前方カメラ40を備え、第2センサ部が前方ミリ波レーダ30、位置検出センサ90および地図91を備える。パターン7の2行目は、第1センサ部と第2センサ部とを組み合わせるとパターン7の1行目と同じになる。
以上、実施形態を説明したが、開示した技術は上述の実施形態に限定されるものではなく、次の変形例も開示した範囲に含まれ、さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施できる。
<変形例1>
実施形態では、SoC71およびSoC72が、ともに正常時自動運転制御も実行できるようになっていた。しかし、SoC71およびSoC72のいずれか一方のみが正常時自動運転制御を実行できるようになっていてもよい。
実施形態では、SoC71およびSoC72が、ともに正常時自動運転制御も実行できるようになっていた。しかし、SoC71およびSoC72のいずれか一方のみが正常時自動運転制御を実行できるようになっていてもよい。
<変形例2>
実施形態では、異常を検出していない場合(S1:NO)、縦方向統合処理(S4)と横方向統合処理(S5)を実行する。しかし、S4およびS5のいずれか一方を省略し、縦方向統合処理と横方向統合処理のいずれか一方のみを実行してもよい。
実施形態では、異常を検出していない場合(S1:NO)、縦方向統合処理(S4)と横方向統合処理(S5)を実行する。しかし、S4およびS5のいずれか一方を省略し、縦方向統合処理と横方向統合処理のいずれか一方のみを実行してもよい。
<変形例3>
S1では、電源部21、22、第1センサ部、第2センサ部が異常であるかどうかを判断することに加えて、SoC71、72が異常であるかどうかも判断していた。しかし、SoC71、72のうち、正常時自動運転制御を実行していない側については、異常であるかどうかを判断しなくてもよい。正常時自動運転制御に支障がないからである。
S1では、電源部21、22、第1センサ部、第2センサ部が異常であるかどうかを判断することに加えて、SoC71、72が異常であるかどうかも判断していた。しかし、SoC71、72のうち、正常時自動運転制御を実行していない側については、異常であるかどうかを判断しなくてもよい。正常時自動運転制御に支障がないからである。
<変形例4>
本開示に記載のSoC71、72は以下に記載の制御部である。この制御部およびその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の制御部およびその手法は、専用ハードウエア論理回路により、実現されてもよい。もしくは、本開示に記載の制御部およびその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウエア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。ハードウエア論理回路は、たとえば、ASIC、FPGAである。
本開示に記載のSoC71、72は以下に記載の制御部である。この制御部およびその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の制御部およびその手法は、専用ハードウエア論理回路により、実現されてもよい。もしくは、本開示に記載の制御部およびその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウエア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。ハードウエア論理回路は、たとえば、ASIC、FPGAである。
また、コンピュータプログラムを記憶する記憶媒体はROMに限られず、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていればよい。たとえば、フラッシュメモリに上記プログラムが記憶されていてもよい。
Claims (13)
- 車両で用いられる車両用装置であって、
第1電源部(21)と、
第2電源部(22)と、
前記第1電源部から電力が供給されて作動し、前記車両の前方障害物を検出するとともに前記車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、
前記第1電源部から電力が供給されて作動し、前記第1センサ部の検出結果をもとに前記車両を制御する第1制御装置(71)と、
前記第2電源部から電力が供給されて作動し、前記前方障害物を検出するとともに前記横位置情報を検出する第2センサ部と、
前記第2電源部から電力が供給されて作動し、前記第2センサ部の検出結果をもとに前記車両を制御する第2制御装置(72)と、
を備えた車両用装置。 - 請求項1に記載の車両用装置であって、
前記第1制御装置および前記第2制御装置の一方または両方は、
前記第1電源部、前記第1センサ部、前記第1制御装置、前記第2電源部、前記第2センサ部、および前記第2制御装置が正常である場合、前記第1センサ部および前記第2センサ部からそれぞれ前記前方障害物に関する検出結果を取得して、前記前方障害物に関する検出結果を統合する縦方向統合処理と、前記第1センサ部および前記第2センサ部からそれぞれ前記横位置情報を取得して、前記横位置情報を統合する横方向統合処理のいずれか少なくとも一方を実行する、車両用装置。 - 請求項2に記載の車両用装置であって、
前記第1制御装置は、前記第2電源部、前記第2センサ部および前記第2制御装置の少なくとも1つが異常であることを検出した場合、前記第2センサ部は用いず、前記第1センサ部を用いて、異常であることを検出していない場合に実行する正常時自動運転制御よりも制限されているが、前記前方障害物と前記横位置情報を検出しつつ前記車両を走行させる車両制御である制限制御を実行し、
前記第2制御装置は、前記第1電源部、前記第1センサ部および前記第1制御装置の少なくとも1つが異常になった場合、前記第1センサ部は用いず、前記第2センサ部を用いて、前記制限制御を実行する、車両用装置。 - 請求項1~3のいずれか1項に記載の車両用装置であって、
前記第1センサ部は、前記車両の正面を含む範囲を視野とし、ミリ波により前記前方障害物を検出する前方ミリ波レーダ(30)と、前記車両の正面から斜め側方を視野に含み、前記横位置情報である、前記車両の側方に存在する車線境界を検出する前方カメラ(40)とを備える、車両用装置。 - 請求項4に記載の車両用装置であって、
前記第2センサ部は、前記車両の側方から前記車両の前方に渡る範囲を視野に含んでおり、ミリ波により前記前方障害物を検出する前側方ミリ波レーダ(50)と、前記車両の側方かつ前記車両の周辺を視野に含み、前記車両の側方に存在する車線境界を検出する周辺カメラ(60)とを備える、車両用装置。 - 請求項4に記載の車両用装置であって、
前記第2センサ部は、前記車両の正面を含む範囲を視野とし、レーザー光により前記前方障害物を検出するLidar(80)と、前記横位置情報として前記車両の座標を検出する位置検出センサ(90)を備え、
前記第2制御装置は、前記車両が走行中の道路の車線の位置を地図データから取得し、前記車線の位置と前記第2センサ部が検出した前記車両の座標とに基づいて、前記車両と前記車線との間の道路幅方向距離を決定する、車両用装置。 - 請求項4に記載の車両用装置であって、
前記第2センサ部は、前記車両の正面を含む範囲を視野とし、レーザー光により前記前方障害物を検出するLidarと、前記車両の側方かつ前記車両の周辺を視野に含み、前記車両の側方に存在する車線境界を検出する周辺カメラ(60)とを備える、車両用装置。 - 請求項4に記載の車両用装置であって、
前記第2センサ部は、前記車両の側方から前記車両の前方に渡る範囲を視野に含んでおり、ミリ波により前記前方障害物を検出する前側方ミリ波レーダ(50)と、前記横位置情報として前記車両の座標を検出する位置検出センサ(90)を備え、
前記第2制御装置は、前記車両が走行中の道路の車線の位置を地図データから取得し、前記車線の位置と前記第2センサ部が検出した前記車両の座標とに基づいて、前記車両と前記車線との間の道路幅方向距離を決定する、車両用装置。 - 請求項1~3のいずれか1項に記載の車両用装置であって、
前記第1センサ部は、前記車両の側方から前記車両の前方に渡る範囲を視野に含んでおり、ミリ波により前記前方障害物を検出する前側方ミリ波レーダ(50)と、前記車両の正面から斜め側方を視野に含み、前記横位置情報である、前記車両の側方に存在する車線境界を検出する前方カメラ(40)とを備え、
前記第2センサ部は、前記車両の正面を含む範囲を視野とし、ミリ波により前記前方障害物を検出する前方ミリ波レーダ(30)と、前記車両の側方かつ前記車両の周辺を視野とし、前記車両の側方に存在する車線境界を検出する周辺カメラ(60)とを備える、車両用装置。 - 請求項1~3のいずれか1項に記載の車両用装置であって、
前記第1センサ部は、前記車両の正面から斜め側方を視野に含み、前記横位置情報である、前記車両の側方に存在する車線境界と、前記前方障害物とを検出する第1前方カメラを備え、
前記第2センサ部は、前記車両の正面から斜め側方を視野に含み、前記車線境界と前記前方障害物とを検出する第2前方カメラを備える、車両用装置。 - 請求項1~3のいずれか1項に記載の車両用装置であって、
前記第1センサ部は、前記車両の正面から斜め側方を視野に含み、前記前方障害物と、前記横位置情報である、前記車両の側方に存在する車線境界とを検出する前方カメラ(40)を備え、
前記第2センサ部は、前記車両の側方から前記車両の前方に渡る範囲を視野に含んでおり、ミリ波により前記前方障害物を検出する前側方ミリ波レーダ(50)と、前記車両の側方かつ前記車両の周辺を視野に含み、前記車両の側方に存在する車線境界を検出する周辺カメラ(60)を備える、車両用装置。 - 請求項1~3のいずれか1項に記載の車両用装置であって、
前記第1センサ部および前記第2センサ部のいずれか一方は、前記横位置情報として前記車両の座標を検出する位置検出センサ(90)を備え、
前記第1制御装置および前記第2制御装置のうち前記位置検出センサに電力を供給する電源部から電力を供給される制御装置は、前記車両が走行中の道路の車線の位置を地図データから取得し、前記車線の位置と前記第2センサ部が検出した前記車両の座標とに基づいて、前記車両と前記車線との間の道路幅方向距離を決定する、車両用装置。 - 第1電源部(21)と、第2電源部(22)と、前記第1電源部から電力が供給されて作動し、車両の前方障害物を検出するとともに前記車両の道路幅方向における位置に関する情報である横位置情報を検出する第1センサ部と、前記第2電源部から電力が供給されて作動し、前記前方障害物を検出するとともに前記横位置情報を検出する第2センサ部とが搭載された前記車両において、プロセッサにより実行される車両制御方法であって、
前記第1電源部、前記第1センサ部、前記第2電源部および前記第2センサ部が正常である場合、前記第1センサ部および前記第2センサ部からそれぞれ前記前方障害物に関する検出結果を取得して、前記前方障害物に関する検出結果を統合する縦方向統合処理と、前記第1センサ部および前記第2センサ部からそれぞれ前記横位置情報を取得して、前記横位置情報を統合する横方向統合処理のいずれか少なくとも一方を実行し、
前記第2電源部および前記第2センサ部の少なくとも一方が異常であることを検出した場合、前記第2センサ部は用いず、前記第1センサ部を用いて、異常であることを検出していない場合に実行する正常時自動運転制御よりも制限されているが、前記前方障害物と前記横位置情報を検出しつつ前記車両を走行させる車両制御である制限制御を実行し、
前記第1電源部および前記第1センサ部の少なくとも一方が異常であることを検出した場合、前記第1センサ部は用いず、前記第2センサ部を用いて、前記制限制御を実行する、車両制御方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202280044293.6A CN117561191A (zh) | 2021-07-09 | 2022-06-06 | 车辆用装置以及车辆控制方法 |
DE112022003481.5T DE112022003481T5 (de) | 2021-07-09 | 2022-06-06 | Fahrzeugvorrichtung und fahrzeugsteuerungsverfahren |
US18/405,586 US20240140450A1 (en) | 2021-07-09 | 2024-01-05 | Vehicle device and vehicle control method |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-114258 | 2021-07-09 | ||
JP2021114258A JP2023010252A (ja) | 2021-07-09 | 2021-07-09 | 車両用装置および車両制御方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US18/405,586 Continuation US20240140450A1 (en) | 2021-07-09 | 2024-01-05 | Vehicle device and vehicle control method |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2023281958A1 true WO2023281958A1 (ja) | 2023-01-12 |
Family
ID=84800250
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2022/022762 WO2023281958A1 (ja) | 2021-07-09 | 2022-06-06 | 車両用装置および車両制御方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20240140450A1 (ja) |
JP (1) | JP2023010252A (ja) |
CN (1) | CN117561191A (ja) |
DE (1) | DE112022003481T5 (ja) |
WO (1) | WO2023281958A1 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019152896A (ja) * | 2018-02-28 | 2019-09-12 | 本田技研工業株式会社 | 走行制御装置、走行制御方法およびプログラム |
US20200064483A1 (en) * | 2017-04-28 | 2020-02-27 | SZ DJI Technology Co., Ltd. | Sensing assembly for autonomous driving |
JP2020037387A (ja) * | 2018-06-29 | 2020-03-12 | アプティブ・テクノロジーズ・リミテッド | 自動車アプリケーションのための電力およびデータセンタ(PDC:power and data center) |
JP2020040545A (ja) * | 2018-09-11 | 2020-03-19 | 本田技研工業株式会社 | 車両用制御システムおよび車両の制御方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7076348B2 (ja) | 2018-09-20 | 2022-05-27 | 日立Astemo株式会社 | 電子制御装置 |
JP2021114258A (ja) | 2020-01-21 | 2021-08-05 | 京セラドキュメントソリューションズ株式会社 | 遠隔操作システムおよび情報処理装置 |
-
2021
- 2021-07-09 JP JP2021114258A patent/JP2023010252A/ja active Pending
-
2022
- 2022-06-06 DE DE112022003481.5T patent/DE112022003481T5/de active Pending
- 2022-06-06 WO PCT/JP2022/022762 patent/WO2023281958A1/ja active Application Filing
- 2022-06-06 CN CN202280044293.6A patent/CN117561191A/zh active Pending
-
2024
- 2024-01-05 US US18/405,586 patent/US20240140450A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20200064483A1 (en) * | 2017-04-28 | 2020-02-27 | SZ DJI Technology Co., Ltd. | Sensing assembly for autonomous driving |
JP2019152896A (ja) * | 2018-02-28 | 2019-09-12 | 本田技研工業株式会社 | 走行制御装置、走行制御方法およびプログラム |
JP2020037387A (ja) * | 2018-06-29 | 2020-03-12 | アプティブ・テクノロジーズ・リミテッド | 自動車アプリケーションのための電力およびデータセンタ(PDC:power and data center) |
JP2020040545A (ja) * | 2018-09-11 | 2020-03-19 | 本田技研工業株式会社 | 車両用制御システムおよび車両の制御方法 |
Also Published As
Publication number | Publication date |
---|---|
CN117561191A (zh) | 2024-02-13 |
US20240140450A1 (en) | 2024-05-02 |
JP2023010252A (ja) | 2023-01-20 |
DE112022003481T5 (de) | 2024-05-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11112804B2 (en) | Autonomous driving control apparatus and program product | |
US10676093B2 (en) | Vehicle control system, vehicle control method, and storage medium | |
CN106004879B (zh) | 车辆行驶辅助系统及其控制方法 | |
RU2734643C1 (ru) | Способ помощи при парковке для устройства помощи при парковке и устройство помощи при парковке | |
US9809223B2 (en) | Driving assistant for vehicles | |
CA2988074C (en) | Vehicle control device and vehicle control method | |
US9896098B2 (en) | Vehicle travel control device | |
JP6878196B2 (ja) | 位置推定装置 | |
US11338801B2 (en) | Collision avoidance device | |
RU2729330C1 (ru) | Способ помощи при парковке и устройство помощи при парковке | |
EP3215400A1 (en) | Method for operating a driver assistance system of a motor vehicle, driver assistance system and motor vehicle | |
JP6674560B2 (ja) | 外界認識システム | |
US20210370832A1 (en) | Data processing methods, devices, and apparatuses, and movable platforms | |
JP6595647B2 (ja) | 走行制御装置、車両および走行制御方法 | |
JP6413940B2 (ja) | 運転支援装置 | |
WO2023281958A1 (ja) | 車両用装置および車両制御方法 | |
JP7056379B2 (ja) | 車両用走行制御装置 | |
WO2016194135A1 (ja) | 車両制御装置及び車両制御方法 | |
US12071150B2 (en) | Vehicular driving assist system using forward viewing camera | |
JP7444123B2 (ja) | データ補正装置、データ補正方法、データ補正プログラム及び車両 | |
US20230294702A1 (en) | Control device, control method, and storage medium | |
JP2022181582A (ja) | 駐車支援装置及び駐車支援方法 | |
JP2022154051A (ja) | 車載カメラセンサの異常検出装置 | |
JP2022182799A (ja) | 駐車支援装置及び駐車支援方法 | |
JP2018070091A (ja) | 操舵制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 22837377 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 202280044293.6 Country of ref document: CN |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 22837377 Country of ref document: EP Kind code of ref document: A1 |