WO2011145141A1 - 車両後方監視装置 - Google Patents

車両後方監視装置 Download PDF

Info

Publication number
WO2011145141A1
WO2011145141A1 PCT/JP2010/003365 JP2010003365W WO2011145141A1 WO 2011145141 A1 WO2011145141 A1 WO 2011145141A1 JP 2010003365 W JP2010003365 W JP 2010003365W WO 2011145141 A1 WO2011145141 A1 WO 2011145141A1
Authority
WO
WIPO (PCT)
Prior art keywords
obstacle
distance
detection
sensor
vehicle
Prior art date
Application number
PCT/JP2010/003365
Other languages
English (en)
French (fr)
Inventor
井上悟
鈴木涼太郎
三次達也
清水浩一
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to JP2012515642A priority Critical patent/JP5501452B2/ja
Priority to DE112010005572T priority patent/DE112010005572T5/de
Priority to CN201080066797.5A priority patent/CN102906593B/zh
Priority to PCT/JP2010/003365 priority patent/WO2011145141A1/ja
Priority to US13/582,691 priority patent/US9047779B2/en
Publication of WO2011145141A1 publication Critical patent/WO2011145141A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/87—Combinations of sonar systems
    • G01S15/876—Combination of several spaced transmitters or receivers of known location for determining the position of a transponder or a reflector
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/56—Display arrangements
    • G01S7/62—Cathode-ray tube displays
    • G01S7/6245—Stereoscopic displays; Three-dimensional displays; Pseudo-three dimensional displays
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/165—Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2015/932—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2015/932—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations
    • G01S2015/933—Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations for measuring the dimensions of the parking space when driving past

Definitions

  • the present invention is a wide-angle camera that is installed at the rear of the vehicle and images the rear of the vehicle, a plurality of distance sensors that are installed at the rear of the vehicle and detects the distance of an obstacle, and a position detected by the distance sensor on a captured image of the wide-angle camera
  • the present invention relates to a vehicle rear monitoring apparatus having an image display that overlays an obstacle mark and clearly indicates the position of the obstacle.
  • Patent Document 1 uses an ultrasonic sensor composed of one transmission / reception ultrasonic sensor and a reception-only sensor, and arranges a camera at a central position where the ultrasonic sensor is arranged, The position of the obstacle is obtained from the distance information of the ultrasonic sensor by the principle of triangulation.
  • the optical flow is detected from the image captured by the camera, the position of the obstacle on the image is obtained, and the measurement positions of both are superimposed.
  • the position of the obstacle is determined, and a predetermined composite image (the actualized image and the distance value to the obstacle) is displayed.
  • the present invention has been made to solve the above-described problems, and it is an object of the present invention to determine an object that is truly an obstacle and improve the overlay position accuracy of an obstacle mark performed on a captured image of a camera.
  • the vehicle rear monitoring apparatus includes a plurality of distance sensors that detect a distance to an obstacle, an obstacle determination unit that determines the presence or absence of an obstacle based on a reception signal of the distance sensor, and the obstacle determination unit.
  • the vehicle rear monitoring device having a display screen switching unit that switches between a directly captured image and a bird's-eye view image according to the determined distance to the obstacle, Change the detection threshold level of the distance sensor to change the horizontal detection area, the vertical detection area and the azimuth resolution, and the distance to the obstacle determined by the obstacle determination section and the reflected wave from the obstacle
  • a display position of the obstacle mark is determined based on the amplitude information, and an overlay unit that synthesizes the obstacle mark image at the determined display position is added to the image captured by the camera supplied from the display screen switching unit. is there.
  • the position accuracy of the overlay of the obstacle mark with respect to the obstacle on the imaging screen is improved.
  • FIG. 1 is a schematic diagram showing a configuration in which a vehicle rear monitoring device according to the present invention is mounted on a vehicle. It is a block diagram which shows the structure of the vehicle rear monitoring apparatus which concerns on this invention. It is a detection area figure of a plurality of distance sensors. It is a figure which shows the change of the detection area of the horizontal direction of a distance sensor according to the change of a detection threshold value. It is a figure when the detection areas of a plurality of distance sensors do not overlap. It is a figure when the detection areas of a plurality of distance sensors overlap. It is a figure which shows the change of the detection area of the perpendicular direction of a distance sensor according to the change of a detection threshold value.
  • FIG. 15 is a diagram illustrating a state in which an obstacle mark is overlaid on the obstacle detected in FIG. 14 and displayed on the screen. It is a figure which shows the state in which an obstacle is located in a camera imaging area, a distance sensor detection area, and a steering sensor detection area.
  • FIG. 17 is a diagram illustrating a state in which an obstacle mark is overlaid on the obstacle detected in FIG. 16 and displayed on the screen. It is a figure which shows that an obstruction is located in a part in several distance sensor detection area.
  • (A) is a figure which shows the transmission / reception state of the several distance sensor of FIG. 18,
  • (b) is the state which displayed the obstacle detected by transmission / reception of the several distance sensor on the screen with the detection area of each distance sensor.
  • (A) is a figure which shows the transmission / reception state of the several distance sensor of FIG. 20, (b) shows each distance when the magnitude
  • (A) is a figure which shows the transmission / reception state of several distance sensors of FIG. 20, (b) is the detection area of each distance sensor when the obstruction detected by transmission / reception of the several distance sensors is the same size It is a figure which shows the state displayed on the screen with it.
  • FIG. 23 It is a figure showing the case where an obstacle is located in all in a plurality of distance sensor detection areas.
  • (A) is a figure which shows the transmission / reception state of the several distance sensor of FIG. 23,
  • (b) is the state which displayed on the screen the obstacle detected by transmission / reception of the several distance sensor with the detection area of each distance sensor.
  • FIG. 23 is a figure which shows the transmission / reception state of the several distance sensor of FIG. 23.
  • FIG. 1 is a schematic diagram showing a configuration in which a vehicle rear monitoring device according to the present invention is mounted on a vehicle
  • FIG. 2 is a block diagram showing a configuration of the vehicle rear monitoring device.
  • a vehicle 1 includes a steering angle sensor (or rear left and right wheel speed sensors) 2 at the center, a camera 3 at the center of the rear, and an ultrasonic sensor 4 (4-1) as a distance sensor arranged in parallel at the rear end surface.
  • corner sensors 5-1 and 5-2 are provided on the left and right sides of the rear end surface, and an image display 7 is provided in the center of the front portion that is easily visible to the user.
  • the camera 3 has an imaging area 3H
  • the ultrasonic sensor 4 has a detection area 4H
  • the corner sensors 5-1 and 5-2 have detection areas 5-1H and 5-2H.
  • the apparatus main body 10 includes a transmission / reception amplification unit 11, a travel locus prediction unit 12, a transmission / reception amplification unit 13, a threshold level change unit 14, an obstacle determination unit 15, a display screen switching unit 16, and an overlay unit 17.
  • the display screen switching unit 16 is connected to the camera 3 and the obstacle determination unit 15, the transmission / reception amplification unit 11 is connected to the transmission / reception ultrasonic sensors 4-1 to 4-4, and the travel locus prediction unit 12 is connected to the display screen switching unit 16.
  • a steering angle sensor (or rear left and right wheel speed sensors) 2 is connected, and the transmission / reception amplifier 13 is connected with corner sensors 5-1 and 5-2.
  • the threshold level change unit 14 is connected to the transmission / reception amplification unit 11, the travel locus prediction unit 12, and the setting information input unit 6, the obstacle determination unit 15 is connected to the threshold level change unit 14, and the overlay unit 17 The obstacle determination unit 15 and the display screen switching unit 16 are connected, and the output of the overlay unit 17 is supplied to the image display 7.
  • the detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 can be changed to a radial shape or a rectangular shape according to the detection threshold level output from the threshold level changing unit 14, and are also rectangular. Even so, the width or length of the detection areas 4-1H to 4-4H can be changed based on the output of the traveling locus prediction unit 12.
  • FIG. 3 shows a case where the detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 are radial, and the obstacle 15 detected in the detection areas 4-1H to 4-4H. -1 to 15-4 are overlaid and displayed.
  • the overlay display method includes the following methods. Marks are displayed at corresponding distances and directions on the photographing screen where the obstacles 15-1 to 15-4 exist. The distance to the obstacles 15-1 to 15-4 and the height of the obstacle are displayed numerically. The marking color of the obstacle position is converted according to the distance or height and displayed.
  • FIGS. 4A to 4C show states in which the rectangular horizontal detection areas of the transmission / reception ultrasonic sensors 4-1 (to 4-4) are changed by the threshold values Hth1 to Hth3.
  • FIG. 5 sets detection threshold values based on distance or propagation time according to the propagation distance-sensitivity characteristics of transmission / reception ultrasonic sensors 4-1 to 4-4, and forms detection areas 4-1H to 4-4H in a rectangular shape.
  • the detection areas of the adjacent transmission / reception ultrasonic sensors 4-1 to 4-4 in the horizontal direction do not overlap each other. Thus, the detection areas are formed side by side.
  • FIG. 6 sets detection threshold values based on distance or propagation time according to the propagation distance-sensitivity characteristics of transmission / reception ultrasonic sensors 4-1 to 4-4, and forms detection areas 4-1H to 4-4H in a rectangular shape.
  • the detection areas of the adjacent transmission / reception ultrasonic sensors 4-1 to 4-4 in the horizontal direction overlap each other.
  • the direction of the obstacle is determined by the logical product of the detection results at the same distance adjacent to each other in the overlapping detection areas.
  • the detection threshold values Vth1 to Vth3 of the transmission / reception ultrasonic sensors 4-1 (to 4-4) are sequentially switched and set in the threshold level changing unit 14.
  • the rectangular vertical detection areas 4-1V to 4-4V are changed to have a function of determining the detection area with the maximum detectable height.
  • the threshold value Vth1 in FIGS. 7 (a) and 7 (b) is used. In the case of Vth2, the obstacle can be detected, but in the case of the threshold value Vth3 in FIG. 7C, the obstacle cannot be detected. That is, it is easy to distinguish from low obstacles such as curbs.
  • FIG. 8 shows the flow of obstacle direction and height determination by the transmission / reception ultrasonic sensors 4-1 to (4-4).
  • the threshold value Hth1 is set from the setting information input unit 6 in step ST1.
  • the level change unit 14 is set, and transmission / reception is performed by the transmission / reception ultrasonic sensors 4-1 to 4-4 in step ST2.
  • the obstacle determination unit 15 performs obstacle detection determination based on the output signals from the transmission / reception ultrasonic sensors 4-1 to 4-4 supplied via the transmission / reception amplification unit 11 and the threshold level change unit 14. If NO, the obstacle detection determination is repeated.
  • step ST3 If the determination result in step ST3 is YES, after performing horizontal orientation determination in step ST4, the threshold value Vth1 is set in the threshold level changing unit 14 from the setting information input unit 6 in step ST5, and the transmission / reception ultrasonic sensor in step ST6 Transmission / reception is performed according to 4-1 to 4-4. Then, in step ST7, it is determined whether the height of the obstacle is equal to or less than H11. If NO, the process proceeds to step ST14. If YES, the threshold value Vth2 is set from the setting information input unit 6 in step ST8. 14, the ultrasonic transmission / reception is performed by the transmission / reception ultrasonic sensors 4-1 to 4-4 in step ST9.
  • step ST10 it is determined whether the height of the obstacle is H12 or less. If NO, the process proceeds to step ST14. If YES, the threshold value Vth3 is set from the setting information input unit 6 in step ST11. 14, the ultrasonic transmission / reception is performed by the transmission / reception ultrasonic sensors 4-1 to 4-4 in step ST12. In step ST13, it is determined whether the height of the obstacle is equal to or lower than H13, and in both cases of NO and YES, the process proceeds to step ST14. In step ST14, the position (horizontal orientation and height) of the obstacle is determined. In step ST15, when it is determined that the obstacle is significant in step ST14, the position of the obstacle is overlaid on the image taken by the camera 3. .
  • FIG. 9A shows the imaging area 3H of the camera 3 and the ultrasonic detection areas 4-1H to 4-nH of the transmission / reception ultrasonic sensors 4-1 to 4-4 at the time of linear receding traveling.
  • the detection areas 4-1H to 4-nH of the transmission / reception ultrasonic sensors 4-1 to 4-4 are set to equal widths by the threshold values Vth1 to Vth3.
  • FIG. 9 (b) shows the imaging area 3H of the camera 3 when the vehicle runs backward and the ultrasonic detection areas 4-1H to 4-nH of the transmission / reception ultrasonic sensors 4-1 to 4-4.
  • the traveling locus prediction unit 12 Based on the steering angle signal from the steering angle sensor 2 or the wheel speed signal from the wheel speed sensor, the traveling locus prediction unit 12 obtains the turning radius of the inner wheel m or the outer wheel n shown in FIG.
  • the detection threshold level is set to be low so that the horizontal detection area 4-1H of the distance sensor 4-1 on the inner ring m side is wider than that during straight running, and the horizontal detection of the distance sensor on the outer ring n side is performed.
  • the detection threshold level is set to be high so that the area becomes narrower than when traveling straight.
  • FIG. 9C shows another example when the vehicle runs backward on the curve.
  • the threshold level changing unit 14 transmits and receives the ultrasonic sensor 4-1.
  • the detection threshold level is set so that the horizontal detection area of the distance sensor 4-1 on the inner ring m side is wider than that during straight running.
  • the detection threshold level is set high so that the horizontal detection area of the distance sensor 4-4 on the outer ring n side becomes narrower than that during straight running, and the horizontal detection area of the distance sensor on the inner ring m side is set low. Is made shorter than the arrival distance of the detection area in the horizontal direction of the distance sensor on the outer ring n side.
  • This reach distance can be set by setting the threshold level to the maximum value Vthmax or setting the time gates T1 to T4.
  • this time gate determines a time (distance) range effective for obstacle determination, and a time gate T1 is set for a change characteristic of a threshold value with respect to time as shown in FIG.
  • the range W shown in FIG. 13B is an effective determination range.
  • the obstructions 15a and 15b contained in the received signal of a transmission / reception ultrasonic sensor are received as an obstruction detection signal a and b as shown in FIG.13 (d)
  • Only the obstacle detection signal a within the valid determination range W set by the time gate T1 is output.
  • FIG. 14 shows an obstacle 15-1 in the imaging area 3H of the camera 3 and the ultrasonic detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 at the time of receding straight in FIG. This indicates a state in which ⁇ 15-3 is detected.
  • obstacle marks 16-1 to 16-3 are overlaid on obstacle images detected by the transmission / reception ultrasonic sensors 4-1 to 4-4 on the captured image of the camera 3 to obstruct the obstacles 15-1. This clearly indicates the position 15-3.
  • FIG. 16 shows a state where obstacles 15-1 to 15-4 are detected in the detection areas including the detection areas 5-1H and 5-2H of the corner sensors 5-1 and 5-2 provided on both sides of the rear end surface of the vehicle 1. Indicates.
  • FIG. 17 shows obstacle marks 16-1 to 16-3 at the positions of the obstacles detected by the transmission / reception ultrasonic sensors 4-1 to 4-4 and the corner sensors 5-1 and 5-2 on the captured image of the camera 3. And the positions of the obstacles 15-1 to 15-4 are clearly shown. In this case, since the obstacle 15-4 is outside the detection area of the transmission / reception ultrasonic sensors 4-1 to 4-4, the obstacle mark 16-4 indicated by an arrow is overlaid and distinguished.
  • the rectangular detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 are formed side by side so as not to overlap each other.
  • the state where the obstacles 15-1 and 15-2 are detected in the adjacent detection areas 4-1H and 4-2H is shown.
  • FIG. 19A shows transmission / reception states of the transmission / reception ultrasonic sensors 4-1 to 4-4 in the case of FIG. 18, and ultrasonic waves are transmitted from the transmission / reception ultrasonic sensors 4-1 to 4-4 at time t0.
  • the transmission / reception ultrasonic sensor 4-2 receives a reflected wave from the obstacle 15-2 at time t1
  • the transmission / reception ultrasonic sensor 4-1 receives a reflected wave from the obstacle 15-1 at time t2.
  • Obstacles 15-1 and 15-2 are detected by the reflected waves and displayed on the captured image of the camera 3 as shown in FIG. 19B, and the obstacle 15-2 is close to the vehicle 1.
  • An obstacle mark 16-2 is overlaid on the obstacle 15-2.
  • both detection areas (4-1H and The obstacle mark 16-2 is overlaid over 4-2H).
  • the rectangular detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 are formed side by side so as not to overlap each other.
  • the state where the obstacle 15-1 is detected at the boundary between the adjacent detection areas 4-1H and 4-2H is shown.
  • FIG. 21 (a) shows the transmission / reception state of the transmission / reception ultrasonic sensors 4-1 to 4-4 in the case of FIG. 20, and emits ultrasonic waves from the transmission / reception ultrasonic sensors 4-1 to 4-4 at time t0.
  • the transmission / reception ultrasonic sensors 4-1 and 4-2 receive a reflected wave from the obstacle 15-1.
  • the obstacle 15-1 is detected by this reflected wave, and the position of the obstacle 15-1 is clearly indicated at the detected position on the captured image of the camera 3, as shown in FIG.
  • Vs1-Vs2 exceeds a preset allowable value Vth. Therefore, the obstacle mark 16-1 is overlaid on the detection area of the transmission / reception ultrasonic sensor 4-1.
  • ultrasonic waves are emitted from the transmission / reception ultrasonic sensors 4-1 to 4-4 at time t0, and the obstacle 15 is transmitted by the transmission / reception ultrasonic sensors 4-1 and 4-2 at time t1.
  • -2 is received, but the amplitudes Vs1 and Vs2 of the reflected waves from the obstacle 15-2 received by the transmission / reception ultrasonic sensors 4-1 and 4-2 are substantially equal, that is,
  • the rectangular detection areas 4-1H to 4-4H of the transmission / reception ultrasonic sensors 4-1 to 4-4 are formed side by side so as not to overlap each other, and are larger than the vehicle width. This shows a state where an obstacle 15-L such as a flat wall having a length of is detected.
  • FIG. 24A shows the transmission / reception state of the transmission / reception ultrasonic sensors 4-1 to 4-4 in the case of FIG. 23, and the transmission / reception ultrasonic sensors 4-1 to 4-4 emit ultrasonic waves at time t0. At time t1, the transmission / reception ultrasonic sensors 4-1 to 4-4 receive a reflected wave from the obstacle 15-L. When the position of the obstacle 15-L is clearly indicated on the captured image of the camera 3 by this reflected wave, as shown in FIG.
  • the amplitude of the reflected wave of the transmission / reception ultrasonic sensors 4-1 to 4-4 are substantially the same size for the transmission / reception ultrasonic sensors 4-1 to 4-4, and therefore obstacle marks are placed in all the detection areas 4-1 H to 4-4 H of the transmission / reception ultrasonic sensors 4-1 to 4-4.
  • Overlay 16-L the amplitude of the reflected wave of the transmission / reception ultrasonic sensors 4-1 to 4-4 are substantially the same size for the transmission / reception ultrasonic sensors 4-1 to 4-4, and therefore obstacle marks are placed in all the detection areas 4-1 H to 4-4 H of the transmission / reception ultrasonic sensors 4-1 to 4-4.
  • the position of the obstacle in the horizontal direction can be determined, the positional accuracy of the overlay of the obstacle mark with respect to the obstacle on the imaging screen is improved.
  • the detection threshold level is changed, the detection area is set to be rectangular or radial, the detection areas of the adjacent distance sensors in the horizontal direction are set so as to partially overlap or not overlap, and the overlapping detection areas are When set, the azimuth direction of the obstacle is determined by the logical product of the detection results at the same distance between adjacent distance sensors, so that the horizontal position resolution is improved.
  • the detection threshold level is set to be low so that the horizontal detection area of the distance sensor on the inner ring side is larger than that during straight running, and the horizontal detection area of the distance sensor on the outer ring side is set. Since the detection threshold level is set high so as to be narrower than that during straight running, only obstacles in the area through which the vehicle passes can be detected, so unnecessary information is not output, and the load on the driver is reduced.
  • the detection threshold level is changed in order to change the vertical detection area, and the height of the obstacle is judged by the detection area with the maximum detectable height, so information on the height direction of the obstacle can be obtained, such as curbs It becomes easy to distinguish from low obstacles.
  • the detection threshold level is sequentially switched to change the horizontal detection area, and it is determined as an area that can be detected by distinguishing between the vehicle width and the vehicle width of the traveling vehicle. Unnecessary detection information can be deleted by changing the area.
  • the obstacle mark in the camera image is overlaid on the collidable obstacle with the shortest distance between the front end part including the height direction of the obstacle specified by the distance sensor and the vehicle, there is no collision. Since the low obstacle does not mark the obstacle, the accuracy of determining the possibility of collision by the obstacle is increased.
  • the obstacle mark is overlaid on the camera image outside the detection area of the distance sensor.
  • the presence of obstacles before the collision is known in advance.
  • the obstacle mark When the distance information detected by a plurality of adjacent distance sensors is within the predetermined allowable range Tth, the obstacle mark is overlaid over the detection range of the distance sensor, and if it exceeds the allowable range Tth, the obstacle mark is positioned at a short distance. Obstacle marks are overlaid at obstacle positions, so that obstacles with a flat wall longer than the width of the vehicle can be detected at the same distance over the entire vehicle width compared to narrow obstacles such as utility poles. Therefore, it is effective when an obstacle exists at the detection area intersection position of each sensor.
  • the ultrasonic sensor is used as the distance sensor. However, even if the distance sensor is a laser, the same effect can be obtained.
  • the vehicle rear monitoring device can detect an obstacle behind the vehicle and is therefore suitable for use in a vehicle.

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mechanical Engineering (AREA)
  • Acoustics & Sound (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

　閾値レベル変更部１４で距離センサ４－１～４－４の検知閾値レベルを変更し、水平、垂直の検知エリアおよび方位分解能を変え、複数の距離センサ４－１～４－４で障害物１５までの距離と障害物からの反射波の振幅情報とにより障害物マーク１６の表示位置を判定し、オーバレイ部１７で障害物１５に障害物マーク１６を画像合成するので、撮像画面上の障害物に対する障害物マークのオーバレイの位置精度が向上する。

Description

車両後方監視装置
　この発明は車両の後部に設置し車両後方を撮像する広角カメラと、車両の後部に設置し障害物の距離を検知する複数の距離センサと、広角カメラの撮影画像上に距離センサで検知した位置に障害物のマークをオーバレイし、障害物の位置を明示する画像表示器を有する車両後方監視装置に関するものである。
　広角カメラによる後方監視(障害物検知)では、静止物体および物体の高さの検知が出来ない。また、単眼カメラでは距離情報が得られない。一方、距離センサによる障害物の検知では、広範囲を一度に検知するよう設計されているので方位分解能が低いと言う課題がある。
　従来、このような障害物検知をするものとして特許文献１に記載された先行技術がある。
特開２００７－１４０８５２号公報
　しかし、特許文献１に記載された先行技術は、１個の送受信超音波センサと受信専用センサからなる超音波センサを用い、この超音波センサが配置される中央位置にカメラを配置し、複数の超音波センサの距離情報から三角測量の原理で障害物の位置を求めている。ここで、複数の障害物が存在すると虚像を検知するという欠点を補うため、さらに、カメラによる撮像画像からオプティカルフローを検知し、障害物の画像上の位置を求め、両者の計測位置を重ね合わせて障害物の位置を判定すると共に、所定の合成画像（顕在化画像と障害物までの距離値）を表示する機能を有している。
　しかし、上記のような距離情報の演算処理および画像処理は演算負荷が大きいので、高速処理が求められると装置が高価になる。しかも、障害物の高さ情報が得られないので真の障害物の判定が困難である等の課題があった。
　この発明は上記のような課題を解消するためになされたもので、真に障害となる対象物を判定し、カメラの撮影画像上に行う障害物マークのオーバレイ位置精度の向上を図ることを目的とする。
　この発明の車両後方監視装置は、障害物までの距離を検知する複数の距離センサと、距離センサの受信信号に基づいて障害物の有無を判定する障害物判定部と、この障害物判定部で判定した障害物までの距離に準じて直接撮影画像と鳥瞰画像の表示画像を切り替える表示画面切り替え部を有する車両後方監視装置において、
　距離センサの検知閾値レベルを変更し、水平の検知エリア、垂直の検知エリアおよび方位分解能を変える閾値レベル変更部と、障害物判定部で判定した障害物までの距離と障害物からの反射波の振幅情報とにより障害物マークの表示位置を判定し、表示画面切り替え部から供給されるカメラによる撮像画像に、上記判定された表示位置に障害物マークを画像合成するオーバレイ部とを備えたものである。
　この発明によれば、障害物の水平方向の位置が判別できるので、撮像画面上への障害物に対する障害物マークのオーバレイの位置精度が向上する。
この発明に係る車両後方監視装置を車両に搭載した構成を示す概要図である。 この発明に係る車両後方監視装置の構成を示すブロック図である。 複数の距離センサの検知エリア図である。 検知閾値の変化に応じて距離センサの水平方向の検知エリアの変化を示す図である。 複数の距離センサの検知エリアが重ならない場合の図である。 複数の距離センサの検知エリアが重なった場合の図である。 検知閾値の変化に応じて距離センサの垂直方向の検知エリアの変化を示す図である。 距離センサによる障害物の方位と高さの判定フロー図である。 直線後退走行時とカーブ後退走行時とで距離センサの水平方向の検知エリアの変化を示す図である。 後退する車両の内輪（左後輪）と外輪（右後輪）の関係を説明する説明図である。 距離または時間対閾値の関係を示す特性図である。 距離または時間対閾値の関係を示す特性図である。 時間ゲートの説明図である。 カメラ撮像エリアおよび距離センサ検知エリア内に障害物が位置する状態を示す図である。 図１４において検知された障害物に障害物マークをオーバレイして画面表示した状態を示す図である。 カメラ撮像エリアおよび距離センサ検知エリアと操舵センサ検知エリア内に障害物が位置する状態を示す図である。 図１６において検知された障害物に障害物マークをオーバレイして画面表示した状態を示す図である。 複数の距離センサ検知エリア内の一部に障害物が位置することを示す図である。 （ａ）は図１８の複数の距離センサの送受信状態を示す図であり、（ｂ）はその複数の距離センサの送受信で検知された障害物を各距離センサの検知エリアとともに画面表示した状態を示す図である。 隣接する距離センサ検知エリアに跨って障害物が位置していることを示す図である。 （ａ）は図２０の複数の距離センサの送受信状態を示す図であり、（ｂ）はその複数の距離センサの送受信で検知された障害物が検知エリアによって大小差が生じた場合を各距離センサの検知エリアとともに画面表示した状態を示す図である。 （ａ）は図２０の複数の距離センサの送受信状態を示す図であり、（ｂ）はその複数の距離センサの送受信で検知された障害物が同じ大きさの場合を各距離センサの検知エリアとともに画面表示した状態を示す図である。 複数の距離センサ検知エリア内の全てに障害物が位置する場合を示す図である。 （ａ）は図２３の複数の距離センサの送受信状態を示す図であり、（ｂ）はその複数の距離センサの送受信で検知された障害物を各距離センサの検知エリアとともに画面表示した状態を示す図である。
　以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１.
　図１はこの発明に係る車両後方監視装置を車両に搭載した構成を示す概要図であり、図２はその車両後方監視装置の構成を示すブロック図である。図１において、車両１は中央部に操舵角センサ（または後部左右の車輪速センサ）２、後部中央にカメラ３、後端面には並設して距離センサとしての超音波センサ４（４－１～４－４）、その後端面左右にはコーナーセンサ５－１，５－２、ユーザが視認しやすい前部中央に画像表示器７が設けられている。カメラ３は撮像エリア３Ｈ、超音波センサ４は検知エリア４Ｈ、コーナーセンサ５－１，５－２は検知エリア５－１Ｈ，５－２Ｈを有する。
　図２において、装置本体部１０には送受信増幅部１１、走行軌跡の予測部１２、送受信増幅部１３、閾値レベル変更部１４、障害物判定部１５、表示画面切り替え部１６、オーバレイ部１７を備えている。
　そして、表示画面切り替え部１６にはカメラ３と障害物判定部１５が接続され、送受信増幅部１１には送受信超音波センサ４－１～４－４が接続され、走行軌跡の予測部１２には操舵角センサ（または後部左右の車輪速センサ）２が接続され、送受信増幅部１３にはコーナーセンサ５－１，５－２が接続されている。また、閾値レベル変更部１４には送受信増幅部１１と走行軌跡の予測部１２および設定情報入力部６が接続され、障害物判定部１５には閾値レベル変更部１４が接続され、オーバレイ部１７には障害物判定部１５と表示画面切り替え部１６が接続され、このオーバレイ部１７の出力が画像表示器７に供給される。
　送受信超音波センサ４－１～４－４の検知エリア４－１Ｈ～４－４Ｈは、閾値レベル変更部１４から出力される検知閾値レベルによって放射状、矩形状に変化させることができると共に、矩形状であってもその検知エリア４－１Ｈ～４－４Ｈの幅または長さを走行軌跡の予測部１２の出力に基づいて変化させることができる。
　図３は送受信超音波センサ４－１～４－４の検知エリア４－１Ｈ～４－４Ｈが放射状の場合を示すもので、その検知エリア４－１Ｈ～４－４Ｈ内に検知した障害物１５－１～１５－４をオーバレイして表示している。このオーバレイの表示方法には以下の方法がある。
　障害物１５－１～１５－４の存在する撮影画面上の相当する距離と方位にマーク表示する。
　障害物１５－１～１５－４までの距離と障害物の高さを数値表示する。
　障害位置のマーキング色を距離または高さに応じて変換して表示する。
　図４（ａ）～（ｃ）は送受信超音波センサ４－１（～４－４）の矩形状の水平方向の検知エリアを閾値Ｈｔｈ１～Ｈｔｈ３によって変化させた状態を示したものである。
　図５は送受信超音波センサ４－１～４－４の伝播距離－感度特性に合わせて、距離あるいは伝播時間に基づく検知閾値を設定し、検知エリア４－１Ｈ～４－４Ｈを矩形状に形成し、この設定した検知閾値あるいは送受信超音波センサ４－１～４－４の設置距離を変えることで、水平方向の隣り合う送受信超音波センサ４－１～４－４の検知エリアが互いに重ならないように並設して検知エリアを形成したものである。
　図６は送受信超音波センサ４－１～４－４の伝播距離―感度特性に合わせて、距離あるいは伝播時間に基づく検知閾値を設定し、検知エリア４－１Ｈ～４－４Ｈを矩形状に形成し、この設定した検知閾値あるいは送受信超音波センサ４－１～４－４の設置距離を変えることで、水平方向の隣り合う送受信超音波センサ４－１～４－４の検知エリアが互いに重なるように形成したもので、その重なり合う検知エリアの隣り合う同一距離での検出結果の論理積により、障害物の方位を判定する。
　図７（ａ）～（ｃ）は後記図８のフローに基づいて、送受信超音波センサ４－１（～４－４）の検知閾値Ｖｔｈ１～Ｖｔｈ３を順次切り替えて閾値レベル変更部１４に設定し、矩形状の垂直方向の検知エリア４－１Ｖ～４－４Ｖを変化させ、検知可能な最大高さの検知エリアで判定する機能を有するもので、図７（ａ）、（ｂ）の閾値Ｖｔｈ１、Ｖｔｈ２の場合は障害物は検知できるが、図７（ｃ）の閾値Ｖｔｈ３の場合は障害物を検知できない。つまり、縁石など低い障害物との区別が容易となる。
　図８は送受信超音波センサ４－１～（４－４）による障害物の方位と高さ判定のフローを示すもので、フロー開始後は、ステップＳＴ１で設定情報入力部６から閾値Ｈｔｈ１を閾値レベル変更部１４に設定し、ステップＳＴ２で送受信超音波センサ４－１～４－４による送受信を行う。そして、ステップＳＴ３で障害物判定部１５が送受信増幅部１１、閾値レベル変更部１４を介して供給された送受信超音波センサ４－１～４－４からの出力信号に基づいて障害物検知判定を行い、ＮＯであれば障害物検知判定を繰り返す。
　ステップＳＴ３の判定結果がＹＥＳの場合は、ステップＳＴ４で水平方位判定を行った後、ステップＳＴ５で設定情報入力部６から閾値Ｖｔｈ１を閾値レベル変更部１４に設定し、ステップＳＴ６で送受信超音波センサ４－１～４－４による送受信を行う。そして、ステップＳＴ７で障害物の高さがＨ１１以下かを判断し、ＮＯであれば、ステップＳＴ１４に移行し、ＹＥＳであれば、ステップＳＴ８で設定情報入力部６から閾値Ｖｔｈ２を閾値レベル変更部１４に設定し、ステップＳＴ９で送受信超音波センサ４－１～４－４による超音波送受信を行う。
　そして、ステップＳＴ１０で障害物の高さがＨ１２以下かを判断し、ＮＯであれば、ステップＳＴ１４に移行し、ＹＥＳであれば、ステップＳＴ１１で設定情報入力部６から閾値Ｖｔｈ３を閾値レベル変更部１４に設定し、ステップＳＴ１２で送受信超音波センサ４－１～４－４による超音波送受信を行う。
　ステップＳＴ１３で障害物の高さがＨ１３以下かを判断し、ＮＯ，ＹＥＳのいずれの場合もステップＳＴ１４に移行する。ステップＳＴ１４では、障害物の位置（水平方位と高さ）を判定し、ステップＳＴ１５では、ステップＳＴ１４で有意な障害物と判定した場合は、カメラ３による撮影画像上に障害物の位置をオーバレイする。
　図９（ａ）は直線後退走行時におけるカメラ３の撮像エリア３Ｈと送受信超音波センサ４－１～４－４の超音波検知エリア４－１Ｈ～４－ｎＨを示すもので、直線後退をする場合は、送受信超音波センサ４－１～４－４の検知エリア４－１Ｈ～４－ｎＨを閾値Ｖｔｈ１～Ｖｔｈ３によって均等な幅に設定する。
　図９（ｂ）はカーブ後退走行時のカメラ３の撮像エリア３Ｈと送受信超音波センサ４－１～４－４の超音波検知エリア４－１Ｈ～４－ｎＨを示すもので、カーブ後退時における操舵角センサ２からの操舵角信号または車輪速センサからの車輪速信号によって、走行軌跡の予測部１２で図１０に示す内輪ｍまたは外輪ｎの旋回半径を求める。
　・操舵角センサの場合
　内輪(または外輪)の旋回半径Ｒ＝α・θ(Ｄ)
　
　ここで、
　α：変換定数
　θ(Ｄ)：操舵角

　・車輪速センサの場合
　内輪(または外輪)の旋回半径Ｒ＝β・θ(Ｌ)
　
　ここで、
　θ(Ｌ)＝ｔａｎ－１(ＬＬ－ＬＲ)／Ｗ
　ＬＬ：左後輪の積算走行距離
　ＬＲ：右後輪の積算走行距離
　Ｗ：後輪の車輪間距離
　β：変換定数

　そして、走行軌跡の予測部１２で求められた旋回半径を受けて、閾値レベル変更部１４が送受信超音波センサ４－１～４－４の閾値を図１１（ａ）～（ｄ）に示すように変え、内輪ｍ側の距離センサ４－１の水平方向の検知エリア４－１Ｈを直線走行時に比べて広くなるように検知閾値レベルを低く設定し、外輪ｎ側の距離センサの水平方向の検知エリアを直線走行時に比べて狭くなるように検知閾値レベルを高く設定する。
　また、図９（ｃ）はカーブ後退走行時の他の例を示すもので、走行軌跡の予測部１２で求められた旋回半径を受けて、閾値レベル変更部１４が送受信超音波センサ４－１～４－４の閾値を図１２（ａ）～（ｄ）に示すように、内輪ｍ側の距離センサ４－１の水平方向の検知エリアを直線走行時に比べて広くなるように検知閾値レベルを低く設定し、外輪ｎ側の距離センサ４－４の水平方向の検知エリアを直線走行時に比べて狭くなるように検知閾値レベルを高く設定するとともに、内輪ｍ側の距離センサの水平方向の検知エリアの到達距離を、外輪ｎ側の距離センサの水平方向の検知エリアの到達距離より短くしたものである。この到達距離の設定には閾値レベルを最大値Ｖｔｈｍａｘに設定するか、時間ゲートＴ１～Ｔ４を設定する方法がある。
　この時間ゲートは図１３に示すように、障害物判定に有効な時間（距離）範囲を決めるもので、図１３（ａ）に示すような時間に対する閾値の変化特性に対し、時間ゲートＴ１を設定すると、図１３（ｂ）に示す範囲Ｗが有効な判定範囲となる。そして、図１３（ｃ）に示すように送受信超音波センサの受信信号に含まれる障害物１５ａ，１５ｂは、図１３（ｄ）に示すように障害物検知信号ａ，ｂとして受信されるが、時間ゲートＴ１で設定された有効な判定範囲Ｗ内の障害物検知信号ａのみが出力されることになる。
　図１４は図９（ａ）の直線後退走行時におけるカメラ３の撮像エリア３Ｈと送受信超音波センサ４－１～４－４の超音波検知エリア４－１Ｈ～４－４Ｈで障害物１５－１～１５－３を検知した状態を示す。
　図１５はカメラ３の撮像画像上に前記送受信超音波センサ４－１～４－４で検知した障害物の位置に障害物マーク１６－１～１６－３をオーバレイして障害物１５－１～１５－３の位置を明示したものである。
　図１６は車両１の後端面両側に設けたコーナーセンサ５－１，５－２の検知エリア５－１Ｈ，５－２Ｈを含めた検知エリアで障害物１５－１～１５－４を検知した状態を示す。
　図１７はカメラ３の撮像画像上に前記送受信超音波センサ４－１～４－４およびコーナーセンサ５－１，５－２で検知した障害物の位置に障害物マーク１６－１～１６－３をオーバレイして障害物１５－１～１５－４の位置を明示したものである。この場合、障害物１５－４は送受信超音波センサ４－１～４－４の検知エリア外にあるので、矢印の障害物マーク１６-４をオーバレイして区別している。
　図１８は図５に示すように、送受信超音波センサ４－１～４－４の矩形状の検知エリア４－１Ｈ～４－４Ｈを互いに重ならないように並設して形成したもので、その隣接する検知エリア４－１Ｈと４－２Ｈで障害物１５－１，１５－２が検知された状態を示す。
　図１９（ａ）は図１８の場合における送受信超音波センサ４－１～４－４の送受信状態を示すもので、送受信超音波センサ４－１～４－４から時間ｔ０で超音波を送出し、ｔ１時点に送受信超音波センサ４－２で障害物１５－２からの反射波を受け、ｔ２時点に送受信超音波センサ４－１で障害物１５－１からの反射波を受ける。
　この反射波によって障害物１５－１，１５－２を検知し図１９（ｂ）に示すように、カメラ３の撮像画像上に表示するとともに、車両１からは障害物１５－２が近いので、この障害物１５－２に障害物マーク１６－２をオーバレイする。ここで、図１９（ａ）に示す障害物の検知時間ｔ１とｔ２の時間差が、予め設定した許容値Ｔｔｈ以下の場合は、図１９（ｃ）に示すように両検知エリア（４－１Ｈと４－２Ｈ）に渡って障害物マーク１６－２をオーバレイする。
　図２０は図５に示すように、送受信超音波センサ４－１～４－４の矩形状の検知エリア４－１Ｈ～４－４Ｈを互いに重ならないように並設して形成したもので、その隣接する検知エリア４－１Ｈと４－２Ｈの境界で障害物１５－１が検知された状態を示す。
　図２１（ａ）は図２０の場合における送受信超音波センサ４－１～４－４の送受信状態を示すもので、送受信超音波センサ４－１～４－４から時間ｔ０で超音波を出し、ｔ１時点に送受信超音波センサ４－１，４－２で障害物１５－１からの反射波を受ける。
　この反射波によって障害物１５－１を検知し、図２１（ｂ）に示すように、カメラ３の撮像画像上に検知した位置に障害物１５－１の位置を明示する場合、送受信超音波センサ４－１，４－２の反射波の振幅Ｖｓ１，Ｖｓ２は送受信超音波センサ４－１の方が大きいので、｜Ｖｓ１－Ｖｓ２｜が予め設定した許容値Ｖｔｈを越える。よって、この送受信超音波センサ４－１の検知エリアに障害物マーク１６－１をオーバレイする。
　また、図１８（ａ）に示すように、送受信超音波センサ４－１～４－４から時間ｔ０で超音波を出し、ｔ１時点に送受信超音波センサ４－１，４－２で障害物１５－２からの反射波を受けるが、この送受信超音波センサ４－１，４－２が受ける障害物１５－２からの反射波の振幅Ｖｓ１，Ｖｓ２が略等しい場合、すなわち、｜Ｖｓ１－Ｖｓ２｜が予め設定した許容値Ｖｔｈ以下になると、図２２（ｂ）に示すように、送受信超音波センサ４－１、４－２の検知エリアに障害物マーク１６－２をオーバレイする。
　図２３は図５に示すように、送受信超音波センサ４－１～４－４の矩形状の検知エリア４－１Ｈ～４－４Ｈを互いに重ならないように並設して形成し、車幅以上の長さの平面壁のような障害物１５－Ｌを検知した状態を示す。
　図２４（ａ）は図２３の場合における送受信超音波センサ４－１～４－４の送受信状態を示すもので、送受信超音波センサ４－１～４－４から時間ｔ０で超音波を出し、ｔ１時点に送受信超音波センサ４－１～４－４で障害物１５－Ｌからの反射波を受ける。
　この反射波によって、図２４（ｂ）に示すように、カメラ３の撮像画像上に障害物１５－Ｌの位置を明示する場合、送受信超音波センサ４－１～４－４の反射波の振幅は送受信超音波センサ４－１～４－４とも全て略同じ大きさであるので、この送受信超音波センサ４－１～４－４の全ての検知エリア４－１Ｈ～４－４Ｈに障害物マーク１６－Ｌをオーバレイする。
　以上のように、この実施の形態によれば、障害物の水平方向の位置が判別できるので、撮像画面上の障害物に対する障害物マークのオーバレイの位置精度が向上する。
　また、検知閾値レベルを変更して、検知エリアを矩形状あるいは放射状に設定し、水平方向の隣り合う距離センサの検知エリアが部分的に重なり合うあるいは重ならないように設定し、前記の重なり合う検知エリアを設定した場合は隣り合う距離センサでの同一距離での検知結果の論理積により障害物の方位を判定するので、水平方向の位置分解能が向上する。
　操舵角センサの角度情報に基づき、内輪側の距離センサの水平方向の検知エリアを直線走行時に比べて広くなるように検知閾値レベルを低く設定し、外輪側の距離センサの水平方向の検知エリアを直線走行時に比べて狭くなるように検知閾値レベルを高く設定するので、車両が通過するエリアの障害物のみ検知できるので、不要な情報を出力しないため、ドライバの負荷が軽減される。
　検知閾値レベルを順次切り替えて垂直方向の検知エリアを変更し、検知可能な最大高さの検知エリアで障害物の高さを判定するので、障害物の高さ方向の情報が得られ、縁石など低い障害物との区別が容易になる。
　操舵角とともに、検知閾値レベルを順次切り替えて水平方向の検知エリアを変更し、進行する車両の車両幅内と車両幅外とを区別して検知可能なエリアと判定するとともに、操舵角により左右の検知エリアを変更することにより、不要な検知情報を削除できる。
　車両の移動軌跡情報に基づき、時系列における障害物の検知状況を把握して、移動する障害物が、車両の車両幅内に進入してくることを検知可能としたので、水平方向に移動する移動物体を追尾することにより衝突の可能性を予測することができる。
　距離センサによって特定される障害物の高さ方向を含めた先端部分と車両との間の距離が最短になる衝突可能な障害物に対して、カメラ映像における障害物マークをオーバレイするので、衝突しない低い障害物は障害物マークをしないため、障害部による衝突可能性の判定精度が高まる。
　車両のコーナー部に取り付けたコーナーセンサあるいはカメラ画像の認識処理で進行する車両幅外に障害物を検知した場合は、距離センサの検知エリア外のカメラ映像に対して障害物マークをオーバレイするので、衝突前の障害物の存在が事前にわかる。
　複数の隣り合う距離センサで検出した距離情報が予め定めた許容範囲Ｔｔｈ内であった場合、障害物マークは前記距離センサの検出範囲にわたってオーバレイし、許容範囲Ｔｔｈを超えると、短距離に位置する障害物位置に障害物マークをオーバレイするので、電柱のような幅の狭い障害物に比べて、車幅以上の長さの平面壁の障害物では全車幅に渡って同じ距離に障害物を検知するため、各センサの検知エリア交差位置に障害物が存在する場合に有効である。
　複数の隣り合う距離センサで検出した距離情報が予め定めた許容範囲内Ｔｔｈであって、隣り合う超音波センサの障害物からの反射波のレベル差が予め定めた許容値Ｖｔｈ以下の場合は、障害物マークは当該超音波センサの検出範囲にわたってオーバレイし、上記の反射波のレベル差が許容値Ｖｔｈを越えた場合は、レベルが大きい方の距離センサの検知エリアに障害物マークをオーバレイするので、各超音波センサの検知エリア交差位置に障害物が存在する場合に有効である。障害物が車幅以上の長さの平面壁の場合は、全ての検知エリアに障害物が存在すると判定し、障害物マークをオーバレイする。
　なお、図示の実施の形態では、距離センサとして超音波センサを用いて説明したが、距離センサとしてはレーザであっても同一の作用効果が得られる。
　以上のように、この発明に係る車両後方監視装置は、車両後方の障害物を検知することができるので、車両に用いるのに適している。

Claims (10)

  1. 　障害物までの距離を検知する複数の距離センサと、前記距離センサの受信信号に基づいて障害物の有無を判定する障害物判定部と、前記障害物判定部で判定した障害物までの距離に準じて直接撮影画像と鳥瞰画像の表示画像を切り替える表示画面切り替え部を有する車両後方監視装置において、
    　前記距離センサの検知閾値レベルを変更し、水平の検知エリア、垂直の検知エリアおよび方位分解能を変える閾値レベル変更部と、
    　前記障害物判定部で判定した障害物までの距離と障害物からの反射波の振幅情報とにより障害物マークの表示位置を判定し、前記表示画面切り替え部から供給されるカメラによる撮像画像に、前記判定された表示位置に障害物マークを画像合成するオーバレイ部とを備えたことを特徴とした車両後方監視装置。
  2. 　閾値レベル変更部は、距離センサの伝播距離―感度特性に合わせて、伝播距離あるいは伝播時間に基づき検知閾値レベルを変更して、検知エリアを矩形状あるいは放射状に設定し、水平方向の隣り合う距離センサの検知エリアが部分的に重なり合うあるいは重ならないように設定する機能を有し、前記の重なり合う検知エリアを設定した場合は隣り合う距離センサでの同一距離での検知結果の論理積により障害物の方位を判定する機能を有することを特徴とした請求項１記載の車両後方監視装置。
  3. 　操舵角センサを備え、閾値レベル変更部は、操舵角センサの角度情報に基づき、内輪側の距離センサの水平方向の検知エリアを直線走行時に比べて広くなるように検知閾値レベルを低く設定し、外輪側の距離センサの水平方向の検知エリアを直線走行時に比べて狭くなるように検知閾値レベルを高く設定する機能を有することを特徴とした請求項１記載の車両後方監視装置。
  4. 　閾値レベル変更部は、検知閾値レベルを順次切り替えて垂直方向の検知エリアを変更し、検知可能な最大高さの検知エリアで障害物の高さを判定する機能を有することを特徴とした請求項１記載の車両後方監視装置。
  5. 　閾値レベル変更部は、操舵角センサから操舵角とともに、検知閾値レベルを順次切り替えて水平方向の検知エリアを変更し、進行する車両の車両幅内と車両幅外とを区別して検知可能なエリアと判定する機能を有することを特徴とした請求項３記載の車両後方監視装置。
  6. 　車輪速センサを備え、この車輪センサからの情報を用いて計算した車両の移動軌跡情報に基づき、時系列における障害物の検知状況を把握して、移動する障害物が、車両の車両幅内に進入してくることを検知可能とすることを特徴とした請求項５記載の車両後方監視装置。
  7. 　オーバレイ部は、距離センサによって特定される障害物の高さ方向を含めた先端部分と車両との間の距離が最短になる衝突可能な障害物に対して、カメラ映像における障害物マークをオーバレイすることを特徴とした請求項３記載の車両後方監視装置。
  8. 　オーバレイ部は、車両のコーナー部に取り付けたコーナーセンサあるいはカメラ画像の認識処理で進行する車両幅外に障害物を検知した場合は、距離センサの検知エリア外のカメラ映像に対して障害物マークをオーバレイすることを特徴とした請求項５記載の車両後方監視装置。
  9. 　オーバレイ部は、複数の隣り合う距離センサで検出した距離情報が予め定めた許容範囲Ｔｔｈ内であった場合、障害物マークは前記距離センサの検出範囲にわたってオーバレイし、許容範囲Ｔｔｈを超えると、短距離に位置する障害物位置に障害物マークをオーバレイすること特徴とした請求項７記載の車両後方監視装置。
  10. 　オーバレイ部は、複数の隣り合う距離センサで検出した距離情報が予め定めた許容範囲内Ｔｔｈであって、隣り合う超音波センサの障害物からの反射波のレベル差が予め定めた許容値Ｖｔｈ以下の場合は、障害物マークは当該超音波センサの検出範囲にわたってオーバレイし、上記の反射波のレベル差が許容値Ｖｔｈを越えた場合は、レベルが大きい方の距離センサの検知エリアに障害物マークをオーバレイすること特徴とする請求項７記載の車両後方監視装置。
PCT/JP2010/003365 2010-05-19 2010-05-19 車両後方監視装置 WO2011145141A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2012515642A JP5501452B2 (ja) 2010-05-19 2010-05-19 車両後方監視装置
DE112010005572T DE112010005572T5 (de) 2010-05-19 2010-05-19 Fahrzeug-Rückansicht-Überwachungsvorrichtung
CN201080066797.5A CN102906593B (zh) 2010-05-19 2010-05-19 车辆后方监视装置
PCT/JP2010/003365 WO2011145141A1 (ja) 2010-05-19 2010-05-19 車両後方監視装置
US13/582,691 US9047779B2 (en) 2010-05-19 2010-05-19 Vehicle rear view monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2010/003365 WO2011145141A1 (ja) 2010-05-19 2010-05-19 車両後方監視装置

Publications (1)

Publication Number Publication Date
WO2011145141A1 true WO2011145141A1 (ja) 2011-11-24

Family

ID=44991269

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/003365 WO2011145141A1 (ja) 2010-05-19 2010-05-19 車両後方監視装置

Country Status (5)

Country Link
US (1) US9047779B2 (ja)
JP (1) JP5501452B2 (ja)
CN (1) CN102906593B (ja)
DE (1) DE112010005572T5 (ja)
WO (1) WO2011145141A1 (ja)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013122030A1 (ja) * 2012-02-14 2013-08-22 日産自動車株式会社 走行制御装置及び走行制御方法
WO2013129184A1 (ja) * 2012-02-27 2013-09-06 日産自動車株式会社 走行制御装置及び走行制御方法
WO2014178173A1 (ja) * 2013-04-30 2014-11-06 株式会社デンソー 障害物検出装置
JP2015532712A (ja) * 2012-08-25 2015-11-12 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 超音波センサの改善された作動方法、運転者支援装置および自動車
JP2016013793A (ja) * 2014-07-03 2016-01-28 株式会社デンソー 画像表示装置、画像表示方法
WO2016038773A1 (ja) * 2014-09-12 2016-03-17 パナソニックＩｐマネジメント株式会社 衝突防止装置
JPWO2018047295A1 (ja) * 2016-09-09 2019-01-24 三菱電機株式会社 駐車支援装置
WO2019187883A1 (ja) * 2018-03-29 2019-10-03 ヤンマー株式会社 作業車両用の障害物検知システム
WO2019208283A1 (ja) * 2018-04-27 2019-10-31 株式会社タダノ クレーン車
JP2020021980A (ja) * 2018-07-30 2020-02-06 株式会社Ｊｖｃケンウッド 俯瞰画像生成装置、俯瞰画像生成方法およびプログラム
US11014566B2 (en) 2016-10-27 2021-05-25 Denso Corporation Object detection apparatus
JP2021131902A (ja) * 2020-06-30 2021-09-09 ベイジン バイドゥ ネットコム サイエンス アンド テクノロジー カンパニー リミテッド 車両用障害物回避方法、装置、電子機器及びコンピュータ記憶媒体
JP2022099988A (ja) * 2020-12-23 2022-07-05 トヨタ自動車株式会社 車両用センサ取り付け構造及びセンサ制御装置
JP2022146249A (ja) * 2021-03-22 2022-10-05 名古屋電機工業株式会社 障害物検知装置、障害物検知方法およびプログラム
US20240045438A1 (en) * 2012-03-16 2024-02-08 Waymo Llc Actively Modifying a Field of View of an Autonomous Vehicle in View of Constraints

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1363810B1 (en) 2001-01-23 2007-05-30 Donnelly Corporation Improved vehicular lighting system
US9064293B2 (en) * 2010-06-15 2015-06-23 Mitsubishi Electric Corporation Vehicle surroundings monitoring device
KR101797261B1 (ko) * 2010-06-18 2017-11-13 히다찌 겐끼 가부시키가이샤 작업 기계의 주위 감시 장치
KR101896715B1 (ko) * 2012-10-31 2018-09-07 현대자동차주식회사 주변차량 위치 추적 장치 및 방법
US20150109444A1 (en) * 2013-10-22 2015-04-23 GM Global Technology Operations LLC Vision-based object sensing and highlighting in vehicle image display systems
US20150116501A1 (en) * 2013-10-30 2015-04-30 Sony Network Entertainment International Llc System and method for tracking objects
DE102013021326A1 (de) 2013-12-17 2015-06-18 Valeo Schalter Und Sensoren Gmbh Verfahren zum Detektieren einer auf einem Boden aufgebrachten Markierung, Fahrerassistenzeinrichtung und Kraftfahrzeug
JP5950122B2 (ja) * 2013-12-27 2016-07-13 株式会社国際電気通信基礎技術研究所 キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム
US20150268341A1 (en) * 2014-03-21 2015-09-24 Ford Global Technologies, Llc Object detection using ultrasonic phase arrays
KR101670847B1 (ko) * 2014-04-04 2016-11-09 주식회사 와이즈오토모티브 차량 주변 이미지 생성 장치 및 방법
US9342747B2 (en) * 2014-04-14 2016-05-17 Bendix Commercial Vehicle Systems Llc Vehicle driver assistance apparatus for assisting a vehicle driver in maneuvering the vehicle relative to an object
DE102014105627A1 (de) 2014-04-22 2015-10-22 Haldex Brake Products Gmbh Verwendung eines automatischen Laderampen-Andocksystems eines Nutzfahrzeug-Anhängers
US9604642B2 (en) * 2014-04-29 2017-03-28 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Positioning autonomous vehicles based on field of view
DE102014107235A1 (de) * 2014-05-22 2015-11-26 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Verfahren zur Darstellung einer Fahrzeugumgebung auf einer Anzeigevorrichtung; eine Anzeigevorrichtung; ein System aus einer Mehrzahl an Bilderfassungseinheiten und einer Anzeigevorrichtung; ein Computerprogramm
JP5962706B2 (ja) * 2014-06-04 2016-08-03 トヨタ自動車株式会社 運転支援装置
CN104155656A (zh) * 2014-06-27 2014-11-19 江苏领腾汽车部件有限公司 倒车雷达装置
JP6528382B2 (ja) * 2014-10-22 2019-06-12 株式会社Ｓｏｋｅｎ 車両用障害物検出装置
US9834141B2 (en) 2014-10-28 2017-12-05 Nissan North America, Inc. Vehicle object detection system
KR101637716B1 (ko) * 2014-11-03 2016-07-07 현대자동차주식회사 차량의 장애물 위치 인식 장치 및 방법
US10391938B2 (en) * 2015-05-15 2019-08-27 Ford Global Technologies, Llc Imaging system for locating a moving object in relation to another object
KR101677856B1 (ko) * 2015-08-06 2016-11-18 연세대학교 산학협력단 차량용 후방 카메라 시스템
KR101869291B1 (ko) * 2015-09-21 2018-06-21 자동차부품연구원 차량의 장애물 감지 장치 및 방법
JP6493143B2 (ja) * 2015-10-15 2019-04-03 株式会社デンソー 表示制御装置及び表示制御プログラム
US20170124881A1 (en) * 2015-10-28 2017-05-04 Velvac Incorporated Blind zone warning for semi-trailer
WO2017089294A1 (en) * 2015-11-23 2017-06-01 Robert Bosch Gmbh Object detection system and method thereof
CN105607070A (zh) * 2015-12-20 2016-05-25 华晨汽车集团控股有限公司 超声波传感器探测方法
JP6765069B2 (ja) * 2016-03-15 2020-10-07 パナソニックＩｐマネジメント株式会社 物体検知装置
US10576892B2 (en) 2016-03-24 2020-03-03 Ford Global Technologies, Llc System and method for generating a hybrid camera view in a vehicle
CN108885839A (zh) * 2016-03-31 2018-11-23 古河电气工业株式会社 监视装置和监视方法
JP6595401B2 (ja) * 2016-04-26 2019-10-23 株式会社Ｓｏｋｅｎ 表示制御装置
JP6715456B2 (ja) * 2016-09-30 2020-07-01 パナソニックＩｐマネジメント株式会社 検出装置、検出方法、および検出プログラム
CN106846909B (zh) * 2017-02-24 2019-05-03 青岛智慧城市产业发展有限公司 智能马路防撞辅助系统
CN108733041B (zh) * 2017-04-21 2021-02-09 苏州宝时得电动工具有限公司 自动移动设备及其超声避障方法
JP6750567B2 (ja) * 2017-05-30 2020-09-02 株式会社Ｓｏｋｅｎ 物体検出装置
US10557936B2 (en) 2017-06-30 2020-02-11 Gopro, Inc. Target value detection for unmanned aerial vehicles
CN109720335A (zh) * 2017-10-27 2019-05-07 法雷奥汽车内部控制（深圳）有限公司 机动车辆的接近辅助系统和驾驶辅助方法
CN108171116B (zh) * 2017-12-01 2021-03-26 北京臻迪科技股份有限公司 飞行器辅助避障方法、装置和辅助避障系统
CN108116406A (zh) * 2017-12-29 2018-06-05 广州优保爱驾科技有限公司 一种探头通用自动泊车系统及方法
US11609307B2 (en) * 2018-03-26 2023-03-21 Mitsubishi Electric Corporation Object detection apparatus, vehicle, object detection method, and computer readable medium
DE102018208277A1 (de) * 2018-05-25 2019-11-28 Robert Bosch Gmbh Trainingsverfahren für ein Fahrerassistenzverfahren, Fahrerassistenzverfahren, Steuergerät und Fahrzeug mit dem Steuergerät
EP3579020B1 (de) * 2018-06-05 2021-03-31 Elmos Semiconductor SE Verfahren zur erkennung eines hindernisses mit hilfe von reflektierten ultraschallwellen
FR3082811B1 (fr) * 2018-06-20 2020-07-31 Psa Automobiles Sa Vehicule automobile equipe de capteurs anticollisions
US11967187B2 (en) * 2018-09-21 2024-04-23 Honda Motor Co., Ltd. Vehicle inspection system
JP7088807B2 (ja) 2018-10-29 2022-06-21 京セラ株式会社 画像処理装置、カメラ、移動体および画像処理方法
KR20210006558A (ko) * 2019-07-08 2021-01-19 현대자동차주식회사 Ecs의 노면정보 보정방법 및 시스템
CN111897335A (zh) * 2020-08-02 2020-11-06 珠海市一微半导体有限公司 一种机器人弓字型行走时的避障控制方法及其控制系统
CN111897337B (zh) * 2020-08-02 2024-06-18 珠海一微半导体股份有限公司 一种机器人沿边行走时的避障控制方法及其控制系统
JP2022142510A (ja) * 2021-03-16 2022-09-30 パナソニックＩｐマネジメント株式会社 車両用周辺警戒装置および車両用周辺警戒方法
US20220317292A1 (en) * 2021-03-30 2022-10-06 Panasonic Intellectual Property Management Co., Ltd. Distance measurement device
JP2023027707A (ja) * 2021-08-17 2023-03-02 パナソニックＩｐマネジメント株式会社 物体検出システムおよび物体検出方法
CN114428252A (zh) * 2022-01-25 2022-05-03 珠海极海半导体有限公司 超声波距离检测芯片、系统、方法及车辆控制方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004138481A (ja) * 2002-10-17 2004-05-13 Matsushita Electric Ind Co Ltd 位置測定装置およびこれを用いたロボット
JP2005012465A (ja) * 2003-06-18 2005-01-13 Denso Corp 車両用周辺表示装置
JP2005056336A (ja) * 2003-08-07 2005-03-03 Denso Corp 車両周辺監視装置
JP2006168525A (ja) * 2004-12-15 2006-06-29 Denso Corp 車両周辺監視装置
JP2008195268A (ja) * 2007-02-14 2008-08-28 Denso Corp 車両周辺監視装置
JP2009065483A (ja) * 2007-09-06 2009-03-26 Denso Corp 駐車支援装置
JP2009173239A (ja) * 2008-01-28 2009-08-06 Toyota Motor Corp 車両用周辺監視装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62220890A (ja) * 1986-03-20 1987-09-29 Matsushita Electric Works Ltd 車両用障害物検知装置
DE60207655T2 (de) * 2001-09-07 2006-06-08 Matsushita Electric Industrial Co., Ltd., Kadoma Vorrichtung zum Anzeigen der Umgebung eines Fahrzeuges und System zur Bildbereitstellung
JP4427953B2 (ja) * 2003-01-29 2010-03-10 株式会社豊田自動織機 駐車支援装置
KR20050107388A (ko) * 2003-03-20 2005-11-11 마쯔시다덴기산교 가부시키가이샤 장해물 검지 장치
US7298247B2 (en) * 2004-04-02 2007-11-20 Denso Corporation Vehicle periphery monitoring system
WO2005107261A1 (ja) * 2004-04-27 2005-11-10 Matsushita Electric Industrial Co., Ltd. 車両周囲表示装置
ITMO20040245A1 (it) * 2004-09-24 2004-12-24 Meta System Spa Sistema e metodo di rilevamento degli ostacoli in particolare per sistemi di agevolazione del parcheggio di veicoli.
JP2006098359A (ja) * 2004-09-30 2006-04-13 Denso Corp 障害物検知装置
JP4200980B2 (ja) * 2005-04-13 2008-12-24 株式会社デンソー 車載用衝突物判定装置
JP2006341641A (ja) * 2005-06-07 2006-12-21 Nissan Motor Co Ltd 映像表示装置及び映像表示方法
JP4600760B2 (ja) * 2005-06-27 2010-12-15 アイシン精機株式会社 障害物検出装置
JP4682816B2 (ja) 2005-11-17 2011-05-11 アイシン精機株式会社 障害物位置検出装置
DE602007000509D1 (de) * 2006-01-31 2009-03-19 Mekra Lang Gmbh & Co Kg Rückspiegel für Fahrzeuge mit einer elektronischen Display zur Anzeige von Objektion in einem überwachten Bereich zur Kollisionsvermeidung
JP2007333609A (ja) * 2006-06-16 2007-12-27 Denso Corp 障害物検知装置
US7567168B2 (en) * 2006-10-24 2009-07-28 Shih-Hsiung Li Car reversal radar that automatically modifies the sensor scanning range and method of the same
JP4846545B2 (ja) * 2006-11-29 2011-12-28 株式会社デンソー 運転支援装置
JP2008195263A (ja) * 2007-02-14 2008-08-28 Denso Corp 車両用後退支援装置
JP2008219063A (ja) * 2007-02-28 2008-09-18 Sanyo Electric Co Ltd 車両周辺監視装置及び方法
JP4404103B2 (ja) * 2007-03-22 2010-01-27 株式会社デンソー 車両外部撮影表示システムおよび画像表示制御装置
JP4325705B2 (ja) * 2007-06-15 2009-09-02 株式会社デンソー 表示システム及びプログラム
JP2009060404A (ja) * 2007-08-31 2009-03-19 Denso Corp 映像処理装置
US8218007B2 (en) * 2007-09-23 2012-07-10 Volkswagen Ag Camera system for a vehicle and method for controlling a camera system
JP5088074B2 (ja) * 2007-10-01 2012-12-05 日産自動車株式会社 駐車支援装置及び方法
JP5057936B2 (ja) * 2007-11-09 2012-10-24 アルパイン株式会社 鳥瞰画像生成装置および方法
US8305444B2 (en) * 2008-11-14 2012-11-06 Toyota Motor Engineering & Manufacturing North America, Inc. Integrated visual display system
US8217773B2 (en) * 2008-12-04 2012-07-10 Denso Corporation Field watch apparatus
JP4880712B2 (ja) * 2009-02-27 2012-02-22 株式会社日本自動車部品総合研究所 障害物検出装置
TWI392366B (zh) * 2009-12-31 2013-04-01 Ind Tech Res Inst 全周鳥瞰影像距離介面產生方法與系統

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004138481A (ja) * 2002-10-17 2004-05-13 Matsushita Electric Ind Co Ltd 位置測定装置およびこれを用いたロボット
JP2005012465A (ja) * 2003-06-18 2005-01-13 Denso Corp 車両用周辺表示装置
JP2005056336A (ja) * 2003-08-07 2005-03-03 Denso Corp 車両周辺監視装置
JP2006168525A (ja) * 2004-12-15 2006-06-29 Denso Corp 車両周辺監視装置
JP2008195268A (ja) * 2007-02-14 2008-08-28 Denso Corp 車両周辺監視装置
JP2009065483A (ja) * 2007-09-06 2009-03-26 Denso Corp 駐車支援装置
JP2009173239A (ja) * 2008-01-28 2009-08-06 Toyota Motor Corp 車両用周辺監視装置

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013122030A1 (ja) * 2012-02-14 2013-08-22 日産自動車株式会社 走行制御装置及び走行制御方法
US9744915B2 (en) 2012-02-27 2017-08-29 Nissan Motor Co., Ltd. Travel control device and travel control method
WO2013129184A1 (ja) * 2012-02-27 2013-09-06 日産自動車株式会社 走行制御装置及び走行制御方法
CN104136282A (zh) * 2012-02-27 2014-11-05 日产自动车株式会社 行驶控制装置以及行驶控制方法
JPWO2013129184A1 (ja) * 2012-02-27 2015-07-30 日産自動車株式会社 走行制御装置及び走行制御方法
US20240045438A1 (en) * 2012-03-16 2024-02-08 Waymo Llc Actively Modifying a Field of View of an Autonomous Vehicle in View of Constraints
JP2015532712A (ja) * 2012-08-25 2015-11-12 ヴァレオ・シャルター・ウント・ゼンゾーレン・ゲーエムベーハー 超音波センサの改善された作動方法、運転者支援装置および自動車
US9581694B2 (en) 2012-08-25 2017-02-28 Valeo Schalter Und Sensoren Gmbh Method for the improved actuation of ultrasonic sensors, driver assistance device and motor vehicle
WO2014178173A1 (ja) * 2013-04-30 2014-11-06 株式会社デンソー 障害物検出装置
JP2014215283A (ja) * 2013-04-30 2014-11-17 株式会社デンソー 障害物検出装置
JP2016013793A (ja) * 2014-07-03 2016-01-28 株式会社デンソー 画像表示装置、画像表示方法
WO2016038773A1 (ja) * 2014-09-12 2016-03-17 パナソニックＩｐマネジメント株式会社 衝突防止装置
US10011275B2 (en) 2014-09-12 2018-07-03 Panasonic Intellectual Property Management Co., Ltd. Collision prevention device
JPWO2016038773A1 (ja) * 2014-09-12 2017-07-13 パナソニックＩｐマネジメント株式会社 衝突防止装置
JPWO2018047295A1 (ja) * 2016-09-09 2019-01-24 三菱電機株式会社 駐車支援装置
US11014566B2 (en) 2016-10-27 2021-05-25 Denso Corporation Object detection apparatus
WO2019187883A1 (ja) * 2018-03-29 2019-10-03 ヤンマー株式会社 作業車両用の障害物検知システム
JP2019174344A (ja) * 2018-03-29 2019-10-10 ヤンマー株式会社 作業車両用の障害物検知システム
JP7147248B2 (ja) 2018-04-27 2022-10-05 株式会社タダノ クレーン車
WO2019208283A1 (ja) * 2018-04-27 2019-10-31 株式会社タダノ クレーン車
JP2019189422A (ja) * 2018-04-27 2019-10-31 株式会社タダノ クレーン車
US11772941B2 (en) 2018-04-27 2023-10-03 Tadano Ltd. Crane vehicle
WO2020026836A1 (ja) * 2018-07-30 2020-02-06 株式会社Ｊｖｃケンウッド 俯瞰画像生成装置、俯瞰画像生成方法およびプログラム
US11498484B2 (en) 2018-07-30 2022-11-15 Jvckenwood Corporation Overhead image generation device, overhead image generation method, and program
JP7180172B2 (ja) 2018-07-30 2022-11-30 株式会社Ｊｖｃケンウッド 俯瞰画像生成装置、俯瞰画像生成方法およびプログラム
JP2020021980A (ja) * 2018-07-30 2020-02-06 株式会社Ｊｖｃケンウッド 俯瞰画像生成装置、俯瞰画像生成方法およびプログラム
JP2021131902A (ja) * 2020-06-30 2021-09-09 ベイジン バイドゥ ネットコム サイエンス アンド テクノロジー カンパニー リミテッド 車両用障害物回避方法、装置、電子機器及びコンピュータ記憶媒体
US11807269B2 (en) 2020-06-30 2023-11-07 Beijing Baidu Netcom Science And Technology Co., Ltd. Method for vehicle avoiding obstacle, electronic device, and computer storage medium
JP2022099988A (ja) * 2020-12-23 2022-07-05 トヨタ自動車株式会社 車両用センサ取り付け構造及びセンサ制御装置
JP2022146249A (ja) * 2021-03-22 2022-10-05 名古屋電機工業株式会社 障害物検知装置、障害物検知方法およびプログラム
JP7273084B2 (ja) 2021-03-22 2023-05-12 名古屋電機工業株式会社 障害物検知装置、障害物検知方法およびプログラム

Also Published As

Publication number Publication date
US20120327239A1 (en) 2012-12-27
CN102906593B (zh) 2015-06-17
US9047779B2 (en) 2015-06-02
CN102906593A (zh) 2013-01-30
JP5501452B2 (ja) 2014-05-21
JPWO2011145141A1 (ja) 2013-07-22
DE112010005572T5 (de) 2013-02-28

Similar Documents

Publication Publication Date Title
WO2011145141A1 (ja) 車両後方監視装置
US8742947B2 (en) Parking space monitoring device
JP6246465B2 (ja) 路肩の空間認知方法及びシステム
JP4873651B2 (ja) 自動車用の装置及び方法
JP3779280B2 (ja) 衝突予測装置
JP6413097B2 (ja) 物体検知装置
JP6089585B2 (ja) 障害物検知装置
KR20170114054A (ko) 충돌방지장치 및 충돌방지방법
WO2018047295A1 (ja) 駐車支援装置
WO2016038773A1 (ja) 衝突防止装置
JP3826805B2 (ja) 自立走行車の衝突防止方法
JP2015004562A (ja) 障害物検知装置
JP2010018180A (ja) 駐車支援装置及び駐車支援方法
KR20140039046A (ko) 차량과 객체 사이의 상대 위치 결정 방법
JP2009140175A (ja) 白線検出装置
JP2015191441A (ja) 衝突判定装置
JP5891188B2 (ja) 駐車空間検知装置
JP2001122059A (ja) 車両用駐車スペース検出装置
JP2009294094A (ja) 障害物検出装置、障害物検出方法及びコンピュータプログラム
CN116324490A (zh) 在机动车辆周围环境中表征物体的方法
JP4872517B2 (ja) 障害物認識装置
KR101734726B1 (ko) 주차공간 탐지 방법 및 이를 실행하는 장치
JP6953166B2 (ja) 電動車両の自動走行制御装置および自動走行制御方法
US20220185309A1 (en) Rear lateral sensing system and method of vehicle
JP2007240316A (ja) 車載測距装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201080066797.5

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10851706

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012515642

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13582691

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 112010005572

Country of ref document: DE

Ref document number: 1120100055726

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10851706

Country of ref document: EP

Kind code of ref document: A1