WO2012169029A1 - 車線逸脱防止支援装置、区分線表示方法、プログラム - Google Patents

車線逸脱防止支援装置、区分線表示方法、プログラム Download PDF

Info

Publication number
WO2012169029A1
WO2012169029A1 PCT/JP2011/063170 JP2011063170W WO2012169029A1 WO 2012169029 A1 WO2012169029 A1 WO 2012169029A1 JP 2011063170 W JP2011063170 W JP 2011063170W WO 2012169029 A1 WO2012169029 A1 WO 2012169029A1
Authority
WO
WIPO (PCT)
Prior art keywords
lane
white line
recognized
vehicle position
state
Prior art date
Application number
PCT/JP2011/063170
Other languages
English (en)
French (fr)
Inventor
寛暁 片岡
Original Assignee
トヨタ自動車株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by トヨタ自動車株式会社 filed Critical トヨタ自動車株式会社
Priority to DE112011100180.0T priority Critical patent/DE112011100180B4/de
Priority to JP2012521821A priority patent/JP5316713B2/ja
Priority to PCT/JP2011/063170 priority patent/WO2012169029A1/ja
Priority to KR1020127017034A priority patent/KR101328363B1/ko
Priority to CN201180037850.3A priority patent/CN103052976B/zh
Priority to US13/463,431 priority patent/US8896687B2/en
Publication of WO2012169029A1 publication Critical patent/WO2012169029A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/10Path keeping
    • B60Y2300/12Lane keeping

Definitions

  • the present invention relates to a lane departure prevention support apparatus for recognizing a lane division line and assisting in preventing departure from the lane according to the own vehicle position in a traveling lane, and in particular, a lane departure indicating a recognition state of a lane division line.
  • the present invention relates to a prevention support device.
  • a lane departure warning device (LDW: Lane Departure Warning) that predicts departure from the lane and sounds an alarm when the on-board camera or image processing device recognizes the white line, and steering for driving in the center of the lane Lane maintenance support device (LKA: Lane added power Keeping Assist) is known.
  • LDW Lane Departure Warning
  • LKA Lane added power Keeping Assist
  • FIG. 1A is an example of a diagram illustrating a display example when a white line is recognized in LDW / LKA and a display example when a white line is not recognized.
  • the white line recognition state is displayed as a white line icon on a display device such as a liquid crystal display.
  • the white line icon is displayed thick, and when the white line is not recognized, the white line icon is displayed thinly.For example, the white line icon is displayed so that the driver can recognize that the white line is not recognized. Is displayed. If the white line is not recognized, the LDW / LKA cannot predict the departure from the driving lane and sound an alarm, and cannot add steering force to drive the center of the lane.
  • the reason why the white line is not recognized is that there is no road marking, the white line is blurred due to faint or heavy rain, etc., the wiper is operating at high speed, or the driver performs a predetermined operation such as changing the lane There are cases where you are doing.
  • Fig. 1 (a) by notifying the driver that the LDW / LKA does not operate, it is possible to prevent the driver from overconfusing the LDW / LKA (expecting excessive performance over the LDW / LKA system). Can tell you that support is limited when the white line is not fully recognized.)
  • the vehicle verification affixing position ETC (Electronic (Toll Collection) Since the mounting position of the antenna is not preferable, it is possible to tell that the LDW / LKA cannot operate properly due to the camera's field of view being blocked.
  • FIG. 1B shows a display example of the white line icon when only the right white line is recognized
  • FIG. 1C shows a display example of the white line icon when only the left white line is recognized.
  • LDW / LKA can inform the driver of the white line recognition status by displaying only the white line icon on the recognized side thickly and displaying the white line icon on the unrecognized side in the middle. it can.
  • FIG. 2 (a) is an example for explaining the angle of view of the camera.
  • LDW / LKA is used for image processing such as white line recognition for only a predetermined white line in front of the vehicle entering the angle of view.
  • the far end is a few tens of meters away from the vehicle so that the white line recognition accuracy can be maintained, and the front side is not obstructed by a bonnet or the like, and about 10 meters from the vehicle entering the angle of view is the near end.
  • the LDW / LKA can recognize the white line from the closer side of the vehicle if the angle of view can be further widened, the situation where only the far white line is not recognized even if the vehicle approaches the white line on one side can be reduced.
  • the angle of view is widened, the total number of pixels of the camera does not change. Therefore, if the angle of view is widened, the number of pixels in which the white line appears (occupies) decreases, and the image processing accuracy in the distance decreases. End up. In this case, the calculation accuracy of the curve radius and curvature of the lane is particularly lowered.
  • LDW / LKA cameras are often shared with cameras of other driving assistance devices, and these require image processing of distant scenery.
  • an auto high beam apparatus that automatically switches between a high beam and a low beam of a headlamp detects a preceding vehicle or an oncoming vehicle several hundred meters ahead with a camera and switches the beam direction. For this reason, it is not preferable that the detection accuracy of the preceding vehicle or the oncoming vehicle is lowered by widening the angle of view.
  • the pedestrian detection device that detects the pedestrian and alerts the driver, the alerting will be delayed if the distant pedestrian cannot be detected, so the detection accuracy of the distant pedestrian can be increased by widening the angle of view. It is not preferable that the decrease.
  • LDW / LKA employs a camera (lens) with a relatively narrow angle of view that does not degrade the image processing accuracy of distant images.
  • FIG. 2B is an example of a diagram for explaining restrictions on the white line recognition area.
  • the calculation load of image processing such as white line recognition is generally high.
  • white lines exist on the right and left sides of the center of the image. Therefore, in order to reduce the processing load, the LDW / LKA recognizes a white line only from a predetermined minimum area (left white line recognition area and right white line recognition area).
  • a predetermined minimum area left white line recognition area and right white line recognition area.
  • FIGS. 3A and 3B are examples of diagrams illustrating a situation where the left white line is out of the left white line recognition region. If the vehicle greatly approaches the right white line as shown in FIG. 3 (a), the left white line will deviate from the left white line recognition area as shown in FIG. 3 (b). As described above, as long as the conventional technology is adopted, when the vehicle greatly approaches one of the left and right white lines, only the white line icons as shown in FIGS. 1B and 1C are displayed, and the driver feels uncomfortable. There was a risk of feeling. JP 2007-125968 A
  • an object of the present invention is to provide a lane departure prevention support device that can accurately convey a white line recognition state on one side to a driver.
  • the present invention relates to a photographing means for photographing a lane marking that divides a driving lane, and a vehicle that recognizes a lane marking from the recognition area of the captured image data and detects the position of the vehicle in the width direction in the driving lane.
  • a lane departure prevention support apparatus having position detection means, support means for supporting departure prevention from a driving lane using a recognition result of a lane line, display means for displaying a recognition result of a lane line,
  • a recognition result display control means for displaying an unrecognized lane division line in a display mode other than a display mode indicating that it is not recognized according to the vehicle position when one of the left and right white lines is not recognized; Have.
  • the present invention can provide a lane departure prevention support device that can accurately convey the white line recognition state on one side to the driver.
  • FIG. 1 It is an example of the figure explaining the display mode of a specific unrecognized state. It is an example of the flowchart figure which shows the procedure in which a lane departure prevention assistance apparatus displays a white line recognition state. It is an example of the figure which shows another display example of the gray display of a specific unrecognized state. It is a figure which shows an example of a different white line icon in the display mode of a specific unrecognized state, and the display mode of a recognized state and an unrecognized state. It is a figure which shows an example of a different white line icon in the display mode of a specific unrecognized state, and the display mode of a recognized state and an unrecognized state.
  • Lane recognition camera 11 Lane recognition camera 12 Deviation prevention support ECU 13 Meter ECU 14 Power steering ECU 15 Camera ECU 16 Main SW 19 Vehicle speed sensor 20 Brake SW DESCRIPTION OF SYMBOLS 21 Information display part 41 Unrecognized determination part 42 Distance determination part 43 Display request part 44 Display switching part 45 White line movement determination part 100 Lane departure prevention assistance apparatus
  • FIG. 4 is a diagram illustrating an example of a display mode of a white line icon corresponding to a white line recognition state.
  • the display mode of the white line icons in the following three white line recognition states will be mainly described.
  • ⁇ Recognition state left recognition state, right recognition state
  • Specific unrecognized state left unrecognized state, right unrecognized state
  • Unrecognized state left unrecognized state, right unrecognized state
  • the recognition state refers to a state where a white line is recognized
  • the unrecognized state refers to a state where a white line is not recognized.
  • the specific unrecognized state is a state in which the white line on the side far from the vehicle is out of the white line recognition area of the image data because the vehicle approaches the right or left white line and is in an unrecognized state. Therefore, the specific unrecognized state is a specific state among the unrecognized states.
  • the left and right white lines are displayed as white white line icons on a black background.
  • the white line icon of the white line on the side that is not recognized in the unrecognized state is displayed without a white frame.
  • a white line icon is displayed in the same display manner as the recognized state. That is, a white line icon that is not actually recognized is displayed as a recognition state.
  • the white line icon in the specific unrecognized state is displayed in the same manner as the recognized state. Thus, the uncomfortable feeling felt by the driver can be reduced.
  • the white line icon blinks as shown in FIG.
  • the icon in the alarm activation state is a white line in any of the recognized state, the specific unrecognized state, and the unrecognized state, such as reversing black and white, blinking the entire display area, or switching the color of the white line icon in a short time.
  • the display mode may be different from the icon and has a high alertness.
  • the display mode is the same when the vehicle deviates from the right white line and when the vehicle deviates from the left white line, but they can be different.
  • the right white line is deviated, only the right white line icon is blinked.
  • the left white line is deviated, only the left white line icon is blinked.
  • the white line in the present embodiment refers to a travel division line of a lane (travel lane) in which the vehicle travels, and does not have to be white when the driver visually observes it, but yellow, orange, or other colors
  • the running line is also included in the white line.
  • the camera can shoot with infrared rays or ultraviolet rays, it does not need to be visible.
  • the left and right white lines are formed on the road surface with dotted lines instead of solid lines, they are simply referred to as white lines.
  • FIG. 5 shows an example of a configuration diagram of the lane departure prevention support apparatus 100 of the present embodiment.
  • the lane departure prevention support device 100 is controlled by a departure prevention support ECU (Electronic Control Unit) 12.
  • the departure prevention support ECU 12 includes a lane recognition camera 11, a meter ECU 13, a power steering ECU 14, etc. Communication is possible via an in-vehicle network such as Area Network) or FlexRay (via a gateway device if necessary).
  • an in-vehicle network such as Area Network
  • FlexRay via a gateway device if necessary.
  • the vehicle speed sensor 19, brake SW20, blinker SW17, and wiper SW18 are illustrated, these are often connected via an ECU (not shown).
  • the lane departure prevention support device operates when the main SW 16 is turned on.
  • the lane recognition camera 11 is mounted, for example, in front of the vehicle in an indoor room mirror at a substantially central position in the vehicle width direction, with the optical axis facing slightly downward from the horizontal, and images a predetermined angular range in front of the vehicle.
  • the lane recognition camera 11 outputs image data of a predetermined luminance gradation (for example, 256 gradations) every cycle time (for example, 30 to 60 frames / second) by using a CMOS or CCD photoelectric conversion element.
  • a predetermined luminance gradation for example, 256 gradations
  • cycle time for example, 30 to 60 frames / second
  • the lane recognition camera 11 is configured integrally with the camera ECU 15, and the camera ECU 15 performs image processing on the sequentially captured image data, and recognizes the left and right white lines separating the traveling lanes drawn on the road.
  • the lane recognition camera 11 and the camera ECU 15 will be described without particular distinction.
  • FIG. 6 is an example of a diagram illustrating white line recognition and white line information.
  • a method using edge components at both ends of one white line is known.
  • edges exceeding the threshold value are detected at both ends of the white line.
  • the lane recognition camera 11 verifies the accuracy of the white line based on whether the detected edge strength at both ends, the distance between the detected edges at both ends can be regarded as a white line, etc., and determines whether the white line is recognized. When sufficient accuracy as a white line cannot be obtained, it is determined that the unrecognized state is present.
  • the edge inside the white line (the right edge of the left white line, the left edge of the right white line) is indicated by a “+” mark.
  • the lane recognition camera 11 estimates the edge line of the white line by connecting the edges in the vertical direction of the image data.
  • the straight lines surrounding the left and right white lines indicate the left and right ends of the white line recognition area.
  • Such a line is not displayed in a vehicle-mounted state, but since the lane recognition camera 11 recognizes a white line in the white line recognition area, the lane recognition camera 11 always recognizes the white line using the position of the white line recognition area. Yes.
  • the lane recognition camera 11 converts the coordinate system of the edge line of the image data into a planar coordinate system obtained by planarly viewing the real space. Then, the edge line is divided into several in the vertical direction (two in the figure), and the Hough transform is performed for each divided range. Alternatively, a straight line may be obtained by the least square method. If the left and right white lines are represented by straight lines, the lane recognition camera 11 can calculate white line information. First, the distance between the left and right straight lines is the lane width W. The line connecting the center of the left and right white lines in the vertical direction is the center line of the left and right white lines. The lane offset position Os is obtained by the number of pixels in which the center pixel of the known camera is deviated from the center line in advance.
  • the yaw angle ⁇ is obtained depending on how far the vanishing point of the left and right edge lines is from the center of the image. Further, when a line perpendicular to each of the divided edge lines is drawn to obtain the intersection of a plurality of vertical lines, the distance from the edge line to the intersection becomes the road radius R of the road that is running.
  • the lane recognition camera 11 sends the white line information thus obtained (if the left and right white lines are recognized, the lane width W, the offset position Os, the yaw angle ⁇ , the road radius R) to the departure prevention support ECU 12. If any one of the left and right white lines or all the white lines cannot be recognized, the identification information of the unrecognizable white line and the unrecognized information are sent to the departure prevention support ECU 12 as white line information.
  • the lane width W and the offset position Os are used for detection of the own vehicle position, but the lane departure prevention support device 100 acquires the own vehicle position and the lane width W by another method. You can also.
  • the position at which the navigation device accumulates and detects the vehicle speed and the traveling direction can be used as the vehicle position, and the lane width W can be acquired by the navigation device through road map information or communication with the outside. .
  • the on-board laser radar may irradiate the road surface with laser, and the relative position between the white line and the own vehicle may be calculated. Since the white line easily reflects the laser, it is possible to detect the relative angle and positional deviation between the white line and the vehicle by detecting the reflected light from the white line.
  • the departure prevention assisting ECU 12 predicts departure from the lane and sounds a lane departure warning (LDW: Lane Departure Warning) for driving in the center of the lane.
  • Lane Keeping Support LKA: Lane Keeping
  • Assist Lane Keeping Support
  • LDW / LKA Conditions under which LDW / LKA operates are as follows. -The main switch is on-The vehicle speed is within a predetermined range (speed range varies depending on laws and regulations)-At least one of the left and right white lines is recognized-The wiper is not operating above a certain speed The turn signal lamp is not lit. The brake pedal is not operated.
  • the departure prevention assist ECU 12 indicates that when the main SW 16 is turned on, the turn signal lamp is not lit from the winker SW 17, and the vehicle speed sensor 19 Is in a predetermined range, the wiper SW18 is not operating at high speed, the brake pedal is not operated from the brake SW20, and at least one of the left and right white lines is recognized from the lane recognition camera 11. If it is confirmed, LDW / LKA control is executed.
  • the departure prevention assisting ECU 12 requests the meter ECU 13 to display the white line icon in the display mode in the unrecognized state, for example, when at least one condition is not satisfied. Further, when conditions other than the recognition of the white line are satisfied, the meter ECU 13 is requested to display a white line icon corresponding to the white line recognition state by notifying the white line recognition state. Since the white line recognition state may differ between the left and right white lines, the white line recognition state for each of the left and right white lines is notified to the meter ECU 13 at substantially the same timing.
  • the departure prevention assistance ECU 12 calculates the time to reach the white line based on the yaw angle ⁇ of the vehicle, the distance to the left or right white line, and the vehicle speed.
  • a buzzer request is transmitted to the meter ECU 13 or an ECU responsible for generating a buzzer (not shown).
  • the departure prevention assisting ECU 12 requests a visual warning from the meter ECU 13 such as blinking the white line icon.
  • the departure prevention assisting ECU 12 calculates an additional torque having a size corresponding to the offset position Os of the vehicle in the white line information and in a direction opposite to the offset position, and transmits it to the power steering ECU 14. Since the power steering ECU 14 applies the received additional torque to the motor 23, steering of the steering wheel is supported so as to travel near the center of the traveling lane.
  • the additional torque is, for example, a value proportional to the offset position Os with respect to the center line.
  • the braking force of each wheel is controlled individually, for example, using the difference between the braking forces on the inner wheel side and the outer wheel side to advance the vehicle. The direction may be controlled. The braking force of each wheel is controlled by the brake ECU.
  • the torque sensor 22 detects the steering torque of the driver, and the power steering ECU 14 reduces the additional torque, which facilitates overriding.
  • the driver's intention to change lanes can be detected by the blinker SW 17, and in this case, no additional torque is added as described above.
  • FIG. 7A and 7B show an example of a functional block unit of the lane departure prevention support apparatus 100.
  • FIG. 7A shows an ECU and the like mainly used.
  • FIG. 7B is another example of a functional block diagram, and the departure prevention assisting ECU 12 of FIG. 7B includes a white line movement determination unit 45.
  • Each ECU such as the departure prevention support ECU 12 and the meter ECU 13 includes a microcomputer and peripheral circuits such as a power supply IC and a monitoring circuit.
  • the departure prevention support ECU 12 includes, for example, a CPU 31, a RAM 32, a ROM 33, and a CANC (CAN controller) 34
  • the meter ECU 13 includes, for example, a CPU 35, a RAM 36, a ROM 38, an I / O 39, and a CANC 37.
  • the CPU 31 of the departure prevention support ECU 12 implements an unrecognized determination unit 41, a distance determination unit 42, and a display request unit 43 by executing a program stored in the ROM 33 and in cooperation with hardware.
  • the CPU 35 of the meter ECU 13 implements the display switching unit 44 by executing a program stored in the ROM 38 and cooperating with hardware.
  • the unrecognized determination unit 41 determines whether only the left or right white line is in an unrecognized state based on the white line information.
  • the distance determination unit 42 calculates the distance to the white line on the unrecognized side using the offset position Os and the lane width W, and compares it with a threshold value, so that the vehicle is separated from one of the white lines (or It is determined whether or not it is in a specific unrecognized state. Details of this determination will be described later.
  • the white line movement determination unit 45 in FIG. 7B detects whether the white line being recognized has moved out of the white line recognition region, thereby determining whether or not a specific unrecognized state is obtained using the white line information. To do. Details of this determination will be described later.
  • the display request unit 43 is based on the determination results of the unrecognized determination unit 41 and the distance determination unit 42, or the unrecognized determination unit 41 and the white line movement determination unit 45. Is sent to the meter ECU 13. That is, the display request unit 43 When the left white line is not recognized and the distance to the left white line is equal to or greater than the threshold value (in the case of the specific unrecognized state), the meter ECU 13 is notified that the left white line is in the recognized state. For the white line on the right, the white line recognition state is notified according to the recognition result.
  • the meter ECU 13 If the right white line is not recognized and the distance to the right white line is greater than or equal to the threshold value (in the specific unrecognized state), the meter ECU 13 is notified that the right white line is in the recognized state. For the white line on the left, the white line recognition state is notified according to the recognition result. If the left white line is not recognized and the distance to the left white line is not greater than or equal to the threshold value, the meter ECU 13 is notified that the left white line is in an unrecognized state. For the white line on the right, the white line recognition state is notified according to the recognition result.
  • the meter ECU 13 If the right white line is not recognized and the distance to the right white line is not greater than or equal to the threshold value, the meter ECU 13 is notified that the right white line is in an unrecognized state. For the white line on the left, the white line recognition state is notified according to the recognition result.
  • the display switching unit 44 of the meter ECU 13 switches the display mode of the white line icon displayed on the information display unit 21 according to the white line recognition state.
  • the departure prevention assisting ECU 12 includes the unrecognized determination unit 41, the distance determination unit 42, and the display request unit 43, but the meter ECU 13 and other ECUs may partially or entirely include.
  • FIG. 8 is a diagram illustrating an example of the meter panel 50.
  • the meter panel 50 includes a speedometer 52, a tachometer 51, a fuel gauge 54, a water temperature gauge 53, a shift position display section 55, an information display section 21, and the like.
  • the information display unit 21 displays a white line icon indicating a white line recognition state.
  • the white line icon may be displayed on, for example, a HUD (Head Up Display) or may be displayed on a liquid crystal display unit of the center console.
  • HUD Head Up Display
  • the information display unit 21 is a dot type multi-information display (liquid crystal display) in which a plurality of dots (pixels) are arranged vertically and horizontally. In addition to the white line icon, the information display unit 21 displays an odometer, trip meter, instantaneous fuel consumption, average fuel consumption, ECO drive indicator, cruising range, outside temperature, and various warnings.
  • the information display unit 21 may be capable of only monochrome display, gray display, or color display.
  • FIG. 9 is an example of a diagram illustrating some examples of white line icons in a specific unrecognized state.
  • the lane departure prevention support apparatus 100 displays the white line icon in the specific unrecognized state in a display mode different from the white line icon in the unrecognized state.
  • the recognition state display mode is a white line icon on a black background
  • the unrecognized display mode is a white line icon on a black background.
  • the display mode in the specific unrecognized state is the same display mode as the recognized state (white white line icon on a black background).
  • the background and the white line icon may be reversed black and white.
  • the display state in the recognition state is a black white line icon on a white background
  • the display state in the unrecognized state is a white line icon in the middle on a white background.
  • the display mode of the specific unrecognized state is the same display mode as the recognized state (black white line icon on a white background).
  • the specific unrecognized state is a state where the white line is not recognized, but is recognized in the driver's field of view.
  • the unrecognized state is a state in which it is easy for the driver to recognize that the white line is not recognized, such as when the white line is bad or rainy. Accordingly, the departure prevention assisting ECU 12 displays the display state different from the specific unrecognized state and the unrecognized state, and displays the specific unrecognized state and the recognized state in the same display mode, so that the driver can recognize his or her own grasping state. It can be determined that the situation is the same, and the uncomfortable feeling felt by the driver can be reduced.
  • the driver can easily learn the meaning of the white line icon as compared with the case where there is a dedicated white line icon in a specific unrecognized state.
  • one of the features is that a white line icon that is not recognized by the lane recognition camera 11 is displayed as a white line icon in a recognized state.
  • FIG. 10 is an example of a flowchart illustrating a procedure in which the lane departure prevention support apparatus 100 displays a white line recognition state.
  • the procedure of FIG. 10 is repeatedly executed when the main SW 16 is turned on, for example.
  • the white line information is transmitted to the departure prevention support ECU 12 every time one piece of image data is taken.
  • the unrecognized determination unit 41 determines whether or not the left white line is in an unrecognized state based on the white line recognition state included in the white line information (S10).
  • the display request unit 43 transmits the recognition state to the meter ECU 13 as the white line recognition state of the left white line.
  • the display switching unit 44 displays the white line icon of the left white line in the display state of the recognition state (S30).
  • the distance determination unit 42 determines whether or not the distance from the left white line to the vehicle position is greater than or equal to a threshold value (S20).
  • FIG. 11 is an example of a diagram illustrating this determination.
  • the lane width W and the offset position Os are obtained in the distance determination unit 42 based on the white line information.
  • the offset position Os an offset in the right direction from the center line is positive, and an offset in the left direction from the center is negative.
  • the own vehicle position (the position of the lane recognition camera 11 but the own vehicle position can be designed as appropriate) is “W / 2 + Os” from the left white line.
  • the distance determination unit 42 compares this value with a threshold value, and determines whether the distance from the left white line to the vehicle position is equal to or greater than the threshold value.
  • the distance determination unit 24 may use white line information obtained from the previous image data.
  • the vehicle position is “W / 2-Os” from the right white line (since Os is negative).
  • the distance determination unit 42 adds or subtracts Os to W / 2 when calculating the distance can be determined from the unrecognized white line.
  • the direction in which the vehicle is approaching can be determined based on whether Os is positive or negative, it may be determined whether Os is positive or negative.
  • the distance determination unit 42 is not based on the distance between the white line on the unrecognized side (the white line far from the vehicle) and the vehicle position, but on the other side based on the distance between the recognized white line and the vehicle position. Since it is close to the white line, it can be detected that one of the white lines is in a specific unrecognized state. As shown in the figure, when the distance between the left unrecognized left line and the vehicle position is about the same as the threshold, the distance between the right white line and the vehicle position is about “lane width W ⁇ threshold”. Therefore, if the lane width W is detected, the distance determination unit 42 can determine that the lane width W is too close to the white line on the right side using the fixed threshold value. That is, when the distance between the right white line and the vehicle position is less than “lane width W ⁇ threshold value”, it is determined that the left white line is in a specific unrecognized state from the white line recognition area.
  • a determination criterion “the offset position Os is equal to or greater than a threshold value” can be used. This is because the higher the absolute value of the offset position Os, the higher the possibility of approaching one of the left and right white lines. In this case, whether or not the white line deviates from the white line recognition area differs depending on the lane width W, as is the distance from the recognized white line to the vehicle position. Therefore, the distance determination unit 42 determines that one of the white lines is in a specific unrecognized state when “threshold value ⁇ W / 2 ⁇
  • the white line recognition state becomes the specific unrecognized state earlier.
  • the distance determination unit 42 corrects the threshold when “Os is positive (approaching to the right) and a left curve” or “Os is negative (approaching to the left) and is a right curve”.
  • the threshold value may be reduced as the radius R is smaller (the curve is steeper).
  • the display request unit 43 transmits the recognition state to the meter ECU 13 as the white line recognition state of the left white line.
  • the display switching unit 44 displays the white line icon of the left white line in the display state of the recognition state (S30). Therefore, the driver looks at the white line icon (recognition state) of the left white line and determines that the white line is recognized as visually observed, so that the driver does not feel uncomfortable.
  • the display request unit 43 transmits an unrecognized state to the meter ECU 13 as the white line recognized state of the left white line.
  • the display switching unit 44 displays the left white line icon in the unrecognized display mode (S40).
  • the white line icon is displayed in a display state of an alarm activation state.
  • the white line icon in the alarm operating state returns to the recognized state, the specific unrecognized state, or the unrecognized state when the alarm operating state is canceled.
  • FIG. 12 is another example of a flowchart illustrating a procedure in which the lane departure prevention support apparatus 100 displays a white line recognition state. 12, the description of the same steps as those in FIG. 11 is omitted.
  • the distance determination unit 42 when the white line on the left is in an unrecognized state (Yes in S10), the distance determination unit 42 does not determine whether the distance from the left white line to the vehicle position is equal to or greater than a threshold value. It is determined whether or not the white line being recognized has moved out of the white line recognition area 45 (S22).
  • FIG. 13 is an example of a diagram illustrating this determination.
  • the lane recognition camera 11 recognizes white lines using the left and right white line recognition regions.
  • the auxiliary lines a and b in FIG. 13 indicate the left end of the left white line recognition area
  • the auxiliary lines c and d indicate the right end of the left white line recognition area, respectively.
  • FIG. 13A while the vehicle is traveling near the center of the travel lane, the left white line is within the auxiliary lines a to d.
  • FIG. 13B when the vehicle travels close to the right white line, the left white line moves to the left side of the auxiliary lines a and b. Further, in the process of transition from the state of FIG. 13A to the state of FIG. 13B, the left white line crosses the auxiliary lines a and b in the left direction.
  • the white line movement determination unit 45 of the present embodiment detects that the left white line crosses the auxiliary lines a and b in the left direction, and determines that the specific unrecognized state has been reached. Specifically, the offset amount Os and the white line recognition state included in the past white line information are used. In the process of moving the vehicle to the right, the offset amount Os (positive) gradually increases. Further, the white line on the left is in the recognized state until the specific unrecognized state is reached. Therefore, immediately after the left white line is in an unrecognized state, the past several offset amounts Os tend to increase, so that it can be detected that the left white line crosses the auxiliary lines a and b in the left direction. Further, the fact that the offset amount Os exceeds a predetermined value may be added to the determination condition that the left white line crosses the auxiliary lines a and b in the left direction.
  • the determination at S20 in FIG. 10 and the determination at S22 in FIG. 12 can be combined. For example, it may be determined that the specific unrecognized state is satisfied when either S20 or S22 is satisfied, or it may be determined that the specific unrecognized state is satisfied when both S20 and S22 are satisfied.
  • the subsequent processing is the same as in FIG. Therefore, the driver looks at the white line icon in the recognition state and determines that the white line is recognized as seen, so that the driver does not feel uncomfortable.
  • FIG. 14 is a diagram illustrating an example of a temporal change of the white line icon.
  • the white line icon of either the left or right white line is displayed in the recognition state.
  • the lane departure prevention support apparatus 100 detects the specific unrecognized state of the left white line, but the icon in the specific unrecognized state is the same as the recognized state. And even if the left white line is formed unclearly in the specific unrecognized state (even if the vehicle enters an unclear area), the white line icon remains in the recognized state because the vehicle is approaching the white line on the right side. It is.
  • FIG. 14A since the vehicle is traveling near the center of the travel lane, the white line icon of either the left or right white line is displayed in the recognition state.
  • the lane departure prevention support apparatus 100 detects the specific unrecognized state of the left white line, but the icon in the specific unrecognized state is the same as the recognized state. And even if the left white line is formed unclearly in the specific un
  • the lane departure prevention support apparatus 100 resumes the recognition of the left white line as soon as the left white line enters the left white line recognition area, but is determined to be unrecognized because the left white line is unclear.
  • the white line recognition state of the left white line is not a specific unrecognized state. Therefore, the lane departure prevention support apparatus 100 displays the white line icon of the left white line in an unrecognized state.
  • a lane departure prevention support apparatus 100 that displays a specific unrecognized state in a manner different from that in the first embodiment will be described.
  • FIG. 15 is a diagram for explaining an example of a display mode of a white line icon corresponding to a white line recognition state.
  • the left and right white lines are displayed on a black background with white white line icons.
  • the white line on the side that is not recognized in the unrecognized state is displayed on the black background with a hollow.
  • the white line on the side that is not recognized in the specific unrecognized state is displayed with an intermediate luminance between black and white (hereinafter simply referred to as gray display).
  • the alarm operating state is the same as in the first embodiment.
  • the lane departure prevention support device 100 is approaching the right or left white line. It is possible to accurately tell the driver that the white line is not recognized.
  • FIG. 16 is an example of a diagram for explaining some examples of the display mode of the specific unrecognized state.
  • the display mode of the white line icons in the recognized state and the unrecognized state in FIG. 16A is the same as that in FIG.
  • a display mode in which white line icons are formed by mixing white pixels and black pixels A display mode in which white line icons are filled with pixels having pixel values larger than 0, for example, smaller than 255. As shown in FIG. The black and white of the background and the white line icon may be reversed.
  • the display method for realizing gray display is the same as that in FIG.
  • the gray density (how close to black or white) can be designed. Further, the gray density may be changed in FIGS. 16 (a) and 16 (b).
  • FIG. 17 is an example of a flowchart illustrating a procedure in which the lane departure prevention support apparatus 100 displays a white line recognition state.
  • the procedure of FIG. 17 is repeatedly executed when the main SW 16 is turned on, for example.
  • the case where the vehicle approaches the white line on the right side (the left white line deviates from the left white line recognition area) will be described as an example, but the left and right are also reversed when the vehicle approaches the left white line. Is the same.
  • the display request unit 43 sets the specific unrecognized state as the white line recognized state of the left white line to the meter ECU 13. Send to. Thereby, the display switching unit 44 displays the white line icon of the left white line in gray as shown in FIG. 16 (S25).
  • the display mode of the white line icon is the same as in the first embodiment. Further, the determination in step S20 may be replaced with the determination in S22 of FIG. 12, or may be combined with the determination in S22.
  • the driver can accurately confirm that the left white line being viewed is not recognized because it is out of the white line recognition area. Can be recognized.
  • FIG. 18 shows another display example of the gray display in the specific unrecognized state of FIG.
  • the gray display is displayed with a white line icon drawn with diagonal lines
  • the gray display is displayed with a white line icon drawn with vertical stripes
  • the gray display is displayed with a white line icon drawn with vertical stripes
  • FIG. 18C The gray display is displayed with a white line icon in which a lattice is drawn.
  • the display mode of the white line icon in the specific unrecognized state and the white line icon in the recognized state and the unrecognized state can be made different using not only the luminance but also the saturation. .
  • FIG. 19 shows an example of a white line icon having a different color between the specific unrecognized state, the recognized state, and the unrecognized state.
  • the white line icon in the recognition state is displayed in blue or green, for example.
  • the white line icon in the specific unrecognized state is displayed in yellow, for example.
  • the unrecognized white line icon is displayed in red, for example.
  • the background color may be any color as long as it is not the same color as the white line icon, such as white, black, gray, or cream.
  • a white line icon having a different line thickness between the specific unrecognized state, the recognized state, and the unrecognized state may be displayed.
  • the white line icon in the recognition state is displayed by, for example, a thick white line.
  • the white line icon in the specific unrecognized state is displayed by, for example, a white line having an intermediate thickness.
  • the unrecognized white line icon is displayed by, for example, a thin white line.
  • a white line icon having a different line form between the specific unrecognized state, the recognized state, and the unrecognized state may be displayed.
  • the white line icon in the recognition state is displayed by, for example, a thick white line.
  • the white line icon in the specific unrecognized state is displayed by, for example, a thin white line.
  • the unrecognized white line icon is displayed by, for example, a white dotted line.
  • the display mode of the white line icon in the specific unrecognized state and the unrecognized state can be changed depending on the number of thin white lines, for example (the white line icon in the unrecognized state has fewer lines than the specific unrecognized state).
  • the white line icon in the recognition state may be displayed by a thick white line, for example.
  • the white line icon in the specific unrecognized state may be displayed by a thin white line, for example.
  • the unrecognized white line icon need not be displayed.
  • the display mode of the specific unrecognized state and the unrecognized state is made the same, and the display mode of the specific unrecognized state and the unrecognized state is made by blinking the white line icon of either the specific unrecognized state or the unrecognized state. May be different.
  • the lane departure prevention support device makes the white line icon in the specific unrecognized state the same as the recognition state different from the unrecognized state, even if one of the white lines cannot be recognized.
  • the white line icon different from both the recognition state and the recognition state, it is possible to reduce the uncomfortable feeling felt by the driver.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

 走行レーンを区分する車線区分線を撮影する撮影手段と、撮影された画像データの認識領域から車線区分線を認識し、走行レーン内の幅員方向の自車位置を検出する自車位置検出手段と、車線区分線の認識結果を用いた運転支援を行う運転支援手段と、車線区分線の認識結果を表示する表示手段と、有する車線逸脱防止支援装置であって、左右の一方の白線が認識されない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する認識結果表示制御手段、を有する。

Description

車線逸脱防止支援装置、区分線表示方法、プログラム
 本発明は、車線区分線を認識して、走行レーン内の自車位置に応じて車線からの逸脱防止を支援する車線逸脱防止支援装置に関し、特に、車線区分線の認識状態を表示する車線逸脱防止支援装置に関する。
 車載されたカメラや画像処理装置が白線を認識することで、車線からの逸脱を予測して警報を吹鳴する車線逸脱警報装置(LDW:Lane Departure Warning)や、車線の中央を走行するための操舵力を付加する車線維持支援装置(LKA:Lane
Keeping Assist)が知られている。
 LDW/LKAでは、現在の作動状況を運転者に通知することが一般的である(例えば、特許文献1参照。)。すなわち、LDW/LKAのスイッチがオンでも例えば白線の認識状況によっては警報の吹鳴や車線維持支援が行われない場合があるからである。特許文献1には、表示装置に白線のアイコンを表示する車両用白線表示装置において、白線認識手段が白線を認識している場合には白線を塗り潰して表示し、白線認識手段が白線を認識していない場合には白線を中抜き表示する車両用白線表示装置が開示されている。
 図1(a)は、LDW/LKAにおいて白線が認識されている場合の表示例と、白線が認識されていない場合の表示例をそれぞれ示す図の一例である。白線の認識状態は液晶などの表示装置に白線アイコンとして表示される。白線が認識されている場合は白線アイコンが太く表示され、白線が認識されていない場合は白線アイコンが細く表示されるなど、白線が認識されていないことを運転者が把握できるように白線アイコンが表示される。白線が認識されていなければ、LDW/LKAは走行レーンからの逸脱を予測して警報を吹鳴することができず、また、車線の中央を走行するために操舵力を付加することもできない。
 白線が認識されない原因としては、路面標示がない、白線がかすれていたり激しい降雨などのため白線が不鮮明な場合、ワイパーが高速で作動している場合、又は、運転者が車線変更など所定の操作を行っている場合などがある。
 図1(a)のように、LDW/LKAが作動しないことを運転者に通知することで、運転者がLDW/LKAを過信することを防止できる(LDW/LKAシステムに対し過剰な性能の期待を抱かせないようにして、白線が十分に認識されていない状態では支援に限界があることを伝えることができる)。また、車検証の貼付位置、ETC(Electronic
Toll Collection)アンテナの取り付け位置が好ましくないため、カメラの視界が遮られているなどにより、LDW/LKAが正しく動作できない状況であることを伝えることもできる。
 ところで、LDW/LKAでは、必ずしも左右の白線が認識されていなくても、車線逸脱警報や車線維持支援が可能になっている車両もある。片方の白線が認識されているだけである程度の運転支援が可能であることは、国によっては安全規格の適合に必要となる場合がある(例えば、米国の予防安全NCAP)。したがって、左右の白線の一方のみが認識されていない場合でも、表示装置による白線アイコンの表示により運転者に通知することが好ましいとされる。
 図1(b)は右側の白線のみが認識されている場合の白線アイコンの表示例を、図1(c)は左の白線のみが認識されている場合の白線アイコンの表示例をそれぞれ示す。図示するように、認識されている側の白線アイコンのみを太く表示し、認識されていない側の白線アイコンを中抜きで表示することで、LDW/LKAは白線認識状態を運転者に伝えることができる。
 しかしながら、図1(b)(c)のように、認識されている片方の白線アイコンを太く表示するだけでは、運転者の認識状態とのずれが生じてしまうという問題がある。すなわち、車両が右側や左側の白線に接近して走行すると、カメラの画角や白線認識領域(画像処理領域)の制限のため、白線認識領域から片方の白線(近づいた白線と反対側の白線)が外れてしてしまい、外れた片方の白線を認識できなくなる。しかし、この場合でも運転者の視界には左右両方の白線が入っているので、運転者はなぜ片方の白線が認識されないのか違和感を持つ可能性がある。
 図2(a)はカメラの画角を説明する図の一例である。図のようにLDW/LKAは画角に入る車両の前方の所定範囲の白線だけ白線認識などの画像処理に使用している。遠方側については白線の認識精度が維持できるように車両から数十メートル先を遠端とし、手前側についてはボンネットなどに遮られず、かつ、画角に入る車両から十メートル程度を近端としている。画角をより広げることができればLDW/LKAは車両のより近い側から白線を認識できるので、車両が片側の白線に接近しても遠い側の白線だけが認識されないという状況を低減できる。
 しかし、画角を広くしても、カメラの全体の画素数は変わらないので、画角を広くすると白線が映る(占める)画素の数が低下してしまい、遠方の画像処理精度が低下してしまう。この場合、特に車線のカーブ半径や曲率の算出精度が低下してしまう。
 また、LDW/LKAのカメラは他の運転支援装置のカメラと共用されていることが多く、これらは遠方の風景の画像処理を必要とする。例えば、前照灯のハイビームとロービームを自動的に切り換えるオートハイビーム装置は、数百メートル先の先行車や対向車をカメラで検出してビーム方向を切り換える。このため、画角を広くすることで先行車や対向車の検出精度が低下することは好ましくない。また、歩行者を検出して運転者に注意喚起する歩行者検出装置では、遠方の歩行者を検出できないと注意喚起が遅れてしまうので、画角を広くすることで遠方の歩行者の検出精度が低下することは好ましくない。以上のような理由のため、LDW/LKAは遠方の画像処理精度を低下させない比較的狭い画角のカメラ(レンズ)を採用している。
 図2(b)は、白線認識領域の制約について説明する図の一例である。白線認識など画像処理の計算負荷は一般に高い。一方、白線が存在するのは画像の中央よりも右側と左側である。そこで、処理負荷を低減するため、LDW/LKAは必要最小限な所定領域(左白線認識領域と右白線認識領域)のみから白線を認識する。このように、白線認識領域に制限があるため、車両が右側や左側の白線に接近して走行すると、左白線認識領域又は右白線認識領域に白線が映っていない状況が生じてしまう。
 図3(a)(b)は、左の白線が左白線認識領域から外れた状況を説明する図の一例である。図3(a)に示すように車両が右側の白線に大きく接近すると、図3(b)に示すように左白線認識領域から左の白線が外れてしてしまう。このように、従来技術を採用する限り、車両が左右の白線のいずれかに大きく接近した場合、図1(b)(c)のような白線アイコンが表示されるに過ぎず、運転者に違和感を感じさせるおそれがあった。
特開2007-125968号公報
 本発明は、上記課題に鑑み、片側の白線認識状態を運転者に的確に伝えることができる車線逸脱防止支援装置を提供することを目標とする。
 本発明は、走行レーンを区分する車線区分線を撮影する撮影手段と、撮影された画像データの認識領域から車線区分線を認識し、走行レーン内の幅員方向の自車位置を検出する自車位置検出手段と、車線区分線の認識結果を用いて走行レーンからの逸脱防止を支援する支援手段と、車線区分線の認識結果を表示する表示手段と、有する車線逸脱防止支援装置であって、左右の一方の白線が認識されない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する認識結果表示制御手段、を有する。
 本発明は、片側の白線認識状態を運転者に的確に伝えることができる車線逸脱防止支援装置を提供することができる。
LDW/LKAにおいて白線が認識されている場合の表示例と、白線が認識されていない場合の表示例をそれぞれ示す図である。 カメラの画角を説明する図の一例である。 左の白線が左白線認識領域から外れる状況を説明する図の一例である。 白線認識状態に応じた表示態様の一例を説明する図である。 車線逸脱防止支援装置の構成図の一例である。 白線の認識及び白線情報について説明する図の一例である 車線逸脱防止支援装置の機能ブロック部の一例である。 メータパネルの一例を示す図である。 特定未認識状態の表示態様について説明する図の一例である。 車線逸脱防止支援装置が白線認識状態を表示する手順を示すフローチャート図の一例である。 左の白線から自車位置までの距離が、閾値以上か否かを判定について説明する図の一例である。 車線逸脱防止支援装置が白線認識状態を表示する手順を示すフローチャート図の別の一例である。 認識中の白線が白線認識領域から外れたか否かの判定について説明する図の一例である。 白線アイコンの時間的な変化の一例を示す図である。 白線認識状態に応じた表示態様の一例を説明する図である。 特定未認識状態の表示態様を説明する図の一例である。 車線逸脱防止支援装置が白線認識状態を表示する手順を示すフローチャート図の一例である。 特定未認識状態のグレー表示の別の表示例を示す図の一例である。 特定未認識状態の表示態様と、認識状態及び未認識状態の表示態様において異なる白線アイコンの一例を示す図である。 特定未認識状態の表示態様と、認識状態及び未認識状態の表示態様において異なる白線アイコンの一例を示す図である。
 11    レーン認識カメラ
 12    逸脱防止支援ECU
 13    メータECU
 14    パワステECU
 15    カメラECU
 16    メインSW
 19    車速センサ
 20    ブレーキSW
 21    情報表示部
 41    未認識判定部
 42    距離判定部
 43    表示要求部
 44    表示切替部
 45    白線移動判定部
 100   車線逸脱防止支援装置
 以下、本発明を実施するための形態について図面を参照しながら説明する。
図4は、白線認識状態に応じた白線アイコンの表示態様の一例を説明する図である。本実施形態では主に以下の3つの白線認識状態の白線アイコンの表示態様について説明する。
・認識状態(左認識状態、右認識状態)
・特定未認識状態(左特定未認識状態、右特定未認識状態)
・未認識状態(左未認識状態、右未認識状態)
 認識状態は白線が認識されている状態をいい、未認識状態は白線が認識されていない状態をいう。特定未認識状態は車両が右又は左の白線に接近したため車両から遠い側の白線が、画像データの白線認識領域から外れ、未認識状態となっている状態をいう。よって、特定未認識状態は未認識状態のうち特定の状態である。
 なお、もう1つの白線アイコンの表示態様として警報作動状態の表示態様がある。
・警報作動状態
 前の3つの白線認識状態(認識状態、特定未認識状態、未認識状態)が、カメラによる白線認識状態を識別するためのものであるのに対し、警報作動状態は、車両が車線を逸脱する状態をいう。なお、「車両が車線を逸脱する」とは、逸脱が予測される場合と実際に逸脱した場合の両方を含む。
 図4(a)に示すように、認識状態では左右の白線が黒地に白の白線アイコンで表示される。また、図4(c)に示すように、未認識状態では認識されていない側の白線の白線アイコンが白枠を残して中抜きで表示される。これらに対し、図4(b)に示すように、特定未認識状態では認識状態と同じ表示態様で白線アイコンが表示される。すなわち、実際には認識されていない白線の白線アイコンが認識状態として表示される。運転者には車両が接近した側と反対側の白線が目視されているので、車線逸脱防止支援装置が白線を認識できなくても、特定未認識状態の白線アイコンを認識状態と同様に表示することで、運転者が感じる違和感を低減することができる。
 また、警報作動状態では、図4(d)に示すように、白線アイコンが点滅する。または、警報作動状態のアイコンは、白黒を反転させる、表示領域全体を点滅する、白線アイコンの色を短時間に切り換えて表示するなど、認識状態、特定未認識状態及び未認識状態のいずれの白線アイコンとも異なり、かつ、注意喚起性の高い表示態様であればよい。
 図4(d)では、車両が右の白線を逸脱する場合と、左の白線を逸脱する場合とで、同じ表示態様であるが、両者を異ならせることもできる。例えば、右の白線を逸脱する場合は右の白線アイコンのみを点滅させ、左の白線を逸脱する場合は左側の白線アイコンのみを点滅させる。
 なお、本実施形態の白線とは、車両が走行する車線(走行レーン)の走行区分線をいい、運転者が肉眼で目視した場合に白である必要はなく、黄色やオレンジ色、その他の色の走行区分線も白線に含まれる。また、カメラが赤外線や紫外線などで撮影できれば、可視色である必要もない。また、左右の白線の一方又は両方が、実線でなく点線で路面に形成されていても単に白線という。
 〔構成例〕
 図5は、本実施形態の車線逸脱防止支援装置100の構成図の一例を示す。車線逸脱防止支援装置100は、逸脱防止支援ECU(Electronic Control Unit)12により制御される。逸脱防止支援ECU12には、レーン認識カメラ11、メータECU13、及び、パワステECU14等がCAN(Controller
Area Network)やFlexRay等の車載ネットワークを介して通信可能に(必要であればゲートウェイ装置を介して)接続されている。また、車速センサ19、ブレーキSW20、ウィンカSW17及びワイパーSW18が図示されているが、これらは不図示のECUを介して接続されていることも多い。なお、車線逸脱防止支援装置はメインSW16がオンになると作動する。
 レーン認識カメラ11は、車幅方向の略中央の例えば室内ルームミラーの車両前方に、光軸を水平よりもやや下向きに向けて搭載され、車両前方の所定角範囲を撮影する。レーン認識カメラ11は、CMOSやCCDの光電変換素子により、所定の輝度階調(例えば、256階調)の画像データを、サイクル時間(例えば、30~60フレーム/秒)毎に出力する。夜間の白線認識を容易にするため、前照灯が照射して白線が反射した近赤外光に感度を有していることが好ましい。
 レーン認識カメラ11はカメラECU15と一体に構成され、カメラECU15は順次撮影された画像データに対し画像処理を行い、道路上に描かれた走行レーンを区切る左右の白線を認識する。以下、レーン認識カメラ11とカメラECU15とは特に区別せずに説明する。
 〔LDW/LKA〕
 図6は、白線の認識及び白線情報について説明する図の一例である。白線の認識については種々の方法があるが、例えば、1本の白線の両端のエッジ成分を利用する方法が知られている。画像データの左右方向の輝度値を微分してエッジ強度を検出すると、白線の両端に閾値を超えるエッジが検出される。レーン認識カメラ11は検出された両端のエッジ強度、検出された両端のエッジの距離が白線と見なせるかどうか等により白線の確度を検証して、白線を認識したか否かを判定する。白線としての十分な確度が得られない場合、未認識状態であると判定される。
 白線としての十分な確度が得られた場合、左右のエッジのいずれか、又は、左右のエッジの中央を白線として検出する。
 図では白線の内側(左の白線の右エッジ、右側の白線の左エッジ)のエッジを“+”マークで示した。このように、レーン認識カメラ11はエッジを画像データの上下方向に結ぶことで白線のエッジ線を推定する。なお、左右の白線をそれぞれ囲む直線は白線認識領域の左端と右端を示す。このような線は車載された状態では表示されないが、レーン認識カメラ11は白線認識領域内の白線を認識するのでレーン認識カメラ11は常時、白線認識領域の位置を使用して白線を認識している。
 次に、レーン認識カメラ11は、画像データのエッジ線の座標系を実空間を平面視した平面座標系に変換する。そして、エッジ線を上下方向にいくつかに区分して(図では2つ)区分された範囲毎にハフ変換する。または、最小二乗法により直線を求めてもよい。左右の白線がそれぞれ直線式で表されば、レーン認識カメラ11は白線情報を算出できる。まず、左右の直線間の距離が車線幅Wである。また、左右の白線の中央を上下方向に結ぶ線が左右の白線の中央線である。予め既知のカメラの中心画素が中央線からずれている画素数により車線オフセット位置Osがえられる。また、左右のエッジ線の消失点が画像の中央からどのくらいずれているかによりヨー角φが得られる。さらに、いくつかに区分されたエッジ線にそれぞれ垂直な線を引き、複数の垂直な線の交点を求めると、エッジ線から交点までの距離が走行中の道路の道路半径Rになる。レーン認識カメラ11は、このようにして求めた白線情報(左右の白線を認識していれば、車線幅W、オフセット位置Os、ヨー角φ、道路半径R)を逸脱防止支援ECU12に送出する。また、左右のいずれかの白線又は全ての白線が認識できない場合、認識できない白線の識別情報と未認識情報を白線情報として逸脱防止支援ECU12に送出する。
 なお、このような求め方は一例であって、エッジ線を道路形状を表すモデル式に近似して、モデル式の係数から白線情報を取得する方法もある。
 また、後述するように、本実施例では車線幅Wとオフセット位置Osを自車位置の検出に用いるが、車線逸脱防止支援装置100は自車位置や車線幅Wを別の方法で取得することもできる。例えば、自車位置としてナビゲーション装置が車速と走行方向を累積して検出する位置を利用することができ、また、車線幅Wはナビゲーション装置が道路地図情報や外部との通信により取得することができる。
 また、車載されたレーザレーダが路面にレーザを照射して、白線と自車との相対位置を算出してもよい。白線はレーザを反射しやすいため、白線からの反射光を検出することで白線と自車間の相対角度や位置ズレを検出することができる。
 図5に戻り、逸脱防止支援ECU12は、所定の条件下で、車線からの逸脱を予測して警報を吹鳴する車線逸脱警報の吹鳴(LDW:Lane Departure Warning)、車線の中央を走行するための操舵力を付加する車線維持支援(LKA:Lane Keeping
Assist)を行う。
 LDW/LKAが作動する条件は以下のとおりである。
・メインSWがオンであること
・車速が所定範囲(速度範囲は法令等によって異なる)にあること
・少なくとも左右いずれかの白線が認識されていること
・ワイパーがある速度以上で作動していないこと
・ターンシグナルランプが点灯していないこと
・ブレーキペダルが操作されていないこと
 逸脱防止支援ECU12は、メインSW16がオンになると、ウィンカSW17からターンシグナルランプが点灯していないこと、車速センサ19から車速が所定範囲に入ること、ワイパーSW18からワイパーが高速で作動していないこと、ブレーキSW20からブレーキペダルが操作されていないこと、及び、レーン認識カメラ11から少なくとも左右いずれかの白線が認識されていることを確認すると、LDW/LKA制御を実行する。また、逸脱防止支援ECU12は、例えば、1つでも条件が満たされないと、未認識状態の表示態様の白線アイコンの表示をメータECU13に要求する。また、白線の認識以外の条件が満たされている場合は白線認識状態を通知することで、白線認識状態に応じた白線アイコンの表示をメータECU13に要求する。白線認識状態は左右の白線で異なる場合があるので、左右それぞれの白線毎の白線認識状態がほぼ同じタイミングでメータECU13に通知される。
 まず、LDWについて、逸脱防止支援ECU12は、車両のヨー角φ、左右いずれかの白線までの距離、及び、車速に基づき、白線に到達するまでの時間を算出する。そして、白線に到達するまでの時間が所定値(例えば1秒)以内になると、メータECU13又は不図示のブザー発生を受け持つECUにブザー要求を送信する。また、逸脱防止支援ECU12は、白線アイコンを点滅させるなどの視覚的な警告をメータECU13に要求する。
 また、LKAについて、逸脱防止支援ECU12は、白線情報のうち車両のオフセット位置Osに応じた大きさかつオフセット位置とは反対方向の付加トルクを演算し、パワステECU14に送信する。パワステECU14は、受信した付加トルクをモータ23に印加するので、走行レーンの中央付近を走行するようにステアリングホイールの操舵が支援される。付加トルクは例えば中央線を基準としたオフセット位置Osに比例した値である。なお、操舵に付加トルクを加えて走行レーンの維持を支援するのでなく、各車輪の制動力を個別に制御して、例えば内輪側と外輪側の制動力の左右差を利用して車両の進行方向を制御してもよい。各輪の制動力はブレーキECUにより制御される。
 また、運転者の意志による車線変更に対してはトルクセンサ22が運転者の操舵トルクを検出して、パワステECU14が付加トルクを低減することでオーバライドが容易になる。また、運転者の車線変更の意志はウィンカSW17によっても検出可能であり、この場合上記のように付加トルクは付加されない。
 〔特定未認識状態の検出〕
 図7(a)(b)は、車線逸脱防止支援装置100の機能ブロック部の一例を示す。図7(a)では、主に使用されるECU等を図示した。図7(b)は機能ブロック図の別の一例であり、図7(b)の逸脱防止支援ECU12は白線移動判定部45を有する。
 逸脱防止支援ECU12やメータECU13等の各ECUは、マイコンと電源ICや監視回路などの周辺回路を備えている。逸脱防止支援ECU12は、例えばCPU31、RAM32、ROM33、及び、CANC(CAN Controller)34を有し、メータECU13は例えばCPU35、RAM36、ROM38、I/O39、及び、CANC37を有する。逸脱防止支援ECU12のCPU31はROM33に記憶されたプログラムを実行すること及びハードウェアと協働することで、未認識判定部41、距離判定部42及び表示要求部43を実現する。メータECU13のCPU35はROM38に記憶されたプログラムを実行すること及びハードウェアと協働することで、表示切替部44を実現する。
 未認識判定部41は、白線情報に基づき左右いずれかの白線のみが未認識状態になったか否かを判定する。距離判定部42は、オフセット位置Osと車線幅Wを利用して、認識されていない側の白線までの距離を算出し、閾値と比較することで、車両が片方の白線から離れている(又は片方の白線に近づいている)ために特定未認識状態であるか否かを判定する。この判定の詳細は後述する。
 図7(b)の白線移動判定部45は、認識中の白線が白線認識領域の外に移動したことを検出することで、白線情報を利用して特定未認識状態であるか否かを判定する。この判定の詳細は後述する。
 表示要求部43は、未認識判定部41と距離判定部42、又は、未認識判定部41と白線移動判定部45の判定結果に基づき、CANC34を介して白線認識状態又は白線アイコンの表示態様、をメータECU13に通知する。すなわち、表示要求部43は、
・左の白線が認識されておらず、左の白線までの距離が閾値以上の場合(特定未認識状態の場合)、左の白線は認識状態であるとメータECU13に通知する。右の白線については認識結果に応じて白線認識状態を通知する。
・右の白線が認識されておらず、右の白線までの距離が閾値以上の場合(特定未認識状態の場合)、右の白線は認識状態であるとメータECU13に通知する。左の白線については認識結果に応じて白線認識状態を通知する。
・左の白線が認識されておらず、左の白線までの距離が閾値以上でない場合、左の白線は未認識状態であるとメータECU13に通知する。右の白線については認識結果に応じて白線認識状態を通知する。
・右の白線が認識されておらず、右の白線までの距離が閾値以上でない場合、右の白線は未認識状態であるとメータECU13に通知する。左の白線については認識結果に応じて白線認識状態を通知する。
 メータECU13の表示切替部44は、白線認識状態に応じて情報表示部21に表示する白線アイコンの表示態様を切り換える。なお、図では逸脱防止支援ECU12が未認識判定部41、距離判定部42及び表示要求部43を有するが、一部又は全部をメータECU13やその他のECUが有していてもよい。
 〔表示装置〕
 図8は、メータパネル50の一例を示す図である。メータパネル50には、スピードメータ52、タコメータ51、燃料計54、水温計53、シフトポジション表示部55、及び、情報表示部21等を有する。本実施形態では情報表示部21に白線認識状態を示す白線アイコンで表示されるものとする。白線アイコンは、例えば、HUD(Head Up Display)に表示してもよいし、センターコンソールの液晶表示部に表示してもよい。
 情報表示部21は、縦横に複数のドット(ピクセル)が配置された、ドットタイプのマルチインフォメーションディスプレイ(液晶ディスプレイ)である。情報表示部21には、白線アイコンの他、オドメータ、トリップメータ、瞬間燃費、平均燃費、ECOドライブインジケータ、航続可能距離、外気温等、及び、各種の警告が表示される。情報表示部21は、白黒表示のみ可能でもよいし、グレー表示が可能でもよいし、カラー表示が可能でもよい。
 〔白線アイコンの例〕
 図9を用いて、特定未認識状態の白線アイコンの表示態様について説明する。図9は特定未認識状態の白線アイコンのいくつかの例を説明する図の一例である。
 本実施例の車線逸脱防止支援装置100は、特定未認識状態の白線アイコンを、未認識状態の白線アイコンと異なった表示態様で表示する。
 図9(a)では、認識状態の表示態様が黒地に白の白線アイコン、未認識状態の表示態様が黒地に中抜きの白線アイコンである。これに対し、特定未認識状態の表示態様は認識状態と同じ表示態様(黒地に白の白線アイコン)である。
 また、図9(b)に示すように、背景と白線アイコンの白黒を反転させてもよい。図9(b)では、認識状態の表示態様が白地に黒の白線アイコン、未認識状態の表示態様が白地に中抜きの白線アイコンである。これに対し、特定未認識状態の表示態様は認識状態と同じ表示態様(白地に黒の白線アイコン)である。
 特定未認識状態は白線が認識されていない状態だが、運転者の視界では認識されている状態である。これに対し、未認識状態は、白線の状態が悪かったり雨天などの場合のように、運転者からも白線が認識されていないことが把握されやすい状態である。したがって、逸脱防止支援ECU12が、特定未認識状態と未認識状態とを異なる表示態様、かつ、特定未認識状態と認識状態とを同じ表示態様で表示することで、運転者が自身の把握状態と同様であると判断でき運転者が感じる違和感を少なくすることができる。また、特定未認識状態の専用の白線アイコンがある場合よりも、運転者にとっては白線アイコンの意味を覚えやすいという効果も得られる。このように、本実施例では、レーン認識カメラ11では認識されていない白線の白線アイコンを、認識状態の白線アイコンで表示することが特徴の1つとなっている。
 〔動作手順〕
 以下、二種類の特定未認識状態の判定手順について説明する。以下では、車両が右側の白線に接近した場合(左の白線が左白線認識領域から外れる)を例に説明するが、車両が左の白線に接近した場合も左右が逆になるだけで同じである。
 図10は、車線逸脱防止支援装置100が白線認識状態を表示する手順を示すフローチャート図の一例である。図10の手順は、例えばメインSW16がオンになると繰り返し実行される。
 逸脱防止支援ECU12には1つの画像データが撮影される度に白線情報が送信される。未認識判定部41は、白線情報に含まれる白線認識状態に基づき、左の白線が未認識状態となったか否かを判定する(S10)。
 左の白線が未認識状態でない場合(S10のNo)、表示要求部43は左の白線の白線認識状態として認識状態をメータECU13に送信する。これにより、表示切替部44は左の白線の白線アイコンを認識状態の表示態様で表示する(S30)。
 左の白線が未認識状態の場合(S10のYes)、距離判定部42は左の白線から自車位置までの距離が、閾値以上か否かを判定する(S20)。
 図11はこの判定について説明する図の一例である。白線情報により、距離判定部42には、車線幅Wとオフセット位置Osが得られている。オフセット位置Osは、中央線より右方向のオフセットを正、中心より左方向のオフセットを負とする。すると、自車位置(レーン認識カメラ11の位置とするが自車位置は適宜設計できる)は、左の白線から「W/2+Os」である。距離判定部42は、この値を閾値と比較して、左の白線から自車位置までの距離が、閾値以上か否かを判定する。
 閾値は、左白線認識領域から左の白線が外れる際の距離である。左白線認識領域は固定なので、左の白線が左白線認識領域から外れるレーン認識カメラ11の位置(=閾値)を計算で求めることができる。左白線認識領域が固定であれば、閾値は車線幅や車幅に関係なく一定になる。具体的には、閾値は3.5~4m程度であるが、この値は適宜設計できる。
 なお、演算対象の画像データではすでに白線が認識されていないので、左の白線が未認識になると白線情報に車線幅Wとオフセット位置Osが含まれていない可能性がある。この場合、距離判定部24は1つ前の画像データから得られた白線情報を利用すればよい。
 また、車両が左の白線に接近した場合、自車位置は右の白線から「W/2-Os」である(Osは負のため)。距離判定部42が、距離を算出する場合にW/2にOsを加算するか、減算するかは、未認識状態になった白線により判断できる。または、Osが正か負のいずれであるかにより、車両が接近した方向が判断できるのでOsが正か負により判断してもよい。
 また、距離判定部42は認識されない側(自車から遠い方の白線)の白線と自車位置までの距離でなく、認識されている側の白線と自車位置までの距離に基づき、他方の白線に接近しているため一方の白線が特定未認識状態になっていることを検出することができる。図示するように、認識されない左の白線と自車位置の距離が閾値と同程度の時、右側の白線と自車位置の距離は、「車線幅W-閾値」程度である。したがって、車線幅Wが検出されればそれと固定の閾値を用いて、距離判定部42は右側の白線に接近しすぎたと判定できる。すなわち、右側の白線と自車位置の距離が「車線幅W-閾値」未満の場合、左の白線が白線認識領域から特定未認識状態であると判定する。
 また、S20では、「左の白線から自車位置までの距離が閾値以上」の代わりに、「オフセット位置Osが閾値以上」という判定基準を使用することができる。オフセット位置Osの絶対値が大きいほど左右のいずれかの白線に接近している可能性が高いためである。この場合、認識されている側の白線と自車位置までの距離と同様に、車線幅Wによって白線認識領域から白線が外れるか否かが異なる。このため、距離判定部42は「閾値-W/2≦|Os|」の場合に、片方の白線が特定未認識状態であると判定する。
 また、図11(b)に示すように、道路がカーブしている場合、カーブと反対方向に車両が接近して走行すると、より早期に白線認識状態が特定未認識状態になる。このため、閾値をカーブの有無又は半径Rによって可変とすることが好適である。例えば、距離判定部42は、「Osが正(右に接近している)かつ左カーブの場合」又は「Osが負(左に接近している)かつ右カーブの場合」、閾値を補正する。半径Rが小さいほど(カーブが急なほど)閾値を小さくすればよい。補正式は、例えば「閾値=閾値×k×R」である。kは半径Rを閾値に反映させるための係数である。こうすることで、前方がカーブしていても、適切なタイミングで特定未認識状態を検出することができる。
 図10に戻り、左の白線から自車位置までの距離が閾値以上の場合(S20のYes)、表示要求部43は左の白線の白線認識状態として認識状態をメータECU13に送信する。これにより、表示切替部44は左の白線の白線アイコンを認識状態の表示態様で表示する(S30)。したがって、運転者は左の白線の白線アイコン(認識状態)を見て、目視したとおりに白線が認識されていると判断するので違和感を感じることが少なくなる。
 左の白線から自車位置までの距離が閾値以上でない場合(S20のNo)、表示要求部43は左の白線の白線認識状態として未認識状態をメータECU13に送信する。これにより、表示切替部44は左の白線の白線アイコンを未認識状態の表示態様で表示する(S40)。
 なお、車両が右側の白線を逸脱すると車線逸脱防止支援装置100が予測した場合、または、実際に右側の白線を逸脱した場合、白線アイコンは警報作動状態の表示態様で表示される。警報作動状態の白線アイコンは、警報作動状態が解消すると認識状態、特定未認識状態又は未認識状態に戻る。
 次に、白線移動判定部45による、白線の特定未認識状態の判定について説明する。図12は、車線逸脱防止支援装置100が白線認識状態を表示する手順を示すフローチャート図の別の一例である。図12において図11と同一ステップについては、説明を省略する。図12では、左の白線が未認識状態の場合(S10のYes)、距離判定部42が左の白線から自車位置までの距離が閾値以上か否かを判定するのでなく、白線移動判定部45が認識中の白線が白線認識領域の外に移動したか否かを判定する(S22)。
 図13はこの判定について説明する図の一例である。上記のように、レーン認識カメラ11は、左右のそれぞれの白線認識領域を使用して白線を認識している。図13の補助線a、bが左白線認識領域の左端を、補助線c、dが左白線認識領域の右端を、それぞれ示す。図13(a)に示すように、車両が走行レーンの中央付近を走行中、左の白線は補助線a~d内にある。しかし図13(b)に示すように、車両が右側の白線に接近して走行すると左の白線は補助線a、bよりも左側に移動する。また、図13(a)の状態から図13(b)の状態に遷移する過程で、左の白線は補助線a、bを左方向に横切る。
 本実施例の白線移動判定部45は、左の白線が補助線a、bを左方向に横切ることを検出して、特定未認識状態になったことを判定する。具体的には、過去の白線情報に含まれるオフセット量Osと白線認識状態を使用する。車両が右方向に移動する過程では、オフセット量Os(正)が徐々に大きくなる。また、特定未認識状態になるまでは、左の白線は認識状態である。したがって、左の白線が未認識状態になった直後、過去の数個のオフセット量Osが増加傾向にあることから、左の白線が補助線a、bを左方向に横切ったことを検出できる。また、さらにオフセット量Osが所定値を超えたことを左の白線が補助線a、bを左方向に横切ったことの判定条件に加えてもよい。
 また、図10のS20の判定と図12のS22の判定は組み合わせることもできる。例えば、S20とS22のいずれかを満たした場合に特定未認識状態であると判定してもよいし、S20とS22の両方を満たした場合に特定未認識状態であると判定してもよい。
 以降の処理は図10と同じである。したがって、運転者は認識状態の白線アイコンを見て、目視したとおりに白線が認識されていると判断するので違和感を感じることが少なくなる。
 〔特定未認識状態の表示態様の補足〕
 認識状態と特定未認識状態が同じ表示態様の白線アイコンだと、特定未認識状態のまま、たまたま白線が未認識状態になった場合、運転者が、白線が認識されていると誤解するおそれがある。しかし、実際にはこのような誤解が問題になる場面は極めて少ないとしてよい。
 図14は白線アイコンの時間的な変化の一例を示す図である。図14(a)において車両は走行レーンの中央付近を走行しているので、左右いずれの白線の白線アイコンも認識状態で表示される。
図14(b)において車両が右側の白線に接近すると、車線逸脱防止支援装置100は左の白線の特定未認識状態を検出するが、特定未認識状態のアイコンは認識状態と同じである。そして、特定未認識状態において左の白線が不鮮明に形成されていたとしても(車両が不鮮明な領域に進入しても)、車両が右側の白線に接近しているので白線アイコンは認識状態のままである。
図14(c)において、車両が走行レーンの中央付近に戻ったとする。この場合、車線逸脱防止支援装置100は左の白線が左白線認識領域に入り次第、左の白線の認識を再開するが、左の白線は不鮮明なので未認識であると判定される。しかし、車両は走行レーンの中央付近を走行しているので、左の白線の白線認識状態は特定未認識状態とはならない。よって、車線逸脱防止支援装置100は左の白線の白線アイコンを未認識状態にて表示する。
 したがって、運転者が、不鮮明な白線が認識されていると誤解したとしてもわずかな時間内に収めることができる。
 本実施例では、特定未認識状態を実施例1と異なった態様で表示する車線逸脱防止支援装置100について説明する。
 図15は、白線認識状態に応じた白線アイコンの表示態様の一例を説明する図である。図15(a)に示すように、認識状態では左右の白線が黒地に白の白線アイコンで表示される。また、図15(c)に示すように、未認識状態では認識されていない側の白線が黒地に中抜きで表示される。これらに対し、図15(b)に示すように、特定未認識状態では認識されていない側の白線が黒と白の中間輝度(以下、単にグレー表示という)にて表示される。警報作動状態については実施例1と同様である。
 このように、認識状態や未認識状態のいずれとも異なる表示態様で特定未認識状態の白線アイコンを表示することで、車線逸脱防止支援装置100は車両が右又は左の白線に接近しているため白線が認識されていないことを運転者に的確に伝えることができる。
 図16を用いて、特定未認識状態の表示態様について説明する。図16は特定未認識状態の表示態様のいくつかの例を説明する図の一例である。図16(a)の認識状態と未認識状態の白線アイコンの表示態様は図9(a)と同じである。これに対し、特定未認識状態の白線アイコンは、完全に白(画素値=255)又は黒(画素値=0)でない、いわゆるグレー表示になっている
グレー表示の実現には以下のような表示方法がある。
・白画素値(例えば255)の数:黒画素値(0)の数の比を、0%より大きく100%未満とする。つまり、白画素と黒画素を混在させて白線アイコンを形成する表示態様
・0より大きく例えば255より小さい画素値の画素で白線アイコンを塗り潰す表示態様
 また、図16(b)に示すように、背景と白線アイコンの白黒を反転させてもよい。図16(b)では特定未認識状態の表示態様は、白(画素値=255)と黒(画素値=0)の間のいわゆるグレー表示になっている。グレー表示を実現するための表示方法は図16(a)と同様である。
 なお、図16(a)(b)のいずれの場合も、グレーの濃度(どのくらい黒又は白に近いか)は設計できる。また、図16(a)と(b)で、グレーの濃度を変えてもよい。
 図17は、車線逸脱防止支援装置100が白線認識状態を表示する手順を示すフローチャート図の一例である。図17の手順は、例えばメインSW16がオンになると繰り返し実行される。本実施例においても、車両が右側の白線に接近した場合(左の白線が左白線認識領域から外れる)を例に説明するが、車両が左の白線に接近した場合も左右が逆になるだけで同じである。
 図17の手順では、ステップS20において左の白線から自車位置までの距離が閾値以上の場合(S20のYes)、表示要求部43は左の白線の白線認識状態として特定未認識状態をメータECU13に送信する。これにより、表示切替部44は左の白線の白線アイコンを図16のようにグレー表示する(S25)。
 認識状態の場合(S30)、及び、未認識状態の場合(S40)、白線アイコンの表示態様は実施例1と同じである。また、ステップS20の判定は図12のS22の判定に置き換えてもよいし、S22の判定と組み合わせてもよい。
 認識状態、特定未認識状態、及び、未認識状態をそれぞれ異なる表示態様で表示することで、運転者は、目視されている左の白線が白線認識領域から外れたために認識されていないことを的確に認識することができる。
 〔グレー表示の表示例〕
 特定未認識状態を表す白線アイコンのグレー表示は、認識状態及び未認識状態と異なればよいので、種々の表示例が存在する。
図18は、図16(b)の特定未認識状態のグレー表示の別の表示例を示す。図18(a)ではグレー表示を斜線で描画された白線アイコンで表示しており、図18(b)ではグレー表示を縦縞が描画された白線アイコンで表示しており、図18(c)ではグレー表示を格子が描画された白線アイコンで表示している。
 また、情報表示部21がカラー表示可能な場合、輝度だけでなく彩度を用いて、特定未認識状態の白線アイコンと、認識状態及び未認識状態の白線アイコンの表示態様を異ならせることができる。
 図19は特定未認識状態と、認識状態及び未認識状態とで色が異なる白線アイコンの一例を示す。図19(a)に示すように、認識状態の白線アイコンは例えば青又は緑により表示される。また、図19(b)に示すように、特定未認識状態の白線アイコンは例えば黄により表示される。また、図19(c)に示すように、未認識状態の白線アイコンは例えば赤により表示される。なお、地肌色は、例えば白、黒、グレー又はクリーム色など、白線アイコンと同じ色でなければどのような色でもよい。
 また、特定未認識状態と、認識状態及び未認識状態とで線の太さが異なる白線アイコンを表示してもよい。図19(d)に示すように、認識状態の白線アイコンは例えば太い白線により表示される。また、図19(e)に示すように、特定未認識状態の白線アイコンは例えば中間の太さの白線により表示される。また、図19(f)に示すように、未認識状態の白線アイコンは例えば細い白線により表示される。
 また、特定未認識状態と、認識状態及び未認識状態とで線の態様が異なる白線アイコンを表示してもよい。図20(a)に示すように、認識状態の白線アイコンは例えば太い白線により表示される。また、図20(b)に示すように、特定未認識状態の白線アイコンは例えば細い白線により表示される。また、図20(c)に示すように、未認識状態の白線アイコンは例えば白い点線により表示される。また、特定未認識状態と未認識状態の白線アイコンの表示態様を、例えば細い白線の数により異ならせることもできる(未認識状態の白線アイコンは線の数が特定未認識状態よりも少ない)。
 また、図20(d)に示すように、認識状態の白線アイコンは例えば太い白線により表示してもよい。また、図20(e)に示すように、特定未認識状態の白線アイコンは例えば細い白線により表示してもよい。また、図20(f)に示すように、未認識状態の白線アイコンを表示しなくてもよい。
 また、特定未認識状態と未認識状態の白線アイコンの表示態様を同じにし、特定未認識状態又は未認識状態いずれかの白線アイコンを点滅させることで、特定未認識状態と未認識状態の表示態様を異ならせてもよい。
 以上説明したように、本実施形態の車線逸脱防止支援装置は、片方の白線を認識できなくても、特定未認識状態の白線アイコンを未認識状態と異なる認識状態と同じにする、又は、未認識状態、認識状態のどちらとも異なる白線アイコンにすることで、運転者が感じる違和感を低減することができる。

Claims (10)

  1.  走行レーンを区分する車線区分線を撮影する撮影手段と、
     撮影された画像データの認識領域から車線区分線を認識し、走行レーン内の幅員方向の自車位置を検出する自車位置検出手段と、
     車線区分線の認識結果を用いて走行レーンからの逸脱防止を支援する支援手段と、
     車線区分線の認識結果を表示する表示手段と、を有する車線逸脱防止支援装置であって、
     左右の一方の白線が認識されない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する認識結果表示制御手段、
     を有する車線逸脱防止支援装置。
  2.  前記認識結果表示制御手段は、前記自車位置検出手段が特定した前記自車位置から遠い方の車線区分線が認識されていない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様で表示する、
     ことを特徴とする請求項1記載の車線逸脱防止支援装置。
  3.  前記自車位置検出手段が検出した前記自車位置及び走行レーンの車線幅から、自車位置から遠い方の車線区分線から自車位置までの第1の距離を検出する距離検出手段を有し、
     前記第1の距離が閾値以上の場合、前記認識結果表示制御手段は、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様で表示する、
     ことを特徴とする請求項2記載の車線逸脱防止支援装置。
  4.  前記距離検出手段は、前記自車位置検出手段が検出した前記自車位置及び走行レーンの車線幅から、自車位置から近い方の車線区分線から自車位置までの第2の距離、又は、走行レーンの中央線からの前記自車位置のずれ量を検出し、
     前記第2の距離が「車線幅-前記閾値」未満の場合、又は、前記ずれ量が「前記閾値-車線幅/2」以上の場合、
     前記認識結果表示制御手段は、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する、
     ことを特徴とする請求項2又は3記載の車線逸脱防止支援装置。
  5.  認識されていた車線区分線が前記認識領域の外に右端又は左端から移動したことを検出する移動判定検出手段を有し、
     前記認識結果表示制御手段は、前記認識領域の外に右端又は左端から車線区分線が移動したことが検出された場合、移動した車線区分線が前記自車位置から遠い方の車線区分線であると判定する、
     ことを特徴とする請求項2~4いずれか1項記載の車線逸脱防止支援装置。
  6.  前記認識結果表示制御手段は、前記自車位置から遠い方の認識されていない車線区分線を、認識されている車線区分線と同じ表示態様で表示する、
     ことを特徴とする請求項1~3いずれか1項記載の車線逸脱防止支援装置。
  7.  前記認識結果表示制御手段は、前記自車位置から遠い方の認識されていない車線区分線を、認識されている車線区分線、及び、前記撮影手段による車線区分線の撮影結果が不鮮明であるか又は路面標示がないために認識されていない車線区分線と異なる表示態様で表示する、
     ことを特徴とする請求項1~3いずれか1項記載の車線逸脱防止支援装置。
  8.  前記認識結果表示制御手段は、認識されていない車線区分線を、前記撮影手段による車線区分線の撮影結果が不鮮明であるか又は路面標示がないために認識されていない車線区分線及び認識されている車線区分線と異なる色で表示する、
     ことを特徴とする請求項1又は2記載の車線逸脱防止支援装置。
  9.  走行レーンを区分する車線区分線を撮影する撮影手段と、
     撮影された画像データの認識領域から車線区分線を認識し、走行レーン内の幅員方向の自車位置を検出する自車位置検出手段と、
     車線区分線の認識結果を用いて走行レーンからの逸脱防止を支援する支援手段と、
     車線区分線の認識結果を表示する表示手段と、有する車線逸脱防止支援装置の区分線表示方法であって、
     左右の一方の白線が認識されない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する、
     ことを特徴とする区分線表示方法。
  10.  走行レーンを区分する車線区分線を撮影する撮影手段と、
     撮影された画像データの認識領域から車線区分線を認識し、走行レーン内の幅員方向の自車位置を検出する自車位置検出手段と、
     車線区分線の認識結果を用いて走行レーンからの逸脱防止を支援する支援手段と、
     車線区分線の認識結果を表示する表示手段と、有する車線逸脱防止支援装置のコンピュータに
     左右の一方の白線が認識されない場合、前記自車位置に応じて、認識されていない車線区分線を、認識されていないことを示す表示態様でない表示態様にて表示する処理、
     を実行させることを特徴とするプログラム。
PCT/JP2011/063170 2011-06-08 2011-06-08 車線逸脱防止支援装置、区分線表示方法、プログラム WO2012169029A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
DE112011100180.0T DE112011100180B4 (de) 2011-06-08 2011-06-08 Spurhalteunterstützungsvorrichtung, Verfahren zum Anzeigen einer Spurgrenzlinie und Programm
JP2012521821A JP5316713B2 (ja) 2011-06-08 2011-06-08 車線逸脱防止支援装置、車線逸脱防止方法、記憶媒体
PCT/JP2011/063170 WO2012169029A1 (ja) 2011-06-08 2011-06-08 車線逸脱防止支援装置、区分線表示方法、プログラム
KR1020127017034A KR101328363B1 (ko) 2011-06-08 2011-06-08 차선 일탈 방지 지원 장치, 구분선 표시 방법, 프로그램
CN201180037850.3A CN103052976B (zh) 2011-06-08 2011-06-08 车道脱离防止辅助装置、划分线显示方法、程序
US13/463,431 US8896687B2 (en) 2011-06-08 2012-05-03 Lane departure prevention support apparatus, method of displaying a lane boundary line and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/063170 WO2012169029A1 (ja) 2011-06-08 2011-06-08 車線逸脱防止支援装置、区分線表示方法、プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/463,431 Continuation US8896687B2 (en) 2011-06-08 2012-05-03 Lane departure prevention support apparatus, method of displaying a lane boundary line and program

Publications (1)

Publication Number Publication Date
WO2012169029A1 true WO2012169029A1 (ja) 2012-12-13

Family

ID=47292857

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/063170 WO2012169029A1 (ja) 2011-06-08 2011-06-08 車線逸脱防止支援装置、区分線表示方法、プログラム

Country Status (6)

Country Link
US (1) US8896687B2 (ja)
JP (1) JP5316713B2 (ja)
KR (1) KR101328363B1 (ja)
CN (1) CN103052976B (ja)
DE (1) DE112011100180B4 (ja)
WO (1) WO2012169029A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014203122A (ja) * 2013-04-01 2014-10-27 怡利電子工業股▲ふん▼有限公司 運転安全距離表示方法
CN104417536A (zh) * 2013-09-11 2015-03-18 丰田自动车株式会社 驾驶支援装置
JP2015191372A (ja) * 2014-03-27 2015-11-02 トヨタ自動車株式会社 走路境界区画線検出装置
JP2016070915A (ja) * 2014-09-30 2016-05-09 富士重工業株式会社 車両の視線誘導装置
JP2017033347A (ja) * 2015-08-03 2017-02-09 トヨタ自動車株式会社 表示装置
JP2018045273A (ja) * 2016-09-12 2018-03-22 本田技研工業株式会社 表示装置
JP2018103862A (ja) * 2016-12-27 2018-07-05 トヨタ自動車株式会社 運転支援装置
JP2020042612A (ja) * 2018-09-12 2020-03-19 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
WO2020116205A1 (ja) * 2018-12-07 2020-06-11 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、および情報処理方法、並びにプログラム

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2402422B1 (es) * 2011-09-07 2014-03-11 Manuel MUÑOZ SÁIZ Sistema de conducción automática y de avisos de zonas de velocidad reducida para vehiculos mejorado
KR101285075B1 (ko) * 2011-11-24 2013-07-17 팅크웨어(주) 자이로스코프의 센서 정보와 차선 정보를 이용한 증강현실 뷰 모드 표현 방법 및 그 장치
US9280901B2 (en) * 2013-03-25 2016-03-08 E-Lead Electronic Co., Ltd. Method for displaying the vehicle safety distance
DE102013103877B4 (de) * 2013-04-17 2016-05-12 E-Lead Electronic Co., Ltd. Methode zum Anzeigen des Fahrzeug-Sicherheitsabstandes
GB2516698B (en) * 2013-07-30 2017-03-22 Jaguar Land Rover Ltd Vehicle distributed network providing feedback to a user
DE102013217860A1 (de) * 2013-09-06 2015-03-12 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bestimmen eines Fahrbahnverlaufs einer Fahrbahn eines Fahrzeugs
KR101510338B1 (ko) * 2013-11-22 2015-04-07 현대자동차 주식회사 차량용 차선 이탈 경보 시스템의 검사 장치
KR101502510B1 (ko) 2013-11-26 2015-03-13 현대모비스 주식회사 차량의 차선 유지 제어 장치 및 방법
CN104015657B (zh) * 2014-06-16 2016-09-14 国通道路交通管理工程技术研究中心有限公司 一种预防重点运输车辆违法超车的方法及系统
US9239244B1 (en) * 2014-09-15 2016-01-19 E-Lead Electronics Co., Ltd. Device capable of showing both navigation and safe driving warning information
US10131276B2 (en) * 2014-09-30 2018-11-20 Subaru Corporation Vehicle sightline guidance apparatus
JP6189815B2 (ja) * 2014-10-29 2017-08-30 株式会社Soken 走行区画線認識システム
US10262213B2 (en) * 2014-12-16 2019-04-16 Here Global B.V. Learning lanes from vehicle probes
JP6456682B2 (ja) * 2014-12-25 2019-01-23 株式会社Soken 走行区画線認識装置
WO2016203515A1 (ja) * 2015-06-15 2016-12-22 三菱電機株式会社 走行車線判別装置および走行車線判別方法
JP6540335B2 (ja) * 2015-07-30 2019-07-10 富士通株式会社 走行状況表示プログラム、走行状況表示装置、及び走行状況表示方法
JP6106229B2 (ja) * 2015-08-10 2017-03-29 富士重工業株式会社 車線認識装置
JP6613795B2 (ja) * 2015-10-16 2019-12-04 株式会社デンソー 表示制御装置および車両制御装置
JP6493196B2 (ja) 2015-12-17 2019-04-03 株式会社デンソー 制御装置、制御方法
JP6975945B2 (ja) * 2016-02-24 2021-12-01 パナソニックIpマネジメント株式会社 判定装置、判定方法、プログラムおよびプログラムを記録した記録媒体
KR101876032B1 (ko) * 2016-06-27 2018-08-02 현대자동차주식회사 주차구획 표시 장치 및 그 방법
CN106157635B (zh) * 2016-07-22 2018-08-07 金陵科技学院 一种判断车辆在车道中位置的装置与判断方法
JP2018092290A (ja) * 2016-12-01 2018-06-14 株式会社Subaru 車両用表示装置
JP6466899B2 (ja) 2016-12-01 2019-02-06 株式会社Subaru 車両用表示装置
JP6583252B2 (ja) * 2016-12-27 2019-10-02 トヨタ自動車株式会社 運転支援装置
JP2018116516A (ja) * 2017-01-19 2018-07-26 トヨタ自動車株式会社 車両の注意喚起装置
CN107021104A (zh) * 2017-04-21 2017-08-08 天津英创汇智汽车技术有限公司 一种车道识别补偿方法和装置
CN109421708B (zh) * 2017-08-23 2020-10-23 比亚迪股份有限公司 车道线偏离报警方法和装置
JP7080091B2 (ja) * 2018-04-02 2022-06-03 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
CN108630014A (zh) * 2018-05-10 2018-10-09 苏州天瞳威视电子科技有限公司 一种行车线偏离预警系统及方法
CN109910744B (zh) * 2019-03-18 2022-06-03 重庆睿驰智能科技有限公司 Ldw车道偏离预警系统
JP2020163903A (ja) * 2019-03-28 2020-10-08 本田技研工業株式会社 表示制御装置、表示制御方法、及びプログラム
DE102019207951B4 (de) * 2019-05-29 2022-06-30 Volkswagen Aktiengesellschaft Verfahren zum Durchführen einer Korrektur der Fahrtrichtung durch ein Fahrerassistenzsystem in einem Kraftfahrzeug sowie eine Steuervorrichtung hierzu
WO2021014954A1 (ja) * 2019-07-24 2021-01-28 株式会社デンソー 表示制御装置及び表示制御プログラム
US11891073B2 (en) * 2019-10-25 2024-02-06 GM Global Technology Operations LLC Systems and methods for detecting and compensating camera yaw angle offset for autonomous vehicles
CN111516686B (zh) * 2020-04-08 2021-09-14 中通客车控股股份有限公司 一种用于车辆的车道偏离方向自动修正系统及方法
US11738749B2 (en) * 2020-11-09 2023-08-29 GM Global Technology Operations LLC Methods, systems, and apparatuses for scenario-based path and intervention adaptation for lane-keeping assist systems
CN112406535A (zh) * 2020-11-23 2021-02-26 上海伟世通汽车电子系统有限公司 一种基于黑白灰屏仪表的驾驶辅助方法
CN113076641B (zh) * 2021-03-31 2022-09-20 同济大学 基于风险评估的智能车人机协同转向控制并行计算方法
CN114407889B (zh) * 2022-01-18 2023-07-25 上汽通用五菱汽车股份有限公司 车道保持方法、系统、设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06276430A (ja) * 1993-03-24 1994-09-30 Isuzu Motors Ltd 車線逸脱警報装置
JPH08175299A (ja) * 1994-12-26 1996-07-09 Isuzu Motors Ltd 車線逸脱警報装置
JP2005130613A (ja) * 2003-10-23 2005-05-19 Nissan Motor Co Ltd 車両
WO2008107944A1 (ja) * 2007-03-01 2008-09-12 Pioneer Corporation 車線逸脱防止装置、車線逸脱防止方法、車線逸脱防止プログラム及び記憶媒体

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100326674B1 (ko) * 1999-03-11 2002-03-02 이계안 차량의 차선이탈 경보 방법
KR100373002B1 (ko) * 2000-04-03 2003-02-25 현대자동차주식회사 차량의 차선 이탈 판단 방법
JP4374211B2 (ja) * 2002-08-27 2009-12-02 クラリオン株式会社 レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置
US6930593B2 (en) * 2003-02-24 2005-08-16 Iteris, Inc. Lane tracking system employing redundant image sensing devices
JP4575275B2 (ja) 2005-11-02 2010-11-04 三菱ふそうトラック・バス株式会社 車両用表示装置
JP2007125968A (ja) 2005-11-02 2007-05-24 Mitsubishi Fuso Truck & Bus Corp 車両用白線表示装置
JP4324179B2 (ja) 2006-06-06 2009-09-02 三菱電機株式会社 情報提供装置
JP4939137B2 (ja) 2006-07-19 2012-05-23 富士重工業株式会社 車線認識装置
JP4506790B2 (ja) * 2007-07-05 2010-07-21 アイシン・エィ・ダブリュ株式会社 道路情報生成装置、道路情報生成方法および道路情報生成プログラム
JP4937030B2 (ja) * 2007-07-24 2012-05-23 ルネサスエレクトロニクス株式会社 車両用画像処理装置
JP5124875B2 (ja) 2008-03-12 2013-01-23 本田技研工業株式会社 車両走行支援装置、車両、車両走行支援プログラム
KR101163446B1 (ko) * 2009-03-18 2012-07-18 기아자동차주식회사 가상 차선을 이용하는 차선 이탈 경보 방법 및 그에 따른 시스템
JP2010250445A (ja) * 2009-04-13 2010-11-04 Aisin Aw Co Ltd 運転支援装置、及びプログラム
JP5007840B2 (ja) * 2009-05-22 2012-08-22 トヨタ自動車株式会社 運転支援装置
WO2011064825A1 (ja) 2009-11-27 2011-06-03 トヨタ自動車株式会社 運転支援装置および運転支援方法
JP5220787B2 (ja) * 2010-03-08 2013-06-26 株式会社日本自動車部品総合研究所 車載白線認識装置
CN101915672B (zh) * 2010-08-24 2012-07-25 清华大学 车道偏离报警系统的测试装置及测试方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06276430A (ja) * 1993-03-24 1994-09-30 Isuzu Motors Ltd 車線逸脱警報装置
JPH08175299A (ja) * 1994-12-26 1996-07-09 Isuzu Motors Ltd 車線逸脱警報装置
JP2005130613A (ja) * 2003-10-23 2005-05-19 Nissan Motor Co Ltd 車両
WO2008107944A1 (ja) * 2007-03-01 2008-09-12 Pioneer Corporation 車線逸脱防止装置、車線逸脱防止方法、車線逸脱防止プログラム及び記憶媒体

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014203122A (ja) * 2013-04-01 2014-10-27 怡利電子工業股▲ふん▼有限公司 運転安全距離表示方法
US10059333B2 (en) 2013-09-11 2018-08-28 Toyota Jidosha Kabushiki Kaisha Driving support device
CN104417536A (zh) * 2013-09-11 2015-03-18 丰田自动车株式会社 驾驶支援装置
JP2015054604A (ja) * 2013-09-11 2015-03-23 トヨタ自動車株式会社 運転支援装置
JP2015191372A (ja) * 2014-03-27 2015-11-02 トヨタ自動車株式会社 走路境界区画線検出装置
JP2016070915A (ja) * 2014-09-30 2016-05-09 富士重工業株式会社 車両の視線誘導装置
JP2017033347A (ja) * 2015-08-03 2017-02-09 トヨタ自動車株式会社 表示装置
JP2018045273A (ja) * 2016-09-12 2018-03-22 本田技研工業株式会社 表示装置
JP2018103862A (ja) * 2016-12-27 2018-07-05 トヨタ自動車株式会社 運転支援装置
US10494022B2 (en) 2016-12-27 2019-12-03 Toyota Jidosha Kabushiki Kaisha Driving assistance device
JP2020042612A (ja) * 2018-09-12 2020-03-19 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
JP7086798B2 (ja) 2018-09-12 2022-06-20 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
WO2020116205A1 (ja) * 2018-12-07 2020-06-11 ソニーセミコンダクタソリューションズ株式会社 情報処理装置、および情報処理方法、並びにプログラム

Also Published As

Publication number Publication date
CN103052976A (zh) 2013-04-17
KR20130016721A (ko) 2013-02-18
JP5316713B2 (ja) 2013-10-16
JPWO2012169029A1 (ja) 2015-02-23
KR101328363B1 (ko) 2013-11-11
US8896687B2 (en) 2014-11-25
CN103052976B (zh) 2016-05-11
DE112011100180B4 (de) 2022-05-25
DE112011100180T5 (de) 2013-03-28
US20120314055A1 (en) 2012-12-13

Similar Documents

Publication Publication Date Title
JP5316713B2 (ja) 車線逸脱防止支援装置、車線逸脱防止方法、記憶媒体
JP6259482B2 (ja) 車両用表示制御装置
JP6272375B2 (ja) 車両用表示制御装置
EP3367366B1 (en) Display control method and display control device
US10293690B2 (en) Vehicle information projecting system and vehicle information projecting method
JP5169884B2 (ja) ヘッドアップディスプレイ装置
US10131276B2 (en) Vehicle sightline guidance apparatus
CN108883777B (zh) 驾驶辅助系统和显示装置
US9299260B2 (en) Image display device, and image display method
JP6307895B2 (ja) 車両用周辺監視装置
KR102000929B1 (ko) 차량을 위한 미러 대체 시스템
US9296336B2 (en) Image display device and image display method
US20050125121A1 (en) Vehicle driving assisting apparatus
JP4943367B2 (ja) 車両用情報表示装置
JP4885793B2 (ja) 障害物監視装置
JP2012527681A (ja) 車両周辺映像を用いた車線離脱感知方法および装置
EP2687408B1 (en) Vehicle periphery monitoring device
JP2008222153A (ja) 合流支援装置
JP2009265842A (ja) 車両用警告装置、警告方法
JP2010143411A (ja) ヘッドアップディスプレイ装置
US11749105B2 (en) Vehicular communication system with turn signal identification
JP4193740B2 (ja) ノーズビューモニタ装置
JP3606223B2 (ja) 車両側方映像生成方法及び車両側方映像生成装置
JP5192009B2 (ja) 車両の周辺監視装置
JP2007022134A (ja) 車両用車線維持支援装置

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180037850.3

Country of ref document: CN

ENP Entry into the national phase

Ref document number: 2012521821

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 20127017034

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 112011100180

Country of ref document: DE

Ref document number: 1120111001800

Country of ref document: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11867155

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 11867155

Country of ref document: EP

Kind code of ref document: A1