WO2014103141A1 - 撮影装置、近赤外光照射装置、およびサンバイザー - Google Patents

撮影装置、近赤外光照射装置、およびサンバイザー Download PDF

Info

Publication number
WO2014103141A1
WO2014103141A1 PCT/JP2013/006744 JP2013006744W WO2014103141A1 WO 2014103141 A1 WO2014103141 A1 WO 2014103141A1 JP 2013006744 W JP2013006744 W JP 2013006744W WO 2014103141 A1 WO2014103141 A1 WO 2014103141A1
Authority
WO
WIPO (PCT)
Prior art keywords
sun visor
driver
infrared light
face
unit
Prior art date
Application number
PCT/JP2013/006744
Other languages
English (en)
French (fr)
Inventor
大見 拓寛
Original Assignee
株式会社デンソー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社デンソー filed Critical 株式会社デンソー
Priority to DE112013006200.3T priority Critical patent/DE112013006200B4/de
Priority to US14/648,012 priority patent/US10095914B2/en
Publication of WO2014103141A1 publication Critical patent/WO2014103141A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J3/00Antiglare equipment associated with windows or windscreens; Sun visors for vehicles
    • B60J3/007Sunglare reduction by coatings, interposed foils in laminar windows, or permanent screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J3/00Antiglare equipment associated with windows or windscreens; Sun visors for vehicles
    • B60J3/02Antiglare equipment associated with windows or windscreens; Sun visors for vehicles adjustable in position
    • B60J3/0204Sun visors
    • B60J3/0213Sun visors characterised by the mounting means
    • B60J3/0234Mounted slidably
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q3/00Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
    • B60Q3/20Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors for lighting specific fittings of passenger or driving compartments; mounted on specific fittings of passenger or driving compartments
    • B60Q3/252Sun visors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q3/00Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
    • B60Q3/70Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors characterised by the purpose
    • B60Q3/76Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors characterised by the purpose for spotlighting, e.g. reading lamps
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103Detecting eye twinkling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60JWINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J3/00Antiglare equipment associated with windows or windscreens; Sun visors for vehicles
    • B60J3/02Antiglare equipment associated with windows or windscreens; Sun visors for vehicles adjustable in position
    • B60J3/0204Sun visors
    • B60J3/0278Sun visors structure of the body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0005Dashboard

Definitions

  • the present disclosure relates to an imaging device that captures an image of a driver's face using near infrared light, a near infrared light irradiation device, and a sun visor.
  • a technology has been proposed that detects the driver's arousal level or side-by-side driving by analyzing the driver's face image taken using near-infrared light and uses it for driving assistance.
  • the conditions under which the driver's face is illuminated change depending on the weather and time of day.
  • a first irradiation unit is provided near a camera that captures an image of a face and near infrared light is irradiated obliquely upward toward the driver's face.
  • the first irradiation unit can always irradiate near-infrared light under the same conditions, so that the driver's face is illuminated under relatively similar conditions regardless of the weather or time zone. Is possible.
  • the first irradiating unit illuminates the face from the lower side, the upper part of the face tends to be insufficient in light amount only by the first irradiating unit.
  • the image is irradiated from one direction, the captured image can easily be shaded.
  • Patent Document 1 a technique has been proposed in which a second irradiating unit is incorporated into a sun visor so as to irradiate near infrared light toward the face from above the driver.
  • the second irradiating part that irradiates near-infrared light is incorporated in the sun visor, not only the structure of the sun visor is complicated, but also a harness for power distribution to the second irradiating part of the sun visor is required. Furthermore, there is a problem that man-hours for assembling the harness also occur.
  • This disclosure is intended to provide a technique capable of taking an image of a driver's face by irradiating near-infrared light under a simple and stable condition.
  • An imaging device is an imaging device that is mounted on a vehicle and captures an image of a driver of the vehicle, and includes a face imaging unit, a first irradiation unit, a sun visor, and a second.
  • An irradiation unit is disposed in front of the driver's seat of the vehicle and photographs an image of the driver's face from the front of the driver.
  • the first irradiation unit is disposed in front of the driver's seat of the vehicle and irradiates near infrared light toward the face from the front lower side of the driver.
  • the sun visor is mounted in a passenger compartment above the driver's seat and is movable between a light shielding position that blocks sunlight on the face and a storage position that does not block sunlight on the face.
  • the second irradiation unit is provided at a position where the sun visor is covered by the sun visor when the sun visor is at the retracted position, but is not covered when the sun visor is at the light shielding position. Irradiate near infrared light toward the driver's face.
  • a portion that covers the second irradiation unit is formed of a material that shields visible light contained in the sunlight and transmits the near-infrared light. .
  • the photographing device can photograph the face image of the driver under stable conditions without being affected by the weather or time zone.
  • a near infrared light irradiation apparatus is a near infrared light irradiation apparatus that is mounted on a vehicle and irradiates near infrared light toward a face of a driver of the vehicle.
  • 1 irradiation part, a sun visor, and a 2nd irradiation part are provided.
  • the first irradiation unit is disposed in front of the driver's seat of the vehicle and irradiates near infrared light toward the face from the front lower side of the driver.
  • the sun visor is mounted in a passenger compartment above the driver's seat and is movable between a light shielding position that blocks sunlight on the face and a storage position that does not block sunlight on the face.
  • the second irradiation unit is provided at a position where the sun visor is covered by the sun visor when the sun visor is at the retracted position, but is not covered when the sun visor is at the light shielding position. Irradiate near infrared light toward the driver's face.
  • a portion that covers the second irradiation unit is formed of a material that shields visible light contained in the sunlight and transmits the near-infrared light. .
  • the near-infrared light irradiation device can irradiate the face of the driver with near-infrared light under stable conditions without being affected by the weather, time zone, or the like.
  • a sun visor is a sun visor that is attached to a passenger compartment of a vehicle and blocks sunlight from a face of the driver of the vehicle, and includes a main body portion and an attachment portion.
  • the main body is formed of a material that blocks the sunlight.
  • the attachment portion attaches the main body portion to the vehicle interior in a state where the body portion is movable between a light shielding position that blocks sunlight on the face and a storage position that does not block sunlight on the face.
  • the main body is provided with a transmission window made of a material that shields visible light contained in the sunlight and transmits near-infrared light.
  • near infrared light can be emitted from the transmission window through the sun visor toward the driver's face while the sun visor is in the retracted position.
  • FIG. 1 is a diagram illustrating a vehicle equipped with a photographing apparatus according to an embodiment of the present disclosure.
  • FIG. 2 is a perspective view showing the external shape of the photographing unit mounted on the vehicle.
  • FIG. 3A is a diagram showing an auxiliary lighting unit and a sun visor mounted in the passenger compartment above the driver's seat.
  • FIG. 3B is a cross-sectional view of the auxiliary lighting unit.
  • FIG. 4 is a diagram showing the structure of the sun visor.
  • FIG. 5 is a diagram illustrating light transmission characteristics of a transmission window provided in the sun visor.
  • FIG. 6 is a block diagram illustrating a configuration of the photographing apparatus.
  • FIG. 7 is a flowchart showing the driver state monitoring process.
  • FIG. 8 is a diagram illustrating a state in which the near-infrared light irradiation timing is set in synchronization with the exposure timing in the photographing unit.
  • FIG. 9 is a diagram illustrating a state in which near-infrared light is irradiated from the auxiliary lighting unit through the sun visor while the sun visor is in the retracted position.
  • FIG. 10 is a diagram for explaining the reason why the irradiation intensity of near-infrared light from the auxiliary illumination unit can be suppressed in a state where the sun is blocked by the sun visor.
  • FIG. 10 is a diagram for explaining the reason why the irradiation intensity of near-infrared light from the auxiliary illumination unit can be suppressed in a state where the sun is blocked by the sun visor.
  • FIG. 11 is a flowchart showing a driver state monitoring process according to the first modification.
  • FIG. 12 is a diagram illustrating a sun visor according to a second modification.
  • FIG. 13A is a diagram illustrating a state in which the sliding sun visor according to the third modification is in the storage position.
  • FIG. 13B is a diagram illustrating a state where the sliding sun visor is in the light shielding position according to the third modification.
  • FIG. 1 shows a rough configuration of a vehicle 1 equipped with a photographing device 10.
  • the photographing apparatus 10 includes a photographing unit 100 mounted on the dashboard 2 on the back side of the steering column as viewed from the driver, an auxiliary lighting unit 200 assembled in a passenger compartment (for example, a ceiling portion) above the driver, A sun visor 300 mounted in the vehicle interior so as to cover the auxiliary lighting unit 200 and a photographing control unit 150 mounted in the dashboard 2 are provided.
  • a solar radiation sensor 3 is also mounted on the dashboard 2.
  • the imaging unit 100 captures an image of the driver's face at an angle that looks up slightly from the front lower position of the driver (an elevation angle of about 20 to 30 degrees).
  • the sun visor 300 is attached to the ceiling portion of the vehicle interior of the vehicle 1 via a hinge 302, and the driver can block the sunlight by rotating the sun visor 300 at the hinge 302 portion.
  • the sun visor 300 in a state where the sun is not obstructed (in the storage position) is shown by a thick solid line
  • the sun visor 300 in a state where the sun is obstructed (in the light shielding position) is a thin broken line. It is shown in Hereinafter, the state where the sun visor 300 is in the retracted position may be referred to as a “closed state”, and the state where the sun visor 300 is in the light shielding position may be referred to as an “open state”.
  • the solar radiation sensor 3 is mounted on the dashboard 2 at a position where the sunlight hits well, detects the amount of solar radiation, and outputs it to the photographing control unit 150.
  • the photographing control unit 150 is a microcomputer configured by connecting a ROM, a RAM, and the like around a CPU with a bus, and controls an operation in which the photographing unit 100 captures an image of a driver's face. As will be described in detail later, the photographing control unit 150 also controls the operation of illuminating the driver's face using the photographing unit 100 and the auxiliary illumination unit 200 when photographing an image of the driver's face. .
  • the vehicle 1 is also equipped with a monitoring control unit 160 that monitors the state of the driver based on the image of the driver's face.
  • the monitoring control unit 160 is a microcomputer configured by connecting a ROM, a RAM, and the like around a CPU with a bus.
  • the monitoring control unit 160 acquires the driver's face image from the imaging control unit 150, the monitoring control unit 160 monitors the degree of arousal of the driver by detecting the degree of eyelid opening, the blinking frequency, the movement of the line of sight, and the like. .
  • FIG. 2 shows the external shape of the photographing unit 100.
  • a photographing unit 102 is mounted at the center of the photographing unit 100, and a first irradiation unit 104 that irradiates near infrared light is mounted on both the left and right sides of the photographing unit 102.
  • An optical filter made of methacrylic resin (near infrared light transmission filter) (not shown) that does not transmit light having a wavelength in the visible light region but transmits light having a wavelength longer than that in the near infrared region is inside the photographing unit 102.
  • a solid-state image sensor such as a CMOS or a CCD (not shown) is mounted on the back side.
  • the material of the optical filter is not limited to methacrylic resin, but may be other resin such as polycarbonate resin.
  • the first irradiation unit 104 includes a near-infrared light LED (not shown) that irradiates near-infrared light, and a near-infrared light transmission filter (not shown) that emits light from the near-infrared light LED. Passes through the near-infrared light transmission filter and is then radiated from the first irradiation unit 104 to the outside. For this reason, even if there is visible light component light slightly emitted from the near-infrared light LED, most of the light is cut by the near-infrared light transmission filter and cannot be perceived by humans from the first irradiation unit 104. Near-infrared light is emitted toward the driver's face.
  • the photographing unit 102 of the photographing unit 100 corresponds to a face photographing unit.
  • FIG. 3A shows a state in which the auxiliary lighting unit 200 is mounted on the ceiling of the vehicle interior.
  • the auxiliary lighting unit 200 is covered with the sun visor 300 when the sun visor 300 is in the retracted position (closed state) where the sun is not blocked. Therefore, in FIG. 3A, the auxiliary lighting unit 200 is displayed by turning the sun visor 300 to the position where the sun is blocked (light-blocking position) (open state).
  • the auxiliary lighting unit 200 of the present embodiment is roughly in the shape of a horizontally long rectangle, and an illumination unit 202 that emits visible light is provided at the center. For this reason, if a visible light is irradiated from the illumination part 202 by making the sun visor 300 into an open state, a driver
  • the lighting unit 202 of the auxiliary lighting unit 200 is used for the driver to check the contents by checking the documents at hand, or to correct the makeup using a small mirror attached to the sun visor 300 if the driver is a woman. Used.
  • the second irradiation unit 204 that irradiates near infrared light is provided on both the left and right sides of the illumination unit 202. As will be described in detail later, the second irradiation unit 204 emits near-infrared light toward the driver's face from above when the imaging unit 102 of the imaging unit 100 captures an image of the driver's face. Used to do.
  • FIG. 3B shows a rough internal structure by taking a cross section of the auxiliary lighting unit 200.
  • Three large concave portions 208 a and 208 b are formed in a row on the bottom surface of the main body case 208 of the auxiliary lighting unit 200.
  • a visible light LED 212 that emits visible light is disposed in the central recess 208a, and a near infrared light LED 214 that emits near infrared light is disposed in the two recesses 208b on both sides.
  • the entire bottom surface of the main body case 208 is covered with a diffusion plate 210 made of a transparent resin material, whereby the auxiliary lighting unit 200 is formed.
  • the portion that covers the central recess 208 a constitutes the illumination unit 202
  • the portion that covers the recesses 208 b on both sides constitutes the second irradiation unit 204.
  • FIG. 4 shows a rough structure of the sun visor 300 of this embodiment.
  • FIG. 4 shows a state when the sun visor 300 is viewed from the driver's seat side with the sun visor 300 rotated until it becomes vertical (see FIG. 3A).
  • the sun visor 300 has a horizontally long and substantially rectangular main body 304, a hinge 302 attached to the upper corner of the main body 304, and the center of the surface facing the driver when the sun visor 300 is opened. And a small mirror 306 attached thereto.
  • the hinge 302 is attached to the ceiling part in the vehicle interior of the vehicle 1 and supports the main body 304 in a cantilever state.
  • an open / close switch 310 that is turned off when the sun visor 300 is in a closed state and turned on when the sun visor 300 is in an open state is mounted inside the hinge 302.
  • the hinge 302 corresponds to the attachment portion
  • the open / close switch 310 corresponds to the detection portion.
  • the main body 304 of the sun visor 300 is formed of an opaque material that does not transmit visible light or near infrared light.
  • a transmission window 308 is formed on both the left and right sides of the portion of the sun visor 300 where the small mirror 306 is attached by fitting a near infrared light transmission filter made of methacrylic resin that transmits a part of the wavelength of near infrared light. ing.
  • the material of the near-infrared light transmission filter is not limited to methacrylic resin, but may be other resin such as polycarbonate resin.
  • the portion where the small mirror 306 is attached covers the illumination unit 202 of the auxiliary illumination unit 200 and is formed on both sides thereof.
  • the transmitted window 308 thus covered covers the second irradiation unit 204 of the auxiliary lighting unit 200.
  • FIG. 5 illustrates the transmittance of the near-infrared light transmission filter fitted in the transmission window 308.
  • the near-infrared light transmitting filter hardly transmits light in the visible light region, but transmits light of 90% or more for light having a wavelength in the near-infrared light region and wavelengths in the infrared light region. It has the property to make. For this reason, even if the sun visor 300 is in a closed state, if near infrared light is emitted from the second irradiation unit 204 of the auxiliary lighting unit 200, the driver is irradiated with near infrared light through the transmission window 308 of the sun visor 300. can do.
  • FIG. 6 shows a block diagram of the photographing apparatus 10 of the present embodiment.
  • the image capturing unit 102 of the image capturing unit 100 is connected to the image capturing control unit 150 so as to exchange data with each other.
  • the obtained image data is transmitted to the image capturing control unit. 150.
  • the first irradiation unit 104 of the photographing unit 100 and the second irradiation unit 204 of the auxiliary illumination unit 200 receive the drive signal from the photographing control unit 150, the first irradiation unit 104 emits near-infrared light.
  • the photographing control unit 150 is also connected to the open / close switch 310 of the sun visor 300 and the solar radiation sensor 3.
  • the imaging control unit 150 detects the open / closed state of the sun visor 300 based on the output from the open / close switch 310, and detects the brightness of the surroundings of the vehicle 1 and the intensity of sunlight based on the output from the solar radiation sensor 3. Can do.
  • the configuration for irradiating near-infrared light with the imaging apparatus 10 of the present embodiment corresponds to the near-infrared light irradiation apparatus.
  • the imaging control unit 150 and the monitoring control unit 160 are connected so as to exchange data with each other, and the imaging control unit 150 outputs the image data captured by the imaging unit 102 to the monitoring control unit 160.
  • the driver state monitoring process executed by the imaging control unit 150 and the monitoring control unit 160 of the present embodiment will be described with reference to FIG. First, it is determined whether or not the shooting timing of the driver has been reached (S100).
  • the shooting control unit 150 includes a timer (not shown), which captures images of the driver's face at predetermined intervals of about 30 msec.
  • the driver's arousal level is determined based on a plurality of images captured at predetermined intervals. It is detected by analyzing. Therefore, if the predetermined interval has not elapsed since the last shooting, it is determined that the shooting timing has not been reached (S100: NO), and the standby state is entered by repeating the same determination.
  • the amount of solar radiation is detected according to the output from the solar radiation sensor 3 (S102). Based on the detected amount of solar radiation, the irradiation intensity of near-infrared light is set for each of the first irradiation unit 104 of the photographing unit 100 and the second irradiation unit 204 of the auxiliary illumination unit 200 (S104). For example, if the amount of solar radiation detected by the solar radiation sensor 3 is large, it is considered that there is a large amount of near infrared light contained in sunlight.
  • the irradiation intensity of the near infrared light of the first irradiation unit 104 and the second irradiation unit 204 is set as follows. Set lower. On the contrary, if the amount of solar radiation is small, the irradiation intensity of the near infrared light of the 1st irradiation part 104 and the 2nd irradiation part 204 is set high so that the reduction
  • the second irradiation unit 204 of the auxiliary illumination unit 200 is near the driver's face, so that the second irradiation unit is compared with the irradiation intensity of the first irradiation unit 104.
  • the irradiation intensity 204 is set low.
  • the irradiation timing of the near infrared light of the first irradiation unit 104 and the second irradiation unit 204 is set (S106).
  • the timing at which the first irradiation unit 104 and the second irradiation unit 204 irradiate near-infrared light is set in accordance with the exposure timing of a solid-state imaging device (not shown) built in the imaging unit 102.
  • FIG. 8A and 8B show a state in which the irradiation timings of the first irradiation unit 104 and the second irradiation unit 204 are set in accordance with the exposure timing of the photographing unit 102.
  • the photographing unit 102 opens the shutter for a time Te at an interval of a constant period T (about 30 msec) to expose the built-in solid-state imaging device.
  • T a constant period
  • the first irradiation unit 104 and the second irradiation unit 204 of the present embodiment irradiate near-infrared light in pulses in accordance with the exposure timing of the imaging unit 102.
  • the time during which the near-infrared light is actually irradiated can be shortened, so that power consumption in the first irradiation unit 104 and the second irradiation unit 204 can be suppressed.
  • deterioration due to the use of the first irradiation unit 104 and the second irradiation unit 204 can be suppressed.
  • the first irradiating unit 104 and the second irradiating unit 204 are set to start irradiation of near-infrared light at a timing slightly earlier than the photographing unit 102 starts exposure. .
  • the light intensity of the near infrared light is not stable due to the characteristics of the circuit immediately after the start of energization to the LED because there is a margin in case the timing at which the photographing unit 102 starts the exposure deviates for some reason. This is because of the possibility.
  • the irradiation start timing of the second irradiation unit 204 is set slightly earlier than that of the first irradiation unit 104.
  • the wiring from the imaging control unit 150 to the first irradiation unit 104 is longer than the wiring from the imaging control unit 150 to the second irradiation unit 204. This is because the influence of delayed detection is taken into consideration.
  • the timing of the 1st irradiation part 104 and the 2nd irradiation part 204 is determined in consideration of these mounting positions and circuit configuration.
  • the first irradiation unit 104 and the second irradiation unit 204 continue to irradiate near infrared light for a short period after the photographing unit 102 finishes the exposure. This is because a margin is provided in preparation for a case where the exposure end timing of the photographing unit 102 is shifted for some reason.
  • the exposure time Te in the imaging unit 102 is determined by the imaging control unit 150 according to the subject to be imaged and the ambient brightness. Therefore, as shown in FIG. 8B, near infrared light irradiation times T1, T2 in the first irradiation unit 104 and the second irradiation unit 204 are set in accordance with the exposure time Te (S106 in FIG. 7). ).
  • the imaging control unit 150 detects the open / closed state of the sun visor 300 (S108).
  • the opening / closing switch 310 is built in the hinge 302 of the sun visor 300, and the sun visor 300 is opened by the output of the opening / closing switch 310 (the sun visor 300 is in the light shielding position).
  • it can be determined whether it is in the closed state (the state in the storage position).
  • the irradiation intensity of the second irradiation unit 204 previously set in S104 is suppressed (S112).
  • the process of suppressing the irradiation intensity of the second irradiation unit 204 is not performed.
  • the reason why the second irradiation unit 204 suppresses the intensity of the near infrared light irradiation when the sun visor 300 is in the open state will be described later.
  • the imaging control unit 150 executes processing for suppressing the intensity with which the second irradiation unit 204 emits near-infrared light. Therefore, in this embodiment, the imaging control unit 150 corresponds to an irradiation intensity suppression unit.
  • the first irradiation unit 104 and the second irradiation unit 204 When the near-infrared light irradiation timing and irradiation intensity in the first irradiation unit 104 and the second irradiation unit 204 are set as described above (S104 to S112), the first irradiation unit 104 and the second irradiation unit 204 The near-infrared light is irradiated, and then the shutter of the photographing unit 102 is opened to photograph the driver's face image (S114).
  • the captured facial image is sent to the monitoring control unit 160, and the monitoring control unit 160 analyzes the facial image to detect the driver's arousal level (S116). That is, face parts such as eyes, nose and mouth are detected from the face image, and the three-dimensional position of the face and the face orientation are determined. Furthermore, the open / closed state of the eye is detected by analyzing the eye image and detecting the state of the eyelid. Then, the driver's awakening is detected by detecting the frequency at which the driver opens and closes the eye lid, the time during which the eye lid is closed, and the like from the analysis result of the images taken in the past certain period (for example, 30 seconds). Detect the degree.
  • the driver's arousal level S116
  • the monitoring control unit 160 determines whether or not the driver's arousal level has decreased (S118). If the arousal level has decreased (S118: YES), after warning the driver of the decrease in the arousal level by a method such as outputting an alarm sound from a speaker (not shown) mounted on the vehicle 1 (S120), returning to S100, monitoring of the driver is continued. On the other hand, if the arousal level has not decreased (S118: NO), the driver returns to S100 and continues to monitor the driver without warning that the awakening level has decreased.
  • the imaging device 10 of the present embodiment has a simple structure, it can capture an image of the driver's face under stable conditions. Hereinafter, this point will be described.
  • FIG. 9 shows a state in which near-infrared light is irradiated toward the driver's face when the sun visor 300 is in a closed state (state in the retracted position).
  • the first irradiation unit 104 (see FIG. 2) is incorporated in the photographing unit 100, and near infrared light is irradiated obliquely upward toward the driver's face from the first irradiation unit 104.
  • the auxiliary illumination unit 200 provided above the driver incorporates a second irradiation unit 204 (see FIG. 3), and the near infrared light emitted from the second irradiation unit 204 is transmitted to the sun visor 300.
  • the light passes through a transmission window 308 (see FIG. 4) provided on the vehicle and is irradiated toward the driver's face from above.
  • an arrow indicated by a thin alternate long and short dash line irradiates near infrared light toward the driver's face from the first irradiation unit 104 in the photographing unit 100 and the second irradiation unit 204 in the auxiliary lighting unit 200. It shows how it is done.
  • near infrared light can be irradiated obliquely below and above the driver's face, so that the entire face can always be illuminated under stable conditions. As a result, it is possible to take an image of the driver's face under stable conditions without being affected by the weather or time zone.
  • the auxiliary illumination unit 200 includes not only the second irradiation unit 204 that irradiates near infrared light but also the illumination unit 202 that irradiates visible light.
  • the lighting unit 202 is mainly used for a driver to check a map and documents, and for a female driver to correct makeup using the small mirror 306 of the sun visor 300. It is mounted on.
  • the lighting control of the auxiliary lighting unit 200 is normally performed by a driver's switch operation. This is because it is difficult to determine whether the driver is dazzling and has opened the sun visor 300 or wants to see his / her face reflected in the small mirror 306.
  • the 2nd irradiation part 204 of a present Example is mounted in the auxiliary
  • FIG. Therefore, the second irradiation unit 204 can also be assembled with the number of steps for assembling the illumination unit 202 to the vehicle 1. Further, if the harness for supplying power to the illumination unit 202 and the harness for supplying power to the second irradiation unit 204 are integrated, the number of harnesses assembled to the vehicle 1 does not increase. For this reason, although the auxiliary lighting unit 200 provided with the lighting unit 202 is slightly larger or the harness to the lighting unit 202 is slightly thicker, the structure of the vehicle 1 is complicated, or the auxiliary lighting unit 200 is installed in the vehicle. The number of steps to assemble to 1 will not increase.
  • the sun visor 300 is only provided with the transmission window 308 by fitting a plate-like near infrared light transmission filter, the structure of the sun visor 300 can be kept simple.
  • the imaging device 10 of the present embodiment can irradiate the entire face of the driver with near-infrared light under stable conditions without being affected by differences in weather, time zone, and the like. It is. Nevertheless, the structure is simple and the number of assembling steps for the vehicle 1 is not increased.
  • the sun visor 300 is in an open state (light-shielding position) because the sun visor 300 is provided with a transmission window 308 that does not transmit visible light but transmits some wavelengths of near infrared light. ), It is also possible to reduce the power consumption by suppressing the irradiation intensity of the near infrared light from the second irradiation unit 204. This is due to the following reason.
  • the reason why the driver blocks the visible light from the sun with the sun visor 300 in the open state is that the driver feels dazzling and the sun directly illuminates the upper part of the driver's face. Since the sun visor 300 of this embodiment is provided with a transmission window 308 that transmits a part of the wavelength of near infrared light, the driver opens the sun visor 300 to block visible light from the sun. However, some wavelengths of near-infrared light included in the sunlight pass through the transmission window 308 and are irradiated on the driver's upper face.
  • the thick dashed-dotted arrow shown in FIG. 10 shows that the light of a part of the near-infrared light included in the sunlight is transmitted through the transmission window 308 of the sun visor 300 and illuminates the upper part of the driver's face. Represents.
  • the near-infrared light transmitted through the transmission window 308 also has a sufficient amount of light. For this reason, even if the irradiation intensity of the near infrared light from the second irradiation unit 204 of the auxiliary lighting unit 200 is suppressed (or the irradiation is stopped), the entire face of the driver can be illuminated with the near infrared light.
  • Near-infrared light passes through the transmission window 308 of the sun visor 300 and is applied to the upper part of the driver's face, but most visible light does not pass through the transmission window 308, so the driver does not feel dazzling. .
  • FIG. 11 shows a flowchart of the driver state monitoring process according to the first modification.
  • this process considers not only whether or not the sun visor 300 is in an open state but also an elapsed time since the sun visor 300 is in an open state. The point is very different. Briefly described below, first, it is determined whether or not it is a driver's shooting timing (S200). If it is a shooting timing (S200: YES), the amount of solar radiation is detected (S202).
  • S200 driver's shooting timing
  • the irradiation intensity and irradiation timing of the near-infrared light in the 1st irradiation part 104 and the 2nd irradiation part 204 are set (S204, S206).
  • the open / closed state of the sun visor 300 is detected (S208), and it is determined whether or not the sun visor 300 is in the open state (S210).
  • the driver irradiates near infrared light from the first irradiation unit 104 and the second irradiation unit 204 with the irradiation intensity set in S204.
  • An image of the face is taken (S216).
  • the sun visor 300 when the sun visor 300 is in the open state (S210: YES), in the first modification, it is determined whether or not a predetermined time has elapsed since the sun visor 300 was in the open state ( S212).
  • This predetermined time is the time required for the driver to look into the small mirror 306 of the sun visor 300 or to insert a card or a receipt into the sun visor 300 (typically 5 to 10 seconds). Degree).
  • the driver temporarily stops the sun visor 300 for some reason. Is not in the open state, but is considered to be in the open state in order to block the visible light from the sunlight, so that the illumination intensity of the near infrared light from the second irradiation unit 204 is suppressed (S214). In addition, you may suppress irradiation intensity
  • the driver may temporarily open the sun visor 300 for some reason. The illumination intensity of the second irradiation unit 204 remains set in S204.
  • the near-infrared light from the second irradiating unit 204 is opened even if the sun visor 300 is opened for a short time for the purpose other than the sun blocking the sun. Irradiation intensity is not suppressed. For this reason, since the irradiation intensity of the near-infrared light to the upper part of the driver's face does not become insufficient, it is possible to detect a driver's arousal level by photographing a good face image. Of course, even if the driver opens the sun visor 300 in order to block the sunlight, the irradiation intensity of the second irradiation unit 204 is maintained until a predetermined time elapses. However, even in such a case, there is no change in that sufficient near-infrared light is applied to the upper part of the driver's face. Therefore, the driver's arousal level can be detected by analyzing the obtained facial image.
  • the transmission window 308 is formed by fitting a plate-like near-infrared light transmission filter into the main body 304 of the sun visor 300.
  • the main body of the sun visor may be formed by a near infrared light transmission filter.
  • FIG. 12 illustrates a sun visor 400 of such a second modification.
  • the main body 404 of the sun visor 400 is formed of a near infrared light transmission filter such as a methacrylic resin.
  • the sun visor 400 can be rotated at the hinge 402, and a small mirror 406 made of a cold mirror is provided at the center of the surface facing the driver when the sun visor 400 is rotated to the open state. Is formed.
  • the “cold mirror” is an optical thin film formed by vapor-depositing a dielectric multilayer film, and has a characteristic of transmitting infrared light but reflecting visible light.
  • the sun visor 400 of the second modified example when the sun visor 400 is opened to block sunlight, a part of the wavelength of the near infrared light is transmitted from a wide range of the sun visor 400.
  • the upper part of the face can be illuminated with a sufficient amount of near infrared light.
  • it is possible to shoot a good facial image by irradiating the entire face with near infrared light together with the near infrared light from the first irradiation unit 104 of the photographing unit 100.
  • the small mirror 406 is formed by a cold mirror, so that makeup confirmation or makeup can be performed.
  • the sun visors 300 and 400 have been described as switching between the open state (light-shielding position) and the closed state (storage position) by rotating the main body portions 304 and 404.
  • a sun visor of a type that switches between the open state (light-shielding position) and the closed state (storage position) by sliding the main body portions 304 and 404 instead of rotating them can also be used.
  • FIG. 13A and FIG. 13B illustrate a third modification using such a sliding sun visor 500.
  • a transmission window 508 using a near-infrared light transmission filter is provided at a location facing the second irradiation unit 204 (see FIG. 3) of the auxiliary lighting unit 200. Keep it.
  • the near-infrared light from the second irradiating unit 204 (see FIG. 3) of the auxiliary lighting unit 200 is used, and the face of the driver The top can be illuminated.
  • the entire face of the driver can be illuminated with near-infrared light together with the near-infrared light from the first irradiation unit 104 (see FIG. 2) of the photographing unit 100, and a good facial image is taken. It becomes possible to do.
  • the driver puts the sun visor 500 in the light-shielding position so as to block the sunlight
  • light of a part of the near infrared light included in the sunlight is transmitted through the transmission window 508, so that the light is transmitted.
  • the driver's upper face is illuminated by the near infrared light.
  • the thick dashed-dotted arrow shown in the figure represents a state in which light of a part of near infrared light included in the sunlight illuminates the upper part of the driver's face.
  • the driver's entire face can be illuminated with near-infrared light together with near-infrared light from the first irradiation unit 104 (see FIG. 2) of the photographing unit 100, and a good facial image is taken. It becomes possible to do.

Abstract

 撮影装置は、運転者の顔面に向けて、前方下側から近赤外光を照射する第1照射部(104)と、上方から近赤外光を照射する第2照射部(204)を備える。第2照射部は、サンバイザー(300、400、500)が日差しを遮らない格納位置にある時には、サンバイザーによって覆われた状態となる位置に設ける。そして、格納位置にあるサンバイザーが第2照射部を覆う部分については、日差しからの可視光を遮蔽し、且つ近赤外光を透過させる材質によって形成する。

Description

撮影装置、近赤外光照射装置、およびサンバイザー 関連出願の相互参照
 本開示は、2012年12月24日に出願された日本出願番号2012-280414号に基づくもので、ここにその記載内容を援用する。
 本開示は、近赤外光を用いて運転者の顔面の画像を撮影する撮影装置、近赤外光照射装置、およびサンバイザーに関する。
 近赤外光を用いて撮影した運転者の顔面の画像を解析することによって運転者の覚醒度合いや脇見運転などを検出し、運転支援に活用する技術が提案されている。覚醒度合いや脇見運転などを精度良く検出するためには、運転者の顔面の画像を安定した条件で撮影することが望ましい。しかし、太陽光に含まれる近赤外光に頼って撮影したのでは、天候や時間帯などによって、運転者の顔面が照らされる条件が変化する。
 そこで、顔面の画像を撮影するカメラの近くに第1照射部を設けて、運転者の顔面に向けて斜め上方に近赤外光を照射することが広く行われている。こうすれば、第1照射部からは常に同じ条件で近赤外光を照射することができるので、天候や時間帯などに因らず、比較的同じような条件で運転者の顔面を照らすことが可能となる。しかしながら、第1照射部は顔面を下側から照らすので、第1照射部だけでは顔面上部が光量不足となり易い。更に、一方向から照射したのでは撮影した画像に陰もでき易い。そこで、サンバイザーに第2照射部を組み込んで、運転者の上方からも顔面に向けて近赤外光を照射する技術も提案されている(特許文献1)。
 しかし、近赤外光を照射する第2照射部をサンバイザーに組み込んだのでは、サンバイザーの構造が複雑となるだけでなく、サンバイザーの第2照射部に配電するためのハーネスも必要となり、更にハーネスを組み付ける工数も発生するという問題があった。
特開2005-271876号公報
 本開示は、簡単に且つ安定した条件で近赤外光を照射して、運転者の顔面の画像を撮影することが可能な技術の提供を目的とする。
 本開示の一態様に係る撮影装置は、車両に搭載されて、前記車両の運転者の画像を撮影する撮影装置であって、顔面撮影部と、第1照射部と、サンバイザーと、第2照射部とを備える。前記顔面撮影部は、前記車両の運転席の前方に配置され、前記運転者の前方から前記運転者の顔面の画像を撮影する。前記第1照射部は、前記車両の運転席の前方に配置され、前記運転者の前方下側から前記顔面に向けて近赤外光を照射する。前記サンバイザーは、前記運転席の上方の車室内に取り付けられて、前記顔面への日差しを遮る遮光位置と、前記顔面への日差しを遮らない格納位置との間で移動可能である。前記第2照射部は、前記サンバイザーが前記格納位置にある時には前記サンバイザーによって覆われた状態となるが、前記サンバイザーが前記遮光位置にある時には覆われない状態となる位置に設けられて、前記運転者の顔面に向けて近赤外光を照射する。前記サンバイザーは、前記サンバイザーが前記格納位置にある時に前記第2照射部を覆う部分が、前記日差しに含まれる可視光を遮蔽し且つ前記近赤外光を透過させる材質によって形成されている。
 前記撮影装置は、天候や時間帯などの影響を受けることなく安定した条件で、前記運転者の前記顔面の画像を撮影することができる。
 本開示の別の態様に係る近赤外光照射装置は、車両に搭載されて、前記車両の運転者の顔面に向けて近赤外光を照射する近赤外光照射装置であって、第1照射部と、サンバイザーと、第2照射部とを備える。前記第1照射部は、前記車両の運転席の前方に配置され、前記運転者の前方下側から前記顔面に向けて近赤外光を照射する。前記サンバイザーは、前記運転席の上方の車室内に取り付けられて、前記顔面への日差しを遮る遮光位置と、前記顔面への日差しを遮らない格納位置との間で移動可能である。前記第2照射部は、前記サンバイザーが前記格納位置にある時には前記サンバイザーによって覆われた状態となるが、前記サンバイザーが前記遮光位置にある時には覆われない状態となる位置に設けられて、前記運転者の顔面に向けて近赤外光を照射する。前記サンバイザーは、前記サンバイザーが前記格納位置にある時に前記第2照射部を覆う部分が、前記日差しに含まれる可視光を遮蔽し且つ前記近赤外光を透過させる材質によって形成されている。
 前記近赤外光照射装置は、天候や時間帯などの影響を受けることなく安定した条件で、前記運転者の前記顔面に近赤外光を照射することができる。
 本開示の別の態様に係るサンバイザーは、車両の車室内に取り付けられて、前記車両の運転者の顔面への日差しを遮るサンバイザーであって、本体部と取付部とを備える。前記本体部は、前記日差しを遮る材質で形成される。前記取付部は、前記本体部を、前記顔面への日差しを遮る遮光位置と前記顔面への日差しを遮らない格納位置との間で移動可能な状態で、前記車室内に取り付ける。前記本体部には、前記日差しに含まれる可視光を遮蔽し且つ近赤外光を透過させる材質で形成された透過窓が設けられている。
 こうすれば、前記サンバイザーが格納位置にある状態で、前記運転者の前記顔面に向けて、前記透過窓から前記サンバイザー越しに近赤外光を照射することができる。
 本開示における上記あるいは他の目的、構成、利点は、下記の図面を参照しながら、以下の詳細説明から、より明白となる。図面において、
図1は、本開示の一実施例に係る撮影装置を搭載した車両を示す図である。 図2は、車両に搭載された撮影ユニットの外観形状を示す斜視図である。 図3Aは、運転席上方の車室内に搭載された補助照明ユニットおよびサンバイザーを示す図である。 図3Bは、補助照明ユニットの断面図である。 図4は、サンバイザーの構造を示す図である。 図5は、サンバイザーに設けられた透過窓の光透過特性を例示した図である。 図6は、撮影装置の構成を示すブロック図である。 図7は、運転者状態監視処理を示すフローチャートである。 図8は、撮影ユニットでの露光タイミングに同期させて近赤外光の照射タイミングを設定する様子を示す図である。 図9は、サンバイザーが格納位置にある状態で補助照明ユニットからサンバイザー越しに近赤外光を照射する様子を示す図である。 図10は、サンバイザーで日差しを遮っている状態では補助照明ユニットからの近赤外光の照射強度を抑制可能な理由について説明する図である。 図11は、第1変形例に係る運転者状態監視処理を示すフローチャートである。 図12は、第2変形例に係るサンバイザーを示す図である。 図13Aは、第3変形例に係るスライド式のサンバイザーが格納位置にある状態を示す図である。 図13Bは、第3変形例に係るスライド式のサンバイザー遮光位置にある状態を示す図である。
 本開示の一実施例に係る撮影装置10について、図1を参照して説明する。図1には、撮影装置10を搭載した車両1の大まかな構成が示されている。撮影装置10は、運転者から見てステアリングコラムの奥側のダッシュボード2に搭載された撮影ユニット100と、運転者の上方の車室内(たとえば天井部分)に組み付けられた補助照明ユニット200と、補助照明ユニット200を覆うようにして車室内に取り付けられたサンバイザー300と、ダッシュボード2内に搭載された撮影制御部150とを備えている。また、ダッシュボード2の上には、日射センサー3も搭載されている。
 このうち、撮影ユニット100は、運転者の前方下側の位置から少し見上げるような角度(仰角にして20度~30度程度)で運転者の顔面の画像を撮影する。サンバイザー300は、車両1の車室内の天井部分にヒンジ302を介して取り付けられており、運転者はヒンジ302の部分でサンバイザー300を回転させることによって、日差しを遮ることができる。図1では、日差しを遮っていない状態(格納位置にある状態)のサンバイザー300が太い実線で示されており、日差しを遮っている状態(遮光位置にある状態)のサンバイザー300が細い破線で示されている。尚、以下では、サンバイザー300が格納位置にある状態を「閉状態」と称し、遮光位置にある状態を「開状態」と称することがある。
 補助照明ユニット200は、サンバイザー300が格納位置(閉状態)にある場合には、全体がサンバイザー300で覆われた状態となっており、運転者からは見えないが、サンバイザー300を回転させて遮光位置に移動させる(開状態にする)と、覆われていた補助照明ユニット200が現れて、運転者に対して可視光を照射可能となる。日射センサー3は、ダッシュボード2上で太陽光が良くあたる位置に搭載されており、日射量を検出して撮影制御部150に出力する。撮影制御部150は、CPUを中心としてROMやRAMなどをバスで接続して構成されたマイクロコンピューターであり、撮影ユニット100が運転者の顔面の画像を撮影する動作を制御する。また、詳細には後述するが、撮影制御部150は、運転者の顔面の画像を撮影するに際して、撮影ユニット100や補助照明ユニット200を用いて運転者の顔面を照明する動作も制御している。
 また、図1に示されるように、本実施例の車両1には、運転者の顔面の画像に基づいて運転者の状態を監視する監視制御部160も搭載されている。監視制御部160は、CPUを中心としてROMやRAMなどをバスで接続して構成されたマイクロコンピューターである。監視制御部160は、撮影制御部150から運転者の顔面の画像を取得すると、目蓋の開き具合や、瞬きする頻度、視線の動きなどを検出することによって、運転者の覚醒度合いを監視する。
 図2には、撮影ユニット100の外観形状が示されている。撮影ユニット100の中央には撮影部102が搭載されており、撮影部102の左右両側には近赤外光を照射する第1照射部104が搭載されている。撮影部102の内部には、可視光領域の波長の光は透過させないが、近赤外領域よりも長い波長の光は透過させる図示しないメタクリル樹脂製の光学フィルター(近赤外光透過フィルター)が内蔵されており、その奥側に、図示しないCMOSやCCDなどの固体撮像素子が搭載されている。このため、固体撮像素子には近赤外光が届くことになるので、撮影部102では専ら近赤外光による画像が撮影される。尚、光学フィルターの材質は、メタクリル樹脂製に限らず、ポリカーボネート樹脂など、他の樹脂としてもよい。
 また、第1照射部104の内部には、近赤外光を照射する図示しない近赤外光LED、および図示しない近赤外光透過フィルターが搭載されており、近赤外光LEDからの光は近赤外光透過フィルターを通過した後、第1照射部104から外部に放射される。このため、近赤外光LEDから僅かに放射される可視光成分の光があっても、近赤外光透過フィルターによってその多くはカットされ、第1照射部104からは、人間には感知できない近赤外光が運転者の顔面に向けて照射される。尚、本実施例では、撮影ユニット100の撮影部102が、顔面撮影部に対応する。
 図3Aには、車室内の天井部分に補助照明ユニット200が搭載されている様子が示されている。尚、前述したようにサンバイザー300が日差しを遮らない格納位置(閉状態)にあると補助照明ユニット200がサンバイザー300に覆われてしまう。そのため、図3Aでは、日差しを遮る位置(遮光位置)までサンバイザー300を回転させた状態(開状態)とすることによって、補助照明ユニット200を表示している。
 図3Aに示したように、本実施例の補助照明ユニット200は、大まかには横長の矩形形状をしており、中央部分には可視光を照射する照明部202が設けられている。このため、サンバイザー300を開状態として照明部202から可視光を照射すれば、運転者の顔面や手元を明るく照らすことができる。補助照明ユニット200の照明部202は、運転者が手元の書類を照らして内容を確認したり、あるいは女性であれば、サンバイザー300に取り付けられた小鏡を使って化粧を直したりするために用いられる。また、本実施例の補助照明ユニット200では、照明部202の左右両側に、近赤外光を照射する第2照射部204が設けられている。詳細には後述するが、この第2照射部204は、撮影ユニット100の撮影部102で運転者の顔面の画像を撮影する際に、運転者の顔面に向かって上方から近赤外光を照射するために用いられる。
 図3Bには、補助照明ユニット200の断面を取ることによって大まかな内部構造が示されている。補助照明ユニット200の本体ケース208の底面には、3つの大きな凹部208a,208bが一列に形成されている。中央の凹部208aには、可視光を放射する可視光LED212が配置されており、両側の2つの凹部208bには、近赤外光を放射する近赤外光LED214が配置されている。そして、本体ケース208の底面の全体が、透明な樹脂材料による拡散板210で覆われることによって、補助照明ユニット200が形成されている。本体ケース208の底面を覆う拡散板210のうち、中央の凹部208aを覆っている部分が照明部202を構成し、両側の凹部208bを覆っている部分が第2照射部204を構成している。
 図4には、本実施例のサンバイザー300の大まかな構造が示されている。尚、図4では、垂直になるまでサンバイザー300を回転させた状態で(図3A参照)、運転席側からサンバイザー300を見た時の状態が示されている。サンバイザー300は、横長の略矩形形状の本体部304と、本体部304の上側の角に取り付けられたヒンジ302と、サンバイザー300を開状態とした時に運転者と向き合う側の面の中央に取り付けられた小鏡306とを備えている。このうち、ヒンジ302は車両1の車室内の天井部分に取り付けられて、片持ち状態で本体部304を支えている。また、ヒンジ302の内部には、サンバイザー300が閉状態になるとOFFとなり、開状態になるとONとなる開閉スイッチ310が搭載されている。尚、本実施例では、ヒンジ302が取付部に対応し、開閉スイッチ310が検出部に対応する。
 サンバイザー300の本体部304は可視光も近赤外光も透過しない不透明な材質で形成されている。サンバイザー300の小鏡306が取り付けられた箇所の左右両側には、近赤外光の一部波長を透過させるメタクリル樹脂製の近赤外光透過フィルターが嵌め込まれることによって透過窓308が形成されている。尚、近赤外光透過フィルターの材質は、メタクリル樹脂製に限らず、ポリカーボネート樹脂など、他の樹脂としてもよい。サンバイザー300を、図3Aに示すような「開状態」から回転させて「閉状態」にすると、小鏡306を取り付けた部分は、補助照明ユニット200の照明部202を覆い、その両側に形成された透過窓308は補助照明ユニット200の第2照射部204を覆った状態となる。
 図5には、透過窓308に嵌め込まれた近赤外光透過フィルターの透過率が例示されている。図示されるように近赤外光透過フィルターは、可視光領域の光はほとんど透過させないが、近赤外光領域の一部波長および赤外光領域の波長の光は90%以上の光を透過させる性質を有している。このため、サンバイザー300を閉状態としていても、補助照明ユニット200の第2照射部204から近赤外光を放射すれば、サンバイザー300の透過窓308を通して運転者に近赤外光を照射することができる。
 図6には、本実施例の撮影装置10のブロック図が示されている。撮影ユニット100の撮影部102は、撮影制御部150と互いにデータをやり取り可能に接続されており、撮影制御部150からの制御信号に基づいて画像を撮影すると、得られた画像データを撮影制御部150に出力する。撮影ユニット100の第1照射部104、および補助照明ユニット200の第2照射部204は、撮影制御部150からの駆動信号を受け取ると、近赤外光を照射する。撮影制御部150には、サンバイザー300の開閉スイッチ310や、日射センサー3も接続されている。撮影制御部150は、開閉スイッチ310からの出力に基づいてサンバイザー300の開閉状態を検出し、また日射センサー3からの出力に基づいて車両1の周囲の明るさや日差しの強さを検出することができる。尚、本実施例の撮影装置10で近赤外光を照射するための構成(すなわち、撮影ユニット100の撮影部102を除いた構成)が、近赤外光照射装置に対応する。
 また、撮影制御部150と監視制御部160とは互いにデータをやり取り可能に接続されており、撮影制御部150は、撮影部102で撮影した画像データを監視制御部160に出力する。
 本実施例の撮影制御部150および監視制御部160が実行する運転者状態監視処理について、図7を参照して説明する。先ず始めに、運転者の撮影タイミングに達したか否かを判断する(S100)。撮影制御部150には図示しないタイマーが内蔵されており、約30msecの所定間隔で運転者の顔面の画像を撮影しており、運転者の覚醒度は、所定間隔で撮影された複数の画像を解析することによって検出される。従って、前回に撮影してから所定間隔が経過していない場合は、撮影タイミングに達していないと判断して(S100:NO)、同様な判断を繰り返すことによって待機状態となる。
 撮影タイミングに達したと判断したら(S100:YES)、日射センサー3からの出力に従って日射量を検出する(S102)。そして、検出した日射量に基づいて、撮影ユニット100の第1照射部104および補助照明ユニット200の第2照射部204のそれぞれについて、近赤外光の照射強度を設定する(S104)。たとえば、日射センサー3で検出した日射量が大きければ、太陽光に含まれる近赤外光の多いと考えられるので、第1照射部104および第2照射部204の近赤外光の照射強度を低めに設定する。逆に日射量が小さければ、太陽光に含まれる近赤外光の減少を補うべく、第1照射部104および第2照射部204の近赤外光の照射強度を高めに設定する。こうすれば、車両1の周囲の明るさとは無関係に、同じような強さの近赤外光で運転者を照らすことができる。撮影ユニット100の第1照射部104に比べて、補助照明ユニット200の第2照射部204は運転者の顔面の近くにあるので、第1照射部104の照射強度に比べて、第2照射部204の照射強度は低めに設定されている。
 次に、第1照射部104および第2照射部204の近赤外光の照射タイミングを設定する(S106)。この処理では、撮影部102に内蔵された図示しない固体撮像素子の露光タイミングに合わせて、第1照射部104および第2照射部204が近赤外光を照射するタイミングを設定する。
 図8Aおよび図8Bには、撮影部102の露光タイミングに合わせて、第1照射部104および第2照射部204の照射タイミングを設定する様子が示されている。図8Aに示されるように撮影部102は、一定周期T(約30msec)の間隔で時間Teの間だけシャッターを開いて、内蔵している固体撮像素子を露光する。逆に言えば、シャッターを閉じている間は固体撮像素子には光は届かないので、撮影ユニット100の第1照射部104や補助照明ユニット200の第2照射部204から近赤外光を照射する必要はない。そこで本実施例の第1照射部104および第2照射部204は、図8Bに示されるように、撮影部102が露光するタイミングに合わせてパルス状に近赤外光を照射する。こうすれば、実際に近赤外光を照射している時間を短くすることができるので、第1照射部104および第2照射部204での電力消費を抑制することが可能である。更に、第1照射部104および第2照射部204の使用による劣化も抑制することができる。
 尚、本実施例では、撮影部102が露光を開始するよりも少しだけ早いタイミングで、第1照射部104および第2照射部204が近赤外光の照射を開始するように設定されている。これは、撮影部102が露光を開始するタイミングが何らかの理由でずれた場合に備えて余裕を持たせたためと、LEDへの通電開始直後は回路の特性上、近赤外光の光量が安定しない可能性を考慮したためである。また、第1照射部104よりも第2照射部204の方が照射開始のタイミングが少しだけ早く設定されている。これは、撮影制御部150から第1照射部104への配線よりも、第2照射部204への配線の方が長くなるので、この影響による信号の伝達遅れや、信号波形のなまりによって信号の検出が遅れる影響を考慮したためである。このように、第1照射部104および第2照射部204のタイミングは、これらの搭載位置や回路構成を考慮して決定される。更に、本実施例では、撮影部102が露光を終了した後も少しの期間だけ、第1照射部104および第2照射部204が近赤外光の照射を継続している。これは、撮影部102の露光終了のタイミングが何らかの理由でずれた場合に備えて余裕を持たせたためである。
 また、撮影部102での露光時間Teは撮影しようとする対象や周囲の明るさによって撮影制御部150が決定している。そこで、図8Bに示すように、この露光時間Teに合わせて、第1照射部104および第2照射部204のそれぞれでの近赤外光の照射時間T1,T2を設定する(図7のS106)。
 続いて、撮影制御部150は、サンバイザー300の開閉状態を検出する(S108)。図4を用いて前述したようにサンバイザー300のヒンジ302には開閉スイッチ310が内蔵されており、開閉スイッチ310の出力によって、サンバイザー300が開状態(サンバイザー300が遮光位置にある状態)または閉状態(格納位置にある状態)の何れであるかを判断することができる。サンバイザー300が開状態であると判断した場合は(S110:YES)、先にS104で設定しておいた第2照射部204の照射強度を抑制する(S112)。尚、照射を行わないことによって、照射強度を抑制することとしても良い。
 これに対して、サンバイザー300が開状態ではないと判断した場合は(S110:NO)、第2照射部204の照射強度を抑制する処理は行わない。サンバイザー300が開状態の場合に、第2照射部204が近赤外光を照射する強度を抑制する理由については後述する。尚、サンバイザー300が開状態の場合に、第2照射部204が近赤外光を照射する強度を抑制する処理は、撮影制御部150が実行する。従って本実施例では、撮影制御部150が、照射強度抑制部に対応する。
 以上のようにして、第1照射部104および第2照射部204での近赤外光の照射タイミングおよび照射強度を設定したら(S104~S112)、第1照射部104および第2照射部204から近赤外光を照射し、続いて撮影部102のシャッターを開いて運転者の顔面の画像を撮影する(S114)。
 そして、撮影した顔面の画像は監視制御部160に送られて、監視制御部160が顔面の画像を解析することによって運転者の覚醒度が検出される(S116)。すなわち、顔面の画像の中から、目、鼻、口などの顔部品を検出し、顔の3次元的な位置や、顔の向きを決定する。更に、目の画像を分析して、瞼の状態を検出することにより、目の開閉状態を検出する。そして、過去の一定期間(たとえば30秒間)に撮影した画像についての解析結果から、運転者が目蓋を開閉する頻度や、目蓋を閉じている時間などを検出することによって、運転者の覚醒度を検出する。その後、監視制御部160は運転者の覚醒度が低下したか否かを判断する(S118)。そして、覚醒度が低下していた場合は(S118:YES)、車両1に搭載された図示しないスピーカーから警報音を出力するなどの方法により、覚醒度の低下を運転者に対して警告した後(S120)、S100に戻って運転者の監視を継続する。これに対して、覚醒度が低下していない場合は(S118:NO)、覚醒度の低下を警告することなく、そのままS100に戻って運転者の監視を継続する。
 以上のような運転者状態監視処理で運転者の覚醒度を精度良く監視するためには、天候や時間帯などの違いに拘わらず、運転者の顔面を安定した条件で撮影可能なことが重要となる。本実施例の撮影装置10は、簡単な構造でありながら、安定した条件で運転者の顔面の画像を撮影することが可能である。以下、この点について説明する。
 図9には、サンバイザー300が閉状態(格納位置にある状態)の時に、運転者の顔面に向かって近赤外光が照射される様子が示されている。前述したように撮影ユニット100には第1照射部104(図2参照)が組み込まれており、第1照射部104からは運転者の顔面に向けて斜め上方に近赤外光が照射される。また、運転者の上方に設けられた補助照明ユニット200には第2照射部204(図3参照)が組み込まれており、第2照射部204から放射された近赤外光は、サンバイザー300に設けられた透過窓308(図4参照)を透過して、運転者の顔面に向けて上方から照射される。
 図9中に細い一点鎖線で示した矢印は、撮影ユニット100内の第1照射部104および補助照明ユニット200内の第2照射部204から、運転者の顔面に向けて近赤外光が照射される様子を表している。図示されるように、運転者の顔面の斜め下方および上方のそれぞれから近赤外光を照射することができるので、顔面の全体を常に安定した条件で照らすことができる。その結果、天候や時間帯などの影響を受けることなく、安定した条件で運転者の顔面の画像を撮影することが可能となる。
 また、図3に示されるように補助照明ユニット200には、近赤外光を照射する第2照射部204だけでなく、可視光を照射する照明部202も搭載されている。照明部202は、運転者が地図や書類を確認したり、女性の運転者がサンバイザー300の小鏡306を用いて化粧を直したりするために主に用いられるものであり、ほとんどの車両1に搭載されている。補助照明ユニット200の点灯制御は通常、運転者のスイッチ操作によって行われる。これは、運転者が眩しくてサンバイザー300を開状態にしたのか、小鏡306に映る自身の顔を見たいのかの判別が困難なためである。
 そして、本実施例の第2照射部204は、この照明部202に併設される形で補助照明ユニット200に搭載されている。従って、照明部202を車両1に組み付ける工数で第2照射部204も組み付けることができる。また、照明部202に給電するためのハーネスと、第2照射部204に給電するためのハーネスとを一体化しておけば、車両1に組み付けるハーネスの本数が増加することもない。このため、照明部202が設けられた補助照明ユニット200が若干大きくなったり、照明部202へのハーネスが若干太くなったりするものの、車両1の構造が複雑となったり、補助照明ユニット200を車両1へ組み付ける工数が増加することはない。
 更に、サンバイザー300についても、板状の近赤外光透過フィルターを嵌め込んで透過窓308を設けるだけなので、サンバイザー300の構造を簡単な構造に保っておくことができる。
 以上のような理由から、本実施例の撮影装置10では、天候や時間帯などの違いに影響を受けることなく安定した条件で、運転者の顔面全体に近赤外光を照射することが可能である。それでいながら、構造が簡単で、且つ車両1への組み付け工数も増加させることもない。
 また、本実施例の撮影装置10では、可視光は透過させないが近赤外光の一部波長は透過させる透過窓308をサンバイザー300に設けているため、サンバイザー300が開状態(遮光位置)にある場合には、第2照射部204からの近赤外光の照射強度を抑制して、電力消費の低減を図ることも可能である。これは次のような理由による。
 運転者がサンバイザー300を開状態として日差しからの可視光を遮るのは、運転者が眩しく感じる程の強さで、日差しが運転者の顔面上部を直接照らしているためである。そして、本実施例のサンバイザー300には近赤外光の一部波長を透過させる透過窓308が設けられているので、運転者がサンバイザー300を開状態として日差しからの可視光を遮っても、日差しに含まれる近赤外光の一部波長は透過窓308を透過して運転者の顔面上部に照射される。
 図10に示した太い一点鎖線の矢印は、日差しに含まれる近赤外光の一部波長の光が、サンバイザー300の透過窓308を透過して運転者の顔面上部を照らしている様子を表している。加えて、運転者がサンバイザー300を開状態としなければならない程に日差しが強いので、透過窓308を透過する近赤外光も十分な光量となる。このため、補助照明ユニット200の第2照射部204からの近赤外光の照射強度を抑制(あるいは照射を中止)しても、運転者の顔面全体を近赤外光で照らすことができる。その結果、第2照射部204からの近赤外光の照射を抑制(あるいは中止)する分だけ、電力消費を低減させることが可能となる。尚、近赤外光はサンバイザー300の透過窓308を透過して運転者の顔面上部に照射されるが、ほとんどの可視光は透過窓308を透過しないので、運転者が眩しく感じることはない。
 上述した本実施例の撮影装置10には、複数の変形例が存在している。以下では、これら変形例について本実施例との相違点を中心として説明する。また、前述した本実施例と同様な事項については、同じ符番を付すことによって詳細な説明を省略する。
 (第一変形例)
 上述した実施例では、サンバイザー300が開状態(遮光位置にある状態)となっていれば、運転者が日差しからの可視光を遮っているものと判断して、補助照明ユニット200の第2照射部204からの近赤外光の照射強度を抑制した。しかし、運転者がサンバイザー300を開状態とするのは日差しからの可視光を遮る場合だけに限られず、サンバイザー300に設けられた小鏡306を見る場合や、サンバイザー300にカードやレシートの類を挟む場合などにも、サンバイザー300を開状態とすることが考えられる。そこで、このような場合に第2照射部204からの照射強度を抑制することがないように、次のようにしても良い。
 図11には、第1変形例に係る運転者状態監視処理のフローチャートが示されている。この処理は、図7を用いて前述した運転者状態監視処理と比較すると、サンバイザー300の開状態となっているか否かだけでなく、開状態となってからの経過時間も考慮している点が大きく異なっている。以下、簡単に説明すると、先ず始めに、運転者の撮影タイミングか否かを判断して(S200)、撮影タイミングであった場合は(S200:YES)、日射量を検出する(S202)。そして、日射量に基づいて、第1照射部104および第2照射部204での近赤外光の照射強度と照射タイミングとを設定する(S204、S206)。
 続いて、サンバイザー300の開閉状態を検出し(S208)、サンバイザー300が開状態であるか否かを判断する(S210)。その結果、サンバイザー300が開状態ではなかった場合は(S210:NO)、S204で設定した照射強度で第1照射部104および第2照射部204から近赤外光を照射して、運転者の顔面の画像を撮影する(S216)。
 これに対して、サンバイザー300が開状態であった場合は(S210:YES)、第1変形例では、サンバイザー300が開状態になってから所定時間が経過したか否かを判断する(S212)。この所定時間は、運転者がサンバイザー300の小鏡306を覗き込んだり、あるいはサンバイザー300にカードやレシートの類を挟んだりするために要する程度の時間(代表的には5秒~10秒程度)に設定されている。
 そして、サンバイザー300が開状態となってから所定時間が経過しても依然として開状態が継続している場合(すなわち、S212:YES)には、運転者が何らかの理由で一時的にサンバイザー300を開状態としたのではなく、日差しからの可視光を遮るために開状態としたものと考えられるので、第2照射部204からの近赤外光の照明強度を抑制する(S214)。尚、近赤外光の照射を中止することによって、照射強度を抑制しても良い。一方、サンバイザー300が開状態となってから所定時間が経過していない場合(S212:NO)には、運転者が何らかの理由で一時的にサンバイザー300を開状態とした可能性があるので、第2照射部204の照明強度はS204で設定したままとしておく。
 その後は、前述した運転者状態監視処理と同様である。すなわち、設定された照射強度で第1照射部104および第2照射部204から近赤外光を照射して、撮影部102のシャッターを開いて運転者の顔面の画像を撮影する(S216)。そして、撮影した顔面の画像を解析して運転者の覚醒度を検出し(S218)、運転者の覚醒度が低下していれば(S220:YES)、覚醒度の低下を運転者に対して警告する(S222)。これに対して、覚醒度が低下していない場合は(S220:NO)、覚醒度の低下を警告することなく、そのままS200に戻って運転者の監視を継続する。
 以上に説明した第1変形例の運転者状態監視処理では、運転者が日差しを遮る以外の目的で短時間だけサンバイザー300を開状態としても、第2照射部204からの近赤外光の照射強度が抑制されることがない。このため、運転者の顔面上部への近赤外光の照射強度が不足することが無いので、良好な顔面の画像を撮影して、運転者の覚醒度を検出することができる。もちろん、運転者が日差しを遮るためにサンバイザー300を開状態としても、所定時間が経過するまでの間は第2照射部204の照射強度が維持されたままとなっている。しかしこのような場合でも、運転者の顔面上部に十分な近赤外光が照射されていることには変わりがない。このため、得られた顔面の画像を解析することによって運転者の覚醒度を検出することが可能である。
 (第2変形例)
 上述した実施例および変形例では、サンバイザー300の本体部304に板状の近赤外光透過フィルターが嵌め込まれることによって、透過窓308が形成されているものとして説明した。しかし、サンバイザーの本体部を、近赤外光透過フィルターによって形成しても良い。
 図12には、このような第2変形例のサンバイザー400が例示されている。図示した例では、サンバイザー400の本体部404が、メタクリル樹脂製などの近赤外光透過フィルターによって形成されている。そして、サンバイザー400はヒンジ402の部分で回転させることが可能であり、サンバイザー400を回転させて開状態とした時に運転者と向き合う側の面の中央には、コールドミラーによる小鏡406が形成されている。ここで「コールドミラー」とは、誘電体多層膜を蒸着して形成された光学薄膜であり、赤外光は透過させるが可視光は反射する特性を有している。
 このような第2変形例のサンバイザー400では、日差しを遮るためにサンバイザー400を開状態にすると、サンバイザー400の広い範囲から近赤外光の一部波長が透過するので、運転者の顔面上部を十分な光量の近赤外光で照らすことができる。その結果、撮影ユニット100の第1照射部104からの近赤外光と併せて、顔面の全体に近赤外光を照射して良好な顔面の画像を撮影することが可能となる。また、たとえば女性の運転者が化粧を確認する場合などには、コールドミラーによる小鏡406が形成されているので、化粧の確認あるいは化粧直しを行うことができる。
 (第3変形例)
 上述した実施例および変形例では、サンバイザー300,400は何れも、本体部304,404を回転させることによって、開状態(遮光位置)と閉状態(格納位置)とを切り換えるものとして説明した。しかし、本体部304,404を回転させるのではなくスライドさせることによって、開状態(遮光位置)と閉状態(格納位置)とを切り換えるタイプのサンバイザーとすることもできる。
 図13Aおよび図13Bには、このようなスライド式のサンバイザー500を用いた第3変形例が例示されている。たとえば、スライド式のサンバイザー500が格納位置にある状態では、補助照明ユニット200の第2照射部204(図3参照)と向き合うこととなる箇所に、近赤外光透過フィルターによる透過窓508を設けておく。こうすれば、図13Aに示すように、サンバイザー500が格納位置にある場合には、補助照明ユニット200の第2照射部204(図3参照)からの近赤外光で、運転者の顔面上部を照らすことができる。その結果、撮影ユニット100の第1照射部104(図2参照)からの近赤外光と併せて、運転者の顔面全体を近赤外光で照らすことができ、良好な顔面の画像を撮影することが可能となる。
 また、図13Bに示すように、運転者が日差しを遮るためにサンバイザー500を遮光位置にすると、日差しに含まれる近赤外光の一部波長の光が透過窓508を透過するので、透過した近赤外光によって運転者の顔面上部が照らされる。図中に示した太い一点鎖線の矢印は、日差しに含まれる近赤外光の一部波長の光が運転者の顔面上部を照らす様子を表している。このため、撮影ユニット100の第1照射部104(図2参照)からの近赤外光と併せて、運転者の顔面全体を近赤外光で照らすことができ、良好な顔面の画像を撮影することが可能となる。
 以上、本実施例および変形例について説明したが、本発明は上記の実施例および変形例に限られるものではなく、その要旨を逸脱しない範囲において種々の態様で実施することができる。

Claims (5)

  1.  車両(1)に搭載されて、前記車両の運転者の画像を撮影する撮影装置(10)であって、
     前記車両の運転席の前方に配置され、前記運転者の前方から前記運転者の顔面の画像を撮影する顔面撮影部(102)と、
     前記車両の運転席の前方に配置され、前記運転者の前方下側から前記顔面に向けて近赤外光を照射する第1照射部(104)と、
     前記運転席の上方の車室内に取り付けられて、前記顔面への日差しを遮る遮光位置と、前記顔面への日差しを遮らない格納位置との間で移動可能なサンバイザー(300、400、500)と、
     前記サンバイザーが前記格納位置にある時には前記サンバイザーによって覆われた状態となるが、前記サンバイザーが前記遮光位置にある時には覆われない状態となる位置に設けられて、前記運転者の顔面に向けて近赤外光を照射する第2照射部(204)と
     を備え、
     前記サンバイザーは、前記サンバイザーが前記格納位置にある時に前記第2照射部を覆う部分が、前記日差しに含まれる可視光を遮蔽し且つ前記近赤外光を透過させる材質によって形成されている撮影装置。
  2.  請求項1に記載の撮影装置であって、
     前記サンバイザーが前記遮光位置あるいは前記格納位置の何れの位置にあるかを検出する検出部(310)と、
     前記サンバイザーが前記遮光位置にある場合は、前記サンバイザーが前記格納位置にある場合よりも、前記第2照射部による前記近赤外光の照射強度を抑制する照射強度抑制部(150)と
     をさらに備える撮影装置。
  3.  請求項1または請求項2に記載の撮影装置であって、
     前記顔面撮影部は、所定周期で前記顔面の画像を撮影し、
     前記第1照射部または前記第2照射部の少なくとも一方は、前記顔面撮影部が前記顔面を撮影する周期と同期させて、前記近赤外光を照射する撮影装置。
  4.  車両に搭載されて、前記車両の運転者の顔面に向けて近赤外光を照射する近赤外光照射装置であって、
     前記車両の運転席の前方に配置され、前記運転者の前方下側から前記顔面に向けて近赤外光を照射する第1照射部(104)と、
     前記運転席の上方の車室内に取り付けられて、前記顔面への日差しを遮る遮光位置と、前記顔面への日差しを遮らない格納位置との間で移動可能なサンバイザー(300、400、500)と、
     前記サンバイザーが前記格納位置にある時には前記サンバイザーによって覆われた状態となるが、前記サンバイザーが前記遮光位置にある時には覆われない状態となる位置に設けられて、前記運転者の顔面に向けて近赤外光を照射する第2照射部(204)と
     を備え、
     前記サンバイザーは、前記サンバイザーが前記格納位置にある時に前記第2照射部を覆う部分が、前記日差しに含まれる可視光を遮蔽し且つ前記近赤外光を透過させる材質によって形成されている近赤外光照射装置。
  5.  車両の車室内に取り付けられて、前記車両の運転者の顔面への日差しを遮るサンバイザーであって、
     前記日差しを遮る材質で形成された本体部(304、404)と、
     前記本体部を、前記顔面への日差しを遮る遮光位置と前記顔面への日差しを遮らない格納位置との間で移動可能な状態で、前記車室内に取り付ける取付部(302、402)と
     を備え、
     前記本体部には、前記日差しに含まれる可視光を遮蔽し且つ近赤外光を透過させる材質で形成された透過窓(308、508)が設けられているサンバイザー。
PCT/JP2013/006744 2012-12-24 2013-11-18 撮影装置、近赤外光照射装置、およびサンバイザー WO2014103141A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE112013006200.3T DE112013006200B4 (de) 2012-12-24 2013-11-18 Bildaufnahmevorrichtung, Nahinfrarotlichtemissionsvorrichtung und Sonnenblende
US14/648,012 US10095914B2 (en) 2012-12-24 2013-11-18 Image pickup device, near infrared light emission device, and sunvisor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012-280414 2012-12-24
JP2012280414A JP5821833B2 (ja) 2012-12-24 2012-12-24 撮影装置、近赤外光照射装置、およびサンバイザー

Publications (1)

Publication Number Publication Date
WO2014103141A1 true WO2014103141A1 (ja) 2014-07-03

Family

ID=51020276

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/006744 WO2014103141A1 (ja) 2012-12-24 2013-11-18 撮影装置、近赤外光照射装置、およびサンバイザー

Country Status (4)

Country Link
US (1) US10095914B2 (ja)
JP (1) JP5821833B2 (ja)
DE (1) DE112013006200B4 (ja)
WO (1) WO2014103141A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016023662A1 (de) * 2014-08-11 2016-02-18 Robert Bosch Gmbh Fahrerbeobachtungssystem in einem kraftfahrzeug
WO2017008946A1 (de) * 2015-07-15 2017-01-19 Volkswagen Aktiengesellschaft Schminkspiegeleinheit für den innenraum eines kraftfahrzeugs

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103440647B (zh) * 2013-08-20 2016-12-07 中山大学 一种车辆遮阳板状态的检测方法及系统
US10131042B2 (en) 2013-10-21 2018-11-20 Milwaukee Electric Tool Corporation Adapter for power tool devices
CN105590410A (zh) * 2014-10-22 2016-05-18 鸿富锦精密工业(武汉)有限公司 安全驾驶监控系统及安全驾驶监控方法
DE102015218886A1 (de) 2015-09-30 2017-03-30 Robert Bosch Gmbh Vorrichtung zur Ausleuchtung eines Fahrers eines Kraftfahrzeugs für ein Fahrerbeobachtungssystem
DE102015219111B4 (de) 2015-10-02 2024-01-25 Robert Bosch Gmbh Fahrerassistenzsystem und Verfahren zur Anpassung der Beleuchtung von Bedienelementen bei Kraftfahrzeugen
US20190012552A1 (en) * 2017-07-06 2019-01-10 Yves Lambert Hidden driver monitoring
DE102017216680A1 (de) * 2017-09-20 2019-03-21 Continental Automotive Gmbh Fahrzeugcockpitelement und Kraftfahrzeug mit einem Fahrzeugcockpitelement
JP6650118B2 (ja) * 2018-03-15 2020-02-19 オムロン株式会社 乗員監視装置
WO2020235306A1 (ja) * 2019-05-17 2020-11-26 株式会社東海理化電機製作所 制御システムおよび提示システム
DE102019210862A1 (de) * 2019-07-23 2021-01-28 Robert Bosch Gmbh Beleuchtungseinheit für eine Beobachtungsvorrichtung
DE102019210878A1 (de) 2019-07-23 2021-01-28 Volkswagen Aktiengesellschaft Beleuchtungsvorrichtung für ein Kraftfahrzeug zum gerichteten Beleuchten einer Person, sowie Verfahren
DE102020214617A1 (de) 2020-11-19 2022-05-19 Volkswagen Aktiengesellschaft Fahrzeugbeleuchtungssystem, Fahrzeug und Verfahren zur Beleuchtung eines Fahrzeuginnenraums

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6215046U (ja) * 1985-07-12 1987-01-29
JP2005271876A (ja) * 2004-03-26 2005-10-06 Denso Corp 撮影装置及びサンバイザ
JP2010269738A (ja) * 2009-05-22 2010-12-02 Panasonic Electric Works Co Ltd 車室内照明装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4419609B2 (ja) 2004-03-01 2010-02-24 株式会社デンソー 車載カメラシステム
JP4462978B2 (ja) 2004-03-26 2010-05-12 日産自動車株式会社 自動車のエネルギー吸収構造
JP4252938B2 (ja) 2004-07-07 2009-04-08 株式会社デンソー 車両の車室照明装置
JP4438753B2 (ja) 2006-01-27 2010-03-24 株式会社日立製作所 車両内状態検知システム,車両内状態検知装置および方法
DE102006006690B4 (de) 2006-02-14 2008-07-03 Audi Ag Blendschutzvorrichtung
JP4915314B2 (ja) 2007-08-23 2012-04-11 オムロン株式会社 撮像装置および撮像制御方法
US20090091821A1 (en) * 2007-10-09 2009-04-09 Regan Rick R Optical sighting device with selective laser wavelength removal
JP2009161143A (ja) 2008-01-10 2009-07-23 Kanto Auto Works Ltd 車両照明構造
JP5141471B2 (ja) 2008-09-25 2013-02-13 日産自動車株式会社 車両用サンバイザ装置
US8387878B2 (en) * 2011-07-26 2013-03-05 Symbol Technologies, Inc. Imager exposure, illumination and saturation controls in a point-of-transaction workstation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6215046U (ja) * 1985-07-12 1987-01-29
JP2005271876A (ja) * 2004-03-26 2005-10-06 Denso Corp 撮影装置及びサンバイザ
JP2010269738A (ja) * 2009-05-22 2010-12-02 Panasonic Electric Works Co Ltd 車室内照明装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016023662A1 (de) * 2014-08-11 2016-02-18 Robert Bosch Gmbh Fahrerbeobachtungssystem in einem kraftfahrzeug
CN106660492A (zh) * 2014-08-11 2017-05-10 罗伯特·博世有限公司 机动车中的驾驶员观察系统
CN106660492B (zh) * 2014-08-11 2019-09-13 罗伯特·博世有限公司 机动车中的驾驶员观察系统
WO2017008946A1 (de) * 2015-07-15 2017-01-19 Volkswagen Aktiengesellschaft Schminkspiegeleinheit für den innenraum eines kraftfahrzeugs

Also Published As

Publication number Publication date
JP2014122013A (ja) 2014-07-03
DE112013006200T5 (de) 2015-09-03
DE112013006200B4 (de) 2019-07-04
US20150310258A1 (en) 2015-10-29
US10095914B2 (en) 2018-10-09
JP5821833B2 (ja) 2015-11-24

Similar Documents

Publication Publication Date Title
WO2014103141A1 (ja) 撮影装置、近赤外光照射装置、およびサンバイザー
JP2006252138A (ja) 運転者撮影装置および運転者監視装置
JP2006248363A (ja) 運転者照明装置、運転者撮影装置および運転者監視装置
US20150124068A1 (en) System and method for monitoring a driver of a vehicle
JP2004311299A (ja) 車両のサイドターンシグナル、車両用周辺監視装置、車両の車体構造、及び、車両用撮像装置
JP5761046B2 (ja) 防眩制御装置
JP2004058799A (ja) 車載用乗員撮影装置
JP6852584B2 (ja) 車両後方視認装置
JP6481971B2 (ja) 乗員撮影装置
JP2003075893A (ja) 車両用周囲撮像装置
JP6481970B2 (ja) ドライバ撮影装置
JP2002316580A (ja) カメラ内蔵ミラー装置
JP4798015B2 (ja) 防眩制御装置
JP4269998B2 (ja) 撮影装置
EP1862358A1 (en) Vehicle occupant detection device
JP2007029712A (ja) 視線検出装置
JP2006096316A (ja) 監視装置
JP2010076480A (ja) 車両用運転支援装置
JP2007106146A (ja) 車両前方及び周辺監視装置
KR20210055435A (ko) 차량의 내부 감시용 카메라 시스템
WO2022269732A1 (ja) カメラユニットおよび乗員監視システム
JP2004136762A (ja) インナミラー
JP2021190777A (ja) 光検出装置
JP2000185032A (ja) 撮像装置
JP2019014361A (ja) 乗員撮影装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13867157

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14648012

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 1120130062003

Country of ref document: DE

Ref document number: 112013006200

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13867157

Country of ref document: EP

Kind code of ref document: A1