JP2021002181A - Detection system - Google Patents

Detection system Download PDF

Info

Publication number
JP2021002181A
JP2021002181A JP2019115166A JP2019115166A JP2021002181A JP 2021002181 A JP2021002181 A JP 2021002181A JP 2019115166 A JP2019115166 A JP 2019115166A JP 2019115166 A JP2019115166 A JP 2019115166A JP 2021002181 A JP2021002181 A JP 2021002181A
Authority
JP
Japan
Prior art keywords
unit
irradiation direction
light
driver
occupant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019115166A
Other languages
Japanese (ja)
Inventor
賢太郎 大友
Kentaro Otomo
賢太郎 大友
弘貴 兒島
Hirotaka Kojima
弘貴 兒島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yazaki Corp
Original Assignee
Yazaki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yazaki Corp filed Critical Yazaki Corp
Priority to JP2019115166A priority Critical patent/JP2021002181A/en
Publication of JP2021002181A publication Critical patent/JP2021002181A/en
Pending legal-status Critical Current

Links

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Arrangements Of Lighting Devices For Vehicle Interiors, Mounting And Supporting Thereof, Circuits Therefore (AREA)
  • Image Analysis (AREA)

Abstract

To provide a detection system capable of appropriately detecting a position of a detection target in the eyes of an occupant.SOLUTION: A detection system 1 comprises an LED unit 20, a camera 10, a spectacles wearing determination unit 31, a position detection unit 32, and a control unit 34. The LED unit 20 comprises a light source 21 and an irradiation direction changing unit 22. The irradiation direction changing unit 22 changes an irradiation direction of light that is emitted from the light source 21 toward the face of a driver P. The position detection unit 32 detects a position of the pupil E in an eye of the driver P based on an image captured by the camera 10. The control unit 34 determines that the driver P is wearing a pair of spectacles G by the spectacles wearing determination unit 31, and controls the irradiation direction changing unit 22 to change the irradiation direction of the light that is emitted from the light source 21 to a direction that is different from the current irradiation direction so as to detect the position of the pupil E if the position detection unit 32 cannot detect the position of the pupil E.SELECTED DRAWING: Figure 1

Description

本発明は、検出システムに関する。 The present invention relates to a detection system.

従来、検出システムとして、例えば、特許文献1には、運転者の眼球に向けて光を投光する投光手段と、運転者の顔画像を撮像する撮像手段とを備え、投光手段及び撮像手段の位置関係を適正に設定することで、運転者が眼鏡を着用している場合に当該眼鏡上で反射する反射光と運転者の眼の位置とが重ならないようにする車両用顔画像撮像装置が開示されています。 Conventionally, as a detection system, for example, Patent Document 1 includes a light projecting means for projecting light toward the driver's eyeball and an imaging unit for capturing a driver's face image. By properly setting the positional relationship of the means, when the driver wears spectacles, the reflected light reflected on the spectacles does not overlap with the position of the driver's eyes. The device is disclosed.

特開2012−11976号公報Japanese Unexamined Patent Publication No. 2012-11976

ところで、上述の特許文献1に記載の車両用顔画像撮像装置は、例えば、乗員の座高の違いや姿勢の変化によっては眼鏡上で反射する反射光と運転者の眼の位置とが重なるおそれがあり、この点で更なる改善の余地がある。 By the way, in the vehicle face image imaging device described in Patent Document 1 described above, for example, the reflected light reflected on the glasses may overlap with the position of the driver's eyes depending on the difference in the sitting height of the occupant or the change in the posture. Yes, there is room for further improvement in this regard.

そこで、本発明は、上記に鑑みてなされたものであって、乗員の眼における検出対象の位置を適正に検出することができる検出システムを提供することを目的とする。 Therefore, the present invention has been made in view of the above, and an object of the present invention is to provide a detection system capable of appropriately detecting the position of a detection target in the eyes of an occupant.

上述した課題を解決し、目的を達成するために、本発明に係る検出システムは、車両の乗員の顔に向けて光を照射する光源、及び、前記光源から前記乗員の顔に向けて照射する光の照射方向を変更する照射方向変更部を有する光照射ユニットと、前記乗員の顔に照射された光による反射光により画像を撮像する撮像部と、前記撮像部により撮像された画像に基づいて前記乗員の眼鏡の装着を判定する眼鏡装着判定部と、前記撮像部により撮像された画像に基づいて前記乗員の眼における検出対象の位置を検出する位置検出部と、前記眼鏡装着判定部の判定結果及び前記位置検出部の検出結果に基づいて前記照射方向変更部を制御する制御部と、を備え、前記制御部は、前記眼鏡装着判定部により前記乗員が前記眼鏡を装着していると判定し、且つ、前記位置検出部により前記検出対象の位置を検出できない場合、前記照射方向変更部を制御し前記光源から照射する光の照射方向を現在の照射方向とは異なる方向に変更し前記検出対象の位置を検出するように制御することを特徴とする。 In order to solve the above-mentioned problems and achieve the object, the detection system according to the present invention irradiates a light source that irradiates light toward the face of a vehicle occupant, and irradiates the light source toward the occupant's face. Based on a light irradiation unit having an irradiation direction changing unit that changes the light irradiation direction, an imaging unit that captures an image by reflected light from the light emitted to the occupant's face, and an image captured by the imaging unit. Determination of the spectacles wearing determination unit for determining the wearing of the spectacles of the occupant, the position detection unit for detecting the position of the detection target in the eyes of the occupant based on the image captured by the imaging unit, and the spectacles wearing determination unit. A control unit that controls the irradiation direction changing unit based on the result and the detection result of the position detection unit is provided, and the control unit determines that the occupant is wearing the spectacles by the spectacles wearing determination unit. If the position of the detection target cannot be detected by the position detection unit, the irradiation direction changing unit is controlled to change the irradiation direction of the light emitted from the light source to a direction different from the current irradiation direction. It is characterized by controlling so as to detect the position of the target.

上記検出システムにおいて、前記光源は、光を照射する発光素子を有し、前記照射方向変更部は、前記発光素子の向きを変更することで、前記光源から照射する光の照射方向を変更することが好ましい。 In the detection system, the light source has a light emitting element that irradiates light, and the irradiation direction changing unit changes the irradiation direction of the light emitted from the light source by changing the direction of the light emitting element. Is preferable.

上記検出システムにおいて、前記光照射ユニットは、初期状態では、予め定められた基準照射方向に沿って光を照射し、前記制御部は、前記光源から前記基準照射方向とは異なる第1照射方向に光を照射した際に前記位置検出部により前記検出対象の位置を検出できない場合、前記照射方向変更部を制御し前記第1照射方向を一旦前記基準照射方向に設定し、次に、前記基準照射方向から前記第1照射方向とは異なる第2照射方向に設定し前記光源から光を照射することが好ましい。 In the detection system, in the initial state, the light irradiation unit irradiates light along a predetermined reference irradiation direction, and the control unit moves from the light source to a first irradiation direction different from the reference irradiation direction. If the position of the detection target cannot be detected by the position detection unit when irradiating light, the irradiation direction changing unit is controlled to once set the first irradiation direction to the reference irradiation direction, and then the reference irradiation. It is preferable to set the second irradiation direction different from the first irradiation direction from the direction and irradiate the light from the light source.

上記検出システムにおいて、前記撮像部により撮像された画像に基づいて特定した前記乗員の顔の位置から当該乗員の顔の移動方向を特定する特定部を更に備え、前記制御部は、前記位置検出部により前記検出対象の位置を検出不可のときに、前記特定部により特定された特定移動方向に前記乗員の顔が移動した際に前記位置検出部により前記検出対象の位置を検出可能となり、次に、前記位置検出部により前記検出対象の位置を検出できない場合、前記光源から照射する光の照射方向を、前記特定移動方向とは逆方向にずらすことが好ましい。 The detection system further includes a specific unit that specifies the moving direction of the occupant's face from the position of the occupant's face specified based on the image captured by the imaging unit, and the control unit is the position detection unit. When the position of the detection target cannot be detected, when the face of the occupant moves in the specific movement direction specified by the specific unit, the position detection unit can detect the position of the detection target, and then When the position of the detection target cannot be detected by the position detection unit, it is preferable to shift the irradiation direction of the light emitted from the light source in the direction opposite to the specific movement direction.

本発明に係る検出システムは、眼鏡装着判定部により乗員が眼鏡を装着していると判定し、且つ、位置検出部により検出対象の位置を検出できない場合、光源から照射する光の照射方向を現在の照射方向とは異なる方向に変更し検出対象の位置を検出するように制御するので、乗員の眼における検出対象の位置を適正に検出することができる。 In the detection system according to the present invention, when the spectacle wearing determination unit determines that the occupant is wearing the spectacles and the position detection unit cannot detect the position of the detection target, the irradiation direction of the light emitted from the light source is currently determined. Since it is controlled to detect the position of the detection target by changing the direction different from the irradiation direction of the occupant, the position of the detection target in the eyes of the occupant can be appropriately detected.

図1は、実施形態に係る検出システムの構成例を示すブロック図である。FIG. 1 is a block diagram showing a configuration example of a detection system according to an embodiment. 図2は、実施形態に係る瞳孔及び反射光の重畳例を示す図である。FIG. 2 is a diagram showing an example of superimposition of the pupil and the reflected light according to the embodiment. 図3は、実施形態に係る瞳孔及び反射光の非重畳例を示す図である。FIG. 3 is a diagram showing an example of non-superimposition of the pupil and the reflected light according to the embodiment. 図4は、実施形態に係る検出システムの動作例を示すフローチャートである。FIG. 4 is a flowchart showing an operation example of the detection system according to the embodiment.

本発明を実施するための形態(実施形態)につき、図面を参照しつつ詳細に説明する。以下の実施形態に記載した内容により本発明が限定されるものではない。また、以下に記載した構成要素には、当業者が容易に想定できるもの、実質的に同一のものが含まれる。更に、以下に記載した構成は適宜組み合わせることが可能である。また、本発明の要旨を逸脱しない範囲で構成の種々の省略、置換又は変更を行うことができる。 An embodiment (embodiment) for carrying out the present invention will be described in detail with reference to the drawings. The present invention is not limited to the contents described in the following embodiments. In addition, the components described below include those that can be easily assumed by those skilled in the art and those that are substantially the same. Further, the configurations described below can be combined as appropriate. In addition, various omissions, substitutions or changes of the configuration can be made without departing from the gist of the present invention.

〔実施形態〕
図面を参照しながら実施形態に係る検出システム1について説明する。図1は、実施形態に係る検出システム1の構成例を示すブロック図である。図2は、実施形態に係る瞳孔E及び反射光Lの重畳例を示す図である。図3は、実施形態に係る瞳孔E及び反射光Lの非重畳例を示す図である。検出システム1は、車両に搭載され、当該車両の乗員の眼における検出対象の位置を検出するものである。乗員は、例えば、車両を運転する運転者Pである。運転者Pの眼における検出対象は、例えば、瞳孔Eである。検出システム1は、検出した運転者Pの瞳孔Eの情報を、運転者Pの眠気や疲労等を推定する推定装置(図示省略)に出力する。以下、検出システム1について詳細に説明する。
[Embodiment]
The detection system 1 according to the embodiment will be described with reference to the drawings. FIG. 1 is a block diagram showing a configuration example of the detection system 1 according to the embodiment. FIG. 2 is a diagram showing an example of superimposition of the pupil E and the reflected light L according to the embodiment. FIG. 3 is a diagram showing an example of non-superimposition of the pupil E and the reflected light L according to the embodiment. The detection system 1 is mounted on a vehicle and detects the position of a detection target in the eyes of the occupants of the vehicle. The occupant is, for example, the driver P who drives the vehicle. The detection target in the eyes of the driver P is, for example, the pupil E. The detection system 1 outputs the detected information on the pupil E of the driver P to an estimation device (not shown) that estimates the drowsiness, fatigue, etc. of the driver P. Hereinafter, the detection system 1 will be described in detail.

ここで、以下の説明で用いる上下方向とは、車両の高さ方向に沿った方向であり、典型的には、鉛直方向に沿った方向である。左右方向とは、車両の幅方向に沿った方向である。上下方向及び左右方向は、互いに直交する。 Here, the vertical direction used in the following description is a direction along the height direction of the vehicle, and is typically a direction along the vertical direction. The left-right direction is a direction along the width direction of the vehicle. The vertical and horizontal directions are orthogonal to each other.

検出システム1は、例えば、図1に示すように、撮像部としてのカメラ10と、光照射ユニットとしてのLEDユニット20と、制御基板30とを備える。 As shown in FIG. 1, the detection system 1 includes, for example, a camera 10 as an imaging unit, an LED unit 20 as a light irradiation unit, and a control board 30.

カメラ10は、静止画像又は動画像(以下、単に「画像」と称する)を撮像するものであり、例えば、近赤外線カメラである。カメラ10は、運転者Pの顔画像を撮像することが可能な位置に設置され、例えば、インストルメントパネル、ダッシュボード、ステアリングコラム等に設置される。カメラ10は、カメラレンズが運転者Pの顔に向けて配置され、当該運転者Pの顔画像を撮像する。カメラ10は、例えば、LEDユニット20により運転者Pの顔に照射された光による反射光Lを受光して運転者Pの顔画像を撮像する。カメラ10は、車両のACC(アクセサリー)電源又はIG(イグニッション)電源がオンされた場合に起動し、これらの電源がオフされるまで運転者Pの顔画像を撮像する。カメラ10は、制御基板30に接続され、撮像した運転者Pの顔画像を制御基板30に出力する。 The camera 10 captures a still image or a moving image (hereinafter, simply referred to as an “image”), and is, for example, a near-infrared camera. The camera 10 is installed at a position where the face image of the driver P can be captured, and is installed on, for example, an instrument panel, a dashboard, a steering column, or the like. In the camera 10, the camera lens is arranged toward the face of the driver P, and the face image of the driver P is captured. For example, the camera 10 receives the reflected light L due to the light applied to the face of the driver P by the LED unit 20 and captures the face image of the driver P. The camera 10 is activated when the ACC (accessory) power supply or the IG (ignition) power supply of the vehicle is turned on, and captures the face image of the driver P until these power supplies are turned off. The camera 10 is connected to the control board 30 and outputs the captured facial image of the driver P to the control board 30.

LEDユニット20は、光を照射するものであり、例えば、近赤外線を照射する。LEDユニット20は、運転者Pの顔に光を照射可能な位置に設置される。LEDユニット20は、光源21と、照射方向変更部22と、ユニット筐体23とを有する。光源21は、車両の運転者Pの顔に向けて光を照射するものである。光源21は、例えば、発光素子としてのLED(Light Emitting Diode)21aと、LED基板21bと、LED筐体21cとを有する。LED21aは、発光するものであり、LED基板21bに搭載されている。LED21aは、LED基板21bの制御により、例えば、近赤外線を出力する。LED基板21bは、LED21aを発光制御するものである。 The LED unit 20 irradiates light, for example, irradiates near infrared rays. The LED unit 20 is installed at a position where light can be applied to the face of the driver P. The LED unit 20 has a light source 21, an irradiation direction changing portion 22, and a unit housing 23. The light source 21 irradiates light toward the face of the driver P of the vehicle. The light source 21 includes, for example, an LED (Light Emitting Diode) 21a as a light emitting element, an LED substrate 21b, and an LED housing 21c. The LED 21a emits light and is mounted on the LED substrate 21b. The LED 21a outputs, for example, near infrared rays under the control of the LED substrate 21b. The LED substrate 21b controls the light emission of the LED 21a.

LED筐体21cは、箱状に形成され、LED21a及びLED基板21bが組み付けられている。LED筐体21cは、LED21aが運転席側を向いた状態で当該LED21aを保持している。LED筐体21cは、ユニット筐体23に可動自在に組み付けられている。LED筐体21cは、例えば、車両の上下方向に沿って回動自在に、ユニット筐体23に組み付けられている。これにより、LEDユニット20は、LED21aが運転席側を向いた状態で、車両の上下方向に沿ってLED21aの照射方向を設定することができる。また、LED筐体21cは、車両の左右方向(幅方向)に沿って回動自在に、ユニット筐体23に組み付けられている。これにより、LEDユニット20は、LED21aが運転席側を向いた状態で、車両の幅方向に沿ってLED21aの照射方向を設定することができる。LEDユニット20は、LED21aが運転者Pの顔を照射可能な範囲で可動し、運転席に乗車した運転者Pの顔に向けて光を照射する。LEDユニット20は、初期状態では、予め定められた基準照射方向に沿って光を照射する。この基準照射方向は、例えば、運転席に乗車した運転者Pの顔が平均的に位置する方向である。 The LED housing 21c is formed in a box shape, and the LED 21a and the LED substrate 21b are assembled. The LED housing 21c holds the LED 21a in a state where the LED 21a faces the driver's seat side. The LED housing 21c is movably assembled to the unit housing 23. The LED housing 21c is assembled to the unit housing 23 so as to be rotatable along the vertical direction of the vehicle, for example. As a result, the LED unit 20 can set the irradiation direction of the LED 21a along the vertical direction of the vehicle with the LED 21a facing the driver's seat side. Further, the LED housing 21c is assembled to the unit housing 23 so as to be rotatable along the left-right direction (width direction) of the vehicle. As a result, the LED unit 20 can set the irradiation direction of the LED 21a along the width direction of the vehicle with the LED 21a facing the driver's seat side. The LED unit 20 moves within a range in which the LED 21a can irradiate the face of the driver P, and irradiates the face of the driver P in the driver's seat with light. In the initial state, the LED unit 20 irradiates light along a predetermined reference irradiation direction. This reference irradiation direction is, for example, the direction in which the faces of the driver P in the driver's seat are located on average.

照射方向変更部22は、LED21aの照射方向を変更する機械式の移動機構である。照射方向変更部22は、例えば、LEDギア22aと、ユニットギア22bと、ウォーム22cとを有する。LEDギア22aは、LED筐体21cに組み付けられている。ユニットギア22bは、ユニット筐体23に組み付けられている。ウォーム22cは、LEDギア22a及びユニットギア22bに嵌合されている。照射方向変更部22は、ユニットギア22bを回転駆動させることによりウォーム22cを介してLEDギア22aを回転させ、LED21aの上下方向の向きを変更し、LED21aから照射する光の照射方向を上下に変更する。また、照射方向変更部22は、図示しない機械式の移動機構を有し、この機械式の移動機構は、LED21aの左右方向の向きを変更し、LED21aから照射する光の照射方向を左右に変更する。 The irradiation direction changing unit 22 is a mechanical moving mechanism that changes the irradiation direction of the LED 21a. The irradiation direction changing unit 22 has, for example, an LED gear 22a, a unit gear 22b, and a worm 22c. The LED gear 22a is assembled to the LED housing 21c. The unit gear 22b is assembled to the unit housing 23. The worm 22c is fitted to the LED gear 22a and the unit gear 22b. The irradiation direction changing unit 22 rotates the LED gear 22a via the worm 22c by rotationally driving the unit gear 22b, changes the vertical direction of the LED 21a, and changes the irradiation direction of the light emitted from the LED 21a up and down. To do. Further, the irradiation direction changing unit 22 has a mechanical moving mechanism (not shown), and this mechanical moving mechanism changes the direction of the LED 21a in the left-right direction and changes the irradiation direction of the light emitted from the LED 21a to the left and right. To do.

ユニット筐体23は、機器を収容するものである。ユニット筐体23は、箱状に形成され、内側に内部空間部を有している。ユニット筐体23は、内部空間部に光源21の一部及び照射方向変更部22を収容する。ユニット筐体23は、LED21aが運転席側を向いた状態で、LED21aが車両の上下方向及び左右方向に沿って回動自在に組み付けられている。 The unit housing 23 accommodates the device. The unit housing 23 is formed in a box shape and has an internal space inside. The unit housing 23 accommodates a part of the light source 21 and the irradiation direction changing portion 22 in the internal space portion. The unit housing 23 is assembled so that the LED 21a can rotate along the vertical and horizontal directions of the vehicle with the LED 21a facing the driver's seat side.

制御基板30は、LEDユニット20を制御するものである。制御基板30は、CPU、記憶部を構成するROM、RAM及びインターフェースを含む周知のマイクロコンピュータを主体とする電子回路を含んで構成される。制御基板30は、眼鏡装着判定部31と、位置検出部32と、特定部33と、制御部34とを有する。眼鏡装着判定部31、位置検出部32、特定部33、及び、制御部34は、顔認識ミドルウェアを構成する。 The control board 30 controls the LED unit 20. The control board 30 includes a CPU, a ROM that constitutes a storage unit, a RAM, and an electronic circuit mainly composed of a well-known microcomputer including an interface. The control board 30 includes a spectacles wearing determination unit 31, a position detection unit 32, a specific unit 33, and a control unit 34. The eyeglass wearing determination unit 31, the position detection unit 32, the specific unit 33, and the control unit 34 constitute face recognition middleware.

眼鏡装着判定部31は、運転者Pの眼鏡Gの装着を判定するものである。眼鏡装着判定部31は、画像のパターンマッチング等の周知の画像処理により運転者Pの眼鏡Gの装着を判定する。眼鏡装着判定部31は、例えば、予め定められた眼鏡Gの画像と、カメラ10により撮像された運転者Pの顔画像とを比較し、当該運転者Pの顔画像の中から眼鏡Gの画像を検出する。眼鏡装着判定部31は、運転者Pの顔画像の中から眼鏡Gの画像を検出することができた場合、運転者Pが眼鏡Gを装着していると判定する。一方、眼鏡装着判定部31は、運転者Pの顔画像の中から眼鏡Gの画像を検出することができなかった場合、運転者Pが眼鏡Gを装着していないと判定する。眼鏡装着判定部31は、制御部34に接続され、判定結果を制御部34に出力する。 The spectacles wearing determination unit 31 determines whether the driver P wears the spectacles G. The spectacles wearing determination unit 31 determines the wearing of the spectacles G of the driver P by well-known image processing such as image pattern matching. The spectacles wearing determination unit 31 compares, for example, a predetermined image of the spectacles G with the face image of the driver P captured by the camera 10, and the image of the spectacles G is selected from the facial images of the driver P. Is detected. When the image of the spectacles G can be detected from the face image of the driver P, the spectacles wearing determination unit 31 determines that the driver P is wearing the spectacles G. On the other hand, when the image of the spectacles G cannot be detected from the face image of the driver P, the spectacles wearing determination unit 31 determines that the driver P is not wearing the spectacles G. The eyeglass wearing determination unit 31 is connected to the control unit 34 and outputs the determination result to the control unit 34.

位置検出部32は、運転者Pの両眼における瞳孔Eの位置を検出するものである。位置検出部32は、画像のパターンマッチング等の周知の画像処理により運転者Pの瞳孔Eの位置を検出する。位置検出部32は、例えば、予め定められた眼の画像と、カメラ10により撮像された運転者Pの顔画像とを比較し、当該運転者Pの顔画像の中から運転者Pの瞳孔Eの位置を検出する。位置検出部32は、制御部34に接続され、検出結果を制御部34に出力する。位置検出部32は、例えば、運転者Pの顔画像の中から運転者Pの瞳孔Eの位置を検出することができた場合、瞳孔Eを検出することができたことを表す検出結果を制御部34に出力する。一方、位置検出部32は、図2に示すように、LED21aから照射した光が眼鏡Gのレンズに反射し当該反射光Lが瞳孔Eに重畳して運転者Pの顔画像の中から運転者Pの瞳孔Eの位置を検出することができなかった場合、瞳孔Eを検出することができなかったことを表す検出結果を制御部34に出力する。 The position detection unit 32 detects the position of the pupil E in both eyes of the driver P. The position detection unit 32 detects the position of the pupil E of the driver P by well-known image processing such as image pattern matching. The position detection unit 32 compares, for example, a predetermined eye image with the face image of the driver P captured by the camera 10, and selects the pupil E of the driver P from the face image of the driver P. Detect the position of. The position detection unit 32 is connected to the control unit 34 and outputs the detection result to the control unit 34. The position detection unit 32 controls, for example, a detection result indicating that the pupil E can be detected when the position of the pupil E of the driver P can be detected from the face image of the driver P. Output to unit 34. On the other hand, as shown in FIG. 2, the position detection unit 32 reflects the light emitted from the LED 21a on the lens of the spectacles G, and the reflected light L is superimposed on the pupil E to superimpose the reflected light L on the pupil E from the driver P's face image. When the position of the pupil E of P cannot be detected, the detection result indicating that the pupil E could not be detected is output to the control unit 34.

特定部33は、運転者Pの顔の移動方向を特定するものである。特定部33は、周知の画像処理により、カメラ10により撮像された運転者Pの顔画像に基づいて当該運転者Pの顔の移動方向を特定する。特定部33は、例えば、カメラ10により撮像された運転者Pの顔画像を時系列に沿って比較し、当該運転者Pの顔の位置(角度)の変化を演算する。特定部33は、この運転者Pの顔の位置(角度)の変化から当該運転者Pの顔の移動方向を特定する。特定部33は、例えば、運転者Pの顔画像の位置(角度)が左右方向に沿って変化している場合、運転者Pの顔が左右方向に沿って移動したと特定する。また、特定部33は、運転者Pの顔画像の位置(角度)が上下方向に沿って変化している場合、運転者Pの顔が上下方向に沿って移動したと特定する。特定部33は、制御部34に接続され、特定した結果を当該制御部34に出力する。 The identification unit 33 specifies the moving direction of the driver P's face. The identification unit 33 specifies the moving direction of the driver P's face based on the driver P's face image captured by the camera 10 by a well-known image process. For example, the specific unit 33 compares the face images of the driver P captured by the camera 10 in chronological order, and calculates a change in the position (angle) of the face of the driver P. The identification unit 33 specifies the moving direction of the driver P's face from the change in the position (angle) of the driver P's face. For example, when the position (angle) of the face image of the driver P changes along the left-right direction, the identification unit 33 specifies that the face of the driver P has moved along the left-right direction. Further, when the position (angle) of the face image of the driver P changes along the vertical direction, the specific unit 33 identifies that the face of the driver P has moved along the vertical direction. The specific unit 33 is connected to the control unit 34 and outputs the specified result to the control unit 34.

制御部34は、照射方向変更部22を制御するものである。制御部34は、眼鏡装着判定部31に接続され、当該眼鏡装着判定部31から眼鏡Gの装着の判定結果が出力される。制御部34は、位置検出部32に接続され、当該位置検出部32から瞳孔Eの検出結果が出力される。制御部34は、眼鏡装着判定部31の判定結果及び位置検出部32の検出結果に基づいて照射方向変更部22を制御する。制御部34は、例えば、眼鏡装着判定部31により運転者Pが眼鏡Gを装着していると判定し、且つ、位置検出部32により瞳孔Eの位置を検出できる場合、LED21aから照射する光の照射方向を維持する。 The control unit 34 controls the irradiation direction changing unit 22. The control unit 34 is connected to the spectacles wearing determination unit 31, and the spectacles wearing determination unit 31 outputs the determination result of wearing the spectacles G. The control unit 34 is connected to the position detection unit 32, and the detection result of the pupil E is output from the position detection unit 32. The control unit 34 controls the irradiation direction changing unit 22 based on the determination result of the eyeglass wearing determination unit 31 and the detection result of the position detection unit 32. For example, when the control unit 34 determines that the driver P is wearing the spectacles G by the spectacles wearing determination unit 31, and the position detection unit 32 can detect the position of the pupil E, the control unit 34 emits light from the LED 21a. Maintain the irradiation direction.

一方、制御部34は、眼鏡装着判定部31により運転者Pが眼鏡Gを装着していると判定し、且つ、位置検出部32により瞳孔Eの位置を検出できない場合、照射方向変更部22を制御し、LED21aから照射する光の照射方向を現在の照射方向とは異なる方向に変更する。制御部34は、例えば、LED21aから基準照射方向とは異なる第1照射方向に光を照射した際に、位置検出部32により瞳孔Eの位置を検出できない場合(図2参照)、照射方向変更部22を制御し第1照射方向を一旦基準照射方向に設定する。次に、制御部34は、この基準照射方向から第1照射方向とは異なる第2照射方向に設定し(図3参照)、当該第2照射方向に沿って光源21から光を照射する。ここで、第2照射方向は、例えば、基準照射方向から第1照射方向に移動させる向きとは別の向きに移動させた方向である。また、第2照射方向は、基準照射方向から第1照射方向に移動させる向きと同じ向きに移動させ、第1照射方向よりも基準照射方向から離れた方向でもよい。 On the other hand, when the control unit 34 determines that the driver P is wearing the spectacles G by the spectacles wearing determination unit 31 and the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 uses the irradiation direction changing unit 22. It is controlled and the irradiation direction of the light emitted from the LED 21a is changed to a direction different from the current irradiation direction. For example, when the control unit 34 irradiates light from the LED 21a in the first irradiation direction different from the reference irradiation direction, the position detection unit 32 cannot detect the position of the pupil E (see FIG. 2), the irradiation direction changing unit 22 is controlled and the first irradiation direction is once set to the reference irradiation direction. Next, the control unit 34 sets the reference irradiation direction to a second irradiation direction different from the first irradiation direction (see FIG. 3), and irradiates light from the light source 21 along the second irradiation direction. Here, the second irradiation direction is, for example, a direction of movement from the reference irradiation direction to a direction different from the direction of movement from the first irradiation direction. Further, the second irradiation direction may be moved in the same direction as the direction of movement from the reference irradiation direction to the first irradiation direction, and may be a direction farther from the reference irradiation direction than the first irradiation direction.

更に、制御部34は、特定部33により特定された運転者Pの顔の移動方向に基づいて照射方向変更部22を制御する。制御部34は、例えば、位置検出部32により瞳孔Eの位置を検出不可のときに、特定部33により特定された特定移動方向に運転者Pの顔が移動した際に、位置検出部32により瞳孔Eの位置を検出可能となった場合、この特定移動方向を有用な移動方向と判定し記憶部(図示省略)に記憶しておく。その後、制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、LED21aから照射する光の照射方向を、記憶部に記憶された特定移動方向とは逆方向にずらす。 Further, the control unit 34 controls the irradiation direction changing unit 22 based on the moving direction of the face of the driver P specified by the specific unit 33. For example, when the position of the pupil E cannot be detected by the position detection unit 32 and the face of the driver P moves in the specific movement direction specified by the specific unit 33, the control unit 34 uses the position detection unit 32. When the position of the pupil E can be detected, this specific moving direction is determined to be a useful moving direction and stored in a storage unit (not shown). After that, when the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 shifts the irradiation direction of the light emitted from the LED 21a in the direction opposite to the specific movement direction stored in the storage unit.

具体的には、制御部34は、例えば、運転者Pの顔が上下方向の上側に移動した際に、位置検出部32により瞳孔Eの位置を検出可能となった場合、この上下方向の上側を有用な移動方向と判定する。そして、制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、LED21aから照射する光の照射方向を、上下方向の上側の反対方向である上下方向の下側にずらす。これにより、制御部34は、運転者Pの瞳孔Eと眼鏡Gの反射光Lとが重畳することを抑制できる。 Specifically, for example, when the face of the driver P moves upward in the vertical direction, the control unit 34 can detect the position of the pupil E by the position detecting unit 32, and then the upper side in the vertical direction. Is determined to be a useful moving direction. Then, when the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 shifts the irradiation direction of the light emitted from the LED 21a to the lower side in the vertical direction, which is the opposite direction of the upper side in the vertical direction. As a result, the control unit 34 can suppress the superposition of the pupil E of the driver P and the reflected light L of the spectacles G.

別の動作例では、制御部34は、例えば、運転者Pの顔が左右方向の左側に移動した際に、位置検出部32により瞳孔Eの位置を検出可能となった場合、この左右方向の左側を有用な移動方向と判定する。そして、制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、LED21aから照射する光の照射方向を、左右方向の左側の反対方向である左右方向の右側にずらす。これにより、制御部34は、運転者Pの瞳孔Eと眼鏡Gの反射光Lとが重畳することを抑制できる。 In another operation example, when the position detection unit 32 can detect the position of the pupil E when the face of the driver P moves to the left side in the left-right direction, for example, the control unit 34 is in the left-right direction. The left side is judged to be a useful moving direction. Then, when the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 shifts the irradiation direction of the light emitted from the LED 21a to the right side in the left-right direction, which is the opposite direction to the left side in the left-right direction. As a result, the control unit 34 can suppress the superposition of the pupil E of the driver P and the reflected light L of the spectacles G.

次に、検出システム1の動作例について説明する。図4は、実施形態に係る検出システム1の動作例を示すフローチャートである。検出システム1において、制御部34は、図4に示すように、カメラ10から運転者Pの顔画像を取得する(ステップS1)。次に、制御部34は、顔認識ミドルウェアに運転者Pの顔画像を入力する(ステップS2)。制御部34は、例えば、顔認識ミドルウェアを構成する眼鏡装着判定部31及び位置検出部32に運転者Pの顔画像を入力する。 Next, an operation example of the detection system 1 will be described. FIG. 4 is a flowchart showing an operation example of the detection system 1 according to the embodiment. In the detection system 1, the control unit 34 acquires the face image of the driver P from the camera 10 as shown in FIG. 4 (step S1). Next, the control unit 34 inputs the face image of the driver P into the face recognition middleware (step S2). The control unit 34 inputs the face image of the driver P to, for example, the eyeglasses wearing determination unit 31 and the position detection unit 32 that constitute the face recognition middleware.

次に、眼鏡装着判定部31は、運転者Pが眼鏡Gを装着しているか否かを判定する(ステップS3)。眼鏡装着判定部31は、例えば、画像のパターンマッチング等の周知の画像処理により運転者Pの眼鏡Gの装着を判定する。制御部34は、眼鏡装着判定部31により運転者Pが眼鏡Gを装着していると判定した場合(ステップS3;Yes)、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能であるか否かを判定する(ステップS4)。位置検出部32は、例えば、画像のパターンマッチング等の周知の画像処理により運転者Pの瞳孔Eの位置を検出する。制御部34は、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能であると判定した場合(ステップS4;Yes)、瞳孔Eを検出する処理を終了する。一方、制御部34は、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能でないと判定した場合(ステップS4;No)、反射光Lにより瞳孔Eが検出できないと判定する(ステップS5)。 Next, the spectacles wearing determination unit 31 determines whether or not the driver P is wearing the spectacles G (step S3). The spectacles wearing determination unit 31 determines the wearing of the spectacles G of the driver P by, for example, well-known image processing such as image pattern matching. When the control unit 34 determines that the driver P is wearing the spectacles G by the spectacles wearing determination unit 31 (step S3; Yes), the position detection unit 32 can detect the pupils E of both eyes of the driver P. It is determined whether or not it is (step S4). The position detection unit 32 detects the position of the pupil E of the driver P by, for example, a well-known image process such as image pattern matching. When the position detection unit 32 determines that the pupil E of both eyes of the driver P can be detected by the control unit 34 (step S4; Yes), the control unit 34 ends the process of detecting the pupil E. On the other hand, when the position detection unit 32 determines that the pupil E of both eyes of the driver P cannot be detected (step S4; No), the control unit 34 determines that the pupil E cannot be detected by the reflected light L (step). S5).

そして、制御部34は、LED21aから光を照射する照射方向を一旦基準照射方向に設定する(ステップS6)。制御部34は、例えば、照射方向変更部22を制御し、LED21aの上下方向及び左右方向を変更し、当該LED21aの向きを変更することにより、当該LED21aから光を照射する照射方向を一旦基準照射方向に設定する。次に、制御部34は、現在の照射方向とは異なる照射方向に光を照射するように制御する(ステップS7)。制御部34は、例えば、LED21aから光を照射する照射方向を、基準照射方向から前回の第1照射方向とは異なる第2照射方向に設定し、当該第2照射方向に沿ってLED21aから光を照射する。このとき、制御部34は、例えば、上述の特定移動方向が記憶部に記憶されている場合、最初に、この特定移動方向に基づいて第2照射方向を設定する。これにより、制御部34は、運転者Pの瞳孔Eの位置を検出する時間を短縮することができる。 Then, the control unit 34 once sets the irradiation direction of irradiating the light from the LED 21a to the reference irradiation direction (step S6). The control unit 34 controls, for example, the irradiation direction changing unit 22, changes the vertical direction and the horizontal direction of the LED 21a, and changes the direction of the LED 21a, thereby temporarily irradiating the irradiation direction from the LED 21a with reference. Set in the direction. Next, the control unit 34 controls to irradiate the light in an irradiation direction different from the current irradiation direction (step S7). For example, the control unit 34 sets the irradiation direction for irradiating light from the LED 21a to a second irradiation direction different from the previous first irradiation direction from the reference irradiation direction, and emits light from the LED 21a along the second irradiation direction. Irradiate. At this time, for example, when the above-mentioned specific movement direction is stored in the storage unit, the control unit 34 first sets the second irradiation direction based on the specific movement direction. As a result, the control unit 34 can shorten the time for detecting the position of the pupil E of the driver P.

次に、制御部34は、カメラ10から運転者Pの顔画像を取得し(ステップS8)、顔認識ミドルウェアに運転者Pの顔画像を入力する(ステップS9)。そして、制御部34は、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能であるか否かを判定する(ステップS10)。制御部34は、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能である場合(ステップS10;Yes)、処理を終了する。一方、制御部34は、位置検出部32により運転者Pの両眼の瞳孔Eを検出可能でない場合(ステップS10;No)、上述のステップS6に戻り、LED21aから光を照射する照射方向を一旦基準照射方向に設定する(ステップS6)。なお、制御部34は、上述のステップS3で、眼鏡装着判定部31により運転者Pが眼鏡Gを装着していないと判定した場合(ステップS3;No)、処理を終了する。 Next, the control unit 34 acquires the face image of the driver P from the camera 10 (step S8), and inputs the face image of the driver P into the face recognition middleware (step S9). Then, the control unit 34 determines whether or not the position detection unit 32 can detect the pupils E of both eyes of the driver P (step S10). When the position detection unit 32 can detect the pupils E of both eyes of the driver P (step S10; Yes), the control unit 34 ends the process. On the other hand, when the position detection unit 32 cannot detect the pupils E of both eyes of the driver P (step S10; No), the control unit 34 returns to the above-mentioned step S6 and temporarily sets the irradiation direction of irradiating the light from the LED 21a. The reference irradiation direction is set (step S6). When the control unit 34 determines in step S3 above that the driver P is not wearing the glasses G by the eyeglasses wearing determination unit 31 (step S3; No), the control unit 34 ends the process.

以上のように、実施形態に係る検出システム1は、LEDユニット20と、カメラ10と、眼鏡装着判定部31と、位置検出部32と、制御部34とを備える。LEDユニット20は、光源21及び照射方向変更部22を有する。光源21は、車両の運転者Pの顔に向けて光を照射する。照射方向変更部22は、光源21から運転者Pの顔に向けて照射する光の照射方向を変更する。カメラ10は、運転者Pの顔に照射された光による反射光Lにより画像を撮像する。眼鏡装着判定部31は、カメラ10により撮像された画像に基づいて運転者Pの眼鏡Gの装着を判定する。位置検出部32は、カメラ10により撮像された画像に基づいて運転者Pの眼における瞳孔Eの位置を検出する。制御部34は、眼鏡装着判定部31の判定結果及び位置検出部32の検出結果に基づいて照射方向変更部22を制御する。制御部34は、眼鏡装着判定部31により運転者Pが眼鏡Gを装着していると判定し、且つ、位置検出部32により瞳孔Eの位置を検出できない場合、照射方向変更部22を制御し光源21から照射する光の照射方向を現在の照射方向とは異なる方向に変更し瞳孔Eの位置を検出するように制御する。 As described above, the detection system 1 according to the embodiment includes the LED unit 20, the camera 10, the eyeglass wearing determination unit 31, the position detection unit 32, and the control unit 34. The LED unit 20 has a light source 21 and an irradiation direction changing unit 22. The light source 21 irradiates light toward the face of the driver P of the vehicle. The irradiation direction changing unit 22 changes the irradiation direction of the light emitted from the light source 21 toward the driver P's face. The camera 10 captures an image by the reflected light L due to the light applied to the face of the driver P. The eyeglass wearing determination unit 31 determines that the driver P wears the eyeglasses G based on the image captured by the camera 10. The position detection unit 32 detects the position of the pupil E in the eyes of the driver P based on the image captured by the camera 10. The control unit 34 controls the irradiation direction changing unit 22 based on the determination result of the eyeglass wearing determination unit 31 and the detection result of the position detection unit 32. When the control unit 34 determines that the driver P is wearing the spectacles G by the spectacles wearing determination unit 31 and the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 controls the irradiation direction changing unit 22. The irradiation direction of the light emitted from the light source 21 is changed to a direction different from the current irradiation direction, and the position of the pupil E is controlled to be detected.

この構成により、検出システム1は、運転者Pの瞳孔Eと眼鏡Gの反射光Lとが重畳することを抑制できる。また、検出システム1は、LED21aの光量を維持した状態で運転者Pの顔画像を撮像することができるので、LED21aの個数を増加する必要がなく、また放射強度を強める必要がない。これにより、検出システム1は、排熱を行う排熱装置を設置する必要がないので、排熱装置の設置によるシステムの大型化や製造コストの増加を抑制することができる。この結果、検出システム1は、運転者Pが眼鏡Gを装着している場合でも運転者Pの瞳孔Eの位置を適正に検出することができる。 With this configuration, the detection system 1 can suppress the superposition of the pupil E of the driver P and the reflected light L of the spectacles G. Further, since the detection system 1 can capture the face image of the driver P while maintaining the amount of light of the LED 21a, it is not necessary to increase the number of the LEDs 21a and it is not necessary to increase the radiation intensity. As a result, since it is not necessary to install a heat exhaust device for exhausting heat in the detection system 1, it is possible to suppress an increase in the size of the system and an increase in manufacturing cost due to the installation of the heat exhaust device. As a result, the detection system 1 can properly detect the position of the pupil E of the driver P even when the driver P wears the glasses G.

上記検出システム1において、光源21は、光を照射するLED21aを有する。照射方向変更部22は、LED21aの向きを変更することで、光源21から照射する光の照射方向を変更する。この構成により、検出システム1は、運転者Pの瞳孔Eと眼鏡Gの反射光Lとが重畳することを抑制できる。 In the detection system 1, the light source 21 has an LED 21a that irradiates light. The irradiation direction changing unit 22 changes the irradiation direction of the light emitted from the light source 21 by changing the direction of the LED 21a. With this configuration, the detection system 1 can suppress the superposition of the pupil E of the driver P and the reflected light L of the spectacles G.

上記検出システム1において、LEDユニット20は、初期状態では、予め定められた基準照射方向に沿って光を照射する。制御部34は、光源21から基準照射方向とは異なる第1照射方向に光を照射した際に位置検出部32により瞳孔Eの位置を検出できない場合、照射方向変更部22を制御し第1照射方向を一旦基準照射方向に設定し、次に、この基準照射方向から第1照射方向とは異なる第2照射方向に設定し光源21から光を照射する。この構成により、検出システム1は、光源21から光を照射する照射方向を適正に設定することができる。 In the detection system 1, in the initial state, the LED unit 20 irradiates light along a predetermined reference irradiation direction. When the position detection unit 32 cannot detect the position of the pupil E when the light source 21 irradiates light in the first irradiation direction different from the reference irradiation direction, the control unit 34 controls the irradiation direction changing unit 22 to perform the first irradiation. The direction is once set to the reference irradiation direction, then the reference irradiation direction is set to a second irradiation direction different from the first irradiation direction, and the light source 21 irradiates light. With this configuration, the detection system 1 can appropriately set the irradiation direction in which the light is emitted from the light source 21.

上記検出システム1は、カメラ10により撮像された画像に基づいて特定した運転者Pの顔の位置から当該運転者Pの顔の移動方向を特定する特定部33を備える。制御部34は、位置検出部32により瞳孔Eの位置を検出不可のときに、特定部33により特定された特定移動方向に運転者Pの顔が移動した際に位置検出部32により瞳孔Eの位置を検出可能となり、次に、制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、光源21から照射する光の照射方向を、特定移動方向とは逆方向にずらす。この構成により、検出システム1は、位置検出部32により瞳孔Eの位置を検出可能である可能性の高い照射方向を、特定移動方向に基づいて設定することができるので、運転者Pの瞳孔Eの位置を検出する時間を短縮することができる。 The detection system 1 includes a specific unit 33 that specifies the moving direction of the driver P's face from the position of the driver P's face specified based on the image captured by the camera 10. When the position of the pupil E cannot be detected by the position detection unit 32, the control unit 34 moves the face of the driver P in the specific movement direction specified by the specific unit 33, and the position detection unit 32 causes the pupil E to move. The position can be detected, and then, when the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 shifts the irradiation direction of the light emitted from the light source 21 in the direction opposite to the specific movement direction. With this configuration, the detection system 1 can set the irradiation direction in which the position of the pupil E is likely to be detected by the position detection unit 32 based on the specific movement direction. Therefore, the pupil E of the driver P can be set. It is possible to shorten the time for detecting the position of.

〔変形例〕
次に、実施形態の変形例について説明する。照射方向変更部22は、LED21aの向きを変更し、光源21から照射する光の照射方向を変更する例について説明したが、これに限定されず、例えば、反射ミラー等により光の照射方向を変更するようにしてもよい。
[Modification example]
Next, a modified example of the embodiment will be described. The irradiation direction changing unit 22 has described an example in which the direction of the LED 21a is changed to change the irradiation direction of the light emitted from the light source 21, but the present invention is not limited to this, and the irradiation direction of the light is changed by, for example, a reflection mirror or the like. You may try to do it.

制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、第1照射方向を一旦基準照射方向に設定し、次に、この基準照射方向から第2照射方向に設定する例について説明したが、これに限定されない。制御部34は、例えば、第1照射方向を一旦基準照射方向に設定せず、第1照射方向から直接、第2照射方向に設定してもよい。 When the position detection unit 32 cannot detect the position of the pupil E, the control unit 34 describes an example in which the first irradiation direction is once set to the reference irradiation direction, and then the reference irradiation direction is set to the second irradiation direction. However, it is not limited to this. For example, the control unit 34 may set the first irradiation direction to the second irradiation direction directly from the first irradiation direction without setting the first irradiation direction to the reference irradiation direction once.

制御部34は、位置検出部32により瞳孔Eの位置を検出できない場合、光源21から照射する光の照射方向を、特定移動方向とは逆方向にずらす例について説明したが、この特定移動方向に基づく制御を行わなくてもよい。 The control unit 34 has described an example in which the irradiation direction of the light emitted from the light source 21 is shifted in the direction opposite to the specific movement direction when the position of the pupil E cannot be detected by the position detection unit 32. It is not necessary to perform the control based on.

検出システム1は、運転者Pの瞳孔Eを検出する例について説明したが、これに限定されず、運転者P以外の乗員の瞳孔Eを検出するようにしてもよい。 The detection system 1 has described an example of detecting the pupil E of the driver P, but the present invention is not limited to this, and the pupil E of an occupant other than the driver P may be detected.

運転者Pの眼のおける検出対象は、瞳孔Eである例について説明したが、これに限定されず、例えば、虹彩等を含んでもよい。 Although the example in which the detection target in the eyes of the driver P is the pupil E has been described, the detection target is not limited to this, and may include, for example, an iris.

運転者Pの眼のおける検出対象は、両眼の瞳孔Eである例について説明したが、これに限定されず、例えば、片眼の瞳孔Eであってもよい。 Although the example in which the detection target in the eyes of the driver P is the pupil E of both eyes has been described, the detection target is not limited to this, and may be, for example, the pupil E of one eye.

カメラ10は、近赤外線カメラである例について説明したが、これに限定されず、その他のカメラであってもよい。 Although the example in which the camera 10 is a near-infrared camera has been described, the camera 10 is not limited to this, and may be another camera.

LEDユニット20は、近赤外線を照射する例について説明したが、これに限定されず、その他の光を照射してもよい。 Although the example of irradiating the LED unit 20 with near infrared rays has been described, the LED unit 20 is not limited to this, and may irradiate other light.

眼鏡装着判定部31は、画像のパターンマッチングにより運転者Pの眼鏡Gの装着を判定する例について説明したが、これに限定されず、その他の方法により運転者Pの眼鏡Gの装着を判定してもよい。 The spectacles wearing determination unit 31 has described an example of determining the wearing of the spectacles G of the driver P by pattern matching of images, but the present invention is not limited to this, and the spectacles wearing determination unit 31 determines the wearing of the spectacles G of the driver P by another method. You may.

位置検出部32は、画像のパターンマッチングにより運転者Pの瞳孔Eの位置を検出する例について説明したが、これに限定されず、その他の方法により運転者Pの瞳孔Eの位置を検出してもよい。 The position detection unit 32 has described an example of detecting the position of the pupil E of the driver P by pattern matching of images, but the present invention is not limited to this, and the position detection unit 32 detects the position of the pupil E of the driver P by another method. May be good.

1 検出システム
10 カメラ(撮像部)
20 LEDユニット(光照射ユニット)
21 光源
21a LED(発光素子)
22 照射方向変更部
31 眼鏡装着判定部
32 位置検出部
33 特定部
34 制御部
E 瞳孔(検出対象)
L 反射光
P 運転者(乗員)
1 Detection system 10 Camera (imaging unit)
20 LED unit (light irradiation unit)
21 Light source 21a LED (light emitting element)
22 Irradiation direction changing unit 31 Glasses wearing judgment unit 32 Position detection unit 33 Specific unit 34 Control unit E Pupil (detection target)
L Reflected light P Driver (occupant)

Claims (4)

車両の乗員の顔に向けて光を照射する光源、及び、前記光源から前記乗員の顔に向けて照射する光の照射方向を変更する照射方向変更部を有する光照射ユニットと、
前記乗員の顔に照射された光による反射光により画像を撮像する撮像部と、
前記撮像部により撮像された画像に基づいて前記乗員の眼鏡の装着を判定する眼鏡装着判定部と、
前記撮像部により撮像された画像に基づいて前記乗員の眼における検出対象の位置を検出する位置検出部と、
前記眼鏡装着判定部の判定結果及び前記位置検出部の検出結果に基づいて前記照射方向変更部を制御する制御部と、を備え、
前記制御部は、前記眼鏡装着判定部により前記乗員が前記眼鏡を装着していると判定し、且つ、前記位置検出部により前記検出対象の位置を検出できない場合、前記照射方向変更部を制御し前記光源から照射する光の照射方向を現在の照射方向とは異なる方向に変更し前記検出対象の位置を検出するように制御することを特徴とする検出システム。
A light source that irradiates light toward the face of the occupant of the vehicle, and a light irradiation unit having an irradiation direction changing unit that changes the irradiation direction of light radiated from the light source toward the face of the occupant.
An imaging unit that captures an image by reflected light from the light radiated on the occupant's face,
A spectacles wearing determination unit that determines the wearing of the occupant's spectacles based on the image captured by the imaging unit, and
A position detection unit that detects the position of the detection target in the eyes of the occupant based on the image captured by the imaging unit, and
A control unit that controls the irradiation direction changing unit based on the determination result of the eyeglass wearing determination unit and the detection result of the position detection unit is provided.
The control unit controls the irradiation direction changing unit when the spectacles wearing determination unit determines that the occupant is wearing the spectacles and the position detection unit cannot detect the position of the detection target. A detection system characterized in that the irradiation direction of light emitted from the light source is changed to a direction different from the current irradiation direction, and the position of the detection target is controlled to be detected.
前記光源は、光を照射する発光素子を有し、
前記照射方向変更部は、前記発光素子の向きを変更することで、前記光源から照射する光の照射方向を変更する請求項1に記載の検出システム。
The light source has a light emitting element that irradiates light.
The detection system according to claim 1, wherein the irradiation direction changing unit changes the irradiation direction of the light emitted from the light source by changing the direction of the light emitting element.
前記光照射ユニットは、初期状態では、予め定められた基準照射方向に沿って光を照射し、
前記制御部は、前記光源から前記基準照射方向とは異なる第1照射方向に光を照射した際に前記位置検出部により前記検出対象の位置を検出できない場合、前記照射方向変更部を制御し前記第1照射方向を一旦前記基準照射方向に設定し、次に、前記基準照射方向から前記第1照射方向とは異なる第2照射方向に設定し前記光源から光を照射する請求項1又は2に記載の検出システム。
In the initial state, the light irradiation unit irradiates light along a predetermined reference irradiation direction.
When the control unit irradiates light from the light source in a first irradiation direction different from the reference irradiation direction and the position of the detection target cannot be detected by the position detection unit, the control unit controls the irradiation direction changing unit. According to claim 1 or 2, the first irradiation direction is once set to the reference irradiation direction, then the reference irradiation direction is set to a second irradiation direction different from the first irradiation direction, and light is emitted from the light source. The detection system described.
前記撮像部により撮像された画像に基づいて特定した前記乗員の顔の位置から当該乗員の顔の移動方向を特定する特定部を更に備え、
前記制御部は、前記位置検出部により前記検出対象の位置を検出不可のときに、前記特定部により特定された特定移動方向に前記乗員の顔が移動した際に前記位置検出部により前記検出対象の位置を検出可能となり、次に、前記位置検出部により前記検出対象の位置を検出できない場合、前記光源から照射する光の照射方向を、前記特定移動方向とは逆方向にずらす請求項1〜3のいずれか1項に記載の検出システム。
A specific unit for specifying the moving direction of the occupant's face from the position of the occupant's face specified based on the image captured by the imaging unit is further provided.
When the position of the detection target cannot be detected by the position detection unit, the control unit moves the occupant's face in the specific movement direction specified by the specific unit, and the position detection unit detects the target. If the position of the detection target cannot be detected by the position detection unit, then the irradiation direction of the light emitted from the light source is shifted in the direction opposite to the specific movement direction. The detection system according to any one of 3.
JP2019115166A 2019-06-21 2019-06-21 Detection system Pending JP2021002181A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019115166A JP2021002181A (en) 2019-06-21 2019-06-21 Detection system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019115166A JP2021002181A (en) 2019-06-21 2019-06-21 Detection system

Publications (1)

Publication Number Publication Date
JP2021002181A true JP2021002181A (en) 2021-01-07

Family

ID=73995023

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019115166A Pending JP2021002181A (en) 2019-06-21 2019-06-21 Detection system

Country Status (1)

Country Link
JP (1) JP2021002181A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023041097A (en) * 2021-09-13 2023-03-24 矢崎総業株式会社 detection system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023041097A (en) * 2021-09-13 2023-03-24 矢崎総業株式会社 detection system
EP4156117A1 (en) * 2021-09-13 2023-03-29 Yazaki Corporation Detection system

Similar Documents

Publication Publication Date Title
US20180319407A1 (en) Integration of occupant monitoring systems with vehicle control systems
CN101161200B (en) Eye condition detection apparatus and method for installing same
CN106458083B (en) Vehicle head lamp control device
JP2006252138A (en) Apparatus for photographing driver and apparatus for monitoring driver
JP4497305B2 (en) Driver status determination device
US20120002028A1 (en) Face image pick-up apparatus for vehicle
WO2017090319A1 (en) Device for detecting direction of line of sight, and system for detecting direction of line of sight
JP6119136B2 (en) Condition monitoring device
JP2007004448A (en) Line-of-sight detecting apparatus
JP2007091081A (en) Dazzling prevention system for vehicle
JP7369184B2 (en) Driver attention state estimation
JP2006248365A (en) Back monitoring mirror of movement body, driver photographing device, driver monitoring device and safety driving support device
JP6433383B2 (en) Floodlight device
JP2007216722A (en) Object detection system, operating device control system, and vehicle
US20220377223A1 (en) High performance bright pupil eye tracking
JP2020138643A (en) Reading light controller and reading light system
JP4269998B2 (en) Imaging device
JP2018088647A (en) Eyeball tracking device and imaging system
JP2021002181A (en) Detection system
JP2007029712A (en) Visual axis detecting apparatus
JP5352266B2 (en) Anti-glare device
JP2021527980A (en) High frame rate image preprocessing system and method
WO2021043931A1 (en) Determination of gaze direction
JP2009096323A (en) Camera illumination control device
US20230256908A1 (en) Imaging system for a vehicle