CN102310817A - 车辆用脸部图像摄像装置 - Google Patents

车辆用脸部图像摄像装置 Download PDF

Info

Publication number
CN102310817A
CN102310817A CN2011101938881A CN201110193888A CN102310817A CN 102310817 A CN102310817 A CN 102310817A CN 2011101938881 A CN2011101938881 A CN 2011101938881A CN 201110193888 A CN201110193888 A CN 201110193888A CN 102310817 A CN102310817 A CN 102310817A
Authority
CN
China
Prior art keywords
driver
bearing circle
face image
vehicle
camera head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011101938881A
Other languages
English (en)
Inventor
高桥昭夫
植田信介
山本诚一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2010153021A external-priority patent/JP2012011975A/ja
Priority claimed from JP2010153022A external-priority patent/JP2012011976A/ja
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN102310817A publication Critical patent/CN102310817A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147—Details of sensors, e.g. sensor lenses
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B60K35/235—Head-up displays [HUD] with means for detecting the driver's gaze direction or eye points
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0005—Dashboard
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0033—Rear-view mirrors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Vascular Medicine (AREA)
  • Ophthalmology & Optometry (AREA)
  • Human Computer Interaction (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供一种车辆用脸部图像摄像装置，其设置在具有方向盘和倾斜机构的车辆上，并具有摄像机构，所述方向盘配置在车室内的驾驶席的前方，所述倾斜机构调整该方向盘相对于铅直方向的倾斜角度，所述摄像机构与所述方向盘相比配置在车辆前方侧，对落座于所述驾驶席上的驾驶者的脸部图像进行拍摄，所述车辆用脸部图像摄像装置的特征在于，所述摄像机构配置在如下位置：当从正面观察所述方向盘时，该位置位于该方向盘的中心轴线的铅直上方且与通过所述倾斜机构而移动到上限位置时的所述方向盘的上端部相比位于铅直上方。

Description

车辆用脸部图像摄像装置
技术领域
本发明涉及一种车辆用脸部图像摄像装置，该车辆用脸部图像摄像装置搭载于车辆上，为了检测驾驶者的脸部朝向和视线方向等而对驾驶者的脸部图像进行拍摄。
背景技术
将脸部图像摄像装置作为用于识别驾驶中驾驶者举动的装置而搭载的车辆已被公知。所述脸部图像摄像装置通过CCD照相机等摄像机构来拍摄坐在驾驶席上的驾驶者的脸部，并解析该摄像图像从而检测出驾驶者的脸部朝向和视线方向等(例如，参照专利文献1)。
专利文献1所记载的脸部图像摄像装置是，将作为摄像机构的照相机和红外线发光器一体化为摄像机组件，该摄像机组件安装在具有倾斜机构的转向柱上。在所述脸部图像摄像装置中，由于摄像机组件与转向柱连动而一体移动，因此即使通过倾斜机构的操作调整了方向盘的相对于铅直方向的倾斜角度，也能够通过方向盘的辐条间的开口，借助于发光器投向驾驶者的光和照相机拍摄驾驶者的脸部图像。
专利文献1：日本特开2007-69680号公报
但是，在该现有的脸部图像摄像装置中，由于摄像机通过方向盘的辐条间的开口拍摄驾驶者的脸部，因此当驾驶者对方向盘进行转向操作时照相机与驾驶者的脸部之间有时会被驾驶者的手臂或方向盘遮挡，在该情况下有可能无法适当地拍摄驾驶者的脸部。
此外，在现有的脸部图像摄像装置中，由于摄像机组件是通过随着倾斜机构的动作而改变相对于铅直方向的倾斜角度的结构，因此照相机相对于方向盘的辐条间的开口的位置能够被适当地维持。但是，根据倾斜角度，照相机不一定恰好朝向驾驶者的脸部位置，结果是也可能产生照相机的拍摄方向朝着不适当的方向的情况。
作为该情况的应对手段，也考虑到了在驾驶席和副驾驶席之间的附近固定设置照相机。但是，在该情况下，不仅所设置的照相机给眼见者以外观上不协调的感觉，或者妨碍驾驶者的视野，而且还具有照相机难以从正面适当地拍摄驾驶者的脸部、特别是两个眼镜的问题。
此外，在现有的脸部图像摄像装置中，由于作为摄像机构的照相机和红外线发光器作为摄像机组件接近配置，因此在驾驶者配戴眼镜的情况下，从发光器发出的光在眼镜和驾驶者眼球双方上反射时，由这些反射所形成的2个亮点在从照相机观察时可能会重合。在这种眼镜上的亮点与眼球上的亮点重合的情况下，有可能无法恰当地拍摄眼球上的亮点，无法正确地进行驾驶者的视线方向的检测等。
发明内容
因此，本发明提供一种车辆用脸部图像摄像装置，不论是否通过倾斜机构进行方向盘相对于铅直方向的角度调整，该车辆用脸部图像摄像装置都能够始终恰当地拍摄驾驶者的脸部的正面。本发明另外还提供一种即使在驾驶者佩戴眼镜的情况下也能够用摄像机构正确地拍摄驾驶者眼球上的亮点的车辆用脸部图像摄像装置。
本发明涉及的车辆用脸部图像摄像装置为解决上述课题而采用以下手段。
(1)本发明第一方式的车辆用脸部图像摄像装置，设置在具有方向盘和倾斜机构的车辆上，并具有摄像机构，所述方向盘配置在车室内的驾驶席的前方，所述倾斜机构调整该方向盘相对于铅直方向的倾斜角度，所述摄像机构对落座于所述驾驶席上的驾驶者的脸部图像进行拍摄，其中，
所述摄像机构配置在如下位置：当从正面观察所述方向盘时，该位置位于该方向盘的中心轴线的铅直上方且与通过所述倾斜机构而移动到上限位置时的所述方向盘的上端部相比位于铅直上方。
(2)在上述(1)所述的车辆用脸部图像摄像装置中，也可以采用以下结构：还具有向所述驾驶者投射可见光或者非可见光的发光机构，所述发光机构配置在如下位置：当从正面观察所述方向盘时，该位置是不与操作所述方向盘的所述驾驶者的手臂的可动范围重合的位置，且相对于所述方向盘的中心轴线处于车宽方向侧方且处于所述方向盘的外侧。
(3)本发明第二方式的车辆用脸部图像摄像装置，设置在具有方向盘和倾斜机构的车辆上，并具有摄像机构和发光机构，所述方向盘配置在车室内的驾驶席的前方，所述倾斜机构调整该方向盘相对于铅直方向的倾斜角度，所述摄像机构对落座于所述驾驶席上的驾驶者的脸部图像进行拍摄，所述发光机构向所述驾驶者的眼球投射可见光或者非可见光，其中，所述摄像机构和所述发光机构以分别在铅直方向和车宽方向上相互离开规定距离以上的方式被配置；所述规定距离被设定成是使得眼镜上亮点和眼球上亮点在从所述摄像机构观察时不重合的距离，所述眼镜上亮点是由所述可见光或者非可见光在所述驾驶者佩戴的眼镜上反射而成的，所述眼球上亮点是由所述发光机构投射的所述可见光或者非可见光在所述驾驶者的眼球上反射而成的。
(4)在上述(3)所述的车辆用脸部图像摄像装置中，也可以采用以下结构：在所述摄像机构与落座于所述驾驶席的所述驾驶者的眼球位置相比配置在铅直方向上侧的情况下，所述发光机构与所述摄像机构相比配置在铅直方向上侧，在所述摄像机构与所述眼球位置相比配置在铅直方向下侧的情况下，所述发光机构与所述摄像机构相比配置在铅直方向下侧。
发明效果
根据上述(1)所述的车辆用脸部图像摄像装置，不论方向盘由倾斜机构调整的位置如何，在从正面观察方向盘时，摄像机构始终都配置在与所述方向盘的上端部相比位于铅直上方的位置，因此能够事先防止在操作所述方向盘转向时等驾驶者的手臂或方向盘自身遮挡在摄像机构与驾驶者的脸部之间的情况。此外，由于在从正面观察方向盘时，摄像机构配置在所述方向盘的中心轴线的铅直上方的位置，因此能够更加恰当地拍摄驾驶者的脸部正面。
在上述(2)的情况下，发光机构配置在如下位置：当从正面观察方向盘时，相对于所述方向盘的中心轴线处于车宽方向侧方且处于所述方向盘的外侧，并且是不与驾驶者的手臂的可动范围重合的位置，因此能够事先防止驾驶者手臂或方向盘自身遮挡在发光机构与驾驶者的脸部之间的情况。
此外，根据上述(3)所述的车辆用脸部图像摄像装置，即使在驾驶者配戴眼镜的情况下，由于摄像机构和发光机构以分别在铅直方向和车宽方向上离开规定距离以上的方式被配置以使得眼镜上亮点和眼球上亮点在从摄像机构观察时不重合，所以也不会受到眼镜上亮点带来的不好影响，能够更加可靠地检测出驾驶者的眼球上亮点。
另外，摄像机构和投光机构在铅直方向和车宽方向两个方向上离开规定距离以上，因此即使驾驶者的脸部相对于车辆正面在铅直方向或水平方向任一方倾斜时，也能够防止从摄像机构观察到的眼镜上亮点和眼球上亮点的重合。
上述(4)的情况，若摄像机构与驾驶者的眼球位置相比配置在铅直方向上侧，则发光机构与摄像机构相比配置在铅直方向上侧。另一方面，若摄像机构与驾驶者的眼球位置相比配置在铅直方向下侧，则发光机构与摄像机构相比配置在铅直方向下侧。因此，能够使眼镜上亮点和眼球上亮点在铅直方向上适当地离开。
附图说明
图1是表示本发明的第一实施方式所涉及的脸部图像摄像装置的概略结构的车室内的示意性侧视图。
图2是表示采用该第一实施方式所涉及的脸部图像摄像装置的车辆的车室内的主视图。
图3是表示本发明的第二实施方式所涉及的脸部图像摄像装置的概略结构的车室内的示意性侧视图。
图4是表示设置了该第二实施方式所涉及的脸部图像摄像装置的车辆的车室内的主视图。
图5是表示用该第二实施方式所涉及的脸部图像摄像装置拍摄到的脸部图像的图。
图6是表示该第二实施方式所涉及的发光器的不可配置范围的示意性侧视图。
图7是表示本发明的第三实施方式所涉及的脸部图像摄像装置的概略结构的车室内的示意性侧视图。
图8是表示采用该第三实施方式所涉及的脸部图像摄像装置的车辆的车室内的主视图。
图9是表示用该第三实施方式所涉及的脸部图像摄像装置拍摄到的脸部图像的图。
符号说明
1：脸部图像摄像装置；11：方向盘；13：方向盘；13a：上端部；15：倾斜机构；20：CCD照相机(摄像机构)；21：近红外线LED(发光机构)；A：中心轴线；101、101a：脸部图像摄像装置；113：方向盘；120：CCD照相机(摄像机构)；121：近红外线LED(发光机构)；126：眼镜上亮点；128：眼球上亮点；d1：铅直方向的规定距离；d2：车宽方向的规定距离。
具体实施方式
【第一实施方式】
下面，参照附图对本发明的第一实施方式进行说明。
图1是表示第一实施方式所涉及的脸部图像摄像装置1的结构的图，图2是表示设置有脸部图像摄像装置1的车辆的车室内的图。
在这些图中，附图标记11是驾驶者m落座的驾驶席的座椅，附图标记12是设置在驾驶席前面的仪表板，附图标记13是方向盘，附图标记14是支撑未图示的转向轴的转向柱。
方向盘13的相对于铅直方向的倾斜角度能够通过设在转向柱14上的倾斜机构15调整，并且方向盘13的前后方向的位置能够通过设在转向轴上的可可伸缩机构16调整。在图1中，网格线所示的范围是由倾斜机构15和可伸缩机构16实现的方向盘13的大致可动范围。
脸部图像摄像装置1具有：CCD照相机20，其作为拍摄驾驶者m的脸部的摄像机构；近红外线LED 21，其作为向驾驶者m的眼球照射光的发光机构；和控制装置22，其控制CCD照相机20和近红外线LED 21，且基于CCD照相机20的检测信号进行图像处理和解析。利用控制装置22进行了图像处理和解析的结果，例如在不专心警报装置中被利用，当判断为驾驶者m不专心时使警报机构23动作。发光机构并不限于近红外线LED 21，只要是将可见光或者非可见光向乘员的眼球照射的点光源，也可以是其他的。
在利用所述脸部图像摄像装置1进行的图像处理和解析中，例如基于驾驶者m的脸部图像来检测驾驶者m的脸部朝向，并且检测从近红外线LED 21向驾驶者m的眼球照射光时虹膜上的反射点(眼球上亮点)的位置和瞳孔位置，基于虹膜上的反射点和瞳孔之间的距离求出驾驶者m的视线方向。
在所述脸部图像摄像装置1中，在从正面观察方向盘13时，CCD照相机20位于方向盘13的中心轴线A的铅直上方，并且被设置成，即使方向盘13通过倾斜机构15和可伸缩机构16而被调整位置到最大上升位置(上限位置)时，CCD照相机20相对于方向盘13的上端部13a也位于上方，例如设置在仪表板12的上表面。
CCD照相机20的设置高度优选为，即使在方向盘13被调整位置到最大上升位置的状态下，对方向盘13进行转向操作的驾驶者m的手h到达方向盘13的上端部13a，该CCD照相机20相对于该手h也还是位于上方。
此外，在所述脸部图像摄像装置1中，近红外线LED 21设置在仪表板12上的接近驾驶席前方的前支柱17根部的位置。所述近红外线LED 21的设置位置是，在从正面观察方向盘13时不与对方向盘13进行转向操作的驾驶者m的手臂重合的位置，并且是在方向盘13的中心轴线A的车宽方向侧方且位于方向盘13的外侧的位置。
如上所述，所述脸部图像摄像装置1的近红外线LED 21配置在如下位置：在从正面观察方向盘13时，近红外线LED 21位于中心轴线A的铅直上方，并且即使通过倾斜机构15和可伸缩机构16将方向盘13移动到上限位置时，近红外线LED 21相对于方向盘13的上端部13a也还是位于铅直上方。因此，不论方向盘13的调整位置如何，都能够事先防止在方向盘13的转向操作时等驾驶者m的手臂或方向盘13遮挡在CCD照相机20和驾驶者m的脸部之间。
此外，由于所述脸部图像摄像装置1的CCD照相机20配置在当从正面观察方向盘13时处于方向盘13的中心轴线A的铅直上方的位置，因此能够从正面恰当地拍摄驾驶者m的脸部、特别是驾驶者m的双眼。
此外，所述脸部图像摄像装置1的近红外线LED 21配置在：当从正面观察方向盘13时，不与对方向盘13进行转向操作的驾驶者m的手臂重合的位置、并且位于方向盘13的中心轴线A的车宽方向侧方且位于方向盘13的外侧的位置。因此，能够事先防止驾驶者m的手臂或方向盘13遮挡在近红外线LED 21和驾驶者m的脸部(眼球)之间。
本发明并不仅限于上述实施方式，在不脱离其主旨的范围内能够进行各种设计变更。例如，在上述的实施方式中，近红外线LED 21(发光机构)面向驾驶席正面仅在方向盘13的右侧设置一个，但发光机构也可以同样设置在方向盘13的右侧和左侧。
【第二实施方式】
下面，参照图3至图6对本发明的脸部图像摄像装置所涉及的第二实施方式进行说明。
图3是表示本发明的第二实施方式所涉及的脸部图像摄像装置101的结构的图，图4是表示设置有脸部图像摄像装置101的车辆的车室内的图。
在这些图中，附图标记111是驾驶者m1落座的驾驶席的座椅，附图标记112是设置在驾驶席前面的仪表板，附图标记113是方向盘，附图标记114是支撑未图示的转向轴的转向柱。
方向盘113的相对于铅直方向的倾斜角度能够通过设在转向柱114上的倾斜机构115调整，并且方向盘113的前后方向的位置能够通过设在转向轴上的可伸缩机构116调整。
脸部图像摄像装置101具有：CCD照相机120，其作为拍摄驾驶者m1的脸部的摄像机构；近红外线LED 121，其作为向驾驶者m1的眼球127照射光的发光机构；和控制装置122，其控制CCD照相机120和近红外线LED 121，且基于CCD照相机120的检测信号进行图像处理和解析。利用控制装置122进行了图像处理和解析的结果例如在不专心警报装置中被利用，当判断为驾驶者m1不专心时使警报机构123动作。发光机构并不限于近红外线LED 121，只要是将可见光或者非可见光向乘员的眼球127照射的点光源，也可以是其他的。
在利用所述脸部图像摄像装置101进行的图像处理和解析中，例如基于驾驶者m1的脸部图像来检测驾驶者m1的脸部朝向，并且检测从近红外线LED 121向驾驶者m1的眼球127照射光时虹膜上的亮点(眼球上亮点128)的位置和瞳孔位置，基于虹膜上的亮点和瞳孔之间的距离判定驾驶者m1的视线方向。
在所述脸部图像摄像装置101中，在从正面观察方向盘113时，CCD照相机120位于方向盘113的中心轴线A的铅直上方，并且被设置成，即使方向盘113通过倾斜机构115和可伸缩机构116而被调整位置到最大上升位置(上限位置)时，CCD照相机120相对于方向盘113的上端部113a也位于上方，例如设置在仪表板112的上表面。
CCD照相机120的设置高度优选为，即使在方向盘113被调整位置到最大上升位置的状态下，对方向盘113进行转向操作的驾驶者m1的手h1到达方向盘113的上端部113a，该CCD照相机120相对于该手h1也还是位于上方。
所述脸部图像摄像装置101的近红外线LED 121设置在仪表板112上的接近驾驶席前方的前支柱117根部的位置。所述近红外线LED 121的设置位置是，在从正面观察方向盘113时不与对方向盘113进行转向操作的驾驶者m1的手臂重合的位置，并且是在方向盘113的中心轴线A的车宽方向侧方且位于方向盘113的外侧的位置。在第二实施方式的脸部图像摄像装置101中，当方向盘113被调整位置到标准位置时，CCD照相机120和近红外线LED 121配置在位于以方向盘113的中心轴线A1为中心的同心圆上的位置、即距中心轴线A1等距离的位置。
图5是表示用脸部图像摄像装置101拍摄到的图像的图。
如图3、图4所示，CCD照相机120和近红外线LED 121以关于铅直方向和车宽方向分别相互离开规定距离以上的方式配置。在图4中，d1是铅直方向的规定距离，d2是车宽方向的规定距离。铅直方向和车宽方向的各规定距离是假定驾驶者m1配戴眼镜125的状态所确定的距离，如图5所示，是使得由近红外线LED 121发出的光在眼镜125上反射的眼镜上亮点126和由近红外线LED 121发出的光在眼球127的虹膜上反射的眼球上亮点128在从CCD照相机120观察时(由CCD照相机120映现时)相互不重合的距离。所述的各规定距离优选是使得眼镜上亮点126除了相对于眼球上亮点128不重合、相对于眼球127上的瞳孔也不重合的距离。
在第二实施方式的情况下，如图3所示，作为摄像机构的CCD照相机120配置在比落座于座椅111上的驾驶者m1的眼球127的位置靠铅直方向下侧，作为发光机构的近红外线LED 121配置成比CCD照相机120更靠铅直方向下侧。
图6是说明当CCD照相机120配置在比驾驶者m1的眼球127靠铅直方向下侧时，若近红外线LED 121配置在更靠铅直方向下侧则有利的理由。在该图中，附图标记a1是用CCD照相机120拍摄驾驶者m1的眼球127的虹膜区域时的摄像范围，b1是与此时的摄像范围交叉的眼镜125上的区域，是作为反射像映入CCD照相机120的映入范围。
因此，当近红外线LED 121设置在所述映入范围b1的内侧时，眼球127上的近红外线LED 121的像(眼球上亮点128)和眼镜125上的近红外线LED 121的像(眼镜上亮点126)重合着映入CCD照相机120的可能性高。但是，在第二实施方式中，由于近红外线LED 121与CCD照相机120相比进一步配置在铅直方向下侧，因此眼镜125上的近红外线LED 121的像(眼镜上亮点126)相对于眼球127(眼球上亮点128)位于向下方偏移的位置。
如上所述，所述脸部图像摄像装置101以CCD照相机120和近红外线LED 121在铅直方向和车宽方向分别离开规定距离以上的方式配置，使得即使在驾驶者m1配戴眼镜125的情况下，眼镜上亮点126也不会与眼球上亮点128重合着映入CCD照相机120。因此，不会受到由眼镜上亮点126带来的不好影响，能够更加可靠地检测出驾驶者m1的眼球上亮点128。
在所述脸部图像摄像装置101，由于以CCD照相机120和近红外线LED 121在铅直方向和车宽方向两个方向上分别离开规定距离以上的方式进行配置，因此，即使在驾驶者m1的脸部相对于车辆正面在铅直方向和水平方向任一方向上倾斜时，也能够更加可靠地防止眼镜上亮点126与眼球上亮点128重合映入CCD照相机120的情况。
此外，在所述脸部图像摄像装置101中，在CCD照相机120比驾驶者m1的眼球127的位置相比配置在铅直方向下侧的状况下，近红外线LED 121配置在比CCD照相机120相比更靠铅直方向下侧的位置，因此，映入CCD照相机120中的眼镜上亮点126和眼球上亮点128在铅直方向上适当地离开。
接下来，对图7至图9所示的本发明第三实施方式进行说明。
第三实施方式只是作为摄像机构的CCD照相机120和作为发光机构的近红外线LED 121在车辆上的配置与第二实施方式不同，包括车身在内的其他结构与第二实施方式相同。因此，对于与第二实施方式相同的部分标注同一附图标记，并省略重复说明。
在脸部图像摄像装置201中，CCD照相机120设置在车室内的后视镜118的靠驾驶席的下侧角部，近红外线LED 121设置在与车顶部前端侧的车宽方向中央相比靠副驾驶席的部位。在第三实施方式中，CCD照相机120和近红外线LED 121都设置在与驾驶者m1的眼球127的位置相比位于上方的位置，近红外线LED 121以相对于CCD照相机120在铅直方向和车宽方向分别离开规定距离以上的方式配置。
如图9所示，该情况下的各方向的规定距离是使得由近红外线LED 121发出的光在眼镜125上反射的眼镜上亮点126和由近红外线LED 121发出的光在眼球127的虹膜上反射的眼球上亮点128在从CCD照相机120观察时(由CCD照相机120映现时)互不重合的距离。
在第三实施方式中，作为摄像机构的CCD照相机120与落座于座椅111上的驾驶者m1的眼球127的位置相比配置在铅直方向上侧，作为发光机构的近红外线LED 121配置在比CCD照相机120更靠铅直方向上侧的位置。因此，若用CCD照相机从斜上方侧拍摄驾驶者m1的眼球127的虹膜区域，则在与该摄像范围交叉的眼镜125上的区域中，近红外线LED 121作为反射像映入。由此，如图9所示，由CCD照相机120拍摄的眼镜125上的近红外线LED 121的像(眼镜上亮点126)与眼球127(眼镜上亮点128)相比处于向上方偏移的位置。
在第三实施方式中，能够防止眼镜上亮点126与眼球上亮点128重合着映入CCD照相机120的情况。而且，即使当驾驶者m1的脸部相对于车辆正面在铅直方向和水平方向中的任一方向上倾斜时，也能够更加可靠地防止眼镜上亮点126和眼球上亮点128在CCD照相机120上重合的情况。
而且，本发明并不仅限于上述实施方式，在不脱离其主旨的范围内能够进行各种设计变更。例如，在上述的实施方式中，近红外线LED 121(发光机构)面向驾驶席正面在方向盘13的左右一方仅设置一个，但发光机构也可以同样设置在方向盘113的右侧和左侧。
本申请基于2010年7月5日在日本申请的特愿2010-153021号和同样于2010年7月5日在日本申请的特愿2010-153022号要求优先权，并在此援引它们的内容。

Claims (4)

1.一种车辆用脸部图像摄像装置，设置在具有方向盘和倾斜机构的车辆上，并具有摄像机构，所述方向盘配置在车室内的驾驶席的前方，所述倾斜机构调整该方向盘相对于铅直方向的倾斜角度，所述摄像机构与所述方向盘相比配置在车辆前方侧，对落座于所述驾驶席上的驾驶者的脸部图像进行拍摄，所述车辆用脸部图像摄像装置的特征在于，
所述摄像机构配置在如下位置：当从正面观察所述方向盘时，该位置位于该方向盘的中心轴线的铅直上方且与通过所述倾斜机构而移动到上限位置时的所述方向盘的上端部相比位于铅直上方。
2.如权利要求1所述的车辆用脸部图像摄像装置，其特征在于，
还具有向所述驾驶者投射可见光或者非可见光的发光机构，
所述发光机构配置在如下位置：当从正面观察所述方向盘时，该位置是不与操作所述方向盘的所述驾驶者的手臂的可动范围重合的位置，且相对于所述方向盘的中心轴线处于车宽方向侧方且处于所述方向盘的外侧。
3.一种车辆用脸部图像摄像装置，具有摄像机构和发光机构，所述摄像机构对落座于车辆的驾驶席上的驾驶者的脸部图像进行拍摄，所述发光机构向所述驾驶者的眼球投射可见光或者非可见光，所述车辆用脸部图像摄像装置的特征在于，
所述摄像机构和所述发光机构以分别在铅直方向和车宽方向上相互离开规定距离以上的方式被配置；
所述规定距离被设定成是使得眼镜上亮点和眼球上亮点在从所述摄像机构观察时不重合的距离，所述眼镜上亮点是由所述可见光或者非可见光在所述驾驶者佩戴的眼镜上反射而成的，所述眼球上亮点是由所述发光机构投射的所述可见光或者非可见光在所述驾驶者的眼球上反射而成的。
4.如权利要求3所述的车辆用脸部图像摄像装置，其特征在于，
在所述摄像机构与落座于所述驾驶席的所述驾驶者的眼球位置相比配置在铅直方向上侧的情况下，所述发光机构与所述摄像机构相比配置在铅直方向上侧，
在所述摄像机构与所述眼球位置相比配置在铅直方向下侧的情况下，所述发光机构与所述摄像机构相比配置在铅直方向下侧。
CN2011101938881A 2010-07-05 2011-07-05 车辆用脸部图像摄像装置 Pending CN102310817A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2010-153022 2010-07-05
JP2010153021A JP2012011975A (ja) 2010-07-05 2010-07-05 車両用顔画像撮像装置
JP2010-153021 2010-07-05
JP2010153022A JP2012011976A (ja) 2010-07-05 2010-07-05 車両用顔画像撮像装置

Publications (1)

Publication Number Publication Date
CN102310817A true CN102310817A (zh) 2012-01-11

Family

ID=45399423

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101938881A Pending CN102310817A (zh) 2010-07-05 2011-07-05 车辆用脸部图像摄像装置

Country Status (2)

Country Link
US (1) US20120002028A1 (zh)
CN (1) CN102310817A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104169993A (zh) * 2012-03-14 2014-11-26 株式会社电装 驾驶辅助装置及驾驶辅助方法
CN104346897A (zh) * 2013-07-23 2015-02-11 深圳市赛格导航科技股份有限公司 一种车载终端眼球识别报警系统及方法
CN105847691A (zh) * 2016-04-15 2016-08-10 乐视控股（北京）有限公司 摄像装置控制方法及装置
CN106536323A (zh) * 2014-07-15 2017-03-22 标致·雪铁龙汽车公司 用于控制运输工具方向盘角位置的方法及相关联运输工具
CN110891827A (zh) * 2017-07-19 2020-03-17 株式会社电装 拍摄装置以及车辆用显示装置

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5367037B2 (ja) * 2011-09-26 2013-12-11 本田技研工業株式会社 顔向き検出装置
DE102013001573B4 (de) * 2013-01-30 2018-10-11 Carl Zeiss Vision International Gmbh Vorrichtung sowie Verfahren zum Schutz von Fahrzeug- und Maschinenführern vor Verwendung einer ungeeigneten oder unzulässigen Brille
CN105323539B (zh) * 2014-07-17 2020-03-31 原相科技股份有限公司 车用安全系统及其操作方法
CN106339671A (zh) * 2016-08-16 2017-01-18 南京安穗智能科技有限公司 一种基于移动图像采集设备的虹膜识别装置
FR3057828B1 (fr) * 2016-10-20 2018-12-07 Peugeot Citroen Automobiles Sa Ensemble de planche de bord de vehicule integrant une camera
US10445559B2 (en) * 2017-02-28 2019-10-15 Wipro Limited Methods and systems for warning driver of vehicle using mobile device
WO2018208776A1 (en) 2017-05-08 2018-11-15 Joyson Safety Systems Acquisition Llc Integration of occupant monitoring systems with vehicle control systems
US20190012552A1 (en) * 2017-07-06 2019-01-10 Yves Lambert Hidden driver monitoring
CN111527374B (zh) * 2018-01-05 2021-10-22 三菱电机株式会社 视线方向校正装置、视线方向校正方法及视线方向校正程序
FR3087029B1 (fr) * 2018-10-08 2022-06-24 Aptiv Tech Ltd Systeme de detection faciale d’un conducteur et methode associee
EP4170607A1 (en) * 2021-10-22 2023-04-26 Continental Automotive Technologies GmbH Driver monitoring camera
KR20230079788A (ko) * 2021-11-29 2023-06-07 현대모비스 주식회사 스티어링 휠 조정 장치 및 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007069680A (ja) * 2005-09-05 2007-03-22 Toyota Motor Corp 顔画像撮影カメラの搭載構造
CN101258053A (zh) * 2005-09-05 2008-09-03 丰田自动车株式会社 用于面部影像摄像机的安装结构
JP2009254691A (ja) * 2008-04-18 2009-11-05 Calsonic Kansei Corp 瞳孔検知方法及び装置
JP2010013090A (ja) * 2008-07-04 2010-01-21 Hyundai Motor Co Ltd 運転者状態監視システム
JP2010023626A (ja) * 2008-07-17 2010-02-04 Toyota Motor Corp ドライバー監視装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8604932B2 (en) * 1992-05-05 2013-12-10 American Vehicular Sciences, LLC Driver fatigue monitoring system and method
US6757602B2 (en) * 1997-02-06 2004-06-29 Automotive Technologies International, Inc. System for determining the occupancy state of a seat in a vehicle and controlling a component based thereon
US7147246B2 (en) * 1995-06-07 2006-12-12 Automotive Technologies International, Inc. Method for airbag inflation control
US20030169334A1 (en) * 2001-08-06 2003-09-11 Michael Braithwaite Iris capture device having expanded capture volume
JP2003123520A (ja) * 2001-10-18 2003-04-25 Koito Mfg Co Ltd 赤外光照射ランプ兼用投射型前照灯
US20060011399A1 (en) * 2004-07-15 2006-01-19 International Business Machines Corporation System and method for controlling vehicle operation based on a user's facial expressions and physical state
JP2007319174A (ja) * 2006-05-30 2007-12-13 Matsushita Electric Ind Co Ltd 撮影装置およびそれを用いた認証装置
JP4331197B2 (ja) * 2006-11-06 2009-09-16 トヨタ自動車株式会社 眼開度検出装置及び方法
JP4780088B2 (ja) * 2007-11-09 2011-09-28 アイシン精機株式会社 顔画像撮像装置、顔画像撮像方法、及びそのプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007069680A (ja) * 2005-09-05 2007-03-22 Toyota Motor Corp 顔画像撮影カメラの搭載構造
CN101258053A (zh) * 2005-09-05 2008-09-03 丰田自动车株式会社 用于面部影像摄像机的安装结构
JP2009254691A (ja) * 2008-04-18 2009-11-05 Calsonic Kansei Corp 瞳孔検知方法及び装置
JP2010013090A (ja) * 2008-07-04 2010-01-21 Hyundai Motor Co Ltd 運転者状態監視システム
JP2010023626A (ja) * 2008-07-17 2010-02-04 Toyota Motor Corp ドライバー監視装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104169993A (zh) * 2012-03-14 2014-11-26 株式会社电装 驾驶辅助装置及驾驶辅助方法
CN104169993B (zh) * 2012-03-14 2016-05-25 株式会社电装 驾驶辅助装置及驾驶辅助方法
CN104346897A (zh) * 2013-07-23 2015-02-11 深圳市赛格导航科技股份有限公司 一种车载终端眼球识别报警系统及方法
CN104346897B (zh) * 2013-07-23 2017-02-08 深圳市赛格导航科技股份有限公司 一种车载终端眼球识别报警系统及方法
CN106536323A (zh) * 2014-07-15 2017-03-22 标致·雪铁龙汽车公司 用于控制运输工具方向盘角位置的方法及相关联运输工具
CN105847691A (zh) * 2016-04-15 2016-08-10 乐视控股（北京）有限公司 摄像装置控制方法及装置
CN110891827A (zh) * 2017-07-19 2020-03-17 株式会社电装 拍摄装置以及车辆用显示装置
CN110891827B (zh) * 2017-07-19 2022-11-22 株式会社电装 拍摄装置以及车辆用显示装置

Also Published As

Publication number Publication date
US20120002028A1 (en) 2012-01-05

Similar Documents

Publication Publication Date Title
CN102310817A (zh) 车辆用脸部图像摄像装置
CN101161200B (zh) 眼睛状况检测装置及其安装方法
US11370360B2 (en) Display system
CN106458083B (zh) 车辆前照灯控制装置
CN112744158B (zh) 显示系统
KR102464874B1 (ko) 눈 추적을 구비한 후방 비전 시스템
US20060087582A1 (en) Illumination and imaging system and method
US20140002252A1 (en) Vehicular heads up display with integrated bi-modal high brightness collision warning system
JP2009113621A (ja) 乗員画像撮像装置、運転支援装置
JP2012163613A (ja) 虚像表示装置
WO2003074307A1 (en) Enhanced vision for driving
KR102610762B1 (ko) 안전 하차 보조 시스템
JP2020157938A (ja) 車載監視制御装置
JP4656070B2 (ja) 可視光レーザ照射装置
JP2003104126A (ja) 車両室内監視装置
JP2007253821A (ja) 乗員撮像装置
JP2010076480A (ja) 車両用運転支援装置
JP2020149431A (ja) 運転支援システム
JP2012011976A (ja) 車両用顔画像撮像装置
KR102320030B1 (ko) 차량의 내부 감시용 카메라 시스템
WO2023233919A1 (ja) 画像投影システム
JP5515233B2 (ja) 自動車用表示装置
JPWO2019124323A1 (ja) 虚像表示装置、およびヘッドアップディスプレイ装置
JP7544273B2 (ja) 乗員撮像装置
WO2023013442A1 (ja) 車両の表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120111