CN101124610A - 图像处理方法、图像处理系统、图像处理装置及计算机程序 - Google Patents

图像处理方法、图像处理系统、图像处理装置及计算机程序 Download PDF

Info

Publication number
CN101124610A
CN101124610A CNA2005800484808A CN200580048480A CN101124610A CN 101124610 A CN101124610 A CN 101124610A CN A2005800484808 A CNA2005800484808 A CN A2005800484808A CN 200580048480 A CN200580048480 A CN 200580048480A CN 101124610 A CN101124610 A CN 101124610A
Authority
CN
China
Prior art keywords
image
image processing
reference object
unit
irradiates light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005800484808A
Other languages
English (en)
Inventor
伊藤寿雄
马场幸三
田福明义
东野全寿
尾身忠雄
片桐卓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of CN101124610A publication Critical patent/CN101124610A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141Control of illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明提供使用以例如乘坐在车辆中的驾驶员的脸部为拍摄对象的车载照相机并判断在拍摄所得到的图像内是否存在拍摄对象的图像处理方法、图像处理系统、图像处理装置及计算机程序。将对拍摄方向照射特定波长的光时拍摄到的图像的平均亮度与未照射光时拍摄到的平均亮度进行比较,在其差为基准值以下的情况下,判断为在通过拍摄所得到的图像内不存在拍摄对象。

Description

图像处理方法、图像处理系统、图像处理装置及计算机程序
技术领域
本发明涉及从拍摄所得到的图像中检测特定拍摄对象的图像处理方法、适用该图像处理方法的图像处理系统,该图像处理系统所使用的图像处理装置以及用于实现该图像处理装置的计算机程序,特别涉及判断有无拍摄对象的图像处理方法、图像处理系统、图像处理装置及计算机程序。
背景技术
作为支持汽车等车辆的驾驶的装置,已经提出了如下所述的图像处理装置:用配置在可拍摄驾驶员脸部的位置处的车载照相机来拍摄驾驶员脸部,并从所得到的图像中进行检测驾驶员的脸部轮廓及眼睛和鼻孔的位置的图像处理(例如,参照专利文献1)。通过采用这种装置,构成了探测驾驶员的状况、进行警告心不在焉地驾驶等的驾驶支持的系统。
专利文献1:日本特开2004-234367号公报
但是,由于现有的图像处理装置以在拍摄所得到的图像范围内存在拍摄对象为前提来执行检测拍摄对象的处理,所以在拍摄所得到的图像的范围内不存在拍摄对象的情况下,也从拍摄对象不存在的背景图像中执行检测拍摄对象的处理。因此,存在发生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常的可能性较高的问题。
发明内容
本发明就是鉴于此类问题而完成的,其目的是提供可通过向拍摄方向照射光,且将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较来判断在图像内有无拍摄对象,从而在图像处理时减小发生异常的可能性的图像处理方法、适用该图像处理方法的图像处理系统、该图像处理系统所使用的图像处理装置以及用于实现该图像处理装置的计算机程序。
第一发明的图像处理方法使用从拍摄所得到的图像中检测特定拍摄对象的图像处理装置,其特征在于,向拍摄方向照射光,将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较,根据比较后的结果来判断图像内有无拍摄对象。
在本发明中,在存在拍摄对象的情况下,由于因光的照射状况而在图像中产生差异,所以可判断有无拍摄对象。因此能够防止以下情况发生:尽管在图像内不存在拍摄对象,却执行从不存在拍摄对象的背景图像中检测拍摄对象的处理,产生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常。
第二发明的图像处理系统具备摄像单元;向该摄像单元进行拍摄的方向照射光的照射单元;以及从拍摄所得到的图像中检测特定拍摄对象的图像处理装置,其特征在于,上述图像处理装置具备将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较的比较单元;和根据该比较单元比较后的结果来判断图像内有无拍摄对象的判断单元。
在本发明中,在拍摄对象存在的情况下,由于因光的照射状况而在图像中产生差异,所以可判断有无拍摄对象。因此能够防止以下情况发生:尽管在图像内不存在拍摄对象,却执行从不存在拍摄对象的背景图像中检测拍摄对象的处理,产生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常。
在第二发明的基础上,第三发明的图像处理系统的特征在于,上述图像处理装置还具备求出拍摄所得到的图像的亮度的单元,上述比较单元构成为将各图像的亮度进行比较,上述判断单元构成为在各图像的亮度的差小于基准值的情况下判断为没有拍摄对象。
在本发明中,在存在拍摄对象的情况下,因光的照射状况而使图像的亮度较大地变化。因此,由于可判断有无拍摄对象,所以可防止当在图像内不存在拍摄对象的情况下发生的异常。
在第三发明的基础上,第四发明的图像处理系统的特征在于,上述亮度是构成图像的象素的平均亮度。
在本发明中,通过基于平均亮度的比较来判断有无拍摄对象,从而可提高判断精度。
在第二至第四发明的任一项的基础上,第五发明的图像处理系统的特征在于,该图像处理系统还具备这样的单元:根据基于构成图像的象素的平均亮度、上述照射单元的照射条件及上述摄像单元的拍摄条件而导出的绝对亮度,来判断图像内有无拍摄对象。
在本发明中,由于通过根据绝对亮度来判断有无拍摄对象,可抑制太阳光等外部光线的影响,所以可提高判断精度。
在第二至第五发明的任一项的基础上,第六发明的图像处理系统的特征在于,上述图像处理装置还具备判断是否从拍摄所得到的图像中检测特定拍摄对象的单元,上述比较单元和判断单元构成为避免在检测到特定拍摄对象的情况下执行。
在本发明中,通过避免不必要的比较及判断处理,而可减轻处理负荷。
在第二至第六发明的任一项的基础上,第七发明的图像处理系统的特征在于,上述照射单元构成为照射近红外区域波长的光,上述摄像单元具有使近红外区域波长的光透射的滤光器。
在本发明中,通过不使用可视光线而使用近红外线,可主要将摄像单元和拍摄对象之间的距离反映为图像的亮度,可抑制座席的样式等背景图像的浓淡所产生的亮度影响,所以可提高判断精度。
在第二至第七发明的任一项的基础上,第八发明的图像处理系统的特征在于,该图像处理系统具备摄像装置,该摄像装置具有上述摄像单元及照射单元,且与上述图像处理装置相连接。
在本发明中,通过使用组装有照射单元的摄像装置,就不需要进行照射方向及拍摄方向的调整,而可提高设置时的便利性。
第九发明的图像处理装置从拍摄所得到的图像中检测特定拍摄对象,其特征在于,该图像处理装置具备:向拍摄方向照射光的单元;将照射光时拍摄到的图像与未照射光时所拍摄到的图像进行比较的单元;以及根据比较后的结果来判断图像内有无拍摄对象的单元。
在本发明中,当存在拍摄对象的情况下,由于因光的照射状况而在图像中产生差异,所以可判断有无拍摄对象。因此能够防止以下情况发生:尽管在图像内不存在拍摄对象,却执行从不存在拍摄对象的背景图像中检测拍摄对象的处理,产生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常。
第十发明的计算机程序利用与摄像单元及向该摄像单元进行拍摄的方向照射光的照射单元相连接的计算机,从拍摄所得到的图像中检测特定拍摄对象,其特征在于,该计算机程序执行如下步骤:利用计算机将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较的步骤;以及利用计算机根据比较后的结果来判断图像内有无拍摄对象的步骤。
在本发明中,通过用计算机来执行,从而在计算机作为图像处理装置来工作且存在拍摄对象的情况下,因光的照射状况而在图像上产生差异。所以,可判断有无拍摄对象。因此能够防止以下情况发生:尽管在图像内不存在拍摄对象,却执行从不存在拍摄对象的背景图像中检测拍摄对象的处理,产生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常。
根据本发明的图像处理方法、图像处理系统、图像处理装置及计算机程序,适用于使用以例如乘坐在车辆中的驾驶员的脸部为拍摄对象的车载照相机的系统,在将对拍摄方向照射光时所拍摄到的图像的平均亮度及未照射光时所拍摄到的图像的平均亮度进行比较,在其差为基准值以下的情况下,判断为在通过拍摄所得到的图像内不存在拍摄对象。
通过该结构,在存在拍摄对象的情况下,因光的照射状况而在图像的亮度上产生差异,所以可判断有无拍摄对象。因此具有能够防止以下情况发生等的优良效果:尽管在图像内不存在拍摄对象,却执行从不存在拍摄对象的背景图像中检测拍摄对象的处理,产生来自背景图像的错误识别、不必要地重复检测处理所产生的处理负荷增大等异常。而且,实现了系统整体的处理负荷的减轻及处理的稳定化。因此,在适用于探测驾驶员的状况、进行警告心不在焉地驾驶等的驾驶支持的系统的情况下,通过高速且稳定的处理,起到了如下的优良效果:可构成即使在瞬间的状况下误操作也少的可靠的驾驶支持系统等。
此外,在本发明的图像处理系统等中,通过根据绝对亮度来判断有无拍摄对象,可抑制照相机控制所致的光的影响。因此,起到了可提高判断精度等优良效果。
再有,在本发明的图像处理系统中,通过向拍摄方向照射光,可主要将摄像单元和拍摄对象之间的距离反映为图像的亮度,可抑制座席的样式等背景图像的浓淡所产生的亮度影响。因此,起到了可提高判断精度等优良效果。
附图说明
图1是表示本发明的图像处理系统所使用的摄像装置的外观的立体图。
图2是表示本发明的图像处理系统的结构例的方框图。
图3是表示本发明的图像处理系统所使用的图像处理装置的处理的流程图。
图4是表示本发明的图像处理系统所使用的图像处理装置的处理的流程图。
标号说明
1摄像装置
2图像处理装置
3计算机程序
4记录介质
具体实施方式
下面根据附图来详细说明本发明的实施方式。图1是表示本发明的图像处理系统所使用的摄像装置的外观的立体图。图1中,标记1是在车辆上装载的车载照相机等摄像装置。图1中例示的摄像装置1在呈长方体状的框体10的一个面的中心处配置摄像部11,该摄像部11使用了CCD(Charge Coupled Device:电荷耦合器件)等拍摄元件,在该摄像部1 1的周围配置了使用LED(Light Emitting Diode:发光二极管)等发光元件的多个照射部12。摄像部11及照射部12在摄像装置1的框体10的同一面上配置为拍摄方向与照射方向一致。照射部12构成为使用GaAlAs(镓铝砷)等半导体芯片来发出870nm等近红外区域波长的光。在摄像部11的受光部上安装了滤光器11a,该滤光器11a是异丁烯树脂等材质制的,可选择地使近红外区域波长的光透射。通过使用非可视光的近红外线作为照射部12所照射的光,由于受到光的照射的驾驶员不会发现照射,所以不会妨碍驾驶。此外,由于滤光器11a有选择地使近红外区域波长的光透射并滤掉可视光,所以摄像部11可不受外部光线影响地进行处理。而且,摄像装置1配置在车辆内的方向盘、仪表板等的驾驶员的前方,并在可拍摄驾驶员的脸部作为拍摄对象的状态下进行配置,且从照射部12对拍摄对象照射近红外线,用摄像部11拍摄。包括摄像部11及照射部12向同一装置组装的各种条件等当然也只是一个示例,可根据系统结构、目的等来适当地设定。例如,可将具备摄像部11的装置和具备照射部12的装置分体化并配置在各不相同的位置上。
图2是表示本发明的图像处理系统的结构例的方框图。可将摄像装置1通过专用电缆等通信线或者有线方式或无线方式构成的车内LAN(Local Area Network:局域网)等通信网连接到图像处理装置2上,图像处理装置2使用了从通过该摄像装置1的拍摄所得到的图像中进行拍摄对象的检测等图像处理的车载用计算机。
摄像装置1具备:控制整个装置的MPU(Micro Processor Unit:微处理机单元)13;记录根据MPU13的控制来执行的各种计算机程序及数据的ROM(Read Only Memory:只读存储器)14;和对在ROM14中记录的计算机程序执行时暂时产生的各种数据进行存储的RAM(RandomAccess Memory:随机存取存储器)15。再有,摄像装置1具备上述摄像部11及照射部12,且具备将通过摄像部11的拍摄所得的模拟图像数据转换为数字数据的A/D转换器16;暂时存储由A/D转换器16转换为数字的图像数据的帧存储器17;和用于与图像处理装置2通信的通信接口18。
在摄像装置1中,通过摄像部11来拍摄用照射部12照射了近红外线的拍摄对象,且根据拍摄而生成例如每秒30帧的图像数据(图像帧)并输出给A/D转换器16。在A/D转换器16中,转换为构成图像数据的256灰度(1字节)等灰度表示的数字图像数据。而且,转换为数字图像数据后的图像数据存储在帧存储器17中,存储的图像数据在预定的时间输出给图像处理装置2。此外,将表示拍摄时的摄像部11的快门速度、增益值等拍摄条件的拍摄条件数据以及表示照射部12的照射时间等的照射条件的照射条件数据也与图像数据一同输出给图像处理装置2。再有,在摄像装置1中,以预定的时间从图像处理装置12接收与摄像部11的拍摄条件、照射部12的照射条件等各种电路的控制相关的各种数据,并根据接收到的数据来控制摄像部11、照射部12等各种电路。
图像处理装置2具备:控制整个装置的CPU(中央处理器)21;CD-ROM驱动器等辅助存储部22,其从记录本发明的计算机程序3及数据等各种信息的CD-ROM等记录介质4读取信息;记录由辅助存储部22读取到的各种信息的硬盘(以下称为HD)23;对执行在HD23中记录的计算机程序3时暂时产生的各种数据进行存储的RAM24;由非易失存储器构成的帧存储器25;以及用于与摄像装置1通信的通信接口26。而且,通过从HD23读取本发明的计算机程序3及数据等各种信息,记录在RAM24中,并由CPU21执行计算机程序3所含的各种步骤,从而车载用计算机作为本发明的图像处理装置2来工作。
图像处理装置2利用通信接口26来接收从摄像装置1输出的图像数据,并将接收到的图像数据记录在帧存储器25中,读取在帧存储器25中记录的图像数据,进行各种图像处理,并且将根据图像处理的结果来控制摄像装置1的各种数据从通信接口26输出给摄像装置1。对接收到的图像数据执行的各种图像处理是这样的:从图像数据中检测作为检测对象(拍摄时的拍摄对象)的驾驶员的脸部轮廓、以及与确定眼睛和鼻子的位置等的检测对象有关的各种处理。作为具体的处理示例可举出如下的处理:通过将在图像的垂直方向上排列的亮度进行累积,并将累积后的值与预定的阈值比较,对由亮度比背景亮度高的象素构成的脸部轮廓在水平方向范围内进行检测。此外,在该处理中可举出这样的处理:将累积值的水平方向的变化微分且确定变化大的位置,且对亮度变化大的背景和脸部轮廓之间的边界进行检测。另外,作为其它处理的示例,可举出通过图模式配来检测眼睛的位置的处理。详细的处理内容在例如本申请的申请人提出的日本特开2000-163564号公报、日本特开2004-234494号公报、日本特开2004-234367号公报等文献中有记载。再有,这些图像处理并不仅限于日本特开2000-163564号公报、日本特开2004-234494号公报、日本特开2004-234367号公报等文献中所记载的处理,可根据其用途、硬件构成、与其它应用程序的协作等条件来适当选择。
其次,对在本发明的图像处理系统中使用的各种装置的处理进行说明。图3及图4是表示本发明的图像处理系统所使用的图像处理装置2的处理的流程图。图像处理装置2通过执行在RAM24中存储的计算机程序3的CPU21的控制,而将由摄像装置1拍摄所得到并经通信接口26接收到的图像数据从帧存储器25提取(步骤S1),对于提取到的图像数据进行与作为拍摄对象的驾驶员的脸部轮廓的检测及眼睛和鼻孔的位置的特定等拍摄对象相关的检测处理(步骤S2)。步骤S1~S2的检测处理如上述那样使用特开2000-163564号公报、特开2004-234494号公报、特开2004-234367号公报等文献中记载的各种处理来进行。再有,此时的检测处理的结果在HD23或RAM24中存储。
图像处理装置2,通过CPU21的控制来判断是否能够用步骤S1~S2来检测拍摄对象(步骤S3),在判断为可检测的情况下(步骤S3:是),判断为拍摄对象存在(步骤S4),回到步骤S1并对下一图像数据重复以后的处理。步骤S3的检测是拍摄对象是否存在的检测,判断基准可适当设定。在例如步骤S1~S2的处理中,在检测作为拍摄对象的驾驶员的脸部轮廓、眼睛及鼻孔的情况下,可以是只有检测到轮廓、两眼睛及两鼻孔全部时才能判断为能检测拍摄对象,此外还可以是检测到轮廓和至少一个眼睛及至少一个鼻孔时判断为能检测拍摄对象。再有,步骤S3的判断中所使用的拍摄对象的检测状况,是读取在HD23或RAM24中记录的步骤S1~S2的检测处理的结果。
在步骤S3中,在判断为不能检测拍摄对象的情况下(步骤S3:否),通过CPU21的控制,判断不能检测拍摄对象的状态是否在作为第一连续基准值预先设定的n帧(n为自然数)以上连续(步骤S5)。再有,第一连续基准值记录在HD23或RAM24中。
在步骤S5中,在判断为不能检测拍摄对象状态的帧仅在不足n帧(其中n帧作为第一连续基准值)时连续的情况下(步骤S5:否),图像处理装置2通过CPU21的控制,判断不能检测拍摄对象的状态是否在比第一连续基准值小的作为第二连续基准值预先设定的m帧(m为比n小的自然数)以上连续(步骤S6)。再有,第二连续基准值记录在HD23或RAM24中。
在步骤S6中,在判断为不能检测拍摄对象状态的帧仅在不足作为第二连续基准值的m帧时连续的情况下(步骤S6:否),图像处理装置2通过CPU21的控制,前进到步骤S4且判断为存在拍摄对象(步骤S4)。这是因为在不能检测拍摄对象的状态的持续状况短的情况下,如果判断为拍摄对象不存在,则错误识别的可能性高。
在步骤S6中,在判断为不能检测拍摄对象状态的帧在作为第二连续基准值的m帧以上连续的情况下(步骤S6:是),图像处理装置2通过CPU21的控制,判断该图像数据的绝对亮度值是否小于预先设定的亮度值基准值(步骤S7)。再有,亮度值基准值记录在HD23或RAM24中。绝对亮度值是基于平均亮度值算出的,例如将该平均亮度值乘以快门速度、增益值及照射宽度而算出,其中该平均亮度值是象素的平均亮度值,而该象素形成与图像数据一同从摄像装置1输出的拍摄条件数据及照射条件数据和用图像处理装置1算出的图像数据所表示的图像。具体而言,使用以下例示的式(1)来算出。再有,拍摄条件及照射条件还可以不是从摄像装置1输入的值,而是作为控制用的数据向摄像装置1输出的值。在本发明的图像处理系统所使用的摄像装置1中,进行使作为拍摄对象的脸部亮度为一定的增益值的调整。因此,不使用亮度值而使用绝对亮度值来进行判断。
绝对亮度值=平均亮度值×S/s×{1+g/6}×s/t    (1)
其中,S:基准快门速度常数[sec](例如1/250sec)
s:快门速度[sec](例如1/2000sec)
g:增益值(例如0~5,例示的式(1)是增益值的0~5的六个变化相当于快门速度1/2的变化的情况)
t:照射宽度[sec](其中,在t>s时,为t=s)
在步骤S7中,在判断为图像数据的绝对亮度值为亮度值基准值以上的情况下(步骤S7:否),图像处理装置2,通过CPU21的控制前进到步骤S4,且判断为存在拍摄对象(步骤S4)。在本发明的图像处理系统中,由于对拍摄对象照射光,所以在越接近摄像部11的位置处存在的物体,则绝对亮度值越大。因此,在绝对亮度值为亮度值基准值以上的情况下,判断为在接近摄像部11的位置处存在拍摄对象。
在步骤S5中,在判断为不能检测拍摄对象的状态的帧在作为第一连续基准值的n帧以上连续的情况下(步骤S5:是),或者在步骤S7中,在判断为图像数据的绝对亮度值小于亮度值基准值的情况下(步骤S7:是),图像处理装置2通过CPU21的控制,中断摄像装置1所具备的照射部12进行的光的照射(步骤S8),并得到通过在未照射光的状态下拍摄所得到的图像数据(步骤S9)。照射部12在摄像部11进行拍摄的通常状态下对拍摄方向照射光。但是,在步骤S8中,通过进行中断照射部12的照射的控制的数据从图像处理装置2输出给摄像装置1,从而暂时中断照射部12所进行的照射。
而且,图像处理装置2,通过CPU21的控制,将照射光时拍摄到的图像的平均亮度值及未照射光时拍摄到的图像的平均亮度进行比较,并判断照射光时的平均亮度值与未照射光时的平均亮度值的差是否在预先设定的亮度差基准值以上(步骤S10)。再有,亮度值基准值记录在HD23或RAM24中。
在步骤S10中,在判断为照射光时的平均亮度值与未照射光时的平均亮度值的差大于亮度差基准值以上的情况下(步骤S10:是),图像处理装置2通过CPU21的控制,前进到步骤S4,且判断为存在拍摄对象(步骤S4)。
在步骤S10中,在判断为照射光时的平均亮度值与未照射光时的平均亮度值的差小于亮度差基准值的情况下(步骤S10:否),图像处理装置2通过CPU21的控制,判断为不存在拍摄对象(步骤S11),返回步骤S1,并对下一图像数据重复以后的处理。而且,执行判断为不存在拍摄对象的情况下的驾驶支持等各种处理。
在步骤S8~S11所示的处理中,在照射光的情况下,虽然在接近摄像部11的位置处存在拍摄对象时平均亮度值变大,而在拍摄对象不存在时光的照射所产生的平均亮度值的变化小。因此,通过将照射光情况下的平均亮度值和未照射光情况的平均亮度值进行比较,可判断拍摄对象是否存在(有无)。此外,在步骤S10的比较中使用的平均亮度值不使用根据图像数据整体的亮度的平均亮度值,而是优选从图像数据所示的整体图像中提取除周边部图像以外的中心部图像,并使用与中心部图像相关的平均亮度值。这是因为当存在拍摄对象的情况下,由于在图像的中心部存在拍摄对象的可能性高,所以图像中心部的平均亮度值在拍摄对象存在的情况和不存在的情况下的差大,从而判断精度提高。再有,在步骤S3中判断为可检测拍摄对象时等的存在拍摄对象的可能性高的情况下,避免了步骤S8~S11所表示的平均亮度值的比较,不存在拍摄对象的判断等的处理。这是为了防止了通过中断光的照射而在例如步骤2所示的处理结果中产生误差,以及防止了处理负荷增大。
在上述实施例中,表示了以车辆的驾驶员作为拍摄对象的方式。但是,本发明并不限于此,还可以是将人以外的生物或非生物作为拍摄对象的方式。可展开为例如适用于以在固定位置处进行监视任务的保安员为拍摄对象,在判断为保安员不在的情况下,进行警告处理的监视系统等各种方式。
另外,在上述实施例中,表示了根据从摄像装置接收的图像来用图像处理装置进行各种处理。但是,本发明并不限于此,也可以是用摄像装置来进行作为图像处理装置的处理记载的全部或一部分的处理的方式。

Claims (10)

1.一种图像处理方法,该图像处理方法使用从拍摄所得到的图像中检测特定拍摄对象的图像处理装置,其特征在于,
向拍摄方向照射光,
将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较,
根据比较后的结果来判断图像内有无拍摄对象。
2.一种图像处理系统,该图像处理系统具备摄像单元;向该摄像单元进行拍摄的方向照射光的照射单元;以及从拍摄所得到的图像中检测特定拍摄对象的图像处理装置,其特征在于,
上述图像处理装置具备:
将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较的比较单元;和
根据该比较单元比较后的结果来判断图像内有无拍摄对象的判断单元。
3.根据权利要求2所述的图像处理系统,其特征在于,
上述图像处理装置还具备求出拍摄所得到的图像的亮度的单元,
上述比较单元构成为将各图像的亮度进行比较,
上述判断单元构成为在各图像的亮度的差小于基准值的情况下判断为没有拍摄对象。
4.根据权利要求3所述的图像处理系统,其特征在于,
上述亮度是构成图像的象素的平均亮度。
5.根据权利要求2至4中任一项所述的图像处理系统,其特征在于,
该图像处理系统还具备这样的单元:根据基于构成图像的象素的平均亮度、上述照射单元的照射条件及上述摄像单元的拍摄条件而导出的绝对亮度,来判断图像内有无拍摄对象。
6.根据权利要求2至5中任一项所述的图像处理系统,其特征在于,
上述图像处理装置还具备判断能否从拍摄所得到的图像中检测特定拍摄对象的单元,
上述比较单元和判断单元构成为避免在检测到特定拍摄对象的情况下执行。
7.根据权利要求2至6中任一项所述的图像处理系统,其特征在于,
上述照射单元构成为照射近红外区域波长的光,
上述摄像单元具有使近红外区域波长的光透射的滤光器。
8.根据权利要求2至7中任一项所述的图像处理系统,其特征在于,
该图像处理系统具备摄像装置,该摄像装置具有上述摄像单元及照射单元,且与上述图像处理装置相连接。
9.一种图像处理装置,该图像处理装置从拍摄所得到的图像中检测特定拍摄对象,其特征在于,
该图像处理装置具备:
向拍摄方向照射光的单元;
将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较的单元;以及
根据比较后的结果来判断图像内有无拍摄对象的单元。
10.一种计算机程序,该计算机程序利用与摄像单元及向该摄像单元进行拍摄的方向照射光的照射单元相连接的计算机,从拍摄所得到的图像中检测特定拍摄对象,其特征在于,
该计算机程序执行如下步骤:
利用计算机将照射光时所拍摄到的图像与未照射光时所拍摄到的图像进行比较的步骤;以及
利用计算机根据比较后的结果来判断图像内有无拍摄对象的步骤。
CNA2005800484808A 2005-02-18 2005-02-18 图像处理方法、图像处理系统、图像处理装置及计算机程序 Pending CN101124610A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2005/002633 WO2006087812A1 (ja) 2005-02-18 2005-02-18 画像処理方法、画像処理システム、画像処理装置及びコンピュータプログラム

Publications (1)

Publication Number Publication Date
CN101124610A true CN101124610A (zh) 2008-02-13

Family

ID=36916228

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005800484808A Pending CN101124610A (zh) 2005-02-18 2005-02-18 图像处理方法、图像处理系统、图像处理装置及计算机程序

Country Status (4)

Country Link
US (1) US8077916B2 (zh)
JP (1) JP4397415B2 (zh)
CN (1) CN101124610A (zh)
WO (1) WO2006087812A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110235178A (zh) * 2017-03-14 2019-09-13 欧姆龙株式会社 驾驶员状态推定装置以及驾驶员状态推定方法
CN113545185A (zh) * 2019-03-14 2021-10-22 株式会社富士 对象体判定方法、对象体判定装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006259900A (ja) * 2005-03-15 2006-09-28 Omron Corp 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム
JP4888838B2 (ja) * 2008-05-12 2012-02-29 トヨタ自動車株式会社 運転者撮像装置および運転者撮像方法
US8391554B2 (en) * 2008-10-01 2013-03-05 GM Global Technology Operations LLC Eye detection system using a single camera
KR20110006112A (ko) * 2009-07-13 2011-01-20 삼성전자주식회사 카메라 시스템에서 디스플레이 패널의 백라이트를 제어하는 장치 및 그 방법
JP2016196233A (ja) * 2015-04-03 2016-11-24 クラリオン株式会社 車両用道路標識認識装置
KR102476757B1 (ko) * 2017-12-21 2022-12-09 삼성전자주식회사 반사를 검출하는 장치 및 방법

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000163564A (ja) 1998-12-01 2000-06-16 Fujitsu Ltd 目の追跡装置および瞬き検出装置
JP3994558B2 (ja) * 1998-12-08 2007-10-24 三菱電機株式会社 監視警戒装置
US6810135B1 (en) * 2000-06-29 2004-10-26 Trw Inc. Optimized human presence detection through elimination of background interference
JP2002298232A (ja) * 2001-03-29 2002-10-11 Mitsubishi Electric Corp 人体検知装置、人体検知方法および障害物検知方法
JP4204336B2 (ja) 2003-01-30 2009-01-07 富士通株式会社 顔の向き検出装置、顔の向き検出方法及びコンピュータプログラム
JP4162503B2 (ja) 2003-01-31 2008-10-08 富士通株式会社 眼の状態判定装置、眼の状態判定方法及びコンピュータプログラム
JP3785148B2 (ja) * 2003-02-10 2006-06-14 株式会社東芝 画像抽出装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110235178A (zh) * 2017-03-14 2019-09-13 欧姆龙株式会社 驾驶员状态推定装置以及驾驶员状态推定方法
CN113545185A (zh) * 2019-03-14 2021-10-22 株式会社富士 对象体判定方法、对象体判定装置

Also Published As

Publication number Publication date
US20070291989A1 (en) 2007-12-20
WO2006087812A1 (ja) 2006-08-24
JPWO2006087812A1 (ja) 2008-07-03
US8077916B2 (en) 2011-12-13
JP4397415B2 (ja) 2010-01-13

Similar Documents

Publication Publication Date Title
CN101124610A (zh) 图像处理方法、图像处理系统、图像处理装置及计算机程序
US8055016B2 (en) Apparatus and method for normalizing face image used for detecting drowsy driving
CN101116106B (zh) 图像处理方法、图像处理装置以及图像处理系统
CN106169244A (zh) 利用人行横道识别结果的引导信息提供装置及方法
WO2005036371A2 (en) Moving object detection using low illumination depth capable computer vision
JP5967463B2 (ja) 物体識別装置、並びに、これを備えた移動体制御装置及び情報提供装置
CN106461387B (zh) 立体相机设备和设置有立体相机的车辆
CN103530640B (zh) 基于AdaBoost与SVM的无牌车辆检测方法
JP2012014482A (ja) タクシー用判定装置
US9367751B2 (en) Object detection device for area around vehicle
JP6253566B2 (ja) 車両監視システム及び車両監視方法
JP2013182550A (ja) 車両検出装置、車両検出方法および車両検出プログラム
CN103021179A (zh) 基于实时监控视频中的安全带检测方法
JP2019106193A (ja) 情報処理装置、情報処理プログラム、及び、情報処理方法
JPH1062162A (ja) 障害物検出装置
US20100027841A1 (en) Method and system for detecting a signal structure from a moving video platform
JP6915995B2 (ja) ドライブレコーダ
JP4706693B2 (ja) 車色判定装置、車色判定システム及び車色判定方法
JP2008041017A (ja) 監視システムおよび監視装置
KR101628390B1 (ko) 차량 내 운전자 인증 장치 및 그 방법
JP2004086417A (ja) 横断歩道等における歩行者検出方法及び同装置
KR102220643B1 (ko) 딥러닝을 기반으로 차량번호를 인식할 수 있는 cctv
JP2019106149A (ja) 情報処理装置、情報処理プログラム、及び、情報処理方法
JP2008233960A (ja) 情報提示装置
JP5957182B2 (ja) 路面上パターン認識方法および車両用情報記録装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20080213