CN107533798B - 图像处理装置及具有该装置的交通管理系统、图像处理方法 - Google Patents

图像处理装置及具有该装置的交通管理系统、图像处理方法 Download PDF

Info

Publication number
CN107533798B
CN107533798B CN201680022290.7A CN201680022290A CN107533798B CN 107533798 B CN107533798 B CN 107533798B CN 201680022290 A CN201680022290 A CN 201680022290A CN 107533798 B CN107533798 B CN 107533798B
Authority
CN
China
Prior art keywords
image
traffic
color
signal
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680022290.7A
Other languages
English (en)
Other versions
CN107533798A (zh
Inventor
谷口正宏
上野浩辉
泷泽光司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Publication of CN107533798A publication Critical patent/CN107533798A/zh
Application granted granted Critical
Publication of CN107533798B publication Critical patent/CN107533798B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

图像处理装置(10)具有图像取得部(13)、信号检测部(16)、颜色判定部(17)和颜色设定部(18)。图像取得部(13)从拍摄信号机的周边的摄像机(103)取得红外线图像。信号检测部(16)检测在图像取得部(13)取得的红外线图像中包含的信号机区域。颜色判定部(17)从控制信号机的信号控制装置(104)取得信号机的控制信息,根据该控制信息确定与红外线图像的摄像时刻对应的信号机颜色。颜色设定部(18)对信号检测部(16)检测出的在红外线图像中包含的信号机区域进行配色处理,使该信号机区域成为在颜色判定部(17)中确定出的信号机的颜色,并输出信号机区域被彩色化的图像。

Description

图像处理装置及具有该装置的交通管理系统、图像处理方法
技术领域
本发明涉及图像处理装置及具有该图像处理装置的交通管理系统和图像处理方法。
背景技术
以往,提出了使用由摄像机等摄像装置拍摄到的车辆的摄像图像来判别该车辆、驾驶员等的车辆识别装置。针对交通违章的监管、事故应对等利用这种车辆识别装置被认为是有效的。
通常,作为这种摄像图像,采用向车辆等被摄体照射近红外线并拍摄其反射光得到的红外线图像。这是为了在夜间等较暗的状况下也能够取得图像。
在此,红外线不是可见光线,因而红外线图像成为单色图像。因此,黑白图像在应对事故和犯罪搜查时,有可能得不到车辆的颜色和车辆编号等足够的信息。
例如,在专利文献1中公开了如下的技术:向被摄体照射多个不同波长的红外光,利用来自被摄体的各种波长的反射特性进行颜色估计而将红外线图像彩色化。
但是,在将上述的现有技术应用于交通违章检测的情况下,存在诸如以下所示的问题点。
即,在上述公报所公开的图像处理装置中,向被摄体照射具有不同波长的多条红外线,根据具有这些波长的红外线的反射强度分配各种颜色而进行颜色的估计,但颜色的设定只不过是估计而已,实际的颜色的再现性有可能较低。
特别是在进行交通违章和交通事故的查证时,需要准确再现信号机的颜色,根据估计出的颜色来查证交通违章和交通事故存在极限。
现有技术文献
专利文献
专利文献1:日本特开2011-50049号公报
专利文献2:日本特开2014-236371号公报
专利文献3:日本特开2002-171519号公报
专利文献4:日本特开2005-45559号公报
专利文献5:日本特开2001-36916号公报
专利文献6:日本特开2012-65312号公报
专利文献7:日本特开2003-242440号公报
专利文献8:日本特开平8-55296号公报
专利文献9:日本特开2008-299645号公报
专利文献10:日本特开2014-115799号公报
发明内容
本发明的课题是,提供能够准确再现信号机周边的摄像图像中包含的信号机的颜色的图像处理装置、及具有该图像处理装置的交通管理系统和图像处理方法。
第一发明的图像处理装置具有图像取得部、信号检测部、颜色判定部和颜色设定部。图像取得部从拍摄信号机的周边的摄像装置取得单色图像。信号检测部检测在图像取得部取得的单色图像中包含的信号机的发光位置。颜色判定部从控制信号机的信号控制装置取得信号机的控制信息,根据该控制信息确定与单色图像的摄像时刻对应的信号机的颜色。颜色设定部对信号检测部检测出的在单色图像中包含的信号机区域进行配色处理,使该信号机区域成为颜色判定部确定出的信号机的颜色,并输出信号机的区域被彩色化的图像。
在此,取得例如由摄像装置拍摄到的多个红外线图像(单色图像的一例),该摄像装置拍摄向被摄体照射的红外线的反射光,该被摄体包括在设置有信号机的交叉路口等行驶的车辆和/或行人。并且,检测红外线图像等单色图像中包含的信号机的区域,根据从控制信号机的信号控制装置取得的信号机的控制信息,对单色图像中的信号机区域实施配色处理,输出再现了实际的信号机的颜色的彩色图像。
在此,由摄像装置取得的单色图像可以是按照规定的时间间隔断续地拍摄的图像,也可以是如动态图像摄影那样连续地拍摄的图像。此外,要被实施配色处理的单色图像可以是图像取得部取得的所有的单色图像,也可以是根据规定的条件选择出的一部分单色图像。
另外,针对单色图像中的信号机区域的配色处理是指如下的处理:取得在信号控制装置中记录的规定的日期时间下的实际的信号机颜色作为控制信息,并在单色图像中的信号机区域体现出来而形成彩色图像。
由此,例如当在警察局等实施交通违章的监管时和交通事故发生时等,能够得到准确再现了当时的信号机的实际颜色的彩色图像。
其结果是,能够准确再现信号机周边的摄像图像中包含的信号机的颜色,实施交通违章和交通事故的查证。
第二发明的图像处理装置是在第一发明所述的图像处理装置中,还具有选择部,该选择部从图像取得部取得的多个单色图像中,根据规定的条件选择成为颜色设定部实施配色处理的对象的单色图像。
在此,作为成为再现单色图像中包含的信号机颜色的对象的单色图像,使用从在图像取得部取得的多个单色图像中按照规定的条件选择出的单色图像。
在此,作为为了再现信号机颜色而进行配色处理的单色图像的选择条件,例如包括是在交通违章和交通事故发生的日期时间下拍摄的单色图像的条件等。
由此,通过仅将与交通违章和交通事故相关的单色图像作为配色处理的对象,与对全部单色图像中包含的信号机区域实施配色处理的情况相比,能够降低数据处理量,并能够准确再现实际的信号机颜色。
第三发明的图像处理装置是在第二发明所述的图像处理装置中,还具有检测单色图像中包含的车辆有无交通违章的违章检测部。当在违章检测部中检测出单色图像中包含成为交通违章的监管对象的违章车辆的情况下,颜色设定部对在选择部所选择的单色图像中包含的信号机区域进行配色处理。
在此,作为为再现信号机的颜色而进行配色处理的单色图像的选择条件,包括是在违章检测部检测出交通违章的日期时间下拍摄的单色图像的条件等。
由此,通过仅将与闯红灯等交通违章相关的单色图像作为配色处理的对象,与对全部单色图像中包含的信号机区域实施配色处理的情况相比,能够降低数据处理量,并能够在实施交通违章的监管时准确再现重要的信息即实际的信号机颜色。
第四发明的图像处理装置是在第三发明所述的图像处理装置中,违章检测部是检测成为交通违章的监管对象的车辆的状态的传感器。
在此,从用于检测交通违章的传感器取得与有无发生交通违章有关的信息。
由此,例如当在信号机为红色的车道中传感器检测出行驶车辆的情况下,能够立刻判定为有交通违章发生。并且,能够选择在该闯红灯的违章车辆通过的时间段拍摄的一个或者多个单色图像,对信号机区域实施配色处理。
第五发明的图像处理装置是在第三发明所述的图像处理装置中,违章检测部是拍摄成为交通违章的监管对象的车辆的摄像装置。
在此,从用于检测交通违章的摄像机等摄像装置取得与有无发生交通违章有关的信息。
另外,进行交通违章的检测的摄像装置可以与上述拍摄单色图像的摄像装置相同,也可以不同。
由此,例如当检测出在信号机为红色的车道中、在由摄像装置拍摄到的图像中包含行驶车辆的情况下,能够判定为有交通违章发生。并且,能够选择在该闯红灯的违章车辆通过的时间段拍摄的一个或者多个单色图像,对信号机的发光位置区域实施配色处理。
第六发明的图像处理装置是在第二发明所述的图像处理装置中,当在单色图像中包含与交通事故有关的车辆和/或行人的情况下,颜色设定部对在选择部所选择的单色图像中包含的信号机区域进行配色处理。
在此,作为为再现信号机的颜色而进行配色处理的单色图像的选择条件,包括是在交通事故发生的日期时间下拍摄到与交通事故有关的车辆和/或行人等的单色图像的条件等。
由此,通过仅将包含交通事故发生时的前后的车辆和/或行人等的单色图像作为配色处理的对象,与对全部单色图像中包含的信号机区域实施配色处理的情况相比,能够降低数据处理量,并且能够在实施交通事故的查证时准确再现重要的信息即实际的信号机颜色。
第七发明的图像处理装置是在第二~第六发明中的任意一项发明所述的图像处理装置中,选择部根据被摄入到单色图像中的对象物、对象者、内容和清晰度,选择满足确定交通违章或者交通事故所需的条件的单色图像。
在此,选择部在选择单色图像时,选择并提取例如包含与交通违章和交通事故有关的车辆和/或行人的图像的清晰度等适合于交通违章和交通事故的检测的单色图像。
由此,通过获得准确再现了交通违章和交通事故发生时的信号机颜色的彩色图像,能够有效地实施交通违章和交通事故的查证。
第八发明的图像处理装置是在第一~第七发明中的任意一项发明所述的图像处理装置中,还具有第1存储部,该第1存储部将颜色设定部对信号机区域实施了配色处理的被彩色化的图像或者要在颜色设定部中被实施配色处理的单色图像与颜色判定部所确定的颜色信息关联起来进行保存。
由此,在警察局等能够使用在第1存储部保存的彩色图像或者单色图像及与其关联地保存的颜色信息作为证据,事后进行交通违章和交通事故的查证。
另外,如上所述,在对从大量获取的单色图像中选择出的最小限度张数的图像、或者仅对一张图像中的一部分实施配色处理的情况下,能够避免第1存储部的容量增大。
第九发明的图像处理装置是在第二发明所述的图像处理装置中,还具有存储选择部对单色图像的选择条件的第2存储部。
在此,将选择部选择应实施所选择的配色处理的单色图像所需的条件存储在第2存储部中。
在此,关于单色图像的选择所需的条件,包括例如在交通违章是闯红灯的情况下,是包含在信号机为红色的车道行驶的车辆的图像的条件,在是交通事故的情况下,是包含与交通事故有关的车辆和/或行人等的图像的条件等。
由此,根据在第2存储部中保存的条件,通过选择应该对信号机区域实施配色处理的单色图像来形成彩色图像,能够获得准确地再现了在交通违章和交通事故的查证时成为重要信息的信号机颜色的彩色图像。
第十发明的图像处理装置是在第一~第九发明中的任意一项发明所述的图像处理装置中,信号控制装置设置在信号机的附近。颜色判定部从信号控制装置通过无线或者有线方式取得信号机的控制信息。
在此,从在信号机的附近设置的信号控制装置通过无线或者有线方式取得与在拍摄单色图像的时间下的实际的信号机颜色有关的信息。
由此,例如当在警察局等查证交通违章和交通事故的发生时,能够从在信号机的附近设置的信号控制装置取得信号机的控制信息。
其结果是,通过根据控制信息决定在单色图像的摄像日期时间下的实际的信号机颜色来实施配色处理,能够准确再现在实施交通违章和交通事故的查证时成为重要信息的实际的信号机颜色。
第十一发明的图像处理装置是在第一~第九发明中的任意一项发明所述的图像处理装置中,信号控制装置设置在控制管理室中,该控制管理室进行包括设置有信号机的地域在内的多个信号机的控制。颜色判定部从信号控制装置通过无线或者有线方式取得信号机的控制信息。
在此,从例如统一管理周边的多个信号机的控制管理室通过无线或者有线方式取得与在拍摄单色图像的时间下的实际的信号机颜色有关的信息。
由此,例如当在警察局等查证交通违章和交通事故的发生时,能够从控制管理室取得信号机的控制信息。
其结果是,通过根据控制信息确定在单色图像的摄像日期时间下的实际的信号机颜色来实施配色处理,能够准确再现在实施交通违章和交通事故的证实时成为重要信息的实际的信号机颜色。
第十二发明的图像处理装置是在第一~第十一发明中的任意一项发明所述的图像处理装置中,摄像装置设置在被设于交叉路口处的信号机的周边。
在此,在交叉路口的信号机的周边设置拍摄单色图像的摄像装置。
由此,能够准确再现在容易发生交通违章和交通事故的交叉路口处拍摄到的单色图像中包含的信号机的颜色。
第十三发明的图像处理装置是在第一~第十二发明中任意一项发明所述的图像处理装置中,单色图像包含红外线图像。
在此,作为由摄像机等摄像装置取得的单色图像使用红外线图像。
由此,例如通过对由红外线摄像机等拍摄近红外线的反射光得到的红外线图像实施配色处理,能够有效地实施交通违章的监管,并且能够降低数据处理量,减轻处理负担。
第十四发明的交通管理系统具有:第一~第十三发明中的任意一项发明所述的图像处理装置;照明部,其向被摄体照射红外光;以及摄像装置,其拍摄向被摄体照射的红外光的反射光。
在此,构成包括以下部分的交通管理系统:上述的图像处理装置;照明部,其向被摄体照射红外光;以及摄像装置,其拍摄红外光的反射光。
在此,照明部及摄像装置可以设置在例如交叉路口和直行道路等容易发生交通违章和交通事故的场所。另一方面,图像处理装置也可以设置在例如进行交通违章的监管的警察局等,也可以将图像处理装置的一部分(图像取得部等)设置在设有摄像装置等的室外。
由此,根据本交通管理系统,通过准确再现摄像时的信号机的颜色,能够高效地实施交通违章的监管和交通事故的查证。
第十五发明的图像处理方法包括图像取得步骤、信号检测步骤、颜色判定步骤和颜色设定步骤。在图像取得步骤中,从拍摄信号机的周边的摄像装置取得单色图像。在信号检测步骤中,检测在图像取得步骤中取得的单色图像中包含的信号机区域。在颜色判定步骤中,从控制信号机的信号控制装置取得信号机的控制信息,根据该控制信息确定与单色图像的摄像时刻对应的信号机的颜色。在颜色设定步骤中,对在信号检测步骤中检测出的在单色图像中包含的信号机区域进行配色处理,使该信号机区域成为在颜色判定步骤中确定出的信号机的颜色,并输出信号机的区域被彩色化的图像。
在此,取得例如由摄像装置拍摄到的多个红外线图像(单色图像的一例),该摄像装置拍摄向被摄体照射的红外线的反射光,该被摄体包括在设置有信号机的交叉路口等行驶的车辆和/或行人。并且,检测红外线图像等单色图像中包含的信号机的区域,根据从控制信号机的信号控制装置取得的信号机的控制信息,对单色图像中的信号机区域实施配色处理,输出再现了实际的信号机颜色的彩色图像。
在此,由摄像装置取得的单色图像可以是按照规定的时间间隔断续地拍摄的图像,也可以是如动态图像摄影那样连续地拍摄的图像。此外,要被实施配色处理的单色图像可以是在图像取得部取得的全部单色图像,也可以是根据规定的条件选择的一部分单色图像。
另外,针对单色图像中的信号机区域的配色处理是指如下的处理:取得在信号控制装置记录的规定的日期时间下的实际的信号机的颜色作为控制信息,并在单色图像中的信号机区域体现出来而形成彩色图像。
由此,例如当在警察局等实施交通违章的监管时和交通事故发生时等,能够得到准确地再现了当时的信号机的实际颜色的彩色图像。
其结果是,能够准确再现信号机周边的摄像图像中包含的信号机的颜色。
发明效果
根据本发明的图像处理装置,能够准确再现信号机周边的摄像图像中包含的信号机的颜色。
附图说明
图1是示出包括本发明的一个实施方式的图像处理装置的交通管理系统的结构的图。
图2是示出图1的交通管理系统中包含的摄像机和传感器、信号控制装置等在交叉路口处的设置位置的图。
图3是示出图1的交通管理系统中包含的图像处理装置的违章检测部的处理内容的框图。
图4是示出图1的交通管理系统中包含的图像处理装置的选择部的处理内容的框图。
图5是示出图1的交通管理系统中包含的图像处理装置的颜色判定部的处理内容的框图。
图6是示出图1的交通管理系统中包含的图像处理装置的颜色设定部的处理内容的框图。
图7是示出由图6的颜色设定部进行配色处理的红外线图像的区域的图。
图8是示出在图1的交通管理系统中包含的图像处理装置的显示部显示的包括彩色图像在内的交通违章的显示方式的图。
图9是示出图1的交通管理系统对红外线图像中包含的信号机的区域进行的配色处理的流程的流程图。
图10是示出包括本发明的另一个实施方式的图像处理装置的交通管理系统的结构的图。
图11是示出包括本发明的又一个实施方式的图像处理装置的交通管理系统的结构的图。
图12是示出包括本发明的又一个实施方式的图像处理装置的交通管理系统的结构的图。
图13是示出本发明的又一个实施方式的交通管理系统的结构例的图。
具体实施方式
(实施方式1)
使用图1~图9对本发明的一个实施方式的图像处理装置说明如下。
在本实施方式的交通管理系统100中,使用摄像机(摄像装置)103拍摄对通过交叉路口的车辆A1、A2照射的近红外线的反射成分,在警察局等进行交通违章的监管和交通事故的查证等。
<交通管理系统100的结构>
如图1所示,交通管理系统100具有传感器101、照明部102、摄像机(摄像装置)103和图像处理装置10。
传感器101例如是检测在交叉路口处行驶的车辆A1、A2的交通违章的传感器,其向图像处理装置10中包含的违章检测部11发送交通违章的检测结果。另外,传感器101例如按照图2所示安装于设置在交叉路口的支柱111上。
照明部102例如是照射近红外线的装置,如图2所示,与传感器101同样地安装于设置在交叉路口的支柱111上。并且,照明部102向成为交通违章的对象的车辆A1、A2等照射近红外线。并且,照明部102通过图像处理装置10中包含的照明控制部12控制照射时机等。
另外,在本实施方式中,从照明部102照射的近红外线是指与红色的可见光线接近的具有0.7~2.5μm的波长的电磁波。在此,利用其具有接近可见光线的特性,近红外线被用于红外线摄像机等中。
摄像机103拍摄从照明部102向车辆A1及信号机110等照射的近红外线的反射。并且,如图2所示,摄像机103例如与传感器101及照明部102同样地安装于设置在交叉路口的支柱111上。
另外,摄像机103也可以切换成在较明亮的时间段取得包含可见光的图像,在较阴暗的时间段拍摄包含近红外线的图像。并且,摄像机103对图像的拍摄可以连续地进行,也可以在检测出交通违章时随时进行。
另外,在本实施方式中,作为由摄像机103取得的单色图像,使用了红外线图像,但也可以使用其它的单色图像。
<图像处理装置10的结构>
图像处理装置10从由摄像机103拍摄的单色的红外线图像(单色图像的一种)中选择实施配色处理的图像,对该所选择的图像中的信号机的区域实施配色处理而生成彩色图像。并且,图像处理装置10例如设置在进行交通违章的监管的警察局等。并且,如图1所示,图像处理装置10具有违章检测部11、照明控制部12、图像取得部13、选择部14、第2存储部15、信号检测部16、颜色判定部17、颜色设定部18、第1存储部19和显示部20。
违章检测部11接收在交叉路口等设置的、检测行驶中的车辆A1、A2的行驶状态等的传感器101的检测结果来检测有无交通违章。
具体地讲,如图3所示,违章检测部11具有DB(数据库)11a和判定单元11b。
在DB 11a中保存有与交通违章的证实条件有关的信息。作为证实条件,例如对于闯红灯的情况,包括传感器101所设置的交叉路口处的信号的切换时刻等的信息。另外,在DB 11a中,只要与实施其它交通违章的监管的各种交通违章的内容对应地,保存有与各种交通违章的证实所需的条件等有关的信息即可。
判定单元11b参照保存在DB 11a中的各种交通违章的证实条件和从传感器101接收到的检测结果(传感器输出),判定是否发生了交通违章。例如,对于闯红灯的情况,当传感器101检测出进入到红灯的交叉路口的车辆A1、A2的情况下,判定为有交通违章发生。
于是,作为有闯红灯的交通违章发生,判定单元11b向照明控制部12及选择部14输出违章检出信息。
照明控制部12控制向车辆A1、A2照射近红外线的照明部102。具体地讲,在从违章检测部11的判定单元11b接收到违章检出信息时,控制照明部102使得立刻向该成为交通违章的对象的行驶中的车辆A1等照射近红外线。
图像取得部13取得由摄像机103拍摄的多个红外线图像。并且,图像取得部13在从违章检测部11的判定单元11b接收到违章检出信息时,向摄像机103发送摄影指令,使该摄像机103拍摄包含向该成为交通违章的对象的行驶中的车辆A1等照射的近红外线的反射在内的图像。于是,图像取得部13从摄像机103接收该摄像机103收到摄影指令而拍摄的与交通违章有关的红外线图像或者连续拍摄的动态图像等连续摄像图像。
选择部14对于在图像取得部13中取得的多个红外线图像,选择满足交通违章检测所需的条件的一张或者多张红外线图像。
具体地讲,选择部14首先如图4所示,根据从图像取得部13接收到的多个红外线图像和违章检出信息(有无交通违章),选择与交通违章相关联的红外线图像。接着,选择部14根据在第2存储部15中保存的选择条件,进一步选择最适合作为交通违章的证据图像的红外线图像。
在此,将在后文具体叙述的第2存储部15存储适合作为交通违章的证据图像的图像的条件。例如,只要将必须摄入到红外线图像中的内容(信号机和/或车牌等)与交通违章的类型对应起来进行存储即可。
另外,关于在选择部14中选择的红外线图像,根据交通违章的类型和红外线图像的状态等,可以是一张,也可以是多张组合。
并且,选择部14输出所选择的红外线图像的信息。另外,关于从选择部14输出的红外线图像,也可以除所选择的红外线图像以外,还输出剩余的未被选择的红外线图像。
第2存储部15保存检测交通违章所需的图像条件等的信息。
在此,关于在第2存储部15中保存的检测交通违章所需的图像条件,例如在交通违章是闯红灯的情况下,是指包含信号机和闯红灯的车辆等的图像等的条件。并且,也包括所拍摄的对象物被清晰地拍摄,能够用于车牌的字符识别和驾驶员的人脸识别等条件。
信号检测部16首先检测在选择部14中选择的红外线图像中包含的信号机的区域。具体地讲,信号检测部16根据红外线图像中包含的物体的形状等来检测信号机,将其中成为发光部分的多个区域设定为配色区域。并且,信号检测部16将该图像中与信号机的发光部分的区域有关的信息、和所选择的红外线图像信息一并输出。
在此,例如在车辆用信号机的情况下,配色区域是沿横向或者纵向排列的3个圆状区域,在行人用信号机的情况下,配色区域是沿纵向排列的2个人形区域。在车辆用信号机的情况下,有时配色区域也用箭头表示。
另外,这些配色区域有时根据国家和地区的不同而不同,因而可以与作为摄像对象的信号机的形状等对应地,预先存储信号机的外形形状和配色区域的形状。
另外,在摄像机103被固定配置而始终拍摄相同区域的情况下,信号检测部16也可以以信号机位于红外线图像中的特定区域为前提,在该区域中进行信号机的检测。
颜色判定部17从信号控制装置104取得所选择的红外线图像中包含的信号机的控制信息,根据该红外线图像的摄像时刻(年月日时分秒)判定摄像当时的实际的信号机的发光颜色。
信号控制装置104例如可以作为在地域的交通管制中心设置的信号机的中央控制装置而设置,也可以作为在各信号机周边设置的单独的控制装置而设置。另外,在信号控制装置104是对每个信号机设置的单独的装置的情况下,也可以将信号控制装置104和图像处理装置10作为一体来设置。
具体地讲,如图5所示,颜色判定部17从信号检测部16取得在选择部14中所选择的红外线图像的信息和信号区域信息。并且,颜色判定部17向信号控制装置104发送与所选择的红外线图像的摄像时刻相关的信息,并从信号控制装置104取得该日期时间下的信号机110的控制信息(发光颜色信息)。
例如,在红外线图像的摄像日期时间是“2013年11月11日16时20分35秒”的情况下,从信号控制装置104取得与该时间对应的信号机的控制信息。
此时,从信号控制装置104向颜色判定部17发送“2013年11月11日16时21分35秒”的周边信号机的控制信息。
具体地讲,在上述红外线图像的摄像日期时间下周边信号机的控制信息如下的情况下,向颜色判定部17发送包含上述摄像时刻的(c)的信息(信号机颜色:红色)。
(a)2013年11月11日16时16分00秒~16时19分50秒:绿色
(b)2013年11月11日16时19分50秒~16时20分00秒:黄色
(c)2013年11月11日16时20分00秒~16时24分00秒:红色
(d)2013年11月11日16时24分00秒~16时27分50秒:绿色
然后,颜色判定部17输出与所选择的红外线图像有关的信息、与该图像中的信号机的区域有关的信息、与摄像日期时间下的实际的信号机颜色有关的信息。
另外,在本实施方式中,关于颜色判定部17对信号机的颜色判定,向信号控制装置104发送在选择部14中所选择的红外线图像的摄像时刻信息,接收与该日期时间对应的信号控制信息来进行判定,但是本发明不限于此。
例如,也可以是,始终从信号控制装置104接收信号控制信息,并保存在存储部等中。
在这种情况下,颜色判定部17在从信号检测部16接收到在选择部14中所选择的红外线图像时,根据该红外线图像的摄像时刻信息和信号控制信息,判定在红外线图像的摄像时的实际的信号机颜色即可。
如图6所示,颜色设定部18从颜色判定部17接收所选择的红外线图像的信息、与检测出的信号机区域有关的信息、与所判定的信号机的颜色有关的信息,对所选择的红外线图像的信号机区域C1(参照图7)实施配色处理。
具体地讲,颜色设定部18对接收到的红外线图像,根据与信号机区域C1有关的信息设定实施配色处理的发光位置的区域,并且根据信号机的颜色信息设定对该区域配色的颜色(例如,红、黄、绿中的任意一种颜色)。
并且,如图6所示,颜色设定部18向第1存储部19发送对信号机区域C1进行了配色处理后的彩色图像并使第1存储部19对其进行保存。并且,颜色设定部18将对信号机区域C1进行了配色处理后的彩色图像也输出给液晶显示用显示器等显示部20。
在此,关于在颜色设定部18中的配色处理,除了仅将图7所示的信号机区域C1设为配色处理的对象以外,也可以采用其它的配色处理技术,将也包括车辆区域C2、车辆编号区域C3、驾驶员区域C4、背景区域C5在内的图像整体作为对象。或者,也可以是,除信号机区域C1以外,例如还限定于与交通违章和交通事故相关的车辆区域C2、车辆编号区域C3、驾驶员的脸部等的区域C4,作为配色处理的对象。
另外,关于上述其它的配色处理技术能够使用作为公知技术而周知的方法,例如日本特开2011-50049P号公报所公开的方法等。另外,作为将单色的红外线图像彩色图像化的技术,不限于该方法,也可以使用其它的公知技术(参照上述专利文献2~6)。
第1存储部19从颜色设定部18接收对信号机区域C1进行了配色处理后的彩色图像并进行保存。并且,当事后在警察局等进行交通违章的监管、交通事故的查证等时,调出并使用在第1存储部19中保存的彩色图像。
显示部20例如是在进行交通违章监管的警察局等设置的液晶显示器和PC用监视器等。并且,显示部20接收在颜色设定部18中进行了配色处理后的彩色图像,将彩色图像和有关交通违章的信息一并进行显示。
<显示部20的显示方式>
在本实施方式的交通管理系统100中,使在进行交通违章监管的警察局等设置的显示部20按照如下的显示方式显示包括对信号机区域C1进行了配色处理后的彩色图像在内的与交通违章有关的各种信息。
<闯红灯的情况>
在交通违章是闯红灯的情况下,如图8所示,在显示画面S1中,将有关一次交通违章的信息全部显示在一个画面内。
如图8所示,显示画面S1具有违章内容显示区域31、确定用图像显示区域32及人物信息显示区域33这三个显示区域。
在违章内容显示区域31中显示违章内容(例如闯红灯)、违章场所和图像的摄影日期时间。在本实施方式中,如图8所示,记述了拍摄作为彩色图像以及单色图像的源图像的红外线图像的年月日时分秒,以便使用一张彩色图像和两张单色图像证实交通违章。
在确定用图像显示区域32中显示对信号机区域C1进行了配色处理后的彩色图像,以便证实在违章内容显示区域31中显示的违章内容。在本实施方式中,如图8所示显示了一张违章确定用彩色图像P1和两张单色的人物确定用图像P2、P3。
违章确定用彩色图像P1示出了在对向车道的信号是红灯的状态下,对象车辆在交叉路口处行驶的状态。通常,对向车道的信号和对象车辆所行驶的车道的信号是同步且相同的显示。因此,该彩色图像被判定为能够进行违章的证实,而作为违章确定用彩色图像P1被提取出来。
关于人物确定用图像P2,通过图像处理将在违章确定用彩色图像P1中被判定为闯红灯的违章车辆的前面的图像中的车辆编号(车牌)部分放大显示。根据该图像确定违章车辆的车辆编号,由此能够参照预先登记的车检信息等确定违章车辆的所有者的姓名或者使用者(企业)的名称等。
关于人物确定用图像P3,通过图像处理将在违章确定用彩色图像P1中被判定为闯红灯的违章车辆的前面的图像中的驾驶席附近放大显示。根据该图像确定违章车辆的驾驶员、同乘者的脸部,由此能够参照预先登记的驾照的脸部照片信息等来确定违章车辆的驾驶员、同乘者姓名。
在人物信息显示区域33中显示与使用在确定用图像显示区域32显示的人物确定用图像P2、P3而确定的人物(驾驶员、所有者、使用者等)有关的信息。例如,所显示的驾驶员信息包括驾驶员的姓名、住址、驾照编号、违章历史记录、扣分等数据。
在此,在本实施方式的交通管理系统100中,如上所述对从图像取得部13接收到的大量的红外线图像中最适合于检测交通违章的图像,选择性地实施信号机区域的配色处理。
由此,与对全部红外线图像的信号机区域实施配色处理的情况相比,能够大幅降低配色处理所需的数据处理的负担。
另外,最终,与保存对全部红外线图像实施了配色处理后的彩色图像的情况相比,保存彩色图像的第1存储部19能够大幅削减存储容量。
另外,在本实施方式中,缩窄范围到对所选择的红外线图像中包含的信号机区域C1实施配色处理,因而能够进一步有效地降低数据处理量,避免第1存储部19的存储容量的增大。
<本实施方式的配色处理流程>
在本实施方式的交通管理系统100中,在图像处理装置10中按照图9所示的流程图,从由摄像机103取得的红外线图像中选择满足交通违章和交通事故的检测、车辆的确定等所需的条件的红外线图像进行配色处理。
具体地讲,如图9所示,首先在步骤S11中,传感器101检测例如闯红灯等交通违章的车辆。并且,传感器101向图像处理装置10的违章检测部11发送违章检测信息。
接着,在步骤S12中,违章检测部11参照保存在DB 11a中的各种条件等,进行有无检测出交通违章的判定。
在此,在判定为有交通违章发生的情况下,进入步骤S13。另一方面,在判定为没有交通违章发生的情况下,再次返回到步骤S11。
接着,在步骤S13中,从违章检测部11接收到违章检出信息的照明控制部12向照明部102发出照明指令。
接着,在步骤S14中,从照明控制部12接收到照明指令的照明部102向违章车辆照射近红外线。
接着,在步骤S15中,与从照明部102照射近红外线的时刻同步地,摄像机103取得一个或者多个包含违章车辆的红外线图像。
接着,在步骤S16中,从摄像机103拍摄并在图像取得部13中取得的多个红外线图像中,选择部14参照保存在第2存储部15中的证实交通违章所需的条件等,选择一张或者多张成为配色处理的对象的红外线图像。
接着,在步骤S17中,检测在步骤S16中选择出的红外线图像中的信号机区域C1(参照图7)。在此,关于信号机区域C1的检测,可以根据红外线图像中包含的物体的形状等检测出信号机,将其中成为发光部分的三个或者两个区域设定为配色区域。
接着,在步骤S18中,根据在选择部14中选择出的红外线图像的摄像时间和从信号控制装置104接收到的信号机控制信息,设定在摄像日期时间(分秒)下的实际的信号机颜色的信息。
接着,在步骤S19中,对在步骤S17中设定的信号机的发光部分的区域C1实施配色处理,以使得反映出在步骤S18中设定的颜色信息。
接着,在步骤S20中,将在颜色设定部18中生成的彩色图像保存在第1存储部19中。并且,当在警察局等进行交通违章的监管、交通事故的查证等时,向设置在警察局的显示部20输出彩色图像。
在本实施方式的交通管理系统100中,如上所述在进行交通违章的监管、交通事故的查证的警察局等,从连续地或者断续地拍摄的多个红外线图像中选择成为用于确定交通违章的内容和/或违章车辆、驾驶员等的证据的重要图像。并且,形成对所选择的一个或者多个红外线图像中包含的信号机区域实施了配色处理的彩色图像。
由此,能够获得准确再现了在进行交通违章的监管和交通事故的查证时成为重要信息的信号机颜色的图像。因此,能够有效地实施有无交通违章的确定和交通事故中的状况掌握。
另外,提取最小必要限度的红外线图像,仅对其中包含的信号机区域实施配色处理,因而与对由摄像机103取得的全部红外线图像的信号机区域实施配色处理的情况相比,能够大幅降低数据处理量。
另外,对于已完成选择的要被实施配色处理的红外线图像,仅在对于确定交通违章等而言重要的信号机区域实施配色处理,由此也能够进一步降低数据处理量,并提高交通违章的监管效率。
(实施方式2)
使用图10对本实施方式的交通管理系统200及图像处理装置210说明如下。
另外,本实施方式的交通管理系统200与上述实施方式1的不同之处在于,使用由摄像机103拍摄的红外线图像进行交通违章的检测,而不使用传感器。关于其它结构具有与在上述实施方式1中说明的结构相同的功能,因而在此标注相同的标号,并省略其详细说明。
在本实施方式的交通管理系统200中,照明部102进行的近红外线的照射以及摄像机103进行的拍摄是连续进行的。
于是,图像取得部13接收摄像机103连续拍摄的红外线图像,并向违章检测部11及选择部14发送。
违章检测部11进行红外线图像中包含的车辆有无交通违章的判定,并向选择部14发送判定结果。
另外,与上述实施方式1同样,违章检测部11的违章检测是通过判定单元11b参照保存在DB 11a中的各种条件进行的。
选择部14在从违章检测部11接收到有检测出交通违章的判定结果的情况下,从在检测该交通违章时使用的红外线图像中选择满足交通违章的证实所需的条件的红外线图像,并向信号检测部16发送。
另外,在选择部14对交通违章的证实所需的条件与上述实施方式1同样地被保存在第2存储部15中。
信号检测部16检测在选择部14中选择出的红外线图像中包含的信号机区域。并且,信号检测部16将与该图像中的信号机的发光位置有关的信息、和所选择的红外线图像信息一并输出。
颜色判定部17从信号控制装置104取得所选择的红外线图像中包含的信号机的控制信息,根据该红外线图像的摄像时刻(年月日时分秒)判定摄像当时的实际的信号机的发光颜色。
颜色设定部18对在选择部14中选择出的红外线图像的信号机区域实施配色处理,生成彩色图像。并且,颜色设定部18将所生成的彩色图像保存在第1存储部19中,并且向显示部20输出。
根据本实施方式的交通管理系统200,无需使用用于检测交通违章的传感器等,也能够得到与上述实施方式1相同的效果,即,在进行交通违章的监管和交通事故的查证等时,能够获得准确反映出当时的信号机颜色的彩色图像。
另外,当需要在违章检测部11中检测信号机颜色的情况下,也可以使用与颜色判定部17及第1存储部19对信号机颜色的判定同样的检测方法。
另外,仅提取最小必要限度的红外线图像来实施配色处理,因而与对摄像机103取得的全部红外线图像实施配色处理的情况相比,也发挥能够大幅降低数据处理量的效果。
另外,对于已完成选择的要被实施配色处理的红外线图像,仅在信号机区域实施配色处理,以便反映出对于确定交通违章等而言重要的信号机颜色,由此也能够进一步降低数据处理量,并提高交通违章的监管等的效率。
(实施方式3)
使用图11对本实施方式的交通管理系统300及图像处理装置310说明如下。
另外,在本实施方式的交通管理系统300中,具有将由摄像机103连续拍摄的红外线图像暂且全部保存的第3存储部21,这一点与上述实施方式1、2不同。
另外,在本实施方式中,使用由摄像机103拍摄的红外线图像进行交通违章的检测,而不使用传感器,这一点与上述实施方式2相同。
关于其它结构具有与在上述实施方式1、2说明的结构相同的功能,因而在此标注相同的标号,并省略其详细说明。
在本实施方式的交通管理系统300中,与上述实施方式2同样,照明部102进行的近红外线的照射以及摄像机103进行的拍摄是连续进行的。
另外,图像取得部13接收摄像机103连续拍摄的红外线图像,并向暂且保存全部红外线图像的第3存储部21发送。
违章检测部11当在警察局等进行交通违章的监管时,使用从第3存储部21连续取得的红外线图像,事后进行车辆有无交通违章的判定,并向选择部14发送判定结果。
另外,此时保存在第3存储部21中的红外线图像也被发送给选择部14。
在此,违章检测部11的违章检测与上述实施方式1、2一样,是通过判定单元11b参照保存在DB 11a中的各种条件进行的。
选择部14在从违章检测部11接收到有检测出交通违章的判定结果的情况下,从在检测出该交通违章时使用的红外线图像中选择满足交通违章的证实所需的条件的红外线图像,并向信号检测部16发送。
另外,选择部14对交通违章的证实所需的条件与上述实施方式1、2一样被保存在第2存储部15中。
信号检测部16检测在选择部14所选择的红外线图像中包含的信号机区域。并且,信号检测部16将与该图像中的信号机的发光位置的区域有关的信息与所选择的红外线图像信息一并输出。
颜色判定部17从信号控制装置104取得所选择的红外线图像中包含的信号机的控制信息,根据该红外线图像的摄像时刻(年月日时分秒)判定摄像当时的实际的信号机的发光颜色。
颜色设定部18对在选择部14中选择的红外线图像的信号机区域实施配色处理,生成彩色图像。并且,颜色设定部18将所生成的彩色图像保存在第1存储部19中,并且向显示部20输出。
根据本实施方式的交通管理系统300,无需使用检测交通违章用的传感器等,也能够得到与上述实施方式1、2相同的效果,即在进行交通违章的监管和交通事故的证实等时,能够获得准确反映出当时的信号机颜色的彩色图像。
另外,仅提取最小必要限度的红外线图像来实施配色处理,因而与对由摄像机103取得的全部红外线图像实施配色处理的情况相比,也发挥能够大幅降低数据处理量的效果。
另外,对于已完成选择的要被实施配色处理的红外线图像,仅在反映出对于确定交通违章等而言重要的信号机颜色的信号机区域实施配色处理,由此也能够进一步降低数据处理量,并提高交通违章的监管效率。
(实施方式4)
使用图12对本实施方式的交通管理系统400及图像处理装置410说明如下。
另外,在本实施方式的交通管理系统400中,使用传感器101进行交通违章的检测,这一点与上述实施方式1相同。另外,具有将由摄像机103连续拍摄的红外线图像暂且全部保存的第3存储部21,这一点与上述实施方式1、2不同,但与上述实施方式3相同。
关于其它结构具有与在上述实施方式1~3说明的结构相同的功能,因而在此标注相同的标号,并省略其详细说明。
在本实施方式的交通管理系统400中,由传感器101检测有无交通违章。
关于照明部102进行的近红外线的照射以及摄像机103进行的红外线图像的拍摄,与上述实施方式2、3一样是连续进行的。
图像取得部13不论违章检测部11有无检测出交通违章,都接收摄像机103连续拍摄的红外线图像,并向暂且保存全部红外线图像的第3存储部21发送。
当在警察局等事后进行交通违章的监管时,违章检测部11参照传感器101检测出交通违章的时间等,并使用从第3存储部21连续取得的红外线图像的一部分,进行车辆有无交通违章的判定,并向选择部14发送判定结果。
另外,此时在第3存储部21中保存的红外线图像也被发送给选择部14。
在此,违章检测部11的违章检测与上述实施方式1~3一样,是通过判定单元11b参照保存在DB 11a中的各种条件进行的。
选择部14在从违章检测部11接收到有检测出交通违章的判定结果的情况下,从在检测该交通违章时使用的红外线图像中选择满足交通违章的证实所需的条件的红外线图像,并向信号检测部16发送。
另外,选择部14中的交通违章的证实所需的条件与上述实施方式1~3一样被保存在第2存储部15中。
信号检测部16检测在选择部14所选择的红外线图像中包含的信号机区域。并且,信号检测部16将与该图像中的信号机的发光位置有关的信息、和所选择的红外线图像信息一并输出。
颜色判定部17从信号控制装置104取得所选择的红外线图像中包含的信号机的控制信息,根据该红外线图像的摄像时刻(年月日时分秒)判定摄像当时的实际的信号机的发光颜色。
颜色设定部18对选择部14所选择的红外线图像的信号机区域实施配色处理,生成彩色图像。并且,颜色设定部18将所生成的彩色图像保存在第1存储部19中,并且向显示部20输出。
在本实施方式的交通管理系统400中,能够使用用于检测交通违章的传感器等实时检测有无交通违章发生。并且,在事后进行交通违章的监管等时,从在由该传感器101检测出交通违章的时间段拍摄的多个红外线图像和红外线动态图像中,提取最适合于证实交通违章的红外线图像等,实施配色处理。
由此,无需使用用于检测交通违章的传感器等,也能够得到与上述实施方式1~3相同的效果,即在进行交通违章的监管和交通事故的证实等时,能够获得准确反映出当时的信号机颜色的彩色图像。
另外,仅提取最小必要限度的红外线图像来实施配色处理,因而与对由摄像机103取得的全部红外线图像实施配色处理的情况相比,也发挥能够大幅降低数据处理量的效果。
另外,对于已完成选择的要被实施配色处理的红外线图像,仅对为了反映出对于确定交通违章等而言重要的信号机颜色的信号机区域实施配色处理,由此也能够进一步降低数据处理量,并提高交通违章的监管效率。
[其它实施方式]
以上对本发明的一个实施方式进行了说明,但本发明不限于上述实施方式,能够在不脱离发明的主旨的范围中进行各种变更。
(A)本发明的另一个实施方式的交通管理系统500及图像处理装置510例如也可以是如图13所示的结构。
具体地讲,如图13所示,交通管理系统500通过互联网或LAN(Local AreaNetwork,局域网)、WAN(Wide Area Network,广域网)等网络N,与外部的交通违章监管装置(摄像机103)连接。并且,交通管理系统500与存储装置160连接。
交通管理系统500由计算机终端构成,具有CPU(Central Processing Unit)150、RAM(Random Access Memory)151、输出部152、通信部153、输入部154及图像处理装置510等。
CPU 150执行各种运算处理等,并且执行被读入至RAM 151并展开的规定的控制程序。通过该控制程序执行交通管理系统500中包含的各构成要素的功能。
RAM 151由SRAM(Static RAM,静态随机存取存储器)或者DRAM(Dynamic RAM,动态随机存取存储器)等存储元件构成,进行在CPU 150的处理过程中产生的数据等的存储。
输出部152具有对传输图像及声音等模拟信号或者数字信号的线缆等进行连接的连接端子。并且,输出部152通过这些线缆与上述的各实施方式的显示部20连接。输出部152按照显示控制单元(未图示)的指令,将从存储装置160读出的各种信息转换为图像信号,并经由线缆向显示部20输出。
通信部153具有用于连接通信线缆的连接端子或者无线通信接口,并与网络N连接。通信部153与和网络N连接的交通违章监管装置(传感器101、摄像机103等)之间进行数据的发送和接收。
输入部154由(鼠标、键盘、在画面上进行操作的触摸屏等)构成。输入部154受理通过用户操作进行的信息输入及菜单选择等,将所受理的操作内容通知给CPU150。
存储装置160由半导体存储器、磁记录介质、光记录介质等构成。另外,上述的各实施方式的第1存储部19、第2存储部15、第3存储部21可以包含在该存储装置160中,也可以是另外连接的大容量存储装置。另外,存储装置160也可以通过网络与交通管理系统500连接。
(B)在上述实施方式中举例说明了在检测出交通违章的发生后,选择与交通违章的证实相关的红外线图像,对于该图像对信号机区域实施配色处理的例子。但是,本发明不限于此。
例如,也可以是,不论有无交通违章发生,都对连续地或者断续地拍摄的全部红外线图像的信号机区域实施配色处理。即,也可以是不具有上述的各实施方式1~4中的选择部14的结构。
在这种情况下,对所取得的红外线图像全部实施配色处理,因而能够获得再现了全部红外线图像中包含的信号机在拍摄当时的实际颜色的彩色图像。
在此,在本实施方式中,将配色处理的对象区域限定为信号机区域。因此,即使是对所取得的全部红外线图像实施配色处理的情况下,也能够将数据处理量的增大抑制在最小限度。
(C)在上述实施方式中举例说明了图像处理装置10具有检测有无交通违章的违章检测部11的例子。但是,本发明不限于此。
作为本发明的应用范围,交通违章的发生不是必须的,因而也可以是不具有违章检测部的图像处理装置及具有该图像处理装置的交通管理系统。
在这种情况下,通过获得准确再现了交通事故发生时的信号机颜色的图像,能够有效地运用于交通事故的查证。
(D)在上述实施方式中举例说明了在检测出交通违章时,与红外线的照射时刻对应地由摄像机103取得多个红外线图像的例子。但是,本发明不限于此。
例如,也可以如在拍摄动态图像时那样,由摄像机取得连续地拍摄了交叉路口处的状况的多个红外线图像。
在这种情况下,将会取得大量与交通违章没有直接关系的红外线图像。因此,在应用本发明时,与对全部红外线图像实施配色处理的情况相比,数据处理量的降低效果更大,并能够抑制第1存储部19的存储容量的增大,从这一点讲更加适合。
(E)在上述实施方式中举例说明了如下的示例:使用由摄像机103从行驶车辆的正面拍摄到的红外线图像,选择满足必要的条件的红外线图像,并对信号机区域进行配色处理,以便确定交通违章的内容、违章车辆、驾驶员等人物。但是,本发明不限于此。
例如,也可以是,使用在拍摄行驶车辆的后部的方向设置摄像机而取得的红外线图像,选择满足必要的条件的红外线图像,以便确定交通违章的内容、违章车辆、违章车辆的所有者。
在这种情况下,违章车辆的驾驶员无法根据图像确定,因而只要根据违章车辆的车辆编号等确定所有者即可。
另外,当在拍摄行驶车辆的后部的方向上设置了摄像机的情况下,能够以信号机110的正面和违章车辆包含在一张图像中的方式进行摄像。在这种情况下,存在根据这一张图像就能够确定闯红灯的违章车辆及其所有者的可能性。
因此,在驾驶员的确定不是用于认定交通违章的必须条件的情况下,也可以在拍摄行驶车辆的后部的方向上设置摄像机。
(F)在上述实施方式中,以交通管理系统100、200、300、400包括液晶显示器等显示部20的结构为例进行了说明。但是,本发明不限于此。
例如,也可以作为不包括液晶显示器等显示部的系统,构成本发明的交通管理系统及图像处理装置。
在这种情况下,作为外部装置,使用液晶显示器等显示单元,由此能够得到与上述情况相同的效果,即能够利用简洁的结构高效地进行交通违章的监管。
(G)在上述实施方式中举例说明了如图2所示的例子:针对一条车道设置一个传感器101和/或摄像机103等,进行交通违章的检测和红外线图像的取得。但是,本发明不限于此。
例如,也可以针对多条车道设置一个传感器和/或摄像机,取得用于确定违章内容等的图像。
在这种情况下,通过设置具有涵盖多条车道的视野范围及析像度的摄像机,能够从行驶于多条车道的对象车辆中有效地检测出违章车辆。因此,能够使系统的结构更加简洁。
另外,摄像机的摄影方向不限于沿着道路的行驶方向的方向。
例如,也可以是,在设于交叉路口的拐角部分的支柱等设置摄像机来拍摄交叉路口整体,使用该图像确定交通违章的内容、违章车辆、违章车辆的驾驶员和/或所有者等。
或者,也可以是,在设于交叉路口的拐角部分的信号机的支柱上设置摄像机来拍摄交叉路口整体,使用该图像确定交通违章的内容、违章车辆、违章车辆的驾驶员和所有者等。
在这种情况下,摄像机能够拍摄交叉路口整体,因而存在能够确定违反了禁止左右拐弯的违章车辆及其驾驶员等的可能性。
(H)在上述实施方式中,作为在本系统中进行检测及管理的交通违章的例子,主要以闯红灯为例进行了详细说明。但是,本发明不限于此。
例如,在本系统中,除在上述实施方式中示例的交通违章以外,也能够进行传感器和/或摄像机等能够检测的交通违章和交通事故、即在各个国家制定的法律等中规定的各种交通违章和交通事故的检测及管理。
(I)在上述实施方式中,以为了成为进行交通违章的监管的场所,在交叉路口设置传感器101和/或摄像机103、信号控制装置104等为例进行了说明。但是,本发明不限于此。
例如,在进行闯红灯的监管的情况下,也可以在视野开阔、行驶速度容易提高的直行道路等设置传感器和摄像机等。
对于其它的交通违章也一样,通过在具备该交通违章容易发生的条件的道路的周边设置传感器和摄像机等,能够提高监管的效率。
(J)在上述实施方式中举例说明了将本发明应用于进行车辆的交通违章的监管的交通管理系统的例子。但是,本发明不限于此。
例如,本发明也可以应用于监管自行车和行人的交通违章用的交通管理系统。
在这种情况下,与上述各实施方式一样,通过准确再现在检测出交通违章时和交通事故发生时的信号机颜色,能够高效地监管自行车和行人闯红灯等的交通违章。
(K)在上述实施方式中举例说明了将本发明应用于进行车辆的交通违章的监管的交通管理系统的例子。但是,本发明不限于此。
例如,本发明的图像处理装置除在交通违章的监管时使用以外,也可以形成准确再现了交通事故发生时的信号机颜色的彩色图像。
在这种情况下,能够准确再现交通事故发生的时间下的信号机颜色的信息,因而能够有效地进行交通事故的查证。
(L)在上述实施方式中举例说明了从由摄像机拍摄的多个红外线图像中选择满足规定条件的一个或者多个红外线图像来实施配色处理的例子。但是,本发明不限于此。
例如,在由摄像机进行动态图像摄影的情况下,也可以仅截取满足规定条件的动态图像的一部分,选择构成这一部分动态图像的多个红外线图像来实施配色处理。
在这种情况下,例如能够生成与交通违章和交通事故的检测相关的动态图像的一部分作为准确再现了信号机颜色的彩色图像,因而能够有效地实施交通违章的监管和交通事故的查证。
产业上的可利用性
本发明的图像处理装置发挥能够准确再现信号机周边的摄像图像中包含的信号机的颜色的效果,因而能够广泛应用于取得单色图像的各种装置。
标号说明
10图像处理装置;11违章检测部;11a DB;11b判定单元;12照明控制部;13图像取得部;14选择部;15第2存储部;16信号检测部;17颜色判定部;18颜色设定部;19第1存储部;20显示部;21第3存储部;31违章内容显示区域;32确定用图像显示区域;33人物信息显示区域;100交通管理系统;101传感器;102照明部;103摄像机(摄像装置);104信号控制装置;110信号机;111支柱;150CPU(Central Processing Unit);151RAM(Random AccessMemory);152输出部;153通信部;154输入部;160存储装置;200交通管理系统;210图像处理装置;300交通管理系统;310图像处理装置;400交通管理系统;410图像处理装置;500交通管理系统;510图像处理装置;A1、A2车辆;C1信号机区域;C2、C3、C4区域(非配色区域);P1违章确定用彩色图像;P2、P3人物确定用图像;S1画面。

Claims (14)

1.一种图像处理装置,其中,该图像处理装置具有:
图像取得部,其从拍摄信号机的周边的摄像装置取得单色图像;
选择部,其根据规定条件从所述图像取得部取得的多个单色图像中,选择成为实施配色处理的对象的所述单色图像;
信号检测部,其检测所选择的所述单色图像中包含的信号机的区域;
颜色判定部,其从所述信号检测部取得所选择的所述单色图像的信息以及与所述信号机的区域有关的信息,向控制所述信号机的信号控制装置发送与所选择的所述单色图像的摄像时刻相关的信息,从所述信号控制装置取得该摄像时刻下的所述信号机的控制信息,根据该控制信息确定与所述单色图像的摄像时刻对应的信号机的颜色;以及
颜色设定部,其从所述颜色判定部接收所选择的所述单色图像的信息、与所述信号机的区域有关的信息以及与所确定的信号机的颜色有关的信息,对所选择的所述单色图像中包含的所述信号机的区域进行配色处理,以使得所述信号机的区域成为所述颜色判定部确定的所述信号机的颜色,输出所述信号机的区域被彩色化的图像。
2.根据权利要求1所述的图像处理装置,其中,
所述图像处理装置还具有违章检测部,该违章检测部检测所述单色图像中包含的车辆有无交通违章,
当所述违章检测部检测出所述单色图像中包含成为交通违章的监管对象的违章车辆的情况下,所述颜色设定部对在所述选择部所选择的所述单色图像中包含的所述信号机的区域进行配色处理。
3.根据权利要求2所述的图像处理装置,其中,
所述违章检测部是检测成为交通违章的监管对象的所述车辆的状态的传感器。
4.根据权利要求2所述的图像处理装置,其中,
所述违章检测部是拍摄成为交通违章的监管对象的所述车辆的摄像装置。
5.根据权利要求1所述的图像处理装置,其中,
当在所述单色图像中包含与交通事故有关的车辆和/或行人的情况下,所述颜色设定部对在所述选择部所选择的所述单色图像中包含的所述信号机的区域进行配色处理。
6.根据权利要求1~5中任意一项所述的图像处理装置,其中,
所述选择部根据被摄入到所述单色图像中的对象物、对象者、内容和清晰度,选择满足确定交通违章或者交通事故所需的条件的单色图像。
7.根据权利要求1~5中任意一项所述的图像处理装置,其中,
所述图像处理装置还具有第1存储部,该第1存储部将所述颜色设定部对所述信号机的区域实施了配色处理的所述被彩色化的图像、或者所述颜色设定部要实施配色处理的所述单色图像与所述颜色判定部确定出的颜色信息关联起来进行保存。
8.根据权利要求1所述的图像处理装置,其中,
所述图像处理装置还具有第2存储部,该第2存储部存储所述选择部对所述单色图像的选择条件。
9.根据权利要求1~5中任意一项所述的图像处理装置,其中,
所述信号控制装置设置在所述信号机的附近,
所述颜色判定部从所述信号控制装置通过无线或者有线方式取得所述信号机的控制信息。
10.根据权利要求1~5中任意一项所述的图像处理装置,其中,
所述信号控制装置设置在进行包括设置有所述信号机的地域在内的多个信号机的控制的控制管理室中,
所述颜色判定部从所述信号控制装置通过无线或者有线方式取得所述信号机的控制信息。
11.根据权利要求1~5中任意一项所述的图像处理装置,其中,
所述摄像装置设置在被设于交叉路口的所述信号机的周边。
12.根据权利要求1~5中任意一项所述的图像处理装置,
所述单色图像包含红外线图像。
13.一种交通管理系统,其中,该交通管理系统具有:
权利要求1~12中任意一项所述的图像处理装置;
照明部,其向被摄体照射红外光;以及
摄像装置,其拍摄向所述被摄体照射的红外光的反射光。
14.一种图像处理方法,其中,该图像处理方法包括:
图像取得步骤,从拍摄信号机的周边的摄像装置取得单色图像;
选择步骤,根据规定条件从通过所述图像取得步骤取得的多个单色图像中,选择成为实施配色处理的对象的所述单色图像;
信号检测步骤,检测所选择的所述单色图像中包含的信号机的区域;
颜色判定步骤,取得所选择的所述单色图像的信息以及与所述信号机的区域有关的信息,向控制所述信号机的信号控制装置发送与所选择的所述单色图像的摄像时刻相关的信息,从所述信号控制装置取得该摄像时刻下的所述信号机的控制信息,根据该控制信息确定与所述单色图像的摄像时刻对应的信号机的颜色;
颜色设定步骤,接收所选择的所述单色图像的信息、与所述信号机的区域有关的信息以及与所确定的信号机的颜色有关的信息,对所选择的所述单色图像中包含的所述信号机的区域进行配色处理,以使得所述信号机的区域成为在所述颜色判定步骤中确定出的所述信号机的颜色,并输出所述信号机的区域被彩色化的图像。
CN201680022290.7A 2015-07-08 2016-03-09 图像处理装置及具有该装置的交通管理系统、图像处理方法 Active CN107533798B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015137146A JP6418089B2 (ja) 2015-07-08 2015-07-08 画像処理装置およびこれを備えた交通管理システム、画像処理方法
JP2015-137146 2015-07-08
PCT/JP2016/057315 WO2017006582A1 (ja) 2015-07-08 2016-03-09 画像処理装置およびこれを備えた交通管理システム、画像処理方法

Publications (2)

Publication Number Publication Date
CN107533798A CN107533798A (zh) 2018-01-02
CN107533798B true CN107533798B (zh) 2020-08-14

Family

ID=57685435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680022290.7A Active CN107533798B (zh) 2015-07-08 2016-03-09 图像处理装置及具有该装置的交通管理系统、图像处理方法

Country Status (3)

Country Link
JP (1) JP6418089B2 (zh)
CN (1) CN107533798B (zh)
WO (1) WO2017006582A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112820124B (zh) * 2021-02-01 2022-07-01 北京嘉木天成科技有限公司 一种应用于智慧城市的智能交通指示系统

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1622622A (zh) * 2003-11-26 2005-06-01 株式会社日立制作所 监视系统
CN1870739A (zh) * 2005-05-26 2006-11-29 索尼株式会社 成像装置和方法、计算机程序产品以及成像系统
CN1912950A (zh) * 2006-08-25 2007-02-14 浙江工业大学 基于全方位视觉传感器的违章车辆监控装置
CN201374122Y (zh) * 2009-03-31 2009-12-30 深圳市赛格导航科技股份有限公司 一种交通违章检测装置
JP2011216051A (ja) * 2010-04-02 2011-10-27 Institute Of National Colleges Of Technology Japan 信号灯識別プログラムおよび信号灯識別装置
CN102737505A (zh) * 2011-04-15 2012-10-17 鸿富锦精密工业(深圳)有限公司 利用影像侦测违规车辆的系统及方法
CN103065470A (zh) * 2012-12-18 2013-04-24 浙江工业大学 基于单目多检测面的机器视觉的车辆闯红灯行为检测装置
CN103069465A (zh) * 2010-08-06 2013-04-24 株式会社尼康 信息管理装置、数据分析装置、信号机、服务器、信息管理系统、信号机控制装置及程序
CN104134350A (zh) * 2014-08-11 2014-11-05 浙江力石科技股份有限公司 一种交通违法行为识别智能球机系统
CN104508720A (zh) * 2012-08-01 2015-04-08 丰田自动车株式会社 驾驶辅助装置
JP2015090546A (ja) * 2013-11-05 2015-05-11 富士重工業株式会社 車外環境認識装置
JP2015095136A (ja) * 2013-11-13 2015-05-18 三菱電機株式会社 表示画像生成装置、信号色情報投影装置、前照灯制御装置、信号色情報表示装置、表示画像生成方法
CN104732764A (zh) * 2015-03-29 2015-06-24 安徽科力信息产业有限责任公司 基于交通信号机和视频监控联动的交通事故责任判别方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3224875B2 (ja) * 1992-09-10 2001-11-05 日本信号株式会社 画像式信号無視車検出方法
JP2008199166A (ja) * 2007-02-09 2008-08-28 Fujitsu Ltd 温度ドリフト補正装置及びその方法
JP5217950B2 (ja) * 2008-11-20 2013-06-19 トヨタ自動車株式会社 運転支援装置
JP5591308B2 (ja) * 2012-11-08 2014-09-17 本田技研工業株式会社 車両用運転支援装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1622622A (zh) * 2003-11-26 2005-06-01 株式会社日立制作所 监视系统
CN1870739A (zh) * 2005-05-26 2006-11-29 索尼株式会社 成像装置和方法、计算机程序产品以及成像系统
CN1912950A (zh) * 2006-08-25 2007-02-14 浙江工业大学 基于全方位视觉传感器的违章车辆监控装置
CN201374122Y (zh) * 2009-03-31 2009-12-30 深圳市赛格导航科技股份有限公司 一种交通违章检测装置
JP2011216051A (ja) * 2010-04-02 2011-10-27 Institute Of National Colleges Of Technology Japan 信号灯識別プログラムおよび信号灯識別装置
CN103069465A (zh) * 2010-08-06 2013-04-24 株式会社尼康 信息管理装置、数据分析装置、信号机、服务器、信息管理系统、信号机控制装置及程序
CN102737505A (zh) * 2011-04-15 2012-10-17 鸿富锦精密工业(深圳)有限公司 利用影像侦测违规车辆的系统及方法
CN104508720A (zh) * 2012-08-01 2015-04-08 丰田自动车株式会社 驾驶辅助装置
CN103065470A (zh) * 2012-12-18 2013-04-24 浙江工业大学 基于单目多检测面的机器视觉的车辆闯红灯行为检测装置
JP2015090546A (ja) * 2013-11-05 2015-05-11 富士重工業株式会社 車外環境認識装置
JP2015095136A (ja) * 2013-11-13 2015-05-18 三菱電機株式会社 表示画像生成装置、信号色情報投影装置、前照灯制御装置、信号色情報表示装置、表示画像生成方法
CN104134350A (zh) * 2014-08-11 2014-11-05 浙江力石科技股份有限公司 一种交通违法行为识别智能球机系统
CN104732764A (zh) * 2015-03-29 2015-06-24 安徽科力信息产业有限责任公司 基于交通信号机和视频监控联动的交通事故责任判别方法

Also Published As

Publication number Publication date
JP6418089B2 (ja) 2018-11-07
CN107533798A (zh) 2018-01-02
WO2017006582A1 (ja) 2017-01-12
JP2017021487A (ja) 2017-01-26

Similar Documents

Publication Publication Date Title
CN107534717B (zh) 图像处理装置及具有该图像处理装置的交通违章管理系统
US9195894B2 (en) Vehicle and mobile device traffic hazard warning techniques
ES2364056T3 (es) Sistema automatizado de monitorización y comunicación de infracciones de tráfico.
US20180334099A1 (en) Vehicle environment imaging systems and methods
US20110182473A1 (en) System and method for video signal sensing using traffic enforcement cameras
US20210192215A1 (en) Platform for the management and validation of contents of video images, picture or similar, generated by different devices
KR101729486B1 (ko) Avm 시스템에서의 사각 지대 감시 방법 및 그 avm 시스템
CN107111940B (zh) 交通违章管理系统和交通违章管理方法
CN109559519A (zh) 监控设备及其违章停车检测方法、装置、可读存储介质
CN113496213B (zh) 一种目标感知数据的确定方法、装置、系统及存储介质
KR102159144B1 (ko) 보행신호등 주변의 위반차량 무인단속시스템
WO2017038125A1 (ja) 違反抑止装置およびこれを備えた違反抑止システム
JP6459809B2 (ja) 画像処理装置およびこれを備えた交通管理システム、画像処理方法
KR102174863B1 (ko) 자율주행 차량의 외장 디스플레이 인터랙션 장치 및 방법
CN107615347B (zh) 车辆确定装置及包括所述车辆确定装置的车辆确定系统
CN111768630A (zh) 一种违章废图检测方法、装置及电子设备
CN107533798B (zh) 图像处理装置及具有该装置的交通管理系统、图像处理方法
US9342984B2 (en) System and method for monitoring and capturing potential traffic infractions
KR20210004529A (ko) 딥러닝을 기반으로 차량번호를 인식할 수 있는 cctv
CN113593253A (zh) 车辆的闯红灯监测方法和装置
KR20180090575A (ko) 무단패스 방지 시스템
KR20190040658A (ko) 위법운전 자동 촬영, 분석, 신소 및 전송 시스템
KR102645077B1 (ko) 딥러닝 기반 교차로 객체검지 및 자동 알람 방법
AU785266B2 (en) Traffic violation detection system
EP4213112A1 (en) Method and device for detecting a color of a traffic light in an environment of a vehicle

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant