CN103946907A - 车辆周围监视装置 - Google Patents
车辆周围监视装置 Download PDFInfo
- Publication number
- CN103946907A CN103946907A CN201280057527.7A CN201280057527A CN103946907A CN 103946907 A CN103946907 A CN 103946907A CN 201280057527 A CN201280057527 A CN 201280057527A CN 103946907 A CN103946907 A CN 103946907A
- Authority
- CN
- China
- Prior art keywords
- animal
- risk factor
- vehicle
- candidate
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012806 monitoring device Methods 0.000 title abstract 2
- 241001465754 Metazoa Species 0.000 claims abstract description 336
- 238000001514 detection method Methods 0.000 claims description 45
- 238000012545 processing Methods 0.000 claims description 42
- 238000012544 monitoring process Methods 0.000 claims description 36
- 230000003116 impacting effect Effects 0.000 claims description 17
- 238000003384 imaging method Methods 0.000 abstract 1
- 238000000034 method Methods 0.000 description 33
- 238000010586 diagram Methods 0.000 description 15
- 241000282994 Cervidae Species 0.000 description 7
- 244000025254 Cannabis sativa Species 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000006731 degradation reaction Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 241000018242 Obba <basidiomycete fungus> Species 0.000 description 2
- 241000009328 Perro Species 0.000 description 2
- 238000010422 painting Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000009184 walking Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000037237 body shape Effects 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000162 simple eye Anatomy 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/30—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/106—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using night vision cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
- B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种车辆周围监视装置,其通过拍摄装置(16)来适当地判定所检测到的动物是否为可能会与自车辆(12)接触的危险度高的动物。例如,相较于具有颈部向下的姿势形状的动物(222),具有颈部向上的姿势形状的动物(224)突然跑出来的可能性较高,因而判定其为危险度高的动物(224),利用红色粗框(214)围上颈部向上的右侧的动物(224)进行突出显示来提示驾驶者的同时,由扬声器(24)等发出提示。
Description
技术领域
本发明涉及一种利用由车辆搭载的红外线摄像头(灰度图像)等拍摄的图像来监视所述车辆周围的车辆周围监视装置,尤其涉及一种适用于在夜间或暗处等行驶时使用的车辆周围监视装置。
背景技术
在现有技术中,如日本发明专利公开公报特开2003-284057号(下面称为JP2003-284057A)所示,利用车辆周围监视装置从红外线摄像头捕捉到的自车辆周围的图像(灰度图像及其二值化图像)中检测与自车辆可能接触的步行者等对象物,并将检测到的对象物提供给车辆的驾驶者。
更为具体来讲,在JP200-284057A所涉及的车辆周围监视装置中,对左右一组的红外线摄像头(立体摄像头)拍摄到的自车辆周围的图像中温度较高的部分作为所述对象物进行检测,另外,通过求对象物在左右图像中的视差,算出自车辆到该对象物的距离,由该对象物的移动方向或该对象物的位置检测出会对自车辆的行驶造成影响(可能接触)的步行者等对象物,并发出提示(参照JP2003-584057A中的【0014】【0018】)。
在日本发明专利公报第4267657号(下面称为JP4267657B)所涉及的车辆周围监视装置中,利用车辆搭载的单个的红外线摄像头,以规定的时间间隔对车辆周围的对象物至少拍摄2次(2帧)。与上次的图像的大小(尺寸)相比,对象物和车辆的相对速度越高,这次的拍摄图像中的对象物的图像的大小(尺寸)的变化越大。并且,对象物和车辆的相对速度越高,车辆前方存在的对象物到达车辆的时间越短。这样,即使在单个的红外线摄像头的情况下,也能够通过从间隔规定时间的同一对象物的图像部分的大小的变化率来推定该对象物到达车辆的时间,从而监视车辆的周围(参照JP4267657B中的【0006】、【0007】、【0061】)。
在日本发明专利公报第4173901号(下面称为JP4173901B)中公开有如下一种技术,即,车辆周围监视装置中,车辆周围存在的可能与车辆接触的对象物并不局限于步行者,例如也可能会想到鹿等大型动物在道路上出现且与车辆接触的情况,因此,会从对象物中检测到人以外的动物(JP4173901B中的【0006】)。
利用立体摄像头检测对象物并发出提示的JP2003-284057A所涉及的车辆周围装置存在如下问题:由于搭载有2台红外线摄像头,因而导致成本较高。
为降低成本而使用单个的红外线摄像头的JP4267657B所涉及的车辆周围监视装置,由于距离精度较短,因而对于移动方向上动作一定的步行者的检测能够利用,但是,无法满足对移动方向上动作不规则的动物的检测。
另外,在JP4173901B所涉及的车辆周围监视装置中,根据躯体部的形状来检测出动物。即基本上是基于4条腿行走的动物的躯体部在水平方向上的宽度和垂直方向上的宽度的比率和用2条腿行走的人的躯体部在水平方向上的宽度和垂直方向上的宽度的比率能够区分的认识(参照JP4173901B中的【0005】、【0064】)。
发明内容
本发明是与上述技术相关联的内容,目的在于,提供一种车辆周围监视装置,该车辆周围监视装置能够以较低的成本准确地判定所检测出的动物是否为可能对自车辆的行驶造成影响的危险度高的动物。
本发明所涉及的车辆周围监视装置利用由自车辆搭载的拍摄装置所拍摄的图像来监视所述自车辆的周围,所述车辆周围监视装置具有:动物检测处理部,其从所述图像中检测作为监视对象物的动物;动物危险度判定部,其根据从所述图像中检测到的所述动物的姿势形状来判定所述动物是否为可能会对所述自车辆的行驶造成影响的危险度高的动物。
根据本发明,由于并不仅是根据动物的位置来判定所述动物是否为可能会对自车辆的行驶造成影响的危险度高的动物,而是根据所述动物的姿势形状来判定所述动物是否为可能会对自车辆的行驶造成影响的危险度高的动物,因而能够准确地判定出危险度高的动物。从而能够适当地提示驾驶者注意危险度高的动物。在这种情况下,不利用距离信息便能够进行判定,因而能够减小运算负荷,迅速作出判定。从而可以使用低速的CPU,实现低成本化。如后所述,即使采用单个的拍摄装置,也能够实施本发明。
这里,动物危险度判定部对所述动物的姿势形状进行检测,当检测到腿部时,可以判定被检测到腿部的动物为所述危险度高的动物。位于道路上的动物被检测出腿部,位于道路外的动物因位于草丛等中的时候较多而没有被检测出腿部。因此能够通过腿部的有无准确地判定动物是位于道路上还是位于道路外。
另外,动物危险度判定部对动物的姿势形状进行检测,当检测到颈部(脖颈)相对于躯体部的角度为颈部向上时,可以判定被检测到角度为颈部向上的动物为所述危险度高的动物。由于颈部相对于躯体部的角度为颈部向下的动物不会突然跑出来,因而可以判定颈部相对于躯体部的角度为颈部向上的动物较为危险。
还有,动物危险度判定部对动物的姿势形状进行检测,当检测到动物的位置到该动物脸所朝向的右侧道路端的距离比规定距离长时,可以判定该动物为所述危险度高的动物。当动物的位置到该动物脸所朝向的右侧道路端的距离比规定距离长时,则认为该动物在道路上停留的时间较长,可以判定其为危险度高的动物。
还有,动物危险度判定部在从所述图像中检测出所述危险度高的动物有多个候补时,可以判定所检测出的所述危险度高的动物的各候补中,路面交点位置最接近所述自车辆的所述危险度高的动物的候补为所述危险度高的动物。
动物危险度判定部在从所述图像中检测出所述危险度高的动物有多个候补时,可以判定所检测出的所述危险度高的动物的各候补中,在所述自车辆的行驶方向上,位于最接近自车辆的位置上的所述危险度高的动物的候补为所述危险度高的动物。
另外,所述拍摄装置可以为单个的拍摄装置。在本发明所涉及的车辆周围监视装置中,利用单个的拍摄装置,即使该单个的拍摄装置不能像立体摄像头那样使用2个图像的视差瞬间算出距离精度,但是,也能够从动物的姿势形状判定出是否为危险度高的动物,因此能够准确地从1个图像中瞬间判定出是否为危险度高的动物。从而能够实现低成本化。
根据本发明,由于并不仅是根据动物的位置来判定所述动物是否为可能会对所述自车辆的行驶造成影响的危险度高的动物,而是根据所述动物的姿势形状来判定所述动物是否为可能会对所述自车辆的行驶造成影响的危险度高的动物,因而能够准确地判定所检测到的动物为可能会对自车辆的行驶造成影响的危险度高的动物。
附图说明
图1是表示本发明的一个实施方式所涉及的车辆周围监视装置的结构的框图。
图2是搭载有图1所示车辆周围监视装置的车辆的示意图。
图3是说明由车辆周围监视装置的图像处理单元所进行的动作的流程图。
图4是供动物检测处理的动物图像的示意图。
图5是供动物检测处理的动物图像的其他示意图。
图6是表示突出显示危险度高的动物的灰度图像的说明图。
图7是表示突出显示危险度高的动物的其他的灰度图像的说明图。
图8是表示突出显示危险度高的动物的另外其他的灰度图像的说明图。
图9是表示突出显示危险度高的动物的另外其他的灰度图像的说明图。
图10是表示突出显示危险度高的动物的另外其他的灰度图像的说明图。
图11是表示突出显示2只危险度高的动物的灰度图像的说明图。
图12是搭载有变形例所涉及的车辆周围监视装置的车辆的示意图。
图13是表示从驾驶者的位置看到的将危险动物突出显示在通用显示器上的灰度图像作为使驾驶者认识前方存在的动物的动物图符显示在MID(Multi Information Display)上的图像的示意内视图。
具体实施方式
下面,参照附图说明本发明的实施方式。
图1是表示本发明的一个实施方式所涉及的车辆周围监视装置10的结构的框图。图2是搭载有图1所示车辆周围监视装置10的车辆(也称为自车辆)12的示意图。
在图1和图2中,车辆周围监视装置10具有:图像处理单元14,其控制该车辆周围监视装置10;单个(单眼)的红外线摄像头16(拍摄装置),其与该图像处理单元14连接;车速传感器18,其检测自车辆12的车速Vs;制动传感器20,其检测由驾驶者进行的刹车踏板的操作量(制动操作量)Br;偏航角速度传感器22,其检测自车辆12的偏航角速度Yr;扬声器24,其用于通过声音发出提示等;图像显示装置26,其显示由红外线摄像头16拍摄的图像,且包括HUD(Head Up Display)26a等,该HUD26a用于使车辆的驾驶者识别可能会对自车辆12的行驶造成影响的危险度高的动物。
作为上述图像显示装置26,并不局限于HUD(平视显示器)26a,也可以利用自车辆12搭载的显示导航系统的地图等的显示器、设置在仪表单元内等的显示燃油消耗等的显示器(MID:多信息显示屏)。
另外,在本发明中,由于相对于自车辆12的接触的危险性高低的判定、即所谓的危险度的判定对象为动物,所以方便理解,避免繁琐,省略说明对步行者等人的公知的危险度的判定处理(参照JP2003-284057A和JP4267657B)。
图像处理单元14根据自车辆12周围的红外线图像和表示车辆的行驶状态的信号(这里为车速Vs、制动操作量Br及偏航角速度Yr)检测车辆前方的动物,当检测到的所述动物为可能会对自车辆12的行驶造成影响的危险度高的动物时,通过扬声器24发出提示(例如,哔哔的声音),另外,用红色等醒目的颜色框围上灰度显示在HUD26a上的拍摄图像中的危险度高的动物,进行突出显示来提示驾驶者。通过提示来唤起驾驶者的注意。
图像处理单元14具有A/D转换电路等输入电路、图像存储器(存储部14m)、CPU(中央处理器)14c、RAM(Random Access Memory)和ROM(Read Only Memory)等存储部14m、时钟(时钟部)、定时器(计时部)、输出电路等,其中,A/D转换电路等输入电路将输入模拟信号转换成数字信号;图像存储器(存储部14m)存储数字化后的图像信号;CPU14c进行各种运算处理;RAM为了CPU14c存储运算中途的数据而使用;ROM存储由CPU14c执行的程序、一览表、地图及模板{动物形状模板:鹿和犬等动物向右、向左、正对(背对)等模板}等;输出电路输出扬声器24的驱动信号和图像显示装置26的显示信号等,红外线摄像头16、偏航角速度传感器22、车速传感器18及制动传感器20的各输出信号被转换成数字信号,输入给CPU14c。
图像处理单元14的CPU14c存储这些信号,在参照表格、地图及模板等的同时执行程序,从而作为各种功能机构(也称为功能部)发挥作用,并向扬声器24和图像显示装置26发送驱动信号(音频信号或显示信号)。这些功能也可以通过硬件来实现。
在本实施方式中,图像处理单元14具有动物检测处理部104和动物危险度判定部105,所述动物危险度判定部105具有姿势形状检测部106和注意唤起处理部108。
另外,基本上,图像处理单元14执行物体识别处理(物体检测处理),该物体识别处理为:通过对由红外线摄像头16获得的图像和存储部14m存储的动物形状、人体形状、车辆形状及人造物形状等示意性模板进行比较来识别物体。
如图2所示,红外线摄像头16位于自车辆12的前保险杠部上,且配置在自车辆12的车宽方向上的中心部,具有如下特性:拍摄对象(物体)的温度越高,其输出信号(拍摄信号)水平越高(辉度增加)。
另外,HUD26a被设置为,在自车辆12的前挡风玻璃上、不妨碍驾驶者的前方视线的位置上显示显示画面。
这里,图像处理单元14在每隔数十ms、例如1秒30帧[ms]的帧频间隔或者说每个周期将由红外线摄像头16输出的虚拟的影像信号转换成数字数据,存储到存储部14m(图像存储器)中,具有上述对存储到存储部14m中的车辆前方图像进行各种运算处理的功能。
动物检测处理部104根据存储到存储部14m中的车辆前方的所述图像(影像)提取出动物候补的图像部分,将提取出的图像部分作为动物候补检测。
构成动物危险度判定部105的姿势形状检测部106检测由动物检测处理部104检测出的动物候补的姿势形状。作为动物的姿势形状,例如有,所有腿部是否存在;颈部相对于躯体部的朝向是向上还是向下;脸的朝向是向右还是向左;动物在路面交点位置上的部位是腿部还是躯体部等。
动物危险度判定部105根据由姿势形状检测部106检测出的动物候补的姿势形状,判定所述动物候补是否为可能会对自车辆12的行驶造成影响的危险度高的动物,当判定所述动物候补为危险度高的动物时,通过注意唤起处理部108进行告知(提示)驾驶者此情况的注意唤起处理。
这里,说明由单个的红外线摄像头16对自车辆12与对象物接触为止的时间和距离的计算。由单个的红外线摄像头16计算出以所述帧频间隔或者说周期(规定时间间隔)所拍摄的图像间的同一监视对象物(这里为动物)的图像部分大小的变化率Rate,并且,利用所述变化率Rate计算出监视对象物(动物)到达自车辆12的时间(也称为接触富余时间)TTC(TTC:Time To Contact or Time ToCollision),另外,计算出监视对象物(动物)在实际空间中所处的位置、这里为监视对象物(动物)与自车辆12的距离Z。
根据所述变化率Rate(根据图像求得)、作为规定时间间隔的拍摄间隔(帧频间隔或者说周期)dT(已知),利用公知的方式,例如,如JP4267657B所示,按照式(1)可以求得自车辆12与监视对象物(动物)接触为止的接触富余时间TTC。
TTC=dT×Rate/(1-Rate) (1)
另外,利用上次拍摄时的图像中的监视对象物(动物)的宽度或长度W0(分别以像素数存储即可)与这次拍摄时的图像中的同一监视对象物(动物)的宽度或长度W1(像素数)之间的比(Rate=W0/W1)可以求得变化率Rate。
另外,自车辆12到监视对象物(动物)的距离Z可以如JP4267657B所示,按照式(2)求得。另外,在式(2)中,更为准确来讲,Vs为监视对象物(动物)和自车辆12之间的相对速度。当监视对象物(动物)静止时,相对速度与车速Vs相等。
Z=Rate×Vs×dT/(1-Rate) (2)
下面,参照图3中的流程图,对基本上具有上述结构且动作的本实施方式所涉及的车辆周围监视装置10的详细动作进行说明。
首先,在步骤S1中,图像处理单元14根据由车速传感器18检测出来的车速Vs等来判定自车辆12的行驶状态(行驶中或停车中),当判定自车辆12处于停车中(步骤S1:NO)时,停止处理。
当判定自车辆12处于行驶中(步骤S1:YES)时,在步骤S2中,图像处理单元14获得由红外线摄像头16在每帧拍摄的、作为车辆前方的规定视角范围内每帧的输出信号的红外线图像,并对其进行A/D转换,将灰度图像存储在图像存储器(存储部14m)中,另外,对存储的灰度图像进行二值化处理,即,进行转换为二值化图像的处理,该二值化图像将比辉度阈值大(亮)的区域作为“1”(白),将比辉度阈值小(暗)的区域作为“0”(黑),转换后的二值化图像对应于所述帧,在每帧都存储到存储部14m中。在该二值化处理中,人体中由头部、肩、躯体及2条腿等构成的块(人体对象候补)被检测为“1”块(集合体)。另外,即使是在犬(小型动物)、鹿(大型动物)等动物(在本实施方式中为4条腿行走的动物)的情况下,头部、躯体、尾巴及4条腿等块(动物对象候补)也同样被检测为“1”块(集合体)。
接下来,在步骤S3中,图像处理单元14进行贴标签处理,即,在每条x方向(水平方向)的扫描线上将每帧(图像)的二值化图像“1”(白)转换为游程长度数据,将具有与y方向(垂直方向)重叠的部分的线看作1个对象物,分别对该对象物的外接四边形打上标签,例如将图4和图5中由虚线所示的外接四边形围成的区域作为动物候补区域152a、152b
接下来,对于被贴标签处理后的动物候补区域152a、152b存在的图像,在步骤S4中,动物检测处理部104对帧图像中、稍微比被打上标签的动物候补区域152a、152b大的外框区域153a(图4中,由单点划线围成的区域)、153b(图5中,由单点划线围成的区域),分别从该外框区域153a、153b内的像素的上侧向下侧且从左侧向右侧扫描搜索像素值,当较暗区域的“0”像素连续时,判定该扫描部分由图像中的动物候补162a、162b(分别由头部155、颈部157、躯体部160、腿部159构成。下面也称为动物候补162)和路面51的分界,该分界被设定为对象物的下端(也称为路面交点位置)OBba、OBbb。
另外,动物检测处理部104从各动物候补162a、162b的下端OBba、OBbb反过来向上侧对外框区域153a、153b内的图像从左侧向右侧沿每个像素进行扫描搜索,当检测出垂直方向上辉度的变化区间(在二值化图像中,“1”和“0”对(像素点对)大致连续的区间)时,判定该变化区间的扫描部分为动物候补162a、162b和背景的分界,该分界被设定为对象物的上端OBta、OBtb。
另外,对于判定是否为动物候补162(162a:图4、162b:图5),有各种判定方法,例如,在如下情况下,可以判定为动物候补162:具有成为水平方向上的宽度W2和垂直方向上的宽度H2的比率W2/H2超过值“1”{W2/H2>1}的规定范围的横长的区域(对应于躯体部160),而且,所述横长的区域的下方存在2个以上的区域(最大为4个区域的腿部159)的左右端宽度W3和垂直方向上的宽度H3之间的比率W3/H3超过值“1”{W3/H3>1}。
另外,例如,在躯体部160的下方检测出3条以上的腿部159时,优选检测出4条以上的腿部159时,可以判定为动物候补162。还有,当躯体部160的上端部的水平边缘线(在图4、图5中均为与高度H1的上端相接的水平线)和头部155所处位置相交(图4所示情况)时,或者,当头部155所处位置位于躯体部160的上端部的所述水平边缘线的下侧(图5所示情况)时,可以判定为动物候补162。
在步骤S5中判定步骤S4的动物检测处理的结果。在步骤S5中,在至少检测出一个(一只)动物候补162时,在步骤S6的动物危险度判定处理中,判定动物候补162是否为可能会对自车辆12的行驶造成影响(可能与自车辆12接触)的危险度高的动物。在没有检测出动物候补162时(步骤S5:NO),从步骤S1的处理开始重复进行。
参照步骤S6的动物危险度判定处理的结果,在步骤S7中,当检测到危险度高的动物时(步骤S7:YES),在步骤S8中,进行对检测到的危险度高的动物的注意唤起处理。在步骤S7中,当没有检测到危险度高的动物时(步骤S7:NO),从步骤S1的处理开始重复进行。
这里,对由实施步骤S6的动物危险度判定处理的动物危险度判定部105所进行的处理和由实施步骤S8的注意唤起处理的注意唤起处理部108所进行的处理进行详细说明。
动物危险度判定部105通过姿势形状检测部106来检测动物候补162的姿势形状,并根据所检测到的姿势形状来判定动物候补162是否为可能会对自车辆12的行驶造成影响的危险度高的动物。另外,在图像中,当动物候补162被检测出多个时,将危险度最高的动物候补162判定为危险度高的动物。
具体来讲,作为由利用姿势形状检测部106的动物危险度判定部105所进行的第1判定方法,在动物候补162的姿势形状中有腿部159被检测到时,判定检测到腿部159的动物候补162为危险度高的动物。
并且,判定为危险度高的动物的动物候补162由注意唤起处理部108在图像(画面)中突出显示。
图6表示HUD26a所显示的灰度图像(影像)200。
图6的灰度图像200的左右方向上的中心位置表示自车辆12的红外线摄像头16正对的位置。画面中央下方的道路202的右侧道路端(道路右端)204和左侧道路端(道路左端)206通过边缘检测处理等被提取出来。
图6的中央左侧的区域实际上为草丛208,而且,动物存在的地方多为道路202外的草丛208等。因此,可以通过腿部159(参照图4、图5)的有无来判定动物是存在于道路202上,还是存在于道路202外。
在图6的灰度图像200中显示有由动物检测处理部104检测出来的对应于动物候补162(图4或图5)的2只动物210、212(这里为鹿),但是,左侧的动物210没有被检测出腿部,而中央的动物212被检测出腿部159(参照图4、图5)。
因而,根据第1判定方法,由动物危险度判定部105判定被检测到腿部159的动物候补162为危险度高的动物。因此,用红色粗框214围上中央的动物212进行突出显示来提示驾驶者。在用红色粗框214围上中央的动物212进行突出显示的同时,由扬声器24发出提示。
作为第2判定方法,在姿势形状检测部106检测到动物候补162的姿势形状中、颈部157相对于躯体部160的角度θ为颈部向上(θ>0)时,动物危险度判定部105判定颈部157向上的动物候补162、此时,即图4所示例子中的动物候补162a为危险度高的动物。
图7表示HUD26a的显示器(显示部)上显示的灰度图像(影像)220。
在图7的灰度图像220中显示有由动物检测处理部104检测出来的对应于动物候补162的2只动物222、224(这里为鹿),左侧的动物222的颈部157向下(参照图5)。右侧动物224的颈部157向上(参照图4)。由于颈部(脖颈)157向下的动物222不会突然跑出来,因而颈部(颈)157向上的动物224较为危险。
因而,根据第2判定方法,由于动物危险度判定部105判定颈部157向上的动物候补162b为危险度高的动物,因而用红色粗框214围上右侧的动物224进行突出显示来提示驾驶者。左侧的动物222用黄色细框216围上进行突出显示来提示驾驶者。在用红色粗框214围上右侧的动物224进行突出显示的同时,由扬声器发出提示。
作为第3判定方法,动物危险度判定部105判定姿势形状检测部106检测到的动物候补162的姿势形状中,从动物候补162的位置到所述动物候补162的脸所朝向的道路端的距离比规定距离长的动物,例如,相对于图像的左右方向上的中心位置(大致为道路202的宽度的中心位置)位于脸所朝向的外侧的动物为危险度高的动物。
具体来讲,例如,在图8的灰度图像230中显示有由动物检测处理部104检测出来的对应于动物候补162的2只动物232、234(这里为鹿),这2只动物232、234的脸朝向右侧道路端204,左侧的动物232到右侧道路端204的距离a比规定距离长,而右侧的动物234到右侧道路端204的距离b比规定距离短(a>b)。
到脸所朝向(这里被认为是动物的行进方向)的道路端的距离a较长的动物232与距离b较短的动物234相比,被认为是在道路202上停留时间较长的动物,从而判定该动物232为危险度高的动物。
因而,根据第3判定方法,动物危险度判定部105判定左侧的动物232为危险度高的动物,因而用红色粗框214将其围上进行突出显示来提示驾驶者。右侧的动物234用黄色细框216围上进行突出显示来提示驾驶者。在用红色粗框214将其围上进行突出显示的同时,由扬声器发出提示。
作为第4判定方法,在上述第1判定方法~第3判定方法中的任意一种方法中,在从图像中检测到多个危险度同等高的动物候补的情况下,动物危险度判定部105例如根据第3判定方法对图9所示的灰度图像240中的动物242、244进行判定,当判定图9中脸朝向道路202的右侧且位于左侧的动物242到右侧道路204的距离a和图9中脸朝向道路202的左侧且位于右侧的动物244到左侧道路204的距离b大致相等,即a≈b时,判定道路202和动物242、244的下端的交点位置OBb1、OBb2中离自车辆12较近的动物244为危险度高的动物。
因此,根据第4判定方法,由于动物危险度判定部105判定离自车辆12近的右侧的动物244为危险度高的动物,因而用红色粗框24将其围上进行突出显示来提示驾驶者。左侧动物242用黄色细框216围上进行突出显示来提示驾驶者。在用红色粗框24将其围上进行突出显示的同时,由扬声器24发出提示。
作为第5判定方法,在上述第1判定方法~第3判定方法中的任意一种方法中,在从图像中检测到多个危险度同等高的动物候补的情况下,动物危险度判定部105例如根据第1判定方法对图10所示的灰度图像250中的动物252、254进行判定,当动物252、254均被检测到腿部时,判定接近图像中心线256(自车辆12的行驶方向)的动物252为比远离图像中心线256的动物254危险度高的动物。
因而,根据第5判定方法,由于动物危险度判定部105判定在自车辆12的行驶方向上,位于最接近自车辆12的位置上的左侧的动物252为危险度高的动物,因而用红色粗框214将其围上进行突出显示来提示驾驶者。右侧的动物254则用黄色细框216围上进行突出显示来提示驾驶者。在用红色粗线214围上左侧的处于图像中心的动物252进行突出显示的同时,由扬声器24发出提示。
当根据上述第1判定方法~第5判定方法没能够划分出危险度的高低时,例如,在图11的灰度图像260所示位置上有动物262、264存在时,作为第6判定方法,动物危险度判定部105判定这两个动物262、264均为危险度高的动物,并用红色粗框214分别将这两个动物围上进行突出显示来提示驾驶者,同时由扬声器24发出提示。
【实施方式的概要】
如上面说明所示,上述实施方式所涉及的车辆周围监视装置10从自车辆12搭载的单个的红外线摄像头16所拍摄的图像中检测到危险度高的动物,并发出提示。
在这种情况下,车辆周围监视装置10具有:动物监测处理部104,其从所述图像中检测作为监视对象物的动物;动物危险判定部105,其根据从所述图像中检测到的所述动物的姿势形状来判定所述动物是否为可能会对自车辆12的行驶造成影响的危险度高的动物。
根据该实施方式,由于并不仅是根据动物的位置来判定所述动物是否为可能会对自车辆12的行驶造成影响的危险度高的动物,而是根据所述动物的姿势形状来判定所述动物是否为可能会对自车辆12的行驶造成影响的危险度高的动物,因而能够准确地判定出危险度高的动物。从而能够适当地提示驾驶者注意危险度高的动物。在这种情况下,根据动物的姿势形状来判定危险度,因而即使不利用距离信息或移动矢量也能够进行判定,减小运算负荷,缩短判定时间。因此也可以使用低速的CPU,实现低成本化。
例如,作为具体的第1判定方法,动物危险度判定部105对所述动物的姿势形状进行检测,当检测到腿部159(参照图4、图5)时,可以判定被检测到腿部的动物为所述危险度高的动物。在这种情况下,如图6所示,位于道路202上的动物212被检测出腿部,位于道路202外的动物210因位于草丛208等中的时候较多而没有被检测出腿部。因此能够通过腿部159的有无准确地判定动物是位于道路202上还是位于道路202外。
另外,作为第2判定方法,如图7所示,动物危险度判定部105对动物222、224的姿势形状进行检测,当检测到颈部157相对于躯体部160角度θ为颈部向上时(参照图4),可以判定被检测到角度θ为颈部向上的动物为所述危险度高的动物。由于颈部157相对于躯体部160的角度θ为颈部向下的动物222不会突然跑出来,因而可以判定颈部157相对于躯体部160的角度为颈部向上的动物224比该角度为颈部向下的动物222危险(参照图7)。
还有,作为第3判定方法,如图8所示,动物危险度判定部105对动物232、234的姿势形状进行检测,当检测到动物232的位置到该动物232脸所朝向的右侧道路端204的距离a比规定距离,即道路202的宽度的1/2长时,可以判定该动物232为所述危险度高的动物。当动物232的位置到该动物232脸所朝向的右侧道路端204的距离a比规定距离长时,则认为该动物232在道路202上停留的时间较长,可以判定其为危险度高的动物。
还有,作为第4判定方法,如图9所示,动物危险度判定部105在从灰度图像240中检测出所述危险度高的动物有多个候补时,可以判定所检测出的所述危险度高的动物242、244的各候补中,路面交点位置OBb2最接近自车辆12的所述危险度高的动物244的候补为所述危险度高的动物244。
还有,作为第5判定方法,如图10所示,动物危险度判定部105在从灰度图像250中检测出所述危险度高的动物有多个候补时,可以判定所检测出的所述危险度高的动物252、254的各候补中,在自车辆12的行驶方向(图像中心线256)上,位于最接近自车辆12的位置上的所述危险度高的动物252的候补为所述危险度高的动物252。
另外,在上述实施方式中,利用单个的红外线摄像头16,虽然该单个的红外线摄像头16不能像立体摄像头那样使用2个图像的视差瞬间算出距离精度,但是,也能够从动物的姿势形状判定出是否为危险度高的动物,因此能够准确地从1个图像中瞬间判定出是否为危险度高的动物。从而能够实现低成本化。
另外,本发明并不局限于上述实施方式,根据本说明书所记载的内容,理所当然能够采用各种结构。
例如,如图12所示,可以使用具有自车辆12A搭载的左右一组红外线摄像头16R、16L的车辆周围监视装置。作为所谓的立体摄像头的红外线摄像头16R、16L位于自车辆12A的前保险杠部上,且配置在相对于自车辆12A的车宽方向上的中心部大致对称的位置上,2个红外线摄像头16R、16L以光轴相互平行且两者离路面的高度相等的方式固定。在具有该左右一组的红外线摄像头16R、16L的车辆周围监视装置中,众所周知,在由左右一组的红外线摄像头16R、16L拍摄的自车辆周围的图像中以温度高的部分为对象物,另外,利用左右图像中的同一对象物的视差等,通过三角测量的原理计算出自车辆12A到所述对象物的距离,从所述对象物的位置检测出貌似会对车辆(自车辆)12A的行驶造成影响的对象物(可能接触的动物),瞬间判定是否为危险度高的动物,当判定为危险度高的动物时,发出注意唤起输出。
另外,不使用红外线摄像头,也可以将对通常的可视区域进行拍摄的普通的数码摄像机(拍摄装置)作为与实施方式相同的单一的摄像头或者立体摄像头来使用。
还有,如图13上部的从驾驶者的位置看到的车辆在夜间行驶时的示意内视图所示,将图13的右下方的放大图像所示的由红外线摄像头16(16L)拍摄的灰度图像(影像)280影像显示在作为图像显示装置26的配置在仪表盘290中央的导航装置或音频装置用的显示部26b(通用显示器)上,另外,在影像显示的灰度图像280中,用红色粗框214使对应于实际位于前挡风玻璃的前方远处的危险动物282r的危险动物282的影像显示来提示驾驶者,同时由扬声器发出提示。
另外,在将被红色粗框214围住的危险动物282显示在作为通用显示器的显示部26b上的同时,可以以如下方式来提示驾驶者:将如图13的左下方的放大图像所示那样的动物图符296(这里为鹿的图符)显示在作为分辨率较低的显示部的MID(多信息显示屏)26c上,该MID26c配置在驾驶者正面对位置附近的仪表盘292的中央。在本实施方式中,只要显示部26b上没有显示被红色粗框214围住的危险动物282,就不会显示动物图符296。优选用黄色等醒目的颜色或以闪烁的方式来显示动物图符296,从而能够唤起驾驶者的注意。另外,在动物图符296的下部显示的3条线表示在该车辆周围监视装置10启动时,例如时常显示的使驾驶者认识(想起)道路的左右端和中央线的道路图符。
Claims (7)
1.一种车辆周围监视装置,利用自车辆(12)搭载的拍摄装置(16)拍摄的图像来监视所述自车辆(12)的周围,其特征在于,
具有:
动物检测处理部(104),其从所述图像中检测作为监视对象物的动物;
动物危险度判定部(105),其根据从所述图像中检测到的所述动物的姿势形状来判定所述动物是否为可能会对所述自车辆(12)的行驶造成影响的危险度高的动物。
2.根据权利要求1所述的车辆周围监视装置,其特征在于,
所述动物危险度判定部(105)对所述动物(212、162)的姿势形状进行检测,当检测到腿部(159)时,判定被检测到腿部的动物为所述危险度高的动物(212)。
3.根据权利要求1所述的车辆周围监视装置,其特征在于,
所述动物危险度判定部(105)对所述动物(224、162)的姿势形状进行检测,当检测到颈部(157)相对于躯体部(160)的角度(θ)为颈部(157)向上时,判定被检测到所述角度(θ)为颈部向上的动物为所述危险度高的动物(224)。
4.根据权利要求1所述的车辆周围监视装置,其特征在于,
所述动物危险度判定部(105)对所述动物(232)的姿势形状进行检测,当检测到从所述动物(232)的位置到所述动物(232)脸所朝向的道路端(204)的距离(a)比规定距离长时,判定所述动物(232)为所述危险度高的动物(232)。
5.根据权利要求2~4中任意一项所述的车辆周围监视装置,其特征在于,
所述动物危险度判定部(105)在从所述图像中检测到所述危险度高的动物(242、244)有多个候补时,判定所检测到的所述危险度高的动物(242、244)的各候补中,路面交点位置(OBb2)最接近所述自车辆(12)的所述危险度高的动物(244)的候补为所述危险度高的动物(244)。
6.根据权利要求2~4中任意一项所述的车辆周围监视装置,其特征在于,
所述危险度判定部(105)在从所述图像中检测到多个所述危险度高的动物(252、254)的候补时,判定所检测到的各所述危险度高的动物(252、254)的候补中,在所述自车辆(12)的行驶方向上,位于最接近自车辆(12)的位置上的所述危险度高的动物(252)的候补为所述危险度高的动物(252)。
7.根据权利要求1~6中任意一项所述的车辆周围监视装置,其特征在于,
所述拍摄装置(16)为单个的拍摄装置(16)。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011-256939 | 2011-11-25 | ||
JP2011256939 | 2011-11-25 | ||
PCT/JP2012/075934 WO2013077096A1 (ja) | 2011-11-25 | 2012-10-05 | 車両周辺監視装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103946907A true CN103946907A (zh) | 2014-07-23 |
Family
ID=48469551
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280057527.7A Pending CN103946907A (zh) | 2011-11-25 | 2012-10-05 | 车辆周围监视装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9235990B2 (zh) |
EP (1) | EP2784763A4 (zh) |
JP (1) | JP5639283B2 (zh) |
CN (1) | CN103946907A (zh) |
WO (1) | WO2013077096A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108171938A (zh) * | 2017-12-08 | 2018-06-15 | 广州粤华物业有限公司 | 通道堵塞监控报警系统 |
CN109035861A (zh) * | 2017-06-09 | 2018-12-18 | 现代自动车株式会社 | 用于引导行驶信息的设备和方法及具有该设备的车辆系统 |
CN110114740A (zh) * | 2016-12-27 | 2019-08-09 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
CN115139787A (zh) * | 2021-03-30 | 2022-10-04 | 本田技研工业株式会社 | 驾驶支援装置、驾驶支援方法及存储介质 |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5706874B2 (ja) * | 2010-03-03 | 2015-04-22 | 本田技研工業株式会社 | 車両の周辺監視装置 |
US10703299B2 (en) * | 2010-04-19 | 2020-07-07 | SMR Patents S.à.r.l. | Rear view mirror simulation |
JP5760090B2 (ja) * | 2011-09-28 | 2015-08-05 | 本田技研工業株式会社 | 生体認識装置 |
DE102012210798A1 (de) * | 2012-06-26 | 2014-01-02 | Robert Bosch Gmbh | Kommunikationsvorrichtung und Kommunikationsverfahren für ein Fahrzeug |
EP3575159B1 (en) * | 2013-05-24 | 2021-12-29 | Panasonic Intellectual Property Corporation of America | Image transmitting device |
KR20140147205A (ko) * | 2013-06-18 | 2014-12-30 | 삼성전자주식회사 | 휴대 가능한 의료 진단 장치의 주행 경로 제공 방법 및 장치 |
KR101605514B1 (ko) * | 2014-02-28 | 2016-04-01 | 주식회사 코아로직 | 차선 인식 장치 및 방법 |
WO2015198540A1 (ja) * | 2014-06-23 | 2015-12-30 | 株式会社デンソー | ドライバの運転不能状態検出装置 |
KR102118066B1 (ko) * | 2014-08-20 | 2020-06-03 | 현대모비스 주식회사 | 주행 안전을 위한 차량 제어방법 |
JP6729561B2 (ja) * | 2015-04-20 | 2020-07-22 | 日本電気株式会社 | 光照射装置および光照射システム |
KR101832189B1 (ko) * | 2015-07-29 | 2018-02-26 | 야마하하쓰도키 가부시키가이샤 | 이상화상 검출장치, 이상화상 검출장치를 구비한 화상 처리 시스템 및 화상 처리 시스템을 탑재한 차량 |
US9849784B1 (en) * | 2015-09-30 | 2017-12-26 | Waymo Llc | Occupant facing vehicle display |
WO2017175025A2 (en) | 2015-12-01 | 2017-10-12 | Yakov Shambik | Detecting visual information corresponding to an animal |
US10139827B2 (en) | 2016-06-28 | 2018-11-27 | Ford Global Technologies, Llc | Detecting physical threats approaching a vehicle |
EP3482344B1 (en) * | 2016-07-07 | 2022-08-31 | Harman International Industries, Incorporated | Portable personalization |
US10495753B2 (en) * | 2016-09-19 | 2019-12-03 | Nec Corporation | Video to radar |
DE102017201936A1 (de) * | 2017-02-08 | 2018-08-09 | Robert Bosch Gmbh | Verfahren zur Reduzierung eines Kollisionsschadens |
JP6833575B2 (ja) * | 2017-03-15 | 2021-02-24 | 本田技研工業株式会社 | 歩行支援装置、歩行支援方法、及びプログラム |
CA3071850A1 (en) | 2017-08-07 | 2019-02-14 | The Jackson Laboratory | Long-term and continuous animal behavioral monitoring |
GB2582484B (en) * | 2017-12-01 | 2022-11-16 | Onesubsea Ip Uk Ltd | Systems and methods of pilot assist for subsea vehicles |
US11454970B2 (en) | 2018-05-21 | 2022-09-27 | Cummins Inc. | Adjustment of autonomous vehicle control authority |
US11109586B2 (en) * | 2019-11-13 | 2021-09-07 | Bird Control Group, Bv | System and methods for automated wildlife detection, monitoring and control |
EP4102403A1 (en) * | 2021-06-11 | 2022-12-14 | Zenseact AB | Platform for perception system development for automated driving system |
EP4223593A1 (en) * | 2022-02-08 | 2023-08-09 | Continental Autonomous Mobility Germany GmbH | Rear-view stereo camera system |
CN114541733B (zh) * | 2022-02-28 | 2023-07-14 | 重庆建工集团股份有限公司 | 一种预拼装式操作平台 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5939987A (en) * | 1998-01-26 | 1999-08-17 | Cram; Randall S. | Roadside deer warning method and system |
WO2005082681A1 (de) * | 2004-03-01 | 2005-09-09 | Continental Teves Ag & Co.Ohg | Verfahren und anordnung zum steuern eines sicherungsmittels in einem fahrzeug |
US20060222206A1 (en) * | 2005-03-30 | 2006-10-05 | Cernium, Inc. | Intelligent video behavior recognition with multiple masks and configurable logic inference module |
CN102016954A (zh) * | 2008-04-24 | 2011-04-13 | 本田技研工业株式会社 | 车辆周围监测装置 |
CN102099842A (zh) * | 2008-07-15 | 2011-06-15 | 本田技研工业株式会社 | 车辆周边监视装置 |
JP2011216003A (ja) * | 2010-04-01 | 2011-10-27 | Toyota Motor Corp | 障害物認識装置 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4060159B2 (ja) | 2002-01-18 | 2008-03-12 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4173901B2 (ja) * | 2006-05-19 | 2008-10-29 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4173902B2 (ja) * | 2006-05-19 | 2008-10-29 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4203512B2 (ja) * | 2006-06-16 | 2009-01-07 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4267657B2 (ja) | 2006-10-31 | 2009-05-27 | 本田技研工業株式会社 | 車両周辺監視装置 |
DE102006059033A1 (de) | 2006-12-14 | 2008-06-19 | Volkswagen Ag | Verfahren und System zum Erkennen eines Verkehrsteilnehmers und zum Erzeugen einer Warnung |
JP4470067B2 (ja) * | 2007-08-07 | 2010-06-02 | 本田技研工業株式会社 | 対象物種別判定装置、車両 |
US8054201B2 (en) * | 2008-03-19 | 2011-11-08 | Mazda Motor Corporation | Surroundings monitoring device for vehicle |
JP5172482B2 (ja) * | 2008-06-06 | 2013-03-27 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP5004903B2 (ja) * | 2008-08-25 | 2012-08-22 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4784659B2 (ja) * | 2009-02-16 | 2011-10-05 | トヨタ自動車株式会社 | 車両用周辺監視装置 |
JP5383246B2 (ja) | 2009-02-20 | 2014-01-08 | 本田技研工業株式会社 | 車両の周辺監視装置 |
JP5287746B2 (ja) * | 2009-05-21 | 2013-09-11 | 日産自動車株式会社 | 運転支援装置、及び運転支援方法 |
US8502860B2 (en) * | 2009-09-29 | 2013-08-06 | Toyota Motor Engineering & Manufacturing North America (Tema) | Electronic control system, electronic control unit and associated methodology of adapting 3D panoramic views of vehicle surroundings by predicting driver intent |
JP5407764B2 (ja) * | 2009-10-30 | 2014-02-05 | トヨタ自動車株式会社 | 運転支援装置 |
JP5218458B2 (ja) * | 2010-03-23 | 2013-06-26 | 株式会社デンソー | 車両接近報知システム |
KR101395089B1 (ko) * | 2010-10-01 | 2014-05-16 | 안동대학교 산학협력단 | 장애물 감지 시스템 및 방법 |
-
2012
- 2012-10-05 US US14/360,005 patent/US9235990B2/en not_active Expired - Fee Related
- 2012-10-05 JP JP2013545839A patent/JP5639283B2/ja not_active Expired - Fee Related
- 2012-10-05 EP EP12852352.9A patent/EP2784763A4/en not_active Withdrawn
- 2012-10-05 WO PCT/JP2012/075934 patent/WO2013077096A1/ja active Application Filing
- 2012-10-05 CN CN201280057527.7A patent/CN103946907A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5939987A (en) * | 1998-01-26 | 1999-08-17 | Cram; Randall S. | Roadside deer warning method and system |
WO2005082681A1 (de) * | 2004-03-01 | 2005-09-09 | Continental Teves Ag & Co.Ohg | Verfahren und anordnung zum steuern eines sicherungsmittels in einem fahrzeug |
US20060222206A1 (en) * | 2005-03-30 | 2006-10-05 | Cernium, Inc. | Intelligent video behavior recognition with multiple masks and configurable logic inference module |
CN102016954A (zh) * | 2008-04-24 | 2011-04-13 | 本田技研工业株式会社 | 车辆周围监测装置 |
CN102099842A (zh) * | 2008-07-15 | 2011-06-15 | 本田技研工业株式会社 | 车辆周边监视装置 |
JP2011216003A (ja) * | 2010-04-01 | 2011-10-27 | Toyota Motor Corp | 障害物認識装置 |
Non-Patent Citations (1)
Title |
---|
李丽等: "一种新的大型四肢动物体姿态识别方法", 《电脑知识与技术(学术交流) 》, no. 05, 31 December 2007 (2007-12-31) * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110114740A (zh) * | 2016-12-27 | 2019-08-09 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
CN110114740B (zh) * | 2016-12-27 | 2022-10-18 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
CN109035861A (zh) * | 2017-06-09 | 2018-12-18 | 现代自动车株式会社 | 用于引导行驶信息的设备和方法及具有该设备的车辆系统 |
CN109035861B (zh) * | 2017-06-09 | 2022-03-25 | 现代自动车株式会社 | 用于引导行驶信息的设备和方法及具有该设备的车辆系统 |
CN108171938A (zh) * | 2017-12-08 | 2018-06-15 | 广州粤华物业有限公司 | 通道堵塞监控报警系统 |
CN115139787A (zh) * | 2021-03-30 | 2022-10-04 | 本田技研工业株式会社 | 驾驶支援装置、驾驶支援方法及存储介质 |
US12012100B2 (en) | 2021-03-30 | 2024-06-18 | Honda Motor Co., Ltd. | Driving support device, driving support method, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
US20140285667A1 (en) | 2014-09-25 |
EP2784763A1 (en) | 2014-10-01 |
JPWO2013077096A1 (ja) | 2015-04-27 |
JP5639283B2 (ja) | 2014-12-10 |
EP2784763A4 (en) | 2015-08-19 |
US9235990B2 (en) | 2016-01-12 |
WO2013077096A1 (ja) | 2013-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103946907A (zh) | 车辆周围监视装置 | |
JP4173901B2 (ja) | 車両周辺監視装置 | |
JP4173902B2 (ja) | 車両周辺監視装置 | |
EP2759999B1 (en) | Apparatus for monitoring surroundings of vehicle | |
CN103858156B (zh) | 车辆周围监测装置 | |
US8766816B2 (en) | System for monitoring the area around a vehicle | |
US8810653B2 (en) | Vehicle surroundings monitoring apparatus | |
JP4171501B2 (ja) | 車両の周辺監視装置 | |
US20130243261A1 (en) | Vehicle surroundings monitoring device | |
CN104160434A (zh) | 车辆周围监视装置 | |
JP5547160B2 (ja) | 車両周辺監視装置 | |
US20110096956A1 (en) | Vehicle periphery monitoring device | |
JP2007241898A (ja) | 停止車両分別検出装置および車両の周辺監視装置 | |
JP2013186507A (ja) | 車両周辺監視装置 | |
JP4644273B2 (ja) | 車両周辺監視装置 | |
JP4813304B2 (ja) | 車両周辺監視装置 | |
JP4823753B2 (ja) | 車両の周辺監視装置 | |
CN115571152A (zh) | 非机动车辆的安全预警方法、装置、系统、设备及介质 | |
WO2019003996A1 (ja) | プロセッサ、画像処理装置、移動体、画像処理方法、及びプログラム | |
JP4943403B2 (ja) | 車両の周辺監視装置 | |
JP4694441B2 (ja) | 車両周辺監視システム | |
JP5907849B2 (ja) | 車両周辺監視装置 | |
JP2008042779A5 (zh) | ||
CN104192065A (zh) | 一种可辨监控对象的汽车四周监控装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140723 |