CN112135080B - 车辆用信息记录装置 - Google Patents

车辆用信息记录装置 Download PDF

Info

Publication number
CN112135080B
CN112135080B CN202010492870.0A CN202010492870A CN112135080B CN 112135080 B CN112135080 B CN 112135080B CN 202010492870 A CN202010492870 A CN 202010492870A CN 112135080 B CN112135080 B CN 112135080B
Authority
CN
China
Prior art keywords
information
vehicle
image
angle
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010492870.0A
Other languages
English (en)
Other versions
CN112135080A (zh
Inventor
饭田智阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN112135080A publication Critical patent/CN112135080A/zh
Application granted granted Critical
Publication of CN112135080B publication Critical patent/CN112135080B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/915—Television signal processing therefor for field- or frame-skip recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/63—Scene text, e.g. street names
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841—Registering performance data
    • G07C5/085—Registering performance data using electronic data carriers
    • G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175—Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625—License plates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)

Abstract

本发明涉及车辆用信息记录装置。信息记录装置具有第1拍摄部、第2拍摄部、信息取得部以及记录部。第1拍摄部以第1视角拍摄第1图像，该第1图像包含车辆的前方或者后方的对象车辆的至少一部分、和对象车辆的周边部分。第2拍摄部以使对象车辆或者周边部分的特定对象部分的对象信息能够被识别的方式，以比第1视角窄的第2视角拍摄包含对象信息的第2图像。信息取得部从第2图像取得对象信息。记录部将由信息取得部所取得的对象信息与第1图像相关联而记录。

Description

车辆用信息记录装置
技术领域
本发明涉及车辆用信息记录装置。
背景技术
日本特开2013-80518中公开了一种车载用动态图像数据记录装置，其将摄像头(camera)单元拍摄到的图像以高分辨率(高画质)压缩，基于由触发检测单元检测出异常状态的触发检测定时(timing)，记录高分辨率的动态图像数据。
发明内容
存在为了进行驾驶辅助而搭载有视角不同的多个摄像头(拍摄部)的车辆。相比于适于车辆的信息记录的摄像头的视角，驾驶辅助中使用的摄像头的视角通常较窄或较宽。因此，在对该车辆设置如日本特开2013-80518那样的进行车辆的信息记录的信息记录装置(行车记录仪)的情况下，需要设置该信息记录装置专用的摄像头，尚有改善的余地。
本发明考虑上述事实，目的在于获得无需追加新的拍摄部就能够记录适于车辆的信息记录的图像的车辆用信息记录装置。
权利要求1所述的本发明涉及的车辆用信息记录装置具有：第1拍摄部，其以第1视角拍摄第1图像，所述第1图像包含车辆的前方或者后方的对象车辆的至少一部分、和该对象车辆的周边部分；第2拍摄部，其以使所述对象车辆或者所述周边部分的特定对象部分的对象信息能够被识别的方式，以比所述第1视角窄的第2视角拍摄包含所述对象信息的第2图像；信息取得部，其从所述第2图像取得所述对象信息；以及记录部，其将由所述信息取得部所取得的所述对象信息与所述第1图像相关联而记录。
在权利要求1所述的本发明涉及的车辆用信息记录装置中，第1拍摄部以第1视角拍摄第1图像。另外，第2拍摄部以使对象车辆或者周边部分的特定对象部分的对象信息能够被识别的方式，以比第1视角窄的第2视角拍摄包含对象信息的第2图像。再者，信息取得部从第2图像取得对象信息。而且，记录部将对象信息与第1图像相关联而记录。在此，即使无法在第1图像中识别特定对象部分，也能够根据与第1图像相关联的对象信息识别特定对象部分，因此，无需追加新的拍摄部，就能够记录适于车辆的信息记录的图像。
权利要求2所述的本发明涉及的车辆用信息记录装置的所述记录部将包含所述对象车辆的号码(number，车牌号)信息的所述对象信息与所述第1图像相关联而记录。
在权利要求2所述的本发明涉及的车辆用信息记录装置中，对象信息中包含有号码信息，由此可基于对象信息而唯一地决定对象车辆，因此，即使不记录多个对象信息也能够确定对象车辆。
权利要求3所述的本发明涉及的车辆用信息记录装置的所述记录部将包含所述周边部分的车辆行驶规则信息的所述对象信息与所述第1图像相关联而记录。
在权利要求3所述的本发明涉及的车辆用信息记录装置中，对象信息中包含有周边部分的车辆行驶规则信息，因此，能够判别被记录的对象车辆是否在遵守车辆行驶规则而行驶。
权利要求4所述的本发明涉及的车辆用信息记录装置的所述第1拍摄部的作为所述第1视角的水平视角被设定为180°以上。
在权利要求4所述的本发明涉及的车辆用信息记录装置中，第1拍摄部的水平视角被设定为180°以上，由此与水平视角小于180°的构成相比，拍摄范围较广，因此，能够更多地取得车辆的周边信息。
如上所述，根据本发明，具有无需追加新的拍摄部就能够记录适于车辆的信息记录的图像这一优异的效果。
附图说明
以下，参照附图对本发明的示例性实施方式的特征、优点以及技术和产业意义进行说明，在附图中相同的附图标记表示相同的要素，并且其中：
图1是表示应用了本实施方式涉及的信息记录装置的车辆中的各摄像头的配置以及视角的俯视图。
图2是表示在应用了本实施方式涉及的信息记录装置的车辆中乘员通过前挡风玻璃视觉识别到的视场的一例的示意图。
图3是表示本实施方式涉及的信息记录装置的硬件构成的框图。
图4是表示本实施方式涉及的信息记录装置的功能构成的框图。
图5是示出应用了本实施方式涉及的信息记录装置的车辆中的车间距离与各图像的号码信息的识别状态的关系的说明图。
图6是表示无法在通过图3所示的后方狭角摄像头拍摄到的第2图像中识别后方车辆的号码信息的状态的示意图。
图7是表示难以在通过图3所示的后方狭角摄像头拍摄到的第2图像中识别后方车辆的号码信息的状态的示意图。
图8是表示在通过图3所示的后方狭角摄像头拍摄到的第2图像中识别出后方车辆的号码信息的状态的示意图。
图9是表示对通过图3所示的后方广角摄像头拍摄到的第1图像结合有后方车辆的号码信息的记录图像的示意图。
图10是表示在本实施方式涉及的信息记录装置中对第1图像结合后方车辆的号码信息的处理流程的流程图。
图11A是表示通过图1所示的前方狭角摄像头拍摄到的第2图像的示意图。
图11B是表示对通过图1所示的前方广角摄像头拍摄到的第1图像结合有前方车辆的号码信息以及限制速度信息的记录图像的示意图。
图12是表示在本实施方式的变形例涉及的信息记录装置中对拍摄到的第1图像关联有三台后方车辆的号码信息的记录图像的示意图。
具体实施方式
图1中表示出应用了作为本实施方式涉及的车辆用信息记录装置的一例的信息记录装置30的车辆10的俯视图。车辆10构成为包括车体12、前挡风玻璃14、后挡风玻璃16以及信息记录装置30。车体12包括车顶18、左右一对侧门(side door)22以及设置于各侧门22的摄像头支承部24。摄像头支承部24支承着电子镜(反射)用摄像头23(参照图2)。
箭头FR表示车辆前后方向前侧，箭头RR表示车辆前后方向后侧，箭头UP表示车辆上下方向上侧，箭头OUT表示车辆宽度方向外侧。车辆前后方向、车辆上下方向和车辆宽度方向是彼此正交的方向。以下，在简单地使用前后、上下、左右的方向进行说明的情况下，除非另有说明，设为表示车辆前后方向的前后、车辆上下方向的上下、朝向行进方向的情况下的车辆宽度方向的左右。
图2中表示出从车辆10的车室13内观察到前方侧的视场V的状态。作为一例，在行驶路径(车道)R上，在车辆10的前方侧行驶有前方车辆CA。在车室13内，仪表板17上设置有后述的主监视器(main monitor)52。另外，车室13内设置有左右一对辅助监视器(sub-monitors)54。车辆10上设置有未图示的GPS(Global Positioning System，全球定位系统)接收机、通信接口(Interface)以及碰撞检测传感器等。
接着，对信息记录装置30进行说明。
〔硬件构成〕
如图3所示，作为一例，信息记录装置30具有ECU32、摄像头单元40、存储卡(memorycard)48、主监视器52、辅助监视器54、记录开关55、碰撞预测传感器56、计时器(timer)58以及点火传感器(ignition sensor)59。ECU意味着电子控制单元(Electronic ControlUnit)。这些各构成经由内部总线31相互能够通信地相连接。
ECU32具有CPU(Central Processing Unit，中央处理单元)34、ROM(Read OnlyMemory，只读存储器)35、RAM(Random Access Memory，随机存取存储器)36以及储存器(storage)37。
ROM35保存各种程序以及各种数据。RAM36作为工作区域而临时地存储程序或者数据。作为一例，储存器37由闪存(flash ROM)构成，保存包括操作系统(operating system)在内的各种程序以及各种数据。CPU34通过执行记录于ROM35或者储存器37的信息记录处理等的各种程序，控制信息记录装置30的各部分的动作以及各种信息的记录。
作为一例，摄像头单元40具有前方广角摄像头42、前方狭角摄像头43、侧方摄像头44、后方广角摄像头45以及后方狭角摄像头46。此外，将视角(可视角度)相对较大的摄像头称为“广角摄像头”，将视角比“广角摄像头”的视角小(窄)的摄像头称为“狭角摄像头”。在后面的说明中，“视角”意味着“水平视角”，但不限于此，也可以将“视角”以“垂直视角”或者“对角线方向的视角”进行设定。基于预先设定的图像(影像)的纵横比，转换为各自的视角即可。
摄像头单元40所具有的各摄像头构成为包括透镜以及CCD(charge-coupleddevice，电荷耦合器件)和/或CMOS(complementary metal oxide semiconductor，互补金属氧化物半导体)等拍摄元件。另外，作为一例，将由各摄像头拍摄图像(影像)的拍摄频率设定为30ms(毫秒)左右。
如图1所示，作为一例，前方广角摄像头42设置在车体12的前端部且在车辆宽度方向中央，以第1视角θ1拍摄车辆10前方的第1图像G1(参照图11B)。作为一例，第1视角θ1被设定为180°以上(在此为200°)。此外，在图1中，为了易于观察角度，以小于200°的角度图示了第1视角θ1以及后述的第1视角θ3。前方广角摄像头42拍摄到的第1图像G1的信息被输出到ECU32(参照图3)。作为前方广角摄像头42的例子，有全景监视器(panoramic viewmonitor)用摄像头。
作为一例，前方狭角摄像头43设置在车室13内的内后视镜(roommirror)15(参照图2)的支柱附近，以第2视角θ2拍摄车辆10前方的第2图像G2(参照图11A)。第2视角θ2比第1视角θ1窄。前方狭角摄像头43拍摄到的第2图像G2的信息被输出到ECU32。使用第2图像G2，识别(解析)前方车辆CA的号牌N(参照图2)的信息。作为前方狭角摄像头43的例子，有作为车辆前方周边的状况检测部所使用的摄像头(用于进行路标识别、前方车辆的识别、前方的白线识别等的摄像头)。
侧方摄像头44设置在左右一对摄像头支承部24的下部(电子镜用摄像头23(参照图2)的下侧)。另外，侧方摄像头44拍摄车辆10的后方且侧方。由侧方摄像头44拍摄到的图像信息被发送给ECU32。将侧方摄像头44的视角设为θ5。
作为一例，后方广角摄像头45设置在车体12的后端部且在车辆宽度方向中央，以第1视角θ3拍摄车辆10后方的第1图像G3(参照图7)。作为一例，第1视角θ3被设定为180°以上(在此为200°)。后方广角摄像头45拍摄到的第1图像G3的信息被输出到ECU32。作为后方广角摄像头45的例子，有倒车监视器(back-guide monitor)用摄像头。
作为一例，后方狭角摄像头46设置在车体12的后端部且在车辆宽度方向中央而比后方广角摄像头45靠下侧，以第2视角θ4拍摄车辆10后方的第2图像G4(参照图6)。第2视角θ4比第1视角θ3窄。后方狭角摄像头46拍摄到的第2图像G4的信息被输出到ECU32。使用第2图像G4，识别(解析)后方车辆CB的号牌N(参照图7)的信息。作为后方狭角摄像头46的例子，有电子内后视镜(inner mirror)用摄像头。
图3所示的存储卡48通过插入到设置于信息记录装置30的未图示的读卡器的插槽，能够进行信息的取得以及信息的记录。
图2所示的主监视器52构成为包括未图示的触摸面板。另外，主监视器52上能够显示摄像头单元40(参照图3)中拍摄到的各图像。辅助监视器54上可显示由电子镜用摄像头23拍摄到的图像。
记录开关55设置于仪表板17，由未图示的乘员(驾驶员)操作其开启(ON)、关闭(OFF)。记录开关55的信号被输出到ECU32(参照图3)。通过记录开关55被设为开启状态，后述的结合信息被记录于存储卡48(参照图3)。另外，通过记录开关55被设为关闭状态，结合信息向存储卡48的记录停止。
图3所示的碰撞预测传感器56构成为包括未图示的毫米波雷达、激光雷达、车载摄像头等。在车辆10中，碰撞预测的信息从碰撞预测传感器56输出到ECU32。在本实施方式中，来自记录开关55的输出信号以及来自碰撞预测传感器56的输出信号被用作后述的结合信息的记录开始时的触发信号。此外，作为一例，通过使用碰撞预测传感器56，能够测定车辆10与后述的对象车辆C的车间距离。
计时器58将当前的时刻(时间点)信息发送给ECU32。另外，计时器58构成为能够根据来自ECU32的指示对成为两个时间点之间的时间进行计时。在计时器58中计测的时间信息被发送给ECU32。
点火传感器59检测车辆10的未图示的点火开关(IG)的接通(ON)状态(开动状态)或者断开(OFF)状态(停止状态)。由点火传感器59检测出的接通状态或者断开状态的信息被发送给ECU32。
〔功能构成〕
信息记录装置30在执行信息记录处理程序时使用上述的硬件资源实现各种功能。以下，对信息记录装置30所实现的功能构成进行说明。此外，对于图1、图2以及图3所示的各构成，有时会省略个别图号的记载。
如图4所示，信息记录装置30具有第1拍摄部60、第2拍摄部70、信息取得部80以及记录部90作为功能构成。各功能构成通过由信息记录装置30的CPU34读取存储于ROM35或者储存器37的程序、信息并加载于RAM36而执行来实现。
＜第1拍摄部＞
第1拍摄部60具有前方广角拍摄部62和后方广角拍摄部64。
前方广角拍摄部62以第1视角θ1拍摄包含车辆10前方的对象车辆C(之后称为前方车辆CA)的至少一部分、以及前方车辆CA的周边部分PA的第1图像G1(参照图11B)。第1图像G1的图像信息被发送给记录部90。后方广角拍摄部64以第1视角θ3拍摄包含车辆10后方的对象车辆C(之后称为后方车辆CB)的至少一部分、以及后方车辆CB的周边部分PB的第1图像G3(参照图7)。第1图像G3的图像信息被发送给记录部90。
＜第2拍摄部＞
第2拍摄部70具有前方狭角拍摄部72和后方狭角拍摄部74。
前方狭角拍摄部72以使前方车辆CA以及周边部分PA的特定对象部分S(参照图2)的对象信息能够被识别的方式，以比第1视角θ1窄的第2视角θ2拍摄包含对象信息的第2图像G2。第2图像G2的图像信息被发送给记录部90。后方狭角拍摄部74以使后方车辆CB以及周边部分PB的特定对象部分S的对象信息能够被识别的方式，以比第1视角θ3窄的第2视角θ4拍摄包含对象信息的第2图像G4。第2图像G4的图像信息被发送给记录部90。
此外，特定对象部分S意味着在对象车辆C和周边部分P中的至少一方中成为需要识别并记录信息的对象的部位。在此，作为特定对象部分S的一例，设定了对象车辆C的号牌N以及速度标识V(参照图11A)。另外，对于特定对象部分S，作为需要记录于后述的记录部90的对象信息的一例，设定了该号牌N的号码信息以及速度标识V的限制速度信息。
＜信息取得部＞
信息取得部80从第2图像G2以及第2图像G4取得特定对象部分S的对象信息(号码信息以及限制速度信息)。具体而言，作为一例，信息取得部80具有狭角图像取得部82、对象识别部84、对象解析部86以及对象信息记录部88。
狭角图像取得部82从第2拍摄部70取得第2图像G2以及第2图像G4的信息。作为一例，对象识别部84使用公知的模式匹配以及区域识别的方法，识别(检测)第2图像G2以及第2图像G4中的号牌N以及速度标识V。作为一例，对象解析部86对于由对象识别部84识别出的号牌N以及速度标识V，使用公知的文字识别(OCR(optical character recognition))的方法，解析号码信息以及限制速度信息并将其文本化(转换为文本)。
在对象信息记录部88中，临时存储在对象解析部86中被文本化后的号码信息以及限制速度信息。换言之，记录于对象信息记录部88的号码信息以及限制速度信息在经过了预先设定的设定时间的情况下会自动地擦除或者被覆写。该号码信息以及限制速度信息被发送给记录部90。此外，在后述的触发信号被输入到ECU32的情况下，在该触发信号被输入的时间点的前后的时间内所记录的号码信息以及限制速度信息会被保存。
＜记录部＞
记录部90将由信息取得部80所取得的对象信息(号码信息以及限制速度信息)与第1图像G1以及第1图像G3相关联而记录。具体而言，作为一例，记录部90具有广角图像取得部92、对象识别部94、信息结合部96以及结合信息记录部98。
广角图像取得部92从第1拍摄部60取得第1图像G1以及第1图像G3。对象识别部94识别由广角图像取得部92所取得的第1图像G1以及第1图像G3中的号牌N以及速度标识V。此外，对象识别部94中的对象的识别意味着该对象大致能与其他部分区分即可的程度的识别。因此，在对象识别部94中，也可以不必获得所需要的对象信息。
信息结合部96在能获得号码信息以及限制速度信息的期间内，将第1图像G1以及第1图像G3中的号牌N与由信息取得部80获得的号码信息在使时间点(时间)同步的状态下相关联。另外，在该期间内，信息结合部96将第1图像G1中的速度标识V以及第1图像G3中的速度标识V与在信息取得部80中获得的限制速度信息在使时间点(时间)同步的状态下相关联。此外，信息结合部96在无法获得号码信息以及限制速度信息的期间内，将已经获得的号码信息以及限制速度信息与第1图像G1以及第1图像G3中的号牌N以及速度标识V相关联。
在此，“相关联”意味着使一个信息与其他信息之间有关联。另外，所谓“相关联”，不限于将分别记录的一个信息与其他信息关联，还包括将一个信息与其他信息集合成一个来记录(“进行结合”、“进行重叠”)。在下面的说明中，“结合信息”意味着对象信息与第1图像取得时间上的同步而结合出的信息。
结合信息记录部98在被输入了已述的触发信号(开启)的情况下进行由信息结合部96结合出的结合信息的记录。另外，结合信息记录部98在被输入了已述的触发信号(关闭)的情况下停止由信息结合部96结合出的结合信息的记录。在本实施方式中，作为向第1图像G1、G3结合对象信息的一例，对象信息被重叠(叠加)于第1图像G1、G3。此外，向第1图像G1、G3结合对象信息包括：将对象信息与第1图像G1、G3并排显示并作为一个图像。
〔车间距离与图像的关系〕
图5中表示出本实施方式中的对象车辆C(参照图2)的号码信息的识别以及记录的情形。具体而言，在图5中，对于对象车辆C(参照图2)的号码信息，表示出从车辆10到对象车辆C的车间距离与狭角图像(第2图像G2、G4)以及记录图像(相关联后的图像)之间的关系。对于限制速度信息，省略了图示。作为一例，从记录开始时间点起的经过时间越长，则车间距离变得越远。
在车间距离近的状态下，能够根据狭角图像识别号码信息，所以使广角图像(第1图像G1、G3)与号码信息实时地同步的记录图像被记录于记录部90(参照图4)。在车间距离稍微变远的(变长的)状态下，变得无法识别号码信息，但能够识别是否存在对象车辆C。因此，广角图像与能够识别号码信息的时间点的对象车辆C的号码信息相关联而被记录于记录部90。
在车间距离远的(变得相当长的)状态下，无法识别对象车辆C的号码信息，另外，也无法识别是否存在对象车辆C，因此记录部90中不被记录号码信息。在车间距离太近的状态(参照图6)下，由于号牌N被遮住，因此变得无法取得号码信息，但能够识别是否存在对象车辆C。因此，车间距离太近的状态下的广角图像与在车间距离变得太近之前根据狭角图像识别出的对象车辆C的号码信息相关联而被记录于记录部90。
〔作用以及效果〕
接着，对本实施方式的信息记录装置30的作用进行说明。
图10中示出表示由ECU32(参照图3)进行的信息记录处理的流程的流程图。此外，对于车辆10以及信息记录装置30中的各构成，参照图1至图4的各图，省略个别图号的记载。在此，作为一例，对车辆10的后方侧的信息记录进行说明。对于车辆10的前方侧的信息记录，将会在后面进行说明。另外，对选择了号码信息作为所记录的对象信息的情况进行说明。
在ECU32中，CPU34从ROM35或者储存器37读取信息记录处理程序，并加载于RAM36而执行，由此进行信息记录处理。
在步骤S10中，CPU34确认点火传感器59检测出的信号，判定点火开关是否为接通状态。在判定为是接通状态的情况下(S10：是)，移至步骤S12。在判定为是断开状态的情况下(S10：否)，反复进行步骤S10。
在步骤S12中，CPU34使用后方狭角拍摄部74取得狭角图像信息(第2图像G4(参照图8))。此时，对于第2图像G4，关联有从计时器58获得的拍摄时刻的信息。然后，移至步骤S14。
在步骤S14中，CPU34使用后方广角拍摄部64取得广角图像信息(第1图像G3(参照图9))。此时，对于第1图像G3，关联有从计时器58获得的拍摄时刻的信息。然后，移至步骤S16。
在步骤S16中，CPU34判定是否能够解析后方车辆CB的号牌N的号码信息。作为一例，对是否能够解析的判定根据车辆10与后方车辆CB的车间距离是否落入预先设定的车间距离的范围内来判定。在判定为能够解析的情况下(S16：是)，移至步骤S18。在判定为不能解析的情况下(S16：否)，移至步骤S12。
在步骤S18中，CPU34使用对象解析部86，解析后方车辆CB的号码信息(参照图8)。然后，移至步骤S20。
在步骤S20中，CPU34使对象信息记录部88存储被解析出的号码信息。然后，移至步骤S22。
在步骤S22中，CPU34判定有无已述的触发信号的输入。也即是说，CPU34判定是否检测到了来自记录开关55以及碰撞预测传感器56的输出信号。在有触发信号(S22：是)的情况下，移至步骤S24。在无触发信号(S22：否)的情况下，移至步骤S12。
在步骤S24中，CPU34通过将号码信息与广角图像信息(第1图像G3)结合(相关联)，获得结合信息(图9示出的第1图像G3)。然后，移至步骤S26。
在步骤S26中，CPU34使记录部90记录通过步骤S24获得的结合信息。然后，移至步骤S28。
在步骤S28中，CPU34判定点火开关是否为断开状态。在判定为断开状态的情况下(S28：是)，结束程序。在判定为接通状态的情况下(S28：否)，移至步骤S12。
如上所述，在信息记录装置30中，第1拍摄部60以比较广角的第1视角θ3拍摄第1图像G3。另外，第2拍摄部70以比第1视角θ3窄的第2视角θ4拍摄包含对象信息的第2图像G4。进而，信息取得部80从第2图像G4取得对象信息。而且，记录部90将对象信息与第1图像G3相关联而记录。在此，即使无法在第1图像G3中识别特定对象部分S，也能够根据与第1图像G3相关联的对象信息识别特定对象部分S，因此，无需追加新的拍摄部，就能够记录适于车辆10的信息记录的图像。
另外，在信息记录装置30中，对象信息中包含有号码信息，由此可基于对象信息而唯一地决定对象车辆，因此，即使不记录多个对象信息也能够确定对象车辆。
再者，在信息记录装置30中，第1拍摄部60的水平视角被设定为180°以上，由此与水平视角小于180°的构成相比，拍摄范围较广，因此，能够更多地取得车辆10的周边信息。
接着，对车辆10的前方侧的信息记录进行说明。图11A中表示出使用信息记录装置30(参照图3)所获得的车辆10的前方侧的第2图像G2。在第2图像G2中，能够识别前方车辆CA的号牌N的号码信息以及速度标识V的限制速度信息。而且，能从第2图像G2取得号码信息以及限制速度信息。
在图11B中，作为使用信息记录装置30(参照图3)所获得的结合信息(记录图像)的另一例，示出了车辆10的前方侧的第1图像G1。在该结合信息中，前方车辆CA的号牌N与号码信息相关联，速度标识V与限制速度信息相关联。如此，在车辆10的前方侧，也可以将对象信息与广角图像相关联而作为结合信息，并使结合信息记录部98(参照图4)记录。
在图11B所示的例子中，对象信息中包含有前方车辆CA的周边部分PA的车辆行驶规则信息(作为一例，限制速度信息)，因此能够判别前方车辆CA是否在遵守车辆行驶规则而行驶。例如，在车辆10(本车辆)为巡逻警车且以60km/h行驶于限制速度(约束速度)为40km/h的地方追赶前方车辆CA的情况下，只要获得图11A、图11B的图像(结合信息)，就能知道前方车辆CA正在违规。另外，只要获得在交通信号灯SG的点亮颜色为红色的状态下前方车辆CA进入到交叉路口的图像(结合信息)，就能知道前方车辆CA正在违规。再者，根据号码信息，可唯一地决定前方车辆CA。
此外，本发明不限定于上述的实施方式。
在图12中，作为使用信息记录装置30(参照图3)所获得的结合信息的另一例，表示出在车辆10(参照图1)的后方侧行驶有后方车辆CB(C1、C2、C3)的第1图像G3。第1图像G3由显示于图像显示区域G3a的图像以及显示于与图像显示区域G3a并排的信息显示区域G3b的图像(文本信息)所构成。作为一例，在信息显示区域G3b内表示了后方车辆C1、C2、C3的号码信息为“1234”、“8366”、“4567”。如此，也可以将与多个对象车辆C对应的多个对象信息集合而显示。
此外，虽然优选三个号码信息与后方车辆C1、C2、C3一对一地相结合，但也可以进行如三个号码信息中的某一个与后方车辆C1、C2、C3中的某一个相符这样的大致的信息的关联(结合)。另外，对象车辆C的台数不限于一台或者三台，也可以是两台或者四台以上。
在信息记录装置30中，也可以使用图1所示的侧方摄像头44作为后方狭角摄像头46。另外，第1视角θ1也可以小于180°。记录于记录部90的对象信息不限于号码信息和车辆行驶规则信息，例如也可以是后方车辆CB的驾驶员的面部或者副驾驶座的乘员的面部。另外，作为车辆行驶规则信息，也可以取得交通信号灯SG的点亮颜色信息，使其与第1图像G1、G3结合。
在图10所示的流程图中，步骤S12和步骤S14也可以同时进行。
关于在上述的实施方式中CPU34加载软件(程序)而执行的信息记录处理，也可以由CPU34以外的各种处理器执行。作为该情况下的处理器，可例示(1)FPGA(Field-Programmable Gate Array，现场可编程门阵列)等可在制造后变更电路构成的PLD(Programmable Logic Device，可编程逻辑器件)、以及(2)ASIC(Application SpecificIntegrated Circuit，专用集成电路)等作为具有为了执行特定的处理而专门设计出的电路构成的处理器的专用电气电路等。另外，既可以通过这些各种处理器中的一个来执行上述的处理，也可以通过同种或者异种的两个以上的处理器的组合(例如，多个FPGA、以及CPU与FPGA的组合等)来执行。更具体而言，这些各种处理器的硬件上的构造是组合半导体元件等电路元件而成的电气电路。
另外，在上述的实施方式中，说明了信息记录处理程序被预先存储(安装)于ROM35或者储存器37的技术方案，但不限定于此。程序也可以通过记录于CD-ROM(Compact DiskRead-Only Memory)、DVD-ROM(Digital Versatile Disk-Read Only Memory)以及USB(Universal Serial Bus)存储器等记录介质的形式来提供。另外，信息记录处理程序也可以设为经由网络从外部装置下载的形式。

Claims (5)

1.一种车辆用信息记录装置，具有：
第1拍摄部，其以第1视角拍摄第1图像，所述第1图像包含车辆的前方或者后方的对象车辆的至少一部分、和该对象车辆的周边部分；
第2拍摄部，其以使所述对象车辆或者所述周边部分的特定对象部分的对象信息能够被识别的方式，以比所述第1视角窄的第2视角拍摄包含所述对象信息的第2图像；
信息取得部，其从所述第2图像取得所述对象信息；以及
记录部，其在能获得所述对象信息的第1期间内，将由所述信息取得部所取得的所述对象信息与所述第1图像相关联而记录，在无法获得所述对象信息的第2期间内，将在所述第1期间已经获得的所述对象信息与所述第1图像相关联而记录。
2.根据权利要求1所述的车辆用信息记录装置，
所述记录部将包含所述对象车辆的号码信息的所述对象信息与所述第1图像相关联而记录。
3.根据权利要求1或2所述的车辆用信息记录装置，
所述记录部将包含所述周边部分的车辆行驶规则信息的所述对象信息与所述第1图像相关联而记录。
4.根据权利要求1或2所述的车辆用信息记录装置，
将所述第1拍摄部的作为所述第1视角的水平视角设定为180°以上。
5.根据权利要求3所述的车辆用信息记录装置，
将所述第1拍摄部的作为所述第1视角的水平视角设定为180°以上。
CN202010492870.0A 2019-06-24 2020-06-03 车辆用信息记录装置 Active CN112135080B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-116382 2019-06-24
JP2019116382A JP7243478B2 (ja) 2019-06-24 2019-06-24 車両用情報記録装置

Publications (2)

Publication Number Publication Date
CN112135080A CN112135080A (zh) 2020-12-25
CN112135080B true CN112135080B (zh) 2023-04-07

Family

ID=73851609

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010492870.0A Active CN112135080B (zh) 2019-06-24 2020-06-03 车辆用信息记录装置

Country Status (3)

Country Link
US (1) US20200404187A1 (zh)
JP (1) JP7243478B2 (zh)
CN (1) CN112135080B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7400705B2 (ja) * 2020-11-30 2023-12-19 トヨタ自動車株式会社 撮像システム及び撮像装置
CN113052098B (zh) * 2021-03-31 2024-02-23 深圳酷派技术有限公司 车辆防刮预警方法、相关装置及计算机存储介质
JP2023042895A (ja) * 2021-09-15 2023-03-28 キヤノン株式会社 運転支援装置、運転支援方法およびプログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05342497A (ja) * 1992-06-09 1993-12-24 Mazda Motor Corp 車両の障害物検出装置
JPH08161500A (ja) * 1994-12-05 1996-06-21 Minolta Co Ltd 物体認識装置
JP2017032483A (ja) * 2015-08-05 2017-02-09 株式会社デンソー キャリブレーション装置、キャリブレーション方法、及びプログラム
CN106604847A (zh) * 2014-09-02 2017-04-26 株式会社电装 车辆用图像处理装置
JP2017130155A (ja) * 2016-01-22 2017-07-27 富士通テン株式会社 物体認識装置および物体認識方法
CN107852483A (zh) * 2015-08-04 2018-03-27 株式会社电装 向驾驶员提示辅助图像的装置及其方法
CN108780589A (zh) * 2016-03-22 2018-11-09 株式会社电装 行车记录仪
JP2019046092A (ja) * 2017-08-31 2019-03-22 古野電気株式会社 車載装置、基地局装置、映像情報提供システム、映像情報提供方法、及びコンピュータプログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001064481A2 (en) * 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
JP2003116029A (ja) 2001-10-04 2003-04-18 Minolta Co Ltd 撮像装置及びこの撮像装置を用いた画像記録装置
US7526103B2 (en) * 2004-04-15 2009-04-28 Donnelly Corporation Imaging system for vehicle
JP2007036756A (ja) 2005-07-27 2007-02-08 Kazuo Iwane 視角固定の全周カメラと視点方向を制御可能な狭角カメラをリンクさせた監視カメラシステム
JP2010195235A (ja) 2009-02-25 2010-09-09 Viewtec Japan Co Ltd 車載カメラシステム
US9041806B2 (en) * 2009-09-01 2015-05-26 Magna Electronics Inc. Imaging and display system for vehicle
JP2011096063A (ja) 2009-10-30 2011-05-12 Sharp Corp ドライブレコーダ装置
US20150228066A1 (en) * 2014-02-10 2015-08-13 Michael Scot Farb Rear Encroaching Vehicle Monitoring And Alerting System
DE112014006876T5 (de) * 2014-08-21 2017-05-18 Mitsubishi Electric Corporation Fahrassistenzvorrichtung, Fahrassistenzverfahren und Programm
CN107079087B (zh) 2014-10-31 2021-01-26 富士胶片株式会社 摄像装置及对象物识别方法
JP6767518B2 (ja) 2017-02-14 2020-10-14 パイオニア株式会社 情報記録装置、情報記録方法及び情報記録用プログラム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05342497A (ja) * 1992-06-09 1993-12-24 Mazda Motor Corp 車両の障害物検出装置
JPH08161500A (ja) * 1994-12-05 1996-06-21 Minolta Co Ltd 物体認識装置
CN106604847A (zh) * 2014-09-02 2017-04-26 株式会社电装 车辆用图像处理装置
CN107852483A (zh) * 2015-08-04 2018-03-27 株式会社电装 向驾驶员提示辅助图像的装置及其方法
JP2017032483A (ja) * 2015-08-05 2017-02-09 株式会社デンソー キャリブレーション装置、キャリブレーション方法、及びプログラム
JP2017130155A (ja) * 2016-01-22 2017-07-27 富士通テン株式会社 物体認識装置および物体認識方法
CN108780589A (zh) * 2016-03-22 2018-11-09 株式会社电装 行车记录仪
JP2019046092A (ja) * 2017-08-31 2019-03-22 古野電気株式会社 車載装置、基地局装置、映像情報提供システム、映像情報提供方法、及びコンピュータプログラム

Also Published As

Publication number Publication date
JP7243478B2 (ja) 2023-03-22
US20200404187A1 (en) 2020-12-24
JP2021002795A (ja) 2021-01-07
CN112135080A (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
CN112135080B (zh) 车辆用信息记录装置
KR100936558B1 (ko) 차량용 주변 감시 장치 및 영상 표시 방법
US10802210B2 (en) Apparatus and method for a safety system of cameras for advantageously viewing vehicular traffic by the driver
JP6137081B2 (ja) 車載機器
CN109715467B (zh) 车辆控制装置、车辆控制方法以及可移动体
CN106314424B (zh) 基于汽车的超车辅助方法、装置及汽车
JP2008222153A (ja) 合流支援装置
TW202101959A (zh) 圖像辨識裝置及圖像辨識方法
CN208789581U (zh) 多功能驾驶辅助装置
JP2007293672A (ja) 車両用撮影装置、車両用撮影装置の汚れ検出方法
KR101980966B1 (ko) 자동차의 주변을 표시하기 위한 장치 및 방법
CN113060156B (zh) 车辆周围监视装置、车辆、车辆周围监视方法和程序
JP4679816B2 (ja) 車両周辺表示制御装置
US11152726B2 (en) Connector device and connector system
JPH09272414A (ja) 車両制御装置
JP2004040523A (ja) 車両周囲監視装置
JP2003127772A (ja) 車載用死角画像表示装置
US10572967B2 (en) Image data processing circuit and imaging circuit
JPH02299944A (ja) 車載用後方確認装置
JP2022140026A (ja) 画像処理装置、画像処理方法およびプログラム
CN110995981B (zh) 图像处理装置及其控制方法、非暂时性可读记录介质、信息处理系统
CN112141084A (zh) 停车支援装置及停车支援方法
CN113538965A (zh) 显示控制装置、显示控制方法及记录有程序的记录介质
JP2004098917A (ja) 車載カメラ装置及び車両周辺視認装置
JPH0891122A (ja) 車両用視認補助装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant