WO2017164244A1 - ドライブレコーダ - Google Patents
ドライブレコーダ Download PDFInfo
- Publication number
- WO2017164244A1 WO2017164244A1 PCT/JP2017/011497 JP2017011497W WO2017164244A1 WO 2017164244 A1 WO2017164244 A1 WO 2017164244A1 JP 2017011497 W JP2017011497 W JP 2017011497W WO 2017164244 A1 WO2017164244 A1 WO 2017164244A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- camera
- recording
- drive recorder
- image
- unit
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/002—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles specially adapted for covering the peripheral part of the vehicle, e.g. for viewing tyres, bumpers or the like
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/006—Side-view mirrors, e.g. V-shaped mirrors located at the front or rear part of the vehicle
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0841—Registering performance data
- G07C5/085—Registering performance data using electronic data carriers
- G07C5/0866—Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Definitions
- the present disclosure relates to a drive recorder that records an image of the periphery of a vehicle.
- Drive recorders that record images acquired from in-vehicle cameras are known.
- the period in which an image can be stored is limited by the capacity of the memory that can be used for recording the image. The period becomes shorter as the number of cameras to be recorded increases.
- Patent Document 1 As a technique for suppressing unnecessary images from being recorded in a memory, for example, there is Patent Document 1 below.
- Patent Document 1 when the vehicle is parked and stopped and the engine is turned off, a monitoring mode for monitoring an obstacle approaching or contacting the vehicle is entered. In the monitoring mode, when an obstacle is detected within a preset distance range by the ultrasonic sensor, recording of the video from the in-vehicle camera is started.
- Patent Document 1 has a problem that another sensor is separately required to select an image that needs to be recorded.
- One aspect of the present disclosure is desirably capable of providing a drive recorder that realizes selective recording of images with a simple configuration.
- the drive recorder includes a moving object detection unit and a temporary recording control unit.
- a moving body detection part detects a moving body from the captured image acquired in the image acquisition part provided in the own vehicle which is a vehicle carrying the said drive recorder, and image
- the temporary recording control unit is one or more cameras including at least a target camera that is a camera including the position of the moving body in the shooting range among a plurality of cameras constituting the image acquisition unit according to the detection result of the moving body detection unit. Is selected as a temporary recording camera, and an image captured by the temporary recording camera is recorded on a recording medium prepared in advance.
- the image processing system 1 is a system used by being mounted on a vehicle such as an automobile. As shown in FIG. 1, the image processing system 1 includes an image acquisition unit 2, an electronic control unit (hereinafter referred to as ECU) 3, a monitor 4, and an in-vehicle communication network 5.
- ECU electronice control unit
- monitor 4 an in-vehicle communication network 5.
- a vehicle equipped with the image processing system 1 is referred to as a host vehicle.
- the image acquisition unit 2 includes a front camera 21, a rear camera 22, a left side camera 23, and a right side camera 24. These cameras 21 to 24 use, for example, CCD image sensors or CMOS image sensors.
- the front camera 21 is installed, for example, on a bumper at the front end of the vehicle so that the front of the vehicle is an imaging range (hereinafter referred to as front imaging range) AF.
- the rear camera 22 is installed, for example, in a bumper at the rear end of the vehicle so that the rear of the vehicle is a shooting range (hereinafter, rear shooting range) AB.
- the left side camera 23 is disposed, for example, on the left side mirror so that the left side of the vehicle is an imaging range (hereinafter, left imaging range) AL.
- the right side camera 24 is installed in, for example, a right side mirror so that the right side of the vehicle is an imaging range (hereinafter, right imaging range) AR.
- right imaging range an imaging range
- FIG. 3 is schematic, and is actually set to include at least the range necessary for various applications using captured images.
- Each of the cameras 21 to 24 repeatedly shoots at a preset time interval (for example, 1/15 [second]), and outputs a captured image that is a captured image to the ECU 3.
- the monitor 4 is a display device including a display screen using, for example, a liquid crystal or an organic EL.
- the monitor 4 displays an image according to a signal input from the ECU 3.
- CAN is used, and various in-vehicle devices are connected.
- CAN is a registered trademark and is an abbreviation for Controller Area Network.
- the ECU 3 includes an input processing unit 31, an in-vehicle communication unit 32, an image processing unit 33, an output processing unit 34, an image recording unit 35, and a power supply unit 36.
- the input processing unit 31 samples the captured image input from the image acquisition unit 2 to convert it into a digital signal and outputs it to the image processing unit 33.
- the in-vehicle communication unit 32 collects vehicle information by executing communication with other ECUs and the like mounted on the host vehicle via the in-vehicle communication network 5.
- the vehicle information includes at least a vehicle speed that represents the speed of the host vehicle and a shift position that represents the position of the shift lever of the host vehicle.
- the output processing unit 34 converts the digital signal of the composite image output from the image processing unit 33 into an analog signal and outputs the analog signal to the monitor 4.
- the image storage unit 35 is a storage device that includes a readable and writable non-transitional actual recording medium. The image storage unit 35 stores the captured image acquired from the image acquisition unit 2 and the composite image generated by the image processing unit 33.
- the power supply unit 36 receives power from a battery (not shown) of the host vehicle, converts the power supply voltage as appropriate, and supplies it to each unit of the ECU 3.
- the image processing unit 33 includes a microcomputer having a CPU and a semiconductor memory (hereinafter referred to as a memory) such as a RAM, a ROM, and a flash memory.
- a memory such as a RAM, a ROM, and a flash memory.
- Various functions realized by the image processing unit 33 are realized by the CPU executing a program stored in a non-transitional tangible recording medium.
- the memory corresponds to a non-transitional tangible recording medium that stores a program. Further, by executing this program, a method corresponding to the program is executed.
- the image processing unit 33 may include a single microcomputer or a plurality of microcomputers.
- the image processing unit 33 includes an image composition unit 331, a target recognition unit 332, and a drive recorder unit 333 as functions configured by the CPU executing the program.
- the technique for realizing these elements included in the image processing unit 33 is not limited to software, and some or all of the elements may be realized using hardware that combines a logic circuit, an analog circuit, and the like. .
- the image composition unit 331 is activated in accordance with an external instruction.
- the activated image generation unit 331 converts each captured image into a bird's-eye view viewed from a preset virtual viewpoint based on the captured images acquired from the cameras 21 to 24 via the input processing unit 31, thereby combining the bird's-eye view images. Is generated.
- the image composition unit 33 outputs the generated bird's-eye view image to the monitor 4 via the output processing unit 34 to display the bird's-eye view image and record it in the image storage unit 35.
- generates a bird's-eye view image from a captured image is known, the description about the detail is abbreviate
- the target recognition unit 332 continues to operate while the image processing unit 33 receives power from the power supply unit 36. Specifically, based on the captured images acquired from the cameras 21 to 24 via the input processing unit 31, a target existing within the shooting range of each camera 21 to 24 is detected, and target information regarding the target is obtained. Generate.
- the target information includes at least the position of the target, the moving direction of the target, and the moving speed of the target.
- generates the target information is known, the description about the detail is abbreviate
- the drive recorder unit 333 executes image recording processing for selectively recording captured images acquired from the cameras 21 to 24 via the input processing unit 31 in the image recording unit 35 according to a preset rule.
- the CPU functioning as the drive recorder unit 333 acquires vehicle information of the host vehicle via the in-vehicle communication unit 32 in S110.
- S120 based on the vehicle information acquired in S110, it is determined whether or not the host vehicle is stopped.
- the process proceeds to S130. If it is determined that the vehicle is not stopped, the process proceeds to S140.
- S130 it is set that there is no camera that should always be selected as a recording camera, and the process proceeds to S170.
- the constant recording camera refers to a camera that needs to constantly record captured images.
- S140 based on the vehicle information acquired in S110, it is determined whether or not the host vehicle is moving forward. Here, when the shift position is in the forward range or the vehicle speed is a positive value, it is said that the vehicle is moving forward. If it is determined that the host vehicle is moving forward, the process proceeds to S150. If it is determined that the host vehicle is not moving forward, the process proceeds to S160.
- the front camera 21 is selected as the constant recording camera, and the process proceeds to S170.
- the rear camera 22 is selected as the constant recording camera, and the process proceeds to S170.
- the target information generated by the target recognition unit 332 is acquired.
- the temporary recording camera refers to a camera that needs to record a captured image according to the situation. If it is determined that there is a moving object, the process proceeds to S190.
- the divided area in accordance with the position information included in the target information, it is specified which of the divided areas obtained by dividing the area around the host vehicle into a plurality of areas.
- the divided area extends in the vehicle length direction along two straight lines extending in the vehicle width direction along the front end surface and the rear end surface of the host vehicle and along the left end surface and the right end surface of the host vehicle.
- eight areas A to H excluding the area where the host vehicle exists are provided.
- the divided areas A, B, and C belong to the shooting range AF of the front camera 21.
- the divided areas F, G, and H belong to the shooting range AB of the rear camera 22.
- the divided areas A, D, and F belong to the shooting range AL of the left side camera 23.
- the divided areas C, E, and F belong to the shooting range AR of the right side camera 24.
- the camera associated with the detection area of the moving object specified in S190 is selected as a temporary recording camera, and the process proceeds to S220.
- the camera selection table is set as shown in FIG. 4, for example. That is, when the detection area of the moving object is any one of the divided areas A, C, F, and H, two cameras corresponding to the two shooting ranges to which the divided area belongs are selected. When the detection area of the moving body is any one of the divided areas B, D, E, and G, a total of three corresponding to one shooting range to which the divided area belongs and two shooting ranges adjacent to the shooting range. A camera is selected.
- S220 it sets so that the captured image of the camera selected as a continuous recording camera and a temporary recording camera may be recorded on the image recording part 35, and complete
- the camera selected as the constant recording camera is changed depending on whether or not the vehicle is moving forward, and the camera selected as the temporary recording camera is changed depending on the detection area of the moving body.
- the constantly recording camera is the front camera 21, that is, the shooting range AF is always the recording area.
- the shooting range AF is always the recording area.
- the temporary recording camera is not selected. Accordingly, only the captured image in the constant recording area AF is recorded in the image recording unit 35.
- the front camera 21 and the left side camera 23 are selected as temporary recording cameras because the moving body is detected in the divided area A.
- the Accordingly, the captured images of the areas AF and AL obtained by merging the continuous recording area AF and the temporary recording areas AF and AL are recorded in the image recording unit 35.
- the left side camera 23 and the rear camera 22 are selected as temporary recording cameras. Therefore, the captured images of the areas AF, AL, AB obtained by merging the constant recording area AF and the temporary recording areas AL, AB are recorded in the image recording unit 35.
- the drive recorder unit 333 captures a moving body that exists around the host vehicle from the plurality of cameras 21 to 24 included in the image acquisition unit 2, and Select a camera that may be captured as a temporary recording camera. Then, a captured image from the selected temporary recording camera is recorded. For this reason, the storage capacity of the image recording unit 35 required for recording the captured image can be suppressed as compared with the case where the captured image from all the cameras is recorded. Further, if the storage capacity is the same, longer recording can be realized. Moreover, since it is not necessary to use another sensor in addition to the camera for selecting the temporary recording camera, such a function can be realized with a simple configuration.
- the target recognition unit 332 and the drive recorder unit 333 in the image processing unit 33 correspond to a drive recorder.
- this indication is not limited to the above-mentioned embodiment, and can carry out various modifications.
- the target camera not only the camera corresponding to the shooting range to which the divided area in which the moving body is detected (hereinafter, the target camera) but also the shooting range thereof.
- the camera corresponding to the adjacent shooting range is also selected as the temporary recording camera, the present invention is not limited to this.
- only the target camera may be selected as the temporary recording camera.
- the image acquisition unit 2 includes the four cameras 21 to 24 and divides the periphery of the vehicle into eight divided areas A to H.
- the image acquisition unit 2 may include two, three, or five or more cameras. Further, the number of divided areas may be two to seven, or nine or more.
- a plurality of functions of one constituent element in the above embodiment may be realized by a plurality of constituent elements, or a single function of one constituent element may be realized by a plurality of constituent elements. . Further, a plurality of functions possessed by a plurality of constituent elements may be realized by one constituent element, or one function realized by a plurality of constituent elements may be realized by one constituent element. Moreover, you may abbreviate
- at least a part of the configuration of the above embodiment may be added to or replaced with the configuration of the other embodiment.
- all the aspects included in the technical idea specified from the wording described in the claims are embodiments of the present disclosure.
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Traffic Control Systems (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
ドライブレコーダ(33)は、移動体検出部(332)と、一時記録制御部(333:S170~S220)とを備える。移動体検出部は、自車両に搭載され自車両の周囲を撮影する複数のカメラを備える画像取得部(2)にて取得された撮像画像から、移動体を検出する。一時記録制御部は、移動体検出部での検出結果に従い、画像取得部における複数のカメラのうち、移動体の位置を撮影範囲に含むカメラである対象カメラを少なくとも含む一つ以上のカメラを一時記録カメラとして選択し、該一時記録カメラによる撮像画像を、予め用意された記録媒体(35)に記録する。
Description
本国際出願は、2016年3月22日に日本国特許庁に出願された日本国特許出願第2016-056974号に基づく優先権を主張するものであり、日本国特許出願第2016-056974号の全内容を本国際出願に参照により援用する。
本開示は、車両の周囲を撮影した画像を記録するドライブレコーダに関する。
車載カメラから取得した画像を記録するドライブレコーダが知られている。この種のドライブレコーダでは、画像の記録に使用可能なメモリの容量によって画像を保存できる期間が制限される。その期間は、記録の対象となるカメラの台数が増えるほど短くなる。
不要な画像がメモリに記録されることを抑制する技術として、例えば、下記特許文献1がある。特許文献1では、駐停車してエンジンをオフすると、車両に接近または接触する障害物を監視する監視モードに入る。監視モードでは、超音波センサにより予め設定された距離範囲内で障害物を検知すると、車載カメラの映像の記録を開始する。
特許文献1に記載の技術では、記録の必要がある画像を選択するために、別途、他のセンサが必要となるという問題があった。
本開示の1つの局面は、簡易な構成で画像の選択的な記録を実現するドライブレコーダを提供できることが望ましい。
本開示の1つの局面は、簡易な構成で画像の選択的な記録を実現するドライブレコーダを提供できることが望ましい。
本開示の1つの局面によるドライブレコーダは、移動体検出部と、一時記録制御部とを備える。移動体検出部は、当該ドライブレコーダを搭載する車両である自車両に搭載され自車両の周囲を撮影する複数のカメラを備える画像取得部にて取得された撮像画像から、移動体を検出する。一時記録制御部は、移動体検出部での検出結果に従い、画像取得部を構成する複数のカメラのうち、移動体の位置を撮影範囲に含むカメラである対象カメラを少なくとも含む一つ以上のカメラを一時記録カメラとして選択し、該一時記録カメラによる撮像画像を予め用意された記録媒体に記録する。
このような構成によれば、自車両の周囲に存在する移動体を捉えた画像の選択的な記録を実現することができる。しかも、画像の選択には、カメラ以外に、別途、他のセンサを用いる必要がないため、簡易な構成によって、このような機能を実現することができる。
なお、請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本開示の技術的範囲を限定するものではない。
以下、図面を参照しながら、本開示の実施形態を説明する。
[1.構成]
画像処理システム1は、自動車等の車両に搭載されて用いられるシステムである。図1に示すように、画像処理システム1は、画像取得部2と、電子制御ユニット(以下、ECU)3と、モニタ4と、車載通信ネットワーク5とを備える。以下、画像処理システム1を搭載した車両を自車両という。
[1.構成]
画像処理システム1は、自動車等の車両に搭載されて用いられるシステムである。図1に示すように、画像処理システム1は、画像取得部2と、電子制御ユニット(以下、ECU)3と、モニタ4と、車載通信ネットワーク5とを備える。以下、画像処理システム1を搭載した車両を自車両という。
画像取得部2は、フロントカメラ21、リアカメラ22、左サイドカメラ23、右サイドカメラ24を備える。これらカメラ21~24は、例えばCCDイメージセンサやCMOSイメージセンサを用いている。図3に示すように、フロントカメラ21は、車両の前方が撮影範囲(以下、前側撮影範囲)AFとなるように、例えば、車両前端のバンパーに設置される。リアカメラ22は、車両の後方が撮影範囲(以下、後側撮影範囲)ABとなるように、例えば、車両後端のバンパーに設置される。左サイドカメラ23は、車両の左側方が撮影範囲(以下、左側撮影範囲)ALとなるように、例えば、左側のサイドミラーに配置される。右サイドカメラ24は、車両の右側方が撮影範囲(以下、右側撮影範囲)ARとなるように、例えば、右側サイドミラーに設置される。なお、図3に示す撮影範囲は模式的なものであり、実際には、撮像画像を利用する各種アプリケーションで必要な範囲を最低限含むように設定される。各カメラ21~24は、予め設定された時間間隔(例えば、1/15[秒])で繰り返し撮影し、撮影した画像である撮像画像をECU3に出力する。
モニタ4は、例えば液晶や有機ELを用いた表示画面を備える表示装置である。モニタ4は、ECU3から入力される信号に従って画像を表示する。
車載通信ネットワーク5は、例えばCANが用いられ、各種車載機器が接続される。なお、CANは、登録商標であり、Controller Area Network の略語である。
車載通信ネットワーク5は、例えばCANが用いられ、各種車載機器が接続される。なお、CANは、登録商標であり、Controller Area Network の略語である。
ECU3は、入力処理部31、車内通信部32、画像処理部33、出力処理部34、画像記録部35、電源部36を備える。
入力処理部31は、画像取得部2から入力される撮像画像をサンプリングすることでデジタル信号に変換して画像処理部33に出力する。
入力処理部31は、画像取得部2から入力される撮像画像をサンプリングすることでデジタル信号に変換して画像処理部33に出力する。
車内通信部32は、車載通信ネットワーク5を介して、自車両に搭載された他のECU等と通信を実行することによって車両情報を収集する。車両情報には、自車両の速度を表す車速、および自車両のシフトレバーの位置を示すシフト位置が少なくとも含まれる。
出力処理部34は、画像処理部33から出力される合成画像のデジタル信号をアナログ信号に変換し、モニタ4に出力する。
画像記憶部35は、読み書き可能な非遷移的実態的記録媒体を備える記憶装置である。画像記憶部35は、画像取得部2から取得した撮像画像や画像処理部33で生成された合成画像を記憶する。
画像記憶部35は、読み書き可能な非遷移的実態的記録媒体を備える記憶装置である。画像記憶部35は、画像取得部2から取得した撮像画像や画像処理部33で生成された合成画像を記憶する。
電源部36は、自車両の図示しないバッテリから給電を受け、その給電電圧を、適宜変換して、ECU3の各部に供給する。
画像処理部33は、CPUと、RAM、ROM、フラッシュメモリ等の半導体メモリ(以下、メモリ)を有するマイクロコンピュータを備える。画像処理部33が実現する各種機能は、CPUが非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリが、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。なお、画像処理部33は、1つのマイクロコンピュータを備えてもよいし、複数のマイクロコンピュータを備えてもよい。
画像処理部33は、CPUと、RAM、ROM、フラッシュメモリ等の半導体メモリ(以下、メモリ)を有するマイクロコンピュータを備える。画像処理部33が実現する各種機能は、CPUが非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリが、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。なお、画像処理部33は、1つのマイクロコンピュータを備えてもよいし、複数のマイクロコンピュータを備えてもよい。
画像処理部33は、CPUがプログラムを実行することで実現される機能の構成として、画像合成部331、物標認識部332、ドライブレコーダ部333を備える。画像処理部33に含まれるこれらの要素を実現する手法はソフトウェアに限るものではなく、その一部又は全部の要素を、論理回路やアナログ回路等を組み合わせたハードウェアを用いて実現してもよい。
画像合成部331は、外部からの指示に従って起動する。起動した画像生成部331は、入力処理部31を介してカメラ21~24から取得した撮像画像に基づき、各撮像画像を予め設定された仮想視点から見た鳥瞰図に変換し合成することで鳥瞰図画像を生成する。更に、画像合成部33は、生成した鳥瞰図画像を、出力処理部34を介してモニタ4に出力することで鳥瞰図画像を表示すると共に、画像記憶部35に記録する。なお、撮像画像から鳥瞰図画像を生成する処理は周知であるため、その詳細についての説明は省略する。
物標認識部332は、画像処理部33が電源部36から給電を受けている間、動作し続ける。具体的には、入力処理部31を介してカメラ21~24から取得した撮像画像に基づき、各カメラ21~24の撮影範囲内に存在する物標を検出し、その物標に関する物標情報を生成する。物標情報には、物標の位置、物標の移動方向、物標の移動速度が少なくとも含まれている。なお、撮像画像から物標を検出し、その物標情報を生成する処理は周知であるため、その詳細についての説明は省略する。
ドライブレコーダ部333は、入力処理部31を介してカメラ21~24から取得した撮像画像を、予め設定された規則に従って、選択的に画像記録部35に記録する画像記録処理を実行する。
[2.処理]
ここで、ドライブレコーダ部333が実行する画像記録処理について、図2のフローチャートを用いて説明する。本処理は予め設定された時間間隔で周期的に起動する。また、画像処理部33に含まれるメモリには、後述するカメラ選択テーブルが予め記憶されている。
ここで、ドライブレコーダ部333が実行する画像記録処理について、図2のフローチャートを用いて説明する。本処理は予め設定された時間間隔で周期的に起動する。また、画像処理部33に含まれるメモリには、後述するカメラ選択テーブルが予め記憶されている。
本処理が起動すると、ドライブレコーダ部333として機能するCPUは、S110にて、車内通信部32を介して自車両の車両情報を取得する。
S120では、S110にて取得した車両情報に基づき、自車両が停車中であるか否かを判断する。ここでは、シフト位置がニュートラルまたはパーキングにあり、かつ車速がゼロである場合を停車中という。停車中であると判断した場合はS130に移行し、停車中ではないと判断した場合は、S140に移行する。
S120では、S110にて取得した車両情報に基づき、自車両が停車中であるか否かを判断する。ここでは、シフト位置がニュートラルまたはパーキングにあり、かつ車速がゼロである場合を停車中という。停車中であると判断した場合はS130に移行し、停車中ではないと判断した場合は、S140に移行する。
S130では、常時記録カメラとして選択すべきカメラがない旨を設定して、S170に進む。常時記録カメラとは、撮像画像を常時記録する必要があるカメラのことをいう。
S140では、S110にて取得した車両情報に基づき、自車両が前進中であるか否かを判断する。ここでは、シフト位置が前進レンジであるか、車速が正の値である場合を前進中という。自車両が前進中であると判断した場合はS150に移行し、自車両が前進中ではないと判断した場合はS160に移行する。
S140では、S110にて取得した車両情報に基づき、自車両が前進中であるか否かを判断する。ここでは、シフト位置が前進レンジであるか、車速が正の値である場合を前進中という。自車両が前進中であると判断した場合はS150に移行し、自車両が前進中ではないと判断した場合はS160に移行する。
S150では、常時記録カメラとしてフロントカメラ21を選択して、S170に進む。
S160では、常時記録カメラとしてリアカメラ22を選択して、S170に進む。
S160では、常時記録カメラとしてリアカメラ22を選択して、S170に進む。
S170では、物標認識部332で生成された物標情報を取得する。
S180では、S170で取得した物標情報に基づき、移動体が存在するか否かを判断する。具体的には、物標情報に含まれる移動速度がゼロではない物標を移動体と判断する。移動体が存在しないと判断した場合はS210に移行し、一時記録カメラとして選択すべきカメラがない旨を設定して、S220に進む。一時記録カメラとは、状況に応じて撮像画像を記録する必要があるカメラのことをいう。移動体が存在すると判断した場合は、S190に移行する。
S180では、S170で取得した物標情報に基づき、移動体が存在するか否かを判断する。具体的には、物標情報に含まれる移動速度がゼロではない物標を移動体と判断する。移動体が存在しないと判断した場合はS210に移行し、一時記録カメラとして選択すべきカメラがない旨を設定して、S220に進む。一時記録カメラとは、状況に応じて撮像画像を記録する必要があるカメラのことをいう。移動体が存在すると判断した場合は、S190に移行する。
S190では、物標情報に含まれる位置情報に従い、自車両の周囲のエリアを複数に分割した分割エリアのいずれで移動体が検出されたかを特定する。分割エリアは、図3に示すように、自車両の前端面および後端面に沿って車幅方向に延長した2つの直線と、自車両の左端面および右端面に沿って車長方向に延長した2つの直線とで区切られる9つのエリアのうち、自車両が存在するエリアを除いた8つのエリアA~Hを備える。分割エリアA,B,Cは、フロントカメラ21の撮影範囲AFに属する。分割エリアF,G,Hは、リアカメラ22の撮影範囲ABに属する。分割エリアA,D,Fは左サイドカメラ23の撮影範囲ALに属する。分割エリアC,E,Fは右サイドカメラ24の撮影範囲ARに属する。
S200では、カメラ選択テーブルを用いて、S190にて特定された移動体の検出エリアに対応付けられたカメラを、一時記録カメラとして選択し、S220に進む。カメラ選択テーブルは、例えば、図4に示すように設定されている。即ち、移動体の検出エリアが、分割エリアA,C,F,Hのいずれかである場合は、その分割エリアが属する2つの撮影範囲に対応する2つのカメラが選択される。移動体の検出エリアが、分割エリアB,D,E,Gのいずれかである場合は、その分割エリアが属する1つの撮影範囲およびその撮影範囲に隣接する2つの撮影範囲に対応する合計3つのカメラが選択される。
S220では、常時記録カメラおよび一時記録カメラとして選択されたカメラの撮像画像が、画像記録部35に記録されるように設定して、本処理を終了する。つまり、カメラ21~24は、いずれも撮像画像を常時出力しているが、画像記録部35に記録されるのは、常時記録カメラおよび一時記録カメラとして選択されたカメラからの撮像画像のみである。そして、常時記録カメラとして選択されるカメラは車両が前進しているか否かによって変更され、一時記録カメラとして選択されるカメラは移動体の検出エリアによって変更される。
[3.動作例]
例えば、図5に示すように、自車両が高速道路等を走行中に、インターチェンジ等で車両が本線に合流してくる状況を想定する。以下では、常時記録カメラによる撮影範囲を常時記録エリア、一時記録カメラによる撮影範囲を一時記録エリアともいう。
例えば、図5に示すように、自車両が高速道路等を走行中に、インターチェンジ等で車両が本線に合流してくる状況を想定する。以下では、常時記録カメラによる撮影範囲を常時記録エリア、一時記録カメラによる撮影範囲を一時記録エリアともいう。
この状況では、自車両は前進しているため、常時記録カメラはフロントカメラ21となり、即ち、撮影範囲AFが常時記録エリアとなる。
時刻t1では、合流車両までの距離が離れているため、分割エリアA~Hのいずれでも移動体が検出されず、一時記録カメラの選択はなしとなる。従って、常時記録エリアAFの撮像画像のみが、画像記録部35に記録される。
時刻t1では、合流車両までの距離が離れているため、分割エリアA~Hのいずれでも移動体が検出されず、一時記録カメラの選択はなしとなる。従って、常時記録エリアAFの撮像画像のみが、画像記録部35に記録される。
自車両による検知範囲内の左前方で合流車両が本線へ進入しようとしている時刻t2では、分割エリアAで移動体が検出されるため、一時記録カメラとしてフロントカメラ21および左サイドカメラ23が選択される。従って、常時記録エリアAFおよび一時記録エリアAF,ALをマージしたエリアAF,ALの撮像画像が、画像記録部35に記録される。
本線へ進入した合流車両と自車両とが併走状態となる時刻t3では、分割エリアDで移動体が検出されるため、一時記録カメラとしてフロントカメラ21、左サイドカメラ23、リアカメラ22が選択される。従って、常時記録エリアAF、一時記録エリアAF,AL,ABをマージしたエリアAF,AL,ABの撮像画像が、画像記録部35に記録される。
自車両が進入車両の横をすり抜けた状態となる時刻t4では、一時記録カメラとして、左サイドカメラ23、リアカメラ22が選択される。従って、常時記録エリアAF、一時記録エリアAL,ABをマージしたエリアAF,AL,ABの撮像画像が、画像記録部35に記録される。
[4.効果]
以上詳述したように、画像処理システム1では、ドライブレコーダ部333が、画像取得部2に含まれる複数のカメラ21~24からのうち、自車両の周囲に存在する移動体を捉えた、および捉える可能性のあるカメラを一時記録カメラとして選択する。そして、その選択した一時記録カメラからの撮像画像を記録する。このため、全てのカメラからの撮像画像を記録する場合と比較して、撮像画像の記録に要する画像記録部35の記憶容量を抑制することができる。また、同じ記憶容量であれば、より長時間の記録を実現することができる。しかも、一時記録カメラの選択には、カメラ以外に、別途、他のセンサを用いる必要がないため、簡易な構成によって、このような機能を実現することができる。
以上詳述したように、画像処理システム1では、ドライブレコーダ部333が、画像取得部2に含まれる複数のカメラ21~24からのうち、自車両の周囲に存在する移動体を捉えた、および捉える可能性のあるカメラを一時記録カメラとして選択する。そして、その選択した一時記録カメラからの撮像画像を記録する。このため、全てのカメラからの撮像画像を記録する場合と比較して、撮像画像の記録に要する画像記録部35の記憶容量を抑制することができる。また、同じ記憶容量であれば、より長時間の記録を実現することができる。しかも、一時記録カメラの選択には、カメラ以外に、別途、他のセンサを用いる必要がないため、簡易な構成によって、このような機能を実現することができる。
なお、画像処理部33における物標認識部332およびドライブレコーダ部333がドライブレコーダに相当する。
[5.他の実施形態]
以上、本開示を実施するための形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
[5.他の実施形態]
以上、本開示を実施するための形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
(a)上記実施形態では、分割エリアB,D,E,Gについては、移動体が検出された分割エリアが属する撮影範囲に対応したカメラ(以下、対象カメラ)だけでなく、その撮影範囲に隣接する撮影範囲に対応したカメラも一時記録カメラとして選択しているが、これに限定されるものではない。例えば、図6に示すように、対象カメラだけを一時記録カメラとして選択してもよい。
(b)上記実施形態では、画像取得部2は、4つのカメラ21~24を備え、車両の周囲を8つの分割エリアA~Hに分割しているが、これに限定されるものではない。画像取得部2は、2つ、3つ、あるいは5つ以上のカメラを備えてもよい。また、分割エリアの数は、2つ~7つ、あるいは9つ以上であってもよい。
(c)上記実施形態における1つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、1つの構成要素が有する1つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、1つの構成要素によって実現したり、複数の構成要素によって実現される1つの機能を、1つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、請求の範囲に記載の文言から特定される技術思想に含まれるあらゆる態様が本開示の実施形態である。
(d)本開示は、上述した画像処理部33の機能として実現されるドライブレコーダの他、当該ドライブレコーダを構成要素とするシステム、当該ドライブレコーダとしてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体など、種々の形態で本開示を実現することもできる。
Claims (5)
- ドライブレコーダ(33)であって、
当該ドライブレコーダを搭載する車両である自車両に搭載され前記自車両の周囲を撮影する複数のカメラを備える画像取得部(2)にて取得された撮像画像から、移動体を検出するように構成された移動体検出部(332)と、
前記移動体検出部での検出結果に従い、前記画像取得部における前記複数のカメラのうち、前記移動体の位置を撮影範囲に含むカメラである対象カメラを少なくとも含む一つ以上のカメラを一時記録カメラとして選択し、該一時記録カメラによる撮像画像を、予め用意された記録媒体(35)に記録するように構成された一時記録制御部(333:S170~S220)と、
を備えるドライブレコーダ。 - 請求項1に記載のドライブレコーダであって、
前記一時記録制御部は、前記対象カメラに加え、前記対象カメラの撮影範囲と隣接した撮影範囲を有するカメラを前記一時記録カメラとして選択するように構成されている、ドライブレコーダ。 - 請求項1または請求項2に記載のドライブレコーダであって、
前記一時記録制御部は、前記自車両の周囲を複数のエリアに分割し、前記移動体検出部により検出された移動体が前記複数のエリアである分割エリアのいずれに位置するかによって、前記一時記録カメラとして使用するカメラを選択するように構成されている、ドライブレコーダ。 - 請求項1ないし請求項3のいずれか1項に記載のドライブレコーダであって、
前記移動体検出部による検出結果によらず、前記画像取得部における前記複数のカメラのうち、予め指定されたカメラを常時記録カメラとして選択して、該常時記録カメラによる撮像画像を予め用意された記録媒体に記録するように構成されている常時記録制御部(333:S110~S160、S220)を、更に備えるドライブレコーダ。 - 請求項4に記載のドライブレコーダであって、
前記画像取得部は、前記自車両の前方を撮影するフロントカメラ(21)および前記自車両の後方を撮影するリアカメラ(22)を少なくとも備え、
前記常時記録制御部は、前記自車両の前進時には前記フロントカメラを、前記自車両の後進時には前記リアカメラを、前記常時記録カメラとして選択するように構成されている、ドライブレコーダ。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201780019333.0A CN108780589A (zh) | 2016-03-22 | 2017-03-22 | 行车记录仪 |
US16/087,033 US10740909B2 (en) | 2016-03-22 | 2017-03-22 | Drive recorder |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-056974 | 2016-03-22 | ||
JP2016056974A JP6631350B2 (ja) | 2016-03-22 | 2016-03-22 | ドライブレコーダ |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2017164244A1 true WO2017164244A1 (ja) | 2017-09-28 |
Family
ID=59900246
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2017/011497 WO2017164244A1 (ja) | 2016-03-22 | 2017-03-22 | ドライブレコーダ |
Country Status (4)
Country | Link |
---|---|
US (1) | US10740909B2 (ja) |
JP (1) | JP6631350B2 (ja) |
CN (1) | CN108780589A (ja) |
WO (1) | WO2017164244A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10965866B2 (en) * | 2018-03-20 | 2021-03-30 | Panasonic Intellectual Property Management Co., Ltd. | Image generation system, image display system, image generation method, and moving vehicle |
JP7151234B2 (ja) | 2018-07-19 | 2022-10-12 | 株式会社デンソー | カメラシステムおよびイベント記録システム |
JP7243478B2 (ja) * | 2019-06-24 | 2023-03-22 | トヨタ自動車株式会社 | 車両用情報記録装置 |
CN111050048B (zh) * | 2019-12-27 | 2021-09-07 | 重庆金山医疗技术研究院有限公司 | 图像采集设备、方法及存储介质 |
CN115953860A (zh) * | 2023-01-13 | 2023-04-11 | 梅赛德斯-奔驰集团股份公司 | 数据记录系统、车辆、配置方法和计算机程序产品 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002218450A (ja) * | 2001-01-19 | 2002-08-02 | Fujitsu General Ltd | 車載用監視装置 |
JP2009230343A (ja) * | 2008-03-21 | 2009-10-08 | Nec Personal Products Co Ltd | ドライブレコーダー装置 |
JP3182941U (ja) * | 2012-02-14 | 2013-04-18 | 健生實業股▲ふん▼有限公司 | 車載用映像記録装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004128899A (ja) * | 2002-10-02 | 2004-04-22 | Fuji Photo Film Co Ltd | 監視カメラシステム |
JP2006321424A (ja) | 2005-05-20 | 2006-11-30 | Yazaki Corp | ドライブレコーダ |
JP2009280109A (ja) | 2008-05-22 | 2009-12-03 | Toyota Industries Corp | 車両周辺監視装置 |
JP5155279B2 (ja) * | 2009-10-29 | 2013-03-06 | 株式会社日立製作所 | 複数監視カメラによる集中監視システムおよび集中監視方法 |
CN204680073U (zh) * | 2015-05-26 | 2015-09-30 | 深圳普捷利科技有限公司 | 一种具有移动物体检测功能的车载行车记录仪 |
CN104966334B (zh) * | 2015-07-10 | 2017-10-20 | 上海斐讯数据通信技术有限公司 | 一种智能行车实时记录系统和方法 |
-
2016
- 2016-03-22 JP JP2016056974A patent/JP6631350B2/ja active Active
-
2017
- 2017-03-22 WO PCT/JP2017/011497 patent/WO2017164244A1/ja active Application Filing
- 2017-03-22 CN CN201780019333.0A patent/CN108780589A/zh active Pending
- 2017-03-22 US US16/087,033 patent/US10740909B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002218450A (ja) * | 2001-01-19 | 2002-08-02 | Fujitsu General Ltd | 車載用監視装置 |
JP2009230343A (ja) * | 2008-03-21 | 2009-10-08 | Nec Personal Products Co Ltd | ドライブレコーダー装置 |
JP3182941U (ja) * | 2012-02-14 | 2013-04-18 | 健生實業股▲ふん▼有限公司 | 車載用映像記録装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6631350B2 (ja) | 2020-01-15 |
JP2017175267A (ja) | 2017-09-28 |
CN108780589A (zh) | 2018-11-09 |
US10740909B2 (en) | 2020-08-11 |
US20190102892A1 (en) | 2019-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017164244A1 (ja) | ドライブレコーダ | |
WO2014068856A1 (ja) | 画像生成装置、および画像生成プログラム製品 | |
JP4611899B2 (ja) | カメラのレンズ汚れ検出装置及び画像表示システム | |
JP6597415B2 (ja) | 情報処理装置及びプログラム | |
JP2008100596A (ja) | 後方視認装置 | |
JP5064201B2 (ja) | 画像表示システム及びカメラ出力制御方法 | |
JP6532616B2 (ja) | 表示制御装置、表示システム、及び、表示制御方法 | |
WO2018159016A1 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
WO2015122124A1 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
WO2015133072A1 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
JP2009284386A (ja) | 車両用駐車支援装置 | |
WO2017017967A1 (ja) | 検出装置、撮像装置、車両および検出方法 | |
JP6327115B2 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
US9884589B2 (en) | System and method for assisting vehicle driving for using smart phone | |
JP6361415B2 (ja) | 車両用画像処理装置 | |
JP2010030471A (ja) | 自動二輪車用ドライブレコーダ | |
JP2023174682A (ja) | 車両用映像処理装置および車両用映像処理方法 | |
US11023750B2 (en) | Video output system | |
JP2004082873A (ja) | 車両周囲情報表示装置 | |
JP6054738B2 (ja) | カメラモジュール、カメラシステムおよび画像表示方法 | |
KR20120114470A (ko) | 차량용 영상 스위칭 장치 및 이를 이용한 영상 처리 제어 방법 | |
JP7070326B2 (ja) | 物体検出装置 | |
TWM561801U (zh) | 車用虛擬影像顯示系統 | |
JP7454177B2 (ja) | 周辺監視装置、およびプログラム | |
JP2007189368A (ja) | 画像リサイジング機能付撮像装置及び画像表示システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 17770284 Country of ref document: EP Kind code of ref document: A1 |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 17770284 Country of ref document: EP Kind code of ref document: A1 |