JP4901498B2 - Thumbnail image display method - Google Patents

Thumbnail image display method Download PDF

Info

Publication number
JP4901498B2
JP4901498B2 JP2007010469A JP2007010469A JP4901498B2 JP 4901498 B2 JP4901498 B2 JP 4901498B2 JP 2007010469 A JP2007010469 A JP 2007010469A JP 2007010469 A JP2007010469 A JP 2007010469A JP 4901498 B2 JP4901498 B2 JP 4901498B2
Authority
JP
Japan
Prior art keywords
image
event
data
time
ccd camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007010469A
Other languages
Japanese (ja)
Other versions
JP2008176638A (en
Inventor
紘平 小野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2007010469A priority Critical patent/JP4901498B2/en
Publication of JP2008176638A publication Critical patent/JP2008176638A/en
Application granted granted Critical
Publication of JP4901498B2 publication Critical patent/JP4901498B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、サムネイル画像表示方法に関し、特にドライブレコーダで記憶された画像に基づいてのサムネイル画像を表示する方法に関するものである。 The present invention relates to a thumbnail image display method, and more particularly to a method for displaying a thumbnail image based on an image stored in a drive recorder.

自動車に装着したビデオカメラからの撮像情報を半導体記憶装置に順次循環的に記憶し、自動車事故発生時の画像を記憶させる車載用監視装置が知られている(特許文献1参照)。   A vehicle-mounted monitoring device is known in which imaging information from a video camera mounted on an automobile is sequentially and cyclically stored in a semiconductor storage device, and an image at the time of an automobile accident occurs is stored (see Patent Document 1).

また、道路の一車線を監視するための複数の監視カメラをネットワークを介してセンタと接続し、所定の事象発生(停止車両あり)があると、その時の1画面分の画像を時刻情報と共にセンタに送信する監視カメラシステムが知られている(特許文献2参照)。   In addition, when a plurality of surveillance cameras for monitoring one lane of a road are connected to the center via a network and a predetermined event occurs (with a stopped vehicle), an image for one screen at that time is displayed together with time information. Surveillance camera systems that transmit to the Internet are known (see Patent Document 2).

さらに、テレビ画像を録画する場合に、録画画像データの特徴的なシーン(録画開始から5秒後の画像)に基づいたサムネイル画像を作成し、録画画像データとともに記憶して、再指示にサムネイル画像によって録画画像データの判別を容易に行わせるようにした受信記憶再生装置が知られている(特許文献3参照)。   Furthermore, when recording a television image, a thumbnail image based on a characteristic scene of the recorded image data (an image after 5 seconds from the start of recording) is created, stored together with the recorded image data, and a thumbnail image for re-instruction There is known a receiving / storing / reproducing apparatus that makes it easy to discriminate recorded image data (see Patent Document 3).

特開昭63−16785号公報(第1図)JP 63-16785 A (Fig. 1) 特開2005−277660号公報(第4頁)Japanese Patent Laying-Open No. 2005-277660 (page 4) 特開2004−336443号公報(第1図)JP 2004-336443 A (FIG. 1)

所定のイベントが発生した場合にドライブレコーダで記憶された複数の画像を、後で再生して確認する場合に、それぞれの記憶画像がどのような内容であるのかをイベント毎に瞬時におおよそ判別したいという要望があった。   When you want to play back and check multiple images stored in the drive recorder when a predetermined event occurs, you want to quickly determine the contents of each stored image for each event. There was a request.

そこで、本発明は、イベントを代表する特徴的なサムネイル画像を表示することを目的とするサムネイル画像表示方法を提供することを目的とする。 The present invention aims to provide a thumbnail image display method that aims to display the characteristic thumbnail image representing the event.

本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得し、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示するステップを有することを特徴とする。 The thumbnail image display method according to the present invention acquires an image related to an event and event occurrence time data, and based on the event occurrence time data , a time after the start of image recording and the time when the event occurred The method includes a step of selecting an image corresponding to a predetermined time before as a feature image and displaying a thumbnail image based on the selected feature image.

また、本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得する取得手段と、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つ前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択する選択手段と、選択された特徴画像に基づいたサムネイル画像を表示する表示手段を有することを特徴とする。
さらに、本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得し、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示し、表示されたサムネイル画像が選択されると、該選択されたサムネイル画像に対応した特徴画像に対応する所定時間分の画像を再生表示するステップを有することを特徴とする。
In addition, the thumbnail image display method according to the present invention includes an acquisition unit that acquires an image related to an event and event occurrence time data, and a time after the start of image recording based on the event occurrence time data and The image processing apparatus includes selection means for selecting an image corresponding to a predetermined time before the time when the event occurs as a feature image, and display means for displaying a thumbnail image based on the selected feature image.
Furthermore, the thumbnail image display method according to the present invention acquires an image related to an event and event occurrence time data, and an event occurs after the time when image recording is started based on the event occurrence time data. An image corresponding to a predetermined time before the selected time is selected as a feature image, a thumbnail image based on the selected feature image is displayed, and when the displayed thumbnail image is selected, the selected thumbnail image is supported. And a step of reproducing and displaying an image for a predetermined time corresponding to the feature image.

さらに、本発明に係るサムネイル画像表示方法は、イベントと関連のある複数の撮像部による複数の画像、イベント発生時刻データ、イベント発生に対応して検出された加速度センサ出力値、ブレーキ操作開始時刻データ及びタイヤロックデータを取得し、加速度センサ出力値に基づいて、複数の撮像部による複数の画像の内、イベント発生と関連のある撮像部による画像を選択し、イベント発生時刻よりブレーキ操作開始時刻が早く、タイヤロックデータがタイヤがロックされていたことを示す場合、ブレーキ操作開始時刻データに基づいて、選択された撮像部による画像から特徴画像を選択し、イベント発生時刻よりブレーキ操作開始時刻が早く、タイヤロックデータがタイヤがロックされていなかったことを示す場合、イベント発生時刻データに基づいて、選択された撮像部による画像から、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示するステップを有することを特徴とする。 Furthermore, the thumbnail image display method according to the present invention includes a plurality of images from a plurality of imaging units related to an event, event occurrence time data, an acceleration sensor output value detected in response to the event occurrence, and brake operation start time data. And tire lock data, and based on the acceleration sensor output value, select an image by the imaging unit related to the occurrence of the event from among a plurality of images by the plurality of imaging units, and the brake operation start time is determined from the event occurrence time. If the tire lock data indicates that the tire is locked earlier, a feature image is selected from the images taken by the selected imaging unit based on the brake operation start time data, and the brake operation start time is earlier than the event occurrence time. When the event occurs when the tire lock data indicates that the tire was not locked Based on data from the image by the imaging unit selected, than the time the recording of the image is started to select an image corresponding to a predetermined time earlier than the later and the time the event occurred as the feature image, which is selected The method includes a step of displaying a thumbnail image based on the feature image.

本発明に係るサムネイル画像表示方法では、Gセンサからの出力値に基づいて、衝撃があった方向を撮像している画像に基づいてサムネイル画像を作成し且つ表示することができるので、そのイベントを代表する最も適当なサムネイル画像を表示することが可能となる。 In the thumbnail image display method according to the present invention, a thumbnail image can be created and displayed based on an image capturing the direction in which there was an impact based on the output value from the G sensor. The most suitable representative thumbnail image can be displayed .

また、本発明に係るサムネイル画像表示方法では、操作部による撮像開始指示があった場合には、タイムラグを考慮して、撮像開始指示より所定時刻前の画像に基づいてサムネイル画像を作成し且つ表示することができるので、そのイベントを代表する最も適当なサムネイル画像を表示することが可能となる。 Further, in the thumbnail image display method according to the present invention, when there is an imaging start instruction from the operation unit, a thumbnail image is created and displayed based on an image a predetermined time before the imaging start instruction in consideration of a time lag. Therefore, it is possible to display the most suitable thumbnail image representing the event.

以下図面を参照して、本発明に係るサムネイル画像作成方法について説明する。但し、本発明の技術的範囲はそれらの実施の形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶ点に留意されたい。   A thumbnail image creation method according to the present invention will be described below with reference to the drawings. However, it should be noted that the technical scope of the present invention is not limited to these embodiments, but extends to the invention described in the claims and equivalents thereof.

図1は、本発明に係るサムネイル画像作成方法を実行するためのシステムの概略構成を示す図である。   FIG. 1 is a diagram showing a schematic configuration of a system for executing a thumbnail image creating method according to the present invention.

システムは、車両に搭載されるドライブレコーダ100と、ドライブレコーダ100においてイベント発生時に記憶された画像を記憶するメモリカード10、及びメモリカード10に記憶された画像を再生するためのセンタ端末200から構成される。   The system includes a drive recorder 100 mounted on a vehicle, a memory card 10 for storing an image stored when an event occurs in the drive recorder 100, and a center terminal 200 for reproducing the image stored in the memory card 10. Is done.

ドライブレコーダ100は、CPU、ROM及びRAM等を含んで構成される第1制御部101、G(重力)センサ102、GPS(Global Positioning System)レシーバ103、スイッチ、ボタン等を含んで構成される第1操作部104、画像を一次記憶するための第1メモリ105、メモリカード10を挿入するスロットを有し且つメモリカード10への画像の書き込み等を行うための第1メモリカードIF(インターフェイス)106、GPSアンテナ110、撮像部として機能する第1CCDカメラ111〜第4CCDカメラ114、集音機能を有するマイク115、ABS(Anti-lock Brake System)情報検出部116、ブレーキ操作検出部117、及びドライブレコーダ100の各要素に電力を供給するための電源部120等を有している。   The drive recorder 100 includes a first control unit 101 including a CPU, a ROM, a RAM, and the like, a G (gravity) sensor 102, a GPS (Global Positioning System) receiver 103, a switch, a button, and the like. 1 operation unit 104, a first memory 105 for temporarily storing images, a first memory card IF (interface) 106 having a slot for inserting the memory card 10 and writing images to the memory card 10 , GPS antenna 110, first CCD camera 111 to fourth CCD camera 114 functioning as an imaging unit, microphone 115 having a sound collecting function, ABS (Anti-lock Brake System) information detection unit 116, brake operation detection unit 117, and drive recorder The power supply unit 120 and the like for supplying power to each of the 100 elements are included.

また、ドライブレコーダ100は、ナビゲーション装置(不図示)と連携して、ナビゲーション装置のディスプレイにおいて画像を再生できるように構成しても良い。さらに、GPSレシーバ103は、必ずしも必須の構成ではないが、外付けの機器、例えばAVM(Automatic Vehide Monitoring)システムや、ナビゲーション装置が受信した位置情報を取得する構成としても良い。   Further, the drive recorder 100 may be configured to play back an image on the display of the navigation device in cooperation with a navigation device (not shown). Further, the GPS receiver 103 is not necessarily an essential configuration, but may be configured to acquire position information received by an external device such as an AVM (Automatic Vehide Monitoring) system or a navigation device.

Gサンサ102は、互いに直交する2軸方向(X軸及びY軸)の重力加速度を検出する。なお、Gセンサ102のY軸方向(正の値)と車両の前側が一致し、Gセンサ102のX軸方向(正の値)と車両の右側面が一致するように、Gセンサが車両内部に配置されている。したがって、第1制御部101は、Gセンサ102から出力される検出信号G(Gx、Gy)に基づいて、車両が衝撃を受けたか否か、また車両のどの方向から衝撃が加わったのかを判別することが可能となる。なお、GxはX軸方向、GyはY軸方向の重力加速度と示すものとする。また、Gセンサ102は、3軸のものを利用しても良いし、3軸のものにおいて、Z軸方向の重力加速度Gzのデータを利用しなくても良い。   The G sensor 102 detects gravitational acceleration in two axial directions (X axis and Y axis) orthogonal to each other. Note that the G sensor is located inside the vehicle so that the Y-axis direction (positive value) of the G sensor 102 matches the front side of the vehicle, and the X-axis direction (positive value) of the G sensor 102 matches the right side of the vehicle. Is arranged. Therefore, the first control unit 101 determines, based on the detection signal G (Gx, Gy) output from the G sensor 102, whether the vehicle has received an impact and from which direction of the vehicle the impact has been applied. It becomes possible to do. Note that Gx represents the gravitational acceleration in the X-axis direction and Gy represents the gravitational acceleration in the Y-axis direction. Further, the G sensor 102 may be a triaxial sensor, or the triaxial sensor may not use the data of the gravitational acceleration Gz in the Z-axis direction.

第1制御部101は、各CCDカメラ111〜114が、それぞれ0.1秒おきに1枚の画像を撮像し、撮像された画像を第1メモリ105に順次循環的に記憶するように制御する。例えば、常に4台のCCDカメラが撮像した画像60秒分(画像2400枚分)の画像データが、第1メモリ105に記憶されるように構成される。なお、各CCDカメラ111〜114が撮像する画像は、0.1秒毎に1枚でなく、例えば0.05秒毎に1枚でも良い。また、4台のCCDカメラが0.1秒毎に交互に1枚の画像を撮像して記憶するように構成しても良い。   The first control unit 101 controls each of the CCD cameras 111 to 114 to take one image every 0.1 second and sequentially store the taken images in the first memory 105 in a cyclic manner. . For example, the first memory 105 is configured to always store image data for 60 seconds (2400 images) captured by four CCD cameras. The images captured by the CCD cameras 111 to 114 are not limited to one image every 0.1 seconds, but may be one image every 0.05 seconds, for example. Alternatively, the four CCD cameras may be configured to capture and store one image alternately every 0.1 seconds.

ABS情報検出部116は、タイヤがロックしたか否かのタイヤロックデータ及びタイヤがロックした時刻を示すタイヤロック時刻データを第1制御部101へ送信する。即ち、ABS情報検出部116からのタイヤロックデータ及びタイヤロック時刻データによって、第1制御部101は、タイヤがロックしたか否か、及びタイヤがロックした場合にはその時刻を判別することができる。   The ABS information detection unit 116 transmits tire lock data indicating whether the tire is locked and tire lock time data indicating the time when the tire is locked to the first control unit 101. That is, based on the tire lock data and the tire lock time data from the ABS information detection unit 116, the first control unit 101 can determine whether or not the tire is locked and when the tire is locked. .

ブレーキ操作検出部117は、車両のブレーキが操作されたか否かを示すブレーキ操作データ及びブレーキ操作が開始された時刻を示すブレーキ操作開始時刻データを1制御部101へ送信する。即ち、ブレーキ操作検出部117からのブレーキ操作データ及びブレーキ操作開始時刻データによって、第1制御部101は、ブレーキ操作がなされたか否か、及びブレーキ操作が開始された時刻を判別することができる。   The brake operation detection unit 117 transmits brake operation data indicating whether or not the vehicle brake is operated and brake operation start time data indicating the time when the brake operation is started to the one control unit 101. That is, based on the brake operation data and the brake operation start time data from the brake operation detection unit 117, the first control unit 101 can determine whether or not the brake operation has been performed and the time at which the brake operation was started.

なお、GPSレシーバ103、第1メモリカードIF106、GPSアンテナ110、第1CCDカメラ111〜第4CCDカメラ114、マイク115、ABS情報検出部116及びブレーキ操作検出部117等の一部又は全部は、ドライブレコーダ100と別体に構成されても良い。例えば、GPS機能を有する既存のナビゲーション装置と連携させた場合、ドライブレコーダ100にGPSレシーバ103等の機能は不要であるので、その分ドライブレコーダ100のコストを低く抑えることができる。   A part or all of the GPS receiver 103, the first memory card IF 106, the GPS antenna 110, the first CCD camera 111 to the fourth CCD camera 114, the microphone 115, the ABS information detection unit 116, the brake operation detection unit 117, etc. It may be configured separately from 100. For example, when linked with an existing navigation device having a GPS function, the drive recorder 100 does not require a function such as the GPS receiver 103, so that the cost of the drive recorder 100 can be reduced accordingly.

センタ端末200は、CPU、ROM及びRAM等を含んで構成される第2制御部201、プリンタ等から構成される出力部202、ディスプレイ等によって構成される表示部203、キーボード、マウス等を含んで構成される第2操作部204、画像を一次記憶するための第2メモリ205、及びメモリカード10を挿入するためのスロットを含み且つメモリカード10から画像の読み出し等を行うための第2メモリカードIF206等を有している。センタ端末200は、上記構成に相当する機能を有するパーソナル・コンピュータとして構成されても良い。   The center terminal 200 includes a second control unit 201 that includes a CPU, ROM, RAM, and the like, an output unit 202 that includes a printer, a display unit 203 that includes a display, a keyboard, a mouse, and the like. A second operation unit 204 configured, a second memory 205 for temporarily storing an image, and a second memory card for reading out an image from the memory card 10 and the like, and a slot for inserting the memory card 10 IF206 and the like. The center terminal 200 may be configured as a personal computer having a function corresponding to the above configuration.

メモリカード10は、128Mバイトの記憶容量を有するCFカードであって、第1メモリカードIF106を構成するスロットに挿入されて、イベント発生時に所定の画像が記憶され、その後、第1メモリカードIF106を構成するスロットから排出されて第2メモリカードIF206を構成するスロットに再挿入されて、記憶されている画像をセンタ端末200へ出力する。なお、メモリカードとしてCFカードを用いたが、それに限定されるのではなく、SDカード、メモリスティック等の他のメモリカード、持ち運び可能なHD、その他の記憶媒体等をCFカードの代わりに利用することができる。また、メモリカード等の記憶容量は任意であって、用途に応じて自由に決定することが可能である。   The memory card 10 is a CF card having a storage capacity of 128 Mbytes, and is inserted into a slot constituting the first memory card IF 106 to store a predetermined image when an event occurs. The stored image is ejected from the constituting slot and reinserted into the slot constituting the second memory card IF 206, and the stored image is output to the center terminal 200. Although a CF card is used as a memory card, the present invention is not limited to this. Other memory cards such as an SD card and a memory stick, portable HD, and other storage media are used instead of the CF card. be able to. Further, the storage capacity of the memory card or the like is arbitrary and can be freely determined according to the application.

図2は、CCDカメラ等の配置例を示す図である。   FIG. 2 is a diagram illustrating an arrangement example of a CCD camera or the like.

図2(a)に示す様に、第1CCDカメラ111は車両1の前方に向けて配置され、第2CCDカメラ112は車両1の右側方に向けて配置され、第3CCDカメラ113は車両1の後方に向けて配置され、第4CCDカメラ114は車両1の左側方に向けて配置されている。なお、図2(a)における121、122、123及び124は、それぞれのCCDカメラの撮像可能方向及び/又は撮像可能角度の例を示すものである。また、スイッチとして構成された第1操作部104が運転席近傍に配置され、集音マイクのためのマイク115が車両1の前方に配置されている。   As shown in FIG. 2A, the first CCD camera 111 is disposed toward the front of the vehicle 1, the second CCD camera 112 is disposed toward the right side of the vehicle 1, and the third CCD camera 113 is disposed behind the vehicle 1. The fourth CCD camera 114 is arranged toward the left side of the vehicle 1. Note that reference numerals 121, 122, 123, and 124 in FIG. 2A indicate examples of the imageable directions and / or imageable angles of the respective CCD cameras. A first operation unit 104 configured as a switch is disposed in the vicinity of the driver's seat, and a microphone 115 for a sound collecting microphone is disposed in front of the vehicle 1.

図2(a)では、4台のCCDカメラを車両の四方に設けたが、1台のCCDカメラを車両の前方のみに配置しても良いし(図2(b)参照)、2台のCCDカメラを車両の前後にのみ配置しても良いし(図2(c)参照)、3台のCCDカメラを120度ずつずれた方向を撮像できるように配置しても良い(図2(d)参照)。なお、図2(a)〜(d)に示すCCDカメラ、スイッチ、マイクの配置例は一例であって、他の配置方法を採用しても良い。   In FIG. 2A, four CCD cameras are provided on all sides of the vehicle. However, one CCD camera may be disposed only in front of the vehicle (see FIG. 2B). The CCD cameras may be arranged only in front of and behind the vehicle (see FIG. 2C), and the three CCD cameras may be arranged so as to be able to pick up images in directions shifted by 120 degrees (FIG. 2D )reference). The arrangement examples of the CCD camera, switch, and microphone shown in FIGS. 2A to 2D are merely examples, and other arrangement methods may be adopted.

次に、図3〜5を用いて、ドライブレコーダ100(図2(a)参照)において、イベントが発生した場合の画像等の記憶方法について説明する。   Next, a method for storing an image or the like when an event occurs in the drive recorder 100 (see FIG. 2A) will be described with reference to FIGS.

図3は、前方から衝撃を受けた場合を示す図である。   FIG. 3 is a diagram illustrating a case where an impact is received from the front.

図3(a)は車両1が受けた衝撃の方向を示し、図3(b)は衝撃を受けた時のGセンサ102の出力例を示し、図3(c)はGセンサ102からの出力信号G(Gx、Gy)の合成値の絶対値の時系列的変化を示しており、図3(d)〜図3(g)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図3(h)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。   3A shows the direction of impact received by the vehicle 1, FIG. 3B shows an output example of the G sensor 102 when receiving the impact, and FIG. 3C shows the output from the G sensor 102. FIG. 3D to FIG. 3G show images (still images) captured by the first CCD camera 111 to the fourth CCD camera 114. FIG. 3D to FIG. 3G show the time-series changes in the absolute value of the combined value of the signal G (Gx, Gy). The image capturing timing (one image per 0.1 second) is shown, and FIG. 3H shows an example of a thumbnail image to be created. The creation of thumbnail images will be described later.

時刻Tpにおいて、衝撃が、図3(a)に示す矢印30の方向(前方)から車両1に生じた場合、Gセンサ102は、図3(b)に示すような正のY軸方向の重力加速度Gy31を発生する。この時X軸方向の重力加速度Gxはほぼゼロである。Gセンサ102からの出力の合成重力加速度の絶対値(Gx+Gy0・5(この場合はGy31)が、閾値加速度Gs(例えば、0.45)以上の場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像し、常に第1メモリ105に循環的に記憶している画像をメモリカード10に記憶するように動作する。 At time Tp, when an impact occurs in the vehicle 1 from the direction of the arrow 30 shown in FIG. 3A (front), the G sensor 102 detects gravity in the positive Y-axis direction as shown in FIG. An acceleration Gy31 is generated. At this time, the gravitational acceleration Gx in the X-axis direction is almost zero. Absolute value of the composite gravitational acceleration output from the G sensor 102 (Gx 2 + Gy 2) 0 · 5 ( in this case Gy31) is the threshold acceleration Gs (e.g., 0.45) if above, the first control unit 101 It is determined that an event has occurred, and each CCD camera 111 to 114 operates to store in the memory card 10 an image that is captured and always stored in the first memory 105 in a cyclic manner.

具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。   Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the memory card 10. For example, Tp can be 12 seconds and Ta can be 8 seconds. Note that the periods of Tb and Ta can be set freely.

したがって、第1制御部101は、第1CCDカメラ111では図3(d)に33として示した200枚分の画像を記憶し、第2CCDカメラ112では図3(e)に34として示した200枚分の画像を記憶し、第3CCDカメラ113では図3(f)に35として示した200枚分の画像を記憶し、第4CCDカメラ114では図3(g)に36として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。   Therefore, the first control unit 101 stores 200 images shown as 33 in FIG. 3D in the first CCD camera 111, and 200 images shown as 34 in FIG. 3E in the second CCD camera 112. The third CCD camera 113 stores 200 images shown as 35 in FIG. 3 (f), and the fourth CCD camera 114 stores 200 images shown as 36 in FIG. 3 (g). Control to store the image. That is, in one event, 200 images for each CCD camera, a total of 800 images, are stored in the memory card 10.

また、1回のイベント毎に、第1制御部101は、(Gセンサ102によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、マイク115で時刻Tpの前Tb秒間及び時刻Tp後のTa秒間の音声データ、この間(Tb及びTa間)のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。   In addition, for each event, the first control unit 101 displays event type data (indicating that it is an event by the G sensor 102), event occurrence time data (Tp), and output G data (Gx, Gy), voice data for Tb seconds before time Tp and Ta seconds after time Tp with the microphone 115, tire lock data and tire lock time data during this time (between Tb and Ta), brake operation data and brake operation start time during this time The data is stored in the memory card 10 together with the image data. Note that only a part of the data described above may be stored in the memory card 10.

メモリカード10に記憶されるイベント数は、メモリカード10の記憶容量に応じて、可変することができるが、少なくとも10イベント分のデータが記憶できるようにすることが好ましい。また、第1制御部101は、イベント毎にメモリカード10にフォルダを作成して、画像データ、イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、音声データ、タイヤロックデータ及びタイヤロック時刻データ、ブレーキ操作データ及びブレーキ操作開始時刻データを記憶するようにすることが好ましい。   The number of events stored in the memory card 10 can be changed according to the storage capacity of the memory card 10, but it is preferable that at least 10 events of data can be stored. The first control unit 101 also creates a folder in the memory card 10 for each event, image data, event type data, event occurrence time data (Tp), output G data (Gx, Gy) of the G sensor 102, Audio data, tire lock data, tire lock time data, brake operation data, and brake operation start time data are preferably stored.

上述したように、ドライブレコーダ100は、衝撃が発生した時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、衝撃の発生原因が自動車同士の衝突等による事故であった場合に、後で記憶された画像を解析することによって、事故原因を正確に究明等することが可能となる。   As described above, the drive recorder 100 can store the images of the period Tb before the time Tp when the impact occurred and the period Ta after the time Tp. In the case of an accident, the cause of the accident can be accurately investigated by analyzing the image stored later.

図4は、右斜め前方から衝撃を受けた場合を示す図である。   FIG. 4 is a diagram showing a case where an impact is received from the right front side.

図4(a)は車両1が受けた衝撃の方向を示し、図4(b)は衝撃を受けた時のGセンサの出力例を示し、図4(c)はGセンサからの出力信号G(Gx、Gy)の合成値の絶対値の時系列的変化を示しており、図4(d)〜図4(g)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図4(h)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。   4A shows the direction of impact received by the vehicle 1, FIG. 4B shows an output example of the G sensor when receiving the impact, and FIG. 4C shows an output signal G from the G sensor. FIG. 4D to FIG. 4G show images (still images) captured by the first CCD camera 111 to the fourth CCD camera 114, showing time-series changes in the absolute value of the combined value of (Gx, Gy). Imaging timing (one image per 0.1 second) is shown, and FIG. 4H shows an example of a thumbnail image to be created. The creation of thumbnail images will be described later.

時刻Tpにおいて、衝撃が、図4(a)に示す矢印40の方向(右斜め前)から車両1に生じた場合、Gセンサ102は、図4(b)に示すような正のY軸方向の重力加速度Gy41及び正のX軸方向の重力加速度Gx42を発生する。Gセンサ102からの出力の合成重力加速度の絶対値43が、閾値加速度Gs(例えば、0.45)以上の場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像する画像をメモリカード10に記憶するように動作する。   At time Tp, when an impact occurs in the vehicle 1 from the direction of the arrow 40 shown in FIG. 4A (right diagonally forward), the G sensor 102 detects the positive Y-axis direction as shown in FIG. Gravity acceleration Gy41 and positive gravity acceleration Gx42 in the positive X-axis direction are generated. When the absolute value 43 of the combined gravitational acceleration output from the G sensor 102 is greater than or equal to a threshold acceleration Gs (for example, 0.45), the first control unit 101 determines that an event has occurred, and each CCD camera 111-1. 114 operates to store an image to be captured in the memory card 10.

具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。   Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the memory card 10. For example, Tp can be 12 seconds and Ta can be 8 seconds. Note that the periods of Tb and Ta can be set freely.

したがって、第1制御部101は、第1CCDカメラ111では図4(d)に45として示した200枚分の画像を記憶し、第2CCDカメラ112では図4(e)に46として示した200枚分の画像を記憶し、第3CCDカメラ113では図4(f)に47として示した200枚分の画像を記憶し、第4CCDカメラ114では図4(g)に48として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。   Therefore, the first control unit 101 stores 200 images shown as 45 in FIG. 4D in the first CCD camera 111, and 200 images shown as 46 in FIG. 4E in the second CCD camera 112. The third CCD camera 113 stores 200 images shown as 47 in FIG. 4 (f), and the fourth CCD camera 114 stores 200 images shown as 48 in FIG. 4 (g). Control to store the image. That is, in one event, 200 images for each CCD camera, a total of 800 images, are stored in the memory card 10.

また、1回のイベント毎に、第1制御部101は、(Gセンサ102によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、マイク115で時刻Tpの前Tb秒間及び時刻Tp後のTa秒間の音声データ、この間(Tb及びTa間)のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。   In addition, for each event, the first control unit 101 displays event type data (indicating that it is an event by the G sensor 102), event occurrence time data (Tp), and output G data (Gx, Gy), voice data for Tb seconds before time Tp and Ta seconds after time Tp with the microphone 115, tire lock data and tire lock time data during this time (between Tb and Ta), brake operation data and brake operation start time during this time The data is stored in the memory card 10 together with the image data. Note that only a part of the data described above may be stored in the memory card 10.

上述したように、ドライブレコーダ100は、衝撃が発生した時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、衝撃の発生原因が自動車同士の衝突等による事故であった場合に、後で記憶された画像を解析することによって、事故原因を正確に究明等することが可能となる。なお、上述した図3及び図4の例において、閾値加速度Gsを超えることをイベント発生のトリガとしたが、例えば、単位時間あたりの加速度の変化量がある値を超えた場合(0.1秒間に、G値が0.3以上変化した場合)にイベントが発生したと認識するようにしても良い。   As described above, the drive recorder 100 can store the images of the period Tb before the time Tp when the impact occurred and the period Ta after the time Tp. In the case of an accident, the cause of the accident can be accurately investigated by analyzing the image stored later. In the example of FIGS. 3 and 4 described above, exceeding the threshold acceleration Gs is used as a trigger for generating an event. For example, when the amount of change in acceleration per unit time exceeds a certain value (for 0.1 seconds) In addition, it may be recognized that an event has occurred when the G value has changed by 0.3 or more.

図5は、操作部を操作した場合を示す図である。   FIG. 5 is a diagram illustrating a case where the operation unit is operated.

図5(a)は第1操作部104の出力信号の一例を示し、図5(b)〜図5(e)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図5(f)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。   5A shows an example of an output signal of the first operation unit 104, and FIGS. 5B to 5E show images (still images) captured by the first CCD camera 111 to the fourth CCD camera 114. FIG. The timing (one image per 0.1 second) is shown, and FIG. 5F shows an example of a thumbnail image to be created. The creation of thumbnail images will be described later.

図5(a)に示すように、時刻Tpにおいて、図2に示す第1操作部104から撮像開始指示のための操作信号53が出力された場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像する画像をメモリカード10に記憶するように動作する。   As shown in FIG. 5A, when the operation signal 53 for instructing to start imaging is output from the first operation unit 104 shown in FIG. 2 at time Tp, the first control unit 101 generates an event. And the CCD cameras 111 to 114 operate so as to store the images taken by the CCD cameras 111 to 114 in the memory card 10.

具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。   Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the memory card 10. For example, Tp can be 12 seconds and Ta can be 8 seconds. Note that the periods of Tb and Ta can be set freely.

したがって、第1制御部101は、第1CCDカメラ111では図5(b)に54として示した200枚分の画像を記憶し、第2CCDカメラ112では図5(c)に55として示した200枚分の画像を記憶し、第3CCDカメラ113では図5(d)に56として示した200枚分の画像を記憶し、第4CCDカメラ114では図5(e)に57として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。   Therefore, the first control unit 101 stores 200 images shown as 54 in FIG. 5B in the first CCD camera 111, and 200 images shown as 55 in FIG. 5C in the second CCD camera 112. The third CCD camera 113 stores 200 images shown as 56 in FIG. 5D, and the fourth CCD camera 114 stores 200 images shown as 57 in FIG. Control to store the image. That is, in one event, 200 images for each CCD camera, a total of 800 images, are stored in the memory card 10.

また、1回のイベント毎に、第1制御部101は、(操作部104の撮像開始指示によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、この間(Tb及びTa間)のGセンサ102の出力Gデータ(Gx、Gy)、音声データ、この間のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。   In addition, for each event, the first control unit 101 displays event type data (indicating an event according to an imaging start instruction from the operation unit 104), event occurrence time data (Tp), and the interval (between Tb and Ta). ) G sensor 102 output G data (Gx, Gy), voice data, tire lock data and tire lock time data in the meantime, and brake operation data and brake operation start time data in the meantime are stored in the memory card 10 together with image data. To do. Note that only a part of the data described above may be stored in the memory card 10.

上述したように、ドライブレコーダ100は、第1操作部104が操作された時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、例えば運転手が録画が必要だと判断した状況内容を、記憶された画像に基づいて後で確認することが可能となる。例えば、車両がタクシーである場合、第4CCDカメラ114を客用シートを撮像するように配置し、客に不審な行動が見られた場合に、第1操作部104を操作することによって画像の記憶を開始するように設定することが可能である。   As described above, the drive recorder 100 can store images of the period Tb before the time Tp when the first operation unit 104 is operated and the period Ta after the time Tp. It is possible to confirm later the contents of the situation determined to be necessary based on the stored image. For example, when the vehicle is a taxi, the fourth CCD camera 114 is arranged so as to capture a customer seat, and when a suspicious behavior is seen by the customer, the first operation unit 104 is operated to store an image. Can be set to start.

以上、図3〜図5を用いて、ドライブレコーダ100における画像の記憶方法について説明したが、画像の記録を開始するイベントとしては、ABS情報検出部116及び/又はブレーキ操作検出部117からのデータに基づいて、例えば、急激なブレーキ操作等が行われた場合に、第1制御部101がイベントが発生したと判断して、画像の記録を開始するように構成しても良い。   The image storage method in the drive recorder 100 has been described above with reference to FIGS. 3 to 5. As an event for starting image recording, data from the ABS information detection unit 116 and / or the brake operation detection unit 117 is used. For example, when a sudden braking operation or the like is performed, the first control unit 101 may determine that an event has occurred and start recording an image.

次に、センタ端末200におけるサムネイル画像の作成について説明する。   Next, creation of thumbnail images in the center terminal 200 will be described.

図6は、1つのイベントに関するサムネイル画像作成フローの一例を示す図である。   FIG. 6 is a diagram illustrating an example of a thumbnail image creation flow regarding one event.

図6に示すフローは、センタ端末200の第2制御部201が、予め記憶されたプログラムにしたがって実行し、第2操作部204の所定の操作に基づいて開始されるものとする。また、図6に示すフローが開始される時点で、スロットを構成する第2メモリカードIF206にドライブレコーダ100において画像が記憶されたメモリカード10が挿入されているものとする。   The flow shown in FIG. 6 is executed by the second control unit 201 of the center terminal 200 according to a program stored in advance, and is started based on a predetermined operation of the second operation unit 204. Further, it is assumed that when the flow shown in FIG. 6 is started, the memory card 10 in which the image is stored in the drive recorder 100 is inserted into the second memory card IF 206 constituting the slot.

最初に、第2制御部201は、1つのイベントに関するデータフォルダに含まれるイベント種類データに基づいて、イベントの種類の判断を行う(S1)。   First, the second control unit 201 determines an event type based on event type data included in a data folder related to one event (S1).

イベントがGセンサによるものである場合、第2制御部201は、Gセンサ102の出力G(Gx、Gy)を取得し(S2)、サムネイル画像を作成する場合の合成割合を、取得された出力G(Gx、Gy)に応じて決定する(S3)。例えば、図3の例では、Gy31のみなので、第1CCDカメラ111の画像が100%となり、図4の例では、第1CCDカメラ111と第2CCDカメラ112の画像の割合が、Gy:Gx(即ち、3:1)となる。   When the event is caused by the G sensor, the second control unit 201 acquires the output G (Gx, Gy) of the G sensor 102 (S2), and determines the composition ratio when the thumbnail image is created. It is determined according to G (Gx, Gy) (S3). For example, in the example of FIG. 3, since only Gy31, the image of the first CCD camera 111 is 100%. In the example of FIG. 4, the ratio of the images of the first CCD camera 111 and the second CCD camera 112 is Gy: Gx (ie, 3: 1).

次に、第2制御部201は、S2で取得された出力G(Gx、Gy)に応じて、対象となるCCDカメラの画像を選択する(S4)。例えば、図3の例では、車両1は前方からのみ衝撃を受け、その結果Gセンサ102の出力はGy31(正の値)のみであるので、第1CCDカメラ111の画像が選択される。また、図4の例では、車両1は右斜め前方から衝撃を受け、その結果Gセンサ102の出力はGy41(正の値)及びGx42(正の値)であるので、第1CCDカメラ111及び第2CCDカメラ112の画像が選択される。なお、車両1が後方から衝撃を受ければ、Gセンサ102の出力はGy(負の値)のみとなるので、第3CCDカメラ113の画像が選択され、車両1が左側方から衝撃を受ければ、Gセンサ102の出力はGx(負の値)となるので、第4CCDカメラ113の画像が選択されることとなる。なお、1台のCCDカメラのみを車両に配置した場合には、自動的に1台のCCDカメラの画像が選択されることとなる。   Next, the second control unit 201 selects a target CCD camera image according to the output G (Gx, Gy) acquired in S2 (S4). For example, in the example of FIG. 3, the vehicle 1 receives an impact only from the front, and as a result, the output of the G sensor 102 is only Gy31 (positive value), so the image of the first CCD camera 111 is selected. In the example of FIG. 4, the vehicle 1 receives an impact from right diagonally forward, and as a result, the outputs of the G sensor 102 are Gy41 (positive value) and Gx42 (positive value). The image of the 2CCD camera 112 is selected. If the vehicle 1 receives an impact from the rear, the output of the G sensor 102 is only Gy (negative value). Therefore, if the image of the third CCD camera 113 is selected and the vehicle 1 receives an impact from the left side, Since the output of the G sensor 102 is Gx (negative value), the image of the fourth CCD camera 113 is selected. When only one CCD camera is arranged in the vehicle, an image of one CCD camera is automatically selected.

次に、第2制御部201は、イベント発生時刻データ(Tp)を取得し(S5)、S4で選択されたCCDカメラの画像の内、イベント発生時刻Tpから所定時間Tr前の画像を特徴画像として選択する(S6)。所定時間Tr前の画像を選択するのは、衝撃が発生した発生時刻よりも少し前の画像の方が、より衝撃が発生する原因や状況を把握し易いためである。なお、所定時間Trは例えば、0.2秒と設定することが可能であるが、アプリケーションに応じて、0秒を含め最適な値を選択することができる。   Next, the second control unit 201 acquires event occurrence time data (Tp) (S5), and among the images of the CCD camera selected in S4, an image before the predetermined time Tr from the event occurrence time Tp is a feature image. (S6). The reason why the image before the predetermined time Tr is selected is that the image slightly before the time when the impact occurred is easier to grasp the cause and the situation of the impact. The predetermined time Tr can be set to 0.2 seconds, for example, but an optimal value including 0 seconds can be selected according to the application.

次に、第2制御部201は、S3で決定された合成割合に応じて、S6で選択された特徴画像を合成して、サムネイル画像(合成した画像を縮小化した画像)を作成し、表示部203に表示して(S7)、1つのイベントに関するサムネイル画像作成処理を終了する。   Next, the second control unit 201 generates a thumbnail image (an image obtained by reducing the combined image) by combining the feature images selected in S6 according to the combining ratio determined in S3, and displays it. The thumbnail image creation process for one event is terminated (S7).

図3の場合には、図6に示すフローにしたがって、第1CCDカメラ111で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像37を縮小化して、サムネイル画像37(図3(h)参照)を作成する。   In the case of FIG. 3, according to the flow shown in FIG. 6, the feature image 37 captured before time Tr (for example, 0.2 seconds) is reduced from the image captured by the first CCD camera 111. Thus, a thumbnail image 37 (see FIG. 3H) is created.

図4の場合には、図6に示すフローにしたがって、第1CCDカメラ111で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像49と第2CCDカメラ112で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像50とが、S3で決定された合成割合(例えば、3:1)に応じて合成され、縮小化されてサムネイル画像51(図4(h)参照)が作成される。   In the case of FIG. 4, according to the flow shown in FIG. 6, among the images captured by the first CCD camera 111, the feature image 49 and the second CCD captured before time Tp (for example, 0.2 seconds) from the time Tp. Of the images captured by the camera 112, the feature image 50 captured before time Tp (for example, 0.2 seconds) before the time Tp corresponds to the composition ratio (for example, 3: 1) determined in S3. A thumbnail image 51 (see FIG. 4H) is created by combining and reducing the size.

なお、複数の特徴画像が選択された場合、複数の特徴画像を合成するのではなく、交互に表示するようなサムネイル画像を作成しても良い。また、表示時間比をGセンサ102の出力G(Gx、Gy)に応じて決めても良い。例えば、図4の例では、Gx:Gyが1:3であるから、表示時間も第1CCDカメラ111の特徴画像49が3秒に対して、第2CCDカメラ112の特徴画像50が1秒というように定めることができる。   When a plurality of feature images are selected, thumbnail images that are displayed alternately may be created instead of combining the plurality of feature images. The display time ratio may be determined according to the output G (Gx, Gy) of the G sensor 102. For example, in the example of FIG. 4, since Gx: Gy is 1: 3, the display time of the feature image 49 of the first CCD camera 111 is 3 seconds, and the feature image 50 of the second CCD camera 112 is 1 second. Can be determined.

S1でイベント種類が第1操作部104の操作による場合、第2制御部201は、予め定められたCCDカメラの画像を選択する(S4)。例えば、図5の例では、第4CCDカメラ114の画像が選択される。   When the event type is determined by the operation of the first operation unit 104 in S1, the second control unit 201 selects a predetermined image of the CCD camera (S4). For example, in the example of FIG. 5, the image of the fourth CCD camera 114 is selected.

次に、第2制御部201は、イベント発生時刻(Tp)を取得し(S5)、S4で選択されたCCDカメラの画像の内、イベント発生時刻Tpから所定時間Tr前の画像を特徴画像として選択する(S6)。所定時間Tr前の画像を選択するのは、第1操作部104を操作した場合、動作にはタイムラグがあり、第1操作部が操作された時刻よりも少し前の画像の方が、より撮像したい画像に近い場合が多いためである。なお、所定時間Trは例えば、0.2秒と設定することが可能であるが、アプリケーションに応じて、0秒を含め最適な値を選択することができる。また、イベント種類によって動作のタイムラグが異なる場合が考えられるのでイベント種類に応じて、所定時間Trの値を変更するようにしても良い。   Next, the second control unit 201 acquires the event occurrence time (Tp) (S5), and uses the image of the CCD camera selected in S4 as a feature image for a predetermined time Tr from the event occurrence time Tp. Select (S6). The image before the predetermined time Tr is selected when the first operation unit 104 is operated, there is a time lag in the operation, and the image slightly before the time when the first operation unit is operated is picked up more. This is because there are many cases where the image is close to the desired image. The predetermined time Tr can be set to 0.2 seconds, for example, but an optimal value including 0 seconds can be selected according to the application. In addition, since the operation time lag may vary depending on the event type, the value of the predetermined time Tr may be changed according to the event type.

次に、第2制御部201は、S6で選択された画像からサムネイル画像(画像を縮小化した画像)を作成し、表示部203に表示して(S7)、1つのイベントに関するサムネイル画像作成処理を終了する。   Next, the second control unit 201 creates a thumbnail image (an image obtained by reducing the image) from the image selected in S6 and displays the thumbnail image on the display unit 203 (S7). Thumbnail image creation processing related to one event Exit.

図5の場合には、図6に示すフローにしたがって、第4CCDカメラ114で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像58を縮小化してサムネイル画像58(図5(f)参照)を作成した。   In the case of FIG. 5, in accordance with the flow shown in FIG. 6, the feature image 58 imaged before time Tr (for example, 0.2 seconds) is reduced from the image imaged by the fourth CCD camera 114. Thus, a thumbnail image 58 (see FIG. 5F) was created.

図7は、サムネイル画像の表示例を示す図である。   FIG. 7 is a diagram illustrating a display example of thumbnail images.

図7は、センタ端末200の表示部203に複数のイベントに関するサムネイル画像が表示された状態を示している。   FIG. 7 shows a state in which thumbnail images relating to a plurality of events are displayed on the display unit 203 of the center terminal 200.

それぞれのイベント60は、Gセンサ102からの出力の合成重力加速度の絶対値の値61、イベントの特徴を示すサムネイル画像62、イベント発生時刻63を一つのセットとしている。   Each event 60 is a set of an absolute value 61 of the resultant gravitational acceleration output from the G sensor 102, a thumbnail image 62 indicating the characteristics of the event, and an event occurrence time 63.

なお、図7では、20個のイベントを表示しているが、表示個数はこれに限定されるものではなく、他の個数を選択することや、他の要素と合わせて表示させること等も可能である。   In FIG. 7, 20 events are displayed. However, the number of displays is not limited to this, and other numbers can be selected or displayed together with other elements. It is.

図8は、図7に示す複数のイベントの内の1つのイベントを再生する画面例を示す図である。   FIG. 8 is a diagram showing an example of a screen for reproducing one event among the plurality of events shown in FIG.

図7に示す複数のイベントの内、第2操作部204によって60として示すイベントを選択すると、図8の画面に切換わるものとする。   When the event indicated as 60 is selected by the second operation unit 204 from the plurality of events shown in FIG. 7, the screen is switched to the screen shown in FIG.

図8の画面では、第1CCDカメラ111で撮像した200枚の画像が、操作表示74(巻き戻し、再生、停止、早送り)何れかを選択することによって、表示領域70に順次切換わりながら表示される。また、同時に、第2CCDカメラ112で撮像した200枚の画像が表示領域71に順次切換わりながら表示され、第3CCDカメラ113で撮像した200枚の画像が表示領域72に順次切換わりながら表示され、第4CCDカメラ114で撮像した200枚の画像が表示領域73に順次切換わりながら表示される。なお、表示領域71〜73を選択することによって、選択された画像が表示領域70に拡大されて表示されるようにすることが好ましい。なお、図8に示す表示方法は一例であって、他の表示方法を選択することができる。   In the screen of FIG. 8, 200 images captured by the first CCD camera 111 are displayed while being sequentially switched to the display area 70 by selecting one of the operation displays 74 (rewind, playback, stop, fast forward). The At the same time, 200 images captured by the second CCD camera 112 are displayed while being sequentially switched to the display area 71, and 200 images captured by the third CCD camera 113 are displayed while being sequentially switched to the display area 72, 200 images picked up by the fourth CCD camera 114 are displayed while being sequentially switched to the display area 73. In addition, it is preferable that the selected image is enlarged and displayed in the display area 70 by selecting the display areas 71 to 73. Note that the display method illustrated in FIG. 8 is an example, and another display method can be selected.

図3の例において、Gセンサ102からの出力に応じてイベントが発生した場合には、イベント発生時刻データ(Tp)に応じて特徴画像が選択された。しかしながら、イベント発生時刻データのみでなく、ブレーキ操作開始時刻データ及びタイヤロックデータを用いて、特徴画像を選択することが可能である。   In the example of FIG. 3, when an event occurs according to the output from the G sensor 102, the feature image is selected according to the event occurrence time data (Tp). However, it is possible to select a feature image using not only event occurrence time data but also brake operation start time data and tire lock data.

例えば、イベント発生時刻(Tp)時にブレーキ操作を行い且つタイヤロックされていた場合には、ブレーキ操作開始時刻の画像を特徴画像として選択し、イベント発生時刻(Tp)時にブレーキ操作を行い且つタイヤロックしていなかった場合には、イベント発生時刻の画像を特徴画像として選択するように制御することが可能である。タイヤロックしていた場合には、ブレーキ操作開始時刻に重大の状況が発生した可能性があるので、そのタイミングの画像が重要となるからである。   For example, when the brake operation is performed at the event occurrence time (Tp) and the tire is locked, the image at the brake operation start time is selected as the feature image, the brake operation is performed at the event occurrence time (Tp), and the tire is locked. If not, it is possible to control to select an image at the event occurrence time as a feature image. This is because when the tire is locked, a serious situation may have occurred at the brake operation start time, and the timing image is important.

上記の説明において、「画像」は、映像と静止画像との両方を含むものとする。また、「イベント」とは、撮像に値する特別な出来事をいい、例えば閾値加速度Gs以上の加速度を検出した場合等が該当する。   In the above description, “image” includes both video and still images. The “event” refers to a special event worthy of imaging, and corresponds to, for example, a case where an acceleration equal to or greater than a threshold acceleration Gs is detected.

本発明に係る特徴画像作成装置及び方法を実行するためのシステムの概略構成を示す図である。It is a figure which shows schematic structure of the system for performing the characteristic image production apparatus and method which concern on this invention. CCDカメラ等の配置例を示す第1の図である。It is the 1st figure which shows the example of arrangement | positioning, such as a CCD camera. CCDカメラ等の配置例を示す第2の図である。It is a 2nd figure which shows the example of arrangement | positioning, such as a CCD camera. CCDカメラ等の配置例を示す第3の図である。It is a 3rd figure which shows the example of arrangement | positioning of a CCD camera etc. CCDカメラ等の配置例を示す第4の図である。It is a 4th figure which shows the example of arrangement | positioning of a CCD camera etc. 前方から衝撃を受けた場合を示す図である。It is a figure which shows the case where the impact is received from the front. 右斜め前方から衝撃を受けた場合を示す図である。It is a figure which shows the case where the impact is received from right diagonally forward. 操作部を操作した場合を示す図である。It is a figure which shows the case where an operation part is operated. サムネイル画像作成フローの一例を示す図である。It is a figure which shows an example of a thumbnail image creation flow. サムネイル画像の表示例を示す図である。It is a figure which shows the example of a display of a thumbnail image. 図7に示す複数のイベントの内の1つのイベントを再生する画面例を示す図である。It is a figure which shows the example of a screen which reproduces | regenerates one event of the some event shown in FIG.

符号の説明Explanation of symbols

10 メモリカード
100 ドライブレコーダ
101 第1制御部
102 Gセンサ
104 第1操作部
106 第1メモリ
111 第1CCDカメラ
112 第2CCDカメラ
113 第3CCDカメラ
114 第4CCDカメラ
200 センタ端末
201 第2制御部
203 表示部
204 第2操作部
DESCRIPTION OF SYMBOLS 10 Memory card 100 Drive recorder 101 1st control part 102 G sensor 104 1st operation part 106 1st memory 111 1st CCD camera 112 2nd CCD camera 113 3rd CCD camera 114 4th CCD camera 200 Center terminal 201 2nd control part 203 Display part 204 Second operation unit

Claims (4)

イベントと関連のある画像、前記イベント発生時刻データ及びイベント種類データを取得し、
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、
前記選択された特徴画像に基づいたサムネイル画像を表示する、ステップを有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とするサムネイル画像表示方法。
Obtain an image related to the event, the event occurrence time data and the event type data,
Based on said event occurrence time data and event type data, to select the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Displaying a thumbnail image based on the selected feature images, it has a step,
The predetermined time is changed according to the event type data.
A thumbnail image display method characterized by that.
前記イベントの発生は、衝撃、操作部による操作、ブレーキ操作開始又はタイヤロックによるものである、請求項1に記載のサムネイル画像表示方法。 Occurrence of the event, the impact, the operation by the operation unit, is due to the brake manipulation start or tire locking, thumbnail image display method according to claim 1. イベントと関連のある画像、前記イベント発生時刻データ及びイベント種類データを取得する取得手段と、
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択する選択手段と、
前記選択された特徴画像に基づいたサムネイル画像を表示する表示手段と、を有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とするサムネイル画像表示装置。
An acquisition means for acquiring an image associated with an event, the event occurrence time data and the event type data;
Selecting means for selecting on the basis of the event occurrence time data and event type data, the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Have a display means for displaying a thumbnail image based on the selected feature images,
The predetermined time is changed according to the event type data.
A thumbnail image display device characterized by that.
イベントと関連のある画像、前記イベント発生時刻データ及びイベント種類データを取得し、
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、
前記選択された特徴画像に基づいたサムネイル画像を表示し、
表示されたサムネイル画像が選択されると、該選択されたサムネイル画像に対応した特徴画像に対応する前記イベントと関連のある画像を再生表示する、ステップを有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とする画像再生方法。
Obtain an image related to the event, the event occurrence time data and the event type data,
Based on said event occurrence time data and event type data, to select the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Displaying a thumbnail image based on the selected feature image;
When displayed thumbnail image is selected, the image that are associated with the event corresponding to the characteristic image corresponding to the selected thumbnail image is reproduced and displayed, have a step,
The predetermined time is changed according to the event type data.
An image reproduction method characterized by the above.
JP2007010469A 2007-01-19 2007-01-19 Thumbnail image display method Active JP4901498B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007010469A JP4901498B2 (en) 2007-01-19 2007-01-19 Thumbnail image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007010469A JP4901498B2 (en) 2007-01-19 2007-01-19 Thumbnail image display method

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2010058221A Division JP5036837B2 (en) 2010-03-15 2010-03-15 Image display method and image display system
JP2010058287A Division JP2010182325A (en) 2010-03-15 2010-03-15 Image display method and image display device

Publications (2)

Publication Number Publication Date
JP2008176638A JP2008176638A (en) 2008-07-31
JP4901498B2 true JP4901498B2 (en) 2012-03-21

Family

ID=39703601

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007010469A Active JP4901498B2 (en) 2007-01-19 2007-01-19 Thumbnail image display method

Country Status (1)

Country Link
JP (1) JP4901498B2 (en)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5355971B2 (en) * 2008-09-16 2013-11-27 シナノケンシ株式会社 Driving information evaluation system
JP5200231B2 (en) * 2008-09-17 2013-06-05 セイコーインスツル株式会社 Image storage device
JP5261737B2 (en) * 2008-09-17 2013-08-14 セイコーインスツル株式会社 Image storage device
JP5240768B2 (en) * 2008-09-17 2013-07-17 セイコーインスツル株式会社 Image storage device
JP2010183464A (en) * 2009-02-06 2010-08-19 Fujitsu Ten Ltd Drive recorder
JP5521398B2 (en) * 2009-06-10 2014-06-11 日本電気株式会社 In-vehicle video data processing apparatus, data processing system, and program
JP5531556B2 (en) * 2009-10-28 2014-06-25 株式会社島津製作所 Image data processing apparatus and image data processing program
JP5914121B2 (en) * 2012-04-05 2016-05-11 矢崎エナジーシステム株式会社 Drive recorder
JP6554280B2 (en) * 2014-11-28 2019-07-31 株式会社デンソーテン Data processing apparatus, image processing method, and program
JP6291681B2 (en) * 2016-05-18 2018-03-14 株式会社ユピテル Display control system, display control method, and program
JP6582184B2 (en) * 2018-01-23 2019-10-02 株式会社ユピテル Display control system, display control method, and program
JP7052613B2 (en) * 2018-07-20 2022-04-12 株式会社Jvcケンウッド Display control device, display control method and program
JP6854538B2 (en) * 2019-06-25 2021-04-07 株式会社ユピテル Systems and programs
JP2021170337A (en) * 2019-07-09 2021-10-28 株式会社ユピテル Display control system, display control method and program

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07304473A (en) * 1994-05-13 1995-11-21 Toyota Motor Corp Image data recording device around vehicle
JP2003085695A (en) * 2001-09-13 2003-03-20 Radias:Kk Vehicle management system
JP2004336443A (en) * 2003-05-08 2004-11-25 Sanyo Electric Co Ltd Broadcasting reception, recording and reproduction apparatus
JP4467448B2 (en) * 2005-02-24 2010-05-26 三洋電機株式会社 Mobile recording device

Also Published As

Publication number Publication date
JP2008176638A (en) 2008-07-31

Similar Documents

Publication Publication Date Title
JP4901498B2 (en) Thumbnail image display method
JP2010130114A (en) Drive recorder
JP5057917B2 (en) Drive recorder
US20100134623A1 (en) Method of processing continuously recorded image, computer-readable medium for processing continuously recorded image, drive recorder and reproduction device
JP4859756B2 (en) Image recording condition setting method in drive recorder
JP4439548B2 (en) Drive recorder
JP5220788B2 (en) Vehicle running status display method
JP2009087014A (en) Drive recorder
JP2013235395A (en) Display control system, and display control method and program
JP5036837B2 (en) Image display method and image display system
KR101580567B1 (en) Apparatus of recording event based image data
JP2009089022A (en) Method for displaying vehicle's travel state
JP5424861B2 (en) Drive recorder, recording method and program
JP2010182209A (en) Drive recorder
JP7370446B2 (en) In-vehicle video recording device and its control method
JP5602267B2 (en) Vehicle running status display method
JP4439549B2 (en) Drive recorder
JP6291681B2 (en) Display control system, display control method, and program
JP2010146477A (en) Drive recorder
JP2010182325A (en) Image display method and image display device
JP6582184B2 (en) Display control system, display control method, and program
JP4503062B2 (en) Playback device
JP2021170337A (en) Display control system, display control method and program
JP2010061671A (en) Drive recorder
JP6899596B2 (en) Display control system, display control method and program

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100601

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100723

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110119

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20110124

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20110325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111028

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111227

R150 Certificate of patent or registration of utility model

Ref document number: 4901498

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150113

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250