JP4901498B2 - Thumbnail image display method - Google Patents
Thumbnail image display method Download PDFInfo
- Publication number
- JP4901498B2 JP4901498B2 JP2007010469A JP2007010469A JP4901498B2 JP 4901498 B2 JP4901498 B2 JP 4901498B2 JP 2007010469 A JP2007010469 A JP 2007010469A JP 2007010469 A JP2007010469 A JP 2007010469A JP 4901498 B2 JP4901498 B2 JP 4901498B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- event
- data
- time
- ccd camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 24
- 230000001133 acceleration Effects 0.000 description 19
- 238000003384 imaging method Methods 0.000 description 13
- 238000001514 detection method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 4
- 230000005484 gravity Effects 0.000 description 4
- 238000001454 recorded image Methods 0.000 description 3
- 125000004122 cyclic group Chemical group 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Description
本発明は、サムネイル画像表示方法に関し、特にドライブレコーダで記憶された画像に基づいてのサムネイル画像を表示する方法に関するものである。 The present invention relates to a thumbnail image display method, and more particularly to a method for displaying a thumbnail image based on an image stored in a drive recorder.
自動車に装着したビデオカメラからの撮像情報を半導体記憶装置に順次循環的に記憶し、自動車事故発生時の画像を記憶させる車載用監視装置が知られている(特許文献1参照)。 A vehicle-mounted monitoring device is known in which imaging information from a video camera mounted on an automobile is sequentially and cyclically stored in a semiconductor storage device, and an image at the time of an automobile accident occurs is stored (see Patent Document 1).
また、道路の一車線を監視するための複数の監視カメラをネットワークを介してセンタと接続し、所定の事象発生(停止車両あり)があると、その時の1画面分の画像を時刻情報と共にセンタに送信する監視カメラシステムが知られている(特許文献2参照)。 In addition, when a plurality of surveillance cameras for monitoring one lane of a road are connected to the center via a network and a predetermined event occurs (with a stopped vehicle), an image for one screen at that time is displayed together with time information. Surveillance camera systems that transmit to the Internet are known (see Patent Document 2).
さらに、テレビ画像を録画する場合に、録画画像データの特徴的なシーン(録画開始から5秒後の画像)に基づいたサムネイル画像を作成し、録画画像データとともに記憶して、再指示にサムネイル画像によって録画画像データの判別を容易に行わせるようにした受信記憶再生装置が知られている(特許文献3参照)。 Furthermore, when recording a television image, a thumbnail image based on a characteristic scene of the recorded image data (an image after 5 seconds from the start of recording) is created, stored together with the recorded image data, and a thumbnail image for re-instruction There is known a receiving / storing / reproducing apparatus that makes it easy to discriminate recorded image data (see Patent Document 3).
所定のイベントが発生した場合にドライブレコーダで記憶された複数の画像を、後で再生して確認する場合に、それぞれの記憶画像がどのような内容であるのかをイベント毎に瞬時におおよそ判別したいという要望があった。 When you want to play back and check multiple images stored in the drive recorder when a predetermined event occurs, you want to quickly determine the contents of each stored image for each event. There was a request.
そこで、本発明は、イベントを代表する特徴的なサムネイル画像を表示することを目的とするサムネイル画像表示方法を提供することを目的とする。 The present invention aims to provide a thumbnail image display method that aims to display the characteristic thumbnail image representing the event.
本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得し、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示するステップを有することを特徴とする。 The thumbnail image display method according to the present invention acquires an image related to an event and event occurrence time data, and based on the event occurrence time data , a time after the start of image recording and the time when the event occurred The method includes a step of selecting an image corresponding to a predetermined time before as a feature image and displaying a thumbnail image based on the selected feature image.
また、本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得する取得手段と、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つ前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択する選択手段と、選択された特徴画像に基づいたサムネイル画像を表示する表示手段を有することを特徴とする。
さらに、本発明に係るサムネイル画像表示方法は、イベントと関連のある画像及びイベント発生時刻データを取得し、イベント発生時刻データに基づき、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示し、表示されたサムネイル画像が選択されると、該選択されたサムネイル画像に対応した特徴画像に対応する所定時間分の画像を再生表示するステップを有することを特徴とする。
In addition, the thumbnail image display method according to the present invention includes an acquisition unit that acquires an image related to an event and event occurrence time data, and a time after the start of image recording based on the event occurrence time data and The image processing apparatus includes selection means for selecting an image corresponding to a predetermined time before the time when the event occurs as a feature image, and display means for displaying a thumbnail image based on the selected feature image.
Furthermore, the thumbnail image display method according to the present invention acquires an image related to an event and event occurrence time data, and an event occurs after the time when image recording is started based on the event occurrence time data. An image corresponding to a predetermined time before the selected time is selected as a feature image, a thumbnail image based on the selected feature image is displayed, and when the displayed thumbnail image is selected, the selected thumbnail image is supported. And a step of reproducing and displaying an image for a predetermined time corresponding to the feature image.
さらに、本発明に係るサムネイル画像表示方法は、イベントと関連のある複数の撮像部による複数の画像、イベント発生時刻データ、イベント発生に対応して検出された加速度センサ出力値、ブレーキ操作開始時刻データ及びタイヤロックデータを取得し、加速度センサ出力値に基づいて、複数の撮像部による複数の画像の内、イベント発生と関連のある撮像部による画像を選択し、イベント発生時刻よりブレーキ操作開始時刻が早く、タイヤロックデータがタイヤがロックされていたことを示す場合、ブレーキ操作開始時刻データに基づいて、選択された撮像部による画像から特徴画像を選択し、イベント発生時刻よりブレーキ操作開始時刻が早く、タイヤロックデータがタイヤがロックされていなかったことを示す場合、イベント発生時刻データに基づいて、選択された撮像部による画像から、画像の記録が開始された時刻よりも後で且つイベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、選択された特徴画像に基づいたサムネイル画像を表示するステップを有することを特徴とする。 Furthermore, the thumbnail image display method according to the present invention includes a plurality of images from a plurality of imaging units related to an event, event occurrence time data, an acceleration sensor output value detected in response to the event occurrence, and brake operation start time data. And tire lock data, and based on the acceleration sensor output value, select an image by the imaging unit related to the occurrence of the event from among a plurality of images by the plurality of imaging units, and the brake operation start time is determined from the event occurrence time. If the tire lock data indicates that the tire is locked earlier, a feature image is selected from the images taken by the selected imaging unit based on the brake operation start time data, and the brake operation start time is earlier than the event occurrence time. When the event occurs when the tire lock data indicates that the tire was not locked Based on data from the image by the imaging unit selected, than the time the recording of the image is started to select an image corresponding to a predetermined time earlier than the later and the time the event occurred as the feature image, which is selected The method includes a step of displaying a thumbnail image based on the feature image.
本発明に係るサムネイル画像表示方法では、Gセンサからの出力値に基づいて、衝撃があった方向を撮像している画像に基づいてサムネイル画像を作成し且つ表示することができるので、そのイベントを代表する最も適当なサムネイル画像を表示することが可能となる。 In the thumbnail image display method according to the present invention, a thumbnail image can be created and displayed based on an image capturing the direction in which there was an impact based on the output value from the G sensor. The most suitable representative thumbnail image can be displayed .
また、本発明に係るサムネイル画像表示方法では、操作部による撮像開始指示があった場合には、タイムラグを考慮して、撮像開始指示より所定時刻前の画像に基づいてサムネイル画像を作成し且つ表示することができるので、そのイベントを代表する最も適当なサムネイル画像を表示することが可能となる。 Further, in the thumbnail image display method according to the present invention, when there is an imaging start instruction from the operation unit, a thumbnail image is created and displayed based on an image a predetermined time before the imaging start instruction in consideration of a time lag. Therefore, it is possible to display the most suitable thumbnail image representing the event.
以下図面を参照して、本発明に係るサムネイル画像作成方法について説明する。但し、本発明の技術的範囲はそれらの実施の形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶ点に留意されたい。 A thumbnail image creation method according to the present invention will be described below with reference to the drawings. However, it should be noted that the technical scope of the present invention is not limited to these embodiments, but extends to the invention described in the claims and equivalents thereof.
図1は、本発明に係るサムネイル画像作成方法を実行するためのシステムの概略構成を示す図である。 FIG. 1 is a diagram showing a schematic configuration of a system for executing a thumbnail image creating method according to the present invention.
システムは、車両に搭載されるドライブレコーダ100と、ドライブレコーダ100においてイベント発生時に記憶された画像を記憶するメモリカード10、及びメモリカード10に記憶された画像を再生するためのセンタ端末200から構成される。
The system includes a
ドライブレコーダ100は、CPU、ROM及びRAM等を含んで構成される第1制御部101、G(重力)センサ102、GPS(Global Positioning System)レシーバ103、スイッチ、ボタン等を含んで構成される第1操作部104、画像を一次記憶するための第1メモリ105、メモリカード10を挿入するスロットを有し且つメモリカード10への画像の書き込み等を行うための第1メモリカードIF(インターフェイス)106、GPSアンテナ110、撮像部として機能する第1CCDカメラ111〜第4CCDカメラ114、集音機能を有するマイク115、ABS(Anti-lock Brake System)情報検出部116、ブレーキ操作検出部117、及びドライブレコーダ100の各要素に電力を供給するための電源部120等を有している。
The
また、ドライブレコーダ100は、ナビゲーション装置(不図示)と連携して、ナビゲーション装置のディスプレイにおいて画像を再生できるように構成しても良い。さらに、GPSレシーバ103は、必ずしも必須の構成ではないが、外付けの機器、例えばAVM(Automatic Vehide Monitoring)システムや、ナビゲーション装置が受信した位置情報を取得する構成としても良い。
Further, the
Gサンサ102は、互いに直交する2軸方向(X軸及びY軸)の重力加速度を検出する。なお、Gセンサ102のY軸方向(正の値)と車両の前側が一致し、Gセンサ102のX軸方向(正の値)と車両の右側面が一致するように、Gセンサが車両内部に配置されている。したがって、第1制御部101は、Gセンサ102から出力される検出信号G(Gx、Gy)に基づいて、車両が衝撃を受けたか否か、また車両のどの方向から衝撃が加わったのかを判別することが可能となる。なお、GxはX軸方向、GyはY軸方向の重力加速度と示すものとする。また、Gセンサ102は、3軸のものを利用しても良いし、3軸のものにおいて、Z軸方向の重力加速度Gzのデータを利用しなくても良い。
The
第1制御部101は、各CCDカメラ111〜114が、それぞれ0.1秒おきに1枚の画像を撮像し、撮像された画像を第1メモリ105に順次循環的に記憶するように制御する。例えば、常に4台のCCDカメラが撮像した画像60秒分(画像2400枚分)の画像データが、第1メモリ105に記憶されるように構成される。なお、各CCDカメラ111〜114が撮像する画像は、0.1秒毎に1枚でなく、例えば0.05秒毎に1枚でも良い。また、4台のCCDカメラが0.1秒毎に交互に1枚の画像を撮像して記憶するように構成しても良い。
The first control unit 101 controls each of the
ABS情報検出部116は、タイヤがロックしたか否かのタイヤロックデータ及びタイヤがロックした時刻を示すタイヤロック時刻データを第1制御部101へ送信する。即ち、ABS情報検出部116からのタイヤロックデータ及びタイヤロック時刻データによって、第1制御部101は、タイヤがロックしたか否か、及びタイヤがロックした場合にはその時刻を判別することができる。
The ABS
ブレーキ操作検出部117は、車両のブレーキが操作されたか否かを示すブレーキ操作データ及びブレーキ操作が開始された時刻を示すブレーキ操作開始時刻データを1制御部101へ送信する。即ち、ブレーキ操作検出部117からのブレーキ操作データ及びブレーキ操作開始時刻データによって、第1制御部101は、ブレーキ操作がなされたか否か、及びブレーキ操作が開始された時刻を判別することができる。
The brake
なお、GPSレシーバ103、第1メモリカードIF106、GPSアンテナ110、第1CCDカメラ111〜第4CCDカメラ114、マイク115、ABS情報検出部116及びブレーキ操作検出部117等の一部又は全部は、ドライブレコーダ100と別体に構成されても良い。例えば、GPS機能を有する既存のナビゲーション装置と連携させた場合、ドライブレコーダ100にGPSレシーバ103等の機能は不要であるので、その分ドライブレコーダ100のコストを低く抑えることができる。
A part or all of the
センタ端末200は、CPU、ROM及びRAM等を含んで構成される第2制御部201、プリンタ等から構成される出力部202、ディスプレイ等によって構成される表示部203、キーボード、マウス等を含んで構成される第2操作部204、画像を一次記憶するための第2メモリ205、及びメモリカード10を挿入するためのスロットを含み且つメモリカード10から画像の読み出し等を行うための第2メモリカードIF206等を有している。センタ端末200は、上記構成に相当する機能を有するパーソナル・コンピュータとして構成されても良い。
The
メモリカード10は、128Mバイトの記憶容量を有するCFカードであって、第1メモリカードIF106を構成するスロットに挿入されて、イベント発生時に所定の画像が記憶され、その後、第1メモリカードIF106を構成するスロットから排出されて第2メモリカードIF206を構成するスロットに再挿入されて、記憶されている画像をセンタ端末200へ出力する。なお、メモリカードとしてCFカードを用いたが、それに限定されるのではなく、SDカード、メモリスティック等の他のメモリカード、持ち運び可能なHD、その他の記憶媒体等をCFカードの代わりに利用することができる。また、メモリカード等の記憶容量は任意であって、用途に応じて自由に決定することが可能である。
The
図2は、CCDカメラ等の配置例を示す図である。 FIG. 2 is a diagram illustrating an arrangement example of a CCD camera or the like.
図2(a)に示す様に、第1CCDカメラ111は車両1の前方に向けて配置され、第2CCDカメラ112は車両1の右側方に向けて配置され、第3CCDカメラ113は車両1の後方に向けて配置され、第4CCDカメラ114は車両1の左側方に向けて配置されている。なお、図2(a)における121、122、123及び124は、それぞれのCCDカメラの撮像可能方向及び/又は撮像可能角度の例を示すものである。また、スイッチとして構成された第1操作部104が運転席近傍に配置され、集音マイクのためのマイク115が車両1の前方に配置されている。
As shown in FIG. 2A, the
図2(a)では、4台のCCDカメラを車両の四方に設けたが、1台のCCDカメラを車両の前方のみに配置しても良いし(図2(b)参照)、2台のCCDカメラを車両の前後にのみ配置しても良いし(図2(c)参照)、3台のCCDカメラを120度ずつずれた方向を撮像できるように配置しても良い(図2(d)参照)。なお、図2(a)〜(d)に示すCCDカメラ、スイッチ、マイクの配置例は一例であって、他の配置方法を採用しても良い。 In FIG. 2A, four CCD cameras are provided on all sides of the vehicle. However, one CCD camera may be disposed only in front of the vehicle (see FIG. 2B). The CCD cameras may be arranged only in front of and behind the vehicle (see FIG. 2C), and the three CCD cameras may be arranged so as to be able to pick up images in directions shifted by 120 degrees (FIG. 2D )reference). The arrangement examples of the CCD camera, switch, and microphone shown in FIGS. 2A to 2D are merely examples, and other arrangement methods may be adopted.
次に、図3〜5を用いて、ドライブレコーダ100(図2(a)参照)において、イベントが発生した場合の画像等の記憶方法について説明する。 Next, a method for storing an image or the like when an event occurs in the drive recorder 100 (see FIG. 2A) will be described with reference to FIGS.
図3は、前方から衝撃を受けた場合を示す図である。 FIG. 3 is a diagram illustrating a case where an impact is received from the front.
図3(a)は車両1が受けた衝撃の方向を示し、図3(b)は衝撃を受けた時のGセンサ102の出力例を示し、図3(c)はGセンサ102からの出力信号G(Gx、Gy)の合成値の絶対値の時系列的変化を示しており、図3(d)〜図3(g)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図3(h)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。
3A shows the direction of impact received by the
時刻Tpにおいて、衝撃が、図3(a)に示す矢印30の方向(前方)から車両1に生じた場合、Gセンサ102は、図3(b)に示すような正のY軸方向の重力加速度Gy31を発生する。この時X軸方向の重力加速度Gxはほぼゼロである。Gセンサ102からの出力の合成重力加速度の絶対値(Gx2+Gy2)0・5(この場合はGy31)が、閾値加速度Gs(例えば、0.45)以上の場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像し、常に第1メモリ105に循環的に記憶している画像をメモリカード10に記憶するように動作する。
At time Tp, when an impact occurs in the
具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。
Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the
したがって、第1制御部101は、第1CCDカメラ111では図3(d)に33として示した200枚分の画像を記憶し、第2CCDカメラ112では図3(e)に34として示した200枚分の画像を記憶し、第3CCDカメラ113では図3(f)に35として示した200枚分の画像を記憶し、第4CCDカメラ114では図3(g)に36として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。
Therefore, the first control unit 101
また、1回のイベント毎に、第1制御部101は、(Gセンサ102によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、マイク115で時刻Tpの前Tb秒間及び時刻Tp後のTa秒間の音声データ、この間(Tb及びTa間)のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。
In addition, for each event, the first control unit 101 displays event type data (indicating that it is an event by the G sensor 102), event occurrence time data (Tp), and output G data (Gx, Gy), voice data for Tb seconds before time Tp and Ta seconds after time Tp with the
メモリカード10に記憶されるイベント数は、メモリカード10の記憶容量に応じて、可変することができるが、少なくとも10イベント分のデータが記憶できるようにすることが好ましい。また、第1制御部101は、イベント毎にメモリカード10にフォルダを作成して、画像データ、イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、音声データ、タイヤロックデータ及びタイヤロック時刻データ、ブレーキ操作データ及びブレーキ操作開始時刻データを記憶するようにすることが好ましい。
The number of events stored in the
上述したように、ドライブレコーダ100は、衝撃が発生した時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、衝撃の発生原因が自動車同士の衝突等による事故であった場合に、後で記憶された画像を解析することによって、事故原因を正確に究明等することが可能となる。
As described above, the
図4は、右斜め前方から衝撃を受けた場合を示す図である。 FIG. 4 is a diagram showing a case where an impact is received from the right front side.
図4(a)は車両1が受けた衝撃の方向を示し、図4(b)は衝撃を受けた時のGセンサの出力例を示し、図4(c)はGセンサからの出力信号G(Gx、Gy)の合成値の絶対値の時系列的変化を示しており、図4(d)〜図4(g)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図4(h)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。
4A shows the direction of impact received by the
時刻Tpにおいて、衝撃が、図4(a)に示す矢印40の方向(右斜め前)から車両1に生じた場合、Gセンサ102は、図4(b)に示すような正のY軸方向の重力加速度Gy41及び正のX軸方向の重力加速度Gx42を発生する。Gセンサ102からの出力の合成重力加速度の絶対値43が、閾値加速度Gs(例えば、0.45)以上の場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像する画像をメモリカード10に記憶するように動作する。
At time Tp, when an impact occurs in the
具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。
Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the
したがって、第1制御部101は、第1CCDカメラ111では図4(d)に45として示した200枚分の画像を記憶し、第2CCDカメラ112では図4(e)に46として示した200枚分の画像を記憶し、第3CCDカメラ113では図4(f)に47として示した200枚分の画像を記憶し、第4CCDカメラ114では図4(g)に48として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。
Therefore, the first control unit 101
また、1回のイベント毎に、第1制御部101は、(Gセンサ102によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、Gセンサ102の出力Gデータ(Gx、Gy)、マイク115で時刻Tpの前Tb秒間及び時刻Tp後のTa秒間の音声データ、この間(Tb及びTa間)のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。
In addition, for each event, the first control unit 101 displays event type data (indicating that it is an event by the G sensor 102), event occurrence time data (Tp), and output G data (Gx, Gy), voice data for Tb seconds before time Tp and Ta seconds after time Tp with the
上述したように、ドライブレコーダ100は、衝撃が発生した時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、衝撃の発生原因が自動車同士の衝突等による事故であった場合に、後で記憶された画像を解析することによって、事故原因を正確に究明等することが可能となる。なお、上述した図3及び図4の例において、閾値加速度Gsを超えることをイベント発生のトリガとしたが、例えば、単位時間あたりの加速度の変化量がある値を超えた場合(0.1秒間に、G値が0.3以上変化した場合)にイベントが発生したと認識するようにしても良い。
As described above, the
図5は、操作部を操作した場合を示す図である。 FIG. 5 is a diagram illustrating a case where the operation unit is operated.
図5(a)は第1操作部104の出力信号の一例を示し、図5(b)〜図5(e)は第1CCDカメラ111〜第4CCDカメラ114が撮像する画像(静止画像)の撮像タイミング(0.1秒毎に1枚)を示し、図5(f)は作成されるサムネイル画像の例を示している。なお、サムネイル画像の作成については後述する。
5A shows an example of an output signal of the
図5(a)に示すように、時刻Tpにおいて、図2に示す第1操作部104から撮像開始指示のための操作信号53が出力された場合、第1制御部101は、イベントが発生したと判断し、各CCDカメラ111〜114が撮像する画像をメモリカード10に記憶するように動作する。
As shown in FIG. 5A, when the
具体的には、時刻Tpの前Tb秒間の画像と、時刻Tp後のTa秒間の画像をメモリカード10に記憶するように制御する。例えば、Tpは12秒、Taは8秒とすることができる。なお、Tb及びTaの期間は自由に設定できるものとする。
Specifically, control is performed so that an image for Tb seconds before the time Tp and an image for Ta seconds after the time Tp are stored in the
したがって、第1制御部101は、第1CCDカメラ111では図5(b)に54として示した200枚分の画像を記憶し、第2CCDカメラ112では図5(c)に55として示した200枚分の画像を記憶し、第3CCDカメラ113では図5(d)に56として示した200枚分の画像を記憶し、第4CCDカメラ114では図5(e)に57として示した200枚分の画像を記憶するように制御する。即ち、1回のイベントで、各CCDカメラについて200枚、合計で800枚の画像がメモリカード10に記憶される。
Therefore, the first control unit 101
また、1回のイベント毎に、第1制御部101は、(操作部104の撮像開始指示によるイベントであることを示す)イベント種類データ、イベント発生時刻データ(Tp)、この間(Tb及びTa間)のGセンサ102の出力Gデータ(Gx、Gy)、音声データ、この間のタイヤロックデータ及びタイヤロック時刻データ、この間のブレーキ操作データ及びブレーキ操作開始時刻データを、画像データと共にメモリカード10に記憶する。なお、上述したデータの一部のみをメモリカード10に記憶するように構成しても良い。
In addition, for each event, the first control unit 101 displays event type data (indicating an event according to an imaging start instruction from the operation unit 104), event occurrence time data (Tp), and the interval (between Tb and Ta). )
上述したように、ドライブレコーダ100は、第1操作部104が操作された時刻Tpの前Tbの期間及び時刻Tpの後Taの期間の画像を記憶することができるので、例えば運転手が録画が必要だと判断した状況内容を、記憶された画像に基づいて後で確認することが可能となる。例えば、車両がタクシーである場合、第4CCDカメラ114を客用シートを撮像するように配置し、客に不審な行動が見られた場合に、第1操作部104を操作することによって画像の記憶を開始するように設定することが可能である。
As described above, the
以上、図3〜図5を用いて、ドライブレコーダ100における画像の記憶方法について説明したが、画像の記録を開始するイベントとしては、ABS情報検出部116及び/又はブレーキ操作検出部117からのデータに基づいて、例えば、急激なブレーキ操作等が行われた場合に、第1制御部101がイベントが発生したと判断して、画像の記録を開始するように構成しても良い。
The image storage method in the
次に、センタ端末200におけるサムネイル画像の作成について説明する。
Next, creation of thumbnail images in the
図6は、1つのイベントに関するサムネイル画像作成フローの一例を示す図である。 FIG. 6 is a diagram illustrating an example of a thumbnail image creation flow regarding one event.
図6に示すフローは、センタ端末200の第2制御部201が、予め記憶されたプログラムにしたがって実行し、第2操作部204の所定の操作に基づいて開始されるものとする。また、図6に示すフローが開始される時点で、スロットを構成する第2メモリカードIF206にドライブレコーダ100において画像が記憶されたメモリカード10が挿入されているものとする。
The flow shown in FIG. 6 is executed by the
最初に、第2制御部201は、1つのイベントに関するデータフォルダに含まれるイベント種類データに基づいて、イベントの種類の判断を行う(S1)。
First, the
イベントがGセンサによるものである場合、第2制御部201は、Gセンサ102の出力G(Gx、Gy)を取得し(S2)、サムネイル画像を作成する場合の合成割合を、取得された出力G(Gx、Gy)に応じて決定する(S3)。例えば、図3の例では、Gy31のみなので、第1CCDカメラ111の画像が100%となり、図4の例では、第1CCDカメラ111と第2CCDカメラ112の画像の割合が、Gy:Gx(即ち、3:1)となる。
When the event is caused by the G sensor, the
次に、第2制御部201は、S2で取得された出力G(Gx、Gy)に応じて、対象となるCCDカメラの画像を選択する(S4)。例えば、図3の例では、車両1は前方からのみ衝撃を受け、その結果Gセンサ102の出力はGy31(正の値)のみであるので、第1CCDカメラ111の画像が選択される。また、図4の例では、車両1は右斜め前方から衝撃を受け、その結果Gセンサ102の出力はGy41(正の値)及びGx42(正の値)であるので、第1CCDカメラ111及び第2CCDカメラ112の画像が選択される。なお、車両1が後方から衝撃を受ければ、Gセンサ102の出力はGy(負の値)のみとなるので、第3CCDカメラ113の画像が選択され、車両1が左側方から衝撃を受ければ、Gセンサ102の出力はGx(負の値)となるので、第4CCDカメラ113の画像が選択されることとなる。なお、1台のCCDカメラのみを車両に配置した場合には、自動的に1台のCCDカメラの画像が選択されることとなる。
Next, the
次に、第2制御部201は、イベント発生時刻データ(Tp)を取得し(S5)、S4で選択されたCCDカメラの画像の内、イベント発生時刻Tpから所定時間Tr前の画像を特徴画像として選択する(S6)。所定時間Tr前の画像を選択するのは、衝撃が発生した発生時刻よりも少し前の画像の方が、より衝撃が発生する原因や状況を把握し易いためである。なお、所定時間Trは例えば、0.2秒と設定することが可能であるが、アプリケーションに応じて、0秒を含め最適な値を選択することができる。
Next, the
次に、第2制御部201は、S3で決定された合成割合に応じて、S6で選択された特徴画像を合成して、サムネイル画像(合成した画像を縮小化した画像)を作成し、表示部203に表示して(S7)、1つのイベントに関するサムネイル画像作成処理を終了する。
Next, the
図3の場合には、図6に示すフローにしたがって、第1CCDカメラ111で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像37を縮小化して、サムネイル画像37(図3(h)参照)を作成する。
In the case of FIG. 3, according to the flow shown in FIG. 6, the
図4の場合には、図6に示すフローにしたがって、第1CCDカメラ111で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像49と第2CCDカメラ112で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像50とが、S3で決定された合成割合(例えば、3:1)に応じて合成され、縮小化されてサムネイル画像51(図4(h)参照)が作成される。
In the case of FIG. 4, according to the flow shown in FIG. 6, among the images captured by the
なお、複数の特徴画像が選択された場合、複数の特徴画像を合成するのではなく、交互に表示するようなサムネイル画像を作成しても良い。また、表示時間比をGセンサ102の出力G(Gx、Gy)に応じて決めても良い。例えば、図4の例では、Gx:Gyが1:3であるから、表示時間も第1CCDカメラ111の特徴画像49が3秒に対して、第2CCDカメラ112の特徴画像50が1秒というように定めることができる。
When a plurality of feature images are selected, thumbnail images that are displayed alternately may be created instead of combining the plurality of feature images. The display time ratio may be determined according to the output G (Gx, Gy) of the
S1でイベント種類が第1操作部104の操作による場合、第2制御部201は、予め定められたCCDカメラの画像を選択する(S4)。例えば、図5の例では、第4CCDカメラ114の画像が選択される。
When the event type is determined by the operation of the
次に、第2制御部201は、イベント発生時刻(Tp)を取得し(S5)、S4で選択されたCCDカメラの画像の内、イベント発生時刻Tpから所定時間Tr前の画像を特徴画像として選択する(S6)。所定時間Tr前の画像を選択するのは、第1操作部104を操作した場合、動作にはタイムラグがあり、第1操作部が操作された時刻よりも少し前の画像の方が、より撮像したい画像に近い場合が多いためである。なお、所定時間Trは例えば、0.2秒と設定することが可能であるが、アプリケーションに応じて、0秒を含め最適な値を選択することができる。また、イベント種類によって動作のタイムラグが異なる場合が考えられるのでイベント種類に応じて、所定時間Trの値を変更するようにしても良い。
Next, the
次に、第2制御部201は、S6で選択された画像からサムネイル画像(画像を縮小化した画像)を作成し、表示部203に表示して(S7)、1つのイベントに関するサムネイル画像作成処理を終了する。
Next, the
図5の場合には、図6に示すフローにしたがって、第4CCDカメラ114で撮像した画像の内、時刻Tpより時間Tr(例えば、0.2秒)前に撮像された特徴画像58を縮小化してサムネイル画像58(図5(f)参照)を作成した。
In the case of FIG. 5, in accordance with the flow shown in FIG. 6, the
図7は、サムネイル画像の表示例を示す図である。 FIG. 7 is a diagram illustrating a display example of thumbnail images.
図7は、センタ端末200の表示部203に複数のイベントに関するサムネイル画像が表示された状態を示している。
FIG. 7 shows a state in which thumbnail images relating to a plurality of events are displayed on the
それぞれのイベント60は、Gセンサ102からの出力の合成重力加速度の絶対値の値61、イベントの特徴を示すサムネイル画像62、イベント発生時刻63を一つのセットとしている。
Each
なお、図7では、20個のイベントを表示しているが、表示個数はこれに限定されるものではなく、他の個数を選択することや、他の要素と合わせて表示させること等も可能である。 In FIG. 7, 20 events are displayed. However, the number of displays is not limited to this, and other numbers can be selected or displayed together with other elements. It is.
図8は、図7に示す複数のイベントの内の1つのイベントを再生する画面例を示す図である。 FIG. 8 is a diagram showing an example of a screen for reproducing one event among the plurality of events shown in FIG.
図7に示す複数のイベントの内、第2操作部204によって60として示すイベントを選択すると、図8の画面に切換わるものとする。
When the event indicated as 60 is selected by the
図8の画面では、第1CCDカメラ111で撮像した200枚の画像が、操作表示74(巻き戻し、再生、停止、早送り)何れかを選択することによって、表示領域70に順次切換わりながら表示される。また、同時に、第2CCDカメラ112で撮像した200枚の画像が表示領域71に順次切換わりながら表示され、第3CCDカメラ113で撮像した200枚の画像が表示領域72に順次切換わりながら表示され、第4CCDカメラ114で撮像した200枚の画像が表示領域73に順次切換わりながら表示される。なお、表示領域71〜73を選択することによって、選択された画像が表示領域70に拡大されて表示されるようにすることが好ましい。なお、図8に示す表示方法は一例であって、他の表示方法を選択することができる。
In the screen of FIG. 8, 200 images captured by the
図3の例において、Gセンサ102からの出力に応じてイベントが発生した場合には、イベント発生時刻データ(Tp)に応じて特徴画像が選択された。しかしながら、イベント発生時刻データのみでなく、ブレーキ操作開始時刻データ及びタイヤロックデータを用いて、特徴画像を選択することが可能である。
In the example of FIG. 3, when an event occurs according to the output from the
例えば、イベント発生時刻(Tp)時にブレーキ操作を行い且つタイヤロックされていた場合には、ブレーキ操作開始時刻の画像を特徴画像として選択し、イベント発生時刻(Tp)時にブレーキ操作を行い且つタイヤロックしていなかった場合には、イベント発生時刻の画像を特徴画像として選択するように制御することが可能である。タイヤロックしていた場合には、ブレーキ操作開始時刻に重大の状況が発生した可能性があるので、そのタイミングの画像が重要となるからである。 For example, when the brake operation is performed at the event occurrence time (Tp) and the tire is locked, the image at the brake operation start time is selected as the feature image, the brake operation is performed at the event occurrence time (Tp), and the tire is locked. If not, it is possible to control to select an image at the event occurrence time as a feature image. This is because when the tire is locked, a serious situation may have occurred at the brake operation start time, and the timing image is important.
上記の説明において、「画像」は、映像と静止画像との両方を含むものとする。また、「イベント」とは、撮像に値する特別な出来事をいい、例えば閾値加速度Gs以上の加速度を検出した場合等が該当する。 In the above description, “image” includes both video and still images. The “event” refers to a special event worthy of imaging, and corresponds to, for example, a case where an acceleration equal to or greater than a threshold acceleration Gs is detected.
10 メモリカード
100 ドライブレコーダ
101 第1制御部
102 Gセンサ
104 第1操作部
106 第1メモリ
111 第1CCDカメラ
112 第2CCDカメラ
113 第3CCDカメラ
114 第4CCDカメラ
200 センタ端末
201 第2制御部
203 表示部
204 第2操作部
DESCRIPTION OF
Claims (4)
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、
前記選択された特徴画像に基づいたサムネイル画像を表示する、ステップを有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とするサムネイル画像表示方法。 Obtain an image related to the event, the event occurrence time data and the event type data,
Based on said event occurrence time data and event type data, to select the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Displaying a thumbnail image based on the selected feature images, it has a step,
The predetermined time is changed according to the event type data.
A thumbnail image display method characterized by that.
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択する選択手段と、
前記選択された特徴画像に基づいたサムネイル画像を表示する表示手段と、を有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とするサムネイル画像表示装置。 An acquisition means for acquiring an image associated with an event, the event occurrence time data and the event type data;
Selecting means for selecting on the basis of the event occurrence time data and event type data, the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Have a display means for displaying a thumbnail image based on the selected feature images,
The predetermined time is changed according to the event type data.
A thumbnail image display device characterized by that.
前記イベント発生時刻データ及びイベント種類データに基づき、前記イベントが発生した時刻より所定時間前に対応した画像を特徴画像として選択し、
前記選択された特徴画像に基づいたサムネイル画像を表示し、
表示されたサムネイル画像が選択されると、該選択されたサムネイル画像に対応した特徴画像に対応する前記イベントと関連のある画像を再生表示する、ステップを有し、
前記所定時間は、前記イベント種類データに応じて変更される、
ことを特徴とする画像再生方法。 Obtain an image related to the event, the event occurrence time data and the event type data,
Based on said event occurrence time data and event type data, to select the previous SL image event corresponding to a predetermined time before the time point that occurs as a characteristic image,
Displaying a thumbnail image based on the selected feature image;
When displayed thumbnail image is selected, the image that are associated with the event corresponding to the characteristic image corresponding to the selected thumbnail image is reproduced and displayed, have a step,
The predetermined time is changed according to the event type data.
An image reproduction method characterized by the above.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007010469A JP4901498B2 (en) | 2007-01-19 | 2007-01-19 | Thumbnail image display method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007010469A JP4901498B2 (en) | 2007-01-19 | 2007-01-19 | Thumbnail image display method |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010058221A Division JP5036837B2 (en) | 2010-03-15 | 2010-03-15 | Image display method and image display system |
JP2010058287A Division JP2010182325A (en) | 2010-03-15 | 2010-03-15 | Image display method and image display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008176638A JP2008176638A (en) | 2008-07-31 |
JP4901498B2 true JP4901498B2 (en) | 2012-03-21 |
Family
ID=39703601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007010469A Active JP4901498B2 (en) | 2007-01-19 | 2007-01-19 | Thumbnail image display method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4901498B2 (en) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5355971B2 (en) * | 2008-09-16 | 2013-11-27 | シナノケンシ株式会社 | Driving information evaluation system |
JP5200231B2 (en) * | 2008-09-17 | 2013-06-05 | セイコーインスツル株式会社 | Image storage device |
JP5261737B2 (en) * | 2008-09-17 | 2013-08-14 | セイコーインスツル株式会社 | Image storage device |
JP5240768B2 (en) * | 2008-09-17 | 2013-07-17 | セイコーインスツル株式会社 | Image storage device |
JP2010183464A (en) * | 2009-02-06 | 2010-08-19 | Fujitsu Ten Ltd | Drive recorder |
JP5521398B2 (en) * | 2009-06-10 | 2014-06-11 | 日本電気株式会社 | In-vehicle video data processing apparatus, data processing system, and program |
JP5531556B2 (en) * | 2009-10-28 | 2014-06-25 | 株式会社島津製作所 | Image data processing apparatus and image data processing program |
JP5914121B2 (en) * | 2012-04-05 | 2016-05-11 | 矢崎エナジーシステム株式会社 | Drive recorder |
JP6554280B2 (en) * | 2014-11-28 | 2019-07-31 | 株式会社デンソーテン | Data processing apparatus, image processing method, and program |
JP6291681B2 (en) * | 2016-05-18 | 2018-03-14 | 株式会社ユピテル | Display control system, display control method, and program |
JP6582184B2 (en) * | 2018-01-23 | 2019-10-02 | 株式会社ユピテル | Display control system, display control method, and program |
JP7052613B2 (en) * | 2018-07-20 | 2022-04-12 | 株式会社Jvcケンウッド | Display control device, display control method and program |
JP6854538B2 (en) * | 2019-06-25 | 2021-04-07 | 株式会社ユピテル | Systems and programs |
JP2021170337A (en) * | 2019-07-09 | 2021-10-28 | 株式会社ユピテル | Display control system, display control method and program |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07304473A (en) * | 1994-05-13 | 1995-11-21 | Toyota Motor Corp | Image data recording device around vehicle |
JP2003085695A (en) * | 2001-09-13 | 2003-03-20 | Radias:Kk | Vehicle management system |
JP2004336443A (en) * | 2003-05-08 | 2004-11-25 | Sanyo Electric Co Ltd | Broadcasting reception, recording and reproduction apparatus |
JP4467448B2 (en) * | 2005-02-24 | 2010-05-26 | 三洋電機株式会社 | Mobile recording device |
-
2007
- 2007-01-19 JP JP2007010469A patent/JP4901498B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2008176638A (en) | 2008-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4901498B2 (en) | Thumbnail image display method | |
JP2010130114A (en) | Drive recorder | |
JP5057917B2 (en) | Drive recorder | |
US20100134623A1 (en) | Method of processing continuously recorded image, computer-readable medium for processing continuously recorded image, drive recorder and reproduction device | |
JP4859756B2 (en) | Image recording condition setting method in drive recorder | |
JP4439548B2 (en) | Drive recorder | |
JP5220788B2 (en) | Vehicle running status display method | |
JP2009087014A (en) | Drive recorder | |
JP2013235395A (en) | Display control system, and display control method and program | |
JP5036837B2 (en) | Image display method and image display system | |
KR101580567B1 (en) | Apparatus of recording event based image data | |
JP2009089022A (en) | Method for displaying vehicle's travel state | |
JP5424861B2 (en) | Drive recorder, recording method and program | |
JP2010182209A (en) | Drive recorder | |
JP7370446B2 (en) | In-vehicle video recording device and its control method | |
JP5602267B2 (en) | Vehicle running status display method | |
JP4439549B2 (en) | Drive recorder | |
JP6291681B2 (en) | Display control system, display control method, and program | |
JP2010146477A (en) | Drive recorder | |
JP2010182325A (en) | Image display method and image display device | |
JP6582184B2 (en) | Display control system, display control method, and program | |
JP4503062B2 (en) | Playback device | |
JP2021170337A (en) | Display control system, display control method and program | |
JP2010061671A (en) | Drive recorder | |
JP6899596B2 (en) | Display control system, display control method and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100315 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100601 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100723 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20101026 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110119 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20110124 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20110325 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111028 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4901498 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150113 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |