JP2011146860A - 画像再生装置及び画像記録再生装置 - Google Patents

Abstract

【課題】画像取得装置で記録した画像を再生する際に、使用者にとって必要度の低い画像をスキップして再生させることができる使いやすい装置を提供する。
【解決手段】画像取得装置１０で取得した画像を画像データとして記憶装置２０に記憶させるとともに、その画像データをスキップして表示装置３０に表示させる際の基準となる情報であって、画像取得装置１０で取得する画像に時間的に関連付けられた、再生画像データ以外の情報を、情報取得装置４０で取得し、記憶装置２０に記憶させる。そして、使用者が設定スイッチ６０で設定したスキップ開始時刻を取得し、スキップ開始時刻における情報（情報取得装置４０にて取得した情報）と、それに後続する情報とを時間的に近いものから順次比較して類似度を算出し、算出した類似度が所定の閾値以下となった時点まで、記憶装置２０に記憶された画像データをスキップさせて表示装置３０に表示させる。
【選択図】図１

Description

本発明は、カメラ等で撮影した記録画像の再生技術に関する。

従来、ドライブレコーダなどのように、車載カメラで取得した画像を長時間にわたって画像データとして記憶装置に記憶しておくデータ記録装置がある。このようなデータ記録装置では、長時間にわたって画像データを記憶させておくことができるので、記憶された画像データを再生して表示することにより、使用者は、車両の走行状態を目視確認しながら、何らかのイベント、例えば、車両の停止や発進、或いは事故などの発生や走行している道路のカーブの状態などを確認することができるようになっている（例えば特許文献１参照）。

特開２００９−７６０５０号公報

ところが、長時間にわたって記憶装置に画像データが記憶されているので、記憶されている画像データ中にどのようなイベントが発生しているのかを確認したい場合や走行中の道路の変化やドライバの行動の変化の状態を確認したい場合には、記憶されている画像データを長時間にわたって再生し、使用者が目視で確認しなければならず、使用者にとって使いづらいデータ記録装置となるという問題がある。
本発明は、こうした問題に鑑みなされたもので、画像取得装置で記録した画像を再生する際に、使用者にとって必要度の低い画像をスキップして再生させることができる使いやすい装置を提供することを目的とする。

この欄においては、発明に対する理解を容易にするため、必要に応じて「発明を実施するための形態」欄において用いた符号を付すが、この符号によって請求の範囲を限定することを意味するものではない。

上記「発明が解決しようとする課題」において述べた問題を解決するためになされた請求項１に記載の画像再生装置（５）は、画像取得装置（１０）で取得した画像データを記憶し、記憶した画像データに基づいて表示する表示手段を具備した画像再生装置（５）であって、設定手段（６０）及び制御手段（５０）を備えている。

制御手段（５０）は、画像データの再生中に、画像取得装置（１０）で取得した画像データと時間的に関連付けられた、再生画像データ以外の情報を取得・記憶する情報取得装置（４０）から情報を取得し、設定手段（６０）で設定されたスキップ開始時点における情報取得装置（４０）から取得した情報と、それに後続する情報とを時間的に近いものから順次比較して類似度を求め、類似度が所定の閾値以下となった時点から時間的に対応する画像データを表示手段（３０）に表示する。

このような、画像再生装置（５）によれば、データを再生する際に使用者にとって必要度が低い画像をスキップして再生させることができる。以下、説明する。
上記画像再生装置（５）では、画像取得装置（１０）で取得され、画像記憶手段（２０）に記憶された画像データの再生中に、画像取得装置（１０）と時間的に関連付けられた、再生画像データ以外の情報が情報取得装置（４０）から取得される。

そして、設定手段（６０）で設定されたスキップ開始時点における情報取得装置（４０）から取得した情報と、それに後続する情報とを時間的に近いものから順次比較して類似度が求められる。

求められた類似度が所定の閾値以下となった時点から時間的に対応する画像データが表示手段（３０）に表示される。
つまり、設定手段（６０）で設定されたスキップ開始時点から、情報の類似度が所定の値以下となる時点まで、画像データがスキップされ、スキップ後の画像データが表示手段（３０）に表示される。

ここで、スキップ開始時点の情報に対して、類似度が閾値よりも大きい情報とは、変化が少ない情報であることを意味している。さらに、情報取得手段（４０）から入力された情報は、画像取得装置（１０）で取得された画像に時間的に関連付けられた情報であり、かつ、画像記憶手段（２０）に記憶された画像データを表示手段（３０）で表示する際に、画像データをスキップして表示させる際の基準となる情報である。

したがって、スキップ開始時点から情報の類似度が所定の閾値以下となった時点まで、入力された画像データをスキップさせて表示させれば、画像データの表示をする際に基準となる情報の変化が少ない部分をスキップして表示することができることになる。

一般的に画像を再生させる場合には、画像データの表示をする際に基準となる情報の変化の少ない画像は、使用者にとって必要度が少ない場合が多い。したがって、その部分の画像を、使用者が設定したスキップ開始時点からスキップすることにより、使用者は必要度が少ない画像を見る必要がなくなるので、使用者にとって使いやすい画像再生装置（５）とすることができる。

ところで、画像を表示する際に画像データをスキップするだけでなく、スキップした画像データを削除して記憶しておくと、後で再度再生する場合に使用者にとって必要度の低い画像データが再生されないので便利である。

そこで、請求項２に記載のように、制御手段（５０）は、スキップ開始時点から類似度が所定の閾値以下となった時点までの画像を削除し、画像記憶手段（２０）に記憶させるようにするとよい。

このようにすると、スキップした画像データが削除された状態で画像記憶手段（２０）に記憶されるので、後で再度再生する場合に必要度の低い画像データが再生されないので便利であり、また、画像記憶手段（２０）に記憶させる画像データの容量を小さくすることができる。

ここで、スキップした画像データを削除した状態で記憶手段に記憶する場合、画像取得装置（１０）で取得し、記憶した画像データの記憶領域に記憶（いわゆる上書き）してもよいし、別の記憶領域や別の記憶手段に記憶してもよい。

また、制御手段（５０）の類似度算出工程における情報の類似度の求め方には種々の方法があるが、請求項３に記載のように、情報取得手段（４０）から入力された情報を所定の時間長のフレームで区切り、その区切ったフレームごとに情報の特徴量を算出し、算出した特徴量をフレームごとに比較して類似度を求めるようにするとよい。

このようにすると、所定の時間長を有するフレームを単位として情報の特徴量を算出することができるので、従来の特徴量算出方法を用い容易に情報の特徴量を算出することができる。

また、類似度算出工程における特徴量は、請求項４に記載のように、フレームごとの特徴量を時系列アクティブ探索法に用いられるヒストグラム特徴とし、類似度をヒストグラム特徴間の類似度尺度であるヒストグラム重なり率であるようにすると、比較的容易で正確に情報の類似度を算出することができる。

ところで、従来、データ記録装置として、イベント起動型のものがある。このイベント起動型のデータ記録装置では、発生したイベントをトリガとして画像の記録を開始するため、イベントを正確に取得できない場合、例えば、加速度センサで事故の衝撃を取得して画像の記録を開始するような場合、加速度センサで検出した加速度の変化が想定よりも少なかったときに、加速度センサによる事故の衝撃が検出できず、画像データが記憶されないようなケースが発生するという問題がある。

一方、イベントを取得しないで画像を記録する場合には、長時間にわたって記憶装置に画像データが記憶されることになる。したがって、記録した画像中にどのようなイベントが発生しているのかを確認したい場合には、記録した画像を長時間にわたって使用者が目視で確認しなければならず、使用者にとって使いづらいデータ記録装置となるという問題がある。

この問題を解決するためには、請求項５に記載の画像記録再生装置のようにするとよい。つまり、請求項１〜請求項４の何れかに記載の画像再生装置（５）、画像取得装置（１０）、画像記憶手段（２０）及び情報取得手段（４０）を備えるようにする。

画像取得装置（１０）は、画像を取得するものであり、画像記憶手段（２０）は、画像取得装置（１０）で取得した画像を画像データとして記憶し、その記憶した画像データを画像再生装置（５）へ出力するものである。

また、情報取得手段（４０）は、画像記憶手段（２０）に記憶された画像データを再生し、画像再生装置（５）の表示手段（３０）で表示する際に、画像データをスキップして表示させる際の基準となる情報であって、画像取得装置（１０）で取得する画像に時間的に関連付けられた、再生画像データ以外の情報を取得し、画像再生装置（５）へ出力するものである。

このような画像記録再生装置（１）では、画像取得装置（１０）で取得された画像が画像データとして記憶される。したがって、使用者が必要とする画像を確実に記録することができる。

また、画像を再生する際には、使用者にとって必要度が低い画像データをスキップして表示することができる使いやすい画像記録再生装置（１）とすることができる。
さらに、請求項６に記載のように、画像取得装置（１０）は、少なくとも車両前方の画像を含む車両の周囲画像を取得可能に車両に備えられ、情報取得手段（４０）は、車両走行状態を直接的又は間接的に示す情報を取得するようにするとよい。

このようにすると、車両走行状態を示す情報のスキップ開始時点から後の類似度が所定の閾値以下となった場合、つまり、車両走行状態を示す情報の変化が所定の閾値を上回った場合に、少なくとも車両前方の画像を含む車両の周囲画像がスキップされて表示される画像再生装置（５）となる。

換言すれば、画像取得装置（１０）で取得した画像をスキップ表示することができる使いやすいドライブ画像の再生装置とすることができる。
ここで、「車両走行状態を直接的又は間接的に示す情報」とは、以下の（１）〜（６）に示す情報を意味している。

（１）車両位置、車両速度、車両加速度などの車両の走行中の状態量を示す情報（車両走行状態を直接的に示す情報）
（２）車両のステアリング角度、アクセル踏み込み量、ブレーキ踏み込み量などの運転者が操作する車両の操作量を示す情報（車両走行状態を間接的に示す情報）
（３）運転者の心拍数、皮膚電位、発汗量、呼吸数などの生体情報（車両走行状態を間接的に示す情報）
（４）車内における運転者と同乗者との会話、車載装置に対する指定発話などの音声情報（車両走行状態を間接的に示す情報）
（５）ＧＰＳ情報、車車間通信情報、レーダを用いた車間距離情報、道路交通情報などの車両周囲環境情報（車両走行状態を間接的に示す情報）
（６）車室内の画像情報、運転者の表情画像など再生対象以外の画像情報（車両走行状態を間接的に示す情報）

第１実施形態における画像記録再生装置の概略の構成を示すブロック図である。 制御処理の流れを示すフローチャートである。 スキップ表示処理の流れを示すフローチャートである。 特徴量算出処理の流れを示すフローチャートである。 特徴量算出処理の内容を示す説明図である。 類似度算出処理の流れを示すフローチャートである。 類似度算出処理の内容を示す説明図である。 画像データの表示をする際に基準となる情報に基づいて、画像データを、スキップして表示する様子の例を示す図である。

以下、本発明が適用された実施形態について図面を用いて説明する。なお、本発明の実施の形態は、下記の実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の形態を採りうる。
［第１実施形態］
図１は、本発明が適用された画像記録再生装置１の概略の構成を示すブロック図である。

画像記録再生装置１は、画像再生装置５、画像取得装置１０、記憶装置２０及び情報取得装置４０を備えている。
画像取得装置１０は、画像を取得するためのカメラであり、ＣＣＤカメラ、撮像管を用いたカメラ、赤外線カメラなどであり、少なくとも車両前方の画像を含む車両の周囲画像を取得可能に車両の前部ボンネットや車室内の前部などに備えられている。

記憶装置２０は、画像取得装置１０で取得した画像を画像データとして記憶するとともに情報取得装置４０で取得した情報を記憶し、その記憶した画像データ及び情報を画像再生装置５へ出力する装置であり、ハードディスク装置や大容量の半導体記憶装置である。

情報取得装置４０は、記憶装置２０に記憶された画像データを、画像再生装置５の表示装置３０で表示する際に、画像データをスキップして表示させる際の基準となる情報であって、画像取得装置１０で取得する画像に時間的に関連付けられた、再生画像データ以外の情報を取得し、画像再生装置５へ出力する装置である。

情報取得装置４０は、車両速度センサ４３、進行方向加速度センサ４５、横方向加速度センサ４６、ブレーキ踏力センサ４１、アクセル踏力センサ４２、ステアリング角センサ４４を備えている。

車両速度センサ４３は、車両の速度を検出するための速度計であり、進行方向加速度センサ４５は、車両の進行方向の加速度を検出するように車両に設置された加速度計であり、横方向加速度センサ４６は、車両の進行方向に対して水平面直角方向の加速度を検出するように車両に設置された加速度計である。

ブレーキ踏力センサ４１は、運転者がブレーキペダルを踏む力を検出するためにブレーキペダルに設置された圧力センサであり、アクセル踏力センサ４２は、運転者がアクセルペダルを踏む力を検出するためにアクセルペダルに設置された圧力センサである。

ステアリング角センサ４４は、ステアリングの角度を検出するポテンショメータなどの角度センサである。
つまり、情報取得装置４０は、画像データをスキップして表示させる際の基準となる情報として、車両の走行状態を直接的に示す情報である車両の速度（車両速度センサ４３にて検出）、車両の進行方向の加速度（進行方向加速度センサ４５にて検出）及び車両の横方向の加速度（横方向加速度センサ４６にて検出）を検出している。

また、車両走行状態を間接的に示す情報として、ブレーキ踏力（ブレーキ踏力センサ４１にて検出）、アクセル踏力（アクセル踏力センサ４２にて検出）及び車両のステアリング角（ステアリング角センサ４４にて検出）を検出している。

画像再生装置５は、表示装置３０、制御装置５０及び設定スイッチ６０を備えている。
表示装置３０は、画像取得装置１０で取得した画像を画像データとして記憶するための記憶装置２０から画像データを入力して表示する装置であり、液晶ディスプレイ、有機ＥＬディスプレイ或いはＣＲＴディスプレイ等の表示装置である。

制御装置５０は、図示しないＣＰＵ、ＲＯＭ、ＲＡＭ及びＩ／Ｏを備えており、ＲＯＭに格納された制御処理プログラムにより以下の（ア）〜（エ）に示す処理を実行する。
（ア）記憶装置２０に記憶された画像データを表示装置３０で表示する際に、画像データをスキップして表示させる際の基準となる情報であって、画像取得装置１０で取得する画像に時間的に関連付けられた、再生画像データ以外の情報を取得する情報取得装置４０において取得された情報を入力する（データ入力処理工程）。

具体的には、情報取得装置４０から入力した情報（前述の車両の速度等）を、同時刻に画像取得装置１０から取得した画像データとともに記憶装置２０に記憶させる。
このように、情報取得装置４０から入力した情報を同時刻に画像取得装置１０から取得した画像データとともに記憶装置２０に記憶させることにより、情報取得装置４０から入力する情報と画像取得装置１０で取得する画像とを時間的に関連付けるのである。

（イ）記憶装置２０から入力された画像データを表示装置３０で表示する際に、画像データをスキップさせて表示する場合のスキップ開始時点において、情報取得装置４０から入力された情報と、それに後続する情報とを時間的に近いものから順次比較して類似度を求める（類似度算出処理工程）。

ここで、類似度は、情報取得装置４０から入力された情報を所定の時間長のフレームで区切り、その区切ったフレームごとに情報の特徴量を算出し、その算出した特徴量をフレームごとに比較することによって求める。

具体的には、特徴量は、時系列アクティブ探索法に用いられるヒストグラム特徴であり、類似度は、ヒストグラム特徴間の類似度尺度であるヒストグラム重なり率である。
（ウ）（イ）において求めた類似度が所定の閾値以下となった時点まで、記憶装置２０から入力された画像データをスキップ開始時点からスキップさせて表示させる（スキップ処理工程）。

（エ）画像データのスキップは、設定スイッチ６０の状態により行う。つまり、設定スイッチ６０の状態を取得し、設定スイッチ６０がスキップ開始状態になっていた場合、その時刻をスキップ開始時点として、記憶装置２０に記憶された画像データのスキップを行う。

設定スイッチ６０は、画像データのスキップ開始時点を使用者が設定するためのスイッチであり、プッシュスイッチ、レバースイッチなど使用者が操作している間のみオンとなるスイッチである。

（制御装置５０における処理）
次に、図２に基づいて、制御装置５０において実行される制御処理について説明する。図２は、制御処理の流れを示すフローチャートである。

制御処理は図２に示すように、Ｓ１００において、使用者が再生したいとして表示装置３０に入力した画像ファイルの名称（再生画像ファイル名）が取得され、続くＳ１０５では、Ｓ１００において取得された再生画像ファイル名の画像データの一部である再生開始時刻データが記憶装置２０から取得される。

続くＳ１１０では、Ｓ１０５において取得された再生開始時刻データに再生開始時刻の指定があるか否かが判定される。そして、再生開始時刻の指定がないと判定された場合（Ｓ１１０：Ｎｏ）、処理がＳ１１５へ移行され、再生開始時刻の指定があると判定された場合（Ｓ１１０：Ｙｅｓ）、処理がＳ１２０へ移行される。

Ｓ１１５では、記憶装置２０の再生画像ファイルの先頭を起点として画像データが読み出される。また、Ｓ１２０では、記憶装置２０の再生画像ファイルから再生開始時刻を起点に画像データが読み出される。

続くＳ１２５では、Ｓ１１５又はＳ１２０において読み出された画像データが表示装置３０へ表示される。
続くＳ１３０では、Ｓ１２５において表示されている画像データファイルが終端となったか否かが判定される。そして、ファイル終端であると判定された場合（Ｓ１３０：Ｙｅｓ）、処理がＳ１５５へ移行され、ファイル終端でないと判定された場合（Ｓ１３０：Ｎｏ）には、処理がＳ１３５へ移行される。

Ｓ１３５では、設定スイッチ６０の状態、つまり、表示装置３０で表示させている画像データをスキップさせるか否かのどちらに設定スイッチ６０が設定されているかが取得される。

続くＳ１４０では、Ｓ１３５において取得された設定スイッチ６０の状態が画像データをスキップするように設定されているか否かが判定される。そして、スキップ設定がされている場合（Ｓ１４０：Ｙｅｓ）、処理がＳ１４５へ移行され、スキップ設定がされていない場合（Ｓ１４０：Ｎｏ）には、処理がＳ１２５へ戻され、画像データの表示が継続される。

Ｓ１４５では、Ｓ１３５においてスキップ設定された時刻を始点に記憶装置２０から情報が読み出され、続くＳ１５０においてスキップ表示がなされる。この処理は、スキップ表示処理として詳細を後述する。そして、Ｓ１５０におけるスキップ表示処理がなされた後、処理がＳ１２５へ戻される。

Ｓ１５５では、表示装置３０にファイル終端表示がなされた後、本制御処理が終了される。
（スキップ表示処理）
次に、図３に基づき、スキップ表示処理について説明する。図３は、スキップ表示処理の流れを示すフローチャートである。

スキップ表示処理では、図３に示すように、Ｓ２００において、スキップ開始時刻からｘ秒分の情報から特徴量が算出される。Ｓ２００において算出される特徴量を参照特徴量と呼ぶ。また、この処理を特徴量算出処理として詳細を後述する。

続くＳ２０５では、特徴量の算出区間をｙ秒ずらして、算出した特徴量とＳ２００において算出した参照特徴量とを比較し、類似度を算出する。この処理は、類似度算出処理として詳細を後述する。

続くＳ２１０では、Ｓ２０５において算出した類似度が所定の閾値以下か否かが判定される。そして、類似度が閾値以下であると判定された場合（Ｓ２１０：Ｙｅｓ）、処理がＳ２１５へ移行され、類似度が閾値より大きいと判定された場合（Ｓ２１０：Ｎｏ）には、処理が２０５へ移行され、特徴量の算出区間をさらにｙ秒ずらして、参照特徴量との間で類似度が算出される。

Ｓ２１５では、所定の閾値以下となった時刻がスキップする時刻として設定され、続くＳ２２０では、スキップ開始時刻から、Ｓ２１５において設定された時刻まで画像データがスキップされて表示された後、処理が図２に示す制御処理へ戻される。

（特徴量算出処理）
次に、図４及び図５に基づき、特徴量算出処理について説明する。図４は、特徴量算出処理の流れを示すフローチャートであり、図５は、特徴量算出処理の内容を示す説明図である。なお、図５においては、説明を分かりやすくするため、情報取得装置４０で取得する情報のうち、ブレーキ踏力、アクセル踏力、車速、ステアリング角のみを示している。

特徴量算出処理では、図４に示すように、Ｓ３００において、情報取得装置４０の各センサから得られた複数の情報である、ブレーキ踏力、アクセル踏力、車速及びステアリング角の値を時刻ごとに並べたものがベクトル系列と見なされ、図５（ａ）においてαで示されるようにベクトル量子化され、符号系列化される。

つまり、ある時刻において各センサで得られた４つの情報を１つのベクトルとみなし、そのベクトルがどの分類に属しているかによって、ベクトルに分類番号を付す。このときに付された番号を時系列順に並べたものが図５（ａ）の下欄に記載されている符号系列である。

このようにして、ある時刻の複数（図５では４つ）の情報をベクトルとみなして分類していくことにより符号系列化するのである。
続く、Ｓ３０５では、Ｓ３００においてベクトル量子化されてできた符号系列に、図５（ａ）においてβで示されるように指定長（ｘ秒）の窓がかけられ、続くＳ３１０では、Ｓ３０５においてかけられた各窓内の符号の出現頻度のヒストグラムが算出される。

つまり、図５（ｂ）の横軸はベクトルの分類番号を示しており、縦軸は、その算出窓内における各分類番号のベクトルが現れた頻度を示している。
このようにして算出されたヒストグラムが、ヒストグラム特徴（Ｈ_X）とされた後、処理が図３に示すスキップ表示処理へと戻される。

（類似度算出処理）
次に、図６及び図７に基づき、類似度算出処理について説明する。図６は、類似度算出処理の流れを示すフローチャートであり、図７は、類似度算出処理の内容を示す説明図である。

類似度算出処理では、Ｓ４００において照合する２つのヒストグラム特徴量Ｈ_AとＨ_Bの各符号の出現回数の小さい方の総和がとられる。
具体的には、図７の（ａ）に示すスキップ開始時刻における参照特徴量であるヒストグラム特徴量Ｈ_Aと、図７の（ｂ）に示す、ｙ秒ずらして算出した特徴量であるヒストグラム特徴量Ｈ_Bとが、図７の（ｃ）に示すように重ね合わせられる。そして、２つのヒストグラムの重なりのある部分（図７（ｃ）の黒塗りの部分）が求められる。

続くＳ４０５では、Ｓ４００において求められたヒストグラム特徴Ｈ_AとＨ_Bの各符号の出現回数の小さい方の総和、つまり２つのヒストグラムの重なりのある部分（図７（ｃ）の黒塗りの部分）がヒストグラムの総度数で割られ、ヒストグラムの重なり率として算出された後、処理が図３に示すスキップ表示処理へと戻される。

（画像記録再生装置１の特徴）
以上に説明した画像記録再生装置１では、画像取得装置１０で取得された画像が画像データとして記憶装置２０に記憶される。したがって、使用者が必要とする画像を確実に記録することができる。

また、記憶装置２０から入力された画像データを表示装置３０で表示する際に、画像データをスキップさせて表示する場合のスキップ開始時点において、情報取得装置４０から入力された情報と、それに後続する情報とを時間的に近いものから順次比較して類似度が求められ、情報間の類似度が所定の閾値以下となった時点が求められる。

そして、スキップ開始時点から情報の類似度が所定の閾値以下となった時点まで、入力された画像データをスキップさせて表示させているので、画像データの表示をする際に基準となる情報の変化が少ない部分をスキップして表示することができる。

このように画像データを、画像データの表示をする際に基準となる情報に基づいてスキップして表示する様子を図８に示す。図８では、画像データとして、車両の前方を撮影できるように車室内に搭載したカメラ（画像取得装置１０に相当）で取得した画像データを用い、スキップの基準となる情報として、ブレーキ画像データと同時に取得した、ブレーキ踏力、アクセル踏力、車速、ステアリング角、進行方向加速度及び横方向加速度を用いている。

図８において、使用者が画像をスキップしたいと考え、設定スイッチ６０（図１参照）を操作した時点であるＡ点から約８０秒間は、ブレーキ踏力から横方向加速度までの情報は変化しておらず、車両は停止していることが分かる。

そして、車両のブレーキが解除され、アクセルが踏み込まれたＢ点、つまり車両が動き出した状態となったＢ点では、ブレーキ踏力から横加速度までの情報が、車両の動きだしとともに変化している。

この場合、前述したように、ブレーキ踏力から横加速度までをベクトル系列とし、その類似度を求めると、Ａ点を基準特徴量として、Ｂ点までは類似度が高く、Ｂ点において類似度が低くなり閾値を下回ることになる。

したがって、画像データは、Ａ点からＢ点までスキップされて、Ｂ点の画像から表示されることになる。
このように、画像を再生させる場合には、画像データの表示をする際に基準となる情報の変化の少ない画像は、使用者にとって必要度が少ない場合が多い。したがって、その部分の画像をスキップすることにより、使用者は必要度が少ない画像を見ることが必要なくなるので、使いやすい画像記録再生装置１とすることができる。

また、画像記録再生装置１は、少なくとも車両前方の画像を含む車両の周囲画像を取得可能に車両に備えられている。
また、情報取得装置４０において、車両走行状態を直接的に示す情報として車両の速度（車両速度センサ４３にて検出）、車両の進行方向の加速度（進行方向加速度センサ４５にて検出）、車両の横方向の加速度（横方向加速度センサ４６にて検出）、また、車両走行状態を間接的に示す情報として、ブレーキ踏力（ブレーキ踏力センサ４１にて検出）、アクセル踏力（アクセル踏力センサ４２にて検出）、車両のステアリング角（ステアリング角センサ４４にて検出）を検出している。

したがって、車両走行状態を示す情報の変化が所定の閾値を上回った場合に、少なくとも車両前方の画像を含む車両の周囲画像がスキップされて表示される画像記録再生装置１となる。換言すれば、画像取得装置１０で取得した画像をスキップ表示することができる使いやすいドライブ画像の再生記録装置とすることができる。

また、画像データのスキップ開始時点を使用者が設定するための設定スイッチ６０を備えており、設定スイッチ６０により設定された画像データのスキップ開始時点から記憶装置２０に記憶された画像データのスキップを開始するようにしている。したがって、使用者の設定によりスキップ開始時点が設定されるので、使用者にとって使いやすい画像記録再生装置１となる。

また、情報取得装置４０から入力された情報を所定の時間長のフレームで区切り、その区切ったフレームごとに情報の特徴量を算出し、算出した特徴量をフレームごとに比較して類似度を求めている。つまり、所定の時間長を有するフレームを単位として情報の特徴量を算出することができるので、従来の特徴量算出方法を用い容易に情報の特徴量を算出することができる。

さらに、フレームごとの特徴量を時系列アクティブ探索法に用いられるヒストグラム特徴とし、類似度をヒストグラム特徴間の類似度尺度であるヒストグラム重なり率であるようにしているので、比較的容易で正確に情報の類似率を算出することができる。

なお、本第１実施形態において、図２に示すＳ１４５が、請求項１において、画像データの再生中に、画像取得装置とで取得された画像データが時間的に関連づけられた、再生画像データ以外の情報を取得・記憶する情報取得装置４０から情報を取得する処理（情報取得処理）に相当する。

また、図２に示すＳ２００（図４に示す特徴量算出処理及び図６に示す類似度算出処理）が、請求項１において、設定手段（６０）設定されたスキップ開始時点における情報取得手段から取得した情報と、それに後続する情報とを時間的に近いものから順次比較して類似度を求める処理（類似度算出処理）に相当する。

また、図２に示すＳ１４５（図３に示すスキップ表示処理）が、請求項１において、 類似度が所定の閾値以下となった時点から時間的に対応する画像データを表示装置に表示する処理（スキップ表示処理）に相当する。
［第２実施形態］
次に、第１実施形態の画像記録再生装置１において、スキップした画像データを削除して記憶装置２０に記憶させるようにした第２実施形態について説明する。

なお、第２実施形態の画像記録装置の構成は第１実施形態における画像記録再生装置１と同じであるので、同じ構成には同じ符号を付し、その説明を省略し、異なる部分（制御装置５０における処理）について説明する。

第２実施形態における画像記録再生装置では、制御装置５０において、記憶装置２０から入力された画像データをスキップ開始時点から類似度が所定の閾値以下となった時点までスキップさせる際に、入力された画像データのうち、スキップ開始時点から類似度が所定の閾値以下となった時点までの画像を削除して、記憶装置２０に出力し記憶させる。

具体的には、図２に示す制御処理のフローチャートのＳ１４５（スキップ表示処理）において、記憶装置２０からスキップ設定時刻を始点に情報を読み出しスキップ表示するとともに、スキップした部分の画像データを記憶装置２０から削除する。

さらに具体的には、図３に示すスキップ表示処理のフローチャートのＳ２２０の次に、スキップ開始時刻からＳ２１５において設定された時刻までの画像データを削除する工程を挿入するのである。

このような第２実施形態における画像記録再生装置では、画像を表示する際に画像をスキップするだけでなく、スキップした画像データが削除された状態で記憶装置２０に記憶されるので、後で再度再生する場合に使用者にとって必要度の低い画像データが再生されない。したがって、使用者にとって便利である。また、記憶装置２０に記憶させる画像データの容量を小さくすることができる。

ここで、スキップした画像データを削除した状態で記憶装置２０に記憶する場合、画像取得装置１０で取得し、記憶した画像データの記憶領域に記憶（いわゆる上書き）してもよいし、別の記憶領域や別の記憶手段に記憶してもよい。

なお、本第２実施形態において、図３に示すスキップ表示処理のフローチャートのＳ２２０の次に挿入する、スキップ開始時刻からＳ２１５において設定された時刻までの画像データを削除する工程が、画像データ削除処理工程に相当する。

［その他の実施形態］
以上、本発明の実施形態について説明したが、本発明は、本実施形態に限定されるものではなく、種々の態様を採ることができる。

（１）上記実施形態では、車両走行状態を直接的に示す情報として車両の速度（車両速度センサ４３にて検出）、車両の進行方向の加速度（進行方向加速度センサ４５にて検出）、車両の横方向の加速度（横方向加速度センサ４６にて検出）、また、車両走行状態を間接的に示す情報として、ブレーキ踏力（ブレーキ踏力センサ４１にて検出）、アクセル踏力（アクセル踏力センサ４２にて検出）、車両のステアリング角（ステアリング角センサ４４にて検出）を検出したが、以下に示すような他の情報を検出するようにしてもよい。

例えば、
（ａ）車両位置（車両走行状態を直接的に示す情報）
（ｂ）運転者の心拍数、皮膚電位、発汗量、呼吸数などの生体情報（車両走行状態を間接的に示す情報）
（ｃ）車内における運転者と同乗者との会話、車載装置に対する指定発話などの音声情報（車両走行状態を間接的に示す情報）
（ｄ）ＧＰＳ情報、車車間通信情報、レーダを用いた車間距離情報、道路交通情報などの車両周囲環境情報（車両走行状態を間接的に示す情報）
（ｅ）車室内の画像情報、運転者の表情画像など再生対象以外の画像情報（車両走行状態を間接的に示す情報）
（２）上記実施形態では、画像再生装置５、画像取得装置１０、記憶装置２０、情報取得装置４０を一体化して、画像記録再生装置１としたが、画像再生装置５のみを単独の装置として使用しても、上記実施形態における画像記録再生装置と同様の効果を得ることができる。

つまり、画像取得装置１０で取得された画像が画像データとして、外付けの記憶装置２０に記憶させ、情報取得装置４０で検出された情報を記憶装置２０に記憶させるようにする。

ここで、記憶装置２０は、ハードディスク以外に記憶媒体（ＤＶＤ、ブルーレイディスク、ＶＴＲテープなど）を取り外すことができる装置であり、その記憶媒体に画像データや情報取得装置４０で取得された情報が記憶されている。

そして、この記憶媒体から画像データ及び情報を画像再生装置５に入力し、スキップ表示やスキップ記録を行うようにしてもよいのである。
（３）上記実施形態では、類似度をヒストグラム特徴間の類似度尺度であるヒストグラム重なり率で求めたが、情報取得装置４０にて求めた情報のフレーム間においてＤＰマッチング（動的計画法）により類似度を求めてもよいし、フレーム内の情報をベクトルとみなして、フレーム間のユークリッド距離やマハラノビス距離で類似度を表現してもよい。

１…画像記録再生装置、５…画像再生装置、０…画像取得装置、２０…記憶装置、３０…表示装置、４０…情報取得装置、４１…ブレーキ踏力センサ、４２…アクセル踏力センサ、４３…車両速度センサ、４４…ステアリング角センサ、４５…進行方向加速度センサ、４６…横方向加速度センサ、５０…制御装置、６０…設定スイッチ。

Claims (6)

1. 画像取得装置で取得した画像データを記憶し、前記記憶した画像データに基づいて表示する表示手段を具備した画像再生装置であって、
   前記画像データを再生する際にスキップ開始する時点を設定する設定手段と、
   前記画像データの再生制御を行う制御手段と、
   を備え、
   前記制御手段は、
   前記画像データの再生中に、前記画像取得装置で取得した画像データと時間的に関連付けられた、前記再生画像データ以外の情報を取得・記憶する情報取得装置から前記情報を取得し、
   前記設定手段で設定された前記スキップ開始時点における前記情報取得装置から取得した情報と、それに後続する情報とを時間的に近いものから順次比較して類似度を求め、
   前記類似度が所定の閾値以下となった時点から時間的に対応する画像データを前記表示手段に表示することを特徴とする画像再生装置。
2. 請求項１に記載の画像再生装置において、
   前記制御手段は、
   前記スキップ開始時点から前記類似度が所定の閾値以下となった時点までの画像を削除し、前記画像記憶手段に記憶させることを特徴とする画像再生装置。
3. 請求項１又は請求項２に記載の画像再生装置において、
   前記類似度算出工程において、前記制御手段は、
   前記情報取得手段から入力された前記情報を所定の時間長のフレームで区切り、その区切ったフレームごとに前記情報の特徴量を算出し、その算出した特徴量をフレームごとに比較して類似度を求めることを特徴とする画像再生装置。
4. 請求項３に記載の画像再生装置において、
   前記類似度算出工程における前記特徴量は、
   時系列アクティブ探索法に用いられるヒストグラム特徴であり、
   前記類似度は、
   前記ヒストグラム特徴間の類似度尺度であるヒストグラム重なり率であることを特徴とする画像再生装置。
5. 請求項１〜請求項４のいずれか１項に記載の画像再生装置と、
   画像を取得する画像取得装置と、
   前記画像取得装置で取得した画像を画像データとして記憶し、その記憶した画像データを前記画像再生装置へ出力する画像記憶手段と、
   前記画像記憶手段に記憶された画像データを再生し、前記画像再生装置の前記表示手段で表示する際に、前記画像データをスキップして表示させる際の基準となる情報であって、前記画像取得装置で取得する画像に時間的に関連付けられた、前記再生画像データ以外の情報を取得し、前記画像再生装置へ出力する情報取得手段と、
   を備えたことを特徴とする画像記録再生装置。
6. 請求項５に記載の画像記録再生装置において、
   前記画像取得装置は、
   少なくとも前記車両前方の画像を含む車両の周囲画像を取得可能に前記車両に備えられ、
   前記情報取得手段は、
   前記車両走行状態を示す情報を直接的又は間接的に取得することを特徴とする画像記録再生装置。