JP4516111B2 - 画像編集装置、画像編集方法、画像編集プログラムおよびコンピュータに読み取り可能な記録媒体 - Google Patents

Description

この発明は、写真などの画像データを編集する画像編集装置、画像編集方法、画像編集プログラムおよびコンピュータに読み取り可能な記録媒体に関する。ただし、この発明の利用は、上述した画像編集装置、画像編集方法、画像編集プログラムおよびコンピュータに読み取り可能な記録媒体に限られない。

近年、デジタルスチルカメラ（Ｄｉｇｉｔａｌ Ｓｔｉｌｌ Ｃａｍｅｒａ：ＤＳＣ）やデジタルビデオカメラ（Ｄｉｇｉｔａｌ Ｖｉｄｅｏ Ｃａｍｅｒａ：ＤＶＣ）などの普及に伴って、撮影した静止画や動画の画像データを用いた、いわゆる電子アルバムを作成し、ウェブページ上などで容易に公開することを可能にした電子アルバム作成装置が提供されている。このような電子アルバム作成装置では、つぎのように電子アルバムが作成される。

具体的には、たとえばインターネットに接続されたサーバ内に、ディジタル画像データを編集して電子アルバムを作成するプログラムソフトを備え、該サーバは、ディジタルカメラで撮影された画像データと、その画像の撮影時間データと、モバイル端末で取得された位置データと、その位置データを取得したときの時間データとを受信可能とされ、これら受信したそれぞれのデータを関連付けて、プログラムソフトにより電子アルバムを作成する（たとえば、下記特許文献１参照。）。

特開２００２−１８３７４２号公報

しかしながら、上記特許文献１に記載された電子アルバム作成装置では、サーバ内のプログラムソフトにより、たとえば画像データの撮影時刻と撮影場所などを関連付けて電子アルバムを作成するため、サーバとの接続環境の確立が必須であるとともに装置構成全体が複雑になるという問題が一例として挙げられる。

請求項１に記載の発明にかかる画像編集装置は、車両の内部あるいは外部の画像を撮影する撮影手段と、前記撮影手段によって撮影された前記画像を撮影した日時に関する情報を含み、前記画像をデータ化した画像データの入力を受け付ける入力手段と、移動体が移動した経路および時刻に関する情報を取得する取得手段と、前記入力手段によって受け付けられた前記画像データの前記日時に関する情報と、前記取得手段によって取得された経路および時刻に関する情報とに基づいて、前記画像データの撮影日時に、車両が通過した地点の地図情報と前記画像データを関連付ける関連付け手段と、前記関連付け手段によって関連付けられた前記画像データを表示する表示手段と、を備えることを特徴とする。

また、請求項８に記載の画像編集方法は、画像データを編集する画像編集装置において、車両の内部あるいは外部の画像を撮影する撮影工程と、前記撮影工程によって撮影された画像を撮影した日時に関する情報を含み、データ化された画像データの入力を受け付ける入力工程と、移動体が移動した経路および時刻に関する情報を取得する取得工程と、前記入力工程によって受け付けられた前記画像データの前記日時に関する情報と、前記取得工程によって取得された経路および時刻に関する情報とに基づいて、前記画像データの撮影日時に、車両が通過した地点の地図情報と前記画像データを関連付ける関連付け工程と、前記関連付け工程によって関連付けられた前記画像データを表示する表示工程と、を含むことを特徴とする。

また、請求項９の発明にかかる画像編集プログラムは、請求項８に記載の画像編集方法をコンピュータに実行させることを特徴とする。

また、請求項１０の発明にかかるコンピュータに読み取り可能な記録媒体は、請求項９に記載の画像編集プログラムを記録したことを特徴とする。

図１は、実施の形態にかかる画像編集装置の機能的構成の一例を示すブロック図である。 図２は、実施の形態にかかる画像編集装置の画像編集処理手順の一例を示すフローチャートである。 図３は、実施例にかかる画像編集装置が搭載された車両内部の一例を示す説明図である。 図４は、実施例にかかる画像編集装置のハードウェア構成の一例を示すブロック図である。 図５は、実施例にかかる画像編集装置における画像編集部の内部構成の一例を示すブロック図である。 図６は、実施例にかかる画像編集装置における音声再生部の内部構成の一例を示すブロック図である。 図７は、実施例にかかる画像編集装置の画像編集処理手順の一例を示すフローチャートである。 図８は、実施例にかかる画像編集装置の画像編集処理における音声データの他の関連付け処理手順の一例を示すフローチャートである。 図９は、実施例にかかる画像編集装置の画像編集処理における音声データの他の関連付け処理手順の一例を示すフローチャートである。 図１０は、実施例にかかる画像編集装置の画像編集処理における画像データの分配処理手順の一例を示す説明図である。 図１１は、実施例にかかる画像編集装置の画像編集処理の具体的処理例を示す説明図である。

符号の説明

１０１ 撮影部
１０２ 集音部
１０３ 入力部
１０４ 取得部
１０５ 関連付け部
１０６ 表示部
１０７ 検出部
１０８ 制御部
１０９、４１４ 音声再生部
３１０ 画像編集装置
４１２ 画像編集部
５１０ 画像編集処理部
６１０ 音声再生処理部

以下に添付の図面を参照して、この発明にかかる画像編集装置、画像編集方法、画像編集プログラムおよびこのプログラムを記録したコンピュータに読み取り可能な記録媒体の好適な実施の形態を詳細に説明する。

（実施の形態）
（画像編集装置の機能的構成）
まず、この発明の実施の形態にかかる画像編集装置の内容について説明する。図１は、この発明の実施の形態にかかる画像編集装置の機能的構成の一例を示すブロック図である。図１において、画像編集装置は、たとえば車両（四輪車、二輪車を含む）などの移動体に搭載され、撮影部１０１と、集音部１０２と、入力部１０３と、取得部１０４と、関連付け部１０５と、表示部１０６と、検出部１０７と、制御部１０８と、音声再生部１０９とを含む構成となっている。

撮影部１０１は、画像を撮影する。撮影部１０１によって撮影される画像は、車両の内部あるいは外部を撮影したものが挙げられる。この撮影部１０１は、画像編集装置と一体的あるいは着脱自在に構成される。集音部１０２は、たとえば車両の内部の音声を集音する。集音部１０２によって集音される音声は、車両の内部の音場から集音されるものが挙げられる。

入力部１０３は、日時に関する情報（たとえば、タイムスタンプデータ）を含む画像データの入力を受け付ける。また、入力部１０３は、撮影部１０１によって撮影された画像の画像データおよび集音部１０２によって集音された音声の音声データの入力を受け付ける。取得部１０４は、車両が移動した経路および時刻に関する情報を取得する。また、取得部１０４は、車両の挙動に関する挙動情報を取得する。この挙動情報とは、具体的には、車両の移動または停止状態を示す情報であり、たとえば車両の速度に関する情報（速度情報、加速度情報、角速度情報など）、傾斜角情報、横Ｇ（Ｇｒａｖｉｔｙ）情報および現在位置情報のうち少なくともいずれか一つを含むものが挙げられる。

関連付け部１０５は、入力部１０３によって受け付けられた画像データの日時に関する情報と、取得部１０４によって取得された車両の経路および時刻に関する情報ならびに挙動情報とに基づいて、画像データを地図情報に関連付ける。関連付け部１０５での関連付けによって、撮影部１０１により撮影された画像データがいつどこで撮影されたものであるかが決定する。

表示部１０６は、関連付け部１０５によって関連付けられた画像データを表示する。表示部１０６には、たとえば画像データが撮影された時系列順や、車両の通過した経路順に配置された状態で表示されるとよい。検出部１０７は、撮影部１０１によって撮影された画像の画像データに含まれる画像イメージの特徴量および集音部１０２によって集音された音声の音声データに含まれる音声パラメータの特徴量を検出する。

画像イメージの特徴量は、具体的には、たとえば画像データの画像イメージに含まれる人物の顔画像イメージの特徴量などが挙げられる。また、音声パラメータの特徴量は、具体的には、たとえば音量成分（音量の大小）、時間成分（発音継続時間）および周波数成分（周波数の高低）の特徴量などが挙げられる。

制御部１０８は、検出部１０７によって検出された画像イメージの特徴量および音声パラメータの特徴量に基づいて、撮影部１０１を制御する。また、制御部１０８は、検出部１０７によって検出された特徴量に変化が生じた場合に、撮影部１０１を制御して画像の撮影をおこなう。

音声再生部１０９は、音声データを再生する。また、音声再生部１０９は、表示部１０６に画像データを表示する際に、たとえば検出部１０７によって検出された特徴量および取得部１０４によって取得された挙動情報などに基づいて、再生する音声データを選択する。音声再生部１０９によって再生される音声は、音楽などの楽曲や効果音などが挙げられる。

（画像編集装置の画像編集処理手順）
つぎに、この発明の実施の形態にかかる画像編集装置の画像編集処理手順について説明する。図２は、この発明の実施の形態にかかる画像編集装置の画像編集処理手順の一例を示すフローチャートである。

図２のフローチャートにおいて、まず、入力部１０３（図１参照、以下同じ）によって、一つまたは複数の撮影部１０１（図１参照、以下同じ）から、たとえば人物や風景の画像イメージを含むとともに日時に関する情報を含む画像データを入力する（ステップＳ２０１）。つぎに、取得部１０４（図１参照、以下同じ）によって、車両が移動した経路および時刻に関する情報を取得する（ステップＳ２０２）。

そして、関連付け部１０５（図１参照、以下同じ）によって、ステップＳ２０１において入力した画像データの日時に関する情報と、ステップＳ２０２において取得した経路および時刻に関する情報とに基づいて、画像データを地図情報と関連付ける（ステップＳ２０３）。こうして、画像データを地図情報と関連付けたのち、表示部１０６（図１参照、以下同じ）によって、画像データを表示する（ステップＳ２０４）。これにより、本フローチャートによる画像編集処理を終了する。

なお、図示は省略するが、ステップＳ２０４における、表示部１０６による画像データの表示処理の際に、検出部１０７（図１参照、以下同じ）によって検出された画像イメージの特徴量ならびに音声パラメータの特徴量と、取得部１０４によって取得された挙動情報とに基づいて、音声再生部１０９（図１参照、以下同じ）によって、再生する音声データの選択をおこない、選択した音声データの再生をおこなってもよい。また、制御部１０８（図１参照、以下同じ）によって、検出部１０７により検出された特徴量に変化が生じた場合に、撮影部１０１を制御して画像を撮影するようにしてもよい。

以上説明したように、この発明の実施の形態にかかる画像編集装置によれば、入力した画像データを、画像データの日時に関する情報と、取得した経路および時刻に関する情報とに基づいて、サーバなどを介さずに地図情報と関連付けることができる。このため、車両のドライブ中などに得られた画像データを、装置の構成を複雑化せずに自動的に車両の通過地点や通過時刻と結びつけて時系列順や通過経路順に編集することができるようになり、画像編集の際の繁雑な手間やコストを軽減することができる。

つぎに、この発明の実施の形態にかかる実施例について詳細に説明する。ここでは、この実施の形態にかかる画像編集装置を車載のナビゲーション装置に適用した場合を例示して説明する。

（画像編集装置が搭載された車両内部の説明）
まず、この発明の実施例にかかる画像編集装置が搭載された車両内部について説明する。図３は、この発明の実施例にかかる画像編集装置が搭載された車両内部の一例を示す説明図である。図３において、たとえば運転席シート３１１および助手席シート３１２の周囲には、図１における表示部１０６としてのモニタ３０２ａおよび音声再生部１０９の音声出力装置としてのスピーカ３０４が設けられている。また、車両の天井部３１４には、図１における撮影部１０１としてのカメラ３０５および集音部１０２としてのマイク３０６が設けられている。

そして、助手席シート３１２には、後部座席シート３１３への搭乗者に向けて、表示部１０６としてのモニタ３０２ｂが設けられている。画像編集装置３１０（３１０ａ，３１０ｂ）は、これらのモニタ３０２（３０２ａ，３０２ｂ）と、スピーカ３０４と、カメラ３０５と、マイク３０６とを備えている。なお、カメラ３０５およびマイク３０６は、画像編集装置３１０（３１０ａ，３１０ｂ）にそれぞれ搭載されていてもよい。また、この画像編集装置３１０（３１０ａ，３１０ｂ）は、車両に着脱可能な構造を備えていてもよい。

（画像編集装置のハードウェア構成）
つぎに、この発明の実施例にかかる画像編集装置のハードウェア構成について説明する。図４は、この発明の実施例にかかる画像編集装置のハードウェア構成の一例を示すブロック図である。

図４において、画像編集装置３１０は、上述したように着脱自在に車両に搭載されており、制御部４００と、ユーザ操作部（リモコン，タッチパネル）４０１と、表示部（モニタ）４０２と、位置取得部（ＧＰＳ，センサ）４０３と、記録媒体４０４と、記録媒体デコード部４０５と、案内音出力部４０６と、通信部４０７と、経路探索部４０８と、経路誘導部４０９と、案内音生成部４１０と、スピーカ４１１と、画像編集部４１２と、画像入出力Ｉ／Ｆ４１３と、音声再生部４１４と、音声出力部４１５と、撮影部４１６と、集音部４１７と、音声入力Ｉ／Ｆ４１８とを含む構成となっている。

制御部４００は、たとえば画像編集装置３１０全体の制御を司り、制御プログラムにしたがって各種の演算処理を実行することにより、画像編集装置３１０が備える各部を統括的に制御する。制御部４００は、たとえば所定の演算処理を実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）や、各種制御プログラムを格納するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、および、ＣＰＵのワークエリアとして機能するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などによって構成されるマイクロコンピュータなどによって実現することができる。

また、制御部４００は、たとえば車両の経路誘導に際し、位置取得部４０３によって取得された車両の現在位置に関する情報（現在位置情報）と、記録媒体４０４から記録媒体デコード部４０５を介して得られた地図情報とに基づいて、地図上のどの位置を車両が走行しているかを算出し、算出結果を表示部４０２へ出力する。この制御部４００は、上記経路誘導に際し、経路探索部４０８、経路誘導部４０９、および案内音生成部４１０の間で経路誘導に関する情報の入出力をおこない、その結果得られる情報を表示部４０２および案内音出力部４０６へ出力する。

ユーザ操作部４０１は、文字、数値、各種指示など、ユーザによって入力操作された情報を制御部４００に対して出力する。ユーザ操作部４０１の構成としては、たとえば物理的な押下／非押下を検出する押しボタン式スイッチ、タッチパネル、キーボード、ジョイスティックなどの公知の各種形態を採用することができる。ユーザ操作部４０１は、後述する集音部４１７のような外部からの音声を入力するマイクなどを用いて、音声によって入力操作をおこなう形態としてもよい。

このユーザ操作部４０１は、画像編集装置３１０に対して一体的に設けられていてもよいし、リモコンのように画像編集装置３１０から離間した位置から操作可能な形態であってもよい。また、ユーザ操作部４０１は、上述した各種形態のうちのいずれか一つの形態で構成されていても、複数の形態で構成されていてもよい。ユーザは、ユーザ操作部４０１の形態に応じて、適宜入力操作をおこなうことで情報を入力する。

ユーザ操作部４０１の入力操作によって入力される情報として、たとえばナビゲーションに関しては、目的地の情報などが挙げられる。具体的に、たとえば画像編集装置３１０が車両などに備えられている場合には、この車両の搭乗している人物が到達目標とする地点が設定される。また、ユーザ操作部４０１に入力される情報として、たとえば画像編集に関しては、後述する画像入出力Ｉ／Ｆ４１３から画像編集部４１２に入力された画像データの電子アルバムにおける表示形式の情報などが挙げられる。具体的には、たとえばこの車両の搭乗している人物が所望とする電子アルバムの表示形式が設定される。

ここで、たとえばユーザ操作部４０１の形態としてタッチパネルを採用する場合、このタッチパネルは、表示部４０２の表示画面側に積層して使用される。この場合、表示部４０２における表示タイミングと、タッチパネル（ユーザ操作部４０１）に対する操作タイミングおよびその位置座標とを管理することによって、入力操作による入力情報を認識する。ユーザ操作部４０１の形態として表示部４０２に積層されたタッチパネルを採用することにより、ユーザ操作部４０１の形態を大型化することなく、多くの情報入力をおこなうことができる。このタッチパネルとしては、抵抗膜式、感圧式など公知の各種タッチパネルを採用することが可能である。

表示部４０２は、たとえばＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）、ＴＦＴ液晶ディスプレイ、有機ＥＬディスプレイ、プラズマディスプレイなどを含む。表示部４０２は、具体的には、たとえば図示しない映像Ｉ／Ｆや映像Ｉ／Ｆに接続された映像表示用のディスプレイ装置によって構成することができる。映像Ｉ／Ｆは、具体的には、たとえばディスプレイ装置全体の制御をおこなうグラフィックコントローラと、即時表示可能な画像情報を一時的に記憶するＶＲＡＭ（Ｖｉｄｅｏ ＲＡＭ）などのバッファメモリと、グラフィックコントローラから出力される画像情報に基づいて、ディスプレイ装置を表示制御する制御ＩＣやＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などによって構成される。表示部４０２には、アイコン、カーソル、メニュー、ウィンドウあるいは文字や画像などの各種情報が表示される。また、表示部４０２には、後述する画像編集部４１２によって編集された画像データが表示される。

位置取得部４０３は、たとえば人工衛星からの電波を受信することによって画像編集装置３１０が搭載された車両の現在位置情報（緯度経度情報）を取得する。ここで、現在位置情報は、人工衛星からの電波を受信し、人工衛星との幾何学的位置を求める情報であり、地球上どこでも計測可能である。なお、位置取得部４０３は、図示しないＧＰＳアンテナを備えている。ここで、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）とは、４つ以上の人工衛星からの電波を受信することによって地上での位置を正確に求めるシステムである。ここでは、公知の技術であるためＧＰＳについての説明は省略する。この位置取得部４０３は、たとえば人工衛星から受信した電波を復調するチューナや、復調した情報に基づいて現在位置を算出する演算回路などによって構成することができる。

なお、人工衛星からの電波としては、１．５７５４２ＧＨｚの搬送波で、Ｃ／Ａ（Ｃｏａｒｓｅ ａｎｄ Ａｃｃｅｓｓ）コードおよび航法メッセージが乗っているＬ１電波などを用いておこなわれる。これにより、画像編集装置３１０が搭載された車両の現在位置（緯度および経度）を検知する。なお、車両の現在位置の検知に際しては、車速センサやジャイロセンサなどの各種センサによって収集された情報を加味してもよい。車速センサは、画像編集装置３１０を搭載する車両のトランスミッションの出力側シャフトから車速を検出する。

その他、車両の現在位置の検知に際しては、角速度センサ、走行距離センサ、傾斜角センサ、横Ｇ（Ｇｒａｖｉｔｙ）センサなどの各種センサによって収集された情報を加味してもよい。角速度センサは、車両の回転時の角速度を検出し、角速度情報と相対方位情報とを出力する。走行距離センサは、車輪の回転に伴って出力される所定周期のパルス信号のパルス数をカウントすることによって車輪１回転あたりのパルス数を算出し、その１回転あたりのパルス数に基づく走行距離情報を出力する。傾斜角センサは、路面の傾斜角度を検出し、傾斜角情報を出力する。横Ｇセンサは、車両のコーナリングの際に遠心力によって発生する外向きの力（重力）である横Ｇを検出し、横Ｇ情報を出力する。なお、位置取得部４０３によって取得される車両の現在位置情報や、これらの車速センサ、ジャイロセンサ、角速度センサ、走行距離センサ、傾斜角センサおよび横Ｇセンサによって検出される情報は、車両の挙動に関する挙動情報として制御部４００に出力される。

記録媒体４０４は、各種制御プログラムや各種情報をコンピュータに読み取り可能な状態で記録する。記録媒体４０４は、記録媒体デコード部４０５による情報の書き込みを受け付けるとともに、書き込まれた情報を不揮発に記録する。記録媒体４０４は、たとえばＨＤ（Ｈａｒｄ Ｄｉｓｋ）によって実現することができる。記録媒体４０４は、ＨＤに限るものではなく、ＨＤに代えてあるいはＨＤに加えて、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）やＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｋ）など、記録媒体デコード部４０５に対して着脱可能であり可搬性を有するメディアを記録媒体４０４として用いてもよい。そして、記録媒体４０４は、ＤＶＤおよびＣＤに限るものではなく、ＣＤ−ＲＯＭ（ＣＤ−Ｒ、ＣＤ−ＲＷ）、ＭＯ（Ｍａｇｎｅｔｏ−Ｏｐｔｉｃａｌ ｄｉｓｋ）、メモリカードなどの記録媒体デコード部４０５に対して着脱可能であり可搬性を有するメディアを利用することもできる。

なお、記録媒体４０４には、本発明を実現する画像編集プログラム、ナビゲーションプログラム、画像データおよび地図情報などが記録されている。ここで、画像データは、たとえば人物や風景に関する画像イメージを表わす２次元配列の値をいう。また、地図情報は、たとえば建物、河川、地表面などの地物（フィーチャ）をあらわす背景情報と、道路の形状をあらわす道路形状情報とを有しており、表示部４０２の表示画面において２次元または３次元に描画される。

背景情報は、背景の形状をあらわす背景形状情報と、背景の種別をあらわす背景種別情報とを有する。背景形状情報は、たとえば地物の代表点、ポリライン、ポリゴン、地物の座標などを示す情報を含む。背景種別情報は、たとえば地物の名称や住所や電話番号などを示すテキスト情報、建物・河川などの地物の種別を示す種別情報などを含む。

道路形状情報は、複数のノードおよびリンクを有する道路ネットワークに関する情報である。ノードは、三叉路・十字路・五叉路など複数の道路が交差する交差点を示す情報である。リンクは、ノード間を連結する道路を示す情報である。リンクには、曲線道路の表現を可能とする形状補完点を有するものもある。道路形状情報は、交通条件情報を有する。交通条件情報は、交差点の特徴、各リンクの長さ（距離）、車幅、進行方向、通行禁止、道路種別などを示す情報である。

この交差点の特徴としては、たとえば三叉路や五叉路などの複雑な交差点、浅い角度で道路が分岐する交差点、目的地周辺の交差点、高速道路の出入り口やジャンクション、経路逸脱率の高い交差点などが挙げられる。経路逸脱率は、たとえば過去の走行履歴から算出することが可能である。そして、道路種別としては、たとえば高速道路、有料道路、一般道路などが挙げられる。

なお、本実施例では、たとえば画像データや地図情報を記録媒体４０４に記録するようにしたが、これに限るものではない。画像データや地図情報は、画像編集装置３１０のハードウェアと一体に設けられているものに限って記録されているものではなく、画像編集装置３１０の外部に設けられていてもよい。その場合、画像編集装置３１０は、たとえば通信部４０７を通じて、ネットワークを介して画像データを取得する。また、画像編集装置３１０は、たとえば通信部４０７を通じて、ネットワークを介して地図情報を取得する。このように取得された画像データや地図情報は、たとえば制御部４００のＲＡＭなどに記憶されてもよい。

記録媒体デコード部４０５は、記録媒体４０４に対する情報の読み取り／書き込みの制御をおこなう。たとえば記録媒体４０４としてＨＤを用いた場合には、記録媒体デコード部４０５は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）となる。同様に、記録媒体４０４としてＤＶＤあるいはＣＤ（ＣＤ−Ｒ，ＣＤ−ＲＷを含む）を用いた場合には、記録媒体デコード部４０５は、ＤＶＤドライブあるいはＣＤドライブとなる。また、書き込み可能かつ着脱可能な記録媒体４０４として、ＣＤ−ＲＯＭ（ＣＤ−Ｒ，ＣＤ−ＲＷ）、ＭＯ、メモリカードなどを利用する場合には、各種記録媒体への情報の書き込みおよび各種記録媒体に記憶された情報の読み出しが可能な専用のドライブ装置などを、記録媒体デコード部４０５として適宜用いるとよい。

案内音出力部４０６は、接続されたスピーカ４１１への出力を制御することによって、ナビゲーションの案内音を再生する。スピーカ４１１は、一つであってもよいし、複数であってもよい。具体的に、案内音出力部４０６は、音声出力用のスピーカ４１１に接続される図示しない音声Ｉ／Ｆによって実現することができる。より具体的には、音声Ｉ／Ｆは、たとえばディジタル音声データのＤ／Ａ変換をおこなうＤ／Ａコンバータと、Ｄ／Ａコンバータから出力されるアナログ音声信号を増幅する増幅器と、アナログ音声信号のＡ／Ｄ変換をおこなうＡ／Ｄコンバータと、から構成することができる。

通信部４０７は、他の画像編集装置との間で通信をおこなう。本実施例の通信部４０７は、たとえば携帯電話のように、基地局（図示せず）を介して通信サーバ（図示せず）と通信をおこなう通信モジュールであってもよく、他の画像編集装置との間で直接無線通信をおこなう通信モジュールであってもよい。ここで、無線通信とは、通信の媒体となるワイヤ線を使わず、電波や赤外線・超音波を用いておこなわれる通信である。無線通信を可能とする規格には、たとえば無線ＬＡＮ、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）、ＨｏｍｅＲＦ（Ｈｏｍｅ Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）、ＢｌｕｅＴｏｏｔｈなど各種の技術があるが、本実施例においては公知の各種の無線通信技術を利用することができる。なお、情報の転送速度などの面から、無線ＬＡＮを好ましい一例として用いることができる。

ここで、通信部４０７は、たとえば渋滞や交通規制などの道路交通情報を、定期的（不定期でも可）に受信してもよい。通信部４０７による道路交通情報の受信は、ＶＩＣＳ（Ｖｅｈｉｃｌｅ Ｉｎｆｏｒｍａｔｉｏｎ ａｎｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ Ｓｙｓｔｅｍ）センターから道路交通情報が配信されたタイミングでおこなってもよいし、ＶＩＣＳセンターに対し定期的に道路交通情報を要求することでおこなってもよい。また、通信部４０７は、たとえばＡＭ／ＦＭチューナ、ＴＶチューナ、ＶＩＣＳ／ビーコンレシーバおよびその他の通信機器として実現することが可能である。

なお、公知の技術であるため詳細な説明を省略するが、「ＶＩＣＳ」とは、ＶＩＣＳセンターで編集、処理された渋滞や交通規制などの道路交通情報をリアルタイムに送信し、カーナビゲーション装置などの車載機器に文字・図形で表示する情報通信システムである。このＶＩＣＳセンターで編集、処理された道路交通情報（ＶＩＣＳ情報）をナビゲーション装置に伝達する方法としては、各道路上に設置された「ビーコン」と「ＦＭ多重放送」を利用する方法がある。「ビーコン」には、主に高速道路で使用される「電波ビーコン」と、主要な一般道路で使用される「光ビーコン」がある。「ＦＭ多重放送」を利用する場合には、広域エリアの道路交通情報を受信することが可能となる。「ビーコン」を利用する場合には、自車（車両）位置を元にした直近の道路の詳細な情報など、自車が位置する場所において必要な道路交通情報を受信することが可能となる。そして、通信部４０７は、他の画像編集装置との間での通信方法と、画像データや道路交通情報を受信するための通信方法とが異なる場合には、それぞれに対応した複数の通信手段を備えていてもよい。

経路探索部４０８は、位置取得部４０３によって取得される車両の現在位置情報と、ユーザによって入力される目的地の情報とに基づいて、現在位置から目的地までの最適な経路を算出する。経路誘導部４０９は、経路探索部４０８によって探索された誘導経路に関する情報あるいは、通信部４０７によって受信した経路情報と、位置取得部４０３によって取得された現在位置情報と、記録媒体４０４から記録媒体デコード部４０５を経由して得られた地図情報とに基づいて、リアルタイムな経路誘導情報の生成をおこなう。経路誘導部４０９で生成された経路誘導情報は、制御部４００を介して表示部４０２へ出力される。

案内音生成部４１０は、パターンに対応したトーンと音声の情報を生成する。すなわち、経路誘導部４０９で生成された経路誘導情報に基づいて、案内ポイントに対応した仮想音源の設定と音声ガイダンス情報の生成をおこない、これらを制御部４００を介して案内音出力部４０６へ出力する。

スピーカ４１１は、案内音出力部４０６から出力されるナビゲーションの案内音や、後述する音声出力部４１５から出力される音声を再生（出力）する。なお、たとえばこのスピーカ４１１にヘッドホンなどを設け、車両内部全体が出力される案内音や音声の音場とならないように、案内音や音声の出力形態を適宜変更するようにしてもよい。

画像編集部４１２は、後述する撮影部４１６および通信部４０７から画像入出力Ｉ／Ｆ４１３を通じて取得した画像データや、記録媒体４０４に記録されている画像データなどの画像編集処理をおこなう。この画像編集部４１２は、具体的には、たとえばＧＰＵなどによって構成される。画像編集部４１２は、制御部４００からの制御命令にしたがって、画像データを用いた電子アルバム（以下、「アルバム」という）データの作成処理をおこなう。ここで、アルバムデータとは、デジタルスチルカメラ（ＤＳＣ）やデジタルビデオカメラ（ＤＶＣ）などの撮影装置からなる撮影部４１６によって撮影された画像データなどを、表示部４０２の表示画面上で絵日記や写真アルバムのように鑑賞することや、パソコンなどで閲覧・編集することが可能なデジタルデータのことをいう。

画像入出力Ｉ／Ｆ４１３は、外部から画像編集部４１２に対して入出力される画像データの入出力をおこなう。画像入出力Ｉ／Ｆ４１３は、たとえば上記ＤＳＣやＤＶＣなどが撮影した画像データを格納する記録媒体４０４からの画像データや、ＤＳＣやＤＶＣなどに格納された画像データをＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＩＥＥＥ１３９４（Ｉｎｓｔｉｔｕｔｅ ｏｆ Ｅｌｅｃｔｒｉｃａｌ ａｎｄ Ｅｌｅｃｔｒｏｎｉｃ Ｅｎｇｉｎｅｅｒｓ １３９４）および赤外線などの通信によって通信部４０７から入力される画像データなどを画像編集部４１２に出力し、画像編集部４１２から出力される画像データを記録媒体４０４や通信部４０７に出力する。なお、画像入出力Ｉ／Ｆ４１３は、記録媒体４０４との間で画像データの入出力をおこなう場合は、記録媒体４０４のリード／ライトを制御するコントローラの機能を有するとよい。また、画像入出力Ｉ／Ｆ４１３は、通信部４０７との間で画像データの入出力をおこなう場合は、通信部４０７での通信を制御する通信コントローラの機能を有するとよい。

音声再生部４１４は、記録媒体デコード部４０５を通じて記録媒体４０４から得られる音声データや、制御部４００を通じて通信部４０７から得られる音声データなどの選択をおこない、選択した音声データの再生処理をおこなう。また、音声再生部４１４は、後述する音声データベース（以下、「音声ＤＢ」とする）６１１（図６参照）のような記憶装置に格納された音声データの再生をおこなう。再生される音声データは、音楽の楽曲や効果音などの音声データが挙げられる。また、この音声再生部４１４は、画像編集装置３１０がＡＭ／ＦＭチューナやＴＶチューナを備える場合、たとえばラジオやテレビの音声を再生するように構成されていてもよい。

音声出力部４１５は、音声再生部４１４で選択され再生処理された音声データに基づいて、スピーカ４１１から出力される音声の出力を制御する。具体的には、たとえば音声の音量の調整やイコライジング処理などをおこない、音声の出力状態を制御する。この音声出力部４１５による音声の出力の制御は、たとえばユーザ操作部４０１からの入力操作や制御部４００による制御によっておこなわれる。

撮影部４１６は、図３における車両に搭載されたカメラ３０５や、上述したＤＳＣおよびＤＶＣなどの外部の撮影装置により構成され、Ｃ−ＭＯＳあるいはＣＣＤなどの光電変換素子を有し、車両の内部や外部の画像を撮影する。この撮影部４１６は、画像編集装置３１０と有線または無線で接続され、制御部４００からの撮影命令により、たとえば車両に搭乗している人物を撮影する。撮影部４１６で撮影された画像の画像データは、画像入出力Ｉ／Ｆ４１３を介して画像編集部４１２に出力される。

集音部４１７は、図３における車両に搭載されたマイク３０６などにより構成され、たとえば車両の内部の音場から、車両に搭乗している人物の発声音などの音声を集音する。音声入力Ｉ／Ｆ４１８は、集音部４１７によって集音された音声をディジタル音声データに変換し、制御部４００に出力する。音声入力Ｉ／Ｆ４１８は、より具体的には、たとえば入力されたアナログ音声データをディジタル音声データに変換するＡ／Ｄコンバータなどから構成することができる。その他、音声入力Ｉ／Ｆ４１８は、ディジタル音声データをフィルタ処理するフィルタ回路や、アナログ音声データを増幅する増幅回路などを備えていてもよい。

ここで、上述した制御部４００は、撮影部４１６によって撮影され画像編集部４１２から出力される画像データや、集音部４１７によって集音され音声入力Ｉ／Ｆ４１８から出力される音声データに基づいて、車両の内部の雰囲気を判断する。車両の内部の雰囲気の判断は、具体的には、たとえば搭乗している人物の表情や声などの特徴量の変化を検出しておこなわれる。このため、制御部４００は、たとえばＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）の機能を有する構成とされていてもよい。

なお、図１における撮影部１０１は、具体的には、たとえば撮影部４１６によってその機能を実現し、集音部１０２は、たとえば集音部４１７によってその機能を実現する。また、図１における入力部１０３は、具体的には、たとえば画像入出力Ｉ／Ｆ４１３および音声入力Ｉ／Ｆ４１８によってその機能を実現し、取得部１０４は、たとえば位置取得部４０３によってその機能を実現する。

また、図１における関連付け部１０５、検出部１０７および制御部１０８は、具体的には、たとえば制御部４００および画像編集部４１２によってその機能を実現する。さらに、図１における表示部１０６は、具体的には、たとえば表示部４０２によってその機能を実現し、音声再生部１０９は、たとえば音声再生部４１４、音声出力部４１５およびスピーカ４１１によってその機能を実現する。

ここで、上記画像編集部４１２および音声再生部４１４の内部構成について説明する。図５は、この発明の実施例にかかる画像編集装置における画像編集部の内部構成の一例を示すブロック図である。また、図６は、この発明の実施例にかかる画像編集装置における音声再生部の内部構成の一例を示すブロック図である。

図５において、画像編集部４１２は、画像編集処理部５１０と、表示制御部５１１と、画像認識部５１２と、画像記憶部５１３と、人物認識部５１４と、人物データベース（以下、「人物ＤＢ」とする）５１５とを備えて構成されている。画像編集処理部５１０は、画像入出力Ｉ／Ｆ４１３を通じて撮影部４１６（図４参照、以下同じ）や外部から画像編集部４１２に入力される画像データや、記録媒体デコード部４０５（図４参照、以下同じ）および制御部４００（図４参照、以下同じ）を通じて記録媒体４０４（図４参照、以下同じ）から画像編集部４１２に入力される画像データの画像編集処理をおこなう。また、画像編集処理部５１０は、後述する画像記憶部５１３に記憶されている画像データを読み出して画像編集処理をおこなう。画像編集処理内容は、たとえば画像データをアルバムデータに編集することなどが挙げられる。

表示制御部５１１は、画像編集処理部５１０から出力される画像データを、表示部４０２の表示画面上でアルバム形態として表示するための制御をおこなう。画像認識部５１２は、画像編集処理部５１０に入力された画像データに基づいて、その画像データにどのような画像イメージが含まれているのかを認識する。画像記憶部５１３は、画像編集処理部５１０に入力された画像データを記憶する。

人物認識部５１４は、画像編集処理部５１０に入力された画像データ内の画像イメージに、人物に関する画像イメージが含まれている場合に、あらかじめ人物ＤＢ５１５に格納されている人物に関する画像イメージを読み出して、その画像イメージが表わす人物の認識処理をおこなう。認識処理は、具体的には、たとえば人物の顔画像イメージに基づく顔認証によりおこなわれる。顔認証については、公知の技術であるため、ここでは説明を省略する。人物ＤＢ５１５は、車両に搭乗している人物の画像イメージを含む画像データや、これらの人物の年齢、性別などの個人識別データなどを格納している。

なお、画像編集部４１２は、画像認識部５１２で認識された画像データの画像イメージや、人物認識部５１４で認識された人物に関する画像イメージの特徴量を検出し、制御部４００に出力する。これらの画像イメージの特徴量は、たとえば画像イメージの色調データや人物の顔画像イメージの感情パラメータから検出される。具体的には、色調データは、画像イメージ全体の色調が赤、青、緑などのどの色合いに近いかを示し、感情パラメータは、人物の顔画像がどの表情（喜怒哀楽）に近いかを示す。

一方、図６において、音声再生部４１４は、音声再生処理部６１０と、音声データベース（以下、「音声ＤＢ」という）６１１と、選曲履歴データベース（以下、「選曲履歴ＤＢ」という）６１２とを備えて構成されている。音声再生処理部６１０は、音声再生部４１４に入力される音声データや、音声ＤＢ６１１に格納されている音声データの選択・再生処理をおこなう。また、音声再生処理部６１０は、たとえば画像編集部４１２（図４参照、以下同じ）で作成されたアルバムデータ内の画像データに関連付けて、音声データの選択・再生処理をおこなう。ここでの音声データの関連付けは、アルバムデータ内の画像データに含まれるタイムスタンプデータや、画像イメージの色調データ、人物の顔画像イメージなどの特徴量に基づきおこなわれるとよい。

音声ＤＢ６１１は、音声再生部４１４で再生処理される音声データを格納する。音声ＤＢ６１１に格納される音声データは、記録媒体４０４（図４参照、以下同じ）や通信部４０７（図４参照、以下同じ）から音声再生部４１４に入力される音声データであっても、あらかじめ画像編集装置３１０に装備された音声データであってもよい。選曲履歴ＤＢ６１２は、音声再生部４１４で再生処理した音声データが楽曲データである場合などに、その楽曲の再生履歴や選曲履歴に関する情報を格納する。この選曲履歴ＤＢ６１２は、たとえば画像編集装置３１０が車両に搭載されているときに、ドライブ中に再生された楽曲の再生履歴や選曲履歴に関する情報などを格納する。

（画像編集装置の画像編集処理手順）
つぎに、この発明の実施例にかかる画像編集装置の画像編集処理手順について説明する。図７は、この発明の実施例にかかる画像編集装置の画像編集処理手順の一例を示すフローチャートである。図７において、まず、車両の内部に備えられた撮影部４１６（図４参照、以下同じ）によって、車内の画像を撮影するとともに（ステップＳ７０１）、車両の内部に備えられた集音部４１７（図４参照、以下同じ）によって、車両に搭乗している者（以下、「搭乗者」という）から発せられる車内の音声を集音する（ステップＳ７０２）。

撮影部４１６によって撮影された画像の画像データは、画像入出力Ｉ／Ｆ４１３（図４参照、以下同じ）を通して画像編集部４１２（図４参照、以下同じ）に入力され、集音部４１７によって集音された音声の音声データは、音声入力Ｉ／Ｆ４１８（図４参照、以下同じ）を通して制御部４００（図４参照、以下同じ）に入力され、画像編集部４１２および制御部４００によって、画像データの画像イメージの特徴量および音声データの音声パラメータの特徴量をそれぞれ検出する（ステップＳ７０３）。このステップＳ７０３において、画像編集部４１２によって検出された画像イメージの特徴量に関する情報は、制御部４００に出力される。

画像イメージの特徴量および音声パラメータの特徴量を検出したのち、制御部４００は、検出した特徴量に基づいて、車内の雰囲気に変化が生じたか否かを判断する（ステップＳ７０４）。車内の雰囲気に変化が生じたか否かの判断は、たとえば検出した画像イメージの特徴量が「笑顔」を表わす感情パラメータから「泣き顔」を表わす感情パラメータに変化したり、音声パラメータの特徴量が「笑い声」を表わす周波数成分から「怒鳴り声」を表わす周波数成分に変化したりすることを判断しておこなわれる。

ステップＳ７０４において、制御部４００によって、車内の雰囲気に変化が生じていないと判断した場合（ステップＳ７０４：Ｎｏ）、ステップＳ７０１に戻り、ステップＳ７０１からステップＳ７０４までの処理を繰り返す。ステップＳ７０４において、車内の雰囲気に変化が生じたと判断した場合（ステップＳ７０４：Ｙｅｓ）、画像編集部４１２によって、画像入出力Ｉ／Ｆ４１３を通じて撮影部４１６により撮影されたタイムスタンプデータを含む画像データを取得する（ステップＳ７０５）。

そして、ステップＳ７０５において、画像データを取得するとともに、制御部４００は、位置取得部４０３（図４参照、以下同じ）から車両の現在位置情報を取得し（ステップＳ７０６）、記録媒体デコード部４０５（図４参照、以下同じ）を通じて記録媒体４０４（図４参照、以下同じ）から地図情報を取得して（ステップＳ７０７）、さらに車両の移動した経路および時刻に関する情報を取得する（ステップＳ７０８）。

ステップＳ７０８において、移動した経路および時刻に関する情報を取得したのち、制御部４００によって、画像編集部４１２が取得した画像データのタイムスタンプデータと移動した経路および時刻に関する情報とを照合し、画像のタイムスタンプデータが示す時刻に車両が通過した地図上の地点を検出し、画像データを地図情報と関連付ける（ステップＳ７０９）。

そして、画像データを地図情報と関連付けたのち、画像編集部４１２によって、画像データを用いてアルバムデータを作成する（ステップＳ７１０）。こうしてアルバムデータを作成したのち、位置取得部４０３などによって、車両の速度に関する情報や傾斜角情報などの車両の挙動に関する挙動情報を取得する（ステップＳ７１１）。

こうして取得された挙動情報は、制御部４００を通じて音声再生部４１４（図６参照、以下同じ）に出力されるとともに、音声再生部４１４は、画像編集部４１２からアルバムデータを取得し、音声再生処理部６１０（図６参照、以下同じ）によって、音声ＤＢ６１１（図６参照、以下同じ）からの音声データや、選曲履歴ＤＢ６１２（図６参照、以下同じ）からの選曲履歴に関する情報などを参照して、アルバムデータに音声データを関連付ける（ステップＳ７１２）。

ここで、音声データの関連付けは、たとえばアルバムデータに関連付けられた地図情報や挙動情報に基づいて、画像撮影時の地形や道路種別などを判断し、判断した地形や道路種別などに合う楽曲などの音声データを音声ＤＢ６１１から読み出して関連付ける。その他、上述した画像イメージの特徴量および音声パラメータの特徴量を参照して、これらの特徴量に合う音声データを関連付けるようにしてもよい。

ステップＳ７１２において、アルバムデータに音声データを関連付けたのち、画像編集部４１２および制御部４００によって、アルバムデータが完成したか否かを判断する（ステップＳ７１３）。アルバムデータが完成していないと判断した場合（ステップＳ７１３：Ｎｏ）、ステップＳ７０１に戻り、ステップＳ７０１からステップＳ７１３までの処理を繰り返す。アルバムデータが完成したと判断した場合（ステップＳ７１３：Ｙｅｓ）、本フローチャートによる一連の画像編集処理を終了する。

ここで、ステップＳ７１２における、アルバムデータへの音声データの他の関連付け処理について簡単に説明する。図８および図９は、この発明の実施例にかかる画像編集装置の画像編集処理における音声データの他の関連付け処理手順の一例を示すフローチャートである。なお、図８は、画像データのタイムスタンプデータに基づく関連付け処理を示し、図９は、画像データの画像イメージの色調データに基づく関連付け処理を示している。

図８において、まず、音声再生部４１４（図６参照、以下同じ）の音声再生処理部６１０（図６参照、以下同じ）は、選曲履歴ＤＢ６１２（図６参照、以下同じ）から、たとえば画像編集装置３１０（図４参照、以下同じ）で再生されていた楽曲の再生履歴に関する情報を取得する（ステップＳ８０１）。再生履歴に関する情報を取得したのち、音声再生処理部６１０は、アルバムデータ内の画像データのタイムスタンプデータを参照する（ステップＳ８０２）。

ステップＳ８０２において、タイムスタンプデータを参照したのち、音声再生処理部６１０は、参照したタイムスタンプデータに最も近い時刻に再生された再生履歴に関する情報をもつ楽曲の音声データを選択する（ステップＳ８０３）。こうして音声データを選択したのち、音声再生処理部６１０は、アルバムデータに選択した音声データを関連付ける（ステップＳ８０４）。このステップＳ８０４においては、たとえば選択した音声データのサビの部分（ハイライト部分）を対応付けてアルバムデータに音声データを関連付けるようにしてもよい。

一方、図９において、音声再生処理部６１０（図６参照、以下同じ）は、たとえば画像編集処理部５１０（図５参照、以下同じ）からアルバムデータを参照し、アルバムデータ内の画像データ全体における画像イメージの特徴量として、色調データの特徴量を参照する（ステップＳ９０１）。そして、音声再生処理部６１０は、音声ＤＢ６１１（図６参照、以下同じ）から、参照した色調データの特徴量に応じた音声データを選択する（ステップＳ９０２）。

このステップＳ９０２における音声データの選択は、たとえば画像データ全体の画像イメージの色調が青である場合、悲しい雰囲気の曲調の音声データを選択し、緑である場合、癒される雰囲気の曲調の音声データを選択し、赤である場合、アップテンポの曲調の音声データを選択するようにおこなわれる。こうして音声データを選択したのち、音声再生処理部６１０は、アルバムデータに選択した音声データを関連付ける（ステップＳ９０３）。このステップＳ９０３においては、たとえば選択した音声データのサビの部分（ハイライト部分）を対応付けてアルバムデータに音声データを関連付けるようにしてもよい。

なお、ステップＳ９０２における音声データの選択は、たとえば画像データの顔画像イメージが表わす感情パラメータに基づいておこなわれてもよい。この場合、たとえば顔画像イメージが喜びを表わしているときは、明るい雰囲気の曲調の音声データを選択し、怒りを表わしているときは、激しい雰囲気の曲調の音声データを選択し、楽しみを表わしているときは、アップテンポの曲調の音声データを選択するようにおこなわれる。

つぎに、この発明の実施例にかかる画像編集装置の画像編集処理の具体例について説明する。図１０および図１１は、この発明の実施例にかかる画像編集装置の画像編集処理の具体的処理例を示す説明図である。図１０に示すように、画像編集装置３１０（図４参照、以下同じ）の画像編集部４１２（図５参照、以下同じ）は、位置取得部４０３（図４参照、以下同じ）によって取得され制御部４００（図４参照、以下同じ）を通じて入力した車両の現在位置情報、ならびに経路および時刻に関する情報や、記録媒体４０４（図４参照、以下同じ）から制御部４００を通じて入力した地図情報を参照し、車両の出発地Ｓから終点地Ｅまでの通過した経路上において、撮影部４１６（図４参照、以下同じ）や集音部４１７（図４参照、以下同じ）からの画像データおよび音声データの画像イメージおよび音声パラメータのそれぞれの特徴量に基づいて、車内の雰囲気が変化したと判断したときに画像データを取得する。

図１０に示す場合、写真取得ポイントＡ〜Ｄにおいて、車内の雰囲気が変化したと判断され画像データが取得されたことを示す。そして、画像編集部４１２は、たとえば写真取得ポイントＡ〜Ｄで取得された画像データのタイムスタンプデータと、写真取得ポイントＡ〜Ｄにおいて取得した車両の現在位置情報や、車両の経路および時刻に関する情報とに基づいて、写真取得ポイントＡ〜Ｄで取得した画像データを地図情報に関連付けてアルバムデータを作成する。このアルバムデータには、楽曲などの音声データが関連付けられるため、適宜自動的に音楽などを再生することができる。

このようにして画像編集部４１２が作成したアルバムデータは、図１１に示すように、たとえば表示部４０２（図４参照、以下同じ）の表示画面上に、見開き本のアルバムのような形態で表示することができる。この表示されたアルバムデータ１１１０には、たとえば写真取得ポイントＡ〜Ｄ（図１０参照、以下同じ）で取得された画像データ１１２０、１１３０、１１４０、１１５０を時系列順に表示することができる。表示された各画像データ１１２０、１１３０、１１４０、１１５０は、写真取得ポイントＡ〜Ｄにおける車内写真Ａ〜Ｄの画像イメージ１１２１、１１３１、１１４１、１１５１や車両の外の風景Ａ〜Ｄの画像イメージ１１２２、１１３２、１１４２、１１５２を表示するとよい。

また、表示された各画像データ１１２０、１１３０、１１４０、１１５０は、関連付けられた地図情報などから得た地名や、撮影された時刻もしくは車両が通過した時刻などを表わすテキスト情報を表示するとよい。図１１においては、たとえば画像データ１１２０は、時刻「午前８時１４分」に撮影され、撮影された写真取得ポイントＡが「寄居駅付近」であることを表わす。同様に、画像データ１１３０は、時刻「午前８時３７分」に撮影され、撮影された写真取得ポイントＢが「長瀞付近」であることを表わす。また、画像データ１１４０は、時刻「午後１時２０分」に撮影され、撮影された写真取得ポイントＣが「秩父駅付近」であることを表わす。さらに、画像データ１１５０は、時刻「午後２時５３分」に撮影され、撮影された写真取得ポイントＤが「正丸峠付近」であることを表わしている。なお、ここでは画像データ１１２０、１１３０、１１４０、１１５０を時系列順に表示したが、たとえば車両の通過した経路順に表示してもよい。

以上説明したように、本実施例にかかる画像編集装置は、車内の雰囲気が変化したときに撮影した画像データのタイムスタンプデータと、車両が移動した経路および時刻に関する情報とに基づいて、サーバなどを介さずに画像データを地図情報と関連付けてアルバムデータを作成することができる。このため、画像データを自動的に時系列順や経路順に編集してアルバムデータを作成し、画像編集の手間を軽減することができる。

また、本実施例にかかる画像編集装置は、サーバなどを介さずにアルバムデータの画像データを音声データと関連付けることもできるため、エンターテインメント性を向上させ画像編集処理の手間やコストを軽減することができる。

以上のように、この発明にかかる画像編集装置、画像編集方法、画像編集プログラムおよびコンピュータに読み取り可能な記録媒体によれば、画像の撮影を適宜自動的におこない、取得した画像データを適宜自動的に地図情報や音声データと関連付けて電子アルバムを作成することができるという効果を奏する。

なお、本実施の形態で説明した画像編集方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーションなどのコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また、このプログラムは、インターネットなどのネットワークを介して配布することが可能な伝送媒体であっても良い。

Claims (10)

1. 車両の内部あるいは外部の画像を撮影する撮影手段と、
   前記撮影手段によって撮影された前記画像を撮影した日時に関する情報を含み、前記画像をデータ化した画像データの入力を受け付ける入力手段と、
   移動体が移動した経路および時刻に関する情報を取得する取得手段と、
   前記入力手段によって受け付けられた前記画像データの前記日時に関する情報と、前記取得手段によって取得された経路および時刻に関する情報とに基づいて、前記画像データの撮影日時に、車両が通過した地点の地図情報と前記画像データを関連付ける関連付け手段と、
   前記関連付け手段によって関連付けられた前記画像データを表示する表示手段と、
   を備えることを特徴とする画像編集装置。
2. さらに、車両の内部の音声を集音する集音手段と、
   前記撮影手段によって撮影された前記画像の前記画像データに含まれる画像イメージの特徴量と、前記集音手段によって集音された前記音声の音声データに含まれる音声パラメータの特徴量とを検出する検出手段と、
   前記検出手段によって検出された前記特徴量に基づいて、前記撮影手段を制御する制御手段と、
   を備え、
   前記制御手段は、前記検出手段によって検出された前記特徴量に変化が生じた場合、前記撮影手段によって前記画像の撮影をおこなうことを特徴とする請求項１に記載の画像編集装置。
3. 前記検出手段は、前記画像データに含まれる人物に関する前記画像イメージから前記人物の顔画像イメージの前記特徴量を検出することを特徴とする請求項２に記載の画像編集装置。
4. さらに、前記音声データを再生する音声再生手段を備え、
   前記取得手段は、前記移動体の挙動に関する挙動情報を取得し、
   前記音声再生手段は、前記表示手段に前記画像データを表示する際に、前記検出手段によって検出された前記特徴量および前記取得手段によって取得された前記挙動情報に基づいて、車内の雰囲気および車両の移動または停止状態を判断し、判断した車内の雰囲気および車両の移動または停止状態などに適合するように再生する音声データの選択をおこなうことを特徴とする請求項２に記載の画像編集装置。
5. 前記表示手段は、前記関連付け手段によって関連付けられた前記画像データとともに、前記地図情報に基づいて、当該地図情報に含まれているテキスト情報を表示することを特徴とする請求項２に記載の画像編集装置。
6. 前記検出手段は、前記画像イメージの特徴量として、前記人物の顔画像イメージの感情パラメータの前記特徴量を検出し、前記音声パラメータの前記特徴量として、音量成分、時間成分および周波数成分の特徴量を検出することを特徴とする請求項３に記載の画像編集装置。
7. 前記取得手段は、前記挙動情報として、前記移動体の速度に関する情報、傾斜角情報、横Ｇ（Ｇｒａｖｉｔｙ）情報および現在位置情報のうち少なくともいずれか一つを取得することを特徴とする請求項４に記載の画像編集装置。
8. 画像データを編集する画像編集装置において、
   車両の内部あるいは外部の画像を撮影する撮影工程と、
   前記撮影工程によって撮影された前記画像を撮影した日時に関する情報を含み、前記画像をデータ化した画像データの入力を受け付ける入力工程と、
   移動体が移動した経路および時刻に関する情報を取得する取得工程と、
   前記入力工程によって受け付けられた前記画像データの前記日時に関する情報と、前記取得工程によって取得された経路および時刻に関する情報とに基づいて、前記画像データの撮影日時に、車両が通過した地点の地図情報と前記画像データを関連付ける関連付け工程と、
   前記関連付け工程によって関連付けられた前記画像データを表示する表示工程と、
   を含むことを特徴とする画像編集方法。
9. 請求項８に記載の画像編集方法をコンピュータに実行させることを特徴とする画像編集プログラム。
10. 請求項９に記載の画像編集プログラムを記録したことを特徴とするコンピュータに読み取り可能な記録媒体。

Images