JP2008097727A - 動画再生装置 - Google Patents

Abstract

【課題】再生したい場面を探し出す労力を軽減できる動画再生装置を提供する。
【解決手段】本発明に係る動画再生装置は、動画データ、前記動画データの撮影時における撮像装置の状態に関する付加情報、及び前記動画データの経過時間に関する時間情報を再生する再生手段と、前記付加情報と前記時間情報とに基づいて、前記付加情報の経時変化を視覚的に表したユーザーインターフェースを生成し、前記ユーザーインターフェースを表示装置に表示する表示手段と、前記ユーザーインターフェースの上で指定された位置に対応した前記動画データ中の経時位置を前記動画データの再生位置として設定する設定手段とを備えたことを特徴とする。
【選択図】図３

Description

本発明は、動画再生装置に関する。

従来から、撮影した動画を再生する際に、サムネイル画像を表示する動画再生装置が提案されている（例えば、特許文献１参照）。
特開２００４−２０６７７４号公報

特許文献１の技術では、撮影した動画をいくつかのシーンに分割して、各シーンの先頭フレームの画像をサムネイル画像として表示している。サムネイル画像に基づいていずれかのシーンが選択され、そのシーンの再生が指定されると、指定されたシーンの先頭から動画が再生され始める。

しかし、指定されたシーンの途中に再生したい場面がある場合、そのシーンの先頭から早送りして検索することがあり、再生したい場面を探し出す労力が軽減されないことがある。

また、再生したい場面がどのシーンに属するかユーザーが把握していない場合、各シーンの先頭から早送りして検索することがあり、再生したい場面を探し出す労力が軽減されないことがある。

本発明の目的は、再生したい場面を探し出す労力を軽減できる動画再生装置を提供することにある。

本発明に係る動画再生装置は、動画データ、前記動画データの撮影時における撮像装置の状態に関する付加情報、及び前記動画データの経過時間に関する時間情報を再生する再生手段と、前記付加情報と前記時間情報とに基づいて、前記付加情報の経時変化を視覚的に表したユーザーインターフェースを生成し、前記ユーザーインターフェースを表示装置に表示する表示手段と、前記ユーザーインターフェースの上で指定された位置に対応した前記動画データ中の経時位置を前記動画データの再生位置として設定する設定手段とを備えたことを特徴とする。

本発明によれば、再生したい場面を探し出す労力を軽減できる。

本発明の実施形態に係る撮像装置（動画再生装置）１００の外観構成を、図１を用いて説明する。図１は、本発明の実施形態に係る撮像装置の外観側面図である。

撮像装置１００は、例えば、デジタルビデオカメラ、デジタルカメラ、ビデオカメラなどである。撮像装置１００は、ケーシング１１４、レンズユニット１０２ａ、マイクユニット１０１ａ、操作ボタン群１１０ａ、液晶ディスプレイ１０４ａ、バッテリースロット１１５及びファインダー１０４ｂを備える。

レンズユニット１０２ａは、ケーシング１１４の前面に設けられて、被写体に向けられる。同様に、マイクユニット１０１ａは、ケーシング１１４の前面に設けられて、被写体に向けられる。これらにより、被写体の動画及び音声を取得することができる。

ファインダー１０４ｂは、ケーシング１１４においてレンズユニット１０２ａと対向する位置に設けられ、被写体の動画が表示される。液晶ディスプレイ１０４ａは、ケーシング１１４の側面に設けられ、被写体の動画が表示される。これらにより、撮影前又は撮影中の被写体を確認することができる。

操作ボタン群１１０ａは、ケーシング１１４において操作可能な位置に設けられる。操作ボタン群１１０ａは、押されたりすることにより、ユーザーから指示を受け付ける。

バッテリースロット１１５は、ケーシング１１４に着脱可能に接続されている。バッテリースロット１１５は、各部に電源を供給する。

次に、本発明の実施形態に係る撮像装置１００の構成及び動作を、図２を用いて説明する。図２は、本発明の実施形態に係る撮像装置の構成図である。

撮像装置１００は、マイク１０１、撮影部１０２、スピーカ１０３、表示部（表示装置）１０４、付加情報検知処理部１０５、符号化／復号化処理部１０６、表示制御部（表示手段）１０７及びＣＰＵ（設定手段）１０８を備える。撮像装置１００は、記録再生処理部（再生手段、読み取り手段）１０９、操作入力部（操作入力手段）１１０、記録媒体１１２及びメモリ１１３を備える。

マイク１０１は、マイクユニット１０１ａ（図１参照）を含む。マイク１０１は、撮影部１０２が被写体の動画を撮影する際に、被写体の音声をデジタル音声信号に変換して出力する。

撮影部１０２は、レンズユニット１０２ａ（図１参照）、ＣＣＤ、Ａ／Ｄ変換器及びタイマなどを含む。撮影部１０２では、レンズユニット１０２ａが被写体の光学像をＣＣＤへ結像する。ＣＣＤは、撮影指令に従い、光信号をアナログ画像信号に変換する。Ａ／Ｄ変換器は、アナログ画像信号をデジタル画像信号に変換する。また、タイマは、撮影指令に従い、撮影開始からの経過時間をカウントして時間情報を生成する。時間情報は、動画の撮影開始からの経過時間を示す情報である。

符号化／復号化処理部１０６は、エンコーダ１０６ａ及びデコーダ１０６ｂを含む。エンコーダ１０６ａは、デジタル画像信号及び時間情報を撮影部１０２から受け取り、デジタル音声信号をマイク１０１から受け取り、符号化指令をＣＰＵ１０８から受け取る。エンコーダ１０６ａは、符号化指令に従い、デジタル画像信号を、ＭＰＥＧ２を代表とする動画圧縮方法により圧縮して、さらに時系列順に多重化して圧縮動画データとして生成する。すなわち、エンコーダ１０６ａは、デジタル画像信号を符号化して圧縮動画データを生成する。また、エンコーダ１０６ａは、符号化指令に従い、デジタル音声信号を、ＭＰ３を代表とする音声圧縮方法により圧縮して、さらに時系列順に多重化して圧縮音声データとして生成する。すなわち、エンコーダ１０６ａは、デジタル音声信号を符号化して圧縮音声データを生成する。エンコーダ１０６ａは、圧縮動画データ、時間情報及び圧縮音声データを記録再生処理部１０９へ出力する。

デコーダ１０６ｂは、圧縮動画データ、時間情報や圧縮音声データを記録再生処理部１０９から受け取り、伸張指令をＣＰＵ１０８から受け取る。デコーダ１０６ｂは、伸張指令に従い、圧縮動画データを伸張して（復号化して）デジタル画像信号を生成する。また、デコーダ１０６ｂは、伸張指令に従い、圧縮音声データを伸張して（復号化して）デジタル音声信号を生成する。デコーダ１０６ｂは、デジタル画像信号を表示制御部１０７へ出力し、デジタル音声信号をスピーカ１０３へ出力する。

また、エンコーダ１０６ａは、デジタル動画信号からデジタル静止画信号を抽出するとともに、デジタル静止画信号に対してＪＰＥＧ方式などの圧縮を行って圧縮静止画データを生成して記録再生処理部１０９へ出力する。デコーダ１０６ｂは、圧縮静止画データを伸張してデジタル静止画信号を生成して表示制御部１０７へ出力する。

記録再生処理部１０９は、記録媒体１１２への書き込み及び読み出しをおこなうためのヘッドやモータなどの機構やそれらを制御するための制御回路を含む。

記録媒体１１２は、ケーシング１１４（図１参照）に設けられた読み取りインターフェース（図示せず）に着脱可能に接続される。

メモリ１１３は、記録再生処理部１０９が記録媒体１１２へ情報を書き込んだり記録媒体１１２から情報を読み出したりする際に、バッファーとして機能する。

バス１１６は、マイク１０１、撮影部１０２、スピーカ１０３、表示部１０４、符号化／復号化処理部１０６、記録再生処理部１０９、表示制御部１０７、ＣＰＵ１０８及び操作入力部１１０を互いに接続する。マイク１０１、撮影部１０２、スピーカ１０３、表示部１０４、符号化／復号化処理部１０６、記録再生処理部１０９、表示制御部１０７、ＣＰＵ１０８及び操作入力部１１０は、バス１１６を介してデータのやり取りを行う。

ＣＰＵ１０８は、バス１１６を介して、各部から情報を収集したり、各部へ指令を供給したりする。これにより、ＣＰＵ１０８は、全体の制御を行う。

表示制御部１０７は、デジタル画像信号を符号化／復号化処理部１０６から受け取り、表示指令をＣＰＵ１０８から受け取る。表示制御部１０７は、表示指令に従い、デジタル画像信号に応じた画像を表示部１０４に表示させる。また、後述のように、表示制御部１０７は、付加情報及び時間情報に基づいて、付加情報の経時変化を視覚的に表したユーザーインターフェース（バー情報及びカーソル）を作成し、ユーザーインターフェースを表示部１０４に表示する。付加情報は、撮影時における撮像装置１００（特に、撮影部１０２）の状態に関する情報である。付加情報は、例えば、手ぶれ量、ズーム動作、合焦状態及び撮影モードの少なくとも１つに関する情報を含む。時間情報は、撮影開始からの経過時間を示す情報である。

表示部１０４は、液晶ディスプレイ１０４ａ及びファインダー１０４ｂを含む。表示部１０４は、デジタル画像信号に応じた画像を表示する。例えば、表示部１０４は、各種設定メニューやタイトルなどの情報を表示する。

スピーカ１０３は、符号化／復号化処理部１０６からデジタル音声信号を受け取る。スピーカ１０３は、デジタル音声信号に基づき、音声を出力する。

操作入力部１１０には、ユーザーにより、指示が入力される。例えば、操作入力部１１０には、ユーザーインターフェースを操作するための指示が入力される。あるいは、例えば、操作入力部１１０には、再生開始の指示が入力される。あるいは、例えば、操作入力部１１０には、再生位置変更の指示が入力される。操作入力部１１０は、指示を示す情報をＣＰＵ１０８へ渡す。ＣＰＵ１０８は、指示を示す情報に対応した指令を生成する。

付加情報検知処理部１０５は、マイク１０１、撮影部１０２及び符号化／復号化処理部１０６より出力されたデータから、所定の項目の値を付加情報として検知する。付加情報検知処理部１０５は、付加情報を記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報を記録媒体１１２に記録する。

次に、撮影部１０２が動画を撮影する際における撮像装置１００の動作を説明する。

操作入力部１１０には、撮影開始の指示を示す情報が入力される。ＣＰＵ１０８は、撮影開始の指示を示す情報を操作入力部１１０から受け取り、その情報に基づき、撮影指令を生成して撮影部１０２及びマイク１０１へ出力する。撮影部１０２は、撮影指令に従い、被写体の動画を撮影して、デジタル画像信号を符号化／復号化処理部１０６へ出力する。マイク１０１は、撮影指令に従い、被写体の音声を取得して、デジタル音声信号を符号化／復号化処理部１０６へ出力する。

符号化／復号化処理部１０６は、デジタル画像信号を符号化して圧縮動画データを生成するとともに記録再生処理部１０９へ出力する。また、符号化／復号化処理部１０６は、デジタル音声信号を符号化して圧縮音声データを生成するとともに記録再生処理部１０９へ出力する。

また、撮影部１０２は、周知のズーム機能、手ぶれ補正機能を有しており、ズーム操作の履歴や手ぶれ補正時の手ぶれ量の情報を付加情報検知処理部１０５へ供給する。付加情報検知処理部１０５は、手ぶれ量の情報、ズーム動作の情報などを、付加情報として検知する。

付加情報検知処理部１０５は、付加情報を記録再生処理部１０９へ供給する。記録再生処理部１０９は、圧縮動画データ及び圧縮音声データと付加情報と時間情報とを多重し、記録に適した形態に変換する。これにより、記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

また、ユーザーにより、操作入力部１１０に記録停止の指示が入力されると、ＣＰＵ１０８は、その指示を受け取り、その指示に基づいて、各部を制御し、記録媒体１１２への記録を停止する。

ここで、記録開始の指示から記録停止の指示までの間に記録媒体１１２へ記録された１シーンの圧縮動画データ（動画）及び圧縮音声データ（音声）は、１つのファイルになっていることが好ましい。

なお、記録再生処理部１０９は、圧縮動画データを記録媒体１１２へ記録している間に、圧縮静止画データを記録媒体１１２へ記録できるようになっていてもよい。すなわち、ユーザーにより、操作入力部１１０に静止画記録の指示が入力されると、ＣＰＵ１０８は、その指示を受け取り、その指示に基づいて、静止画抽出指令を符号化／復号化処理部１０６へ供給する。符号化／復号化処理部１０６は、静止画抽出指令に従い、デジタル画像信号よりデジタル静止画信号を抽出する。符号化／復号化処理部１０６は、抽出したデジタル静止画信号をＪＰＥＧ方式で符号化して圧縮静止画データ（静止画）を生成する。

次に、記録再生処理部１０９が動画を再生する際における撮像装置１００の動作を説明する。

操作入力部１１０には、サムネイル表示の指示を示す情報が入力される。ＣＰＵ１０８は、サムネイル表示の指示を示す情報を操作入力部１１０から受け取り、その情報に基づき、サムネイル画像生成指令を生成して記録再生処理部１０９及び表示制御部１０７へ出力する。

記録再生処理部１０９は、サムネイル画像生成指令に従い、記録媒体１１２を参照して、各シーンの先頭部分の画像データを再生して圧縮動画データ符号化／復号化処理部１０６へ渡す。符号化／復号化処理部１０６は、再生された圧縮動画データを伸張して（復号化して）、その先頭の１フレームを抽出して表示制御部１０７へ出力する。

表示制御部１０７は、符号化／復号化処理部１０６から出力された各シーンの先頭の１フレームの画像データを縮小し、サムネイル画像データを生成する。

ユーザーにより、サムネイル一覧画面の中から所望のシーンを選択して再生決定する旨の指示である再生開始の指示が、操作入力部１１０に入力される。

ＣＰＵ１０８は、操作入力部１１０より再生開始の指示を受け取ると、選択されたシーンの先頭から再生を開始するための指令である再生開始指令を生成して記録再生処理部１０９に供給する。

記録再生処理部１０９は、再生開始指令に従い、選択されたシーンの先頭以降の圧縮動画データ及び圧縮音声データを記録媒体１１２から読み出して符号化／復号化処理部１０６へ供給する。また、記録再生処理部１０９は、再生開始指令に従い、圧縮動画データ及び圧縮音声データに多重化されている付加情報及び時間情報を記録媒体１１２から読み出してＣＰＵ１０８へ供給する。

符号化／復号化処理部１０６は、圧縮動画データと圧縮音声データとを伸張して（復号化して）、復号後の動画データを表示制御部１０７へ供給し、復号後の音声データをスピーカ１０３へ供給する。

一方、ＣＰＵ１０８は、記録再生処理部１０９より受け取った付加情報と時間情報とを表示制御部１０７へ転送する。表示制御部１０７は、付加情報と時間情報とに基づいて、現在再生中のシーンの時間経過と付加情報との関係を示すバー情報の画像を生成する。また、表示制御部１０７は、このバー情報における経時位置を指定するためのカーソルの画像を生成する。すなわち、表示制御部１０７は、バー情報とカーソルとを含むユーザーインターフェースを生成する。

表示制御部１０７は、符号化／復号化処理部１０６から動画データを受け取り、ＣＰＵ１０８からユーザーインターフェース（バー情報及びカーソル）の情報を受け取る。表示制御部１０７は、動画とユーザーインターフェースとを多重化して表示部１０４に表示する。

一方、スピーカ１０３は、音声データに基づいて、動画に対応する音声を再生する。

図３は、動画の再生中又は再生一時停止中における表示部１０４の表示画面を示す図である。

表示画面２０１の中央付近には、被写体２０２が表示されている。表示画面２０１の下部付近には、ユーザーインターフェース２０５が表示されている。ユーザーインターフェース２０５は、バー情報２０３及びカーソル２０４を含む。

バー情報２０３において、左端がシーンの始めの部分を示し、右端がシーンの終わりの部分を示している。バー情報２０３における左端からの横方向（長さ方向）の距離は、動画の撮影開始からの経過時間を示している。すなわち、バー情報２０３は、長さ方向を時間軸としており内部が対応する付加情報の値により色付けされている長方形である。

また、カーソル２０４は、バー情報２０３に重ねて表示されている。ＣＰＵ１０８は、動画再生中、時間経過に伴ってカーソル２０４をバー情報２０３上で対応する位置に随時移動して表示させる。また、本実施形態では、動画データの再生中、ユーザーが操作入力部１１０を操作することでカーソル２０４を移動させ、動画の再生位置を任意に変更することが可能である。即ち、後述の如くユーザーがカーソル２０４の移動を指示すると、バー情報２０３上で移動先の位置に応じた位置の画像が再生される。

例えば、付加情報が手ぶれ量の情報である場合について説明する。付加情報検知処理部１０５は、撮影部１０２から受け取るデジタル画像信号に基づいて、手ぶれ量を検出する。例えば、付加情報検知処理部１０５は、デジタル画像信号に基づいて、画像における被写体及び背景の変位量や振動の周波数などを検出する。あるいは、例えば、付加情報検知処理部１０５は、ＣＣＤやレンズなどを制御する信号に基づいて、ＣＣＤやレンズなどの傾き等を検出する。付加情報検知処理部１０５は、これらの検出した値に応じて、手ぶれ量を、例えば、大、中、小の３段階でランク付けする。付加情報検知処理部１０５は、手ぶれ量の（ランクの）情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

ＣＰＵ１０８は、この付加情報に基づいて、手ぶれ量のランクごとにバー情報２０３内での表示色などを変える。例えば、バー情報２０３において、手ぶれ量が大である時間帯が赤色で表示され、手ぶれ量が中である時間帯が黄色で表示され、手ぶれ量が小である時間帯が白色で表示される。これにより、現在再生中のシーンにおいて、手ぶれの大きい場面を容易に認識できるので、手ぶれが小さい場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。また、手ぶれが大きく見づらい場面を容易にカットして再生することができる。

また、カーソル２０４は、動画が再生されている際に、再生しているシーンの経過時間を示す。バー情報２０３及びカーソル２０４は、再生中、及び、再生一時停止中に表示される。

この様に動画データの再生中に、操作入力部１１０により再生停止の指示があると、ＣＰＵ１０８は記録再生処理部１０９を制御して再生を停止し、前述のサムネイル一覧画面を表示部１０４に表示する。

次に、カーソル２０４を移動するための操作入力部１１０の構成例について、詳細に説明する。

操作入力部１１０（操作ボタン群１１０ａ）は、例えば、左へ移動するボタン（以下、左ボタンとする）と右へ移動するボタン（以下、右ボタンとする）とを含む。これにより、表示画面２０１においてカーソル２０４をバー情報２０３上で左右に移動することができる。例えば、左ボタン（右ボタン）を１度押すと、カーソル２０４がバー情報２０３上で現地点から５秒分左（右）へ移動する。左ボタン（右ボタン）を２秒以上長押しすると、カーソル２０４がバー情報２０３上で現地点から２０秒分移動する。そのままボタンを押しつづけることで、２０秒分毎にカーソルが左（右）へ移動する。

このとき、ＣＰＵ１０８は、再生中の動画像の再生位置をバー情報２０３内での移動先の位置に対応した位置にスキップし、引き続き動画データの再生を継続する。また、再生一時停止中にカーソル２０４が移動されると、移動先の位置に対応した位置にスキップし、再生一時停止画面を表示する。

あるいは、操作入力部１１０（操作ボタン群１１０ａ）は、例えば、ダイヤルを含む。このダイヤルを回転させることにより、表示画面２０１においてカーソル２０４をバー情報２０３上で左右に移動することができる。例えば、ダイヤルを右（左）に回すと、ダイヤルの回転量に応じてカーソル２０４がバー情報２０３上で右（左）へ移動する。

あるいは、操作入力部１１０（操作ボタン群１１０ａ）は、例えば、タッチパネルを含む。表示画面２０１のバー情報２０３において、移動させたい経過時間を示す部分が触れられると、カーソル２０４がバー情報２０３上のその部分へ移動する。

前述の実施形態では、再生中（又は再生一時停止中）に、付加情報と時間情報とに基づいて生成したバー情報とカーソルとを表示していた。以下の実施形態では、サムネイル一覧画面（再生前の画面）上でバー情報とカーソルとを表示するものである。

図４は、動画の再生前における表示部１０４の表示画面（サムネイル一覧画面）を示す図である。

表示画面３０１には、各シーンの先頭フレームの画像がサムネイル画像３０２として表示されている。表示画像３０１には、複数のサムネイル画像３０２が表示されている。枠３０５は、現在選択されているシーンを示しており、ユーザーは枠３０５を移動することでシーンを選択することができる。

本実施形態では、ＣＰＵ１０８が、枠３０５にて選択されているシーンを検出し、選択されたシーンの付加情報及び時間情報を読み出すための読み出し指令を生成して記録再生処理部１０９に供給する。記録再生処理部１０９は、読み出し指令に従い、選択されたシーンの付加情報及び時間情報を記録媒体１１２から読み出して表示制御部１０７へ供給する。表示制御部１０７は、読み出された付加情報及び時間情報に基づいて、選択されたシーンのバー情報３０３及びカーソル３０４を生成する。表示制御部１０７は、複数のサムネイル画像３０２と共に、枠３０５で選択されているシーンのバー情報３０３及びカーソル３０４を表示部１０４に表示する。

なお、表示部１０４に表示されるバー情報３０３及びカーソル３０４は、選択されているシーンを含む複数のシーンの情報であってもよい。このとき、バー情報において、選択されているシーンがハイライト表示されるようになっていてもよい。

表示部１０４に表示されたバー情報３０３及びカーソル３０４の構成は、図３に示すバー情報２０３及びカーソル２０４と同様である。本実施形態でも、カーソル３０４をバー情報３０３上で移動させることにより、動画の再生位置を変更可能な点は、図３に示すバー情報２０３及びカーソル２０４と同様である。

本実施形態では、サムネイルの一覧表示の指示に応じて表示される各サムネイル画像は、前述のように各シーンの先頭フレームの静止画である。カーソル３０４を移動する指示（再生位置変更の指示）が操作入力部１１０に入力されると、ＣＰＵ１０８は、再生位置変更の指示を操作入力部１１０から受け取る。ＣＰＵ１０８は、再生位置変更の指示に基づき、再生位置変更指令を生成して記録再生処理部１０９へ供給する。記録再生処理部１０９は、再生位置変更指令に基づき、移動先の経時位置に対応した圧縮静止画データ（又は少ないフレーム数の圧縮動画データ）を記録媒体１１２から読み出し符号化／復号化処理部１０６へ供給する。符号化／復号化処理部１０６は、圧縮静止画データ（又は圧縮動画データ）を復号してＣＰＵ１０８へ供給する。ＣＰＵ１０８は、復号化した静止画データ（又は動画データ）から１フレームの画像データを、再生位置における動画の内容を表す静止画として抽出する。ＣＰＵ１０８は、その１フレームの画像データを表示制御部１０７に供給する。表示制御部１０７は、その１フレームの画像データを縮小し、縮小後の画像データを、新たな移動先の経時位置におけるサムネイル画像として表示部１０４に表示する。

この様に、シーンの先頭だけでなくシーンの途中の静止画（場面）もサムネイル一覧画面上で確認することができる。これにより、ユーザーは、再生したい場面がどのシーンに属しているか把握していない場合でも、再生したい場面を容易に確認することができる。 操作入力部１１０に再生開始の指示が入力されると、ＣＰＵ１０８は、移動先の経時位置（カーソル３０４により変更された動画の再生位置）の動画の再生を開始するための再生指令を生成する。記録再生処理部１０９は、再生指令に基づき、動画の再生位置に対応した圧縮動画データを記録媒体１１２から読み出して符号化／復号化処理部１０６に復号化させる。記録再生処理部１０９は、復号化された動画データを符号化／復号化処理部１０６から受け取り表示制御部１０７へ供給する。表示制御部１０７は、サムネイル一覧画面に代えて、動画の再生位置に対応した動画を表示部１０４に表示する。

なお、本実施形態では、サムネイル一覧画面上での枠３０５を移動するため、操作入力部１１０における十字キーを用いる。また、カーソル３０４を移動するため、早送り、巻き戻しキーを用いる。

このように、本実施形態では、サムネイル一覧画面上で、選択中のシーンの手ぶれ状態などを示すバー情報と再生位置選択用のカーソルとを表示している。そして、カーソルを移動することで、サムネイル一覧画面上で、各シーンの手ぶれの大きい区間を容易に認識できるので、手ぶれが大きく見づらい部分を避けて内容を確認することができる。すなわち、ユーザーは、手ぶれが小さい場面がどのシーンに属しているか把握していない場合でも、手ぶれが小さい場面を容易に探し出すことができる。

次に、バー情報に反映されている付加情報が手ぶれ量以外の情報である場合における画面の動作例を説明する。上記で説明した画面の動作例（図３及び図４参照）と異なる部分を中心に説明し、同様の部分に関しては説明を省略する。

バー情報に反映されている付加情報は、ズーム操作の情報を含んでもよい。このとき、付加情報検知処理部１０５は、撮影部１０２から取得したズーム制御情報に基づき、ズーム操作を例えばズームイン、ズームなし及びズームアウトの３段階でランク付けする。付加情報検知処理部１０５は、ズーム操作の（ランクの）情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

また、記録再生処理部１０９は、付加情報、時間情報、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２から読み出して、表示制御部１０７、表示部１０４及びスピーカ１０３に動画及び音声を再生させる。このとき、表示部１０４に表示される表示画面には、バー情報が３色で表示される。例えば、バー情報において、ズームインした時間帯が赤色で表示され、ズームなしの時間帯が白色で表示され、ズームアウトした時間帯が黄色で表示される。これにより、経過時間に対するズーム操作の状態を容易に判断することができるので、ズームインした場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。

なお、表示部１０４に表示される表示画面には、ズームインした時間帯がズームインの倍率に応じて赤色から白色へグラデーション表示されても良く、ズームアウトした時間帯がズームアウトの倍率に応じて黄色から白色へグラデーション表示されても良い。また、付加情報検知処理部１０５は、ズームあり及びズームなしの２段階でランク付けしても良い。このとき、表示部１０４に表示される表示画面には、ズームありの時間帯が赤色で表示され、ズームなしの時間帯が白色で表示される。

なお、上記のように、記録媒体１１２に圧縮静止画データ（静止画）が記録されている場合、バー情報に反映されている付加情報は、撮影モードに関する情報（例えば、静止画撮影モードか動画撮影モードかを示す情報）を含んでもよい。このとき、付加情報検知処理部１０５は、撮影部１０２から取得した撮影モード情報に基づき、静止画撮影なし及び静止画撮影ありの２段階でランク付けする。付加情報検知処理部１０５は、動画撮影中に静止画撮影の指示があると、静止画撮影があった時点の前後の数秒間を示す静止画撮影の（ランクの）情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

記録再生処理部１０９は、付加情報、時間情報、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２から読み出して、表示制御部１０７、表示部１０４及びスピーカ１０３に動画及び音声を再生させる。このとき、表示部１０４に表示される表示画面には、バー情報が２色で表示される。例えば、バー情報において、静止画撮影した時間帯が赤色で表示され、静止画撮影していない時間帯が白色で表示される。これにより、経過時間に対する静止画撮影の有無を容易に判断することができるので、静止画撮影した場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。

また、付加情報は、被写体のピントの状態（合焦状態）の情報を含んでもよい。このとき、付加情報検知処理部１０５は、撮影部１０２から取得したオートフォーカス制御情報に基づき、合焦状態を例えばフォーカス状態及びデフォーカス状態の２段階でランク付けする。付加情報検知処理部１０５は、合焦状態の（ランクの）情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

また、記録再生処理部１０９は、付加情報、時間情報、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２から読み出して、表示制御部１０７、表示部１０４及びスピーカ１０３に動画及び音声を再生させる。このとき、表示部１０４に表示される表示画面には、バー情報が２色で表示される。例えば、バー情報において、フォーカス状態の時間帯が赤色で表示され、デフォーカス状態の時間帯が白色で表示される。これにより、経過時間に対する合焦状態を容易に判断することができるので、フォーカス状態の場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。

また、表示部１０４が表示するユーザーインターフェースに含まれるバー情報は、１つの軸を時間軸とし他の軸を付加情報の値とするグラフであってもよい。例えば、バー情報には、図５に示すように、付加情報が曲線グラフで表示されて反映されても良い。あるいは、例えば、バー情報には、図６に示すように、付加情報が折れ線グラフで表示されて反映されても良い。あるいは、例えば、バー情報には、図７に示すように、付加情報が棒グラフで表示されて反映されても良い。

また、表示部１０４が表示するユーザーインターフェースに含まれるバー情報は、その上下方向の幅を部分的に変えることにより、付加情報が反映されていてもよい。あるいは、バー情報は、長さ方向を時間軸としており内部が対応する付加情報の値により模様付けされている長方形であってもよい。このように、表示部１０４は、時間を示す帯状のオブジェクトを、付加情報を反映させた形態で表示する。

なお、前述の実施形態では、図３、図４に示すように、バー情報とカーソルとを表示していたが、ユーザーは、操作入力部１１０により、これらバー情報とカーソルとの表示を禁止することも可能である。

次に、撮像装置が動画を再生する処理を、図８を用いて説明する。図８は、撮像装置が動画を再生する処理を示すフローチャートである。

ステップＳ１では、ＣＰＵ１０８（図１参照）が、サムネイル表示の指示があったか否かを判断する。すなわち、ＣＰＵ１０８は、サムネイル表示の指示を示す情報を操作入力部１１０から受け取った場合、サムネイル表示の指示があったと判断する。ＣＰＵ１０８は、サムネイル表示の指示を示す情報を操作入力部１１０から受け取らなかった場合、サムネイル表示の指示がなかったと判断する。

ステップＳ２では、ＣＰＵ１０８が、サムネイル表示の指示を示す情報に基づき、サムネイル画像生成指令を生成して記録再生処理部１０９及び表示制御部１０７へ出力する。

記録再生処理部１０９は、サムネイル画像生成指令に従い、記録媒体１１２を参照して、各シーンの先頭部分の画像データを再生し、圧縮動画データ圧縮動画データ符号化／復号化処理部１０６へ渡す。符号化／復号化処理部１０６は、再生された圧縮動画データを伸張して（復号化して）、その先頭の１フレームを抽出して表示制御部１０７へ出力する。

表示制御部１０７は、符号化／復号化処理部１０６から出力された各シーンの先頭の１フレームの画像データを縮小し、サムネイル画像データを生成する。

ステップＳ３では、操作入力部１１０に、サムネイル一覧画面において選択されたシーンの再生決定の指示が入力される。ＣＰＵ１０８は、その再生決定の指示を示す情報を操作入力部１１０から受け取る。ＣＰＵ１０８は、再生決定の指示を示す情報に基づき、記録再生処理部１０９に対し、選択されたシーンの画像データ、音声データ及び、付加情報を再生するよう指示する。

そして、記録再生処理部１０９は、再生された圧縮画像、音声データを符号化／復号化処理部１０６に出力し、付加情報及び時間情報をＣＰＵ１０８に出力する。

符号化／復号化処理部１０６は、圧縮動画データと圧縮音声データとを伸張して（復号化して）、画像データを表示制御部１０７経由で表示部１０４へ出力し、音声データをスピーカ１０３へ出力する。

一方、ＣＰＵ１０８は、記録再生処理部１０９より出力された付加情報と時間情報とに基づいて、現在再生中のシーンの時間経過と付加情報との関係を示すバー情報を生成する。また、このバー情報における経時位置を指定するためのカーソル画像を生成し、これらバー情報とカーソル画像とを含むユーザーインターフェース情報を表示制御部１０７経由へ供給する。

表示制御部１０７は、符号化／復号化処理部１０６から出力された動画像データと、ＣＰＵ１０８からのユーザーインターフェース情報とを多重して表示部１０４に表示する。

ステップＳ４では、ＣＰＵ１０８が、再生位置変更の指示があったか否かを判断する。すなわち、ＣＰＵ１０８は、再生位置変更の指示を操作入力部１１０から受け取った場合、再生位置変更の指示があったと判断して、処理をステップＳ５へ進める。ＣＰＵ１０８は、再生位置変更の指示を操作入力部１１０から受け取らなかった場合、再生位置変更の指示がなかったと判断して、処理をステップＳ４へ進める。例えば、図３に示すバー情報２０３の上においてカーソル２０４が移動された場合、ＣＰＵ１０８は、カーソル２０４の移動先が示す経時位置の情報を、再生位置変更の指示として操作入力部１１０から受け取る。

ステップＳ５では、ＣＰＵ１０８は、再生位置変更の指示に基づいて、再生位置変更指令を生成して記録再生処理部１０９へ供給する。記録再生処理部１０９は、再生位置変更指令に基づき、移動先の経時位置に対応した圧縮動画データを記録媒体１１２から読み出し符号化／復号化処理部１０６へ供給する。符号化／復号化処理部１０６は、圧縮動画データを復号して表示制御部１０７へ供給する。表示制御部１０７は、復号された動画データと、付加情報及び時間情報トに基づき、動画とユーザーインターフェース（バー情報及びカーソル）とを多重化して表示部１０４に表示する。

スピーカ１０３は、再生指令に従い、デジタル音声信号に基づいて、設定された再生位置の動画に対応する音声を再生する。

以上のように、撮影された動画において再生したい場面を検索する際に、付加情報及び時間情報を検索時のパラメータとして利用することができるので、再生したい場面を探し出す労力を軽減できる。

なお、撮像装置は、例えば、据え置き型又は携帯型の再生専用のビデオプレーヤー、ＤＶＤプレーヤーなどでもよいし、据え置き型の録画及び再生可能なビデオレコーダー、ＤＶＤレコーダーなどでもよい。

また、バー情報には、被写体又は周辺の音の大きさの情報がさらに反映されてもよい。このとき、付加情報検知処理部１０５は、マイク１０１から取得したデジタル音声信号に基づき、音の大きさを例えば大及び小の２段階でランク付けする。付加情報検知処理部１０５は、音の大きさの（ランクの）情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

記録再生処理部１０９は、付加情報、時間情報、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２から読み出して、表示制御部１０７、表示部１０４及びスピーカ１０３に動画及び音声を再生させる。このとき、表示部１０４に表示される表示画面には、バー情報が２色で表示される。例えば、バー情報において、音の大きさが大である時間帯が赤色で表示され、音の大きさが小である時間帯が白色で表示される。これにより、経過時間に対する音の大きさの状態を容易に判断することができるので、音が小さい場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。また、音が大きくうるさい場面を容易にカットして再生することができる。

付加情報検知処理部１０５は、音の大きさを３段階以上でランク付けしても良い。このとき、表示部１０４に表示される表示画面には、例えば、音の大きさが小さくなるに従ってバー情報が赤から白へとグラデーション表示されてもよい。

あるいは、バー情報には、撮影時刻情報がさらに反映されてもよい。このとき、付加情報検知処理部１０５は、撮影時刻情報を時計（図示せず）から受け取り、撮影時刻情報を付加情報として検知する。撮影時刻情報は、動画を撮影した時刻（動画を撮影した場所における標準時刻）に関する情報である。例えば、付加情報検知処理部１０５は、撮影時刻情報に基づき、時刻が属する時間帯を、午前５時〜午前１０時、午前１０時〜午後４時、午後４時〜午後７時及び午後７時〜午前５時の４段階にランク付けする。付加情報検知処理部１０５は、時刻が属する時間帯の情報を付加情報として記録再生処理部１０９へ出力する。記録再生処理部１０９は、付加情報と時間情報とに関連付けて、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２へ記録する。

記録再生処理部１０９は、付加情報、時間情報、圧縮動画データ（動画）及び圧縮音声データ（音声）を記録媒体１１２から読み出して、表示制御部１０７、表示部１０４及びスピーカ１０３に動画及び音声を再生させる。このとき、表示部１０４に表示される表示画面には、バー情報が４色で表示される。例えば、バー情報において、午前５時〜午前１０時（朝）の時間帯が水色、午前１０時〜午後４時（昼間）の時間帯が黄色、午後４時〜午後７時（夕方）の時間帯が橙色、午後７時〜午前５時（夜）の時間帯が灰色で表示される。これにより、経過時間に対する撮影時刻を容易に判断することができるので、所定の時間帯（例えば、朝）に撮影した場面を検索したい場合などに、再生したい場面の検索を容易に行うことができる。

また、バー情報には、デジタル動画信号のビットレート及びデジタル動画信号の圧縮率のいずれかがさらに反映されても良い。

本発明の実施形態に係る撮像装置の外観側面図。 本発明の実施形態に係る撮像装置の構成図。 動画の再生中又は再生一時停止中における表示部の表示画面を示す図。 動画の再生前における表示部の表示画面を示す図。 ユーザーインターフェースを示す図。 ユーザーインターフェースを示す図。 ユーザーインターフェースを示す図。 撮像装置が動画を再生する処理を示すフローチャート。

符号の説明

１００ 撮像装置
１０４ 表示部
１０５ 付加情報検知処理部
１０９ 記録再生処理部
１１０ 操作入力部

Claims (7)

1. 動画データ、前記動画データの撮影時における撮像装置の状態に関する付加情報、及び前記動画データの経過時間に関する時間情報を再生する再生手段と、
   前記付加情報と前記時間情報とに基づいて、前記付加情報の経時変化を視覚的に表したユーザーインターフェースを生成し、前記ユーザーインターフェースを表示装置に表示する表示手段と、
   前記ユーザーインターフェースの上で指定された位置に対応した前記動画データ中の経時位置を前記動画データの再生位置として設定する設定手段と、
   を備えたことを特徴とする動画再生装置。
2. 前記表示手段は、前記再生位置における前記動画データの内容を表す静止画を表示する
   ことを特徴とする請求項１に記載の動画再生装置。
3. 前記付加情報は、手ぶれ量、ズーム動作、合焦状態及び撮影モードの少なくとも１つに関する情報を含む
   ことを特徴とする請求項１又は２に記載の動画再生装置。
4. 前記ユーザーインターフェースは、長さ方向を時間軸としており内部が対応する前記付加情報の値により色付けされている長方形を含む
   ことを特徴とする請求項１から３のいずれか１項に記載の動画再生装置。
5. 前記ユーザーインターフェースは、１つの軸を時間軸とし他の軸を前記付加情報の値とするグラフを含む
   ことを特徴とする請求項１から３のいずれか１項に記載の動画再生装置。
6. 前記ユーザーインターフェース上の位置を任意に指定する操作入力手段をさらに備え、
   前記設定手段は、前記操作入力手段により指定された位置を前記再生位置として設定する
   ことを特徴とする請求項１から５のいずれか１項に記載の動画再生装置。
7. 前記再生手段は、前記設定手段が前記操作入力手段による前記ユーザーインターフェース上の指定位置の変更に従って前記再生位置を新たに設定したことに応答して、新たに設定した前記再生位置より前記動画データを再生す
   ことを特徴とする請求項６に記載の動画再生装置。

Images