JP6075821B2 - 画像再生装置、その制御方法、およびプログラム - Google Patents

Description

本発明は、画像再生装置、その制御方法、およびプログラムに関し、特に、デジタルカメラなどの撮像装置で撮影した画像を表示する際に用いられる画像再生装置に関する。

一般に、デジタルカメラなどの撮像装置では、連続撮影（連写）を行う機能が備えられている。連続撮影の結果得られた画像を表示する際には、一枚ずつ撮影された（通常撮影された）画像と同様に、一枚ずつ撮像装置のモニタ又はパーソナルコンピュータ（ＰＣ）のモニタに表示して、画像の表示切り替えを行って表示を行う。

さらに、撮影した画像を縮小した後、撮像装置又はＰＣのモニタに複数枚の画像をタイル状に配置して一覧表示するインデックス表示も行われている（例えば、特許文献１参照）。

特開２００８−１２４８２６号公報

ところで、一般に、連写を行う場合には、ユーザーは特定の被写体の動きの変化に注目することが多い。このため、連写された画像を閲覧する際には、ユーザーは特定の被写体の動きの変化が分かりやすい表示を望んでいる。

ところが、特許文献１においては、単に複数の画像をタイル状に配置して一覧表示しているので、連写された画像を閲覧する際に、特定の被写体の動きの変化を分かりやすく表示することが難しい。

従って、本発明の目的は、連写された画像を閲覧する際に、特定の被写体の動きの変化を分かりやすく表示することのできる画像再生装置、その制御方法、およびプログラムを提供することにある。

上記の目的を達成するため、本発明による画像再生装置は、連続する複数の画像を表示部に画面表示する画像再生装置であって、前記画像において注目すべき被写体をオブジェクトとして選択する選択手段と、前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出手段と、前記検出手段によって検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定手段と、前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御手段とを有し、前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、前記決定手段は前記オブジェクトの移動方向が前記左右方向であると、前記連続する複数の画像を配置する方向を前記水平方向に垂直な方向に決定することを特徴とする。

本発明による制御方法は、連続する複数の画像を表示部に画面表示する画像再生装置の制御方法であって、前記画像において注目すべき被写体をオブジェクトとして選択する選択ステップと、前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出ステップと、前記検出ステップで検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定ステップと、前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御ステップとを有し、前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、前記決定ステップでは前記オブジェクトの移動方向が前記左右方向であると、前記連続する複数の画像を配置する方向を前記水平方向に垂直な方向に決定することを特徴とする。

本発明によるプログラムは、コンピュータを上記の画像再生装置の各手段として機能させるためのプログラムである。

本発明によれば、連写された画像を閲覧する際に、特定の被写体の動きの変化を分かりやすく表示することができる。

本発明の第１の実施形態による画像再生装置を備える撮像装置の一例を示すブロック図である。 図１に示すタッチパネルの操作による画面遷移を説明するための図であり、（Ａ）はインデックスモードの際の画面を示す図、（Ｂ）は再生モードの際の画面を示す図、（Ｃ）は撮影モードの際の画面を示す図、（Ｄ）は連写時におけるインデックスモードの画面を示す図である。 図１に示す表示部に表示された画像における方向について説明するための図であり、（Ａ）は方向の定義を示す図、（Ｂ）は方向の範囲を示す図である。 図１に示すデジタルカメラにおける再生処理（表示処理）を説明するためのフローチャートである。 図４で説明した表示処理を行った際に表示される静止画の一例を説明するための図であり、（Ａ）は連写時インデックス画面を示す図、（Ｂ）は一枚の静止画を選択した際の画面表示を示す図、（Ｃ）は被写体が選択された際の確定画面を示す図、（Ｄ）はスクロール表示を示す図である。 図４で説明した表示処理を行った際に表示される静止画の他の例を説明するための図であり、（Ａ）は連写時インデックス画面を示す図、（Ｂ）は一枚の静止画を選択した際の画面表示を示す図、（Ｃ）はスクロール表示を示す図である。 本発明の第２の実施形態による画像再生装置を備えるデジタルカメラにおけるスクロール表示の一例を示す図である。 本発明の第３の実施形態による画像再生装置を備えるデジタルカメラにおけるスクロール表示の一例を示す図である。 本発明の第４の実施形態による画像再生装置を備えるデジタルカメラにおける表示処理を説明するためのフローチャートである。

以下、本発明の実施の形態による画像再生装置について図面を参照して説明する。

［第１の実施形態］
図１は、本発明の第１の実施形態による画像再生装置を備える撮像装置の一例を示すブロック図である。なお、図１では撮像装置としてデジタルカメラが示されている。

デジタルカメラ１０１はデジタルカメラ基本部１１５を備えており、このデジタルカメラ基本部１１５は後述するように全体制御部１１４によって制御される。さらに、デジタルカメラ１０１はタッチパネル１０２を備えており、このタッチパネル１０２は表示部１０３および操作部１０４を有している。

表示部１０３にはデジタルカメラ１０１で撮影された静止画が表示されるとともに、ユーザーインタフェースである指示ボタン（図示せず）が表示される。さらに、表示部１０３にはデジタルカメラ１０１に関する各種情報および、記録媒体１２０の残容量などが表示される。操作部１０４は表示部１０３に表示された指示ボタンの操作に応じた指示を受け付ける。

映像入力部１０５はデジタルカメラ１０１の構成要素である撮像部（図示せず）から映像を画像データとして受け、後段の符号部１０９に送信する。符号部１０９は静止画を記録する際、画像データを符号化して符号化画像データとする。サムネール生成部１０６は複数の静止画についてサムネールを生成する。

合成部１０７は表示部１０３に表示する文字情報、静止画、およびサムネールなどを合成する。また、合成部１０７は、合成する静止画が連写の結果得られた画像である場合には、複数の静止画を並べて合成する画像配置機能を有している。さらに、合成部１０７は静止画の一部を切り出して合成する画像切り出し機能も備えている。

復号部１０８は記録媒体１２０に記録された符号化データを復号して画像テータとする。グラフィック部１１０はデジタルカメラ１０１に関する各種情報を表示部１０３に表示するための画面を生成する。例えば、グラフィック部１１０は時計、電池残量、記録媒体残容量、記録媒体１２０に記録された静止画の枚数などの情報を描画する。また、グラフィック部１１０は、例えば、連続した画像ＡおよびＢにおいて同一の被写体における移動量を比較する際に、当該被写体の所定の位置にガイドを描画するガイド表示機能を有している。

記録媒体アクセス部１１１は、静止画を記録する際に、記録媒体１２０に符号部１０９で符号化された符号化画像データを記録する。さらに、記録媒体アクセス部１１１は画像再生の際には、記録媒体１２０から符号化画像データを読み出して、当該符号化画像データを復号部１０８に送る。つまり、記録媒体アクセス部１１１は記録媒体１２０に対するインターフェイスである。

データベース部１１２は、記録媒体１２０に含まれる静止画に関する情報を保持する。タッチ状態検出部１１３は、タッチパネル１０２上にユーザーの指が触れているか否かを検出するとともに指がタッチパネル１０２上のどの位置に触れているか否かを検出する。

全体制御部１１４はデジタルカメラ基本部１１５を制御するとともに、例えば、復号部１０８で復号された画像が連写画像であるか否かを判定する連続撮影画像判定機能を有している。さらに、全体制御部１１４は連写画像であると、ユーザーに対して連写画像からのうち１枚の画像を提示して、当該画像から注目被写体を選択させてオブジェクトとして認識するオブジェクト認識機能を有している。加えて、全体制御部１１４は連写の前後で注目被写体であるオブジェクトがどの程度移動したかを検出するオブジェクト動作判定機能を有している。また、全体制御部１１４はオブジェクトの移動に応じてグラフィック部１１０および合成部１０７に対して、後述するように表示方法を変更する表示変更指示を行う。

なお、記録媒体１２０は、例えば、脱着式であり、ユーザーは必要に応じて記録媒体１２０をデジタルカメラ１０１に装着することができる。

続いて、図１に示すデジタルカメラ１０１における静止画再生の際の動作について説明する。

いま、ユーザーが記録媒体１２０をデジタルカメラ１０１に装着すると、記録媒体アクセス部１１１は全体制御部１１４の制御下で記録媒体１２０に記録された静止画（符号化画像データ）を取得して、グループ情報をデータベース部１１２に格納する。ここでは、静止画を記録する際に、連写で得られた静止画には当該連写に含まれる複数の静止画を同一のグループに属することを示すグループ情報が付加されている。

ユーザーがタッチパネル１０２でタッチ操作を行って、静止画のインデックス一覧を表示する指示を全体制御部１１４に与えると、全体制御部１１４は記録媒体アクセス部１１１を制御して記録媒体１２０から静止画の読みだしを開始する。そして、記録媒体アクセス部１１１は、記録媒体１２０から読み出した静止画を復号部１０８に送る。

復号部１０８は符号化画像データを復号するとともに伸長する。そして、サムネール生成部１０６は復号された画像データに応じてサムネールを生成する。このサムネールを合成部１０７のメモリ（図示せず）に格納される。上述の処理が複数枚の静止画について行われて、合成部１０７はそのメモリにインデックス表示画面を構築する。合成部１０７はメモリに構築されたインデックス表示画面を表示部１０３に転送して、表示部１０３にインデックス画面を表示する。

ここで、図１に示すデジタルカメラ１０１におけるタッチパネル１０２の操作について説明する。

図２は図１に示すタッチパネル１０２の操作による画面遷移を説明するための図である。そして、図２（Ａ）はインデックス（ＩＮＤＥＸ）モードの際の画面を示す図であり、図２（Ｂ）は再生モードの際の画面を示す図である。また、図２（Ｃ）は撮影モードの際の画面を示す図であり、図２（Ｄ）は連写時におけるインデックスモードの画面を示す図である。

図１に示すデジタルカメラ１０１においては、デジタルカメラ筐体２０１にタッチパネル１０２が取り付けられている。いま、デジタルカメラ１０１がＩＮＤＥＸモードであると、デジタルカメラ基本部１１５は全体制御部１１４の制御下で記録媒体１２０から静止画（符号化画像データ）を読み出して、前述したようにしてサムネール２０３を表示部１０３に一覧表示する（図２（Ａ））。図示の例では、Ａ〜Ｄの４つのサムネールが表示されている。

図２（Ａ）に示すインデックス画面では、記録モードボタン２０４が表示されており、この記録モードボタン２０４の操作によってデジタルカメラ１０１はＩＮＤＥＸモードから記録モードに遷移する。なお、図２（Ａ）において、サムネール２０５はサムネールが重なっており、この重なり表示によって画像が連写によって得られたことが示されている。

ユーザーがサムネールＡを選択すると（つまり、タッチ操作すると）、全体制御部１１４は再生モードに移行する。そして、全体制御部１１４はデジタルカメラ基本部１１５を制御して表示部１０３の画面全体に静止画Ａを画像２１１として表示する（図２（Ｂ））。図２（Ｂ）に示す再生画面には、ＩＮＤＥＸボタン２１２が表示され、このＩＮＤＥＸボタン２１２を操作すると、全体制御部１１４はＩＮＤＥＸモードに移行して、図２（Ａ）に示すインデックス画面が表示部１０３に表示される。

図２（Ａ）に示すインデックス画面において、ユーザーが記録モードボタン２０４を操作すると、全体制御部１１４は記録モードに移行する。そして、全体制御部１１４はデジタルカメラ基本部１１５を制御して撮像部（図示せず）で得られた画像を表示部１０３に表示する（図２（Ｃ））。

図２（Ｃ）に示す撮影画面には、撮影ボタン２２２が表示され、撮影ボタン２２２が操作されると、全体制御部１１４の制御下でデジタルカメラ基本部１１５は表示部１０３に表示された画像を静止画として記録媒体１２０に保存する。さらに、撮影画面にはＩＮＤＥＸモードボタン２２３が表示され、このＩＮＤＥＸモードボタン２２３を操作すると、図２（Ａ）に示すＩＮＤＥＸモードに復帰する。

また、撮影画面には撮影設定ボタン２２４が表示され、ユーザーは撮影設定ボタン２２４の操作によっては撮影を行う際の諸設定を行うことができる。例えば、撮影設定ボタン２２４の操作によってセルフタイマーの設定およびフラッシュの設定などを行うことができる。

いま、図２（Ａ）に示すインデックス画面において、連写を示すサムネール２０５（Ｂ）がタッチ操作によって選択されると、全体制御部１１４は連写時ＩＮＤＥＸモードに移行する。そして、全体制御部１１４はデジタルカメラ基本部１１５を制御して連写の結果得られた画像２３１（Ｂ１〜Ｂ６）を表示部１０３に一覧表示する（図２（Ｄ））。

図２（Ｄ）に示す連写時インデックス画面にはスクロールボタン２３３および２３４が表示されており、連写時インデックス画面に入りきらない画像はスクロールボタン２３３又は２３４を操作することによって連写時インデックス画面に表示することができる。例えば、スクロールボタン２３４を操作すると、連写画像における次の画像がサムネール表示され、スクロールボタン２３３を操作すると、連写画像における前の画像がサムネール表示される。

続いて、図１に示す表示部１０３に表示された画像における方向について説明する。

図３は、図１に示す表示部１０３に表示された画像における方向について説明するための図である。そして、図３（Ａ）は方向の定義を示す図であり、図３（Ｂ）は方向の範囲を示す図である。

図３（Ａ）において、横長画像３０１、縦長画像３０２が表示部１０３に表示されている状態で、表示部１０３の水平方向に平行な方向を左右方向３１１と呼び、表示部１０３の水平方向に垂直な方向を上下方向３１２と呼ぶ。

そして、図３（Ｂ）に斜線で示すように、ここでは、表示部１０３の水平方向に対して４５度以上１３５度以下および２２５度以上３１５度以下の範囲３２１に含まれる方向を上下方向とする。さらに、斜線部分の範囲以外の範囲を左右方向とする。ただし、この方向を判定する基準となる角度について任意に変更可能である。また、左右方向および上下方向のいずれにも含まれない範囲を設けるようにしてもよい。

図４は、図１に示すデジタルカメラ１０１における再生処理（表示処理）を説明するためのフローチャートである。

いま、表示部１０３に図２（Ａ）に示すインデックス画面が表示されているものとする。インデックス画面において、ユーザーが複数のサムネールから１つを操作部１０４で選択する（ステップＳ４０１）。全体制御部１１４はタッチ状態検出部１１３の検出結果によっていずれのサムネールが選択されたかを知る。そして、全体制御部１１４はグループ情報に応じて当該サムネール（つまり、静止画）が連写撮影されたものであるか否かを判定する（ステップＳ４０２）。

選択されたサムネールが連写撮影されたものであると（ステップＳ４０２においてＹＥＳ）、全体制御部１１４はデジタルカメラ基本部１１５を制御して、図２（Ｄ）に示す連写時インデックス画面を表示部１０３に表示する。これによって、全体制御部１１４は、ユーザーに複数の静止画からその一枚を選択することを促す（ステップＳ４０３）。

続いて、全体制御部１１４はユーザーが選択した静止画において被写体（オブジェクト）を選択するまで待つ（ステップＳ４０４）。そして、全体制御部１１４は選択した静止画において被写体が選択されたか否かを確認する（ステップＳ４０５）。全体制御部１１４はオブジェクト認識機能により被写体をオブジェクトとして抽出する。被写体が選択されないと（ステップＳ４０５において、ＮＯ）、全体制御部１１４はステップＳ４０４の処理に戻って被写体の選択を待つ。

被写体が選択されると（ステップＳ４０５において、ＹＥＳ）、全体制御部１１４は当該選択された被写体（オブジェクト）の動き（移動方向）を検出する（ステップＳ４０６）。前述したように、全体制御部１１４は同一のグループ情報が付与された連写静止画を相互に比較して選択された被写体の動きを解析して、その移動方向を検出する。そして、全体制御部１１４は連写静止画について、選択された被写体が連写静止画から検出できなくなるまで移動方向の検出を行う。

なお、選択された被写体が検出できなくなった場合であっても、当該被写体が検出できなくなった静止画をスキップして連写静止画の最後まで被写体の検出を行うようにしてもよい。

続いて、全体制御部１１４は被写体の移動方向が左右方向であるか否かを確認する（ステップＳ４０７）。この移動方向の確認は図３で説明したようにして行われる。オブジェクトの移動方向が左右方向であると（ステップＳ４０７において、ＹＥＳ）、全体制御部１１４はデジタルカメラ基本部１１５を制御して、表示部１０３において連写静止画を縦方向にスクロールして連続的に表示する（ステップＳ４０８）。そして、全体制御部１１４は表示処理を終了する。

一方、オブジェクトの移動方向が左右方向でないと（ステップＳ４０７において、ＮＯ）、全体制御部１１４はデジタルカメラ基本部１１５を制御して、表示部１０３において連写静止画を横方向にスクロールして連続的に表示する（ステップＳ４０９）。そして、全体制御部１１４は表示処理を終了する。

なお、選択されたサムネールが連写撮影されたものでないと判定すると（ステップＳ４０２において、ＮＯ）、全体制御部１１４はデジタルカメラ基本部１１５を制御して、当該選択されたサムネールを一枚の静止画として図２（Ｂ）に示すように表示部１０３に表示する（通常表示：ステップＳ４１０）。そして、全体制御部１１４は表示処理を終了する。

図５は、図４で説明した表示処理を行った際に表示される静止画の一例を説明するための図である。そして、図５（Ａ）は連写時インデックス画面を示す図であり、図５（Ｂ）は一枚の静止画を選択した際の画面表示を示す図である。また、図５（Ｃ）は被写体が選択された際の確定画面を示す図であり、図５（Ｄ）はスクロール表示を示す図である。

いま、図５（Ａ）に示す連写時インデックス画面が表示部１０３に表示されているものとする。図５（Ａ）においては連写時インデックス画面には６枚のサムネール５０１が表示されている。また、連写時インデックス画面にはスクロールボタン５０４および５０５が表示されるとともに、ＩＮＤＥＸモードボタン５０３が表示されている。

ユーザーが手（指）５０２で一枚のサムネールをタッチ操作して選択すると、全体制御部１１４はデジタルカメラ基本部１１５を制御して当該選択されたサムネールを静止画として表示部１０３に表示する（選択表示画面：図５（Ｂ））。この選択表示画面には、ユーザーに被写体（注目被写体ともいう）の選択を促す文言が表示されるとともに、戻るボタン５１２が表示される。戻るボタン５１２を操作すると、全体制御部１１４は図５（Ａ）に示す連写時インデックス画面を表示部１０３に表示する。

ユーザーが注目被写体として車をタッチして選択すると、全体制御部１１４は車を注目被写体として確定し、図５（Ｃ）に示す被写体確定画面を表示部１０３に表示する。ここでは、全体制御部１１４は注目被写体とその周辺との色の相違および連続する連写静止画における前後の静止画を参照してオブジェクトの範囲を確定する。その後、全体制御部１１４はオブジェクトを破線５３１で囲んで、表示部１０３に表示する。

続いて、図４で説明したように、全体制御部１１４はオブジェクトの移動方向が左右方向であるか否かを確認する。左右方向であると、全体制御部１１４はデジタルカメラ基本部１１５を制御して、図５（Ｄ）に示すスクロール画面を表示部１０３に表示する。

図５（Ｄ）において、連写静止画５４１は縦スクロールで表示されている。つまり、連写静止画５４１は縦に連結された状態で表示されている。ここでは、連続した２枚の静止画からオブジェクトがいずれの方向に移動したかが検出される。そして、全ての連写静止画についてこの解析が行われて、オブジェクトの移動方向が判定される。

図５（Ｄ）では、オブジェクト（車５３１）が右から左（左右方向）に移動したと判定したので、全体制御部１１４は縦方向のスクロール表示を行う。左右方向、つまり、横方向に移動するオブジェクトについて連写静止画を縦スクロール表示すると、ユーザーは被写体（車）が連写静止画の前後においてどの程度移動しているかを容易に認識することができる。

この連写静止画５４１をユーザーが手（指）５４２で縦方向に操作すると、全体制御部１１４は縦方向に連写静止画５４１をスクロールする。スクロール表示を行う際には、全体制御部１１４はデジタルカメラ基本部１１５を制御して、上下方向にスライドする表示レイヤーを表示画面に配置する。そして、全体制御部１１４は、スライドするレイヤーに連写静止画を一枚ずつ配置する。これによって、全体制御部１１４はユーザーの画面に対するタッチおよびスワイプに応じて、先のレイヤーを追従させてスクロール表示を行う。

図６は、図４で説明した表示処理を行った際に表示される静止画の他の例を説明するための図である。そして、図６（Ａ）は連写時インデックス画面を示す図であり、図６（Ｂ）は一枚の静止画を選択した際の画面表示を示す図である。また、図６（Ｃ）はスクロール表示を示す図である。

図６（Ａ）に示す連写時インデックス画面が表示部１０３に表示されているものとする。図６（Ａ）においては連写時インデックス画面には６枚のサムネール６０１が表示されている。

ユーザーが手（指）で一枚のサムネールをタッチ操作して選択すると、全体制御部１１４はデジタルカメラ基本部１１５を制御して当該選択されたサムネールを静止画として表示部１０３に表示する（選択表示画面：図６（Ｂ））。この選択表示画面には、ユーザーに注目被写体の選択を促す文言が表示される。

ユーザーが注目被写体としてロケットを手（指）６１２でタッチして選択すると、全体制御部１１４はロケットを注目被写体（オブジェクト）として確定し被写体確定画面を表示部１０３に表示する。この際には、図５（Ｃ）で説明したように、全体制御部１１４はオブジェクトを破線で囲んで表示部１０３に表示する。

続いて、図４で説明したように、全体制御部１１４はオブジェクトの移動方向が左右方向であるか否かを確認する。左右方向でないと（つまり、上下方向であると）、全体制御部１１４はデジタルカメラ基本部１１５を制御して、図６（Ｃ）に示すスクロール画面を表示部１０３に表示する。

図６（Ｃ）において、連写静止画６２１は横スクロールで表示されている。つまり、連写静止画６２１は横に連結された状態で表示されている。図６（Ｃ）では、オブジェクト（ロケット）が下から上（上下方向）に移動したと判定したので、全体制御部１１４は横方向のスクロール表示を行う。上下方向に移動するオブジェクトについて連写静止画を横スクロール表示すると、ユーザーは被写体（ロケット）が連写静止画の前後においてどの程度移動しているかを容易に認識することができる。

この連写静止画６２１をユーザーが手（指）６１２で横方向に操作すると、全体制御部１１４は横方向に連写静止画６２１をスクロールする。スクロール表示を行う際には、全体制御部１１４はデジタルカメラ基本部１１５を制御して、横方向にスライドする表示レイヤーを表示画面に配置する。そして、全体制御部１１４は、スライドするレイヤーに連写静止画を一枚ずつ配置する。これによって、全体制御部１１４はユーザーの画面に対するタッチおよびスワイプに応じて、先のレイヤーを追従させてスクロール表示を行う。

被写体が斜め上方向又は斜め下方向に移動している場合には、全体制御部１１４は当該被写体の移動方向を示すベクトルの上下方向（垂直方向）および左右方向（水平方向）の移動量をそれぞれ求めて、その移動量の大きい方向に基づいて縦スクロールするか又は横スクロールするかを決定する。例えば、徐々に右斜め上方向に上昇する飛行機に係る連写静止画であれば、全体制御部１１４は上方向に比べて右方向の移動量が大きいと判定して、連続静止画を縦スクロールになるように表示部１０３に表示する。

さらに、垂直方向における移動量と水平方向における移動量とを比較して、その差が所定の値未満であると、全体制御部１１４は連写静止画像において連続する２枚の画像を重ねて表示部１０３に表示して、徐々に各静止画像の透過率を変化させつつ表示を切り替える。

第１の実施形態では、静止画について説明したが、静止画に限らず動画であってもよい。動画についても前述した手法で注目被写体についての動きを確認する。そして、全体制御部１１４は動画の各フレームを静止画として、動画再生中に一時停止を行う。そして、全体制御部１１４は画面（フレーム）から注目被写体が選択されると、注目被写体の動きに応じて前後の画面（フレーム）を参照して上述したようにしてコマ送りなどの処理を行う。

このように、第１の実施形態によれば、選択した被写体の移動方向に応じて画像を表示部に縦スクロール表示又は横スクロール表示するようにしたので、ユーザーは連写された画像を閲覧する際に、特定の被写体の動きの変化を容易に把握することができる。

［第２の実施形態］
続いて、本発明の第２の実施形態による画像再生装置について説明する。

第２の実施形態による画像再生装置を備えるデジタルカメラの構成は図１と同様である。

第２の実施形態では、第１の実施形態で説明したようにして、注目被写体の移動方向に応じて連写静止画のスクロール表示が行われる。この際、注目被写体が上下方向に移動する被写体であると、全体制御部１１４は合成部１０７を制御して連続静止画から画像の切り出しを行う。例えば、合成部１０７は被写体を中心として縦の帯状に領域を確保して、当該帯状領域以外を切り抜いた形状で連写静止画を表示部１０３にスクロール表示する。

図７は、本発明の第２の実施形態による画像再生装置を備えるデジタルカメラにおけるスクロール表示の一例を示す図である。

いま、図６で説明した上昇するロケットを連写したとする。ユーザーがロケットを目被写体として選択すると、全体制御部１１４は前述のように注目被写体であるロケットの移動方向が上下方向であると判定する。

注目被写体が上下方向に移動する場合には、合成部１０７は全体制御部１１４の制御下で注目被写体であるロケットを中央とした縦の帯状領域７０１（オブジェクト画像）を切り抜く。この切り抜き処理を連写静止画の全てについて行った後、図７に示すように、横方向に並べて表示部１０３にスクロール表示する。

このようにして、注目被写体であるロケットをスクロール表示すると、注目被写体を引き立たせて、一画面により多くの静止画を表示することができる。この結果、多数の静止画において注目被写体の移動量を比較して閲覧することができる。同様に、左右方向に被写体が移動する場合には、被写体を中央にして横の帯状領域を切り抜いてスクロール表示する。

［第３の実施形態］
次に、本発明の第３の実施形態による画像再生装置について説明する。

第３の実施形態による画像再生装置を備えるデジタルカメラの構成は図１と同様である。

第３の実施形態では、第１の実施形態で説明したようにして、注目被写体の移動方向に応じて連写静止画のスクロール表示が行われる。この際、全体制御部１１４は注目被写体が連続する静止画の前後でどの程度移動したかを検出する。そして、全体制御部１１４はグラフィック部１１０を制御して被写体の移動量の変化をガイド描画で示す。

図８は、本発明の第３の実施形態による画像再生装置を備えるデジタルカメラにおけるスクロール表示の一例を示す図である。

いま、図６で説明した上昇するロケットを連写したとする。ユーザーがロケットを目被写体として選択すると、全体制御部１１４は前述のように注目被写体であるロケットの移動方向が上下方向であると判定する。

続いて、全体制御部１１４はグラフィック部１１０を制御して、連写静止画の連続する２枚の静止画において移動量の変化に応じてロケットの下端にガイドライン８０１および８０２を描画する。そして、全体制御部１１４はガイドラインが描画された連写静止画を表示部１０３にスクロール表示する。

このように、注目被写体であるロケットにガイドラインを付加すれば、ユーザーは一目でロケットの移動量の変化を把握することができる。

なお、ガイドライン８０１および８０２は注目被写体であるロケットの下端に表示するようにしてもよく、注目被写体であるロケットの中央部に表示するようにしてもよい。いずれにしても、２枚の連続する静止画において、注目被写体の移動量が分かる位置にガイドラインを描画すればよい。

［第４の実施形態］
続いて、本発明の第４の実施形態による画像再生装置について説明する。

第４の実施形態による画像再生装置を備えるデジタルカメラの構成は図１と同様である。

第１の実施形態では、注目被写体の移動方向を上下方向および左右方向のいずれであるかを判定してスクロール表示するようにしたが、ここでは、注目被写体の移動方向が上下方向および左右方向以外である場合について説明する。

以下の説明では、ゴルフ練習におけるゴルフクラブのヘッドの動きについて説明する。

プレーヤーの正面に向かって連写を行った場合には、クラブのヘッドは撮影者から見て円運動を描く。連写静止画においてクラブのヘッドが注目被写体として選択されると、全体制御部１１４は連続した２枚の静止画における注目被写体の比較によって注目被写体が円運動をしていると認識する。

注目被写体の移動方向が上下方向又は左右方向の運動でない場合（ここでは円運動）には、合成部１０７は全体制御部１１４の制御下で連続した２枚の静止画を重ね合わせて、その透過率を徐々に変更して表示する処理（ディゾルブ）を行う。そして、当該処理を連写静止画の全てについて行って、スイングの移り変わりを滑らかに表示する。

図９は、本発明の第４の実施形態による画像再生装置を備えるデジタルカメラにおける表示処理を説明するためのフローチャートである。なお、図９において図４に示すフローチャートと同一の処理については同一の参照部号を付し説明を省略する。また、図９に示すフローチャートでは、インデックス画面から短託されたサムネールが連写静止画であるものとする。

ステップＳ４０７において、オブジェクトの移動方向が左右方向でないと（ステップＳ４０７において、ＮＯ）、全体制御部１１４はオブジェクトの移動方向が上下方向であるか否かを判定する（ステップＳ９０７）。そして、オブジェクトの移動方向が上下方向であると（ステップＳ９０７において、ＹＥＳ）、全体制御部１１４は図４で説明したステップＳ４０９の処理を行う。

一方、オブジェクトの移動方向が上下方向でないと（ステップＳ９０７において、ＮＯ）、全体制御部１１４は連写静止画において連続した２枚の静止画における透明度を徐々に変化させつつ静止画の切り替えを行う（ディゾルブ）効果を用いて、連写静止画を表示部１０３に表示する。そして、全体制御部１１４は表示処理を終了する。

このように、注目被写体の移動方向が上下方向および縦方向ではないと、ディゾルブ効果を用いて連写静止画を画面表示するようにしたので、例えば、ゴルフクラブのヘッドのように円運動する被写体であっても、ユーザーは容易に注目被写体の動きを把握することができる。

上述の説明から明らかなように、図１に示す例においては、全体制御部１１４が検出手段として機能し、全体制御部１１４およびデジタルカメラ基本部１１５が決定手段および表示制御手段として機能する。また、上述の説明では、デジタルカメラなどの際増装置を例に挙げて説明したが、図１においては、タッチパネル１０２、タッチ状態検出部１１３、全体制御部１１４、およびデジタルカメラ基本部１１５が画像再生装置を構成する。なお、画像再生装置はデジタルカメラなどの撮像装置に限られず、例えば、ＰＣなどの情報処理装置であってもよい。

以上、本発明について実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。

例えば、上記の実施の形態の機能を制御方法として、この制御方法を画像再生装置に実行させるようにすればよい。また、上述の実施の形態の機能を有するプログラムを画像再生装置が備えるコンピュータに実行させるようにしてもよい。なお、プログラムは、例えば、コンピュータに読み取り可能な記録媒体に記録される。この際、制御方法およびプログラムの各々は、少なくとも検出ステップおよび表示制御ステップを有することになる。

また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記録媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。

１０２ タッチパネル
１０３ 表示部
１０６ サムネール生成部
１０７ 合成部
１１０ グラフィック部
１１１ 記録媒体アクセス部
１１２ データベース部
１１３ タッチ状態検出部
１１４ 全体制御部
１１５ デジタルカメラ基本部

Claims (11)

1. 連続する複数の画像を表示部に画面表示する画像再生装置であって、
   前記画像において注目すべき被写体をオブジェクトとして選択する選択手段と、
   前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出手段と、
   前記検出手段によって検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定手段と、
   前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御手段とを有し、
   前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、
   前記決定手段は前記オブジェクトの移動方向が前記左右方向であると、前記連続する複数の画像を配置する方向を前記水平方向に垂直な方向に決定することを特徴とする画像再生装置。
2. 前記決定手段は前記オブジェクトの移動方向が前記上下方向であると、前記連続する複数の画像を配置する方向を前記水平方向に平行な方向に決定することを特徴とする請求項１に記載の画像再生装置。
3. 連続する複数の画像を表示部に画面表示する画像再生装置であって、
   前記画像において注目すべき被写体をオブジェクトとして選択する選択手段と、
   前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出手段と、
   前記検出手段によって検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定手段と、
   前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御手段とを有し、
   前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、
   前記決定手段は前記オブジェクトの移動方向が前記上下方向であると、前記連続する複数の画像を配置する方向を前記水平方向に平行な方向に決定することを特徴とする画像再生装置。
4. 連続する複数の画像を表示部に画面表示する画像再生装置であって、
   前記画像において注目すべき被写体をオブジェクトとして選択する選択手段と、
   前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出手段と、
   前記検出手段によって検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定手段と、
   前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御手段とを有し、
   前記決定手段は、前記検出手段で検出された移動方向を示すベクトルの水平方向および垂直方向における移動量を得て、前記ベクトルの水平方向における移動量および前記ベクトルの垂直方向における移動量のうちその移動量が小さい方向を前記連続する複数の画像を配置する方向と決定し、
   前記表示制御手段は、前記ベクトルの垂直方向における移動量と前記ベクトルの水平方向における移動量との差が所定の値未満であると、前記連続する複数の画像において連続する２枚の画像を重ねて前記表示部に表示することを特徴とする画像再生装置。
5. 前記表示制御手段は、前記連続する複数の画像の各々から前記オブジェクトを当該オブジェクトの移動方向と平行の帯状の領域を切り出してオブジェクト画像を得て、当該オブジェクトを前記移動方向に応じて配置することを特徴とする請求項１〜４のいずれか１項に記載の画像再生装置。
6. 前記表示制御手段は、前記連続する複数の画像において前記オブジェクトの位置を示すガイド表示を前記表示部に表示することを特徴とする請求項１〜５のいずれか１項に記載の画像再生装置。
7. 前記表示制御手段は前記連続する複数の画像又は前記オブジェクト画像をスクロール表示することを特徴とする請求項５に記載の画像再生装置。
8. 前記移動方向が前記左右方向および前記水平方向のいずれでもないと、前記表示制御手段は前記連続する複数の画像において連続する２枚の画像をその透明度を変化させつつ前記表示部に表示することを特徴とする請求項１又は３に記載の画像再生装置。
9. 連続する複数の画像を表示部に画面表示する画像再生装置の制御方法であって、
   前記画像において注目すべき被写体をオブジェクトとして選択する選択ステップと、
   前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出ステップと、
   前記検出ステップで検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定ステップと、
   前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御ステップとを有し、
   前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、
   前記決定ステップでは前記オブジェクトの移動方向が前記左右方向であると、前記連続する複数の画像を配置する方向を前記水平方向に垂直な方向に決定することを特徴とする制御方法。
10. 連続する複数の画像を表示部に画面表示する画像再生装置の制御方法であって、
    前記画像において注目すべき被写体をオブジェクトとして選択する選択ステップと、
    前記連続する複数の画像を比較することによって前記オブジェクトの移動方向を検出する検出ステップと、
    前記検出ステップで検出された前記オブジェクトの移動方向に応じて前記連続する複数の画像を配置する方向を決定する決定ステップと、
    前記連続する複数の画像を前記決定された方向にしたがって並べて前記表示部に表示する表示制御ステップとを有し、
    前記表示部の水平方向に平行な方向を左右方向とし、前記表示部の水平方向に垂直な方向を上下方向とした際に、前記左右方向に対して所定の範囲に含まれる方向が上下方向とされ、前記所定の範囲以外の方向が左右方向とされ、
    前記決定ステップでは前記オブジェクトの移動方向が前記上下方向であると、前記連続する複数の画像を配置する方向を前記水平方向に平行な方向に決定することを特徴とする制御方法。
11. コンピュータを請求項１〜８のいずれか１項に記載の画像再生装置の各手段として機能させるためのプログラム。

Images