JP2009272814A - 画像表示システム - Google Patents

Abstract

【課題】描画順序を考慮し、素早いフォーカスデータの描画を実現する。
【解決手段】画像データおよび画像データのメタデータを記憶する記憶部３と、メタデータに含まれる複数のサムネイル画像の中から注視すべきサムネイル画像を指定するフォーカス指示を受け付け、フォーカス位置を算出するフォーカス管理部１と、メタデータに基づき複数のサムネイル画像の表示位置を決定する二次元分類部５と、フォーカス位置に位置するフォーカスサムネイル画像と、その他のサムネイル画像との距離を算出する距離算出部２と、フォーカス位置、二次元分類部５から入力される表示位置情報および距離算出部２から入力される距離情報に基づき、複数のサムネイル画像の描画順序を決定する描画順序管理部７と、描画順序に基づき複数のサムネイル画像の描画を制御する画像描画制御部６と、画像描画制御部６から入力される制御情報に基づき複数のサムネイル画像を描画する画像描画部９とを備える。
【選択図】図１

Description

この発明は、地上デジタルテレビ受信機にＪＰＥＧ画像の一覧を表示する画像表示システムに関するものである。

従来のＪＰＥＧ画像の一覧を表示する画像表示システムには、画像間の類似度を元に画像の表示位置を決めるシステムが用いられている。例えば特許文献１に、類似度算出部が複数のデータからなる集合データ同士の類似を解析して類似度を算出し、構造抽出部がこの類似度に基づいてデータ間の相互に関連する構造を抽出すると共に、抽出された構造における各データの位置を画定し、構造上の位置の指定を受け付けて、該位置の指定に従ってデータを表示手段に表示させる構成が開示されている。これにより複数のデータ間の構造上の位置の指令を受けた場合に、受け付けた位置に対応するデータを表示手段に表示することにより系統的にデータを表示させ、画像表示システムの利便性を図っている。

特開２００７−８０１０９号公報

しかしながら、上述した従来の画像表示システムでは、類似度の高い画像の表示位置を決定するため、描画順序が考慮されておらず、地上デジタルテレビ受信機においては注視項目であるフォーカスデータの描画までユーザの待ち時間が発生するという課題があった。

この発明は、上記のような課題を解決するためになされたもので、描画順序を考慮し、素早いフォーカスデータの描画を実現する画像表示システムを得ることを目的とする。

この発明に係る画像表示システムは、画像データおよび前記画像データのメタデータを記憶する記憶部と、前記メタデータに含まれる複数のサムネイル画像の中から注視すべきサムネイル画像を指定するフォーカス指示を受け付け、フォーカス位置を算出するフォーカス管理部と、前記メタデータに基づき、前記複数のサムネイル画像の表示位置を決定する分類部と、前記フォーカス位置に位置するフォーカスサムネイル画像と、その他のサムネイル画像との距離を算出する距離算出部と、前記フォーカス位置、前記分類部から入力される表示位置情報および前記距離算出部から入力される距離情報に基づき、前記複数のサムネイル画像の描画順序を決定する描画順序管理部と、前記描画順序に基づき前記複数のサムネイル画像の描画を制御する画像描画制御部と、前記画像描画制御部から入力される制御情報に基づき前記複数のサムネイル画像を描画する画像描画部とを備えるものである。

この発明によれば、画像データおよび前記画像データのメタデータを記憶する記憶部と、前記メタデータに含まれる複数のサムネイル画像の中から注視すべきサムネイル画像を指定するフォーカス指示を受け付け、フォーカス位置を算出するフォーカス管理部と、前記メタデータに基づき、前記複数のサムネイル画像の表示位置を決定する分類部と、前記フォーカス位置に位置するフォーカスサムネイル画像と、その他のサムネイル画像との距離を算出する距離算出部と、前記フォーカス位置、前記分類部から入力される表示位置情報および前記距離算出部から入力される距離情報に基づき、前記複数のサムネイル画像の描画順序を決定する描画順序管理部と、前記描画順序に基づき前記複数のサムネイル画像の描画を制御する画像描画制御部と、前記画像描画制御部から入力される制御情報に基づき前記複数のサムネイル画像を描画する画像描画部とを備えるように構成したので、フォーカスデータの条件に近い画像から順に表示することができる。

実施の形態１．
図１は、この発明の実施の形態１に係る画像表示システムの構成を示すブロック図である。画像表示システムは、現在の注視項目（以下、フォーカスと称する）位置を算出するフォーカス管理部１、フォーカス位置から目的サムネイル画像までの距離を算出する距離算出部２、ＪＰＥＧ画像およびこの画像のメタデータを記憶する記憶部３、各ＪＰＥＧ画像のメタデータを取得するメタデータ管理部４、二次元空間内のサムネイル画像の全表示位置を決定する二次元分類部（分類部）５、現在のフォーカス位置、サムネイル画像の全画像表示位置、距離情報の入力を受け付けてサムネイル画像の表示動作を制御する画像描画制御部６、サムネイル画像の画像描画順序を決定する画像描画順序管理部７、ＪＰＥＧデータをデコードしてビットマップデータを得るデコーダ部８、ビットマップデータを画面上に描画する画像描画部９で構成されている。

フォーカス管理部１は、外部装置であるリモコン（図示せず）からの入力を受け付け、現在のフォーカス位置を算出し、算出したフォーカス位置情報を画像描画制御部６に出力する。距離算出部２は、画像描画制御部６から入力されるフォーカス位置情報および表示位置情報（詳細は後述する）に基づき、フォーカス位置から目的のサムネイル画像までの距離を算出し、距離情報として画像描画制御部６に出力する。記憶部３は、ＪＰＥＧ画像の主画像や動画、メタデータを記憶し、主画像や動画を画像描画制御部６に出力し、メタデータをメタデータ管理部４に出力する。メタデータには、ＪＰＥＧ画像の撮影日時、撮影場所、ＩＤ、ファイル名、ファイルサイズ、およびサムネイル画像が含まれている。

メタデータ管理部４は、記憶部３から取得したメタデータを二次元分類部５に出力する。また、メタデータのうちＩＤ、ファイル名およびファイルサイズなどの画像情報とサムネイル画像を画像描画制御部６に出力する。二次元分類部５は、メタデータのうちＪＰＥＧ画像の撮影日時や撮影場所などのデータに基づき、二次元空間内のサムネイル画像の全画像表示位置を決定し、表示位置情報として画像描画制御部６に出力する。画像描画制御部６は、入力されるフォーカス位置情報、表示位置情報および距離情報を画像描画順序管理部７に出力する。画像描画順序管理部７は、入力されたフォーカス位置情報、表示位置情報および距離情報に基づきサムネイル画像を描画する順序を示す画像描画順序を決定し、画像描画制御部６に出力する。

画像描画制御部６は、まずフォーカス位置に位置するフォーカスサムネイル画像のＪＰＥＧデータをデコーダ部８に送信し、デコーダ部８がこのＪＰＥＧデータをデコードしてビットマップデータを画像描画制御部６に出力する。画像描画制御部６は入力されたビットマップデータを画像描画部９に出力し、画像描画部９がビットマップデータを画面上に描画する。画像描画制御部６は、一画面内のサムネイル画像を描画するまで、画像描画順序管理部７から入力された画像描画順序に従ってデコーダ部８にサムネイル画像のＪＰＥＧデータの送信、ビットマップデータの取得、および画像描画部９へのビットマップデータの送信を繰り返す。

次に、図２から図９を用いて画像表示システムの動作について説明する。図２は、この発明の実施の形態１に係る画像表示システムの動作を示すフローチャートである。図３から図９はこの発明の実施の形態１に係る画像システムの処理内容の一例を示す図である。以下では、図２のフローチャートに示す処理動作を図３から図９に示す具体的な処理内容を参照しながら説明を行う。

フォーカス管理部１がリモコンからの入力を受け付けると、画像描画制御部６に通知する（ステップＳＴ１）。ステップＳＴ１において、入力通知を受けた画像描画制御部６は、記憶部３に記憶されている画像が解析済みか否か判定する（ステップＳＴ２）。ステップＳＴ２において、解析済みであると判定された場合にはステップＳＴ６の処理に進む。一方、ステップＳＴ２において解析済みでないと判定された場合には、画像描画制御部６はメタデータ管理部４に記憶部３からメタデータを取得するよう指示し、メタデータ管理部４はメタデータを取得する（ステップＳＴ３）。ステップＳＴ３においてメタデータを取得したメタデータ管理部４は、メタデータを二次元分類部５に出力し、画像情報およびサムネイル画像を画像描画制御部６に出力する（ステップＳＴ４）。

二次元分類部５は、ステップＳＴ４において入力されたメタデータのＪＰＥＧ画像の撮影日時や撮影場所などのデータに基づき二次元空間内におけるサムネイル画像の全画像の表示位置を決定し、画像描画制御部に出力する（ステップＳＴ５）。この全画像の表示位置は撮影月と撮影場所に基づいて決定され、まず撮影月によって画像を分類し、続いて各撮影月の画像群内で撮影場所を都道府県によって分類する。

図３に、全画像の表示位置情報の一例を示す。図３（ａ）は、撮影月で分類した表示位置情報の一例を示しており、各撮影月毎に縦一列に配置し、ファイルＩＤを付している。図３（ｂ）は、撮影月および撮影場所である都道府県で分類した表示位置情報の一例を示しており、各撮影月毎に縦一列に並べ、さらに各撮影月の画像群を都道府県毎に連続して配置してファイルＩＤを付している。図４は、図３（ｂ）におけるファイルＩＤ１からファイルＩＤ６のサムネイル画像を画面（図示せず）上に配置する際の一例を示している。また、表示情報Ａはサムネイル画像と画像情報で構成され、フォーカス枠Ｂは表示画像Ａの中でフォーカスする画像を表示する枠である。画面上で表示情報Ａは、各撮影月毎に縦列に分類され、さらに都道府県毎に横列に分類されて表示される。同一都道府県の画像がある場合には左右に隣接させて表示する（図４におけるファイルＩＤ１およびファイルＩＤ２の表示画像Ａ参照）。なお、図４では、ファイルＩＤ２の表示画像Ａにフォーカス枠Ｂが位置している。

次に、フォーカス管理部１は、ステップＳＴ１においてリモコンからの入力情報に基づきフォーカス位置情報を算出し、画像描画制御部６に出力する（ステップＳＴ６）。画像描画制御部６は、フォーカス位置が含まれる画面の画像情報を画像描画部９に出力する（ステップＳＴ７）。ステップＳＴ７において画像情報が入力された画像描画部９は、各画像のＩＤ、ファイル名、ファイルサイズなどの画像情報の文字描画を行う（ステップＳＴ８）。図５は、画像情報の文字描画を行う処理順序を示す図である。表示情報Ａは、サムネイル画像ａと画像情報ｂで構成され、画像情報ｂの文字描画は従来の処理動作と同様に図５中の矢印に示すように左上から右下に向かって横方向に順に描画する。

画像描画制御部６は、距離算出部２にフォーカス位置情報および表示位置情報を出力し、距離算出部２は入力されたフォーカス位置および表示位置情報に基づきフォーカス位置のフォーカスサムネイル画像を中心としたその他の各サムネイル画像までの距離を算出し、距離情報として画像描画制御部６に出力する（ステップＳＴ９）。画像描画制御部６は、フォーカス位置情報、表示位置情報および距離情報を画像描画順序管理部７に出力し、画像描画順序管理部７はこれらの情報に基づき、フォーカス位置が含まれる画面内のサムネイル画像の描画順序を決定し、画像描画制御部６に出力する（ステップＳＴ１０）。この描画順序はフォーカス位置からの距離が最短となる位置にあるサムネイル画像順とする。

図６は、サムネイル画像間の距離を定義する一例を示す図である。フォーカス枠Ｂから対象とする表示情報Ａ間で、水平方向にｘ画像、垂直方向へｙ画像ある場合にはサムネイル画像間の距離はｘ＋ｙと定義する。図６の例では、フォーカス位置Ｂから対象となる表示情報Ａまで、水平方向にｘ＝２画像、垂直方向にｙ＝３画像あるため、両サムネイル画像間の距離はｘ＋ｙ＝５と定義される。なお、フォーカス枠Ｂから複数の表示情報Ａまでの距離が等しい場合には、それらのサムネイル画像内でランダムに描画順序を決定する。

画像描画制御部６は、描画順序に基づきサムネイル画像のＪＰＥＧデータをデコーダ部８に出力し、デコーダ部８は入力されたＪＰＥＧデータをデコードしてビットマップデータを画像描画制御部６に出力する（ステップＳＴ１１）。画像描画制御部６は、ビットマップデータを画像描画部９に出力し、画像描画部９はビットマップデータを画面上に描画する（ステップＳＴ１２）。画像描画制御部６は、画面内の全てのサムネイル画像の描画を行ったか否か判定を行う（ステップＳＴ１３）。ステップＳＴ１３において、全てのサムネイル画像の描画を行っていないと判定された場合には、ステップＳＴ１１の処理に戻り上述の処理を繰り返す。一方、ステップＳＴ１３において全てのサムネイル画像の描画を行ったと判定された場合には処理を終了する。

図７は、この発明の実施の形態１に係る画像一覧表示システムの描画動作の一例を示す図である。図７に示すように、表示情報Ａはサムネイル画像ａと画像情報ｂで構成され、ファイルＩＤ０の表示映像Ａにフォーカス枠Ｂが表示されている。サムネイル画像は、フォーカス枠Ｂを中心としてファイルＩＤ１からファイルＩＤ８に向けて、反時計周りに同心円を描くように順に描画される。

図８は、画面を移動した際の描画動作の一例を示す図である。各サムネイル画像を描画した画面上でリモコン（図示せず）などのボタンを短く押すとフォーカス枠Ｂが画面内を移動する（図８（ａ）内の矢印参照）。図８（ａ）の状態で、例えばボタンを長押しすると画面上の表示内容が次頁のデータに移動し、カーソル位置はフォーカス枠Ｂ位置に固定される。その際、表示情報Ａのうちサムネイル画像が描画される領域は空欄となり、画像情報が描画される領域には更新された情報が表示される。また、長押ししていたボタンを離すと、図８（ｃ）に示すようにフォーカス枠Ｂ（カーソル位置）を中心としてサムネイル画像が反時計回りに同心円を描くように順に描画される。

以上のように、この実施の形態１によれば、フォーカス位置のフォーカスサムネイル画像を中心としたその他の各サムネイル画像までの距離を算出する距離算出部と、表示位置情報および距離情報に基づきフォーカス位置が含まれる画面内のサムネイル画像の描画順序を決定する画像描画順序管理部を設けるように構成したので、フォーカスサムネイル画像からの距離に基づいて決定された描画順序を考慮してサムネイル画像を描画することができ、フォーカスサムネイル画像の条件に近い画像から素早い描画を行うことができる。

実施の形態２．
図９は、この発明の実施の形態２に係る画像表示システムの構成を示すブロック図である。この画像表示システムは、図１に示した実施の形態１に係る画像表示システムに動画サムネイル生成部を追加して設けている。以下では、実施の形態１に係る画像表示システムの構成要素と同一または相当する部分には、実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

動画サムネイル生成部１０は、記憶部３から入力される動画の中から最も代表的な１シーンを静止画として抽出し、この抽出した画像を動画サムネイル画像としてメタデータ管理部４に出力する。メタデータ管理部４は、動画サムネイル画像を画像情報と共に画像描画制御部６に出力する。動画サムネイル画像の画像情報は、撮影日時などの日付、撮影場所などの場所で構成されている。

動画の中から抽出する代表的なシーンとして、例えばユーザが最後に視聴したシーンを使用する。そのためユーザが各動画を視聴した後、動画サムネイル生成部１０は視聴停止の際の最後のシーンの静止画を動画サムネイルとして保存する。また、スポーツ番組の場合には、ハイライトシーンを代表的なシーンとして抽出してよい。この場合には、アナウンサーの声や観客などの音声に基づきハイライトシーンを解析する。

以上のように、この実施の形態２によれば、動画から代表的な１シーンを静止画として抽出し、動画サムネイル画像として出力する動画サムネイル生成部を設けるように構成したので、ユーザがより選択し易いサムネイル画像を提示することができる。

実施の形態３．
図１０は、この発明の実施の形態３に係る画像表示システムの構成を示すブロック図である。この画像表示システムは、図１に示した実施の形態１に係る画像表示システムに音楽サムネイル生成部を追加して設けている。以下では、実施の形態１に係る画像表示システムの構成要素と同一または相当する部分には、実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

音楽サムネイル生成部１１は、記憶部３から入力される音楽情報から音楽サムネイル画像を抽出してメタデータ管理部４に出力する。その後、メタデータ管理部４は、音楽サムネイル画像を画像情報と共に画像描画制御部６に出力される。音楽サムネイル画像は、音楽ＣＤのジャケットなど代表的な静止画を用いる。音楽サムネイル画像の画像情報は、ＣＤの発売日など日付、アーティストの出身地などの場所で構成されている。なお、これら日付や場所の情報は、音楽サムネイル生成部１１がインターネットを通じて取得するものとする（図示せず）。

以上のように、この実施の形態３によれば、音楽情報に基づき音楽サムネイル画像を生成する音楽サムネイル生成部を設けるように構成したので、ユーザがより選択し易いサムネイル画像を提供することができる。

実施の形態４．
図１１は、この発明の実施の形態４に係る画像表示システムの構成を示すブロック図である。この画像表示システムは、図１に示した実施の形態１に係る画像表示システムに実施の形態２で示した動画サムネイル生成部および実施の形態３で示した音楽サムネイル生成部を追加して設けている。以下では、実施の形態１−３に係る画像表示システムの構成要素と同一または相当する部分には、実施の形態１−３で使用した符号と同一の符号を付して説明を省略または簡略化する。

動画サムネイル生成部１０は、記憶部３から入力される動画の中から最も代表的な１シーンを静止画として抽出し、この抽出した画像を動画サムネイル画像としてメタデータ管理部４に出力する。音楽サムネイル生成部１１は、記憶部３から入力される音楽情報から音楽サムネイル画像を抽出してメタデータ管理部４に出力する。メタデータ管理部４は、動画サムネイル、音楽サムネイルおよび画像情報を画像描画制御部６に出力する。画像情報は、動画サムネイル画像に対応する撮影日時などの日付、撮影場所などの場所、および音楽サムネイル画像に対応するＣＤの発売日など日付、アーティストの出身地などの場所で構成されている。なお、音楽サムネイル画像に対応する画像情報は、インターネットを通じて取得される（図示せず）。

以上のように、この実施の形態４によれば、動画から代表的な１シーンを静止画として抽出し、動画サムネイル画像として出力する動画サムネイル生成部および音楽情報に基づき音楽サムネイル画像を生成する音楽サムネイル生成部を設けるように構成したので、ユーザがより選択し易いサムネイル画像を提供することができる。

なお、上述した実施の形態１から実施の形態４において、画像情報である撮影場所や撮影日時などに基づきサムネイル画像の配置を決定するように構成したが、他の情報に基づいてサムネイル画像の配置を決定してもよい。また、画像情報も撮影場所や撮影日時などに限定されるものではない。

実施の形態５．
図１２は、この発明の実施の形態３に係る画像表示システムの構成を示すブロック図である。この画像表示システムは、図１に示した実施の形態１に係る画像表示システムにサムネイル画像記憶部を追加して設けている。以下では、実施の形態１に係る画像表示システムの構成要素と同一または相当する部分には、実施の形態１で使用した符号と同一の符号を付して説明を省略または簡略化する。

サムネイル画像記憶部１２は、デコーダ部８においてデコードされた各サムネイル画像のビットマップデータをキャッシュデータとして一時記憶するキャッシュ領域である。サムネイル画像記憶部１２は、サムネイル画像や画像情報を表示する画面の前後ページの移動までキャッシュデータとして記憶し、２ページ以上異動する場合には削除する。これにより、サムネイル画像を描画する際の時間が短縮される。

以上のように、この実施の形態５によれば、サムネイル画像のビットマップデータをキャッシュデータとして一時記憶するサムネイル画像記憶部を設けるように構成したので、サムネイル画像を描画する際の時間を短縮することができる。

なお、上述した実施の形態５では、実施の形態１の構成にサムネイル画像記憶部を設ける構成を示したが、実施の形態２から実施の形態４の構成にサムネイル画像記憶部を設けるように構成してもよい。

この発明の実施の形態１に係る画像表示システムの構成を示すブロック図である。 この発明の実施の形態１に係る画像表示システムの動作を示すフローチャートである。 この発明の実施の形態１に係る画像表示システムの表示位置情報の一例を示す図である。 この発明の実施の形態１に係る画像表示システムの表示方法の一例を示す図である。 この発明の実施の形態１に係る画像表示システムの画像情報の表示順序を示す図である。 この発明の実施の形態１に係る画像表示システムの画像間距離の算出方法を示す図である。 この発明の実施の形態１に係る画像表示システムのサムネイル画像の表示順序を示す図である。 この発明の実施の形態１に係る画像表示システムの表示動作を示す図である。 この発明の実施の形態２に係る画像表示システムの構成を示すブロック図である。 この発明の実施の形態３に係る画像表示システムの構成を示すブロック図である。 この発明の実施の形態４に係る画像表示システムの構成を示すブロック図である。 この発明の実施の形態５に係る画像表示システムの構成を示すブロック図である。

符号の説明

１ フォーカス管理部、２ 距離算出部、３ 記憶部、４ メタデータ管理部、５ 二次元分類部、６ 画像描画制御部、７ 画像描画順序管理部、８ デコーダ部、９ 画像描画部、１０ 動画サムネイル生成部、１１ 音楽サムネイル生成部、１２ サムネイル画像記憶部、Ａ 表示映像、Ｂ フォーカス枠、ａ サムネイル画像、ｂ 画像情報。

Claims (4)

1. 画像データおよび前記画像データのメタデータを記憶する記憶部と、
   前記メタデータに含まれる複数のサムネイル画像の中から注視すべきサムネイル画像を指定するフォーカス指示を受け付け、フォーカス位置を算出するフォーカス管理部と、
   前記メタデータに基づき、前記複数のサムネイル画像の表示位置を決定する分類部と、
   前記フォーカス位置に位置するフォーカスサムネイル画像と、その他のサムネイル画像との距離を算出する距離算出部と、
   前記フォーカス位置、前記分類部から入力される表示位置情報および前記距離算出部から入力される距離情報に基づき、前記複数のサムネイル画像の描画順序を決定する描画順序管理部と、
   前記描画順序に基づき前記複数のサムネイル画像の描画を制御する画像描画制御部と、
   前記画像描画制御部から入力される制御情報に基づき前記複数のサムネイル画像を描画する画像描画部とを備えることを特徴とする画像表示システム。
2. 記憶部は、動画データを記憶し、
   前記動画データからサムネイル画像を抽出する動画サムネイル生成部を備えることを特徴とする請求項１記載の画像表示システム。
3. 記憶部は、音楽データを記憶し、
   前記音楽データからサムネイル画像を抽出する音楽サムネイル生成部を備えることを特徴とする請求項１または請求項２記載の画像表示システム。
4. 画像描画部において既に表示されたサムネイル画像を記憶するサムネイル画像記憶部を備えることを特徴とする請求項１から請求項３のうちのいずれか１項記載の画像表示システム。

Images