JP4240187B2 - 画像表示装置および方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、動画像の概要を静止画像として表示することが可能な画像表示装置に係わり、例えば複数種類の動画像の中から所望の動画像を検索するシステムに適用される画像表示装置に関する。
【０００２】
【従来の技術】
文字を対象とした情報検索技術は、従来より広く行われているが、映像を対象とした検索技術については、実現例が少なく、現在もなお、様々な試みがなされている。中でも、動画像の検索方法に関しては、例えば画像認識技術やシーン抽出技術を用いた方法等、様々な観点から研究が行われている。
【０００３】
例えば、動画サーバとデータベースサーバとを組み合わせて構成したＶＯＤ(Video On Demand) システムでは、タイトル名等を対象としたキーワード検索により、コンテンツ（動画像の内容）の検索が可能である。ところが、タイトル名は、必ずしもコンテンツ全体の内容を適切に表現しているとは限らず、実際に再生してみないと内容を確認できない場合が多いのが現状である。
【０００４】
かかる問題点の解決を図るべく、本出願人は、特開平２−２６００７５号公報に開示されているように、動画像の一覧性に主眼を置いたビデオブラウザ技術を提案している。このビデオブラウザ技術は、動画像を構成する一連の静止画像の各々から移動スリット窓によってサンプリングした部分画像を基に、いわばダイジェスト静止画像としての索引画像を生成し、この索引画像を時間軸の下に一覧表示することによって、動画像の概略の内容を一目で確認できるようにした技術である。
【０００５】
このビデオブラウザ技術によれば、不可視の状態で記録されている膨大な量の動画像の内容が時間軸の下に圧縮された静止画像の形で表示されるので、動画像の内容を直ちに把握することができる。
【０００６】
しかしながら、動画像に、短いカット部分あるいは動きの速い映像部分が含まれている場合には、上記のビデオブラウザ技術において生成される索引画像からそのような短いカット部分の内容を正確に確認することは困難であった。
【０００７】
ところで、上記したＶＯＤシステムは、通常、動画像を途中から再生する機能を有しないが、そのような機能があれば、さらに便利である。そのような途中再生機能は、例えば、動画像の長さに対応した長さを有するスクロールバーを表示し、このスクロールバー上のカーソルをマウス等によってドラッグ移動させ、そのカーソル位置から動画像の再生を開始するように構成することで実現可能である。
【０００８】
しかしながら、上記の方法で動画像の途中再生を行うようにした場合には、視聴者は、感によってスクロールバー上のカーソルを移動させて再生開始位置を指定しなければならず、本当に見たい場面から再生を開始することが困難であった。
【０００９】
【発明が解決しようとする課題】
本発明はかかる問題点に鑑みてなされたもので、その第１の目的は、ビデオブラウザ技術によって生成された索引画像のみからは把握が困難な、動きの速い動画像や短いカットの動画像の内容をも正確に把握することを可能とする画像表示装置および方法を提供することにある。
【００１０】
本発明の第２の目的は、ビデオブラウザ技術によって生成された索引画像を利用して、見たい場面から正確に再生を開始することを可能とする画像表示装置および方法を提供することにある。
【００１１】
【課題を解決するための手段】
本発明の画像表示装置は、動画像を構成するように時系列的に並べられた複数の静止画像の一部分ずつを組み合わせて動画像の内容を縮約した形で表した静止画像としての索引画像を複数保持する索引画像保持手段と、索引画像保持手段に保持された各索引画像ごとに、索引画像の内容に係わる索引内容情報を保持する索引内容情報保持手段と、索引画像保持手段に保持された複数の索引画像を表示するための第１の表示領域と、索引内容情報保持手段に保持された索引内容情報を表示するための第２の表示領域とを有する表示手段と、第１の表示領域に表示された複数の索引画像の中から、いずれかを選択するための選択手段と、表示手段における表示動作を制御し、選択手段により選択された索引画像に係わる索引内容情報を索引内容情報保持手段から読み出して、第２の表示領域に表示する機能を有する制御手段とを備えている。そして、索引内容情報保持手段が、索引内容情報として、対応する索引画像の生成に用いられた少なくとも１つの静止画像で構成されたインデックス代表静止画像を表すデータと、対応する索引画像の元となった動画像を表すデータとを少なくとも保持し、表示手段が、第２の表示領域として、索引内容情報に含まれるインデックス代表静止画像を表示する静止画像表示領域と、索引内容情報に含まれる動画像を表示する動画像表示領域とを有し、制御手段が、選択手段による第１の操作により索引画像が選択された場合には、第２の表示領域の静止画像表示領域に索引内容情報として、選択された索引画像に対応するインデックス代表静止画像を表示させ、選択手段による第２の操作により索引画像が選択された場合には、第２の表示領域の動画像表示領域に索引内容情報として、選択された索引画像に対応する動画像を表示させる制御を行うようになされているものである。
本発明の画像表示装置において、選択手段としてマウスを含み、選択手段による第１の操作が、第１の表示領域に表示された索引画像の上にマウスのポインタを移動させる操作であり、第２の操作が、第１の表示領域に表示された索引画像の上にマウスのポインタを移動させ、かつポインタをクリックする操作であっても良い。
また、インデックス代表静止画像は、索引画像の生成に用いられた時間的に異なる位置にある２枚以上の静止画像で構成されたものであっても良い。そして、制御手段が、選択手段による第１の操作により索引画像が選択された場合には、第２の表示領域の静止画像表示領域に索引内容情報として、選択された索引画像に対応する２枚以上の静止画像からなるインデックス代表静止画像を表示させる制御を行うものであっても良い。
【００１５】
また、本発明の画像表示装置において、選択手段による第２の操作により索引画像が選択された場合には、制御手段が、選択手段により選択された索引画像に対応する部分から動画像の再生表示を開始させるように表示手段を制御するようにしても良い。
【００１６】
また、本発明の画像表示装置において、索引内容情報保持手段が、索引内容情報として、対応する索引画像に関連する索引関連情報をさらに保持していても良い。そして、制御手段が、選択手段による第１または第２の操作により索引画像が選択された場合には、選択された索引画像の近傍に、索引内容情報としてさらに、索引関連情報を表示させる制御を行うようになされていても良い。
【００１７】
本発明の画像表示方法は、動画像を構成するように時系列的に並べられた複数の静止画像の一部分ずつを組み合わせて動画像の内容を縮約した形で表した静止画像としての索引画像を、索引画像保持手段が複数保持するステップと、索引画像保持手段に保持された各索引画像ごとに、索引画像の内容に係わる索引内容情報を、索引内容情報保持手段が保持するステップと、索引画像保持手段に保持された複数の索引画像を、表示手段が第１の表示領域に表示するステップと、索引内容情報保持手段に保持された索引内容情報を、表示手段が第２の表示領域に表示するステップと、第１の表示領域に表示された複数の索引画像の中から、いずれかを選択手段が選択するステップと、表示手段における表示動作を制御手段が制御し、選択手段により選択された索引画像に係わる索引内容情報を索引内容情報保持手段から読み出して、第２の表示領域に表示させるステップとを含んでいる。そして、索引内容情報保持手段によって、索引内容情報として、対応する索引画像の生成に用いられた少なくとも１つの静止画像で構成されたインデックス代表静止画像を表すデータと、対応する索引画像の元となった動画像を表すデータとを少なくとも保持し、制御手段による制御に基づいて表示手段が、第２の表示領域において、索引内容情報に含まれるインデックス代表静止画像を静止画像表示領域に表示すると共に、索引内容情報に含まれる動画像を動画像表示領域に表示し、選択手段による第１の操作により索引画像が選択された場合には、第２の表示領域の静止画像表示領域に索引内容情報として、選択された索引画像に対応するインデックス代表静止画像を表示させ、選択手段による第２の操作により索引画像が選択された場合には、第２の表示領域の動画像表示領域に索引内容情報として、選択された索引画像に対応する動画像を表示させる制御を、制御手段が行うようにしたものである。
本発明の画像表示方法において、選択手段としてマウスを含み、選択手段による第１の操作が、第１の表示領域に表示された索引画像の上にマウスのポインタを移動させる操作であり、第２の操作は、第１の表示領域に表示された索引画像の上にマウスのポインタを移動させ、かつポインタをクリックする操作であっても良い。
また、インデックス代表静止画像は、索引画像の生成に用いられた時間的に異なる位置にある２枚以上の静止画像で構成されたものであっても良い。そして、制御手段が、選択手段による第１の操作により索引画像が選択された場合には、第２の表示領域の静止画像表示領域に索引内容情報として、選択された索引画像に対応する２枚以上の静止画像からなるインデックス代表静止画像を表示させる制御を行うようにしても良い。
【００２０】
また、本発明の画像表示方法において、選択手段による第２の操作により索引画像が選択された場合には、選択された索引画像に対応する部分から動画像の再生表示を開始させるように、制御手段が表示手段を制御するようにしても良い。
【００２１】
また、本発明の画像表示方法において、索引内容情報保持手段は、索引内容情報として、対応する索引画像に関連する索引関連情報をさらに保持していても良い。そして、制御手段は、選択手段による第１または第２の操作により索引画像が選択された場合には、選択された索引画像の近傍に、索引内容情報としてさらに、索引関連情報を表示させる制御を行うようにしても良い。
【００２２】
本発明の画像表示装置では、動画像を縮約して生成された索引画像ごとに、索引画像の内容に係わる索引内容情報が保持され、制御手段によって、表示手段の第１の表示領域への索引画像の表示動作と、表示手段の第２の表示領域への索引内容情報の表示動作とが制御される。
【００２３】
本発明の画像表示方法では、動画像を縮約して索引画像が生成され、生成された各索引画像ごとに、索引画像の内容に係わる索引内容情報が保持される。索引画像は、時系列的に表示される。表示された索引画像の中からいずれかが選択されると、その選択された索引画像に対応する索引内容情報が表示される。
【００２４】
本発明の他の目的、特徴および効果は、以下の説明によってさらに明らかになるであろう。
【００２５】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
【００２６】
第２図は、本発明の一実施の形態に係る画像表示装置を適用して構成した動画像検索配信システムのハードウェア構成を、その構成要素であるウェブサーバ３および端末装置４の内部構成と共に表すものである。本実施の形態の動画像検索配信システムは、インターネット上の情報へのアクセスを可能とするシステムであるワールド・ワイド・ウェブ（ＷＷＷ）を用いて、動画像の検索および配信を可能としたシステムである。
【００２７】
この図に示したように、この動画像検索配信システムは、ＷＷＷをサポートするウェブサーバ３と、クライアントとしての端末装置４と、動画像を蓄積している動画像サーバ５と、動画像サーバ５に蓄積された動画像に関するデータを蓄積しているデータベースサーバ６とを含んでいる。これらの各要素は、インターネットの一部を構成するネットワーク２に接続されている。なお、ネットワーク２に接続されるウェブサーバ３、端末装置４、動画像サーバ５およびデータベースサーバ６の数や、ネットワーク２に対する物理的接続形態に特に制限はない。
【００２８】
ウェブサーバ３は、主として、端末装置４からの要求に応じて、動画像に関する検索や、動画像から生成した静止画像としてのビジュアル・ダイジェスト・インデックス画像（以下、ＶＤインデックス画像という。）の検索および配信等を行うものである。このＶＤインデックス画像は、動画像の内容を静止画像の形に縮約したもので、これを見るだけで動画像の概略的内容を把握できるようにしたものである。その生成方法は後述する。ここで、ＶＤインデックス画像が本発明における「索引画像」に対応する。
【００２９】
第２図に示したように、ウェブサーバ３は、コンピュータ本体１１と、このコンピュータ本体１１に接続された、ディスプレイ装置１２、キーボード１３、マウス１４およびハードディスク装置１５とを備えている。コンピュータ本体１１は、ＣＰＵ（中央処理装置）２１と、ＲＯＭ（リード・オンリ・メモリ）およびＲＡＭ（ランダム・アクセス・メモリ）等を含むメモリ部２２と、ディスプレイ装置１２を制御するためのディスプレイコントローラ２３と、キーボード１３およびマウス１４に接続され、入出力（Ｉ／Ｏ）動作を制御するＩ／Ｏコントローラ２４と、ハードディスク装置１５を制御するためのハードディスクコントローラ２５と、ネットワーク２に接続され、通信の制御を行うネットワークコントローラ２６とを備えている。これらの各要素間は、バス２７によって相互に接続されている。ＣＰＵ２１は、メモリ部２２内のＲＡＭを作業用記憶領域として利用して、ハードディスク装置１５に格納されたアプリケーションプログラムを実行するようになっている。
【００３０】
端末装置４は、例えば通常のパーソナルコンピュータとして構成されたもので、インターネット上の情報を閲覧可能とするためのソフトウェアであるインターネットブラウザと、ネットワーク２を介して配信された動画像の再生を可能とするためのソフトウェアである動画像再生プログラムとを保有している。インターネットブラウザとしては、例えば、ネットスケープナビゲータ(Netscape Navigator(米国 Netscape Communications社の商標))等の一般的な商用ブラウザが使用可能である。
【００３１】
第２図に示したように、端末装置４は、コンピュータ本体３１と、このコンピュータ本体３１に接続された、ディスプレイ装置３２、キーボード３３、マウス３４、スピーカ３５ａ，３５ｂおよびハードディスク装置３６とを備えている。コンピュータ本体３１は、ＣＰＵ４１と、ＲＯＭおよびＲＡＭ等を含むメモリ部４２と、ディスプレイ装置３２を制御するためのディスプレイコントローラ４３と、ＭＰＥＧ(Moving Picture Experts Group)規格による画像データの圧縮・伸長処理を行うＭＰＥＧ処理部４４と、キーボード３３およびマウス３４に接続され、入出力動作を制御するＩ／Ｏコントローラ４５と、スピーカ３５ａ，３５ｂからの音声出力を制御するサウンドコントローラ４６と、ハードディスク装置３６を制御するためのハードディスクコントローラ４７と、ネットワーク２に接続され、通信の制御を行うネットワークコントローラ４８とを備えている。これらの各要素間は、バス４９によって相互に接続されている。ＣＰＵ４１は、メモリ部４２内のＲＡＭを作業用記憶領域として、ハードディスク装置３６に格納されたアプリケーションプログラムを実行するようになっている。なお、ＭＰＥＧ処理部４４は、ハードウェアで実現してもよいし、ソフトウェアで実現してもよい。
【００３２】
なお、端末装置４は、上記のようなインターネットブラウザ機能と動画像再生機能とを有するものであれば、ハードウェアとしての限定はない。
【００３３】
動画像サーバ５は、複数種類の動画像を蓄積し、要求に応じてこれをネットワーク２を介して提供したり、動画像からＶＤインデックス画像を生成するためのものである。
【００３４】
第３図は、動画像サーバ５のハードウェア構成を表すものである。この図に示したように、動画像サーバ５は、コンピュータ本体５１と、このコンピュータ本体５１に接続された、ディスプレイ装置５２、キーボード５３、マウス５４、および複数のハードディスクを用いて冗長に構成された大容量のＲＡＩＤ(Redundant Array of Inexpensive Disks)５５とを備えている。
【００３５】
コンピュータ本体５１は、ＣＰＵ６１と、ＲＯＭおよびＲＡＭ等を含むメモリ部６２と、ディスプレイ装置５２を制御するためのディスプレイコントローラ６３と、ＭＰＥＧ規格による画像データの圧縮・伸長処理を行うＭＰＥＧ処理部６４と、キーボード５３およびマウス５４に接続され、入出力動作を制御するＩ／Ｏコントローラ６５と、ＲＡＩＤ５５を制御するためのＲＡＩＤコントローラ６６と、ネットワーク２に接続され、通信の制御を行うネットワークコントローラ６７とを備えている。これらの各要素間は、バス６８によって相互に接続されている。ＣＰＵ６１は、メモリ部６２内のＲＡＭを作業用記憶領域として、ＲＡＩＤ５５に格納されたアプリケーションプログラムを実行するようになっている。なお、ＭＰＥＧ処理部６４は、ハードウェアで実現してもよいし、ソフトウェアで実現してもよい。
【００３６】
次に、本実施の形態の動画像検索配信システムの機能構成を説明する。
【００３７】
第１図は、第２図に示した動画像検索配信システムにおける各要素の機能構成を表すものである。この図に示したように、ウェブサーバ３は、インターネットサーバ部７１と、データベース検索部７２と、インデックス検索部７３と、インデックス格納部７４と、インデックス関連処理部７５と、インデックス関連情報格納部７６と、ＧＵＩ(Graphycal User Interface)データ生成部７７と、ＧＵＩデータ格納部７８と、静止画像格納部７９とを有している。
【００３８】
インターネットサーバ部７１は、インターネット上で公開される情報の管理や配信等を行うためのもので、具体的には、端末装置４、動画像サーバ５およびデータベースサーバ６等とのやり取りを行う。
【００３９】
データベース検索部７２は、端末装置４からの要求に応じて、データベースサーバ６に動画像検索要求を発し、得られた検索結果をインデックス検索部７３に渡すという処理を行うものである。この検索結果には、該当する動画像のタイトル、動画像データのファイル名、その動画像ファイルが格納されている動画像サーバの名前（ここでは動画像サーバ５）、動画像サーバ内における、その動画像ファイルの格納位置等が含まれる。
【００４０】
インデックス検索部７３は、データベース検索部７２から受け取ったデータベース検索結果を基に、インデックス格納部７４に格納されている複数のＶＤインデックスファイルの中から目的のファイルを検索するためのものである。ここで、ＶＤインデックスファイルとは、後述するように、動画像のタイトルごとに生成された画像データファイルであり、１または複数のＶＤインデックス画像データを含んでいる。
【００４１】
インデックス格納部７４は、動画像サーバ５から送られてきたＶＤインデックスファイルを格納するためのものである。
【００４２】
インデックス関連処理部７５は、ＧＵＩデータ生成部７７がＧＵＩデータを生成する際に必要な、ＶＤインデックス画像の表示態様に関する各種の表示パラメータ情報を求める処理等を行うためのものである。この表示パラメータ情報には、例えば、端末装置４のディスプレイ装置３２のインターネットブラウザ画面（以下、単にブラウザ画面という。）のサイズに応じたＶＤインデックス画像の表示可能数、生成されたＶＤインデックス画像の数が上記の表示可能数を越える場合に取捨選択すべきＶＤインデックス画像の番号、および動画像の長さに応じたＶＤインデックス画像表示形式等が含まれる。ここで、ＶＤインデックス画像表示形式とは、動画像の長さに応じ、ＶＤインデックス画像を表示し得る領域の一部を選択的に使用したり使用しないようにして、端末装置４のユーザがディスプレイ装置３２のブラウザ画面に表示されたＶＤインデックス画像の表示形式を見ただけで、それに対応した動画像の長さを判断できるようにするためのものである。
【００４３】
インデックス関連情報格納部７６は、動画像サーバ５から送られてきたインデックス関連情報を格納するためのものである。このインデックス関連情報は、動画像サーバ５のインデックス生成部８７によって生成されたＶＤインデックス画像の数や、ＶＤインデックス画像の生成に使用された各種の生成パラメータを含む情報である。ここで、生成パラメータには、例えば、１枚のＶＤインデックス画像の生成に用いたフレームの数、各フレームから抽出したラインの数、およびライン抽出の方向等が含まれる。
【００４４】
ＧＵＩデータ生成部７７は、端末装置４等に対して提供される動画像検索用のホームページを構成するＧＵＩデータの生成または更新を行うためのものである。この動画像検索用のホームページを構成するデータは、通常、ＨＴＭＬ(Hypertext Markup Language) 言語によって記述される。
【００４５】
ＧＵＩデータ格納部７８は、ＧＵＩデータ生成部７７によって生成されたＧＵＩデータを格納するための領域である。
【００４６】
静止画像格納部７９は、動画像サーバ５からＶＤインデックスファイルと共に送られてきた静止画像ファイルを格納するためのものである。この静止画像ファイルは、ＶＤインデックスファイルに含まれている各ＶＤインデックス画像ごとに１枚ずつ対応付けられた静止画像のデータで構成される。静止画像のデータとしては、例えばＧＩＦ(Graphics Interchange Format) 形式で圧縮されたデータが用いられる。ここで、静止画像格納部７９が本発明における「索引内容情報保持手段」の１つに対応し、そこに格納される静止画像（正確には、後述するインデックス代表静止画像）が本発明における「索引内容情報」の１つに対応する。
【００４７】
以上のウェブサーバ３における各機能部のうち、インターネットサーバ部７１、データベース検索部７２、インデックス検索部７３、インデックス関連処理部７５およびＧＵＩデータ生成部７７は、それぞれ、主として、第２図におけるハードディスク装置１５に格納されているアプリケーションプログラムおよびこれを実行するＣＰＵ２１によって実現される。また、インデックス格納部７４、インデックス関連情報格納部７６、ＧＵＩデータ格納部７８および静止画像格納部７９は、それぞれ、第２図におけるハードディスク装置１５の一部を用いて実現される。
【００４８】
端末装置４は、インターネットブラウザ部８１と、動画像再生部８２とを有している。
【００４９】
インターネットブラウザ部８１は、ＷＷＷを利用してインターネットにアクセスし、情報を受け取って表示するという機能を有するもので、上記したように、例えばネットスケープナビゲータ等の一般的な商用ブラウザにより実現される。
【００５０】
動画像再生部８２は、動画像サーバ５から配信された動画像データを伸長して表示するためのもので、主として第２図におけるＭＰＥＧ処理部４４によって実現される。但し、動画像再生部８２の機能は、動画像のコンテンツタイプ（例えば圧縮方式）に対応した動画像再生用プログラムによっても実現可能である。この動画像再生用プログラムは、例えば、インターネットブラウザのプラグイン・ソフトウェアとして提供される。
【００５１】
動画像サーバ５は、動画像格納部８５、動画像配信部８６およびインデックス生成部８７を有している。
【００５２】
動画像格納部８５は、動画像ファイルを格納する部分であり、第３図におけるＲＡＩＤ５５によって実現される。動画像ファイルに含まれる動画像データは、ＭＰＥＧ形式で圧縮されたものである。ここで、動画像格納部８５が本発明における「索引内容情報保持手段」の１つに対応し、そこに格納される動画像データが本発明における「索引内容情報」の１つに対応する。
【００５３】
動画像配信部８６は、端末装置４等からの要求に応じて、動画像格納部８５から目的の動画像を取り出し、ネットワーク２を介して端末装置４に配信するという処理を行うものである。
【００５４】
インデックス生成部８７は、動画像格納部８５に格納された動画像の内容を視覚的に縮約して静止画像としてのＶＤインデックス画像を生成し、これをＶＤインデックスファイルとして、ネットワーク２を介してウェブサーバ３に送信するという処理を行うものである。具体的には、動画像格納部８５から取り出した動画像をＭＰＥＧ処理部６４（第３図）によって伸長すると共に、この伸長処理がなされた動画像に対して後述する処理（第５Ａ図〜第５Ｃ図および第６Ａ図〜図６Ｄを参照）を施すことでＶＤインデックス画像を生成する。インデックス生成部８７はまた、生成されたＶＤインデックス画像の数や、ＶＤインデックス画像の生成に使用されたパラメータ等を、インデックス関連情報としてウェブサーバ３に送信するという機能をも有している。生成されたＶＤインデックスファイルおよびインデックス関連情報は、それぞれ、ウェブサーバ３のインデックス格納部７４およびインデックス関連情報格納部７６に格納される。ここで、インデックス保持部７４が本発明における「索引画像保持手段」に対応する。
【００５５】
データベースサーバ６は、データベース９１と、検索処理部９２とを有している。
【００５６】
データベース９１は、動画像のタイトル、動画像ファイル名、その動画像ファイルが格納されている動画像サーバの名前（ここでは動画像サーバ５）、動画像サーバ内における、その動画像ファイルの格納位置等を含んでいる。
【００５７】
検索処理部９２は、ウェブサーバ３のデータベース検索部７２からの要求に応じて、与えられたキーワードに基づいてデータベース９１を検索し、その検索結果をデータベース検索部７２に送るという処理を行うようになっている。検索処理部９２は、例えば、サイベース(Sybase ; 米国Sybase Inc社の登録商標) 等のデータベース管理システム(DBMS;Database Management System) プログラムにより実現される。
【００５８】
第４図は、端末装置４のディスプレイ装置３２に表示されたインターネットブラウザ画面の一例を表すものである。このブラウザ画面は、インターネットブラウザ部８１の機能により実現されるものである。ここで、主としてディスプレイ装置３２が本発明における「表示手段」に対応し、インターネットブラウザ部８１が主として本発明における「制御手段」に対応する。
【００５９】
このブラウザ画面は、ブラウザタイトルバー、メニューバーおよびツールバー等からなるシステム領域１０１と、検索結果としてのＶＤインデックス画像等を表示するためのインデックス表示領域１０２と、静止画像（正確には、後述するインデックス代表静止画像）を表示するための静止画像表示領域１０３と、動画像を再生表示するための動画像表示領域１０４とを含んでいる。
【００６０】
システム領域１０１のメニューバーには、‘ファイル’，‘編集’，‘表示’等のメニュー項目があり、それぞれをマウスクリックすることにより、プルダウンメニューが表示されるようになっている。ツールバーには、‘戻る’，‘再読み込み’等のツールアイコンが配置され、それぞれをマウスクリックすることにより、対応するブラウザ動作が行われるようになっている。ここで、マウスクリックとは、マウスポインタ１０９を対象のアイテムに合わせた状態でマウス３４の例えば左クリックをすることを意味する。以下の説明では、この操作を、単に、クリックする、と記するものとする。
【００６１】
インデックス表示領域１０２には、検索に用いられたキーワードおよび検索された動画像のタイトル数１０６と、検索された動画像についてのＶＤインデックス画像グループ１０７，１０８等とが表示されるようになっている。この図に示した例では、キーワード‘岡崎’に対して１１７個の動画像が検索され、このうち、‘桜どころ岡崎’、‘歴史と未来が息づく岡崎’、等のタイトルの動画像についてのＶＤインデックス画像グループ１０７，１０８が表示されている。ここで、１つのＶＤインデックス画像グループが、１つのタイトルの動画像に対応している。各ＶＤインデックス画像グループの下側には、それぞれ、対応する動画像の全体の長さ（全再生時間）に対応したインジケータバー１０７ａ，１０８ａが配置されている。これらのインジケータバー１０７ａ，１０８ａ等における黒塗のこま部分は、その上に表示されているＶＤインデックス画像が、すべてのＶＤインデックス画像のうちのどの位置のものであるかを示している。このインデックス表示領域１０２において、その右端部のスクロールバー１１０を操作することにより、複数のＶＤインデックス画像グループを上下方向にスクロールさせて順次表示することができるようになっている。ここで、インデックス表示領域１０２が本発明における「第１の表示領域」に対応する。
【００６２】
静止画像表示領域１０３には、インデックス表示領域１０２に表示されたＶＤインデックス画像のうちの選択されたものに対応した静止画像１０３ａが表示されるようになっている。この静止画像１０３ａが、後述するインデックス代表静止画像である。本実施の形態では、例えばマウス３４を操作してマウスポインタ１０９を所望のＶＤインデックス画像の上に移動させるだけで、そのＶＤインデックス画像が選択されるようになっている。
【００６３】
動画像表示領域１０４には、インデックス表示領域１０２に表示されたＶＤインデックス画像のうちの選択されたものに対応した動画像１０４ａが、タイトル名および動画像ファイル名１０４ｂと共に表示されるようになっている。本実施の形態では、例えばマウスポインタ１０９を所望のＶＤインデックス画像の上に移動させてクリックすることで、そのＶＤインデックス画像に対応した動画像が選択されるようになっている。この場合の再生開始点は、クリックされたＶＤインデックス画像に対応した動画像区間の先頭である。但し、動画像区間の先頭以外の位置を再生開始点としてもよい。ここで、動画像１０４ａの再生、停止、一時停止、高速再生、リバース再生および高速リバース再生等の操作は、操作部１０４ｃによって行うことが可能である。また、拡大表示アイコン１０４ｄをクリックすることで、動画像１０４ａをブラウザ画面いっぱいに拡大表示することができるようになっている。
【００６４】
ここで、静止画像表示領域１０３または動画像表示領域１０４が本発明における「第２の表示領域」に対応する。
【００６５】
次に、以上のような構成の動画像検索配信システムの動作を説明する。
【００６６】
ここでは、まず、第５Ａ図〜第５Ｃ図および第６Ａ図〜第６Ｃ図を参照して、動画像サーバ５のインデックス生成部８７が行うＶＤインデックス画像の生成処理について説明する。ここで、第５Ａ図〜第５Ｃ図は、一連の動画像から複数のＶＤインデックス画像を生成する概略の手順を表し、第６Ａ図〜第６Ｃ図は、ある一区間の動画像から１枚のＶＤインデックス画像を生成する手順を表すものである。
【００６７】
まず、第５Ａ図および第６Ａ図に示したように、動画像を、２次元の静止画像Ｆｉ（ｉ＝１，２，…）が時間軸ｔに沿って並んだ直方体モデルとして定義する。以後、２次元の静止画像をフレームとも称するものとする。例えばＮＴＳＣ (National Television System Committee) 方式の場合は、各フレームは、６０分の１秒の長さの２枚のフィールドによって構成されるので、１フレームは３０分の１秒という長さをもつ。
【００６８】
次に、第５Ｂ図に示したように、一連の動画像全体からなる直方体モデルを一定の時間間隔で複数の区間直方体Ｓｉ（この図では、ｉ＝１〜４）に分割する。そして、各区間直方体Ｓｉを、その対角面に沿って斜めに切断し、各切断面における帯状の画像情報（以下、スリット画像情報という。）を抽出する。実際には、第６Ｂ図に示したように、１つの区間直方体からフレームＦｊ（ｊ＝１，２，…）を取り出し、さらに、第６Ｃ図に示したように、これらの各フレームＦｊから、時間と共に移動する移動スリット窓によって、スリット画像情報ＳＬｊを順次切り出す。
【００６９】
次に、図６Ｄに示したように、上記の切断面から抽出したスリット画像情報ＳＬｊを順次並べていき、一定サイズになったところで、これに所定の圧縮処理を行う。これにより、第５Ｃ図に示したように、各区間直方体Ｓｉごとに、それぞれ１枚のＶＤインデックス画像Ｉｉ（ｉ＝１〜４）が生成され、動画像全体としては、複数枚（この図では４枚）のＶＤインデックス画像が生成される。このとき、各ＶＤインデックス画像ごとに、それの元となった区間直方体Ｓｉに含まれていた１枚のフレーム（すなわち、スリット窓による抽出処理が行われていない元の静止画像）を対応付け、これをインデックス代表静止画像として登録する。このインデックス代表静止画像としては、例えば、ＶＤインデックス画像の中央部分の生成に供せられたフレーム（第６Ｄ図では、フレームＦ５）が選択される。但し、ＶＤインデックス画像における他の部分（例えば端部）の生成に供せられたフレームを選択するようにしてもよい。
【００７０】
なお、第５Ａ図〜第５Ｃ図および第６Ａ図〜第６Ｃ図に示した例では、動画像を構成するフレームＦｊから、垂直方向（縦方向）に細長い移動スリット窓によってスリット画像情報ＳＬｊを抽出するようにしたが、水平方向（横方向）に細長い移動スリット窓によってスリット画像情報ＳＬｊを抽出するようにしてもよい。また、動画像を構成するフレームＦｊから直接スリット画像情報ＳＬｊを抽出するのではなく、フレームＦｊのうちの要部（例えば中央領域）のみを抽出対象範囲とし、その他の領域（例えば周辺領域）は抽出対象から外すようにしてもよい。さらには、ＶＤインデックス画像の中に、インデックス代表静止画像とは別に、元のフレームを取り混ぜるようにしてもよい。
【００７１】
次に、第７図および第８図を参照して、以上のような構成の動画像検索配信システムの全体動作を説明する。なお、第７図および第８図は、ウェブサーバ３、端末装置４、動画像サーバ５およびデータベースサーバ６における一連の動作をそれぞれに区分して表すものである。ここでは、端末装置からの検索要求に応じて、ウェブサーバ３およびデータベースサーバ６によって、該当する動画像についてのＶＤインデックス画像を検索し、これを端末装置４のブラウザ画面に表示すると共に、表示されたＶＤインデックス画像のうちの選択されたものに対応するインデックス代表静止画像を表示し、さらに、選択されたＶＤインデックス画像に対応する動画像を再生表示するという一連の動作を説明する。なお、ここでは、既に、動画像サーバ５の動画像格納部８５に格納された動画像についてのＶＤインデックス画像およびインデックス代表静止画像が、それぞれ、ウェブサーバ３のインデックス格納部７４および静止画像格納部７９に格納されているものとする。
【００７２】
端末装置４において、インターネットブラウザ部８１を起動すると（第７図のＳ１）、インターネットブラウザ部８１は、ネットワーク２を介して、ウェブサーバ３にアクセスする（Ｓ２）。ウェブサーバ３のインターネットサーバ部７１は、端末装置４からのアクセスを受けると、ＧＵＩデータ格納部７８から動画検索用ホームページを記述したＧＵＩデータを読み出して、端末装置４に配信する（Ｓ３）。
【００７３】
端末装置４のインターネットブラウザ部８１は、ウェブサーバ３から送られてきたＧＵＩデータを基に、ディスプレイ装置３２（第２図）のブラウザ画面に動画検索用ホームページの初期画面（図示せず）を表示する（Ｓ４）。
【００７４】
ここで、動画像検索キーワード（以下、単に、キーワードという。）を入力すると（Ｓ５）、インターネットブラウザ部８１は、入力されたキーワードを、動画像検索要求と共にウェブサーバに送信する（Ｓ６）。
【００７５】
ウェブサーバ３のインターネットサーバ部７１は、端末装置４から動画像検索要求およびキーワードを受けると、データベース検索部７２を起動する。データベース検索部７２は、インターネットサーバ部７１およびネットワーク２を介して、キーワードと共に動画像情報検索命令コードをデータベースサーバ６に送信する（Ｓ７）。
【００７６】
データベースサーバ６の検索処理部９２は、受け取ったキーワードに基づいてデータベース９１を検索し、検索結果をウェブサーバ３に送信する（Ｓ８）
データベースサーバ６から検索結果を受け取ったウェブサーバ３は、インデックス検索部７３を起動する。インデックス検索部７３は、データベースサーバ６からの検索結果を基に、インデックス格納部７４を検索して、該当するＶＤインデックスファイルを抽出し（Ｓ９）、これをＧＵＩデータ生成部７７に渡す。
【００７７】
ＧＵＩデータ生成部７７は、データベースサーバからの検索結果およびインデックス格納部の検索結果を基に、ＧＵＩデータを生成する（Ｓ１０）。このＧＵＩデータには、動画像のタイトル名、動画像ファイル名および動画像サーバ５における動画像ファイルの格納場所、ＶＤインデックス画像等が含まれる。
【００７８】
なお、ＧＵＩデータの作成の際には、インデックス関連処理部７５によって求められた、ＶＤインデックス画像の表示形式、表示個数および配列等を含む表示パラメータ情報が参照され、これにより、動画像の長さや端末装置４のディスプレイ装置３２のブラウザ画面サイズ等に応じた最適な画面レイアウトを実現し得る内容のＧＵＩデータが作成される。ここで、表示パラメータ情報は、ウェブサーバ３から端末装置４への問い合わせに応じて端末装置４から送られてきた端末装置４のディスプレイ装置３２のブラウザ画面サイズを示すデータや、検索された動画像の長さを示すデータ等に基づいて、インデックス関連処理部７５によって生成されたものである。
【００７９】
次に、ＧＵＩデータ生成部７７は、生成したＧＵＩデータをＧＵＩデータ格納部７８に格納すると共に、検索結果として端末装置４に送信する（Ｓ１１）。
【００８０】
端末装置４のインターネットブラウザ部８１は、ウェブサーバ３から送られてきたＧＵＩデータを受信し、このデータに基づいて、第４図に示したように、検索結果表示画面のインデックス表示領域１０２に、検索結果の内容として、キーワードおよび該当する動画像の数１０６、ならびに動画像のタイトル名およびＶＤインデックス画像グループ１０７，１０８を表示する（Ｓ１２）。
【００８１】
ここで、端末装置４のインターネットブラウザ部８１は、マウスポインタ１０９の位置およびクリックの有無を監視し、マウスポインタ１０９（第４図）がいずれかのＶＤインデックス画像の上に置かれており、かつ、クリックがされていないと判断した場合には、ＶＤインデックス画像を特定するための情報（以下、インデックス特定情報という。）を取得する（第８図のＳ１３）。インデックス特定情報は、例えば、ＶＤインデックスファイル名およびＶＤインデックス画像に付された連続番号等を含む。そして、インターネットブラウザ部８１は、この取得したインデックス特定情報と共に、インデックス代表静止画像の送信を求める要求を、ウェブサーバ３に送信する（Ｓ１４）。
【００８２】
ウェブサーバ３のインターネットサーバ部７１は、端末装置４から要求のあったインデックス代表静止画像を静止画像格納部７９から取得し、端末装置４に送信する（Ｓ１５）。
【００８３】
端末装置４のインターネットブラウザ部８１は、ウェブサーバ３から送られてきたインデックス代表静止画像を受信し、ブラウザ画面の静止画像表示領域１０３（第４図）に表示する（Ｓ１６）。
【００８４】
さらに、端末装置４のインターネットブラウザ部８１は、マウスポインタの位置およびクリックの有無を監視し、マウスポインタ１０９（第４図）がいずれかのＶＤインデックス画像の上に置かれている状態でクリックされたと判断した場合には、そのＶＤインデックス画像についてのインデックス特定情報を取得する（Ｓ１７）。そして、インターネットブラウザ部８１は、取得したインデックス特定情報と共に、動画像再生命令コードの送信を求める要求を、ウェブサーバ３に送信する（Ｓ１８）。
【００８５】
ウェブサーバ３のインターネットサーバ部７１は、端末装置４から送られてきた動画像再生命令コードの送信要求およびインデックス特定情報を受信すると、このＶＤインデックス特定情報を基に、該当する動画像を特定して、動画像ファイル名、動画像ファイル格納位置および再生開始位置等を含む動画像再生命令コードを生成し、端末装置３に送信する（Ｓ１９）。
【００８６】
端末装置４のインターネットブラウザ部８１は、ウェブサーバ３からの動画像再生命令コードを受信し、これを基に、動画像サーバ５に対して、動画像の配信を要求する（Ｓ２０）。
【００８７】
動画像サーバ５の動画像配信部８６は、端末装置４から送られてきた動画像再生命令コードに基づいて、該当する動画像を動画像格納部８５から取り出し、これを端末装置４にリアルタイムで配信する（Ｓ２１）。このとき、動画像配信部８６は、動画像格納部８５内の動画像データを、動画像再生命令コードによって指定された再生開始位置から、圧縮状態のまま取り出して、配信する。
【００８８】
端末装置４の動画像再生部８２は、動画像サーバ５から配信された動画像データに対して伸長処理等を行いながら、ブラウザ画面の動画像表示領域１０４（第４図）に動画像１０４ａを表示する（Ｓ２２）。このとき、動画像の再生開始位置は、例えば、選択されたＶＤインデックス画像の先頭部分に対応した位置とされる。
【００８９】
この状態で、マウスポインタ１０９によって、操作部１０４ｃに対して、動画像１０４ａの再生、停止、一時停止、高速再生、リバース再生または高速リバース再生等の操作を行うと、インターネットブラウザ部８１は、各操作に対応した命令コードを動画像サーバ５に送信する。これらの命令コードを受けた動画像サーバ５の動画像配信部８６は、命令コードに応じた態様で動画像格納部８５の動画像を再生し、端末装置４に配信する。これらの動作はいずれも、ほぼリアルタイムで行われる。また、第４図の拡大表示アイコン１０４ｄをクリックすると、インターネットブラウザ部８１は、動画像１０４ａをブラウザ画面いっぱいに拡大表示する。
【００９０】
第９図は、端末装置４のブラウザ画面に表示されたＶＤインデックス画像のいずれかを選択した場合に、対応するインデックス代表静止画像が表示される様子を表すものである。この図の例では、ＶＤインデックス画像Ｉ１〜Ｉ６のうち、例えばＶＤインデックス画像Ｉ１，Ｉ４，Ｉ６が選択されたときに、それぞれに対応したインデックス代表静止画像ＳＰ１，ＳＰ４，ＳＰ６が表示される様子を示している。
【００９１】
この図に示したように、例えばＶＤインデックス画像Ｉ１は、動画像区間の中央部付近で２度のシーンチェンジがある動画像（すなわち、短いカットを含む動画像）から生成されたものであるため、インデックス代表静止画像ＳＰ１だけでその区間の動画像の内容を把握することは容易でない。このような場合に、ＶＤインデックス画像Ｉ１の上にマウスポインタを移動させると、縮約されていない元の静止画像がそのままインデックス代表静止画像ＳＰ１として表示されるので、これにより、正確な内容把握が可能となる。その他のＶＤインデックス画像Ｉ２〜Ｉ６についても同様である。
【００９２】
以上のように、本実施の形態の動画像検索配信システムによれば、端末装置４のブラウザ画面に表示されたＶＤインデックス画像のいずれかを選択すると、対応するインデックス代表静止画像が表示されるようにしたので、例えば動きの速い動画像のように、ＶＤインデックス画像だけでは内容の把握が困難な動画像であっても、一目で容易に内容を確認することが可能である。しかも、ＶＤインデックス画像の選択は、マウスポインタの移動のみで行われるようにしたので、操作が極めて簡単である。
【００９３】
また、本実施の形態の動画像検索配信システムによれば、端末装置４のブラウザ画面に表示されたＶＤインデックス画像のいずれかをマウスクリックによって選択すると、対応する動画像の表示が、その選択されたＶＤインデックス画像に対応する部分から開始されるようにしたので、ユーザが見たいシーンからの途中再生が可能である。したがって、関連技術の項で記述した、スクロールバー上のカーソル移動によって途中再生を行う場合と比べて、正確な位置から迅速に動画像の途中再生を行うことができる。
【００９４】
以上、実施の形態を挙げて本発明を説明したが、本発明はこの実施の形態に限定されず、種々の変形が可能である。
【００９５】
例えば、上記実施の形態では、ＶＤインデックス画像に対応付けられて登録され表示されるインデックス代表静止画像の数は１枚としたが、本発明はこれに限定されず、２枚以上でもよい。例えば、ＶＤインデックス画像ごとに、ＶＤインデックス画像の例えば両端部および中央部の３箇所の画像部分の生成に供せられた３枚のインデックス代表静止画像を登録しておき、マウスポインタでＶＤインデックス画像を選択することによって、それらの３枚のインデックス代表静止画像が表示されるようにすることも可能である。この場合には、より多くのインデックス代表静止画像によって、ＶＤインデックス画像の内容をより正確に把握することが可能となる。
【００９６】
また、上記実施の形態では、動画像の再生開始位置は、選択されたＶＤインデックス画像の先頭部分に対応した位置であるとして説明したが、選択されたＶＤインデックス画像における他の部分（例えば、中央部分）に対応した位置から再生を開始させるようにしてもよい。
【００９７】
また、上記実施の形態では、ＶＤインデックス画像の選択に応じてブラウザ画面に表示される「索引内容情報」がインデックス代表静止画像または動画像である場合について説明したが、このほか、ウェブサーバ３のインデックス関連情報格納部７６に格納されたテキスト情報としてのインデックス関連情報を、「索引内容情報」として、選択されたＶＤインデックス画像に対応させて表示させるようにしてもよい。
【００９８】
この場合には、ＶＤインデックス画像ごとに、例えば、そのＶＤインデックス画像の動画像全体に占める位置（例えば、動画像の先頭を起点とする再生経過時間）を示す情報や、個々のＶＤインデックス画像の名前等のテキスト情報を付加して、これをインデックス関連情報に含めておき、ウェブサーバ３から端末装置４にＶＤインデックス画像を送信する際に、併せてインデックス関連情報を送るようにする。そして、端末装置４のインターネットブラウザ部８１では、受信したインデックス関連情報に含まれている上記の再生経過時間を示す情報等を、端末装置４のブラウザ画面におけるインデックス表示領域１０２に表示された、対応するＶＤインデックス画像の近傍に表示すればよい。こうすることにより、ユーザは、各ＶＤインデックス画像に付随する情報をも知ることができる。このようにした場合には、インデックス関連情報格納部７６は本発明における「索引内容情報保持手段」の１つに対応する。また、インデックス関連情報は、本発明における「索引内容情報」の１つとしての「索引関連情報」に対応する。
【００９９】
なお、上記実施の形態では、インデックス生成部８７を動画像サーバ５内に配置するようにしたが、ウェブサーバ３内に配置してもよい。あるいは、インデックス生成部８７のみを独立したサーバとして構成し、ネットワーク２に接続するようにしてもよい。
【０１００】
また、上記実施の形態では、本発明に係る画像表示装置の構成要素である索引画像保持手段としてのインデックス格納部７４と、索引内容情報保持手段としての静止画像格納部７９、動画像格納部８５またはインデックス関連情報格納部７６と、表示手段としてのディスプレイ装置３２と、制御手段としてのインターネットブラウザ部８１とを、それぞれ、ウェブサーバ３、動画像サーバ５および端末装置４に分散配置し、各間をネットワーク２によって相互に接続するようにしたが、これらの要素をすべて同一の装置に内蔵させて、スタンドアローンタイプの画像表示装置として構成することも可能である。
【０１０１】
【発明の効果】
以上説明したように、本発明の画像表示装置、または画像表示方法によれば、動画像を縮約して生成した索引画像ごとに、索引画像の内容に係わる索引内容情報を保持し、制御手段によって、表示手段の第１の表示領域への索引画像の表示動作と、表示手段の第２の表示領域への索引内容情報の表示動作とを制御するようにしたので、索引画像のみならず、その内容に係わる索引内容情報をも見ることができる。したがって、索引画像のみを表示した場合と比べて、その元となった動画像の内容を、より容易に把握することができるという効果を奏する。
【０１０２】
また、表示された索引画像の中からいずれかが選択されたことに応答して、その選択された索引画像に対応する索引内容情報を表示するようにしたので、動画像の全体を概観しながら、必要な部分についてのみ索引内容情報を表示させて詳細な確認を行うことが可能になるという効果を奏する。
【０１０３】
また、索引内容情報として、対応する索引画像の生成に用いられた少なくとも１つの静止画像で構成されたインデックス代表静止画像を含むようにしたので、索引画像が見にくくて内容の判断が困難な場合であっても、インデックス代表静止画像を見ることによって、動画像の内容の把握が容易になるという効果を奏する。
【０１０４】
また、索引内容情報として、索引画像の元となった動画像を表すものを含むようにしたので、索引画像によって動画像の概略内容を確認しながら、これと並行して動画像を実際に再生表示させることができるという効果を奏する。
【０１０５】
また、選択された索引画像に対応する部分から動画像の再生表示を開始可能にしたので、索引画像を概観して、見たいシーンがあったときに直ちにその部分から動画像の再生表示を行うことができ、ユーザにとって極めて便利であるという効果を奏する。
【０１０６】
また、索引内容情報として、対応する索引画像に関連する索引関連情報を含めるようにした場合には、索引画像のほかに、索引関連情報をも見ることができ、動画像の内容把握の補助になるという効果を奏する。
【０１０７】
以上の説明に基づき、本発明の種々の態様や変形例を実施可能であることは明らかである。したがって、クレームの均等の範囲において、上記の詳細な説明における態様以外の態様で本発明を実施することが可能である。
【図面の簡単な説明】
【図１】 第１図は、本発明の一実施の形態の画像表示装置が適用される動画像検索配信システムにおける各構成要素の機能構成を表すブロック図である。
【図２】 第２図は、この動画像検索配信システムのハードウェア構成を、その構成要素であるウェブサーバおよび端末装置のハードウェア構成と共に表すブロック図である。
【図３】 第３図は、動画像サーバのハードウェア構成を表すブロック図である。
【図４】 図４は、端末装置のディスプレイ装置に表示されたインターネットブラウザ画面の一例を表す図である。
【図５】 第５Ａ図〜第５Ｃ図は、一連の動画像から一群のＶＤインデックス画像を生成するための概略の手順を表す説明図である。
【図６】 第６Ａ図〜第６Ｃ図は、ある一区間の動画像から１枚のＶＤインデックス画像を生成するための手順を表す説明図である。
【図７】 第７図は、ウェブサーバ、端末装置、動画像サーバおよびデータベースサーバにおける一連の動画像検索配信動作をそれぞれに区分して表す説明図である。
【図８】 第８図は、第７図に続く説明図である。
【図９】 第９図は、選択されたＶＤインデックス画像に対応してインデックス代表静止画像が表示される様子を表す説明図である。

Claims (10)

1. 動画像を構成するように時系列的に並べられた複数の静止画像の一部分ずつを組み合わせて動画像の内容を縮約した形で表した静止画像としての索引画像を複数保持する索引画像保持手段と、
   前記索引画像保持手段に保持された各索引画像ごとに、索引画像の内容に係わる索引内容情報を保持する索引内容情報保持手段と、
   前記索引画像保持手段に保持された複数の索引画像を表示するための第１の表示領域と、前記索引内容情報保持手段に保持された索引内容情報を表示するための第２の表示領域とを有する表示手段と、
   前記第１の表示領域に表示された複数の索引画像の中から、いずれかを選択するための選択手段と、
   前記表示手段における表示動作を制御し、前記選択手段により選択された索引画像に係わる索引内容情報を前記索引内容情報保持手段から読み出して、前記第２の表示領域に表示する機能を有する制御手段と
   を備え、
   前記索引内容情報保持手段は、前記索引内容情報として、対応する索引画像の生成に用いられた少なくとも１つの静止画像で構成されたインデックス代表静止画像を表すデータと、対応する索引画像の元となった動画像を表すデータとを少なくとも保持し、
   前記表示手段は、前記第２の表示領域として、前記索引内容情報に含まれる前記インデックス代表静止画像を表示する静止画像表示領域と、前記索引内容情報に含まれる前記動画像を表示する動画像表示領域とを有し、
   前記制御手段は、前記選択手段による第１の操作により索引画像が選択された場合には、前記第２の表示領域の前記静止画像表示領域に前記索引内容情報として、選択された索引画像に対応するインデックス代表静止画像を表示させ、前記選択手段による第２の操作により索引画像が選択された場合には、前記第２の表示領域の前記動画像表示領域に前記索引内容情報として、選択された索引画像に対応する動画像を表示させる制御を行う
   ようになされている画像表示装置。
2. 前記選択手段としてマウスを含み、
   前記選択手段による前記第１の操作は、前記第１の表示領域に表示された索引画像の上にマウスのポインタを移動させる操作であり、前記第２の操作は、前記第１の表示領域に表示された索引画像の上にマウスのポインタを移動させ、かつポインタをクリックする操作である請求項１記載の画像表示装置。
3. 前記インデックス代表静止画像は、前記索引画像の生成に用いられた時間的に異なる位置にある２枚以上の静止画像で構成されたものであり、
   前記制御手段は、前記選択手段による第１の操作により索引画像が選択された場合には、前記第２の表示領域の前記静止画像表示領域に前記索引内容情報として、選択された索引画像に対応する前記２枚以上の静止画像からなるインデックス代表静止画像を表示させる制御を行う請求項１記載の画像表示装置。
4. 前記制御手段は、前記選択手段による前記第２の操作により索引画像が選択された場合には、選択された索引画像に対応する部分から動画像の再生表示を開始させるように前記表示手段を制御する請求項１記載の画像表示装置。
5. 前記索引内容情報保持手段は、前記索引内容情報として、対応する索引画像に関連する索引関連情報をさらに保持し、
   前記制御手段は、前記選択手段による前記第１または第２の操作により索引画像が選択された場合には、選択された索引画像の近傍に、前記索引内容情報としてさらに、前記索引関連情報を表示させる制御を行うようになされている請求項１記載の画像表示装置。
6. 動画像を構成するように時系列的に並べられた複数の静止画像の一部分ずつを組み合わせて動画像の内容を縮約した形で表した静止画像としての索引画像を、索引画像保持手段が複数保持するステップと、
   前記索引画像保持手段に保持された各索引画像ごとに、索引画像の内容に係わる索引内容情報を、索引内容情報保持手段が保持するステップと、
   前記索引画像保持手段に保持された複数の索引画像を、表示手段が第１の表示領域に表示するステップと、
   前記索引内容情報保持手段に保持された索引内容情報を、前記表示手段が第２の表示領域に表示するステップと、
   前記第１の表示領域に表示された複数の索引画像の中から、いずれかを選択手段が選択するステップと、
   前記表示手段における表示動作を制御手段が制御し、前記選択手段により選択された索引画像に係わる索引内容情報を前記索引内容情報保持手段から読み出して、前記第２の表示領域に表示させるステップと、
   を含み、
   前記索引内容情報保持手段によって、前記索引内容情報として、対応する索引画像の生成に用いられた少なくとも１つの静止画像で構成されたインデックス代表静止画像を表すデータと、対応する索引画像の元となった動画像を表すデータとを少なくとも保持し、
   前記制御手段による制御に基づいて前記表示手段が、前記第２の表示領域において、前記索引内容情報に含まれる前記インデックス代表静止画像を静止画像表示領域に表示すると共に、前記索引内容情報に含まれる前記動画像を動画像表示領域に表示し、
   前記選択手段による第１の操作により索引画像が選択された場合には、前記第２の表示領域の前記静止画像表示領域に前記索引内容情報として、選択された索引画像に対応するインデックス代表静止画像を表示させ、前記選択手段による第２の操作により索引画像が選択された場合には、前記第２の表示領域の前記動画像表示領域に前記索引内容情報として、選択された索引画像に対応する動画像を表示させる制御を、前記制御手段が行う
   ことを特徴とする画像表示方法。
7. 前記選択手段としてマウスを含み、
   前記選択手段による前記第１の操作は、前記第１の表示領域に表示された索引画像の上にマウスのポインタを移動させる操作であり、前記第２の操作は、前記第１の表示領域に表示された索引画像の上にマウスのポインタを移動させ、かつポインタをクリックする操作である請求項６記載の画像表示方法。
8. 前記インデックス代表静止画像は、前記索引画像の生成に用いられた時間的に異なる位置にある２枚以上の静止画像で構成されたものであり、
   前記制御手段は、前記選択手段による第１の操作により索引画像が選択された場合には、前記第２の表示領域の前記静止画像表示領域に前記索引内容情報として、選択された索引画像に対応する前記２枚以上の静止画像からなるインデックス代表静止画像を表示させる制御を行う請求項６記載の画像表示方法。
9. 前記制御手段は、前記選択手段による前記第２の操作により索引画像が選択された場合には、選択された索引画像に対応する部分から動画像の再生表示を開始させるように前記表示手段を制御する請求項６記載の画像表示方法。
10. 前記索引内容情報保持手段は、前記索引内容情報として、対応する索引画像に関連する索引関連情報をさらに保持し、
    前記制御手段は、前記選択手段による前記第１または第２の操作により索引画像が選択された場合には、選択された索引画像の近傍に、前記索引内容情報としてさらに、前記索引関連情報を表示させる制御を行う請求項６記載の画像表示方法。

Images