JP4938384B2 - 動画像データ配信システム、動画像データ提供方法、動画像データ配信プログラム、動画像データ提供プログラム及びそれらのプログラムを記録したコンピュータ読み取り可能な記録媒体 - Google Patents

Description

本発明は、動画像配信サーバとその動画像配信サーバから配信される動画像データを受信する端末とで構成される動画像データ配信システムと、動画像データ提供方法と、その動画像データ提供方法の実現に用いられる動画像データ提供プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体とに関する。

動画像データをネットワークを介して配信する技術・サービスが現在活発に行なわれている。

動画像のほか、動画像中のシーン情報を静止画像で表示し、その内容を説明するテキスト文をＷｅｂ配信サービスとして提供するインターネットポータルサイトが存在する（例えば、非特許文献１参照）。

このインターネットポータルサイトでは、Ｗｅｂ配信ページの各ページに静止画像やテキストデータが表示され、動画像を視聴したい場合には、動画像のストリーミング配信用のリンクボタンを選択することなどにより、動画像を視聴することが可能である。

また、従来技術では、動画像を視聴する端末においては、静止画像とテキストデータとを表示する場合、通常、１画面上で１つの動画像コンテンツに関する全ての静止画像とテキストデータとを一覧表示するスタイルがとられている。

なお、下記に示す非特許文献２〜４には、本発明で利用可能となる技術が記載されている。
ｇｏｏ〔平成18年８月２日検索）、インターネット＜ＵＲＬ：http://www.goo.ne.jp＞ 日高浩太, 町口恵美, 竹内順二, 水野理, 中嶌信弥, "音声の感性情報に着目したマルチメディアコンテンツ要約技術, "インタラクション 2003, pp.17-24, Feb.2003. H.Kuwano, Y.Taniguchi, H.Arai, M.Mori, S.Kurakake, and H.Kojima, "Telop-on-demand: Video structuring and retrieval based on text recognition," Proc.ICME2000, pp.759-762, 2000. K.Ohtsuki, T.Matsuoka, S.Matsunaga, and S.Furui, "Topic Extraction Based on Continuous Speech Recognition in Broadcast-News Speech," Proceedings of IEEE Workshop on Automatic Speech Recognition and Understanding. pp.527-534, 1997.

前述のインターネットポータルサイトなどでの動画像配信サービスでは、動画像を視聴しようとした場合、サーバと視聴端末との間のネットワークに動画像データを転送するのに十分な帯域が存在することが必要である。

しかしながら、特に、モバイル環境での携帯端末と配信サーバとの間では十分な帯域がとれず、これから、動画像のストリーミング配信を行なっても、途中で途切れたりするなど、動画像視聴のユーザビリティに問題のあるケースがある。

これについては、動画像のエンコードレートを下げたりすることが対策として考えられるが、このような方法を用いると、動画像の品質が悪くなり、やはり視聴サービスとしての使い勝手は悪くなる。

更には、携帯端末上の画面など、比較的画面サイズが小さい場合には、１画面上で１つの動画像コンテンツに関する全ての静止画像とテキストデータとを一覧表示することは困難であり、静止画像とテキストデータの分量を少なくせざるおえなくなり、そのため、利用者の動画像内容の理解度が低くなってしまうという問題がある。

本発明は、これらの問題を解決するものであり、動画像を配信するサーバと動画像を受信し表示する端末との間のネットワーク帯域が動画像を配信するのに十分でない場合でも、端末利用者が動画像内容を理解するうえで十分な情報を送信でき、かつ、画面の小さい端末上でも、動画像の重要なポイントや内容などを十分に理解できるようにする新たな動画像配信技術の提供を目的とする。

〔１〕本発明の第１の構成
前述の目的を解決するために、本発明の動画像データ配信システムは、動画像データ配信サーバと、動画像データ配信サーバにネットワークを介して接続されて、動画像データ配信サーバから配信されてくる動画像データを受信してディスプレイに表示する端末とで構成されるときに、
動画像データ配信サーバが、（１）端末に対して、動画像データを配信するとともに、その動画像データの配信とともに、動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを配信する配信手段を備え、
端末が、（２）動画像データ配信サーバから配信されてくる動画像データを受信するとともに、動画像データとともに配信されてくる、動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する受信手段と、（３）受信手段による動画像データの受信に入る前やその受信中に、動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する検出手段と、（４）検出手段が動画像データの受信が不可能となる帯域にあることを検出した場合に、動画像データに代えて、受信手段の受信した非動画像データをディスプレイに表示する表示手段とを備える
ように構成する。

この構成を採るときに、端末は、動画像データ配信サーバに対して、動画像データに代えて配信することになる非動画像データの種類について指示する指示手段を備えることがあり、この指示手段を備える構成を採る場合には、動画像データ配信サーバは、指示手段の指示する情報を取得する取得手段を備えるとともに、配信手段は、取得手段の取得した情報の指示する種類の非動画像データを端末に配信するように処理することになる。

また、この構成を採るときに、端末は、受信手段の受信した複数の非動画像データの中からディスプレイへの表示対象となる非動画像データを選択する選択手段を備えることがあり、この選択手段を備える構成を採る場合には、表示手段は、非動画像データを表示するときに、選択手段の選択した非動画像データを表示するように処理することになる。

ここで、動画像データ配信サーバの備える各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。

また、端末の備える各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。

このように構成される本発明の第１の構成では、動画像データ配信サーバは、端末に対して、動画像データを配信するとともに、その配信に合わせて、動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データやテキストデータやそれらの組み合わせデータを端末に配信する。

この配信を受けて、端末は、これらのデータを受信して、受信した動画像データをディスプレイに表示し、例えばその表示中に、動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあることを検出すると、動画像データに代えて、受信した静止画像データやテキストデータやそれらの組み合わせデータをディスプレイに表示する。

〔２〕本発明の第２の構成
前述の目的を解決するために、本発明の動画像データ配信システムは、動画像データ配信サーバと、動画像データ配信サーバにネットワークを介して接続されて、動画像データ配信サーバから配信されてくる動画像データを受信してディスプレイに表示する端末とで構成されるときに、
動画像データ配信サーバが、（１）動画像データの配信を行う前に、端末に対して、動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを配信する配信手段を備え、
端末が、（２）動画像データの配信が行われる前に、動画像データ配信サーバから配信されてくる、動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する受信手段と、（３）受信手段による動画像データの受信に入る前やその受信中に、動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する検出手段と、（４）検出手段が動画像データの受信が不可能となる帯域にあることを検出した場合に、動画像データに代えて、受信手段の受信した非動画像データをディスプレイに表示する表示手段とを備える
ように構成する。

この構成を採るときに、端末は、動画像データ配信サーバに対して、動画像データに代えて配信することになる非動画像データの種類について指示する指示手段を備えることがあり、この指示手段を備える構成を採る場合には、動画像データ配信サーバは、指示手段の指示する情報を取得する取得手段を備えるとともに、配信手段は、取得手段の取得した情報の指示する種類の非動画像データを端末に配信するように処理することになる。

また、この構成を採るときに、端末は、受信手段の受信した複数の非動画像データの中からディスプレイへの表示対象となる非動画像データを選択する選択手段を備えることがあり、この選択手段を備える構成を採る場合には、表示手段は、非動画像データを表示するときに、選択手段の選択した非動画像データを表示するように処理することになる。

ここで、動画像データ配信サーバの備える各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。

また、端末の備える各処理手段はコンピュータプログラムでも実現できるものであり、このコンピュータプログラムは、適当なコンピュータ読み取り可能な記録媒体に記録して提供されたり、ネットワークを介して提供され、本発明を実施する際にインストールされてＣＰＵなどの制御手段上で動作することにより本発明を実現することになる。

このように構成される本発明の第２の構成では、動画像データ配信サーバは、動画像データの配信を行う前に、端末に対して、動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データやテキストデータやそれらの組み合わせデータを端末に配信する。

この配信を受けて、端末は、動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データやテキストデータやそれらの組み合わせデータを受信してから、動画像データの受信に入って、受信した動画像データをディスプレイに表示し、例えばその表示中に、動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあることを検出すると、動画像データに代えて、受信した静止画像データやテキストデータやそれらの組合データをディスプレイに表示する。

本発明によれば、動画像中の重要なポイントとなるシーンの情報を、静止画像データやテキストデータやそれらの組み合わせデータという動画像データに比べて少量のデータ容量で済む形式でサーバ上に蓄積して、動画像データの配信時または事前に端末に配信し、端末では、ネットワーク帯域に合わせて、それらのコンテンツを選択してディスプレイに表示することができるようになる。

例えば、野球映像中のファインプレイシーン、ヒットシーン、得点シーン、ホームランシーンといった動画像中の重要なポイントとなるシーンの情報を、静止画像データやテキストデータやそれらの組み合わせデータという動画像データに比べて少量のデータ容量で済む形式でサーバ上に蓄積して、動画像データの配信時または事前に端末に配信し、端末では、ネットワーク帯域に合わせて、それらのコンテンツを選択してディスプレイに表示するので、端末利用者にとって最適なコンテンツを視聴することができるようになる。

具体的には、サーバと端末との間のネットワーク帯域が動画像データをストリーミング配信するのに十分でない帯域であった場合に、従来であれば、途切れ途切れの動画像再生が実施されるケースとなるが、本発明では、例えば、動画像中の重要なポイントとなるシーンの情報について記述する静止画像データとテキストデータとの組合せデータを動画像データとともに端末に配信したり、そのような組合せデータを動画像データに先立って端末に対してまとめて一括ダウンロードすることにより、そのような組合せデータを動画像データに代えて表示することができるようにする。

このような動画像中の重要なポイントとなるシーンの情報について記述する静止画像データやテキストデータやそれらの組合せデータは、元の動画像中の重要なシーンについて説明するデータであることから、端末利用者は動画像をストリーミング視聴するのではなく、このようなデータのみでも十分に動画像の内容を理解することが可能である。

また、サーバから、動画像データの他に、例えば、テキストデータと、静止画像データとテキストデータとの組合せデータとが配信されてくる場合にあって、利用者は、ネットワーク帯域が十分でない場合には、利用端末上でテキストデータか、あるいは、静止画像データとテキストデータとの組合せデータのどちらかを視聴することが可能になる。

この場合、端末は、テキストデータのみの一覧表示と、静止画像データとテキストデータとの組合せデータによるシーン情報表示という２つの表示モードを利用者の指示内容に合わせて切り替えながら表示することができるようにすることから、利用者は時間がないときはテキストデータだけを参照し、時間が少しあるときは静止画像データとテキストデータとの組合せデータを視聴するといったように、利用状況に応じた動画像内容の効率的な視聴が可能となる。

このようにして、本発明によれば、動画像データを配信するサーバとその動画像データを受信し表示する端末との間のネットワーク帯域が動画像データを配信するのに十分でない場合でも、端末利用者は快適に動画像の視聴を行なうことができるようになる。

以下、実施の形態に従って本発明を詳細に説明する。

図１に、本発明を具備する動画像データ配信システムのシステム構成を図示する。

この図に示すように、本発明を具備する動画像データ配信システムは、本発明を実現すべく構成される動画像データ配信サーバ１と、本発明を実現すべく構成される動画像データ表示端末２とが通信ネットワーク３を介して接続されることで構成される。

この動画像データ配信サーバ１は、動画像データ表示端末２からの動画像データの視聴リクエストに応答して、動画像データ表示端末２に対して、視聴要求の動画像データを配信し、さらに、通信ネットワーク３の帯域が動画像データを配信するのに十分でないことが発生することに対処するために、動画像データ表示端末２に対して、視聴要求の動画像データから抽出した動画像中の重要なシーンについて説明する動画像シーン情報を配信する。

このとき配信する動画像シーン情報は、視聴要求の動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データで構成されることもあるし、図２に示すように、視聴要求の動画像データから抽出した動画像中の重要なシーンについて説明するテキストデータで構成されることもあるし、図３に示すように、視聴要求の動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データとその静止画像データに関連するテキストデータとの組合せデータで構成されることもある。

ここで、図２に示す動画像シーン情報は、動画像中の重要なシーンについて説明するテキストデータだけを一覧表示するという表示方法である。このような動画像シーン情報を表示するようにすると、端末利用者は、この表示内容を閲覧するだけで短時間に動画像内容全体のポイントだけを把握することが可能となり、視聴時間があまりないときに便利である。

また、図３に示す動画像シーン情報は、テキストデータに加え、テキスト内容に対応するシーンの静止画像を合わせて表示し、かつ、１画面に１シーン分の表示を行い、画面を切り替えることで、シーンをパラパラ漫画のように閲覧できるようにするという表示方法である。このような動画像シーン情報を表示するようにすると、端末利用者は、この表示内容を閲覧するだけで短時間に動画像内容全体のポイントだけを把握することが可能となり、しかも、ボタンクリック等の画面切り替えのための簡単な操作をするだけで、動画像内容全体のポイントを把握することが可能となるので、端末の画面が小さいときに便利である。

図４に、動画像データ配信サーバ１の装置構成を図示する。

この図に示すように、動画像データ配信サーバ１は、配信対象となる動画像データを格納する動画像データデータベース１０と、動画像シーン情報入力部１１と、動画像シーン情報データベース１２と、動画像シーン情報管理部１３と、動画像配信部１４とを備える。

この動画像シーン情報入力部１１は、動画像データデータベース１０から動画像データを入力し、予め決められた方法で、その動画像データから動画像中の重要なシーンについて説明する静止画像データ、テキストデータを抽出して、コンピュータ上のメモリに記憶する処理部であり、コンピュータ上のメモリ上に展開されるソフトウェアプログラムとして実現可能である。

また、動画像シーン情報データベース１２は、動画像シーン情報入力部１１の入力した動画像データと、動画像シーン情報入力部１１の抽出した静止画像データ、テキストデータとを蓄積、管理、検索するものであり、例えば、市販のＯｒａｃｌｅ等のデータベースシステムを利用することで実現可能である。

また、動画像シーン情報管理部１３は、動画像シーン情報データベース１２を管理するものであり、コンピュータ上のメモリ上に展開されるソフトウェアプログラムとして実現可能である。

また、動画像配信部１４は、動画像シーン情報管理部１３から出力される動画像データ、静止画像データ、テキストデータを、動画像データ表示端末２との間のネットワークの帯域状況などに応じて、予め決められた方法で動画像データ、静止画像データ、テキストデータのうちのいずれか一つ、あるいは、全て、あるいは、いずれか２つの組み合わせを動画像データ表示端末２に配信する処理を行なうものであり、コンピュータ上のメモリ上に展開されるソフトウェアプログラムとして実現可能である。

次に、図５ないし７に従って、動画像シーン情報入力部１１が実行する動画像データから動画像中の重要なシーンについて説明する静止画像データ、テキストデータを自動抽出（自動作成）するときの処理について説明する。

図５（ａ)(ｂ）は、動画像中の重要なシーンについて説明する静止画像データを自動的に抽出するときの処理の説明図である。図５（ａ）は、動画像中の音声情報の盛り上がり具合を評価し、一定以上の盛り上がりのあるタイミングで静止画像データを自動抽出する処理を示したものである。これは、例えば、前述した非特許文献２で発表された技術によりコンピュータ上のメモリ上に展開可能なソフトウェアプログラムで実現可能である。また、図５（ｂ）は、動画像中にテロップ文字が表示されるタイミングを重要シーンと定義し、このタイミングで静止画像データを自動抽出する処理のイメージを示したものである。これは、例えば、前述した非特許文献３で発表された技術によりコンピュータ上のメモリ上に展開可能なソフトウェアプログラムで実現可能である。

図６は、動画像中の重要なシーンの内容について説明するテキストデータを自動的に抽出するときの処理の説明図であり、動画像中の音声情報を自動認識し、その結果のテキストデータを重要なシーンの内容について説明するテキストデータとして抽出することを示したものである。これは、例えば、前述した非特許文献４で発表された技術によりコンピュータ上のメモリ上に展開可能なソフトウェアプログラムで実現可能である。

図７は、動画像中から抽出した重要なシーンについての静止画像データとテキストデータとを対応付ける処理を自動的に行うときの処理の説明図であり、静止画像データとテキストデータとを個別に抽出し、それぞれの時間的に近いもの同士をペアとして対応付けることを示したものである。これは、コンピュータ上のメモリ上に展開可能なソフトウェアプログラムで実現可能である。

図８及び図９に、本発明とは異なる関連技術の構成の一実施形態例を図示する。

次に、この図８及び図９に従って、本発明の関連技術の構成について詳細に説明する。

図８に示す実施形態例に従う場合、動画像データ配信サーバ１は、動画像データ配信部１４０及び動画像シーン情報配信部１４１を具備する動画像配信部１４と、動画像データ表示端末２から送信されてくる視聴リクエストを受信して、どのような視聴要求が発行されたのかを解析する視聴リクエスト受信部１５と、通信ネットワーク３の帯域状態を判断する帯域状態判断部１６とを備える。

ここで、帯域状態判断部１６は、例えば、動画像データの配信に入る前に、動画像データ表示端末２に対して、動画像データの配信に要する帯域と同じ帯域を使って規定個数のパケットを送信して、動画像データ表示端末２からパケットの受信個数の情報を返信してもらうことで通信ネットワーク３の帯域状態を判断したり、動画像データの配信中に、動画像データ表示端末２から通信ネットワーク３の帯域状態の検出情報を通知してもらうことで通信ネットワーク３の帯域状態を判断する処理を行う。

一方、動画像データ表示端末２は、動画像データ配信サーバ１に対して視聴リクエストを送信する視聴リクエスト送信部２０と、動画像データ配信サーバ１から配信されてくる動画像データや動画像シーン情報を受信する配信データ受信部２１と、動画像データ表示部２２０及び動画像シーン情報表示部２２１を具備する動画像表示部２２と、ディスプレイ２３とを備える。

このように構成される図８の実施形態例では、図９の処理フローに示すように、動画像データ配信サーバ１は、動画像データの配信処理前は「リクエスト待ち状態」にある。

この「リクエスト待ち状態」にあるときに、動画像データ表示端末２から視聴リクエストの情報が送られてくると、動画像データ配信サーバ１は、それを受信して解析することで、どのような視聴要求であるのかを把握する。

視聴リクエストでは、動画像を識別するＩＤと視聴方法を識別するＩＤとが指定されている。ここで、視聴方法とは、動画像を動画像として視聴することができない場合に、静止画像データとテキストデータとの組み合わせデータとして視聴するのか、テキストデータだけを閲覧するのか、静止画像データだけを閲覧するのかという各種の視聴方法を指すものである。

これから、動画像データ配信サーバ１は、視聴リクエストを受信すると、その視聴リクエストで指定される動画像ＩＤ及び視聴方法ＩＤを抽出することで、動画像データ表示端末２に対して、どの動画像を提供するのかという情報を得るとともに、動画像を動画像として視聴することができない場合に、どの動画像シーン情報を提供するのかという情報を得るのである。

続いて、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値かどうかを判断する。

この判断処理に従って、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値であることを判断するときには、動画像データ配信サーバ１は、動画像データ表示端末２に対して、視聴リクエストで指定された動画像データを配信し、これを受けて、動画像データ表示端末２は、動画像データ配信サーバ１から配信されてくる動画像データを受信してディスプレイ２３に表示する。

一方、この判断処理に従って、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときには、動画像データ配信サーバ１は、動画像データ表示端末２に対して、視聴リクエストで指定された視聴方法の指定する動画像シーン情報を配信し、これを受けて、動画像データ表示端末２は、動画像データ配信サーバ１から配信されてくる動画像シーン情報を受信してディスプレイ２３に表示する。

このようにして、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でない場合には、動画像データの配信に代えて、視聴リクエストで指定された視聴方法の指定する動画像シーン情報（静止画像データやテキストデータやその組み合わせデータ）を配信するように処理するのである。

この構成に従って、本関連技術によれば、動画像データ配信サーバ１と動画像データ表示端末２との間のネットワーク帯域が動画像データを配信するのに十分でない場合でも、端末利用者は快適に動画像の視聴を行なうことができるようになる。

ここで、視聴リクエストでは、動画像を動画像として視聴することができない場合に、どのような動画像シーン情報を視聴するのかということを指定するのではなくて、常に動画像シーン情報を視聴するという視聴方法を指定できるようにしてもよい。この場合には、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅を判断することなく、動画像データ表示端末２に対して、その視聴方法で指定される動画像シーン情報を配信するように処理することになる。

また、図８に示す実施形態例では、視聴リクエストで動画像ＩＤ及び視聴方法ＩＤを指定させるようにしたが、動画像ＩＤのみを指定させるようにしてもよい。

この場合には、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときに、動画像データ表示端末２に対して、全ての種類の動画像シーン情報を配信するようにするとともに、図１０に示すように、動画像データ表示端末２の動画像表示部２２が動画像シーン情報選択部２２２を備えるようにして、この動画像シーン情報選択部２２２が動画像データ配信サーバ１から配信されてくる動画像シーン情報の中から端末利用者の希望するものを選択して、それを動画像シーン情報表示部２２１に渡すことで、ディスプレイ２３に表示するように処理することになる。

この構成を用いると、端末利用者は、視聴に費やせる時間やシーン内容に関する興味度合いに応じて動画像シーン情報を選択できるようになる。

図１１及び図１２に、前述した本発明の第１の構成の一実施形態例を図示する。

次に、この図１１及び図１２に従って、前述した本発明の第１の構成について詳細に説明する。

図１１に示す実施形態例に従う場合、動画像データ配信サーバ１は、動画像データ・シーン情報同時配信部１４２を具備する動画像配信部１４と、動画像データ表示端末２から送信されてくる視聴リクエストを受信して、どのような視聴要求が発行されたのかを解析する視聴リクエスト受信部１５とを備える。

一方、動画像データ表示端末２は、動画像データ配信サーバ１に対して視聴リクエストを送信する視聴リクエスト送信部２０と、帯域状態検出部２１０を備えて、動画像データ配信サーバ１から配信されてくる動画像データや動画像シーン情報を受信する配信データ受信部２１と、動画像データ表示部２２０及び動画像シーン情報表示部２２１を具備する動画像表示部２２と、ディスプレイ２３とを備える。

ここで、帯域状態検出部２１０は、例えば、動画像データの配信中に、配信されてきた動画像データのパケットに付与されている通番に欠落がないのか否かを検出することで通信ネットワーク３の帯域状態を判断する処理を行う。

このように構成される図１１の実施形態例では、図１２の処理フローに示すように、動画像データ配信サーバ１は、動画像データの配信処理前は「リクエスト待ち状態」にある。

この「リクエスト待ち状態」にあるときに、動画像データ表示端末２から視聴リクエストの情報が送られてくると、動画像データ配信サーバ１は、それを受信して解析することで、どのような視聴要求であるのかを把握する。

視聴リクエストでは、動画像を識別するＩＤが指定されているとともに、動画像を動画像として視聴することができない場合に、静止画像データとテキストデータとの組み合わせデータとして視聴するのか、テキストデータだけを閲覧するのか、静止画像データだけを閲覧するのかという各種の視聴方法を識別するＩＤが指定されている。

これから、動画像データ配信サーバ１は、視聴リクエストを受信すると、その視聴リクエストで指定される動画像ＩＤ及び視聴方法ＩＤを抽出することで、動画像データ表示端末２に対して、どの動画像を提供するのかという情報を得るとともに、動画像を動画像として視聴することができない場合に、どの動画像シーン情報を提供するのかという情報を得るのである。

続いて、動画像データ配信サーバ１は、動画像データ表示端末２に対して、視聴リクエストで指定された動画像データを配信するとともに、この配信と同時に、視聴リクエストで指定された視聴方法の指定する動画像シーン情報を配信する。

この配信を受けて、動画像データ表示端末２は、動画像データ配信サーバ１から配信されてくる動画像データを受信してディスプレイ２３に表示するとともに、動画像データ配信サーバ１から配信されてくる動画像シーン情報を受信して、図示しない記憶装置に格納する。

この動画像データの表示を行っているときに、動画像データ表示端末２は、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値かどうかを判断する。

この判断処理に従って、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値であることを判断するときには、動画像データ表示端末２は、そのまま、動画像データ配信サーバ１から配信されてくる動画像データを受信してディスプレイ２３に表示する。

一方、この判断処理に従って、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときには、動画像データ表示端末２は、動画像データの表示に代えて、動画像データ配信サーバ１から配信されてくる動画像シーン情報（視聴方法ＩＤで指定した動画像シーン情報）をディスプレイ２３に表示する。

このようにして、動画像データ表示端末２は、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でない場合には、動画像データの表示に代えて、視聴リクエストで指定した視聴方法の指定する動画像シーン情報（静止画像データやテキストデータやその組み合わせデータ）を表示するように処理するのである。

この構成に従って、本発明によれば、動画像データ配信サーバ１と動画像データ表示端末２との間のネットワーク帯域が動画像データを配信するのに十分でない場合でも、端末利用者は快適に動画像の視聴を行なうことができるようになる。

そして、この構成に従って、視聴リクエスト発行時には十分な帯域があったが、少し時間が経過し、動画像データの視聴中に帯域幅が不十分になり、動画像データの再生ができなくなった場合において、その再生できなくなった直後にすぐに続きの静止画像データやテキストデータを閲覧することができるようになる。

これを実現するために、例えば、静止画像データにその静止画像の動画像中における時間情報を記録するようにして、動画像再生できなくなった際の時間情報と対応付けることができるようにすることで、すぐに続きの静止画像データとしてのどの静止画像データを表示すればよいかを判断するといった処理を行うことになる。

ここで、視聴リクエストでは、動画像を動画像として視聴することができない場合に、どのような動画像シーン情報を視聴するのかということを指定するのではなくて、常に動画像シーン情報を視聴するという視聴方法を指定できるようにしてもよい。この場合には、動画像データ配信サーバ１は、動画像データを配信することなく、動画像データ表示端末２に対して、その視聴方法で指定される動画像シーン情報のみを配信するように処理することになる。

また、図１１に示す実施形態例では、視聴リクエストで動画像ＩＤ及び視聴方法ＩＤを指定させるようにしたが、動画像ＩＤのみを指定させるようにしてもよい。

この場合には、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときに、動画像データ表示端末２に対して、全ての種類の動画像シーン情報を配信するようにするとともに、図１３に示すように、動画像データ表示端末２の動画像表示部２２が動画像シーン情報選択部２２２を備えるようにして、この動画像シーン情報選択部２２２が動画像データ配信サーバ１から配信されてくる動画像シーン情報の中から端末利用者の希望するものを選択して、それを動画像シーン情報表示部２２１に渡すことで、ディスプレイ２３に表示するように処理することになる。

この構成を用いると、端末利用者は、視聴に費やせる時間やシーン内容に関する興味度合いに応じて動画像シーン情報を選択できるようになる。

図１４及び図１５に、前述した本発明の第２の構成の一実施形態例を図示する。

次に、この図１４及び図１５に従って、前述した本発明の第２の構成について詳細に説明する。

図１４に示す実施形態例に従う場合、動画像データ配信サーバ１は、動画像データ配信部１４０及び動画像シーン情報一括配信部１４３を具備する動画像配信部１４と、動画像データ表示端末２から送信されてくる視聴リクエストを受信して、どのような視聴要求が発行されたのかを解析する視聴リクエスト受信部１５とを備える。

一方、動画像データ表示端末２は、動画像データ配信サーバ１に対して視聴リクエストを送信する視聴リクエスト送信部２０と、帯域状態検出部２１０を備えて、動画像データ配信サーバ１から配信されてくる動画像データや動画像シーン情報を受信する配信データ受信部２１と、動画像データ表示部２２０及び動画像シーン情報表示部２２１を具備する動画像表示部２２と、ディスプレイ２３とを備える。

ここで、帯域状態検出部２１０は、例えば、動画像データの配信中に、配信されてきた動画像データのパケットに付与されている通番に欠落がないのか否かを検出することで通信ネットワーク３の帯域状態を判断する処理を行う。

このように構成される図１４の実施形態例では、図１５の処理フローに示すように、動画像データ配信サーバ１は、動画像データの配信処理前は「リクエスト待ち状態」にある。

この「リクエスト待ち状態」にあるときに、動画像データ表示端末２から視聴リクエストの情報が送られてくると、動画像データ配信サーバ１は、それを受信して解析することで、どのような視聴要求であるのかを把握する。

視聴リクエストでは、動画像を識別するＩＤが指定されているとともに、動画像を動画像として視聴することができない場合に、静止画像データとテキストデータとの組み合わせデータとして視聴するのか、テキストデータだけを閲覧するのか、静止画像データだけを閲覧するのかという各種の視聴方法を識別するＩＤが指定されている。

これから、動画像データ配信サーバ１は、視聴リクエストを受信すると、その視聴リクエストで指定される動画像ＩＤ及び視聴方法ＩＤを抽出することで、動画像データ表示端末２に対して、どの動画像を提供するのかという情報を得るとともに、動画像を動画像として視聴することができない場合に、どの動画像シーン情報を提供するのかという情報を得るのである。

続いて、動画像データ配信サーバ１は、動画像データ表示端末２に対して、視聴リクエストで指定された視聴方法の指定する動画像シーン情報を一括配信し、その一括配信が終わると、視聴リクエストで指定された動画像データを配信する。

この配信を受けて、動画像データ表示端末２は、動画像データ配信サーバ１から一括配信されてくる動画像シーン情報を受信して、図示しない記憶装置に格納した後、その一括配信に続けて配信されてくる動画像データを受信してディスプレイ２３に表示する。

この動画像データの表示を行っているときに、動画像データ表示端末２は、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値かどうかを判断する。

この判断処理に従って、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値であることを判断するときには、動画像データ表示端末２は、そのまま、動画像データ配信サーバ１から配信されてくる動画像データを受信してディスプレイ２３に表示する。

一方、この判断処理に従って、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときには、動画像データ表示端末２は、動画像データの表示に代えて、動画像データ配信サーバ１から一括配信された動画像シーン情報（視聴方法ＩＤで指定した動画像シーン情報）をディスプレイ２３に表示する。

このようにして、動画像データ表示端末２は、動画像データ配信サーバ１との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でない場合には、動画像データの表示に代えて、視聴リクエストで指定した視聴方法の指定する動画像シーン情報（静止画像データやテキストデータやその組み合わせデータ）を表示するように処理するのである。

この構成に従って、本発明によれば、動画像データ配信サーバ１と動画像データ表示端末２との間のネットワーク帯域が動画像データを配信するのに十分でない場合でも、端末利用者は快適に動画像の視聴を行なうことができるようになる。

そして、この構成に従って、視聴リクエスト発行時には十分な帯域があったが、少し時間が経過し、動画像データの視聴中に帯域幅が不十分になり、動画像データの再生ができなくなった場合において、その再生できなくなった直後にすぐに続きの静止画像データやテキストデータを閲覧することができるようになる。

これを実現するために、例えば、静止画像データにその静止画像の動画像中における時間情報を記録するようにして、動画像再生できなくなった際の時間情報と対応付けることができるようにすることで、すぐに続きの静止画像データとしてのどの静止画像データを表示すればよいかを判断するといった処理を行うことになる。

ここで、視聴リクエストでは、動画像を動画像として視聴することができない場合に、どのような動画像シーン情報を視聴するのかということを指定するのではなくて、常に動画像シーン情報を視聴するという視聴方法を指定できるようにしてもよい。この場合には、動画像データ配信サーバ１は、動画像データを配信することなく、動画像データ表示端末２に対して、その視聴方法で指定される動画像シーン情報のみを一括配信するように処理することになる。

また、図１４に示す実施形態例では、視聴リクエストで動画像ＩＤ及び視聴方法ＩＤを指定させるようにしたが、動画像ＩＤのみを指定させるようにしてもよい。

この場合には、動画像データ配信サーバ１は、動画像データ表示端末２との間の通信ネットワーク３の帯域幅が動画像データを配信するのに適した値でないことを判断するときに、動画像データ表示端末２に対して、全ての種類の動画像シーン情報を一括配信するようにするとともに、図１６に示すように、動画像データ表示端末２の動画像表示部２２が動画像シーン情報選択部２２２を備えるようにして、この動画像シーン情報選択部２２２が動画像データ配信サーバ１から一括配信された動画像シーン情報の中から端末利用者の希望するものを選択して、それを動画像シーン情報表示部２２１に渡すことで、ディスプレイ２３に表示するように処理することになる。

この構成を用いると、端末利用者は、視聴に費やせる時間やシーン内容に関する興味度合いに応じて動画像シーン情報を選択できるようになる。

このようにして、本発明によれば、動画像データを配信するサーバとその動画像データを受信し表示する端末との間のネットワーク帯域が動画像データを配信するのに十分でない場合でも、端末利用者は快適に動画像の視聴を行なうことができるようになる。

本発明の動画像データ配信システムのシステム構成図である。 テキストデータで構成される動画像シーン情報の一例を示す図である。 静止画像データとテキストデータの組み合わせデータで構成される動画像シーン情報の一例を示す図である。 動画像データ配信サーバの装置構成図である。 動画像シーン情報の自動作成処理の説明図である。 動画像シーン情報の自動作成処理の説明図である。 動画像シーン情報の自動作成処理の説明図である。 本発明と異なる関連技術の構成の一実施形態例である。 本発明の関連技術の構成の実行する処理フローの一例である。 本発明の関連技術の構成の他の実施形態例である。 本発明の第１の構成の一実施形態例である。 本発明の第１の構成の実行する処理フローの一例である。 本発明の第１の構成の他の実施形態例である。 本発明の第２の構成の一実施形態例である。 本発明の第２の構成の実行する処理フローの一例である。 本発明の第２の構成の他の実施形態例である。

符号の説明

１ 動画像データ配信サーバ
２ 動画像データ表示端末
３ 通信ネットワーク
１０ 動画像データデータベース
１１ 動画像シーン情報入力部
１２ 動画像シーン情報データベース
１３ 動画像シーン情報管理部
１４ 動画像配信部
１５ 視聴リクエスト受信部
１６ 帯域状態判断部
２０ 視聴リクエスト送信部
２１ 配信データ受信部
２２ 動画像表示部
２３ ディスプレイ

Claims (9)

1. 動画像データ配信サーバと、該動画像データ配信サーバにネットワークを介して接続されて、該動画像データ配信サーバから配信されてくる動画像データを受信してディスプレイに表示する端末とで構成される動画像データ配信システムであって、
   前記動画像データ配信サーバが、
   前記端末に対して、動画像データを配信するとともに、該動画像データの配信とともに、該動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを配信する手段を備え、
   前記端末が、
   前記動画像データ配信サーバから配信されてくる動画像データを受信するとともに、該動画像データとともに配信されてくる、該動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する手段と、
   前記動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する手段と、
   動画像データの受信が不可能となる帯域にあることを検出した場合に、該動画像データに代えて、前記受信した非動画像データをディスプレイに表示する手段とを備えることを、
   特徴とする動画像データ配信システム。
2. 動画像データ配信サーバと、該動画像データ配信サーバにネットワークを介して接続されて、該動画像データ配信サーバから配信されてくる動画像データを受信してディスプレイに表示する端末とで構成される動画像データ配信システムであって、
   前記動画像データ配信サーバが、
   動画像データの配信を行う前に、前記端末に対して、該動画像データから抽出した動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを配信する手段を備え、
   前記端末が、
   動画像データの配信が行われる前に、前記動画像データ配信サーバから配信されてくる、該動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する手段と、
   前記動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する手段と、
   動画像データの受信が不可能となる帯域にあることを検出した場合に、該動画像データに代えて、前記受信した非動画像データをディスプレイに表示する手段とを備えることを、
   特徴とする動画像データ配信システム。
3. 請求項１又は２に記載の動画像データ配信システムにおいて、
   前記動画像データ配信サーバは、前記非動画像データとして、動画像中のシーンを説明するテキストデータに加え、そのテキストデータの内容に対応するシーンの静止画像データを配信し、
   前記端末は、前記非動画像データをディスプレイに表示する際に、１画面に１シーン分のテキストデータと対応する静止画像データを合わせて表示し、１シーンずつ画面を切り替える
   ことを特徴とする動画像データ配信システム。
4. 動画像データ配信サーバからネットワークを介して配信されてくる動画像データを端末が受信してディスプレイに表示するという処理を行う動画像データ提供方法であって、
   前記端末が、前記動画像データ配信サーバから配信されてくる動画像データを受信するとともに、該動画像データとともに配信されてくる、該動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する過程と、
   前記端末が、前記動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する過程と、
   前記端末が、動画像データの受信が不可能となる帯域にあることを検出した場合に、該動画像データに代えて、前記受信した非動画像データをディスプレイに表示する過程とを備えることを、
   特徴とする動画像データ提供方法。
5. 動画像データ配信サーバからネットワークを介して配信されてくる動画像データを端末が受信してディスプレイに表示するという処理を行う動画像データ提供方法であって、
   前記端末が、動画像データの配信が行われる前に、前記動画像データ配信サーバから配信されてくる、該動画像データから抽出された動画像中の重要なシーンについて説明する静止画像データ及び／又はテキストデータで構成される１つ又は複数種類の非動画像データを受信する過程と、
   前記端末が、前記動画像データ配信サーバとの間の帯域が動画像データの受信を不可能とする帯域にあるのか否かを検出する過程と、
   前記端末が、動画像データの受信が不可能となる帯域にあることを検出した場合に、該動画像データに代えて、前記受信した非動画像データをディスプレイに表示する過程とを備えることを、
   特徴とする動画像データ提供方法。
6. 請求項４又は５に記載の動画像データ提供方法において、
   前記動画像データ配信サーバは、前記非動画像データとして、動画像中のシーンを説明するテキストデータに加え、そのテキストデータの内容に対応するシーンの静止画像データを配信し、
   前記端末は、前記非動画像データをディスプレイに表示する際に、１画面に１シーン分のテキストデータと対応する静止画像データを合わせて表示し、１シーンずつ画面を切り替える
   ことを特徴とする動画像データ提供方法。
7. 請求項４、５又は６に記載の動画像データ提供方法において、
   前記端末が、前記動画像データ配信サーバに対して、動画像データに代えて配信することになる非動画像データの種類について指示する過程を備えることを、
   特徴とする動画像データ提供方法。
8. 請求項４から７までのいずれか１項に記載の動画像データ提供方法の実現に用いられる処理をコンピュータに実行させるための動画像データ提供プログラム。
9. 請求項４から７までのいずれか１項に記載の動画像データ提供方法の実現に用いられる処理をコンピュータに実行させるための動画像データ提供プログラムを記録したコンピュータ読み取り可能な記録媒体。

Images