JP2004193766A - 映像配信表示システム、映像配信システム、映像表示システム、および映像配信方法 - Google Patents

Abstract

【課題】複数台のカメラによって撮影された映像を、狭いネットワークの帯域を介してかつ簡単な操作によって視聴者に配信する。
【解決手段】映像配信システム１０に、テレビカメラ１３で撮影される各映像を入力する信号入力部１１１と、入力された各映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像を生成するマルチ映像生成部１１５と、各映像のうちユーザが要求する映像をそのユーザの映像表示システムに送信するデータ送信部１２４と、を設け、映像表示システムに、映像配信システムから映像とマルチ映像とを受信するデータ受信部と、受信したマルチ映像を表示するディスプレイ装置と、マルチ映像の各分割領域に配置される各映像のうち配信を希望する映像を示す要求情報を映像配信システムに送信するユーザコマンド送信部と、受信した映像を表示するディスプレイ装置２２と、を設ける。
【選択図】 図５

Description

【０００１】
【発明の属する技術分野】
本発明は、複数台のビデオカメラで撮影された映像を配信しまたは表示するシステムに関する。
【０００２】
【従来の技術】
従来より、競技場やコンサートホールなどで開催されているスポーツの試合や公演などのイベントの模様を、入場できない人たちのために、その人たちを集めたイベント用のホール、体育館、またはスポーツファンのパブ（いわゆるスポーツパブ）などの会場に設置されている大画面のディスプレイ装置に表示して見せるサービスが行われている。
【０００３】
このディスプレイ装置に表示される映像は、テレビ放送局または番組制作会社などによって編集されたものである。したがって、その映像には、制作ディレクタやイベントの主催者などの意思が反映されることがほとんどである。例えば、一般に、ＸチームとＹチームとが対戦するサッカーの試合においてＸチームがホームチーム（主催チーム）である場合は、Ｘチームが中心となるように編集が行われる。つまり、複数台のカメラ（ビデオカメラ、テレビカメラ）によってＸチームおよびＹチームの両方の様子が同時に撮影されていても、編集の際に、Ｘチームを撮影した映像は多く用いられるが、Ｙチームを撮影した映像はあまり用いられない。
【０００４】
このような編集がなされた映像をＹチームのファンが集まった会場で見せても、Ｙチームのファンから高い満足度を得ることはできない。
そこで、視聴者の好みに応じてディスプレイ装置に表示する映像を選べるようにする技術が提案されている。例えば、下記の特許文献１に記載の発明によると、複数台のカメラで撮影された映像を、それぞれに割り当てられたチャンネルによって視聴者のところへ同時に送信する。そして、視聴者は、受信した映像の中から１つを選択し、その映像をテレビに表示させて見ることができる。特許文献２に記載の発明によると、視聴者は、自分が選択した撮影拠点にあるカメラで撮影された映像を取得し、見ることができる。
【０００５】
【特許文献１】
特開２００２−４４６１７号公報
【０００６】
【特許文献２】
特開２００２−２１８４２９号公報
【０００７】
【発明が解決しようとする課題】
しかし、特許文献１に記載の発明によると、カメラの台数に応じたチャンネル数が必要となるので、カメラが多いほどネットワークの帯域の確保が難しくなり、映像の送信の遅延が生じ、画質が悪くなってしまうなどの不具合が起こりやすくなる。
【０００８】
特許文献２に記載の発明によると、視聴者が指定したカメラの映像のみを受信するので、特許文献１に記載の発明に比べて上記のような不具合は起こりにくい。しかし、指定したカメラが視聴者の所望する映像を撮影しているとは限らない。視聴者の所望する映像か否かは、実際にその映像を確認してみないと分からない。したがって、所望する映像を見つけるのに時間と手間が掛かり、操作が煩わしくなってしまう。
【０００９】
本発明は、このような問題点に鑑み、複数台のカメラによって撮影された映像を、狭いネットワークの帯域を介してかつ簡単な操作によって視聴者に配信することを目的とする。
【００１０】
【課題を解決するための手段】
本発明に係る映像配信表示システムは、複数台のビデオカメラによって撮影された映像を配信する映像配信システムと、前記映像を表示する映像表示システムと、を有する映像配信表示システムであって、前記映像配信システムには、前記各映像を入力する映像入力手段と、入力された前記各映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像を生成するマルチ映像生成手段と、前記各映像のうちユーザが要求する映像を示す要求情報を当該ユーザの前記映像表示システムから取得する要求取得手段と、前記マルチ映像と前記要求情報に示される前記映像とを、当該映像を要求したユーザの前記映像表示システムに送信する送信手段と、が設けられ、前記映像表示システムには、前記映像配信システムから前記映像と前記マルチ映像とを受信する受信手段と、受信した前記マルチ映像を表示する第一の表示手段と、前記要求情報として、前記マルチ映像の各分割領域に配置される前記各映像のうち配信を希望する映像を示す要求情報を映像配信システムに送信する要求手段と、受信した前記映像を表示する第二の表示手段と、が設けられてなる。
【００１１】
好ましくは、前記映像配信システムには、録画映像を記憶する記憶手段が設けられ、前記映像表示システムには、前記記憶手段に記憶されている前記録画映像のうちのいずれかを指定する指定情報を前記映像配信システムに送信する指定手段が設けられ、前記マルチ映像生成手段は、前記マルチ映像として、前記録画映像に割り当てられた分割領域に前記指定情報に示される前記録画映像が配置されてなるマルチ映像を生成し、前記要求手段は、前記要求情報として、前記マルチ映像の分割領域に配置される前記録画映像を示す要求情報を送信することができ、前記送信手段は、前記要求取得手段が前記要求情報として前記録画映像を示す要求情報を取得した場合は、前記映像として当該要求情報に示される前記録画映像を送信する。
【００１２】
または、前記映像表示システムには、前記各ビデオカメラのうちの操作対象であるビデオカメラの動きを指定する操作コマンドを入力するコマンド入力手段と、入力された前記操作コマンドを前記操作対象であるビデオカメラと対応付けて前記映像配信システムに送信するコマンド送信手段と、が設けられ、前記映像配信システムには、前記映像表示システムから前記操作コマンドを受信するコマンド受信手段と、受信した前記操作コマンドに基づいて前記操作対象であるビデオカメラを制御するビデオカメラ制御手段と、が設けられなる。
【００１３】
または、前記映像配信システムには、前記要求情報に示される前記映像または前記録画映像を構成するフレームのうちの一部のフレームをそれぞれ、当該フレームとほぼ同じ時刻における、前記マルチ映像を構成するフレームに置き換える、フレーム置換手段が設けられ、前記送信手段は、置き換えられた前記映像または前記録画映像を送信する。
【００１４】
または、前記映像表示システムには、前記マルチ映像および前記映像として、当該映像を構成するフレームのうちの一部のフレームがそれぞれ当該フレームとほぼ同じ時刻における、当該マルチ映像を構成するフレームに置き換えられてなる、置換映像が受信された場合に、当該置換映像を前記マルチ映像および前記映像に振り分ける振分手段が設けられてなる。
【００１５】
本発明において、各ビデオカメラによって撮影された映像は、例えばアナログの映像信号として映像配信システムに入力される。映像およびマルチ映像は、例えばストリーミングデータとして映像表示システムに送信される。
【００１６】
【発明の実施の形態】
図１は本発明に係る映像配信表示システム１、映像配信システム１０、および視聴システム２の構成の例を示す図、図２は競技場におけるテレビカメラ１３の配置の例を示す図、図３はテレビカメラ１３Ａ〜１３Ｃによって撮影された映像ＰＧＡ〜ＰＧＣの例を示す図、図４は映像配信システム１０の機能的構成の例を示す図、図５は視聴システム２の機能的構成の例を示す図、図６はマルチ映像ＭＧの例を示す図である。
【００１７】
本発明に係る映像配信表示システム１は、図１に示すように、映像配信システム１０、視聴システム２、およびネットワーク３などによって構成される。映像配信システム１０と視聴システム２とは、ネットワーク３を介して互いに接続されている。
【００１８】
ネットワーク３として、インターネット、専用線、公衆回線、またはディジタル放送回線などが用いられる。映像配信システム１０から視聴システム２へのデータ送信の回線（下り回線）とその逆方向の回線（上り回線）とは別々のものであってもよい。例えば、上り回線としてインターネットを用い、下り回線としてディジタル放送回線を用いてもよい。
【００１９】
映像配信システム１０は、映像変換装置１１、配信制御装置１２、および複数台のテレビカメラ１３（１３Ａ、１３Ｂ、…）およびマイクロホン１４（１４Ａ、１４Ｂ、…）などによって構成され、スポーツの試合、自動車レース、競馬、サーカス、コンサート、演劇、または会議など様々なイベントの模様を撮影し、遠隔地にある会場２Ｋに映像および音声を配信するための処理を行う。映像配信システム１０は、例えば、テレビ局または映像制作会社などによって運営される。会場２Ｋとして、例えば、公民館、公共ホール、イベント用のホール、体育館、競技場、またはスポーツパブなどの場所が用いられる。
【００２０】
各会場２Ｋには、視聴システム２が１組ずつ設けられている。視聴システム２は、受信装置２１、１台または複数台の大型のディスプレイ装置２２、ディスプレイ装置２２ａ、および１台または複数台のスピーカ２３などによって構成され、会場２Ｋに訪れた大勢の客に、映像配信システム１０から配信される映像および音声を楽しんでもらうことができる。
【００２１】
各会場２Ｋの運営者（以下、「ユーザ」と記載することがある。）は、映像配信システム１０から配信される映像および音声を編集することができる。これにより、会場２Ｋごとにオリジナリティのある番組を客に提供することができる。以下、競技場で行われているチームＸ対チームＹのサッカーの試合を、映像配信システム１０によって各会場２Ｋの視聴システム２へライブ中継し、各会場２Ｋの客に観戦してもらう場合を例に説明する。
【００２２】
試合の撮影は、例えば図２に示すように、３台のテレビカメラ１３Ａ、１３Ｂ、１３Ｃおよび３台のマイクロホン１４Ａ、１４Ｂ、１４Ｃによって行われる。テレビカメラ１３Ａ、１３Ｂ、１３Ｃは、それぞれ、競技場のスコアボードに向かって中央、右側、および左側に設置されており、図３（ａ）〜（ｃ）に示すような映像ＰＧ（ＰＧＡ〜ＰＧＣ）を得ることができる。これらのテレビカメラ１３は、カメラマンが操作するが、映像変換装置１１によって遠隔操作することもできる。マイクロホン１４とテレビカメラ１３とは、対にして設置する必要はない。例えば、マイクロホン１４Ａを実況者席に設け、マイクロホン１４Ｂ、１４ＣをそれぞれチームＸ、Ｙを担当するリポータに携帯させてもよい。撮影によって得られた映像信号および音声信号は、映像変換装置１１に送信される。
【００２３】
図１に戻って、映像変換装置１１は、テレビ放送局またはテレビ中継車などで用いられる例えば映像卓および音声卓などに相当する装置であり、各テレビカメラ１３および各マイクロホン１４から送信されてくる映像信号および音声信号をディジタル変換し視聴システム２に提供する映像および音声を編集するための装置である。この映像変換装置１１は、ＣＰＵ、ＲＡＭ、および図４に示す信号入力部１１１〜テレビカメラ制御部１１９の機能を実現するためのプログラムおよびデータなどを記憶する磁気記憶装置、ＲＯＭ、および各種回路などによって構成される。
【００２４】
配信制御装置１２は、映像変換装置１１で編集された映像および音声を視聴システム２に配信するための装置である。配信制御装置１２として、ネットワーク３に接続可能なパーソナルコンピュータなどに対してストリーミングによってデータを配信するストリーミングサーバが用いられる。配信制御装置１２の磁気記憶装置にはＯＳ（オペレーティングシステム）および図４に示すユーザコマンド受付部１２１〜課金処理部１２６の機能を実現するためのプログラムおよびデータなどが記憶されている。また、配信制御装置１２は、コンテンツ（映像および音声）などの使用料金を徴収するために、ネットワーク３を介して銀行または信販会社のシステムと接続することができる。
【００２５】
受信装置２１は、配信制御装置１２から配信されるデータを受信し、ディスプレイ装置２２、２２ａおよびスピーカ２３にそれぞれ映像および音声を出力するための処理を行う。つまり、受信装置２１は、セットトップボックスの役割を果たす。受信装置２１には、図５に示す各機能を実現するためのプログラムおよびデータなどがインストールされている。受信装置２１として、例えば、ネットワーク３に接続可能なパーソナルコンピュータまたはワークステーションなどが用いられる。または、パーソナルコンピュータとデコーダ装置とを組み合わせるなどして構成してもよい。
【００２６】
ディスプレイ装置２２として、例えば、プラズマディスプレイ、ＬＣＤプロジェクタ、または高精細超大画面映像システム（いわゆるメガビジョン）などの大型のディスプレイ装置が用いられ、表示面が客によく見えるように配置されている。スピーカ２３は、音声が客によく聞こえるように配置されている。ディスプレイ装置２２ａは、ユーザ（会場２Ｋの運営者）が映像の編集の操作を行う際のテレビモニタとして用いられ、会場２Ｋの編集室などに受信装置２１とともに配置されている。
【００２７】
次に、図４に示す映像変換装置１１、配信制御装置１２、および図５に示す受信装置２１の各機能を、コンテンツの配信のための機能、会場２Ｋごとに番組を制作するための機能、およびユーザ認証およびコンテンツの使用料金などの徴収のための機能の３つに大別して説明する。
【００２８】
〔コンテンツ（映像および音声）の配信のための機能〕
図４において、映像変換装置１１の信号入力部１１１は、テレビカメラ１３（１３Ａ、１３Ｂ、１３Ｃ）から送信されてくる映像信号ＰＳ（ＰＳＡ、ＰＳＢ、ＰＳＣ）およびマイクロホン１４（１４Ａ、１４Ｂ、１４Ｃ）から送信されてくる音声信号ＳＳ（ＳＳＡ、ＳＳＢ、ＳＳＣ）を入力する処理を行う。
【００２９】
信号変換部１１２は、入力された映像信号ＰＳＡ、ＰＳＢ、ＰＳＣおよび音声信号ＳＳＡ、ＳＳＢ、ＳＳＣをディジタル変換することにより、映像情報ＰＩ（ＰＩＡ、ＰＩＢ、ＰＩＣ）および音声情報ＳＩ（ＳＩＡ、ＳＩＢ、ＳＩＣ）を生成する。
【００３０】
映像音声記録部１１８は、変換された映像情報ＰＩおよび音声情報ＳＩを記録することによって、各テレビカメラ１３によって得られた映像を録画し、各マイクロホン１４によって得られた音声を録音しておくことができる。これらの映像情報ＰＩおよび音声情報ＳＩは、試合中に起こった出来事（例えば、得点シーン）などを繰り返して配信するためなどに用いられる。なお、過去に行われた試合、他の競技場で行われている別のチームの試合、および選手の自己紹介などの映像情報ＰＩおよび音声情報ＳＩを記憶しておいてもよい。
【００３１】
マルチ映像生成部１１５は、図６に示すような４つの分割領域５０（５０Ａ、５０Ｂ、５０Ｃ、５０Ｒ）を有するマルチ映像ＭＧを表示（再生）するためのマルチ映像情報ＭＩを生成する。分割領域５０Ａ、５０Ｂ、５０Ｃは、それぞれ、テレビカメラ１３Ａ、１３Ｂ、１３Ｃで撮影された映像ＰＧＡ、ＰＧＢ、ＰＧＣ（図３参照）を表示するための領域である。分割領域５０Ｒは、映像音声記録部１１８に記録されている映像のうち視聴システム２のユーザによって指定されたいずれか１つの映像を表示するための領域である。以下、映像音声記録部１１８に記録（録画）されている再生用の映像を「リプレイ映像」と記載することがある。
【００３２】
なお、マルチ映像ＭＧは、映像ＰＧＡ〜ＰＧＣまたはリプレイ映像のうちのいずれの映像を客に見せるのかを選択する際に、ユーザが参考にするための映像であり、基本的に客には見せない。したがって、マルチ映像ＭＧの画質を多少落としても構わない。例えば、解像度を６４０×４８０ドット程度に落としたり、最大表示色数を２５６色程度に減らしたり、フレーム数（コマ数）を毎秒１〜数コマ程度に減らしたりしても構わない。これにより、マルチ映像情報ＭＩのデータ量を少なくすることができる。
【００３３】
映像音声切替部１１３は、各テレビカメラ１３によって得られた映像および各マイクロホン１４によって得られた音声のうち視聴システム２に送信（配信）するものをそれぞれ選択する処理を行う。すなわち、映像および音声を切り替える処理を行う。詳細は後に説明する。
【００３４】
データ合成部１１６は、必要に応じて、試合のスコア（得点表）、選手の氏名または経歴などを紹介する字幕、または選手の顔写真などを映像またはリプレイ映像に重畳させるための処理を行う。つまり、テレビカメラ１３で撮影された映像に文字データまたは画像データなどを合成する処理を行う。
【００３５】
データ圧縮部１１７は、音声情報ＳＩおよび必要に応じて文字データ（文字情報）などが重畳された映像情報ＰＩを所定のフォーマット（データ形式）のデータに変換し、音声情報、映像情報、および必要な文字情報などを含むマルチメディアデータＭＭ１を生成する。例えば、テレビカメラ１３Ａで撮影された映像の映像情報ＰＩＡおよびマイクロホン１４Ｃで拾われた音声の音声情報ＳＩＡに基づいてＭＰＥＧ−２またはＭＰＥＧ−４などの形式のマルチメディアデータＭＭ１を生成する。同様に、マルチ映像情報ＭＩをＭＰＥＧ−４などの形式のデータに変換し、マルチメディアデータＭＭ２を生成する。
【００３６】
生成されたマルチメディアデータＭＭ１、ＭＭ２は、データ出力部１１４によって配信制御装置１２に出力される。配信制御装置１２のストリーミングデータ変換部１２３は、マルチメディアデータＭＭ１、ＭＭ２をそれぞれストリーミング配信するためのパケット状のデータすなわちストリーミングデータに変換する。変換されたストリーミングデータは、データ送信部１２４によって所定のタイミングで次々と視聴システム２に送信される。配信データ記録部１２２は、マルチメディアデータＭＭ１、ＭＭ２をそれぞれマルチメディアファイルとして送信先の会場２Ｋと対応付けて記録する。
【００３７】
図５において、受信装置２１の番組編集部２８は、データ受信部２８１、ユーザ認証依頼部２８２、ユーザコマンド送信部２８３、および課金問合せ部２８４などによって構成され、主に客に見せる番組を編集するための処理を行う。出力処理部２９は、デコード部２９１、映像分配部２９２、および音声分配部２９３などによって構成され、主に映像および音声を出力するための処理を行う。
【００３８】
配信制御装置１２から送信されてきたストリーミングデータは、データ受信部２８１によって受信され、デコード部２９１によって映像信号および音声信号にデコードされる。
【００３９】
映像分配部２９２は、デコードされた映像信号を所定のディスプレイ装置に分配する。すなわち、ユーザ（会場２Ｋの運営者）が客に見せるために選択した映像ＰＧの映像信号はディスプレイ装置２２に分配し、マルチ映像ＭＧの映像信号はディスプレイ装置２２ａに分配する。音声分配部２９３は、デコードされた音声信号を各スピーカ２３に分配する。これにより、ディスプレイ装置２２には運営者が選択した図３に示すような映像ＰＧが表示され、ディスプレイ装置２２ａには図６に示すようなマルチ映像ＭＧが表示される。スピーカ２３からは、選手の声や競技場にいる観客の声援などが出力される。
【００４０】
〔会場２Ｋごとに番組を制作するための機能〕
ユーザは、図６のマルチ映像ＭＧを参照し、キーボードまたはマウスなどのユーザインタフェース装置２１ｕ（図１参照）を操作することによって、テレビカメラ１３Ａ〜１３Ｃで撮影されたいずれの映像ＰＧ（ＰＧＡ〜ＰＧＣ）またはリプレイ映像を客に見せるかを指定する。また、いずれのマイクロホン１４Ａ〜１４Ｃから得られる音声を客に聴かせるかも指定する。すると、ユーザコマンド送信部２８３は、指定された映像および音声を示す映像指定情報７１を映像配信システム１０の配信制御装置１２に対して送信する。
【００４１】
映像配信システム１０において、図４に示す配信制御装置１２のユーザコマンド受付部１２１は、映像指定情報７１を受け付け、映像指定情報７１に示される映像またはリプレイ映像を指定元の視聴システム２に送信するように映像変換装置１１に対して指令する。
【００４２】
映像変換装置１１の映像音声切替部１１３は、視聴システムに送信する映像および音声の内容を切り替えるための処理を行う。具体的には、ユーザコマンド受付部１２１から指令を受けるごとに、映像指定情報７１に示される映像またはリプレイ映像および音声の含まれるマルチ映像情報ＭＩを生成するようにデータ圧縮部１１７を制御する。
【００４３】
そして、前に説明したように、データ出力部１１４、ストリーミングデータ変換部１２３、およびデータ送信部１２４などの処理によって、指定元の視聴システム２へのストリーミングデータの配信が行われる。
【００４４】
上に述べたように、ユーザは、現在撮影中の映像（ライブ映像）だけでなく、過去の場面や選手紹介などの映像（リプレイ映像）を指定して客に見せることができる。リプレイ映像の提供を受けるための準備として、ユーザは、例えば映像配信システム１０に記録されているリプレイ映像のうち現在行われている試合に関連する映像（例えば、前回のＸチーム対Ｙチームの試合の得点シーン、出場している選手の好プレーのシーン、またはインタビューなどの映像）のリストを予め映像配信システム１０の運営者から取得しておく。
【００４５】
ユーザは、そのリストの中から客に見せたいリプレイ映像をキーボードまたはマウスなどを操作して指定する。すると、図５のユーザコマンド送信部２８３は、そのリプレイ映像を示す映像指定情報７２を配信制御装置１２に対して送信する。映像配信システム１０において、図４に示すユーザコマンド受付部１２１がその映像指定情報７２を受け付けると、マルチ映像生成部１１５は、その映像指定情報７２に示されるリプレイ映像の映像情報ＰＩを映像音声記録部１１８から抽出し、そのリプレイ映像が分割領域５０Ｒに表示されるマルチ映像ＭＧ（図６参照）を再生するためのマルチ映像情報ＭＩを新たに生成する。
【００４６】
生成されたマルチ映像情報ＭＩは視聴システム２に送信され、新たなマルチ映像ＭＧがディスプレイ装置２２ａに表示される。そして、ユーザは、このマルチ映像ＭＧを参照し、タイミングを見計らって（例えば、プレーが中断したときに）リプレイ映像を指定する。すると、そのリプレイ映像を示す映像指定情報７１が映像配信システム１０に送信され、そのリプレイ映像のストリーミング配信が開始される。
【００４７】
また、テレビカメラ１３の操作権を有するユーザは、キーボードまたはマウスなどを操作してテレビカメラ１３を動かし、自分の好きなように試合の撮影を行うことができる。例えば、テレビカメラ１３Ａの操作権を有するユーザは、図６に示すマルチ映像ＭＧのうちの分割領域５０Ａの映像を見ながら、テレビカメラ１３Ａに対してカメラアングルの変更またはズームの調整などのコマンド（命令）を与える。
【００４８】
すると、そのコマンドは、操作対象のテレビカメラ１３と対応付けられた操作コマンド情報７３として、視聴システム２のユーザコマンド送信部２８３から映像配信システム１０へ送信される。そして、テレビカメラ制御部１１９は、その操作コマンド情報７３に従ってテレビカメラ１３を制御する。
【００４９】
〔ユーザ認証およびコンテンツの使用料金などの徴収のための機能〕
ユーザは、映像配信システム１０からコンテンツの配信のサービスなどを受ける前に、自分のユーザＩＤおよびパスワードを入力する。すると、図５のユーザ認証依頼部２８２は、そのユーザによるコンテンツの使用ができるように、配信制御装置１２に対してユーザ認証およびログオンを依頼する。
【００５０】
図４に示す配信制御装置１２のユーザ認証部１２５は、視聴システム２から示されたＩＤおよびパスワードに基づいて、入力を行ったユーザが正規のユーザであるか否かの認証を行う。正規のユーザであることが確認できた場合は、そのユーザのログオンを完了する。そして、そのユーザからの映像配信の要求（映像指定情報７１）などの受付けを開始してもよい旨をユーザコマンド受付部１２１に通知し、そのユーザの視聴システム２に対してストリーミングデータの配信を開始してもよい旨をデータ送信部１２４に通知する。また、テレビカメラ１３の操作権を有するユーザの場合は、その操作権に係るテレビカメラ１３に対するコマンド（操作コマンド情報７３）の受付けを開始してもよい旨をユーザコマンド受付部１２１に通知する。
【００５１】
図５の課金問合せ部２８４は、ユーザが所定のコマンドを入力したときまたは所定の時期（例えば毎月の末日）が来たときに、配信制御装置１２に対してコンテンツの使用料金の問合せを行う。
【００５２】
図４の課金処理部１２６は、各ユーザのコンテンツの使用状況（使用した時間、データ量、または内容など）を記録し、コンテンツの使用料金を算出する。テレビカメラ１３の操作権を有するユーザについては、そのテレビカメラ１３の使用料金も算出する。使用料金は、コンテンツのデータ量またはテレビカメラの使用時間などに応じて算出してもよいし（従量制）、使用状況に関わらず契約期間に応じて算出してもよい（定額制）。そして、各ユーザから使用料金を徴収するための処理を行う。例えば、ユーザが指定する銀行口座またはクレジットカードから料金を引き落とすための処理を行う。
【００５３】
また、課金処理部１２６は、視聴システム２から要求があったときに、その視聴システム２におけるコンテンツなどの使用料金を算出し、算出結果を回答する。なお、視聴システム２から要求の有無に関わらず、所定の時期（例えば毎月の末日）が来たときに、視聴システム２ごとの使用料金を算出し、算出結果を通知するようにしてもよい。
【００５４】
図７は映像変換装置１１における映像に関するデータの流れの例を示す図である。次に、Ｘチームのファンが集まっている会場２ＫＸおよびＹチームのファンが集まっている会場２ＫＹの２ヶ所で試合の観戦が行われている場合を例に、映像変換装置１１における映像に関するデータなどの流れについて説明する。
【００５５】
図７に示すように、テレビカメラ１３Ａ〜１３Ｃによって得られた映像信号ＰＳＡ〜ＰＳＣは、信号入力部１１１によって映像変換装置１１に入力され、信号変換部１１２によって映像情報ＰＩＡ〜ＰＩＣに変換される。図中の「コマＡ１」、「コマＡ２」、…は、映像を構成するフレーム（コマ）を意味している。例えば、毎秒６０コマで撮影された映像の場合は、各コマは１／６０秒ごとの画像を表している。
【００５６】
マルチ映像生成部１１５は、会場２ＫＸ、２ＫＹごとに、図６に示すようなマルチ映像ＭＧを再生するためのマルチ映像情報ＭＩ（ＭＩＸ、ＭＩＹ）を生成する。分割領域５０Ａ〜５０Ｃにはテレビカメラ１３Ａ〜１３Ｃによって撮影された映像が表示されるが、分割領域５０Ｒには会場２ＫＸ、２ＫＹからの要求に応じてそれぞれ異なったリプレイ映像が表示される。例えば、会場２ＫＸ、２ＫＹ用のマルチ映像ＭＧの分割領域５０Ｒには、それぞれ、前回の試合でのＸチームの得点シーンの映像（コマＲ１、Ｒ２、…）およびＹチームの選手のインタビューの映像（コマＳ２、Ｓ２、…）が表示される。
【００５７】
生成されたマルチ映像情報ＭＩＸ、ＭＩＹは、データ合成部１１６によって必要に応じて試合のスコアまたは字幕などが重畳される。そして、データ圧縮部１１７によってＭＰＥＧ−４などのフォーマットに変換され、会場２ＫＸ、２ＫＹへのストリーミング配信のために配信制御装置１２に送られる。
【００５８】
また、会場２ＫＸ、２ＫＹにおいて例えばテレビカメラ１３Ａ、１３Ｂの映像がそれぞれ指定された場合は、映像の映像情報ＰＩＡ、ＰＩＢが、必要に応じて試合のスコアなどが重畳され、ＭＰＥＧ−４などのフォーマットに変換され、マルチ映像情報ＭＩＸ、ＭＩＹとともに配信制御装置１２に送られる。
【００５９】
このように、１つの会場２Ｋごとに２つのストリーミングデータが同時に配信される。つまり、１つの会場２Ｋごとに２チャンネル分の帯域（ネットワーク帯域または配信帯域などと言う場合もある。）があればよい。また、前に述べたようにマルチ映像ＭＧの画質を落とすことによって、マルチ映像ＭＧのストリーミング配信のチャンネルの帯域を狭くし、ネットワークのトラフィックを減らすことができる。
【００６０】
図８は映像配信システム１０および視聴システム２における処理の流れの例を説明するフローチャートである。次に、映像配信システム１０から視聴システム２へコンテンツが提供される際の処理の流れを、図８に示すフローチャートを参照して説明する。
【００６１】
視聴システム２がネットワーク接続を開始し（＃２１）、ユーザ（会場２Ｋの運営者）のユーザＩＤおよびパスワードを送信してユーザ認証を依頼すると（＃２２）、映像配信システム１０はそのユーザＩＤおよびパスワードに基づいてそのユーザが正規のユーザか否かを判別する（＃１１）。正規のユーザである場合は、視聴システム２に対してコマンドの送信の許可を与える（＃１２）。これにより、映像配信システム１０から視聴システム２へのコンテンツの配信サービスが開始され、視聴システム２はコンテンツを受信して試合の模様を客に見せることができる（＃２３）。
【００６２】
映像配信システム１０は、視聴システム２に対して図６に示すようなマルチ映像ＭＧのストリーミング配信を開始する（＃１３）。すると、視聴システム２は、マルチ映像ＭＧの受信およびディスプレイ装置２２ａへの表示を開始する（＃２４）。これにより、ユーザが客に見せる映像を編集するための準備が完了する。
【００６３】
ユーザは、マルチ映像ＭＧを見ながら、客に提供したい映像および音声を選択する。すると、映像配信システム１０に対して映像および音声の切替えの要求がなされ（＃２５）、映像配信システム１０から選択された映像および音声のストリーミング配信が開始される（＃１４）。そして、その映像がディスプレイ装置２２に表示され、音声がスピーカ２３に出力される（＃２６）。さらに、ユーザは、試合が終了するまでの間（＃２７および＃１５でそれぞれＮｏ）、マルチ映像ＭＧを見ながら試合の流れを把握し、適宜、客に見せる映像などの切替えを行う（＃２５、＃２６、＃１４）。
【００６４】
本実施形態によると、複数のカメラによって撮影される映像を、狭いネットワークの帯域を介してかつ簡単な操作によって視聴者に配信することができる。会場の管理者は、高価な編集設備がなくても、会場に集まった客の好みに応じて自由に番組を制作することができる。また、会場に集まった客は、実際に行われているイベントを他の客と一緒に仮想的または擬似的に体験し、臨場感を得ながらそのイベントを楽しむことができる。
【００６５】
図９は２台のディスプレイ装置２２を設置した場合の映像の例を示す図、図１０はメイン画面領域５１Ａおよびサブ画面領域５１Ｂからなる映像の例を示す図、図１１は映像ＰＧＡの一部のフレームをマルチ映像ＭＧのフレームに置き換える例を説明する図である。
【００６６】
視聴システム２を、同時に２つ以上の映像を客に見せることができるように構成してもよい。例えば、図９に示すような特大のメインディスプレイ装置２２Ｂおよびそれより小さいサブディスプレイ装置２２Ｓの２台のディスプレイ装置２２を会場２Ｋに設置してもよい。そして、シュートを打とうとしている選手の映像をメインディスプレイ装置２２Ｂに表示し、相手チームのキーパの映像をサブディスプレイ装置２２Ｓに表示するなど、様々な工夫を凝らして、より臨場感のある映像を客に楽しんでもらうことができる。
【００６７】
この場合は、ユーザは、メインディスプレイ装置２２Ｂおよびサブディスプレイ装置２２Ｓに表示する映像を１つずつ指定する必要がある。映像配信システム１０は、マルチ映像ＭＧおよび指定された２つの映像をそれぞれをストリーミング配信する必要がある。したがって、３チャンネル分の帯域を要する。ただし、マルチ映像ＭＧまたはサブディスプレイ装置２２Ｓに表示する映像の画質を落として、全体のトラフィックを減らすことが可能である。
【００６８】
または、図１０に示すように、１つの映像の中にメイン画面領域５１Ａおよびサブ画面領域５１Ｂの２つの分割領域５１を設け、上述の図９の場合と同様に異なる２台のテレビカメラ１３の映像をそれぞれに表示するようにしてもよい。この場合も、ユーザは、メイン画面領域５１Ａおよびサブ画面領域５１Ｂのそれぞれに表示する映像を指定する必要がある。図４に示すデータ合成部１１６は、メイン画面領域５１Ａおよびサブ画面領域５１Ｂのそれぞれに指定された映像が表示されてなる合成映像を生成する。そして、生成された合成映像は、ストリーミングデータ変換部１２３およびデータ送信部１２４によって、ストリーミングデータに変換され視聴システム２に送信される。または、図９のメインディスプレイ装置２２Ｂに図１０の映像を表示し、３つの映像を同時に見せられるように構成してもよい。
【００６９】
本実施形態では、マルチ映像ＭＧとテレビカメラ１３で撮影された映像とを別々のデータとして配信したが、１つのデータに合成して配信するように構成してもよい。
【００７０】
例えば、図４のデータ圧縮部１１７は、図１１に示すように、テレビカメラ１３Ａで撮影された映像ＰＧＡの一部のフレーム（コマ）を、そのフレームと同時刻またはその前後におけるマルチ映像ＭＧのフレームと置き換える。フレームの置換えは、毎秒６０コマの映像ＰＧの場合は、例えば１０〜６０コマおき程度の間隔で行うようにすればよい。そして、ストリーミングデータ変換部１２３およびデータ送信部１２４によって、置き換えられた映像ＰＧＡをストリーミング配信する。
【００７１】
この場合に、置き換えられた映像ＰＧＡを受信した視聴システム２において、図５の映像分配部２９２は、この映像ＰＧＡからマルチ映像ＭＧを抽出して取り除く。そして、抽出したマルチ映像ＭＧの映像信号をディスプレイ装置２２ａに送り、マルチ映像ＭＧが取り除かれた映像ＰＧＡの映像信号をディスプレイ装置２２に送る。つまり、映像ＰＧＡおよびマルチ映像ＭＧをそれぞれディスプレイ装置２２、２２ａに振り分ける。
【００７２】
本実施形態のテレビカメラ１３およびマイクロホン１４を、従来のテレビ放送の撮影に用いられているテレビカメラおよびマイクロホンと共用してもよい。例えば、サッカーの試合の中継番組がＶＨＦ放送によって各家庭のテレビに配信されているとする。映像変換装置１１および配信制御装置１２の運営者は、そのＶＨＦ放送を行う放送局から、その放送局のテレビカメラによって撮影された映像およびマイクロホンによって拾われた音声の使用権および編集権を取得する。そして、放送局から得た映像および音声を用いて、図８などに示す処理を行う。
【００７３】
これにより、放送局は従来のテレビ放送のための映像および音声を第三者に提供することによって新たな利益を得ることができ、映像変換装置１１などの運営者はテレビカメラ１３の設備費およびカメラマンの人件費などを節約することができる。
【００７４】
この場合の映像変換装置１１などの運営を、例えばインターネットのサービス管理業者（ＩＳＰ、プロバイダ）などが行ってもよい。サービス管理業者は、信頼性の高い、ユーザ認証および課金処理のためのシステムを有しているので、映像配信のためのシステムの構築に際してコストダウンおよびセキュリティの向上を容易に図ることができる。また、一般にサービス管理業者のＷｅｂサイトをポータルサイトとしているインターネットユーザは多いので、サービス管理業者が映像変換装置１１などの運営者になることによって、本実施形態の映像配信のサービスを受ける新たなユーザを容易に集めることができる。また、サービス管理業者が様々なコンテンツを配信することにより、ユーザにとってコンテンツの比較および選択の余地が広がり、利便性が向上する。
【００７５】
または、イベントを開催する事業者自身が、映像配信システム１０の運営を行ってもよい。例えば、人気のあるチーム同士が対戦する試合の場合は、観戦を希望するすべての人を競技場に収容することができないことがある。そこで、試合を開催する事業者は、競技場に入場できなかった観戦希望者を別のイベント用ホールなどに集め、その試合の模様を映像配信システム１０によって撮影し、イベント用ホールに設けられた視聴システム２に中継する。これにより、競技場に入場できなかった観戦希望者は、他のファンと一緒にサポートチームを応援することができ、自宅のテレビで観戦する場合よりも多くの満足感および臨場感を得ることができる。事業者は、競技場へ入場した客だけでなく、入場できなかった客からも、収入を得ることができる。
【００７６】
本実施形態では、テレビカメラ１３で撮影された映像をライブ配信したが、オンデマンド配信するようにしてもよい。例えば、映像配信システム１０は、ユーザから配信開始の依頼を受け付けたときに、録画しておいたテレビカメラ１３Ａ〜１３Ｃの映像ＰＧＡ〜ＰＧＣなどが含まれるマルチ映像ＭＧのストリーミング配信の準備を開始する。そして、ユーザからの指定を受けると、指定されたテレビカメラ１３の映像ＰＧのストリーミング配信を開始する。
【００７７】
視聴システム２を家庭に設置し、個人的に楽しむことも可能である。例えば、家族や友人たちを居間に集め、みんなの好みに合わせて編集したオリジナルの映像を楽しんでもよい。また、試合の模様を個人のオリジナルの映像として編集し保存しておいてもよい。
【００７８】
その他、映像配信表示システム１、映像配信システム１０、映像変換装置１１、配信制御装置１２、視聴システム２の全体または各部の構成、画面の構成および内容、画像および音声のデータのフォーマット、処理内容、処理順序などは、本発明の趣旨に沿って適宜変更することができる。
【００７９】
【発明の効果】
請求項１〜７、１０に記載の発明によると、複数のカメラによって撮影された映像を、狭いネットワークの帯域を介してかつ簡単な操作によって視聴者に配信することができる。
【００８０】
請求項１〜３、８、９の発明によると、視聴者は、複数のカメラによって撮影された映像を、狭いネットワークの帯域を介してかつ簡単な操作によって受信して見ることができる。
【図面の簡単な説明】
【図１】本発明に係る映像配信表示システム、映像配信システム、および視聴システムの構成の例を示す図である。
【図２】競技場におけるテレビカメラの配置の例を示す図である。
【図３】テレビカメラによって撮影された映像の例を示す図である。
【図４】映像配信システムの機能的構成の例を示す図である。
【図５】視聴システムの機能的構成の例を示す図である。
【図６】マルチ映像の例を示す図である。
【図７】映像変換装置における映像に関するデータの流れの例を示す図である。
【図８】映像配信システムおよび視聴システムにおける処理の流れの例を説明するフローチャートである。
【図９】２台のディスプレイ装置を設置した場合の映像の例を示す図である。
【図１０】メイン画面領域およびサブ画面領域からなる映像の例を示す図である。
【図１１】映像の一部のフレームをマルチ映像のフレームに置き換える例を説明する図である。
【符号の説明】
１ 映像配信表示システム
２ 視聴システム（映像表示システム）
１０ 映像配信システム
１３ テレビカメラ（ビデオカメラ）
２１ｕ ユーザインタフェース装置（コマンド入力手段）
２２ ディスプレイ装置（第二の表示手段）
２２ａ ディスプレイ装置（第一の表示手段）
５０Ａ〜５０Ｃ、５０Ｒ（５０） 分割領域
７１ 映像指定情報（要求情報）
７２ 映像指定情報（指定情報）
１１１ 信号入力部（映像入力手段）
１１５ マルチ映像生成部（マルチ映像生成手段）
１１７ データ圧縮部（フレーム置換手段）
１１９ テレビカメラ制御部（ビデオカメラ制御手段）
１２１ ユーザコマンド受付部（要求取得手段、コマンド受信手段）
１２４ データ送信部（送信手段）
２８１ データ受信部（受信手段）
２８３ ユーザコマンド送信部（要求手段、指定手段、コマンド送信手段）
２９２ 映像分配部（振分手段）
ＭＧ マルチ映像
ＰＧＡ〜ＰＧＣ（ＰＧ） 映像
ＰＧＲ、ＰＧＳ（ＰＧ） 映像（録画映像）

Claims (10)

1. 複数台のビデオカメラによって撮影された映像を配信する映像配信システムと、前記映像を表示する映像表示システムと、を有する映像配信表示システムであって、
   前記映像配信システムには、
   前記各映像を入力する映像入力手段と、
   入力された前記各映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像を生成するマルチ映像生成手段と、
   前記各映像のうちユーザが要求する映像を示す要求情報を当該ユーザの前記映像表示システムから取得する要求取得手段と、
   前記マルチ映像と前記要求情報に示される前記映像とを、当該映像を要求したユーザの前記映像表示システムに送信する送信手段と、が設けられ、
   前記映像表示システムには、
   前記映像配信システムから前記映像と前記マルチ映像とを受信する受信手段と、
   受信した前記マルチ映像を表示する第一の表示手段と、
   前記要求情報として、前記マルチ映像の各分割領域に配置される前記各映像のうち配信を希望する映像を示す要求情報を映像配信システムに送信する要求手段と、
   受信した前記映像を表示する第二の表示手段と、が設けられてなる、
   ことを特徴とする映像配信表示システム。
2. 前記映像配信システムには、録画映像を記憶する記憶手段が設けられ、
   前記映像表示システムには、前記記憶手段に記憶されている前記録画映像のうちのいずれかを指定する指定情報を前記映像配信システムに送信する指定手段が設けられ、
   前記マルチ映像生成手段は、前記マルチ映像として、前記録画映像に割り当てられた分割領域に前記指定情報に示される前記録画映像が配置されてなるマルチ映像を生成し、
   前記要求手段は、前記要求情報として、前記マルチ映像の分割領域に配置される前記録画映像を示す要求情報を送信することができ、
   前記送信手段は、前記要求取得手段が前記要求情報として前記録画映像を示す要求情報を取得した場合は、前記映像として当該要求情報に示される前記録画映像を送信する、
   請求項１記載の映像配信表示システム。
3. 前記映像表示システムには、
   前記各ビデオカメラのうちの操作対象であるビデオカメラの動きを指定する操作コマンドを入力するコマンド入力手段と、
   入力された前記操作コマンドを前記操作対象であるビデオカメラと対応付けて前記映像配信システムに送信するコマンド送信手段と、が設けられ、
   前記映像配信システムには、
   前記映像表示システムから前記操作コマンドを受信するコマンド受信手段と、
   受信した前記操作コマンドに基づいて前記操作対象であるビデオカメラを制御するビデオカメラ制御手段と、が設けられた、
   請求項１または請求項２記載の映像配信表示システム。
4. 複数台のビデオカメラによって撮影された映像を入力する映像入力手段と、
   前記各映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像を生成するマルチ映像生成手段と、
   前記各映像のうちユーザが要求する映像を示す要求情報を取得する要求取得手段と、
   前記要求情報に示される前記映像と前記マルチ映像とを、当該映像を要求したユーザの映像表示システムに送信する送信手段と、
   を有してなることを特徴とする映像配信システム。
5. 録画映像を記憶する記憶手段を有し、
   前記マルチ映像生成手段は、前記マルチ映像として、前記録画映像に割り当てられた分割領域にユーザの指定した前記録画映像が配置されてなるマルチ映像を生成し、
   前記送信手段は、前記要求取得手段が前記要求情報として前記録画映像を示す要求情報を取得した場合は、前記映像として当該要求情報に示される前記録画映像を送信する、
   請求項４記載の映像配信システム。
6. 前記各ビデオカメラのうちの操作対象であるビデオカメラの動きを指定する操作コマンドを前記映像表示システムから受信するコマンド受信手段と、
   受信した前記操作コマンドに従って前記操作対象であるビデオカメラを制御するビデオカメラ制御手段と、
   を有してなる、
   請求項４または請求項５記載の映像配信システム。
7. 前記要求情報に示される前記映像または前記録画映像を構成するフレームのうちの一部のフレームをそれぞれ、当該フレームとほぼ同じ時刻における、前記マルチ映像を構成するフレームに置き換える、フレーム置換手段を有し、
   前記送信手段は、置き換えられた前記映像または前記録画映像を送信する、
   請求項４ないし請求項６のいずれかに記載の映像配信システム。
8. 複数台のビデオカメラによって撮影された映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像と前記各映像のうち映像配信システムに対して要求した映像とを受信する受信手段と、
   受信した前記マルチ映像を表示する第一の表示手段と、
   受信した前記映像を表示する第二の表示手段と、
   を有してなることを特徴とする映像表示システム。
9. 前記マルチ映像および前記映像として、当該映像を構成するフレームのうちの一部のフレームがそれぞれ当該フレームとほぼ同じ時刻における、当該マルチ映像を構成するフレームに置き換えられてなる、置換映像が受信された場合に、当該置換映像を前記マルチ映像および前記映像に振り分ける振分手段を有してなる、
   請求項８記載の映像表示システム。
10. 複数台のビデオカメラによって撮影された映像を入力するステップと、
    入力された前記各映像がそれぞれに割り当てられた分割領域に配置されてなるマルチ映像を生成するステップと、
    前記マルチ映像を映像表示システムに送信するステップと、
    前記映像表示システムから前記各映像のうちのいずれかの指定を受け付けるステップと、
    前記指定に係る前記映像を指定元の前記映像表示システムに送信するステップと、
    を有してなることを特徴とする映像の配信方法。

Images