JP2023065068A - 映像切替装置、映像切替装置の制御方法、及びプログラム - Google Patents

Abstract

【課題】移動ショットが連続しない映像を提供することができる映像切替装置を提供する。【解決手段】映像切替装置１０１は、撮像装置１０２～撮像装置１０４の映像を切り替えて時間的に連続する映像を出力映像として提供する。映像切替装置１０１は、撮像装置１０２～撮像装置１０４の中の第１の撮像装置の映像を出力映像として提供するときに、一の撮像装置による撮影が、画角の変化が所定値以上となる移動ショットの撮影である場合、第１の撮像装置の次に切り替える撮像装置を、撮像装置１０２～撮像装置１０４の中の移動ショットの撮影を行わない撮像装置に決定する。【選択図】図５

Description

本発明は、映像切替装置、映像切替装置の制御方法、及びプログラムに関する。

映像にバリエーションや迫力を持たせるために、被写体を異なる向きから撮影可能な複数台のカメラで撮影を行い、それらの映像をつなぎ合わせて映像編集が行われている。しかし、このような撮影方法を行う場合、複数人の撮影スタッフが必要になることから、その改善案として、カメラワークやカメラのスイッチングを制御する技術が提案されている（例えば、特許文献１及び特許文献２を参照）。

国際公開第２０１７／１５４９５３号 国際公開第２０１７／１１９０３４号

しかしながら、近年、複数台のカメラによる撮影は、プロカメラマンのみならずアマチュアも含めて幅広いユーザーにおいて音楽ライブやイベント会場、スポーツ大会等ありとあらゆる場所で行われている。その際に現場の状況や雰囲気に合わせた機動力の高い映像を撮影できるシンプルな撮影システムが望まれている。特に複数のカメラによる映像を編集する上で考慮すべきポイントとして、ズームイン、ズームアウト、パン、チルト等の画角の変化が所定値以上となるショット（以下、「移動ショット」という。）が連続して続かないように、画角の変化が所定値未満となるショット（以下、「固定ショット」という。）を間に挟むことが挙げられる。一般的に移動ショットの映像が続いてしまうと、見ている視聴者が疲れを感じ易いことから、上述したポイントを踏まえて撮影できるシステムが望まれている。

本発明の目的は、移動ショットが連続しない映像を提供することができる映像切替装置、映像切替装置の制御方法、及びプログラムを提供することにある。

上記目的を達成するために、本発明の映像切替装置は、複数の撮像装置の映像を切り替えて時間的に連続する映像を出力映像として提供する映像切替装置であって、前記複数の撮像装置のうち、前記出力映像とする撮像装置を決定する制御手段を有し、前記制御手段は、前記複数の撮像装置の中の第１の撮像装置の映像を前記出力映像として提供するときに、前記第１の撮像装置による撮影が、画角の変化が所定値以上となる移動ショットの撮影である場合、前記第１の撮像装置の次に切り替える撮像装置を、前記複数の撮像装置の中の前記移動ショットの撮影を行わない撮像装置に決定することを特徴とする。

本発明によれば、移動ショットが連続しない映像を提供することができる。

本発明の実施の形態に係る映像切替装置を含む映像配信システムの構成を概略的に示すシステム構成図である。 図１の映像切替装置のハードウェア構成を概略的に示すブロック図である。 図１の撮像装置のハードウェア構成を概略的に示すブロック図である。 図１の映像切替装置によって実行される撮像装置の出力映像の切替制御の第１の例を示す図である。 図１の映像切替装置によって実行される撮像装置の出力映像の切替制御の第２の例を示す図である。 図１の映像切替装置によって実行される撮像装置の出力映像の切替制御の第３の例を示す図である。 図１の映像切替装置によって実行される切替制御処理の手順を示すフローチャートである。 図１の撮像装置によって実行される撮影制御処理の手順を示すフローチャートである。

以下、本発明の実施の形態について図面を参照しながら詳述する。

図１は、本発明の実施の形態に係る映像切替装置１０１を含む映像配信システム１００の構成を概略的に示すシステム構成図である。

図１において、映像配信システム１００は、映像切替装置１０１、撮像装置１０２～撮像装置１０４を備える。なお、本実施の形態では、一例として、３台の撮像装置１０２～撮像装置１０４を備える構成について説明するが、撮像装置の台数はこの台数に限られず、４台以上の撮像装置を備える構成であっても良い。

映像配信システム１００は、被写体を異なる向きから撮影する撮像装置１０２～撮像装置１０４の出力映像を配信するシステムである。映像配信システム１００では、映像切替装置１０１が、撮像装置１０２～撮像装置１０４の何れか、例えば、撮像装置１０２に配信開始指示（配信開始通知）を送信して撮像装置１０２に被写体を撮影させる。撮像装置１０２は、撮影して得られた映像を映像切替装置１０１へ出力し、映像切替装置１０１は、取得した映像を配信する。また、映像切替装置１０１は、撮像装置１０２の出力映像が配信されている最中に、別の撮像装置、例えば、撮像装置１０３に配信開始指示を送信して撮像装置１０３の出力映像を撮像装置１０３から取得する。映像切替装置１０１は、配信映像を撮像装置１０２の出力映像から撮像装置１０３の出力映像に切り替えて時間的に連続する映像を提供する。

映像切替装置１０１は、撮像装置１０２～撮像装置１０４とそれぞれ通信手段によって通信可能である。通信手段は、例えば、Ｗｉ－Ｆｉ通信やＢｌｕｅｔｏｏｔｈ通信等の無線通信、ＵＳＢやＨＤＭＩ（登録商標）接続等による有線通信、インターネット、専用回線、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等である。なお、映像切替装置１０１は、撮像装置１０２～撮像装置１０４とそれぞれ異なる通信手段を用いて通信を行っても良い。

なお、本実施の形態では、映像切替装置１０１が、撮像装置１０２～撮像装置１０４から取得した各映像を配信開始指示を送信した順番に従って繋ぎ合わせる映像編集機能と、繋ぎ合わせた映像をそのままインターネット等を通じてライブ配信を行う配信機能を備える構成について説明するが、これに限られない。例えば、映像切替装置１０１と異なる別の装置が映像編集機能、配信機能を備えていても良い。具体的に、映像配信システム１００が、映像編集機能を備える映像編集装置、及び上記配信機能を備える配信装置を備えていても良い。

図２は、図１の映像切替装置１０１のハードウェア構成を概略的に示すブロック図である。図２において、映像切替装置１０１は、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、補助記憶装置２０４、表示部２０５、操作部２０６、及び通信Ｉ／Ｆ２０７を備える。なお、ＣＰＵはＣｅｎＴｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔの略称である。ＲＯＭはＲｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙの略称である。ＲＡＭはＲａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの略称である。ＣＰＵ２０１は、ＲＯＭ２０２、ＲＡＭ２０３、補助記憶装置２０４、表示部２０５、操作部２０６、及び通信Ｉ／Ｆ２０７とそれぞれ接続されている。

ＣＰＵ２０１は、映像切替装置１０１の各種動作を制御する中央演算装置である。ＲＯＭ２０２は、ＣＰＵ２０１が実行可能な制御プログラムやブートプログラム等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の主記憶メモリであり、ワークエリア又は各種プログラムを展開するための一時記憶領域として用いられる。補助記憶装置２０４は、プログラムや撮像装置１０２～撮像装置１０４からそれぞれ受信したデータ等を記憶する。補助記憶装置２０４は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等の不揮発性メモリである。表示部２０５は液晶モニタ等で構成される。表示部２０５は、ＣＰＵ２０１から受信した制御信号に基づいて、各種設定状態や、映像切替装置１０１が配信開始指示を送信した撮像装置の出力映像等を表示する。操作部２０６は、映像切替装置１０１の電源をＯＮ／ＯＦＦするための電源スイッチ、各種パラメーターを設定するためのボタン（例えば、十字キーボタン、決定ボタン、タッチパネル）等によって構成される。各種パラメーターは、例えば、後述する更新時間Ｔｒ、待機時間Ｔａｃ、ショット判定に用いる閾値である。ユーザが操作部２０６を操作することで設定された各種パラメーターはＲＯＭ２０２や補助記憶装置２０４に記憶される。通信Ｉ／Ｆ２０７は、外部装置との上記通信手段による通信を実現させる。なお、通信Ｉ／Ｆ２０７として適用されるデバイスは、通信経路の種別や適用される通信方式に応じて適宜変更されてもよい。

次に、撮像装置１０２～撮像装置１０４の構成について説明する。なお、本実施の形態では、撮像装置１０２～撮像装置１０４は同様の構成であり、以下では、一例として、撮像装置１０２を用いてその構成を説明する。

図３は、図１の撮像装置１０２のハードウェア構成を概略的に示すブロック図である。図３において、撮像装置１０２は、制御部３０１、ＲＯＭ３０２、ＲＡＭ３０３、記録媒体Ｉ／Ｆ３０４、記録媒体３０５、撮像部３０６、画像処理部３０７、画像圧縮伸長部３０８、表示部３０９、操作部３１０、及び無線通信部３１１を備える。

制御部３０１は、撮像装置１０２のシステム全般を制御するシステム制御部である。制御部３０１は、ＲＯＭ３０２に記録されたプログラムをＲＡＭ３０３に展開し、ＲＡＭ３０３に展開したプログラムを実行することにより、各構成要素を制御する。また、制御部３０１は、記録媒体３０５へデータを記録する制御や表示部３０９に画面を表示させる制御等を行う。ＲＯＭ３０２は、不揮発性の記録媒体であり、制御部３０１が実行するプログラム等を記憶している。

ＲＡＭ３０３は、制御部３０１のワークメモリとして用いられる揮発性の記録媒体である。例えば、ＲＡＭ３０３は、画像圧縮伸長部３０８が画像データに圧縮処理や伸長処理を施す際の一時記憶領域として用いられる。この画像データは、例えば、撮像部３０６で撮像された画像データに対して画像処理部３０７が画像処理を施したデータや、記録媒体３０５から読み出された画像データである。また、ＲＡＭ３０３は、表示部３０９に表示する表示用データを一時的に格納するＶＲＡＭとしても用いられる。更に、ＲＡＭ３０３は、撮像した画像と共に当該画像に関連付けて記録する付加情報を一時的に格納する記憶部としても用いられる。

記録媒体Ｉ／Ｆ３０４は、メモリカード等の着脱可能な記録媒体を挿入可能なスロットを備える。図３では、一例として、着脱可能な構成の記録媒体３０５が記録媒体Ｉ／Ｆ３０４に装着されている状態が示されている。なお、本実施の形態の撮像装置１０２では、記録媒体Ｉ／Ｆ３０４に装着された記録媒体３０５に画像データを記録する構成について説明するが、この構成に限られず、撮像装置１０２に内蔵されたメモリに画像データを記録する構成であってもよい。

撮像部３０６は撮像素子（不図示）を備える。また、撮像部３０６はズームレンズ及びフォーカスレンズを含む撮影レンズ（不図示）を備える。撮像部３０６は、制御部３０１から受信した制御信号に基づいて被写体を撮像し、動画像データとしての画像データを取得する。画像処理部３０７は、撮像部３０６で撮像された画像データに、所定の画素補間処理、リサイズ処理、色変換処理等の画像処理を施す。また、画像処理部３０７は、撮像された画像データを用いて所定の演算処理を行い、制御部３０１は得られた演算結果に基づいて撮像部３０６による撮像に関する制御、例えば、露光制御やオートホワイトバランス制御を行う。画像圧縮伸長部３０８は、画像処理部３０７による画像処理済みの画像データを圧縮する処理や、記録媒体３０５から読み出した画像データを伸長する処理を行う。表示部３０９は、覗き込み形のファインダー内のディスプレイや、バリアングルの液晶モニタ等で構成される。表示部３０９は、制御部３０１から受信した制御信号に基づいて各種設定状態や、撮像部３０６で撮像された画像データ、記録媒体３０５から読み出された画像データ等を表示する。

操作部３１０は、撮像装置１０２の電源をＯＮ／ＯＦＦするための電源スイッチ、撮影開始ボタン、カメラモード（撮影モード）や再生モード等の動作モードを切り替えるモード切替ボタン、タッチパネル等で構成され、ユーザによる操作を受け付ける。なお、タッチパネルは、抵抗膜方式、静電容量方式、表面弾性波方式、赤外線方式、電磁誘導方式、画像認識方式、光センサ方式のいずれの方式のタッチパネルであってもよい。制御部３０１は、タッチパネルに何も触れていない状態であるタッチオフや、タッチパネルに対する所定の操作を検知することができる。タッチパネルに対する所定の操作は、例えば、タッチダウン、タッチオン、ムーブ、及びタッチアップである。タッチダウンは、指やペンがタッチパネルに触れる操作である。タッチオンは、指やペンがタッチパネルに触れ続ける操作である。ムーブは、タッチパネルに触れている指やペンをタッチパネル上で移動させる操作である。タッチアップは、タッチパネルに触れていた指やペンをタッチパネルから離す操作である。本実施の形態では、指やペンがタッチパネルに触れている位置を示す座標情報は、制御部３０１に通知される。制御部３０１は、検知した操作の種別と通知された座標情報とに基づいて、タッチパネルにどのような操作が行なわれたかを判定する。また、ムーブについて、制御部３０１は、座標情報の変化に基づいて、タッチパネル上で移動する指やペンの移動方向を、タッチパネル上の垂直成分、水平成分毎に判定する。

また、制御部３０１は、タッチパネルに対する所定の操作として、フリックを検知することもできる。フリックは、タッチパネル上に指を触れたままある程度の距離だけ素早く動かしてそのまま離す操作であり、言い換えれば、タッチパネル上を指で弾くように素早くなぞる操作である。制御部３０１は、所定の距離以上を所定の速度以上でムーブしたことを検出し、そのままタッチアップを検出するとフリックが行なわれたと判定する。更に、制御部３０１は、タッチパネルに対する所定の操作として、ドラッグを検知することもできる。制御部３０１は、所定の距離以上を所定の速度未満でムーブしたことを検出すると、ドラッグが行なわれたと判定する。

無線通信部３１１は、制御部３０１から受信した制御信号に基づいて、映像切替装置１０１等の外部機器とのデータの送受信を無線通信により行う。例えば、無線通信部３１１は、後述するショット判定に用いられる撮像装置１０２のショット情報（撮影関連情報）を映像切替装置１０１へ送信する。なお、本実施の形態では、撮像装置１０２が無線通信部３１１を備える構成について説明したが、この構成に限られず、撮像装置１０２が無線通信部３１１の代わりに有線通信部を備え、有線通信部によって外部機器とデータの送受信を行ってもよい。

次に、図４～図６を用いて、映像切替装置１０１によって実行される撮像装置の出力映像の切替制御について説明する。図４～図６では、一例として、撮像装置１０２及び撮像装置１０３は三脚等に固定され、撮像装置１０２は被写体を追跡して移動ショットの撮影を行い、撮像装置１０３は被写体を追跡せずに固定ショットの撮影を行うこととする。移動ショットは、画角の変化が所定値以上となるショットであり、例えば、ズームイン、ズームアウト、パン、チルトを行うショットである。固定ショットは、画角の変化が所定値未満となるショットである。また、撮像装置１０４は、カメラマンが手持ち撮影を行う撮像装置として用いられ、カメラマンの意図を反映させた任意のショット、つまり、固定ショット及び移動ショットの何れも撮影可能であることとする。

図４は、図１の映像切替装置１０１によって実行される撮像装置の出力映像の切替制御の第１の例を示す図である。

図４において、まず、映像切替装置１０１は、撮像装置１０２～撮像装置１０４に対してそれぞれ通信開始指示ＣＭ０を送信し、撮像装置１０２～撮像装置１０４とそれぞれ通信接続を開始する。次いで、映像切替装置１０１は、撮像装置１０２～撮像装置１０４に対してそれぞれ配信制御情報を送信する。配信制御情報は、後述する更新時間Ｔｒ、待機時間Ｔａｃ等を含む。次いで、映像切替装置１０１は、撮像装置１０２～撮像装置１０４の何れか、例えば、カメラマンが手持ちで撮影を行う撮像装置１０４に対して配信開始指示ＣＭ１を送信する。配信開始指示ＣＭ１には、撮像装置１０４の出力映像の配信時間、及びショットの推奨種類を示す情報、例えば、固定ショット及び移動ショットの何れかを示す情報が含まれる。なお、配信開始指示ＣＭ１に含まれる配信時間やショットの推奨種類を示す情報は、配信開始指示ＣＭ１の送信時にユーザが指定しても良く、また、予め設定されていても良い。また、配信制御情報は、予め送信するのではなく、配信開始指示に含めて送信するようにしてもよい。このように、配信開始指示により、切替先の撮像装置であることを通知することができる。配信開始指示に、待機時間Ｔａｃを含めることで、配信開始指示により、切替先の撮像装置であることだけでなく、配信が開始されるタイミングも通知することが可能となる。配信開始指示に待機時間Ｔａｃを含めることで、ショットについて個別に待機時間を設定することも可能となる。また、待機時間Ｔａｃを含めた場合に、映像切替装置１０１は、撮像装置に対して、配信が開始されることをさらに通知するようにしてもよい。

撮像装置１０４は、配信開始指示ＣＭ１を受信すると、映像切替装置１０１から取得した配信制御情報に基づいて設定された待機時間Ｔａｃの間、待機状態Ｂ００１となる。なお、待機時間Ｔａｃについて、撮像装置１０２～撮像装置１０４の全てに同じ時間が設定されても良く、撮像装置１０２～撮像装置１０４にそれぞれ異なる時間が設定されても良い。例えば、三脚等に固定された撮像装置の待機時間Ｔａｃを極力短めに設定し、カメラマンが手持ちで撮影を行う撮像装置の待機時間Ｔａｃを撮影の準備時間を確保するために或る程度長めに設定する。また、待機時間Ｔａｃをゼロに設定することも可能である。更に、配信開始指示ＣＭ１に対応する待機状態Ｂ００１の待機時間Ｔａｃのみをゼロに設定することも可能である。

撮像装置１０４が待機状態Ｂ００１の間、撮像装置１０４の表示部には「配信開始待ち状態」といったメッセージが表示される。なお、このメッセージの他に、上記配信開始指示ＣＭ１に含まれる配信時間やショットの推奨種類を示す情報が上記表示部に表示されても良い。これにより、手持ちで撮影を行うカメラマンは、配信のための撮影を開始する前に、配信時間やショットの推奨種類を容易に把握することが可能となる。

待機時間Ｔａｃを経過すると、撮像装置１０４は、カメラマンの指示に従って、撮影を行い（例えば、撮影状態Ｂ００２を参照。）、撮影して得られた映像を映像切替装置１０１へ出力する。この映像は映像切替装置１０１によって配信される。ここでは、例えば、撮像装置１０４が、移動ショットの撮影を行わず、固定ショットの撮影のみを行ったこととする。また、撮像装置１０４は、待機時間Ｔａｃの経過時から更新時間Ｔｒを経過すると、ショット情報を映像切替装置１０１へ送信する。ショット情報は、撮像装置１０４による撮影が移動ショットの撮影及び固定ショットの撮影の何れであるかを判定するショット判定に用いられる情報である。例えば、ショット情報は、ズームレンズの焦点距離の変化量、撮像装置内部のジャイロの変化量、レンズの撮影方向の変化量等を含む。

映像切替装置１０１は、受信したショット情報に基づいて、ショット判定ＣＭ２を行う。本実施の形態では、例えば、ショット情報に含まれる上記変化量が予め設定された閾値以上の値を検知したときに移動ショットの撮影が行われたと判定し、上記変化量が上記閾値未満の値を検知したときに固定ショットの撮影が行われたと判定する判定プログラムが、映像切替装置１０１のＲＯＭ２０２等に予め格納されている。なお、上記閾値について、全ての撮像装置に対して同じ値が設定されていても良く、撮像装置毎に異なる値が設定されていても良い。ショット判定ＣＭ２では、撮像装置１０４による撮影が固定ショットの撮影であると判定される。映像切替装置１０１は、ショット判定ＣＭ２の判定結果に基づいて次の配信開始指示を送信する撮像装置を選択する。具体的に、映像切替装置１０１は、切り替え前後で移動ショットの撮影が連続することがないので、現時点で撮影を行っている撮像装置１０４を除く全ての撮像装置、つまり、撮像装置１０２，１０３の中から次の配信開始指示を送信する撮像装置を選択する。例えば、撮像装置１０２～１０４には、予め優先順が設定されており、映像切替装置１０１は、撮像装置１０２，１０３の中で優先順が最も高い撮像装置１０２を、次の配信開始指示を送信する撮像装置に選択する。若しくは、映像切替装置１０１は、撮像装置１０２，１０３の中からランダムに次の配信開始指示を送信する撮像装置を選択する。映像切替装置１０１は、選択した撮像装置、例えば、撮像装置１０２に配信開始指示ＣＭ３を送信する。

撮像装置１０２は、配信開始指示ＣＭ３を受信すると、待機時間Ｔａｃの間、待機状態Ａ００１となる。また、撮像装置１０２が待機状態Ａ００１の間、撮像装置１０２の表示部３０９には「配信開始待ち状態」といったメッセージ等が表示される。

その後、配信開始指示ＣＭ１に含まれる配信時間が経過すると、映像切替装置１０１は、配信終了指示ＣＭ４を撮像装置１０４に送信する。一方、撮像装置１０２は、撮像装置１０２における待機時間Ｔａｃが経過すると、配信開始指示ＣＭ３に従って、移動ショットの撮影を行い（例えば、撮影状態Ａ００２を参照。）、撮影して得られた映像を映像切替装置１０１へ出力する。これにより、映像切替装置１０１から配信される映像が、撮像装置１０４の出力映像から撮像装置１０２の出力映像に切り替わる。また、撮像装置１０２は、待機時間Ｔａｃの経過時から更新時間Ｔｒを経過すると、ショット情報を映像切替装置１０１へ送信する。

映像切替装置１０１は、受信したショット情報に基づいて、ショット判定ＣＭ５を行う。ショット判定ＣＭ５では、撮像装置１０２による撮影が移動ショットの撮影であると判定される。映像切替装置１０１は、ショット判定ＣＭ５の判定結果に基づいて次の配信開始指示を送信する撮像装置を選択する。具体的に、映像切替装置１０１は、切り替え前後で移動ショットの撮影が連続しないように、移動ショットの撮影を行わない撮像装置１０３を次の配信開始指示を送信する撮像装置として選択する。次いで、映像切替装置１０１は、選択した撮像装置１０３に配信開始指示ＣＭ６を送信する。

撮像装置１０３は、配信開始指示ＣＭ６を受信すると、待機時間Ｔａｃの間、待機状態Ｃ００１となる。その後、配信開始指示ＣＭ３に含まれる配信時間が経過すると、映像切替装置１０１は配信終了指示ＣＭ７を撮像装置１０２に送信する。一方、撮像装置１０３は、撮像装置１０３における待機時間Ｔａｃが経過すると、配信開始指示ＣＭ６に従って、固定ショットの撮影を行い（例えば、撮影状態Ｃ００２を参照。）、撮影した映像を映像切替装置１０１へ出力する。その後、映像切替装置１０１は、ユーザから配信処理の終了に関する指示を受け付けると、配信処理終了指示ＣＭ８を撮像装置１０３に送信する。これにより、配信開始指示ＣＭ６に従って撮像装置１０３が撮影した映像の配信が終了し、映像配信システム１００による配信処理が終了する。

図５は、図１の映像切替装置１０１によって実行される撮像装置の出力映像の切替制御の第２の例を示す図である。図５では、一例として、上述した撮影状態Ｂ００２において、撮像装置１０４が、カメラマンの指示に従って、移動ショットの撮影を行った場合について説明する。

図５において、移動ショットの撮影を行った撮像装置１０４は、待機時間Ｔａｃの経過時から更新時間Ｔｒを経過すると、ショット情報を映像切替装置１０１に送信する。

映像切替装置１０１は、受信したショット情報に基づいて、ショット判定ＣＭ１１を行う。ショット判定ＣＭ１１では、撮像装置１０４による撮影が移動ショットの撮影であると判定される。映像切替装置１０１は、ショット判定ＣＭ１１の判定結果に基づいて次の配信開始指示を送信する撮像装置を選択する。具体的に、映像切替装置１０１は、切り替え前後で移動ショットの撮影が連続しないように、移動ショットの撮影を行わない撮像装置１０３を次の配信開始指示を送信する撮像装置として選択する。次いで、映像切替装置１０１は、選択した撮像装置１０３に配信開始指示ＣＭ１２を送信する。

撮像装置１０３は、配信開始指示ＣＭ１２を受信すると、待機時間Ｔａｃの間、待機状態Ｃ０１１となり、撮像装置１０３が待機状態Ｃ０１１の間、撮像装置１０３の表示部には「配信開始待ち状態」といったメッセージ等が表示される。

その後、配信開始指示ＣＭ１１に含まれる配信時間が経過すると、映像切替装置１０１は、配信終了指示ＣＭ１３を撮像装置１０４に送信する。一方、撮像装置１０３は、撮像装置１０３における待機時間Ｔａｃが経過すると、配信開始指示ＣＭ１２に従って、固定ショットの撮影を行い（例えば、撮影状態Ｃ０１２を参照。）、撮影した映像を映像切替装置１０１へ出力する。また、撮像装置１０２は、待機時間Ｔａｃの経過時点から更新時間Ｔｒを経過すると、ショット情報を映像切替装置１０１に送信する。

映像切替装置１０１は、受信したショット情報に基づいて、ショット判定ＣＭ１４を行う。ショット判定ＣＭ１４では、撮像装置１０３による撮影が固定ショットの撮影であると判定される。映像切替装置１０１は、ショット判定ＣＭ１４の判定結果に基づいて次の配信開始指示を送信する撮像装置を選択する。具体的に、映像切替装置１０１は、切り替え前後で移動ショットの撮影が連続することがないので、現時点で撮影を行っている撮像装置１０３を除く全ての撮像装置、つまり、撮像装置１０２，１０４の中から次の配信開始指示を送信する撮像装置を選択する。例えば、映像切替装置１０１は、撮像装置１０２，１０４のうち、撮像装置１０４を次の配信開始指示を送信する撮像装置に選択する。次いで、映像切替装置１０１は、選択した撮像装置１０４に配信開始指示ＣＭ１５を送信する。

撮像装置１０４は、配信開始指示ＣＭ１５を受信すると、待機時間Ｔａｃの間、待機状態Ｂ０１３となる。その後、配信開始指示ＣＭ１２に含まれる配信時間が経過すると、映像切替装置１０１は配信終了指示ＣＭ１６を撮像装置１０３に送信する。一方、撮像装置１０４は、撮像装置１０４における待機時間Ｔａｃが経過すると、カメラマンの指示に従って、撮影を行い（例えば、撮影状態Ａ０１４を参照。）、撮影した映像を映像切替装置１０１へ出力する。その後、映像切替装置１０１は、ユーザから配信処理の終了に関する指示を受け付けると、配信処理終了指示ＣＭ１７を撮像装置１０４に送信する。これにより、配信開始指示ＣＭ１５に従って撮像装置１０４が撮影した映像の配信が終了し、映像配信システム１００による配信処理が終了する。

図６は、図１の映像切替装置１０１によって実行される撮像装置の出力映像の切替制御の第３の例を示す図である。図６では、一例として、撮像装置１０４が、上述した待機状態Ｂ００１の間にカメラマンから受けた指示に従って、映像切替装置１０１へ再設定依頼ＣＭ２１を送信した場合について説明する。

図６において、待機時間Ｔａｃが経過する前に、撮像装置１０４から映像切替装置１０１へ再設定依頼ＣＭ２１が送信されると、映像切替装置１０１は、受信した再設定依頼ＣＭ２１に従って、次の配信開始指示を送信する撮像装置を選択する。例えば、映像切替装置１０１は、撮像装置１０４を除く全ての撮像装置、つまり、撮像装置１０２，１０３の中からランダムに次の配信開始指示を送信する撮像装置を選択する。映像切替装置１０１は、選択した撮像装置、例えば、撮像装置１０２に配信開始指示ＣＭ２２を送信する。撮像装置１０２に配信開始指示ＣＭ２２が送信された場合、配信開始指示ＣＭ２１に従った撮像装置１０４の出力映像の配信が行われない。このように、本実施の形態では、映像切替装置１０１は、再設定依頼ＣＭ２１を送信した撮像装置と異なる別の撮像装置に配信開始指示を送信する。これにより、例えば、カメラマンが手持ちで撮影を行う撮像装置１０４においてレンズやフィルター等の交換のために撮影を行うことができない場合に、切り替え先を別の撮像装置に変更することができる。

図７は、図１の映像切替装置１０１によって実行される切替制御処理の手順を示すフローチャートである。図７の切替制御処理は、ＣＰＵ２０１が、ＲＯＭ２０２又は補助記憶装置２０４に記憶されたプログラムをＲＡＭ２０３に展開し、展開したプログラムを実行することで実現される。

図７において、まず、ＣＰＵ２０１は、ユーザによる接続開始指示を受け付けるまで待機する。ユーザによる接続開始指示を操作部２０６で受け付けると（ステップＳ７０１でＹＥＳ）、ＣＰＵ２０１は、通信Ｉ／Ｆ２０７を介して撮像装置１０２～１０４へそれぞれ通信開始指示を送信する。次いで、ＣＰＵ２０１は、撮像装置１０２～１０４とそれぞれ通信接続を行う（ステップＳ７０２）。次いで、ＣＰＵ２０１は、ユーザによる配信制御情報の設定指示を受け付けるまで待機する。ユーザによる配信制御情報の設定指示を操作部２０６で受け付けると（ステップＳ７０３でＹＥＳ）、ＣＰＵ２０１は、ユーザが操作部２０６に入力した配信制御情報を設定する（ステップＳ７０４）。また、ＣＰＵ２０１は、配信制御情報を撮像装置１０２～１０４へそれぞれ送信する。次いで、ＣＰＵ２０１は、ユーザによる配信指示を受け付けるまで待機する。ユーザによる配信指示を操作部２０６で受け付けると（ステップＳ７０５でＹＥＳ）、ＣＰＵ２０１は、撮像装置１０２～撮像装置１０４の中から１つの撮像装置を選択する。例えば、ＣＰＵ２０１は、撮像装置１０２～撮像装置１０４の中からランダムに撮像装置を選択する。若しくはＣＰＵ２０１は、撮像装置１０２～撮像装置１０４の中からユーザが操作部２０６にて指定した撮像装置を選択する。ＣＰＵ２０１は、選択した撮像装置へ配信開始指示を送信する（ステップＳ７０６）。次いで、ＣＰＵ２０１は、配信開始指示を送信した撮像装置からショット情報を受信するまで待機する。配信開始指示を送信した撮像装置からショット情報を受信すると（ステップＳ７０７でＹＥＳ）、受信したショット情報に基づいてショット判定を行う（ステップＳ７０８）。ショット判定では、配信開始指示を送信した撮像装置による撮影が移動ショットの撮影及び固定ショットの撮影の何れであるかが判定される。なお、本実施の形態では、上述したように、映像切替装置１０１が、ＲＯＭ２０２等に予め格納された判定プログラムを用いて、受信したショット情報に含まれるズームレンズの焦点距離の変化量、撮像装置内部のジャイロの変化量、レンズの撮影方向の変化量が閾値以上であるか否かを判定し、判定した結果に基づいて移動ショットであるか固定ショットであるかを判定するものとする。しかし、この方法に限られず、例えば、映像切替装置１０１がショット判定に用いる閾値を配信制御情報に含めて撮像装置へ送信し、撮像装置がこの閾値を用いて移動ショットであるか固定ショットであるかを判定してこの判定結果を含むショット情報を映像切替装置１０１へ送信し、映像切替装置１０１が受信したショット情報に含まれる判定結果に基づいて移動ショットであるか固定ショットであるかを判定する構成であっても良い。

ステップＳ７０８において、配信開始指示を送信した撮像装置による撮影が移動ショットの撮影であると判定された場合、ＣＰＵ２０１は、撮像装置１０２～撮像装置１０４から配信開始指示を送信した撮像装置を除いた撮像装置の中で移動ショットの撮影を行わない撮像装置を次の配信開始指示を送信する撮像装置として選択する（ステップＳ７０９）。例えば、移動ショットの撮影を行わない撮像装置が複数存在する場合、ＣＰＵ２０１は、移動ショットの撮影を行わない複数の撮像装置の中からランダムで一つの撮像装置を選択する。若しくは、ＣＰＵ２０１は、移動ショットの撮影を行わない複数の撮像装置の中で最も優先順が高い撮像装置を選択する。次いで、ＣＰＵ２０１は、後述するステップＳ７１１へ進む。または、映像を配信中の撮像装置だけでなく、他の撮像装置についても、Ｓ７０７と同様に固定ショットであるか移動ショットであるかを判定し、移動ショットではないと判定された撮像装置を選択するようにしてもよい。

ステップＳ７０８において、配信開始指示を送信した撮像装置による撮影が固定ショットの撮影であると判定された場合、ＣＰＵ２０１は、撮像装置１０２～撮像装置１０４から配信開始指示を送信した撮像装置を除いた全ての撮像装置の中から、次の配信開始指示を送信する撮像装置を選択する（ステップＳ７１０）。ステップＳ７１０では、例えば、撮像装置１０２～撮像装置１０４から配信開始指示を送信した撮像装置を除いた全ての撮像装置の中から、固定ショットか移動ショットかに関わらず、ランダムで一つの撮像装置が選択される。若しくは撮像装置１０２～撮像装置１０４から配信開始指示を送信した撮像装置を除いた全ての撮像装置の中で最も優先順が高い撮像装置が選択される。次いで、ＣＰＵ２０１は、選択した撮像装置へ配信開始指示を送信する（ステップＳ７１１）。次いで、ＣＰＵ２０１は、ステップＳ７１１にて配信開始指示を送信した撮像装置から再設定依頼を受信したか否かを判別する（ステップＳ７１２）。

ステップＳ７１２において、ステップＳ７１１にて配信開始指示を送信した撮像装置から再設定依頼を受信したと判別された場合、ＣＰＵ２０１は、ステップＳ７１１にて配信開始指示を送信した撮像装置を選択除外機種リストに追加する（ステップＳ７１３）。次いで、ＣＰＵ２０１は、ステップＳ７０８へ戻る。

ステップＳ７１２において、ステップＳ７１１にて配信開始指示を送信した撮像装置から再設定依頼を受信しないと判別された場合、ＣＰＵ２０１は、選択除外機種リストをリセットする（ステップＳ７１４）。次いで、ＣＰＵ２０１は、現時点で撮影を行っている撮像装置の配信時間を経過すると、当該撮像装置へ配信終了指示を送信する（ステップＳ７１５）。次いで、ＣＰＵ２０１は、ユーザによる配信処理の終了に関する指示を操作部２０６で受け付けたか否かを判別する（ステップＳ７１６）。

ステップＳ７１６において、ユーザによる配信処理の終了に関する指示を操作部２０６で受け付けないと判別された場合、ＣＰＵ２０１は、ステップＳ７０７へ戻る。ステップＳ７１６において、ユーザによる配信処理の終了に関する指示を操作部２０６で受け付けたと判別された場合、ＣＰＵ２０１は、撮像装置１０２～撮像装置１０４へ配信処理終了指示を送信し（ステップＳ７１７）、本処理を終了する。

次に、撮像装置１０２～撮像装置１０４による撮影制御処理について説明する。撮像装置１０２～撮像装置１０４ではそれぞれ同様の処理が行われ、以下では、一例として、撮像装置１０２による撮影制御処理の手順について説明する。

図８は、図１の撮像装置１０２によって実行される撮影制御処理の手順を示すフローチャートである。図８の撮影制御処理は、制御部３０１がＲＯＭ３０２等に格納されたプログラムを実行することによって実現される。

図８において、まず、制御部３０１は、無線通信部３１１が映像切替装置１０１から通信開始指示を受信するまで待機する。無線通信部３１１が映像切替装置１０１から通信開始指示を受信すると（ステップＳ８０１でＹＥＳ）、制御部３０１は、受信した通信開始指示に従って、映像切替装置１０１と通信接続を開始する（ステップＳ８０２）。次いで、制御部３０１は、無線通信部３１１が配信制御情報を映像切替装置１０１から受信するまで待機する。無線通信部３１１が配信制御情報を映像切替装置１０１から受信すると（ステップＳ８０３でＹＥＳ）、制御部３０１は、配信制御情報、つまり、更新時間Ｔｒ、待機時間Ｔａｃ、ショット判定に用いる閾値をＲＡＭ３０３等に読み込む（ステップＳ８０４）。次いで、制御部３０１は、無線通信部３１１が配信開始指示を映像切替装置１０１から受信するまで待機する。無線通信部３１１が配信開始指示を映像切替装置１０１から受信すると（ステップＳ８０５でＹＥＳ）、制御部３０１は、計時値であるＴｃをゼロにリセットし（ステップＳ８０６）、Ｔｃの計時を開始する（ステップＳ８０７）。なお、表示部３０９に、Ｔｃの値やＴｃの値に関連する情報を表示しても良い。次いで、制御部３０１は、配信開始指示を別の撮像装置に引き渡す指示を操作部３１０にて受け付けたか否かを判別する（ステップＳ８０８）。

ステップＳ８０８において、配信開始指示を別の撮像装置に引き渡す指示を操作部３１０にて受け付けたと判別された場合、制御部３０１は、再設定依頼を映像切替装置１０１へ送信し（ステップＳ８０９）、撮影制御処理はステップＳ８０５へ戻る。

ステップＳ８０８において、配信開始指示を別の撮像装置に引き渡す指示を操作部３１０にて受け付けないと判別された場合、制御部３０１は、「配信開始待ち状態」といったメッセージ等を表示部３０９に表示させる（ステップＳ８１０）。その後、Ｔｃが待機時間Ｔａｃに到達すると（ステップＳ８１１でＹＥＳ）、制御部３０１は、Ｔｃをゼロにリセットする（ステップＳ８１２）。次いで、制御部３０１は、Ｔｃの計時を開始し（ステップＳ８１３）、配信撮影処理を開始する（ステップＳ８１４）。配信撮影処理では、例えば、撮像部３０６は、制御部３０１から受信した指示に従って撮影を行い、無線通信部３１１は、当該撮影にて生成された映像（動画データ）を映像切替装置へ送信する。

その後、Ｔｃが更新時間Ｔｒに到達すると（ステップＳ８１５でＹＥＳ）、制御部３０１は、撮像部３０６等からショット情報を取得する。制御部３０１は、取得したショット情報を無線通信部３１１を介して映像切替装置１０１へ送信する（ステップＳ８１６）。次いで、制御部３０１は、Ｔｃをゼロにリセットし（ステップＳ８１７）、Ｔｃの計時を開始する（ステップＳ８１８）。次いで、制御部３０１は、Ｔｃが更新時間Ｔｒに到達したか否かを判別する（ステップＳ８１９）。

ステップＳ８１９において、Ｔｃが更新時間Ｔｒに到達しないと判別された場合、制御部３０１は、無線通信部３１１が配信終了指示を映像切替装置１０１から受信したか否かを判別する（ステップＳ８２０）。

ステップＳ８２０において、無線通信部３１１が配信終了指示を映像切替装置１０１から受信しないと判別された場合、撮影制御処理はステップＳ８１９へ戻る。無線通信部３１１が配信終了指示を映像切替装置１０１から受信しないまま、Ｔｃが更新時間Ｔｒに到達すると（ステップＳ８１９でＹＥＳ）、撮影制御処理はステップＳ８１６へ戻り、制御部３０１は、撮像部３０６等からショット情報を再度取得する。制御部３０１は、取得したショット情報を無線通信部３１１を介して映像切替装置１０１へ送信し、撮影制御処理はステップＳ８１７へ進む。

ステップＳ８２０において、無線通信部３１１が配信終了指示を映像切替装置１０１から受信したと判別された場合、制御部３０１は、ステップＳ８１４にて開始した配信撮影処理を終了する（ステップＳ８２１）。ステップＳ８２１では、例えば、制御部３０１は、撮像部３０６に対して撮影の停止を指示し、無線通信部３１１に対して映像切替装置への動画データの送信の停止を指示する。次いで、制御部３０１は、無線通信部３１１が配信処理終了指示を映像切替装置１０１から受信したか否かを判別する（ステップＳ８２２）。

ステップＳ８２２において、無線通信部３１１が配信処理終了指示を映像切替装置１０１から受信しないと判別された場合、撮影制御処理はステップＳ８０５へ戻る。ステップＳ８２２において、無線通信部３１１が配信処理終了指示を映像切替装置１０１から受信したと判別された場合、撮影制御処理は終了する。なお、無線通信部３１１が配信終了指示を受信する前に、配信処理終了指示を受信した場合、撮影制御処理は直ちに終了する。

上述した実施の形態によれば、撮像装置１０２～撮像装置１０４の中の第１の撮像装置の映像を出力映像として提供するときに、第１の撮像装置による撮影が、画角の変化が所定値以上となる移動ショットの撮影である場合、第１の撮像装置の次に切り替える撮像装置が、複数の撮像装置の中の移動ショットの撮影を行わない撮像装置に決定される。すなわち、第１の撮像装置の出力映像から次の撮像装置の出力映像に切り替えても、移動ショットが連続することはない。これにより、移動ショットが連続しない映像を提供することができる。

また、上述した実施の形態では、移動ショットの撮影を行わない撮像装置は、固定ショットの撮影を行う撮像装置である。これにより、配信開始指示を送信した撮像装置の出力映像から、次の配信開始指示を送信した撮像装置の出力映像に切り替えた際に移動ショットが連続するのを確実に防止することができる。

上述した実施の形態では、第１の撮像装置の映像を出力映像として提供するときに、第１の撮像装置による撮影が固定ショットの撮影である場合、第１の撮像装置の次に出力映像として切り替える撮像装置が、固定ショットであるか移動ショットであるかに関わらず、第１の撮像装置を除いた撮像装置の中から決定される。これにより、移動ショットが連続するのを防止しつつ、出力映像の切り替えについて必要最小限の制限に留めて迫力のある映像の撮影が阻害されるのを防止することできる。

上述した実施の形態では、配信開始指示を送信した撮像装置から受信したショット情報に基づいて、配信開始指示を送信した撮像装置による撮影が固定ショットの撮影及び移動ショットの撮影の何れであるかが判別される。これにより、受信したショット情報から配信開始指示を送信した撮像装置による撮影時の状況を把握することができ、撮影指示を送信した撮像装置による撮影が固定ショットの撮影及び移動ショットの撮影の何れであるかの判定精度を向上することができる。

上述した実施の形態では、ショット情報は、ズームレンズの焦点距離の変化量、撮像装置内部のジャイロの変化量、レンズの撮影方向の変化量を含む。これにより、撮影指示を送信した撮像装置による撮影が固定ショットの撮影及び移動ショットの撮影の何れであるかを高精度に判定することができる。

以上、本発明について、上述した実施の形態を用いて説明したが、本発明は上述した実施の形態に限定されるものではない。例えば、撮像装置１０２～撮像装置１０４の何れかが映像切替装置１０１の機能を備えていも良い。例えば、カメラマンが手持ちで撮影を行う撮像装置１０４が映像切替装置１０１の機能を備えることにより、カメラマンが手持ちで撮影を行う撮像装置１０４を操作して別の撮像装置の出力映像に切り替えても、移動ショットが連続しない映像を提供することができる。

なお、上述した実施の形態では、必ずしもリアルタイムの配信を前提にしたものではなく、例えば、撮像装置１０２～撮像装置１０４の各出力映像を繋ぎ合わせて１つの映像を生成する際に本発明の技術が用いられても良い。

また、上述した実施の形態では、撮像装置１０２～１０４は、配信終了指示を受信した時刻をタイムコード等に記録し、配信終了指示を受信しても、そのまま撮影を継続しても良い。

本発明は、上述の実施の形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、該システム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出して実行する処理でも実現可能である。また、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

１０１ 映像切替装置
１０２ 撮像装置
１０３ 撮像装置
１０４ 撮像装置
２０１ ＣＰＵ
２０７ 通信Ｉ／Ｆ

Claims (13)

1. 複数の撮像装置の映像を切り替えて時間的に連続する映像を出力映像として提供する映像切替装置であって、
   前記複数の撮像装置のうち、前記出力映像とする撮像装置を決定する制御手段を有し、
   前記制御手段は、前記複数の撮像装置の中の第１の撮像装置の映像を前記出力映像として提供するときに、前記第１の撮像装置による撮影が、画角の変化が所定値以上となる移動ショットの撮影である場合、前記第１の撮像装置の次に切り替える撮像装置を、前記複数の撮像装置の中の前記移動ショットの撮影を行わない撮像装置に決定することを特徴とする映像切替装置。
2. 前記移動ショットの撮影を行わない撮像装置は、画角の変化が所定値未満となる固定ショットの撮影を行う撮像装置であることを特徴とする請求項１に記載の映像切替装置。
3. 前記第１の撮像装置の映像を前記出力映像として提供するときに、前記制御手段は、前記第１の撮像装置による撮影が前記固定ショットの撮影である場合、前記第１の撮像装置の次に前記出力映像として切り替える撮像装置を、前記固定ショットであるか前記移動ショットであるかに関わらず、前記第１の撮像装置を除いた撮像装置の中から決定することを特徴とする請求項２に記載の映像切替装置。
4. 前記制御手段は、撮像装置による撮影が前記固定ショットの撮影及び前記移動ショットの撮影の何れであるかに関する情報を当該撮像装置から取得することを特徴とする請求項２又は３に記載の映像切替装置。
5. 前記制御手段は、前記取得した情報に基づいて、前記出力映像を撮影している撮像装置による撮影が前記固定ショットの撮影及び前記移動ショットの撮影の何れであるかを判別することを特徴とする請求項４に記載の映像切替装置。
6. 前記制御手段は、ズームレンズの焦点距離の変化量、撮像装置内部のジャイロの変化量、レンズの撮影方向の変化量のうちの少なくとも１つを含む情報を取得し、前記取得した情報に基づいて、前記固定ショットの撮影及び前記移動ショットの撮影の何れであるかを判別することを特徴とする請求項５に記載の映像切替装置。
7. 前記制御手段は、次の切替先として決定した撮像装置に対して、次の切替先の撮像装置であることを通知することを特徴とする請求項１乃至６のいずれか１項に記載の映像切替装置。
8. 前記制御手段は、次の切替先の撮像装置であることと共に、切り替わるタイミングを通知することを特徴とする請求項７に記載の映像切替装置。
9. 次の切替先であることを通知した撮像装置から再設定依頼を受信した場合、前記制御手段は、次に前記出力映像として切り替える撮像装置を、前記複数の撮像装置から前記次の切替先であることを通知した撮像装置を除いた撮像装置の中から決定することを特徴とする請求項７又は８に記載の映像切替装置。
10. 前記制御手段は、次の切替先として決定した撮像装置の映像へ前記出力映像を切り替えたことに応じて、前記切替先の撮像装置の映像が前記出力映像として提供されることを前記撮像装置に通知することを特徴とする請求項1乃至９の何れか１項に記載の映像切替装置。
11. 前記映像切替装置は、前記複数の撮像装置に含まれる撮像装置であることを特徴とする請求項１乃至１０の何れか１項に記載の映像切替装置。
12. 複数の撮像装置の映像を切り替えて時間的に連続する映像を出力映像として提供する映像切替装置の制御方法であって、
    前記複数の撮像装置のうち、前記出力映像とする撮像装置を決定する制御工程を有し、
    前記制御工程は、前記複数の撮像装置の中の第１の撮像装置の映像を前記出力映像として提供するときに、前記第１の撮像装置による撮影が、画角の変化が所定値以上となる移動ショットの撮影である場合、前記第１の撮像装置の次に切り替える撮像装置を、前記複数の撮像装置の中の前記移動ショットの撮影を行わない撮像装置に決定することを特徴とする映像切替装置の制御方法。
13. 請求項１乃至１１のうちいずれか１項に記載の映像切替装置の各手段をコンピュータに実行させるためのプログラム。
    

Images