JP2022093796A - 映像処理装置、映像配信システム、映像処理方法、およびプログラム - Google Patents

Abstract

【課題】入力信号を受信することができない場合においても、補助情報を継続的に提供可能な映像処理装置を提供する。【解決手段】映像生成部（１１）は、入力信号から映像データを生成し、画像入力部（１２）は、映像データ上に重畳される第１の画像データを入力し、編集部（１３）は、第１の画像データと、映像データとを合成し、出力部（１５）は、第１の画像データと、映像データとを合成することによって得られた合成データを出力し、映像生成部（１１）は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。【選択図】 図１

Description

本発明は、映像処理装置、映像配信システム、映像処理方法、およびプログラムに関し、特に、入力信号から映像データを生成および編集する映像処理装置、映像配信システム、映像処理方法、およびプログラムに関する。

関連する技術では、クラウドサーバが、モバイルネットワーク（無線ネットワーク）を介して、カメラと接続されたリアルタイムエンコーダから、入力信号を受信する。クラウドサーバは、入力信号からデコードした映像データと、時刻情報または緊急速報などの補助情報を含む画像データとを合成する。そして、関連する技術では、クラウドサーバが、テレビジョン受信機やモニタなどの表示装置、あるいは、スマートフォンやタブレットデバイスなどのユーザ端末に対して、映像データ上に画像データが重畳された合成データを送信する。

合成データに関連し、特許文献１には、カメラから取得した実写の映像データと、モデリングによって生成された３Ｄコンピュータグラフィックとを合成し、これによって得られた合成データを、監視用モニタに表示することが記載されている。

また、特許文献２には、外部システムより入力された電文データを解析することによって、電文データの内容を手話モーションに変換することが記載されている。さらに、特許文献２には、手話モーションに基づく３Ｄアニメーションを生成し、電文データの言語解析の結果に基づく日本語字幕とともに、生成した３Ｄアニメーションを表示することが記載されている。

特開平０９－２３４４９号公報 特開２０１６－０３８７４８号公報

特許文献１に記載の関連する技術では、カメラの故障または通信障害などを原因として、入力信号を受信することができない場合がある。このような場合、映像データの送信が中断される。そのため、自然災害の状況に関する緊急速報などの補助情報を提供することが一時的にできなくなる。

本発明は、上記の課題に鑑みてなされたものであり、その目的は、入力信号を受信することができない場合においても、補助情報を継続的に提供可能な映像処理装置を提供することにある。

上記の課題を解決するために、本発明の一態様に係わる映像処理装置は、入力信号から映像データを生成する映像生成手段と、前記映像データ上に重畳される第１の画像データを入力する画像入力手段と、前記第１の画像データと、前記映像データとを合成する編集手段と、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する出力手段とを備え、前記映像生成手段は、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能に構成されている。

本発明の一態様に係わる映像配信システムは、本発明の一態様に係わる映像処理装置と、前記映像処理装置から前記合成データを配信される１または複数のユーザ端末と、１または複数の撮像装置と、前記１または複数の撮像装置のそれぞれから取得した撮影データを、前記入力信号に変換し、前記入力信号を前記映像処理装置へ送信するエンコーダと、を備えている。

本発明の一態様に係わる映像処理方法では、入力信号から映像データを生成し、前記映像データ上に重畳される第１の画像データを入力し、前記第１の画像データと、前記映像データとを合成し、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力し、前記映像データの生成において、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能である。

本発明の一態様に係わるプログラムは、入力信号から映像データを生成する処理と、前記映像データ上に重畳される第１の画像データを入力する処理と、前記第１の画像データと、前記映像データとを合成する処理と、前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する処理とをコンピュータに実行させ、前記映像データを生成する処理において、前記コンピュータが、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能であるように構成されている。

本発明の一態様によれば、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

実施形態１に係わる映像処理装置の構成を示すブロック図である。 実施形態１に係わる映像処理装置のハードウェア構成の一例を示す図である。 実施形態１に係わる映像処理装置が出力する合成データの表示例を示す図である。 実施形態２に係わる映像処理装置の構成を示すブロック図である。 実施形態２に係わる映像処理装置のハードウェア構成の一例を示す図である。 実施形態２に係わる映像処理装置が出力する合成データの表示例を示す図である。 実施形態３に係わる映像処理装置の構成を示すブロック図である。 実施形態３に係わる映像処理装置のハードウェア構成の一例を示す図である。 実施形態３に係わる映像処理装置が出力する合成データの表示例を示す図である。 実施形態４に係わる映像処理装置の構成を示すブロック図である。 実施形態４に係わる映像処理装置のハードウェア構成の一例を示す図である。 実施形態４に係わる映像処理装置が出力する割り込み映像の表示例を示す図である。 実施形態５に係わる映像配信システムの構成の一例を概略的に示す図である。 実施形態１～４のいずれかに係わる映像処理装置のハードウェア構成の一例を示す図である。

本発明を実施するための形態について、以下で説明する。

〔実施形態１〕
図１から図３を参照して、実施形態１について説明する。

（映像処理装置１０）
図１は、本実施形態１に係わる映像処理装置１０の構成を示すブロック図である。図１に示すように、映像処理装置１０は、映像生成部１１、画像入力部１２、編集部１３、および出力部１５を備えている。

映像生成部１１は、入力信号から映像データを生成する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。映像生成部１１は、映像生成手段の一例である。換言すれば、映像生成部１１は、入力信号を第１の画像データに切り替える回路を備える。一例では、映像生成部１１は、静止画である第１の画像データを複製することによって、時系列データである映像データを生成する。これにより、映像生成部１１は、入力信号および第１の画像データのどちらからでも、映像データを生成することができる。なお、ここでの入力信号とは、図示しない外部装置から送信された時系列のデータであり、特に、映像データをエンコードすることによって、通信用のフォーマットに変換された符号化データである。

一例では、映像生成部１１は、無線ネットワークを介して、カメラなどの撮像装置と接続されたリアルタイムエンコーダから、入力信号を受信する。映像生成部１１は、入力信号からデコードした映像データを、編集部１３へ出力する。

画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。画像入力部１２は、画像入力手段の一例である。

一例では、画像入力部１２は、コンピュータグラフィック（以下、ＣＧ（Computer Graphics）と記載する）を、第１の画像データとして、映像生成部１１および編集部１３に入力する。第１の画像データは、例えば、現在時刻を示す時刻情報、または、地震や台風などの自然災害の発生に関する緊急速報を含む。あるいは、第１の画像データは、特許文献２に記載されているように、モデリングされた人物の３Ｄコンピュータグラフィックであってもよい。

編集部１３は、第１の画像データと、映像データとを合成する。編集部１３は、編集手段の一例である。

一例では、編集部１３は、画像入力部１２から、第１の画像データを受信する。また、編集部１３は、映像生成部１１から、映像データを受信する。編集部１３は、第１の画像データと、映像データとを合成することによって、合成データを生成する。ここで合成とは、２つ以上の画像データまたは映像データを組み合わせて、１つの画像データまたは映像データを生成することである。合成の一例は、映像データ上に文字または図形を重畳させるスーパーインポーズである。編集部１３は、生成した合成データを、出力部１５へ出力する。

出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。出力部１５は、出力手段の一例である。

一例では、出力部１５は、編集部１３から、合成データを受信する。出力部１５は、無線ネットワークを介して、スマートフォンなどのユーザ端末へ合成データを送信する。しかしながら、出力部１５による合成データの出力先は特に限定されない。

（ハードウェア構成）
図２を参照して、上述した映像処理装置１０のハードウェア構成の一例を説明する。図２に示すように、映像生成部１１は、入力信号として、入力Ｘ及び入力Ｙを受信する。入力Ｘ及び入力Ｙは、互いに異なっていてもよいし、同じであってもよい。映像生成部１１は、ビデオミキサー（図２ではＭＩＸＥＲと表示）によって、入力Ｘおよび入力Ｙの一方をデコードする。映像生成部１１は、入力Ｘまたは入力Ｙをデコードすることによって得られた映像データを、編集部１３へ出力する。

画像入力部１２は、３つの画像入力部Ａ～Ｃを備えている。画像入力部Ａから、映像生成部１１および編集部１３へ、第１のコンピュータグラフィック（ＣＧ１と呼ぶ）が入力される。一方、画像入力部ＢおよびＣから、編集部１３へ、それぞれ、第２、第３のコンピュータグラフィック（ＣＧ２、ＣＧ３と呼ぶ）が入力される。

映像生成部１１は、入力Ｘまたは入力Ｙに代えて、画像入力部Ａから入力されるＣＧ１に基づいて、映像データを生成することが可能に構成されている。具体的には、映像生成部１１は、セレクター（図２ではＳＥＬと表示）により、入力Ｘまたは入力Ｙと、画像入力部Ａからの入力とを切り替える。

編集部１３は、画像入力部Ａ～Ｃと対応する３つのキーヤー（図２ではＫＥＹＥＲ）を備えている。キーヤーは、キーイング処理を実行するソフトウェアである。３つのキーヤーは、それぞれ、対応する画像入力部Ａ～Ｃからの入力（ＣＧ１～ＣＧ３）をＯＮ／ＯＦＦする機能を有する。入力のＯＮ／ＯＦＦとは、映像データ上で、コンピュータグラフィック（以下、ＣＧと呼ぶ）が見える状態（ＯＮ）と、ＣＧが見えない状態（ＯＦＦ）とを切り替えることを指す。ＣＧは、映像データの下側に仮想的に配置されており、映像データの一部が透明化されることによって、ＣＧが見える状態が形成される。ここで、ＣＧが映像データの下側に仮想的に配置されるとは、ＣＧと映像データの画像とを重ねて表示するようにしたとき、映像データによりＣＧが隠されて見えないことを意味する。このとき、映像データを上層、ＣＧを下層と呼ぶ。

また、編集部１３は、デジタルビデオエフェクター（図２ではＤＶＥ（Digital Video Effecter）と表示）を備えている。編集部１３のＤＶＥは、映像生成部１１のＭＩＸＥＲから入力された映像データと、画像入力部Ａ～Ｃから入力されたＣＧ１～ＣＧ３の任意の組み合わせとを合成する。ＤＶＥは、映像データとＣＧ１～ＣＧ３の組み合わせとを合成することによって得られた合成データを、出力部１５へ出力する。

出力部１５は、図示しない通信部により、無線ネットワークを介して、スマートフォンなどのユーザ端末へ、合成データを送信（出力）する。

（表示例）
図３は、映像処理装置１０が送信（出力）する合成データの表示例を示す図である。図３のフレームは、例えば、合成データを受信したユーザ端末の画面を表す。図３において、「ＣＧ１⇔入力Ｘ」「ＣＧ１⇔入力Ｙ」と示す。これは、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられることを意味する。すなわち、ＣＧ１が画面に表示された状態から、入力Ｘまたは入力Ｙが画面に表示された状態へ、又はその逆に、変化する。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。

また、図３に示すように、フレームの右上には、ＣＧ１～ＣＧ３の任意の組み合わせが配置される。ＣＧ１～ＣＧ３の組み合わせは、映像データ上に表示される。ＣＧ１～ＣＧ３の組合せは、編集部１３のキーヤー（図２）によるキーイング処理によって決定される。

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

〔実施形態２〕
図４から図６を参照して、実施形態２について説明する。本実施形態２では、第２の画像データを、映像データの背景として提供する構成を説明する。

（映像処理装置２０）
図４は、本実施形態２に係わる映像処理装置２０の構成を示すブロック図である。図４に示すように、映像処理装置２０は、映像生成部１１、画像入力部１２、編集部１３、及び出力部１５を備えている。映像処理装置２０は、背景入力部２４をさらに備えている。映像処理装置２０は、背景入力部２４を備えている点で、前記実施形態１に係わる映像処理装置１０とは異なる。

本実施形態２では、画像入力部１２は、第１の画像データに加えて、第２の画像データをさらに入力する。なお、本実施形態２では、前記実施形態１の説明を引用して、重複する構成に関する説明を省略する。

背景入力部２４は、第２の画像データを、映像データの背景として入力する。背景入力部２４は、背景入力手段の一例である。図４に示すように、背景入力部２４は、画像入力部１２から、第２の画像データを受信する。背景入力部２４は、第２の画像データに基づいて、映像データの背景を生成する。背景とは、映像データの下側に仮想的に配置された画像データである。

第２の画像データは、第１の画像データとは異なる画像データである。一例では、第２の画像データは、前記実施形態１において説明したＣＧ１～ＣＧ３のいずれか又はその任意の組み合わせであってよい。

（ハードウェア構成）
図５を参照して、上述した映像処理装置２０のハードウェア構成の一例を説明する。図５に示すように、背景入力部２４は、画像入力部１２に含まれる画像入力部Ａ～Ｃと対応する３つのキーヤー（図５ではＫＥＹＥＲと表示）を備えている。背景入力部２４の３つのキーヤーは、編集部１３のキーヤーと同様に、対応する画像入力部Ａ～Ｃからの入力をＯＮ／ＯＦＦする機能を有する。

背景入力部２４の３つのキーヤーは、それぞれ、対応する画像入力部Ａ～Ｃから、ＣＧ１～ＣＧ３を受信する。背景入力部２４は、ＣＧ１～ＣＧ３の任意の組み合わせを、第２の画像データとして、編集部１３のＤＶＥに入力する。

編集部１３のＤＶＥは、映像生成部１１によって生成された映像データと、画像入力部１２から入力された第１の画像データとともに、背景入力部２４から入力された第２の画像データを合成する。この場合、第１の画像データは、映像データに重畳される一方、第２の画像データは、映像データの背景として合成される。編集部１３は、合成データを出力部１５へ出力する。

出力部１５は、編集部１３のＤＶＥからの合成データを、ユーザ端末等へ送信する。

（表示例）
図６は、映像処理装置２０が送信（出力）する合成データの表示例を示す。図６のフレームは、例えば、ユーザ端末の画面を表す。図６に示すように、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられる。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。

また、図６では、編集部１３のＤＶＥによって、映像データが縮小されている。図６では、映像データが縮小された結果、フレームの右下に背景が表れている。背景は、ＣＧ１～ＣＧ３の任意の組み合わせである。映像データが、フレームの全体に再拡大された場合、図３に例示するように、映像データの背景は見えなくなる。

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

さらに、本実施形態の構成によれば、画像入力部１２は、第１の画像データに加えて、第２の画像データをさらに入力する。背景入力部２４は、第２の画像データを、映像データの背景として入力する。そのため、映像データの背景として、補助情報を提供することができる。

〔実施形態３〕
図７から図１０を参照して、実施形態３について説明する。本実施形態３では、第１の画像データとは異なる第３の画像データを、映像データとともに提示する構成を説明する。

（映像処理装置３０）
図７は、本実施形態３に係わる映像処理装置３０の構成を示すブロック図である。図７に示すように、映像処理装置３０は、映像生成部１１、画像入力部１２´、編集部１３、及び出力部１５を備えている。本実施形態３の構成は、前記実施形態１の構成と同等である。

しかしながら、前記実施形態１では、画像入力部１２は、第１の画像データを映像生成部１１に入力する。一方、本実施形態３では、画像入力部１２´が、第１の画像データを映像生成部１１に入力するとともに、第３の画像データを出力部１５に入力する。第３の画像データは、第１の画像データと互いに異なっている。一例では、第１の画像データは、現在時刻を示す時刻情報であり、第３の画像データは、自然災害の発生に関する緊急速報である。

（ハードウェア構成）
図８を参照して、上述した映像処理装置３０のハードウェア構成の一例を説明する。図８に示すように、画像入力部１２´は、画像入力部Ａ～Ｃに加えて、画像入力部Ｄ～Ｅをさらに備えている。

画像入力部Ｄ～Ｅは、それぞれ、第４、第５のコンピュータグラフィック（ＣＧ４、ＣＧ５と呼ぶ）を、出力部１５に入力する。

出力部１５は、画像入力部Ｄ～Ｅと対応する２つのキーヤー（図９ではＫＥＹＥＲ）を備えている。出力部１５の２つのキーヤーは、対応する画像入力部Ｄ～Ｅからの入力をＯＮ／ＯＦＦする機能を有する。

出力部１５は、編集部１３から、合成データを受信する。また、出力部１５は、画像入力部Ｄ～Ｅから、ＣＧ４～ＣＧ５を受信する。出力部１５は、キーヤーを用いて、ＣＧ４～ＣＧ５の一方又は両方から、第３の画像データを生成する。出力部１５は、編集部１３から受信した合成データとともに、ＣＧ４～ＣＧ５の任意の組み合わせで構成された第３の画像データを出力する。

（表示例）
図９は、映像処理装置３０が送信（出力）する合成データの表示例を示す。図９のフレームは、例えば、ユーザ端末の画面を表す。図９に示すように、合成データにおいて、入力Ｘまたは入力Ｙに基づく映像データと、画像入力部Ａから入力されるＣＧ１に基づく映像データとが切り替えられる。この切り替えは、映像生成部１１のセレクター（図２）によって実行される。

また、図９に示すように、フレームの右上には、ＣＧ１～ＣＧ３の任意の組み合わせが配置される。ＣＧ１～ＣＧ３の組み合わせは、映像データ上に表示される。ＣＧ１～ＣＧ３の組合せは、編集部１３のキーヤー（図２）によるキーイング処理によって決定される。

さらに、図９に示すように、フレームの左上には、ＣＧ４～ＣＧ５の任意の組み合わせが配置される。ＣＧ４～ＣＧ５の組み合わせは、映像データ上に配置される。ＣＧ４～ＣＧ５の組合せは、出力部１５のキーヤー（図８）によるキーイング処理によって決定される。

図９において、ＣＧ１～ＣＧ３の表示は、映像データと同一の層（レイヤー）内にある一方、ＣＧ４～ＣＧ５の表示は、映像データの層より上の層に配置されている。言い換えれば、ＣＧ４～ＣＧ５の表示は、映像データに対する前景である。第１の画像データは、編集部１３のＤＶＥによって、映像データと合成される一方、第３の画像データは、映像データと合成されない。図９に示すフレームにおいて、映像データが縮小された場合、ＣＧ１～ＣＧ３の表示は、映像データとともに縮小される一方、ＣＧ４～ＣＧ５の表示は変化しない。このため、ＣＧ４～ＣＧ５の表示は、ユーザが見やすい大きさを常に保つことができる。

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２´は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

さらに、本実施形態の構成によれば、画像入力部１２´は、第１の画像データを映像生成部１１に入力するとともに、第３の画像データを出力部１５に入力する。出力部１５は、第３の画像データと、合成データとを出力する。第３の画像データは、第１の画像データと互いに異なっている。一例では、第１の画像データは、現在時刻を示す時刻情報であり、第３の画像データは、自然災害の発生に関する緊急速報である。これにより、合成データとは別に、第３の画像データに基づく補助情報を提供することができる。

〔実施形態４〕
図１０から図１２を参照して、実施形態４について説明する。本実施形態４では、合成データに代えて、割り込み映像を提示する構成を説明する。

（映像処理装置４０）
図１０は、本実施形態４に係わる映像処理装置４０の構成を示すブロック図である。図１０に示すように、映像処理装置４０は、映像生成部１１、画像入力部１２´、編集部１３、及び出力部１５を備えている。映像処理装置４０は、割込入力部４４をさらに備えている。映像処理装置４０は、割込入力部４４を備えている点で、前記実施形態１に係わる映像処理装置１０とは異なる。

割込入力部４４は、映像データを、割り込み映像データとして入力する。割込入力部４４は、割込入力手段の一例である。一例では、割込入力部４４は、映像生成部１１から、映像データを取得する。割込入力部４４は、受信した映像データを、割り込み映像データとして、出力部１５に入力する。

出力部１５は、割込入力部４４から割り込み映像データを受信した場合、合成データに代えて、割り込み映像データを、ユーザ端末等へ送信する。

（ハードウェア構成）
図１１を参照して、上述した映像処理装置４０のハードウェア構成の一例を説明する。図１１に示すように、映像生成部１１のＭＩＸＥＲから出力された映像データは、割込入力部４４のセレクター（図１１ではＳＥＬと表示）によって、編集部１３を迂回して、割り込み映像データとして、出力部１５へ入力される。一例では、割り込み映像データは、「しばらくお待ちください」などの緊急メッセージを含む。割り込み映像データは、自然災害や事件に関する緊急速報を、ユーザに継続的に通知するために利用されてもよい。

出力部１５は、合成データに代えて、割り込み映像データを出力する。したがって、編集部１３のＤＶＥが故障あるいは動作を停止している場合であっても、割り込み映像データを出力することができる。割り込み映像データは、
（表示例）
図１２は、映像処理装置４０が送信（出力）する割り込み映像データの表示例を示す。図１２のフレームは、例えば、ユーザ端末の画面を表す。図１２に示すように、合成データに代えて、割り込み映像データが、ユーザ端末の画面に表示される。割り込み映像データは、入力Ｘまたは入力Ｙに基づく映像データ、あるいは、第１の画像データに基づく映像データのどちらかである。

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

さらに、本実施形態の構成によれば、割込入力部４４は、映像データを、割り込み映像データとして入力する。出力部１５は、合成データに代えて、割り込み映像データを出力する。これにより、編集部１３が機能停止している場合であっても、映像データを出力することができる。

〔実施形態５〕
図１３を参照して、実施形態５について説明する。本実施形態５では、前記実施形態１～４のいずれかに係わる映像処理装置を備えた映像配信システムの一例を説明する。

（映像配信システム１）
図１３は、本実施形態５に係わる映像配信システム１の構成を概略的に示す図である。映像配信システム１は、１または複数の撮像装置、１または複数のエンコーダ、サーバ、および１または複数のユーザ端末を備えている。なお、図１３に示す撮像装置、エンコーダ、及びユーザ端末の数は増減してよい。一例では、１または複数の撮像装置、１または複数のエンコーダ、サーバ、および１または複数のユーザ端末は、ローカルネットワークによって、通信可能に互いに接続されている。一例では、映像配信システム１のこれらの構成要素は、有線LAN（Local Area Network）または無線LANによって接続されている。あるいは、映像配信システム１において、有線LANまたは無線LANの代わりに、無線MAN（Metropolitan Area Network）又は無線WAN(Wide Area Network)など、より広範囲のモバイルネットワークが利用されてもよい。また、サーバは、特に種類を限定されないが、ローカルサーバであってもよいし、クラウドサーバであってもよい。

撮像装置は、撮影により、映像データを生成する。撮像装置は、例えば、監視カメラ、デジタルカメラ、またはスマートフォンである。

エンコーダは、撮像装置から、映像データを受信する。エンコーダは、映像データをエンコードすることによって、映像データを入力信号に変換し、無線ネットワークを介して、サーバに入力信号を送信する。

サーバは、無線ネットワーク上で実現されている。サーバは、無線ネットワークを通じて、エンコーダ及びユーザ端末と通信可能である。サーバは、前記実施形態１～４に係わる映像処理装置（すなわち、１０、２０、３０、または４０）のいずれかを備えている。

サーバ内の映像処理装置（１０、２０、３０、または４０）は、前記実施形態１～４において説明したように、入力信号から、映像データを生成する。映像処理装置は、映像データと、第１の画像データとを合成する。あるいは、前記実施形態２において説明したように、映像処理装置は、映像データおよび第１の画像データに加えて、映像データの背景をさらに合成する。そして、映像処理装置は、映像データと、第１の画像データとを合成することによって得られた合成データを、１または複数のユーザ端末の各々へ送信する。

あるいはまた、前記実施形態３において説明したように、映像処理装置は、合成データとともに、第３の画像データを、１または複数のユーザ端末へ送信する。

あるいはまた、前記実施形態４において説明したように、映像処理装置は、合成データに代えて、割り込み映像データを、１または複数のユーザ端末へ送信する。

（本実施形態の効果）
本実施形態の構成によれば、映像生成部１１は、入力信号から映像データを生成する。画像入力部１２は、映像データ上に重畳される第１の画像データを入力する。編集部１３は、第１の画像データと、映像データとを合成する。出力部１５は、第１の画像データと、映像データとを合成することによって得られた合成データを出力する。映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成可能に構成されている。入力信号が途絶した場合、映像生成部１１は、入力信号に代えて、第１の画像データから、映像データを生成することができる。第１の画像データは、例えば、自然災害の発生に関する緊急速報などの補助情報である。これにより、入力信号を受信することができない場合においても、補助情報を継続的に提供することができる。

本実施形態に係わる映像配信システムは、１または複数のユーザ端末に対して、補助情報を継続的に提供することができる。

（ハードウェア構成について）
前記実施形態１～４で説明した映像処理装置１０～４０の各構成要素は、機能単位のブロックを示している。これらの構成要素の一部又は全部は、例えば図１４に示すような情報処理装置９００により実現される。図１４は、情報処理装置９００のハードウェア構成の一例を示すブロック図である。

図１４に示すように、情報処理装置９００は、一例として、以下のような構成を含む。

・ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９０１
・ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９０２
・ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９０３
・ＲＡＭ９０３にロードされるプログラム９０４
・プログラム９０４を格納する記憶装置９０５
・記録媒体９０６の読み書きを行うドライブ装置９０７
・通信ネットワーク９０９と接続する通信インタフェース９０８
・データの入出力を行う入出力インタフェース９１０
・各構成要素を接続するバス９１１
前記実施形態１～４で説明した映像処理装置１０～４０の各構成要素は、これらの機能を実現するプログラム９０４をＣＰＵ９０１が読み込んで実行することで実現される。各構成要素の機能を実現するプログラム９０４は、例えば、予め記憶装置９０５やＲＯＭ９０２に格納されており、必要に応じてＣＰＵ９０１がＲＡＭ９０３にロードして実行される。なお、プログラム９０４は、通信ネットワーク９０９を介してＣＰＵ９０１に供給されてもよいし、予め記録媒体９０６に格納されており、ドライブ装置９０７が当該プログラムを読み出してＣＰＵ９０１に供給してもよい。

上記の構成によれば、前記実施形態１～４において説明した映像処理装置１０～４０が、ハードウェアとして実現される。したがって、前記実施形態１～４０において説明した効果と同様の効果を奏することができる。

本発明は、例えば、カメラによって撮影した映像データを、スマートフォンなどのユーザ端末に対して送信する映像処理装置または映像配信システムに利用することができる。

（付記）
本発明の一態様は、以下の付記のようにも記載されるが、以下に限定されない。

（付記１）
入力信号から映像データを生成する映像生成手段と、
前記映像データ上に重畳される第１の画像データを入力する画像入力手段と、
前記第１の画像データと、前記映像データとを合成する編集手段と、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する出力手段と
を備え、
前記映像生成手段は、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能に構成されている
映像処理装置。

（付記２）
前記画像入力手段は、第２の画像データをさらに入力し、
前記第２の画像データを、前記映像データの背景として入力する背景入力手段をさらに備えた
ことを特徴とする付記１に記載の映像処理装置。

（付記３）
前記背景入力手段は、１または複数の前記第２の画像データを選択的に組み合わせて、前記映像データの背景として入力する
ことを特徴とする付記２に記載の映像処理装置。

（付記４）
前記編集手段は、前記映像データおよび前記第１の画像データと、前記背景とを合成する
ことを特徴とする付記２または３に記載の映像処理装置。

（付記５）
前記映像データを、割り込み映像データとして入力する割込入力手段をさらに備えた
ことを特徴とする付記１から４のいずれか１項に記載の映像処理装置。

（付記６）
前記出力手段は、前記合成データに代えて、前記割り込み映像データを出力する
ことを特徴とする付記５に記載の映像処理装置。

（付記７）
前記編集手段は、１または複数の前記第１の画像データを選択的に組み合わせて、前記映像データと合成する
ことを特徴とする付記１から６のいずれか１項に記載の映像処理装置。

（付記８）
前記画像入力手段は、第３の画像データをさらに入力し、
前記出力手段は、前記第３の画像データと、前記合成データとを出力する
ことを特徴とする付記１から７のいずれか１項に記載の映像処理装置。

（付記９）
付記１から８のいずれか１項に記載の映像処理装置と、
前記映像処理装置から前記合成データを配信される１または複数のユーザ端末と、
１または複数の撮像装置と、
前記１または複数の撮像装置のそれぞれから取得した撮影データを、前記入力信号に変換し、前記入力信号を前記映像処理装置へ送信するエンコーダと、
を備えた映像配信システム。

（付記１０）
入力信号から映像データを生成し、
前記映像データ上に重畳される第１の画像データを入力し、
前記第１の画像データと、前記映像データとを合成し、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力し、
前記映像データの生成において、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能である
映像処理方法。

（付記１１）
入力信号から映像データを生成する処理と、
前記映像データ上に重畳される第１の画像データを入力する処理と、
前記第１の画像データと、前記映像データとを合成する処理と、
前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する処理とをコンピュータに実行させ、
前記映像データを生成する処理において、前記コンピュータが、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能であるように構成されている
プログラム。

１ 映像配信システム
１０ 映像処理装置
１１ 映像生成部
１２（１２´） 画像入力部
１３ 編集部
１５ 出力部
２０ 映像処理装置
２４ 背景入力部
３０ 映像処理装置
４０ 映像処理装置
４４ 割込入力部

Claims (10)

1. 入力信号から映像データを生成する映像生成手段と、
   前記映像データ上に重畳される第１の画像データを入力する画像入力手段と、
   前記第１の画像データと、前記映像データとを合成する編集手段と、
   前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する出力手段と
   を備え、
   前記映像生成手段は、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能に構成されている
   映像処理装置。
2. 前記画像入力手段は、第２の画像データをさらに入力し、
   前記第２の画像データを、前記映像データの背景として入力する背景入力手段をさらに備えた
   ことを特徴とする請求項１に記載の映像処理装置。
3. 前記背景入力手段は、１または複数の前記第２の画像データを選択的に組み合わせて、前記映像データの背景として入力する
   ことを特徴とする請求項２に記載の映像処理装置。
4. 前記編集手段は、前記映像データおよび前記第１の画像データと、前記背景とを合成する
   ことを特徴とする請求項２または３に記載の映像処理装置。
5. 前記映像データを、割り込み映像データとして入力する割込入力手段をさらに備えた
   ことを特徴とする請求項１から４のいずれか１項に記載の映像処理装置。
6. 前記出力手段は、前記合成データに代えて、前記割り込み映像データを出力する
   ことを特徴とする請求項５に記載の映像処理装置。
7. 前記編集手段は、１または複数の前記第１の画像データを選択的に組み合わせて、前記映像データと合成する
   ことを特徴とする請求項１から６のいずれか１項に記載の映像処理装置。
8. 請求項１から７のいずれか１項に記載の映像処理装置と、
   前記映像処理装置から前記合成データを配信される１または複数のユーザ端末と、
   １または複数の撮像装置と、
   前記１または複数の撮像装置のそれぞれから取得した撮影データを、前記入力信号に変換し、前記入力信号を前記映像処理装置へ送信するエンコーダと、
   を備えた映像配信システム。
9. 入力信号から映像データを生成し、
   前記映像データ上に重畳される第１の画像データを入力し、
   前記第１の画像データと、前記映像データとを合成し、
   前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力し、
   前記映像データの生成において、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能である
   映像処理方法。
10. 入力信号から映像データを生成する処理と、
    前記映像データ上に重畳される第１の画像データを入力する処理と、
    前記第１の画像データと、前記映像データとを合成する処理と、
    前記第１の画像データと、前記映像データとを合成することによって得られた合成データを出力する処理とをコンピュータに実行させ、
    前記映像データを生成する処理において、前記コンピュータが、前記入力信号に代えて、前記第１の画像データから、前記映像データを生成可能であるように構成されている
    プログラム。

Images