JPWO2019180869A1 - 画像伝送システム、画像送信装置及び画像受信装置 - Google Patents

Abstract

動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化するH.264エンコーダ１２と、符号化によりそれぞれ得られた多数の画面データにより構成される動画像データを無線により送受信する無線送信部１３及び無線受信部２２と、受信された動画像データに含まれた画面データの復号が不能となる予め定められた事象が発生したことを検出する無線受信部２２又はH.264デコーダ２３と、事象の発生が検出されたことに応じて挿入命令を無線により送受信する無線送受信部２６及び無線送受信部１６と、挿入命令が受信されたことに応じて予め定められた画面数に渡り、第２の方法を選択し、それ以降は第１の方法を選択するように前記H.264エンコーダ１２を制御する制御部１５と、を備える。

Description

この発明は、動画像を無線伝送するための画像伝送システム、画像送信装置及び画像受信装置に関する。

近年、スマートフォンや無線local area network（LAN）の利用の拡大により、無線通信のトラフィックが増加している。また、既設の無線通信システムに加え、無線を利用する新たな無線通信システムが次々に登場しており、無線周波数が逼迫した状況にある。これらのため、無線通信システムは、狭い周波数帯幅により所要のデータを伝送できることが望まれている。
一方で、動画像の伝送にあっては、高画質化が求められており、動画像データ自体のデータレートは増大する傾向にある。

これらの事情から、動画像の無線伝送のためには、高圧縮率な符号化が用いられる。そして動画像の符号化方式としては、international telecommunication union - telecommunication standardization sector (ITU-T)勧告のH.264に準拠する方式が知られている。この規格は、MPEG-4 part 10: advanced video cording (AVC)とも称される。
H.264では、group of picture (GOP)のうち、predictive-picture (Ｐピクチャ)及びbi-directionally predictive-picture (Ｂピクチャ)の割合を多くすることで、高画質を維持しながら、高圧縮率を実現している。

なお、イントラリフレッシュ方式も知られている。イントラリフレッシュ方式では、リフレッシュ領域をピクチャの行、列及びブロックのいずれかに周期的に割り当てる。これにより、intra-picture (Ｉピクチャ)を挿入した時における符号量不足による画質劣化を防ぎつつ、一定の符号量で画像のリフレッシュを実施する。

特開２００４−３２８０２２号公報

Ｂピクチャの割合を多くする場合、Ｂピクチャの増加に伴い、一定期間ピクチャの蓄積を必要とするため、符号化及び復号の際に必要となるバッファ量が増加する。つまり、確保すべきメモリ容量の増加により、ハードウェア規模の増大を来す。また、バッファへの書き込み及び読み出しのための処理量が増加することにより、処理遅延時間の増大を招いてしまう。
イントラリフレッシュ方式では、例えばＰピクチャにイントラリフレッシュ方式を適用し、Ｉピクチャを挿入しないでＰピクチャのみでコーデックを行うことが考えられる。この場合、無線システムのエラー発生時において、復号が可能な状態に復帰するまでにイントラリフレッシュの周期分の時間を要する。

この発明は上記事情に着目してなされたもので、その目的とするところは、復号が不能となる事象が受信側で発生した場合に、短時間のうちに復号が可能な状態に復帰することを可能とする画像伝送システム、画像送信装置及び画像受信装置を提供することにある。

上記目的を達成するためにこの発明の第１の態様は、画像送信装置と画像受信装置とを備えた画像伝送システムを、画像送信装置に設けられ、動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化する符号化手段と、画像送信装置に設けられ、符号化手段による符号化によりそれぞれ得られた多数の画面データにより構成される動画像データを無線送信する第１の送信手段と、画像受信装置に設けられ、第１の送信手段により送信された動画像データを受信する第１の受信手段と、画像受信装置に設けられ、第１の受信手段により受信された動画像データに含まれる画面データの復号が不能となる予め定められた事象が発生したことを検出する検出手段と、画像受信装置に設けられ、検出手段により事象の発生が検出されたことに応じて挿入命令を無線送信する第２の送信手段と、画像送信装置に設けられ、第２の送信手段により送信された挿入命令を受信する第２の受信手段と、画像送信装置に設けられ、第２の受信手段により挿入命令が受信されたことに応じて予め定められた画面数に渡り、第２の方法を選択し、それ以降は第２の方法を選択するように符号化手段を制御する制御手段と、を備えて構成した。

この発明の第２の態様は、第１の態様の検出手段を、動画像データに訂正不能な誤りが発生したこと、第１の受信手段により動画像データが受信されなくなったこと、動画像データを構成する画面データを復号して画面を再生する復号手段が起動されたこと、のうちの少なくとも１つを事象の発生として検出する、ものとした。

この発明の第３の態様は、第１の態様の制御手段を、第２の受信手段により挿入命令が受信されたことに応じて１画面についてのみ前記第２の方法を選択する、ものとした。

第１の態様によれば、通常は、動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法を選択することにより転送レートの低減を図られる。復号が不能となる事象が受信側で発生した場合には、画像送信装置から画像受信装置への挿入命令に応じて、同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法が選択される。これにより、第２の方法を適用して符号化されたデータが伝送され、短時間のうちに復号が可能な状態に復帰することが可能となる。

第２の態様によれば、誤りの発生時、データ伝送が正常に行えない障害の発生時、あるいは復号手段が起動された時のいずれかにおいて、第２の方法による符号化が適用される。従って、これらの状態において、短時間のうちに復号が可能な状態に復帰することが可能となる。

第３の態様によれば、復号が不能となる事象が発生したことに応じて第２の方法による符号化が適用されるのが１画面についてのみに限られる。従って、第２の方法を適用することによる平均的な転送レートの増加を最小限に抑えることができる。

本実施形態に係る画像伝送システムの構成を示すブロック図。 第１のケースにおける通信シーケンスを模式的に示す図。 第２のケースにおける通信シーケンスを模式的に示す図。 第３のケースにおける通信シーケンスを模式的に示す図。

以下、図面を参照してこの発明に係わる実施形態を説明する。なお本実施形態においては、撮像部で撮像された動画像を、撮影部から離れた位置に設置された表示部で表示するための画像伝送システムを例示して説明することとする。

（構成）
図１は本実施形態に係る画像伝送システム１００の構成を示すブロック図である。
画像伝送システム１００は、画像送信装置１及び画像受信装置２を含む。画像送信装置１は、動画像を無線送信する。画像受信装置２は、画像送信装置１により送信されて空中を介して伝送されてきた動画像を受信する。

画像送信装置１は、撮像部１１、H.264エンコーダ１２、無線送信部１３、アンテナ１４、制御部１５、無線送受信部１６、アンテナ１７及び操作部１８を含む。

撮像部１１は、光学系により形成される視野内の画像を１画面として、予め定められた画面レートで繰り返し撮像し、多数の画面のそれぞれに応じた映像信号を順次に出力する。撮像部１１としては、例えば既製のビデオカメラをそのまま用いることができる。映像信号は、典型的にはhigh definition serial digital interface (HD-SDI)又はhigh definition multimedia interface (HDMI)(登録商標)等の規格に準拠するものである。

H.264エンコーダ１２は、撮像部１１から入力される映像信号をH.264方式でエンコードし、Ｉピクチャ又はＰピクチャを表す画像データ（以下、Ｉピクチャデータ又はＰピクチャデータと称する。）を順次に得る。H.264エンコーダ１２は、制御部１５からの特別な指令が無い場合には、Ｐピクチャデータを得る。H.264エンコーダ１２は、制御部１５から後述する挿入命令を受けると、その後に入力される１画面分の映像信号に関してはＩピクチャデータを得る。H.264エンコーダ１２は、エンコードにより得られた画像データをtransport stream (TS)パケット化した上で、当該TSパケットを第１の無線部へと出力する。

Ｉピクチャは、１画面内の情報のみを用いて、前後の画面とは無関係に符号化することによって得られる画面である。Ｐピクチャは、符号化の対象となる画面を、その画面よりも過去の画面内の情報を参照して、符号化することによって得られる画面である。このため、１つのＩピクチャからは、１画面を復号することが可能である。つまり、Ｉピクチャデータを得るための符号化の方法は、同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法の一例である。またＰピクチャからは、過去の画面を参照することで１画面を復号することが可能である。つまり、Ｐピクチャデータを得るための符号化の方法は、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法の一例である。

無線送信部１３は、H.264エンコーダ１２から入力されたTSパケットに対し、エネルギー拡散（ランダマイズ）、インターリーブ、あるいは誤り訂正符号化等の処理を施す。無線送信部１３は、上記の処理後のTSパケットを変調して、予め定められた無線周波数帯域の無線伝送信号を得る。なお、無線送信部１３が用いる変調方式は、シングルキャリア及びマルチキャリアのいずれであるかを含めて、任意であってよい。無線送信部１３は、無線伝送信号を、無線送信に必要なレベルまで増幅した上で、アンテナ１４に供給する。
アンテナ１４は、無線送信部１３から供給された無線伝送信号を、電波として空中に放射する。これにより、無線伝送信号がアンテナ１４から無線送信される。

制御部１５は、H.264エンコーダ１２、無線送信部１３、無線送受信部１６及び操作部１８に接続されている。制御部１５には、無線送受信部１６及び操作部１８から各種の命令が入力される。制御部１５は、これら命令に応じて、画像送信装置１の動作に関わる各種設定を行う。当該設定の対象は例えば、H.264エンコーダ１２でのエンコードに関する伝送レート及びエンコード方式等、あるいは無線送信部１３で適用する変調方式、誤り訂正符号化方式、時間インターリーブ深さ及び周波数チャネル等である。制御部１５は、プロセッサを含んで構成されたコンピュータを主体として構成されて、情報処理プログラムに従った情報処理により各種の制御機能を実現するものであってもよいし、application-specific integrated circuit (ASIC)等を用いた論理的な処理回路を主体として構成され、論理処理により各種の制御機能を実現するものであってもよい。

無線送受信部１６は、アンテナ１７から入力される信号に対して復調などの予め定められた受信処理を施して、当該信号に含まれた命令を取得する。無線送受信部１６は、取得した命令を制御部１５に入力する。無線送受信部１６は、命令を正しく受信した場合には、画像受信装置２に対して受信応答を含んだ信号をアンテナ１７に供給する。

アンテナ１７は、空中を伝播して到来した電波を受けて誘起された電気的な信号を、無線送受信部１６へと入力する。アンテナ１７は、無線送受信部１６から供給された信号を、電波として空中に放射する。これにより、無線送受信部１６から供給された信号がアンテナ１７から無線送信される。

操作部１８は、操作者が命令を指定するための操作を受け付ける。操作部１８は、操作者が指定した命令を制御部１５に入力する。操作部１８は、操作者が各種の設定情報を指定するための操作を受け付け、当該設定情報を上記の命令に含める場合もある。

画像受信装置２は、アンテナ２１、無線受信部２２、H.264デコーダ２３、表示部２４、アンテナ２５、無線送受信部２６、制御部２７及び操作部２８を含む。

アンテナ２１は、空中を伝播して到来した電波を受けて誘起された電気的な信号を、無線受信部２２へと入力する。
無線受信部２２は、復調部２２１、デインターリーブ／復号部２２２及びパケット構造部２２３を含む。
アンテナ２１からの信号は、まず復調部２２１に入力される。復調部２２１は、無線送信部１３で適用された変調方式に応じた復調処理を行い、TSパケットを復調する。デインターリーブ／復号部２２２は、TSパケットに対して、誤り訂正復号、デインターリーブ、あるいはエネルギー逆拡散（デランダマイズ）等の処理を施し、エネルギー拡散、インターリーブ、あるいは誤り訂正符号化等の処理による影響を解除する。パケット構造部２２３は、元のTSパケットを復元する。
無線受信部２２は、デインターリーブ／復号部２２２での誤り訂正復号により誤りを訂正できなかった場合には、その旨を制御部２７に通知する。当該通知を、以下においては誤り通知と称する。

H.264デコーダ２３は、デパケット部２３１、ビデオデコーダ２３２及びビデオレンダ２３３を含む。無線受信部２２のパケット構造部２２３で復元されたTSパケットが、デパケット部２３１に入力される。デパケット部２３１は、TSパケットのパケット構造を解除し、画像データを抽出する。ビデオデコーダ２３２は、H.264/MPEG-4 AVCに基づく処理により映像信号をデコードする。ビデオレンダ２３３は、デコードされた映像信号を、表示部２４とのインターフェイスの規格に適合した映像信号に変換する。当該インターフェイスの規格は例えば、HD-SDI又はHDMI等である。

H.264デコーダ２３は、デパケット部２３１にて、TSパケット中のヘッダ同期バイトを予め定められた期間内に受信できない場合に、その旨を制御部２７に通知する。当該通知を、以下においては障害通知と称する。H.264デコーダ２３は、自らの動作状況を表すステータスを制御部２７に通知する。H.264デコーダ２３は少なくとも、起動され、表示部２４へと出力する映像信号をTSパケットから再生できる状態となった場合に、起動を表すステータスを制御部２７に通知する。当該通知を、以下においては起動通知と称する。

表示部２４は、ビデオレンダ２３３から入力される映像信号に応じて、動画像を表示する。
アンテナ２５は、空中を伝播して到来した電波を受けて誘起された電気的な信号を、無線送受信部２６へと入力する。アンテナ２５は、無線送受信部２６から供給された信号を、電波として空中に放射する。これにより、無線送受信部２６から供給された信号がアンテナ２５から無線送信される。

無線送受信部２６は、制御部２７から入力される命令に対して変調などの予め定められた送信処理を施して、命令を無線伝送するための信号を得る。無線送受信部２６は、アンテナ２５から入力される信号が受信応答を含む場合に、その受信応答に対応した命令が画像送信装置１に届いた旨を制御部２７に通知する。

制御部２７は、無線受信部２２、H.264デコーダ２３、無線送受信部２６及び操作部２８に接続されている。制御部２７には、無線送受信部２６及び操作部２８から各種の命令が入力される。制御部２７は、これら命令に応じて、画像受信装置２の動作に関わる各種設定を行う。当該設定の対象は例えば、無線受信部２２で適用する変調方式、誤り訂正符号化方式、時間インターリーブ深さ及び周波数チャネル等、あるいはH.264デコーダ２３でのデコードに関する伝送レート及びエンコード方式等である。制御部２７は、無線受信部２２からの誤り通知、あるいはH.264デコーダ２３からの障害通知又は起動通知のいずれかを受けた場合には、Ｉピクチャの挿入を指示するための命令（以下、挿入命令と称する）を無線送受信部２６へと出力する。制御部２７は、プロセッサを含んで構成されたコンピュータを主体として構成されて、情報処理プログラムに従った情報処理により各種の制御機能を実現するものであってもよいし、ASIC等を用いた論理的な処理回路を主体として構成され、論理処理により各種の制御機能を実現するものであってもよい。

操作部２８は、操作者が命令を指定するための操作を受け付ける。操作部２８は、操作者が指定した命令を制御部２７に入力する。操作部２８は、操作者が各種の設定情報を指定するための操作を受け付け、当該設定情報を上記の命令に含める場合もある。

（動作）
次に、以上のように構成された画像伝送システム１００の動作を説明する。
［第１のケース：撮像部１１、H.264エンコーダ１２、H.264デコーダ２３の順で起動される場合。］
図２は第１のケースにおける通信シーケンスを模式的に示す図である。なお、図２は上から下に向かって時間の経過を表すが、各イベントの図示における感覚は、実際のタイミングについての時間間隔を正確には表さない。つまり図２は、各イベントの大まかな順序を表す。

まず、撮像部１１が起動されることにより、イベントＥ１として示すように、撮像部１１からH.264エンコーダ１２への映像信号の入力が開始される。なお図２においては、１つの矢印が１画面分の映像信号を表す。しかしながら、このときにはH.264エンコーダ１２が停止しているために、H.264エンコーダ１２からは画像データは出力されない。

この状態から、H.264エンコーダ１２が起動し、エンコードが行われるようになると、イベントＥ２として示すように、H.264エンコーダ１２から画像データが出力されるようになる。なおこのときに制御部１５は、最初の画像データはＩピクチャデータとし、それ以降の画像データはいずれもＰピクチャデータとするようにH.264エンコーダ１２を制御する。かくして、最初のGOPは１画面分のＩピクチャを含むが、それ以降の各GOPは全てがＰピクチャのみで構成されることになる。
なお、図２においては、伝送される画面がＩピクチャ及びＰピクチャのいずれであるかを表しており、Ｉピクチャデータ及びＰピクチャデータがそのまま伝送されることを表している訳ではない。

H.264エンコーダ１２よりも撮像部１１が後に起動した場合には、制御部１５は、最初の１画面分の映像信号に応じた画像データをＩピクチャとし、それ以降の映像信号に応じた画像データをいずれもＰピクチャとするようにH.264エンコーダ１２を制御する。これにより、やはり最初のGOPは１画面分のＩピクチャを含むが、それ以降の各GOPは全てがＰピクチャのみで構成されることになる。

H.264エンコーダから出力される画像データは、無線送信部１３、アンテナ１４、アンテナ２１及び無線受信部２２を介して、H.264デコーダ２３へと入力される。しかしながら、この第１のケースでは、上記のＩピクチャデータが、イベントＥ３として示すようにH.264デコーダ２３へと入力されるときには、H.264デコーダ２３は停止状態にある。そしてイベントＥ４として示すようにH.264デコーダ２３が起動されても、H.264デコーダ２３へと入力されるのは、そのままではＰピクチャばかりとなり、H.264デコーダ２３は映像信号を復号できない。つまり、このケースは、動画像データの復号が不能となる予め定められた事象が発生した場合に相当する。

そこでH.264デコーダ２３は、起動されてデコードが可能な状態となると、イベントＥ５として示すように、制御部２７に対して起動通知を行う。制御部２７は、この起動通知を受けると、イベントＥ６として示すように、無線送受信部２６、アンテナ２５、アンテナ１７及び無線送受信部１６を介して、制御部１５に対して挿入命令を送る。

制御部１５は、挿入命令を受けると、イベントＥ７として示すように、H.264エンコーダ１２に対して挿入命令を送る。H.264エンコーダ１２は、挿入命令を受けると、イベントＥ８として示すように、Ｉピクチャデータを１画面分だけ出力する。そしてH.264エンコーダ１２は、それ以降の画像データはいずれもＰピクチャデータとする。かくして、挿入命令がなされた際に伝送中のGOP又はその次のGOPには１画面分のＩピクチャが含まれるが、それ以降の各GOPは全てがＰピクチャのみで構成されることになる。

なお、無線送受信部１６は、挿入命令を受信すると、受信応答を含んだ信号をアンテナ１７に供給する。これにより、当該受信応答が、アンテナ１７、アンテナ２５及び無線送受信部２６を介して制御部２７へと送られる。制御部２７は、挿入命令を送信してから予め定められた待機時間が経過するまでの間に受信応答が得られない場合には、挿入命令を再送信する。制御部２７は、挿入命令の再送信を無制限に行ってもよいし、制限回数又は制限時間として予め定められた限度内に限って挿入命令の再送信を行ってもよい。なお、待機時間、制限回数及び制限時間は、例えば画像受信装置２の設計者などにより適宜に定められる。

ところで、H.264エンコーダ１２が起動されるよりも前にH.264デコーダ２３が起動された場合には、H.264エンコーダ１２の起動後に最初に送信されるＩピクチャをH.264デコーダ２３で処理することができる。このため、制御部２７は、H.264デコーダ２３の起動後にH.264デコーダ２３に最初に入力された画像データをH.264デコーダが復号できない場合にのみ、挿入命令を送るようにしてもよい。

［第２のケース：Ｐピクチャに、伝送途中において訂正不能な誤りが発生した場合。］
図３は第２のケースにおける通信シーケンスを模式的に示す図である。なお、図３は、図２と同様に各イベントの大まかな順序を表す。

各GOPをＰピクチャのみで構成している状況において、イベントＥ１１として示すように、無線送信部１３から無線受信部２２へと伝送される間において、Ｐピウチャデータに訂正不能な誤りが発生している。つまり、このケースは、動画像データの復号が不能となる予め定められた事象が発生した場合に相当する。

この場合には、無線受信部２２は、デインターリーブ／復号部２２２での誤り訂正復号により誤りを訂正できないことに応じて、イベントＥ１２として示すように、制御部２７に対して誤り通知を行う。制御部２７は、この誤り通知を受けると、イベントＥ１３として示すように、無線送受信部２６、アンテナ２５、アンテナ１７及び無線送受信部１６を介して、制御部１５に対して挿入命令を送る。

制御部１５は、挿入命令を受けると、イベントＥ１４として示すように、H.264エンコーダ１２に対して挿入命令を送る。H.264エンコーダ１２は、挿入命令を受けると、イベントＥ１５として示すように、Ｉピクチャデータを１画面分だけ出力する。そしてH.264エンコーダ１２は、それ以降の画像データはいずれもＰピクチャデータとする。かくして、挿入命令がなされた際に伝送中のGOP又はその次のGOPには１画面分のＩピクチャが含まれるが、それ以降の各GOPは全てがＰピクチャのみで構成されることになる。

画像受信装置２では、誤りの残った画像データに基づいて再生される表示画面には、ブロックノイズが現れてしまい、このブロックノイズはＰピクチャのみからは解消することができない。しかしながら、上記のように送信される1画面分のＩピクチャを用いたデコード処理によってリフレッシュされ、以降はＰピクチャのみからブロックノイズの無い表示画面を再生できる。

［第３のケース：Ｐピクチャの伝送途中において伝送障害が発生し、無線受信部２２にて受信できなくなった場合。］
図４は第３のケースにおける通信シーケンスを模式的に示す図である。なお、図４は、図２と同様に各イベントの大まかな順序を表す。

各GOPをＰピクチャのみで構成している状況において、イベントＥ２１として示すように何らかの伝送障害が発生し、無線受信部２２にてＰピクチャデータを得られなくなっている。つまり、このケースは、動画像データの復号が不能となる予め定められた事象が発生した場合に相当する。

この場合には、無線受信部２２は、デパケット部２３１にて、TSパケット中のヘッダ同期バイトを予め定められた期間内に受信できなくなるので、イベントＥ２２として示すように、制御部２７に対して障害通知を行う。制御部２７は、この障害通知を受けると、イベントＥ２３として示すように、無線送受信部２６、アンテナ２５、アンテナ１７及び無線送受信部１６を介して、制御部１５に対して挿入命令を送る。

制御部１５は、挿入命令を受けると、イベントＥ２４として示すように、H.264エンコーダ１２に対して挿入命令を送る。H.264エンコーダ１２は、挿入命令を受けると、イベントＥ２５として示すように、Ｉピクチャデータを１画面分だけ出力する。そしてH.264エンコーダ１２は、それ以降の画像データはいずれもＰピクチャデータとする。かくして、挿入命令がなされた際に伝送中のGOP又はその次のGOPには１画面分のＩピクチャが含まれるが、それ以降の各GOPは全てがＰピクチャのみで構成されることになる。

（効果）
以上述べたように画像伝送システム１００によれば、動画像データの復号が不能となる予め定められた事象が画像受信装置２の側で発生した場合には、画像受信装置２からの命令に従って、画像送信装置１からＩピクチャが送信される。そして画像送信装置１は、その後には、Ｐピクチャを連続して送信する。

かくして、GOPは基本的にはＰピクチャのみで構成されることになる。これにより、エンコード及びデコードの際に用いるデータの量が少なくて済み、H.264エンコーダ１２及びH/264デコーダ２３に設けるべきバッファのサイズを小さくすることができ、処理遅延も発生しない。

また、Ｉピクチャに比べてデータ量が小さいＰピクチャの比率が高くなるため、平均的な転送レートを低く抑えることができる。

また、挿入命令に伴って画像送信装置１が送信するＩピクチャを１画面分のみとしているため、Ｉピクチャを送信することによる平均的な転送レートの増加を最小限に抑えることが可能である。

［その他の実施形態］
同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化するものであれば、H.264方式以外の符号化方式を適用してもよい。

動画像データの復号が不能となる予め定められた事象は、上記の実施形態に示した３つに限る必要はなく、これら３つの事象のうちのいずれかが含まれなくてもよいし、これら３つの事象とは別の事象が含まれてもよい。どのような事象を動画像データの復号が不能となる予め定められた事象とするかは、例えば画像受信装置の設計者などによって適宜に定められてよい。

H.264エンコーダ１２は、挿入命令を受けたことに応じて、複数画面分のＩピクチャを連続的に送信してもよい。

撮像部１１及び操作部１８の少なくともいずれか一方を、画像送信装置１には備えずに、別体のユニットを画像送信装置１に外付けしてもよい。この場合、撮像部１１としては、既存のビデオカメラなどを用いることができる。また操作部１８としては、パーソナルコンピュータやスマートフォンなどの既存の情報処理装置を用いることができる。

表示部２４及び操作部２８の少なくともいずれか一方を、画像受信装置２には備えずに、別体のユニットを画像受信装置２に外付けしてもよい。この場合、表示部２４としては、既存の汎用の表示デバイスなどを用いることができる。また操作部２８としては、パーソナルコンピュータやスマートフォンなどの既存の情報処理装置を用いることができる。

要するにこの発明は、上記各実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、各実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

Claims (5)

1. 画像送信装置と画像受信装置とを備えた画像伝送システムであって、
   前記画像送信装置に設けられ、動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化する符号化手段と、
   前記画像送信装置に設けられ、前記符号化手段による符号化によりそれぞれ得られた多数の画面データにより構成される動画像データを無線送信する第１の送信手段と、
   前記画像受信装置に設けられ、前記第１の送信手段により送信された前記動画像データを受信する第１の受信手段と、
   前記画像受信装置に設けられ、前記第１の受信手段により受信された動画像データに含まれる前記画面データの復号が不能となる予め定められた事象が発生したことを検出する検出手段と、
   前記画像受信装置に設けられ、前記検出手段により前記事象の発生が検出されたことに応じて挿入命令を無線送信する第２の送信手段と、
   前記画像送信装置に設けられ、前記第２の送信手段により送信された前記挿入命令を受信する第２の受信手段と、
   前記画像送信装置に設けられ、前記第２の受信手段により前記挿入命令が受信されたことに応じて予め定められた画面数に渡り、前記第２の方法を選択し、それ以降は前記第１の方法を選択するように前記符号化手段を制御する制御手段と、
   を具備した画像伝送システム。
2. 前記検出手段は、前記動画像データに訂正不能な誤りが発生したこと、前記第１の受信手段により前記動画像データが受信されなくなったこと、前記動画像データに含まれる前記画面データを復号して前記画面を再生する復号手段が起動されたこと、のうちの少なくとも１つを前記事象の発生として検出する、
   請求項１に記載の画像伝送システム。
3. 前記制御手段は、前記第２の受信手段により前記挿入命令が受信されたことに応じて１画面についてのみ前記第２の方法を選択する、
   請求項１に記載の画像伝送システム。
4. 無線伝送される動画像データを受信する第１の受信手段と、
   前記第１の受信手段により受信された動画像データに含まれる画面データの復号が不能となる予め定められた事象が発生したことを検出する検出手段と、
   前記検出手段により前記事象の発生が検出されたことに応じて挿入命令を無線送信する第２の送信手段と、
   を具備した画像受信装置とともに画像伝送システムを構成する画像送信装置であって、
   動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化する符号化手段と、
   前記符号化手段による符号化によりそれぞれ得られた多数の画面データにより構成されるものとして前記動画像データを無線送信する第１の送信手段と、
   前記第２の送信手段により送信された前記挿入命令を受信する第２の受信手段と、
   前記第２の受信手段により前記挿入命令が受信されたことに応じて予め定められた画面数に渡り、前記第２の方法を選択し、それ以降は前記第１の方法を選択するように前記符号化手段を制御する制御手段と、
   を具備した画像送信装置。
5. 動画像を構成する多数の画面を、同一の動画像内の別の画面を参照して復号可能に符号化する第１の方法及び同一の動画像内の別の画面を参照することなしに復号可能に符号化する第２の方法を選択的に用いて符号化する符号化手段と、
   前記符号化手段による符号化によりそれぞれ得られた多数の画面データにより構成される動画像データを無線送信する第１の送信手段と、
   無線伝送される挿入命令を受信する第２の受信手段と、
   前記第２の受信手段により前記挿入命令が受信されたことに応じて予め定められた画面数に渡り、前記第２の方法を選択し、それ以降は前記第１の方法を選択するように前記符号化手段を制御する制御手段と、
   を具備した画像送信装置とともに画像伝送システムを構成する画像受信装置であって、
   前記第１の送信手段により送信された前記動画像データを受信する第１の受信手段と、
   前記第１の受信手段により受信された動画像データに含まれる前記画面データの復号が不能となる予め定められた事象が発生したことを検出する検出手段と、
   前記検出手段により前記事象の発生が検出されたことに応じて前記挿入命令を送信する第２の送信手段と、
   を具備した画像受信装置。

Images