JPWO2004071089A1 - 画像データ配信制御方法及び装置とシステムならびにプログラム - Google Patents

Abstract

画像データ配信装置１０１は、同一画像の、同一の符号化方式、同一のフレーム構成で、圧縮率の異なる動画像データを、圧縮率により、もしくは画像フレームや画像ブロックの種別により、異なった、少なくとも１つ以上のセッションでマルチキャストもしくはブロードキャスト配信し、受信者に受信を許す画像品質に応じて、受信者に通知するセッション情報もしくは、配信データの秘匿化情報を制御する。画像データ受信装置１０８は、通知されたセッション情報もしくは、秘匿化情報を用いて、少なくとも１つ以上のセッションから正常に受信できた符号化データの中から、画質に基づき、符号化データを選択して復号化する。

Description

この発明は、符号化された動画像データを、少なくとも１つ以上のセッションで配信し、そのセッション情報を受信者へ通知することによって、受信者の受信画像品質を制御する方法、及び装置、システム、ならびにプログラムに関する。

近年、動画像データを効率良く伝送する方法として、フレーム間予測に基づいた高能率圧縮による符号化データを伝送する方法が多く用いられている。これらの方式では、時間的に前後のフレームから符号化画像を予測して得られた予測パラメータと予測残差画像データを符号化することで、時間方向の相関が高い動画像データの情報量を削減する。さらに、予測残差画像データを変換符号化や量子化により高能率に圧縮符号化することで、少ない伝送帯域での動画像データ伝送を可能としている。
その代表例としてはＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）−１、ＭＰＥＧ−２、ＭＰＥＧ−４などの圧縮符号化方式を用いる方法がある。これらの圧縮符号化方式では、入力画像フレームをマクロブロックとよばれる一定サイズの矩形領域単位で動き補償によるフレーム間予測を行い、得られた動きベクトルと、予測残差画像データに２次元離散コサイン変換及び量子化を施して圧縮した信号データを可変長符号化する。
このような動画像圧縮符号化情報を、パケット交換方式を利用したＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークへ配信する技術として、マルチキャストもしくはブロードキャスト配信を行う場合が増加している。この方式は、マルチキャストもしくはブロードキャストされたパケットを、複数のユーザが受信するため、ユーザ数の増加に対して、ネットワークのトラヒックが比例して増加することがなく、ユニキャスト方式よりも効率が良い配信をすることができる。
なお、画像データをストリーミング配信可能な第１のコンピュータとその画像データを受信する１以上の第２のコンピュータを有し、第１のコンピュータは第２のコンピュータからの回線状況通知メッセージに基づいて第２のコンピュータが接続されている回線の通信速度に最適な圧縮を施した画像データ（予め記憶している圧縮率の異なる画像データから抽出した画像データか、又はその都度最適な圧縮率で圧縮した画像データ）を送信する構成の画像配信システムが知られている（例えば特許文献１参照）。
また動画像マルチキャスト等のサービスにおいて、顧客が選択可能な品質としてグレード１やグレード２を設け、さらにコンテンツ単位での品質の選択を可能としたサービス品質動的制御方法と装置も知られている（例えば特許文献２参照）。
特開２００１−９２７５２号公報（第３−４頁、第１図、第６図） 特開２００２−２６１８００号公報（第１２頁、第１３図） Ｓｃｈｕｌｚｒｉｎｎｅ，Ｈ．，Ｃａｓｎｅｒ，Ｓ．，Ｆｒｅｄｅｒｉｃｋ，Ｒ．，ａｎｄＶ．Ｊａｃｏｂｓｏｎ，″ＲＴＰ：Ａ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ ｆｏｒ Ｒｅａｌ−Ｔｉｍｅ Ａｐｐｌｉｃａｔｉｏｎｓ″，ＲＦＣ１８８９，Ｊａｎｕａｒｙ１９９６、５．１ＲＴＰＦｉｘｅｄＨｅａｄｅｒＦｉｅｌｄｓ．インターネット＜ＵＲＬ／／ｗｗｗ．ｉｅｔｆ．ｏｒｇ／ｔｆｃ．ｈｔｍｌから入手できる ｆｔｐ：／／ｆｔｐ．ｒｆｃ−ｅｄｉｔｏｒ．ｏｒｇ／ｉｎ−ｎｏｔｅｓ／ｒｆｃ１８８９．ｔｘｔ＞

しかしながら、従来のマルチキャストもしくはブロードキャスト配信方式では、受信者の受信する動画像データの画質を送信側で制御するには、品質（画質）ごとの動画像データを配信しなくてはならず、配信効率が良いマルチキャストもしくはブロードキャスト方式のメリットを損ねてしまう、という問題がある。
また、マルチキャストもしくはブロードキャスト配信方式は、一般にパケットが欠落した場合に、受信者が欠落したデータの再送を要求する仕組みがなく、受信者（受信装置）は、画像データを正しく復号することができなくなる。受信側（受信装置）での対策として、正しくデコードできた時間的に前後のフレームの画像や同一フレーム内の周囲の画像データから、誤りをなるべく目立たなくするような画像データを生成するエラーコンシールメント手法があるが、復号化画像の乱れを除去することは不可能である。さらに、フレーム間予測を利用しているため、一度発生した画像の乱れが、後続フレームにも伝搬してしまう、という問題がある。
したがって、本発明は、上記の事情を考慮してなされたものであり、その第１の目的は、動画像のマルチキャストもしくはブロードキャスト配信において、トラヒックの増加を抑止低減しつつ、受信者の受信する動画像の画質を、送信側で可変に設定できるシステム、装置、方法、コンピュータプログラムを提供することにある。
また、本発明の第２の目的は、マルチキャストもしくはブロードキャスト配信方式の信頼性を高めるため、少なくとも１つ以上のセッションからの画像データを受信し、画質に応じてデータを選択し復号化することで、パケット損失発生時の画像の乱れを抑える配信システム、装置、方法、コンピュータプログラムを提供することにある。
また、本発明のさらに他の目的は、上記第１、第２の目的を達成するため、送受信者両方に加わる処理量を少なく抑えた配信システム、装置、方法、コンピュータプログラムを提供することにある。
本発明のさらに他の目的は、受信側からのフィードバック情報を送信側に送ることなく、上記第１、第２の目的を達成する配信システム、装置、方法、コンピュータプログラムを提供することにある。
また、本発明のさらに別の目的は、上記第１、第２の目的を達成するため、受信者に加わる消費電力量の増加を、少なく抑えることを可能とした方法、装置、システム、及びコンピュータプログラムを提供することにある。
前記目的の少なくとも１つを解決する本発明の１つのアスペクトに係る画像データ配信装置は、前記目的の少なくとも１つを解決する本発明の１つのアスペクトに係る画像データ配信装置は、同一画像の、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、圧縮率によって、マルチキャストもしくはブロードキャスト配信するセッションを選択する手段と、を備えている。本発明において、同一画像の、圧縮率の異なる画像符号化データは、符号化方式及びフレーム構成が、同一とされる。その各送信単位（例えばＭＰＥＧ−４符号化方式のビデオパケット）は、それぞれ同一フレームの同一部位が符号化されたデータとされる。本発明は、同一画像の、圧縮率の異なる画像符号化データを配信する手段と、圧縮率によって配信するセッションを選択する手段と、を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される。
本発明の他のアスペクトに係る画像データ配信装置は、同一画像の、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、受信者に応じて通知するセッション情報を変えることで、受信者側での受信画像品質を制御する手段と、を備えている。本発明において、同一画像の、圧縮率の異なる画像符号化データは、符号化方式及びフレーム構成が同一で、その各送信単位（例えばＭＰＥＧ−４符号化方式のビデオパケット）は、それぞれ同一フレームの同一部位が符号化されたデータとされる。
本発明の他のアスペクトに係る画像データ配信装置は、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、圧縮率によって選択された配信セッションごとに画像符号化データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、を備えている。本発明において、同一画像の、圧縮率の異なる画像符号化データは、符号化方式及びフレーム構成が同一とされる。その各送信単位（例えばＭＰＥＧ−４符号化方式のビデオパケット）は、それぞれ同一フレームの同一部位が符号化されたデータである。
本発明の他のアスペクトに係る画像データ配信装置は、画像符号化データをマルチキャストもしくはブロードキャスト配信する手段と、画像フレームや画像ブロックの種別によって、配信するセッションを選択する手段と、を備えている。
本発明の他のアスペクトに係る画像データ配信装置は、画像フレームや画像ブロックの種別の異なった画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、受信者に応じて通知するセッション情報を変えることで、受信者側での受信品質を制御する手段と、を備えている。
本発明の他のアスペクトに係る画像データ配信装置は、画像符号化データをマルチキャストもしくはブロードキャスト配信する手段と、画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、を備えている。
本発明の他のアスペクトに係る画像データ配信装置は、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報の異なった画像符号化データを、少なくとも１つ以上のセッションでマルチキャストもしくはブロードキャスト配信する手段と、受信者に応じて通知する秘匿化に関する情報を変えることで、受信者側での受信品質を制御する手段と、を備えている。
本発明の別のアスペクトに係る画像データ受信装置は、画像データ配信装置より通知されるセッション情報を受信する手段と、前記セッション情報をもとに、画像データ配信装置より配信される画像符号化データを受信し、正常に受信できた符号化データの中から、画質（圧縮率）に基づき、画像符号化データを選択する手段と、選択された画像符号化データを復号化する手段と、を備えている。本発明において、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段と、をさらに備えた構成としてもよい。
本発明の別のアスペクトに係る画像データ受信装置は、画像データ配信装置より通知されたデータの秘匿化に関する情報を受信する手段と、前記秘匿化に関する情報をもとに、画像データ配信装置より受信した秘匿化された画像符号化データを復元し、正常に復元できた画像符号化データの中から、画質（圧縮率）に基づき、画像符号化データを選択する手段と、選択された画像符号化データを復号化する手段と、を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
上記目的の少なくとも１つを達成する本発明の第１のアスペクトに係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
同一画像の、符号化方式及びフレーム構成が同一であり、圧縮率の異なる複数の画像符号化データを、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像品質等）を通知する手段と、
を備え、
前記画像データ受信装置は、
前記画像データ配信装置から通知されたセッション情報をもとに、少なくとも１つのセッションにより配信された画像データを受信する手段と、
受信した画像符号化データのうち、画質（圧縮率）に基づきデータを選択し、１つの画像符号化データに再構成する手段と、
再構成された画像符号化データを復号化する手段と、
を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の別のアスペクト（第２のアスペクト）に係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
動画像データのＩピクチャ及びＰピクチャ、又は、動画像データのＩピクチャ、Ｐピクチャ、及びＢピクチャの符号化データを、複数の異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む、少なくとも１つのセッション情報を通知する手段と、
を備え、
前記画像データ受信装置は、
前記画像データ配信装置から通知されたセッション情報をもとに、少なくとも１つのセッションにより配信された動画像データを受信する手段と、
受信した動画像データを、セッション情報をもとに、１つの動画像データに再構成する手段と、
再構成された動画像データを復号化する手段と、
を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の別のアスペクト（第３のアスペクト）に係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
動画像データと、動画像データの当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、それぞれ異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む、少なくとも１つのセッション情報を通知する手段と、
を備え、
前記画像データ受信装置は、
前記画像データ配信装置より通知されたセッション情報をもとに、少なくとも１つのセッションにより配信されたデータを受信する手段と、
受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成する手段と、
再構成された動画像データを復号化する手段と、
を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の別のアスペクト（第４のアスペクト）に係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
動画像データのＩピクチャとＰピクチャ、又は、Ｉピクチャ、ＰピクチャとＢピクチャ、及び動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む少なくとも１つのセッション情報を通知する手段と、
を備え、
前記画像データ受信装置は、通知されたセッション情報のうち、少なくとも１つのセッションにより配信されたデータを受信する手段と、
受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成する手段と、
再構成された動画像データを復号化する手段と、
を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の別のアスペクト（第５のアスペクト）に係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
同一の画像の、圧縮率の異なる複数の動画像データそれぞれのＩピクチャ、Ｐピクチャ、又は、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの符号化データを、複数の異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む、少なくとも１つのセッション情報を通知する手段と、
を備え、
前記画像データ受信装置は、
前記画像データ配信装置から通知されたセッション情報のうち、少なくとも１つのセッションにより配信されたデータを受信する手段と、
受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成する手段と、
再構成された動画像データを復号化する手段と、を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の別のアスペクト（第６のアスペクト）に係る画像データ配信システムは、画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
前記画像データ配信装置は、
同一の画像の、符号化方式、フレーム構成が同一であり、圧縮率の異なる複数の動画像データそれぞれのＩピクチャとＰピクチャ、又は、ＩピクチャとＰピクチャとＢピクチャ、及び、動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、
前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む、少なくとも１つのセッション情報を通知する手段と、
を備え、
前記画像データ受信装置は、
前記画像データ配信装置から通知されたセッション情報のうち、少なくとも１つのセッションにより配信されたデータを受信する手段と、
受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成する手段と、
再構成された動画像データを復号化する手段と、
を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明の他のアスペクト（第７のアスペクト）に係る画像データ配信システムは、前記画像データ配信装置が、配信するセッションごとに配信データの秘匿の有無、秘匿の有の場合には、秘匿方法及び／又は秘匿の強度を含む情報を設定する手段と、
秘匿に関する設定情報を受信者に通知する手段と、
を備え、
前記画像データ受信装置が、前記画像データ配信装置から通知された秘匿情報を受信し、前記秘匿情報に基づき、秘匿化された受信動画像データを復元する手段を備えている。本発明においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
本発明によれば、受信側へ通知するセッション情報、もしくは秘匿化情報を受信者によって設定することにより、マルチキャストもしくはブロードキャスト配信する画像データを変化させずに、受信者の受信できる画像品質を、送信側で制御することができる、という効果を奏する。
また、本発明によれば、ネットワーク資源を有効に利用するマルチキャストもしくはブロードキャスト配信の利点を保ち、配信データ量の増加を抑制しつつ、送信側で受信者の受信する画像品質を複数段階に設定することができる、という効果を奏する。
また、本発明によれば、伝送路でのデータ誤り、欠落に対して、耐性のある配信を可能とし、ユニキャスト方式に対して信頼性が低いとされるマルチキャストもしくはブロードキャスト方式の信頼性を高めることができる、という効果を奏する。
また、本発明によれば、上記の２つの効果を得るため、送受信者双方に必要となる処理量の増加を、小さく抑えることができるという効果を奏する。
また、本発明によれば、上記の２つの効果を得るため、受信者に必要となる消費電力量の増加を、小さく抑えることができる。
本発明によれば、受信側から送信側へフィードバック情報を送ることなく、これらの効果を得ることができる。

第１図は、本発明の第１の実施例の構成を示す図である。
第２図は、本発明の第２の実施例の構成を示す図である。
第３図は、本発明の第３の実施例の構成を示す図である。
第４図は、本発明の第４の実施例の構成を示す図である。
第５図は、本発明の第５の実施例の構成を示す図である。
第６図は、本発明の第６の実施例の構成を示す図である。
第７図は、本発明の第１の実施例の変形例を示す図である。
第８図は、本発明におけるパケット受信分離部の一実施例の構成を示す図である。
第９図は、本発明の第２の実施例の変形例を示す図である。
第１０図は、本発明の第３の実施例の変形例を示す図である。
第１１図は、本発明の第４の実施例の変形例を示す図である。
第１２図は、本発明の第５の実施例の変形例を示す図である。
第１３図は、本発明の第６の実施例の変形例を示す図である。

本発明をより詳細に説述するために、添付図面にしたがって、本発明の実施の形態について以下に説明する。
［発明の第１の実施の形態］
本発明の第１の実施の形態において、画像データ配信装置は、同一の画像、同一の符号化方式、同一のフレーム構成で、圧縮率の異なる複数の動画像データを、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像品質等）を通知する手段と、を備えている。本発明の第１の実施の形態においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
画像データ受信装置は、画像データ配信装置側より通知されたセッション情報のうち、少なくとも１つのセッションにより配信されたデータを受信する手段と、受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成して復号化する手段と、を備えている。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者（画像データ受信装置）に通知する手段と、を備えている。
画像データ受信装置は、画像データ配信装置から通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段を備えている。
［第１の実施例］
次に、本発明の第１の実施例を図面を参照して説明する。第１図は、本発明の第１の実施例の構成を示している。第１図に示すように、画像符号化データを配信する画像データ配信装置１０１と、画像データ受信装置１０８と、画像符号化データを伝送するための伝送路１０７を備えている。本実施例では、画像データ配信装置１０１は、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路１０７に接続されており、ＵＤＰ（Ｕｓｅｒ Ｄａｔａｇｒａｍ Ｐｒｏｔｏｃｏｌ）／ＩＰを用いて画像符号化データを配信し、画像データ受信装置１０８は、ＩＰ網に接続されるクライアント端末とする。なお、本実施例では、あくまで説明の簡単のため、配信する画像データ数を「２」として説明するが、本発明において配信する画像データ数が２に限定されるものでないことは勿論である。
画像データ配信装置１０１は、配信情報送信部１０２と、セッション情報管理部１０３と、画像データ蓄積／生成部１０４と、画像符号化データ１送信部１０５と、画像符号化データ２送信部１０６と、を備えている。
画像データ受信装置１０８は、セッション情報受信部１０９と、画像符号化データ１受信部１１０及び画像符号化データ２受信部１１１と、符号化データ再構成部１１２と、デコーダ１１３を備えている。以下、画像データ配信装置１０１、画像データ受信装置１０８の動作について順に説明する。
画像データ配信装置１０１において、画像データ蓄積／生成部１０４は、
・あらかじめ記憶装置（不図示）に蓄積されている画像データ、もしくは、
・リアルタイムで符号化して生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像データ、
をセッション情報管理部１０３で設定された情報に基づいて、複数の画像符号化データ送信部、図１の例では、画像符号化データ１送信部１０５及び画像符号化データ２送信部１０６から、伝送路１０７経由で、送信する。
セッション情報管理部１０３は、受信者（画像データ受信装置）に対して、配信を許すセッションの情報を管理し、受信者に応じて、通知すべきセッション情報、及び、画像品質等の画像符号化に関する情報を、配信情報送信部１０２に供給し、配信情報送信部１０２は、これらの情報を、画像データ受信装置１０８に通知する。
画像符号化データ１送信部１０５及び画像符号化データ２送信部１０６は、画像データ受信装置１０８において、重複する複数の画像データが受信された場合に、データを選択することができるように、また、受信したデータの順序が入れ替わっている場合に、正しく並び替えられるように、また、データの欠落を認識できるように、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報（例えばＲＴＰヘッダ情報）を付加する機能を有する（例えばＲＦＣ１８８９、前記非特許文献１参照）。なお、画像符号化データ１及び画像符号化データ２の各送信単位は、それぞれ同一画像の同一フレームの同一部位を符号化したデータとし、これに同一のＲＴＰシーケンス番号を付与し、さらにいずれの画像符号化データかを示す、ペイロードタイプ、及び／又は、ＳＳＲＣ（Ｓｙｎｃｈｒｏｎｉｚａｔｉｏｎ Ｓｏｕｒｃｅ ｉｄｅｎｔｉｆｉｅｒ）、及び／又は、ＣＳＲＣ（Ｃｏｎｔｒｉｂｕｔｉｎｇ Ｓｏｕｒｃｅ ｉｄｅｎｔｉｆｉｅｒ）を付与してもよい。
この際、画像符号化データ１と画像符号化データ２を、例えば伝送路１０７でのデータの誤り、もしくは損失のバースト長より長くなるような時間差を設けて送信することで、伝送路での画像符号化データが両方とも誤り、もしくは損失の影響を受ける可能性が低下し、画像データ受信装置１０８がこの時間差以上の受信バッファを備えている場合、より安定した画像データの配信をすることができる。
送信の時間差については、セッション情報管理部１０３で管理し、配信情報送信部１０２から画像データ受信装置１０８に通知するか、あらかじめ画像データ配信装置１０１及び画像データ受信装置１０８間で定めておき、その時間差に基づいて画像データ受信装置１０８が受信バッファ量を設定してもよい。
またセッション情報管理部１０３に、配信画像データを秘匿化する設定がなされている場合には、画像符号化データ１送信部１０５及び画像符号化データ２送信部１０６は、該設定に応じた秘匿化処理を行う。そして、秘匿の有無、秘匿方法などの秘匿化に関する情報を、配信情報送信部１０２から画像データ受信装置１０８に通知する。情報の秘匿化手法に関しては、公知の各種手法が用いられる。例えば、ＲＴＰパケットのペイロード部に対する暗号化として、共通鍵方式（例えばＤＥＳ（Ｄａｔａ Ｅｎｃｒｙｐｔｉｏｎ Ｓｔａｎｄａｒｄ））あるいは公開鍵方式（例えばＲＡＳ暗号）等や、画像そのもののスクランブル（例えばラインローテーション方式）が用いられる。
画像データ配信装置１０１からのセッション情報、画像の符号化に関する情報、配信データが秘匿化されている場合には、秘匿化に関する情報を、セッション情報受信部１０９が受信し、この情報を基に、画像符号化データ１受信部１１０及び画像符号化データ２受信部１１１で、セッション受信ポートを開き、伝送路１０７からの画像データを受信する。
受信した画像データが秘匿化されている場合には、セッション情報受信部１０９で得た情報により、元の画像データを復元する。
さらに、セッション情報管理部１０３は、画像符号化データ１及び画像符号化データ２の符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部１０２により画像データ受信装置１０８へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置１０１及び画像データ受信装置１０８間で設定しておいてもよい。
画像符号化データ１受信部１１０及び画像符号化データ２受信部１１１で画像符号化データがいずれも受信できた場合、重複する画像データは、符号化データ再構成部１１２にて、ＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部１０９で受信された情報を基に、画質に基づいてデータを選択して、１つの画像データに再構成し、デコーダ１１３へ出力する。
デコーダ１１３は、符号化データ再構成部１１２で選択された１つの画像データだけを復号化すればよい。このため、デコーダ１１３の復号化処理の負担は増加しない。
送信側（画像データ配信装置）で、受信者Ａ（の画像データ受信装置）と受信者Ｂ（の画像データ受信装置）のそれぞれにおける受信画像データの品質を制御する場合、例えば以下の手法を採ることができる。
画像符号化データ１と画像符号化データ２の品質（圧縮率）を変え、例えば画像符号化データ１をより高品質（低圧縮率）とする。
受信者Ａへは高品質な画像の受信を許し、受信者Ｂへは低品質の画像の受信のみ許す場合、受信者Ａの画像データ受信装置１０８には画像符号化データ１及び画像符号化データ２の両方のセッション情報を、受信者Ｂの画像データ受信装置１０８へは画像符号化データ２のセッション情報のみを通知する。
受信者Ａの画像データ受信装置１０８では、通知された画像符号化データ１及び画像符号化データ２の両方のセッション情報をもとに、画像符号化データ１の高品質な画像データと、画像符号化データ２の低品質な画像データの両方を受信することができ、万が一、画像符号化データ１の画像データに誤りや欠落があったとしても、当該箇所を画像符号化データ２の画像データで補完することができる。
一方、受信者Ｂの画像データ受信装置１０８では、通知されたセッション情報にしたがって、画像符号化データ２の低品質な画像データしか受信できない。以上により、両受信者Ａ、Ｂで、受信画像の画質に違いができる。
さらに、同様の画像符号化データ１及び画像符号化データ２の配信を行う際、画像符号化データ１をユニキャスト方式で、例えば受信者Ａにのみ送信し、画像符号化データ２をマルチキャスト又はブロードキャスト方式で、受信者Ａ及び受信者Ｂの双方に送信した場合にも、同様の画質の違いが生じる。
また、受信者Ａの画像データ受信装置１０８には、画像符号化データ１及び画像符号化データ２の両方のセッション情報を、受信者Ｂの画像データ受信装置１０８には、画像符号化データ１のセッション情報のみを通知した場合、画像符号化データ１の画像データが、伝送路で誤りや欠落の影響を受けなければ、受信者Ａと受信者Ｂは、同等の画質を得ることができる。一方、画像データに誤りや欠落が発生した場合、受信者Ａは、当該箇所を画像符号化データ２の画像データで補完することができるが、受信者Ｂはできない。こうして、両受信者Ａ、Ｂで画質の安定度の違いが生じる。
なお、もし画像符号化データ１と画像符号化データ２の品質が同じであるか、あるいは画像符号化データ１を、画像符号化データ１送信部１０５及び画像符号化データ２送信部１０６の双方から送信すれば、伝送路での誤りや欠落の影響があった場合の、画像データ受信装置での再生画像品質の劣化を最小限に抑えることが可能となる。
加えて、画像符号化データ２をユニキャスト方式で、例えば受信者Ａにのみ送信し、画像符号化データ１を、マルチキャスト又はブロードキャスト方式で、受信者Ａ及び受信者Ｂの双方に送信した場合も、同様の画質の安定度の違いが生じる。この場合、ユニキャスト方式により送信する画像符号化データの帯域がより小さくて済むため、トラヒックの増加を抑制するには、より望ましい。
また、画像符号化データ１及び画像符号化データ２について同様にして品質（圧縮率）の設定を行い、例えば画像符号化データ１のみを秘匿化し、受信者Ａの画像データ受信装置１０８には秘匿化された画像符号化データ１を元に戻す方法を通知し、受信者Ｂの画像データ受信装置１０８には通知しない、あるいは画像符号化データ１、画像符号化データ２とも秘匿化し、受信者Ａの画像データ受信装置１０８には両方の画像符号化データを元に戻すための情報を通知し、受信者Ｂの画像データ受信装置１０８には画像符号化データ２を元に戻すための情報のみを通知することによっても、同様の効果を得ることができる。
本実施例において、画像データ受信装置１０８が、バッテリー／電池で動作する場合のように、利用可能電力に制限のある環境で使用される場合、及び／又は、受信環境が良好で、画像符号化データ１を、ほとんど誤りや欠落なく受信できる場合、画像符号化データ２の受信を停止し、装置の使用時間をできるだけ長くするようにしてもよい。逆に、画像データ受信装置１０８に大容量バッテリー、又はＡＣ電源が接続された場合には、画像符号化データ１、画像符号化データ２とも受信するようにしてもよい。このように、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。また、本実施例において、この受信画像データ数を、受信者が画像データ受信装置１０８に設定できるようにしてもよい。
なお、伝送路を複数とし、画像符号化データ１及び画像符号化データ２及び、セッション情報を、異なった伝送路によって伝送する構成としてもよいことは勿論である。
さらに、特定の画像符号化データを秘匿化して配信する場合、第７図に示すように、画像データ配信装置１０１において、画像符号化データ１、２の送信部１０５、１０６の出力を、パケット多重送信部７０１により、１つのセッションに多重化し、送信パケットに画像データのシーケンス、及び／又は、圧縮率に関する識別情報を付加して送信する構成としてもよい。画像データ受信装置１０８のパケット受信分離部７０２により、受信パケットを符号化データと識別情報に分離し、符号化データ再構成部７０３で、識別情報から得たシーケンス、圧縮率に関する情報により、データの重複を判断し、重複があった場合には、圧縮率に関する情報に基づいて選択し、１つの符号化データに再構成するようにしてもよい。かかる構成によっても、上記実施例と同様の効果を得ることができる。識別情報は、例えばＲＴＰヘッダのシーケンス番号、ペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する情報を付加する。
第８図は、第７図のパケット受信分離部７０２の構成の一例を示す図である。第８図を参照すると、パケット受信分離部８００（第７図のパケット受信分離部７０２に対応する）は、誤り検出部８０１とデータ抽出部８０２を備え、データ抽出部８０２は、識別情報抽出部８０３と、符号化データ抽出部８０４を備えている。パケット受信分離部８００では、受信したパケットのデータ誤りを、誤り検出部８０１により検出し、誤りが検出された場合には、受信パケットを破棄する。これは、本実施例では、ＵＤＰのチェックサムによる誤り検出に相当する。次に、データ抽出部８０２の、識別情報抽出部８０３及び符号化データ抽出部８０４で、識別情報と符号化データが抽出される。前者は、例えば、ＲＴＰヘッダのシーケンス番号やペイロードタイプ、ＳＳＲＣや、ＣＳＲＣに相当する。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
画像データ配信装置１０１における、配信情報送信部１０２と、セッション情報管理部１０３と、画像データ蓄積／生成部１０４と、画像符号化データ１送信部１０５と、画像符号化データ２送信部１０６と、パケット多重送信部７０１について、画像データ配信装置１０１を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。画像データ受信装置１０８における、セッション情報受信部１０９と、画像符号化データ１受信部１１０及び画像符号化データ２受信部１１１と、符号化データ再構成部１１２と、デコーダ１１３と、パケット受信分離部７０２、符号化データ再構成部７０３について、画像データ配信装置１０１を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。
［発明の第２の実施の形態］
本発明の第２の実施の形態において、画像データ配信装置は、動画像データのＩピクチャ（Ｉｎｔｒａ−Ｐｉｃｔｕｒｅ：フレーム内符号化画像）、Ｐピクチャ（Ｐｒｅｄｉｃｔｉｖｅ−Ｐｉｃｔｕｒｅ：フレーム間順方向予測画像）、及び動画像の符号化に用いた符号化方式に存在する場合はＢピクチャ（Ｂｉｄｉｒｅｃｔｉｏｎａｌｌｙ ｐｒｅｄｉｃｔｉｖｅ−Ｐｉｃｔｕｒｅ：双方向予測符号化画像）を、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、ピクチャ種別等）を通知する手段と、を備えている。本発明の第２の実施の形態においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段、をさらに備えた構成としてもよい。
画像データ受信装置は、通知されたセッション情報（マルチキャストアドレス、ポート番号、ピクチャ種別等）のうち、少なくとも１つのセッションによりマルチキャストもしくはブロードキャスト配信されたデータを受信する手段と、受信した動画像データを１つの動画像データに再構成して復号化する手段と、を備えている。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者に通知する手段と、を備えている。
画像データ受信装置は、通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段と、を備えている。
［第２の実施例］
本発明の第２の実施例について図面を参照して説明する。第２図は、本発明の第２の実施例を示している。第２図に示すように、画像データ配信装置２０１と、画像データ受信装置２０９及び、動画像符号化データを伝送するための伝送路２０８を備えている。本実施例では、画像データ配信装置２０１はＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路２０８に接続されており、ＵＤＰ／ＩＰを用いて画像符号化データを配信し、画像データ受信装置２０９は、ＩＰ網に接続されるクライアント端末であるとする。なお、ここでは簡単のため、配信する画像データの符号化方式には、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの３つのフレーム種別が存在するものとして説明する。
画像データ配信装置２０１は、配信情報送信部２０２と、セッション情報管理部２０３と、画像データ蓄積／生成部２０４と、Ｉピクチャ符号化データ送信部２０５と、Ｐピクチャ符号化データ送信部２０６と、Ｂピクチャ符号化データ送信部２０７を備えている。
画像データ受信装置２０９は、セッション情報受信部２１０と、Ｉピクチャ符号化データ受信部２１１、Ｐピクチャ符号化データ受信部２１２、Ｂピクチャ符号化データ受信部２１３と、符号化データ再構成部２１４と、デコーダ２１５を備えている。以下、画像データ配信装置２０１、画像データ受信装置２０９の動作を順に説明する。
画像データ配信装置２０１において、画像データ蓄積／生成部２０４で、
・あらかじめ蓄積された画像データ、もしくは、
・リアルタイムで生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像データ、
をセッション情報管理部２０３で設定された情報に基づいて、Ｉピクチャ符号化データ送信部２０５、Ｐピクチャ符号化データ送信部２０６、Ｂピクチャ符号化データ送信部２０７により、伝送路２０８経由で送信する。
また、セッション情報管理部２０３で、受信者に対して配信を許すセッションの情報を管理し、受信者に応じて通知すべきセッション情報、及び、ピクチャ種別等の画像符号化に関する情報を、配信情報送信部２０２から、画像データ受信装置２０９に通知する。
Ｉピクチャ符号化データ送信部２０５、Ｐピクチャ符号化データ送信部２０６、及びＢピクチャ符号化データ送信部２０７は、画像データ受信装置２０９で、受信したデータの順序が入れ替わっていても、正しく並び替えられるよう、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報を付加する機能を有する。
セッション情報管理部２０３に、配信画像データを秘匿化する設定がされている場合、Ｉピクチャ符号化データ送信部２０５、Ｐピクチャ符号化データ送信部２０６、及びＢピクチャ符号化データ送信部２０７では、設定に応じて秘匿化処理を行い、秘匿の有無、秘匿の方法などの秘匿化に関する情報を配信情報送信部２０２から画像データ受信装置２０９に通知する。
画像データ配信装置２０１からのセッション情報、画像の符号化に関する情報、及び、配信データが秘匿化されている場合は、秘匿化に関する情報を、セッション情報受信部２１０で受信し、この情報を基に、Ｉピクチャ符号化データ受信部２１１、Ｐピクチャ符号化データ受信部２１２、及びＢピクチャ符号化データ受信部２１３において、セッション受信ポートを開き、伝送路２０８からの画像データを受信する。受信した画像データが秘匿化されている場合には、セッション情報受信部２１０で得た情報により、Ｉピクチャ符号化データ受信部２１１、Ｐピクチャ符号化データ受信部２１２、及びＢピクチャ符号化データ受信部２１３において、元の画像データを復元する。
なお、セッション情報管理部２０３は、画像符号化データの符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部２０２により画像データ受信装置２０９へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置２０１及び画像データ受信装置２０９間で設定しておいてもよい。
受信したＩピクチャ、Ｐピクチャ、Ｂピクチャは、符号化データ再構成部２１４で、ＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部２１０で受信された情報を基に、１つの動画像ストリームに再構成し、デコーダ２１５へ出力する。
送信側で、受信者Ａと受信者Ｂと受信者Ｃのそれぞれの画像データ受信装置における受信画像データの品質を制御するには、受信者Ａの画像データ受信装置へは、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの符号化データを送信する、すべてのセッションの情報を通知する。
受信者Ｂの画像データ受信装置へは、Ｉピクチャ、Ｐピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｃの画像データ受信装置へは、Ｉピクチャの符号化データを送信するセッションの情報のみを通知する。
受信者Ａの画像データ受信装置は、すべてのピクチャの符号化データを受信できるので、最も画質の高い（円滑な動きの）動画像を受信することができ、受信者Ｂの画像データ受信装置は、これに次ぐ画質の動画像を受信することができ、受信者Ｃの画像データ受信装置は、Ｉピクチャのみの最も画質の低い動画像の受信しかできない。
以上により、各受信者（画像データ受信装置）で受信画像の画質に違いができる。
さらに、本実施例においては、特定のピクチャの符号化データを、特定の受信者にのみユニキャスト方式で送信することで、受信者による画質の違いを制御することも可能である。例えば、Ｉピクチャ符号化データをマルチキャスト又はブロードキャスト方式で送信し、Ｐピクチャ符号化データを受信者Ａ及び受信者Ｂにユニキャスト方式で送信し、Ｂピクチャ符号化データを、受信者Ａにのみ、ユニキャスト方式で送信すれば、同様の効果を得ることができる。
また、例えばＰピクチャ、Ｂピクチャの符号化データのみを秘匿化し、受信者Ａの画像データ受信装置には秘匿化されたＰピクチャ、Ｂピクチャの符号化データを元に戻すための情報（例えば共通鍵等）を通知し、受信者Ｂの画像データ受信装置にはＰピクチャの符号化データを元に戻すための情報のみを通知し、受信者Ｃの画像データ受信装置には秘匿化に関する情報を通知しなければ、同様の効果を得ることができる。
また、Ｉピクチャ及びＰピクチャの符号化データを１つのセッションで配信し、Ｂピクチャ符号化データをもう１つのセッションで配信する。
Ｉピクチャ符号化データを１つのセッションで配信し、Ｐピクチャ及びＢピクチャの符号化データをもう１つのセッションで配信する。
セッション情報又は配信データの秘匿情報を、同様に通知することでも、同じ効果を得ることができる。
本実施例において、画像データ受信装置２０９が、バッテリー／電池で動作する場合のように、電力に制限のある環境で使用される場合、Ｂピクチャ符号化データや、Ｐ／Ｂピクチャ符号化データの受信を停止し、装置の使用時間をできるだけ長くするようにしてもよい。逆に、画像データ受信装置２０９が大容量バッテリーや、ＡＣ電源が接続された場合、全てのピクチャの符号化データを受信するようにしてもよい。このように、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。本実施例においては、受信ピクチャ符号化データを、受信者が、画像データ受信装置２０９に設定できる構成としてもよい。
なお、伝送路を複数とし、Ｉピクチャ符号化データ及びＰピクチャ符号化データ及びＢピクチャ符号化データ、及び、セッション情報を、異なった伝送路により伝送してもよい。
さらに、特定のピクチャの符号化データを秘匿化して配信する場合、第９図に示すように、本実施例における画像データ配信装置２０１の送信部２０５、２０６、２０７の出力を、パケット多重送信部９０１により、１つのセッションに多重化し、送信パケットに画像データのピクチャ種別に関する識別情報を付加して送信し、画像データ受信装置２０９のパケット受信分離部９０２により、受信パケットを符号化データと識別情報に分離し、符号化データ再構成部９０３で、識別情報から得たピクチャ種別に関する情報により、１つの符号化データに再構成するようにしてもよい。かかる構成によっても、上記実施例と同様の効果を得ることができる。識別情報は、例えばＲＴＰヘッダのペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する情報を付加する。
あるいは、本実施例における画像データ配信装置２０１の各出力に、ピクチャ種別全体を通してＲＴＰヘッダのシーケンス番号、もしくはこれに相当する情報が付加されている場合は、ピクチャ種別に関する識別情報を付加しなくても、シーケンス番号による並べ替えを行うことで１つの符号化データに再構成し、同様の効果を得ることができる。
パケット受信分離部９０２に関しては、第１の実施例でのパケット受信分離部７０２と同様の処理を行う。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
また、本実施例においても、前記実施例と同様、画像データ配信装置２０１と画像データ受信装置２０９における各部についても、画像データ配信装置と画像データ受信装置を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。
［発明の第３の実施の形態］
本発明の第３の実施の形態では、画像データ配信装置は、動画像データと、動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、それぞれ異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像種別等）を通知する手段とを備えている。
画像データ受信装置は、通知されたセッション情報のうち、少なくとも１つのセッションによりマルチキャストもしくはブロードキャスト配信されたデータを受信する手段と、受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成して復号化する手段と、を備えている、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段、をさらに備えた構成としてもよい。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者に通知する手段と、を備え、画像データ受信装置は、通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段を備えている。
［第３の実施例］
本発明の第３の実施例を図面を参照しながら説明する。第３図は、本発明の第３の実施例を示している。第３図に示すように、画像データ配信装置３０１と、画像データ受信装置３０８及び、動画像符号化データを伝送するための伝送路３０７から構成される。本実施例では、画像データ配信装置３０１はＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路３０７に接続されており、ＵＤＰ／ＩＰを用いて画像符号化データを配信し、画像データ受信装置３０８は、ＩＰ網に接続されるクライアント端末とする。
画像データ配信装置３０１は、配信情報送信部３０２と、セッション情報管理部３０３と、画像データ蓄積／生成部３０４と、画像符号化データ送信部３０５と、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部３０６を備えている。
画像データ受信装置３０８は、セッション情報受信部３０９と、画像符号化データ受信部３１０、Ｉｎｔｒａ−ＭＢ符号化データ受信部３１１、符号化データ再構成部３１２と、デコーダ３１３を備えている。以下、画像データ配信装置３０１、画像データ受信装置３０８の動作について順に説明する。
画像データ配信装置３０１は、画像データ蓄積／生成部３０４で、
・あらかじめ蓄積された画像データ、もしくは、
・リアルタイムで符号化し生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像データ
を、セッション情報管理部３０３で設定された情報に基づいて、画像符号化データ送信部３０５、及びイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部３０６により、伝送路３０７経由で送信する。また、セッション情報管理部３０３で、受信者に対して配信を許すセッションの情報を管理し、受信者に応じて通知すべきセッション情報及び、画像種別等の画像符号化に関する情報を、配信情報送信部３０２から画像データ受信装置３０８に通知する。画像符号化データ送信部３０５、及びＩｎｔｒａ−ＭＢ符号化データ送信部３０６は、画像データ受信装置３０８で、重複する複数の画像データが受信された場合に、データの選択ができるように、また、受信したデータの順序が入れ替わっていても、正しく並び替えられるよう、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報を付加する機能を有する。この際、イントラ−マクロブロック符号化データが符号化する画像の同領域の画像符号化データに、同じＲＴＰシーケンス番号を付与し、さらに画像符号化データとイントラ−マクロブロックのいずれであるかを示すペイロードタイプ、及び／又は、ＳＳＲＣ、及び／又は、ＣＳＲＣを付与してもよい。
セッション情報管理部３０３に、配信画像データを秘匿化する設定がされている場合、画像符号化データ送信部３０５及びＩｎｔｒａ−ＭＢ符号化データ送信部３０６で、設定に応じて秘匿化処理を行い、秘匿の有無、秘匿方法などの秘匿化に関する情報を、配信情報送信部３０２から画像データ受信装置３０８に通知する。
画像データ受信装置３０８は、画像データ配信装置３０１からのセッション情報、画像の符号化に関する情報、配信データが秘匿化されている場合は秘匿化に関する情報を、セッション情報受信部３０９で受信し、この情報をもとに、画像符号化データ受信部３１０及びＩｎｔｒａ−ＭＢ符号化データ受信部３１１で、セッション受信ポートを開き、伝送路３０７からの画像データを受信する。受信した画像データが秘匿化されている場合は、セッション情報受信部３０９で得た情報により、画像符号化データ受信部３１０及びＩｎｔｒａ−ＭＢ符号化データ受信部３１１で、元の画像データを復元する。
なお、セッション情報管理部３０３は、画像符号化データの符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部３０２により画像データ受信装置３０８へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置３０１及び画像データ受信装置３０８間で設定しておいてもよい。
画像データ及びイントラ−マクロブロック符号化データの両方が受信できた場合、重複する画像データは、符号化データ再構成部３１２でＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部３０９で受信された情報を基に、画質に基づいて、１つの画像データに再構成してデコーダ３１３へと出力する。画像データは、１つだけ復号化すればよいので、デコーダ３１３の復号化処理の負担は増加しない。
送信側（画像データ配信装置）で、受信者Ａと受信者Ｂのそれぞれの画像データ受信装置における受信画像データの品質を制御するには、受信者Ａへは、画像符号化データ及びイントラ−マクロブロック符号化データの両方の画像データの受信を許し、受信者Ｂへは、動画像符号化データの受信のみ許す場合、受信者Ａの画像データ受信装置には画像符号化データ及びイントラ−マクロブロック符号化データの両方のセッション情報を、受信者Ｂの画像データ受信装置へは画像符号化データのセッション情報のみを通知する。
受信者Ａの画像データ受信装置は、画像符号化データと、イントラ−マクロブロック符号化データの両方を受信することができ、万が一、画像符号化データに誤りや欠落があったとしても、当該箇所をイントラ−マクロブロック符号化データが受信できれば、これを補完することができる。受信者Ｂの画像データ受信装置は、画像符号化データしか受信できず、当該データに誤りや欠落があった場合、画質が劣化する。
以上により、両受信者Ａ、Ｂの画像データ受信装置間で、受信画像の画質に違いが生じる。
さらに、同様の画像符号化データ及びイントラ−マクロブロック符号化データの配信を行う際、画像符号化データ１をマルチキャスト又はブロードキャスト方式で送信し、イントラ−マクロブロック符号化データを受信者Ａにのみユニキャスト方式で送信した場合も、同様に受信画像の画質の安定度に違いが生じる。
また、イントラ−マクロブロック符号化データのみ秘匿化し、受信者Ａの画像データ受信装置には、秘匿化されたイントラ−マクロブロック符号化データを元に戻すための方法を通知し、受信者Ｂの画像データ受信装置には、該元に戻すための方法を通知しないようにするか、あるいは、画像符号化データ、イントラ−マクロブロック符号化データとも秘匿化し、受信者Ａの画像データ受信装置には両方の画像データを元に戻すための情報を、受信者Ｂの画像データ受信装置には画像符号化データを元に戻すための情報のみを通知する、ことでも、上記と同様の効果を得ることができる。
本実施例において、画像データ受信装置３０８が、バッテリー／電池で動作する場合のように、電力に制限のある環境で使用される場合、及び／又は、受信環境が良好で、画像符号化データを、ほとんど誤りや欠落なく受信できる場合、イントラ−マクロブロック符号化データの受信を停止し、装置の使用時間をできるだけ長くするようにしてもよい。逆に、画像データ受信装置３０８が、大容量バッテリーや、ＡＣ電源が接続された場合、画像符号化データ、イントラ−マクロブロック符号化データとも受信するようにしてもよい。このように、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。また、本実施例において、受信画像符号化データ種別を、受信者が画像データ受信装置３０８に設定できるような構成としてもよい。
また、例えば画像符号化データが正しく受信できている場合でも、それがインターフレーム（参照フレーム）符号化データであるとき、符号化データ再構成部３１２で周期的に必ずイントラ−マクロブロック符号化データを選択するようにすれば、伝送路での誤りや損失が発生した場合でも、ＭＰＥＧ−４符号化方式でのＣＩＲ（Ｃｙｃｌｉｃ Ｉｎｔｒａ Ｒｅｆｒｅｓｈ）と同様の効果を得ることができ、伝送路での誤りや損失による再生画像品質の劣化を素早く回復させ、以後のフレームへの品質劣化の伝播を小さく抑えることができる。
なお、伝送路を複数とし、画像符号化データ及びイントラ−マクロブロック符号化データ、及び、セッション情報を、異なった伝送路により伝送する構成としてもよい。
さらに、特定の種別の符号化データを秘匿化して配信する場合、第１０図に示すように、本実施例における画像データ配信装置３０１の画像符号化データ送信部３０５、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部３０６の出力を、パケット多重送信部１００１により、１つのセッションに多重化し、送信パケットに画像データのデータ種別に関する識別情報を付加して送信し、画像データ受信装置３０８のパケット受信分離部１００２により、受信パケットを符号化データと識別情報に分離し、符号化データ再構成部１００３で、識別情報から得たデータ種別に関する情報により、１つの符号化データに再構成することでも同様の効果を得ることができる。識別情報は、例えばＲＴＰヘッダのペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する情報を付加する。
パケット受信分離部１００２に関しては、前記第１の実施例でのパケット受信分離部７０２と同様の処理を行う。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
本実施例においても、前記実施例と同様、画像データ配信装置３０１と画像データ受信装置３０８における各部についても、画像データ配信装置と画像データ受信装置を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。
［発明の第４の実施の形態］
本発明の第４の実施の形態では、画像データ配信装置は、動画像データのＩピクチャ、Ｐピクチャ、及び動画像の符号化に用いた符号化方式に存在する場合はＢピクチャ、及び動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像種別等）を通知する手段と、を備えている。
画像データ受信装置は、通知されたセッション情報のうち、少なくとも１つのセッションによりマルチキャストもしくはブロードキャスト配信されたデータを受信する手段と、受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成して復号化する手段と、を備えている。本発明の第４の実施の形態においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者に通知する手段と、を備え、画像データ受信装置は、通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段を備えた構成としてもよい。
［第４の実施例］
本発明の第４の実施例について図面を参照して説明する。第４図は、本発明の第４の実施例を示している。第４図に示すように、動画像データの配信装置と、受信装置及び、動画像符号化データを伝送するための伝送路から構成される。本実施例では、画像データ配信装置４０１はＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路４０９に接続されており、ＵＤＰ／ＩＰを用いて画像符号化データを配信し、画像データ受信装置４１０は、ＩＰ網に接続されるクライアント端末であるとする。なお、ここでは簡単のため、配信する画像データの符号化方式には、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの３つのフレーム種別が存在するものとして説明する。
画像データ配信装置４０１は、配信情報送信部４０２と、セッション情報管理部４０３と、画像データ蓄積／生成部４０４と、Ｉピクチャ符号化データ送信部４０５と、Ｐピクチャ符号化データ送信部４０６と、Ｂピクチャ符号化データ送信部４０７と、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部４０８を備えている。
画像データ受信装置４１０は、セッション情報受信部４１１と、Ｉピクチャ符号化データ受信４１２、Ｐピクチャ符号化データ受信部４１３、Ｂピクチャ符号化データ受信部４１４と、Ｉｎｔｒａ−ＭＢ符号化データ受信部４１５、符号化データ再構成部４１６と、デコーダ４１７を備えている。以下、画像データ配信装置４０１、画像データ受信装置４１０の動作について順に説明する。
画像データ配信装置４０１において、画像データ蓄積／生成部４０４で、
・あらかじめ蓄積された画像データ、もしくは、
・リアルタイムで符号化し生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像データ
を、セッション情報管理部４０３で設定された情報に基づいて、Ｉピクチャ符号化データ送信部４０５、Ｐピクチャ符号化データ送信部４０６、Ｂピクチャ符号化データ送信部４０７、Ｉｎｔｒａ−ＭＢ符号化データ送信部４０８により、伝送路４０９経由で送信する。
また、セッション情報管理部４０３で、受信者に対して配信を許すセッションの情報を管理し、受信者に応じて通知すべきセッション情報及び、画像種別等の画像符号化に関する情報を、配信情報送信部４０２から画像データ受信装置４１０に通知する。
Ｉピクチャ符号化データ送信部４０５、Ｐピクチャ符号化データ送信部４０６、Ｂピクチャ符号化データ送信部４０７、Ｉｎｔｒａ−ＭＢ符号化データ送信部４０８は、画像データ受信装置４１０で、重複する複数の画像データが受信された場合に、データの選択ができるように、また、受信したデータの順序が入れ替わっていても、正しく並び替えられるように、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報を付加する機能を有する。
この際、イントラ−マクロブロック符号化データが符号化する画像の同領域の画像符号化データに、同じＲＴＰシーケンス番号を付与し、さらに画像符号化データとイントラ−マクロブロックのいずれであるかを示すペイロードタイプ、及び／又は、ＳＳＲＣ、及び／又は、ＣＳＲＣを付与してもよい。
セッション情報管理部４０３に、配信画像データを秘匿化する設定がされている場合、Ｉピクチャ符号化データ送信部４０５及び、Ｐピクチャ符号化データ送信部４０６及び、Ｂピクチャ符号化データ送信部４０７、及び、Ｉｎｔｒａ−ＭＢ符号化データ送信部４０８で、設定に応じて秘匿化処理を行い、秘匿の有無、秘匿の方法などの秘匿化に関する情報を配信情報送信部４０２から画像データ受信装置４１０に通知する。
画像データ配信装置４０１からのセッション情報及び、画像の符号化に関する情報及び、配信データが秘匿化されている場合は、秘匿化に関する情報を、セッション情報受信部４１１で受信し、この情報をもとに、Ｉピクチャ符号化データ受信部４１２、Ｐピクチャ符号化データ受信部４１３、Ｂピクチャ符号化データ受信部４１４、Ｉｎｔｒａ−ＭＢ符号化データ受信部４１５で、セッション受信ポートを開き、伝送路４０９からの画像データを受信する。受信した画像データが秘匿化されている場合は、セッション情報受信部４１１で得た情報により、Ｉピクチャ符号化データ受信部４１２、Ｐピクチャ符号化データ受信部４１３、Ｂピクチャ符号化データ受信部４１４、Ｉｎｔｒａ−ＭＢ符号化データ受信部４１５で、元の画像データを復元する。
なお、セッション情報管理部４０３は、画像符号化データの符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部４０２により画像データ受信装置４１０へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置４０１及び画像データ受信装置４１０間で設定しておいてもよい。
受信したＩピクチャ、Ｐピクチャ、Ｂピクチャ、イントラ−マクロブロックは、いずれかのピクチャの符号化データと、イントラ−マクロブロック符号化データの両方が受信できた場合、重複する符号化データを、符号化データ再構成部４１６で、ＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部４１１で受信された情報を基に、画質に基づいて選択し、１つの動画像ストリームに再構成し、デコーダ４１７へ出力する。画像データは、１つだけ復号化すればよいので、デコーダ４１７の復号化処理の負担は増加しない。
送信側で、受信者Ａと受信者Ｂと受信者Ｃと受信者Ｄのそれぞれの画像データ受信装置における受信画像データの品質を制御するには、受信者Ａの画像データ受信装置へは、Ｉピクチャ、Ｐピクチャ、Ｂピクチャ、イントラ−マクロブロックの符号化データを送信する、すべてのセッションの情報を通知する。
受信者Ｂの画像データ受信装置へは、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｃの画像データ受信装置へは、Ｉピクチャ、Ｐピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｄの画像データ受信装置へは、Ｉピクチャの符号化データを送信するセッションの情報のみを通知する。
各受信者の画像データ受信装置が受信する画像符号化データに誤りや欠落がない場合、受信者Ａ及び受信者Ｂの画像データ受信装置は、すべてのピクチャの符号化データを受信することができるので、最も画質の高い（円滑な動きの）動画像を受信することができる。
受信者Ｃの画像データ受信装置は、これに次ぐ画質の動画像を受信することができ、受信者Ｄの画像データ受信装置は、Ｉピクチャのみの最も画質の低い動画像の受信しかできない。このようにして、各受信者で、受信画像の画質に違いができる。
万が一、画像符号化データに誤りや欠落があった場合、受信者Ａの画像データ受信装置は、当該箇所をイントラ−マクロブロック符号化データが受信できれば、これを補完することができるのに対し、受信者Ｂ、受信者Ｃ、受信者Ｄの画像データ受信装置は、補完する情報がないため、画質が劣化する。これにより、各受信者で受信画像の画質に違いができる。
さらに、本実施例においては、特定の符号化データを特定の受信者にのみユニキャスト方式で送信することで、受信者による画質の違いを制御することも可能である。例えば、Ｉピクチャ符号化データ及びＰピクチャ符号化データを前記のようにマルチキャスト、もしくはブロードキャスト方式で送信し、Ｂピクチャ符号化データを受信者Ａ及び受信者Ｂにユニキャスト方式で送信し、イントラ−マクロブロック符号化データを、受信者Ａにのみ、ユニキャスト方式で送信することにより、上記と同様の効果を得ることができる。
また、例えばＰピクチャ、Ｂピクチャ、イントラ−マクロブロックの符号化データを秘匿化し、受信者Ａの画像データ受信装置には、秘匿化されたＰピクチャ、Ｂピクチャ、イントラ−マクロブロックの符号化データを元に戻すための情報を通知し、受信者Ｂの画像データ受信装置には、Ｐピクチャ、Ｂピクチャの符号化データを元に戻すための情報を通知し、受信者Ｃの画像データ受信装置には、Ｐピクチャの符号化データを元に戻すための情報を通知し、受信者Ｄの画像データ受信装置には秘匿化に関する情報を通知しないようにしても、上記と同様の効果を得ることができる。
本実施例において、画像データ受信装置４１０が、バッテリー／電池で動作する場合のように、電力に制限のある環境で使用される場合には、イントラ−マクロブロック符号化データや、さらにＢピクチャ符号化データ、さらにＰピクチャ符号化データの受信を停止し、装置の使用時間をできるだけ長くするようにしてもよい。逆に、画像データ受信装置４１０が、大容量バッテリーや、ＡＣ電源が接続された場合、全てのピクチャの符号化データを受信するようにしてもよい。このように、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。本実施例においては、受信ピクチャ符号化データを、受信者が画像データ受信装置４１０に設定できるような構成としてもよい。
また、ＩピクチャとＰピクチャの符号化データを１つのセッションで配信し、Ｂピクチャ符号化データを１つのセッションで配信し、イントラ−マクロブロック符号化データをもう１つのセッションで配信し、Ｉピクチャ符号化データを１つのセッションで配信し、Ｐピクチャ及びＢピクチャの符号化データを１つのセッションで配信し、イントラ−マクロブロック符号化データをもう１つのセッションで配信し、セッション情報又は配信データの秘匿情報を、同様に通知することでも、上記と同様の効果を得ることができる。
また、例えば画像符号化データが正しく受信できている場合でも、それがインターフレーム（参照フレーム）符号化データであるとき、符号化データ再構成部４１６で周期的に必ずイントラ−マクロブロック符号化データを選択するようにすれば、伝送路での誤りや損失が発生した場合でも、ＭＰＥＧ−４符号化方式でのＣＩＲ（Ｃｙｃｌｉｃ Ｉｎｔｒａ Ｒｅｆｒｅｓｈ）と同様の効果を得ることができ、伝送路での誤りや損失による再生画像品質の劣化を素早く回復させ、以後のフレームへの品質劣化の伝播を小さく抑えることができる。
なお、伝送路を複数とし、Ｉピクチャ符号化データ及びＰピクチャ符号化データ及びＢピクチャ符号化データ及びイントラ−マクロブロック符号化データ、セッション情報を、異なった伝送路により伝送する構成としてもよい。
さらに、特定のピクチャ、種別の符号化データを秘匿化して配信する場合、第１１図に示すように、本実施例における画像データ配信装置４０１のＩピクチャ符号化データ送信部４０５、Ｐピクチャ符号化データ送信部４０６、Ｂピクチャ符号化データ送信部４０７、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部４０８の出力を、パケット多重送信部１１０１により、１つのセッションに多重化し、送信パケットに画像データの圧縮率及び／又は、ピクチャ種別に関する識別情報を付加して送信し、画像データ受信装置４１０のパケット受信分離部１１０２により、受信パケットを画像符号化データと画像データ識別情報に分離し、符号化データ再構成部１１０３で、画像データ識別情報から得た圧縮率、及び／又は、ピクチャ種別に関する情報により、データの重複を判断し、重複があった場合は圧縮率に関する情報に基づいて選択し、１つの符号化データに再構成することでも同様の効果を得ることができる。画像データ識別情報は、例えばＲＴＰヘッダのペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する識別情報を付加する。
あるいは、本実施例において、画像データ配信装置４０１の各出力に、ピクチャ種別全体を通してＲＴＰヘッダのシーケンス番号、もしくはこれに相当する情報が付加されている場合には、ピクチャ種別に関する識別情報を付加しなくても、シーケンス番号による並べ替えを行うことで、１つの符号化データに再構成する構成によっても、同様の効果を得ることができる。
パケット受信分離部１１０２に関しては、前記第１の実施例でのパケット受信分離部７０２と同様の処理を行う。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
前記各実施例と同様、画像データ配信装置４０１と画像データ受信装置４１０における各部についても、画像データ配信装置と画像データ受信装置を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。
［発明の第５の実施の形態］
本発明の第５の実施の形態では、画像データ配信装置は、同一の画像、同一の符号化方式、同一のフレーム構成で、圧縮率の異なる複数の動画像データそれぞれのＩピクチャ、Ｐピクチャ、及び動画像の符号化に用いた符号化方式に存在する場合はＢピクチャを、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像品質等）を通知する手段と、を備えている。画像データ受信装置は、通知されたセッション情報のうち、少なくとも１つのセッションによりマルチキャストもしくはブロードキャスト配信されたデータを受信する手段と、受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成して復号化する手段を備えている。本発明の第５の実施の形態においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者に通知する手段と、を備え、画像データ受信装置は、通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段を備えた構成としてもよい。
［第５の実施例］
次に本発明の第５の実施例について図面を参照して説明する。第５図は、本発明の第５の実施例の構成を示している。第５図に示すように、動画像データの配信装置と、受信装置及び、動画像符号化データを伝送するための伝送路から構成される。本実施例では、画像データ配信装置５０１はＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路５０９に接続されており、ＵＤＰ／ＩＰを用いて画像符号化データを配信し、画像データ受信装置５１０は、ＩＰ網に接続されるクライアント端末であるとする。なお、ここでは簡単のため、配信する画像データの符号化方式には、Ｉピクチャ、Ｐピクチャの２つのフレーム種別が存在するとし、配信する画像データ数を２として説明する。
画像データ配信装置５０１は、配信情報送信部５０２と、セッション情報管理部５０３と、画像データ蓄積／生成部５０４と、画像データ１のＩピクチャ符号化データ送信部５０５、画像データ１のＰピクチャ符号化データ送信部５０６、画像データ２のＩピクチャ符号化データ送信部５０７、画像データ２のＰピクチャ符号化データ送信部５０８を備えている。
画像データ受信装置５１０は、セッション情報受信部５１１と、画像データ１のＩピクチャ符号化データ受信部５１２、画像データ１のＰピクチャ符号化データ受信部５１３、画像データ２のＩピクチャ符号化データ受信部５１４、画像データ２のＰピクチャ符号化データ受信部５１５と、符号化データ再構成部５１６と、デコーダ５１７を備えている。
以下、画像データ配信装置５０１、画像データ受信装置５１０の動作について順に説明する。
画像データ配信装置５０１は、画像データ蓄積／生成部５０４で、
・あらかじめ蓄積された画像データ、もしくは、
・リアルタイムで符号化し生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像・データ
を、セッション情報管理部５０３で設定された情報に基づいて、画像データ１のＩピクチャ符号化データ送信部５０５、画像データ１のＰピクチャ符号化データ送信部５０６、画像データ２のＩピクチャ符号化データ送信部５０７、画像データ２のＰピクチャ符号化データ送信部５０８により、伝送路５０９経由で送信する。
また、セッション情報管理部５０３で、受信者に対して配信を許すセッションの情報を管理し、受信者に応じて通知すべきセッション情報及び、画像品質、ピクチャ種別等の画像符号化に関する情報を、配信情報送信部５０２から画像データ受信装置５１０に通知する。
画像データ１のＩピクチャ符号化データ送信部５０５、画像データ１のＰピクチャ符号化データ送信部５０６、画像データ２のＩピクチャ符号化送信部５０７、画像データ２のＰピクチャ符号化送信部５０８は、画像データ受信装置５１０で、重複する複数の画像データが受信された場合に、データの選択ができるように、また、受信したデータの順序が入れ替わっていても、正しく並び替えられるように、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報を付加する機能を有する。
この際、画像データ１のＩピクチャ符号化データと画像データ２のＩピクチャ符号化データ、画像データ１のＰピクチャ符号化データと画像データ２のＰピクチャ符号化データを、それぞれ例えば伝送路５０９でのデータの誤り、もしくは損失のバースト長より長くなるような時間差を設けて送信する構成とすることで、伝送路での画像符号化データが両方とも誤り、もしくは損失の影響を受ける可能性が低下し、より安定した画像データの配信をすることができる。
送信の時間差については、セッション情報管理部５０３で管理し、配信情報送信部５０２から画像データ受信装置５１０に通知するか、あらかじめ画像データ配信装置５０１及び画像データ受信装置５１０間で定めておき、該時間差に基づいて、画像データ受信装置５１０が、受信バッファ量（バッファサイズ）を設定してもよい。
セッション情報管理部５０３に、配信画像データを秘匿化する設定がされている場合、画像データ１のＩピクチャ符号化データ送信部５０５、画像データ１のＰピクチャ符号化データ送信部５０６、画像データ２のＩピクチャ符号化データ送信部５０７、画像データ２のＰピクチャ符号化データ送信部５０８で、設定に応じて秘匿化処理を行い、秘匿の有無、秘匿の方法などの秘匿化に関する情報を配信情報送信部５０２から画像データ受信装置５１０に通知する。
画像データ受信装置５１０は、画像データ配信装置５０１からのセッション情報、画像の符号化に関する情報、配信データが秘匿化されている場合は、秘匿化に関する情報を、セッション情報受信部５１１で受信し、これらの情報をもとに、画像データ１のＩピクチャ符号化データ受信部５１２、画像データ１のＰピクチャ符号化データ受信部５１３、画像データ２のＩピクチャ符号化データ受信部５１４、画像データ２のＰピクチャ符号化データ受信部５１５で、セッション受信ポートを開き、伝送路５０９からの画像データを受信する。ここで、受信した画像データが秘匿化されている場合には、セッション情報受信部５１１で得た情報により、元の画像データを復元する。
なお、セッション情報管理部５０３は、画像符号化データ１及び画像符号化データ２の符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部５０２により画像データ受信装置５１０へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置５０１及び画像データ受信装置５１０間で設定しておいてもよい。
受信した画像データ１のＩピクチャ、画像データ１のＰピクチャ、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データは、符号化データ再構成部５１６で、ＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部５１１で受信された情報を基に、画質に基づいて選択し、１つの動画像ストリームに再構成してデコーダ５１７へ出力する。画像データは、１つだけ復号化すればよいので、デコーダ５１７の復号化処理の負担は増加しない。
送信側で、受信者Ａと受信者Ｂと受信者Ｃの受信画像データの品質を制御するには、画像データ１と画像データ２の品質（圧縮率）を変え、例えば画像データ１をより高品質とする。
受信者Ａの画像データ受信装置へは、画像データ１のＩピクチャ、画像データ１のＰピクチャ、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信する、すべてのセッションの情報を通知する。
受信者Ｂの画像データ受信装置へは、画像データ１のＩピクチャ、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｃの画像データ受信装置へは、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報のみを通知する。
受信者Ａの画像データ受信装置は、すべての符号化データを受信できるので、最も画質の高い（円滑な動きの）動画像を受信することができ、万が一、画像符号化データ１の画像データに誤りや欠落があったとしても、当該箇所を画像符号化データ２の画像データで補完することができる。
受信者Ｂの画像データ受信装置は、これに次ぐ画質の動画像を受信することができ、万が一、画像データ１のＩピクチャ符号化データに誤りや欠落があったとしても、当該箇所を画像データ２のＩピクチャ符号化データで補完することができる。
受信者Ｃの画像データ受信装置は、圧縮率の高い符号化データしか受信できない。
これにより、各受信者で、受信画像の画質に違いができる。
さらに、特定の符号化データを特定の受信者にのみユニキャスト方式で送信することで、受信者による画質の違いを制御することも可能である。例えば、画像データ２のＩピクチャ及びＰピクチャ符号化データを、マルチキャスト又はブロードキャスト方式で送信し、画像データ１のＩピクチャ符号化データを、受信者Ａ及び受信者Ｂの受信装置へユニキャスト方式で送信し、符号化データ１のＰピクチャの符号化データを、受信者Ａの画像データ受信装置にのみユニキャスト方式で送信することによっても、上記の同様の効果を得ることができる。
また、全ての受信者の画像データ受信装置に、画像データ１のＩビクチャ及びＢピクチャの符号化データを送信するセッション情報を通知し、受信者Ａ及び受信者Ｂの画像データ受信装置に、画像データ２のＩピクチャ符号化データを送信するセッション情報を、受信者Ａの画像データ受信装置には、さらに画像データ２のＰピクチャ符号化データを送信するセッション情報を通知した場合、受信者Ｃは受信するデータに誤りや欠落があったとしても、これを補完することはできないが、受信者ＢはＩピクチャの符号化データであれば、受信者Ａはどちらのピクチャの符号化データでも、これを画像データ２の符号化データから補完することができ、受信者ごとに画質の安定度の違いが生じる。
なお、もし画像符号化データ１と画像符号化データ２の品質が同じであるか、あるいは画像符号化データ１を画像符号化データ１送信部５０５、５０６及び画像符号化データ２送信部５０７、５０８から送信すれば、伝送路での誤りや欠落の影響があった場合の、画像データ受信装置での再生画像品質の劣化を最小限に抑えることが可能となる。
加えて、画像データ１のＩピクチャ符号化データ及び画像データ１のＰピクチャ符号化データをマルチキャスト又はブロードキャスト方式で送信し、画像データ２のＩピクチャ符号化データを、受信者Ａ及び受信者Ｂにユニキャスト方式で送信し、画像データ２のＰピクチャ符号化データを受信者Ａにユニキャスト方式で送信した場合も、同様の画質の安定度の違いが生じる。この場合、ユニキャスト方式により送信する画像符号化データの帯域がより小さくて済むため、トラヒックの増加を抑制するには、より望ましい。
また、例えば画像データ１のＩピクチャ、Ｐピクチャ符号化データを秘匿化し、受信者Ａの画像データ受信装置には秘匿化された画像データ１を元に戻すための情報を通知し、受信者Ｂの画像データ受信装置には画像データ１のＩピクチャ符号化データを元に戻すための情報のみを通知し、受信者Ｃの画像データ受信装置には秘匿化に関する情報を通知しないようにしても、上記と同様の効果（各受信者間での受信画像の画質の相違）を得ることができる。
本実施例において、画像データ受信装置５１０が、バッテリー／電池で動作する場合のように、電力に制限のある環境で使用される場合、及び／又は、受信環境が良好で、画像符号化データを、ほとんど誤りや欠落なく受信できる場合、画像データ２のＰピクチャ符号化データや、さらに画像データ２のＩピクチャ符号化データの受信を停止し、装置の使用時間をできるだけ長くするようにしてもよい。逆に、画像データ受信装置５１０が、大容量バッテリーや、ＡＣ電源が接続された場合、全てのピクチャの符号化データを受信するようにしてもよい。このように、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。また、本実施例においては、この受信ピクチャ符号化データを、受信者が画像データ受信装置５１０に設定できるような構成としてもよい。
なお、伝送路を複数とし、画像データ１のＩピクチャ符号化データ及び画像１のＰピクチャ符号化データ及び画像データ２のＩピクチャ符号化データ及び画像２のＰピクチャ符号化データ、セッション情報を、異なった伝送路により伝送する構成としてもよい。
さらに、特定の画像符号化データ、ピクチャを秘匿化して配信する場合、第１２図に示すように、本実施例における画像データ配信装置５０１の各送信部の出力を、パケット多重送信部１２０１により、１つのセッションに多重化し、送信パケットに画像データの圧縮率及びピクチャ種別に関する識別情報を付加して送信し、画像データ受信装置５１０のパケット受信分離部１２０２により、受信パケットを符号化データと識別情報に分離し、符号化データ再構成部１２０３で、識別情報から得た圧縮率に関する情報及びピクチャ種別に関する情報により、データの重複を判断し、重複があった場合は圧縮率に関する情報に基づいて選択し、１つの符号化データに再構成することによっても、同様の効果を得ることができる。識別情報は、例えばＲＴＰヘッダのペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する情報を付加する。
ここで、画像データ配信装置５０１の各出力に、ピクチャ種別全体を通してＲＴＰヘッダのシーケンス番号、もしくはこれに相当する情報が付加されている場合は、ピクチャ種別に関する識別情報を付加しなくても、シーケンス番号による並べ替えを行うことで１つの符号化データに再構成することでも、同様の効果を得ることができる。
パケット受信分離部１２０２に関しては、第１の実施例でのパケット受信分離部７０２と同様の処理を行う。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
本実施例においても、前記各実施例と同様、画像データ配信装置５０１と画像データ受信装置５１０における各部についても、画像データ配信装置と画像データ受信装置を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。
［発明の第６の実施の形態］
本発明の第６の実施の形態において、画像データ配信装置は、同一の画像、同一の符号化方式、同一のフレーム構成で、圧縮率の異なる複数の動画像データそれぞれのＩピクチャ、Ｐピクチャ、及び動画像の符号化に用いた符号化方式に存在する場合は、Ｂピクチャ、及び動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、異なったセッションで、マルチキャストもしくはブロードキャスト配信する手段と、受信者に対して、受信者に受信を許可する品質を含む、少なくとも１つのセッション情報（マルチキャストアドレス、ポート番号、画像品質、画像種別等）を通知する手段と、を備えている。
画像データ受信装置は、通知されたセッション情報のうち、少なくとも１つのセッションによりマルチキャストもしくはブロードキャスト配信されたデータを受信する手段と、受信した動画像データのうち、画質に基づいてデータを選択し、１つの動画像データに再構成して復号化する手段と、を備えている。本発明の第６の実施の形態においては、少なくとも１つの画像データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも１つに基づき、選択する手段をさらに備えた構成としてもよい。
また、画像データ配信装置は、配信するセッションごとに配信データの秘匿の有無、秘匿手段、秘匿の強度を設定する手段と、秘匿に関する設定情報を受信者に通知する手段と、を備え、画像データ受信装置は、通知された秘匿情報を受信し、受信したデータを復元して動画像データを復号化する手段を備えた構成としてもよい。
［第６の実施例］
次に本発明の第６の実施例について図面を参照して説明する。第６図は、本発明の第６の実施例の構成を示している。第６図に示すように、画像データ配信装置６０１と、画像データ受信装置６１１、及び、動画像符号化データを伝送するための伝送路６１０から構成される。本実施例では、画像データ配信装置６０１はＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）網である伝送路６１０に接続されており、ＵＤＰ／ＩＰを用いて画像符号化データを配信し、画像データ受信装置６１１は、ＩＰ網に接続されるクライアント端末とする。なお、ここでは簡単のため、配信する画像データの符号化方式には、Ｉピクチャ、Ｐピクチャの２つのフレーム種別が存在するとし、配信する画像データ数を２として説明する。
画像データ配信装置６０１は、配信情報送信部６０２と、セッション情報管理部６０３と、画像データ蓄積／生成部６０４と、画像データ１のＩピクチャ符号化データ送信部６０５、画像データ１のＰピクチャ符号化データ送信部６０６、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ送信部６０７、画像データ２のＩピクチャ符号化データ送信部６０８、画像データ２のＰピクチャ符号化データ送信部６０９を備えている。
画像データ受信装置６１１は、セッション情報受信部６１２と、画像データ１のＩピクチャ符号化データ受信部６１３、画像データ１のＰピクチャ符号化データ受信部６１４、イントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化データ受信部６１５、画像データ２のＩピクチャ符号化データ受信部６１６、画像データ２のＰピクチャ符号化データ受信部６１７と、符号化データ再構成部６１８と、デコーダ６１９を備えている。以下、画像データ配信装置６０１、画像データ受信装置６１１の動作について順に説明する。
画像データ配信装置６０１は、画像データ蓄積／生成部６０４で、
・あらかじめ蓄積された画像データ、もしくは、
・リアルタイムで符号化し生成された画像データ、もしくは、
・リアルタイムで既存画像データを変換し生成された画像データ
を、セッション情報管理部６０３で設定された情報に基づいて、画像データ１のＩピクチャ符号化データ送信部６０５、画像データ１のＰピクチャ符号化データ送信部６０６及び、Ｉｎｔｒａ−ＭＢ符号化データ送信部６０７、画像データ２のＩピクチャ符号化データ送信部６０８、画像データ２のＰピクチャ符号化データ送信部６０９により、伝送路６１０経由で送信する。
また、セッション情報管理部６０３で、受信者に対して配信を許すセッションの情報を管理し、受信者に応じて通知すべきセッション情報及び、画像品質、画像種別等の画像符号化に関する情報を、配信情報送信部６０２から画像データ受信装置６１１に通知する。
画像データ１のＩピクチャ符号化データ送信部６０５、画像データ１のＰピクチャ符号化データ送信部６０６、Ｉｎｔｒａ−ＭＢ符号化データ送信部６０７、画像データ２のＩピクチャ符号化送信部６０８、画像データ２のＰピクチャ符号化送信部６０９は、画像データ受信装置６１１で、重複する複数の画像データが受信された場合に、データの選択ができるように、また、受信したデータの順序が入れ替わっていても、正しく並び替えられるように、ＲＴＰ（Ｒｅａｌ−Ｔｉｍｅ Ｔｒａｎｓｐｏｒｔ Ｐｒｏｔｏｃｏｌ）に相当する情報を付加する機能を有する。なお、画像データ１のＩピクチャ符号化データと画像データ２のＩピクチャ符号化データ、及び、画像データ１のＰピクチャ符号化データと画像データ２のＰピクチャ符号化データの各送信単位は、それぞれ同一画像の同一フレームの同一部位を符号化したデータとし、これと、さらにこれらと同一部位を符号化したイントラ−マクロブロック符号化データに、同じＲＴＰシーケンス番号を付与し、さらにいずれの画像符号化データかを示す、ペイロードタイプ、及び／又は、ＳＳＲＣ、及び／又は、ＣＳＲＣを付与してもよい。
この際、画像データ１のＩピクチャ符号化データと画像データ２のＩピクチャ符号化データ、画像データ１のＰピクチャ符号化データと画像データ２のＰピクチャ符号化データを、それぞれ例えば伝送路６１０でのデータの誤り、もしくは損失のバースト長より長くなるような時間差を設けて送信すれば、伝送路での画像符号化データが両方とも誤り、もしくは損失の影響を受ける可能性が低下し、より安定した画像データの配信をすることができる。
送信の時間差については、セッション情報管理部６０３で管理し、配信情報送信部６０２から画像データ受信装置６１１に通知するか、あらかじめ画像データ配信装置６０１及び画像データ受信装置６１１間で定めておき、その時間差に基づいて画像データ受信装置６１１が受信バッファ量を設定してもよい。
セッション情報管理部６０３に、配信画像データを秘匿化する設定がされている場合、画像データ１のＩピクチャ符号化データ送信部６０５、画像データ１のＰピクチャ符号化データ送信部６０６、Ｉｎｔｒａ−ＭＢ符号化データ送信部６０７、画像データ２のＩピクチャ符号化データ送信部６０８、画像データ２のＰピクチャ符号化データ送信部６０９で、設定に応じて秘匿化処理を行い、秘匿の有無、秘匿の方法などの秘匿化に関する情報を配信情報送信部６０２から画像データ受信装置６１１に通知する。
画像データ受信装置６１１は、画像データ配信装置６０１からのセッション情報及び、画像の符号化に関する情報及び、配信データが秘匿化されている場合は、秘匿化に関する情報を、セッション情報受信部６１２で受信し、この情報をもとに、画像データ１のＩピクチャ符号化データ受信部６１３及び、画像データ１のＰピクチャ符号化データ受信部６１４、Ｉｎｔｒａ−ＭＢ符号化データ受信部６１５、画像データ２のＩピクチャ符号化データ受信部６１６、画像データ２のＰピクチャ符号化データ受信部６１７で、セッション受信ポートを開き、伝送路６１０からの画像データを受信する。受信した画像データが秘匿化されている場合は、セッション情報受信部６１２で得た情報により、元の画像データを復元する。
なお、セッション情報管理部６０３は、画像符号化データ１及び画像符号化データ２の符号化設定、符号化オプション（使用ツール）や、符号化データのペイロード・オプション、符号化データを識別するＲＴＰヘッダのペイロードタイプ、及び／又は、ＳＳＲＣ、ＣＳＲＣに相当する情報を設定し、配信情報送信部６０２により画像データ受信装置６１１へ通知してもよく、また、これらの情報を、あらかじめ画像データ配信装置６０１及び画像データ受信装置６１１間で設定しておいてもよい。
受信した画像データ１のＩピクチャ、画像データ１のＰピクチャ、イントラ−マクロブロック、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データは、符号化データ再構成部６１８でＲＴＰに相当する機能、ＲＴＰヘッダのシーケンス番号、ペイロードタイプ、ＳＳＲＣや、ＣＳＲＣによる情報、及び／又は、セッション情報受信部６１２で受信された情報をもとに、画質に基づいてデータを選択し、１つの動画像ストリームに再構成してデコーダ６１９へ出力する。画像データは、１つだけ復号化すればよいので、デコーダ６１９の復号化処理の負担は増加しない。
送信側で、受信者Ａと受信者Ｂと受信者Ｃと受信者Ｄのそれぞれの画像データ受信装置における受信画像データの品質を制御するには、画像データ１と画像データ２の品質（圧縮率）を変え、例えば画像データ１をより高品質とする。
受信者Ａの画像データ受信装置へは、画像データ１のＩピクチャ、画像データ１のＰピクチャ、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｂの画像データ受信装置へは、画像データ１のＩピクチャ、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報を通知する。
受信者Ｃの画像データ受信装置へは、イントラ−マクロブロック、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報のみを通知する。
受信者Ｄの画像データ受信装置へは、画像データ２のＩピクチャ、画像データ２のＰピクチャの符号化データを送信するセッションの情報のみを通知する。
受信者Ａの画像データ受信装置は、すべての符号化データを受信できるので、最も画質の高い（円滑な動きの）動画像を受信することができ、万が一、画像符号化データ１の画像データに誤りや欠落があったとしても、当該箇所を画像符号化データ２の画像データで補完することができる。
受信者Ｂの画像データ受信装置は、これに次ぐ画質の動画像を受信することができ、万が一、画像データ１のＩピクチャ符号化データに誤りや欠落があったとしても、当該箇所を画像データ２のＩピクチャ符号化データで補完することができる。
受信者Ｃの画像データ受信装置は、圧縮率の高い画像データ２、イントラ−マクロブロック符号化データしか受信できないが、万が一、受信した符号化データに誤りや欠落があったとしても、当該箇所のイントラ−マクロブロック符号化データが受信できれば、これを補完することができる。
受信者Ｄの画像データ受信装置は、圧縮率の高い画像データ２しか受信できず、当該データに誤りや欠落があった場合、画質が劣化する。
これにより、各受信者で受信画像の画質に違いができる。
さらに、本実施例においては、特定の符号化データを特定の受信者にのみユニキャスト方式で送信することで、受信者による画質の違いを制御することも可能である。例えば、画像データ２のＩピクチャ及びＰピクチャ符号化データをマルチキャスト又はブロードキャスト方式で送信し、イントラ−マクロブロック符号化データを受信者Ｃの画像データ受信装置にユニキャスト方式で送信し、画像データ１のＩピクチャ符号化データを受信者Ａ及び受信者Ｂの受信装置へユニキャスト方式で送信し、符号化データ１のＰピクチャの符号化データを、受信者Ａの画像データ受信装置にのみユニキャスト方式で送信することによって、上記と同様の効果を得ることができる。
また、全ての受信者の画像データ受信装置に、画像データ１のＩピクチャ及びＢピクチャの符号化データを送信するセッション情報を通知し、受信者Ｃの画像データ受信装置にイントラ−マクロブロック符号化データを送信するセッション情報を通知し、受信者Ａ及び受信者Ｂの画像データ受信装置に、画像データ２のＩピクチャ符号化データを送信するセッション情報を通知し、受信者Ａの画像データ受信装置には、さらに画像データ２のＰピクチャ符号化データを送信するセッション情報を通知した場合、受信者Ｄは受信するデータに誤りや欠落があったとしても、これを補完することはできないが、受信者Ｃは当該箇所のイントラ−マクロブロック符号化データを受信できれば、これを補完することができ、受信者ＢはＩピクチャの符号化データであれば、受信者Ａはどちらのピクチャの符号化データでも、これを画像データ２の符号化データから補完することができ、受信者ごとに画質の安定度の違いが生じる。
なお、もし画像符号化データ１と画像符号化データ２の品質が同じであるか、あるいは画像符号化データ１を画像符号化データ１送信部６０５、６０６及び画像符号化データ２送信部６０８、６０９から送信すれば、伝送路での誤りや欠落の影響があった場合の、画像データ受信装置での再生画像品質の劣化を最小限に抑えることが可能となる。
加えて、画像データ１のＩピクチャ符号化データ及び画像データ１のＰピクチャ符号化データをマルチキャスト又はブロードキャスト方式で送信し、イントラ−マクロブロック符号化データを、受信者Ｃにユニキャスト方式で送信し、画像データ２のＩピクチャ符号化データを、受信者Ａ及び受信者Ｂにユニキャスト方式で送信し、画像データ２のＰピクチャ符号化データを受信者Ａにユニキャスト方式で送信した場合も、同様の画質の安定度の違いが生じる。この場合、ユニキャスト方式により送信する画像符号化データの帯域がより小さくて済むため、トラヒックの増加を抑制するには、より望ましい。
また、例えば画像データ１のＩピクチャ及び、Ｐピクチャ及び、イントラ−マクロブロックの符号化データを秘匿化し、受信者Ａの画像データ受信装置には秘匿化された画像データ１を元に戻すための情報を通知し、受信者Ｂの画像データ受信装置には画像データ１のＩピクチャ符号化データを元に戻すための情報のみを通知し、受信者Ｃの画像データ受信装置にはイントラ−マクロブロック符号化データを元に戻すための情報のみを通知し、受信者Ｄの画像データ受信装置には秘匿化に関する情報を通知しないようにすることでも、同様の効果を得ることができる。
本実施例において、画像データ受信装置６１１が、バッテリー／電池で動作するような、電力に制限のある環境で使用される場合、及び／又は、受信環境が良好で、画像符号化データを、ほとんど誤りや欠落なく受信できる場合、イントラ−マクロブロック符号化データ、及び／又は、画像データ２のＰピクチャ符号化データや、さらに画像データ２のＩピクチャ符号化データの受信を停止し、装置の使用時間をできるだけ長くしたり、逆に、大容量バッテリーや、ＡＣ電源が接続された場合、全てのピクチャの符号化データを受信するなど、利用可能な電力や受信環境に応じて、データの受信の有無を制御することもできる。また、この受信ピクチャ符号化データを、受信者が画像データ受信装置６１１に設定できるようにしてもよい。
また、例えば画像符号化データが正しく受信できている場合でも、それがインターフレーム（参照フレーム）符号化データであるとき、符号化データ再構成部６１８で周期的に必ずイントラ−マクロブロック符号化データを選択するようにすれば、伝送路での誤りや損失が発生した場合でも、ＭＰＥＧ−４符号化方式でのＣＩＲ（Ｃｙｃｌｉｃ Ｉｎｔｒａ Ｒｅｆｒｅｓｈ）と同様の効果を得ることができ、伝送路での誤りや損失による再生画像品質の劣化を素早く回復させ、以後のフレームへの品質劣化の伝播を小さく抑えることができる。
なお、伝送路を複数とし、画像データ１のＩピクチャ符号化データ、画像１のＰピクチャ符号化データ、イントラ−マクロブロック符号化データ、画像データ２のＩピクチャ符号化データ、画像２のＰピクチャ符号化データ、セッション情報を、異なった伝送路により伝送する構成としてもよい。
さらに、特定の画像符号化データ、ピクチャ、データ種別を秘匿化して配信する場合、第１３図に示すように、本実施例における画像データ配信装置６０１の画像データ１のＩピクチャ符号化データ送信部６０５、画像データ１のＰピクチャ符号化データ送信部６０６、イントラ−マクロブロック符号化データ送信部６０７、画像データ２のＩピクチャ符号化データ送信部６０８、画像データ２のＰピクチャ符号化データ送信部６０９の出力を、パケット多重送信部１３０１により、１つのセッションに多重化し、送信パケットに画像データの圧縮率及びピクチャ種別に関する識別情報を付加して送信し、画像データ受信装置６１１のパケット受信分離部１３０２により、受信パケットを符号化データと識別情報に分離し、符号化データ再構成部１３０３で、識別情報から得た圧縮率に関する情報及び、ピクチャ種別により、データの重複を判断し、重複があった場合は圧縮率に関する情報に基づいて選択し、１つの符号化データに再構成することでも同様の効果を得ることができる。識別情報は、例えばＲＴＰヘッダのペイロードタイプや、ＳＳＲＣ、ＣＳＲＣを用いるか、これに相当する情報を付加する。
ここで、画像データ配信装置６０１の各出力に、ピクチャ種別全体を通してＲＴＰヘッダのシーケンス番号、もしくはこれに相当する情報が付加されている場合は、ピクチャ種別に関する識別情報は付加しなくても、画像データ種別に関する識別情報と、シーケンス番号による並べ替えを行うことで１つの符号化データに再構成し、同様の効果を得ることができる。
パケット受信分離部１３０２に関しては、第１の実施例でのパケット受信分離部７０２と同様の処理を行う。
なお、全てのセッションを１つに多重化するだけでなく、いくつかのセッションを多重化するパケット多重送信部を複数設け、同様の識別情報を付加する仕組みであってもよい。
本実施例においても、前記各実施例と同様、画像データ配信装置６０１と画像データ受信装置６１１における各部についても、画像データ配信装置と画像データ受信装置を構成するコンピュータで実行されるプログラム制御によりそれぞれの機能・処理を実現するようにしてもよいことは勿論である。

Claims (110)

1. 同一画像の、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、
   圧縮率によって、マルチキャストもしくはブロードキャスト配信するセッションを選択する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
2. 同一画像の、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、
   受信者に応じて通知するセッション情報を変えることで、受信者側での受信画像品質を制御する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
3. 同一画像の、圧縮率の異なる画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、
   圧縮率によって選択された配信セッションごとに画像符号化データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
4. 前記同一画像の、圧縮率の異なる画像符号化データは、符号化方式及びフレーム構成が同一である、ことを特徴とする請求の範囲第１項乃至第３項のいずれか一項に記載の画像データ配信装置。
5. 画像符号化データをマルチキャストもしくはブロードキャスト配信する手段と、
   画像フレームや画像ブロックの種別によって、マルチキャストもしくはブロードキャスト配信するセッションを選択する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
6. 画像フレームや画像ブロックの種別の異なった画像符号化データを、マルチキャストもしくはブロードキャスト配信する手段と、
   受信者に応じて通知するセッション情報を変えることで、受信者側での受信品質を制御する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
7. 画像符号化データをマルチキャストもしくはブロードキャスト配信する手段と、
   画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
8. 配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報の異なった画像符号化データを、少なくとも１つ以上のセッションでマルチキャストもしくはブロードキャスト配信する手段と、
   受信者に応じて通知する秘匿化に関する情報を変えることで、受信者側での受信品質を制御する手段と、
   を備えている、ことを特徴とする画像データ配信装置。
9. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
   圧縮率の異なった画像符号化データを、マルチキャストもしくはブロードキャスト送信する複数の画像符号化データ送信手段と、
   を備えている、ことを特徴とする請求の範囲第１項記載の画像データ配信装置。
10. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
    フレーム内符号化、又はフレーム間での予測符号化に関して種別の異なった動画像符号化データを、マルチキャストもしくはブロードキャスト送信する複数の画像符号化データ送信手段と、
    を備えている、ことを特徴とする請求の範囲第２項記載の画像データ配信装置。
11. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
    圧縮率が異なり、フレーム内符号化、又はフレーム間での予測符号化に関して種別の異なった動画像符号化データを、マルチキャストもしくはブロードキャスト送信する複数の画像符号化データ送信手段と、
    を備えている、ことを特徴とする請求の範囲第２項記載の画像データ配信装置。
12. 画像データ配信装置より通知されるセッション情報を受信する手段と、
    前記セッション情報をもとに、画像データ配信装置より配信される画像符号化データを受信し、正常に受信できた符号化データの中から、画質、及び／又は、圧縮率に基づき、画像符号化データを選択する手段と、
    選択された画像符号化データを復号化する手段と、
    を備えている、ことを特徴とする画像データ受信装置。
13. 画像データ配信装置より通知されたデータの秘匿化に関する情報を受信する手段と、
    前記秘匿化に関する情報をもとに、画像データ配信装置より受信した秘匿化された画像符号化データを復元し、正常に復元できた画像符号化データの中から、画質、及び／又は、圧縮率に基づき、画像符号化データを選択する手段と、
    選択された画像符号化データを復号化する手段と、
    を備えている、ことを特徴とする画像データ受信装置。
14. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、同一画像の、圧縮率の異なる画像符号化データを配信する際、圧縮率によって配信するセッションを選択する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
15. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、同一画像の、圧縮率の異なる画像符号化データを配信し、受信者に応じて通知するセッション情報を変えることで、受信者の受信画像品質を制御する手段を備えている、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
16. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、同一画像の、圧縮率の異なる画像符号化データを配信する際、圧縮率によって選択された配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
17. 前記画像符号化データは、同一の符号化方式であり、同一のフレーム構成である、ことを特徴とする請求の範囲第１４項乃至第１６項のいずれか一項に記載の画像データ配信システム。
18. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、画像符号化データを配信する際、画像フレームや画像ブロックの種別によって配信するセッションを選択する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
19. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、画像フレームや画像ブロックの種別の異なった画像符号化データを配信し、受信者に応じて通知するセッション情報を変えることで、前記画像データ受信装置での受信品質を制御する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
20. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、画像符号化データを配信する際、画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
21. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に対して、配信データの秘匿の有無、秘匿の有の場合、秘匿方法及び／又は秘匿強度の異なった画像符号化データを、少なくとも１つ以上のセッションで配信し、前記画像データ受信装置に応じて通知する秘匿化に関する情報を変えることで、受信者側での受信品質を制御する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
22. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ受信装置は、前記画像データ配信装置より通知されたセッション情報をもとに動画像符号化データを受信し、正常に受信できた符号化データの中から、画質、及び／又は、圧縮率に基づき、データを選択して復号化する手段を備えている、ことを特徴とする画像データ配信システム。
23. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ受信装置では、前記画像データ配信装置より通知された、データの秘匿化に関する情報をもとに受信した秘匿化データを復元し、正常に復元できた動画像符号化データの中から、画質、及び／又は、圧縮率に基づき、データを選択して復号化する手段を備えている、ことを特徴とする画像データ配信システム。
24. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、同一画像の、圧縮率の異なる画像符号化データを配信するステップと、
    前記圧縮率によって、前記配信するセッションを選択するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
25. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、同一画像の、圧縮率の異なる画像符号化データを配信するステップと、
    受信者に応じて通知するセッション情報を変えることで、受信者の受信画像品質を制御するステップ、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
26. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、同一画像の、圧縮率の異なる画像符号化データを配信するステップと、
    圧縮率によって選択された配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
27. 前記画像符号化データは、符号化方式及びフレーム構成が同一である、ことを特徴とする請求の範囲第２４項乃至第２６項のいずれか一項に記載の画像データ配信制御方法。
28. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像符号化データを配信するステップと、
    画像フレームや画像ブロックの種別によって、前記配信するセッションを選択するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
29. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像フレームや画像ブロックの種別の異なった画像符号化データを配信するステップと、
    受信者に応じて通知するセッション情報を変えることで、受信者の受信品質を制御するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
30. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像符号化データを配信するステップと、
    画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
31. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度の異なった画像符号化データを、少なくとも１つ以上のセッションで配信するステップと、
    受信者に応じて通知する秘匿化に関する情報を変えることで、受信者側での受信品質を制御するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
32. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ受信装置が、前記画像データ配信装置より通知されたセッション情報をもとに画像符号化データを受信するステップと、
    前記画像データ受信装置が、正常に受信できた画像符号化データの中から、画質、及び／又は、圧縮率に基づき、画像符号化データを選択するステップと、
    選択された画像符号化データを復号化するステップと、
    を含む、ことを特徴とする画像データ配信制御方法。
33. 画像データ配信装置から画像データ受信装置への画像データの配信を制御する方法であって、
    前記画像データ受信装置が、前記画像データ配信装置より通知されたデータの秘匿化に関する情報をもとに受信した秘匿化データを復元するステップと、
    正常に復元できた画像符号化データの中から、画質、及び／又は、圧縮率に基づき、画像符号化データを選択するステップと、
    選択された画像符号化データを復号化するステップと、
    を含む、ことを特徴とする画像データ配信制御方法。
34. 同一画像の、圧縮率の異なる画像符号化データを配信する際、圧縮率によって配信するセッションを選択し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
35. 同一画像の、圧縮率の異なる画像符号化データを配信し、受信者に応じて通知するセッション情報を変えることで、受信側での受信画像品質を制御し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
36. 同一画像の、圧縮率の異なる画像符号化データを配信する際、圧縮率によって選択された配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
37. 請求の範囲第３４項乃至第３６項のいずれか一項に記載のプログラムにおいて、前記画像符号化データは、符号化方式、及びフレーム構成が同一である、ことを特徴とするプログラム。
38. 画像符号化データを配信する際、画像フレームや画像ブロックの種別によって配信するセッションを選択し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
39. 画像フレームや画像ブロックの種別の異なった画像符号化データを配信し、受信者に応じて通知するセッション情報を変えることで、受信者側の受信品質を制御し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
40. 画像符号化データを配信する際、画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定するし、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
41. 配信データの秘匿の有無、秘匿有りの場合秘匿方法、及び／又は秘匿強度の異なった画像符号化データを、少なくとも１つ以上のセッションで配信し、受信者に応じて通知する秘匿化に関する情報を変えることで、受信者の受信品質を制御し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
42. 画像データ配信装置より通知されたセッション情報をもとに動画像符号化データを受信し、正常に受信できた符号化データの中から、画質、及び／又は、圧縮率に基づき、データを選択して復号化する処理を、画像データ受信装置を構成するコンピュータに実行させるプログラム。
43. 画像データ受信装置では、画像データ配信装置より通知されたデータの秘匿化に関する情報をもとに受信した秘匿化データを復元し、正常に復元できた動画像符号化データの中から、画質、及び／又は、圧縮率に基づき、データを選択して復号化する処理を、画像データ受信装置を構成するコンピュータに実行させるプログラム。
44. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    同一画像の圧縮率の異なる複数の画像符号化データを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信された画像データを受信する手段と、
    受信した画像符号化データのうち、画質、及び／又は、圧縮率に基づきデータを選択し、１つの画像符号化データに再構成する手段と、
    再構成された画像符号化データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
45. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    動画像データのＩピクチャ及びＰピクチャ、又は、動画像データのＩピクチャ、Ｐピクチャ、及びＢピクチャの符号化データを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信された動画像データを受信する手段と、
    受信した動画像データを、前記画像データ配信装置から通知された情報をもとに、１つの動画像データに再構成する手段と、
    再構成された動画像データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
46. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    動画像データと、動画像データの当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、それぞれ異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置より通知されたセッション情報をもとに、少なくとも１つのセッションにより配信されたデータを受信する手段と、
    受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成する手段と、
    再構成された動画像データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
47. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    動画像データのＩピクチャとＰピクチャ、又は、Ｉピクチャ、ＰピクチャとＢピクチャ、及び動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置より通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信する手段と、
    受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成する手段と、
    再構成された動画像データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
48. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    同一の画像の圧縮率の異なる複数の動画像データそれぞれのＩピクチャ、Ｐピクチャ、又は、Ｉピクチャ、Ｐピクチャ、Ｂピクチャの符号化データを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信する手段と、
    受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成する手段と、
    再構成された動画像データを復号化する手段と、を備えている、ことを特徴とする画像データ配信システム。
49. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    同一の画像の、圧縮率の異なる複数の動画像データそれぞれのＩピクチャとＰピクチャ、又は、ＩピクチャとＰピクチャとＢピクチャ、及び、動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信する手段と、
    受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成する手段と、
    再構成された動画像データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
50. 前記画像データ配信装置が、配信するセッションごとに配信データの秘匿の有無、秘匿の有の場合には、秘匿方法及び／又は秘匿の強度を含む情報を設定する手段と、
    秘匿に関する設定情報を前記画像データ受信装置に通知する手段と、
    を備え、
    前記画像データ受信装置が、前記画像データ配信装置から通知された秘匿に関する設定情報を受信し、前記情報に基づき、秘匿化された受信動画像データを復元する手段を備えている、ことを特徴とする請求の範囲第４４項乃至第４９項のいずれか一項に記載の画像データ配信システム。
51. 画像データ配信装置から伝送路を介して、画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、同一の画像の、圧縮率の異なる複数の動画像データを、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信された画像データを受信するステップと、
    前記画像データ受信装置が、受信した画像データのうち画質、及び／又は、圧縮率に基づきデータを選択し、１つの画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
52. 画像データ配信装置から伝送路を介して画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、動画像データのＩピクチャとＰピクチャ、又は、ＩピクチャとＰピクチャとＢピクチャの符号化データを、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信するステップと、
    前記画像データ受信装置が、受信した動画像データを１つの動画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された動画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
53. 画像データ配信装置から伝送路を介して画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、動画像データと、動画像データの当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信するステップと、
    前記画像データ受信装置が、受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された動画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
54. 画像データ配信装置から伝送路を介して画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、動画像データのＩピクチャ、Ｐピクチャ、又は、Ｉピクチャ、ＰピクチャとＢピクチャ、及び動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、通知されたセッション情報をもとに、少なくとも１つのセッションにより配信されたデータを受信するステップと、
    前記画像データ受信装置が、受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された動画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
55. 画像データ配信装置から伝送路を介して画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、同一画像の、圧縮率の異なる複数の動画像データのＩピクチャ及びＰピクチャ、又は、Ｉピクチャ、Ｐピクチャ、及びＢピクチャの符号化データ、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信されたデータを受信するステップと、
    前記画像データ受信装置が、受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された動画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
56. 画像データ配信装置から伝送路を介して画像データ受信装置に画像データを配信する制御方法において、
    前記画像データ配信装置が、同一画像の、圧縮率の異なる複数の動画像データそれぞれのＩピクチャとＰピクチャ、又は、ＩピクチャとＰピクチャとＢピクチャ、及び、動画像の当該フレームの少なくとも一部をイントラ−マクロブロック（Ｉｎｔｒａ−ＭＢ）符号化したデータを、複数の異なったセッションで配信するステップと、
    前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知されたセッション情報をもとに、少なくとも１つのセッションにより配信されたデータを受信するステップと、
    前記画像データ受信装置が、受信した動画像データのうち、画質、及び／又は、圧縮率に基づいてデータを選択し、１つの動画像データに再構成するステップと、
    前記画像データ受信装置が、再構成された動画像データを復号化するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
57. 前記画像データ配信装置が、配信するセッションごとに配信データの秘匿の有無、秘匿の有の場合には、秘匿方法及び／又は秘匿の強度を含む情報を設定するステップと、
    前記画像データ配信装置が、秘匿に関する設定情報を前記画像データ受信装置に通知するステップと、
    前記画像データ受信装置が、前記画像データ配信装置から通知された秘匿に関する設定情報を受信し、前記情報に基づき、秘匿化された受信動画像データを復元するステップ、
    を含む、ことを特徴とする請求の範囲第５１項乃至第５６項のいずれか一項に記載の画像データ配信制御方法。
58. 同一画像の、圧縮率の異なる画像符号化データを配信する手段と、
    圧縮率によって配信するセッションを選択する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
59. 同一画像の、圧縮率の異なる画像符号化データを配信する手段と、
    受信者に応じて通知するセッション情報を変えることで、受信者側での受信画像品質を制御する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
60. 同一画像の、圧縮率の異なる画像符号化データを配信する手段と、
    圧縮率によって選択された配信セッションごとに画像符号化データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
61. 前記画像符号化データは、符号化方式及びフレーム構成が同一である、ことを特徴とする請求の範囲第５８項乃至第６０項のいずれか一項に記載の画像データ配信装置。
62. 画像符号化データを配信する手段と、
    画像フレームや画像ブロックの種別によって配信するセッションを選択する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
63. 画像フレームや画像ブロックの種別の異なった画像符号化データを配信する手段と、
    受信者に応じて通知するセッション情報を変えることで、受信者側での受信品質を制御する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
64. 画像符号化データを配信する手段と、
    画像フレームや画像ブロックの種別によって選択された配信セッションごとに、配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
65. 配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報の異なった画像符号化データを、少なくとも１つ以上のセッションで配信する手段と、
    受信者に応じて通知する秘匿化に関する情報を変えることで、受信者側での受信品質を制御する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
66. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び／又は、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
    圧縮率の異なった画像符号化データを送信する複数の画像符号化データ送信手段と、
    を備えている、ことを特徴とする請求の範囲第５８項記載の画像データ配信装置。
67. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び／又は、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
    フレーム内符号化、又はフレーム間での予測符号化に関して、種別の異なった動画像符号化データを送信する複数の画像符号化データ送信手段と、
    を備えている、ことを特徴とする請求の範囲第５９項記載の画像データ配信装置。
68. 画像データ受信装置に対して、配信を許すセッションの情報を管理し、画像データ受信装置に応じて通知すべきセッション情報、及び／又は、画像品質に関わる画像符号化情報を画像データ受信装置に通知する手段と、
    圧縮率が異なり、フレーム内符号化、又はフレーム間での予測符号化に関して種別の異なった動画像符号化データを送信する複数の画像符号化データ送信手段と、
    を備えている、ことを特徴とする請求の範囲第５９項記載の画像データ配信装置。
69. 画像符号化データを複数のセッションにより配信する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
70. 画像符号化データを複数のセッションにより配信する手段と、
    受信者に応じて通知するセッション情報を変えることで、受信者側での受信画像品質を制御する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
71. 画像符号化データを複数のセッションにより配信する手段と、
    圧縮率によって選択された配信セッションごとに画像符号化データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信装置。
72. 前記画像符号化データの各送信単位は、それぞれ同一フレームの同一部位が符号化されたデータである、ことを特徴とする請求の範囲第１項乃至第４項、第５８項乃至第６１項、第６９項乃至第７１項のいずれか一項に記載の画像データ配信装置。
73. 画像符号化データを、複数のセッションで配信する手段と、
    受信者に応じて通知するセッション情報を変えることで、受信側での受信品質を制御する手段と、
    を備えている、ことを特徴とする画像データ配信装置。
74. 前記画像符号化データを、時間差を設けて配信する、ことを特徴とする請求の範囲第９項、第１１項、第６６項、第６８項乃至第７２項のいずれか一項に記載の画像データ配信装置。
75. 前記配信セッションの少なくとも２つを多重化して送信する手段をさらに少なくとも１つ備え、少なくとも１つのセッションで配信する、ことを特徴とする請求の範囲第１項、第３項乃至第５項、第７項乃至第９項、第５８項、第６９項、第７２項、第７４項のいずれか一項に記載の画像データ配信装置。
76. 前記画像データ受信装置において、少なくとも１つの画像符号化データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも一つに基づき、選択する手段をさらに備える、ことを特徴とする請求の範囲第１２項又は第１３項に記載の画像データ受信装置。
77. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、画像符号化データを複数のセッションで配信する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
78. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、画像符号化データを複数のセッションで配信し、受信者に応じて通知するセッション情報を変えることで、受信者の受信画像品質を制御する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
79. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する画像データ受信装置と、を備え、
    前記画像データ配信装置は、前記画像データ受信装置に、画像符号化データを複数のセッションで配信する際、圧縮率によって選択された配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定する手段を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信システム。
80. 前記画像符号化データの各送信単位は、それぞれ同一フレームの同一部位が符号化されたデータであることを特徴とする、請求の範囲第１４項乃至第１７項、第７７項乃至第７９項のいずれか一項に記載の画像データ配信システム。
81. 前記画像符号化データを、時間差を設けて配信する、ことを特徴とする請求の範囲第１４項乃至第１７項、第７７項乃至第７９項のいずれか一項に記載の画像データ配信システム。
82. 前記配信セッションの少なくとも２つを多重化して送信する手段を、さらに少なくとも１つ備え、少なくとも１つのセッションで配信する、ことを特徴とする請求の範囲第１４項、第１６項乃至第１８項、第２０項、第２１項、第７７項、第８１項のいずれか一項に記載の画像データ配信システム。
83. 前記画像データ受信装置において、少なくとも１つの画像符号化データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも一つに基づき、選択する手段をさらに備える、ことを特徴とする請求の範囲第２２項又は第２３項に記載の画像データ配信システム。
84. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像符号化データを複数のセッションで配信するステップ、を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
85. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像符号化データを複数のセッションで配信するステップと、
    受信者に応じて通知するセッション情報を変えることで、受信者の受信画像品質を制御するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
86. 画像データ配信装置から画像データ受信装置へ画像データを配信する制御方法であって、
    前記画像データ配信装置が、画像符号化データを複数のセッションで配信するステップと、
    圧縮率によって選択された配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定するステップと、
    を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
87. 前記画像符号化データの各送信単位は、それぞれ同一フレームの同一部位が符号化されたデータである、ことを特徴とする、請求の範囲第２４項乃至第２７項、第８４項乃至第８６項のいずれか一項に記載の画像データ配信制御方法。
88. 前記画像符号化データを、時間差を設けて配信する、ことを特徴とする請求の範囲第２４項乃至第２７項、第８４項乃至第８７項のいずれか一項に記載の画像データ配信制御方法。
89. 前記配信セッションの少なくとも２つを多重化して送信するステップを有し、少なくとも１つのセッションで配信する、ことを特徴とする、請求の範囲第２４項、第２６項乃至第２８項、第３０項、第３１項、第８４項、第８８項のいずれか一項に記載の画像データ配信制御方法。
90. 前記画像データ受信装置において、少なくとも１つの画像符号化データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも一つに基づき、選択する手段を、さらに備える、ことを特徴とする請求の範囲第３２項又は第３３項に記載の画像データ配信制御方法。
91. 画像符号化データを複数のセッションで配信し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
92. 画像符号化データを複数のセッションで配信し、受信者に応じて通知するセッション情報を変えることで、受信側での受信画像品質を制御し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
93. 画像符号化データを複数のセッションで配信し、配信セッションごとに配信データの秘匿の有無、秘匿有りの場合秘匿方法及び／又は秘匿強度を含む情報を設定し、配信されるセッションの少なくとも１つをマルチキャスト又はブロードキャスト方式により送信する処理を、画像データ配信装置を構成するコンピュータに実行させるプログラム。
94. 請求の範囲第３４項乃至第３７項、第９１項乃至第９３項のいずれか一項に記載のプログラムにおいて、前記画像符号化データの各送信単位は、それぞれ同一フレームの同一部位が符号化されたデータである、ことを特徴とするプログラム。
95. 請求の範囲第３４項乃至第３７項、第９１項乃至第９３項のいずれか一項に記載のプログラムにおいて、前記画像符号化データを、時間差を設けて配信する処理を、前記コンピュータに実行させるプログラム。
96. 請求の範囲第３５項乃至第３８項、第４０項、第４１項、第９１項、第９５項のいずれか一項に記載のプログラムにおいて、
    前記配信セッションの少なくとも２つを多重化して送信し、少なくとも１つのセッションで配信する処理を、前記コンピュータに実行させるプログラム。
97. 請求の範囲第４２項又は第４３項に記載のプログラムにおいて、
    少なくとも１つの画像符号化データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも一つに基づき、選択する処理を、前記コンピュータに実行させるプログラム。
98. 画像データ配信装置と、画像データ受信装置と、前記画像データ配信装置からの情報を前記画像データ受信装置に伝送するための伝送路と、を備え、
    前記画像データ配信装置は、
    画像符号化データを、複数の異なったセッションで配信する手段と、
    前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知する手段と、
    を備え、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信され、
    前記画像データ受信装置は、
    前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションにより配信された画像データを受信する手段と、
    受信した画像符号化データのうち、画質、及び／又は、圧縮率に基づきデータを選択し、１つの画像符号化データに再構成する手段と、
    再構成された画像符号化データを復号化する手段と、
    を備えている、ことを特徴とする画像データ配信システム。
99. 前記画像符号化データを、時間差を設けて配信する、ことを特徴とする請求の範囲第４８項乃至第５０項、第９８項のいずれか一項に記載の画像データ配信システム。
100. 前記配信セッションの少なくとも２つを多重化して送信する手段を、さらに少なくとも１つ備え、少なくとも１つのセッションで配信することを特徴とする、請求の範囲第４４項乃至第５０項、第９８項、第９９項のいずれか一項に記載の画像データ配信システム。
101. 画像データ配信装置から伝送路を介して、画像データ受信装置に画像データを配信する制御方法において、
     前記画像データ配信装置が、動画像データを複数の異なったセッションで配信するステップと、
     前記画像データ配信装置が、前記画像データ受信装置に対して、配信を許可するセッション情報、及び／又は、受信を許可する品質を含む情報を通知するステップと、
     前記画像データ受信装置が、前記画像データ配信装置から通知された情報をもとに、少なくとも１つのセッションによる配信された画像データを受信するステップと、
     前記画像データ受信装置が、受信した画像データのうち画質、及び／又は、圧縮率に基づきデータを選択し、１つの画像データに再構成するステップと、
     前記画像データ受信装置が、再構成された画像データを復号化するステップと、
     を含み、配信セッションの少なくとも１つはマルチキャスト又はブロードキャスト方式により送信される、ことを特徴とする画像データ配信制御方法。
102. 前記画像符号化データを、時間差を設けて配信する、ことを特徴とする請求の範囲第５１項、第５５項乃至第５７項、第１０１項のいずれか一項に記載の画像データ配信制御方法。
103. 前記配信セッションの少なくとも２つを多重化するステップを有し、少なくとも１つのセッションで配信する、ことを特徴とする請求の範囲第５１項乃至第５７項、第１０１項、第１０２項のいずれか一項に記載の画像データ配信制御方法。
104. 前記画像データ受信装置において、少なくとも１つの画像符号化データの受信の有無を、受信データの誤り／損失率、利用可能な電力、あらかじめ定められた設定のうちの少なくとも一つに基づき、選択する手段を、さらに備えることを特徴とする請求の範囲第５１項乃至第５７項、第１０１項乃至第１０３項のいずれか一項に記載の画像データ配信制御方法。
105. 前記画像データ受信装置において、前記符号化データを再構成する手段で、イントラ−マクロブロック符号化した符号化データを、所定の方法で選択することを特徴とする請求の範囲第４６項、第４７項、第４９項のいずれか一項に記載の画像データ配信システム。
106. 前記画像データ受信装置において、前記符号化データを再構成する手段で、イントラ−マクロブロック符号化した符号化データを、所定の方法で選択することを特徴とする請求の範囲第５３項、第５４項、第５６項のいずれか一項に記載の画像データ配信制御方法。
107. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する複数の画像データ受信装置と、
     を備え、
     前記画像データ配信装置は、画像符号化データを伝送路に送信する複数の送信手段と、
     配信先の前記画像データ受信装置に応じたセッション情報を伝送路を介して前記画像データ受信装置に通知する手段と、
     を備え、
     前記画像データ配信装置は、一の前記画像データ受信装置には、前記複数の送信手段のうち少なくとも２つの前記送信手段から同一画像の画像符号化データを配信し、
     他の前記画像データ受信装置には、１つの前記送信手段、又は、一の前記画像データ受信装置に対して画像符号化データを送信する前記送信手段の個数よりも少ない数の前記送信手段にて、画像符号化データを送信することで、一及び他の前記画像データ受信装置における受信画像データの品質を可変に制御する、ことを特徴とする画像データ配信システム。
108. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する複数の画像データ受信装置と、
     を備え、
     前記画像データ配信装置は、画像符号化データを伝送路に送信する複数の送信手段と、
     配信先の前記画像データ受信装置に応じたセッション情報を伝送路を介して前記画像データ受信装置に通知する手段と、
     を備え、
     前記画像データ配信装置は、一の前記画像データ受信装置には、前記複数の送信手段のうち少なくとも１つの前記送信手段から画像符号化データをユニキャスト方式で配信し、
     一の前記画像データ受信装置及び他の前記画像データ受信装置には、１つの前記送信手段から配信される画像符号化データと同一画像であり、圧縮率が異なる画像符号化データを、他の少なくとも１つの前記送信手段からマルチキャスト又はブロードキャスト方式で送信することで、一及び他の前記画像データ受信装置における受信画像データの品質を可変に制御する、ことを特徴とする画像データ配信システム。
109. 画像データを配信する画像データ配信装置と、前記画像データ配信装置から配信される画像データを受信する複数の画像データ受信装置と、
     を備え、
     前記画像データ配信装置は、画像符号化データを伝送路に送信する複数の送信手段と、
     配信先の前記画像データ受信装置に応じて、秘匿化されて配信される画像符号化データを元に戻すための復元情報を伝送路を介して前記画像データ受信装置に通知する手段と、
     を備え、
     前記画像データ配信装置は、一の前記画像データ受信装置及び他の前記画像データ受信装置には、少なくとも１つの前記送信手段から、秘匿化した同一画像の画像符号化データを配信し、
     一の前記画像データ受信装置には、前記秘匿化した同一画像の画像符号化データを元に戻すための復元情報を通知し、一方、他の前記画像データ受信装置には、前記秘匿化した同一画像の画像符号化データを元に戻すための復元情報を通知しないか、又は、同一画像の相対的に圧縮率の高い画像符号化データの復元情報を通知するか、又は、一の前記画像データ受信装置に対して配信する同一画像の複数の画像符号化データよりも少ない数分の画像符号化データの復元情報を通知することで、一及び他の前記画像データ受信装置における受信画像データの品質を可変に制御する、ことを特徴とする画像データ配信システム。
110. 前記画像データ配信装置は、複数の前記送信手段の出力を１つのセッションに多重化して送信する多重送信手段を少なくとも１つ備え、
     前記画像データ受信装置は、１つのセッションに多重化された受信信号から画像符号化データを分離する分離手段を少なくとも１つ備えている、ことを特徴とする請求の範囲第１０７項乃至第１０９項のいずれか一項に記載の画像データ配信システム。

Images