JP2014506062A - Ｐｐｇ関連情報を保存するビデオ符号化及び復号化デバイス及び方法 - Google Patents

Abstract

本発明は、ビデオデータをエンコードするためのビデオエンコーディングデバイス１０，１０´，１０´´´及び方法、並びに、対応するビデオデコーディングデバイス６０，６０´に関する。ビデオエンコーダ出力ストリームのための大量の追加のデータを必要とすることなくエンコード後にＰＰＧ関連情報を保存するために、提案されたビデオエンコーディングデバイスは、強いＰＰＧ信号を供給する入力ビデオデータ１００において関心のある領域１０１を選択するための選択ユニット２０，２０´と、エンコードされた関心のある領域におけるＰＰＧ関連情報を保存するためにエンコーディングの第１の設定により予め決められたエンコーディングスキームに従って前記入力ビデオデータ１００の選択された関心のある領域１０１をエンコードするための第１のエンコーディングユニット３０，３０´と、エンコーディングの第２の設定により前記予め決められたエンコーディングスキームに従って前記入力ビデオデータ１００の残りの部分１０３をエンコードするための第２のエンコーディングユニット４０，４０´と、エンコードされた関心のある領域１０２及び前記入力ビデオデータのエンコードされた残りの部分１０４をエンコーダ出力ビデオストリーム１０５に組み合わせるためのエンコーダ組み合わせユニット５０とを有する。

Description

本発明は、ＰＰＧ（photo plethysmographic imaging）関連情報が保存される、ビデオデータをエンコードするためのビデオエンコーディングデバイス及び対応するビデオエンコーディング方法に関する。

更に、本発明は、エンコードされたビデオデータをデコードするためのビデオデコーディングデバイス及び対応するビデオデコーディング方法に関する。

また更に、本発明は、ビデオデータをエンコード及びデコードするためのビデオ符号化システム、並びに、前記方法を実装するためのコンピュータプログラムに関する。

人々の生物測定信号の強い連続的モニタリングのための技術的ソリューションを与えるという増加している要求がある。この要求は、より若い世代の中の健康的でアクティブなライフスタイルの重要性の発達している認識の結果である。その上、増大された寿命の結果として絶えず高齢化する人口は、人の日常生活活動に対する最小限の干渉を伴う健康モニタリングシステムの必要性に追加の圧力をかける。生物測定信号の控え目なモニタリングは、いつでも体及びマインド状態に関する事実上直接のフィードバックを与え、できるだけ早く人々の健康状況の変化を評価するために用いられ得る。

生物測定信号（例えば、心拍数、呼吸速度、血圧、皮膚酸化等）を測定する従来のデバイス及び方法は、ユーザが面倒な体センサを着用することを必要とし、これは、通常の人間の生活活動に対して目障りなように体験され得る。それ故、近年、バイタル体信号の遠隔モニタリングに関するコンタクトレス技術を開発するという試みが見られる。最新の開発は、消費者（ウェブカメラ）又は放送ビデオのために設計されたイメージングセンサによる控え目な遠隔モニタリングの実装を示す。

皮膚色変化を測定する方法（ＰＰＧ（Photo-Plethysmographic imaging）と呼ばれている）は、Wim Verkruysse、 Lars O. Svaasand 及び J. Stuart Nelsonによる"Remote plethysmographic imaging using ambient light", Optics Express, Vol. 16, No. 26, December 2008において述べられる。これは、皮膚における血液量の時間的変化が皮膚による光吸収の変化をもたらすという原理に基づく。斯様な変化は、皮膚エリア（例えば顔）の画像をとるビデオカメラにより登録され得る一方で、処理は、手動で選択された領域（典型的にはこのシステムにおける頬の部分）にわたるピクセル平均を計算する。この平均信号の周期的な変化を調べることにより、心拍速度及び呼吸速度が抽出され得る。

心拍又は呼吸速度信号の遠隔測定に関する既知のシステムは、画像検出の直後の圧縮されていない未処理のビデオシーケンスの分析に基づく。ほとんどの"実在の"アプリケーションにおいて、ビデオシーケンスは、圧縮された形態で格納又は出力される。ビデオ信号の圧縮は、（表示の視覚ポイントからの）いくつかの冗長な情報の削除を仮定する。不都合にも、視覚にとって重要でない情報は、生物測定信号の検出のために重要であり得る。例えば、ＭＰＥＧ圧縮規格は、ビデオ信号の時間的情報を僅かに変えるフレーム間予測を利用する。これらの変化は、時間的生物測定信号の検出を困難又は不可能にする。しかしながら、多くのアプリケーションに関して、ビデオからの心拍信号の抽出は、ビデオレコーディングが行われた後に実行されるべきである。これらの場合においては、圧縮ビデオが処理されるだろう。

ＰＰＧ関連情報は、ビデオが高ビットレートで圧縮される場合に、符号化されたビットストリームにおいて保存され得る。しかしながら、低圧縮比でのビデオの圧縮は、格納ファイルのサイズを増大させるか又は伝送帯域幅を増大させるだろう。それ故、特に従来のビデオコーディング規格のうちの１つによる、ビデオレコーディング及び圧縮の間における、生物測定信号のオフライン抽出のために必要とされる情報の保存の必要性がある。

（ＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４のような）標準のビデオ符号化技術は、時間予測を適用することによりビデオ情報の大幅な圧縮を実現する。ビデオシーケンス（タイプＢ及びＰ、Ｂは"双方向予測フレーム"を意味し、Ｐは"前方予測フレーム"を意味する）におけるフレームのほとんどは、元のフレームと動作補正されたインター符号化フレーム（タイプＢ又はＰ）との間の量子化された差分としてエンコードされる。視覚的情報の一部は、量子化及び動作予測のため失われる。この情報は、視覚的認識の観点からは重要ではないが、心拍のような生物測定信号の抽出のために重要なデータを含む。

ＰＰＧ情報は、ビデオが、時間予測を適用することなく、及び／又は、（Ｈ．２６４に関して）デブロッキングフィルタリングを用いることなく、高ビットレートで圧縮された場合に、ビデオシーケンスにおいて保存され得る。例えば、内部フレーム符号化のみに基づくＭＪＰＥＧ又はＭＪＰＥＧ２Ｋは、ビデオを圧縮してＰＰＧ信号を保存するために適用され得る。しかしながら、フレーム全体の内部符号化は、ほとんどのマルチメディアアプリケーションにより必要とされる圧縮比を提供し得ない。それ故、とりわけ、標準の不可逆ビデオ圧縮技術を用いたビデオの圧縮を可能にし、ビデオのデコード後にＰＰＧ信号の抽出のために必要とされる画像情報を保存する方法及びデバイスの必要がある。

本発明の目的は、大量の追加のデータを必要とすることなくＰＰＧ関連情報が保存される、ビデオデータをエンコードするためのビデオエンコーディングデバイス及び対応するビデオエンコーディング方法を提供することにある。本発明の更なる目的は、対応するビデオデコーディングデバイス及び方法、ビデオ符号化システム並びに前記方法を実装するためのコンピュータプログラムを提供することにある。

本発明の第１の態様において、入力ビデオデータをエンコードするためのビデオエンコーディングデバイスであって、強いＰＰＧ信号を供給するために用いられ得る１又はそれ以上の関心のある領域を入力ビデオデータにおいて選択するための選択ユニットと、エンコードされた１又はそれ以上の関心のある領域におけるＰＰＧ関連情報を保存するためにエンコーディングの第１の設定により予め決められたエンコーディングスキームに従って前記入力ビデオデータ１０２の前記１又はそれ以上の関心のある領域をエンコードするための第１のエンコーディングユニットと、エンコーディングの第２の設定により前記予め決められたエンコーディングスキームに従って前記入力ビデオデータの残りの部分をエンコードするための第２のエンコーディングユニットと、エンコードされた１又はそれ以上の関心のある領域及びエンコードされた残りの部分を前記入力ビデオデータのエンコーダ出力ビデオストリームに組み合わせるためのエンコーダ組み合わせユニットとを有する、ビデオエンコーディングデバイスが示される。

本発明の他の態様において、エンコードされたビデオストリームをデコードするためのビデオデコーディングデバイスであって、前記エンコードされたビデオストリームは、エンコードされたビデオデータを有し、入力ビデオデータの１又はそれ以上の関心のある領域は、エンコードされた１又はそれ以上の関心のある領域におけるＰＰＧ関連情報を保存するために、エンコードの第１の設定により予め決められたエンコーディングスキームに従ってエンコードされたものであり、前記入力ビデオデータの残りの部分は、エンコードの第２の設定により前記予め決められたエンコードスキームに従ってエンコードされたものであり、前記ビデオデコーディングデバイスは、前記１又はそれ以上の関心のある領域をエンコードするために用いられたエンコードスキームに対して相補的なデコーディングスキームに従って、エンコードされた１又はそれ以上の関心のある領域をデコードするための第１のデコーディングユニットと、デコードされた１又はそれ以上の関心のある領域からＰＰＧ信号を抽出するためのＰＰＧ抽出ユニットとを有する、ビデオデコーディングデバイスが示される。

本発明の更なる態様において、対応するビデオ符号化方法、対応するビデオデコーディング方法、ビデオ符号化システム、及び、前記コンピュータプログラムがコンピュータ上で実行されたときに前記の提案された方法のステップをコンピュータに実行させるためのプログラムコード手段を有するコンピュータプログラムが示される。

本発明の好ましい実施形態は、従属請求項において規定される。請求項に記載されたビデオデコーディングデバイス、ビデオ符号化システム、方法及びコンピュータプログラムは、請求項に記載されたビデオ符号化デバイス及び従属請求項において規定されたものと類似のおよび／または同一の好ましい実施形態を有することが理解されるべきである。

本発明は、ＰＰＧ信号が抽出されない（又は抽出され得ない）ビデオデータの他のエリアとは異なり（即ち、ＰＰＧ関連情報に関して実質的に損失なく）、エンコードされたビデオ信号におけるＰＰＧ関連情報の保存のために、強いＰＰＧ信号（とりわけ、最も強いＰＰＧ信号）を導出することを可能にするＰＰＧ関連情報を有する１又はそれ以上のエリアを含む１又はそれ以上の関心のある領域をエンコードするという思想に基づく。詳細には、局所符号化パラメータ（通常、エンコーダの特定の設定）が１又はそれ以上の関心のある領域をエンコードするために設定され、ビット−バジェットは、ＰＰＧ信号の抽出に役立つ１又はそれ以上の空間的画像エリア（即ち、１又はそれ以上の関心のある領域）に割り当てられ得る一方で、エンコード（例えば、圧縮比）と（少なくとも部分的に）デコードされた信号から抽出されるＰＰＧ信号の品質との間の最適なトレードオフを提供する。

生物測定信号は、例えばビデオカメラから流されるか又は圧縮されていないことが記録されたビデオシーケンスからＰｈｏｔｏ−Ｐｌｅｔｈｙｓｍｏｇｒａｐｈｙ（ＰＰＧ）原理を用いて検出され得る。上述の如く、実用的なアプリケーションにおいて、斯様な観察は、常に支持されるものではない。本発明は、例えば標準のビデオ符号器により、ビデオ圧縮の間、ＰＰＧ信号／生物測定信号の抽出のためのＰＰＧ視覚的情報を保存することを実現する一方で、低ビットレートでの圧縮を可能にする。好ましくは、本発明は、例えばデータキャリア上への格納のために、又は、伝送ライン（例えばインターネット若しくは移動通信手段システム）を介した伝送のために、規格に準拠した符号化ビットストリームの生成を可能にする。

この文書において、"ＰＰＧ関連情報"という表現は、ＰＧＧ信号を得ることに関連する情報として理解されるべきである。斯様なＰＰＧ関連情報は、人間の目では認識されない元のビデオデータに含まれる情報（例えば、人の皮膚のわずかな色変化）を含み得る。この文書における"ＰＰＧ信号"という表現は、一般に、時間的生物測定信号、例えば鼓動、心周期、呼吸速度、ＳｐＯ２、麻酔の深さ又は低血及び多血のような、ＰｈｏｔｏＰｌｅｔｈｙｓｍｏＧｒａｐｈｙ分析を介して得られ得る任意の信号を意味する。

好ましい実施形態において、前記エンコーディングデバイスは、入力ビデオデータにおけるエリア（とりわけ、皮膚エリア）を関心のある領域として選択するためのエリア選択ユニットであって、前記ビデオデータは、ビデオフレームのシーケンスを有し、これらのフレームは、空間ブロックに分割される、エリア選択ユニットと、選択されたエリアに関する前記空間ブロックを決定するためのブロック選択ユニットであって、決定された空間ブロックが関心のある領域を表す、ブロック選択ユニットとを更に有する。通常、ビデオデータは、ビデオフレームのシーケンスとして利用可能であり、各フレームは、（例えば、４ｘ４又は１６ｘ１６ピクセルを有するサイズの）空間ブロックに分割される。それ故、この実施形態による後のエンコードのために、第１のエンコーディングユニットでエンコードされるべき最適な空間ブロックが見つけられる。

他の実施形態によれば、前記エリア選択ユニットは、関心のある領域として用いられ得る入力ビデオデータにおける潜在的に使用可能なエリア（とりわけ、皮膚エリア）のセットを検出するための検出ユニットと、検出された潜在的に使用可能なエリアのセットを分析し、１又はそれ以上の予め決められた選択基準に基づいてエリアを関心のある領域として選択するための分析ユニットとを有する。斯様な分析ユニットは、とりわけ１又はそれ以上のビデオフレームにおいて、例えば、ビデオデータ中の顔及び／又は皮膚領域を検出するための顔及び／又皮膚検出器を有してもよい。それ故、好ましくは、顔又は皮膚エリアは、潜在的に使用可能である。好ましくは、最も（時間的に）安定した顔及び／又は皮膚領域が、関心のある領域として選択される。しかし、空間サイズ、照明安定性及び／又は色安定性のような他の選択基準が用いられてもよい。斯様な検出器は、例えば、Paul Viola, Michael Jonesの "Robust Real-time Object Detection", 2nd Intern. Workshop on Statistical and Computational Theories of Vision, Vancouver, Canada, 2001において述べられている。

他の実施形態において、前記分析ユニットは、検出された潜在的に使用可能なエリアからＰＰＧ信号を抽出するための、及び、抽出されたＰＰＧ信号の内容及び／又は品質に基づいて１又はそれ以上のエリアを関心のある領域として選択するためのＰＰＧ抽出ユニットを有する。それ故、分析ユニットは、潜在的に使用可能なエリアのうちどれが強いＰＰＧ信号を供給するかを十分に予測することができ、それ故、１又はそれ以上の関心のある領域の選択を適宜行うだろう。

好ましくは、前記ＰＰＧ抽出ユニットは、抽出されたＰＰＧ信号に基づいて前記１又はそれ以上の関心のある領域をエンコードするための第１のエンコーディングユニットによる使用のためのエンコードのための第１の設定の１又はそれ以上のパラメータを決定するように適合され、前記第１のエンコーディングユニットは、前記１又はそれ以上の関心のある領域のエンコードのための第１の設定の前記１又はそれ以上のパラメータを用いるように適合される。それ故、ＰＰＧ抽出の結果は、最良の可能なＰＰＧ信号がデコーダにおけるエンコードされた１又はそれ以上の関心のある領域から抽出され得ることを実現するための最適なエンコーダ設定を用いて、選択された１又はそれ以上の関心のある領域のエンコード処理を制御するために用いられるだろう。エンコーディングユニットのための第１の設定のこれらのパラメータは、圧縮速度ブロック／フィールド／フレームの内部又は間の符号化モード、使用されるＡＣ係数の数、量子化スケール、内部ＤＣ精度、カスタマイズされた量子化マトリクス等のうち１又はそれ以上を含み得る。

一実施形態において、前記第１のエンコーディングユニットは、前記１又はそれ以上の関心のある領域の少なくともクロミナンス成分（とりわけ、クロミナンス成分のみ）をエンコードするように適合され、前記第２のエンコーディングユニットは、前記１又はそれ以上の関心のある領域の輝度成分をエンコードするとともに、前記入力ビデオデータの残りの部分のクロミナンス成分及び輝度成分をエンコードするように適合される。これは、ビデオデータにおけるエンコードされた１又はそれ以上の関心のある領域に関するデータ量の削減に寄与する。好ましくは、一般的ではないが、クロミナンス成分だけが選択されてエンコードされる。

他の実施形態によれば、前記第１のエンコーディングユニットは、内部ブロック符号化により前記１又はそれ以上の関心のある領域をエンコードするように適合され、前記第２のエンコーディングユニットは、ブロック間及び／又は内部ブロック符号化により前記入力ビデオデータの残りの部分をエンコードするように適合される。これは、１又はそれ以上の関心のある領域が実質的に損失を伴うことなくエンコードされることを提供する。内部ブロック符号化及びブロック間符号化は、一般に知られた技術であり、例えばＭＰＥＧエンコーダにおいて、エンコードのためにしばしば用いられる。それ故、これらの詳細は当業者にとって知られているので、更なる詳細はここで説明されない。

また更に、一実施形態において、前記第１のエンコーディングユニットは、前記１又はそれ以上の関心のある領域の少なくともクロミナンス成分（とりわけ、クロミナンス成分のみ）のブロック間又は内部ブロックのＤＣ成分のみをエンコードするように適合される。これは、とりわけクロミナンス成分のブロック間又は内部ブロックのＤＣ成分のみがエンコードされた場合、エンコードされた１又はそれ以上の関心のある領域のためのデータ量の削減に更に寄与する。ＰＰＧ関連情報は一般に全てのピクセル毎にもたらされるが、一般に空間情報について多くの関心がない。代わりに、多くのピクセルが、個々ピクセルにおける所望のＰＰＧ信号（例えば鼓動）の信号−ノイズ比を改良するために平均をとるために必要とされる。ＰＰＧ関連情報／ＰＰＧ信号は、通常、圧縮されていない８ビットのビデオ信号の量子化ステップよりも小さい。この平均は、ＤＣ成分に基づいてもよく、個々のピクセル値を知っていることを絶対的に必要とはしないが、皮膚及び幾つかの他の画像部分（例えば顔の境界）を含むブロックについて支援することができる。

また更に、一実施形態において、前記選択ユニットは、強いＰＰＧ信号（とりわけ、最も強いＰＰＧ信号）を供給する前記入力ビデオデータにおける２又はそれ以上の関心のある領域を選択するように適合され、前記第１のエンコーディングユニットは、選択された関心のある領域をエンコードするように適合される。それ故、単一の関心のある領域だけでなく、幾つかの関心のある領域が、デコードの間においてＰＰＧ信号の評価及び検索のために利用可能であり、これは、信頼性を増大させる。例えば、一実施形態において、ＰＰＧ信号が前記関心のある領域の各々から取り出されてもよく、その後、評価において、最も高い信頼性としてのＰＰＧ信号又は全てのＰＰＧ信号の平均化のうちどちらが実行されてもよい。

一実施形態において、ＲＯＩ情報は、とりわけ選択ユニットにより、生成されてもよく、ＲＯＩ情報は、関心のある領域の位置に関する情報を有し、エンコーダ出力ビデオデータに含まれてもよい。そして、デコーディングデバイスは、ＰＰＧ信号をデコード及び抽出するための関心のある領域を容易に見つけるためにこのＲＯＩ情報を用い得る。

デコードの間、ビデオデコーディングデバイスは、少なくとも、デコーダ入力ビデオデータからエンコードされた関心のある領域をデコードすること、及び、デコードされた関心のある領域からＰＰＧ信号を抽出することが可能である。ＰＰＧ抽出は、この目的のために、例えば、ＰＰＧに関する上述の刊行物において述べられたような、又は、ＰＰＧの基本について説明している他の引用文献において述べられたような、一般に知られた方法を用いる。更なる実施形態において、しかしながら、デコーディングユニットは、とりわけエンコードの間に使用されたエンコーディングスキームに対して相補的なデコーディングスキームに従って、完全なビデオデータをデコードするように適合されてもよい。それ故、ビデオエンコーディングデバイスにおいて実行されるエンコードは、これを保証するように適合されなければならない。

本発明のこれらの及び他の態様は、以下で述べられる実施形態から明らかになり、これらの実施形態を参照して説明されるだろう。

本発明によるビデオエンコーディングデバイスの第１の実施形態の概略ブロック図を示す。 本発明によるビデオデコーディングデバイスの第１の実施形態の概略ブロック図を示す。 本発明によるビデオエンコーディングデバイスの第２の実施形態の概略ブロック図を示す。 本発明によるビデオエンコーディングデバイスの第３の実施形態の概略ブロック図を示す。 本発明によるビデオデコーディングデバイスの第２の実施形態の概略ブロック図を示す。 本発明によるビデオデコーディングデバイスの第３の実施形態の概略ブロック図を示す。 本発明によるビデオエンコーディングデバイスの第４の実施形態の概略ブロック図を示す。

図１は、本発明によるビデオエンコーディングデバイス１０の第１の全般的な実施形態の概略ブロック図を示す。この実施形態によれば、入力ビデオデータとも呼ばれる元のビデオストリーム１００は、選択ユニット２０に供給され、選択ユニット２０は、強いＰＰＧ信号を供給する入力ビデオデータ１００における関心のある領域１０１を選択する。選択された関心のある領域１０１は、エンコードされた関心のある領域１０２におけるＰＰＧ関連情報を保存するためにエンコードの第１の設定により、予め決められたエンコードスキームに従って、選択された関心のある領域１０１をエンコードするための第１のエンコーディングユニット３０に供給される。同時に、入力ビデオデータ１００の残りの部分１０３は、エンコードの第２の設定により、予め決められたエンコードスキームに従って、第２のエンコーディングユニット４０によりエンコードされる。エンコーダ組み合わせユニット５０において、入力ビデオデータ１００のエンコードされた関心のある領域１０２及びエンコードされた残りの部分１０４は、エンコーダ出力ビデオストリーム１０５にエンコードされる。

選択された関心のある領域１０１のエンコードのための第１の設定を用いることにより、少なくとも選択された関心のある領域１０１に含まれるＰＰＧ関連情報に関して、選択された関心のある領域１０１が実質的に損失することなくエンコードされることが実質的に保証され、従って、強いＰＰＧ信号が、デコーディングデバイスにおける選択された関心のある領域１０１から抽出され得る。入力ビデオデータ１００の残りの部分１０３は、例えば低ビットレート（又は、少なくとも、認識のために最適でもよいがＰＰＧ抽出のために充分でなくてもよいビットレート）で、エンコードの第２の設定によって別々にエンコードされる。

図２は、本発明によるビデオデコーディングデバイス６０の第１の全般的な実施形態の概略ブロック図を示す。この実施形態によれば、受信したエンコードされたビデオストリーム１６０がデコードされる。エンコードされたビデオストリーム１６０は、伝送及び／又は格納の間にもたらされる妨害はさておき、エンコーダ出力ビデオストリーム１０５に対応すべきであり、入力ビデオデータ１００のエンコードされた関心のある領域１６１及びエンコードされた残りの部分１６２を含むエンコードされたビデオデータを有する。

ビデオデコーディングデバイス６０は、ビデオエンコーディングデバイス１０において関心のある領域１０１をエンコードするために用いられたエンコーディングスキームに対して相補的なデコーディングスキームに従って、エンコードされた関心のある領域１６１をデコードするための第１のデコーディングユニット７０と、デコードされた関心のある領域１６３からＰＰＧ信号１６４を抽出するためのＰＰＧ抽出ユニット８０とを有する。斯様な関心のある領域を規定するために、関心のある領域の座標は、例えばビデオデコーダ入力ストリーム１６０に含まれるＲＯＩ情報を読みとることにより、又は、画像分析により（例えば、エンコードされた関心のある領域がエンコードされた残りの領域から区別され得る量子化レベルのチェックにより）好ましくは、対応するＲＯＩ情報から得られる。

オプションとして、エンコードされた関心のある領域１６１とエンコードされた残りの部分１６２とを分離するための、又は、少なくとも、エンコードされた関心のある領域１６１をデコーダ入力ビデオデータ１６０から取り出すための、分離ユニット９０が設けられてもよい。更に、オプションとして、前記デコーディングスキームに従って入力ビデオデータのエンコードされた残りの部分１６２をデコードするための第２のデコーディングユニット７５が設けられてもよく、及び、そして、デコードされた関心のある領域１６３及びデコードされた残りの部分１６５をデコーダ出力ビデオストリーム１６６に組み合わせるためのデコーダ組み合わせユニット９５が設けられてもよい。

図６は、本発明によるビデオデコーディングデバイス６０´´の第２のより簡素な実施形態の概略ブロック図を示す。この実施形態によれば、入力ビデオストリーム１６０は、図２に示された実施形態のように分割されない。最初に、一般的なデコーディングユニット７１において、入力ビデオストリーム１６０がデコードされる。そして、デコードされたビデオストリーム１６７において、関心のある領域１６８が選択ユニット７２において選択され、ここから、ＰＰＧ信号１６４がＰＰＧ抽出ユニット８０により抽出される。

図３は、選択ユニット２０の好ましい実施形態を有する、本発明によるビデオエンコーディングデバイス１０´の第２のより詳細な実施形態の概略ブロック図を示す。詳細には、選択ユニット２０´は、入力ビデオデータ１００におけるエリア１２３（とりわけ、皮膚エリア）を関心のある領域として選択するためのエリア選択ユニット２１を有し、前記ビデオデータは、ビデオフレームのシーケンスを有し、前記フレームは、空間ブロックに分割される。更に、選択ユニット２０´は、選択されたエリア１２３に関する空間ブロック１０１を決定するためのブロック選択ユニット２４を有し、決定された空間ブロック１０１は、関心のある領域を表す。

更なる改良において、図３に示すように、エリア選択ユニット２１は、関心のある領域として用いられ得る入力ビデオデータ１００における潜在的に使用可能なエリア（とりわけ、皮膚エリア）のセット１２２を検出するための検出ユニット２２と、検出された潜在的に使用可能なエリアのセット１２２を分析し、１又はそれ以上の予め決められた選択基準に基づいてエリア１２３を関心のある領域として選択するための分析ユニット２３とを有する。選択された関心のある領域から、対応する空間ブロック１０１がブロック選択ユニット２４において決定され、これは、先に述べたとおり、その後、第１のエンコーディングユニット３０´によりエンコードされる。

潜在的に使用可能なエリアの検出は、とりわけ皮膚検出のための利用可能な方法により、顔又は皮膚エリアを検出するように好ましくは適合される。特定のビデオコンテンツに依存して、検出された皮膚エリアは、ビデオフレームの小さな部分又はビデオフレーム全体のうちいずれかを占め得る。第２の場合において、例えば内部ブロック符号化を用いた、検出された皮膚エリア全体のエンコードは、圧縮効率の大幅な削減をもたらすだろう。

更に、通常、皮膚エリア全体は、ＰＰＧ信号の抽出に役立つことはなかった。例えば、皮膚エリアの小さな部分のみが、時間の或る期間に渡って時間的に安定している。それ故、皮膚エリアのこの部分だけが、ＰＰＧ信号抽出のために用いられるべきである。それ故、分析ユニット２３は、検出ユニット２２によりビデオフレームにおいて検出された全ての皮膚エリアを分析し、空間サイズ、時間安定性、照明安定性及び／又は色安定性を含む幾つかの基準に基づき最適な部分のみを選択する。

それ故、分析ユニット２３は、好ましくは、最も安定した顔及び／又は皮膚領域を捜す。斯様な安定した領域は、一般に、最も強いＰＰＧに信号を供給すると思われるからである。ユニット２３は、ＰＰＧ信号を供給することが可能である、最も少ない関心のある領域を選択し得る。ＰＰＧ信号の予期された強さは、関心のある領域内の空間ピクセルの均一性を分析することにより、又は、好ましい顔エリア（例えば額、頬）を検出することにより、分析され得る。分析ユニット２３の出力は、例えばＲＯＩ情報の形式の、関心のある領域の位置に関する情報であり、これは、選択された関心のある領域に属する入力ビデオデータ１００における空間ブロックを選択するためのブロック選択ユニット２４に供給される。

これは、入力ビデオデータ１００のビデオフレームが、（それぞれの圧縮スキームに依存して例えば４ｘ４から１６ｘ１６ピクセルまでのサイズを有する）空間ブロックに分割された場合に特に必要とされる。そして、最適な皮膚エリアの座標１２３は、分析ユニット２３により、ブロック選択ユニット１２４に供給され、ブロック選択ユニット１２４は、最適な皮膚エリアを有するブロック１０１（即ち、選択された関心のある領域を表すブロック）を選択する。幾つかの関心のある領域が用いられる場合に、これは、最良のＰＰＧ信号を選択する能力を向上させるために、又は、異なる領域から得られたＰＰＧ信号を平均化するために、ＰＰＧ信号抽出の間に前記オプションを提供する。

選択された皮膚エリアの圧縮は、エンコード後及び（その後の）デコード／解凍後のＰＰＧ関連情報の保存を保証する態様において行われる。ＰＰＧ信号１６５（図２参照）は、ビデオストリームのクロミナンスチャネルから大部分が抽出される。それ故、ＰＰＧ関連情報を保存するために、これらのブロック１０１は、一実施形態における内部ブロックとして、第１のエンコーディングユニット３０によりエンコードされるだろう。他のフレームブロック１０３（即ち、残りの部分のブロック）は、第２のエンコーディングユニット４０´の設定及びタイプに依存して、例えばブロック間又は内部ブロックとして標準の符号器により、第２のエンコーディングユニット４０´においてエンコードされる。ビデオ符号化規格は、ブロックに基づく内部ブロック又はブロック間符号化モードの選択を可能にする。それ故、提案されたアルゴリズムは、保存されたＰＰＧ関連情報を有する、規格に準拠した符号化されたビットストリーム１０５の作成を可能にするだろう。

分析ユニット２３及びブロック選択ユニット２４は、信頼性が高いＰＰＧ信号の抽出のために必要とされる皮膚エリアのサイズと皮膚エリアの内部符号化のための大きなビット−バジェットの割り当てによる圧縮比の損失との間の最適なトレードオフを見つけるだろう。他の実施形態において、分析ユニット２３は、皮膚エリアの選択をガイドするために、ＰＰＧ信号抽出部２５及び場合によりＰＰＧ信号メトリックを有してもよい（必須ではない）。

ＰＰＧ信号を抽出するために、時間的クロミナンス情報は、エラーを伴うことなく一般に必要とされ、これは、更に他の実施形態において提供されているように、高ビットレートでクロミナンスブロックをエンコードすることにより実現され得る。詳細には、図４に示されたビデオエンコーディングデバイス１０´´の更に他の実施形態において、第１のエンコーディングユニット３０´´は、選択された関心のある領域１０１の少なくともクロミナンス成分１０１ａ（好ましくは、のみ）をエンコードするように適合される一方で、第２のエンコーディングユニット４０´´は、選択された関心のある領域１０１の輝度成分１０１ｂをエンコードするように、及び、入力ビデオデータ１００の残りの部分１０３のクロミナンス成分及び輝度成分をエンコードするように適合される。

原理上、ブロック間エンコードは、ＤＣ成分が情報の損失なしに（ロスレスで）圧縮される限り、選択されたブロックのクロミナンス符号化のために用いられ、ＡＣ成分の量子化はアーチファクトを取り込む。輝度ブロックは、情報の損失を伴ってエンコードされ得る。ＰＰＧ抽出処理へのこれらの寄与は、クロミナンス成分の寄与よりあまり重要ではないためである。

更に他の実施形態によれば、選択された関心のある領域のクロミナンス成分のみが内部ブロックとしてエンコードされるか、又は、クロミナンス及び輝度成分の双方が選択された関心のある領域が内部ブロックとしてエンコードされることに関連する。この実施形態において、選択された皮膚エリア（即ち、関心のある領域）が移動しない場合において、追加のビットが、内部ブロックとしてブロックのエンコードに費やされる必要はないだろう。しかしながら、選択された皮膚エリアが移動する場合には、アーチファクトが取り込まれず、従って、この実施形態がより効率的になるだろう。

提案されたデコードプロセスは、例えばビデオ符号化規格による、ビデオストリームの復元だけでなく、部分的にデコードされたビデオストリームからの、とりわけデコードされた関心のある領域からのＰＰＧ信号の抽出も可能にする。

図５は、図３に示された相補的なビデオエンコーディングデバイス１０´に実質的に対応する、本発明によるビデオデコーディングデバイス６０´の第２のより詳細な実施形態を示す。この実施形態において、デコーダ入力ビデオデータ１６０は、第１のデコーディングユニット７０及び第２のデコーディングユニット７５´に供給される。第１のデコーディングユニット７０は、上で説明された第１のデコーディングユニット７０と実質的に同一であり、デコードされた関心のある領域１６３を出力する一方で、第２のデコーディングユニット７５´は、残りのエリアをデコードするだけでなく、完全なデコーダ入力ビデオデータ１６０もデコードし、完全なデコーダ出力ビデオデータ１６６を出力する。即ち、全てのビデオデータが（例えば、従来通り）この中でデコードされる。

それ故、最初に、入力ビットストリームをデコードする標準の手順は、エンコードされたブロック抽出のレベルまで適用される。その後、ビットストリーム全体または内部符号化ブロックが更にデコードされる。これらの内部符号化ブロックは、エンコーダ側で選択された最適な皮膚エリアに対応する。

ＰＰＧ信号１６４を得るために、ＰＰＧ信号抽出ユニット８０´は、デコードされた関心のある領域１６３からビデオエンコーディングデバイス１０´の第１のエンコーディングユニット３０´によりエンコードされた関心のある領域のブロックを抽出するためのブロック抽出ユニット８１を有する。

その後、ブロック抽出ユニットにより供給されたブロック情報１８１を用いて、復元ユニット８２は、関心のある領域のデコードされた内部ブロックから、関心のある領域（例えば、１又はそれ以上の皮膚エリア）を復元する。例えば、第１のデコーディングユニット７０において関心のある領域の少なくともクロミナンス成分（好ましくは、のみ）がデコードされる場合、関心のある領域のクロミナンス成分は復元ユニット８２において復元される。

その後、ＰＰＧ信号抽出ユニット８３において、ＰＰＧ信号抽出アルゴリズムは、クロミナンス成分のみが、最終的に所望のＰＰＧ信号１６４を得るために、ＰＰＧ関連情報の損失を伴うことなくエンコードされる場合にのみ、復元された関心のある領域１８２に（例えば、クロミナンス成分に）適用される。

ビデオデコーディングデバイスの他の実施形態において、ＰＰＧ信号１６４は、ビデオエンコーディングデバイスにより、例えば内部ブロックとして、クロミナンス成分及び輝度成分の双方がエンコードされた場合に、クロミナンス、輝度又は双方チャネルから抽出され得る。それ故、ビデオエンコーディングデバイス及びビデオデコーディングデバイスの最適な実施形態の選択が、ＰＰＧ信号の復元のために使用されるアプローチに基づいて行われ得る。

述べられたように、ＰＰＧ信号抽出ユニット８３は、復元された関心のある領域（例えば、復元された皮膚エリア）からＰＰＧ信号１６４を検出及び抽出する。原理上、復元された関心のある領域だけが、ＰＰＧ信号の抽出のために用いられる。それ故、完全な元の解像度でビデオシーケンスをデコードすることは必須でないが、通常、（例えば内部ブロックの）関心のある領域のデコーディングのみは、ＰＰＧ信号を得るのに十分である。それ故、ＰＰＧ信号の抽出が望まれるが完全にデコードされたビデオデータを望まない場合に、全てのブロック間の動作補償及び復元により必要とされる計算パワーが節約され得る。

ＰＰＧ信号の抽出のために使用される特定の方法及びパラメータは、ＰＰＧ信号のデコード及び抽出の間、規定及び変更され得る。換言すれば、提案されたビデオエンコーディングデバイスは、ＰＰＧ信号抽出方法の選択もモニタされた対象物の選択も制限しない。一度エンコードされると、ビデオシーケンスは、デコードの間又は後に異なるＰＰＧ抽出方法により処理され、異なるバイタルサイン（例えば、心拍数、心拍変動性、ＳｐＯ２、呼吸、ＰＰＧイメージング等）が抽出され得る。提案されたＰＰＧフレンドリーなビデオデコーディングデバイスは新規なＰＰＧ抽出アルゴリズムによりアップグレードされ得る。これは、すでにエンコードされたビデオシーケンスからのＰＰＧ信号のより良好な抽出を可能にする。

同一のエンコードされたビデオシーケンスは、ＰＰＧ信号の抽出のための埋め込まれたアルゴリズムを伴うことなく、標準のビデオデコーディングデバイスによりデコードされ、それ故、既存のビデオデコーディングデバイスとの下位互換性を維持する。

提案されたスキームにおいて使用される標準のコーデックが符号化アーチファクトを低減するためにインループデブロッキングフィルタを含む場合において、斯様なデブロッキングフィルタは、選択された関心のある領域に関連するブロックの少なくともクロミナンス成分に対してオフに切り替えられるべきである。そうでなければ、インループデブロッキングフィルタは、ＰＰＧ信号の抽出のために本質的である視覚的情報を抑制するかもしれない。

ＰＰＧ抽出アルゴリズムは、パラメータの手動調整によるリアルタイム又は非リアルタイムであり得る。更に、本発明は、概して、特定のアプリケーションに依存して、ビデオデータが記録された後に生物測定信号抽出の任意の特定の方法の選択を可能にする。それ故、同じビデオが、異なる生物測定信号（例えば、心拍数、心拍変動性、ＳｐＯ２、呼吸、ＰＰＧイメージング）の抽出に対して用いられ得る。

本発明によるビデオエンコーディングデバイス１０´´´の更に他の実施形態が図７において概略的に示される。この実施形態は、図１に示されたビデオエンコーディングデバイス１０の実施形態に非常に類似しているが、加えて、デコーディングユニット３５及びＰＰＧ信号抽出ユニット３６が、第１のエンコーディングユニット３０´´´により形成されたフィードバックループに設けられる。このフィードバックループは、選択された関心のある領域１０１に割り当てられるビットの数を制御する、即ち、ＰＰＧ関連情報がエンコードされた関心のある領域１０２において保存されることを確認するために、選択された関心のある領域１０１をエンコードするために使用されるエンコーディングの設定を制御する。

それ故、デコーディングユニット３５は、エンコードされた関心のある領域１０２を（第１のエンコーディングユニット３０´´´により適用された第１のエンコーディングスキームに対して相補的であるデコーディングスキームを適用して）デコードし、ＰＰＧ信号抽出ユニット３６は、デコードされた関心のある領域１０６からＰＰＧ信号１０７を抽出する。そして、第１のエンコーディングユニット３０は、ＰＰＧ信号が充分な品質を有するかどうか、又は、エンコードのために使用される設定が抽出されたＰＰＧ信号の品質を増大させるように変更される必要あるかどうか（例えば、より多くのビットがエンコードされた関心のある領域のために割り当てられる必要があるかどうか、及び／又は、圧縮速度が低下される必要があるかどうか）、を決め得る。それ故、デコーディングデバイスにおいて、ＰＰＧ信号が充分な品質で抽出され得ることが保証され得る。

それ故、本発明は、バイタルサイン抽出を可能にする目的で、ビデオ圧縮の間におけるＳＮＲ又は品質スケーラビリティの既知のコンセプトを変更する。本発明は、ビデオストリーミングのためにも、圧縮されたビデオ材料の格納のためにも用いられ得る。通常、エンコードされたビデオデータ有するビットストリームだけが、基本的な品質でビデオデータを得るために伝達又は解凍されるだろう。全てのビデオデータは、即ち、単一のエンコードスキーム及び同一のエンコーディングパラメータ設定によって同様にエンコードされる。本発明によれば、追加のデータは、ＰＰＧ基本情報を保存するエンコードされたビットストリームに含まれ、これは、生物測定信号が抽出されるべき場合にのみ伝達又は解凍されるだろう。この手法において、圧縮されたビデオにおける生物測定情報の保存と圧縮効率との間の最適なトレードオフが実現され得る。

要約すると、提案された発明は、ビデオ圧縮（解凍）後にＰＰＧ信号の抽出を可能にする。ＰＰＧ抽出アルゴリズムの複雑さ及び精度は、具体的なアプリケーションに基づいて選択され得る。例えば、幾つかのアプリケーションは、心拍数情報のみの抽出を必要とし得る一方で、他のものは、心拍間隔の正確な鼓動信号、又は／及び呼吸、又は／及びＳｐＯ２（oxygenation）を必要とし得る。更に、本発明は、手動で最適なパラメータを選択及び調整するという可能性により、圧縮されたビデオからのＰＰＧ信号のオフライン（非リアルタイム）の抽出を可能にする。

概して、本発明は、特定のエンコーディング／デコーディングスキームに限定されるものではない。概して、１又はそれ以上の選択された関心のある領域をエンコードするために使用される第１のエンコーディングは、残りのデータをエンコードするために使用される第２のエンコーディングよりも損失しない。特定の実施形態において、ＰＰＧ関連視覚的情報は、ブロック間符号化及び／又は内部ブロック符号化を用いてエンコードされる一方で、生物測定信号抽出のために必須ではない他の視覚的情報は、フレーム間符号化を用いてエンコードされる。それ故、内部フレームエンコードされたブロックからのビデオデコーディングの間のＰＰＧ情報の速くて低コストな抽出は、完全なビデオフレームをデコードする必要なく実現される。

本発明が図面及び前述の説明において示され、詳述された一方で、斯様な図例および説明は、例示又は単なる例であり、限定するものではないものとみなされるべきである。本発明は、開示された実施形態に限定されるものではない。開示された実施形態に対する他のバリエーションは、図面、開示及び添付の特許請求の範囲の研究から、当業者によって理解され、実施され得る。

請求項において、"有する"という用語は他の要素又はステップを除外するものではなく、単数表記は複数を除外するものではない。単一の要素又は他のユニットが請求項に記載された幾つかのアイテムの機能を実現してもよい。特定の手段が相互に異なる従属請求項に記載されるという単なる事実は、これらの手段の組み合わせが有効に用いられ得ないことを示すものではない。

コンピュータプログラムは、他のハードウェアと共に又はこの一部として供給される光記憶媒体又はソリッドステート媒体のような、適切な持続媒体に格納／分配されてもよいが、インターネット又は他の有線若しくは無線通信システムを介するような、他の形式において分配されてもよい。

請求項中のいかなる参照符号も、その範囲を限定するものとして解釈されるべきでない。

Claims (15)

1. ビデオデータをエンコードするためのビデオエンコーディングデバイスであって、
   強いＰＰＧ信号を供給する入力ビデオデータにおいて関心のある領域を選択するための選択ユニットと、
   エンコードされた関心のある領域におけるＰＰＧ関連情報を保存するためにエンコーディングの第１の設定により予め決められたエンコーディングスキームに従って前記入力ビデオデータの選択された関心のある領域をエンコードするための第１のエンコーディングユニットと、
   エンコーディングの第２の設定により前記予め決められたエンコーディングスキームに従って前記入力ビデオデータの残りの部分をエンコードするための第２のエンコーディングユニットと、
   エンコードされた関心のある領域及び前記入力ビデオデータのエンコードされた残りの部分をエンコーダ出力ビデオストリームに組み合わせるためのエンコーダ組み合わせユニットとを有する、ビデオエンコーディングデバイス。
2. 前記選択ユニットは、
   入力ビデオデータにおけるエリア（とりわけ、皮膚エリア）を関心のある領域として選択するためのエリア選択ユニットであって、前記ビデオデータは、ビデオフレームのシーケンスを有し、これらのフレームは、空間ブロックに分割される、エリア選択ユニットと、
   選択されたエリアに関する前記空間ブロックを決定するためのブロック選択ユニットであって、決定された空間ブロックが関心のある領域を表す、ブロック選択ユニットとを更に有する、請求項１に記載のビデオエンコーディングデバイス。
3. 前記エリア選択ユニットは、
   関心のある領域として用いられ得る入力ビデオデータにおける潜在的に使用可能なエリア（とりわけ、皮膚エリア）のセットを検出するための検出ユニットと、
   検出された潜在的に使用可能なエリアのセットを分析し、１又はそれ以上の予め決められた選択基準に基づいてエリアを関心のある領域として選択するための分析ユニットとを有する、請求項２に記載のビデオエンコーディングデバイス。
4. 前記分析ユニットは、空間サイズ、照明安定性及び／又は色安定性を選択基準として用いるように適合される、請求項３に記載のビデオエンコーディングデバイス。
5. 前記分析ユニットは、検出された潜在的に使用可能なエリアからＰＰＧ信号を抽出するための、及び、抽出されたＰＰＧ信号の内容及び／又は品質に基づいてエリアを関心のある領域として選択するためのＰＰＧ抽出ユニットを有する、請求項３に記載のビデオエンコーディングデバイス。
6. 前記ＰＰＧ抽出ユニットは、抽出されたＰＰＧ信号に基づいて前記選択された関心のある領域をエンコードするための前記第１のエンコーディングユニットによる使用のためのエンコードのための前記第１の設定の１又はそれ以上のパラメータを決定するように適合され、
   前記第１のエンコーディングユニットは、前記選択された関心のある領域のエンコードのための前記第１の設定の前記１又はそれ以上のパラメータを用いるように適合される、請求項５に記載のビデオエンコーディングデバイス。
7. 前記第１のエンコーディングユニットは、前記選択された関心のある領域の少なくともクロミナンス成分（とりわけ、クロミナンス成分のみ）をエンコードするように適合され、
   前記第２のエンコーディングユニットは、前記選択された関心のある領域の輝度成分をエンコードするとともに、前記入力ビデオデータの前記残りの部分のクロミナンス成分及び輝度成分をエンコードするように適合される、請求項１に記載のビデオエンコーディングデバイス。
8. 前記第１のエンコーディングユニットは、内部ブロック符号化により前記選択された関心のある領域をエンコードするように適合され、
   前記第２のエンコーディングユニットは、ブロック間及び／又は内部ブロック符号化により前記入力ビデオデータの残りの部分をエンコードするように適合される、請求項１に記載のビデオエンコーディングデバイス。
9. 前記第１のエンコーディングユニットは、前記選択された関心のある領域の少なくともクロミナンス成分（とりわけ、クロミナンス成分のみ）のブロック間又は内部ブロックのＤＣ成分のみをエンコードするように適合される、請求項１に記載のビデオエンコーディングデバイス。
10. ビデオデータをエンコードするためのビデオエンコーディング方法であって、
    強いＰＰＧ信号を供給する入力ビデオデータにおいて関心のある領域を選択するステップと、
    エンコードされた関心のある領域におけるＰＰＧ関連情報を保存するためにエンコーディングの第１の設定により予め決められたエンコーディングスキームに従って前記入力ビデオデータの選択された関心のある領域をエンコードするステップと、
    エンコーディングの第２の設定により前記予め決められたエンコーディングスキームに従って前記入力ビデオデータの残りの部分をエンコードするステップと、
    エンコードされた関心のある領域及び前記入力ビデオデータのエンコードされた残りの部分をエンコーダ出力ビデオストリームに組み合わせるステップとを有する、ビデオエンコーディング方法。
11. エンコードされたビデオストリームをデコードするためのビデオデコーディングデバイスであって、前記エンコードされたビデオストリームは、エンコードされたビデオデータを有し、入力ビデオデータの関心のある領域は、エンコードされた関心のある領域におけるＰＰＧ関連情報を保存するために、エンコードの第１の設定により予め決められたエンコーディングスキームに従ってエンコードされたものであり、前記入力ビデオデータの残りの部分は、エンコードの第２の設定により前記予め決められたエンコードスキームに従ってエンコードされたものであり、当該ビデオデコーディングデバイスは、
    前記関心のある領域をエンコードするために用いられたエンコードスキームに対して相補的なデコーディングスキームに従って、エンコードされた関心のある領域をデコードするための第１のデコーディングユニットと、
    デコードされた関心のある領域からＰＰＧ信号を抽出するためのＰＰＧ抽出ユニットとを有する、ビデオデコーディングデバイス。
12. 前記デコーディングスキームに従って前記入力ビデオデータのエンコードされた残りの部分をデコードするために第２のデコーディングユニットと、
    デコードされた１又はそれ以上の関心のある領域及びデコードされた残りの部分をデコーダ出力ビデオストリームに組み合わせるためのデコーダ組み合わせユニットとを更に有する、請求項１１に記載のビデオデコーディングデバイス。
13. エンコードされたビデオストリームをデコードするためのビデオデコーディング方法であって、前記エンコードされたビデオストリームは、エンコードされたビデオデータを有し、入力ビデオデータの関心のある領域は、エンコードされた関心のある領域におけるＰＰＧ関連情報を保存するために、エンコードの第１の設定により予め決められたエンコーディングスキームに従ってエンコードされたものであり、前記入力ビデオデータの残りの部分は、エンコードの第２の設定により前記予め決められたエンコードスキームに従ってエンコードされたものであり、当該ビデオデコーディング方法は、
    前記関心のある領域をエンコードするために用いられたエンコードスキームに対して相補的なデコーディングスキームに従って、エンコードされた関心のある領域をデコードするステップと、
    デコードされた関心のある領域からＰＰＧ信号を抽出するステップとを有する、ビデオデコーディング方法。
14. ビデオデータをエンコード及びデコードするためのビデオ符号化システムであって、
    入力ビデオデータをエンコードするための請求項１に記載のビデオエンコーディングデバイスと、
    前記ビデオエンコーディングデバイスによりエンコードされたエンコードされたビデオデータをデコードするための請求項１１に記載のビデオデコーディングデバイスとを有する、ビデオ符号化システム。
15. コンピュータプログラムがコンピュータ上で実行されたときに請求項１０又は請求項１３に記載の方法のステップを前記コンピュータに実行させるためのプログラムコード手段を有する、コンピュータプログラム。

Images