JP2018142950A - プライバシーマスクを含む画像を符号化する方法 - Google Patents

Abstract

【課題】プライバシーマスクを備えるデジタル画像を符号化する方法を提供する。【解決手段】符号化方法において、デジタル画像２０におけるピクセルを表す情報が受信される。それらのピクセルが、符号化ユニット２２にグループ化される。また、プライバシーマスクが画像に適用されるべきプライバシーマスク区域２１を表す情報も受信される。少なくとも部分的にプライバシーマスク区域内に位置するすべての符号化ユニットが識別され、プライバシーマスク区域が、識別された符号化ユニット２３と揃えられるように拡張される。各符号化ユニット２２に関して、画像を符号化するために使用されるべきそれぞれの量子化パラメータが決定される。プライバシーマスクが、画像の拡張されたプライバシーマスク区域において適用され、かつ適用されたプライバシーマスクを有する画像が、決定された量子化パラメータを使用して符号化される。【選択図】図８

Description

本発明は、プライバシーマスクを含むデジタル画像の符号化に関する。

監視カメラが、様々な環境を監視するために、屋内と屋外の両方で、異なる多くのアプリケーションにおいて使用される。キャプチャされたシーンを描写する画像は、例えば、作業員または警備員によって監視され得る。或る状況において、個人の人権（ｐｅｒｓｏｎａｌ ｉｎｔｅｇｒｉｔｙ）のために画像の一部をマスクする必要がある場合など、キャプチャされた画像の一部分を別の部分とは異なるように扱う必要性があり得る。これは、例えば、カメラが建造物内に、またはバス内もしくは列車内に配置され、外部の環境がカメラによって行われる監視から排除されるべき場合に生じ得る。別の例が、窓を有する建造物が監視され、かつその窓を通してその建造物の内部を監視することを回避する必要がある場合である。

そのような実例において、プライバシーマスクが、観察機器のセットアップ中に作業員によって定義され得る。プライバシーマスクは、静的であっても、動的であってもよい。静的プライバシーマスクは、グラフィカルユーザインターフェースにおいて画像上でマスクされるべき区域に印を付ける作業員によって、通常、作成される。その後、静的プライバシーマスクは、作業員がそのマスクを移動させること、または除去することを決定するまで、その場に留まる。動的プライバシーマスクは、ときとともに変化し得る。動的プライバシーマスクと同様に、作業員は、マスキングが所望される画像内の区域に印を付けてよい。また、作業員は、いつプライバシーマスクが適用されるべきかを決定する設定を入力してもよい。例えば、作業者は、画像内の窓の周囲に長方形を描いて、その印を付けられた区域内で顔が検出された場合、その顔がマスクされて消されるように設定を行うことも可能である。そのような動的プライバシーマスクは、プライバシーマスクに関して設定された条件が満たされない限り、視界を遮るマスクは存在しないが、例えば、顔検出アルゴリズム、被写体検出アルゴリズム、または動き検出アルゴリズムがそれらの条件が満たされたことを検出するとすぐに、プライバシーマスクが適用されるという点で有益であり得る。プライバシーマスクは、画像にオーバーレイとして適用され得る。いくつかのプライバシーマスクは、黒の、または他の着色された不透明な区域の形態をとる。他のプライバシーマスクは、画像データがプライバシーマスク区域にわたって「不鮮明にされて（ｓｍｅａｒｅｄ）」消される、ぼかしの形態をとり、またはプライバシーマスク内の画像がピクセル化ブロックに分割され、かつピクセル化ブロックのすべてのピクセルに同一の値が与えられて、画像がプライバシーマスク区域内でブロック様に見えるようにするピクセル化の形態をとる。プライバシーマスクは、多くの事例において長方形であり、または別の多角形であってよく、あるいは遮蔽すべき区域の形状により従う他の任意の形状を有してよい。

カメラが画像をキャプチャすると、それらの画像は、それらの画像が見られ、かつ／または記憶されることが可能な管理センタなどの、使用の拠点に通常、伝送される。また、それらの画像は、いわゆる「エッジストレージ」、すなわち、ＳＤカードなどのカメラに搭載された、またはＮＡＳ（ネットワークアタッチトストレージ）などの、カメラと接続状態にある、カメラにおけるストレージに記憶されてもよい。伝送またはエッジストレージの前に、それらの画像は、帯域幅およびストレージを節約するために符号化される。符号化は、多くの異なる様態で、例えば、Ｈ．２６４標準または他の符号化標準により実行され得る。すべてではないとしても、ほとんどのビデオ符号化は、不可逆であり、すなわち、元の画像に存在する情報が符号化中に失われ、復号の際に再獲得され得ない。元の画像を表すのに要求されるビットの数の低減ともたらされる画像品質の間にトレードオフが存在する。利用可能なビットを可能な限り効率的に利用する符号化スキームを開発する取組みが行われてきた。

ほとんどのビデオ圧縮標準は、元来、放送および映画撮影において使用されるように開発されてきたが、それらの標準は、要件が異なる他の分野においても使用される。１つのそのような分野が、監視または観察であり、監視用途または観察用途のために符号化を最適化する取組みが行われてきた。監視アプリケーションにおいて特に有用である符号化方法の例が、本出願者の欧州特許出願第３，０２１，５８３号明細書において開示される。この符号化方法は、大幅な効率向上を可能にするものの、符号化をさらに向上させる要望が依然として存在することは変わらない。例えば、プライバシーマスクを備える画像において、ビットが必ずしも、最も重要な画像に、または画像の最も重要な部分に費やされないことがあり得る。また、符号化された画像および復号された画像に視覚的アーチファクトが存在することもあり得る。

欧州特許出願第３，０２１，５８３号明細書

本発明の目的は、利用可能な帯域幅およびストレージの効率的な使用を可能にするプライバシーマスクを備えるデジタル画像を符号化する方法を提供することである。

別の目的は、気に障る視覚的アーチファクトを減らすプライバシーマスクを備えるデジタル画像を符号化する方法を提供することである。

さらなる目的は、プライバシーマスクによって遮蔽されるべき画像情報がアクセス可能でないことを確実にすることを可能にするプライバシーマスクを備えるデジタル画像を符号化する方法を提供することである。

また、本発明の目的は、利用可能なビットを画像を表すために効率的に使用することができるプライバシーマスクを備えるデジタル画像を符号化するためのデジタル画像符号化システムを提供することでもある。

本発明の目的は、符号化された画像および復号された画像において視覚的アーチファクトを減らすことを可能にするプライバシーマスクを備えるデジタル画像を符号化するためのデジタル画像符号化システムを提供することでもある。

さらなる目的は、プライバシーマスクによって与えられる保護に関して向上したセキュリティを可能にするプライバシーマスクを備えるデジタル画像を符号化するためのデジタル画像符号化システムを提供することである。

第１の態様によれば、これら、およびその他の目的は、全部が、または少なくとも一部が、プライバシーマスクを備えるデジタル画像を符号化する方法によって実現され、前記方法は、デジタル画像におけるピクセルを表す情報を受信すること、前記画像のピクセルを隣接ピクセルのグループの符号化ユニットにグループ化すること、プライバシーマスクが画像に適用されるべきプライバシーマスク区域を表す情報を受信すること、プライバシーマスク区域内に少なくとも部分的に位置するすべての符号化ユニットを識別すること、識別された符号化ユニットと揃えられるようにプライバシーマスク区域を拡張すること、各符号化ユニットに関して、画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定すること、画像の拡張されたプライバシーマスク区域においてプライバシーマスクを適用すること、および決定された量子化パラメータを使用して適用されたプライバシーマスクを有する画像を符号化することを備える。このようにして、プライバシーマスクによって遮られるべき画像データのすべてが適切な様態で符号化され得ることを確実にすることが可能である。例えば、プライバシーマスクによって覆われた区域に関して１つの量子化パラメータを設定し、画像の残りの部分に関して別の量子化パラメータを設定することが可能である。また、初期に部分的にしかプライバシーマスク区域内にないブロックの部分における画像データが、プライバシーマスクによって遮られることになっている情報に意図しないアクセスを与えることがないことを確実にすることも可能である。このことは、少なくとも理論上、符号化ユニットに関する量子化パラメータの決定が画像解析または画像統計に基づいて行われる符号化スキームにおいて生じる可能性がある。部分的には初期のプライバシーマスク区域の内部にあり、部分的にはその外部にある符号化ユニットに関する量子化パラメータが、その符号化ユニットにおける画像データの解析に基づくものとした場合、それ自体、初期のプライバシーマスクによって覆われる画像データが、初期プライバシーマスクの外部にある同一の符号化ユニットにおける画像データの符号化に影響を及ぼして、プライバシーマスクによって保護されることになっている画像データに関するいくらかの情報が、量子化パラメータのリバースエンジニアリングを介して得られるようになる可能性がある。さらに、プライバシーマスクの境界における極端な品質変化が回避されて、より少ない視覚的アーチファクトにつながることが可能である。

本発明の方法の別形によれば、識別された符号化ユニットを符号化するために所定の符号化パラメータが使用され、前記所定の符号化パラメータは、所定の符号化ユニットサイズと所定の量子化パラメータのうちの少なくとも１つである。所定の符号化ユニットサイズまたは所定の量子化パラメータを施行することによって、プライバシーマスクによって遮られるべき画像データについての情報が、マスクされた区域内の符号化ユニットサイズまたは量子化パラメータの空間パターンの調査によってまったくアクセスされ得ないことが確実にされ得る。

画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定するステップは、識別された符号化ユニットの量子化パラメータを所定の低減された品質の量子化パラメータに設定することを備え得る。このことは、プライバシーマスクによって覆われる画像の部分を符号化するために使用されるビットの数を少なくすることを可能にする。そうではなく、量子化パラメータの決定が、プライバシーマスクにかかわらず、通常どおりに実行されたとした場合、プライバシーマスクによって覆われた画像の部分は、ユーザにまったく価値のない高い品質で符号化されることがあり得る。代わりに、プライバシーマスクによって覆われた画像の部分の品質を低減することによって、ビットが、監視目的で実際に役立つ画像の他のより関心を引く部分のために節約され得る。

識別された符号化ユニットにおけるピクセルは、所定の大きいサイズの変更された符号化ユニットにグループ化されてよく、または再グループ化されてよい。一般に、大きい符号化ユニットを使用して画像の所与の部分を符号化するのに、小さい符号化ユニットを使用して同一の部分を符号化するのと比べて、より少ないビットしか必要とされない。より大きい符号化ユニットを使用することによってより多くの情報が失われ得るが、プライバシーマスクに関して、このことは、そこに示すべき関心対象の画像データが存在しないので、問題とならない。符号化ユニットのサイズが画像データの解析に基づいて決定される符号化スキームが存在する。そのようなスキームにおいて、情報は、少なくとも理論上、プライバシーマスク区域内の符号化ユニットサイズの空間パターンのリバースエンジニアリングによってプライバシーマスクの下から漏れ出すことがあり得る。拡張されたプライバシーマスク区域内のピクセルをグループ化するための所定の符号化ユニットサイズを設定することによって、このリスクが回避される。

プライバシーマスクは、一様の色、ぼかし、およびピクセル化のうちの少なくとも１つを備え得る。

本発明の別形によれば、プライバシーマスクは、プライバシーマスク区域内のピクセルが隣接ピクセルのピクセル化グループにグループ化されるピクセル化を備え、それぞれのピクセル化グループの各ピクセルのピクセル値は、それぞれのピクセル化グループを表す共通のピクセル値に設定され、方法は、プライバシーマスク区域内の画像のピクセルを、ピクセル化グループに対応する符号化ユニットにグループ化することをさらに備える。そのような方法は、プライバシーマスクの境界における品質差によって生じる気に障る視覚的アーチファクトを回避することを可能にする。また、そのような方法は、符号化ユニットが、プライバシーマスクによって覆われるべき画像データについての情報を導き出すために使用される可能性があるピクセル化とは異なる空間パターンを形成しないことを確実にすることによって、セキュリティを向上させもする。

画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定するステップは、関係のある区域における符号化ユニットに第１の量子化パラメータが与えられ、かつ関係のない区域における符号化ユニットに第２の量子化パラメータが与えられるように、画像における関係のある区域の識別に基づいて各符号化ユニットに関する量子化パラメータを設定することを備え得、前記第１の量子化パラメータは、前記第２の量子化パラメータと比べて、より高い画像品質を与える圧縮を表す。量子化パラメータを決定するためにそのようなアプローチを使用して、利用可能な帯域幅およびストレージを効率的に利用することが可能である。画像の関係のある区域の高品質の表現を許しながら、画像の関係のない区域を表すために使用されるビットの数を少なく保つことが可能である。

画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定するステップは、各符号化ユニットに関するグループ値を形成する各符号化ユニットに関するピクセルを表す情報の空間統計測定値を計算すること、グループ値の間の差を計算すること、前記差を閾値と比較すること、前記差が前記閾値以上である場合、前記符号化ユニットが画像の関係のある区域内にあると識別すること、および前記差が前記閾値未満である場合、前記符号化ユニットが画像の関係のない区域内にあると識別することをさらに備え得る。このことは、画像における関係のある区域および関係のない区域を識別する効率的な方法を提供し得る。

空間統計測定値は、前記情報の合計、平均値、中央値、四分位範囲、標準偏差、分散、歪度、および尖度から成るグループからの少なくとも１つであり得る。

各符号化ユニットは、少なくとも２５６のピクセルを含み得る。このサイズは、多くの監視用途事例において画像の関係のある部分と見なされ得る、人間の顔のサイズに対応し得る。

画像におけるピクセルを表す情報は、輝度、光度、および色値に関するデータから成るグループからの少なくとも１つであり得る。

第２の態様によれば、これら、およびその他の目的は、全部が、または少なくとも一部が、プライバシーマスクを備えるデジタル画像を符号化するためのデジタル画像符号化システムによって実現され、システムは、デジタル画像におけるピクセルを表す情報を受信し、前記画像のピクセルを隣接ピクセルのグループの符号化ユニットにグループ化するように構成された受信モジュールと、プライバシーマスクが画像に適用されるべきプライバシーマスク区域を表す情報を受信するように構成されたプライバシーマスク入力モジュールと、プライバシーマスク区域内に少なくとも部分的に位置するすべての符号化ユニットを識別し、識別された符号化ユニットと揃えられるようにプライバシーマスク区域を拡張するように構成された適応モジュールと、画像を符号化するために使用されるべき各符号化ユニットに関するそれぞれの量子化パラメータを決定するように構成された圧縮決定モジュールと、画像の拡張されたプライバシーマスク区域においてプライバシーマスクを適用するように構成されたプライバシーマスク適用モジュールと、決定された量子化パラメータを使用して適用されたプライバシーマスクを有する画像を符号化するように構成された符号器モジュールとを備える。そのような符号化システムを使用して、帯域幅およびストレージの効率的な使用を確実にすることが可能である。また、初期のプライバシーマスクによって部分的に覆われた符号化ユニットのマスクされない部分を介したプライバシーマスクによって遮られることが意図される画像データに関する情報の「漏れ」を回避することも可能である。第２の態様の符号化システムは、一般に、付随する利点を伴って第１の態様の方法と同一の様態で実施され得る。

実施形態において、プライバシーマスク入力モジュールは、プライバシーマスク区域内のピクセルが隣接ピクセルのピクセル化グループにグループ化されるピクセル化に関する情報を受信するように構成され、受信モジュールは、プライバシーマスク区域内の画像のピクセルをピクセル化グループに対応する符号化ユニットにグループ化するように構成され、かつプライバシーマスク適用モジュールは、それぞれのピクセル化グループの各ピクセルのピクセル値をそれぞれのピクセル化グループを表す共通のピクセル値に設定するように構成される。このようにして、プライバシーマスクの境界における気に障る視覚的アーチファクトが回避されることが確実にされ得る。また、第１の態様の方法に関連して前述したとおり、向上したセキュリティが確実にされることも可能である。

圧縮決定モジュールは、関係のある区域における符号化ユニットに第１の量子化パラメータが与えられ、かつ関係のない区域における符号化ユニットに第２の量子化パラメータが与えられるように、画像における関係のある区域の識別に基づいて各符号化ユニットに関する量子化パラメータを設定するように構成され得、前記第１の量子化パラメータは、前記第２の量子化パラメータと比べて、より高い画像品質を与える圧縮を表す。符号化システムは、その結果、利用可能なビットを効率的に利用し得る。

符号化システムの圧縮決定モジュールは、各符号化ユニットに関するグループ値を形成する各符号化ユニットに関するピクセルを表す情報の空間統計測定値を計算し、グループ値の間の差を計算し、前記差を閾値と比較し、前記差が前記閾値以上である場合、前記符号化ユニットが画像の関係のある区域内にあると識別し、および前記差が前記閾値未満である場合、前記符号化ユニットが画像の関係のない区域内にあると識別するように構成され得る。このようにして、符号化システムは、ビットが、監視用途事例におけるニーズに鑑みて賢明に費やされることを確実にし得る。

第３の態様によれば、これら、およびその他の目的は、全部が、または少なくとも一部が、第２の態様によるデジタル符号化システムを備えるカメラによって実現される。

第４の態様によれば、これら、およびその他の目的は、全部が、または少なくとも一部が、プロセッサによって実行された場合、第１の態様による方法を遂行するように適応させられた命令を有するコンピュータ可読記憶媒体を備えるコンピュータプログラム製品によって実現される。

本発明の適用可能性のさらなる範囲が、後段で与えられる詳細な説明から明白となろう。しかし、詳細な説明、および特定の例は、本発明の好ましい実施形態を示すものの、本発明の範囲内の様々な変更および変形が、この詳細な説明から当業者には明白となるので、例示として与えられるに過ぎないことを理解されたい。

故に、本発明は、説明されるデバイスの特定の構成部分にも、説明される方法のステップにも、そのようなデバイスおよび方法が変化し得るので、限定されないことを理解されたい。また、本明細書において使用される術語は、特定の実施形態を説明することを目的とするに過ぎず、限定することは意図していないことも理解されたい。本明細書および添付の特許請求の範囲において使用される「或る」および「その」という冠詞、ならびに「前記」は、文脈がそうでないことを明確に規定するのでない限り、それらの要素のうちの１つまたは複数が存在することを意味するように意図されることに留意されたい。このため、例えば、「或る対象」または「その対象」について述べることは、いくつかの対象、および類似したものを含み得る。さらに、「備える」という語は、他の要素も他のステップも排除することはない。

次に、本発明が、例として、添付の概略図を参照して詳細に説明される。

カメラによって監視されるシーンを示す透視図である。 デジタル画像を示す図である。 符号化ユニットにグループ化されたピクセルを有する図２のデジタル画像を示す図である。 図１のシーンの画像を示す図である。 プライバシーマスクが適用された図４の画像を示す図である。 図６ａ〜図６ｃは、画像および異なるピクセル化を示す図である。 画像のピクセルがグループ化されている符号化ユニットも示す図５の画像を示す図である。 識別された符号化ユニットを示す図５および図７の画像を示す図である。 プライバシーマスク区域が拡張されている図７の画像を示す図である。 本発明の方法の別形を示す流れ図である。 実施形態による符号化システムを示すブロック図である。 実施形態によるカメラを示すブロック図である。

図１において、カメラ２によって監視されるシーン１が示される。シーン１において、窓４と、出入口５とを有する家３が存在する。自動車６が家の前に駐車されており、かつ第１の個人７が家の外部に立っている。窓４のうちの１つを通して目に見える、第２の個人８が家の中にいる。

カメラ２が、そのシーンの画像をキャプチャする。図２において、画像１０の主要な構造が示される。画像１０は、カメラ２の画像センサ（図示せず）のピクセルに対応する、いくつかのピクセル１１から構成される。画像は、例えば、１２８０×７２０ピクセル、１９２０×１０８０ピクセル、または３８４０×２１６０ピクセルから構成され得る。

図３に示されるとおり、画像１０のピクセル１１は、隣接ピクセル１１の符号化ユニット１２にグループ化され得る。また、符号化ユニット１２は、マクロブロック、ピクセルブロック、コーディングツリーユニット、またはコーディングユニットと呼ばれることもあり得る。符号化ユニット１２は、ほとんどの事例において、例えば、８×８ピクセル、１６×１６ピクセル、または３２×３２ピクセルから成る、正方形であり得る。また、ピクセル１１を他のサイズおよび他の形状の符号化ユニットにグループ化することも可能である。

図４は、カメラ２によってキャプチャされた画像２０を示す。画像２０において、家の内部の第２の個人８が窓を通して目に見えることが理解され得る。シーン１を監視する目的は、家３の内部で何が起きるかではなく、家３の外部で何が起きるかを常に把握していることであり得る。したがって、家３の内部を示す画像２０の部分をマスクして消すことが望ましいことがあり得る。図５に例示されるとおり、カメラ２のユーザが、画像データが遮られるべきプライバシーマスク区域２１を指定してよい。図５において、プライバシーマスク２１は、単に黒の長方形である。このため、プライバシーマスク２１の背後の画像データは、シーン１からの映像を観る作業者によって見られない。

また、プライバシーマスク２１は、他の形態をとってもよいことに留意されたい。例えば、画像上に黒の長方形を重ね合わせる代わりに、ピクセル化されたプライバシーマスクが使用されてよい。図６ａにおいて、人間の顔の画像が示される。この顔は、顔をマスクして消して、シーンに出現する個人が識別され得ないようにすることが望ましいシーンの画像の部分であり得る。ピクセル化が、図６ｂにおいて行われ、画像におけるピクセルがピクセル化グループ３１にグループ化される。各ピクセル化グループ３１に関して、ピクセル化グループ３１におけるすべてのピクセルは、そのピクセル化グループ３１におけるピクセルを表す１つの共通の値に設定される。例えば、ピクセル化グループ３１におけるすべてのピクセル値の平均が、その共通の値として使用されてよい。また、グループの中の単一のピクセルの値が同一のピクセル化グループの中のすべてのピクセルに関する共通の値として使用されるピクセル化の変更形態、およびピクセル化グループの中のピクセルのサブセットの平均がその共通の値として使用される変更形態も存在する。

図６ｂにおいて理解され得るとおり、画像３０において顔が存在することを検出することが依然として可能である。画像における個人を知る誰かには、その個人を認識することが可能でさえあり得る。図６ｃは、より大きいサイズのピクセル化グループ３２が使用される例を示す。図６ｂと同一の様態で、ピクセル化グループ３２の中のすべてのピクセルに関して共通のピクセル値が設定されるが、ピクセル化グループは、より大きいので、マスクされた区域においてより少ない情報が残されて、顔が存在することを見分けるのさえ難しくする。ピクセル化グループのサイズは、画像のサイズ、マスクされて消されるべき被写体までの距離、および被写体が識別不可能にされるべき度合などの要因に依存して選択されてよい。

図７において、画像２０が再び示されるが、今度は、画像２０のピクセルがグループ化されている符号化ユニット２２も概略で示している。プライバシーマスク２１がそれぞれ、いくつかの符号化ユニット２２の全部を覆うこと、およびプライバシーマスク２１がいくつかの符号化ユニット２２の一部も覆うことが図において理解され得る。プライバシーマスク２１によって少なくとも部分的に覆われるすべての符号化ユニット２２は、図８においてドット付きのパターンで印が付けられており、識別された符号化ユニット２３と呼ばれる。明確にするため、ドット付きのパターンは、黒の長方形の上で見ることはできないものの、プライバシーマスク２１によって全部が覆われた符号化ユニットも識別された符号化ユニット２３に含まれることが指摘される。

本発明によれば、図７および図８に示された初期のプライバシーマスク区域２１が、識別された符号化ユニット２３と揃えられるように拡張されて、今や、拡張されたプライバシーマスク区域２４を形成する。このため、少なくとも部分的に初期のプライバシーマスク区域２１内にあったすべての符号化ユニット２２、すなわち、識別された符号化ユニット２３は、拡張されたプライバシーマスク２４によって覆われる。その結果、初期のプライバシーマスク２１の外部にあるが、識別された符号化ユニット２３に入っている画像データが、初期のプライバシーマスク区域２１の内部の画像データへのアクセスを不用意に与えることがないことが確実にされ得る。言い換えると、プライバシーマスクの下からの情報の「漏れ」が防止される。このことは、そうではなく、部分的に覆われた符号化ユニットの符号化が、プライバシーマスク区域２１内に存在する情報に少なくとも部分的に基づく場合、起きる可能性がある。

図６におけるプライバシーマスクの拡張は、かなり極端に見える可能性があるが、符号化ユニット２２は概略であることに留意されたい。図面を明確にするため、ピクセルおよび符号化ユニットは、サイズが誇張されている。例えば、１９２０×１０８０ピクセルの画像フレームが１６×１６ピクセルの符号化ユニットに分割されるとした場合、１２０×６８の符号化ユニットが存在することになり、それらの符号化ユニットのすべてを示すことは、乱雑な図面をもたらす。

画像２０を拡張されたプライバシーマスク２４で符号化するために、画像２０における各符号化ユニット２２に関して量子化パラメータが決定される。いくつかのアプリケーションにおいて、画像全体に関して１つの量子化パラメータを設定することしか可能でなく、そのため、各符号化ユニット２２に同一の量子化パラメータを与えることがあり得る。量子化パラメータは、ユーザ入力によって設定されてよく、またはそうではなく、例えば、ビデオシーケンスにおける画像における動きに基づいて決定されてよい。しかし、多くの事例において、個々の符号化ユニットにさえ至るまで、画像の異なる部分に関して異なる量子化パラメータを設定できることが有利である。いくつかの符号化スキームにおいて、画像データが、画像の残りの部分と比べて、より少なく圧縮されるべき、ＲＯＩという頭字語でしばしば呼ばれる、関心対象の１つまたは複数の領域を設定することが可能である。例として図１に示されるシーン１の場合、ユーザは、家３の前の区域において家３を覆うＲＯＩを設定してよい。また、関心を引かない領域を設定することが可能であってもよい。例えば、ユーザは、家３の上の空に関心がない可能性があり、したがって、空を示す画像の区域が、画像の残りの部分と比べて、より多く圧縮されるべきことを決定してよい。

また、そのようなＲＯＩベースの符号化方法をさらに改良して、ＲＯＩが動的であるようにする取組みも行われてきた。１つのそのような方法が、参照により本明細書に組み込まれている、本出願人の欧州特許出願第３，０２１，５８３号明細書において開示される。この方法によれば、画像の関係のある区域および関係のない区域が、画像におけるピクセルのブロック統計を調査することによって決定される。ピクセルの各グループに関するグループ値を形成する画像における隣接ピクセルの各グループに関する空間統計測定値が決定される。グループ値は、互いに比較され、１つのグループのグループ値が隣接グループとは十分に異なる場合、そのグループは、画像の関係のある区域に入っていると決定される。そのような動的ＲＯＩの場合、関心を引く詳細が存在する画像の区域において良好な画像品質を得ること、および関心対象の詳細を包含しない画像の区域に対してより少ないビットを費やすことが可能である。例えば、監視状況において、人間の顔は、関係があると見なされ得るのに対して、芝生の小さい詳細は、関係がないと見なされ得る。グループ値が計算される隣接ピクセルのグループは、符号化ユニット２２と同一であってもよく、同一でなくてもよい。例えば、画像の関係のある区域および関係のない区域を識別するために使用されるピクセルのグループは、符号化ユニット２２より大きく、例えば、３２×３２ピクセルのグループが、それぞれが１６×１６ピクセルから構成された４つの符号化ユニットを含むようになっていてよい。量子化パラメータが、画像の関係のある区域および関係のない区域の識別に基づいて隣接ピクセルのグループに関して決定される場合、その量子化パラメータは、隣接ピクセルのそのグループにおけるすべての符号化ユニットに適用される。

利用可能な帯域幅および／またはストレージを有効に利用するために、方法の別形によれば、量子化パラメータは、拡張されたプライバシーマスク２４の外部の画像２０の部分に関して、拡張されたプライバシーマスク２４の内部の画像２０の部分とは異なるように設定され得る。より詳細には、量子化パラメータは、識別された符号化ユニット２３に関して、高い圧縮を暗示し、故に、復号された画像フレームの低い画像品質を暗示する、高い設定にされてよい。プライバシーマスクによって覆われるべき画像の部分において多くの詳細が存在する可能性は高く、量子化パラメータが決定される方法に依存して、このことは、画像のその部分に関して、復号された画像フレームの低い圧縮および高い画像品質を暗示する、低い量子化パラメータにつながり得る。しかし、ひとたびプライバシーマスクが画像に適用されると、プライバシーマスクによって覆われた区域において高い画像品質を有することは、プライバシーマスクだけしか見るものがなく、関係のある画像データは存在しないので、無意味である。識別された符号化ユニット２３、すなわち、拡張されたプライバシーマスク２４によって覆われた符号化ユニットに関して低い画像品質を表す量子化パラメータを設定することによって、ビットが節約されることが可能であり、画像２０の他の部分において、ビデオシーケンスにおける他の画像において、または同一の監視システムにおける他のカメラからの画像においてより有効に利用され得る。例えば、０が最も軽い圧縮を暗示し、５１が最も重い圧縮を暗示する、０〜５１の量子化パラメータが設定されることが可能なコーデックにおいて、５１という量子化パラメータが、識別された符号化ユニット２３に関して設定されてよい。

同様に、識別された符号化ユニットにおけるピクセルは、所定の符号化ユニットサイズの符号化ユニットにグループ化されてよく、または再グループ化されてよい。例として、コーデックが、８×８ピクセルから６４×６４ピクセルまでの範囲内の符号化ユニットサイズ、またはマクロブロックサイズ、またはコーディングツリーユニットサイズを使用してよい。６４×６４ピクセルという所定の符号化ユニットサイズは、この場合、識別された符号化ユニット２３におけるピクセル、すなわち、拡張されたプライバシーマスク２４によって覆われるピクセルに関して使用され得る。

プライバシーマスクは符号器によって適用されるため、符号化ユニットがプライバシーマスクと揃えられることが元々行われている従来技術のプライバシーマスキング方法が存在することがここで注目され得る。そのような方法において、プライバシーマスクは、マスクされるべき区域を重度に圧縮することによって適用される。その結果、情報がプライバシーマスク区域において、見る人に対して画像データが十分に遮られるような高い程度に失われる。そのような方法は、符号器がどのように実施されるかに完全に依存し、したがって、プライバシーマスクの見え方を制御することが可能でない。また、同一の意図されるプライバシーマスクが、異なる符号器において異なるように適用されることにもなり、このことは、画像フレームの同一のビデオシーケンスが異なる符号器に同時に送信されるべき場合、望ましくないことがあり得る。セキュリティに関して、そのような方法は、すべての画像データが、マスクされるべき区域においても、符号器に実際に供給されるので、より信頼性が低いこともあり得る。したがって、プライバシーマスクの下から情報を抽出することが可能であり得る。

図７〜図９において、プライバシーマスク２１は、黒の長方形であるに過ぎない。前述したとおり、プライバシーマスクは、図６ａ〜図６ｃに示されるようなピクセル化の形態であってもよい。ピクセル化されたプライバシーマスクの場合、前述した方法は、さらに発展させられ得る。前の場合と同様に、初期のプライバシーマスク２１が、初期のプライバシーマスク２１によって少なくとも部分的に覆われる識別された符号化ユニット２３と揃えられるように拡張されて、その結果、拡張されたプライバシーマスク２４を形成する。拡張されたプライバシーマスク区域２４内で、画像のピクセルは、ピクセル化グループ３１、３２のサイズに対応するようにグループ化されてよく、または再グループ化されてよい。例えば、画像２０が１６×１６ピクセルの符号化ユニットに初期にグループ化され、かつピクセル化グループに関して設定されたサイズが３２×３２ピクセルであるものと想定すると、ピクセルグループサイズに不適合が存在することが理解され得る。したがって、拡張されたプライバシーマスク区域２４内で、符号化ユニットは、ピクセル化グループ３１、３２と同一のサイズの符号化ユニット２２にグループ化されて、各ピクセル化グループ３１、３２が１つの符号化ユニット２２に対応するようにされ得る。これにより、符号化ユニットとピクセル化グループの不揃いによって生じる気に障る視覚的アーチファクトが回避され得る。また、符号化ユニットとピクセル化グループをそのように揃えることは、プライバシーマスクを実際に拡張することなしに行われることも可能である。しかし、そのようにすると、量子化パラメータがどのように決定されるかに依存して、部分的に覆われた符号化ユニットの目に見える部分を介したプライバシーマスクの下からの情報の漏れが依然として存在する可能性がある。

次に、前述した方法が、本発明の方法の別形の流れ図である図１０を参照して、より簡単に要約される。

画像におけるピクセルを表す情報が受信される（ステップＳ１）。それらのピクセルが、隣接ピクセルの符号化ユニットにグループ化される（Ｓ２）。また、画像に適用されるべきプライバシーマスクを表す情報も受信される（Ｓ３）。プライバシーマスクによって少なくとも部分的に覆われる、すなわち、少なくとも部分的にプライバシーマスク区域内にある画像における符号化ユニットが識別される（Ｓ４）。プライバシーマスクが、識別された符号化ユニットを覆うように拡張されて、プライバシーマスクが拡張されたプライバシーマスク区域を覆うようになる（Ｓ５）。画像における各符号化ユニットに関して、量子化パラメータが決定される（Ｓ６）。拡張されたプライバシーマスクが画像に適用され（Ｓ７）、画像が、決定された量子化パラメータを使用してプライバシーマスクを有して符号化される（Ｓ８）。次に、同一の手順が、ビデオシーケンスにおける後続の画像に関して使用され得る。

図１１は、前述した方法により動作させられ得る符号化システム４０の簡略化されたブロック図である。符号化システム４０は、符号化すべき画像におけるピクセルを表す情報を受信するように構成された受信モジュール４１を備える。前段で述べたとおり、この情報は、例えば、輝度、光度、および色値に関するデータのうちの少なくとも１つであり得る。また、受信モジュールは、ピクセルを隣接ピクセルのグループの符号化ユニットにグループ化するようにも構成される。また、符号化ユニットは、マクロブロックまたはピクセルブロックと呼ばれることもあり得る。

また、符号化システム４０は、プライバシーマスクが画像に適用されるべきプライバシーマスク区域を表す情報を受信するためのプライバシーマスク入力モジュール４２も有する。複数のプライバシーマスクが同一の画像に適用されてよいこと、およびそれらのプライバシーマスクは、タイプ、形状、およびサイズが同一のものであっても、異なるものであってもよいことに留意されたい。例えば、１つのプライバシーマスクは、黒の長方形であってよく、別のプライバシーマスクは、ピクセル化された正方形であってよい。プライバシーマスク情報は、ユーザが監視されるシーンの表示された画像上にボックスを描くことによってなど、任意の適切な様態で入力されてよい。また、背景技術のセクションにおいて検討されたとおり、プライバシーマスク情報は、例えば、ユーザによって設定された条件が満たされたかどうかを判定するために使用され得る顔検出器、被写体検出器、または動き検出器に由来してもよい。

さらに、符号化システム４０は、プライバシーマスク区域内に少なくとも部分的に位置するすべての符号化ユニットを識別するため、および識別された符号化ユニットと揃えられるようにプライバシーマスク区域を拡張するための適応モジュール４３を有する。このようにして、適応モジュールは、プライバシーマスクによって部分的に覆われながら、見る人に部分的にアクセス可能である符号化ユニットが存在しないことを確実にし得る。

圧縮決定モジュール４４が、各符号化ユニットに関するそれぞれの量子化パラメータを決定するために符号化システム４０に備えられる。この決定は、様々な知られている、または発明される可能性がある様態のうちの１つで実行され得る。

また、符号化システム４０は、拡張されたプライバシーマスク区域においてプライバシーマスクを適用するように構成されたプライバシーマスク適用アプリケーションモジュール４５も備える。

さらに、符号化システム４０は、決定された量子化パラメータを使用して適用されたプライバシーマスクを有する画像の実際の符号化を実行するための符号器モジュール４６を有する。このため、符号化システム４０は、拡張されたプライバシーマスクを有する画像を符号化して、プライバシーマスクの下からの情報の漏れが回避され得るようにし、かつ視覚的アーチファクトが低減され得るようにすることができる。

前述した方法の別形に沿って、圧縮決定モジュール４４は、欧州特許出願第３，０２１，５８３号明細書において開示される方法などの、動的ＲＯＩ方法により動作してよい。

図１２において、カメラ２のブロック図が示される。カメラ２は、それ自体、一般に知られるとおり、光学部品５１と、画像センサ５２とを備える。また、カメラ２は、前述した符号化システム４０、および画像処理パイプラインと呼ばれることもあり得る画像処理モジュール５３も含む。画像処理モジュールは、例えば、モザイク解除、ノイズフィルタリング、鮮明化、およびトーンマッピングなどの処理を実行し得る。当業者には認識されるとおり、カメラは、さらなる構成要素を有するが、それらの構成要素は、本発明の理解のために必要ではないので、それらの構成要素は、図１２には示されず、さらに検討されることはない。

当業者は、多くの様態で前述した実施形態を変形することができ、それでも、前述した実施形態に示される本発明の利点を使用することができることが認められよう。例として、量子化パラメータは、任意の所望される様態で決定されてよい。量子化パラメータは、画像全体に関して統計的に設定されてよく、または量子化パラメータは、画像解析もしくは画像統計に基づくなど、より技巧を凝らした様態で決定されてよい。

プライバシーマスクは、異なる形態をとってよく、かつ、例えば、長方形または他の形状の黒の、またはそれ以外の着色された区域であってよい。それらの区域は、前段でさらに詳細に検討したとおり、ピクセル化されてよく、またはそれらの区域は、各ピクセルのピクセル値を当該のピクセルの近隣におけるピクセル値の平均で置き換えること、すなわち、かなり強力な（ｈｅａｖｙ−ｈａｎｄｅｄ）ノイズフィルタを適用することによってぼかされるもしくは不鮮明にされてよい。ピクセル化と不鮮明化の両方が、ときとして、ぼかしと呼ばれる。

画像の異なる符号化ユニットがどのように符号化されるかに依存して、符号化された画像、および復号された画像は、ブロック様に見えることがあり得る。例えば、１つの符号化ユニットもしくはマクロブロックがフレーム内モード（ｉｎｔｒａ ｍｏｄｅ）で（Ｉブロックとして）コーディングされ、かつ隣接する符号化ユニットもしくはマクロブロックがフレーム間モード（ｉｎｔｅｒ ｍｏｄｅ）で（ＰブロックもしくはＢブロックとして）符号化される場合、それらの符号化ユニットもしくはマクロブロックの間の境界は、目立つことがあり得る。したがって、多くの符号器は、符号化ユニット間の境界を越えて差を平滑化することが可能なブロック解除フィルタを適用する。このことは、その境界の両側のいくつかのピクセル値の平均を形成すること、およびその境界近くのピクセルの値を平均値で置き換えることによって行われ得る。プライバシーマスクの下から画像データが漏れ出すことがあり得ないことをさらに確実にするため、そのようなブロック解除フィルタは、マスクされた符号化ユニット、すなわち、識別された符号化ユニット２３に関してオフにされ得る。

方法のステップが前段で説明されてきた順序は、重要ではないことに留意されたい。例えば、量子化パラメータは、プライバシーマスクに関係なく、画像におけるすべての符号化ユニットに関してまず設定されてよく、その後、それらの量子化パラメータが、識別された符号化ユニットにおいて無効にされてよい。また、プライバシーマスクによって覆われることになる符号化ユニットをまず識別して、それらの符号化ユニットに関して低品質量子化パラメータを設定し、その後、拡張されたプライバシーマスク区域の外部の符号化ユニットに関して量子化パラメータを決定することも可能である。同様に、画像のピクセルがまずすべて、符号化ユニットにグループ化され、その後、拡張されたプライバシーマスク区域において再グループ化されてよく、または画像のピクセルは、拡張されたプライバシーマスク区域内で１つの様態でグループ化され、かつ拡張されたプライバシーマスク区域の外部で別の様態でグループ化されてよい。

符号化は、量子化パラメータおよび／または符号化ユニットサイズを設定することが可能である限り、任意の所望されるコーデックを使用して、任意の所望される方法により実行され得る。Ｈ．２６４、Ｈ．２６５、ＭＰＥＧ−４ Ｐａｒｔ２、またはＶＰ９コーデックなどのブロックベースのハイブリッドコーデックが、符号化のために使用され得る。その最も一般的な形態において、本発明は、任意の符号化方法を用いて、量子化パラメータおよび／または符号化ユニットサイズに関して柔軟性のない符号化方法を用いてさえ、実際に使用され得る。

図１２に関連して説明されるとおり、符号化システムは、カメラに組み込まれてよい。しかし、符号化システムを別個に構成して、符号化システムをカメラに動作可能に接続することも可能である。また、カメラから画像を、例えば、プライバシーマスクなしに管理センタに伝送し、管理センタにおいて、例えば、ＶＭＳ（ビデオマネジメントシステム）において、プライバシーマスクを適用することも可能である。そのような事例において、符号化システムは、ＶＭＳにおいて、またはそれ以外で管理センタにおいて構成されて、符号化された画像がカメラから受信され、復号され、その後、再符号化されるが、今度は、プライバシーマスクを有してそのようにされる、いわゆるトランスコーディングのために使用されてよい。このことは、異なるアクセス権が、それらの画像の異なるユーザに適用される場合、関心対象であり得る。例えば、ビデオシーケンスを、警察による後の法科学用途のためにプライバシーマスクなしで記録することが望ましいことがあり得るが、ライブの伝送を観る警備員は、マスクされない画像を観ることを許されなくてよい。

方法は、コンピュータ可読記憶媒体上に記憶された命令を実行することによって遂行され得る。それらの命令は、任意の種類のプロセッサ、例えば、中央処理装置（ＣＰＵ）、グラフィックスプロセシングユニット（ＧＰＵ）、集積回路に実装された特別仕様の処理デバイス、ＡＳＩＣ、ＦＰＧＡ、あるいはディスクリートの構成要素を含むロジック回路によって実行され得る。

符号化システムは、ソフトウェア、ファームウェア、ハードウェア、または以上の任意の組合せとして実現され得る。

カメラは、可視光カメラ、ＩＲカメラ、またはサーマルカメラなどの任意の種類のカメラであってよい。

このため、本発明は、示される実施形態に限定されるべきではなく、添付の特許請求の範囲によってのみ規定されるべきである。

１ シーン
２ カメラ
３ 家
４ 窓
５ 出入口
６ 自動車
７ 第１の個人
８ 第２の個人
１０ 画像
１１ ピクセル
１２ 符号化ユニット
２０ 画像
２１ プライバシーマスク、プライバシーマスク区域
２２ 符号化ユニット
２３ 識別された符号化ユニット
２４ 拡張されたプライバシーマスク、拡張されたプライバシーマスク区域
３０ 画像
３１ ピクセル化グループ
３２ ピクセル化グループ
４０ 符号化システム
４１ 受信モジュール
４２ プライバシーマスク入力モジュール
４３ 適応モジュール
４４ 圧縮決定モジュール
４５ プライバシーマスク適用アプリケーションモジュール
４６ 符号器モジュール
５１ 光学部品
５２ 画像センサ
５３ 画像処理モジュール

Claims (15)

1. プライバシーマスクを備えるデジタル画像を符号化する方法であって、
   前記デジタル画像におけるピクセルを表す情報を受信することと、
   前記画像の前記ピクセルを隣接ピクセルのグループの符号化ユニットにグループ化することと、
   プライバシーマスクが前記画像に適用されるべきプライバシーマスク区域を表す情報を受信することと、
   前記プライバシーマスク区域内に少なくとも部分的に位置するすべての符号化ユニットを識別することと、
   前記識別された符号化ユニットと揃えられるように前記プライバシーマスク区域を拡張することと、
   各符号化ユニットに関して、前記画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定することと、
   前記画像の拡張されたプライバシーマスク区域において前記プライバシーマスクを適用することと、
   前記決定された量子化パラメータを使用して前記適用されたプライバシーマスクを有する前記画像を符号化することとを備える、方法。
2. 前記識別された符号化ユニットを符号化するために所定の符号化パラメータが使用され、前記所定の符号化パラメータは、所定の符号化ユニットサイズと所定の量子化パラメータのうちの少なくとも１つである、請求項１に記載の方法。
3. 前記画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定することは、前記識別された符号化ユニットの前記量子化パラメータを所定の低減された品質の量子化パラメータに設定することを備える、請求項１または２に記載の方法。
4. 前記プライバシーマスクは、前記プライバシーマスク区域内のピクセルが隣接ピクセルのピクセル化グループにグループ化されるピクセル化を備え、それぞれのピクセル化グループの各ピクセルのピクセル値は、前記それぞれのピクセル化グループを表す共通のピクセル値に設定され、前記方法がさらに、
   前記プライバシーマスク区域内の前記画像の前記ピクセルを、前記ピクセル化グループに対応する符号化ユニットにグループ化することを備える、請求項１から３のいずれか一項に記載の方法。
5. 前記画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定することは、
   前記画像における関係のある区域の識別に基づいて各符号化ユニットに関する量子化パラメータを設定して、関係のある区域における符号化ユニットに第１の量子化パラメータが与えられ、かつ関係のない区域における符号化ユニットに第２の量子化パラメータが与えられるようにすることを備え、前記第１の量子化パラメータは、前記第２の量子化パラメータと比べて、より高い画像品質を与える圧縮を表す、請求項１から４のいずれか一項に記載の方法。
6. 前記画像を符号化するために使用されるべきそれぞれの量子化パラメータを決定することは、
   各符号化ユニットに関するグループ値を形成する各符号化ユニットに関する前記ピクセルを表す前記情報の空間統計測定値を計算することと、
   グループ値の間の差を計算することと、
   前記差を閾値と比較することと、
   前記差が前記閾値以上である場合、前記符号化ユニットが前記画像の関係のある区域内にあると識別することと、
   前記差が前記閾値未満である場合、前記符号化ユニットが前記画像の関係のない区域内にあると識別することとを備える、請求項５に記載の方法。
7. 前記空間統計測定値は、前記情報の合計、平均値、中央値、四分位範囲、標準偏差、分散、歪度、および尖度から成るグループからの少なくとも１つである、請求項６に記載の方法。
8. 各符号化ユニットは、少なくとも２５６ピクセルを含む、請求項６または７に記載の方法。
9. 前記画像における前記ピクセルを表す前記情報は、輝度、光度、および色値に関するデータから成るグループからの少なくとも１つである、請求項１から８のいずれか一項に記載の方法。
10. プライバシーマスクを備えるデジタル画像を符号化するためのデジタル画像符号化システムであって、
    前記デジタル画像におけるピクセルを表す情報を受信し、前記画像の前記ピクセルを隣接ピクセルのグループの符号化ユニットにグループ化するように構成された受信モジュールと、
    プライバシーマスクが前記画像に適用されるべきプライバシーマスク区域を表す情報を受信するように構成されたプライバシーマスク入力モジュールと、
    前記プライバシーマスク区域内に少なくとも部分的に位置するすべての符号化ユニットを識別し、前記識別された符号化ユニットと揃えられるように前記プライバシーマスク区域を拡張するように構成された適応モジュールと、
    前記画像を符号化するために使用されるべき各符号化ユニットに関するそれぞれの量子化パラメータを決定するように構成された圧縮決定モジュールと、
    前記画像の前記拡張されたプライバシーマスク区域において前記プライバシーマスクを適用するように構成されたプライバシーマスク適用モジュールと、
    前記決定された量子化パラメータを使用して前記適用されたプライバシーマスクを有する前記画像を符号化するように構成された符号器モジュールとを備える、デジタル画像符号化システム。
11. 前記プライバシーマスク入力モジュールは、前記プライバシーマスク区域内のピクセルが隣接ピクセルのピクセル化グループにグループ化されるピクセル化に関する情報を受信するように構成され、
    前記受信モジュールは、前記プライバシーマスク区域内の前記画像の前記ピクセルを前記ピクセル化グループに対応する符号化ユニットにグループ化するように構成され、かつ
    前記プライバシーマスク適用モジュールは、それぞれのピクセル化グループの各ピクセルのピクセル値を前記それぞれのピクセル化グループを表す共通のピクセル値に設定するように構成される、請求項１０に記載の符号化システム。
12. 前記圧縮決定モジュールは、関係のある区域における符号化ユニットに第１の量子化パラメータが与えられ、かつ関係のない区域における符号化ユニットに第２の量子化パラメータが与えられるように、前記画像における関係のある区域の識別に基づいて各符号化ユニットに関する量子化パラメータを設定するように構成され、前記第１の量子化パラメータは、前記第２の量子化パラメータと比べて、より高い画像品質を与える圧縮を表す、請求項１０または１１に記載の符号化システム。
13. 前記圧縮決定モジュールは、
    各符号化ユニットに関するグループ値を形成する各符号化ユニットに関する前記ピクセルを表す前記情報の空間統計測定値を計算し、
    グループ値の間の差を計算し、
    前記差を閾値と比較し、
    前記差が前記閾値以上である場合、前記符号化ユニットが前記画像の関係のある区域内にあると識別し、および
    前記差が前記閾値未満である場合、前記符号化ユニットが前記画像の関係のない区域内にあると識別するように構成される、請求項１２に記載の符号化システム。
14. 請求項１０から１３のいずれか一項に記載のデジタル符号化システムを備えるカメラ。
15. プロセッサによって実行された場合、請求項１から９のいずれか一項に記載の方法を遂行するように適応させられた命令を有するコンピュータ可読記憶媒体を備えるコンピュータプログラム製品。