JP5080302B2

JP5080302B2 - 画像処理方法

Info

Publication number: JP5080302B2
Application number: JP2008026719A
Authority: JP
Inventors: ルムールオリヴィエ; シュヴェジャン−クロード; クルタンギヨーム
Original assignee: Thomson Licensing SAS
Current assignee: Thomson Licensing SAS
Priority date: 2007-02-07
Filing date: 2008-02-06
Publication date: 2012-11-21
Anticipated expiration: 2028-02-06
Also published as: EP1956550A1; KR101429625B1; KR20080074031A; EP1956550B1; CN101241591B; US20080212897A1; CN101241591A; US8200045B2; JP2008192156A; TW200834466A; TWI451356B; FR2912237A1

Description

本発明は、原画像から縮小サイズの画像を生成する画像処理方法に関する。

固定された画像又はビデオのセットにおけるナビゲーションアプリケーションにとって、全てのビデオ画像を一見して表示できることは有効である。この目的のため、前記画像又はビデオが同じスクリーンに同時に表示され、容易に比較することができるように、それぞれ固定された画像又はそれぞれのビデオ画像の縮小サイズのバージョンを生成することは関心のあることである。同様に、たとえば移動電話といった小型サイズのスクリーンを有する移動機器でのビデオコンテンツのブロードキャストアプリケーションのため、小型サイズのスクリーンでそれらを表示するため、ビデオのそれぞれの画像の縮小サイズのバージョンを生成することが必要である。

原画像又はビデオからこれら縮小された画像又はビデオを生成するための当業者に知られている方法は、前記原画像又はビデオをサブサンプリングすることからなる。サイズにおける重要な低減のケースでは、幾つかの画像部分はそれらが余りに小さいのでユーザにより使用することが不可能である。
US 2002/191861 A1 (CHEATLE STEPHEN PHILIP [GB]) US 2005/025387 A1 (LUO JIEBO [US]) XIN FAN ET AL: "Looking into Video Frames on Small Displays" INTERNET CITATION, [Online] CHEN L-Q ET AL: "A VISUAL ATTENTION MODEL FOR ADAPTING IMAGES ON SMALL DISPLAYS" MULTIMEDIA SYSTEMS, ACM, NEW YORK, NY, US

本発明の目的は、従来技術の少なくとも１つの問題に対処することである。

本発明は、原画像から、縮小比と呼ばれる、幅と高さの間の比率が予め決定された値に等しい縮小サイズの画像を生成する画像処理方法に関するものであり、原画像において１つの矩形の画像部分を選択し、矩形の画像部分を抽出して縮小画像を生成するステップを含む。

本発明の本質的な特徴によれば、第一の比率と呼ばれる、矩形の画像部分の幅と高さの間の比率が縮小比に等しくない場合、矩形の画像部分の幅又は高さは、第二の比率と呼ばれる、変更された矩形の画像部分の幅と高さの間の比率が縮小比率に等しいようなやり方で、原画像のそれぞれの画素に関連する知覚による関心の値に従って抽出ステップの前に変更される。

特定の特徴によれば、第一の比率が縮小比よりも小さい場合、矩形の画像部分の幅は、右への第一の値及び左への第二の値により増加される。第一及び第二の値は、以下のステップに従って決定される。第一の増加の増加された幅と高さの間の比が縮小比に等しいように第一の増加する計算するステップ、右への第一の増加の矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第一の平均の特徴の値（saliency value）を計算するステップ、左への第一の増加の矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第二の平均の特徴の値を計算するステップ、第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、第一及び第二の平均の特徴の値の合計との間の比と、第一の増加との積である第一の値を計算するステップ、第二の平均の特徴の値と、全体の平均の特徴の値との間の比と、第一の増加との積である第二の値を計算するステップ。

別の特定の特性によれば、第一の比率が縮小比よりも大きい場合、矩形の画像部分の高さは、上方に第一の値、及び下方に第二の値だけ増加され、第一及び第二の値は、以下のステップに従って決定される。幅と第二の増加により増加された高さとの間の比が縮小比に等しいように高さの第二の増加を計算するステップ、上方に第二の増加の画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第一の平均の特徴の値を計算するステップ、下方に第二の増加の画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第二の平均の特徴の値を計算するステップ、第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、第一及び第二の特徴の値の合計との間の比と第二の増加との積として第一の値を計算するステップ、第二の平均の特徴の値と、全体の平均の特徴の値との間の比と第二の増加との積として第二の値を計算するステップ。

特定の実施の形態によれば、原画像は幾つかの画像の系列に属しており、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ現在の画像に先行する画像の矩形の画像部分の対応するサイドから、矩形の画像部分のサイドの少なくとも１つが分離される場合、矩形の画像部分のサイドの少なくとも１つを移動することからなる矩形の画像部分の時間的な適合（temporally adapting）ステップを含む。

別の特定の実施の形態によれば、原画像は幾つかの画像の系列に属し、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ現在の画像に先行する画像の矩形の画像部分の対応するサイドから、矩形の画像部分の全てのサイドのそれぞれが分離される場合、矩形の画像部分の全てのサイドを移動することからなる矩形の画像部分の時間的な適合ステップを含む。

別の特定の実施の形態によれば、原画像は幾つかの画像の系列に属し、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、Ｎ及びＮ’を正の整数として、変更されたパラメータが現在の画像に先行するＮ画像、及び現在の画像に後続するＮ’画像の矩形の画像部分の対応するパラメータを含む値のセットの中間値に等しいように、高さ、幅及び中心の座標といったパラメータのなかから矩形の画像部分の少なくとも１つのパラメータを変更することからなる矩形の画像部分の時間的な適合ステップを含む。

特定の特性によれば、Ｎ＝Ｎ’である。

別の特定の特性によれば、系列はショットと呼ばれる画像のグループに分割され、現在の画像に先行するＮ画像と現在の画像に後続するＮ’画像は現在の画像として同じショットに属する。

有利なことに、時間的に適合された矩形の画像部分の幅と高さとの間の比が縮小された比に等しくない場合、時間的な適合ステップは、時間的に適合され変更された矩形の画像部分の幅と高さとの間の比が縮小された比率に等しいように、現在の原画像のそれぞれの画素と関連される知覚的な関心の値に従う時間的に適合される矩形の画像部分の幅又は高さの変更ステップにより後続される。

本発明は、添付図面を参照して、限定することなしに、有利な実施の形態及び実現により良好に理解され、例示される。

本発明は、原画像から、その幅と高さとの間の比率が縮小比率と呼ばれ、ＲＲとして示される予め決定された比率に等しい縮小サイズの画像を生成する方法に関する。画像について記載される本発明は、ビデオのような画像系列に適用することができる。

図１を参照して、本発明は、原画像の矩形部分の第一の選択ステップ１００を含む。かかる選択は、原画像の画素の知覚的な関心を特徴づけるデータから実行される。この目的のため、図２を参照して、原画像（図２（ａ））に関連する特徴マップ（図２（ｂ））は、原画像における特徴の部分、すなわち知覚的な関心が高い部分を識別するやり方で予め決定された閾値で２値化される。生成されるバイナリマップ（図２（ｃ））は、画素の関連される特徴の値が予め決定された閾値よりも低い場合に、第一の値（たとえばゼロ）を原画像のそれぞれの画素と関連付け、さもなければ第二の値（たとえば２５５）を関連付けする。図３を参照して、バウンディングＲＥは、第二の値が関連付けされる画素により構成される原画像のゾーンを囲むように原画像で位置合わせされる。バウンディングボックスは、選択された画像部分の境界を決定する。特徴マップは、たとえば特許出願EP03293216.2（公開1544792）で記載される方法を適用することで得られる。かかるマップは、ｓ_Pで示される特徴の値を原画像のそれぞれの画素Ｐと関連付けする。画像部分の選択は、任意の他の方法に従って行うことができる。変形例に拠れば、人間のオペレータにより手動で実行される。かかるゾーンは、関心のあるエリア又は領域名の下で従来技術において知られる。

ステップ１１０は、ステップ１００で選択された画像部分の幅ＰＬと高さＰＨの間の比率ＲＦを計算することからなる。
ステップ１２０は、ＲＦをＲＲと比較することからなる。ＲＦがＲＲに等しい場合、ステップ１００で選択された画像部分の抽出を進めることで、ステップ１４０の間に生成される。さもなければ、選択された画像部分の高さ又は幅は、変更された画像部分の幅と高さとの間の比がＲＲに等しいやり方で、ステップ１３０の間に変更される。

より詳細には、図４を参照して、ステップ１３０は、ＲＦがＲＲよりも小さい場合にバウンディングボックスの幅を増加するステップ１３１、ＲＦがＲＲよりも大きい場合にバウンディングボックスの高さを増加するステップ１３２からなる。本発明の１つの本質的な特徴によれば、バウンディングボックスの幅又は高さは、原画像の画素の知覚的な関心を考慮することで増加される。図５を参照して、ＲＦ＜＜ＲＲのケースで、バウンディングボックスの幅における増加ＡＬは、以下のやり方でステップ１３１０の間に計算される。ＡＬ＝ＰＬ*ＲＲ／ＲＦ−ＰＬ。ステップ１３１１の間、図７を参照して、平均の特徴の値は、左にバウンディングボックスＲＥの幅を増加することで得られる、幅ＡＬ及び高さＰＨの、更なるボックスＲＡＧにおいて計算される。更なるボックスＲＡＧの平均の特徴ＳＭＧは、以下のように計算される。

ここでｎａｇは更なるボックスＲＡＧにおける画素数である。

同様に、ステップ１３１２の間、図８を参照して、平均の特徴の値は、右へバウンディングボックスＲＥの幅を増加することで得られる、幅ＡＬと高さＰＨの更なるボックスＲＡＤにおいて計算される。更なるボックスＲＡＤの平均の特徴ＳＭＤは、以下のように計算される。

ここでｎａｄは更なるボックスＲＡＤにおける画素数である。すなわちｎａｄ＝ｎａｇである。

ステップ１３１３の間、全体の平均の特徴の値ＳＭＴは、以下のように計算される。ＳＭＴ＝ＳＭＧ＋ＳＭＤ
ステップ１３１４の間、左への幅における増加ＡＬＧは、以下のように計算される。
ＡＬＧ＝ＳＭＧ*ＡＬ／ＳＭＴ
同様に、ステップ１３１５の間、右への幅における増加ＡＬＤは、以下のように計算される。
ＡＬＤ＝ＳＭＤ*ＡＬ／ＳＭＴ
変更されたバウンディングボックスＲＥＭは、図９に示される。ＰＨに等しい高さ及びＡＬＧ＋ＡＬＤ＋ＰＬに等しい幅、すなわちＡＬ＋ＰＬに等しい幅を有する。したがって、変更されたバウンディングボックスＲＥＭの幅と高さとの間の比は、（ＡＬ＋ＰＬ）／ＰＨに等しく、すなわちＰＬ*ＲＲ／（ＲＦ*ＰＨ）＝ＲＲに等しい。

図６を参照して、ＲＦ＞ＲＲのケースでは、バウンディングボックスの高さＡＨにおける増加は、以下のやり方でステップ１３２０の間に計算される。
ＡＨ＝ＰＨ*ＲＦ／ＲＲ−ＰＨ。
ステップ１３２１の間、図１０を参照して、平均の特徴の値は、上にバウンディングボックスＲＥの高さを増加することで得られる、幅ＰＬと高さＡＨの更なるボックスＲＡＨで計算される。更なるボックスＲＡＨの平均の特徴ＳＭＨは、以下のように計算される。

ここでｎａｈは更なるボックスＲＡＨにおける画素数である。
同様に、ステップ１３２２の間、図１１を参照して、平均の特徴の値は、下にバウンディングボックスＲＥの高さを増加することで得られる、幅ＰＬと高さＡＨの更なるボックスＲＡＢで計算される。更なるボックスＲＡＢの平均の特徴ＳＭＢは、以下のように計算される。

ここでｎａｂは更なるボックスＲＡＢにおける画素数である。すなわちｎａｂ＝ｎａｈである。

ステップ１３２３の間、全体の平均の特徴の値ＳＭＴは、以下のように計算される。ＳＭＴ＝ＳＭＢ＋ＳＭＨ。
ステップ１３２４の間、上への高さにおける増加ＡＨＨは、以下のように計算される
ＡＨＨ＝ＳＭＨ*ＡＨ／ＳＭＴ。
同様に、ステップ１３２５の間、下への高さにおける増加ＡＨＢは、以下のように計算される。
ＡＨＢ＝ＳＭＢ*ＡＨ／ＳＭＴ。

変更されたバウンディングボックスＲＥＭは、図１２に示される。このバウンディングボックスは、ＡＨＨ＋ＡＨＢ＋ＰＨに等しい高さ、すなわちＡＨ＋ＰＨに等しい高さとＰＬに等しい幅を有する。変更されたバウンディングボックスＲＥＭの幅と高さの間の比は、ＰＬ／（ＡＨ＋ＰＨ）に等しく、すなわちＰＬ／（ＰＨ*ＲＦ／ＲＲ）＝ＲＲに等しい。

ステップ１４０は、変更されたバウンディングボックスＲＥＭにより境界が設定される画像部分を原画像から抽出することで縮小された画像を生成することからなる。

有利なことに、本発明によれば、バウンディングボックスは、知覚的な関心が高い画素を変更されたバウンディングボックスＲＥＭが含むように、その幅と高さとの間の比が比率ＲＲに等しいボックスを得るために変更される。

ステップ１００で決定されたバウンディングボックスＲＥが原画像のエッジのうちの１つの近くに位置される場合、更なるボックスが原画像を残すことが可能である。このケースでは、変更されたバウンディングボックスＲＥＭの決定ステップの間、原画像の外に配置される画素は、反対のサイドに配置される。

図１５により例示される本発明の特定の実施の形態によれば、本方法は、縮小サイズのビデオを生成するためにビデオのそれぞれの画像に適用される。有利なことに、本方法は、ステップ１４０の前に適用される時間的な適合ステップ１３５を更に含む。本方法は、ＡＲＥＭ_t-1で示されるそれ自身が時間的に適合された変更されたバウンディングボックスからのインデックスｔの画像において、インデックスｔの画像に時間的に先行するインデックスｔ−１の画像において、変更されたバウンディングボックスＲＥＭ_tを時間的に適合することからなる。このステップは、連続する画像間のジャーキー効果（jerky effect）が防止されるのを可能にし、これらの効果は、変更されたバウンディングウィンドウＲＥＭの、ある原画像のロケーションから別の原画像のロケーションへの強い変動によるものである。縮小されたビデオの再生の間、オブザーバに流動性の印象が与えられるのを可能にする。図１３を参照して、ｄｇ（それぞれｄｄ）は、インデックスｔの現在の画像の変更されたバウンディングボックスＲＥＭ_tの左サイド（それぞれ右サイド）と、インデックスｔ−１の前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭ_t-1の左サイド（それぞれ右サイド）を分離する距離である。また、ｄｈ（それぞれｄｂ）は、インデックスｔの画像の変更されたバウンディングボックスＲＥＭ_tの上サイド（それぞれ下サイド）と、インデックスｔ−１の前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭ_t-1の上サイド（それぞれ下サイド）とを分離する距離である。

距離ｄｄ，ｄｇ，ｄｈ及びｄｂは、以下のやり方で変更される。
ｄｄ＞ＴＨＤである場合、ｄｄｍ＝ｄｄ−ｄｄ／α_CV、さもなければｄｄｍ＝ｄｄ。
ｄｇ＞ＴＨＤである場合、ｄｇｍ＝ｄｇ−ｄｇ／α_CV、さもなければｄｇｍ＝ｄｇ。
ｄｈ＞ＴＨＤである場合、ｄｈｍ＝ｄｈ−ｄｈ／α_CV、さもなければｄｈｍ＝ｄｈ。
ｄｂ＞ＴＨＤである場合、ｄｂｍ＝ｄｂ−ｄｂ／α_CV、さもなければｄｂｍ＝ｄｂ。

変形例に拠れば、距離ｄｄ，ｄｇ、ｄｈ及びｄｂは、以下のやり方で変更される。
（ｄｄANDｄｇANDｄｈANDｄｂ）＞ＴＨＤである場合、ｄｄｍ＝ｄｄ−ｄｄ／α_CV，ｄｇｍ＝ｄｇ−ｄｇ／α_CV，ｄｈｍ＝ｄｈ−ｄｈ／α_CV，及びｄｂｍ＝ｄｂ−ｄｂ／α_CVである。この場合、“AND”は論理積の演算子である。ＴＨＤは、予め決定された閾値である。ＣＩＦフォーマットにおける画像の系列について、ＴＨＤ＝２０である。ｄｄｍ，ｄｇｍ，ｄｈｍ及びｄｂｍは、ｄｄ，ｄｇ，ｄｈ及びｄｂのそれぞれ変更された値である。α_CVは時間的な収束速度である。α_CVが大きい場合、ウィンドウＡＲＥＭ_tの位置はウィンドウＡＲＥＭ_t-1の位置に関して変化しない。変更されたバウンディングボックスＲＥＭ_tのサイドは、現在の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭ_tの左サイド（それぞれ右サイド）と、前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭ_t-1の左サイド（それぞれ右サイド）とを分離する距離がｄｇｍ（それぞれｄｄｍ）に等しいようなやり方で、及び、現在の画像の変更されたバウンディングボックスＲＥＭ_tの上サイド（それぞれ下サイド）と、時間的に適合された変更されたバウンディングボックスＡＲＥＭ_t-1の上サイド（それぞれ下サイド）と、を分離する距離がｄｈｍ（それぞれｄｂｍ）に等しいようなやり方で移動される。

時間的な適合ステップ１３５は、バウンディングボックスのサイズを変更する。したがって、このステップの後、バウンディングボックスＡＲＥＭ_tの幅と高さの比がＲＲに等しいようにステップ１１０から１３０を再び行うことが必要である。

本発明の別の実施の形態によれば、バウンディングボックスの時間的な適合ステップ１３５は、ショット当たり実行される。ショットは、系列の他の画像のショットの２つの変化により分離される連続する画像のグループである。このため、系列のショットのそれぞれの画像において、ステップ１１０〜１３０に従って変更されたバウンディングボックスからパラメータが抽出される。これらのパラメータは、変更されたバウンディングボックスＲＥＭの中心の座標（Ｃ_x，Ｃ_y）、その高さＨ及びその幅Ｌである。長さＮの時間的なメディアンフィルタは、幾つかの画像に適用される。増加する順序に従ってパラメータのそれぞれの値をソートすること、中間の値を選択することからなる。値の数が偶数である場合、２つの中間の値の平均が選択される。計算の例は、長さＮ＝９のフィルタについて与えられる。インデックスｔの画像に先行する３つの画像とインデックスｔの画像に後続する３つの画像とに関連するパラメータの値から、インデックスｔの画像のＲＥＭに関連するそれぞれのパラメータについて、中間値が計算され、以下の表に一覧される。

増加する順序で分類されるパラメータＣ_Xの値は、以下の通りである。２２７，２２７，２３０，２３０，２３１，２３１，２３３，２３５及び２３６。中間の値は、インデックスｔの画像の時間的に適合されたバウンディングボックス（ＡＲＥＭ_t）のＣ_Xの新たな値となる値２３１である。他のパラメータの中間値は、以下の通りである。Ｃ_y＝１７２，Ｌ＝１５９及びＨ＝１３１である。

インデックスｔの画像において、フィルタリング後のバウンディングボックスは、幅が１５９画素で高さ１３１画素からなる座標（２３１，１７２）の画素にセンタリングされるボックスである。それぞれのバウンディングボックスについて、このように変更されたパラメータは、互いに更に相関され、時間的な整合が増加される（又は画像間のジャークが低減される）。

当然、ショットのＮ／２の最初の画像とＮ／２の最後の画像について、メディアンフィルタリングを適用することは可能ではない。このケースでは、ショットのＮ個の最初の画像（それぞれショットのＮ個の最後の画像）が適用される。たとえば、Ｎ＝９である場合、ショットの４つの最初の画像のバウンディングボックスのパラメータ（Ｃ_x，Ｃ_y，Ｌ，Ｈ）は同じである。それぞれのパラメータの値は、ショットの対応するパラメータの９つの最初の値のメディアンフィルタリングにより得られる中間値に等しい。

勿論、本発明は、上述された実施の形態の例に制限されない。特に、当業者は、説明された実施の形態に対する変形を実施し、それらを結合してそれら様々な利点からの利益を得る場合がある。

上述された方法は、画像系列のサマリ、ナビゲーション、インデックスのような多くのアプリケーション向けに使用することができる。また、本発明は、ＰＤＡ、モバイルフォン又はデジタルカメラスクリーンのような小型スクリーンでの画像又は画像の系列の視聴を改善するために使用することができる。

本発明の特定の実施の形態に係る方法のステップを例示する図である。画像（ａ）、関連する特徴マップ（ｂ）及び特徴マップを閾値により得られるバイナリマップ（ｃ）を示す図である。画像の特徴ゾーンを囲んでいるバウンディングボックスを示す図である。本発明に係る方法のステップを例示する図である。バウンディングボックスの幅を増加するために適用される本発明に係る方法のステップを例示する図である。バウンディングボックスの高さを増加するために適用される本発明に係る方法のステップを例示する図である。バウンディングボックスＲＥとボックスＲＥの左に位置される更なるボックスＲＡＧを示す図である。バウンディングボックスＲＥとボックスＲＥの右に位置される更なるボックスＲＡＤを示す図である。本発明の方法に係る更なる変更されたボックスＲＥＭを示す図である。バウンディングボックスＲＥとボックスＲＥの上に位置される更なるボックスＲＡＨを示す図である。バウンディングボックスＲＥとボックスＲＥの下に位置される更なるボックスＲＡＢを示す図である。本発明の方法に係る更なる変更されたボックスＲＥＭを示す図である。インデックスｔ−１の画像と関連される時間的に適合されるボックスＡＲＥＭ_t-1と時間的な適合の前にインデックスｔの画像と関連されるバウンディングボックスＲＥＭを示す図である。インデックスｔ−１の画像と関連される時間的に適合されるボックスＡＲＥＭ_t-1と時間的な適合の前後でインデックスｔの画像と関連されるバウンディングボックスＲＥＭを示す図である。本発明の別の特定の実施の形態に係る方法のステップを例示する図である。

符号の説明

１００：原画像の矩形部分を選択するステップ
１１０：選択された画像部分の幅と高さの間の比率を計算するステップ
１２０：第一の比率ＲＦを縮小比ＲＲと比較するステップ
１３０：変更された画像部分の幅と高さとの間の比がＲＲに等しくなるように、選択された画像部分の高さ又は幅を変更するステップ
１３１：ＲＦがＲＲよりも小さい場合にバウンディングボックスの幅を増加するステップ
１３２：ＲＦがＲＲよりも大きい場合にバウンディングボックスの高さを増加するステップ
１４０：縮小画像を生成するために矩形の画像部分を抽出するステップ

Claims

原画像から、幅と高さの間の比率が縮小比と呼ばれる予め決定された値に等しい、縮小画像と呼ばれる縮小サイズの画像を生成する画像処理方法であって、
前記原画像において１つの矩形の画像部分を選択するステップと、
前記縮小画像を生成するために前記矩形の画像部分を抽出するステップとを含み、
当該方法は、
第一の比率と呼ばれる、前記矩形の画像部分の幅と高さとの間の比率が前記縮小比に等しくないとき、前記矩形の画像部分の幅又は高さは、前記抽出するステップの前に、第一の側と呼ばれる、前記矩形の画像部分の一方の側で第一の値だけ増加され、第二の側と呼ばれる、前記第一の側とは反対にある前記矩形の画像部分の別の側で第二の値だけ増加され、
前記第一の値と前記第二の値は、
第一の増加により変更される前記矩形の画像部分の幅と高さとの間の比率が前記縮小比に等しいように、幅又は高さにおける前記第一の増加を計算するステップと、
前記第一の側への前記第一の増加について前記矩形の画像部分の幅又は高さを増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第一の平均の特徴の値を計算するステップと、
前記第二の側への前記第一の増加について前記矩形の画像部分の幅又は高さを増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第二の平均の特徴の値を計算するステップと、
前記第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、前記第一及び第二の平均の特徴の値の合計との間の比と、前記第一の増加との積である第一の値を計算するステップと、
前記第二の平均の特徴の値と、前記全体の平均の特徴の値との間の比と、前記第一の増加との積である前記第二の値を計算するステップと、
に従って決定される、ことを特徴とする画像処理方法。
前記第一の比率が前記縮小比よりも小さいとき、前記矩形の画像部分の幅は、右に前記第一の値だけ増加され、左に前記第二の値だけ増加される、
請求項１記載の方法。
前記第一の比率が前記縮小比よりも大きいとき、前記矩形の画像部分の高さは、上方に前記第一の値だけ増加され、下方に前記第二の値だけ増加される、
請求項１又は２記載の方法。
前記原画像は幾つかの画像の系列に属しており、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな前記距離だけ前記現在の画像に先行する画像の前記矩形の画像部分の対応するサイドから、前記矩形の画像部分のサイドの少なくとも１つが分離される場合、前記矩形の画像部分のサイドの少なくとも１つを移動することからなる、前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
原画像は幾つかの画像の系列に属し、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな前記距離だけ前記現在の画像に先行する画像の矩形の画像部分の対応するサイドから、前記矩形の画像部分の全てのサイドのそれぞれが分離される場合、前記矩形の画像部分の全てのサイドを移動することからなる、前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
前記原画像は幾つかの画像の系列に属し、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、Ｎ及びＮ’を正の整数として、変更されたパラメータが前記現在の画像に先行するＮ個の画像、及び前記現在の画像に後続するＮ’個の画像の前記矩形の画像部分の対応するパラメータを含む値のセットの中間値に等しいように、高さ、幅及び中心の座標を含むパラメータのなかから前記矩形の画像部分の少なくとも１つのパラメータを変更することからなる、前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
前記Ｎ＝Ｎ’である、
請求項６記載の方法。
前記系列はショットと呼ばれる画像のグループに分割され、前記現在の画像に先行するＮ個の画像と前記現在の画像に後続するＮ’個の画像は、前記現在の画像と同じショットに属する、
請求項６又は７記載の方法。
前記時間的に適合された矩形の画像部分の幅と高さとの間の比が前記縮小比に等しくない場合、前記時間的な適合ステップは、前記時間的に適合され変更された矩形の画像部分の幅と高さとの間の比が前記縮小比に等しいように、前記現在の原画像のそれぞれの画素と関連される知覚的な関心の値に従って前記時間的に適合された矩形の画像部分の幅又は高さの変更ステップにより後続される、
請求項４乃至８の何れか記載の方法。