JP2009527776A - 知覚の画像プレビュー - Google Patents

知覚の画像プレビュー Download PDF

Info

Publication number
JP2009527776A
JP2009527776A JP2008555391A JP2008555391A JP2009527776A JP 2009527776 A JP2009527776 A JP 2009527776A JP 2008555391 A JP2008555391 A JP 2008555391A JP 2008555391 A JP2008555391 A JP 2008555391A JP 2009527776 A JP2009527776 A JP 2009527776A
Authority
JP
Japan
Prior art keywords
image
perceptual
preview
preview image
naive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2008555391A
Other languages
English (en)
Inventor
リン ジョウチェン
ワン リャン
フェン ウェイ
ウォン ティエン−ティン
リュウ ジー−チアン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2009527776A publication Critical patent/JP2009527776A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20008Globally adaptive

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Television Systems (AREA)

Abstract

知覚の画像プレビューのためのシステム及び方法が説明されている。一態様において、ナイーブなプレビュー画像はより大きな画像をダウンサンプリングすることにより生成される。その後より大きな画像の知覚の特徴は検出される。その後検出された知覚の特徴に関連付けられた情報は、知覚のプレビュー画像を作成するためにナイーブなプレビュー画像に組み込まれる。知覚のプレビュー画像は検出された知覚の特徴に関連付けられた情報を組み込むので、知覚のプレビュー画像のビューアは、より大きな画像においてこのような知覚の特徴の存在又は不存在を検出する可能性がより高くなる。

Description

プレビュー画像(image:イメージ)は一般に、より大きな画像の減らされたバージョン、又はダウンサンプリングされた (downsampled:サンプル化して落とされた)バージョンを表示する。画像アプリケーションは一般に、大まかな画像圧縮、質及び/又はプレビュー画像が派生したより大きな画像の他の態様について、ディスプレイデバイス上に画像プレビューを見せる。しかし、プレビュー画像はダウンサンプリング動作の結果であるので、プレビュー画像は、対応するより大きな画像において見せられる情報のサブセットでのみ作成される。結果としてユーザは、単にプレビュー画像を閲覧することにより、より大きな画像において見せられる重要な知覚(perceptual)の特徴(たとえば、ノイズ、ブラー(blur)、フィールドの深さ(depth of field)、ホワイトバランス(white balance)、ブルーム効果(bloom effect)など)を確定することはできないかもしれない。
このようなシナリオにおいて、プレビュー画像は、ユーザの画像プレビュー及びブラウジングのニーズに適切に向けられていない。
この課題を解決するための手段は、発明を実施するための最良の形態において以下でさらに説明される簡略化された形においての概念の選択を紹介するために提供される。この課題を解決するための手段は、特許請求された主題の鍵となる特徴又は重要な特徴を特定することを意図せず、特許請求の範囲の主題の範囲を決定する助けとして使用されることを意図しない。
上述の観点から、知覚の画像プレビューのためのシステム及び方法が説明される。一態様において、ナイーブ(naive)なプレビュー画像はより大きな画像をダウンサンプリングすることにより生成される。より大きな画像の知覚の特徴はその後に検出される。検出された知覚の特徴に関連付けられた情報はその後、知覚のプレビュー画像を作成するためにナイーブなプレビュー画像に組み込まれる。知覚のプレビュー画像は検出された知覚の特徴に関連付けられた情報を組み込むので、知覚のプレビュー画像のヴューア(viewer)は、より大きな画像におけるこのような知覚の特徴の存在または不存在を簡単に検出することとなる。
図面において、構成要素の参照番号の最も左の桁は、その構成要素が最初に出現した個所の図面を特定する。
例示的なシステム
必要とされていないが、知覚の画像プレビューのためのシステム及び方法が、パーソナルコンピュータなどのコンピューティングデバイスにより実行されているコンピュータ実行可能命令(プログラムモジュール)の一般的な内容において説明される。プログラムモジュールは一般に、特定のタスクを実行するかまたは特定の抽象データ型を実装する、ルーチン、プログラム、オブジェクト、コンポーネント、データ構造などを含む。システム及び方法が以下の内容で説明される一方で、以降で説明する動作もハードウェアで実装することもできる。
図1は、一実施形態による知覚の画像プレビューについての例示的なシステムを示している。システム100は、ホストコンピューティングデバイス102を含む。ホストコンピューティングデバイス102は、小さい形のファクターデバイス、デジタルカメラ、ハンドヘルドまたはモバイルコンピューティングデバイス、ラップトップ、パーソナルコンピュータ、サーバなどの任意のタイプのコンピューティングデバイスを表示する。ホストコンピューティングデバイス102は、メモリ106に結合された1または複数の処理ユニット104を含む。メモリ106は、システムメモリ、及びコンパクトフラッシュ(登録商標)メモリなどのコンピューティングデバイス102に結合された任意の他の種類のメモリを含む。システムメモリ(たとえば、RAM及びROM)は、コンピュータプログラムモジュール(「プログラムモジュール」)108及びプログラムデータ110を含む。プロセッサ104は、プログラムモジュール108のそれぞれ一つからコンピュータプログラム命令をフェッチ(fetch)及び実行する。プログラムモジュール108は、より大きな(親)画像116から知覚のプレビュー画像114を生成するために知覚の画像プレビューモジュール112を含む。プログラムモジュール108も、知覚の画像プレビューモジュール112(たとえば、知覚のプレビュー画像114をユーザに見せる)などの態様を活用する、オペレーティングシステム、アプリケーションなどの「他のプログラムモジュール」118を含む。
知覚の画像プレビューモジュール112(「プレビューモジュール112」)は、従来のナイーブなプレビュー画像を作成するために、より大きな画像116をダウンサンプリングする。プレビューモジュール112はその後、より大きな画像116の1又は複数の構造及び又は知覚の特徴をよりよく示すために、このナイーブなプレビュー画像をより大きな画像116に関連付けられた追加の情報で高める。この高められたナイーブなプレビュー画像は知覚のプレビュー画像114である。より詳しくは、知覚のプレビュー画像114を生成するために、プレビューモジュール112は、より大きな画像116から構造及び任意の知覚の特徴(例えば、1又は複数のノイズ、ブラー、フィールドの深さ、ブルーミング、ホワイトバランス及び/又はなど)を検出及び評価する。このような検出された構造及び任意の知覚の特徴は、検出された知覚の特徴120のそれぞれの部分で示される。プレビューモジュール112は、ビューアがより大きな画像116におけるこれらの態様の存在又は不存在をより正確に突き止めることをできるようにするために、これらの検出された態様の1又は複数に関連付けられた情報で、ナイーブなプレビュー画像を高める。
知覚の画像プレビューについてのシステム及び方法のこれらの態様及び他の態様は、より詳細にここで述べられる。
例示的な構造強化
プレビューモジュール112は、構造的な高さを有するより大きな画像116のナイーブなプレビュー画像を構造的に高められたプレビュー画像114に補強(augmentation)する。これらの補強の動作は、結果の画像において、凸部の縁(silent edge)を強化し、弱い詳細を平らにする。凸部の縁はしばしば異なるオブジェクトを分離するので、このアプローチは通常、オブジェクト間コントラストを増加させ、オブジェクト内コントラストを減少させる。結果として画像構造は、より知覚的に明らかとなり、ユーザの注意を引き付ける。より明らかな構造は、構造的に高められた知覚のプレビュー画像114に続いて組み込まれている他の検出された知覚の特徴120と関連付けられた任意の情報を、ユーザがより素早く検出することを可能にする。
この実装において、プレビューモジュール112は、画像の傾き(gradient:勾配、グラディエント)ドメイン(domain)における非線形の変調を介して構造の高さを実装する。空間ドメインにおける凸部の縁は大きな傾きの大きさを有するので、弱い詳細が小さな傾きの大きさに対応する一方で、問題は、大きな傾きを増加させ、小さな傾きを減らすようになる。大きな傾きの増加は重要な縁を強化し、小さな傾きの減少は、冗長な詳細を抑制する。ポワソン方程式を解くことにより、所与の傾きフィールド及び画像の境界で画像を再構築できる。したがって、結果の画像において傾きフィールドにおけるこの調整を反映する。
この実装において、プレビューモジュール112は、生成されたナイーブなプレビュー画像をYUVカラー空間に最初に変換することにより、構造的に高められた知覚のプレビュー画像114を作成する。プレビューモジュール112はその後、ルミナンス(luminance)構成要素について傾きフィールドを演算する。クロミナンス(Chrominance)構成要素は、画像カラーが変化しないことを保証するために、変わらないままである。修正されたシグモイド関数は、傾きの大きさを変調するために使用される:
Figure 2009527776
ここでGiはピクセルiについての傾きの大きさであり、Giは調整された傾きの大きさである。ローカルな向きの調整が傾きのフィールドの一貫性を壊すかもしれないので、傾きの向きは変化しない。パラメータαは最大の調整の大きさを制御する。αが1より小さい値に設定されるとき、すべての傾きは抑制される。パラメータkは変調の傾斜(slope)を制御する。kが大きくなると、傾きの大きさが大きく拡大し、小さい傾きの大きさは小さく抑制される。パラメータβは、パラメータα及びkより、結果の上でより大きな影響を有する。凸部の微小な詳細をローカルに保持ために、ベータは以下のように適応的に選択される。
Figure 2009527776
ここで、βgはグローバル閾値であり、βiはローカルの閾値である。βiはピクセルの近傍において平均的な傾きの大きさとして評価され、ガウスにより加重(weight)される。βgは、画像全体上で同様に評価される。方程式(2)は、強い縁を尊重し、まだ弱い凸部の縁に有利である。
図2(a)は、任意のナイーブなプレビュー画像の領域内の例示的な傾きフィールドを示す。図2(b)は、一実施形態によると、ナイーブなプレビュー画像から生成された構造的に高められた知覚のプレビュー画像114(図1)の領域内の例示的な傾きフィールドを示す。図2(b)において、傾きの方向は図2(a)における傾きの方向と比較して変更されていないままであるが、傾きの大きさは、(図2(a)の傾きの大きさと比較して、)大きい傾きについて増加し、小さい傾きについて減少する。一般に構造的に高められた知覚のプレビュー画像114の構造的に高められた知覚のプレビュー画像は、ナイーブなプレビュー画像と比較して、よりクリアな画像構造を見せる。
例示的な知覚の特徴の保持
画像116から検出されるかもしれない多くの任意の種類の知覚の特徴がある。このような知覚の特徴は、たとえばホワイトバランス、フィールドの深さ、ブルーミング、画像の圧縮により生じるブロックのアーチフェクト、画像品質などを含む(ブルーミングは、近傍のピクセルが明るくされ、露出過度(overexposed)となるように、動的な範囲のピクセルが露出過度となる影響である。)。知覚のプレビュー画像114においてより大きな画像116により閲覧される知覚の特徴を表示するために、プレビューモジュール112はこのような知覚の特徴(つまり、検出された知覚の特徴120として示される)をより大きな画像116から検出する。検出された知覚の特徴120により表示される知覚の特徴の数及び種類は任意であり、特定の実装において機能する。
次に、プレビューモジュール112は、検出された知覚の特徴120の少なくともサブセットに関連付けられた情報(例えば合成/派生した情報112)を、ナイーブなプレビュー画像または構造的に高められた知覚のプレビュー画像114に組み込む。情報がナイーブなプレビュー画像に組み込まれるとき、新しい知覚のプレビュー画像114が結果となる。組み込まれた情報はより大きな画像116から抽出された情報であることができるが、組み込まれた情報は抽出された情報である必要性はない。むしろ、いくつか又はすべての場合において、このような情報は、検出された知覚の特徴120により提供される情報から合成/派生される。この観点において及びこの実装において、はっきりした画像116により閲覧される知覚の特徴120の検出のまさに正確さは必要ではない。検出された知覚の特徴100に対応する情報の知覚のプレビュー画像114への包含は、プレビュー画像114が、より大きな親画像114についてビューアにより情報を運ぶことを可能にする。たとえば、検出された知覚の特徴は親画像116においていくらかの度に存在することを示すことにより。
ノイズ
高いISOモード(例えばISO400またはそれ以上)を使用して、画像がキャプチャされるとき、または画像をキャプチャするのに短い露出が使用されるとき、ノイズはしばしば画像116に取り入れられる。ノイズは通常、画像をまたがって分布(ditibution)されるカラー粒子のように現れる。ノイズは普通、暗い領域において現れる。ノイズが付加的な特性を有し、均一の分布に適合すると仮定する。様々はノイズ生成スキームを考慮する場合にこの仮定は常に保留しないが、構造的に高められた知覚のプレビュー画像114上でノイズを反映するのには十分である。
対応する知覚のプレビュー画像114においてより大きな画像114で見せられるノイズを表示するために、プレビューモジュール112は、任意の複数の周知のノイズ検出技術を使用してソースノイズ画像として、親画像116からノイズを検出及び格納する。均一の分布の仮定に基づいて、プレビューモジュール112は、ソースノイズ画像からランダムにサンプリングすることにより、(構造的に高められたプレビュー知覚のプレビュー画像114と同等の次元で、)あて先ノイズ画像を生成する。このようなソース及びあて先ノイズ(destination noise)は、「他のプログラムデータ」126(図1)のそれぞれの部分として示される。より大きな親画像116のノイズを表示するために、あて先ノイズ画像は構造的に高められたプレビュー画像に追加される。他の実装において、あて先ノイズ画像は、構造的に高められた知覚のプレビュー画像114よりむしろ、ナイーブなプレビュー画像に追加される。
一実装において、ノイズは大きい画像116から検出されず、より大きな画像116のより小さい領域から、例えば2,3の凸部の縁を含む領域からのみ検出される。目的は、より大きな画像116上で閲覧されるであろう知覚のプレビュー画像に似ているように見える結果の知覚のプレビュー画像114においてノイズを見せるためである。オリジナル画像116全体からノイズを抽出する必要性がある。たとえば、均一の領域ΩがM×Mピクセルの大きさを有することを期待されているとすると、ここでMはマイルドな値(mild value)、つまり10dであり、dはサイズの縮小率である。あまりに大きいMは、所望の均一の領域を不存在にする。あまりにも小さいMは、十分に正確なノイズを提供しない。
一実装において、より大きな画像116において直接Ωを検出する代わりに、プレビューモジュール112は、ナイーブなプレビュー画像における大きさ(M/d)×(M/d)のピクセルの対応する領域Ωdを検索し、その後オリジナル画像116のΩにそれをマップする。ナイーブなプレビュー画像は、それが派生したより大きな画像において見せられるのより、より少ないノイズを見せる。さらに、ナイーブなプレビュー画像ははるかに少ない次元を有するので、Ωdの検索は効率的で信頼性がある。さらに特定すると、プレビューモジュール112は、ナイーブなプレビュー画像を重複していないブロックに分割し、最も小さい差異を有するブロックΩdを選択する。ほとんどの場合において、Ωdに対応する領域Ωは、凸部の縁を含まない。したがってその高周波の構成要素は、ノイズマップNsからなる。プレビューモジュール112は、ノイズNsを確実に見積もるために離散の静止のウェーブレット変換(discrete stationary wavelet transform)を適用する。領域の大きさがとても小さいので、演算はとても早い。
一実装において、減らされた次元でノイズマップNdを作るために、プレビューモジュール112はテクスチャ合成方法を利用して、Ndにおけるノイズ空間分布を保つ。実際にプレビューモジュール112は、ノイズが均一の分布を有するという仮定に基づいて、ランダムにNsからノイズマップNdを生成する。Ndはオリジナル画像116におけるノイズ分布に完全には一致しないが、Ndはオリジナル画像として似たようなビジュアルの経験をユーザにもたらす(以下で説明される図3を参照)。アルゴリズムの安定性を改善するためにプレビューモジュール112は、K均一領域を選び、すべての領域においてランダムにサンプルする。この実装において、M=80であり、K=5である。最後の画像Ifは以下のように演算される、
f=Id+γNd
ここで、Idは減らされた画像であり、γはどのような凸部にノイズがビジュアル化される必要があるかを制御するためのパラメータである。
ブラー
カメラなどの画像獲得デバイスと画像の対象との間で相対的な動きが起きるとき、または対象がフォーカス外のとき、画像116におけるブラーは起こる。異なる状況においてブラーは、画像全体上またはいくつかの領域の周りでのみ現れるかもしれない。ブラーは画像116の鮮明さ(sharpness)を減少させる。しかし、特にナイーブなプレビュー画像が生成される対応する親画像においてブラーが深刻でないとき、ナイーブに減らされた画像はまだ鮮明に見える。プレビューモジュール112は知覚のプレビュー画像114における表示について画像ブラーを検出する。オリジナル画像116においてローカルにブラー度を評価することにより、これは達成される。評価の観点において、プレビューモジュール112は、対応するブラーの量を見せるために、知覚のプレビュー画像114において対応する領域をブラーする。縁の領域のブラーは一般に、画像116の全体がブラーされるとき、ユーザにとってより可視となる。この観点において、画像116の全体がブラーされるとき、プレビューモジュール112はその縁に沿ってのみ、知覚のプレビュー画像114においてブラー操作を実行する。
プレビューモジュール112は、構造的に強化された知覚のプレビュー画像114上で縁の検出を実行する。画像内の縁のピクセルEiのそれぞれについて、プレビュー画像112はそのそれぞれのブラー度を見積もる。ブラーの見積りは、ブラーの縁の領域が、傾きの角度の中で鮮明な縁の領域が有するのより小さい逸脱を通常有することの観察に基づく。さらに詳しくは、縁のピクセルEiについて、領域Riは、このピクセルEiに縮小するオリジナル画像116に位置する。領域Riにおける傾きの角度はその後、Ai(k)と記される。縁のピクセルEiにおいてブラーBiは以下のように演算される:
i=exp{−η・D(Aiα} (3)
ここでD(Ai)は領域Riにおける傾きの角度の分散である。パラメータη及びαは見積もられたブラーの量を制御する。これらはη=3及びα=1.2に経験的に設定される。これらのパラメータは主観的に決定することもできる。
プレビューモジュール112はその後、ピクセルに関連付けられたブラー度の見積もられた量によって、ピクセルEiの近傍における知覚のプレビュー画像114においてブラーを合成する。より詳しくは、プレビューモジュール112はブラーの量Biによってガウスのカーネルを使用してブラー動作を実装し、Biは実際にはガウスのシグマ(the sigma of the Gaussian)による。その後近傍Eiはガウスのカーネルを使用して加重される。
例示的な手順
図3は、一実施形態による知覚の画像プレビューについての例示的な手順300を示す。例示的な図示及び説明の目的のために、手順の動作を図1の構成要素に関して説明する。ブロック302において、知覚の画像プレビューモジュール112(図1)は、より大きな画像116をダウンサンプリングすることにより、より大きな画像116からナイーブなプレビュー画像を生成する。ブロック304において、知覚の画像プレビューモジュール112は、ナイーブなプレビュー画像から縁の情報を検出する。ブロック306において、知覚の画像プレビューモジュール112は、ナイーブなプレビュー画像の構造を強化するために検出された縁の情報を利用し、したがって高められた構造(構造的に高められたプレビュー画像)で知覚のプレビュー画像114を作成する。ブロック308において、知覚の画像プレビューモジュール112は、より大きな画像116から知覚の特徴(図1の検出された知覚の特徴120)を検出する。
ブロック310において、知覚の画像プレビューモジュール112は、知覚のプレビュー画像114を作成するために、検出された知覚の特徴120の少なくともサブセットに関連付けられた情報をプレビュー画像に組み込む。このような情報が組み込まれる特定のプレビュー画像は、ナイーブなプレビュー画像または構造的に高められた知覚のプレビュー画像114のいずれかであることができる。ブロック312において、知覚の画像プレビューモジュール112または知覚のプレビューモジュール112の出力を活用する異なるアプリケーションは、知覚のプレビュー画像114が派生したより大きな画像116をユーザに表示するために、知覚のプレビュー画像114を見せる。知覚のプレビュー画像114がより大きな画像116の検出された知覚の特徴に関連付けられた情報を見せるので、知覚のプレビュー画像114を閲覧することは、より大きな画像116の質または他の態様に関して知識に基づいたユーザの決定を可能にする。
結論
知覚の画像プレビューのためのシステム及び方法が構造的な特徴及び/又は方法論的な操作または動作特有の言語で説明されてきたが、添付の特許請求の範囲で定義された実装は説明された特有の特徴または動作を限定する必要がないことを理解されたい。たとえば、知覚のプレビュー画像114に組み込まれてきた検出された知覚の特徴120に関連付けられた情報は、ユーザが画像の質(例えばフィールドの深さなど)に加えてより大きな画像の態様にアクセスすることを可能にするために使用できる。したがって、システム100の特有の特徴及び動作は、特許請求された主題を実装する例示的な形式として開示されている。
一実施形態による知覚の画像プレビューについての例示的なシステムを示す図である。 (a)は任意のナイーブなプレビュー画像の範囲内の例示的な傾きフィールドを示し、(b)は任意の構造的に高められたプレビュー画像の範囲内の例示的な傾きフィールドを示している図である。 一実施形態による知覚の画像プレビューについての例示的な手順を示している図である。

Claims (20)

  1. コンピューティングデバイスにより少なくとも一部が実装される方法であって、
    より大きな画像をダウンサンプリングすることによりナイーブなプレビュー画像を生成するステップと、
    前記より大きな画像と関連付けられた知覚の特徴を検出するステップと、
    知覚のプレビュー画像を作成するために、前記知覚の特徴の少なくともサブセットに関連付けられた情報を前記ナイーブなプレビュー画像に組み込むステップと
    を備え、
    前記知覚のプレビュー画像のユーザへの表示は、前記より大きな画像における前記知覚の特徴の前記少なくともサブセットの存在又は不存在の判定を容易にする
    ことを特徴とする方法。
  2. 前記知覚の特徴は、構造、ノイズ、ブラー、ホワイトバランス、ブルーミング、画像圧縮アーチファクト、フィールドの深さの1又は複数を備えたことを特徴とする請求項1に記載の方法。
  3. 画像品質は、前記知覚の特徴に関連していることを特徴とする請求項1に記載の方法。
  4. 前記情報は、前記知覚の特徴に基づいており、前記より大きな画像から抽出され、前記情報が、前記検出された知覚の特徴の少なくともサブセットが前記より大きな画像に存在する前記知覚のプレビュー画像のヴューアに通知することを特徴とする請求項1に記載の方法。
  5. 前記情報を組み込むステップは、凸部の縁を強化し、弱い詳細を平らにするために、前記ナイーブなプレビュー画像を構造的に高めるステップをさらに備えたことを特徴とする請求項1に記載の方法。
  6. 前記構造的に高めるステップは、非線形変調、及び前記ナイーブなプレビュー画像又は前記より大きな画像の傾きドメインを使用して実行されることを特徴とする請求項5に記載の方法。
  7. 前記知覚の特徴を検出するステップは、
    より大きな画像又は比較的少ない凸部の縁を含む前記ナイーブなプレビュー画像の領域からノイズを検出するステップであって、前記領域は前記より大きな画像又は縁の前記ナイーブなプレビューの全体を表示しない、検出するステップと、
    前記ノイズから前記知覚のプレビュー画像に合成された情報を追加するステップと
    をさらに備えたこと特徴とする請求項1に記載の方法。
  8. 前記知覚の特徴を検出するステップは、
    前記より大きな画像の少なくとも一部において、複数のピクセルの各ピクセルのそれぞれのブラー度を評価するステップと、
    前記複数のピクセルの各ピクセルについて、前記より大きな画像の前記ピクセルの位置に対応する前記知覚のプレビュー画像の範囲において、前記知覚のプレビュー画像におけるブラーを合成するステップと
    をさらに備えたことを特徴とする請求項1に記載の方法。
  9. より大きな画像からナイーブなプレビュー画像を生成するステップと、
    前記より大きな画像と関連付けられた知覚の特徴を検出するステップと、
    知覚のプレビュー画像を作成するために、前記知覚の特徴の少なくともサブセットに関連付けられた情報を前記ナイーブなプレビュー画像に組み込むステップと
    をプロセッサにより実行可能なコンピュータプログラム命令を備えたコンピュータ可読記憶媒体であって、
    前記情報は前記より大きな画像から抽出されず、前記情報が前記検出された知覚の特徴の前記少なくともサブセットが存在する前記知覚のプレビュー画像のビューアを、前記より大きな画像の表示された度に通知する
    ことを特徴とするコンピュータ可読記憶媒体。
  10. 前記知覚の特徴は、構造、ノイズ、ブラー、ホワイトバランス、ブルーミング、画像圧縮アーチファクト、フィールドの深さの1又は複数を備えたことを特徴とする請求項9に記載のコンピュータ可読記憶媒体。
  11. 前記情報を組み込むステップのためのコンピュータプログラム命令は、凸部の縁を強化し、弱い詳細を平らにするために、前記ナイーブなプレビュー画像を構造的に高めるステップのための命令をさらに備えたことを特徴とする請求項9に記載のコンピュータ可読記憶媒体。
  12. 前記構造的に高めるステップは、非線形変調、及び前記ナイーブなプレビュー画像又は前記より大きな画像の傾きドメインを使用して実行されることを特徴とする請求項10に記載のコンピュータ可読記憶媒体。
  13. 前記知覚の特徴を検出するステップのためのコンピュータプログラム命令は、
    前記より大きな画像又は比較的少ない凸部の縁を含む前記ナイーブなプレビュー画像の領域からノイズを検知するステップであって、前記領域は、より大きな画像又は縁の前記ナイーブなプレビューの全体を表示しない、検知するステップと、
    前記ノイズから前記知覚のプレビュー画像に合成された情報を追加するステップと
    のための命令をさらに備えたことを特徴とする請求項9に記載のコンピュータ可読記憶媒体。
  14. 前記知覚の特徴を検出するステップのためのコンピュータプログラム命令は、
    前記より大きな画像の少なくとも一部において、複数のピクセルの各ピクセルのそれぞれのブラー度を評価するステップと、
    前記複数のピクセルの各ピクセルについて、前記より大きな画像の前記ピクセルの位置に対応する前記知覚のプレビュー画像の範囲において、前記知覚のプレビュー画像におけるブラーを合成するステップと
    のための命令をさらに備えたことを特徴とする請求項9に記載のコンピュータ可読記憶媒体。
  15. プロセッサと、
    プロセッサに結合されたメモリであって、前記メモリは、
    より大きな画像からナイーブなプレビュー画像を生成するステップと、
    縁を特定するために前記ナイーブなプレビュー画像を評価するステップと、
    知覚のプレビュー画像を生成するために、前記縁の観点から前記ナイーブなプレビュー画像の凸部の縁を強化するステップ、及び前記縁の観点から前記ナイーブなプレビュー画像の弱い詳細を平らにするステップと、
    前記より大きな画像の知覚の特徴を検出するステップと、
    前記知覚の特徴の少なくともサブセットに関連付けられた情報を前記知覚のプレビュー画像に組み込むステップと、
    前記検出された知覚の特徴の前記少なくともサブセットが前記より大きな画像に存在することをユーザに通知するために、知覚のプレビュー画像をユーザに見せるステップと
    のためのプロセッサにより実行可能なコンピュータプログラム命令を備えたメモリと
    を備えることを特徴とするコンピューティングデバイス。
  16. 前記知覚の特徴は、構造、ノイズ、ブラー、ホワイトバランス、ブルーミング、画像圧縮アーチファクト、フィールドの深さの1又は複数を備えることを特徴とする請求項15に記載のコンピューティングデバイス。
  17. 前記強化するステップ及び前記平らにするステップは、非線形変調、及び前記ナイーブなプレビュー画像又は前記より大きな画像の傾きドメインを使用して実行されることを特徴とする請求項15に記載のコンピューティングデバイス。
  18. 前記知覚の特徴を検出するステップのための前記コンピュータプログラム命令は、
    前記より大きな画像又は比較的少ない凸部の縁を含む前記ナイーブなプレビュー画像の領域からノイズを検出するステップであって、前記領域は前記より大きな画像又は縁の前記ナイーブなプレビューの全体を表示しない、検出するステップと、
    前記ノイズから前記知覚のプレビュー画像に合成された情報を追加するステップと
    のための命令をさらに備えることを特徴とする請求項15に記載のコンピューティングデバイス。
  19. 前記知覚の特徴を検出するステップのための前記コンピュータプログラム命令は、
    前記より大きな画像の少なくとも一部において、複数のピクセルの各ピクセルのそれぞれのブラー度を評価するステップと、
    前記複数のピクセルの各ピクセルについて、前記より大きな画像における前記ピクセルの位置に対応する前記知覚のプレビュー画像の範囲において、前記知覚のプレビュー画像におけるブラーを合成するステップと
    のための命令をさらに備えることを特徴とする請求項15に記載のコンピューティングデバイス。
  20. 前記合成するステップのための前記コンピュータプログラム命令は、前記複数のピクセルの縁ピクセルEjでブラーの量Bi、Bi=exp{−η・D(Ajα}として計算するステップのための命令をさらに備え、D(Aj)は領域Rjにおける傾きの角度であることを特徴とする請求項15に記載のコンピューティングデバイス。
JP2008555391A 2006-02-17 2007-02-15 知覚の画像プレビュー Withdrawn JP2009527776A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/276,196 US7715657B2 (en) 2006-02-17 2006-02-17 Method, device and program for detecting perceptual features of a larger image and incorporating information of the detected perceptual features into a smaller preview image
PCT/US2007/004191 WO2007098051A2 (en) 2006-02-17 2007-02-15 Perceptual image preview

Publications (1)

Publication Number Publication Date
JP2009527776A true JP2009527776A (ja) 2009-07-30

Family

ID=38428248

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008555391A Withdrawn JP2009527776A (ja) 2006-02-17 2007-02-15 知覚の画像プレビュー

Country Status (11)

Country Link
US (1) US7715657B2 (ja)
EP (1) EP1987491B1 (ja)
JP (1) JP2009527776A (ja)
KR (1) KR20080094790A (ja)
CN (1) CN101385045B (ja)
BR (1) BRPI0707586A2 (ja)
CA (1) CA2640332A1 (ja)
IL (1) IL193012A0 (ja)
NO (1) NO20083273L (ja)
RU (1) RU2008133622A (ja)
WO (1) WO2007098051A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010511928A (ja) * 2006-12-01 2010-04-15 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. フォトリアルな画像サムネイルを生成する装置及び方法
US8977076B2 (en) 2008-03-20 2015-03-10 Hewlett-Packard Development Company, L.P. Thumbnail based image quality inspection

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101496387B (zh) 2006-03-06 2012-09-05 思科技术公司 用于移动无线网络中的接入认证的系统和方法
JP2009027223A (ja) * 2007-07-17 2009-02-05 Seiko Epson Corp 画像表示装置、画像表示方法、およびプログラム
KR101448308B1 (ko) * 2008-02-04 2014-10-08 삼성전자주식회사 썸네일 이미지 생성 방법 및 장치
US8355041B2 (en) * 2008-02-14 2013-01-15 Cisco Technology, Inc. Telepresence system for 360 degree video conferencing
US8797377B2 (en) 2008-02-14 2014-08-05 Cisco Technology, Inc. Method and system for videoconference configuration
US10229389B2 (en) * 2008-02-25 2019-03-12 International Business Machines Corporation System and method for managing community assets
US8319819B2 (en) 2008-03-26 2012-11-27 Cisco Technology, Inc. Virtual round-table videoconference
US8390667B2 (en) 2008-04-15 2013-03-05 Cisco Technology, Inc. Pop-up PIP for people not in picture
JP4708460B2 (ja) * 2008-08-27 2011-06-22 シャープ株式会社 表示制御装置、画像形成装置、表示装置の制御方法、制御プログラム、記録媒体
US8694658B2 (en) 2008-09-19 2014-04-08 Cisco Technology, Inc. System and method for enabling communication sessions in a network environment
US8477175B2 (en) * 2009-03-09 2013-07-02 Cisco Technology, Inc. System and method for providing three dimensional imaging in a network environment
US8659637B2 (en) 2009-03-09 2014-02-25 Cisco Technology, Inc. System and method for providing three dimensional video conferencing in a network environment
US8659639B2 (en) 2009-05-29 2014-02-25 Cisco Technology, Inc. System and method for extending communications between participants in a conferencing environment
US9082297B2 (en) 2009-08-11 2015-07-14 Cisco Technology, Inc. System and method for verifying parameters in an audiovisual environment
US8625908B2 (en) * 2009-11-02 2014-01-07 Apple Inc. Managing raw and processed image file pairs
US9225916B2 (en) 2010-03-18 2015-12-29 Cisco Technology, Inc. System and method for enhancing video images in a conferencing environment
US9313452B2 (en) 2010-05-17 2016-04-12 Cisco Technology, Inc. System and method for providing retracting optics in a video conferencing environment
US8823776B2 (en) 2010-05-20 2014-09-02 Cisco Technology, Inc. Implementing selective image enhancement
US8896655B2 (en) 2010-08-31 2014-11-25 Cisco Technology, Inc. System and method for providing depth adaptive video conferencing
US8599934B2 (en) 2010-09-08 2013-12-03 Cisco Technology, Inc. System and method for skip coding during video conferencing in a network environment
US8599865B2 (en) 2010-10-26 2013-12-03 Cisco Technology, Inc. System and method for provisioning flows in a mobile network environment
US8699457B2 (en) 2010-11-03 2014-04-15 Cisco Technology, Inc. System and method for managing flows in a mobile network environment
US9143725B2 (en) 2010-11-15 2015-09-22 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US8902244B2 (en) 2010-11-15 2014-12-02 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US9338394B2 (en) 2010-11-15 2016-05-10 Cisco Technology, Inc. System and method for providing enhanced audio in a video environment
US8730297B2 (en) 2010-11-15 2014-05-20 Cisco Technology, Inc. System and method for providing camera functions in a video environment
US8542264B2 (en) 2010-11-18 2013-09-24 Cisco Technology, Inc. System and method for managing optics in a video environment
US8723914B2 (en) 2010-11-19 2014-05-13 Cisco Technology, Inc. System and method for providing enhanced video processing in a network environment
US9111138B2 (en) 2010-11-30 2015-08-18 Cisco Technology, Inc. System and method for gesture interface control
USD678894S1 (en) 2010-12-16 2013-03-26 Cisco Technology, Inc. Display screen with graphical user interface
USD678320S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682854S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen for graphical user interface
USD678307S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682293S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
USD682864S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen with graphical user interface
USD682294S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
USD678308S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
US8692862B2 (en) 2011-02-28 2014-04-08 Cisco Technology, Inc. System and method for selection of video data in a video conference environment
US8670019B2 (en) 2011-04-28 2014-03-11 Cisco Technology, Inc. System and method for providing enhanced eye gaze in a video conferencing environment
US8786631B1 (en) 2011-04-30 2014-07-22 Cisco Technology, Inc. System and method for transferring transparency information in a video environment
US8934026B2 (en) 2011-05-12 2015-01-13 Cisco Technology, Inc. System and method for video coding in a dynamic environment
US8947493B2 (en) 2011-11-16 2015-02-03 Cisco Technology, Inc. System and method for alerting a participant in a video conference
US8682087B2 (en) 2011-12-19 2014-03-25 Cisco Technology, Inc. System and method for depth-guided image filtering in a video conference environment
RU2500067C2 (ru) * 2012-03-01 2013-11-27 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Санкт-Петербургский национальный исследовательский университет информационных технологий, механики и оптики" Способ сжатия изображения
CN103019537B (zh) * 2012-11-19 2016-04-13 广东欧珀移动通信有限公司 一种图像预览方法及装置
US9681154B2 (en) 2012-12-06 2017-06-13 Patent Capital Group System and method for depth-guided filtering in a video conference environment
US9843621B2 (en) 2013-05-17 2017-12-12 Cisco Technology, Inc. Calendaring activities based on communication processing
CN104461068A (zh) * 2013-09-17 2015-03-25 昆盈企业股份有限公司 鼠标装置及其控制方法
CN112218026B (zh) * 2020-08-25 2023-08-29 北京中联合超高清协同技术中心有限公司 一种超高清图像转换装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5641596A (en) * 1995-12-05 1997-06-24 Eastman Kodak Company Adjusting film grain properties in digital images
US5880767A (en) * 1996-09-11 1999-03-09 Hewlett-Packard Company Perceptual image resolution enhancement system
US6545687B2 (en) * 1997-01-09 2003-04-08 Canon Kabushiki Kaisha Thumbnail manipulation using fast and aspect ratio zooming, compressing and scaling
US6411331B1 (en) * 1997-02-28 2002-06-25 Hewlett-Packard Company Automatic white balance detection and correction of an image captured in a digital camera
US6404901B1 (en) * 1998-01-29 2002-06-11 Canon Kabushiki Kaisha Image information processing apparatus and its method
US6181834B1 (en) * 1998-09-18 2001-01-30 Xerox Corporation Hybrid image reduction method and apparatus with moir{acute over (e)} suppression
US7313588B1 (en) 2000-07-13 2007-12-25 Biap Systems, Inc. Locally executing software agent for retrieving remote content and method for creation and use of the agent
US20030026495A1 (en) * 2001-03-07 2003-02-06 Gondek Jay Stephen Parameterized sharpening and smoothing method and apparatus
US6548800B2 (en) * 2001-04-09 2003-04-15 Microsoft Corporation Image blur detection methods and arrangements
US6883138B2 (en) * 2001-08-08 2005-04-19 Xerox Corporation Methods and systems for generating enhanced thumbnails usable for document navigation
US7069506B2 (en) * 2001-08-08 2006-06-27 Xerox Corporation Methods and systems for generating enhanced thumbnails
US7053953B2 (en) * 2001-12-21 2006-05-30 Eastman Kodak Company Method and camera system for blurring portions of a verification image to show out of focus areas in a captured archival image
US7466336B2 (en) * 2002-09-05 2008-12-16 Eastman Kodak Company Camera and method for composing multi-perspective images
JP2004264920A (ja) * 2003-02-26 2004-09-24 Sony Corp サムネイル画像を作成すると共にサイズ変更された画像の画像品質を改善する装置及び方法
US7302116B2 (en) * 2004-02-12 2007-11-27 Xerox Corporation Method and apparatus for reduced size image
JP4671885B2 (ja) * 2005-06-01 2011-04-20 株式会社リコー 画像処理装置、プログラムおよび画像処理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010511928A (ja) * 2006-12-01 2010-04-15 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. フォトリアルな画像サムネイルを生成する装置及び方法
US8977076B2 (en) 2008-03-20 2015-03-10 Hewlett-Packard Development Company, L.P. Thumbnail based image quality inspection

Also Published As

Publication number Publication date
CN101385045B (zh) 2011-09-14
RU2008133622A (ru) 2010-02-20
EP1987491B1 (en) 2013-01-23
BRPI0707586A2 (pt) 2011-05-10
NO20083273L (no) 2008-09-17
KR20080094790A (ko) 2008-10-24
EP1987491A4 (en) 2011-11-09
CA2640332A1 (en) 2007-08-30
US20070196027A1 (en) 2007-08-23
CN101385045A (zh) 2009-03-11
EP1987491A2 (en) 2008-11-05
WO2007098051A3 (en) 2007-10-18
US7715657B2 (en) 2010-05-11
WO2007098051A2 (en) 2007-08-30
IL193012A0 (en) 2009-08-03

Similar Documents

Publication Publication Date Title
JP2009527776A (ja) 知覚の画像プレビュー
Galdran Image dehazing by artificial multiple-exposure image fusion
US9262684B2 (en) Methods of image fusion for image stabilization
JP4970468B2 (ja) 画像ぼかし処理
EP2533193B1 (en) Apparatus and method for image processing
US11024047B2 (en) Cameras and depth estimation of images acquired in a distorting medium
US20110211749A1 (en) System And Method For Processing Video Using Depth Sensor Information
US20150302592A1 (en) Generation of a depth map for an image
JP2004326770A (ja) エイリアジングアーチファクトを自動的に減少させるための方法およびシステム
JP2011107702A (ja) 入力画像の画像処理システム、画像表示システム、及び画像処理方法
US11170511B2 (en) Image processing device, imaging device, and image processing method for replacing selected image area based on distance
KR101874738B1 (ko) 영상처리를 이용하여 ldr 영상으로부터 hdr 영상을 생성하는 장치 및 방법
US8908994B2 (en) 2D to 3d image conversion
US9466007B2 (en) Method and device for image processing
Lee et al. Recent advances in image deblurring
WO2016051716A1 (ja) 画像処理方法、画像処理装置、及び画像処理プログラムを記憶する記録媒体
KR101910894B1 (ko) 영상 복원 장치 및 방법
van Ginneken et al. Applications of locally orderless images
Zhu et al. Efficient perceptual-based spatially varying out-of-focus blur detection
JP2019028536A (ja) 画像処理装置及びその制御方法、表示装置、プログラム
JP4795314B2 (ja) フリッカ補正装置及びフリッカ補正方法
Hach et al. Phase-aware candidate selection for time-of-flight depth map denoising
Jinno et al. High Contrast HDR Video Tone Mapping Based on Gamma Curves
Ryu et al. No-reference perceptual blur model based on inherent sharpness
Bruni et al. Perception measures for digital restoration of semi-transparent blotches

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20100511