JPH11154227A - 画像ピラミッドボーダを処理する方法及び装置 - Google Patents

画像ピラミッドボーダを処理する方法及び装置

Info

Publication number
JPH11154227A
JPH11154227A JP10268117A JP26811798A JPH11154227A JP H11154227 A JPH11154227 A JP H11154227A JP 10268117 A JP10268117 A JP 10268117A JP 26811798 A JP26811798 A JP 26811798A JP H11154227 A JPH11154227 A JP H11154227A
Authority
JP
Japan
Prior art keywords
image
border
pyramid
filter
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP10268117A
Other languages
English (en)
Inventor
Gary A Gendel
エー. ゲンデル ゲイリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sarnoff Corp
Original Assignee
Sarnoff Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sarnoff Corp filed Critical Sarnoff Corp
Publication of JPH11154227A publication Critical patent/JPH11154227A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

(57)【要約】 【課題】 過度のオーバヘッド又は多くのメモリを必要
としないボーダ情報処理方法及び装置を提供する。 【解決手段】 ボーダを画像に加えることによって画像
を処理するための方法及び装置である。前記ボーダは、
画像処理中に使用されるフィルタエクステントに比例し
た幅を有する。特に処理は画像を縮小して、画像ピラミ
ッドを作り、画像ピラミッドを拡大して画像を作る。縮
小或いは拡大プロセスを通した各経路で、ボーダが処理
される画像に加えられる。ボーダは、縮小或いは拡大プ
ロセスに使用されるフィルタエクステントと少なくとも
同じ大きさの幅を有する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画像処理装置に関
する。より詳細には、画像処理を促進する画像ピラミッ
ドを利用した画像処理装置に関する。
【0002】
【従来の技術】画像処理装置は、効果的且つ高速な画像
処理を促進するために画像ピラミッドを利用している。
画像ピラミッドの作成及び利用は従来技術では既知であ
る。例えば、1994年6月28日に付与された、本明
細書に援用されている米国特許第5,325,449号
明細書は、ラプラシアン画像ピラミッドを生成及び利用
する周知方法を開示している。概して、ピラミッドは、
画像の連続するフィルタリング及びサブサンプリングに
よって構築され、他の画像、即ちピラミッドの次のレベ
ルを作り出す。連続するフィルタリング及びサブサンプ
リングプロセスがピラミッドの各レベルで達成されて、
次の副次的層(sub layer)或いはレベルが作り出され
る。連続するフィルタリング及びサブサブサンプリング
によって画像ピラミッドを構築するプロセスは、画像の
縮小(reduction)として知られている。一のレベル
(ペアレント)の全ての画像情報を次の層(チャイル
ド)に確実に伝えるために、フィルタは、フィルタの中
心が最縁部のピクセルと確実に整列ように画像境界線を
越えて延びていなければならない。これによって、確実
に画像の最縁部のピクセル内の情報がフィルタリングさ
れてピラミッドの次のレベルに伝えられる。しかし、画
像境界線の端を切らずに越えて延びるためには、画像が
ボーダ領域で囲まれていなければならない。フィルタに
よってボーダ内に重なる領域は、フィルタエクステント
(extent)として知られている。
【0003】ボーダはオリジナル画像には存在していな
いので、画像は、フィルタエクステントをサポートする
ため延ばされなくてはならない。画像の縁部にピクセル
を作るために、ボーダは、画像拡大、画像ミラーリング
或いは単に一定値を有するピクセルを挿入するといった
多くの異なった技術を用いて作られることができる。ピ
ラミッドを生成するための通常のプロセスは、ボーダ領
域をこれらの技法を用いて充填し、フィルタリング及び
サブサンプリングプロセスを適用し、ピラミッドの各レ
ベルの新しい画像上に、指定数のレベルが生成されるま
で再帰的にプロセスを繰り返す。従って、ボーダは、次
のレベルが作られるようにピラミッドの各レベルの回り
に生成されなければならない。
【0004】特に、例えばフィルタが、5タップフィル
タの場合、フィルタは2つのエクステントを有する。こ
のように、ボーダは実際の画像の縁部ピクセルから延び
る2つのピクセルを有さなければならない。このような
エクステントがないと、フィルタエクステントの先端が
切り捨てられて、画像ピラミッドのボーダ領域で合成物
(artifact)が生成されることになる。これらの合成物
は、ピラミッドを最終画像に広げることによって実質的
に生成される、全ての画像にも伝えられる。
【0005】一般的に、ラプラシアンピラミッドは、例
えば5のタップを有するガウスフィルタを用いてピラミ
ッドを構築することによって生成される。ピラミッド
は、ピラミッドの低いレベル(チャイルドレベル)を広
げ、拡大チャイルドレベル画像をペアレント画像(チャ
イルドの上のレベル)から実質的に縮小することによっ
て広げることができる。拡大は、第一にチャイルドレベ
ルのボーダを充填し、チャイルドレベルのピクセルをア
ップサンプリングし、画像をフィルタリングし、ペアレ
ントと同じサイズの画像を作り出すことによって達成さ
れ、レベル結合操作、即ち縮小が実行される。プロセス
は指定されたレベルが連続的に進行されて最終画像を形
成するまで繰り返される。
【0006】特に、サブサンプル比2対1と仮定する
と、チャイルド画像のピクセルは、4つのペアレントピ
クセルを覆う。即ち、2の水平ピクセル×2の垂直ピク
セルである。4のピラミッドレベルのピラミッドに対し
ては、最終チャイルド画像内の各ピクセルはペアレント
画像の64ピクセル、即ち8×8ピクセル領域を覆う。
これは、最低チャイルドレベル内の画像より上の第一ボ
ーダでのピクセルの値内のエラーが実質的に影響するの
は、拡大プロセス中の実像の内部のかなり少ないピクセ
ルであることを意味する。通常の実行は、この影響を最
小にするようにボーダを十分に大きくすることである。
例えば、縮小及び拡大プロセスのために5タップフィル
タを使用すると、2つのピクセルフィルタエクステント
は、拡大プロセスをサポートするために、ペアレントレ
ベルごとに6のピクセルボーダを要求する。ボーダサイ
ズは一般的に以下の式で定義される。
【0007】ペアレントボーダ=((2xチャイルドボ
ーダ)+フィルタエクステント) このように、チャイルドに対して2つのピクセルエクス
テントを及び2つのピクセルボーダを有する5タップフ
ィルタから開始すると、ボーダサイズは以下のように進
行する。
【0008】画像1:2ピクセルボーダ 画像2:6ピクセルボーダ 画像3:14ピクセルボーダ 画像4:30ピクセルボーダ等。
【0009】
【発明が解決しようとする課題】上記のチャートにみら
れるように、ピクセルの要求数は、更なるレベルが使用
されるに従って劇的に増える。その結果、ボーダピクセ
ル値をストアするためのメモリは、かなりの量が要求さ
れる。従って、ボーダピクセルが十分に正確であり、最
終画像で明瞭な画像の作成を確保するためには、かなり
な量のボーダ処理が要求され、それは画像処理装置のオ
ーバヘッドを増加する。このようなオーバヘッドは、更
なるメモリを要求し、画像処理装置のコストを増加させ
る。
【0010】故に、過度のオーバヘッド或いはかなりな
量のメモリを要求しないボーダ情報処理方法及び装置に
対する必要性が従来技術には存在する。
【0011】
【課題を解決しようとする手段】従来技術のピラミッド
ボーダ処理方法及び装置に関する不利益は、本発明によ
って克服される。本発明は、そのようなエクステントを
有するボーダを実際に使用することなしで、無限のエク
ステントを有するボーダをエミュレートする。このよう
に、ボーダの幅は、フィルタエクステントに比例してい
る。本発明の一実施形態において、画像ピラミッドを縮
小及び拡大するために使用される5タップフィルタで
は、8ピクセルボーダを有するボーダが必要である。一
方、3タップフィルタは6ピクセルフィルタが必要であ
る。ボーダ幅はピラミッドの各レベルに対して固定され
ている。
【0012】特に、本発明のプロセスは、画像ピラミッ
ドを作るために縮小プロセスを実行しつつ無限ボーダを
エミュレートする。プロセスは、オリジナルイメージで
開始され、本発明によって、拡大或いは充填プロセスの
いずれかが用られて、ボーダは適切に充填される。次
に、フィルタ及びダウンサンプリングプロセスが、ボー
ダを含む画像上に達成される。即ちボーダ及びオリジナ
ルイメージは、一つの大きな画像として扱われる。結果
としてピラミッドレベルは、前のレベルのフィルタリン
グ操作で充填されていない更なるボーダピクセルで拡大
又はフィルタリングされる。第二及び第三のステップ
は、各連続レベルに対して繰り返され、完全な画像ピラ
ミッドを作る。実際、本発明のプロセスは、各縮小ステ
ップのイメージの回りのボーダピクセルを暗に加える。
ボーダのサイズは、現行の実施においては、各レベル
で、フィルタサイズ+フィルタエクステント+1と等し
いかそれより大きい数のピクセルを要求する拡大プロセ
スによって制約を受ける。
【0013】本発明は、画像ピラミッドを拡大するため
のプロセスも含み、そのプロセスでは、ボーダを含む画
像は、フィルタリングされ、アップサンプリングされ
る。次に、本発明は、前のステップで達成されたフィル
タリング操作で充填されなかったボーダを拡大或いは充
填する。次に、本発明は指定された操作を、拡大画像及
びオリジナルレベルとの間で実施し、2つのレベルの情
報を組合せる(即ち、オリジナル画像ピラミッドレベル
情報からの拡大画像情報の縮小)。最後に第一、第二及
び第三ステップが、各後続のピラミッドレベルに対し
て、ピラミッドの全てのレベルからの情報を含む最終画
像が作られるまで繰り返される。
【0014】本発明の教示内容は、添付図面に関する以
下の詳細な説明を考慮することによって広く理解され得
る。
【0015】理解を促進するために、図面で共通の同一
部材を示すために、可能な場合は同一参照符号を使用し
た。
【0016】
【発明の実施の形態】図1に、中央処理ユニット10
2、大容量記憶装置104、入力装置108、表示装置
110、支援回路106及びメモリ112を備えた汎用
コンピュータ100を示す。中央処理ユニット102は
汎用プロセッサであり、大容量記憶装置或いはメモり1
12のどちらかにストアされたルーチンでプログラムさ
れると、本発明の実施形態の方法を実行することのでき
る専用コンピュータ装置となる。中央処理ユニット10
2は、ディスクドライブ、光磁気ディスク又は他の形の
大容量記憶装置等の大容量記憶装置104に接続されて
いる。CPU102は、マウス、キーボード等の入力装
置108にも接続され、更にコンピュータモニタ等の表
示装置110にも接続されている。局所メモリ112
は、CPU102に接続されて、本発明の実施形態のル
ーチン及びプロセスの記憶場所を提供している。特にメ
モリは縮小プロセス114、拡大プロセス116、画像
処理ルーチン118をストアして、中央処理ユニットで
処理されるオリジナル画像及びピラミッドの種々レベル
の画像を保存している。更にCPUは、従来技術で既知
のある支援回路(キャッシュメモリ、読み出し専用メモ
リ、電源、クロック回路等)によって支援されている。
【0017】本発明の実施形態は汎用コンピュータ装置
内で実行されるように説明されているが、当業者は、特
定用途向け集積回路(ASIC)等の専用プロセッサ
を、本発明の実施形態の実行に利用することができるこ
とを理解するであろう。更に、本発明の実施形態はコン
ピュータ装置で実行される方法として説明されている
が、本発明のルーチンのステップの幾つかは、ソフトウ
エアと同様にハードウエアで達成されることができ、本
発明の実施形態はハードウエアとソフトウエアプロセス
ステップの組合せとなりうる。このように、本発明の実
施形態は、ハードウエア、ソフトウエア或いは両方で実
行されるように解釈実施される。
【0018】図2に、画像処理装置に適用される本発明
の方法及び装置の操作の流れ図を示す。画像処理装置の
ルーチン200は、画像が入力されてステップ202で
開始される。入力画像は、処理装置に、大容量記憶装
置、局所メモリから復元(recalled)されるか、或いは
画像源から直接供給されることができる。入力画像は、
以下の図3に関して説明される本発明の実施形態に従っ
て、ステップ204で縮小プロセス114を用いて連続
的に縮小される。縮小プロセス114は、オリジナル画
像から、フィルタリングされてサブサンプリングされた
ピクセルのレベルのユーザ定義番号を含む画像ピラミッ
ドを作る。一般的に、画像ピラミッドの各レベルは、前
のレベル(即ちペアレントレベル)に含まれていた数の
1/4のピクセル数を含む。ステップ206で、画像処
理ルーチン118は、既知のプロセスに従って実行され
て、ある態様で、画像ピラミッドを変更する。一般的
に、画像は画像ピラミッドに変えられ、画像処理ルーチ
ン118が急速に適用されて、画像が縮小される。後
に、或いは一方、画像処理が発生し、ステップ208で
拡大プロセス116が画像プロセスルーチンで生成され
た変更画像に適用される。拡大プロセス116は、ピラ
ミッドを拡大し、入力画像と似た出力画像を作るが、画
像処理ルーチン118によって実行される変更を含む。
【0019】他の実施形態では、拡大プロセスステップ
205は画像処理ステップ206の前に起こる。その結
果の方法は特に鮮鋭化及び整列の用途に対して利用でき
る。
【0020】他の実施形態では、画像処理ルーチン11
8は達成されず、縮小及び拡大プロセスが達成され、画
像記憶効率、画像検索及び/又は画像圧縮等の他の画像
処理の要求を満たすために実行される。しかし、画像ピ
ラミッドに対するほとんどの用途で、画像処理プロセス
は連続ステップに含まれる。画像処理プロセスは、画像
ピラミッドの特定の層を、ピラミッドが拡大するに従っ
てフィルタリングによって画像を鮮鋭化するように拡大
プロセスに組み込む。代わりに、拡大プロセス及び画像
処理プロセスがループの中に存在して、画像処理し、ピ
ラミッド層のある一つを拡大し、或いは繰り返し特定の
層を処理してもよい。更なる用途では、ステップ204
〜208の1以上の省略を要求することもあることが理
解されるであろう。
【0021】図3は、本発明の一実施形態に従った縮小
プロセスを示す。縮小プロセス114は、ステップ30
0で開始され、ステップ302に進み、ここで画像はプ
ロセスに入る。一般的に、画像は、処理周期中にメモリ
から復元されて、局所メモリにストアされる。画像は、
ステップ304で処理されて、画像を完全に囲むボーダ
が加えられる。本発明の実施形態のプロセスを理解する
ために、オリジナル画像、そのボーダ及びピラミッドレ
ベルは、縮小プロセス114以外概略的に示す。
【0022】オリジナル画像を、画像314として示
し、ボーダ領域は領域316として加えられている。ス
テップ306で、単一画像領域としてみなされるボーダ
及び画像はフィルタリングされて、従来のサブサンプリ
ング技術による従来の手法でダウンサンプリングされ
る。
【0023】フィルタリング及びダウンサンプリング画
像318は、大きさが、オリジナル画像314+ボーダ
316のほぼ1/4である。一般的に、フィルタは、例
えば3又は5の複数のタップを有するローパスフィルタ
である。一般的に、ボーダ領域316は、ステップ30
6で使用される少なくともフィルタエクステントと等し
い幅を有する。このように、フィルタが5のタップを有
する場合、フィルタエクステントは2つのピクセルで、
ボーダ領域の幅は少なくとも2つのピクセルであろう。
このようにフィルタが画像314のエッジピクセルに移
動するので、フィルタエクステントはボーダ領域を、画
像内の情報を切り捨てることなく覆う。
【0024】更に詳細には、ボーダは、フィルタがフィ
ルタリングされたエッジピクセルを作り、ボーダの部分
に少なくとも一つの変えられていないピクセル結果とし
てもたらすように十分に広い(即ち、フィルタリングプ
ロセスによってボーダの部分は破損されない)。ダウン
サンプリングは、ボーダの一つのピクセルを破損し、故
に少なくとも一つの更なるピクセルがフィルタエクステ
ントを越えて必要である。従って、縮小プロセスでは最
小ボーダ幅は、エクステント+2ピクセルである。しか
し、ボーダの幅は、オリジナル画像314内の又は処理
されるピラミッドのレベル内のピクセルの数に更に依存
する。オリジナル画像又はペアレント画像のピクセルの
数が奇数で、ボーダがn個のピクセルを含む場合、Nは
フィルタエクステント+2ピクセルである。しかし、オ
リジナル画像のピクセルの数又はピラミッドレベル画像
が同じであると、右側の及び画像の底部のボーダはN+
1ピクセルを有し、Nはフィルタ+2ピクセルのエクス
テントである。頂部及び左のボーダはNピクセル幅を有
する。拡大プロセスは、以下に述べるように僅かに大き
なボーダ幅(即ち2ピクセル大きい)を要求する。全て
の画像に対してボーダ幅を計算することなく効果的に画
像を処理するために、本発明のプロセスは、拡大及び縮
小に対して一般的に最悪の場合の幅に等しい固定幅ボー
ダ(例えばエクステントを促進するために必要なボー
ダ)を使用する。
【0025】ステップ308で、ボーダ320が打撃を
受けた画像318を囲むために加えられる。加えられた
ボーダのサイズは、幾つかのボーダピクセルが既に存在
しているステップ306で達成されたフィルタリング及
びダウンサンプリングに依存する。或いは、ボーダの幅
は十分に広く、フィルタエクステントに2つのピクセル
を加えたものを少なくとも含んでいる。
【0026】ステップ310で、縮小プロセス114は
ピラミッドの他のレベルが計算されるか否かを問う。ス
テップ310での問いの答えが肯定的であると、ルーチ
ンはステップ306に戻り、ここで、プロセスで生成さ
れた最後のレベルはステップ306を用いてフィルタリ
ングされ、ダウンサンプリングされる。しかし、ステッ
プ310の問いの回答が否定的であると、ルーチンはス
テップ312で終了する。図3のプロセスで作られた画
像ピラミッド322を、322で示す。
【0027】一般的に、ボーダは、従来技術の多くのボ
ーダ生成プロセスのどれか一つで生成されるであろう。
好ましくは、ボーダは、ボーダを作るためにエッジ値n
のピクセルを復元し、前に生成されたエッジ値或いはオ
リジナル画像を拡大することによって生成される。しか
し、エッジ拡大又は充填の他の形も、ミラーリング技術
又は補間技術を用いて達成され得る。これらの技術は複
数のピクセルを表すボーダを画像のエッジから内側に生
成させる。しかし、ボーダにおかれたピクセル値を計算
するためにミラーリング及び補間技術は一般により複雑
な計算を要求する。このように、好ましい技術は、ボー
ダを充填するために一定ピクセル値を使用すること、或
いは初期化されていないボーダ領域を充填するために画
像のエッジ値を復元することである。本発明のプロセス
は、当初の画像にボーダを加えたものが選択された技術
で作られると区別することなく充填或いは復元を扱うよ
うに構成されうる。
【0028】図4は本発明の実施形態の拡大プロセス1
16を示す。拡大プロセスは、本質的に縮小プロセスの
逆で、画像がアップサンプリングされてフィルタリング
され、大きな画像を作るようになっている。このプロセ
スは一般的に、中間画像処理操作に沿って縮小プロセス
によって作られたピラミッド上に実行されて、画像の特
徴が抽出される。特に、拡大画像が、等しいピラミッド
レベルの入力画像から縮小されると、その結果の画像
は、オリジナル画像の特定の周波数バンドのエネルギを
含み、それによってピラミッドが形成される。縮小及び
拡大にガウスフィルタを使用すると、その結果画像は画
像のラプラシアンフィルタリングを示す。その後そのよ
うなプロセスで生成されたピラミッドは、ラプラシアン
ピラミッドとなる。縮小の代わりに付加を用いたラプラ
シアンピラミッドの拡大は、ラプラシアンピラミッドか
らオリジナル画像を復元するであろう。このラプラシア
ンピラミッドは、ピラミッド画像処理に一般的に使用さ
れる。
【0029】拡大プロセス116はステップ400で開
始され、ステップ402に進み、ピラミッドレベルがル
ーチンに入力される。一般的に第一に通過するルーチン
で、このピラミッドレベルは、ピラミッド中で最も打撃
を受けたレベル、即ち最も低いレベルである。縮小或い
は前の拡大プロセスから作られた入力画像は、拡大プロ
セスのボーダの中身に含まれる。説明した縮小或いは拡
大プロセスの代わりに他の画像処理操作が使用される
と、値の一貫性を維持するように、画像の一部であるよ
うにボーダのピクセルを処理しなくてはならない。
【0030】ステップ404では、選択されたピラミッ
ドレベルはフィルタリングされて、アップサンプリング
され、次に最も打撃を受ける画像、即ち今処理されるよ
り低いピラミッドレベルを作るために、使用されたピラ
ミッドレベルとほぼ同じサイズを有するより大きな画像
を作る。アップサンプリングのフィルタリングは、画像
レベルを拡大し、ボーダ領域を初期化する。即ち打撃を
受けた画像のボーダが明確になる。ステップ406で
は、必要に応じて更なるボーダが加えられ、画像を更な
る処理に適切なサイズにする。右及び底部エッジに要求
されるボーダの量は、アップサンプリングすることによ
って決定される。一般的に、1〜2のアップサンプリン
グに対して、これはオリジナル画像レベルの画像ディメ
ンジョン(ピクセルの数)が奇数か偶数かに依存してい
る。拡大画像が作られるとステップ408の拡大操作
は、拡大画像と、同じサイズのピラミッドレベルとの間
に加えられる。一般的にこれは縮小プロセスであり、ピ
ラミッドレベルは、ピクセルごとに拡大画像から縮小さ
れる。縮小の結果は、処理される次のピラミッドレベル
の入力レベルとなる。
【0031】ステップ410でルーチン116はピラミ
ッドの次のレベルが処理されるか否かを問う。問いの答
えが肯定的であると、プロセスはステップ402に進
み、ピラミッドの次のレベルがプロセスに入力される。
しかし、ピラミッドの次のレベルが進められないと、ス
テップ412で問いの答えは否定的となって、ルーチン
はステップ414で終わる。全てのレベルのピラミッド
が処理されると、拡大プロセスからの出力は、ピラミッ
ドの多様なレベルで示された全ての画像情報をを含む画
像となる。
【0032】ある画像処理ステップが、説明された縮小
及び拡大操作ではなく、非ゼロ(non-zero)エクステン
トを有するフィルタを用いて実行されると、このプロセ
スの一貫性を確保するために、ボーダは、画像ピクセル
値の拡大部をボーダ領域に含むように、フィルタリング
操作によって延ばされなければならない。
【0033】本発明の教示を含む種々の実施形態が本明
細書で詳細に示され、説明されたが、当業者は、容易
に、これらの教示に含まれた多くの他の変形実施形態を
工夫するであろう。
【図面の簡単な説明】
【図1】所定のプログラミングが実行されてコンピュー
タ装置が専用コンピュータ装置として作動して、本発明
の実施形態を実行する汎用コンピュータ装置の図であ
る。
【図2】本発明の実施形態に従った画像処理方法のフロ
ーチャートの図である。
【図3】本発明の実施形態に従った縮小プロセスのフロ
ーチャートの図である。
【図4】本発明の実施形態に従った拡大プロセスのフロ
ーチャートの図である。
【符号の説明】
100…汎用コンピュータ、102…中央処理ユニッ
ト、104…大容量記憶装置、106…支援回路、10
8…入力装置、110…表示装置、112…メモリ。

Claims (11)

    【特許請求の範囲】
  1. 【請求項1】 (a)画像にボーダを加えるステップで
    あって、画像処理機能中に使用されるフィルタのエクス
    テントに、前記ボーダの幅が比例するステップと、
    (b)前記画像及び前記ボーダを前記画像処理機能を使
    用して処理するステップと、を含む画像処理する方法。
  2. 【請求項2】 前記画像処理機能が、前記画像及び前記
    ボーダのフィルタリングとダウンサンプリングとである
    請求項1記載の方法。
  3. 【請求項3】 前記画像処理機能が、前記画像及び前記
    ボーダのフィルタリングとアップサンプリングとである
    請求項1記載の方法。
  4. 【請求項4】 前記ボーダが、前記画像の縁部のピクセ
    ル値を複製することによって発生された値を有する複数
    のピクセルである請求項1記載の方法。
  5. 【請求項5】 (a)画像をボーダに加えるステップ
    と、(b)前記ボーダを有する画像を、フィルタリング
    及びダウンサンプリングするステップと、(c)前記フ
    ィルタのエクステントと少なくとも等しいボーダを提供
    するために、必要に応じてピラミッドレベルに対して更
    なるボーダを加えるステップと、(d)ステップ(b)
    及び(c)を、所定の数のピラミッドレベルが生成され
    るまで繰り返すステップと、含む画像ピラミッドを作る
    ための画像縮小方法。
  6. 【請求項6】 前記ボーダが、同じ値を有する複数のピ
    クセルである請求項5記載の方法。
  7. 【請求項7】 前記ボーダの幅が、前記ボーダが前記フ
    ィルタのエクステントに比例している前記ピラミッドレ
    ベル又は前記画像内のピクセルの数によって画成される
    請求項5記載の方法。
  8. 【請求項8】 (a)ピラミッドを形成する前に画像の
    回りにボーダを配置するプロセスを使用して形成された
    ピラミッドレベルを入力するステップと、(b)初期化
    されたボーダを有する拡大画像を作るために、前記ピラ
    ミッドレベルをフィルタリング及びアップサンプリング
    するステップと、(c)前記アップサンプリング及びフ
    ィルタリング操作で初期化されなかったボーダの部分を
    初期化するために必要な更なるボーダを加えるステップ
    と、(d)前記拡大画像内の情報を前記ピラミッドレベ
    ル内の情報と組み合せるために、前記拡大された画像及
    び前記ピラミッドレベルに操作を行うステップと、
    (e)前記画像ピラミッドが出力画像を作るように処理
    されるまで、(a)〜(d)のステップを繰り返すステ
    ップと、を含む画像を作るために画像ピラミッド拡大す
    る方法。
  9. 【請求項9】 ボーダを画像に加える手段であって、前
    記ボーダの幅はフィルタのエクステントに比例している
    手段と、 前記画像及び前記ボーダを前記フィルタを使用して処理
    するための手段と、含む画像を処理する装置。
  10. 【請求項10】 前記処理する手段が、 ローパスフィルタと、 前記画像及び前記ボーダをダウンサンプリングするため
    の手段と、を含む請求項9記載の装置。
  11. 【請求項11】 前記処理する手段が、 フィルタと、 前記画像及び前記ボーダをアップサンプリングするため
    の手段と、を含む請求項9記載の装置。
JP10268117A 1997-09-24 1998-09-22 画像ピラミッドボーダを処理する方法及び装置 Pending JPH11154227A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US5986597P 1997-09-24 1997-09-24
US08/997,267 US6141459A (en) 1997-09-24 1997-12-23 Method and apparatus for processing image pyramid borders
US08/997267 1997-12-23
US60/059865 1997-12-23

Publications (1)

Publication Number Publication Date
JPH11154227A true JPH11154227A (ja) 1999-06-08

Family

ID=26739291

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10268117A Pending JPH11154227A (ja) 1997-09-24 1998-09-22 画像ピラミッドボーダを処理する方法及び装置

Country Status (3)

Country Link
US (1) US6141459A (ja)
EP (1) EP0905649A3 (ja)
JP (1) JPH11154227A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010079375A (ja) * 2008-09-24 2010-04-08 Fujifilm Corp 画像処理装置、方法及びプログラム
US8041140B1 (en) 2003-12-30 2011-10-18 Adobe Systems Incorporated Healing by texture synthesis in differential space
JP2014186386A (ja) * 2013-03-21 2014-10-02 Canon Inc 画像処理装置、画像処理方法、及び、コンピュータプログラム

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2430591C (en) * 2000-12-01 2011-04-19 Imax Corporation Techniques and systems for developing high-resolution imagery
JP2002224982A (ja) * 2000-12-01 2002-08-13 Yaskawa Electric Corp 薄型基板搬送用ロボットおよび薄型基板検出方法
US6587592B2 (en) * 2001-11-16 2003-07-01 Adobe Systems Incorporated Generating replacement data values for an image region
CN1650622B (zh) * 2002-03-13 2012-09-05 图象公司 用于数字重新灌录或修改电影或其他图像序列数据的系统和方法
JP3935382B2 (ja) * 2002-03-19 2007-06-20 キヤノン株式会社 画像処理方法、画像処理装置、記録媒体およびプログラム
US7672528B2 (en) * 2003-06-26 2010-03-02 Eastman Kodak Company Method of processing an image to form an image pyramid
US20050185852A1 (en) * 2004-02-20 2005-08-25 Jiliang Song Method and apparatus to generate complex borders
US7519234B2 (en) * 2004-11-17 2009-04-14 Seiko Epson Corporation Apparatuses and methods for incorporating a border region within an image region
DE102004061507B4 (de) * 2004-12-21 2007-04-12 Siemens Ag Verfahren zur Korrektur von Inhomogenitäten in einem Bild sowie bildgebende Vorrichtung dazu
CN101111864A (zh) * 2005-01-31 2008-01-23 皇家飞利浦电子股份有限公司 用于多分辨率图像滤波的金字塔式分解
US7433514B2 (en) * 2005-07-13 2008-10-07 Canon Kabushiki Kaisha Tone mapping of high dynamic range images
CA2636858C (en) 2006-01-27 2015-11-24 Imax Corporation Methods and systems for digitally re-mastering of 2d and 3d motion pictures for exhibition with enhanced visual quality
CN101479765B (zh) 2006-06-23 2012-05-23 图象公司 对2d电影进行转换用于立体3d显示的方法和系统
US8417050B2 (en) * 2007-07-31 2013-04-09 Hewlett-Packard Development Company, L.P. Multi-scale robust sharpening and contrast enhancement
US20090034863A1 (en) * 2007-07-31 2009-02-05 Pavel Kisilev Multi-scale robust sharpening and contrast enhancement
CN102132554A (zh) * 2008-06-20 2011-07-20 惠普开发有限公司 用于高效视频处理的方法和系统
RU2484531C2 (ru) * 2009-01-22 2013-06-10 Государственное научное учреждение центральный научно-исследовательский и опытно-конструкторский институт робототехники и технической кибернетики (ЦНИИ РТК) Устройство обработки видеоинформации системы охранной сигнализации
JP2013178753A (ja) * 2012-02-01 2013-09-09 Canon Inc 画像処理装置および方法
RU2644525C2 (ru) * 2016-04-14 2018-02-12 ООО "КосМосГруп" Способ и система выявления живого человека на последовательности кадров путем выявления пульса на отдельных участках лица человека
CN110378419B (zh) * 2019-07-19 2021-07-16 广东浪潮大数据研究有限公司 一种图像集扩充方法、装置、设备及可读存储介质
CN114529483A (zh) * 2022-02-10 2022-05-24 Oppo广东移动通信有限公司 数据处理方法、装置、终端和可读存储介质
CN116523951B (zh) * 2023-07-03 2023-09-05 瀚博半导体(上海)有限公司 多层并行光流估计方法和装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4797942A (en) * 1987-03-02 1989-01-10 General Electric Pyramid processor for building large-area, high-resolution image by parts
US5359674A (en) * 1991-12-11 1994-10-25 David Sarnoff Research Center, Inc. Pyramid processor integrated circuit
US5325449A (en) * 1992-05-15 1994-06-28 David Sarnoff Research Center, Inc. Method for fusing images and apparatus therefor
US5974159A (en) * 1996-03-29 1999-10-26 Sarnoff Corporation Method and apparatus for assessing the visibility of differences between two image sequences

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8041140B1 (en) 2003-12-30 2011-10-18 Adobe Systems Incorporated Healing by texture synthesis in differential space
JP2010079375A (ja) * 2008-09-24 2010-04-08 Fujifilm Corp 画像処理装置、方法及びプログラム
JP2014186386A (ja) * 2013-03-21 2014-10-02 Canon Inc 画像処理装置、画像処理方法、及び、コンピュータプログラム

Also Published As

Publication number Publication date
US6141459A (en) 2000-10-31
EP0905649A2 (en) 1999-03-31
EP0905649A3 (en) 2000-10-04

Similar Documents

Publication Publication Date Title
JPH11154227A (ja) 画像ピラミッドボーダを処理する方法及び装置
US8963960B2 (en) System and method for content aware hybrid cropping and seam carving of images
EP1968008B1 (en) Method for content-aware image retargeting
US8358876B1 (en) System and method for content aware in place translations in images
JP2840133B2 (ja) 像の整列方法
US8149235B2 (en) System and method for upscaling low-resolution images
US8290300B2 (en) Seam-based reduction and expansion of images with color-weighted priority
US8160398B1 (en) Independent resizing of multiple image regions
US8280191B1 (en) Banded seam carving of images with pyramidal retargeting
US6525727B1 (en) Rendering 3D surfaces through limit surface projections
JP7482253B2 (ja) 画像処理方法、装置、コンピュータ機器及び記憶媒体
WO2011092696A1 (en) Method and system for generating an output image of increased pixel resolution from an input image
JP2007536812A (ja) ビデオデータを迅速にスケーリングおよびフィルタリングするためのシステムおよび方法
CN103985085A (zh) 图像超分辨率放大的方法和装置
JP2002064704A (ja) 画像処理装置および方法、並びに記録媒体
US8270765B1 (en) Hybrid seam carving and scaling of images with configurable energy threshold
US8280186B1 (en) Seam-based reduction and expansion of images with table-based priority
JPH1097644A (ja) 不規則メッシュを用いた対象物指向画像表現方法及びその装置
US8265424B1 (en) Variable seam replication in images with energy-weighted priority
US8280187B1 (en) Seam carving and expansion of images with color frequency priority
EP1704535B1 (en) Method of rendering graphical objects
US8270766B1 (en) Hybrid seam carving and scaling of images with configurable carving tolerance
Gotchev et al. Edge-preserving image resizing using modified B-splines
AT&T
JPH05166706A (ja) 荷電ビーム描画データ作成方法