JPH1153513A

JPH1153513A - 画像内の領域設定方法及び装置

Info

Publication number: JPH1153513A
Application number: JP9206981A
Authority: JP
Inventors: Shigehiro Shimada; 繁広嶌田; Hidehiro Hirase; 英弘平瀬; Takushi Totsuka; 卓志戸塚
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1997-07-31
Filing date: 1997-07-31
Publication date: 1999-02-26

Abstract

(57)【要約】【課題】画像内に設定する２個の領域の設定の操作を
容易にする。【解決手段】画像内の領域設定装置は、画像内に第１
の画像領域及び第２の画像領域を設定する際に、上記第
１の画像領域及び第２の画像領域の一方の形状の変形
を、上記第１の画像領域及び第２の画像領域の他方の形
状に応じて拘束する拘束条件を発生する条件パラメータ
発生部１２と、上記条件パラメータ発生部１２にて発生
された拘束条件を満たす形状の変形のみ受け付ける領域
形状入力部１３とを有している。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像内にスクラッ
チやワイヤを含むリペア領域を、参照画像となるサンプ
ル領域を用いて修復する画像処理技術において、リペア
領域又はサンプル領域を設定する画像内の領域設定方法
及び装置に関する。

【０００２】

【従来の技術】テレビジョン放送の利用可能なチャンネ
ルの激増とマルチメディアの急増に伴い、多くの古い映
画フィルムや写真フィルムは、ビデオ信号やデジタルフ
ォーマットに変換されて使用されることが多くなってい
る。しかし、長年に亘る使用と閲覧により、多くの古い
映画フィルムや写真フィルムは、スクラッチ（scratche
s ：引っ掻き傷）が生じたり、埃や他のディブリ（debr
is：破片）による汚れが多くなっている。

【０００３】画像に生じたスクラッチやディブリによる
欠陥は、視聴者に対して非常に目立つものである。高精
細度テレビジョン、デジタルテレビジョンフォーマット
においては、他のデジタルマルチメディアフォーマット
と同様に、画質を劣化したり悪影響を及ぼすことなくス
クラッチやディブリによる画像の欠陥を除去する技術が
望まれていた。

【０００４】このような画像の欠陥を除去する技術とし
ては、特願平７−３０３４２０号明細書に“ディジタル
画像の雑音の投影に基づく除去方法”が提供されてい
る。この画像処理技術は、スクラッチ／ワイヤ雑音を含
むリペア領域を、参照領域となるサンプル領域を参照し
て修復し、画像内からスクラッチ／ワイヤ雑音を除去す
るものである。

【０００５】上記画像処理技術を用いてスクラッチ／ワ
イヤ雑音を消去する一例について説明する。ここで修復
する画像は、図２２中のＡに示すように、図中横方向
に、この横方向を長手方向として並べられたブロックの
列が、図中縦方向に互い違いに配列された画像を表示す
るフレーム３１の一部に、図中横方向を長手方向とする
スクラッチ／ワイヤ雑音３５が存在するものである。

【０００６】このスクラッチ／ワイヤ雑音３５を除去す
るために、上記フレーム３１において、図２２中のＢに
示すようにスクラッチ／ワイア雑音３５をカバーするの
に十分な大きさのマスクにてペイントする。ここで、こ
のマスクはマスク画像と呼ばれる。そして、スクラッチ
／ワイア雑音３５を囲む矩形の領域を設定し、修復する
領域であるリペア領域１とする。また、上記フレーム３
１内において、スクラッチ／ワイヤ雑音３５を除去する
際に参照する領域として、リペア領域１と似た画像を表
示する矩形の領域を設定し、この領域をサンプル領域２
とする。

【０００７】これらリペア領域１及びサンプル領域２に
ついて、それぞれの領域の画像を高速フーリエ変換し、
この高速フーリエ変換により得られた周波数成分を位相
成分と振幅成分に分割する。サンプル領域２の振幅成分
をＭ１、位相成分をＰ１、リペア領域１の振幅成分をＭ
２、位相成分をＰ２とする。そして、これらサンプル領
域２の振幅成分Ｍ１とリペア領域１の振幅成分Ｍ２につ
いて最小計算を行い、この最小計算により得られた振幅
成分と、リペア領域１の位相成分Ｐ２の出力を用いて、
逆高速フーリエ変換をすると修復画像が得られる。

【０００８】ここで得られた修復画像と原画像を、マス
ク画像を用いて混合する。マスクがある部分は修復画像
の画素値を与え、マスクがない部分は原画像の画素値を
与えるものとする。この結果得られた画像を、次の修復
の際に用いる原画像とし、再び拘束ふーりえ変換から一
連の処理を繰り返す。この処理を数回繰り返すと、スク
ラッチ／ワイア雑音３５の部分は修復される。

【０００９】

【発明が解決しようとする課題】上記画像処理技術にお
いては、リペア領域とサンプル領域の形状及び寸法は、
それぞれ利用者が入力していた。このため、利用者は、
リペア領域とサンプル領域との形状及び寸法を、同形状
かつ同寸法に揃えて入力する必要があった。従って、利
用者にかかる負担は大きかった。

【００１０】また、上記画像処理技術においては、リペ
ア領域及びサンプル領域の形状は、それぞれ矩形でなけ
ればならなかった。そのため、図２３中のＡに示すよう
に、フレーム３１にスクラッチ／ワイヤ雑音３５が斜め
に入ってる場合に、矩形を用いて修復する場合は、図中
のリペア領域１ａ、１ｂ及びサンプル領域２ａ、２ｂの
ように、細かい矩形領域を作成して何回も修復をしなけ
ればならず、手間がかかるものであった。

【００１１】さらに、上記画像処理技術においては、図
２３中のＢに示すように、フレーム３１に斜めに入った
スクラッチ／ワイヤ雑音３５を斜めに傾いた矩形のリペ
ア領域１を設定して修復する場合には、この傾いた矩形
の領域を傾いていない矩形に変換する際には、画像の補
間をする必要があった。

【００１２】即ち、図２４に示すように、フレーム３１
の図中横方向に対して、矩形の長手方向の辺のなす角が
鋭角（ここでは４５度である。）になるように、リペア
領域１を設定した場合には、上記リペア領域１に含まれ
る画素は、図２５に示すように選択される。上記画素の
選択は、画素の５０パーセント以上の面積が矩形内に含
まれる場合には、当該画素は上記リペア領域１に含まれ
るものとした。このとき、このリペア領域１の内部に位
置する画素の内で、このリペア領域１の図中上側の長辺
に略々平行な方向に画素の段に分けると、この長辺に重
なる第１段目は４個の画素ｐ１〜ｐ４から構成され、上
記第１段目の次に上記長辺に近い第２段目は５個の画素
ｐ１１〜ｐ１５から構成される。

【００１３】上記リペア領域１に含まれる画素を、図２
６に示すように、正方格子に従って並び替えると、図中
上方から下方に第１段目には４個の画素ｐ１〜ｐ４が、
第２段目には５個の画素ｐ１１〜ｐ１５が存在する。こ
のため、各段を構成する画素の数が異なるので、画像処
理を施すのは困難である。

【００１４】そのため、図２７に示すように、上記図２
６において、５個の画素からなる第２段のような段の各
画素の横幅を縮めることで各段の幅を揃えることにす
る。しかし、画素は正方格子にしか存在しないため、単
に縮めることはできないので、補間計算を行い、各画素
の占める面積の比率と画素の値を元に縮小後の画素値を
定めることにする。

【００１５】このように補間計算により矩形領域に変換
された画素について画像処理を施すことが可能となる
が、補間した画像を用いるため、修復結果は良くないも
のとなってしまうという問題があった。なお、上述した
補間による処理は、サンプル領域２についても同様に当
てはまる。

【００１６】本発明は、上述の実情に鑑みてなされるも
のであって、画像上のスクラッチ／ワイヤ雑音をリペア
領域にて特定して、サンプル領域を参照することにより
修復する画像処理技術において、リペア領域とサンプル
領域の一方の形状及び寸法を指定すると他方の形状及び
寸法が拘束され、リペア領域及びサンプル領域の形状が
矩形に限定されず、さらにフレームに対して斜めにスク
ラッチ／ワイヤ雑音３５が生じた場合にも補間処理する
ことなく画像の修復をすることができるような画像内の
領域設定方法及び装置を提供することを目的とする。

【００１７】

【発明を解決するための手段】上述の課題を解決するた
めに、この発明に係る画像内の領域設定方法は、雑音を
含む第１の画像領域を、第２の画像領域を参照して修復
する画像処理に係る画像内の領域設定方法において、上
記第１の画像領域又は第２の画像領域の一方の領域の形
状が与えられたとき、上記第１の画像領域又は第２の画
像領域の他方の領域の形状を上記一方の領域の形状に基
づいて拘束する拘束条件を発生する条件パラメータ発生
工程と、上記条件パラメータ発生工程にて発生された拘
束条件を満たす形状の入力のみ受け付ける領域形状入力
工程とを有するものである。

【００１８】上記パラメータ発生工程は、上記画像内の
領域設定方法においては、上記第１の画像領域又は第２
の画像領域の一方の領域の形状が与えられたとき、上記
第１の画像領域又は第２の画像領域の他方の領域の形状
は、上記一方の領域の形状とする拘束条件を発生するも
のである。

【００１９】上記パラメータ発生工程は、上記画像内の
領域設定方法においては、上記第１の画像領域又は第２
の画像領域の一方の領域の形状が与えられたとき、上記
第１の画像領域又は第２の画像領域の他方の領域の形状
は上記一方の領域の形状と対称な形状とする拘束条件を
発生するものである。

【００２０】即ち、上記画像内の領域設定方法において
は、第１の画像領域又は第２の画像領域の一方の領域の
形状が設定されたとき、上記一方の領域の形状をもと
に、上記第１の画像領域又は第２の画像領域の他方の形
状の満たすべき拘束条件を計算する条件パラメータ発生
部と、この拘束条件を満足する範囲の領域の形状の修正
のみを利用者に許す領域形状入力部とからなる領域決定
部を有するものである。

【００２１】上記画像内の領域設定方法においては、第
１の画像領域と第２の画像領域の一方の領域の形状が入
力されたとき、領域決定部の条件パラメータ発生部にお
いて、上記一方の領域の形状に基づいて第１の画像領域
又は第２の画像領域の他方の領域の形状が満たすべき拘
束条件を計算し、この拘束条件を領域形状入力部に伝え
る。上記領域形状入力部はこの拘束条件を満たすような
編集操作のみを許可するので、利用者は第１の画像領域
と第２の画像領域との間に課せられる拘束条件を満足し
た形状を自然に入力することができる。

【００２２】また、上記画像内の領域設定方法は、上記
条件パラメータ発生部は、上記第１の画像領域又は第２
の画像領域の一方の領域の形状が平行四辺形とされたと
き、上記第１の画像領域又は第２の画像領域の他方の領
域の形状を、対向する辺の組の内の少なくとも一組につ
いて、その一組の各辺の長さ及び辺間の距離が上記平行
四辺形の対向する辺の組のいずれか一組に等しい平行四
辺形である拘束条件を発生し、上記領域形状入力部は、
上記拘束条件を満たす形状のみを受け付けるものであ
る。

【００２３】即ち、上記画像内の領域設定方法は、第１
の画像領域は長方形や正方形も含む平行四辺形であり、
これが与えられたとき、条件パラメータ発生部は、第２
の画像領域の条件として、第２の画像領域もまた平行四
辺形であり、第２の画像領域の平行な辺の少なくとも一
組は、第１の画像領域における辺の一組と長さと距離が
等しいという条件を発生し、また領域形状入力部はこの
条件パラメータを満たす四辺形のみの入力を利用者に許
すものである。

【００２４】上記画像内の領域設定方法においては、領
域形状の描画に、傾いた矩形の替わりに平行四辺形を用
いることで、傾いていない矩形に変換する際の補間処理
を必要としないので、誤差を発生させずに形状を矩形に
変換することができる。

【００２５】さらに、上記画像内の領域設定方法は、上
記第１の画像領域又は第２の画像領域が矩形ではないと
きには、その矩形ではない画像領域を矩形に変換する形
状変換工程を有するものである。

【００２６】即ち、上記画像内の領域設定方法は、第１
の画像領域および第２の画像領域が矩形でない場合に
は、画像修復をする前に形状を矩形に変換する形状変換
手段を有するものである。

【００２７】上記画像内の領域設定方法は、矩形でない
形状が入力されたとき、形状変換処理部中の形状変換工
程においては、矩形でない形状を矩形に変換するので、
画像処理部は入力される形状の変換処理などを行う必要
がない。

【００２８】そして、上記画像内の領域設定方法におい
ては、上記形状変換工程は、上記第１の画像領域又は第
２の画像領域が平行四辺形であるときには、その平行四
辺形の画像領域を矩形に変換するものである。

【００２９】即ち、上記画像内の領域設定方法において
は、上記形状変換工程は、第１の画像領域又は第２の画
像領域が平行四辺形である場合に、その領域の形状を矩
形に変換するものである。

【００３０】上述の課題を解決するために、この発明に
係る画像内の領域設定装置は、雑音を含む第１の画像領
域を、第２の画像領域を参照して修復する画像処理に係
る画像内の領域設定装置において、上記第１の画像領域
又は第２の画像領域の一方の領域の形状が与えられたと
き、上記第１の画像領域又は第２の画像領域の他方の領
域の形状を上記一方の領域の形状に基づいて拘束する拘
束条件を発生する条件パラメータ発生手段と、上記条件
パラメータ発生手段にて発生された拘束条件を満たす形
状の入力のみ受け付ける領域形状入力手段とを有するも
のである。

【００３１】

【発明の実施の形態】以下、この発明に係る画像内の領
域設定方法及び装置の実施の形態の一例を、図面を参照
して説明する。上記画像内の領域設定装置は、図１に示
すように、この装置の全体を制御する制御部１０と、デ
ータの演算を集中して行う中央処理部２１と、データを
保存するメモリ２２とを有している。

【００３２】上記制御部１０は、この装置の各部に対し
て制御を行うコントローラである。この制御部１０は、
上記中央処理部２１と、上記メモリ２２とデータの送受
を行い、これら中央処理部２１及びメモリ２２と一体と
なって上記画像内の領域設定方法に係る一連の手順を実
行する。また、この制御部１０には、マウス２３と、ペ
ン／タブレット２４と、画像入力２６とからデータが入
力し、ＣＲＴ２５にデータを出力している。

【００３３】上記中央処理部２１は、データに係る演算
を集中して行うプロセッサである。この中央処理部２１
は、上記制御部１０に接続され、この制御部１０の制御
の下に、この制御部１０から与えられたデータについて
演算を行う。

【００３４】上記メモリ２２は、データを保存する記憶
部である。このメモリ２２は、上記制御部１０に接続さ
れ、この制御部１０の制御の下に、データの書込み及び
読み出しをなされる。

【００３５】また、上記領域設定装置は、入力手段とし
てマウス２３及びペン／タブレット２４を、また、この
画像内の領域設定方法の処理に係る画像を出力する出力
手段としてＣＲＴ２５を有している。

【００３６】上記マウス２３は、掌に握って操作するこ
とができる程度の大きさの筐体を有するポインティング
デバイスである。このマウス２３は、例えば机上のよう
な平坦面上を所望の方向に所望の距離摺動されることに
より、例えばＣＲＴ２５上に表示されたカーソルの位置
を入力される。そして、このマウス２３は、入力された
位置に係るデータを上記制御部１０に伝送する。

【００３７】上記ペン／タブレット２４は、略々直方体
状の平坦な筐体を有し、この平坦な主面の１にマトリッ
クス状に配設された複数の検知素子を備え、このマトリ
ックス上の位置を検知するタブレットと、このタブレッ
トの主面をペン先にてなぞることにより位置を入力する
ペンとの一組からなる入力手段である。このペン／タブ
レット２４は、入力された位置に係るデータを上記制御
部１０に伝送する。

【００３８】上記ＣＲＴ２５は、画像に係るデータを陰
極線の管面に配設された複数の画素に画像として表示す
る出力手段である。このＣＲＴ２５は、上記制御部１０
から画像に係るデータを伝送され、このデータを画像と
して表示する。

【００３９】続いて、上記領域設定装置の領域決定部に
ついて説明する。この領域決定部は、例えば、上記制御
部１０、中央処理部２１及びメモリ２２にて構成され
る。

【００４０】この領域決定部は、図２に示すように、拘
束条件を発生する条件パラメータ発生部１２と、上記拘
束条件を満たす入力を選択的に受け付ける領域形状入力
部１３を有している。

【００４１】上記条件パラメータ発生部１２は、第１の
画像領域であるリペア領域と第２の画像領域であるサン
プル領域の間の拘束条件を発生し、この拘束条件のパラ
メータを上記領域形状入力部１３に与える。

【００４２】上記領域形状入力部１３は、マウス２３等
の入力手段にて利用者の画像領域の形状を入力され、上
記条件パラメータ発生部１２から与えられる拘束条件を
満たす入力のみ受け付ける。また、この領域形状入力部
１３は、ＣＲＴ２５に画像領域に係る情報を表示させ
る。さらに、この領域形状入力部１３は、上記リペア領
域又はサンプル領域の一方の領域の形状を入力され、上
記リペア領域又はサンプル領域の他方の領域の形状を出
力する。

【００４３】続いて、上記領域設定装置のフレーム選択
部について説明する。このフレーム選択部は、例えば、
上記制御部１０、中央処理部２及びメモリ２２にて構成
される。

【００４４】このフレーム選択部１４は、図３に示すよ
うに、マウス２３からフレームの選択を入力され、この
入力に応じて切り換えられたフレームに係る情報をＣＲ
Ｔ２５に出力する。なお、このフレーム選択部１４は、
上記入力に従いサンプル領域を所望のフレームに移動す
る。

【００４５】次に、この画像内の領域設定方法に係る一
連の工程を、図４に示すフローチャートを参照して説明
する。

【００４６】最初のステップＳ１においては、画像デー
タを入力する。即ち、不要なスクラッチ／ワイヤ雑音を
含む画像を表すデータを、上記図１に示した画像入力２
６を介して入力する。そして、ステップＳ２に進む。

【００４７】ステップＳ２においては、スクラッチ／ワ
イヤ雑音領域が特定される。即ち、上記図１中のＣＲＴ
２５の表示に基づいて、利用者は、例えばマウス２３や
ペン／タブレット２４等のポインティングデバイスを用
いて、スクラッチ／ワイヤ雑音領域を特定する。このよ
うにして特定されたスクラッチ／ワイヤ雑音領域は、例
えばハイライト表示される。そして、次のステップＳ３
に進む。

【００４８】ステップＳ３においては、上記ステップＳ
２にて特定されたスクラッチ／ワイヤ雑音領域を画像の
他の領域から区別するバイナリマスクデータが生成され
る。このバイナリマスクデータは、例えば特定されたス
クラッチ／ワイヤ雑音領域の各画素に値“０”を与え、
特定されたスクラッチ／ワイヤ雑音領域の外部の各画素
に“１”を与えることにより、このスクラッチ／ワイヤ
雑音領域を特定する。なお、このバイナリマスクデータ
としては、スクラッチ／ワイヤ雑音領域に値“１”を、
スクラッチ／ワイヤ雑音領域以外に値“０”を与えるこ
ともできる。そして、これに続くステップＳ４に進む。

【００４９】ステップＳ４においては、画像領域の指定
を行う。即ち、スクラッチ／ワイヤ雑音領域を含む、例
えば矩形状の形状の第１の画像領域であるリペア領域を
指定する。また、このリペア領域を修復する際に参照す
る第２の画像領域であるサンプル領域を指定する。

【００５０】ここで、このサンプル領域としては、構
造、線、色、輝度、テクスチャ、グレー値等においてリ
ペア領域に最も類似している画像上の領域が選択され
る。そして、次のステップＳ５に進む。

【００５１】ステップＳ５においては、上記リペア領域
又はサンプル領域の領域形状の指定を行う。即ち、上記
ステップＳ４において入力したこれらリペア領域及びサ
ンプル領域の形状を、後述する拘束条件の下に変形す
る。そして、ステップＳ６に進む。

【００５２】ステップＳ６においては、サンプル領域の
移動を行う。即ち、上記リペア領域を修復するために必
要なサンプル領域を、リペア領域の同一フレーム又は他
のフレームに移動する。ここで、フレームについての移
動は、上記フレーム選択部１４にて行う。そして、次の
ステップＳ７に進む。

【００５３】ステップＳ７においては、高速フーリエ変
換（ＦＦＴ）のために領域の矩形化を行う。ここでは、
ＦＦＴについて例示したが、一般的には直交変換であ
る。即ち、上記ステップにて特定したリペア領域又はサ
ンプル領域の形状が矩形ではない場合に、その領域に適
当な変換を施すことにより矩形化する。そして、これに
続くステップＳ８に進む。

【００５４】ステップＳ８においてはサンプル領域につ
いてＦＦＴの計算を行い、ステップＳ９においてはリペ
ア領域についてＦＦＴの計算を行う。そして、次のステ
ップＳ１０に進む。

【００５５】ステップＳ１０においては、リペア領域の
ＤＣの振幅及びリペア領域の周波数スペクトルにおける
他の周波数のリペア領域とサンプル領域の小さな振幅を
用いて、新たな画像スペクトルを生成する。そして、ス
テップＳ１１に進む。

【００５６】ステップＳ１１においては新たな画像スペ
クトルの逆高速フーリエ変換（ＩＦＴ）を計算して新た
な画像データを作成し、これに続くステップＳ１２にお
いては新たな画像データを０〜２５５に制限する。そし
て、ステップＳ１３に進む。

【００５７】ステップＳ１３においては、リペア領域の
新たな画像データを作成し、これに続くステップＳ１４
においては、新たな画像データでリペア領域を置換し、
ステップＳ１５に進む。

【００５８】ステップＳ１５においては、新たな画像デ
ータにて置換されたリペア領域について良好な結果であ
るか否かが判断される。そして、良好な結果である場合
には“ＹＥＳ”としてこの画像処理に係る一連の工程を
終了し、良好な結果でない場合には“ＮＯ”として、上
記ステップＳ９に戻る。

【００５９】ここで、上述した画像処理に係る一連の工
程の内で、画像内の領域設定方法に係るステップＳ４、
ステップＳ６及びステップＳ５について、図５を参照し
て詳細に説明する。

【００６０】上記ステップＳ４は、バイナリマスクの生
成を行うステップＳ３に続くものである。このステップ
Ｓ４においては、画像領域が指定される。

【００６１】即ち、このステップＳ４においては、利用
者は、例えば上記図１に示したマウス２３などの入力手
段を用い、画像内のスクラッチ／ワイヤ雑音を含む矩形
の画像領域を指定する。これにより、修復されるリペア
領域が特定される。このリペア領域が特定されると、こ
のリペア領域の画像の修復の際に用いられるサンプル領
域が作成される。このサンプル領域は、上記サンプル領
域と同じ大きさである。これらの処理を終えると次のス
テップＳ５に進む。

【００６２】ステップＳ５においては、上記図２に示し
た領域決定部１１は、利用者が入力した画像領域の形状
に基づいて画像領域の形状を決定する。

【００６３】即ち、上記領域決定部１１においては、利
用者が画像領域の移動、変形などをマウス２３等を用い
て上記領域形状入力部１３に入力すると、その画像領域
の形状を上記条件パラメータ発生部１２が発生した拘束
条件に基づいて変形し、その画像領域の形状を決定す
る。但し、上記領域形状入力部１３は、入力された画像
領域の形状が上記拘束条件に従わない場合には、その入
力を無視する。そして、これに続くステップＳ６に進
む。

【００６４】ステップＳ６においては、サンプル領域が
移動される。利用者は、リペア領域を修復する際に参照
するサンプル領域を、リペア領域のフレーム内の任意の
場所に移動させることができるが、もし画像内で適当な
する部分がない場合がある。このような場合には、リペ
ア領域とは異なるフレーム内にサンプル領域を設定する
ことができる。

【００６５】リペア領域と異なるフレーム内にサンプル
領域を設定する場合には、上記領域形状入力部１３に対
して、サンプル領域を選択する指定をする。そして、図
３に示すフレーム選択部１４を用いて他のフレームを見
る選択をすると、フレーム選択部１４はＣＲＴ２５に他
のフレームを表示する。そして、次のステップＳ７に進
む。

【００６６】次に、リペア領域又はサンプル領域の形状
が入力される際に、これらリペア領域又はサンプル領域
の一方の形状は、他方の形状であるという拘束条件につ
いて説明する。この画像領域に係る拘束条件は、上記形
状決定部１１の条件パラメータ発生部１２にて発生さ
れ、上記形状入力決定部１３はこの拘束条件に基づいて
選択的に入力を受け付ける。

【００６７】即ち、ここでの拘束条件である「リペア領
域とサンプル領域を常に同じ形状に保つ」は、上記図２
に示した領域決定部１１の条件パラメータ発生部１２か
ら発生される。上記領域決定部１１の備える領域形状入
力部１３は、利用者がマウス２３等を用いて入力した領
域の形状の変形を、上記拘束条件を満足するもののみ入
力する。

【００６８】ここでのリペア領域１は、図６中のＡに示
されるように、図中横長の略々矩形の形状である。この
リペア領域１は、上記マウス２３にてこの矩形の図中右
下の頂点１Ａを図中左上方向に、図中の頂点３Ａにまで
ドラッグされることにより、図中のリペア領域３にまで
変形される。この変形されたリペア領域３は、図中横長
の略々矩形の形状であり、変形前のリペア領域１と図中
左上の頂点１Ｂ及び３Ｂが共通であり、また、図中上方
及び左方の辺はそれぞれ重なっている。

【００６９】一方、サンプル領域２は、図６中のＢに示
されるように、上記図中のＡに示したリペア領域１と同
一の形状である。このサンプル領域２は、上記リペア領
域１がリペア領域３まで変形されると、これに応じて、
サンプル領域２からサンプル領域４まで変形される。こ
の変形後のサンプル領域４は、変形後のリペア領域３と
同一形状である図中横長の略々矩形の形状である。この
変形されたサンプル領域４は、変形前のサンプル領域２
と図中左上の頂点２Ｂ及び４Ｂは共通であり、図中上方
及び左方の辺はそれぞれ重なっている。

【００７０】逆に、サンプル領域の形状を変形すると、
上記拘束条件に基づいてリペア領域もサンプル領域の形
状に変形される。即ち、図７中のＢに示すサンプル領域
２は、図中横長の略々矩形の形状である。このサンプル
領域２は、上記マウス２３にてこの矩形の図中右下の頂
点２Ａを図中左上方向に、図中の頂点４Ａにまでドラッ
グされることにより、図中のサンプル領域４にまで変形
される。この変形の前後のサンプル領域の形状は、上記
図６中のＢに示したサンプル領域の形状と同一であるの
で、同一の符号を付して説明を省略する。

【００７１】このとき、上記サンプル領域２に対応する
リペア領域１は、図７中のＡに示すように、上記サンプ
ル領域２がサンプル領域４まで変形するのに対応して、
リペア領域１からリペア領域３まで変形する。この変形
の前後のリペア領域の形状は、上記図６中のＡに示した
リペア領域の形状と同一であるので、同一の符号を付し
て説明を省略する。

【００７２】続いて、リペア領域及びサンプル領域の形
状が平行四辺形である場合における、上記領域決定部１
１による領域の形状に係る処理について説明する。以下
の説明では、便宜上、図中横方向とフレームの横方向、
図中縦方向とフレームの縦方向とが一致しているものと
する。

【００７３】形状が平行四辺形の場合のリペア領域の一
例としては、図８中のＡに示すように、リペア領域１の
上方及び下方の辺は、図中横方向のフレームの軸に平行
であるが、このリペア領域１の左方及び右方の辺は、図
中縦方向のフレームの縦軸及び上記横軸のいずれにも平
行ではない場合が挙げられる。

【００７４】このリペア領域１には、図中右上の頂点に
ハンドル１ｐ、図中下方の辺の中点にハンドル１ｑ、図
中右方の辺の中点にハンドル１ｒ、図中右下の頂点にハ
ンドル１ｓ、そして同様に他の頂点及び辺の中点にハン
ドルが配設されている。これらのハンドル１ｐ〜１ｓ等
は、上記マウス２３にてドラッグされることにより、所
定の場合には、このリペア領域１の形状を変形される。

【００７５】また、図８中のＢには、上記リペア領域に
対応するサンプル領域２が表示されている。このサンプ
ル領域２は、上記リペア領域１と同一の形状の平行四辺
形である。このサンプル領域２には、上記リペア領域と
同様に、ハンドル２ｐ〜２ｓ等が配設されている。これ
らのハンドル２ｐ〜２ｓ等の配設の箇所は、上記リペア
領域１と同様であるので説明を省略する。さらに、この
サンプル領域２の平行四辺形の上方の辺の中点には、ハ
ンドル２ｔが配設されている。

【００７６】なお、リペア領域１に配設されたハンドル
１ｐ〜１ｓ等と、サンプル領域２に配設されたハンドル
２ｐ〜２ｓ等とについては、これらリペア領域１及びサ
ンプル領域２が平行四辺形の場合には以下も当該平行四
辺形に対して同様の箇所に配設されるので、以下では説
明を省略する。

【００７７】ハンドル１ｓについては、領域の拡大及び
縮小が行われても条件を満足するので、常に操作するこ
とができる。このリペア領域の上方の辺の中点に配設さ
れたハンドル１ｔについては、ハンドル１ｔが含まれる
辺の組がリペア領域１及びサンプル領域２の間で平行で
あれば操作することができる。

【００７８】ここで、このサンプル領域２のハンドル２
ｔを上記マウス２３にて図中横方向のフレームの横軸に
平行に図中左方に移動することにより、このサンプル領
域２の形状を変形することができる。この変形の結果、
このサンプル領域２は、図９中のＢに示すように、上記
図８中のＢに示したサンプル領域２に対して、図中上方
と下方の辺の組の間隔は保存されたが、図中左方及び右
方の辺の組の間隔は変化している。なお、このサンプル
領域２の変形操作の際に、リペア領域１の形状は、図９
中のＡに示すように、図８中のＡに示したリペア領域１
の形状に等しい。

【００７９】ここでの拘束条件は、リペア領域１とサン
プル領域２の一方の形状と他方の形状は、フレームの縦
軸又は横軸の一方に平行な対向する辺の組を有し、他方
の辺の組はこれら縦軸及び横軸に平行ではないというも
のである。

【００８０】上述したように、リペア領域１又はサンプ
ル領域２の形状の変形が従うべき拘束条件は、上記領域
決定部１１の条件パラメータ発生部１２から発生され
る。この領域決定部１１の領域形状入力部１３は、上記
条件パラメータ発生部１２から入力される拘束条件を満
たす入力を受け付け、その入力に応じて領域の形状を変
形する。

【００８１】なお、上記サンプル領域２は変形されたこ
とを示すために太線にて表示されている。以下も、変形
された図形の形状を太線にて表すことにする。

【００８２】これら平行四辺形状のリペア領域１及びサ
ンプル領域２の形状は、上記拘束条件を満たす限りにお
いては、図中縦方向のフレームの縦軸に平行な方向にも
変形することができる。

【００８３】ここでは、図１０中のＡ及びＢに示すよう
に、リペア領域１及びサンプル領域２がそれぞれ対向す
る辺の組の内の一方の組の各辺がフレームの縦軸にそれ
ぞれ平行であるものとする。また、これらリペア領域１
及びサンプル領域２は、同一の形状である。

【００８４】上記リペア領域１の形状の変形は、まずハ
ンドル１ｓについては図形の拡大と縮小が行われても常
に条件を満足するため、常に操作することができる。上
記リペア領域の上方の辺の中央に配設されたハンドル１
ｔについては、辺の組が軸に平行でないため、操作する
ことができない。上記リペア領域１図中左方の辺の中点
に配設されたのハンドル１ｕについては、このハンドル
１ｕが含まれる辺の組は移動した後も常にリペア領域
１、サンプル領域２について共にフレームの縦方向のフ
レームの縦軸に平行であるため、図中縦方向に移動する
ことができる。

【００８５】このハンドル１ｕを図中の縦方向に移動し
た結果、上記リペア領域１は、図１１中のＡに示すよう
に、上記図１１中のＡに示したリペア領域１に対してフ
レームの縦方向の軸に平行な辺の組の相対的な位置が変
化している。このリペア領域１の変形の際にも、サンプ
ル領域２の形状は保たれている。従って、リペア領域変
形後のサンプル領域２の形状は、同図中のＢに示すよう
に、上記図１０中のＢに示したサンプル領域２の形状に
等しい。

【００８６】続いて、拘束条件「２つの辺の組のどちら
かが、画像又はこの画像を含むフレームの縦又は横軸に
平行である平行四辺形」の下でのリペア領域及びサンプ
ル領域の形状の変形について説明する。

【００８７】ここでのリペア領域１は、図１２に示すよ
うに、対向する辺の組の一方がフレームの縦軸に平行、
他方がフレームの横軸に平行な略々矩形の形状である。
このリペア領域１のハンドル１ｐに対する操作は、この
ハンドルをマウス２３にてドラッグすることによりこの
リペア領域１の形状の拡大／縮小処理を行うが、拡大／
縮小処理を行っても拘束条件を満たさない形状に変化す
ることはないため、ハンドル１ｐは常に操作することが
できる。

【００８８】このリペア領域の上方の辺の中点に配設さ
れたハンドル１ｔに対する操作は、図中横方向のフレー
ムの横軸の方向への変形処理を行うが、一組の辺がフレ
ームの横軸に平行である場合は可能である。このハンド
ル１ｔに対して横方向に移動操作を施すと、図１３に示
すように、このリペア領域１の上辺はハンドル１ｔに伴
って図中横方向に移動する。

【００８９】また、このリペア領域１のハンドル１ｓを
マウス２３にてドラッグして図中の縦方向のフレームの
縦軸の方向に移動すると、図１４に示すように、このリ
ペア領域１の図中右方の辺は、このハンドル１ｓに伴っ
て図中縦方向に移動する。

【００９０】さらに、図１５に示すように、一組の辺が
フレームの縦軸に平行である場合にも、このリペア領域
１の形状の変形は可能である。しかし、図中横方向及び
縦方向であるフレームの縦軸及び横軸にそれぞれ平行な
辺の組を有する矩形から、縦軸に平行な辺の組の一方を
縦軸方向に移動することにより得られた既に縦方向に変
形してある平行四辺形は、このリペア領域の図中上方の
辺の中点に配設されたハンドル１ｔを用いて横方向に変
形すると、拘束条件に合致しない形状となってしまう。
そのため、ハンドル１ｔの横方向への変形は許可されな
い。

【００９１】このように、この画像内の領域設定方法に
おいては、リペア領域又はサンプル領域の形状の変形
は、条件パラメータ発生部の発生する拘束条件を満たす
ものに限られ、任意の形状に変形することはできない。

【００９２】なお、リペア領域及びサンプル領域が平行
四辺形の場合の拘束条件としては、「一方の領域の形状
が平行四辺形とされたとき、他方の領域の形状を、対向
する辺の組の内の少なくとも一組について、その一組の
各辺の長さ及び辺間の距離が上記平行四辺形の対向する
辺の組のいずれか一組に等しい平行四辺形とする」も挙
げることができる。

【００９３】図１６は、このようなハンドルの操作によ
るリペア領域１又はサンプル領域２の変形に係る一連の
工程を示すフローチャートである。ここで、リペア領域
１及びサンプル領域に対する変形は同様に行えるので、
ここではリペア領域１に対する操作について説明し、サ
ンプル領域に対する操作は括弧内にて同時に説明するこ
とにする。

【００９４】ステップＳ２１において、ハンドル１ｐ
（２ｐ）に対して操作が行われた場合は、形状の拡大縮
小を行う。ステップＳ２２でハンドル１ｑ（２ｑ）に対
して操作が行われた場合は、ハンドル１ｒ（２ｒ）を持
つ辺の組が図中縦方向であるフレームのｙ軸に平行であ
るかチェックする。平行であれば、ステップＳ２３で形
状の図中横方向へのスライドを行い、平行でなければ何
もしない。そして、これに続くステップＳ２４に進む。

【００９５】ステップＳ２４においては、ハンドル１ｒ
（２ｒ）に対して操作が行われた場合は、ハンドル１ｑ
（２ｑ）を持つ辺の組が図中横方向であるフレームのｘ
軸に平行であるかチェックする。平行であればステップ
Ｓ２５で形状の図中縦方向へのスライドを行い、平行で
なければ何もしない。

【００９６】このようにして、ハンドルの操作に対して
判断がなされ、ハンドルの操作が有効である場合にはそ
の操作に対応する変形が施される。

【００９７】以上のようにリペア領域１とサンプル領域
２の形状を拘束条件を用いて指定することができる。こ
のことによって、リペア領域１及びサンプル領域２の有
効な変形は、拘束条件によって判断されることとなり、
これらリペア領域１及びサンプル領域２の形状を入力す
る利用者の負担は軽減される。

【００９８】続いて、形状が平行四辺形であるリペア領
域１又はサンプル領域２を矩形に変形する例を説明す
る。

【００９９】リペア領域１又はサンプル領域２の形状平
行四辺形である場合に、これらリペア領域１又はサンプ
ル領域２の形状を矩形に変換するためには、図中の横軸
に平行な辺に沿って画素を取り出し、矩形に並べてい
く。ここでは、図中横方向であるフレームの横軸に平行
な辺を持つ図１７中のＡのような平行四辺形を矩形に変
換する処理について、図１８に示すフローチャートを参
照して説明する。

【０１００】ステップＳ３１においては、辺１Ｍと辺１
Ｌの傾きを求め、辺１Ｍの傾きをａ０、辺１Ｌの傾きを
ａ１とする。また、平行四辺形状の領域の図中横軸に平
行な辺の長さをＸＳＩＺＥ、この平行四辺形の縦幅をＹ
ＳＩＺＥとする。そして、次のステップＳ３２に進む。

【０１０１】ステップＳ３２においては、頂点１Ｆの座
標を（ｘ０，ｙ０）、頂点１Ｇの座標を（ｘ１，ｙ１）
とする。初期状態においてｘ＝ｘ０，ｙ＝ｙ０，ｍｘ＝
０，ｍｙ＝０とする。そして、これに続くステップＳ３
３に進む。

【０１０２】ステップＳ３３においては、ｘ、ｙをｘ＝
ｘ０＋a2＊ｍｙ、ｙ＝ｙ０＋a1＊ｍｘ＋a2＊ｍｙとし、
同図中のＢに示す点（ｘ，ｙ）の位置の画素値を読みと
り、矩形の座標（ｍｘ，ｍｙ）に配置する。そして、ス
テップＳ３４に進む。

【０１０３】ステップＳ３４で、ｍｘがＸＳＩＺＥと等
しくなったら、ｍｙに１を加え、ｍｘを０とし、ｍｙが
ＹＳＩＺＥと等しい場合は、この一連の処理を終了す
る。そうでない場合はｍｙに１を加え、ステップＳ３３
に戻る。この処理の結果、同図中のＢの平行四辺形の領
域が、同図中Ｃに示すような矩形の領域に変換される。

【０１０４】以上のように、リペア領域又はサンプル領
域の形状を、平行四辺形から矩形に変換することができ
る。このことによって、傾いた矩形を軸に平行な矩形に
変換する際に必要とされていた補間処理は不要となる。
なお、ここでの変換処理は、同図中のＤに示すような、
図中縦方向のフレームの縦軸に平行な一組の対向する辺
を有する平行四辺形の形状のリペア領域１又はサンプル
領域２に対しても適用することができる。

【０１０５】このような手順に従い、図１９に示すよう
に、少なくとも一組の対向する辺がフレーム３１の縦軸
又は横軸に平行な平行四辺形の形状のリペア領域１又は
サンプル領域２を、矩形の形状に変換することができ
る。

【０１０６】即ち、このフレーム３１内には、斜めにス
クラッチ／ワイヤ雑音３５が含まれているが、このスク
ラッチ／ワイヤ雑音３５を覆うように、図中左方及び右
方の対向する一組の辺を上記フレーム３１の縦軸に平行
にして、平行四辺形の形状のリペア領域１が形成されて
いる。そして、このリペア領域１の修復の際に参照され
るサンプル領域２は、上記フレーム３１内に上記リペア
領域２と同一形状の平行四辺形にて設定されている。こ
のような平行四辺形の形状のリペア領域１及びサンプル
領域２は、上記図１８に示した手順にて矩形に変換され
て画像処理が施される。

【０１０７】続いて、リペア領域又はサンプル領域が自
由形状である場合に、自由形状を矩形に変換する処理に
ついて説明する。自由形状をを矩形に変換するには、図
２０中のＡに示すように、この自由形状の領域５を囲む
枠を設定し、形状と枠の間を補間することで、自由形状
を矩形に変換することができる。図中では、自由形状の
領域５を含み、この自由形状の領域５に外接するように
矩形の形状のリペア領域１が設定されている。

【０１０８】ここで、ディフュージョン（diffusion）
法という技術が従来から知られている（Numerical Reci
pes in C, William H. Pressなど、技術評論社）。上記
ディフュージョン法は、画像に対して次の行列にて表現
されるフィルタを繰り返し適用することにより計算する
処理である。ここで、行列の要素中のｗは、ｗ＝０〜２
である。

【０１０９】

【数１】

【０１１０】この行列を適用することにより行われる処
理は、画素の周囲の画素の４近傍の値を用いて画素値を
求めるものである。

【０１１１】上記自由形状を囲むリペア領域１内の自由
形状外の領域５の間の領域６に、上記ディフュージョン
法のフィルタを繰り返し適用することにより、画像中の
欠損部分は周囲の画素値を参照して徐々に回復してい
く。ここで、画像の欠損部分とは、上記リペア領域１に
おける自由形状の領域５を除いた領域６である。

【０１１２】その結果、上記欠損部分の形状を矩形に変
換することができる。同図中のＢに示されている上記欠
損部分は、繰り返し適用されたフィルタにより埋められ
ている。補間をしても、傾いた矩形領域を図中の横方向
及び縦方向の軸に平行な矩形に変換する補間処理のよう
にマスクが塗られている修復部分も補間する処理とは異
なり、マスクが塗られている修復部分に関しては補間処
理は行わず、矩形領域の周囲の部分を埋めるだけのた
め、修復結果が問題になることはない。

【０１１３】ここで、上記図１９においては、リペア領
域１とサンプル領域２とを同一フレーム内に設定した
が、図２１中のＡに示すように、リペア領域１を含むフ
レーム内にサンプル領域２を設定することができない場
合には、同図中のＢに示すように、サンプル領域を上記
リペア領域１を含むフレームとは異なるフレーム内に設
定することができる。

【０１１４】このように、リペア領域１とサンプル領域
２との異なるフレームについての設定は、同図中のＡの
ように、リペア領域１を含むフレーム３１内にサンプル
領域を設定することができない場合に意義がある。上記
フレーム３１内においては、リペア領域１に類似する領
域を確保することができないので、同一フレーム内にサ
ンプル領域を設定することができなかった。この場合に
も、平行四辺形の形状のリペア領域１及びサンプル領域
２は、それぞれ矩形の形状に変換された後に画像処理を
施される。

【０１１５】なお、以上の説明においては、リペア領域
１又はサンプル領域２の変形については、これらリペア
領域又はサンプル領域２の一方についてのみ説明するこ
とがあったが、他方についても同様に適用することもで
きる。

【０１１６】また、リペア領域１とサンプル領域２との
間に、点対称、線対称等の所定の対称性を拘束条件とし
て課すこともできる。

【０１１７】

【発明の効果】上述のように、上記画像内の領域設定方
法は、一方の領域が入力されたとき、指定された条件の
編集操作のみを許可するので、利用者は自然に、２つの
領域間の形状の制約を満足した形状を入力することがで
きる。

【０１１８】また、上記画像内の領域設定方法は、領域
形状の描画に傾いた矩形の代わりに平行四辺形を用いる
ことで、傾いた矩形を用いたときに発生していた傾いて
いない矩形に変換するときに使用していた補間処理を必
要としないので、誤差を発生させずに形状を矩形に変換
することができる。

【０１１９】さらに、上記画像内の領域設定方法は、領
域の形状が矩形でない場合に、形状を矩形に変換するこ
とができる。従って、領域が矩形でない場合にも画像処
理を行うことができる。

【０１２０】上述のように、上記画像内の領域設定装置
は、一方の領域が入力されたとき、指定された条件の編
集操作のみを許可するので、利用者は自然に、２つの領
域間の形状の制約を満足した形状を入力することができ
る。

【図面の簡単な説明】

【図１】画像内の領域設定装置の全体の構成を概略的に
示すブロック図である。

【図２】上記領域設定装置の領域決定部位係る部分の構
成を概略的に示すブロック図である。

【図３】上記領域設定装置のフレーム選択部の構成を概
略的に示すブロック図である。

【図４】画像内の領域設定方法の一連の工程を示すフロ
ーチャートである。

【図５】上記領域設定方法の要部の工程を示すフローチ
ャートである。

【図６】上記領域設定方法に係るリペア領域又はサンプ
ル領域の形状の変形の一例を示す図である。

【図７】上記リペア領域又はサンプル領域の形状の変形
の一例を示す図である。

【図８】上記リペア領域又はサンプル領域の形状の変形
の一例を示す図である。

【図９】上記リペア領域又はサンプル領域の形状の変形
の一例を示す図である。

【図１０】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１１】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１２】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１３】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１４】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１５】上記リペア領域又はサンプル領域の形状の変
形の一例を示す図である。

【図１６】上記リペア領域又はサンプル領域の形状の変
形の一連の工程を示すフローチャートである。

【図１７】平行四辺形の形状の上記リペア領域又はサン
プル領域を矩形に変換する手順を説明する図である。

【図１８】平行四辺形の形状の上記リペア領域又はサン
プル領域を矩形に変換する一連の工程を示すフローチャ
ートである。

【図１９】画像に斜めに入ったスクラッチ／ワイヤ雑音
に対する平行四辺形の形状のリペア領域及びサンプル領
域による修復を説明する図である。

【図２０】自由形状の領域に対するディフュージョン法
の適用を説明する図である。

【図２１】リペア領域とサンプル領域とを異なるフレー
ムに設定した場合を説明する図である。

【図２２】スクラッチ／ワイヤ雑音を含むフレームを示
す図である。

【図２３】リペア領域及びサンプル領域が設定されたフ
レームを示す図である。

【図２３】斜めに入ったスクラッチ／ワイヤ雑音に対す
るリペア領域及びサンプル領域が設定されたフレームを
示す図である。

【図２４】フレームに対して斜めに設定された矩形状の
リペア領域又はサンプル領域をフレームの縦方向及び横
方向に沿った矩形に変換する手順を説明する図である。

【図２５】図２４の矩形上のリペア領域又はサンプル領
域を正方格子にて画素に分割した状態を示す図である。

【図２６】図２５の画素を矩形の形状に並べ換えた状態
を示す図である。

【図２７】図２６の画素を横幅を縮めて矩形内に収めた
状態を示す図である。

【符号の説明】

１０制御部、２３マウス、２５ＣＲＴ、２６外
部入力

─────────────────────────────────────────────────────

【手続補正書】

【提出日】平成９年１１月２１日

【手続補正１】

【補正対象書類名】明細書

【補正対象項目名】図面の簡単な説明

【補正方法】変更

【補正内容】

【図面の簡単な説明】

【図２】上記領域設定装置の領域決定部に係る部分の構
成を概略的に示すブロック図である。

【符号の説明】１０制御部、２３マウス、２５ＣＲＴ、２６外
部入力

Claims

【特許請求の範囲】

【請求項１】雑音を含む第１の画像領域を、第２の画
像領域を参照して修復する画像処理に係る画像内の領域
設定方法において、上記第１の画像領域又は第２の画像領域の一方の領域の
形状が与えられたとき、上記第１の画像領域又は第２の
画像領域の他方の領域の形状を上記一方の領域の形状に
基づいて拘束する拘束条件を発生する条件パラメータ発
生工程と、上記条件パラメータ発生工程にて発生された拘束条件を
満たす形状の入力のみ受け付ける領域形状入力工程とを
有することを特徴とする画像内の領域設定方法。
【請求項２】上記雑音は、引っ掻き傷又はワイヤによ
る雑音であることを特徴とする請求項１記載の画像内の
領域設定方法。
【請求項３】上記条件パラメータ発生工程は、上記第
１の画像領域又は第２の画像領域の一方の領域の形状が
与えられたとき、上記第１の画像領域又は第２の画像領
域の他方の領域の形状は、上記一方の領域の形状とする
拘束条件を発生することを特徴とする請求項１記載の画
像内の領域設定方法。
【請求項４】上記条件パラメータ発生工程は、上記第
１の画像領域又は第２の画像領域の一方の領域の形状が
与えられたとき、上記第１の画像領域又は第２の画像領
域の他方の領域の形状は、上記一方の領域の形状に対称
な形状とする拘束条件を発生することを特徴とする請求
項１記載の画像内の領域設定方法。
【請求項５】上記対称な形状は、上記一方の領域の形
状に対して線対称又は点対称な形状であることを特徴と
する請求項４記載の画像内の領域設定方法。
【請求項６】上記条件パラメータ発生工程は、上記第
１の画像領域又は第２の画像領域の一方の領域の形状が
平行四辺形とされたとき、上記第１の画像領域又は第２
の画像領域の他方の領域の形状を、対向する辺の組の内
の少なくとも一組について、その一組の各辺の長さ及び
辺間の距離が上記平行四辺形の対向する辺の組のいずれ
か一組に等しい平行四辺形である拘束条件を発生し、上
記領域形状入力部は、上記拘束条件を満たす形状のみを
受け付けることを特徴とする請求項１記載の画像内の領
域設定方法。
【請求項７】上記第１の画像領域及び第２の画像領域
において、平行四辺形の対向する辺の組の少なくともい
ずれか一組はフレームの縦軸又は横軸に平行であること
を特徴とする請求項６記載の画像内の領域設定方法。
【請求項８】上記第１の画像領域又は第２の画像領域
が矩形ではないときには、その矩形ではない画像領域を
矩形に変換する形状変換工程を有することを特徴とする
請求項１記載の画像内の領域設定方法。
【請求項９】上記形状変換工程は、上記第１の画像領
域又は第２の画像領域が平行四辺形であるときには、そ
の平行四辺形の領域の形状を矩形に変換することを特徴
とする請求項８記載の画像内の領域設定方法。
【請求項１０】上記形状変換工程は、上記１の画像領
域又は第２の画像領域の領域の形状が矩形又は平行四辺
形ではないときには、その領域の形状を矩形に変換する
ことを特徴とする請求項８記載の画像内の領域設定方
法。
【請求項１１】雑音を含む第１の画像領域を、第２の
画像領域を参照して修復する画像処理に係る画像内の領
域設定装置において、上記第１の画像領域又は第２の画像領域の一方の領域の
形状が与えられたとき、上記第１の画像領域又は第２の
画像領域の他方の領域の形状を上記一方の領域の形状に
基づいて拘束する拘束条件を発生する条件パラメータ発
生手段と、上記条件パラメータ発生手段にて発生された拘束条件を
満たす形状の入力のみ受け付ける領域形状入力手段とを
有することを特徴とする画像内の領域指定装置。
【請求項１２】上記雑音は、引っ掻き傷又はワイヤに
よる雑音であることを特徴とする請求項１１記載の画像
内の領域設定装置。