JP2002262218A

JP2002262218A - 映像補正方法、映像補正システム、および、映像補正をおこなうためのプログラム記録媒体

Info

Publication number: JP2002262218A
Application number: JP2001051478A
Authority: JP
Inventors: Yoichi Horii; 洋一堀井
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2001-02-27
Filing date: 2001-02-27
Publication date: 2002-09-13

Abstract

(57)【要約】【課題】デジタル画像の編集をおこなうリニア編集シス
テムにおいて、ノイズの除去などをおこなう際に、操作
でユーザに取って分かりやすく簡単な操作でおこえるよ
うにする。また、位置や色の不安定性も簡単に補正でき
るようにする。【解決手段】ディスプレイに補正のために用いられるデ
ータを参照するための参照用ウィンドウと補正の対象と
なる作業用ウィンドウとを設け、それぞれのウィンドウ
にフレームを表示し、作業用ウィンドウに修正する領域
を指定する。そして、対応する参照用ウィンドウの画像
データにより、その領域を補正する。また、両者の対応
を、ウィンドウに基準点を指定しておこなえるようにす
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像補正方法、映
像補正システムに係り、コンピュータシステムにより動
画像のフィルムなどをノンリニア編集ソフトウェアによ
り補正する場合に、簡単な操作で快適に補正をおこなう
ことのできる映像補正方法、映像補正システムに関す
る。

【０００２】

【従来の技術】近年、デジタル技術が進歩し、従来の映
像フィルムなどのコンテンツを劣化のないデジタル情報
として取りこんで編集するノンリニア編集システムが放
送局などを中心に盛んに使われるようになってきてい
る。編集されたコンテンツは、ＤＶＤディスク用にパッ
ケージングされたり、放送に用いられたりする。ここ
で、ノンリニア編集システムとは、従来のリニアなアク
セス媒体であるＶＴＲなどと比較して、ハードディスク
上でランダムなアクセスできる編集システムであること
を意味している。

【０００３】ところで、特に映像素材が古いフィルムの
場合、化学的な変質や、カビ、ホコリ、キズなどにより
映写した際にノイズが生じる。したがって、このような
ノンリニア編集システムでは、そのようなノイズを除去
する機能を有している。

【０００４】先ず、図１６を用いて従来技術に係るノイ
ズを除去するときの映像の補正方法に関して説明する。

【０００５】図１６は、従来技術に係るノイズを除去す
るときの映像の補正方法を順次示した図である。

【０００６】映像のノイズ除去を目的とする従来の方法
では、まず、動画像ファイルの中から、図１６（ａ）に
示すように、ノイズが含まれるフレーム（フレームにつ
いては、後述）に相当する画像ファイルＡをディスプレ
イに表示し、ノイズが含まれる領域をポインティングデ
バイスなどで指定する。次に、図１６（ｂ）に示すよう
に、上記フレームの近傍のノイズが含まれていないフレ
ームに相当する画像ファイルＢをディスプレイに表示
し、先に指定した領域と同じ場所の画像情報をバッファ
にコピーする。さらに、図１６（ｃ）に示すように、再
度ノイズが含まれるフレームに相当する画像ファイルＡ
をディスプレイに表示して、上記バッファの画像情報を
領域内の画像情報に上書きし、ファイルＡを更新する。
これらの従来手法は、例えば、Fractal Design Painter
4（フラクタルデザイン社ペインター４）ユーザーガイ
ド for Macintosh の第３３０頁から第３３１頁に記載
されている。

【０００７】

【発明が解決しようとする課題】上記従来技術は、画面
でユーザの見たままのデータを操作できると言うメリッ
トはある。しかしながら、ユーザの操作性について考慮
されていない。というのも、従来の方法では、１つのノ
イズを除去するために、ノイズのある領域の指定し、し
かも、ノイズのない画面の表示、ノイズのある画面の再
表示などをしなければならず、煩雑な操作が必要である
という問題点があった。

【０００８】また、被写体が大きく動いている場合、近
傍のノイズが含まれていないフレームが存在しない場合
もあり、図１６（ｂ）にあたるノイズ修正の基になる画
面が見つかりにくかったり、存在しないと言う問題点が
あった。また、フィルムが画像データの元の素材の場
合、フィルム特有の位置の不安定性（上下方向のブレ）
や、全体の明るさの不安定性といった視聴者に不快感を
もたらす要因に対しての措置をおこなうことは困難であ
るという問題点があった。

【０００９】ところで、テレビジョン信号で動画像を表
示する場合に、時間軸方向の標本化をおこなって、１画
面を構成している。これを「フレーム」と言っている。
また、我が国や米国で採用されている規格であるＮＴＳ
Ｃのインターレス操作では、一つのフレームを画面上で
「奇数フィールド」と「偶数フィールド」の二つの「フ
ィールド」で構成し、画面上を走査している。ところ
が、ＮＴＳＣ信号による表示は、毎秒３０コマ、映画で
は、毎秒２４コマを表示しており、このずれのために映
画フィルムやテレビの１秒あたりのフレーム数が異なる
ことによる。そのため、映画フィルムをテレビ信号のた
めのデータに編集するときに、異なる２つの画像が同一
フレームの奇数および偶数フィールドにそれぞれ格納さ
れる場合がある。このような場合には、従来技術のノイ
ズ除去では、フレーム毎におこなうようにしていため、
そのようなフレームの画像のノイズ除去処理が困難であ
ると言う問題点があった。

【００１０】本発明は、上記問題点を解決するためにな
されもので、その目的は、デジタル画像の編集をおこな
うリニア編集システムにおいて、簡易な操作でユーザに
取って分かりやすい画像データの補正方法、および、そ
のシステムを提供することにある。

【００１１】また、別の目的は、フィルムのブレなどに
よる位置の不安定性、明るさの不安定性を簡単に修正す
ることができる方法を提供することにある。

【００１２】さらに、別の目的は、従来技術のようにフ
レーム単位だけでなく、奇数または偶数フィールドを個
別に処理できるようにして、映画フィルムからテレビ信
号のデータに編集する際のニーズに合った画像補正方
法、および、そのシステムを提供することにある。

【００１３】

【課題を解決するための手段】上記目的を達成するた
め、まず、ディスプレイに作業用ウィンドウと参照用ウ
ィンドウの２つのウィンドウを表示する。作業用ウィン
ドウには、ノイズが含まれるなどの要因で補正したいフ
レームの画像を、参照用ウィンドウには、その近傍のノ
イズが含まれていないフレームなどの補正のための参照
データとする画像を表示する。

【００１４】先ず、被写体があまり動いていない場合に
は、参照用ウィンドウと作業用ウィンドウの像を直接比
較することができる。このときには、ユーザは作業用ウ
ィンドウ上のノイズの部分をポインティングデバイスな
どでドラッグする。ドラッグされたときのポインタの位
置と同じ座標の画像情報Ｑを参照用ウィンドウから取得
し、作業用ウィンドウの画像にその画像情報Ｑを上書き
し、作業用ウィンドウの画像を更新する。このように、
参照用ウィンドウと作業用ウィンドウと同時表示により
更新させることにより、分りやすく簡易な操作で画像の
補正がおこなえることになる。

【００１５】これに対し、被写体が動いている場合に
は、参照用ウィンドウと作業用ウィンドウの像を直接比
較することはおこないにくいため、ユーザーは作業用ウ
ィンドウと参照用ウィンドウのそれぞれに、対応するア
ンカーポイントを指定させる。その後に、作業用ウィン
ドウ上のノイズの部分をドラッグする。そして、ドラッ
グされたときのポインタの位置とそれぞれのアンカーポ
イントから得られる相対位置の画像情報Ｑ′を参照用ウ
ィンドウから取得し、作業用ウィンドウの画像にその画
像情報Ｑ′を上書きし、作業用ウィンドウの画像を更新
する。この場合には、表示される像が動いていて、参照
用ウィンドウと作業用ウィンドウの対応が取りにくい場
合であっても、基準点となるアンカーポイントのみをマ
ッチさせることにより、比較的容易に対応が取れ、画像
の補正がおこなえることになる。

【００１６】また、位置や明るさの不安定性を修正する
ために、上記と同様なアンカーポイントを指定し、参照
用ウィンドウと作業用ウィンドウの両者のアンカーポイ
ントの座標が一致するように作業用ウィンドウの画像を
移動させたり、また、両者のアンカーポイントの位置の
色が一致するように作業用ウィンドウの画像の色を修正
することにより、簡単に画像補正をおこなうことができ
る。

【００１７】さらに、複数の画像を評価して、類似度の
離れているものがノイズなどを生じているものと仮定し
て、画像の補正をおこなうことにより、画像を自動的に
補正することができる。

【００１８】上記各種の画像の補正方法において、画像
を奇数フィールド、または、偶数フィールドのみからな
る画像に変換する機能を備えることにより、フィールド
単位の処理をおこなうことができ、映画フィルムから取
りこんだデータをテレビ信号で用いられるデータに編集
する場合などにも対応することができる。

【００１９】

【発明の実施の形態】以下、図１ないし図１５を用いて
本発明に係る一実施形態を説明する。〔映像補正システムのシステム構成〕先ず、図１を用い
て本発明に係る映像補正方法を実行するシステムのシス
テム構成について説明する。図１は、本発明に係る映像
補正方法を実行するシステムのシステム構成を示す概念
図である。

【００２０】本発明の映像補正システムは、ハードウェ
アの構成要素としては、中央処理装置１５２、主記憶装
置１５０、補助記憶装置であるハードディスク１４０、
表示装置であるディスプレイ１３０、入力装置１５３、
映像入力装置１５４、映像出力装置１５５、ＶＴＲ装置
１５６からなる。

【００２１】本実施形態で補正の対象となる映像データ
である動画像ファイル（以下、単に「画像ファイル」と
もいう）は、通常大容量のハードディスク１４０に格納
されている。また、実行されるプログラムである映像補
正ソフトウェア４００は、実行時に主記憶装置１５０に
ロードされる。

【００２２】中央処理装置１５２は、命令を実行し、各
種の接続装置に指令を与えて動作させる。映像補正ソフ
トウェア４００は、実行時に主記憶装置１５０にロード
されて中央処理装置１５２により実行されて、ハードデ
ィスク１４０上の動画像ファイルを加工するソフトウェ
アである。この映像補正ソフトウェア４００は、ＣＤ
−ＲＯＭなどの記憶媒体を介してコンピュータ外部から
コンピュータの主記憶内にロードするか、または通信ネ
ットワーク等を介して、コンピュータ外部からコンピュ
ータの主記憶装置１５０内にロードすることが可能であ
る。データテーブル４５０は、映像補正ソフトウェア４
００実行時に主記憶装置１５０内で、映像補正ソフトウ
ェア４００が利用するデータを格納するテーブルであ
る。

【００２３】また、一方の動画像ファイルは、中央処理
装置１５２にローカルに接続されているハードディスク
１４０か、または、通信ネットワークを介して接続され
たハードディスク１４０に格納されている。

【００２４】動画像ファイルを入力するときには、ノイ
ズ除去の対象となる動画像ファイルを映像入力装置１５
４等により入力する。そして、ノイズの除去など映像の
補正が施された後に、ハードディスク１４０内の動画像
ファイルは、映像出力装置１５５を介してほかの映像機
器に出力されるか、ＶＴＲ装置１５６にてビデオテープ
などの媒体に記録され、映像ソフトとなる。

【００２５】また、ディスプレイ１３０と、入力装置１
５３は編集の際にユーザインタフェースを受け持つ機器
である。

【００２６】ディスプレイ１３０には、修正するノイズ
のある画像、その画像の修正に用いられる参照用画像や
操作をするためのツールバーなどが表示される。

【００２７】入力装置１５３は、例えば、マウスなどの
ポインティングデバイスやキーボードであり、ユーザ
は、これによりシステムに命令を与えたり、情報を入力
する。〔映像補正システムの操作イメージ〕次に、図２ないし
図４を用いて本発明に係る映像補正システムにより映像
補正をおこなうときの操作イメージについて説明する。
図２は、本発明に係る映像補正システムの表示画面を示
す図である。図３は、本発明に係る映像補正システムに
より映像の補正をおこなっているときの状況を説明する
ための図である。図４は、ユーザの操作の流れを説明す
るための図である。

【００２８】先ず、図２により表示画面の構成要素とそ
の機能について説明する。

【００２９】補正操作のための表示画面は、大きく分け
て操作ツールバーＴＢ、参照用ウィンドウＲＷ、作業用
ウィンドウＷＷからなる。

【００３０】参照用ウィンドウＲＷは、画像を補正する
ために用いられる元データを取ってくるための画像を表
示するウィンドウエリアである。

【００３１】作業用ウィンドウＷＷは、補正の対象とな
る画像を表示するウィンドウである。

【００３２】図２では、作業用ウィンドウＷＷに登場人
物の向かって左側にキズがあることが見て取れる。

【００３３】ツールバーＴＢは、ユーザに操作の支援を
するためのツールを配置するエリアである。図で、「Ｆ
ｒａｍｅ（参照用）」と書かれている所のボタンによ
り、参照用ウィンドウＲＷを操作することができる。ユ
ーザは、テープレコーダのボタンを操作するのと同じイ
メージで、ポインティングデバイスなどで「再生」ボタ
ン、「巻戻」ボタンなどをクリックすることにより、任
意のフレームを参照用ウィンドウＲＷに任意のフレーム
を表示することができる。図では、１番目のフレームが
表示されていることが示されている。また、同様に「Ｆ
ｒａｍｅ（作業用）」と書かれている所のボタンによ
り、作業用ウィンドウＷＷを操作することができる。図
では、１２番目のフレームが表示されていることが示さ
れている。

【００３４】また、「Ｍｏｄｅ」のエリアにあるチェッ
クボタンは、ユーザがこれからする操作が、領域を明示
的に指定した画像補正をおこなう操作なのか、ウィンド
ウ上に基準点となるアンカーポイントを指定して画像補
正をおこなう操作なのか、ウィンドウ上に基準点となる
アンカーポイントを設定する操作なのかを指定する。

【００３５】「同位置修正」を選択した場合には、ポイ
ンティングデバイスにより、参照用ウィンドウＲＷをク
リックすると、その参照用ウィンドウＲＷの領域に対応
する作業用ウィンドウＷＷの領域が自動的に補正された
画像に置き換わることになる。

【００３６】「オフセット位置修正」を選択した場合に
は、ポインティングデバイスにより、参照用ウィンドウ
ＲＷをクリックすると、基準点となるアンカーポイント
により対応付けられた作業用ウィンドウＷＷの領域が自
動的に補正された画像に置き換わることになる。この操
作により補正をおこなうときには、前もって参照用ウィ
ンドウＲＷと作業用ウィンドウＷＷにアンカーポイント
を設定して置く必要がある。

【００３７】「アンカーポイント設定」は、「オフセッ
ト位置修正」、「位置補正」、「色補正」の場合に用い
られ基準点となるアンカーポイントを参照用ウィンドウ
ＲＷと作業用ウィンドウＷＷの双方に設定するモードで
ある。これを選択した場合には、そのウィンドウでクリ
ックした地点がアンカーポイントとなる。

【００３８】［位置補正］ボタンをクリックすると、参
照用ウィンドウＲＷと作業用ウィンドウＷＷを基準点に
より対応付けて、作業用ウィンドウＷＷの位置を参照用
ウィンドウＲＷの位置を基にして補正する。

【００３９】［色補正］ボタンをクリックすると、参照
用ウィンドウＲＷと作業用ウィンドウＷＷを基準点の色
を対応付けて、参照用ウィンドウＲＷの基準点における
色を基にして、作業用ウィンドウＷＷの色を補正する。

【００４０】［自動補正］ボタンをクリックすると、後
に説明する複数フレームの比較による映像補正のロジッ
クにより、自動的に画像に生じているノイズなどを自動
的に取り除くことができる。

【００４１】さらに、修正のする対象を選択する場合に
は、「Ｆｉｅｌｄ」のチェックボタンを利用する。これ
により、修正の対象を「フレーム単位」にするか、フィ
ールド単位で、「奇数フィールド単位」か「偶数フィー
ルド単位」にするかを選ぶことができる。

【００４２】なお、ここでは選択のユーザインターフェ
ースとして、ツールバー上のチェックボックスを例とし
て説明したが、メニューを用いるユーザインターフェー
スやマウスの右左のボタンを使い分けるなどの操作をお
こなうようにしても良い。

【００４３】［切出し領域幅設定］ボタンをクリックす
ると、図では示さないが領域修正をおこなうときの切出
し領域幅の設定するウィンドウが開きユーザは、その設
定を変更することができる。

【００４４】［終了］ボタンをクリックすると、映像補
正ソフトウェア４００が終了する。

【００４５】次に、図３および図４によりこの表示画面
により実際に画像の補正をおこなう場合の操作について
説明する。

【００４６】ユーザは、先ず、図２に示した「Ｆｒａｍ
ｅ（参照用）」エリアと「Ｆｒａｍｅ（作業用）」エリ
アのボタンにより、画像補正のために参照しようとする
フレームと、画像補正を使用といるフレームを選択し
て、それぞれのウィンドウにより表示させる（１００
１）。画像補正をおこなおうとするフレームは、画像上
にノイズや変色が認められるものであり、参照しようと
するフレームは、それらが画像上で認められない類似の
フレームである。一般的に言って、参照しようとするフ
レームと、画像補正をおこなおうとするフレームは、時
間軸上で見て近傍にあるものである。

【００４７】図４には示さなかったが必要ならば、「Ｆ
ｉｅｌｄ」のエリアのチッェクボタンにより、編集の対
象がフレームかフィールドかも選択することができる。

【００４８】同位置領域修正は、ユーザが基準点を指定
せずに、明示的に参照用ウィンドウＲＷと作業用ウィン
ドウＷＷの領域を対応付けて修正するモードである。こ
のモードは、被写体があまり動いていなくて、領域の対
応が取りやすいときに有効なモードである。

【００４９】このモードを選択するときには（１０１
０）、先ず、「Ｔｙｐｅ」を「同位置修正」にする。

【００５０】これにより、ウィンドウによる編集の操作
が領域指定になるので、図３（ａ）に示されるように作
業用ウィンドウＷＷ１のノイズのある領域をポインティ
ングデバイスなどで指定する（１０１１）。

【００５１】これにより、作業用ウィンドウＷＷ１の領
域と参照用ウィンドウＲＷ１の領域とが対応づけられ、
参照用ウィンドウＲＷ１の領域の画像データにより作業
用ウィンドウＷＷ１の画像データの補正がおこなわれる
ことになる（１００３）。

【００５２】次に、基準点を用いた領域修正の場合は、
ユーザが参照用ウィンドウＲＷと作業用ウィンドウＷＷ
に基準点を設けて、それによりそれぞれの領域を対応付
けて修正するモードである。このモードは、被写体が動
いて、しかも、被写体になにか目立って基準点となる地
点があるときに有効なモードである。

【００５３】このモードを選択するときには（１０１
０）、先ず、「Ｔｙｐｅ」を「アンカーポイント設定」
にする。

【００５４】ユーザは、このアンカーポイント設定モー
ドで、図３（ｂ）に示される様に参照用ウィンドウＲＷ
２と作業用ウィンドウＷＷ２に基準点となるアンカーポ
イントを設定する（１０２１）。この例では、人物像の
肩のあたりにアンカーポイントを設定しており、画面上
では十字のカーソルマークで表示されている。

【００５５】次に、「Ｔｙｐｅ」を「オフセット位置修
正」にする。

【００５６】ユーザは、図３（ｂ）に示される様に作業
用ウィンドウＷＷ２のノイズのある領域をポインティン
グデバイスなどで指定する（１０２２）。

【００５７】これにより、作業用ウィンドウＷＷ２内の
前に設定したアンカーポイントと領域のオフセット（相
対位置）を計算して、参照用ウィンドウＲＷ２の基準点
にそのオフセットをたすことにより対応する領域を求
め、それを基にして作業用ウィンドウＷＷ２の領域の画
像が補正される。

【００５８】次に、基準点を用いた位置補正は、ユーザ
が参照用ウィンドウＲＷと作業用ウィンドウＷＷに基準
点を設けて、それによりウィンドウ自体の位置のずれを
補正するモードである。このモードは、フィルムの撮影
時に各フレームの位置合わせが精密でないために起こる
と考えられる位置の不安定性（特に上下方向のブレ）を
補正するために用いられるモードである。

【００５９】このモードを選択するときには（１０３
０）、先ず、「Ｔｙｐｅ」を「アンカーポイント設定」
にする。

【００６０】ユーザは、このアンカーポイント設定モー
ドで、図３（ｃ）に示される様に参照用ウィンドウＲＷ
３と作業用ウィンドウＷＷ３にアンカーポイント（基準
点）を設定する（１０３１）。

【００６１】このモードでは、ウィンドウ自体の位置の
ずれを補正するものなので、上記のモードの様に領域を
指定する操作はなく、この後に、［位置補正］ボタンを
ポインティングデバイスなどで指定して、補正を実行さ
せる（１００３）。これによって、参照用ウィンドウＲ
Ｗ３の基準点と作業用ウィンドウＷＷ３の基準点がウィ
ンドウ内で同一の位置を持つ様に、作業用ウィンドウＷ
Ｗ３の位置が補正されることになる。

【００６２】次に、「基準点を用いた色補正」のモード
は、ユーザが参照用ウィンドウＲＷと作業用ウィンドウ
ＷＷに基準点を設けて、それによりウィンドウ自体の色
を補正するモードである。このモードは、フィルムの撮
影時に露光が安定していなかったり、現像時のムラ等に
より起こると考えられる全体の色味や輝度不安定性を補
正するために用いられるモードである。

【００６３】このモードは、「基準点を用いた位置補
正」（１０３０）のモードと操作は、殆ど同様である。
このモードを選択するときに（１０４０）、先ず、「Ｔ
ｙｐｅ」を「アンカーポイント設定」にする。その後の
アンカーポイントを指定する操作は同様である。

【００６４】この「色補正」のときに選ぶ基準点は、ユ
ーザが作業参照用ウィンドウＲＷ３と参照用ウィンドウ
ＲＷ３が本来同じ色を持つべき点である。

【００６５】このモードで補正を実行するときには、
［色補正］ボタンをポインティングデバイスなどで指定
して、補正を実行させる（１００３）。

【００６６】そうすると、参照用ウィンドウＲＷ３の色
を基準点を参照し、作業用ウィンドウＷＷ３の基準点で
の色のずれを計算し、そのずれを補正するように作業用
ウィンドウＷＷ３の全ての画素の点が補正されることに
なる。

【００６７】自動補正を実行するときには、補正する画
像データのファイルを指定して［自動補正］ボタンをポ
インティングデバイスなどで指定して、補正を実行させ
る（１００３）。この際には、フレームなどを指定する
必要もない。

【００６８】この操作を実行すると、以下の複数フレー
ムの比較による映像補正方法のロジックに従って、ノイ
ズのある画像データなどを補正することができる。〔複数フレームの比較による映像補正方法〕次に、図５
を用いて本発明に係る複数フレームの比較による映像補
正方法について説明する。図５は、本発明に係る複数フ
レームの比較による映像補正方法を説明するための概念
図である。

【００６９】例えば、図５に示される様に編集対象とな
る映像のフレームＦ１，Ｆ２，Ｆ３の三つのフレームを
取ってきて、Ｆ３に著しいノイズが認められ場合を考え
よう。Ｆ１，Ｆ２は、ほぼ似たようなフレームであり、
ノイズも認められないとする。

【００７０】このときに、適当な画素に関する評価値を
用いれば、Ｆ３の評価値が非常に他者と異なって値とし
て計算されることなる。この原理を利用して、このよう
な評価値を持つようなフレームに対して、補正を施せば
ノイズなどを除去することができる。補正する場合に
は、種々のアルゴリズムが可能であろうが、例えば、Ｆ
１とＦ２の画素の色情報の相加平均を取ってＦ３の画素
の色情報とすれば良い。

【００７１】この複数フレームの比較による映像補正方
法をすべての画像データのフレームに渉って自動的にお
こなうようにすれば、自動的に画像データからノイズな
どを取り除く自動補正が可能になる。そのような方法
は、ノイズが含まれるフレームの前後でほとんど被写体
が動いていない場合で、ノイズが前後フレームに同位置
に存在しない場合は、特に効果的である。

【００７２】また、図では示さないがウィンドウ上に複
数のフレームを取りこむ操作をして、複数フレームの比
較による映像補正方法をおこなうようなユーザインタフ
ェースにしても良い。〔映像補正システムのデータ構造と処理〕次に、図６な
いし図１４を用いて映像補正システムのデータ構造と処
理の詳細について説明する。先ず、図６を用いて映像補
正ソフトウェア４００を構成するモジュールの機能の概
要を説明する。図６は、映像補正システムの処理に用い
られる映像補正ソフトウェア４００のモジュール一覧を
示す図である。

【００７３】映像補正ソフトウェア４００は、所定のデ
ータテーブル４５０を参照しながら、以下の１６１から
１７６の各ルーチンを起動して処理をおこなう構造にな
っている。なお、データテーブル４５０については後に
詳説する。

【００７４】初期化ルーチン４０１は、データテーブル
４５０を初期化し、ウィンドウやメニューなどを表示す
るルーチンである。

【００７５】フレーム画像読み込みルーチン４０２は、
ハードディスク１４０の画像ファイルをデータテーブル
４５０内のフレーム画像バッファに読み込むルーチンで
ある。

【００７６】フレーム画像保存ルーチン４０３は、フレ
ーム画像バッファ内のデータをハードディスク１４０内
の画像ファイルとして保存するルーチンである。

【００７７】表示画像生成ルーチン４０４は、フレーム
画像バッファ内のデータを必要に応じて奇数、偶数フィ
ールドのみの画像に変換し、データテーブル内の表示画
像バッファに格納するルーチンである。

【００７８】フレーム画像生成ルーチン４０５は、表示
画像バッファ内の画像データから偶数フィールドおよび
奇数フィールドからなる１フレーム分の画像を生成し、
フレーム画像バッファに格納するルーチンである。

【００７９】画像表示ルーチン４０６は、表示画像バッ
ファ内の画像データをディスプレイ１３０に表示される
参照用ウィンドウおよび作業用ウィンドウに表示するル
ーチンである。

【００８０】フレーム番号設定ルーチン４０７は、参照
用ウィンドウおよび作業用ウィンドウに表示する動画像
のフレーム番号を入力するためのツールをディスプレイ
１３０に表示し、ユーザからの入力を取得するルーチン
である。

【００８１】表示モード設定ルーチン４０８は、ウィン
ドウに表示する方法として、両方のフィールドを同時に
表示するか、偶数フィールドのみを表示するか、奇数フ
ィールドのみを表示するかを選択するためのツールをデ
ィスプレイ１３０に表示し、ユーザからの入力を取得す
るルーチンである。

【００８２】操作モード設定ルーチン４０９は、ウィン
ドウに対する操作が、領域を指定して補正するか基準点
を指定するかのモードを設定するルーチンである。

【００８３】切出し領域幅設定ルーチン４１０は、ユー
ザが領域指定をおこなったときに、領域の切出し幅を入
力するためのツールをディスプレイ１３０に表示し、ユ
ーザからの入力を取得するルーチンである。

【００８４】領域補正ルーチン（同位置修正）４１１お
よび領域補正ルーチン（基準点修正）４１２は、参照用
ウィンドウから得られた画像データを元にして、作業用
ウィンドウに生じている画像を補正して、ノイズなどを
除去するためのルーチンである。

【００８５】基準点設定ルーチン４１３は、修正モード
がアンカーポイント設定モードにセットされている場合
に、ポインティングデバイス１５３により、参照用ウィ
ンドウまたは作業用ウィンドウ上がクリックされたと
き、カーソルの位置を、データテーブル４５０内のそれ
ぞれのアンカーポイント座標として格納するルーチンで
ある。

【００８６】位置補正ルーチン４１４、色補正ルーチン
４１５、自動補正ルーチン４１６は、それぞれ対応する
ボタンをマウスによりクリックされることにより起動さ
れるルーチンである。

【００８７】位置補正ルーチン４１４は、参照用ウィン
ドウを元にして作業用ウィンドウの表示位置を補正する
ルーチンである。

【００８８】色補正ルーチン４１５は、参照用ウィンド
ウを元にして作業用ウィンドウの画像表示の色を補正す
るルーチンである。

【００８９】自動補正ルーチン４１６は、いくつかの画
像を比較して、異なった値の画像データにノイズがある
ものとみなして、ノイズを除去するルーチンである。

【００９０】なお、上記ルーチンの内で、領域補正ルー
チン（同位置修正）４１１および領域補正ルーチン（基
準点修正）４１２は、位置補正ルーチン４１４、色補正
ルーチン４１５、自動補正ルーチン４１６の処理の詳細
は後述するものとする。

【００９１】次に、図７および図８を用いて映像補正ソ
フトウェア４００が参照するデータ構造について説明す
る。図７は、データテーブル４５０の内容を説明するた
めの図である。図８は、データテーブル４５０に定義さ
れたデータの中で、画像データに関する処理の流れを説
明する図である。

【００９２】操作モードＣ４５１は、ユーザのウィンド
ウに対する操作のモードを指定する変数である。１の場
合は、ポインティングデバイスにより領域が指定され
て、同位置修正がおこなわれることを意味する。２の場
合は、ポインティングデバイスにより領域が指定され
て、既に指定したアンカーポイントを基準点として、そ
の領域と基準点のオフセットを用いた領域の修正がおこ
なわれることを意味する。３の場合は、ウィンドウ上に
基準点となるアンカーポイントを設定するモードである
ことを意味する。初期値は、１とする。

【００９３】切出し領域幅Ｐ４５２は、ユーザがウィン
ドウ上で領域指定により、補正の対象となる領域を切出
すときの領域幅を表す変数である。初期値は、１０ピク
セルとする。

【００９４】表示モードＢ４５３は、参照用ウィンドウ
ＲＷ、作業用ウィンドウＷＷに表示するフィールドを指
定する変数である。１の場合には、偶数と奇数の両方の
フィールドを表示するモードであり、２の場合には、偶
数フィールドのみ、３の場合には、奇数フィールドのみ
を表示することを意味する。また、この変数の値によ
り、補正の対象とするフィールドも決定されることにな
る。初期値は、１とする。

【００９５】参照用、作業用フレーム番号Ｆｒｅｆ，Ｆ
ｅｄｉｔ４５４は、参照用ウィンドウＲＷと作業用ウィ
ンドウＷＷのそれぞれに表示される画像のフレームの番
号を表す変数である。初期値は、いずれも０とする。

【００９６】参照用、作業用アンカーポイントを示す２
次元座標Ａｒｅｆ，Ａｅｄｉｔ４５５は、基準点を用い
た領域修正、位置補正、色補正の際に指定されるアンカ
ーポイントのウィンドウ上の座標位置を示す２次元の変
数である。参照用、作業用ともに、初期値は、（０，
０）とする。

【００９７】参照用、作業用表示画像バッファＤｒｅ
ｆ，Ｄｅｄｉｔ４５６は、参照用ウィンドウＲＷと作業
用ウィンドウＷＷに表示する画像を格納するためのバッ
ファの領域を示す変数である。それぞれのウィンドウへ
の表示と修正作業をするときにこのバッファが使われ
る。

【００９８】参照用、作業用フレーム画像バッファＥｒ
ｅｆ，Ｅｅｄｉｔ４５７は、参照用ウィンドウＲＷと作
業用ウィンドウＷＷの編集対象とするフレームの画像を
格納するためのバッファの領域を示す変数である。この
バッファは、画像ファイルから読み込んだとき、また、
修正した画像データを保存するときに使われる。

【００９９】動画像ファイルを示す文字列Ｇ４５８は、
ハードディスク１４０に格納されている補正の対象とな
る画像のファイルの位置情報を示す変数である。具体的
には、例えば、コンピュータのＩＰアドレスやファイル
システムのファイルパスなどである。

【０１００】次に、図８を用いて本発明の画像補正方法
による処理とデータテーブルに定義されている画像バッ
ファ（Ｄｒｅｆ，Ｄｅｄｉｔ，Ｅｒｅｆ，Ｅｅｄｉ
ｔ）、ディスプレイのウィンドウ、画像ファイルとの関
連について説明する。

【０１０１】先ず、フレーム画像読み込みルーチン４０
２では、ハードディスク１４０に格納されている動画像
ファイル列から、動画像ファイルを示す文字列Ｇと、参
照用、作業用フレーム番号Ｆｒｅｆ，Ｆｅｄｉｔにより
１つのファイルを特定して、フレーム画像バッファＥｒ
ｅｆ，Ｅｅｄｉｔに格納する。

【０１０２】表示画像生成ルーチン４０４では、表示モ
ードＢが１の場合（両方のフィールド）は、フレーム画
像バッファＥｒｅｆ，Ｅｅｄｉｔのデータを、そのまま
表示画像バッファＤｒｅｆ，Ｄｅｄｉｔに転送する。表
示モードＢが２（偶数フィールド）の場合は、フレーム
画像バッファＥｒｅｆ，Ｅｅｄｉｔの全ての画素につい
て、垂直方向の座標が偶数の画素を隣接する下方の画素
にコピーした画像を表示画像バッファＤｒｅｆ，Ｄｅｄ
ｉｔに格納する。これにより、インタレース表示におい
て表示対象を全て偶数フィールドに限定したことにな
る。表示モードＢが３（奇数フィールド）の場合は、同
様に、フレーム画像バッファＥｒｅｆ，Ｅｅｄｉｔの全
ての画素について、垂直方向の座標が奇数の画素を隣接
する下方の画素にコピーした画像を表示画像バッファＤ
ｒｅｆ，Ｄｅｄｉｔに格納する。この場合には、インタ
レース表示において表示対象を全て奇数フィールドに限
定したことになる。

【０１０３】画像表示ルーチン１６６では、表示画像バ
ッファＤｒｅｆ，Ｄｅｄｉｔの画像データをディスプレ
イ１３０に表示されるウィンドウに転送する。これによ
り、参照用ウィンドウＲＷと作業用ウィンドウＷＷのそ
れぞれに編集対象となる画像がユーザに対して表示され
ることになる。ユーザは、参照用ウィンドウＲＷと作業
用ウィンドウＷＷに対して操作をすると補正ルーチンで
ある４１１，４１２，４１４，４１５，４１６が呼出さ
れる。これらの補正ルーチンが補正の対象とするのは、
表示画像バッファＤｒｅｆ，Ｄｅｄｉｔにあるデータで
ある。

【０１０４】フレーム画像生成ルーチン４０５では、表
示モードＢが１の場合（両方のフィールド）は、表示画
像バッファＤｒｅｆ，Ｄｅｄｉｔのデータをそのままフ
レーム画像バッファＥｒｅｆ，Ｅｅｄｉｔに転送する。
表示モードＢが２（偶数フィールド）の場合は、表示画
像バッファＤｒｅｆ，Ｄｅｄｉｔの垂直方向の座標が偶
数の画素だけをフレーム画像バッファＥｒｅｆ，Ｅｅｄ
ｉｔに転送する。表示モードＢが３（奇数フィールド）
の場合は、同様に表示画像バッファＤｒｅｆ，Ｄｅｄｉ
ｔの垂直方向の座標が奇数の画素だけをフレーム画像バ
ッファＥｒｅｆ，Ｅｅｄｉｔに転送する。

【０１０５】これらの処理により、表示モードＢに従っ
たフィールドが編集対象として補正されたことになる。

【０１０６】そして最後に、フレーム画像保存ルーチン
４０３では、フレーム画像バッファＥｒｅｆ，Ｅｅｄｉ
ｔの画像データを、ハードディスク１４０内のＧとＦｅ
ｄｉｔにより特定されるファイルに保存する。

【０１０７】次に、図９および図１０を用いて映像補正
システムの処理の概要について説明する。図９と図１０
は、映像補正システムの処理を説明するＰＡＤ図であ
る。

【０１０８】本発明の映像補正システムで、映像補正ソ
フトウェア４００を起動すると、データテーブル４５０
が初期化されて、図２に示したツールバーＴＢ、参照用
ウィンドウＲＷ、作業用ウィンドウＷＷが表示される。

【０１０９】そして、終了ボタンが押されるまで、イベ
ント待機の状態になる（２１１）。

【０１１０】この状態で、ユーザはツールバーＴＢ上の
各ツール（フレーム番号設定ボタン、チェックボタン、
コマンドボタン）を操作する。

【０１１１】ユーザが操作モード設定のチェックボタン
「Ｍｏｄｅ」をクリックしたときには（２２１）、操作
モード設定ルーチン４０９が呼出され、選択された値が
データテーブル４５０の操作モードＣに設定される。

【０１１２】［切出し領域幅設定］ボタンをクリックす
ると（２２２）、切出し領域幅の設定するウィンドウが
開き、そこで入力された値が、切出し領域幅設定ルーチ
ンによりデータテーブル４５０の切出し領域幅Ｐに設定
される。

【０１１３】フレーム番号設定ボタンをクリックすると
（２２３）、それぞれ参照用ウィンドウＲＷと作業用ウ
ィンドウＷＷのフレーム番号が、クリックしたボタンの
種類に応じて表示が変わり、フレーム番号設定ルーチン
４０７が呼出され、データテーブル４５０のＦｒｅｆ，
Ｆｅｄｉｔに設定される。

【０１１４】表示モード設定のチェックボタン「Ｆｉｅ
ｌｄ」をクリックして選択すると、表示モード設定ルー
チン４０８が呼出され、データテーブル４５０の表示モ
ードＢに値が設定される。

【０１１５】［位置補正］ボタンをクリックすると、位
置補正ルーチン４１４が呼出され、設定したアンカーポ
イントを基準にして、参照用ウィンドウＲＷの位置を基
にし、作業用ウィンドウＷＷの画像の位置が補正され
る。

【０１１６】［色補正］ボタンをクリックすると、色補
正ルーチン４１５が呼出され、設定したアンカーポイン
トの色を基準にして、参照用ウィンドウＲＷの色を基に
し、作業用ウィンドウＷＷの画像データの色データが補
正される。

【０１１７】［自動補正］ボタンをクリックすると、自
動補正ルーチン４１６が呼出され、対象としている画像
ファイルが補正され、ノイズなどが自動的に除去するこ
とができる。

【０１１８】作業用ウィンドウＷＷをクリックしたとき
には、操作モードの値により呼出されるルーチンが異な
る。

【０１１９】操作モードＣの値が１（同位置修正）のと
きには、領域補正ルーチン（同位置修正）４１１が呼出
され、作業用ウィンドウＷＷ上の現在のカーソル位置を
基準として切出した領域を、参照用ウィンドウＲＷと比
較することにより、作業用ウィンドウＷＷの画像データ
が補正される。

【０１２０】操作モードＣの値が２（オフセット位置修
正）のときには、領域補正ルーチン（基準点修正）４１
２が呼出され、それぞれ参照用ウィンドウＲＷと作業用
ウィンドウＷＷで設定したアンカーポイントを基準点と
して、領域の対応付けをすることにより、作業用ウィン
ドウＷＷの画像データが補正される。

【０１２１】操作モードＣの値が３（アンカーポイント
設定）のときには、基準点設定ルーチン４１３が呼出さ
れ、作業用ウィンドウＷＷ上に基準点となるアンカーポ
イントを設定する。

【０１２２】参照用ウィンドウＲＷにする操作は、一種
類である。すなわち、操作モードＣの値が３（アンカー
ポイント設定）のときに、基準点設定ルーチン４１３が
呼出され、参照用ウィンドウＲＷ上に基準点となるアン
カーポイントを設定する。

【０１２３】フレーム画像の設定と表示モードの設定が
おこなわれたときには、図８で示した様にフレーム画像
読込みルーチン４０２、表示画像生成ルーチン４０４が
順に呼出されてウィンドウ上の表示が書き換えられる。

【０１２４】補正ルーチンである領域補正ルーチン（同
位置修正）４１１、領域補正ルーチン（基準点修正）４
１２、位置補正ルーチン４１４、色補正ルーチン４１
５、自動補正ルーチン４１６により、補正がおこなわれ
ると、図８で示した様に、先ず、フレーム画像生成ルー
チン４０５とフレーム画像保存ルーチン４０３が呼出さ
れ、補正したデータがファイルに格納される。そしてそ
の後で、フレーム画像読込みルーチン４０２、表示画像
生成ルーチン４０４が順に呼出されてウィンドウ上の表
示が更新される。

【０１２５】以下では、本発明の映像補正方法を実現す
るのに重要な各ルーチンを取り挙げて詳細に説明してい
くものとする。

【０１２６】先ず、図１１を用いて領域補正ルーチン
（同位置修正）４１１の処理の流れについて説明する。
図１１は、領域補正ルーチン（同位置修正）４１１の処
理を説明するＰＡＤ図である。

【０１２７】領域補正ルーチン（同位置修正）４１１が
起動されるのは、操作モードＣが１（同位置修正）のと
きに、作業用ウィンドウＷＷをマウスなどのポインティ
ングデバイスのボタンでクリックしたときである。

【０１２８】このルーチンでは、ボタンが押されている
間、以下の５１１から５１５までの処理を繰り返す。

【０１２９】先ず、ポインティングデバイスのカーソル
が移動するまで待機し（５１１）、作業用ウィンドウＷ
Ｗのカーソル位置（ｘ，ｙ）を取得する（５１２）。

【０１３０】補正の対象となる領域は、このカーソル位
置（ｘ，ｙ）を中心として縦横に切出し領域幅Ｐピクセ
ルだけ取った矩形である。

【０１３１】したがって、（ｘ，ｙ）を中心とする縦横
切出し領域幅Ｐピクセルの矩形の全てのピクセル（ｕ，
ｖ）について以下の５１４と５１５の処理をおこなう。

【０１３２】すなわち、参照用表示画像バッファＤｒｅ
ｆより、（ｕ，ｖ）の色情報（ｒ，ｇ，ｂ）を取得する
（５１４）。そして、作業用表示画像バッファＤｅｄｉ
ｔの（ｕ，ｖ）の色情報を５１４で取ってきた（ｒ，
ｇ，ｂ）に置換する（５１５）。

【０１３３】これにより、ポインティングデバイスのカ
ーソル位置から求めた作業用ウィンドウＷＷの一定の領
域が、参照用ウィンドウＲＷの画像データを基にして補
正されることになる。

【０１３４】次に、図１２を用いて領域補正ルーチン
（基準点修正）４１２の処理の流れについて説明する。

【０１３５】図１２は、領域補正ルーチン（基準点修
正）４１２の処理を説明するＰＡＤ図である。

【０１３６】領域補正ルーチン（基準点修正）４１２が
起動されるのは、操作モードＣが２（同位置修正）のと
きに、作業用ウィンドウＷＷをマウスなどのポインティ
ングデバイスのボタンでクリックしたときである。

【０１３７】このルーチンでは、ボタンが押されている
間、以下の６１１から６１７までの処理を繰り返す。

【０１３８】先ず、ポインティングデバイスのカーソル
が移動するまで待機し（６１１）、作業用ウィンドウＷ
Ｗのカーソル位置（ｘ，ｙ）を取得する（６１２）。

【０１３９】補正の対象となる領域は、このカーソル位
置（ｘ，ｙ）を中心として縦横に切出し領域幅Ｐピクセ
ルだけ取った矩形である。

【０１４０】したがって、（ｘ，ｙ）を中心とする縦横
切出し領域幅Ｐピクセルの矩形の全てのピクセル（ｕ，
ｖ）について以下の６１４と６１７の処理をおこなう
（６１３）。

【０１４１】このルーチンが４１１のルーチンと異なる
のは、参照用ウィンドウＲＷと作業用ウィンドウＷＷに
設定されているアンカーポイントを基準として、補正す
る領域の座標を求めることである。そのため、領域のピ
クセル（ｕ，ｖ）が作業用ウィンドウＷＷのアンカーポ
イントからどれだけ離れているかを表すオフセット座標
（Ｏｘ，Ｏｙ）を次のように計算する（６１４）。

【０１４２】Ｏｘ＝ｕ−Ａｅｄｉｔ．ｘＯｙ＝ｖ−Ａｅｄｉｔ．ｙＡｅｄｉｔ．ｘは、ｘ座標、Ａｅｄｉｔ．ｙは、ｙ座
標を表す。

【０１４３】そして、参照用表示画像バッファにおける
対応点（ｓ，ｔ）を次のように計算する。

【０１４４】ｓ＝Ａｒｅｆ．ｘ＋Ｏｘｔ＝Ａｒｅｆ．ｙ＋Ｏｙ次に、参照用表示画像バッファＤｒｅｆより、（ｓ，
ｔ）の色情報（ｒ，ｇ，ｂ）を取得する（６１６）。そ
して、作業用表示画像バッファＤｅｄｉｔの（ｕ，ｖ）
の色情報を６１６で取ってきた（ｒ，ｇ，ｂ）に置換す
る（６１７）。

【０１４５】これにより、作業用ウィンドウＷＷのアン
カーポイントと参照用ウィンドウＲＷのアンカーポイン
トを対応付けられ、ポインティングデバイスのカーソル
位置から求めた作業用ウィンドウＷＷの一定の領域を、
画像データを基にして補正されることになる。

【０１４６】次に、図１３を用いて位置補正ルーチン４
１４の処理の流れについて説明する。図１３は、位置補
正ルーチン４１４の処理を説明するＰＡＤ図である。

【０１４７】このルーチンは、ツールバーＴＢの［位置
補正］ボタンをクリックしたときに起動されるる。な
お、この機能は、作業用ウィンドウＷＷの位置をアンカ
ーポイントを比較することにより補正するものなので、
参照用表示画像バッファは使用する必要がない。

【０１４８】先ず、設定されているそれぞれのアンカー
ポイントより参照用ウィンドウＲＷと作業用ウィンドウ
ＷＷの位置のずれを求める。このずれを表す量を位置補
正ベクトル（Ｔｘ，Ｔｙ）と言うことにする。これを計
算するには、参照用ウィンドウＲＷと作業用ウィンドウ
ＷＷのアンカーポイントの座標位置の差分を取れば良
い。

【０１４９】Ｔｘ＝Ａｅｄｉｔ．ｘ−Ａｒｅｆ．ｘＴｙ＝Ａｅｄｉｔ．ｙ−Ａｒｅｆ．ｙそして、作業用表示画像バッファＤｅｄｉｔの全てのピ
クセル（ｕ，ｖ）について以下の７１２と７１３の処理
をおこなう（７１１）。

【０１５０】先ず、作業用の表示画像バッファＤｅｄｉ
ｔより（ｕ＋Ｔｘ，ｖ＋Ｔｙ）の色情報（ｒ，ｇ，ｂ）
を取得する（７１２）。

【０１５１】そして、作業用の表示画像バッファＤｅｄ
ｉｔの（ｕ，ｖ）における色を７１２で取ってきた
（ｒ，ｇ，ｂ）に更新する（７１３）。

【０１５２】これにより、作業用ウィンドウＷＷに表示
されている画像の位置が、位置補正ベクトル（Ｔｘ，Ｔ
ｙ）分だけずらされ、作業用ウィンドウＷＷの画像の表
示位置が補正されることになる。

【０１５３】次に、図１４を用いて色補正ルーチン４１
５の処理の流れについて説明する。図１４は、色補正ル
ーチン４１５の処理を説明するＰＡＤ図である。

【０１５４】このルーチンは、ツールバーＴＢの［色補
正］ボタンをクリックしたときに起動されるる。

【０１５５】先ず、設定されているそれぞれのアンカー
ポイントより参照用ウィンドウＲＷと作業用ウィンドウ
ＷＷの色情報を取得する（８１０，８１１）。

【０１５６】参照用ウィンドウＲＷのアンカーポイント
における色情報を（ｒ０，ｇ０，ｂ０）とし、作業用ウ
ィンドウＷＷの色情報を（ｒ１，ｇ１，ｂ１）とする。

【０１５７】この機能は、作業用ウィンドウＷＷのアン
カーポイントの色情報を基準として、作業用ウィンドウ
ＷＷの色情報を補正するものなので、その色のずれを求
める。このずれを表す量を色補正ベクトル（Ｔｒ，Ｔ
ｇ，Ｔｂ）と言うことにする。これを計算するには、参
照用ウィンドウＲＷと作業用ウィンドウＷＷのアンカー
ポイントの色情報の差分を取れば良い。

【０１５８】Ｔｒ＝ｒ１−ｒ０Ｔｇ＝ｇ１−ｇ０Ｔｂ＝ｂ１−ｂ０そして、作業用表示画像バッファＤｅｄｉｔの全てのピ
クセル（ｕ，ｖ）について以下の７１２と７１３の処理
をおこなう（８１３）。

【０１５９】先ず、作業用の表示画像バッファＤｅｄｉ
ｔより（ｕ，ｖ）の色情報（ｒ，ｇ，ｂ）を取得する
（８１４）。

【０１６０】そして、作業用の表示画像バッファＤｅｄ
ｉｔの（ｕ，ｖ）における色を７１２で取ってきた
（ｒ，ｇ，ｂ）を補正した（ｒ＋Ｔｒ，ｇ＋Ｔｇ，ｂ＋
Ｔｂ）に更新する（８１５）。

【０１６１】これにより、作業用ウィンドウＷＷに表示
されている画像の色が、色補正ベクトル（Ｔｘ，Ｔｙ）
分だけ補正され、参照用ウィンドウＲＷのアンカーポイ
ントの色を基準として作業用ウィンドウＷＷの画像の色
が補正されることになる。

【０１６２】次に、図１５を用いて自動補正ルーチン４
１６の処理の流れについて説明する。図１５は、自動補
正ルーチン４１６の処理を説明するＰＡＤ図である。

【０１６３】このルーチンは、ツールバーＴＢの［自動
補正］ボタンをクリックしたときに起動されるる。ここ
で用いられるアルゴリズムは、前に説明した複数フレー
ムの比較による映像補正方法によるものである。複数フ
レームの比較による映像補正方法は、複数のフレームを
評価値により評価し異なったものを補正する方法であっ
た。ここでは、隣り合ったフレーム画像を取ってきて補
正するアルゴリズムについて説明する。画像データの全
てのフレームについて図１５のルーチンで示される補正
方法をおこなえば、画像データの全てについて自動的に
ノイズの除去などの補正がおこなえることになる。

【０１６４】先ず、自動補正用画像バッファＫ０，Ｋ
１，Ｋ２を作成し、Ｋ０に作業用フレーム番号Ｆｅｄｉ
ｔ−１の画像データを、Ｋ１に作業用フレーム番号Ｆ
ｅｄｉｔの画像データを、Ｋ２に作業用フレーム番号
Ｆｅｄｉｔ＋１の画像データを置く（９１０）。すなわ
ち、対象とするのは隣接する３画像分のデータである。

【０１６５】そして、作業用表示画像バッファＤｅｄｉ
ｔの全てのピクセル（ｕ，ｖ）について、以下の９１１
〜９２０の処理をおこなう（９１１）。

【０１６６】先ず、Ｋ０，Ｋ１，Ｋ２から（ｕ，ｖ）
における色情報（ｒ０，ｇ０，ｂ０）、（ｒ１，ｇ１，
ｂ１）、（ｒ２，ｇ２，ｂ２）を取得する（９１２）。

【０１６７】そして、各々の色の差分ｍ０，ｍ１，ｍ２
を計算する。この色の差分は、各々の色情報のいわば
「近さ」に相当する。

【０１６８】ｍ０＝｜ｒ０−ｒ１｜＋｜ｇ０−ｇ１｜＋｜ｂ０−ｂ１｜ｍ１＝｜ｒ１−ｒ２｜＋｜ｇ１−ｇ２｜＋｜ｂ１−ｂ２｜ｍ２＝｜ｒ２−ｒ０｜＋｜ｇ２−ｇ０｜＋｜ｂ２−ｂ０｜このｍ０，ｍ１，ｍ２の大小の比較により、以下のよう
に（ｒ，ｇ，ｂ）に値を代入する。

【０１６９】すなわち、ｍ０＜ｍ１かつｍ０＜ｍ２のとき（９１４）、ｒ＝（ｒ０＋ｒ１）／２，ｇ＝（ｇ０＋ｇ１）／２，ｂ＝（ｂ０＋ｂ１）／２ …（９１５）ｍ１＜ｍ２かつｍ１＜ｍ０のとき（９１６）、ｒ＝（ｒ１＋ｒ２）／２，ｇ＝（ｇ１＋ｇ２）／２，ｂ＝（ｂ１＋ｂ２）／２ …（９１７）ｍ２＜ｍ１かつｍ２＜ｍ０のとき（９１８）、ｒ＝（ｒ２＋ｒ０）／２，ｇ＝（ｇ２＋ｇ０）／２，ｂ＝（ｂ２＋ｂ０）／２ …（９１９）そして、作業用表示画像バッファＤｅｄｉｔの（ｕ，
ｖ）の色を（ｒ，ｇ，ｂ）に置換する（９２０）。

【０１７０】処理が終ったときには、９１０で取った自
動補正用画像バッファＫ０，Ｋ１，Ｋ２を廃棄する（９
２１）。

【０１７１】これにより、３つのフレームの画像データ
で色情報が異なったものは採用されず、他の二者で相加
平均を取った値を代入することになるので、ノイズなど
他のフレームと極端に異なった部分は廃棄され、画像の
補正が自動的におこなえることになる。

【０１７２】

【発明の効果】本発明によれば、デジタル画像の編集を
おこなうリニア編集システムにおいて、簡易な操作でユ
ーザに取って分かりやすい画像データの補正方法、およ
び、そのシステムを提供することができる。

【０１７３】また、本発明によれば、フィルムのブレな
どによる位置の不安定性、明るさの不安定性を簡単に修
正することができる方法を提供することができる。

【０１７４】さらに、本発明によれば、従来技術のよう
にフレーム単位だけでなく、奇数または偶数フィールド
を個別に処理できるようにして、映画フィルムからテレ
ビ信号のデータに編集する際のニーズに合った画像補正
方法、および、そのシステムを提供することができる。

【図面の簡単な説明】

【図１】本発明に係る映像補正方法を実行するシステム
のシステム構成を示す概念図である。

【図２】本発明に係る映像補正システムの表示画面を示
す図である。

【図３】本発明に係る映像補正システムにより映像の補
正をおこなっているときの状況を説明するための図であ
る。

【図４】ユーザの操作の流れを説明するための図であ
る。

【図５】本発明に係る複数フレームの比較による映像補
正方法を説明するための概念図である。

【図６】映像補正システムの処理に用いられる映像補正
ソフトウェア４００のモジュール一覧を示す図である。

【図７】データテーブル４５０の内容を説明するための
図である。

【図８】データテーブル４５０に定義されたデータの中
で、画像データに関する処理の流れを説明する図であ
る。

【図９】映像補正システムの処理を説明するＰＡＤ図で
ある（その一）。

【図１０】映像補正システムの処理を説明するＰＡＤ図
である（その二）。

【図１１】領域補正ルーチン（同位置修正）４１１の処
理を説明するＰＡＤ図である。

【図１２】領域補正ルーチン（基準点修正）４１２の処
理を説明するＰＡＤ図である。

【図１３】位置補正ルーチン４１４の処理を説明するＰ
ＡＤ図である。

【図１４】色補正ルーチン４１５の処理を説明するＰＡ
Ｄ図である。

【図１５】自動補正ルーチン４１６の処理を説明するＰ
ＡＤ図である。

【図１６】従来技術に係るノイズを除去するときの映像
の補正方法を順次示した図である。

フロントページの続きＦターム(参考） 5B057 AA20 CA08 CA12 CA16 CB08 CB12 CB16 CE02 CE11 CE20 5C021 PA17 PA58 PA62 PA66 PA79 RA16 YA00 ZA02 5C023 AA11 AA34 AA36 AA38 AA40 BA01 BA11 CA02 DA04 DA08 5C053 FA14 FA23 HA08 KA03 KA24 LA11 5C066 AA03 AA07 CA07 GA01 HA01 KA12 KD06 KE02 KE09

Claims

【特許請求の範囲】

【請求項１】コンピュータシステムにより、デジタル
化された映像データをフレーム単位で補正する映像補正
方法において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（１）前記作
業用ウィンドウに第一のフレームの画像を表示し、前記
参照用ウィンドウに第二のフレームの画像を表示するス
テップ、（２）前記作業用ウィンドウ上に表示された第
一のフレーム画像の修正する領域を指定させるステッ
プ、（３）前記作業用ウィンドウと前記参照用ウィンド
ウのフレームの画像データを対応付けをするステップ、
（４）前記（２）のステップで指定された領域の画像デ
ータを、前記（３）のステップで対応付けされた領域の
画像データにより書き換えるステップとを有し、前記（１）ないし（４）のステップをこの順におこなっ
て、前記作業用ウィンドウ上に表示された第一のフレームの
画像データを、前記参照用ウィンドウのフレームの画像
データを基にして補正することを特徴とする映像補正方
法。
【請求項２】（ａ）前記作業用ウィンドウに第一の基
準点を指定し、前記参照用ウィンドウに第二の基準点を
指定するステップを有し、前記（１）のステップの後、前記（３）のステップの前
に、前記（ａ）のステップをおこない、前記（３）のステップにおいて、対応付けを前記（ａ）
のステップで指定された第一の基準点と第二の基準点に
よりおこなうことを特徴とする請求項１記載の映像補正
方法。
【請求項３】コンピュータシステムにより、デジタル
化された映像データをフレーム単位で補正する映像補正
方法において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（１１）前記
作業用ウィンドウに第一のフレームの画像を表示し、前
記参照用ウィンドウに第二のフレームの画像を表示する
ステップ、（１ａ）前記作業用ウィンドウに第一の基準
点を指定し、前記参照用ウィンドウに第二の基準点を指
定するステップ、（１４）前記（１ａ）のステップの指
定された第一の基準点と第二の基準点の座標位置の差分
を取って、前記作業用ウィンドウに表示された第一のフ
レームの画像データの全体の位置をその差分だけシフト
させるステップとを有し、前記（１１）、（１ａ）、（１４）のステップをこの順
におこなって、前記作業用ウィンドウ上に表示された第一のフレームの
画像データの位置を、前記参照用ウィンドウのフレーム
の画像データの位置を基にして補正することを特徴とす
る映像補正方法。
【請求項４】コンピュータシステムによりデジタル化
された映像データをフレーム単位で補正する映像補正方
法において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（２１）前記
作業用ウィンドウに第一のフレームの画像を表示し、前
記参照用ウィンドウに第二のフレームの画像を表示する
ステップ、（２ａ）前記作業用ウィンドウに第一の基準
点を指定し、前記参照用ウィンドウに第二の基準点を指
定するステップ、（２４）前記（２ａ）のステップの指
定された第一の基準点と第二の基準点の色情報の差分を
取って、前記作業用ウィンドウに表示された第一のフレ
ームの画像データの色情報全体をその差分だけシフトさ
せるステップとを有し、前記（２１）、（２ａ）、（２４）のステップをこの順
におこなって、前記作業用ウィンドウ上に表示された第一のフレームの
画像データの色情報を、前記参照用ウィンドウのフレー
ムの画像データの色情報を基にして補正することを特徴
とする映像補正方法。
【請求項５】コンピュータシステムにより、デジタル
化された映像データをフレーム単位で補正する映像補正
方法において、（１００）映像データの中の対象とする
三つ以上のフレームの画像データを画像バッファに読み
込むステップ、（１０１）前記画像バッファに読み込ま
れたフレームの画像データを画素ごとに比較して、互い
の類似度を計算するステップ、（１０２）前記フレーム
の画像データの類似度の高い画像データのみを採用し
て、それらを合成するステップ、（１０３）前記合成さ
れた画像データを、対象としているフレームの新たな画
像データとするステップとを有し、前記（１００）ないし（１０３）のステップをこの順に
おこなって、フレームの画像データの相互比較により映
像データを補正することを特徴とする映像補正方法。
【請求項６】前記フレームが奇数フィールドと偶数フ
ィールドで構成されている場合に、補正の対象を奇数フ
ィールドのみとすること、偶数フィールドのみとするこ
とを選択できることを特徴とする請求項１ないし請求項
５記載のいずれかの映像補正方法。
【請求項７】コンピュータシステムにより、デジタル
化された映像データをフレーム単位で補正する映像補正
システムにおいて、この映像補正システムは、前記映像データを表示するディスプレイと、前記映像データに対する処理をおこなう中央処理装置
と、前記映像データを記憶する記憶装置と、情報を入力する入力装置とを有し、前記ディスプレイは、補正の対象となる作業用ウィンド
ウと、補正のために用いられるデータを参照するための
参照用ウィンドウとを表示する機能を有し、前記作業用ウィンドウに第一のフレームの画像を表示
し、前記参照用ウィンドウに第二のフレームの画像を表
示し、前記入力装置からの入力により、前記作業用ウィンドウ
上に表示された第一のフレーム画像の修正する領域を指
定させて、前記作業用ウィンドウと前記参照用ウィンドウのフレー
ムの画像データを対応付けをし、前記指定された領域の画像データを、対応付けされた領
域の画像データにより書き換えることにより、前記作業用ウィンドウ上に表示された第一のフレームの
画像データを、前記参照用ウィンドウのフレームの画像
データを基にして補正することを特徴とする映像補正シ
ステム。
【請求項８】さらに、前記入力装置からの入力によ
り、前記作業用ウィンドウに第一の基準点を指定し、前
記参照用ウィンドウに第二の基準点を指定させて、前記フレームの画像データの対応付けを、指定された第
一の基準点と第二の基準点によりおこなうことを特徴と
する請求項７記載の映像補正システム。
【請求項９】コンピュータシステムにより、デジタル
化された映像データをフレーム単位で補正する映像補正
システムにおいて、この映像補正システムは、前記映像データを表示するディスプレイと、前記映像データに対する処理をおこなう中央処理装置
と、前記映像データを記憶する記憶装置と、情報を入力する入力装置とを有し、前記ディスプレイは、補正の対象となる作業用ウィンド
ウと、補正のために用いられるデータを参照するための
参照用ウィンドウとを表示する機能を有し、前記作業用ウィンドウに第一のフレームの画像を表示
し、前記参照用ウィンドウに第二のフレームの画像を表
示し、前記入力装置からの入力により、前記作業用ウィンドウ
に第一の基準点を指定し、前記参照用ウィンドウに第二
の基準点を指定させて、前記指定された第一の基準点と第二の基準点の座標位置
の差分を取って、前記作業用ウィンドウに表示された第
一のフレームの画像データの全体の位置をその差分だけ
シフトさせて、前記作業用ウィンドウ上に表示された第一のフレームの
画像データの位置を、前記参照用ウィンドウのフレーム
の画像データの位置を基にして補正することを特徴とす
る映像補正システム。
【請求項１０】コンピュータシステムにより、デジタ
ル化された映像データをフレーム単位で補正する映像補
正システムにおいて、この映像補正システムは、前記映像データを表示するディスプレイと、前記映像データに対する処理をおこなう中央処理装置
と、前記映像データを記憶する記憶装置と、情報を入力する入力装置とを有し、前記ディスプレイは、補正の対象となる作業用ウィンド
ウと、補正のために用いられるデータを参照するための
参照用ウィンドウとを表示する機能を有し、前記作業用ウィンドウに第一のフレームの画像を表示
し、前記参照用ウィンドウに第二のフレームの画像を表
示し、前記入力装置からの入力により、前記作業用ウィンドウ
に第一の基準点を指定し、前記参照用ウィンドウに第二
の基準点を指定させて、前記指定された第一の基準点と第二の基準点の色情報の
差分を取って、前記作業用ウィンドウに表示された第一
のフレームの画像データの色情報全体をその差分だけシ
フトさせて前記作業用ウィンドウ上に表示された第一の
フレームの画像データの色情報を、前記参照用ウィンド
ウのフレームの画像データの色情報を基にして補正する
ことを特徴とする映像補正システム。
【請求項１１】コンピュータシステムにより、デジタ
ル化された映像データをフレーム単位で補正する映像補
正システムにおいて、この映像補正システムは、前記映像データを表示するディスプレイと、前記映像データに対する処理をおこなう中央処理装置
と、前記映像データを記憶する記憶装置と、情報を入力する入力装置とを有し、前記記憶装置に、画像バッファを取る機能を有し、前記映像データの中の対象とする三つ以上のフレームの
画像データを前記画像バッファに読み込み、前記画像バッファに読み込まれたフレームの画像データ
を画素ごとに比較して、互いの類似度を計算して、前記フレームの画像データの類似度の高い画像データの
みを採用して、それらを合成して前記合成された画像デ
ータを、対象としているフレームの新たな画像データと
して、フレームの画像データの相互比較により映像データを補
正することを特徴とする映像補正システム。
【請求項１２】前記フレームが奇数フィールドと偶数
フィールドで構成されている場合に、補正の対象を奇数
フィールドのみとすること、または、偶数フィールドの
みとすることを選択できることを特徴とする請求項６な
いし請求項１１記載のいずれかの映像補正システム。
【請求項１３】コンピュータシステムにより、デジタ
ル化された映像データをフレーム単位で補正する映像補
正方法を実行するためのプログラムを記録するプログラ
ム記録媒体において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（１）前記作
業用ウィンドウに第一のフレームの画像を表示し、前記
参照用ウィンドウに第二のフレームの画像を表示するス
テップ、（２）前記作業用ウィンドウ上に表示された第
一のフレーム画像の修正する領域を指定させるステッ
プ、（３）前記作業用ウィンドウと前記参照用ウィンド
ウのフレームの画像データを対応付けをするステップ、
（４）前記（２）のステップで指定された領域の画像デ
ータを、前記（３）のステップで対応付けされた領域の
画像データにより書き換えるステップとを有し、前記（１）ないし（４）のステップをこの順におこなっ
て、前記作業用ウィンドウ上に表示された第一のフレームの
画像データを、前記参照用ウィンドウのフレームの画像
データを基にして補正することを特徴とする映像補正方
法を実行するためのプログラムを記録するプログラム記
録媒体。
【請求項１４】（ａ）前記作業用ウィンドウに第一の
基準点を指定し、前記参照用ウィンドウに第二の基準点
を指定するステップを有し、前記（１）のステップの後、前記（３）のステップの前
に、前記（ａ）のステップをおこない、前記（３）のステップにおいて、対応付けを前記（ａ）
のステップで指定された第一の基準点と第二の基準点に
よりおこなうことを特徴とする請求項１３記載の映像補
正方法を実行するためのプログラムを記録するプログラ
ム記録媒体。
【請求項１５】コンピュータシステムにより、デジタ
ル化された映像データをフレーム単位で補正する映像補
正方法を実行するためのプログラムを記録するプログラ
ム記録媒体において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（１１）前記
作業用ウィンドウに第一のフレームの画像を表示し、前
記参照用ウィンドウに第二のフレームの画像を表示する
ステップ、（１ａ）前記作業用ウィンドウに第一の基準
点を指定し、前記参照用ウィンドウに第二の基準点を指
定するステップ、（１４）前記（１ａ）のステップの指
定された第一の基準点と第二の基準点の座標位置の差分
を取って、前記作業用ウィンドウに表示された第一のフ
レームの画像データの全体の位置をその差分だけシフト
させるステップとを有し、前記（１１）、（１ａ）、（１４）のステップをこの順
におこなって、前記作業用ウィンドウ上に表示された第一のフレームの
画像データの位置を、前記参照用ウィンドウのフレーム
の画像データの位置を基にして補正することを特徴とす
る映像補正方法実行するためのプログラムを記録するプ
ログラム記録媒体。
【請求項１６】コンピュータシステムによりデジタル
化された映像データをフレーム単位で補正する映像補正
方法を実行するためのプログラムを記録するプログラム
記録媒体において、前記コンピュータシステムのディスプレイに参照用ウィ
ンドウと作業用ウィンドウとを設け、前記作業用ウィンドウは、補正の対象となるウィンドウ
であって、前記参照用ウィンドウは、補正のために用いられるデー
タを参照するためのウィンドウであって、（２１）前記
作業用ウィンドウに第一のフレームの画像を表示し、前
記参照用ウィンドウに第二のフレームの画像を表示する
ステップ、（２ａ）前記作業用ウィンドウに第一の基準
点を指定し、前記参照用ウィンドウに第二の基準点を指
定するステップ、（２４）前記（２ａ）のステップの指
定された第一の基準点と第二の基準点の色情報の差分を
取って、前記作業用ウィンドウに表示された第一のフレ
ームの画像データの色情報全体をその差分だけシフトさ
せるステップとを有し、前記（２１）、（２ａ）、（２４）のステップをこの順
におこなって、前記作業用ウィンドウ上に表示された第一のフレームの
画像データの色情報を、前記参照用ウィンドウのフレー
ムの画像データの色情報を基にして補正することを特徴
とする映像補正方法を実行するためのプログラムを記録
するプログラム記録媒体。
【請求項１７】コンピュータシステムにより、デジタ
ル化された映像データをフレーム単位で補正する映像補
正方法を実行するためのプログラムを記録するプログラ
ム記録媒体において、（１００）映像データの中の対象
とする三つ以上のフレームの画像データを画像バッファ
に読み込むステップ、（１０１）前記画像バッファに読
み込まれたフレームの画像データを画素ごとに比較し
て、互いの類似度を計算するステップ、（１０２）前記
フレームの画像データの類似度の高い画像データのみを
採用して、それらを合成するステップ、（１０３）前記
合成された画像データを、対象としているフレームの新
たな画像データとするステップとを有し、前記（１００）ないし（１０３）のステップをこの順に
おこなって、フレームの画像データの相互比較により映
像データを補正することを特徴とする映像補正方法を実
行するためのプログラムを記録するプログラム記録媒
体。
【請求項１８】前記フレームが奇数フィールドと偶数
フィールドで構成されている場合に、補正の対象を奇数
フィールドのみとすること、偶数フィールドのみとする
ことを選択できることを特徴とする請求項１３ないし請
求項１７記載のいずれかの映像補正方法を実行するため
のプログラムを記録するプログラム記録媒体。