JP2002542741A - 映像信号のデインタレース - Google Patents

映像信号のデインタレース

Info

Publication number
JP2002542741A
JP2002542741A JP2000613205A JP2000613205A JP2002542741A JP 2002542741 A JP2002542741 A JP 2002542741A JP 2000613205 A JP2000613205 A JP 2000613205A JP 2000613205 A JP2000613205 A JP 2000613205A JP 2002542741 A JP2002542741 A JP 2002542741A
Authority
JP
Japan
Prior art keywords
pixels
line
pixel values
lines
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000613205A
Other languages
English (en)
Inventor
マイケル ティンカー,
グレン アーサー レイトメイアー,
Original Assignee
サーノフ コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by サーノフ コーポレイション filed Critical サーノフ コーポレイション
Publication of JP2002542741A publication Critical patent/JP2002542741A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal

Abstract

(57)【要約】 インタレース画像フィールドをデインタレースしてノンインターレース画像フレームを得ることは、各画像フィールドの空白線を除去し110、かつ各画像フィールドの残りの線の画素の2分の1を除去し120、それによって、半数の線(つまり約2分の1の垂直解像度)および半数の画素(つまり約2分の1の水平解像度)を持つ画像フレームを得ることを含む。空白線の除去は、空白線の位置の線の画素値を隣接する線の画素値から補間し、補間された線を維持し、隣接する線を除去し、それによって隣接する画像フィールド間の2分の1の線位置差によって生じる垂直ジッタを実質的に減少することを含むことができる。本発明は、そのようなデインタレース構成の実現を大幅に簡素化するという利点を持つ。

Description

【発明の詳細な説明】
【0001】 本出願は、1999年4月19日に出願された米国仮出願第60/129,9
34号の特典を請求する。
【0002】
【発明の属する技術分野】
本発明は、映像信号のデインタレース(de-interlacing)に関する。
【0003】
【従来の技術】
動画像は、フィルムから生成されるか、電子映像情報から生成されるかにかか
わらず、順次投影される一連のフレームの画像情報、つまり制御された速度で進
行する一連の静止画像を備えている。映像は、視聴者が個々のフレーム映像のち
らつきを知覚しないように充分高い速度で、例えば毎秒60フレームで表示され
る。
【0004】 技術、帯域幅、またはその他の制限のため、情報を全速で伝送することができ
ない場合、映像を受入れ不可能な程度にまでは劣化しない、低い速度で情報を伝
送する方法が使用される。歴史的にテレビジョン信号は、画像の情報の視聴者の
知覚を高めるために、インタレース形式で符号化されてきた。例えば、NTSC
方式で伝送されるテレビジョン信号は、毎秒60のインタレースフィールドを含
み、連続する2つのフィールドで、一般的に4:3の横対縦のアスペクト比の1
つの完全なフレームの画像情報を形成する。インタレース形式とは、図1の2つ
の連続インタレースフィールドの簡略図にあるように、画像情報の各フレームが
2フィールドの画像情報に分割され、各フィールドがフレーム内の画像情報の線
の半分を含むことを意味する。例えばNTSC方式では、各フレームは480本
の水平線で捕捉され、各フィールドで240本が伝送される。つまり、1つのフ
ィールドで偶数番号の線が伝送され、次の連続フィールドで奇数番号の線が伝送
され、等々となる。図解のため、図1にはより少数の線を示す。
【0005】 デジタルビデオ用のATSC標準をはじめ、多くの新しい映像標準は、それが
提供する表示品質上の利点のため、インタレース画像を利用する。他方、コンピ
ュータモニタおよび特定の高品位テレビジョンなど現代のディスプレイ装置は、
画像が線またはフィールドをインタレースすることなく一連のフレームとして表
示される、順次走査を採用している。つまり、各フレームが映像の全ての水平線
を含む。したがって、順次ディスプレイは、同等のインタレースディスプレイの
2倍の数である、毎秒60フレームの速度で1フレームにつき480本の水平線
を表示する。
【0006】 インタレース画像符号化形式で受信した映像を順次走査ディスプレイに表示す
るには、インタレース映像信号の順次映像信号への変換、つまりインタレース画
像から一連の順次画像を形成することが必要である。全解像度での(つまり画像
の細部の損失がない)そのような変換に関連する問題は、結果的に得られる順次
画像がインタレース画像に含まれる情報の2倍の量の情報を必要とすること、お
よびフィールドの映像情報(フィールドメモリ)およびフレームの映像情報(フ
レームメモリ)を格納するために、厖大なメモリが必要なことである。また、映
像データの1つの形式から他の形式への変換は計算集約的であり、映像データの
様々な補間およびその他の組合せを、一般的に1フィールドにつき数百万回行な
わなければならない。
【0007】 そのような全解像度変換を実行する装置は、非常に複雑かつ高価である。変換
計算によって処理したときに、しばしば不快なアーチファクトつまり2つの場所
に現れる物体あるいはスミアパターンまたは擾乱パターンを発生させるフィール
ド間の画像の移動のため、追加的問題も起こる。従来の解決策は、これらの問題
を克服しようと試みるにあたって変換プロセスの複雑さを増加させ、したがって
その費用を増大させる傾向がある。
【0008】 主要ソフトウェア会社によって提案された“bob”デインタレース技術の例
のように、いわゆる“簡素化”デインタレース方式が提案された場合でさえも、
プロセスが計算集約的であることに変わりはない。“bob”技術では、各フィ
ールドの空白線は消去されるが、その後、線の半数の消去により失われた垂直解
像度および縦横比を回復する試みの中で“欠落した”線を埋めるために、“2倍
ズーム(times-two zoom)”プロセスによって復元することが事
実上求められる。これは、“欠落した”線の各画素をそれに隣接する2本の線の
画素値から計算する、計算集約的プロセスを必要とする。さらに、各水平線の全
画素内容が維持され、それによって、各水平線の全画素内容のためのメモリスト
レージを含めて少なくとも全フィールドメモリ、あるいは高速実時間補間計算が
提供されない場合には全フレームメモリが要求される。
【0009】
【発明が解決しようとする課題】
したがって、インタレース画像フィールドをノンインターレース画像フレーム
に変換するための簡素化された方法が必要である。結果的に得られる画像フレー
ムの解像度が低下しても、そのような方法は計算の簡素化という利点をもたらす
ことが望ましい。
【0010】
【課題を解決するための手段】
この目的のために、本発明の一連のインタレース画像フィールドを一連のノン
インターレース画像フレームに変換する方法は、各画像フィールドの各空白線を
除去し、それによって、各画像フィールド内で空白線と交互に存在し一連の画素
を含む各画像フィールドの各線を維持することと、各画像フィールドの各維持線
の前記一連の画素のうち半数の画素を除去することと、を備える。
【0011】 本発明の別の態様によると、一連のインタレース画像フィールドを一連のノン
インターレース画像フレームに変換する機械可読コンピュータ命令で符号化され
る記憶媒体は、コンピュータに各画像フィールドの各空白線を除去させ、それに
よって、各画像フィールド内で空白線と交互に存在し一連の画素を含む各画像フ
ィールドの各線を維持する手段と、コンピュータに各画像フィールドの各維持線
の前記一連の画素のうち半数の画素を除去させる手段と、を備える。
【0012】
【発明の実施の形態】
本発明の好適な実施形態の詳細な記述は、図面と併せて読むと、いっそう容易
に、かつより深く理解されるであろう。
【0013】 図2は、本発明に係るデインタレース構成の略ブロック図であり、これは、簡
素化された計算プロセスを実現することが望ましく、かつ全フィールド格納メモ
リまたは全フレーム格納メモリの必要性を避けることが望ましい。プロセスは、
交互に存在し、合わせて1つの画像フレームを構成する、インタレース画像フィ
ールドAおよびインタレース画像フィールドBと識別される一連の画像フィール
ドを含む、インタレース原画像信号100で始まる。例えば図1に示すように、
インタレース画像フィールドAは画像の奇数番号の線を含み、インタレース画像
フィールドBは画像の偶数番号の線を含む。完全な画像は、例えば交互の画像フ
ィールドA−B−A−B−A−B・・・の連続によって提供される。インタレー
ス画像フィールドAおよびBの各々の交互の線だけが実際に映像または画像情報
、つまり値を持つ画素を含むので、それらの間の線は映像または画像情報、つま
り画素値を含まず、空白線と呼ばれる。空白線(つまりフィールドAの偶数番号
の線およびフィールドBの奇数番号の線)は除去または消去され110、画素情
報を含む線だけが残る。全解像度で完全な線に対して全画素数を含む残りの線は
、2分の1に収縮される120。線がアナログ映像画素を含む場合、線の“収縮
”は、アナログ信号が通常標本化される率の2分の1の標本化率で規則的な時間
間隔で、アナログ信号を標本化することによって行われる。線がデジタル映像画
素を含む場合、つまり線が画素値を表す一連のデジタル語である場合、デジタル
語の2分の1が除去または消去される。1つおきのアナログ標本またはデジタル
語、つまり交互の画素を維持することが好ましい。
【0014】 例えば、毎秒60フィールドの速度で線240本×720画素の2つのインタ
レースフィールドから形成される標準精細度NTSCインタレース画像は、毎秒
30フレームの速度で線480本×720画素のインタレースフレームを生成す
る。従来のノンインターレースまたは順次走査への完全変換では、標準精細度N
TSCインタレースフィールドは、毎秒60フレームの速度で順次走査される線
480本×720画素のフレームに変換される。本発明による上述の変換では、
標準精細度NTSCインタレースフィールドは、毎秒60フレームの速度で線2
40本×360画素のフレームに、つまり標準NTSC画像より高いフレーム速
度であるが、縮小された解像度で変換される。
【0015】 ここで使用する場合、画像および/または情報は、画像フィールドまたはフレ
ームとしてインタレース形式であるかノンインターレース形式であるかにかかわ
らず、ディスプレイ装置に表示されるものに関して相互に置換可能に使用され、
静止画像か動画像かにかかわらず、カメラ、コンピュータ、またはその他の発生
源のいずれによって生成されたかにかかわらず、真実か、具象か抽象か、あるい
は随意かにかかわらず、英数字または数学的表記法などの記号または文字を含む
か否かにかかわらず、白黒、モノクローム、ポリクローム、またはフルカラーの
いずれで表示されるかにかかわらず、視覚的イメージおよび映像を含み、ただし
それのみに限定されず、ユーザが希望する幅広い様々なディスプレイの全てを包
含するように意図されている。
【0016】 一般的に、画像に不快なアーチファクトを引き起こす望ましくないエーリアシ
ングを生じることなく、垂直および水平方向の各々で画像を適切に縮小するため
に、垂直および水平方向の両方で画像の低域フィルタリングを実行して、そのよ
うなエーリアシングを発生させる信号の高周波数成分を除去する必要がある。し
かし、今日生成される映像の大部分は、そのようなフィルタリングを行うことな
く、容認される品質の画像を得ることができる。高い時間周波数および空間周波
数が存在する場合、例えば非常に高速で移動する尖鋭なエッジが発生するときに
は、フィルタリングされていない画像にアーチファクトが形成されることがある
。相対的に低い周波数が存在する画像、例えば、動きの遅いまたは静止した物体
の画像では、エーリアシングは最小限である。
【0017】 前述の方法は、一連のインタレース画像フィールドを、原インタレース画像ま
たは同等の順次走査画像の約2分の1の垂直解像度および2分の1の水平解像度
を有する一連のノンインターレースまたは順次走査画像フレームに充分に変換す
る。結果的に得られる連続したノンインターレース画像フレームは、テレビジョ
ンまたはテレビジョン型ディスプレイ、あるいはコンピュータモニタまたはディ
スプレイ、あるいは類似物のいずれにおけるかにかかわらず、特定のテレビジョ
ンで行われるような、ときどき“ピックス−イン−ピックス(pix−in−p
ix)”と呼ばれる、より小さい画像をずっと大きい画像のディスプレイに挿入
するなどの特定の適用分野に、またはコンピュータディスプレイまたは安価なビ
デオカムコーダのビューファインダに見られるような小型スクリーンディスプレ
イにおけるテキストページ内の画像に適しており、垂直ジッタが視聴者にとって
明らかとなるような他の適用分野には適さないかもしれない。この理由は、2つ
の連続するインタレース画像フィールドAおよびBの一部分の連続する線の相対
的空間位置を示す線図である、図3を考察することによって理解することができ
る。
【0018】 図3で、奇数番号の線だけを含むフィールドAは画素情報を含む線a、b、c
、d、eを含み、画素情報を含むフィールドBの対応する偶数番号の線a、b、
c、d、eから垂直方向にわずかにずれている。インタレース画像として表示さ
れたとき、フィールドAの線はフィールドBの空白を埋め、フィールドBの線は
フィールドBの空白を埋め、画像フレームを完成する。空白線の除去110によ
って収縮し、画像フレームとして表示した場合、フィールドAおよびBの線は事
実上、線の2分の1づつ偏移または位置ずれし、したがってフレーム画像は、フ
レーム間で、例えば毎秒60回といったフレーム速度で、線の2分の1の寸法だ
け上下に移動する。この垂直移動が観察者に知覚されるほどディスプレイが大き
い場合、その移動は不快とみなされるかもしれず、したがって除去することが望
ましい。
【0019】 図4は、1つの画像フィールドの一部の一連の画素を含む線、また上述の垂直
ジッタを引き起こす線の約2分の1の空間偏移または位置ずれを除去する、その
変換の相対的空間位置を示す線図である。適切な変換(またはフィルタリング)
は、簡単な平均化などによって、2つのNTSCインタレースフィールドのうち
の一方の2つの隣接する線の画素を補間し、それらの代わりに平均線を使用する
ものである。変換が例えば図4のようにフィールドBの線で行われる場合、平均
化による補間は、フィールドBの隣接する線aおよびbの値を加算し、和を2で
割ることによって行われ、その結果が、変換またはフィルタリング後のフィール
ドBの平均線a´である。同様に、フィールドBの線bおよびcは同じく平均化
されて、変換フィールドBの平均線b´を生じる。
【0020】 線の各々に沿って対応する水平方向の位置における画素の値が変換されて、変
換後の線のその特定位置における画素の画素値を生じることが好ましい。また、
画素値の変換は、水平線に沿った画素数を削減し、それによって変換される画素
値の数を削減した後で行うことが好ましい。アナログ映像情報の場合、隣接する
線の画素値は、入力信号の和を2分の1に減衰したものを出力として提供する、
抵抗器ネットワークなどの加算ネットワークによって平均化することができるが
、各隣接線の画素値からの貢献が均等に加重される限り、減衰は2または特定の
値である必要はない。デジタル映像情報の場合、隣接する線の対応する水平方向
の位置における画素を表すデジタル語の画素値をデジタル加算し、次いで2で割
る。また、空白線の除去は、各線の画素数の削減より先に行うことが好ましい。
【0021】 したがって、画素情報を含む隣接する線、つまり交互インタレースフィールド
の交互の線に対応する画素の値は、補間などによって、例えば平均化によって変
換され、非変換フィールドの線から垂直方向の線間隔の約2分の1だけ垂直方向
に偏移された、画素情報を含む新しい線が生成される。交互に1つおきのインタ
レースフィールドから導出された変換後の線を含むフレームが、残りのインタレ
ースフィールドから導出された非変換フレームと交互に表示されたとき、各フレ
ームは、水平方向および垂直方向の両方で、先行フレームおよび後続フレームと
適切に整列する。適切に整列した線により、映像は、原インタレース映像信号の
フィールド速度(例えば毎秒60)で、ただし、水平方向および垂直方向に2分
の1の解像度で、ノンインターレース(つまり順次走査)画像フレームとして表
示することができる。
【0022】 インタレース画像フィールドをノンインターレース画像フレームに変換する際
に実行する演算の回数が実質的に削減されることと、削減された画素数にこれら
の演算を実行することと、また必要な演算が非常に簡単であることによって、本
発明から特定の利点が得られる。先行技術のデインタレース方式は、水平方向に
全ての画素を維持し、全てのインタレースフィールドの全ての空白線を補間線で
埋めて垂直方向に補間して、“ズームした”または全解像度のノンインターレー
スのフレームを生成するので、これらの利点をもたらすことができない。例えば
、結果的に得られる画像は、先行技術の“bob”方式で“補間重複方法を用い
て垂直方向に2倍(2×)にズームしなければならない”。
【0023】 本発明のこれらの利点は、本発明を、従来のマイクロプロセッサのアーキテク
チャの一部に見られるような、単一命令複数データ(SIMD)コンピュータア
ーキテクチャを利用して実現するのに特にふさわしいものにする。SIMDプロ
セッサ(コンピュータ)は、他の並列プロセッサと同様に、複数のデジタルデー
タに同時並列演算を実行するように構成される。したがって、本書で交互のイン
タレース画像フィールドの隣接する線の画素値のフィルタリングまたは変換につ
いて述べたように、インタレース映像情報のデインタレースにおける複数の画素
値の変換は、複数の画素に同時に行われる。
【0024】 例えば、8バイトのデジタル情報に対し同時に並列演算を実行するプロセッサ
は、各々720画素を含む2本の線を、わずか90回の演算サイクルで360画
素を含む単一の線に変換(例えば平均化)することができる。この場合、画素数
の2分の1の削減120は変換演算の前に生ずる。変換演算では、プロセッサは
、各プロセッサ演算サイクル中に8個の画素に平行して演算を行うので、各組の
画素に2サイクル(例えば1サイクルをADD演算、1サイクルをSHIFT演
算)を行うと、結果的に1本の線につき必要な演算サイクルは90回となる。こ
の変換を、毎秒、30の交互フィールドの240本の線に実行するためには、毎
秒240×30×90=648,000回の演算が必要なだけであり、これは毎
秒数億回の演算サイクルで作動するプロセッサにとっては、非常に小さい演算数
であり、したがって本発明は、例えばコンピュータまたはデジタルテレビ受像機
内のマイクロプロセッサなど、他の作業に従事するプロセッサの背景処理として
実行するのに有利である。パイプラインアーキテクチャの各変換を処理するため
には、4つのサイクル、例えばFETCH(取り出し)、ADD(加算)、SH
IFT(桁移動)、およびSTORE(格納)が必要になるかもしれず、これら
は、変換データが4つのサイクルに利用可能になる時間を遅らせるが、計算サイ
クル数は増加させないことが注目される。
【0025】 図5は、図4の画像フィールドBなど、インタレース画像フィールドの2つの
隣接する画素包含線を変換する処理演算の表現を示す線図である。図5に示す画
素情報を含む線の部分において、各方形は水平方向の画素数の削減120後の画
素値を表しており、したがって交互位置の画素のみ、例えば偶数番号の画素が残
っている。したがって、線aおよびbは各々、偶数番号の画素40a、42a、
44a...、54aおよび40b、42b、44b...、54bを含む。特
に、8個の画素が8バイト並列プロセッサによって並列で処理される状態が示さ
れている。
【0026】 線aおよびbの各々の8個の画素の画素値は一つに加算されて、それらの8個
の和を生成し、それらは、線aおよびbの画素値が8ビットデジタル語の場合、
オーバフロービット位置が必要であるため、8個の9ビットの和を生成する。8
個の和は次に、例えば純粋(8−4−2−1)または変形バイナリ、2の補数、
2進化10進数、グレイコード等々、利用される特定の形式の2進符号化に適し
た方法で、各々2で除算される。2による除算は、例えば値が純粋バイナリ(つ
まり8−4−2−1)ビット加重で表される場合、各和を1ビットづつ右に桁移
動するのと同様に簡単である。1ビット右に桁移動することは、単純に、各値の
最下位ビット(LSB)が脱落し、9ビット語のうちの残りの8個の最上位ビッ
ト(MSB)を8ビットの商として使用することであることに注意されたい。そ
の結果は、インタレース画像フィールドの2つの隣接線のそれぞれの8バイト部
分から並列して生成された、処理後または変換後の画素値40´、42´、44
´...、54´の最終線の8バイト部分である。
【0027】 本発明は、コンピュータ実現プロセス(単数または複数)として、および/ま
たはそのようなコンピュータ実現プロセス(単数または複数)を実現する装置と
して具現化することができ、またコンピュータプログラム又はその他の機械可読
命令(ここでは“コンピュータプログラム”という)を含む有形記憶媒体の形で
具現化することもでき、ここでコンピュータプログラムがコンピュータまたはそ
の他のプロセッサ(ここでは“コンピュータ”という)にロードされ、かつ/ま
たはコンピュータによって実行されるときに、コンピュータは本発明を実施する
装置になる。そのようなコンピュータプログラムを含む記憶媒体として、例えば
、フロッピー(登録商標)ディスクおよびディスケット、コンパクトディスク( CD)−ROM(書込み可能か否かにかかわらず)、DVDデジタルディスク、 RAMおよびROMメモリ、コンピュータハードドライブおよびバックアップド ライブ、ならびにコンピュータによって読取り可能なその他の任意の記憶媒体が ある。本発明はまた、例えば記憶媒体に格納されるか、それとも導電体、光ファ イバ、またはその他の光伝導体などの伝送媒体により、または電磁放射によって 伝送されるかにかかわらず、コンピュータプログラムの形で具現化することもで き、その場合、コンピュータプログラムはコンピュータにロードされ、かつ/ま たはコンピュータによって実行されるときに、コンピュータは、本発明を実施す る装置になる。本発明は、特に本発明を実施するように構成された汎用マイクロ プロセッサまたはデジタルプロセッサ上に実現することができる。汎用マイクロ プロセッサを使用する場合、コンピュータプログラムコードは、特定の論理回路 構成を形成するようにマイクロプロセッサの回路を構成する。
【0028】 図6Aは、コンピュータまたはプロセッサ210を使用する実施形態200に
おける本発明の実現のブロック図である。全てコンピュータ210の制御下で、
60Hzのフィールド速度で入力するインタレース映像信号は、アナログ・デジ
タル(A/D)変換器220に加えられ、これは一連のデジタル語を含むそれら
の標本化されたデジタル表現を生成し、これはアドレス指定可能なメモリ240
に格納される。コンピュータ210は、中央処理装置(CPU)212および従
来通り並列データ処理を行う演算論理回路(ALU)214を含む。図6Aの細
い矢印は、制御のためにコンピュータ210のCPU212によって生成される
クロック信号、制御信号、およびメモリアドレスのための信号路を表し、太い両
端矢印は、メモリ240によって生成され、コンピュータ210のALU214
に提供されるデジタルデータ語、およびALU214によって生成され、格納す
るためにアドレス指定可能なメモリ240に提供されるデジタルデータ語のため
のデータバスを表す。選択された画素値を表す処理後のデジタル語は、全て本発
明に従って、CPU212によって呼び出されるアドレス指定可能なメモリ24
0のメモリアドレス場所から生成され、アナログ順次映像信号出力をそこから生
成するデジタル・アナログ(D/A)変換器230に加えられる。
【0029】 SIMD並列処理能力を含むコアを有する市販のプロセッサとして、インテル
・ペンティアムRII及びインテル・ペンティアムRIIIマイクロプロセッサ、
並びにMMX命令セットを実行する同等のプロセッサのみならず、モトローラG
4パワーPC型のマイクロプロセッサ、およびその他の任意のプロセッサがある
が、背景で並列処理演算を実行するデジタル信号処理エンジンを含むものが好ま
しい。各プロセッサにおいて、本発明によるデインタレース処理は、本発明の方
法を実行するようにプロセッサを構成するソフトウェアプログラムの制御下で実
行することができる。実際、本発明の演算は、計算集約性が先行技術のデインタ
レース方式よりずっと低いので、本発明によるデインタレースは、プロセッサの
主要機能の背景操作として有利に実行されることができ、したがって追加ハード
ウェアが必要なく、それによって追加の複雑さ及びコストが回避される。
【0030】 図6Bは、デジタル映像データの処理を示す、図6Aのコンピュータ実施形態
200のメモリ240の実現の概念的ブロック図である。A/D変換器220か
らのインタレース映像信号の画素値を表すデジタル語は、インタレースフィール
ドAからのものである場合にはフィールドメモリ242aに、インタレースフィ
ールドBからのものである場合にはフィールドメモリ242bに格納される。フ
ィールドメモリ242a、242bは、例えばNTSCビデオシステムでは、各
々720個の8ビット画素の水平線480本を格納するのに充分なアドレス指定
可能な記憶場所を有する、各々アドレス指定可能なランダムアクセスメモリ(R
AM)である。インタレースフィールドの線は1つおきに空白であり、つまり画
素情報が含まれないので、空白線は無視され、非空白線からの画素値が、インタ
レースフィールドAからのものである場合には、半フィールドメモリ244aに
、インタレースフィールドBからのものである場合には、半フィールドメモリ2
44bに転送される。各半フィールドメモリ244a、244bは、NTSCビ
デオの場合、各々720個の8ビット画素の水平線240本を格納するのに充分
なアドレス指定可能な記憶場所を有するアドレス指定可能なRAMである。
【0031】 メモリ244a、244bに格納された各線の映像画素は、それぞれ水平方向
のフィルタリングが行われて、半分の画素数を持つ映像データの線を生成し、イ
ンタレースフィールドAからのものである場合には1/4フィールドメモリ24
6aに、インタレースフィールドBからのものである場合には1/4フィールド
メモリ246bに格納される。各1/4フィールドメモリ246a、246bは
、NTSCビデオの場合、各々360個の8ビット画素の水平線240本を格納
するのに充分なアドレス指定可能な記憶場所を有するアドレス指定可能なRAM
である。さらに、上述の1/2線の垂直ジッタを解消するために、フィールドの
1つからの線に垂直方向のフィルタリングも行う。図6Bで、インタレースフィ
ールドBからの隣接線が1/4フィールドメモリ246bから検索され、垂直方
向のフィルタリングが行われて置換線が生成され、これは1/4フィールドメモ
リ248に格納される。図6Bのデータの流れを表す矢印は、メモリ200内の
1つのメモリから次のメモリを直接指し示しているが、1つのメモリによって生
成されたデジタル画素データは、実際にはALU214に転送され、そこで水平
または垂直フィルタリングが行われ、それから再びメモリ200内の次のメモリ
に転送されて格納されることがある。1/4フィールドメモリ248は、NTS
Cビデオの場合、各々360個の8ビット画素の水平線240本を格納するのに
充分なアドレス指定可能な記憶場所を有するアドレス指定可能なRAMである。
最後に、インタレースフィールドAおよびBから導出された処理後の線は、メモ
リ246aおよび248から交互に結合ノード250に生成される。結合ノード
は、メモリ246aおよび248の出力がいわゆるトライステート型である場合
には単純接続とすることができ、トライステート型でない場合には、一緒に合わ
せて順次映像信号出力を提供するために、マルチプレクサとすることができる。
例えばNTSCビデオでは、各々360画素の線240本を有する順次映像フレ
ームは、60Hzのフレーム速度で生成される。
【0032】 メモリ200の現実的実現では、より少量のメモリが利用されることに注意さ
れたい。例えば、コンピュータ210がメモリ200をアドレス指定して制御し
、A/D変換器220からの入力デジタル画像データの線を1つおきにのみ格納
し、それによって、空白線の画素位置のデータを単に格納しないことにより空白
線を除去し、希望する線のみを半フィールドメモリ244a、244bに直接格
納する場合、フィールドメモリ242a、242bは除去することができる。さ
らに、水平方向のフィルタリングが画素を1つおきに除去することを含む場合に
も、半フィールドメモリ244a、244bを除去することができ、その場合コ
ンピュータ210がメモリ200をアドレス指定して制御し、A/D変換器22
0からの入力デジタル画像データの線を1つおきにのみ格納し、それによって、
空白線の画素位置のデータを単に格納しないことにより空白線を除去し、希望す
る線の1つおきの画素のみを1/4フィールドメモリ246a、246bに格納
する。したがって、メモリ200の機能は、各々360画素の線240本、つま
り合計して360個の8ビットの画素の線720本の3/4フィールドメモリの
みによって提供することができ、これは従来のデインタレース構成に要求される
よりかなり小さいメモリである。実際には、より洗練されたメモリ制御およびア
ドレス指定により、メモリ246bおよび248の機能は、2つの1/4フィー
ルドメモリおよび幾つかの線メモリのみによって、つまり合計して各々360画
素の線484本のみによって提供することができる。垂直方向のフィルタリング
または両方でより洗練されたフィルタリングが使用される場合、追加メモリ及び
/又はより洗練されたメモリアドレス指定および制御が使用される。
【0033】 図7は、本発明の方法を示す流れ図である。この方法は、デジタル映像形式で
あることが好ましいが、アナログ映像かデジタル映像形式かにかかわらず、イン
タレース映像フィールドを受け取り300、かつ各インタレース映像フィールド
から空白線を除去する310のことを含む。空白線の除去310は、1つおきの
線つまり空白線を単に脱落することを含むか、あるいは隣接する非空白線のフィ
ルタリングを含むことができ、そうしたフィルタリングは線の補間、平均化、脱
落、および類似物を含むことができる。したがって、各々480本の線のインタ
レースフィールドは、NTSC形式では、各々240本の線のフィールドに削減
される。各インタレースフィールドの維持された非空白線をフィルタリングして
320、水平方向のその画素の数を2分の1だけ減少することは、1つおきの画
素つまり偶数番号または奇数番号の画素を単に脱落することを含むか、または隣
接する画素をフィルタリングすることを含み、そのようなフィルタリングは、交
互の画素の補間、平均化、脱落、および類似物を含むことができる。維持すべき
画素の値、ならびに直前および直後の画素の値を例えば平均化によって補間して
、維持する画素の値を入手し、それによって1つおきの画素を単に脱落すること
によって得られる結果より大幅に細部を保持し易くすることが好ましい。したが
って、各々720画素のNTSC線は、各々360画素の線に削減される。1つ
のインタレースフィールド、例えばフィールドBをフィルタリングして330、
それらの線を他のフィールド、例えばフィールドAの対応する線と整列させ、そ
れによって、インタレースフィールドの線の交互に現れる性質によって生じる1
/2線の垂直ジッタを除去することにより、受け取ったインタレース映像のフィ
ールド速度と同一フレーム速度で、順次またはノンインターレース映像フレーム
が生成される340。フィルタリング330は、1つのインタレースフィールド
の2つの隣接する非空白線に沿った同様の位置の画素の値を補間して、同じフィ
ールドで補間される2つの線の間に位置する1本の線に沿った同じ位置の画素の
値を生成することが好ましい。そのような補間が、隣接する線に沿って対応する
位置の2つの画素の値を平均化することを含むことも、また好ましい。
【0034】 本発明を、上記の例示的な実施形態に関連して説明したが、請求の範囲によっ
て規定する本発明の範囲および精神内の変形は当業者には明らかであろう。例え
ば、各フィールドからの空白線の除去は、2本またはそれ以上の線の画素値を格
納し、各線に沿った画素値の半分を除去し、かつ加算または平均化、またはその
他の方法でフィルタリングまたは補間するなどによって、交互のフィールドの隣
接する線の画素値を変換するように構成された特定のハードウェアのみならず、
そのような機能を提供するように構成された特定のハードウェアでも実行するこ
とができる。特に、画素値の格納および各線の交互の画素値の除去は単に、特定
の水平線の8ビット画素値をそのデータ入力で受け取り、かつ入力データ語をそ
のようなデータ語がその入力に加えられた速度の2分の1の速度で格納するよう
にクロックが発信される8ビット幅のシフトレジスタによって達成することがで
きる。
【0035】 さらに、1本の線の画素またはそのような線の画素を表現する一連のデジタル
語の画素の2分の1を除去する演算は、付近の画素の値をフィルタリングまたは
補間することによって達成され、この用語は相互に置換可能であり、かつ1つお
きの画素を脱落したり、2つまたはそれ以上の隣接または付近の画素の値を平均
化するなど(2つの画素の平均または3つの画素の平均など)の演算を含むこと
をも意図している。
【図面の簡単な説明】
【図1】 2つの連続するインタレース画像フィールドを示す線図である。
【図2】 本発明に係るデインタレース構成の略ブロック図である。
【図3】 2つの連続する画像フィールドの一部の一連の線の相対的空間位置を示す線図
である。
【図4】 画像フィールドの一部の一連の線およびその変換の相対的空間位置を示す線図
である。
【図5】 図4の画像フィールドの変換に関連する変換プロセスの表現を示す線図である
【図6】 Aは、コンピュータを用いた本発明の実現のブロック図である。 Bは、コンピュータを用いた本発明の実現のブロック図である。
【図7】 本発明に係る流れ図である。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 EP(AT,BE,CH,CY, DE,DK,ES,FI,FR,GB,GR,IE,I T,LU,MC,NL,PT,SE),JP Fターム(参考) 5C063 AA01 AA06 BA04 BA09 CA01 5C082 AA01 AA02 BB03 BB22 BC03 BC06 BC07 DA63 DA86 MM10

Claims (10)

    【特許請求の範囲】
  1. 【請求項1】 一連のインタレース画像フィールドを一連のノンインターレ
    ース画像フレームに変換する方法において、 各画像フィールドの各空白線を除去し、それによって、各画像フィールド内で
    空白線と交互に存在し一連の画素を含む各画像フィールドの各線を維持すること
    と、 各画像フィールドの各維持線の前記一連の画素のうち半数の画素を除去するこ
    とと、 を備える方法。
  2. 【請求項2】 前記半数の画素の除去が、前記一連の画素のうち1つおきの
    画素を除去することを含む、請求項1に記載の方法。
  3. 【請求項3】 前記半数の画素の除去が、前記一連の画素のうち少なくとも
    2つの隣接する画素を補間することを含む、請求項1に記載の方法。
  4. 【請求項4】 前記各空白線の除去が、画素を含む2つの隣接する線の画素
    値から1行の画素値を入手し、前記入手した画素値を維持し、画素値を含む2つ
    の隣接線を除去することを含む、請求項1に記載の方法。
  5. 【請求項5】 前記1行の画素値の入手が、画素を含む2つの隣接する線の
    対応する画素の値から画素値を補間することを含む、請求項4に記載の方法。
  6. 【請求項6】 前記半数の画素の除去が、前記1行の画素値の入手に先行す
    る、請求項4に記載の方法。
  7. 【請求項7】 一連のインタレース画像フィールドを一連のノンインターレ
    ース画像フレームに変換する機械可読コンピュータ命令で符号化される記憶媒体
    において、 コンピュータに各画像フィールドの各空白線を除去させ、それによって、各画
    像フィールド内で空白線と交互に存在し一連の画素を含む各画像フィールドの各
    線を維持する手段と、 コンピュータに各画像フィールドの各維持線の前記一連の画素のうち半数の画
    素を除去させる手段と、 を備える記憶媒体。
  8. 【請求項8】 前記維持線が一連のデジタル値のデジタル画像情報を含み、
    コンピュータに半数の画素を除去させる前記手段が、コンピュータに前記一連の
    デジタル値のうち1つおきのデジタル値を除去させる手段を含む、請求項7に記
    載の記憶媒体。
  9. 【請求項9】 コンピュータに各空白線を除去させる前記手段が、コンピュ
    ータに画素を含む2つの隣接する線の画素値から1行の画素値を入手させる手段
    と、コンピュータに前記入手した画素値を維持させる手段と、コンピュータに画
    素値を含む前記2つの隣接する線を除去させる手段とを含む、請求項7に記載の
    記憶媒体。
  10. 【請求項10】 コンピュータに1行の画素値を入手させる前記手段が、コ
    ンピュータに画素を含む前記2つの隣接する線の対応する画素の値から画素値を
    補間させる手段を含む、請求項9に記載の記憶媒体。
JP2000613205A 1999-04-19 2000-04-19 映像信号のデインタレース Pending JP2002542741A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US12993499P 1999-04-19 1999-04-19
US09/491,709 US6456329B1 (en) 1999-04-19 2000-01-26 De-interlacing of video signals
US09/491,709 2000-01-26
US60/129,934 2000-01-26
PCT/US2000/010697 WO2000064192A1 (en) 1999-04-19 2000-04-19 De-interlacing of video signals

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2010215968A Division JP2011041306A (ja) 1999-04-19 2010-09-27 映像信号のデインタレース

Publications (1)

Publication Number Publication Date
JP2002542741A true JP2002542741A (ja) 2002-12-10

Family

ID=26828043

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2000613205A Pending JP2002542741A (ja) 1999-04-19 2000-04-19 映像信号のデインタレース
JP2010215968A Pending JP2011041306A (ja) 1999-04-19 2010-09-27 映像信号のデインタレース

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2010215968A Pending JP2011041306A (ja) 1999-04-19 2010-09-27 映像信号のデインタレース

Country Status (4)

Country Link
US (1) US6456329B1 (ja)
EP (1) EP1088455A4 (ja)
JP (2) JP2002542741A (ja)
WO (1) WO2000064192A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020080495A (ja) * 2018-11-13 2020-05-28 株式会社東芝 映像処理装置、映像処理方法、およびプログラム

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002534916A (ja) * 1999-01-05 2002-10-15 インフィネオン テヒノロギーズ アーゲー デジタルtvシステムのための信号処理装置
JP2000350168A (ja) * 1999-06-02 2000-12-15 Seiko Epson Corp 画像信号処理方法および画像信号処理装置
US6909469B2 (en) * 1999-08-11 2005-06-21 Silicon Image, Inc. Interlace motion artifact detection using vertical frequency detection and analysis
US6680752B1 (en) * 2000-03-31 2004-01-20 Ati International Srl Method and apparatus for deinterlacing video
WO2001080559A2 (en) * 2000-04-18 2001-10-25 Silicon Image Method, system and apparatus for identifying the source type and quality level of a video sequence
GB2362731B (en) * 2000-05-23 2004-10-06 Advanced Risc Mach Ltd Parallel processing of multiple data values within a data word
US6972801B1 (en) * 2000-10-20 2005-12-06 Intervideo, Inc. System and method for deinterlacing a video signal for display on progressive display devices
JP2005510905A (ja) 2001-11-20 2005-04-21 トムソン ライセンシング ソシエテ アノニム 解像度向上のための低ビットレート圧縮フォーマット変換
US6573941B1 (en) * 2002-04-22 2003-06-03 Thomson Licensing Sa Low bit rate compression format conversion for improved resolution
US6954219B2 (en) * 2001-12-12 2005-10-11 Stmicroelectronics, Inc. Method and system of continuously scaling video images
JP3666463B2 (ja) * 2002-03-13 2005-06-29 日本電気株式会社 光導波路デバイスおよび光導波路デバイスの製造方法
EP1361750A1 (en) * 2002-05-08 2003-11-12 Koninklijke Philips Electronics N.V. Video and text display
US6894726B2 (en) * 2002-07-05 2005-05-17 Thomson Licensing S.A. High-definition de-interlacing and frame doubling circuit and method
KR100486284B1 (ko) * 2002-11-22 2005-04-29 삼성전자주식회사 연속되는 두 개의 디인터레이스 프레임들을 출력할 수있는 디인터레이스 장치 및 디인터레이스 방법
US7391469B2 (en) * 2003-10-05 2008-06-24 Mediatek Inc. Method and apparatus for video decoding and de-interlacing
JP2007067923A (ja) * 2005-08-31 2007-03-15 Toshiba Corp 情報処理装置およびプログラム
TW200837691A (en) * 2007-03-06 2008-09-16 Sunplus Technology Co Ltd Method and system for processing image data in LCD by integrating de-interlace and overdrive operations
US8115863B2 (en) * 2007-04-04 2012-02-14 Freescale Semiconductor, Inc. Video de-interlacer using pixel trajectory
US8233086B2 (en) 2007-06-08 2012-07-31 Nintendo Co., Ltd. Process for digitizing video over analog component video cables
US8300987B2 (en) * 2007-09-28 2012-10-30 Ati Technologies Ulc Apparatus and method for generating a detail-enhanced upscaled image
US8964117B2 (en) 2007-09-28 2015-02-24 Ati Technologies Ulc Single-pass motion adaptive deinterlacer and method therefore
US8259228B2 (en) * 2007-12-10 2012-09-04 Ati Technologies Ulc Method and apparatus for high quality video motion adaptive edge-directional deinterlacing
US8396129B2 (en) * 2007-12-28 2013-03-12 Ati Technologies Ulc Apparatus and method for single-pass, gradient-based motion compensated image rate conversion
TW201002055A (en) * 2008-06-24 2010-01-01 Sunplus Technology Co Ltd Image format conversion system
JP5803184B2 (ja) * 2010-11-19 2015-11-04 株式会社リコー 画像投影装置、メモリアクセス方法
CN111325655A (zh) * 2018-12-14 2020-06-23 中强光电股份有限公司 影像处理系统及其影像处理方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61502859A (ja) * 1984-12-21 1986-12-04 アールシーエー トムソン ライセンシング コーポレイション 飛越し型デジタル・ビデオ入力フイルタ/間引き器および/または伸張器/補間器フイルタ
JPH02254883A (ja) * 1989-03-28 1990-10-15 Nec Corp ノンインタレース縮小表示変換器
JPH06268905A (ja) * 1993-03-16 1994-09-22 Mitsubishi Electric Corp 映像信号縮小装置
JPH089343A (ja) * 1994-06-20 1996-01-12 Fujitsu General Ltd 映像信号変換装置
JPH08171364A (ja) * 1994-12-16 1996-07-02 Matsushita Electric Ind Co Ltd 液晶駆動装置
JPH08335062A (ja) * 1995-06-06 1996-12-17 Fujitsu Ltd 走査方式変換方法、走査方式変換装置及び画像表示装置
JPH1098733A (ja) * 1996-09-20 1998-04-14 Matsushita Electric Ind Co Ltd 映像信号処理装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5097257A (en) * 1989-12-26 1992-03-17 Apple Computer, Inc. Apparatus for providing output filtering from a frame buffer storing both video and graphics signals
US5134480A (en) 1990-08-31 1992-07-28 The Trustees Of Columbia University In The City Of New York Time-recursive deinterlace processing for television-type signals
US5305104A (en) 1992-07-27 1994-04-19 The Trustees Of Columbia University In The City Of New York Digitally assisted motion compensated deinterlacing for enhanced definition television
US5473382A (en) 1992-11-04 1995-12-05 Hitachi, Ltd. Video signal converting apparatus for converting an interlace video signal into a non-interlace video signal for reduction
US5473381A (en) * 1993-08-07 1995-12-05 Goldstar Co., Ltd. Apparatus for converting frame format of a television signal to a display format for a high definition television (HDTV) receiver
GB9504307D0 (en) * 1995-03-03 1995-04-19 Philips Electronics Uk Ltd Video image processing
JP4191246B2 (ja) * 1995-11-08 2008-12-03 ジェネシス マイクロチップ インク 映像フィールドを順次走査映像フレームへ非飛び越し走査するための方法および装置
US5838385A (en) * 1996-08-30 1998-11-17 Texas Instruments Incorporated Sampling analog video signal for secondary images

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61502859A (ja) * 1984-12-21 1986-12-04 アールシーエー トムソン ライセンシング コーポレイション 飛越し型デジタル・ビデオ入力フイルタ/間引き器および/または伸張器/補間器フイルタ
JPH02254883A (ja) * 1989-03-28 1990-10-15 Nec Corp ノンインタレース縮小表示変換器
JPH06268905A (ja) * 1993-03-16 1994-09-22 Mitsubishi Electric Corp 映像信号縮小装置
JPH089343A (ja) * 1994-06-20 1996-01-12 Fujitsu General Ltd 映像信号変換装置
JPH08171364A (ja) * 1994-12-16 1996-07-02 Matsushita Electric Ind Co Ltd 液晶駆動装置
JPH08335062A (ja) * 1995-06-06 1996-12-17 Fujitsu Ltd 走査方式変換方法、走査方式変換装置及び画像表示装置
JPH1098733A (ja) * 1996-09-20 1998-04-14 Matsushita Electric Ind Co Ltd 映像信号処理装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020080495A (ja) * 2018-11-13 2020-05-28 株式会社東芝 映像処理装置、映像処理方法、およびプログラム
JP7163145B2 (ja) 2018-11-13 2022-10-31 株式会社東芝 映像処理装置、映像処理方法、およびプログラム

Also Published As

Publication number Publication date
US6456329B1 (en) 2002-09-24
JP2011041306A (ja) 2011-02-24
EP1088455A1 (en) 2001-04-04
EP1088455A4 (en) 2005-01-19
WO2000064192A1 (en) 2000-10-26

Similar Documents

Publication Publication Date Title
US6456329B1 (en) De-interlacing of video signals
US6269484B1 (en) Method and apparatus for de-interlacing interlaced content using motion vectors in compressed video streams
US6970206B1 (en) Method for deinterlacing interlaced video by a graphics processor
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
US6556193B1 (en) De-interlacing video images using patch-based processing
US6411333B1 (en) Format conversion using patch-based filtering
US5327240A (en) Methods, systems and apparatus for providing improved definition video
JP3310665B2 (ja) 高精細度テレビジョン
JPH0884321A (ja) ビデオデータ処理方法
CA2139416A1 (en) Motion compensated video processing
JP3855761B2 (ja) 画像信号処理装置及び方法
JP2520301B2 (ja) 静止画像フリッカ抑制方法
US7256835B2 (en) Apparatus and method for deinterlacing video images
JP3172169B2 (ja) 動き情報を動き情報信号に変換する装置
JP4205307B2 (ja) フリッカフィルタリング及びオーバースキャン補償
US7421150B2 (en) Coordinate conversion apparatus and method
WO2006000977A1 (en) Image processor and image processing method using scan rate conversion
WO2012157618A1 (ja) 映像信号処理装置および表示装置
JP2782766B2 (ja) 動画静止画変換方法
US7113222B2 (en) Method and apparatus for converting an interlace image to a progressive image
JP4470323B2 (ja) 画像変換装置および方法
JP3178665B2 (ja) 画像サイズ変換方法とそのための装置
JP4470324B2 (ja) 画像信号変換装置および方法
KR20020068065A (ko) 비디오 스캔 속도 컨버전을 위한 움직임 보상 업컨버전
US20100066901A1 (en) Apparatus and method for processing video data

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20050622

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20050622

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050704

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070309

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100405

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100525