JPH04273678A - デジタルビデオ信号フォーマット変換方式 - Google Patents

デジタルビデオ信号フォーマット変換方式

Info

Publication number
JPH04273678A
JPH04273678A JP3300781A JP30078191A JPH04273678A JP H04273678 A JPH04273678 A JP H04273678A JP 3300781 A JP3300781 A JP 3300781A JP 30078191 A JP30078191 A JP 30078191A JP H04273678 A JPH04273678 A JP H04273678A
Authority
JP
Japan
Prior art keywords
signal
format
digital video
frame
fields
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP3300781A
Other languages
English (en)
Inventor
John W Richards
ジョン・ウィリアム・リチャーズ
Clive H Gillard
クリーブ・ヘンリー・ギラード
Martin Rex Dorricott
マーチン・レックス・ドリコット
James Edward Burns
ジェームス・エドワード・バーンズ
Morita Tsuneo
ツネオ・モリタ
John James Galt
ジェームス・ジョン・ガルト
Morgan William Amos David
モーガン・ウィリアム・アモス・デービッド
Shima R Varsani
シマ・ラブジ・バルサニ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Broadcast and Communications Ltd
Original Assignee
Sony Broadcast and Communications Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from GB9024818A external-priority patent/GB2249900B/en
Priority claimed from GB9024827A external-priority patent/GB2249903B/en
Priority claimed from GB9024825A external-priority patent/GB2249901B/en
Priority claimed from GB9024837A external-priority patent/GB2249908B/en
Priority claimed from GB9024826A external-priority patent/GB2249902B/en
Priority claimed from GB9024828A external-priority patent/GB2249904B/en
Priority claimed from GB9024835A external-priority patent/GB2249906B/en
Priority claimed from GB9024838A external-priority patent/GB2249909B/en
Priority claimed from GB9024836A external-priority patent/GB2249907B/en
Priority claimed from GB9024816A external-priority patent/GB2249898B/en
Priority claimed from GB9024829A external-priority patent/GB2249905B/en
Priority claimed from GB9024817A external-priority patent/GB2249899B/en
Application filed by Sony Broadcast and Communications Ltd filed Critical Sony Broadcast and Communications Ltd
Publication of JPH04273678A publication Critical patent/JPH04273678A/ja
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/022Electronic editing of analogue information signals, e.g. audio or video signals
    • G11B27/024Electronic editing of analogue information signals, e.g. audio or video signals on tapes
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/022Electronic editing of analogue information signals, e.g. audio or video signals
    • G11B27/028Electronic editing of analogue information signals, e.g. audio or video signals with computer assistance
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/032Electronic editing of digitised analogue information signals, e.g. audio or video signals on tapes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H04N19/615Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding using motion compensated temporal filtering [MCTF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/63Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/253Picture signal generating by scanning motion picture films or slide opaques, e.g. for telecine
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/87Producing a motion picture film from a television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0105Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level using a storage device with different write and read speed
    • H04N7/011Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level using a storage device with different write and read speed using magnetic recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/90Tape-like record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/022Electronic editing of analogue information signals, e.g. audio or video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、デジタルビデオ信号の
フォーマット変換に関するものである。
【0002】
【従来の技術】ビデオ(映像)信号を組合せたり、処理
したりするビデオ信号作成システムでは、組合せようと
する信号は同じフォーマットであるか又は同じフォーマ
ットに変換する必要がある。したがって、入力信号フォ
ーマットの作成システム・フォーマットへの変換や、作
成システム・フォーマットから所要出力フォーマットへ
の信号フォーマット変換が多くの場合必要となる。
【0003】毎秒24フレームのプログレッシブ走査フ
レームの素材入力を毎秒60フィールドの2:1飛越し
走査フォーマットの素材入力と統合して毎秒60フィー
ルドの2:1飛越し走査フォーマットの素材出力を作成
する場合、(a)入力の毎秒24フレームのプログレッ
シブ走査フォーマットを毎秒60フィールドの2:1飛
越し走査フォーマットに変換し、(b)作成システムの
ために、2つの毎秒60フィールドの2:1飛越し走査
フォーマット信号を処理して1つの組合された毎秒60
フィールドの2:1飛越し走査フォーマット信号を作成
することが適当と考えられる。また、毎秒24フレーム
のプログレッシブ走査フォーマットの素材を毎秒30フ
レームのプログレッシブ走査フォーマットの素材と統合
して毎秒30フレームのプログレッシブ走査フォーマッ
ト素材を作成する場合は、(a)毎秒24フレームのプ
ログレッシブ走査フォーマット素材入力を毎秒30フレ
ームのプログレッシブ走査フォーマット素材に変換し、
(b)作成システムのために、2つの毎秒30フレーム
・プログレッシブ走査フォーマット信号を処理して1つ
の組合された毎秒30フレーム・プログレッシブ走査フ
ォーマット信号を作成することが適当のように思われる
【0004】毎秒24フレームのプログレッシブ走査フ
ォーマットから毎秒60フィールドの飛越し走査フォー
マット又は毎秒30フレームのプログレッシブ走査フォ
ーマットへの変換は、フレームレートの変更を含むので
、各出力フィールド又はフレームをこの出力フィールド
又はフレームと時間的に最も近い入力フレームから作成
して変換を行う場合、出力画像に激しい揺れ(judd
er)のような欠点が現れる。
【0005】
【発明が解決しようとする課題】したがって、本発明の
課題は、デジタルビデオ信号のフォーマット変換に際し
て生じる上述の欠点を回避することである。
【0006】
【課題を解決するための手段及び作用】上述の課題を解
決するため、本発明方法においては、毎秒24フレーム
のプログレッシブ走査フォーマットのデジタルビデオ入
力信号を毎秒30フレームのプログレッシブ走査フォー
マットのデジタルビデオ出力信号に変換する場合、連続
する2入力フレーム間で動きを補正した補間をすること
により、入力フレームから5フィールド毎に少なくとも
4出力フィールドを作成する過程を含む。
【0007】動きを補正した補間は特許出願第8909
656.4号に記載されているが、そこに記載された方
法は、フレームレートを減らす場合、すなわち毎秒60
フィールド2:1飛越し走査フォーマットから毎秒24
フレーム・プログレッシブ走査フォーマットへ変換する
場合のみの補間に関するものである。本発明方法では、
フレームレートが増加し、これは動きを補正した補間の
更に複雑な技法を必要とする。
【0008】具体的にいえば、本発明方法は一面におい
て、一連の3連続入力フレームから次のようにして一連
の5連続出力フィールドを作成するのがよい。 a)第1入力フレームから必ずしも動きを補正した補間
をしないで第1出力フィールドを作成する。 b)第1及び第2入力フレームの間隔の2/5の動き補
正補間をすることにより第2出力フィールドを作成する
。 c)第1及び第2入力フレームの間隔の4/5の動き補
正補間をすることにより第3出力フィールドを作成する
。 d)第2及び第3入力フレームの間隔の1/5の動き補
正補間をすることにより第4出力フィールドを作成する
。 e)第2及び第3入力フレームの間隔の3/5の動き補
正補間をすることにより第5出力フィールドを作成する
【0009】或いは、本発明方法は他面において、一連
の5連続入力フレームから次のようにして一連の5連続
出力フレームを作成するのがよい。 a)第1入力フレームから必ずしも動きを補正した補間
をしないで第1出力フレームを作成する。 b)第1及び第2入力フレームの間隔の4/5の動き補
正補間をすることにより第2出力フレームを作成する。 c)第2及び第3入力フレームの間隔の3/5の動き補
正補間をすることにより第3出力フレームを作成する。 d)第3及び第4入力フレームの間隔の2/5の動き補
正補間をすることにより第4出力フレームを作成する。 e)第4及び第5入力フレームの間隔の1/5の動き補
正補間をすることにより第5出力フレームを作成する。
【0010】どちらの方法も更に、第1シリースにおい
て各入力フレームを5R回(Rは5のような整数)繰返
し、第2シリースにおいて4R回繰返された入力フレー
ム毎に毎秒60フィールド2:1飛越し走査フォーマッ
トの新しいフレームを作成し、第2シリースにおける新
しい各フレームを4Rの繰返し回数で繰返し、第2シリ
ースのフレームの4Rフィールド毎に1つのフィールド
をそれぞれ出力フィールドとして出力するステップを有
する。こうすると、変換及び補間法の計算量により要求
されるように、変換処理が実時間レートより遅くなる。
【0011】入力フレームが2:1飛越しフィールドの
対として与えられ、各対のフィールドがそれぞれ入力映
像の時間的に同一の部分を表す場合、各入力フィールド
対のフィールドをそれぞれ5R回繰返すのがよい。中間
シリースのプログレッシブ走査フォーマットのフレーム
は、それぞれのフィールド対から作成される各プログレ
ッシブ走査フォーマットのフレームをもつ入力フィール
ドから作成され、出力フィールドはこれらプログレッシ
ブ走査フォーマット・フレームから作成される。
【0012】本発明の一面においては、入力フレームが
毎秒60フィールド2:1飛越し3232プルダウン・
フォーマット(特許出願第GB9018805.3号参
照、その内容は本明細書に含まれるものとする。)で与
えられる場合、更に次のステップを含んでもよい。すな
わち、第1シリースにおいて各入力フィールドを4R回
繰返し、10R回繰返される入力フィールド毎に1度新
しいプログレッシブ走査フォーマット・フレームを中間
シリースにおいて連続する非繰返し入力フィールド対か
ら作成し、該中間シリースから第2シリースにおいて4
R回繰返し入力フレーム毎に毎秒60フィールド2:1
飛越しフォーマットの新しいフレームを作成し、該第2
シリースにおいて新しい各フレームを4Rの繰返し回数
で繰返し、該第2シリースのフレームの4Rフィールド
毎に1フィールドをそれぞれ出力フィールドとして出力
する。
【0013】本発明はまた、本発明方法を実行するに適
した装置を提供するものである。
【0014】
【実施例】以下、図面(特に図55,56,67)を参
照して本発明を具体的に説明する。図1は、ビデオ信号
を写真フィルムに変換する従来装置の例を示すブロック
図である。同図において、1はビデオテープレコーダ(
VTR)、2はビデオ信号変換器、3はガンマ補正器、
4は電子ビームレコーダ(EBR)である。図2は、本
発明によるビデオ信号・写真フィルム変換装置の一部分
を示すブロック図である。図3は、図2の変換装置の他
の部分を示すブロック図である。以下に述べる本発明に
よるビデオ信号・写真フィルム変換装置の一実施例は、
特に、1フレーム当たり1125ラインで、1秒当たり
60フィールドの高精細度ビデオ信号(HDVS)を、
1秒当たり24フレームの35mmフィルムに変換する
場合に使用するものである。しかしながら、本発明は、
この点にのみ限定されるのではなく、他の入力ビデオ信
号からの変換にも広く適用できることは、勿論である。
【0015】本発明の装置は、便宜的に2個の部分に分
けて考えることができる。第1の部分は、図2に示す如
く、入力するHDVSを1秒につき24フレームに相当
するプログレッシブ走査デジタルビデオ信号に変換して
VTRに記録する部分であり、第2の部分は、図3に示
す如く記録されたビデオ信号を再生し、それを写真フィ
ルムに転写する部分である。
【0016】図2に示す本発明の装置の第1の部分は、
高精細度デジタルVTR11と、テレビジョン標準(方
式)変換器(コンバータ)12と、ビデオ信号を1秒ま
で記録できるフレームレコーダ13と、第2の高精細度
デジタルVTR14と、トラックボールコントロール1
6、キーボード17、グラフィックディスプレー18を
関連して有するシステムコントローラ15と、テレビジ
ョンモニタ19,20とを図示の如く接続して有する。 なお、動作は後述する。
【0017】本発明の装置の第2の部分は、図3に示す
如く、高精細度デジタルVTR31と、デジタルインタ
フェース(I/F)ユニット32と、ガンマ補正器33
と、D/Aコンバータ34と、電子ビームレコーダ35
と、テレビジョンモニタ36と、スイッチ37とを図示
の如く接続して有する。なお、動作は後述する。
【0018】再び図2を参照するに、ビデオ信号の接続
Dはデジタル接続、即ちY,U/V信号を運び、ビデオ
信号接続Aは、R,G,B信号を運ぶアナログ接続であ
る。フィルムに転写しようとする、高精細度ビデオカメ
ラから送出される入力ビデオ信号は、デジタルVTR1
1により再生される磁気テープに記録される。デジタル
VTR11は、記録されたビデオ信号を1/8の速度で
再生し得る。この速度は後続の回路、特に標準コンバー
タ12の動作に適切な速度である。素子11〜14及び
19,20は、システムコントローラ15により制御さ
れる。一方、このシステムコントローラ15は、トラッ
クボールコントローラ16及びキーボード17よりの入
力により制御され、且つグラフィックデイスプレー18
を関連して有する。グラフィックディスプレー18上に
は、変換の進行状態に関連する情報が表示される。
【0019】入力HDVSの一部がデジタルVTR11
より再生され、標準コンバータ12へ供給される。その
詳細は後述するも、この標準コンバータ12は、入力ビ
デオ信号である1秒につき60フィールドの飛越し走査
ビデオ信号から、最初に、1秒につき60フレームで動
きに合せたプログレッシブ走査デジタルビデオ信号を得
、次に、これより1秒当たり24フレームに相当する必
要な動きを補正したプログレッシブ走査デジタルビデオ
信号を得る。なお、後者は必ずしもそのレートでなくと
もよい。このビデオ信号はデジタルVTR14により記
録される。デジタルVTR14がスローモーション、即
ちデジタルVTR11の再生速度で記録できる場合は、
理論上フレームレコーダ1は必要でない。しかし、実際
には、フレームレコーダ13は、ビデオ信号をフィルム
に変換するのに要求される間欠的動作を行うので有用で
ある。フレームレコーダ13の間欠動作により、速い間
隔で変換が良好に進行していることをチェックできる。 かくして、変換されるべきビデオ信号の内容に応じて、
パラメータの調整、特に標準コンバータ12のパラメー
タの調整がなされることが必要であり、その結果が処理
前に推定される。モニタ19,20は、装置内のそれぞ
れの点におけるビデオ信号をチェックする手段として設
けられている。
【0020】図3に示す装置の第2の部分においては、
図2に示すデジタルVTR14により記録された動き補
正プログレッシブ走査デジタルビデオ信号が、デジタル
VTR31により再生され、デジタルI/Fユニット3
2を通じてガンマ補正器33に送られる。この目的は、
ビデオ信号のガンマ特性を、使用されるフィルムのガン
マ特性に合せるためである。あとのデジタルVTR31
による再生のために、図2に示すデジタルVTR14に
よる動き補正プログレッシブ走査デジタルビデオ信号の
記録により、ガンマ補正器33による正確なガンマ補正
を設定することが可能となる。。何故ならば、間欠的及
び繰り返し動作が可能のため、デジタルVTR31から
のビデオ信号の通常非線形ガンマ特性の、通常線形なフ
ィルムのガンマ特性への種々の異なるマッピング(写像
)がテストできるからである。このガンマ設定は、例え
ば階段状クサビの使用を含む。ガンマ補正されたデジタ
ルビデオ信号は、次にD/Aコンバータ34によりアナ
ログ信号に変換され、電子ビームレコーダ35に供給さ
れ、写真フィルムに記録される。この記録は、例えばビ
デオ信号の各フレームに対し3個の単色フレームの形で
よく、3個のフレームはそれぞれ赤、緑、青に対応する
。テレビジョンモニタ36は、スイッチ37により、選
択的にデジタルVTR31の出力端又はD/Aコンバー
タ34の出力端に接続できる。或いは、2個の別々のテ
レビジョンモニタを設けてもよいことは、勿論である。
【0021】本発明の装置の特徴は次の如くである。即
ち、フィルム上に良い動きを持った鮮明で明瞭な絵を作
り、特に動きにぼけが無く、如何なる付加的揺動成分も
ない絵を作ることができる。更に、動き補正プログレッ
シブ走査デジタルビデオ信号をデジタルVTR14上に
記録することによる別個動作は、一方では、装置のパラ
メータのチェックを簡単且つ度々行うことができるため
、フィルム上に得られる絵の画質をよくする。繰返し動
作が完全に可能なので、結果が迅速に評価され、パラメ
ータの調整により欠陥を補正して変換を繰返すことがで
きる。より早い動作を得るために、装置の第1の部分、
即ち図2に示す部分の模写を多く作り、デジタルVTR
31への付加的入力を作り、図3に示す部分を一層有効
に使用して全体の変換速度を高めることは、勿論可能で
ある。
【0022】図4は標準コンバータ12のブロック図で
、これを以下詳細に述べる。標準コンバータ12は、入
力ビデオ信号が供給される入力端子41を有する。入力
端子41はプログレッシブ走査コンバータ42に接続さ
れ、そこで、入力ビデオフィールドがビデオフレームに
変換され、直接ブロック突合せ器43に供給され、そこ
で相関表面が形成される。相関表面は、運動ベクトル推
定器44により解析される。この推定器44は運動ベク
トルを作り、これを運動ベクトル減少器45に供給する
。この減少器45は、各画素(ピクセル)に対する多数
の運動ベクトルを、運動ベクトル選択器46に供給する
前に、減少する。この運動ベクトル選択器46は、プロ
グレッシブ走査コンバータ42の出力を受ける。運動ベ
クトル選択器46の選択に異常があると、これは、運動
ベクトルあと処理器47により除去される。このプロセ
ッサ47よりの処理された運動ベクトルは、プログレッ
シブ走査コンバータ42の出力が供給される補間器48
に供給され、これを制御する。標準変換され、動きが補
正されたビデオ信号である補間器48の出力は、出力端
子49へ供給される。標準コンバータ12の各部及びそ
の動作を、以下詳細に述べる。
【0023】プログレッシブ走査コンバータ42は、出
力フレームを入力フィールドと同じレートで作る。図5
は、一連の連続フィールドの一連の連続ラインを示し、
×印は入力フィールドに在るラインを示し、□印は補間
されたラインを示す。各出力フレームは、入力フィール
ドの2倍の数のラインを含む。入力ビデオ信号よりのラ
インと、後述の方法の1つにより補間されたラインとの
間で、ラインは交番される。補間されたラインは、入力
フィールドに対して反対の極性であるが同一の時間的位
置にある補間フィールドと見なすことができる。プログ
レッシブ走査変換は次の2つの主たる理由により行われ
る。その第1は、次の直接ブロック突合せ処理を容易に
するためであり、その第2は、最終出力ビデオフォーマ
ットを考慮してである。
【0024】直接ブロック突合せは、これを用いて2個
の続くビデオフィールド間の水平及び垂直運動の正確な
推定を得るためのもので、この点に関しては後に詳細に
述べる。しかしながら、プログレッシブ走査変換が最初
に行われないと、ビデオ信号の飛越し構造により直接ブ
ロック突合せを行うとき問題が生ずる。
【0025】図6で表される映像を考える。この図は、
一連の連続フィールドにおける一連の連続ラインを示し
、白い正方形は白画素、黒い正方形は黒画素、ハッチン
グをした正方形は灰色画素を表すものとする。したがっ
て、これはHDVSにおいて絵の高さ当たり1125/
3サイクルとなる高い垂直周波数成分をもつ静止画像(
絵)を表す。この画像は通常の飛越し走査処理によりサ
ンプルされているので、各フィールドは、図7に示すよ
うに絵の高さ当たり1125/6サイクルの静止垂直周
波数輝度成分Yを含むように見える。しかし、各フィー
ルドの周波数成分は、逆位相にあるように見える。これ
らの2フィールドに対し直接ブロック突合せを行おうと
すると、垂直運動成分に対し複数の異なる値を生じ、こ
れらは全部不正確である。これを図8に示す。この図で
、略号LPFはフィールド当たりライン数を意味する。 図8より、直接ブロック突合せが垂直運動成分に対して
正確な答えを与えないことが明らかである。該成分は、
実際はゼロでなければならない。これは、直接ブロック
突合せが、実際の運動ではなくビデオ信号のエイリアス
(別の)成分を追っているからである。
【0026】いま、図9を考える。この図は図6と同じ
静止画像を示すが、各入力フィールドがプログレッシブ
走査変換されてフレームが作られ、3角形が補間された
画素を表す点が異なる。これを見ると、各フレームが最
初の入力フィールドと同じ静止垂直周波数成分、すなわ
ち1125/3サイクル(絵の高さ当たり)を含むこと
が分かる。したがって、2連続フレーム間で直接ブロッ
ク突合せをした場合、垂直運動に対し正確な値、すなわ
ちゼロが与えられ、垂直エイリアス成分の追跡が回避さ
れる。しかも、直接ブロック突合せをライン数が2倍の
フレームについて行うので、プログレッシブ走査変換さ
れたフレームについて直接ブロック突合せをすると、一
層正確に垂直運動を推定できる利点がある。
【0027】最終出力ビデオフォーマットの考慮に関し
ては、本発明のこの例においては、変換されたビデオ信
号は、テープを介して電子ビームレコーダに供給され、
1秒につき24フレームの映画フィルムレートに対応す
るフレームより成る必要がある。この理由により、プロ
グレッシブ走査変換フレームの作成が必要であり、更に
、プログレッシブ走査変換フレームは、代わりとして次
の場合に使用し得る。すなわち、動き補正標準変換が、
例えば運動が充分に解析されるに余りに多様であるため
受入れられない結果を生じると見られる場合である。か
かる場合、要求される出力フレームとして最も近いプロ
グレッシブ走査変換フレームを使用すると、無理なく受
け入れられる結果が得られる。
【0028】プログレッシブ走査変換は、例えば前フィ
ールド代用、3個の空間的に連続するラインを検査(時
間的にこれら3個のラインは2個の連続するフィールド
よりのもの)する中間濾波、或は多方向線形補間が続く
多勾配動き検出を利用する動き補正技術など多数の方法
で行われる。しかし、この実施例では、動きに合せたプ
ログレッシブ走査変換方法を用いるのがよく、そのステ
ップは図10のブロックで示されている。その概念は、
フィールド間補間を完全静止画領域で用いてできるだけ
多くの垂直情報を保持し、且つかなりの動きがある時は
フィールド内補間を用いることである。これにより絵の
動きを滑らかにする。動きが両極端間のどこかにある場
面では、画面にある局所的な動きを推定し、これを用い
てフィールド間及びフィールド内補間の異なる比率を混
合する。
【0029】もっと詳しくいえば、前と次のフィールド
間のフレーム差のモジュラスをまず発生する。これを図
11に示す。所要の推定を発生するため、前と次のフィ
ールドからモジュラス・フレーム間差アレイを各点に発
生する。 ΔU (画素、現ライン、現フィールド)=|Y(画素
、現ライン、次のフィールド)−Y(画素、現ライン、
前のフィールド)|ただし、ΔU は規準化されていな
いモジュラス差アレイ、Yは3次元画像に対応する輝度
アレイである。
【0030】次に、差のモジュラスを規準化して、低輝
度領域における変化の意味を調整する。
【0031】
【数1】
【0032】差アレイΔはそれから、3タップ・フィル
タ(係数例は1/4、1/2、1/4又は0,1,0で
ある。)により前のフィールド差と共に垂直方向に濾波
して、垂直エイリアス問題を軽減し、特に時間的エイリ
アスに出くわす問題をできるだけ少なくする。すなわち
【0033】
【数2】 ただし、ΔF は濾波された規準化差アレイ、C1 及
びC2 はフィルタ係数、直流利得を1に維持するため
2C1 +C2 =1である。
【0034】次に、現フィールド内で差の値を平滑する
ため、5タップ×15タップまでの垂直及び水平フィー
ルド内フィルタを用いる。実際上は、3タップ×3タッ
プで十分である。最後に、実際の運動推定係数を作成す
るため、運動推定係数(ME)を与える関数を用いる非
線形マッピング関数を最適とする。 ME(画素、現ライン)= γ(空間的に濾波されたΔF (画素、現ライン))非
線形関数γは図13に示すようにして導出する。静止画
像MEはゼロで、完全運動MEは1であり、中間の運動
に対してはこの値は制御され変化する。
【0035】補間画素を作成するため、図14に示すよ
うに周りのラインの比率を取って欠けたラインの画素を
作成する。それから、運動推定係数MEをフレーム内補
間値(2,4,6又は8タップ・フィルタから発生する
。)に適用し、1−MEをフィールド間平均(或いは、
もっと複雑な補間値)に適用する。そして、これらを加
算しプログレッシブ走査画素推定係数を導出する。
【0036】
【数3】 ただし、C0 ,C1 ,C2 ,C3 はフレーム内
フィルタ係数、且つ2(C0 +C1 +C2 +C3
 )=1したがって直流利得は1に維持される。
【0037】このプログレッシブ走査変換方法は、特に
運動物体を静止背景に対し隔離して異なる方法で補間で
きるので、入力フィールドから質の高いフレームを作成
することが分かっている。
【0038】図4に戻って説明する。プログレッシブ走
査コンバータ42よりのビデオフレームを用いて運動ベ
クトルを得る。運動ベクトルの推定は2段のステップよ
り成る。初めに、続くフレームよりサーチブロックの相
関関係を示す相関面を作る。次に、これらの相関面を得
てから、それらを検査して相関関係が最も大きい位置を
決める。相関面を得る数個の異なる方法があり、2つの
主たる方法は位相相関及び直接ブロック突合せである。 しかしながら、位相相関の使用については若干の問題が
ある。これらの問題は、変換機構、ウインド機能、ブロ
ックの大きさ、作成した表面の外形の可変性質に関する
問題である。それ故、本例では直接ブロック突合せ法が
よい。
【0039】直接ブロック突合せ器43の動作は次の如
くである。プログレッシブ走査変換ビデオ信号の続くフ
レームより画素の矩形配列を含む2個のブロックを取り
、その相関関係に基いて運動ベクトル導出用の相関面を
形成する。
【0040】図15を参照して説明する。始めに、32
画素×23ラインのサイズのサーチブロックと称する小
さなブロックをフレームNから、図15に示す如く取り
出す。次に、128画素×69ラインのサイズのサーチ
区域と称する大きなブロックを次のフレーム(N+1)
から取り出す。サーチブロックSBを図16に示す如く
、サーチ区域SA内の各可能な位置に置き、各位置に対
して2個のブロック間の画素の輝度レベルの絶対差の合
計を計算する。この値を、それが得られた点における相
関面の高さとして用いる。この値を、サーチ区域内のサ
ーチブロックの各可能な位置に対して得られた他の同様
な値と共に用いて、相関面を得る。その一例を図17に
示す。明瞭にするため、表面を逆にして示す。必要なの
は最小値なので、図17の必要な点は、主ピークである
【0041】サーチブロックのサイズは、動き補正に必
要な物体の最小の大きさを検査することにより選択する
。1秒当たり50フィールドで、1フレーム当たり62
5ラインのPAL信号に対しては、対象物(物体)内で
なくサーチブロック内に周りの情報があっても、それが
小さい対象物の追跡に影響を与えないようにするために
は、16画素×8ラインの大きさのサーチブロックが適
当であることが分かった。したがって、本実施例ではこ
れに近いものを採用した。ただし、PAL625/50
方式に比べてライン当たりの能動画素数、フレーム当た
りの能動ライン数、HDVSの縦横比が異なる点を考慮
に入れて修正を加えた。HDVSを先にしてこれと比較
した値を書くと、次のとおりである。ライン当たり能動
画素数1920(720)、フレーム当たり能動ライン
数1035(575)、縦横比3:5.33(3:4)
【0042】大きい対象物を追跡できるため、もっと大
きいサーチブロックの使用に対する賛成論があることを
付け加えねばならない。他方、大きな対象物又は背景区
域の影響によって小さな対象物の影が薄くなるため、も
っと小さいサーチブロックの使用に賛成する論もある。 また、小さいサーチブロックの場合、各ブロックから1
つより多い運動ベクトルを導出する必要がないという利
点がある。ただ1つの運動ベクトルを導く方法が1つよ
り多くの運動ベクトルを導くより遙かに容易であるから
、本実施例では、上述のように小さいサーチブロックで
始め、十分な結果が得られない場合にサーチブロックを
大きくすることにした。これは、小さいブロックと大き
いブロックの両方の利点を併有する。結果が十分がどう
かの判断基準は、あとで詳述する運動ベクトル推定器4
4(図4)に設定されており、そこで与えられた相関面
から運動ベクトルを決定する。
【0043】サーチブロックを大きくしてゆくこの技法
は、大きい対象物を追跡するのに好都合であるばかりで
なく、周期性の規則的な形をもつ対象物の動きの追跡を
助けることもできる。いま、サーチブロックAがサーチ
区域Bと位置V1,V2,V3でよくマッチ(一致)し
、それらが一見正確な運動量を与えるように見える図1
8の場合を考える。この場合、運動ベクトル推定すなわ
ち相関面を解析する処理は、同一線上にある3つの位置
で良好な相関が生じていることを示すであろう。したが
って、サーチブロックAは、始めの幅の3倍まで水平方
向に拡大されることになる。これは、この場合多くの相
関が発生する方向である。サーチ区域Bも、これに対応
して水平方向に拡大される。拡大したサーチブロック3
Aを用いると、図19に示すように、対象物の運動に正
確に関係するただ1つの相関点のみが存在する。
【0044】この特殊な場合では、多相関方向が水平で
あるので、サーチブロック及びサーチ区域はともに水平
方向に拡大すべきである。しかし、相関面が示唆する場
合は、サーチブロックとサーチ区域を垂直方向又は両方
向に拡大することも可能である。
【0045】ブロック突合せは、境界区域ではサーチ区
域を取出す十分な余地がないので、フレーム内の全サー
チブロックに適用することはできない。よって、図20
にハッチングして示すフレーム境界域では、ブロック突
合せは行えない。この問題は、後述する運動ベクトル減
少器45(図4)で処理し、このハッチング区域におけ
るサーチブロックに適当な運動ベクトルを供給する。
【0046】1つのフレームの各サーチブロックに対し
て発生した相関面(図17)から、運動ベクトル推定器
44(図4)がサーチブロックとそれに対応するサーチ
区域との間のありそうなフレーム間運動を推定する。分
かり易いように、相関面に関する図面はすべて逆に、す
なわち最小点をピークとして示してあることをもう1度
述べておく。
【0047】運動ベクトル推定器44は、運動ベクトル
決定アルゴリズムを用いて各相関面における最小点を検
出する。これは、サーチブロック及びサーチ区域間の最
大相関点を表し、したがって両者の間に起こりそうな動
きを示す。相関面上のこの最小点の原点、この場合は相
関面の中心に対する変位は、動きをフレーム当たりの画
素で直接表したものである。相関面がただ1つの明瞭な
最小点を有する最も簡単な場合、相関面上の最小点を検
出するだけで十分正確にサーチブロック及びサーチ区域
間の動きを決定できる。上述のように、小さいサーチブ
ロックを使用すると、動きの検出及び運動推定の正確度
は改善されるが、小さな1つのサーチブロックでは後述
する幾つかの状況において動きを検出することができな
い。
【0048】図21は、3つのサーチブロックに跨る運
動体を示す説明図である。同図は、フレーム(t)にお
ける3つのサーチブロック1A,2A,3Aに跨る運動
ベクトル(5,0)をもつ物体(対象物)を示す。サー
チブロック1A及び3Aをそれぞれ次のフレーム(t+
1)におけるサーチ区域1B及び3Bと対応させると、
その相関面は図14のような(5,0)に最小点をもつ
ものとなる。(これは、無雑音映像源を想定している。 )しかし、サーチブロック2Aをそのサーチ区域2Bと
対応させると、その相関面は図15のようになる。 すなわち、サーチブロック2Aは、サーチ区域2Bとy
軸方向のあらゆる点で大きな相関関係をもつ。したがっ
て、相関面に最小点がただ1つではなくなり、サーチブ
ロック2Aとサーチ区域2B間の動きを決定できない。
【0049】しかし、いまサーチブロック2Aを最初の
3つのサーチブロック1A,2A,3Aの全部を含むよ
うに大きくした場合を考える。大きくしたサーチブロッ
ク2Aを最初の3サーチ区域1B,2B,3Bを含むサ
ーチ区域と対応させると、得られる相関面は図16のよ
うになる。これには、最初のサーチブロック2Aの正確
な動きを示すただ1つの最小点(5,0)が見られる。 この例は、動きを正確に検出するためには原映像に或る
特有の特徴をもたせる必要があることを示している。す
なわち、サーチブロック1A及び3Aは共に、特有な垂
直及び水平方向の特徴、すなわち対象物の端縁を有し、
これにより動きを決定できる。これに対し、サーチブロ
ック2Aは特有な垂直方向の特徴を有するが、水平方向
には何も特有な特徴がなく、したがって水平方向の動き
が決定できない。しかし、サーチブロックをそれが水平
及び垂直両方向に特有の特徴を包含するようになるまで
拡大すれば、そのサーチブロックに対する動きを完全に
決定することができる。また、サーチブロックの拡大は
、原映像に雑音が考えられる場合にも有益である。
【0050】次に、図25に示すような別の例を考える
。これは、運動ベクトルが(5,3)であるサーチブロ
ックに対する相関面を示す。しかし、サーチブロックと
サーチ区域の間に生じた多くの他の相関関係により、本
当の動きを検出するのが困難である。かような相関面を
生じる可能性のある原映像の例としては、風と共に動い
ているコントラストの低い木が挙げられる。いま、サー
チブロックとサーチ区域を拡大することを考える。拡大
は、前の例のように水平方向に行っても、或いは垂直方
向でも、更に両方向に行ってもよい。隣接したサーチブ
ロックが同じ動きを有するものとすれば、得られる相関
面は平均化効果を受けて、(5,3)における最小点の
大きさが他の相関ピークの大きさより大きな比率で増加
する。これを図26に示す。これより、正確な運動ベク
トルの検出がより容易となることが分かるであろう。
【0051】次に、図21を参照して更にサーチブロッ
クの拡大の仕方を考える。前は、サーチブロック2Aの
面積をサーチブロック1A及び3Aを包含するように拡
大して、図24に示したような相関面を得た。実際上、
得られた相関面は、サーチブロック1A,2A,3Aに
対応する3つの相関面を直接加え合せて生じている。各
相関面を点の大きさのマトリックス(行列)と考えると
、拡大したサーチブロック2Aの相関面は、最初のサー
チブロック1A,2A,3Aの相関面のマトリックスを
加えたものである。
【0052】サーチブロック2Aの面積は、その上下の
サーチブロックの相関面を加えることにより垂直方向に
拡大することもできるが、サーチブロック2Aを水平及
び垂直の両方向に拡大しようとすれば、横と斜めの4つ
の相関面をも同様に加えなければならない。これより、
実際にサーチブロックを隣接サーチブロックを包含する
よう拡大する仕方は比較的容易であることが分かるであ
ろうが、難しいのはいつ拡大すべきか、またどの隣接サ
ーチブロックを含めるべきかを決めることである。基本
的な答えは、良好な最小点すなわち良好な運動ベクトル
が検出されるまでサーチブロックの面積を拡大すべきで
ある、ということである。したがって、運動ベクトルを
いつ良好な運動ベクトルと考えるかを決める必要があり
、これは、実際には上述の例から推定することができる
【0053】図21〜24の上述した例では、対象物の
水平方向に特有な特徴を包含させてただ1つの最小点を
得るためにサーチブロックを水平方向に拡大する必要が
あった。この状態は、図23の相関面における同じ最小
点の列と図24の相関面におけるただ1つの最小点とで
よく表されている。これより、良好な最小点に対する第
1の判断基準が得られる。すなわち、良好な最小点は、
相関面上における大きさが最小の点で、その点の大きさ
とその次に小さい点の大きさとの差が一定値を越えるも
のである。この一定値は閾(しきい)値として知られて
おり、したがって、以後このテストを閾テストと呼ぶこ
とにする。
【0054】次の最小(次に小さい)点は、後述のリン
グテストと呼ぶもう1つのテストの範囲内で生じないよ
うにされる。3つのリングを用いるリングテストの場合
、次の最小点は、その点の3画素以内の所から生じない
ようにされる。図21〜24の例では、図23の相関面
は閾テストに合格せず、したがってサーチブロック2A
を拡大して適当な閾値を与えると、図24の相関面は閾
テストに合格することになる。
【0055】閾テストはまた、上述した図25及び図2
6の例においてサーチブロックを拡大させるのに使用す
ることもできる。サーチブロックを拡大する前は、周り
の点の大きさが非常に似ているため、正確な最小点は検
出不能である。すなわち、適当な閾値を与えると、その
相関面は閾テストに合格しないであろう。そこで、サー
チブロックを拡大させるのである。その結果、他の類似
点の中にある最小点を検出することが可能となるであろ
う。
【0056】閾値を用いるテストは主観的なものである
が、テストされる相関面に対する正しい閾は、これを相
関面内の大きさの幅(限度)に対する比として規準化す
ることにより選択することができる。これはまた、例え
ば映像源のコントラストの効果をも教えてくれる。
【0057】前に簡単に述べたリングテストについて、
更に説明する。リングテストは、良好な最小(又は最大
)点はその周りに大きさが増加(又は減少)する点があ
るという考えに基いている。図27はこの考えを示すも
ので、周りの3つのリングの点の平均の大きさが減少し
ている所(0,0)に最小点がある。図28に示す相関
面は、リング、特に内側から2番目のリングが減少する
平均の大きさを有しない点でこれと異なっている。
【0058】この場合、リングテストによって決まる良
好な最小点に対する判断基準は、平均勾配が単調なこと
である。したがって、該最小点の周りの点の予め定めた
数のリングについて、各リングの(点の)平均の大きさ
は、一番内側のリングから外側にゆくに従って前のリン
グの大きさより大きくならなければならない。再び図2
1〜24の例に戻ると、図23及び24から、図23の
相関面はリングテストに合格しないが、図24の相関面
はリングテストに合格することが分かるであろう。リン
グテストは、個々の大きさでなく平均の大きさを比較す
るので、閾テストより主観的ではない。リングテストで
の唯一の変数は、考えられるリングの数だけである。
【0059】サーチブロック拡大の手法について既に述
べたが、次に、相関面の形を調べることにより、サーチ
ブロックを拡大すべき最も効果的な方向を決定する方法
を考える。
【0060】再び図23に戻ると、この相関面は、垂直
方向に特有な特徴があるが、水平方向に特有な特徴がな
い場合に生じるものである。このため、相関面において
、水平方向に多くの相関関係があることにより最小点が
相関面を横切って水平方向に延びる結果となる。これよ
り、サーチブロックを水平方向に拡大すべきことが推論
できる。逆に、相関関係の多い線が垂直方向に伸びると
きは、サーチブロックを垂直方向に拡大する必要がある
ことを示し、相関関係の多い所が円形に集合していると
きは、サーチブロックを水平及び垂直の両方向に拡大す
る必要があることを示す。
【0061】この判断基準を用いてサーチブロックをど
の方向に拡大すべきかを決めるため、相関面の形状を量
的に測る必要がある。この測定は、次のようにして行う
。最初に、閾(しきい)を決める。相関面においてこの
閾より低い点を考える。この閾は、閾テストで用いたも
のと同様、相関面内の大きさの限度に対する比として規
準化する。この閾を使用し、相関面上の点を4つの特別
な段階で順に調べる。各段階で、相関面値が閾より下に
なる点に注意する。図29は、サーチブロックの拡大方
向を決める方法を示す説明図で、これら4つの段階を示
している。上,下,左及び右の番号1,2,3及び4は
、これら4段階を指し、陰影区域は閾より下の点を示す
【0062】段階1 相関面の上部から下方へ閾より下の点Aを探す。 段階2 相関面の下部から上方へ閾より下の点Cを探す。 段階3 相関面の左から右へ閾より下の点Dを探す。 段階4 相関面の左から右へ閾より下の点Dを探す。
【0063】こうして得られた4つの点A,B,C,D
の位置を用い、図29に示す2つの寸法X,Yを計算す
る。これらの寸法X,Yは、上記閾値より下の点を包含
する陰影区域の大きさを示す。よって、寸法X,Yより
、形状がy方向よりx方向に長いか又はその逆であるか
、或いは形状が円に近いかどうかを推定することができ
る。形状の推定においては、最小限の差を例えば10%
とする。すなわち、形状がx方向に長いとするには、寸
法Xが寸法Yより最小限10%大きくなければならない
。y方向についても、同様である。寸法X,Yの差が互
いに10%内である場合、形状を円と考え、サーチブロ
ックを両方向に拡大する。図29の例では、寸法Xが寸
法Yより大きく、したがってサーチブロックはxすなわ
ち水平方向に拡大される。
【0064】サーチブロックの拡大は、1つ以上の拡大
限界に達するまで続けられる。これらの限界とは、相関
面における最小点が閾テスト及びリングテストの両方に
合格すること、映像フレームの端縁に達すること、又は
サーチブロックが既に水平及び垂直方向に所定回数拡大
されたことである。この最後の限界は、ハードウエアに
よって決まる。すなわち、使用できる時間内で行える処
理量によって制限される。本発明による実施例では、こ
の限界は水平方向が2回、垂直方向が1回に設定された
【0065】相関面における最小点が閾テスト及びリン
グテストの両方に合格すると、良好な運動ベクトルが決
定されたと見なして運動ベクトル減少器45(図4)に
送ることができる。しかし、映像フレームの端縁に達す
るか、又はサーチブロックが既に水平及び垂直方向に所
定回数拡大された場合は、その特定のサーチブロックで
は良好な運動ベクトルが決定されなかったと見なし、良
好な運動ベクトルを決定しようとせずに加重(重み付け
)により最も使える(best available)
運動ベクトルを決定する。
【0066】相関面の加重は、静止すなわち中心運動ベ
クトルに向かって最も使える運動ベクトルが選択される
ように行われる。これは、2つの理由からである。第1
は、サーチブロックが拡大後も原映像の大きな平凡な区
域の一部である場合、良好な運動ベクトルを検出できな
いであろうということである。しかし、原映像が平凡な
区域であれば、静止運動ベクトルは、あとの処理におい
て正確な結果を導くことになる。第2に、加重は、非常
に間違った運動ベクトルが運動ベクトル減少器45(図
4)に送られる可能性を減じるよう設計されることであ
る。これは、良好な運動ベクトルを決定できないとき、
大きな不正確な運動ベクトルより小さな不正確な運動ベ
クトルの方がよいという理由から行われる。
【0067】図30は、相関面の加重方法の例を示す説
明図である。この例では、相関面上の与えられた点に加
える重みは、静止の中心運動ベクトルからその点までの
距離に正比例する。相関面上のその点の大きさには、加
重係数が乗ぜられる。例えば、その加重作用の勾配は、
中心の静止運動ベクトルからプラス又はマイナス32画
素の点が3の係数を乗ぜられるようなものがよい。いい
かえると、図30に示すように、中心の静止運動ベクト
ルを黒い円で示すとき、その加重作用は中心の静止運動
ベクトルを中心とする逆円錐形になる。
【0068】相関面に加重を施したのち、これを再び閾
テスト及びリングテストにかける。これらのテストに合
格する最小点が決まると、それを良好な運動ベクトルと
見なし、それに良好な運動ベクトルであるが加重を用い
たことを示す標識を付ける。この標識は、運動ベクトル
と共に運動ベクトル減少器45(図4)に送られる。他
方、良好な運動ベクトルも、最も使える運動ベクトルを
加重後も決定できない場合、このサーチブロックに対し
運動ベクトル減少器45に送られる運動ベクトルはどれ
も不良運動ベクトルであることを示す標識を付ける。こ
れは、不良運動ベクトルを運動ベクトル減少処理に使用
してはならず、後述のように代わりを用いなければなら
ないために行うものである。
【0069】要約すると、運動ベクトル推定器44(図
4)の作用は、直接ブロック突合せ器43(図4)によ
り発生された相関面より最も相関関係がある点、すなわ
ち最小点を導出することである。それから、この最小点
を閾テスト及びリングテストにかける。これら2つのテ
ストは、サーチブロックの動きを表すとするために最小
点が合格しなければならないものである。閾テスト及び
リングテストに用いる閾は、絶対値又は比率値のいずれ
でもよい。その最小点がどちらかのテストに不合格の場
合、そのサーチブロックを拡大し、新しい最小点を決定
し、再び閾テスト及びリングテストを行う。相関面の形
状から、サーチブロックを拡大すべき最も効果的な方向
を決定する。
【0070】図4に戻り、運動ベクトル減少処理につい
て述べる。HDVSを使用し、各サーチブロックを32
画素×23ラインと想定すると、運動ベクトルが最大2
451個に達することが考えられる。サーチブロックの
大きさは、解像度の維持とハードウエアの余剰回避との
両要求に妥協して選択する。仮に、これらすべての運動
ベクトルが運動ベクトル選択器46に送られるとすると
、運動ベクトル選択の仕事は、処理量が多すぎて実行で
きないであろう。この問題を克服するため、運動ベクト
ル推定器44及び運動ベクトル選択器46間に運動ベク
トル減少器45を設ける。運動ベクトル減少器45は、
運動ベクトル推定器44により当該フレームに対して発
生される全運動ベクトルのうち、該フレームの各サーチ
ブロックに対し、境界部分にあるものを含めて、例えば
4つの運動ベクトルだけを取出して運動ベクトル選択器
46に与える。この作用は、2つある。1つは、正確な
運動ベクトルの選択が容易になることである。それは、
運動ベクトル選択器46に送られる4つの運動ベクトル
の中から選べばよいからである。しかし、2つ目は、そ
の4つのうちの1つとして正確な運動ベクトルが送られ
ない場合、運動ベクトル選択器46は正しい運動ベクト
ルを選択できないことである。したがって、運動ベクト
ル減少器45は、運動ベクトル選択器46に送るものの
中に正確な運動ベクトルが含まれることを確認する必要
がある。また、運動ベクトル減少器45により4つの運
動ベクトルが運動ベクトル選択器46に送られるものの
、これらの3つのみが実際に動きを表し、4番目の運動
ベクトルは常に静止運動ベクトルである。これは、運動
ベクトル選択器46が動きを表す運動ベクトルを静止画
素に適用することを強制されないように、含められるも
のである。他の数の運動ベクトルを運動ベクトル選択器
46に送ってもよく、例えば、動きを表す4つの運動ベ
クトルと静止運動ベクトルとを送ってもよい。
【0071】以後「サンプルブロック」の用語は、各画
素が運動ベクトル減少器45による4つの運動ベクトル
を有する映像フレームにおけるブロックを指すものとす
る。したがって、サンプルブロックは、拡大される前の
サーチブロックと同じであり、映像フレームにおいてサ
ンプルブロックとサーチブロックの最初の位置は同じで
ある。
【0072】運動ベクトル減少器45(図4)は、運動
ベクトル推定器44(図4)より運動ベクトル及び標識
を受け、標識を調べることによりその運動ベクトルの質
を決める。運動ベクトルが不明瞭な面から導出されたも
のでない、すなわち高度の確実性がある場合、良好な運
動ベクトルとされ、若干の不明瞭性があると、その運動
ベクトルは不良運動ベクトルとされる。運動ベクトル減
少処理において、不良運動ベクトルとされた運動ベクト
ルはすべて無視される。それは、不正確な運動ベクトル
が運動ベクトル選択器46(図4)に送られ、そのため
不良運動ベクトルが選択されてはならないからである。 かような選択が行われると、一般に最終画面に偽(にせ
)の点を生じ、これは非常に目障りになる。
【0073】運動ベクトル減少器45に供給される各運
動ベクトルは、特定のサーチブロックしたがって特定の
サンプルブロック(図31)から得られたもので、それ
らの位置は運動ベクトルと共に示されている。不良運動
ベクトルに分類された運動ベクトルはどれも無視される
ので、すべてのサンプルブロックが必ずしもその位置に
あるサーチブロックから導出される運動ベクトルを有す
るわけではない。良好な運動ベクトルに分類され、特定
のサーチブロックしたがって特定のサンプルブロックに
関する運動ベクトルは、局部運動ベクトルと呼ぶ。それ
らは、サンプルブロックが得られた区域において導出し
たものであるからである。これに加え、もう1つの運動
ベクトル減少処理において、良好運動ベクトルを導出す
るのに用いたサーチブロックの実際の位置を考えること
なく、各良好運動ベクトルが発生する頻度を計数する。 これらの運動ベクトルは、頻度が減少する順に格付けし
て共通運動ベクトルと呼ぶ。3つの共通運動ベクトルし
か使用できない最悪の場合、これらを静止運動ベクトル
と組み合わせて4つの運動ベクトルを作り、運動ベクト
ル選択器46(図4)に送る。しかし、3つより多くの
共通運動ベクトルがあることが多いので、その数を減ら
して全体的(global)運動ベクトルと呼ぶ共通運
動ベクトルの組を作る。
【0074】共通運動ベクトルの数を減らす簡単な方法
は、最も頻度が高い3つの共通運動ベクトルを使用し、
残りを無視することである。しかし、3つの最も頻度の
高い共通運動ベクトルは、最初互いに垂直及び(又は)
水平方向のプラス又はマイナス1画素運動以内にあった
3つの運動ベクトルであることが多い。いいかえると、
これら共通運動ベクトルはすべて僅かな差の同じ動きを
追うものであり、無視された他の共通運動ベクトルは他
の異なる動きを追うものである。
【0075】1つの場面(シーン)における動きの全部
又は大部分を表す共通運動ベクトルを選択するためには
、同じ動きを表す全体的運動ベクトルを選択することを
避ける必要がある。したがって、実際に採用する方策は
、まず最も頻繁に生じる3つの共通運動ベクトルを取り
、それの中で最も頻度の少ないものが、他の2つの共通
運動ベクトルのどちらかのプラス又はマイナス1画素の
垂直運動及び(又は)プラス又はマイナス1画素の水平
運動以内にあるかどうかを調べることである。そうであ
る場合はそれを退け、その代わりに次に最も頻繁に生じ
る共通運動ベクトルを選ぶ。この処理は、最も頻繁に生
じる共通運動ベクトルの全部に対し、互いに類似しない
3つの共通運動ベクトルが存在するか、或いは3つ以下
の共通運動ベクトルが残されるまで続ける。しかし、な
お3つより多くの共通運動ベクトルが残っている場合、
今度は、それらの中で最も頻度の少ないものが他のプラ
ス又はマイナス2画素の垂直運動及び(又は)プラス又
はマイナス2画素の水平運動以内にあるかどうかを調べ
ながら、その処理を繰返す。そして、必要に応じ距離を
増してこれを続ける。これら3つの共通運動ベクトルは
所要の全体的運動ベクトルであり、これらが頻度の順に
なお格付けされている点は、重要なことである。
【0076】運動ベクトル減少処理及び映像フレームの
サンプルブロックを考える場合、3つの異なるタイプの
サンプルブロックに目を向ける必要がある。これらのタ
イプは、映像フレームにおけるそれらの実際の位置に関
係しており、図32に領域として示す。領域Aは、全体
が他のサンプルブロックにより囲まれ画像の境界に近く
ないサンプルブロックより成る。領域Bは、部分的に他
のサンプルブロックに囲まれ画像の境界に近くないサン
プルブロックを包含する。領域Cは、画像の境界に近い
サンプルブロックを包含する。これらの各領域に対して
使用する運動ベクトル減少アルゴリズムは、それぞれ異
なる。これらのアルゴリズムをこれより述べるが、まず
第1にその映像フレームにおける幾つかのサンプルブロ
ックに対し良好な運動ベクトルが存在することを繰返し
ておく。そして、補助的に、その場面における主な動き
を表す3つの全体的(global)運動ベクトルがあ
る。これらの運動ベクトルを選択し、各サンプルブロッ
クに対し静止運動ベクトルと共に3つの運動ベクトルを
送るのに使用する。
【0077】図33は、領域Aにおける運動ベクトルの
減少を示す説明図である。これは、調べるべき運動ベク
トルの数が最も多いので、取扱いが一番複雑である。図
33には、他のサンプルブロックa〜hにより囲まれ陰
影を施した中心サンプルブロックが示される。最初に、
局部的に導出された運動ベクトルについて、それが良好
な運動ベクトルに分類されたかどうかを調べる。そうで
あり、且つ静止運動ベクトルと同じでない場合、それは
合格となる。しかし、これらのテストのどちらかに不合
格であれば、それは無視される。次に、サンプルブロッ
クdに対応する運動ベクトルについて、それが良好な運
動ベクトルとして分類されたかどうかを調べる。そうで
あり、且つ既に選択された運動ベクトルと同じでなく、
静止運動ベクトルとも同じでないならば、それも合格と
なる。これらのテストのどれかに不合格ならば、それも
無視される。この処理は、e,b,g,a,h,c,f
の順に同様に続けられる。静止運動ベクトルを含まない
3つの運動ベクトルが得られると、直ちにアルゴリズム
は停止する。それは、そのサンプルブロックに対する所
要の運動ベクトル選択が終わるからである。しかし、こ
れらのチェックを全部行っても3つの良好な運動ベクト
ルが得られないことがある。その場合、残りの空白を全
体的運動ベクトルで埋めるが、より頻度の高い全体的運
動ベクトルに優先権が与えられる。
【0078】図34は、領域Bにおける運動ベクトルの
減少を示す。領域Bにおけるサンプルブロックは、領域
Aにおけるものと同じであるが、他のサンプルブロック
で周りを全部囲まれていない点が異なる。したがって、
これらのサンプルブロックに加える処理は、領域Aにお
ける場合と全く同じである。ただ、周りのすべてのサン
プルブロックにおいて探すことができない点が異なる。 したがって、図22に示すように、サンプルブロックa
〜eに対する運動ベクトルのチェックができるだけであ
り、運動ベクトルに対し空白が残っておれば、前と同様
に全体的運動ベクトルで埋める。同様に、図34におけ
る陰影付きサンプルブロックが2位置だけ左に移動する
と、全体的運動ベクトルに頼る前に3つの隣接する周り
のブロックのみチェックすればよいことが分かるであろ
う。
【0079】図35は、領域Cにおける運動ベクトルの
減少を示す。これは、サンプルブロックが局部的に導出
された運動ベクトルをもたず、周りにその運動ベクトル
を使用できる多くのサンプルブロックもないので、最も
取扱いが難しい。この問題を取扱う最も簡単な方法は、
単に、領域Cのサンプルブロックに静止運動ベクトルと
共に全体的運動ベクトルを与えることである。しかし、
そうすると、領域Bの隣接サンプルブロックと比べ領域
Cのサンプルブロックに与えられる運動ベクトルが急激
に変わるため、得られる画像にブロック状(a blo
ck−like)の影響が出ることに気付いた。したが
って、好ましい方策は、この急激な変化を避けるため、
領域Cのサンプルブロックに対し、領域Bのサンプルブ
ロックに用いたものと同じ運動ベクトルを用いることで
ある。領域Cの各サンプルブロックに、物理的に最も近
い領域Bのサンプルブロックと同じ運動ベクトルを割当
てるのがよい。したがって、図35の例においては、領
域Cの陰影付き各サンプルブロックに領域Bのサンプル
ブロックと同じ運動ベクトルを与える。こうすると、よ
い結果が得られることが分かった。
【0080】再び図4に戻り、運動ベクトル選択器46
の目的は、これに供給される4つの運動ベクトルの1つ
をサンプルブロック内の各画素に割当てることである。 こうして、運動ベクトルが対象物の外形に正確に割当て
られ(マッピングされ)る。この割当てを行う方法は、
微細な細部の周りの背景が正確な運動ベクトルにより生
じるものよりよくマッチする(よく合う)ことがないよ
う特に意図される。これを達成するため、運動ベクトル
選択過程を2つの主な段階に分ける。第1段階において
、入力フレームの各画素に対し運動ベクトルを作る。 いいかえると、出力フレーム位置にある画素に対する運
動ベクトル値を決めようとしない。第2段階では、第1
段階で作った運動ベクトル値を用いて出力フレームにお
ける各画素に対する運動ベクトル値を決める。
【0081】図36及び37は、運動ベクトル選択の第
1段階を示す説明図である。図36において、入力フレ
ーム2の各画素に対し、供給される4つの各運動ベクト
ルを用い、映像データの前及び後のフレーム1及び3と
最もよくマッチする輝度値のテストを行う。画素の輝度
差は、次式により決定される。
【0082】
【数4】
【0083】ただし、P1nmは、フレーム2でテスト
されている画素の位置からテストされている運動ベクト
ルの座標を減じて位置が得られる画素を囲む4×4画素
ブロック内のフレーム1の画素の輝度値、P2nmは、
テストされている画素を囲む4×4画素ブロック内のフ
レーム2の画素の輝度値、P3nmは、フレーム2でテ
ストされている画素の位置にテストされている運動ベク
トルの座標を加算して位置が得られる画素を囲む4×4
画素ブロック内のフレーム3の画素の輝度値である。
【0084】画素(輝度)差が極めて小さいことは、輝
度が最もよくマッチしている、したがってテストされて
いる画素に適用しうる正確な運動ベクトルであることを
示す。正確な運動ベクトルが得られない場合又は後述す
る非遮蔽もしくは遮蔽区域がある場合は、良好なマッチ
は生じないであろう。
【0085】使用される画素ブロック内の平均画素差が
或る閾より上にあるとき、マッチ不良の指示が行われる
。この閾は、正確な運動ベクトルがテストされるときで
も高周波細部は不良のマッチを生じるので、重要な意味
がある。この不良マッチの理由は、運動ベクトル推定に
おける半画素エラー(a half pixel er
ror)の可能性がある。不良マッチを指示すべき閾を
決めるためには、運動ベクトルを必要とする画素を囲む
データ・ブロック内の画素の周波数内容と閾を関係付け
る必要がある。これを達成するため、テストされている
画素に関する最大水平又は垂直画素輝度差の半分に閾値
が等しい場合、自動閾値を決定する。得られる閾値に、
比較される全データ・ブロックを代表させるため、使用
する4×4ブロックの4つの中心画素に対する平均値を
取る。
【0086】図38及び39は、運動ベクトル選択時の
閾値の決め方を示す説明図である。図38に4×4ブロ
ックが示されており、所要の閾値Tは次式で与えられる
。 T=(T1+T2+T3+T4)/8 ただし、例えばT3は、図39に示すように、次の成分
を含む4画素輝度差の最大値に等しく定める。 2つの垂直差  |B2−B3|及び|B4−B3|,
並びに 2つの水平差  |A3−B3|及び|C3−B3|

0087】こうして、図37に示すように入力フレーム
2に対し1フレームの運動ベクトルが得られ、入力フレ
ーム3に対して同様に1フレームの運動ベクトルが得ら
れる。
【0088】場面(シーン)の変化は別として、上述の
運動ベクトル選択の第1段階で生じるミスマッチ(不良
マッチ)の原因に非遮蔽及び遮蔽区域(面)の現象があ
る。対象物、例えば車がトンネルに入ると車は遮蔽され
、トンネルから出ると遮蔽されなくなる。フレーム1及
び2で遮蔽されなかった車の一部がフレーム3及び4で
遮蔽されると、基本的なベクトル選択方法では正確なベ
クトルを決定できない。また、トンネルに入る車は遮蔽
されるが、車の後の道路や物体は遮蔽されていない。 同様に、トンネルを出る車は遮蔽されなくなるが、車の
後の道路や物体は遮蔽されている。したがって、大抵こ
れら遮蔽及び非遮蔽物体は同時に存在する。1場面の終
わりにも、遮蔽される物体と類似した不連続な動きがあ
る。かような状況でも運動ベクトルを決定するため、輝
度値のブロック・マッチ(突合せ)を図27及び28の
3フレーム・マッチの代わりに2フレーム・マッチに減
らす。運動ベクトルが要求されるフレーム(例えばフレ
ーム2)は、供給される4つの運動ベクトルを用いて前
及び次のフレーム(フレーム2の場合、それぞれフレー
ム1及び3)と個別にブロックの突合せが行われる。最
良のマッチを生じる運動ベクトルが、テストされている
画素に適用しうる運動ベクトルとして選ばれる。しかし
、この場合、2フレーム・マッチのみを用いたことを示
す標識を付ける。
【0089】特に積分型テレビカメラの場合、マッチが
生じない場合がある。対象物が詳細な背景を渡って動く
場合、積分型カメラは、対象物の前縁及び後縁が背景の
細部と混合する特有な画像部分を生じる。このような状
況では、2フレーム・マッチでも閾値より上の平均画素
差を生じることがある。これらの場合、運動ベクトル値
をゼロとし、同時にエラー標識を付ける。
【0090】図40は、運動ベクトル選択の第2段階を
示す説明図である。この第2段階では、第1段階で導出
された2フレームの運動ベクトルを利用する。1つのフ
レーム(入力フレーム2)の運動ベクトルを基準フレー
ムと考え、これに続くフレーム(入力フレーム3)を使
用する。そのとき、出力フレームの位置はこれら2フレ
ームの運動ベクトルの間になる。図40において、各出
力画素位置に対し、入力フレーム2のサンプルブロック
に対応する4つの考えられる運動ベクトルがテストされ
る。テストされている運動ベクトルの角度で出力画素位
置を通って引かれる線は、入力フレーム2及び入力フレ
ーム3の両方における位置を指す。例えば、1,3,5
のような奇数値運動ベクトルの場合、出力フレームが正
確に入力フレーム1と2の中間にあるとき、2つの入力
フレーム画素の間に1つの点が指示されるであろう。こ
の不正確性を考慮し、且つ個々の画素に対する感度を減
らすため、最も近い画素位置を中心とする3×3の運動
ベクトル・ブロックを各フレームに対して求める。それ
から、2つの3×3運動ベクトル・ブロックの各々と、
テストされる運動ベクトルを包含するブロックとの間で
ブロック突合せを行う。使用される運動ベクトル差は、
次式で考えられる2つの運動ベクトル値の空間差を表す
【0091】
【数5】
【0092】ただし、x1及びy1はブロックの1つに
おける運動ベクトルの平行座標、x2及びy2はテスト
される運動ベクトルの平行座標である。
【0093】該ブロック突合せの結果、画素当たりの平
均ベクトル差が得られる。
【0094】3つの入力フレーム、すなわち入力フレー
ム2に対しては入力フレーム1,2,3(図36)、入
力フレーム3に対しては入力フレーム2,3,4(図3
7)を用いて計算した運動ベクトル値のみを使用し、上
述のようにまず運動ベクトル・マッチ(突合せ)を行い
、その結果をそれ相応に判断する。9つのブロックに少
なくとも4つの使用可能な運動ベクトルがあるのがよい
。フレーム2及びフレーム3の2つの運動ベクトル・ブ
ロックを使用しうる場合、運動ベクトル差値は、フレー
ム2からの運動ベクトル差値の半分と、フレーム3から
の運動ベクトル差値の半分とを足したものとなる。上述
の技法を用いて最小運動ベクトル差を生じる運動ベクト
ルは、テストされている出力画素に適用可能な運動ベク
トルであると考えられる。3フレーム・マッチ入力運動
ベクトル(図36及び37)により生じた運動ベクトル
差値が1より大きい場合、遮蔽又は非遮蔽面が検出され
、同じ処理が繰返される。しかし、今度はエラー標識を
無視する。すなわち、2入力フレームを用いて計算した
運動ベクトル値を使用する。これは、事実上画像のもっ
と一般的な区域が改良されるが、理論上は非遮蔽及び遮
蔽面に対して必要なだけである。
【0095】上述の両テスト終了後、最小運動ベクトル
・マッチが2より大きい場合、その運動ベクトル値はゼ
ロとし、エラー標識を付ける。これは、運動ベクトルあ
と処理器47(図4)で使用する。
【0096】運動ベクトル選択のあと、殆ど確実にどの
実際の画像状態においても幾つかの画素に対応する偽の
運動ベクトルが若干残る。図41〜46は偽の運動ベク
トルと考えられるものの例を示し、これらの各図におい
て、3角形は同じ運動ベクトルをもつ画素を、星印は周
囲の画素と異なる運動ベクトルをもつ画素を、丸印はテ
スト中の運動ベクトルを示す。
【0097】図41はただ1つの画素が周辺の全ての画
素のすべてとは異なった運動ベクトルを有する場合を示
している。
【0098】図42は、水平に並んだ3つの画素が周囲
の画素とは異なった運動ベクトルを有する場合の水平な
運動ベクトルの印加の状態を表している。
【0099】図43は、垂直に並んだ3つの画素が周囲
の画素とは異なった運動ベクトルを有する場合の垂直な
運動ベクトルの印加の状態を表している。
【0100】図44は、対角線上に並んだ3つの画素が
周囲の全ての画素とは異なった運動ベクトルを有する場
合の対角線上の運動ベクトルの印加の状態を表している
【0101】図45は、まっすぐな十字状に配置された
5つの画素が周囲の全ての画素とは異なった運動ベクト
ルを有する場合の水平及び垂直の運動ベクトルの印加の
状態を示す。
【0102】図46は、対角線上に十字状に配置された
5つの画素が周囲の全ての画素とは異なった運動ベクト
ルを有する場合の2本の対角線上の運動ベクトルの印加
の状態を表している。
【0103】この6つのカテゴリーのいづれかに包含さ
れる画素の運動ベクトルは、実際の画像にはあてはまら
ないものとし、不正確な運動ベクトルの選定の直接的な
結果であるとする。仮にこのような運動ベクトルが補間
プロセスにて用いられたとすると、これらが最終生成の
画像に斑点を作ってしまいがちであり、従ってこのよう
な運動ベクトルは識別して除去することが好ましい。こ
れらのことは、上述のすべての運動ベクトルの集合を検
出し、これを知らせるアルゴリズムを用いることによっ
てなされる。
【0104】このアルゴリズムはそれぞれ同一の2つの
プロセスからなっている。2つの工程が求めるところは
以下のとおりである。図47は画素が整列した状態を示
すものであり、これらのうち三角形の印を付したものは
みな同一の運動ベクトルが関係しているものである。中
央部の9つのベクトルはベクトル1からベクトル9まで
の運動ベクトルをそれぞれ有し、これらの運動ベクトル
は同一である場合もそうでない場合もある。ベクトル5
がテストの対象となっているベクトルである。
【0105】最初の工程において、ベクトル5がまずベ
クトル1、ベクトル3、ベクトル7、ベクトル9と同一
であるかまたは所定の許容範囲であるかどうかを検査し
、次にベクトル2、ベクトル4、ベクトル6、ベクトル
8との比較検定を行う。これらの検定は、ベクトル5が
水平及び垂直に隣あう画素のなかに、そして対角線状の
隣あう画素の中に少なくとも1つの同一物があるかどう
かを調べる過程である。もし一つも同一画素がない場合
は、画素5が良好でないことを示す標識がたつ。
【0106】第1の過程では、単一の点を示す運動ベク
トル、水平の運動ベクトルの印加、垂直の運動ベクトル
の印加、対角線の運動ベクトルの印加及び2本の対角線
の運動ベクトルの印加に関して良好でないことを示す標
識をたてる過程であったが、水平と垂直両方の運動ベク
トルの印加(図45参照)のときの運動ベクトルの検査
は過程2において行われる。第2の過程は、第1の過程
と全く同一の条件の下で行われるが、この場合、すでに
不良の標識が出た運動ベクトルは計算の対象からはずす
。このように、図45に示すように、第1の過程を終え
た後では中央の運動ベクトルにのみ不良のベクトルが立
っているが、第2の過程を終えた後では、まっすぐな向
きの十字状に配置された5つの運動ベクトルに対して不
良のベクトルが立っている。
【0107】不良運動ベクトルの識別をすると、運動ベ
クトルの交換をする。これは運動ベクトルあと処理器4
7(図4)によってなされる。補間や多数決のような様
々な交換方法は適用しうるが、実際単純に交換すると良
い結果が得られることが解っている。これは以下のよう
に行われる(この場合「等しい」の意味するところは、
全く同一であることのみでなく、差異が所定の許容範囲
であることも含む)。仮にベクトル5に不良の標識が立
つと、これが次のものと交換される。
【0108】もしベクトル4とベクトル6とが等しいと
きはベクトル4と交換する。もしベクトル2とベクトル
8とが等しいときはベクトル2と交換する。もしベクト
ル1とベクトル9とが等しいときはベクトル1と交換す
る。もしベクトル3とベクトル7とが等しいときはベク
トル3と交換する。これら以外のときは何もしない。
【0109】再び図4を参照するに、各画素ごとに最終
的に選定された運動ベクトルは運動ベクトル後処理器4
7によって、プログレッシブ走査変換器42からの毎秒
60フレームのプログレッシブ走査変換されたフレーム
と共に補間器48に供給される。補間器48は、図48
に示すように2つのプログレッシブ走査変換されたフレ
ームのみを扱うので比較的単純な構成となっている。連
続する入力フレーム、フレーム1とフレーム2、及び出
力フレーム中の画素に対応する運動ベクトルに対して出
力フレームの時間的位置を利用することにより、補間器
48は既知の方法によって、最初のフレームのどの部分
が2番目のフレームのどの部分と結合し、正しい画素値
を出力するにはどれだけ重み付けをするべきかを決定す
る。言い替えれば、補間器48は、毎秒24フレームに
対応した運動が補正されたプログレッシブ走査フレーム
を生成すべく運動の方向に沿って運動ベクトルに応じて
適宜補間する。運動ベクトルは画素の輝度値にのみ基づ
いて定義したものであるが、必要とされる出力画素の色
度値を発生させるためにも同様の運動ベクトルが用いら
れている。各フレームからは8x8の配列の画素が必要
とされる出力を得ることに用いられている。このように
、補間器48は、垂直水平の2次元的なものであり、補
間器及び補間器48のために用いられる係数は、プレン
テスホールインコーポレイテッド社刊ローレンス・アー
ル・ラビナー、バーナード・ゴールド著の「デジタル信
号処理の理論と応用」の134頁から140頁及び22
7頁に十全に解説されているレメズ(Remez)の変
換アルゴリズムを用いることによって決定する。
【0110】図48は、3つの異なった場合での補間器
48(図4)の補間動作を図式化したものである。左側
に示す第1の場合では、覆いを取り払われる表面も覆わ
れる表面も存在しない場合である。中央に示す場合は、
覆われる表面が存在する場合である。右側に示す第3の
場合は、多いを取り払われる表面が存在する場合である
。覆われる表面が存在する場合では、フレーム1だけを
用いて補間を行うが、覆いを取り払われる表面が存在す
る場合は、フレーム2だけを用いて補間を行う。
【0111】動きが存在しない場合、補間動作を停止す
るために補間器48にて準備を行うことができる。この
場合時間的にもっとも近いプログレッシブ走査変換され
たフレームが用いられる。
【0112】上述の構成においては、特に図2に示す構
成においては、毎秒60フィールド、毎秒30フレーム
2:1の飛び越しフォーマットの信号が毎秒24フレー
ム1:1のプログレッシブフォーマットに、以下の手順
によって変換される。a)飛び越された信号を標準変換
器12に各入力フィールドが8回繰り返されるように1
/8の速度で入力する。b)各入力フィールドに関して
プログレッシブ走査変換器42を用いてプログレッシブ
フォーマットフレームを形成する。c)入力フレームが
10回繰り返されるごとに補間器48による適当な補間
動作によって現在形成中のプログレッシブフォーマット
フレームの間に供給される運動ベクトルの間に出力フレ
ームを、これを10回繰り返しながら形成する。d)出
力フレーム各10個ごとに1つを記録する。
【0113】この標準変換器12は実時間の1/8の速
さで作動し、飛び越されたフレームが5個入力するごと
に4個の出力フレームが生成され、これによって毎秒3
0フレームから毎秒24フレームの変換がなされること
がわかる。
【0114】いくつかの応用例、例えば毎秒24フレー
ム1:1のフォーマットの信号でその後の処理も続行さ
れる場合、または標準的なHDVSの録画装置にて毎秒
24フレームのフォーマットの信号を録画しこれを再生
することが求められるような場合などに、3232変換
手法を用いた毎秒24フレームのフォーマットの変形を
用いることが有効である。3232変換手法に関する詳
しい説明は、英国特許出願GB9018805.3号に
開示されておりその内容はここに含まれるものとする。
【0115】毎秒24フレーム1:1のフォーマットの
フレームが4個連なっている信号と毎秒30フレーム6
0フィールドで3232変換手法を行ったフォーマット
の信号との相互関係は図49に示してある。第1のフレ
ームAは最初の3個のフレームを作るのに用いられるが
、奇数フィールド3はファントムフィールドである。 フレームBは次の2個のフィールド4及び5を作るのに
用いられる。フレームCはその次の3個のフィールド6
から8を作るのに用いられるが、偶数フィールド8はフ
ァントムフィールドである。順番で最後のフレームDは
最後の2つのフィールド9、10を作るのに用いられる
【0116】図1から48を参照して説明されるシステ
ムを変形し、このシステムが毎秒60フィールド毎秒3
0フレームの2:1の飛び越しビデオ信号を毎秒60フ
ィールドで3232変換によって運動を補正したものに
変換できるように、さらに図2のフレームレコーダ13
とVTR14を1/8の速さで作動させることによって
、録画されたフィールド間の期間が9、7、9、7..
.フィールド期間として1/10の速さで行う場合(標
準変換器12からの出力の10フレームごとの繰り返し
を維持しながら)よりもきわめて簡単な方法によって達
成できるようにすることが望ましい。この狙いは入力フ
レーム5個に関して図50に示されている。
【0117】図50の列AとBに示すように、6つの入
力フレーム1から6それぞれの2つのフレーム0/Eが
8回繰り返される。これらの入力フィールドはプログレ
ッシブ走査変換器42によって用いられ列Dに示すよう
なプログレッシブ走査フレームをそれぞれ形成し、この
プログレッシブ走査フレームは1対のフレームメモリに
交互に格納される。格納されたあるプログレッシブ走査
フレームは補間器48にて単独でまたは対で用いられて
4つのフィールドを生成する。その各々は列Eに示すよ
うに補間器48から10回出力される。フィールドはフ
レームレコーダ13によって、各列4番目ごとに録画さ
れ、列Fに示すように9/60秒ごとに記録されるフィ
ールドと7/60秒ごとに記録されるフィールドとの間
の期間で交互に奇数と偶数のフィールドとなる。そして
これらのフィールドはVTR14に記録される。
【0118】このように、通常の速度で録画が繰り返さ
れると、録画された10個のフィールドに3232変換
手法が適用され、フレームAからは1、5、9番目のフ
ィールドを抜取り、フレームBからは3、7番目のフィ
ールドを抜取り、フレームCからは1、5、9番目のフ
ィールドを抜取り、フレームDからは3、7番目のフィ
ールドを抜取り、これらに対して順番に1奇数、1偶数
、2奇数、2偶数・・・5偶数の役目を与え、図50の
列Gに示す24Hz1:1のフォーマット列が形成され
る。
【0119】録画速度が(1/10から1/8へと)増
加した場合の3232変換を行うための変更例としては
、プログレッシブ走査フレームをフレームレコーダ13
に1/10の速度で書き込み、VTR14に供給すると
きは3232変換で読み出すようにしてもよい。この変
更例は図51に示してある。この列Eは上述の図50に
おける列Eと対応する。各プログレッシブ走査フレーム
が1回繰り返されると、列Fに示すようにこれがレコー
ダ13に書き込まれる。これらのフレームの奇数と偶数
のフレームはレコーダ13から読み出され列Gに示すよ
うに1奇数、1偶数、1奇数、2偶数、2奇数、3偶数
、3奇数、3奇数、4奇数、4偶数、といった順番でV
TR14に記録され、1奇数、2偶数、3奇数、4偶数
・・・9奇数、10偶数の順番でフィールドが3232
変換される。ここで3番目と8番目とがファントムフィ
ールドである。この変更例では図50によって説明した
ものと比較してレコーダ13の格納容量が少ない場合に
利点があり、またVTR14を止めたり走らせたりする
回数が少なくて済む。
【0120】さらに上述のシステムを用いて、運動補正
補間によって30Hz1:1フォーマットのフィルム内
容を毎秒60フィールド2:1の飛び越しHDVSフォ
ーマットに変換することができることが望ましい。これ
は図52に示すように、変換された信号の奇数フィール
ドは入力フレームから直接形成し、変換された信号の偶
数フィールドは連続するフィールド間の等しい時間シフ
トによる運動補正補間操作によって形成することによっ
て達成されうる。しかしながら、この方法では元の素材
にノイズが多く含まれている場合フィールドの対で空間
的な反応とノイズレベルの変調が不均一になる。これは
、直接生成された出力フィールドは元のノイズを含んで
いるが、補間によって生成された出力フィールドはその
補間作用によってノイズが減少するからである。これら
の問題を回避するために図53Aに示すような時間的補
間操作を行う。すなわち奇数フィールド生成にあたって
は、元の記録素材の先行するフレームと後続するフレー
ムとの間で1/4フレーム相当分だけ時間的にずらし、
偶数フィールドの生成にあたってはこれらフレーム間の
3/4フレーム相当分の時間内で補間を行う。
【0121】図53Bを参照するに、仮に入力フレーム
1と2の間の出力フィールドA0の中の1つの画素が位
置(x、y)と運動ベクトル(m、n)を有するものと
すると、この画素の値は入力フレーム1の位置座標(x
−(m/4),y−(n/4))の画素(またはパッチ
)の値と、入力フレーム2の位置座標(x+(3m/4
),y+(3n/4)における画素(またはパッチ)の
値とを平均することによって得られたものである。一方
対応する偶数出力フィールドAEに関しては、図53C
に示すように、出力画素の値は入力フレーム1における
(x−(3m/4),y−(3n/4))の点の画素(
またはパッチ)の値と入力フレーム2の(x+(m/4
),y+(n/4))の点における画素(またはパッチ
)の値とを平均することによって得られる。
【0122】このことを達成するために、図1から図4
8によって説明される構成は、図54によって説明され
るような方法に従って使用される。
【0123】30Hz1:1のフォーマットのフィルム
のフレームは、その3個が図54の列Aに示されている
ように、HDフィルムスキャナによって捕捉されテープ
上に列Bに示すようにビデオフォーマットに変換される
。列B上には奇数Oと偶数Eのフィールドが各フレーム
1、2、3ごとに示されているが、各フレームの2つの
フィールド中の画像データは元の画像では時間的にシフ
トされていない。列Cに示すように、各フレームの2つ
のフィールドは20回繰り返されながらテープはVTR
11(図2)によって1/20の速度で再生される。 各フレームの2つのフィールドはプログレッシブフォー
マットの素材から生成しているために、これらの間に時
間的ずれはなく、このためプログレッシブ走査変換器4
2(図4)は迂回されるかまたは前のフィールドを置き
換えるモードにて作動し、列Dに示すように2つの連続
するフレームが同時に形成されるように元のフレームを
再構成する。
【0124】直接ブロック突合せ器43及び補間器48
に入力されるフレームは、このように各2つのフィール
ドの直接的な組合せとなる。奇数出力フィールドの画素
を形成するためには、補間器は、前のフレーム(例えば
1)と現在のフレーム(例えば2)との間で時間上3/
4:1/4の比率で補間操作を行う。しかしながら、偶
数フィールドの画素に関しては、補間の比率は前のフレ
ーム1と現在のフレーム2との間で1/4:3/4とな
ており、補間されたフレームは列Eに示すようにそれぞ
れ20回繰り返される。20個のフレームは図54の列
Fに示すような方法でそれぞれフレームレコーダ13(
図2)に書き込まれVTR14によって記録され、記録
されたものが再生されるときは毎秒60フィールド2:
1のフォーマットの信号が図54の列Gに示すような方
法で通常の速度で生成される。
【0125】さらに上述のシステムによって24Hz1
:1フォーマットのフィルム素材を毎秒60フィールド
2:1の飛び越しHDVSフォーマットに変換できるこ
とが望ましい。これを行うためにまず24Hz1:1フ
ォーマットのフレームをHDフィルムスキャナによって
捕捉しテープ上にビデオフォーマットに変換する。この
とき用いられる時間的補間手法は図55Aに示す。ここ
で補間の手順は24Hz1:1フォーマットの信号上で
は4フレームごとに繰り返され、毎秒60フィールド2
:1の補間されたHDVS信号上では5フレームごとす
なわち10フィールド(A/奇数からE/偶数)ごとに
繰り返される。
【0126】仮に出力フィールドの画素が(m,n)の
運動ベクトルを有しているとすると、出力画素の値の基
礎として用いられる出力フィールド中の画素の位置と各
2つの入力フレームの画素(またはパッチ)とのずれは
、連続する10個の出力フレームのそれぞれに関して以
下のようになる。
【0127】
【表1】
【0128】このような補間手順を実現するため、図5
3と54によって説明したシステムは、図56に示すよ
うに変更される。図56に示すように、フレームの個々
のフィールドは明瞭を期して描いていない。24Hz1
:1フォーマットのフレーム(これらのうち5個は図5
6の列Aに示す。)は、HDスキャナによって捕捉した
後は(列B)、各フレームの2つのフィールドが列Cに
示すように25回繰り返されながらVTR11(図2)
によって1/25の速度で再生される。図54によって
説明したように、プログレッシブ走査変換器42は、前
のフィールドを置き換えるモードによって作動して元の
フレームを再構築し、列Dに示すように3つのフレーム
が同時に入手できるようにする。ここで補間器48は列
Eに示すようにフレームAからEを作るために必要とな
る補間を行う。
【0129】上の表からもわかるように入力フレーム1
と2は出力フレームAの2つのフィールドを作るために
必要である。入力フレーム1、2及び3は出力フレーム
Bのフィールドを作るのに必要である。入力フレーム2
と3は出力フレームCのフィールドを作るのにも必要で
ある。入力フレーム3及び4は、出力フレームDのフィ
ールドを作るのにも必要である。入力フレーム4及び5
は出力フレームEのフィールドを作るのに必要である。 補間器によってこのように作られたフレームは、列Eに
示すように20回繰り返される。補間された20個のフ
レームのうちの1個は列Fに示すようにフレームレコー
ダ13に書き込まれ、VTR14によってテープに記録
され、通常の速度でテープが再生されると、毎秒60フ
ィールド2:1の飛び越しされたHDVS信号が列Gに
示すように通常の速度で作られる。
【0130】このシステムはさらに3232変換手法の
フォーマットによる24Hz1:1の素材を扱うことが
できることが望ましい。これを行うためには、VTR1
1からの入力テープは1/25の速度ではなくて1/2
0の速度で走らせ、次のフィールドが入力するまでは入
力されたフレーム及びフィールドは25回ではなく20
回繰り返される。列Dでは入力フィールドの繰り返し5
0回ごとに1回フレームが作られ、これゆえ3232変
換手法によるファントムフィールドは無視されうる。従
って、システムは、30Hz1:1のフォーマットのフ
ィルム素材を毎秒60フィールド2:1の飛び越しフォ
ーマットのHDVSに変換することに関連した図54で
説明した場合と似た形で操作される。
【0131】図55A及び56で説明した構成を変形し
て、毎秒60フィールド2:1の飛び越しフォーマット
への変換ではなしに30Hz1:1のフォーマットへの
変換ができるようにしてもよい。この変更によって出力
フレームは図55Bで示すように入力フレームから作る
。この変更を達成するにあたって、図56の手法に対し
てしなければならない変更は補間の動作の変更のみであ
る。すなわち、運動ベクトル(m,n)を有する出力フ
レームの画素に対して、出力画素値の決定に用いられる
、出力フレームの画素の位置と2個の各入力フレームの
画素(またはパッチ)の位置のずれは、5つの連続する
出力フレームの各々に関して以下のようになる。
【0132】
【表2】
【0133】上述のシステムで、毎秒60フィールド2
:1飛び越しHDVSフォーマット信号から30Hz1
:1のプログレッシブフォーマットに変換してビデオ信
号から30Hzのフィルムを作るにあたってEBR35
(図3)が使えるようであることが望ましい。このよう
な30Hzの信号はHDVSにおける隣あう2つのフィ
ールドから各フレームを合成することによって作成可能
である。しかしこのようにすると、各フレームを構成す
る2つのフィールド間の時間上のずれのせいで、30H
zの信号内で2重画像の効果をきたしてしまう。
【0134】図4から14による上述のプログレッシブ
走査のための構成を採用することによって、画像内の部
分的な動きの変化量に応じ補間する画像のフレーム間及
びフィールド間の混合の比率を変化させる効果があり、
このため30Hzの信号に適応した運動を作りだすこと
ができる。しかしながら、もとの画像にノイズが多かっ
たり、運動に適合性を与える過程で見積に誤りがあった
場合は出力画像は必要以上にフィールド間で補間される
傾向があり、このため垂直部の詳細が失われエイリアス
(折り返し)成分が余計に発生することになる。このよ
うな場合、図15から48によって上述した運動補正技
術をさらに用いると出力画像を改善できる。これによっ
て30Hz1:1のとなりあうフレームを時間的補間に
よって結合し、画像の静止している部分または水平に動
いている部分で垂直のエイリアス成分を消去することが
できる。
【0135】運動適合技術のみを用いた技術は図57及
び図58に示す。まず図57を参照すると、すでに述べ
たように出力フォーマットの各フレームA,B,Cは入
力フォーマットの3つのフィールド(例えば1’0’、
1’E’、2’0’;2’0’、2’E’、3’0’;
3’0’、3’E’、4’0’)の異なった配合から作
られる。図58を参照するに、毎秒60フィールドで2
:1HDVSフォーマットの信号(列A)がVTR11
(図2)によって通常の1/8の速度で再生され、それ
ぞれのフレームまたはフィールドは列Bに示すように8
回繰り返される。プログレッシブ走査変換器42(図4
)はフィールドをそのフレームメモリに格納し、列Cに
示すように3つの連続したフィールドが同時に入手でき
るようにする。プログレッシブフォーマットフレームは
列Dに示すように入力フィールド3個の1組から作られ
、これらのこれらのプログレッシブフォーマットフレー
ムはそれぞれ8回繰り返される。それぞれの8フレーム
(列E)はまずフレームレコーダ13によって次にVT
R14(図2)によって記録され、記録された信号は、
通常の速度で再生されるときは30Hz1:1のフォー
マット(列F)である。この運動調整モードでは、プロ
グレッシブ走査変換器42(図4)が採用されているが
、運動補正のためのコンポーネント43から48は採用
されていない。従って、補間器48は入力フレームと出
力フレームの間に時間的偏差量を設定しなくてもよい。
【0136】運動の補正が選択されると、図59と60
にしたがって操作される。図59の上部は、2倍のプロ
グレッシブフォーマットフレームが作成される点を除い
ては図57と類似している。このように形成されたフレ
ームは、運動補正操作をへて、運動補正を行う前の状態
と比較してフレーム半周期分だけ時間的にオフセットさ
れた出力フレームが形成される。
【0137】図60を参照するに、毎秒60フィールド
2:1のHDVSフォーマット信号(列A)はVTR1
1(図2)によって通常の速度の1/10で再生され、
それぞれのフレーム及びフィールドは列Bに示すように
10回繰り返される。上述したように、プログレッシブ
走査変換器42はフィールドをフレームメモリに格納し
、列Cに示すように3つのフィールドが一度に揃うよう
にする。プログレッシブ走査フレーム1”、2’、2”
、3’・・・が入力フィールド3個の組から形成され、
フレームメモリに格納され、列Dに示すように補間器4
8は2個の連続するプログレッシブフォーマットフレー
ムを同時に入手できるようにする。時間的に隣合わせの
対となったこれらのプログレッシブフォーマットフレー
ムは、補間器48によって、2つの入力フレーム間に等
しい時間偏差量で補間されたフレームとなる。補間器4
8によって作られたフレームは列Eに示すように10回
繰り返され、それぞれの10個のフレーム(列F)はフ
レームレコーダ13とVTR14(図2)によって記録
される。このようにして記録された信号は、通常の速度
で再生されるときは30Hz,1:1のフォーマット(
列G)である。
【0138】毎秒60フィールド2:1の飛び越しHD
VSを24Hz1:1のフィルムフォーマットに変換す
るための図1から48により説明した上述の構成におい
て、出力フレームは入力フレームに対応して時間順序に
並ぶか、または入力フィールド期間の半分(1/120
秒)だけ時間的にずれる。時間的に整列するときは、出
力はプログレッシブ走査変換器42(図4)から出力さ
れる各プログレッシブフォーマットフレームに準拠して
いる。一方、時間的にずれるときは、出力フレームの各
画素は、1/2:1/2の割合で、プログレッシブ走査
変換器から出力される先行及び後続のプログレッシブフ
ォーマットフレーム画素または画素パッチの間にて補間
される。ここで、元のフレーム中の画素またはパッチと
出力フレーム中の画素との間の空間的な偏差量は、運動
ベクトルあと処理器47(図4)によって供給される運
動ベクトルに依存している。
【0139】図61Aは、時間的な偏差量は存在せず出
力フレーム中の位置(x,y)における画素は運動ベク
トル(m,n)となっている場合を示している。この画
素は、入力フレーム1中の位置(x,y)における画素
または(x,y)を中心とするパッチから作成されて補
間器に送られ、入力フレームの運動ベクトル及びその内
容は採用されない。
【0140】図61Bはフィールド期間の半分の時間的
偏差量と位置(x,y)における出力画素のための運動
ベクトル(m,n)=(2、2)とがある場合を示して
いる。この画素の値は、入力フレーム1の位置(x,y
)−1/2(m,n)=(x−1,y−1)における画
素(またはそこを中心とするパッチ)と、入力フレーム
2の位置(x,y)+1/2(m,n)=(x+1,y
+1)における画素またはパッチとの間を均等に補間す
ることによって決定される。
【0141】運動ベクトルの成分(m,n)は整数であ
るが、偶数の整数である必要はない。図61Cは、運動
ベクトル(2、1)がある場合である。入力フレーム1
、2の必要とされる画素はそれぞれ位置(x−1,y−
1/2)及び(x+1,y+1/2)であり、これらは
入力フレームの実際の画素位置の中間点に対応する。
【0142】入力フレームから必要とする画素値を得る
ために、8x8のパッチ(図48によって上述したもの
)または62AからDにわたって示した7x7のパッチ
を必要とする画素位置のまわりに設け、パッチの中央画
素と補間によって決定される画素位置(図62AからD
のなかで「o」の印で示す)との間には(0、0)(図
62A),(1/2,0)(図62B)、(0、1/2
)(図62C)(1/2,1/2)(図62D)の偏差
量を導入する。画素「o」の値を決めるために、空間補
間の係数をパッチ内の49画素にたいして適用する。偏
差量の(1/2,0)と(0,1/2)がパッチの対角
線であるx=yの線に関して対称となっているにもかか
わらず、係数の組は図62AからDの4つの場合でいく
らか異なっている。
【0143】上述の構成で問題となることは、図62A
からDの異なる4つの空間補間の場合に対応する反応の
程度は異なっており、異なった反応としての画像の細部
の生成される変調は循環している。この問題を回避する
ために図63及び64で説明する構成を採用する。フレ
ーム1、2の求められる画素またはパッチは、偏差量の
(−1/4,−1/4)が付加されている点を除けば図
61を用いて説明した方法と類似している。このように
、図63Aに示すように、たとえば時間的に整列された
出力フレームのためには、出力フレーム中の画素位置(
x,y)は、入力フレーム1中の位置(x,y)にでは
なく画素位置(x−1/4,y−1/4)の補間された
値に基いている。時間的に整列され、あるいは時間的に
偏差された出力フレームと偶数及び奇数の運動ベクトル
を考慮にいれるならば、入力フレームの必要な画素位置
は、図64Aから図64Dに示すように、空間的補間に
よって算出される所望の画素値が計算されるところの7
x7のパッチにおける中央画素から、入力フレームの所
望の画素位置はつねに(−1/4,−1/4),(1/
4,−1/4),(−1/4,1/4)または(1/4
,1/4)となる。これらの偏差量は、パッチの中心の
画素のまわりに回転対称となっており、従って図64A
から図64Dに示す場合の空間補間の4つの係数の組は
、やはり回転対称となるように選定され、反応の程度が
異なったり画像の細部が変形したりすることを回避する
。上述の構成は、(−1/4,−1/4)の画素の出力
フレーム中に全体的な偏差量を作成するが、これは無視
できる。
【0144】上述のことから、毎秒60フィールド2:
1飛び越しのHDVSから24Hz1:1のフィルムフ
ォーマットに変換することによって、補間器48からの
1つおきの出力フレームは、補間器に入力されるプログ
レッシブフレームのうちの1つから作られる。そして出
力フレームは、補間器に入力される2つのプログレッシ
ブフレーム間の運動補正によって交互に作られる。これ
によって(a)斜め方向の変化は充分に適合しない、(
b)ノイズによってプログレッシブ走査変換の適合が失
敗したとき折り返し効果がおこる、(c)入力される画
像にノイズが多いとノイズレベルに変調が起こる、とい
った結果になる。(b)に関しては、適合のためのプロ
グレッシブ走査がノイズのために失敗すると、プログレ
ッシブ走査フレームがフィールド内の補間によって生成
される。もしこのようなフレームが補間器48によって
直接出力されると、折り返しの多い静止画像が現れる。
【0145】これらの問題を減少させるには、補間器4
8からの時間的に整列された出力フレームの場合は、補
間器への2つの各入力フレームの等しい加算によってフ
レームが作られるが、運動ベクトルは、出力フレーム中
の各画素とフレーム2にて用いられる画素またはパッチ
との間の空間偏差量を決定するのに用いられ、出力フレ
ーム中の各画素とフレーム1にて用いられる画素または
パッチとの間の運動ベクトルに依存する空間偏差量を決
定するには用いられない。この手法は、図63と64と
を用いて説明した1/4画素偏差量の手法と関連づけて
図65に示してある。ここにかかげてある例において、
出力フレーム中の位置(x,y)に於ける画素は運動ベ
クトル(2、1)をもっている。従って、フレーム1か
ら用いられる概念の元になる画素は、(x−1/4,y
−1/4)の位置にあり、従って位置(x,y)が中心
となる7x7のパッチは、(−1/4,−1/4)(図
64A)の位置の偏差量のための空間補間係数の組とも
用いられる。一方、フレーム2から用いられる概念の元
となる画素は、(x+7/4,y+3/4)の位置にあ
り、従って用いられる7x7のパッチはその中心が(x
+2,y+1)の位置にあり、空間補間係数の組は、(
−1/4,−1/4)の偏差量に対して用いられる。
【0146】2つの入力フレームを均等に合算すること
によって出力フレーム中の各画素を作り出すことによっ
て、出力フレームと入力フレームとの間に時間的偏差量
があるなしにかかわらず、折り返しひずみが除去される
。なぜならフィールド間の運動が正確にラインの倍量で
あるかぎり、フレーム2の折り返しはフレーム1の折り
返しのとは位相が反対になるからである。この手法にお
いて、合成されたラインが合成されていないラインと混
合されることにより、垂直方向への反応が良好になる。 さらによいことには、もし入力画像にノイズがあっても
、1つおきの出力フレームが入力フレームのたった1つ
から作られていた場合とは異なり、ノイズが変調される
ことがない。
【0147】次に24Hzのフィルムから24Hzのフ
ィルムでHDVSポストプロダクションを可能にするも
のへの変換のために第1に用いられる上述の装置を用い
た特定のシステムの説明に入る。運動を補正する補間手
順の複雑さのためにこれのための装置は大規模で高価な
ものになりがちである。さらに、工程のなかで人工物が
ビデオ信号に混入してしまう危険性が常に存在する。こ
のために、可能なかぎり運動を補正する過程の単一の段
階が、元の素材から最初の配給経路までの間にのみ存在
することが望ましい。
【0148】図66を参照すると、第1の素材は24H
zのフィルム100素材であり、最初の配給経路も24
Hzフィルム素材102である。もとのフィルム100
は高品位フィルムスキャナ104によって読み取られる
。このフィルムスキャナは3232変換システム106
を内蔵していて高品位の60Hz3232フォーマット
の信号を生成し、VTR108がこれを記録する。
【0149】2番目の元は、毎秒60フィールド2:1
の飛び越しHDVS信号をVTR112に供給するカメ
ラ110である。このVTR112はHDVS信号を標
準変換器114に入力し、これが毎秒60フィールド2
:1のHDVS信号を60Hz3232フォーマット信
号に変換し、これがVTR116によって記録される。 標準変換器は、したがって図49から51を用いて説明
したようなものになる。VTR108,116によって
毎秒60フィールド3232フォーマットの信号を再生
するときは、これらの信号はHDVSポストプロダクシ
ョンシステム118によって統合されて、60Hz32
32のフォーマットで出力し、これがVTR120によ
って記録される。3232変換されたフォーマトの信号
のポストプロダクションに関する詳しい情報は英国特許
出願GB9018805.3号に掲載されており、その
内容はここに参照する。
【0150】VTR120による信号の再生において、
最初の経路はフィールド間引き装置122であり、これ
が信号を24Hz1:1のフォーマットに変換すると、
この変換された信号が電子ビームレコーダ(EBR)1
24によって使用されてフィルム102が作成される。 第2の配給経路はVTR126によって提供され、この
VTRがフィールド間引き装置122からの出力信号を
記録する。この再生信号は625ライン変換器128に
供給され、これが毎秒50フィールド2:1飛び越し6
25本の信号を生成するとともに、高品位50Hz2:
1/1:1変換器130にも供給され、ここで50Hz
1:1の高品位ビデオ信号が形成される。入力フレーム
周波数が25Hzではなく24Hzであるために、変換
器120と130からの信号出力に4%の速度誤差が生
じていることに注意されたい。
【0151】第2の出力経路はVTR120からHDV
SからNTSCへ変換してNTSC59.94Hz2:
1の信号を形成する変換器132へと至る経路である。 さらに、60Hz3232フォーマットの信号はライン
134に直接出力されている。標準変換器136はVT
R120からの60Hz3232フォーマットの信号を
毎秒60フィールド2:1の飛び越しされたHDVS信
号に変換する。この標準変換器136は図56によって
上述したものである。標準変換器136の出力は、HD
VSからNTSCへと変換する変換器138へと供給さ
れ、ここでNTSC59.94Hz2:1の信号が形成
される。この信号は、標準変換器136がファントムフ
ィールドを適切に除去するために、変換器132によっ
て形成される信号よりも一層利用しやすい性質をもって
いる。
【0152】上述の構成は以下のような特徴と利点をも
っている。まず、標準変換器114において、すべての
獲得媒体(フィルム100とカメラ110)と24Hz
フィルムのための1次配給路との間には運動補正の補間
の段階は1つしかない。次に、ポストプロダクションシ
ステム118によって、カメラ110またはその他の元
からの毎秒60フィールド2:1のHDVS原素材と2
4Hzのフィルム素材とを統合することができる。第3
に、60Hz3232フォーマットのHDVS信号が伝
達される第2の配給経路であるライン134が設けてあ
り、これによって多くの応用が可能になる。これによっ
てビデオ用と映画用の素材を個別に制作する必要がなく
なる。第4に、標準変換器136からの毎秒60フィー
ルドHDVS信号を通じて付加的なまたは代替の第2の
配給経路が存在する。最後にビデオ信号を通常の品位の
NTSC(米国や日本にて使われている)信号に変換し
、あるいは毎秒25フィールド2:1飛び越しにて高品
位または625本の信号に変換する手段を具えている。
【0153】以下に24Hzのフィルムから毎秒60フ
ィールド2:1の飛び越しHDVSでHDVSポストプ
ロダクションが可能なものへと変換するために第1に用
いられる上述の装置を採用した特定のシステムについて
以下に述べる。これまでのように、運動補正の補間過程
が複雑であるため、そのための装置が大規模で高価なも
のになりがちであった。さらに、処理過程においてビデ
オ信号に人工的な内容が混入てしまう危険があった。こ
のため、可能なかぎり元と最初の配給経路との間には、
運動補正のための過程は1つの段階で終えてしまうこと
が重要である。
【0154】図67を参照すると、最初の元は24Hz
のフィルム素材140であり、最初の配給はライン14
2を通じて毎秒60フィールド2:1HDVSの信号に
よって行われる。もとのフィルム140は高品位フィル
ムスキャナ144によって読み取られ、これによって2
4Hz1:1の信号がVTR146に供給される。VT
R146によって再生される信号は標準変換器148に
供給される。ここで24Hz1:1のフォーマットの信
号は毎秒60フィールド2:1の飛び越しフォーマット
の信号に変換され、VTR150によって記録される。 従って、ここで標準変換器148はは図55を用いて説
明したものであることに留意されたい。
【0155】第2及び第3の元はカメラ152及びVT
R154の形態を取っている。これらのおのおのは毎秒
60フィールド2:1の飛び越しのビデオ信号を形成し
ている。VTR150、カメラ152及びVTR154
はHDVSポストプロダクションシステム156によっ
て統合されて、毎秒60フィールド2:1の飛び越しの
HDVS信号を形成し、これがVTR158によって記
録される。第1の出力経路はVTR158からライン1
42を通じてのものであり、これを通って毎秒60フィ
ールド2:1の飛び越しHDVS信号が伝送される。
【0156】第2の配給経路はVTR158からHDV
S−NTSCダウンコンバータ160へと至るもので、
この変換器から標準のNTSC信号が出力され、またH
DVSから1250/50高品位変換器162を通じて
毎秒50フレーム1:1のビデオ信号が出力される。6
25本毎秒50フィールドで2:1の飛び越し信号は、
変換器162の出力と接続され、1250/50から6
25本へと変換する変換器164によっても、またVT
R158からの毎秒60フィールド2:1の飛び越しH
DVS信号を受信しHDVSから625/50へと変換
する変換器166によっても提供される。
【0157】第2の分配経路は、VTR158からの毎
秒60フィールド2:1の飛び越しHDVS信号をVT
R170によって記録される24Hz1:1フォーマッ
トの信号に変換する標準変換器168によって提供され
る。標準変換器168は、これゆえ図1から48を参照
して上述したものである。VTR170からの再生信号
は、電子ビームレコーダに供給され24Hz1:1のフ
ィルムが作られる。
【0158】第2の配給経路は、さらにVTR158か
らの毎秒60フィールド2:1の飛び越しHDVS信号
を受信し、30Hz1:1フォーマットの信号をVTR
178に供給する標準変換器176も至っている。変換
器176はそれゆえ図57から60によって説明したも
のである。VTR178は30Hz1:1の信号を再生
し、電子ビームレコーダ180に送り、これによって3
0Hz1:1フィルム182を形成する。
【0159】図67によって説明したシステムは、以下
のような特徴と利点とを持っている。まず、すべての獲
得媒体と第1の配給経路であるライン142との間には
標準変換器148の中に運動補正補間の単一段階がある
。また、このシステムによって毎秒60フィールド2:
1の飛び越しされたHDVSの元の素材を24Hzのフ
ィルム素材と統合することが可能になり、カメラ152
はポストプロダクションの循環過程のなかで用いてもよ
い。第2の配給経路は30Hzのフィルム用信号を出力
するために設けられている。そしてこの場合、標準変換
器176は運動補正補間の過程を経ることなく、図57
と58によって説明した運動適合化補間だけで用いても
よい。24Hzのフィルムを出力する手段を設けてもよ
いがこれは運動補正のための補間のもうひとつの段階が
含まれてしまうことになる。このシステムは通常の品位
のNTSC(米国及び日本で用いられている)に変換す
る手段と、25Hzのフレームレートで高品位の信号と
625本のフォーマットの信号とに変換する手段を提供
している。
【0160】以下に30HzのフィルムをHDVSポス
トプロダクションが可能である30Hzのフィルムに変
換するために第1に用いられる上述の装置を採用した特
定のシステムを説明する。ここでも、運動補正の補間過
程が複雑であるため、これの装置は大規模で高価なもの
になりがちである。さらに、ビデオ信号の中に処理中に
人工的な内容が混入してしまうおそれがある。このため
、元の素材と最初の配給経路との間にはいる運動補正処
理の段階の数はできるかぎり少なくすることが重要であ
る。
【0161】図68を参照すると、第1の元の素材は3
0Hzのフィルム素材190であり、これの1次出力は
30Hzのフィルムである。もとのフィルム190は高
品位フィルムスキャナ194によって読み取られ、これ
によって形成される30Hz1:1の信号がVTR19
6に供給される。
【0162】第2及び第3の素材はカメラ198及びV
TR200であり、これらはそれぞれ30Hz1:1の
ビデオ信号を形成する。4番目及び5番目の素材は、カ
メラ202及びVTR204の形態をとっており、これ
らは毎秒60フィールド2:1の飛び越しのHDVS信
号を形成して標準変換器206に供給する。ここで信号
は30Hz1:1の信号に変換されるとともに運動を適
合化する補間は行うが、運動を補正する補間は行わない
。従って、変換器206は図57と58で説明した構成
のものである。
【0163】VTR196、カメラ198、VTR20
0及び標準変換器206からの30Hz1:1のフォー
マットの信号は、HDVSポストプロダクションシステ
ム208によって統合され30Hz1:1のビデオ信号
を出力し、VTR210によって記録される。第1の出
力経路はVTR210から電子ビームレコーダ212へ
至り、30Hz1:1のフィルム192が形成される。
【0164】第2の分配経路は、VTR210から始ま
って標準変換器214からVTR216へと至る。変換
器214は入力された30Hz1:1のビデオ信号を毎
秒60フィールド2:1の飛び越しフォーマットに変換
するものであり、ゆえに図54によって説明したものと
同じ形態のものである。VTR216によって再生され
た信号は、ライン218に60Hz2:1の飛び越しH
DVS信号として出力され、さらに変換器220、22
2、224によってそれぞれNTSCフォーマット、1
250/50フォーマット及び625本毎秒50フィー
ルド2:1飛び越しフォーマットに変換する。さらにV
TR216によって再生される毎秒60フィールド2:
1の飛び越しHDVS信号は、図1から48によって説
明したものと同種の標準変換器226によって変換され
、24Hz1:1フォーマットになり、VTr228と
電子ビームレコーダ230を通じて24Hz1:1フィ
ルム232が形成される。VTR228によって再生さ
れる24Hz1:1の信号は変換器234によってライ
ンレート変換され、かりそめの25Hzのフレームレー
トのビデオ信号を形成してもよい。
【0165】図68によって説明したシステムは以下に
述べるような特徴と利点とを持っている。第1に獲得媒
体190、198、200、202及び204と30H
z1:1のフィルム192への第1配給経路との間には
運動を補正する補間過程が設けられていない。第2にこ
のシステムによって30Hzのフィルム素材が元となっ
ているビデオをポストプロダクションによって統合する
ことができ、カメラをこのポストプロダクションの循環
のなかで用いてもよい。第2の配給経路では、受け入れ
可能な運動特性はそのままにして複雑な運動を補正する
ための補間は行わないようにして、毎秒60フィールド
2:1の飛び越しされたフォマットの信号と59.94
HzのNTSCフォーマットとを伝送する。毎秒60フ
ィールド2:1の飛び越しHDVS信号とNTSC信号
とによって描写された動きは、標準変換器214によっ
て運動が補正されたプログレッシブ飛び越し変換される
ことによって向上する。24hzのフィルムを出力する
手段を設けてもよいが、こうすると動きを補正する補間
の第2過程が導入されることになる。システムに通常の
品位のNTSC(米国や日本で用いられている)の信号
に変換する手段や、25Hzのフレームレートで高品位
及び625本のフォーマットの信号に変換する手段を設
ける。標準変換器206によって標準的なHDVS2:
1の飛び越しのカメラ及びVTR204をビデオ画像の
獲得に用いることが可能になるが、これらの出力は運動
適合化過程によって30Hz1:1のフォーマットに変
換される。ゆえに、動く画像の縦方向の解像度は30H
z1:1のカメラ198及びVTR200の場合よりも
一層制限を受ける。図68のシステムは、画像をプログ
レッシブ走査フォーマットにしたがって処理するにはポ
ストプロダクションの循環が必要である。この点に関し
ては英国特許出願GB9018805.3号が参照文献
であるが、その内容は参考のためにこの中に組み込んで
ある。
【0166】以下に、30Hzまたは60Hzのフィル
ムをHDVSポストプロダクションが可能な毎秒60フ
ィールド2:1の飛び越しされたHDVS信号に変換す
ることに主として用いられる、上述の装置を採用した特
定のシステムの説明をする。ここでも運動補正のための
補間過程が複雑であるために、装置が大規模で高価にな
りがちである。さらに処理過程での人工物がビデオ信号
に混入するおそれが常にある。このため、元の素材と第
1の配給経路との間に設けられる動きを補正する過程は
、可能なかぎり1段階を越えないことが重要である。
【0167】図69を参照すると、第1の素材は30H
zのフィルム素材240または242であり、第2の素
材は60Hzのフィルム素材であり、第3及び第4の素
材は毎秒60フィールド2:1の飛び越しHDVSフォ
ーマットで信号を形成するカメラ246とVTR248
である。そして第1の配給経路はライン250をつうじ
て毎秒60フィールド2:1のHDVS信号にて行う。
【0168】30Hzの元のフィルム242は高品位フ
ィルムスキャナ258によって読み取られ、30Hz1
:1の信号をVTR260に供給する。VTR260に
て信号の再生を行うときは、図54によって説明した上
述のものと同種の標準変換器262によって、かならず
しも実時間のレートではないが毎秒60フィールド2:
1の飛び越しされたHDVSフォーマットに変換される
。この変換された信号はVTR264によって記録され
る。別の方法としては、30Hz1:1から毎秒60フ
ィールド2:1の飛び越しフォーマットに実時間で変換
することは可能である。30Hzの元のフィルム240
は高品位フィルムスキャナによって読み取られ、30H
z1:1の信号がVTR254に供給される。VTR2
54で信号を再生するときは、信号は変換器256によ
って毎秒60フィールド2:1の飛び越しフォーマット
のHDVS信号に実時間で変換される。60Hzのフィ
ルム244の場合は各フィールドに対してプルダウンを
するための装置268に組み込まれている高品位フィル
ムスキャナ266によって読み取られ、60Hz2:1
の飛び越しフォーマットHDVS信号が形成され、これ
がVTR270によって記録される。
【0169】変換器256、VTR264、VTR27
0、カメラ246および/またはVTR248からの6
0Hz2:1の飛び越しフォーマットビデオ信号は、H
DVSポストプロダクションシステム272によって統
合され、毎秒60フィールド2:1の飛び越しされたH
DVS信号を形成し、これがVTR274にて記録され
る。この第1の出力経路はVTR274からのライン2
50であり、これによって毎秒60フィールド飛び越し
されたHDVS信号が伝送される。
【0170】2次的配給経路VTR274からHDVS
から標準的なNTSC信号に変換してこれを出力するN
TSC変換器276へと至り、あるいは毎秒50フレー
ム1:1のビデオ信号または毎秒50フィールド2:1
の飛び越しされたビデオ信号を供給するHDVSから1
250/50へと変換する高品位変換器278へと至る
。625本で毎秒50フィールド2:1の飛び越し信号
は、変換器278の出力に接続され1250/50から
625本に変換する変換器280によっても、またVT
R274から毎秒60フィールド2:1の飛び越し信号
を受信しHDVSから625/50の信号へと変換する
変換器282によっても供給されうる。
【0171】さらに2次的配給経路は、VTR274か
らの毎秒60フィールド2:1の飛び越しHDVS信号
を24Hz1:1のフォーマットに変換する標準変換器
284によって提供され、この変換された信号はVTR
286によって記録される。この標準変換器284は、
ゆえに図1から48で説明したものと同様の構成である
。VTR286からの再生信号は電子ビームレコーダ2
88に供給され、24Hz1:1のフィルム290が形
成される。
【0172】さらに2次的配給経路には、VTR274
からの毎秒60フィールド2:1の飛び越しHDVS信
号を受信し30Hz1:1のフォーマットの信号をVT
R294に供給する標準変換器292が設けられている
。この変換器292は、ゆえに図57から60によって
説明したものと同様のものである。このVTR294は
30Hz1:1の信号を再生しこれを電子ビームレコー
ダ296に供給し30Hz1:1のフィルム298を形
成する。
【0173】図69によって説明したシステムは以下の
ような特徴と利点を有している。まず、すべての取材媒
体と1次配給経路250との間に30Hzのフィルム2
58のための標準変換器262の中に動きを補正する補
間過程が1つしかない。またこのシステムによって毎秒
60フィールド2:1飛び越しHDVSをもとにした素
材と30Hzまたは60Hzの素材とをポストプロダク
ションにて統合することができ、カメラ246をポスト
プロダクションの循環のなかで用いてもよい。2次的配
給経路は、30Hzのフィルムを形成するようにもでき
ている。この場合、図57と58によって説明したよう
に、標準変換器284は動きを補正する補間過程を導入
せず、動きを適合化する過程のみを導入して用いてもよ
い。24Hzのフィルムを出力する手段を設けてもよい
が、こうすると運動を補正する補間の第2の過程が含ま
れてしまう。このシステムは通常の品位のNTSC(米
国や日本で用いられている)に変換する手段や25Hz
のフレームレートにて高品位及び625本のフォーマッ
トに変換する手段も具えている。
【0174】以下に30HzのフィルムをHDVSポス
トプロダクションが可能である24Hzのフィルムに変
換するために第1に用いられる上述の装置を採用した特
定のシステムを説明する。ここでも、運動補正の補間過
程が複雑であるため、これの装置は大規模で高価なもの
になりがちである。さらに、ビデオ信号の中に処理中に
人工的な内容が混入してしまうおそれがある。このため
、元の素材と最初の配給経路との間にはいる運動補正処
理の段階の数はできるかぎり少なくすることが重要であ
る。
【0175】図70について説明すると、第一の画像源
は30Hzフィルム素材300であり、その主出力は2
4Hzフィルム素材302である。画像源フィルム30
0は高品質フィルムスキャナ304によって読み取られ
、かかるスキャナより30Hz1:1信号がVTR30
6に供給される。
【0176】第2及び第3の画像源はカメラ308及び
VTR310の形態をしており、かかる画像源の各々に
よって30Hz1:1ビデオ信号が供給される。第4及
び第5の画像源はカメラ312及びVTR314の形態
をしており、かかる画像源の各々によって60フィール
ド/s2:1飛び越しHDVS信号が標準変換器316
に供給され、かかる標準変換器によって30Hz1:1
フォーマットに変換されるが、かかるフォーマットは運
動適合化補間されているが必ずしも運動補正補間される
必要はない。変換器316はそれゆえ図57及び図58
を参照して説明された上記の形態をしている。
【0177】VTR306、カメラ308、VTR31
0及び標準変換器316からの30Hz1:1フォーマ
ット信号は、HDVSポストプロダクション装置318
によって統合されてその出力として30Hz1:1ビデ
オ信号が作成され、かかるビデオ信号はVTR320に
よって記録されることができる。VTR320からの主
出力路は、24Hz1:1フォーマットに変換する標準
変換器322とVTR324とを経由して出力として2
4Hz1:1フィルム302を作成するEBR326へ
到る。
【0178】第二の分配経路はVTR320よりEBR
328に到り、かかるEBR328によって30Hz1
:1フォーマットフィルム330が作成される。更に、
かかる第二の分配経路は標準変換器332を経由してV
TR334に到る。変換器332によって入力30Hz
1:1ビデオ信号は60フィールド/s2:1飛び越し
HDVSフォーマットに変換され、従って、かかる変換
器332は図54を参照して説明した上記の形態をして
いる。VTR334によって再生された信号はそれゆえ
60Hz2:1飛び越しHDVSとして直接的に線33
6上の出力となることができ、また、変換器338、3
40、342によってそれぞれNTSCフォーマット、
1250/50フォーマット及び625ライン50フィ
ールド/s2:1飛び越しフォーマットに変換される。
【0179】図70を参照して説明した装置は、以下の
特徴と利点を有する。第一に、獲得媒体300、308
、310、312及び314のうちのいずれかと24H
z1:1フィルム302に関する主分配経路との間の(
変換器332による)運動補正補間はただ一つの段階だ
けであり、一方入力と出力即ち30Hz1:1フィルム
との間には運動補正補間はないということである。第二
に、かかる装置によって30Hzフィルム素材を有する
ビデオ起源素材のポストプロダクション統合が許され、
カメラ308はポストプロダクションチエーン内で生で
使用されてよいことである。
【0180】第二の分配経路は、受入れ可能な運動特性
を有し且つ複合運動補正補間を有しない60フィールド
/s2:1飛び越しフォーマット及び59.94HzN
TSCフォーマットにて供給される。60フィールド/
s2:1飛び越しビデオ信号及びNTSC信号内の運動
描画は、運動補正プログレッシブによって強化され標準
変換器332によって飛び越し変換される。
【0181】かかる装置によって、通常品質のNTSC
(米国及び日本)にダウン変換する装置も、また高品質
フォーマット及び25Hzのフレーム率を有する625
ラインフォーマットの両者に変換する装置も提供される
。標準変換器316によって、標準HDVS2:1飛び
越しカメラ312及びVTR314をビデオ取得のため
に使用することが可能となるが、その出力は運動適用過
程によって30Hz1:1フォーマットに変換される、
それゆえ運動する像の垂直方向の解像は30Hz1:1
カメラ198及びVTR200を使用する場合よりもよ
り制限されるであろう。
【0182】図70の装置はプログレッシブ走査フォー
マットにて像を処理するポストプロダクションチェーン
を必要とするが、これに関する文献として英国特許出願
GB9018805.3号があり、かかる英国特許出願
の内容は引用として本明細書に組み込むものとする。
【0183】図2を参照して説明した上記の装置におい
て、VTR11は1/8速度にて作動してその出力は標
準変換器12に供給され、該標準変換器によって各出力
フレームは10回反復される。フレームレコーダ13に
よってそれが満杯になるまで反復出力フレームの10回
毎に一つのフレームが記憶され、斯くして記憶されたフ
レームは通常速度にてVTR14に出力され、かかるV
TRによって通常速度にて記録される。素材はそれゆえ
セグメントに変換され、二つのVTR11、14の必要
な開始、停止及びキューがなされる。256フレームの
容量を有するフレームレコーダ13を使用して一時間の
画像源素材を変換するために、レコーダの各々を338
回開始、停止及びキューをする必要があり、それは両レ
コーダのかなりの磨耗を引き起こすことが理解されよう
【0184】更に、交互にVTR11より読み出してV
TR14に記録し、両VTRをキューする操作によって
、変換過程が遅くなる結果を生ずる。実際、上記の例で
は、標準変換器によって1/8速度にて処理されるが、
一時間の素材の変換は8時間ではなく、ほぼ11時間も
かかるであろう。より小さなフレーム容量を有するレコ
ーダ13では、浪費時間は増加するであろう。
【0185】図71の装置について説明すると、かかる
装置は変換速度を可能な最大値に増加することができる
ように設計されている。256フレームの容量を有する
一つのフレームレコーダ13の代わりに、二つのフレー
ムレコーダ13A、13Bが備えられ、かかるフレーム
レコーダの各々は128フレームの容量を有し、且つそ
の各々は標準変換器12の出力を受けシステムコントロ
ーラ15によって制御される。フレームレコーダ13A
、13Bの出力は2:1デジタルマルチプレクサ13C
に供給され、かかるマルチプレクサによってシステムコ
ントローラ15の制御下にある二つのフレームレコーダ
13の一方又は他方からの出力が選択され、該選択され
た信号がVTR14に供給される。
【0186】この変形例では、画像源VTR11はノン
ストップで作動され、標準変換器からの一連の1280
フレーム出力の内各10番目毎のフレームが記録され、
交互に一方のフレームレコーダ13Aによって128フ
レームが記録され他方のフレームレコーダ13Bによっ
て128フレームが記録される。一方のフレームレコー
ダが記録しているとき、他方のフレームレコーダはそれ
に記憶された128フレームをVTR14にプレイバッ
クする時間を有する。かくして一時間素材の変換におい
て、VTR11は一回開始し停止しVTR14は675
回開始し停止するが、使用すべきVTR14の開始と停
止の間には充分な時間がある。従って、一時間素材の変
換時間は8時間であり、この時間は標準変換器の処理速
度によって制限される。
【0187】図71の装置の代替例として、図2に示さ
れている装置が使用されてよい、しかし、かかる装置に
おいて、フレームレコーダ13は同時記録及びプレイバ
ックが許されるものとしてまた循環フレームアドレス計
画によって作動することができるものとして使用されて
いる。斯くして、標準変換器12からのフレームはかか
る標準変換器によって支配される比較的遅い速度にて記
憶され、その後、フレームレコーダがほぼ満杯になると
フレームはVTR14によって要求される比較的早い速
度にてVTR14にプレイバックされ(その間フレーム
レコーダには変換器12からフレームが供給されている
)、フレームレコーダには更に入力フレームによって重
ね書きされることができるように余地が残される。この
種のフレームレコーダを使用することによって、図71
に示す装置に比べて記憶部の必要度が減少され、またマ
ルチプレクサ13Cの必要性が除去される。
【0188】図72の装置について以下に説明するが、
かかる装置はVTR11、14の磨耗量を減少させるよ
うに設計されている。図72の装置は図2の装置と同様
であるが、異なる点は、VTR11とVTR14との間
の経路が、システムコントローラ15の制御下にあるス
イッチ11A、14Aがそれぞれ位置“1”にあるとき
には標準変換器12を経由し、スイッチ11A、14A
がそれぞれ位置“2”にあるときにはフレームレコーダ
13を経由することである。作動は二つの相、即ち、ス
イッチ11A、14Aが位置“1”にある相1とスイッ
チ11A、14Aが位置“2”にある相2のいずれかに
てなされる。
【0189】以下の記述において、VTR11、14上
のテープはフレームのための多くの連続位置又はスロッ
トを有しており、かかるフレームには一時間フレームを
24Hz1:1フォーマットに記録する場合には0から
86399及びスペアの数字が付され、また24Hz1
:1フォーマットに記録される一時間素材のフレームに
は連続的に0から86399の数字が付されることを考
慮されたい。またフレームレコーダ13は253フレー
ムの容量Cを有するものとする。
【0190】相1において、VTR11とVTR14は
間欠的に且つ同時に作動される。VTR11が作動され
ているとき、標準変換器12によって一連のフレームが
作成され、かかるフレームの各々はR回繰り返される、
ここにR=10である。VTR11が作動されて、標準
変換器12によってRC(R+1)=27830フレー
ム(繰り返しを含む)が作成され、これらのフレームの
R(=10)回毎に一つのフレームが通常の速度にてV
TR14によって記録され、それはフレームスロット0
にて開始する、こうして素材のフレーム0から2782
がVTR14上のテープ上のフレームスロット0、10
、20・・・27820に記録され、その中間のフレー
ムスロットはブランクで残される。VTRはそこでキュ
ーされて、それ以前の開始フレームスロットよりC(R
+1)=27830フレームだけ偏倚されたフレームス
ロットにて再び読み込みが開始され、こうしてかかる二
番目の記録走行に対する開始スロットは2783である
【0191】更に次の27830フレーム(繰り返しを
含む)が変換器によって作成され、その10フレームの
うち1フレームが、斯くして、VTR上のテープのフレ
ームスロット2783、2793、2803・・・・3
0603に記録される。再キュー、フレームの作成及び
記録はこのようにして継続され、下記の表3にはフレー
ムとそれが記録されるフレームスロットの数の例が提示
されており、VTR11、14が1+INT(8639
9/2783)(=32)回開始され停止され、全ての
86400フレームがVTR14によって記録された。
【0192】
【表3】
【0193】この表3を分析すると、フレーム数Fを有
するいかなる特定のフレームもパス数がP=INT(F
/C(R+1))である間記録され、スロット数S=R
F−CP(R2 −1)にて記録されることが理解され
よう。更に、記録されるテープの開始端及び終了端に近
づくほど、全てのフレームスロットが使用されるとは限
らないことも理解されよう。例えば、フレームスロット
0と2783の間には、10スロットのうち9スロット
はブランクのままであり、フレームスロット2783と
5566の間では、10スロットのうち8スロットがブ
ランクである。
【0194】相2では、相1にてVTR14に記録され
たテープはVTR11に装填され、新しいテープがVT
R14に装填され、スイッチ11A、14Aが位置“2
”へ移動される。VTR11、14上のテープは通常の
速度にて連続的に走行され、繰り返し再巻取りされ、最
後にテープはVTR11、14を通るR+1(=11)
パスを形成する。各パスにおいて、VTR11より選択
されたフレームはフレームレコーダ13にそれが容量に
達するまで記憶され、斯くして記憶されたフレームは出
力されてVTR14によって記録されるが、これは記録
されるテープの端部に達するまで繰り返される。 各パスに対して、二つのVTR11、14上のテープの
スロット数の間に異なる偏差が存在する。
【0195】より詳細に説明すると、各パスP(P=0
〜R)に対して、VTR14はVTR11の後に開始さ
れ、従ってVTR14上のテープのスロット数S1 と
VTR11上のテープのスロット数S0 との間にはあ
る偏差S0 −S1 =C(PR+R−P)が存在する
。VTR11上のスロット数S0 =PCRより開始し
て、フレームはそのR番目(10番目)毎にフレームレ
コーダ13にそれが満杯になるまで、即ちCフレームが
記憶されるまで記憶される。両VTR11、14が作動
されることによって、記憶されたフレームは通常速度に
てフレーム記憶器13より出力されてVTR14によっ
て記録される。かかる過程は繰り返される、即ち、VT
R11より次のR番目毎のフレームがフレームレコーダ
13に記憶され、更に次の過程が成される。かかる過程
の特別の例が表4及び表5に示されており、表中、F0
 はフレームレコーダに入力されるフレームの元のフレ
ーム数を表し、F1 はフレームレコーダより出力され
るフレームの元のフレーム数を表す。
【0196】
【表4】
【0197】
【表5】
【0198】表4及び表5の解析より理解されることは
、元のフレームはVTR14上のテープの適当なフレー
ムスロットにて段階毎に記録され、従ってR+1パスの
後は元のフレームの全ては正しい順序でテープに記録さ
れる。
【0199】上記の装置を、中間のテープ上のフレーム
が重ね書きされることなしに満足すべき状態にて作動さ
せるためには、(CモジュロR)が0でなく、(Cモジ
ュロR)及びRが共通のファクタを有しないことが必要
である。CとRの値はかかる条件を満足しないものが選
択されてよいが、その場合には、相1で中間のテープの
開始スロットを決定し相2で偏倚量S0 −S1 を求
め、可能なら相2にて(R+1)以上のパスを作成する
ことができるような複雑な装置を使用することが必要で
ある。
【0200】上記の過程の相1の間、各VTR11、1
4の開始及び停止の数は、1+((最高のフレーム数)
/C(R+1))の整数部であり、これは、与えられた
例では、1+INT(86399/2783)=32で
あり、従って、両VTR11、14では合計64である
。相2では、各VTRの開始及び停止数は(R+1)で
あり、両レコーダに対しては22が与えられる。従って
、開始及び停止数の合計数は両相では86であり、この
数字は本例の如き変形がなされていない図2の装置の場
合の数字676と比較すると好ましい値である。
【0201】上記の装置において、60フィールド/s
2:1飛び越しフォーマットより24Hz1:1フォー
マットに変換する場合には、VTR11はスローモーシ
ョン運動の出力、例えば1/8速度にて出力することが
できることが必要である。様々な異なるフォーマット間
に変換することができる多機能の装置が備えられるべき
場合には、標準変換器13は種々の入力速度、例えば1
/8、1/10、1/20等を有することが必要である
。種々のプレイバック速度が可能なVTRの必要性を除
去するために、図73の装置が使用されてよい。この装
置において、フレームレコーダ11Aは、VTR11と
システムコントローラ15の制御下にある標準変換器1
2との間のパスに配置される。
【0202】VTR11は通常の速度にて作動され、一
連の出力フレーム(例えば256)はフレームレコーダ
11Aに記憶される。もしフレームレコーダが満杯にな
ると、かかるフレームレコーダより各記憶されたフレー
ムが標準変換器12に所定の回数だけ例えば1/10速
度のシミュレーションに対して10回出力され、一方一
度該記憶されたフレームの全てが標準変換器に出力され
ると直ちに次の256フレームがフレームレコーダ11
Aに供給されるようにVTR11はキューされる。
【0203】図73の装置では標準変換器は連続的に作
動されることはできない、というのはフレームレコーダ
11Aのリフレッシュのための時間が必要だからである
。この問題を回避するために、上記の如く特別な循環的
アドレス可能なフレーム記憶装置が使われてよく、又は
その代わりに、図74に示された変形例が使用されてよ
い。図74において、一対のフレームレコーダ11B、
11Cが並列に配置され、かかるレコーダの各々からの
出力は(システムコントローラ15の制御下にある)2
:1デジタルマルチプレクサ11Dを経由して標準変換
器12に供給されることができる。斯くして、フレーム
レコーダ11B、11Cの内のいずれかより標準変換器
12に出力されているとき、次の一連のフレームが他の
フレームレコーダに記憶されるべき時間が存在する。従
って、標準変換器12への連続的な出力及びかかる標準
変換器12の作動が可能となる。図71、図73及び図
74を参照して説明した上記の変形例は組み合わせて使
用されてよく、それによってスローモーション運動のリ
プレイの必要性なしにリアルタイム速度より小さい速度
にて連続的に変換することが許される。
【0204】図1〜図48を参照して説明した上記の運
動補正補間装置において、小さな数の運動ベクトルだけ
が画素対画素を基準として試験されることができる。か
かる装置の最適な作動をなすためには、運動ベクトル選
択器46による試験のために最良のベクトルが予め選択
されることが重要である。全体的運動ベクトルを使用す
る技術は単に多くの形式の映像に対して有効であること
が証明されたが、部分に由来する運動ベクトルだけを使
用する技術は特定の素材に対して有効であることが証明
された。両技術とも全ての素材に対して有効ではない。
【0205】上記の装置を改良するために、以下に、映
像を大きなサブ分割に分割し、次にかかるサブ分割の各
々にどの運動ベクトルが最も頻繁に検出されるかを計算
する概念を説明する。この技術は、上記の手法の両者の
長所を組み合わせた中間技術である。
【0206】上記の技術は所定のフィールド内の最も頻
繁に検出された運動ベクトルを計算し、かかる運動ベク
トルを映像全体で使用することができるようにする処理
を含む。全映像領域にて最も頻繁に検出されたベクトル
を計算し、次に、それを或る総括“ベクトル減算”用法
に適用することは、直接に取り巻く画素によっては得ら
れた結果が確定しない領域でも“確からしい”ベクトル
を提供することができるという利点を有する。図1〜図
48を参照して説明した上記の技術は“拡大”処理を含
み、かかる処理は、(図21を参照して説明したように
)映像の隣接する領域より得られた相関面とブロック突
合わせさせることにより得られた相関面を二次元的領域
として総計しそれによって元の面の性質が有効なベクト
ルの計算を許さない場合でも突合わせがなされる領域を
拡大する技術である。
【0207】上記のベクトル減算は、領域内で画素に適
用することができる満足すべきベクトルを発見すること
ができるように累進的に大きくなるブロック内の映像を
考慮する。かかるブロックは単一の“監視領域”、例え
ば32X24画素、より出発し、その後種々の方法で最
大領域、例えば160X72画素まで“拡大”されるこ
とができる。その後、全映像領域、例えば1920X1
035画素より全体ベクトルが得られる。
【0208】ベクトルを求めるときある範囲の異なるブ
ロック寸法を考慮することの利点は、二つのフィールド
の間に渡って運動する対象を囲む領域は該運動ベクトル
を発見するためにほぼ最適な値であることにある。斯く
して背景をパンする如き、小さな対象には小さなブロッ
クが好まれ、大きなブロックには大きな対象が好まれる
【0209】図1〜図48を参照して説明された用法に
おいて、160X72画素より小さい領域も、1920
X1035画素より大きい領域も考慮されない。しかし
ながら、映像を隣接する又は重ね合わされた多くの規則
的な領域にサブ分割し代わりにかかる領域の各々に対し
て中間ベクトルを求めることによって、より大きな対象
に関係するベクトル(即ちかかる対象の特徴量によって
は上記の方法を使用して全体面のベクトルを信頼すべき
程度に検出することを困難し、しかし、かかる対象が全
体ベクトルの表内の重要な総括映像に比較してまだ小さ
すぎる)を好ましいものとすることができる。
【0210】映像領域のサブ分割は様々な方法でなされ
てよい。例えば、映像領域350は図76に示された中
間領域352の規則的な配列、例えば、4X3配列又は
、図78に示された中間領域の不規則な配置、例えば、
3X3配列に分割され、例えばその中央領域354は残
余の部分より小さく、かかる領域に対する中間ベクトル
は他の領域に対するベクトルよりもより偏在して配置さ
れることとなる。中間領域は図76及び図78の如く隣
接されてよく(しかし、明確に区別される)、又は図7
7の領域例によって示されるように重ね合わされてよい
【0211】斯くして、図77において、二つの領域3
56及び358に存在し出力画素Pとして使用すること
ができる運動ベクトルは、全体ベクトル、領域356に
対する中間ベクトル、領域358に対する中間ベクトル
及び画素Pに対する局部ベクトルである。これに代わる
ものとして図75に示されるように、中間領域360に
対する出力である中間ベクトルは領域360より大きく
且つそれを囲む領域362を使用して計算されてよい。 図75及び図77の如き方法によって、隣接する中間領
域内に延長している大きな対象のより小さな部分によっ
て生じる縁効果が最小化される。
【0212】図1〜図48を参照して説明された装置に
おいて、一つの画素に対する運動ベクトルは、全体映像
に対する全体ベクトルと考慮されている画素に対する局
部ベクトルとより選択される。この方法は、図79に示
されているように、考慮されている画素を含む中間領域
に対する一又はそれ以上の形式の中間ベクトルより選択
する可能性を含むように拡大される。映像に対する局部
的ベクトル359は、2X2配列の中間領域に対する全
体ベクトル362、3X3配列の中間領域に対する第二
の中間ベクトル364及び9X6配列の中間領域に対す
る第三の中間ベクトル366を形成すべく使用される。 次に、各画素に対する全体ベクトル、中間ベクトル及び
元のベクトルは、(図4に示す)運動ベクトル選択器4
6と組み合わされて供給される。
【0213】上記の記述において、写真フィルムよりプ
ログレッシブ走査フォーマット信号を得ること、出力さ
れたプログレッシブ走査フォーマット信号を使用して写
真フィルムを記録することについて説明されてきた。他
の画像源を使用し他の最終製品が作成されてよいことは
理解されよう。例えば、入力画像はコンピュータによっ
て作成されてよく、又はアニメーションカメラ又はビデ
オ装置によって製造されたものでもよい。
【0214】上記の説明は3232プルダウンフォーマ
ットについてなされている。しかし、その代わりに、他
のプルダウンフォーマット例えば3223、2323又
は2332が使用されてよいことは理解されよう。
【図面の簡単な説明】
【図1】ビデオ信号・写真フィルム変換装置の従来例を
示すブロック図である。
【図2】本発明によるビデオ信号・写真フィルム変換装
置の一部分を示すブロック図である。
【図3】図2の装置の他の部分を示すブロック図である
【図4】図2の装置の一部の詳細を示すブロック図であ
る。
【図5】プログレッシブ走査変換の説明図である。
【図6】プログレッシブ走査変換説明用フィールド及び
ラインを示す図である。
【図7】プログレッシブ走査変換説明用フィールド及び
ラインを示す図である。
【図8】プログレッシブ走査変換説明用フィールド及び
ラインを示す図である。
【図9】プログレッシブ走査変換説明用フィールド及び
ラインを示す図である。
【図10】動きに合せたプログレッシブ走査変換におけ
るステップを示すブロック図である。
【図11】連続フィールド間に必要な推定及び差の値を
示す図である。
【図12】プログレッシブ走査規準化関数を示すブロッ
ク図である。
【図13】プログレッシブ走査非線形関数を示すブロッ
ク図である。
【図14】プログレッシブ走査変換における欠落ライン
の画素の作成を示す図である。
【図15】サーチブロック及びサーチ区域を示す説明図
である。
【図16】サーチブロックとサーチ区域との関係を示す
ブロック図である。
【図17】相関面の一般例を示す図である。
【図18】サーチブロックの拡大を要する例を示す図で
ある。
【図19】サーチブロックの拡大の例を示す図である。
【図20】サーチブロック突合せができないフレーム区
域を示す図である。
【図21】3サーチブロックに跨る運動体を示す図であ
る。
【図22】図21から得られる相関面1を示す図である
【図23】図21から得られる相関面2を示す図である
【図24】図21から得られる相関面3を示す図である
【図25】閾テスト説明用に相関面の特殊例を示す図で
ある。
【図26】改善後の図25の相関面を示す図である。
【図27】リングテスト説明用相関面の例1を示す図で
ある。
【図28】リングテスト説明用相関面の例2を示す図で
ある。
【図29】サーチブロック拡大方向の決め方を示す図で
ある。
【図30】相関面の加重方法を示す図である。
【図31】サンプルブロック、サーチブロック及びビデ
オフレームの関係を示す図である。
【図32】ビデオフレームにおける運動ベクトル領域を
示す図である。
【図33】ビデオフレームのA領域における運動ベクト
ル減少説明図である。
【図34】ビデオフレームのB領域における運動ベクト
ル減少説明図である。
【図35】ビデオフレームのC領域における運動ベクト
ル減少説明図である。
【図36】運動ベクトル選択の第1階段(1)を示す図
である。
【図37】運動ベクトル選択の第1段階(2)を示す図
である。
【図38】運動ベクトル選択時の閾設定法(1)を示す
図である。
【図39】運動ベクトル選択時の閾設定法(2)を示す
図である。
【図40】運動ベクトル選択時の第2段階を示す図であ
る。
【図41】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図42】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図43】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図44】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図45】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図46】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図47】運動ベクトルのあと処理の説明に用いられる
、画素の配列されたものと関連する運動ベクトルの図で
ある。
【図48】補間器の作用を示した図である。
【図49】24Hz1:1のフォーマットの信号と毎秒
60フィールド3232プルダウンフォーマットの信号
のフレームとの相互関係を示す図である。
【図50】毎秒60フィールド2:1飛び越しフォーマ
ットから毎秒60フィールド3232プルダウンフォー
マットへの変換を示す図である。
【図51】図50の変形例を示す図である。
【図52】30Hz1:1のフォーマットの信号と毎秒
60フィールド2:1の飛び越しフォーマットの信号と
の、出力フィールドの補間を交互にのみ行った場合の相
互関係を示す図である。
【図53】すべての出力フィールドに対して補間を行っ
た場合の図52の変形例を示す図である。
【図54】30Hz1:1のフォーマットから毎秒60
フィールド2:1の飛び越しフォーマットへの変換を示
す図である。
【図55】24Hz1:1フォーマットの信号と毎秒6
0フィールド2:1の飛び越しフォーマットの信号との
相互関係を示す図である。
【図56】24Hzのフォーマットから毎秒60フィー
ルド2:1の飛び越しフォーマットへの変換を示す図で
ある。
【図57】運動適合化プログレッシブ走査変換のみを用
いて毎秒60フィールド2:1の飛び越しフォーマット
の信号から30Hz1:1のフォーマットの信号を形成
する場合を示した図である。
【図58】図57の信号変換を示した図である。
【図59】図57の場合に運動補正のための補間過程を
伴った変形例を示す図である。
【図60】図59の信号変換を示した図である。
【図61】出力フレームの画素と、図48の運動補正の
ための補間器の2つの入力フレームの各画素との関係を
示す3つの例を示す図である。
【図62】図61Aから61Dに示す入力フレーム中の
必要とされる画素の位置と、この入力フレームの実際の
画素の位置との異なる4種類の可能な偏差量を示す図で
ある。
【図63】図61の場合と類似しているが、1/4画素
を偏差量の単位とした場合の図である。
【図64】図62の場合と類似しているが、偏差量は図
63と同様とした場合を示す図である。
【図65】図63A及び図64Aの場合を結合したもの
に類似しているが、時間的偏差量がない場合でもいかに
して2つの入力フレームから出力フレーム中の画素が形
成されるかを示した図である。
【図66】24Hz1:1のフィルムから24Hz1:
1のフィルムでしかも毎秒60フィールド2:1の飛び
越しフォーマットの素材と統合してポストプロダクショ
ンができるものにするシステムの全体図である。
【図67】24Hz1:1のフィルムから毎秒60フィ
ールド2:1の飛び越しHDVSの信号への変換をし、
毎秒60フィールド2:1飛び越しフォーマットの材料
と統合するポストプロダクションが可能なシステムの全
体図である。
【図68】30Hz1:1のフィルムから30Hz1:
1のフィルムへの変換をし、しかも毎秒60フィールド
2:1の飛び越しフォーマットの素材及び30Hz1:
1のフォーマットの素材と統合するポストプロダクショ
ンが可能であるシステムの全体図である。
【図69】30Hz1:1のフィルムから毎秒60フィ
ールド2:1の飛び越しHDVS信号への変換をし、し
かも毎秒60フィールド2:1の飛び越しフォーマット
の素材と統合するポストプロダクションが可能であるシ
ステムの全体図である。
【図70】主として30Hz1:1フィルムより24H
z1:1又は30Hz1:1フィルムへ変換し30Hz
1:1ビデオ又は60Hz2:1ビデオとポストプロダ
クション統合することができる全体装置を示す図である
【図71】変換速度を増加させるべく図2の装置を変形
した例を示す図である。
【図72】ビデオテープレコーダの始動及び停止を減少
させるべく二つの相にて変換することができるように図
2の装置を変形した例を示す図である。
【図73】スローモーション源ビデオテープレコーダの
必要性を除去すべく図2の装置を変形した例を示す図で
ある。
【図74】変換速度を増加させるべく図73の装置を変
形した例を示す図である。
【図75】中間ベクトルを求め且つそれを適用するため
に映像領域を中間領域にサブ分割する方法を示す説明図
である。
【図76】中間ベクトルを求め且つそれを適用するため
に映像領域を中間領域にサブ分割する方法を示す説明図
である。
【図77】中間ベクトルを求め且つそれを適用するため
に映像領域を中間領域にサブ分割する方法を示す説明図
である。
【図78】中間ベクトルを求め且つそれを適用するため
に映像領域を中間領域にサブ分割する方法を示す説明図
である。
【図79】局部ベクトル、全体ベクトル及び様々な中間
ベクトルを選択可能にするための方法を示す説明図であ
る。

Claims (15)

    【特許請求の範囲】
  1. 【請求項1】  毎秒24フレームのプログレッシブ走
    査フォーマットのデジタルビデオ入力信号を毎秒60フ
    ィールドの2:1飛越し走査フォーマットのデジタルビ
    デオ出力信号に変換する方法であって、連続する2フレ
    ーム間で動きを補正した補間をすることにより、5つの
    フィールド毎に少なくとも4つの出力フィールドが作ら
    れるように上記入力フレームから出力フィールドを作成
    する過程を含むデジタルビデオ信号フォーマット変換方
    法。
  2. 【請求項2】  毎秒24フレームのプログレッシブ走
    査フォーマットの素材入力を毎秒60フィールドの2:
    1飛越し走査フォーマットのデジタルビデオ入力信号と
    統合して毎秒24フレームのプログレッシブ走査フォー
    マットの素材出力を作成する方法であって、(a)上記
    プログレッシブ走査素材入力より、ファントム・フィー
    ルドをもつ毎秒60フィールドのプルダウン・フォーマ
    ットのデジタルビデオ信号を作ること、(b)上記2:
    1飛越し走査フォーマットのビデオ入力信号をファント
    ム・フィールド付き毎秒60フィールドのプルダウン・
    フォーマットに変換すること、(c)毎秒60フィール
    ド・プルダウン・フォーマットの上記2つのビデオ信号
    を組合せて1つの組合されたデジタルビデオ信号を作る
    こと、(d)該組合せデジタルビデオ信号の非ファント
    ム・フィールドからプログレッシブ走査フォーマットの
    素材出力を作成することの各過程を含むデジタルビデオ
    信号フォーマット変換方法。
  3. 【請求項3】  毎秒60フィールドの2:1飛越し走
    査フォーマットのデジタルビデオ入力信号を毎秒24フ
    レーム、毎秒60フィールドの3232プルダウン・フ
    ォーマットのデジタルビデオ出力信号に変換する方法で
    あって、上記入力信号のフィールドから第1の毎秒60
    フレーム・プログレッシブ走査フォーマットのフレーム
    列を作ること、上記第1のフレーム列から第2の毎秒2
    4フレーム・プログレッシブ走査フォーマットのフレー
    ム列を、該第1フレーム列の連続フレームの各対間で動
    きを補正した補間をすることにより少なくとも上記第2
    フレーム列における1つおきのフレームができるように
    作ること、上記第2のフレーム列から奇数及び偶数のフ
    ィールドを交互に出力し、5フィールド毎に1フィール
    ドを繰返すことの各過程を含むデジタルビデオ信号フォ
    ーマット変換方法。
  4. 【請求項4】  入力信号の各フィールド対のフィール
    ドがそれぞれ入力画像の時間的に同一の部分を表わす、
    毎秒60フィールド2:1飛越し走査フォーマットのデ
    ジタルビデオ入力信号を、出力信号の各フィールド対の
    フィールドがそれぞれ出力画像の時間的にずれた部分を
    表す、毎秒60フィールド2:1飛越し走査フォーマッ
    トのデジタルビデオ出力信号に変換する方法であって、
    上記入力信号のフォーマット対からプログレッシブ走査
    フォーマット・フレーム列を作ること、該プログレッシ
    ブ走査フォーマット・フレームから、該プログレッシブ
    走査フォーマット・フレーム列の連続フレームの各対間
    で動きを補正した補間をすることにより少なくとも1つ
    おきのフィールドができるように、出力フィールドを作
    ることの各過程を含むデジタルビデオ信号フォーマット
    変換方法。
  5. 【請求項5】  毎秒60フィールド2:1飛越し走査
    フォーマットのデジタルビデオ入力信号を毎秒30フレ
    ーム・プログレッシブ走査フォーマットのデジタルビデ
    オ出力信号に変換する方法であって、上記入力信号から
    プログレッシブ走査フォーマット・フレーム列を作るこ
    と、該プログレッシブ走査フォーマット・フレーム列の
    連続するフレームの各対間で動きを補正した補間をする
    ことにより出力フレームを作ることの各過程を含むデジ
    タルビデオ信号フォーマット変換方法。
  6. 【請求項6】  1対の入力画像間で動きを補正した補
    間をすることにより出力画像を作成する方法であって、
    該出力画像における各画素位置に対し、それぞれの運動
    ベクトルを作ること、該運動ベクトルに従って上記入力
    画像におけるそれぞれの源位置を決定すること、該入力
    画像における源位置の画像に対して導出されたそれぞれ
    の値から上記出力画像における各画素の値を算出するこ
    との各過程を含み、上記源位置は、上記出力画像におけ
    る該位置から各運動ベクトルと一定量との和に比例する
    量だけ変位していることを特徴とするデジタルビデオ信
    号フォーマット変換方法。
  7. 【請求項7】  一連の入力画像から、該入力画像と時
    間的に一致した出力画像と該入力画像と時間的にずれた
    出力画像とを含む一連の出力画像を作成する方法であっ
    て、各出力画像における各画素位置に対しそれぞれ運動
    ベクトルを作ること、時間的にずれた出力画像の場合、
    その中の各画素位置に対し、それぞれの運動ベクトルと
    時間的ずれに応ずる量だけ上記出力画像における画素位
    置から変位した、時間的に先行する上記入力画像及び時
    間的に後続の上記入力画像におけるそれぞれの源位置を
    決定すること、時間的に一致した出力画像の場合、その
    中の各画素位置に対し、時間的に一致した入力画像にお
    けるそれぞれの源位置と、それぞれの運動ベクトルに応
    じた量だけ上記出力画像における画素位置から変位した
    、先行又は後続の入力画像におけるそれぞれの源位置と
    を決定すること、各出力画像における各画素位置に対し
    、それぞれの入力画像における2つの源位置にある画素
    に対して導出されたそれぞれの値から画素の値を算出す
    ることの各過程を含むデジタルビデオ信号フォーマット
    変換方法。
  8. 【請求項8】  毎秒24フレーム・フォーマットの素
    材入力を毎秒60フィールド2:1飛越し走査フォーマ
    ットのデジタルビデオ入力信号と統合して毎秒60フィ
    ールド2:1飛越し走査フォーマットのデジタルビデオ
    出力信号を作成する方法であって、(a)上記毎秒24
    フレーム・フォーマット素材入力より毎秒24フレーム
    ・プログレッシブ走査フォーマットのデジタルビデオ信
    号を作ること、(b)該毎秒24フレーム・プログレッ
    シブ走査フォーマットのデジタル信号を毎秒60フィー
    ルド2:1飛越し走査フォーマットのデジタルビデオ信
    号に変換すること、(c)このようにして作った信号を
    毎秒60フィールド飛越し走査フォーマットのデジタル
    ビデオ入力信号と組合せて1つの組合されたデジタルビ
    デオ信号を作成することの各過程を含むデジタルビデオ
    信号フォーマット変換方法。
  9. 【請求項9】  毎秒30フレーム・フォーマットの素
    材入力と毎秒60フィールド2:1飛越し走査フォーマ
    ットのデジタルビデオ信号とを統合して毎秒60フィー
    ルド2:1飛越し走査フォーマットのデジタルビデオ出
    力信号を作成する方法であって、(a)毎秒30フレー
    ム・フォーマットの素材入力から毎秒30フレーム・プ
    ログレッシブ走査フォーマットのデジタルビデオ信号を
    作ること、(b)該毎秒30フレーム・プログレッシブ
    走査フォーマットのデジタル信号を毎秒60フィールド
    2:1飛越し走査フォーマットのデジタルビデオ信号に
    変換すること、(c)この変換した信号を毎秒60フィ
    ールド飛越し走査フォーマットのデジタルビデオ入力信
    号と組合せて1つの組合されたデジタルビデオ信号を作
    成することの各過程を含むデジタルビデオ信号フォーマ
    ット変換方法。
  10. 【請求項10】  毎秒30フレーム・プログレッシブ
    走査フォーマットの素材入力を毎秒30フレーム・プロ
    グレッシブ走査フォーマットのデジタルビデオ入力信号
    と統合して毎秒30フレーム・プログレッシブ走査フォ
    ーマットの素材出力を作成する方法であって、(a)上
    記プログレッシブ走査素材入力より毎秒30フレーム・
    プログレッシブ走査フォーマットのデジタルビデオ信号
    を作ること、(b)該毎秒30フレーム・プログレッシ
    ブ走査フォーマットの信号を毎秒30フレーム・プログ
    レッシブ走査フォーマット入力信号と組合せて1つの組
    合された毎秒30フレーム・プログレッシブ走査フォー
    マットのデジタルビデオ信号を作ること、(c)この組
    合されたデジタルビデオ信号からプログレッシブ走査素
    材出力を作成することの各過程を含むデジタルビデオ信
    号フォーマット変換方法。
  11. 【請求項11】  1対の入力画像間で動きを補正した
    補間をして出力画像を作成する方法であって、上記出力
    画像区域における各画素に対し、該出力画像における画
    素の推定した運動を示す少なくとも1つの局部的運動ベ
    クトルを作ること、全出力画像区域に対し少なくとも最
    も頻繁に発生する局部的運動ベクトルを、少なくとも1
    つの全体的運動ベクトルとして、決定すること、該出力
    画像区域の少なくとも1つの中間部分に対し、該中間区
    域部分における画素に対して少なくとも最も頻繁に発生
    する局部的運動ベクトルを、少なくとも1つのそれぞれ
    の中間的運動ベクトルとして、決定すること、各画素に
    対し、それぞれの局部的運動ベクトル、該画素の位置に
    関する少なくとも1つの中間区域に対する中間的運動ベ
    クトル、その全体的運動ベクトルから1つの出力運動ベ
    クトルを選択すること、上記出力画像の各画素に対し、
    上記選択された出力運動ベクトルによって決まる量だけ
    該出力画像における該画素位置から変位した上記入力画
    像における画素間で補間をすることにより画素の値を決
    定することの各過程を含むデジタルビデオ信号フォーマ
    ット変換方法。
  12. 【請求項12】  第1の信号レートより早い第2の固
    有信号レートをもつ第1の信号を第1信号レートで出力
    する信号源手段(11)と、第1信号レートで上記第1
    信号を処理し、第1信号レートより早い第3の固有信号
    レートをもつ第2の処理された信号を第1信号レートで
    出力する処理手段(12)と、上記第2信号を第1信号
    レートで一時的に記憶し、この記憶した信号を第3の信
    号としてもっと早い第3信号レートで出力するあと処理
    記憶手段(13A,13B,13C,13)と、上記第
    3信号を第3信号レートで記録する記録手段(14)と
    を具え、上記記憶手段は、上記第2信号を連続的に記憶
    し、上記第3信号を間欠的に出力すると同時に上記第2
    信号を記憶するよう動作することを特徴とする信号処理
    装置。
  13. 【請求項13】  第4の信号に固有の第2の信号レー
    トで第4の信号を間欠的に出力する信号源手段(11)
    と、上記第4信号を第2信号レートで一時的に記憶し、
    この記憶した信号の要素を第1の信号としてもっと遅い
    第1信号レートで繰返し出力する前置処理記憶手段(1
    1A,11B,11C,11D)と、上記第1信号を第
    1信号レートで処理し、第1信号レートより早い第3の
    固有信号レートをもつ第2の処理された信号を第1信号
    レートで出力する処理手段(12)と、上記第2信号を
    記録する記録手段(13,14)とを具えた信号処理装
    置。
  14. 【請求項14】  1つの部分と次の部分のスタート間
    の時間が各部分の持続時間のR倍である如き信号部分が
    繰返して又は間欠的に供給される信号を媒体上に順序正
    しく連続的に記録するための信号処理方法であって、上
    記部分を中間媒体上に順序をごちゃまぜにして記録する
    第1段階と、上記ごちゃまぜにした部分を最終媒体上に
    最初に供給された順序で記録する第2段階とを有し、(
    1)上記第1段階は、(1a)1つの部分と次の部分の
    スタート間に各部分のR倍の間隔をあけ、それらの部分
    の最初の部分が中間媒体上の所定スタート位置に記録さ
    れるように、一群の供給される信号部分を中間媒体上に
    記録すること、(1b)上記信号部分が全部記録される
    まで、後続の各群の中間媒体上の所定スタート位置が先
    行する群の1対の記録された部分の記録位置の間にあり
    、且つ記録された部分が重ねて記録されないように上記
    位置をずらして、複数回上記の記録ステップを繰返すこ
    との各ステップを含み、(2)上記第2段階は、(2a
    )上記中間媒体を再生し、C部分が記憶されるまで該中
    間媒体上の所定位置でスタートする信号部分をR番目毎
    に一時的に記憶すること、(2b)上記中間媒体を走行
    させながら、上記の記憶されたC部分を最終媒体上に連
    続的に該最終媒体上の所定位置からスタートするよう記
    録すること、(2c)上記最終媒体を走行させながら、
    上記中間媒体を再生し、更にC部分が記憶されるまでR
    番目毎に信号部分を一時的に記憶すること、(2d)上
    記中間媒体をなお走行させながら、上記の記憶されたC
    部分を連続的に上記最終媒体上に記録すること、(2e
    )上記中間媒体上の記録が終了するまで(2c)及び(
    2d)のステップを繰返すこと、(2f)上記信号部分
    が全部上記最終媒体上に記録されるまで、該信号部分が
    順序正しく上記最終媒体上に記録されるように所定のス
    タート位置を変えて(2a)〜(2e)のステップを繰
    返すことの各ステップを含む信号処理方法。
  15. 【請求項15】  毎秒30フレーム・プログレッシブ
    走査フォーマット素材入力を毎秒30フレーム・プログ
    レッシブ走査フォーマット・デジタルビデオ入力信号と
    統合して毎秒24フレーム・プログレッシブ走査フォー
    マット素材出力を作成する方法であって、(a)上記プ
    ログレッシブ走査フォーマット素材入力から毎秒30フ
    レーム・プログレッシブ走査フォーマットのデジタルビ
    デオ信号を作ること、(b)該毎秒30フレーム・プロ
    グレッシブ走査フォーマット信号を上記毎秒30フレー
    ム・プログレッシブ走査フォーマット入力信号と組合せ
    て1つの組合された毎秒30フレーム・プログレッシブ
    走査フォーマットのデジタルビデオ信号を作ること、(
    c)この組合された毎秒30フレーム・プログレッシブ
    走査フォーマット・デジタルビデオ信号を毎秒24フレ
    ーム・プログレッシブ走査フォーマットのデジタルビデ
    オ信号に動きを補正した補間を用いて変換すること、(
    d)上記の組合されたデジタルビデオ信号から毎秒24
    フレーム・プログレッシブ走査フォーマット素材出力を
    作成することの各過程を含むデジタルビデオ信号フォー
    マット変換方法。
JP3300781A 1990-11-15 1991-11-15 デジタルビデオ信号フォーマット変換方式 Pending JPH04273678A (ja)

Applications Claiming Priority (24)

Application Number Priority Date Filing Date Title
GB90248162 1990-11-15
GB90248295 1990-11-15
GB9024825A GB2249901B (en) 1990-11-15 1990-11-15 Integration of digital video signals into photographic film material or the like
GB9024837A GB2249908B (en) 1990-11-15 1990-11-15 Integration of photographic film material or the like and digital video signals
GB9024826A GB2249902B (en) 1990-11-15 1990-11-15 Signal processing
GB9024828A GB2249904B (en) 1990-11-15 1990-11-15 Format conversion of digital video signals
GB90248279 1990-11-15
GB9024818A GB2249900B (en) 1990-11-15 1990-11-15 Integration of digital video signals into photographic film material or the like
GB9024838A GB2249909B (en) 1990-11-15 1990-11-15 Format conversion of digital video signals
GB9024827A GB2249903B (en) 1990-11-15 1990-11-15 Format conversion of digital video signals
GB9024816A GB2249898B (en) 1990-11-15 1990-11-15 Integration of digital video signals into photographic film material and the like
GB9024829A GB2249905B (en) 1990-11-15 1990-11-15 Integration of digital video signals into photographic film material and the like
GB90248378 1990-11-15
GB9024817A GB2249899B (en) 1990-11-15 1990-11-15 Motion compensated interpolation of images
GB90248287 1990-11-15
GB90248352 1990-11-15
GB90248170 1990-11-15
GB90248386 1990-11-15
GB90248360 1990-11-15
GB9024836A GB2249907B (en) 1990-11-15 1990-11-15 Format conversion of digital video signals
GB90248253 1990-11-15
GB90248261 1990-11-15
GB9024835A GB2249906B (en) 1990-11-15 1990-11-15 Motion compensated interpolation of images
GB90248188 1990-11-15

Publications (1)

Publication Number Publication Date
JPH04273678A true JPH04273678A (ja) 1992-09-29

Family

ID=27583064

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3300781A Pending JPH04273678A (ja) 1990-11-15 1991-11-15 デジタルビデオ信号フォーマット変換方式

Country Status (2)

Country Link
US (3) US5353119A (ja)
JP (1) JPH04273678A (ja)

Families Citing this family (130)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2062200A1 (en) * 1991-03-15 1992-09-16 Stephen C. Purcell Decompression processor for video applications
WO1994001971A2 (en) * 1992-07-01 1994-01-20 Avid Technology, Inc. Electronic film editing system using both film and videotape format
JP3545000B2 (ja) * 1992-11-02 2004-07-21 ソニー株式会社 画像信号符号化装置、画像信号復号化装置
JPH06178274A (ja) * 1992-11-30 1994-06-24 Sony Corp 動画像復号化装置
FR2702914B1 (fr) * 1993-03-17 1995-06-16 Philips Laboratoire Electroniq Dispositif de codage de suites d'images constituees d'images de nature film et d'images de nature video, et dispositif de decodage correspondant.
US5809174A (en) * 1993-04-13 1998-09-15 C-Cube Microsystems Decompression processor for video applications
US5815646A (en) * 1993-04-13 1998-09-29 C-Cube Microsystems Decompression processor for video applications
EP0997039A4 (en) * 1993-04-21 2000-05-03 Kinya Washino MULTIFORMAT AUDIO VIDEO PRODUCTION SYSTEM WITH IMAGE FREQUENCY CONVERSION
US8102419B1 (en) * 1993-05-24 2012-01-24 Deluxe Media Services Llc Method and apparatus for improved scanning of film
KR950012664B1 (ko) * 1993-08-18 1995-10-19 엘지전자주식회사 1050라인 비월주사식 모니터 디스플레이 영상포맷을 갖는 에치디티브이(hdtv)수신장치
GB9401897D0 (en) 1994-02-01 1994-03-30 Snell & Wilcox Ltd Video processing
US5453792A (en) * 1994-03-18 1995-09-26 Prime Image, Inc. Double video standards converter
US5640202A (en) * 1994-04-26 1997-06-17 Canon Kabushiki Kaisha Imaging system which changes the frame rate of the image signal
JP2947400B2 (ja) * 1994-05-31 1999-09-13 日本ビクター株式会社 フレーム周波数変換装置
US5880786A (en) * 1994-06-15 1999-03-09 Hitachi, Ltd. Apparatus for picture decoding having frame memories commonly connected to one data bus and one address bus
JP3381105B2 (ja) * 1994-10-05 2003-02-24 ソニー株式会社 映像信号処理装置
MY113223A (en) * 1994-12-29 2001-12-31 Sony Corp Processing of redundant fields in a moving picture to achive synchronized system operation
GB9502717D0 (en) * 1995-02-10 1995-03-29 Innovation Tk Ltd Digital image processing
US5671008A (en) * 1995-02-23 1997-09-23 Maestroworks Inc Telecine system
US5943096A (en) 1995-03-24 1999-08-24 National Semiconductor Corporation Motion vector based frame insertion process for increasing the frame rate of moving images
US5812202A (en) * 1995-03-24 1998-09-22 Minerva Systems, Inc. Method and apparatus performing inverse telecine for MPEG coding
JPH08317295A (ja) * 1995-05-16 1996-11-29 Olympus Optical Co Ltd デジタル画像記録装置およびデジタル画像再生装置
US5771073A (en) * 1995-06-07 1998-06-23 Massachusetts Institute Of Technology Advanced television system using a different encoding technique for non-image areas
JPH0918782A (ja) * 1995-06-29 1997-01-17 Sony Corp 映像信号処理方法及び装置
WO1997013362A1 (en) * 1995-09-29 1997-04-10 Matsushita Electric Industrial Co., Ltd. Method and device for encoding seamless-connection of telecine-converted video data
JP3111028B2 (ja) * 1996-03-14 2000-11-20 松下電器産業株式会社 画像信号処理装置及び画像信号処理方法
JP3183155B2 (ja) * 1996-03-18 2001-07-03 株式会社日立製作所 画像復号化装置、及び、画像復号化方法
US5917552A (en) * 1996-03-29 1999-06-29 Pixelvision Technology, Inc. Video signal interface system utilizing deductive control
US5754248A (en) * 1996-04-15 1998-05-19 Faroudja; Yves C. Universal video disc record and playback employing motion signals for high quality playback of non-film sources
JPH09307857A (ja) * 1996-05-17 1997-11-28 Sony Corp 画像信号処理装置及び画像信号処理方法
US6104755A (en) * 1996-09-13 2000-08-15 Texas Instruments Incorporated Motion detection using field-difference measurements
US5880814A (en) * 1996-10-30 1999-03-09 Mentor Corporation Visual acuity tester with improved test character generation
US20040071211A1 (en) * 1997-04-07 2004-04-15 Kinya Washino Video production system with mixed frame removal
US6370198B1 (en) * 1997-04-07 2002-04-09 Kinya Washino Wide-band multi-format audio/video production system with frame-rate conversion
US20020118296A1 (en) * 1999-05-06 2002-08-29 Schwab Barry H. Integrated multi-format audio/video production system
JP3164031B2 (ja) * 1997-05-30 2001-05-08 日本ビクター株式会社 動画像符号化復号化装置、動画像符号化復号化方法、及び動画像符号化記録媒体
US6452972B1 (en) * 1997-09-12 2002-09-17 Texas Instruments Incorporated Motion detection using field-difference measurements
US6108041A (en) * 1997-10-10 2000-08-22 Faroudja Laboratories, Inc. High-definition television signal processing for transmitting and receiving a television signal in a manner compatible with the present system
US6014182A (en) 1997-10-10 2000-01-11 Faroudja Laboratories, Inc. Film source video detection
US6212238B1 (en) * 1997-12-19 2001-04-03 Philips Electronics North America Corporation Selective by-pass of analog mode in communication between digital devices
EP0935385A3 (en) * 1998-02-04 2002-06-19 Hitachi, Ltd. Decoder device and receiver using the same
JPH11331764A (ja) * 1998-03-20 1999-11-30 Sony Corp 記録再生装置及び方法
EP1845718A3 (en) * 1998-12-22 2009-04-29 Panasonic Corporation Image signal reproduction apparatus
US6437787B1 (en) 1999-03-30 2002-08-20 Sony Corporation Display master control
US6295089B1 (en) 1999-03-30 2001-09-25 Sony Corporation Unsampled hd MPEG video and half-pel motion compensation
US6559890B1 (en) * 1999-04-21 2003-05-06 Ascent Media Group, Inc. Methods and apparatus for correction of 2-3 field patterns
US6919897B1 (en) 1999-08-06 2005-07-19 Microsoft Corporation System and method for pre-processing a video signal
US6847358B1 (en) * 1999-08-06 2005-01-25 Microsoft Corporation Workstation for processing and producing a video signal
US6885381B1 (en) * 2000-08-04 2005-04-26 Microsoft Corporation System and method for producing a video signal
US6924806B1 (en) * 1999-08-06 2005-08-02 Microsoft Corporation Video card with interchangeable connector module
US8429699B2 (en) * 1999-12-14 2013-04-23 Arturo A. Rodriguez Systems and methods for resource-adaptive processing of scaled video and graphics
US6473460B1 (en) * 2000-03-31 2002-10-29 Matsushita Electric Industrial Co., Ltd. Method and apparatus for calculating motion vectors
US6665450B1 (en) 2000-09-08 2003-12-16 Avid Technology, Inc. Interpolation of a sequence of images using motion analysis
KR20020070501A (ko) * 2000-11-22 2002-09-09 코닌클리케 필립스 일렉트로닉스 엔.브이. 압축 인코딩된 비디오의 압축 해제
US6839094B2 (en) 2000-12-14 2005-01-04 Rgb Systems, Inc. Method and apparatus for eliminating motion artifacts from video
US20110013081A1 (en) * 2001-01-11 2011-01-20 Pixelworks, Inc. System and method for detecting a non-video source in video signals
CA2330854A1 (en) * 2001-01-11 2002-07-11 Jaldi Semiconductor Corp. A system and method for detecting a non-video source in video signals
US7012648B2 (en) * 2001-04-02 2006-03-14 Matsushita Electric Industrial Co., Ltd. Image conversion method and image conversion apparatus
US7043058B2 (en) 2001-04-20 2006-05-09 Avid Technology, Inc. Correcting motion vector maps for image processing
US7545957B2 (en) * 2001-04-20 2009-06-09 Avid Technology, Inc. Analyzing motion of characteristics in images
JP2004531968A (ja) * 2001-05-17 2004-10-14 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 受信機、画像表示装置、tvシステムおよび画像表示方法
DE60209773T2 (de) * 2001-11-07 2006-11-30 Koninklijke Philips Electronics N.V. Vorrichtung und verfahren zum erkennen von verdeckung
TW540241B (en) * 2001-11-15 2003-07-01 Chi Mei Optoelectronics Corp Display method for stablizing MPEG video output via an LCD device
US7274857B2 (en) 2001-12-31 2007-09-25 Scientific-Atlanta, Inc. Trick modes for compressed video streams
EP1481546A1 (en) 2002-02-28 2004-12-01 Koninklijke Philips Electronics N.V. Method and apparatus for field rate up-conversion
US7194676B2 (en) 2002-03-01 2007-03-20 Avid Technology, Inc. Performance retiming effects on synchronized data in an editing system
JP2003274370A (ja) * 2002-03-19 2003-09-26 Matsushita Electric Ind Co Ltd タイムコード信号伝送方法およびタイムコード信号伝送装置
WO2003079684A1 (fr) * 2002-03-20 2003-09-25 Matsushita Electric Industrial Co., Ltd. Dispositif d'imagerie video, dispositif de conversion video, et dispositif d'edition video
JP2003339029A (ja) * 2002-05-20 2003-11-28 Sony Corp 動きベクトル補正回路及び方法
US7961251B2 (en) * 2002-06-28 2011-06-14 Trident Microsystems (Far East) Ltd. Method and apparatus for conversion of video formats to 120 Hz 4 to 1 interlaced formats
US7362374B2 (en) * 2002-08-30 2008-04-22 Altera Corporation Video interlacing using object motion estimation
KR100461010B1 (ko) * 2002-11-18 2004-12-09 삼성전자주식회사 고화질 ccd카메라 및 그 제어방법
KR100510671B1 (ko) * 2003-01-08 2005-08-31 엘지전자 주식회사 인터레이스 영상에서의 동일 프레임 검출 장치
DE10301714A1 (de) * 2003-01-13 2004-07-29 Arnold & Richter Cine Technik Gmbh & Co Betriebs Kg Verfahren zum Verarbeiten von aus einem Filmaufnahmestrahlengang einer Laufbildkamera abgezweigten Filmbildern
TWI232681B (en) * 2003-08-27 2005-05-11 Mediatek Inc Method of transforming one video output format into another video output format without degrading display quality
US7966642B2 (en) * 2003-09-15 2011-06-21 Nair Ajith N Resource-adaptive management of video storage
US20050094030A1 (en) * 2003-11-03 2005-05-05 Lsi Logic Corporation Method and/or circuitry for video frame rate and/or size conversion
US7474841B2 (en) * 2003-11-21 2009-01-06 Canon Kabushiki Kaisha Image processing apparatus and its control method, and computer program and computer-readable storage medium
US8135261B1 (en) * 2003-12-09 2012-03-13 Apple Inc. Insertion and usage of metadata in digital video
US8064752B1 (en) 2003-12-09 2011-11-22 Apple Inc. Video encoding
CN1301015C (zh) * 2003-12-15 2007-02-14 财团法人资讯工业策进会 适应性降低画面速率视讯转换编码系统
EP1555816A1 (en) * 2004-01-13 2005-07-20 Sony International (Europe) GmbH Method for video signal processing
US8861589B2 (en) * 2004-01-30 2014-10-14 Broadcom Corporation Detection and phase lock of pull-down video
US7557861B2 (en) * 2004-01-30 2009-07-07 Broadcom Corporation Reverse pull-down video using corrective techniques
KR100565066B1 (ko) * 2004-02-11 2006-03-30 삼성전자주식회사 중첩된 블록 기반 움직임 추정에 의한 움직임 보상 보간방법 및 그를 적용한 프레임 레이트 변환 장치
KR20050081730A (ko) * 2004-02-16 2005-08-19 엘지전자 주식회사 움직임 보상 기반의 영상 신호 프레임율 변환 방법
KR100584597B1 (ko) * 2004-05-10 2006-05-30 삼성전자주식회사 적응적 가중치를 적용한 움직임 추정 방법 및 그를 적용한프레임 레이트 변환 장치
KR100555869B1 (ko) * 2004-06-15 2006-03-03 삼성전자주식회사 저더 검출을 이용한 디인터레이싱 장치 및 방법
US8600217B2 (en) * 2004-07-14 2013-12-03 Arturo A. Rodriguez System and method for improving quality of displayed picture during trick modes
US7468757B2 (en) * 2004-10-05 2008-12-23 Broadcom Corporation Detection and correction of irregularities while performing inverse telecine deinterlacing of video
US7468756B2 (en) * 2004-10-05 2008-12-23 Broadcom Corporation Detection and phase lock of 2:2 and 3:2 pull-down video
JP4359223B2 (ja) * 2004-10-29 2009-11-04 株式会社 日立ディスプレイズ 映像補間装置とこれを用いたフレームレート変換装置,映像表示装置
TWI249359B (en) * 2004-12-22 2006-02-11 Realtek Semiconductor Corp Method and apparatus for simultaneous progressive and interlaced display
JP4861636B2 (ja) * 2005-04-19 2012-01-25 パナソニック株式会社 画像処理装置及び画像処理プログラム
DE102005037282A1 (de) * 2005-08-08 2007-02-15 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Verfahren zum Übertragen eines Datenstroms von digitalen Bildern und digitale Bilderfassungseinheit
JP2009506661A (ja) * 2005-08-24 2009-02-12 トムソン ライセンシング モバイルテレビジョン装置におけるlcdのグラフィカルなスケーリング方法
US7787048B1 (en) 2005-09-08 2010-08-31 Nvidia Corporation Motion-adaptive video de-interlacer
US7796191B1 (en) * 2005-09-21 2010-09-14 Nvidia Corporation Edge-preserving vertical interpolation
KR100763190B1 (ko) * 2005-12-19 2007-10-04 삼성전자주식회사 영상 시스템, 영상 신호 포맷 설정 장치 및 설정 방법
US7672976B2 (en) * 2006-05-03 2010-03-02 Ut-Battelle, Llc Method for the reduction of image content redundancy in large image databases
JP2007324763A (ja) * 2006-05-30 2007-12-13 Toshiba Corp テレビジョン受像装置及びテレビジョン受像方法
JP2007324830A (ja) * 2006-05-31 2007-12-13 Toshiba Corp フレームレート変換装置及びフレームレート変換方法
US20080018788A1 (en) * 2006-07-20 2008-01-24 Samsung Electronics Co., Ltd. Methods and systems of deinterlacing using super resolution technology
JP4868968B2 (ja) * 2006-07-31 2012-02-01 株式会社東芝 補間フレーム作成方法及び補間フレーム作成装置
JP5001684B2 (ja) * 2006-09-13 2012-08-15 富士通株式会社 走査変換装置
JP4369948B2 (ja) * 2006-09-20 2009-11-25 シャープ株式会社 画像表示装置及び方法、画像処理装置及び方法
KR100814424B1 (ko) * 2006-10-23 2008-03-18 삼성전자주식회사 폐색영역 검출장치 및 검출방법
JP4983362B2 (ja) * 2007-04-16 2012-07-25 ソニー株式会社 フィルム検出装置およびその方法、並びに映像信号処理装置およびその方法
US20090033791A1 (en) * 2007-07-31 2009-02-05 Scientific-Atlanta, Inc. Video processing systems and methods
US8345148B2 (en) * 2007-11-07 2013-01-01 Broadcom Corporation Method and system for inverse telecine and scene change detection of progressive video
JP4513035B2 (ja) * 2008-03-10 2010-07-28 ソニー株式会社 情報処理装置および方法、並びにプログラム
EP2106136A1 (en) * 2008-03-28 2009-09-30 Sony Corporation Motion compensated temporal interpolation for frame rate conversion of video signals
JP2010015008A (ja) * 2008-07-04 2010-01-21 Samsung Electronics Co Ltd 映像信号処理装置、映像信号処理方法、プログラム、および表示装置
US8300696B2 (en) * 2008-07-25 2012-10-30 Cisco Technology, Inc. Transcoding for systems operating under plural video coding specifications
US20110001873A1 (en) * 2008-08-06 2011-01-06 Daniel Doswald Frame rate converter for input frames with video and film content
GB2466044B (en) * 2008-12-09 2014-05-21 Snell Ltd Motion image rendering system
GB2476298A (en) * 2009-12-18 2011-06-22 Snell Ltd Changing the temporal sample rate of a motion image sequence
GB201007351D0 (en) * 2010-04-30 2010-06-16 Imagination Tech Ltd Varying temporal interpolation in a motion compensated frame interpolation system
US8780991B2 (en) * 2010-09-14 2014-07-15 Texas Instruments Incorporated Motion estimation in enhancement layers in video encoding
US9491398B1 (en) 2010-12-21 2016-11-08 Pixelworks, Inc. System and method for processing assorted video signals
US8786673B2 (en) 2011-01-07 2014-07-22 Cyberlink Corp. Systems and methods for performing video conversion based on non-linear stretch information
US8692933B1 (en) * 2011-10-20 2014-04-08 Marvell International Ltd. Method and apparatus for buffering anchor frames in motion compensation systems
US9262808B2 (en) * 2013-02-07 2016-02-16 Mitsubishi Electric Research Laboratories, Inc. Denoising of images with nonstationary noise
US9998750B2 (en) 2013-03-15 2018-06-12 Cisco Technology, Inc. Systems and methods for guided conversion of video from a first to a second compression format
US9729817B2 (en) * 2013-11-05 2017-08-08 Avago Technologies General Ip (Singapore) Pte. Ltd. Parallel pipelines for multiple-quality level video processing
US10284870B1 (en) * 2015-07-22 2019-05-07 Pixelworks, Inc. Adjusting interpolation phase for motion estimation motion compensation using image analysis
US10397600B1 (en) 2016-01-29 2019-08-27 Google Llc Dynamic reference motion vector coding mode
US10462457B2 (en) * 2016-01-29 2019-10-29 Google Llc Dynamic reference motion vector coding mode
JP6665611B2 (ja) * 2016-03-18 2020-03-13 富士通株式会社 符号化処理プログラム、符号化処理方法及び符号化処理装置
KR102474168B1 (ko) * 2017-03-17 2022-12-06 포틀랜드 스테이트 유니버시티 적응형 컨볼루션 및 적응형 분리형 컨볼루션을 통한 프레임 인터폴레이션

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB1542213A (en) * 1977-01-27 1979-03-14 Rank Organisation Ltd Flying spot telecine apparatus
US4794456A (en) * 1986-04-25 1988-12-27 North American Philips Corporation High-definition television transmission system
US4901148A (en) * 1987-01-19 1990-02-13 Canon Kabushiki Kaisha Data processing device
JPH0216881A (ja) * 1988-07-05 1990-01-19 Sony Corp スーパーインポーズ装置
US4881125A (en) * 1988-10-14 1989-11-14 General Instrument Corporation Progressive scan display of video derived from film
US4876596A (en) * 1988-10-25 1989-10-24 Faroudja Y C Film-to-video converter with scan line doubling
DE3838609A1 (de) * 1988-11-15 1990-06-13 Thomson Brandt Gmbh Bildverarbeitungssystem
JPH02237280A (ja) * 1989-03-10 1990-09-19 Hitachi Ltd 標準/高品位テレビジョン受信装置
US4982280A (en) * 1989-07-18 1991-01-01 Yves C. Faroudja Motion sequence pattern detector for video
US5115311A (en) * 1989-11-14 1992-05-19 Shell Oil Company High resolution translation of images
US4998167A (en) * 1989-11-14 1991-03-05 Jaqua Douglas A High resolution translation of images
US5221966A (en) * 1990-01-17 1993-06-22 Avesco Plc Video signal production from cinefilm originated material

Also Published As

Publication number Publication date
US5337154A (en) 1994-08-09
US5329309A (en) 1994-07-12
US5353119A (en) 1994-10-04

Similar Documents

Publication Publication Date Title
JPH04273678A (ja) デジタルビデオ信号フォーマット変換方式
US5181111A (en) Video signal processing apparatus and method
US5027203A (en) Motion dependent video signal processing
US4992869A (en) Motion dependent video signal processing
US5005078A (en) Motion dependent video signal processing
US5012337A (en) Motion dependent video signal processing
US5016101A (en) Video signal to photographic film conversion
US4998168A (en) Motion dependent video signal processing
US7499102B2 (en) Image processing apparatus using judder-map and method thereof
US5012336A (en) Motion dependent video signal processing
JP2520301B2 (ja) 静止画像フリッカ抑制方法
US4992870A (en) Motion dependent video signal processing
US5021881A (en) Motion dependent video signal processing
JP3577354B2 (ja) 補間画像データ生成装置および方法
US5805207A (en) Moving image reproduction system providing compensation for cinematographic artifacts
JPH04232638A (ja) ビデオテープレコーダ速度制御方法及び装置
GB2249906A (en) Motion compensated interpolation of images
JP3154272B2 (ja) 画像変換装置及び方法
GB2249899A (en) Motion compensated interpolation of images having choice of motion vectors
GB2249905A (en) Combining digital video signals and photographic film material and the like
GB2249909A (en) Format conversion of digital video signals
GB2249904A (en) Format conversion of digital video signals
GB2249908A (en) Combining photographic film material or the like and digital video signals
GB2249898A (en) Combining photographic film material and digital video signals
GB2249907A (en) Format conversion of digital video signals