JP2006094257A - Video signal processing apparatus and method, and video signal display device - Google Patents
Video signal processing apparatus and method, and video signal display device Download PDFInfo
- Publication number
- JP2006094257A JP2006094257A JP2004278889A JP2004278889A JP2006094257A JP 2006094257 A JP2006094257 A JP 2006094257A JP 2004278889 A JP2004278889 A JP 2004278889A JP 2004278889 A JP2004278889 A JP 2004278889A JP 2006094257 A JP2006094257 A JP 2006094257A
- Authority
- JP
- Japan
- Prior art keywords
- telecine
- sequence
- signal
- video signal
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0112—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
- H04N7/0115—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/012—Conversion between an interlaced and a progressive signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Television Systems (AREA)
Abstract
Description
本発明は、飛び越し走査(インターレース)映像信号を順次走査(プログレッシブ)映像信号に変換する映像信号処理装置、映像信号処理方法、及びこの映像信号処理装置又は方法を適用した映像信号表示装置に関し、特に、映画フィルム等の信号から2−3プルダウン方式でテレシネ変換されたインターレース映像信号をプログレッシブ映像信号に変換する際に生じることのある画質劣化の防止に関するものである。 The present invention relates to a video signal processing device, a video signal processing method, and a video signal display device to which this video signal processing device or method is applied, and more particularly to an interlaced video signal that is converted into a progressive scanning (progressive) video signal. The present invention relates to prevention of image quality deterioration that may occur when an interlaced video signal telecine-converted by a 2-3 pulldown method from a signal such as a movie film is converted into a progressive video signal.
映画フィルム等は毎秒24コマ(フレーム)として撮影されているのに対し、NTSC方式信号やハイビジョン信号等の標準的なテレビジョン信号は、飛び越し走査(インターレース)で毎秒60フィールドの映像信号となっている。従って、映画フィルム等の信号を、テレビジョン放送の番組として放送する場合やビデオパッケージにする場合には、毎秒24フレームの信号を毎秒60フィールドのテレビジョン放送用のインターレース映像信号に変換(「テレシネ変換」という。)している。テレシネ変換においては、一般に、第1フレーム(奇数番目のコマ)を2フィールドに、第2フレーム(偶数番目のコマ)を3フィールドに対応するよう2−3プルダウン変換し、5フィールドに1回、2フィールド前と同一のフィールドを繰り返すようにする。2−3プルダウン変換により、毎秒24コマの映像信号を毎秒60フィールドのインターレース映像信号(テレシネ変換された映像信号であり、「テレシネ映像信号」という。)に変換することができる。なお、テレシネ変換においては、第1フレームを3フィールドに、第2フレームを2フィールドに対応するよう3−2プルダウン変換する場合もあるが、3−2プルダウン変換は2−3プルダウン変換と実質的には同じ処理である。このため、本出願において「2−3プルダウン変換」として説明する場合には、2−3プルダウン方式によるテレシネ変換の場合だけではなく、3−2プルダウン方式によるテレシネ変換の場合をも含むものとする。 While movie films and the like are shot at 24 frames per second, standard television signals such as NTSC signals and high-definition signals become video signals of 60 fields per second by interlaced scanning (interlace). Yes. Therefore, when a film film signal is broadcast as a television broadcast program or a video package, a signal of 24 frames per second is converted into an interlaced video signal for television broadcast of 60 fields per second ("telecine"). It is called “conversion”. In telecine conversion, in general, the first frame (odd-numbered frames) is converted into 2-3 fields and the second frame (even-numbered frames) is converted into 2-3 fields, and once every 5 fields, Repeat the same field as 2 fields before. By 2-3 pulldown conversion, a video signal of 24 frames per second can be converted into an interlaced video signal of 60 fields per second (a video signal that has been telecine-converted and is referred to as a “telecine video signal”). In telecine conversion, there are cases where 3-2 pulldown conversion is performed so that the first frame corresponds to 3 fields and the second frame corresponds to 2 fields, but 3-2 pulldown conversion is substantially equivalent to 2-3 pulldown conversion. Is the same process. For this reason, when describing as “2-3 pulldown conversion” in the present application, it includes not only the case of the telecine conversion by the 2-3 pulldown method but also the case of the telecine conversion by the 3-2 pulldown method.
一方、近年、インターレースのテレビジョン信号を高画質で表示する際に、インターレース映像信号をプログレッシブ映像信号に変換(「IP変換」という。)する処理が行われる。IP変換においては、一般に、映像が静止画像である場合は、時間的に隣接するフィールドの対応する走査線の画素をはめ込むことにより補間(フィールド間補間)が行われ、映像が動画像である場合は、同一フィールド内の隣接走査線における画素により補間信号を生成する(フィールド内補間)という動き適応IP変換が行われる。さらに、IP変換を行う場合には、処理する映像信号がテレシネ映像信号であるか否かと2−3プルダウンの位相(同一フレームから変換されたフィールドの方向)を検出(「テレシネ検出」という。)し、テレシネ映像信号に対しては、2−3プルダウンの位相に応じて、同じフレームから変換されたトップフィールドとボトムフィールドにより2−3プルダウン方式でテレシネ変換される前のプログレッシブ映像信号を復元し、テレビジョン用のプログレッシブ映像信号に変換する。以下、テレシネ映像信号に対するIP変換を「テレシネ補間」という。 On the other hand, in recent years, when an interlaced television signal is displayed with high image quality, a process of converting the interlaced video signal into a progressive video signal (referred to as “IP conversion”) is performed. In IP conversion, in general, when a video is a still image, interpolation (inter-field interpolation) is performed by fitting pixels of corresponding scanning lines in temporally adjacent fields, and the video is a moving image. Is subjected to motion adaptive IP conversion in which an interpolation signal is generated by pixels in adjacent scanning lines in the same field (intra-field interpolation). Further, when performing IP conversion, it is detected whether the video signal to be processed is a telecine video signal and the 2-3 pulldown phase (the direction of the field converted from the same frame) (referred to as “telecine detection”). For the telecine video signal, the progressive video signal before being telecine converted by the 2-3 pulldown method using the top field and the bottom field converted from the same frame is restored according to the 2-3 pulldown phase. And converted into a progressive video signal for television. Hereinafter, IP conversion for a telecine video signal is referred to as “telecine interpolation”.
2−3プルダウン方式によるテレシネ映像信号をIP変換する従来の映像信号処理装置においては、5フィールドに1回、2フィールド前と同一のフィールドが繰り返して変換される。このため、1フレーム前(すなわち、2フィールド前)のフィールドとの間の差分が、5フィールドに1回の周期で、ゼロ又は所定の閾値以下となる。この特性を利用してテレシネ検出を行い、テレシネ補間する装置が提案されている(例えば、特許文献1、2、3参照)。
In a conventional video signal processing apparatus for IP-converting a telecine video signal based on the 2-3 pull-down method, the same field as the previous two fields is repeatedly converted once every five fields. For this reason, the difference from the field one frame before (that is, two fields before) becomes zero or less than a predetermined threshold at a period of once every five fields. Devices that perform telecine detection using this characteristic and perform telecine interpolation have been proposed (see, for example,
また、テレシネ検出における誤検出を防止し、安定にテレシネ映像信号のIP変換を行うため、5フィールドで繰り返されるテレシネ映像信号のシーケンスにおける画面一致の回数をカウントし、このカウント値に基づいて入力された映像信号がテレシネ映像信号であるか否かを判断する装置の提案もある(例えば、特許文献4参照)。 In addition, in order to prevent erroneous detection in telecine detection and to stably perform IP conversion of a telecine video signal, the number of screen matches in a telecine video signal sequence repeated in five fields is counted, and input based on this count value There is also a proposal of an apparatus for determining whether or not a video signal is a telecine video signal (see, for example, Patent Document 4).
さらに、テレシネ映像信号におけるフレーム間差分の5フィールド毎の繰り返しシーケンスを検出すると共に、テレシネ映像信号ではない所定のパターン外れを5フィールド内の差分情報から検出している装置の提案もある(例えば、特許文献5参照)。 Furthermore, there is a proposal of an apparatus that detects a repetition sequence for every five fields of interframe differences in a telecine video signal and detects a predetermined pattern deviation that is not a telecine video signal from difference information in the five fields (for example, (See Patent Document 5).
さらにまた、各フィールドで5フィールド前までのパターンを逐次判定すると共に、シーンチェンジ点を示す信号を外部又は入力信号からの検出により得て、シーンチェンジ点を示す信号を考慮して所定のパターン外れを求め、テレシネ映像信号を精度よく検出する装置の提案もある(例えば、特許文献6参照)。 Furthermore, the patterns up to 5 fields before each field are sequentially judged, and a signal indicating the scene change point is obtained by detection from the outside or an input signal, and the predetermined pattern is deviated in consideration of the signal indicating the scene change point. There is also a proposal of a device that accurately detects a telecine video signal (see, for example, Patent Document 6).
しかし、上記従来の装置においては、TV放送等のための編集、CM(コマーシャル)やテロップの挿入等により、テレシネ映像信号の途中で編集点が頻繁に存在する場合や、テレシネ映像信号の途中でテレシネ映像信号以外の信号が混在する場合等に、テレシネ検出において、2−3プルダウン方式でテレシネ変換された映像信号のフィールドシーケンス(位相)のずれや抜け等が発生し、シーケンスの不連続を検出できないことがある。そのため、上記従来の装置においては、誤った方向のフィールドにおける補間信号を用いてIP変換してしまい、出力画像が櫛状に割れるコーミング現象による画質劣化が生じ、良好なIP変換を行うことができないという問題がある。 However, in the above-described conventional apparatus, editing points frequently exist in the middle of a telecine video signal due to editing for TV broadcasting, insertion of CM (commercial) or telop, or in the middle of a telecine video signal. When signals other than telecine video signals are mixed, field sequence (phase) shifts or omissions of video signals telecine-converted using the 2-3 pull-down method occur in telecine detection, and sequence discontinuity is detected. There are things that cannot be done. For this reason, in the above-described conventional apparatus, the IP conversion is performed using the interpolation signal in the field in the wrong direction, the image quality is deteriorated due to the combing phenomenon in which the output image is broken in a comb shape, and good IP conversion cannot be performed. There is a problem.
そこで、本発明は、上記従来技術の課題を解決するためになされたものであり、その目的は、2−3プルダウン方式で変換された飛び越し走査映像信号を順次走査映像信号に変換する処理において、コーミング現象による画質劣化が生じないようにすることができる映像信号処理装置、映像信号処理方法、及び映像信号表示装置を提供することにある。 Therefore, the present invention has been made to solve the above-described problems of the prior art, and its purpose is to perform processing for sequentially converting interlaced scanning video signals converted by the 2-3 pull-down method into scanning video signals. An object of the present invention is to provide a video signal processing device, a video signal processing method, and a video signal display device capable of preventing image quality deterioration due to combing phenomenon.
本発明の映像信号処理装置は、飛び越し走査映像信号を順次走査映像信号に変換する映像信号処理装置であって、上記飛び越し走査映像信号をフィールド単位で遅延させるフィールド遅延手段と、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、この検出結果に基づくフレーム間の相関の強さを示す信号を出力する相関検出手段と、上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するシーケンス検出手段と、上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力する出現頻度検出手段と、上記テレシネシーケンス検出信号及び上記予測制御信号に基づくテレシネ検出信号を出力する予測制御手段と、上記飛び越し走査映像信号及び上記フィールド遅延手段で遅延した映像信号に基づいて複数種類の補間信号を生成し、上記テレシネ検出信号に基づいて上記複数種類の補間信号の内のいずれかを選択して出力する補間信号生成手段と、上記飛び越し走査映像信号及び上記補間信号生成手段から出力された上記補間信号に基づいて上記順次走査映像信号を生成する変換手段とを有するものである。 The video signal processing apparatus according to the present invention is a video signal processing apparatus for converting an interlaced scanning video signal into a progressive scanning video signal, a field delay means for delaying the interlaced scanning video signal in units of fields, and the interlaced scanning video signal. A correlation detecting means for detecting a correlation between the field of interest and a field one frame before the field of interest and outputting a signal indicating the strength of the correlation between frames based on the detection result; Based on the signal indicating the strength of the correlation, it is determined whether the interlaced scanning video signal satisfies the condition of the field sequence of the video signal subjected to telecine conversion, and a telecine sequence detection signal is generated based on the determination result. Based on the output sequence detection means and the signal indicating the strength of the correlation between the frames, the telecine change is performed. An appearance frequency detecting means for measuring an appearance frequency of a field sequence that satisfies a field sequence condition of the received video signal and outputting a prediction control signal based on the measurement result; and a telecine based on the telecine sequence detection signal and the prediction control signal. A prediction control means for outputting a detection signal; and a plurality of types of interpolation signals based on the interlaced scanning video signal and the video signal delayed by the field delay means; and the plurality of types of interpolation signals based on the telecine detection signal. Interpolation signal generating means for selecting and outputting one of the above, and conversion means for generating the sequential scanning video signal based on the interlaced scanning video signal and the interpolation signal output from the interpolation signal generating means I have it.
また、本発明の映像信号処理方法は、飛び越し走査映像信号を順次走査映像信号に変換する映像信号処理方法であって、上記飛び越し走査映像信号をフィールド単位で遅延させるステップと、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、フレーム間の相関の強さを示す信号を出力するステップと、上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するステップと、上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力するステップと、上記テレシネシーケンス検出信号及び上記予測制御信号に基づくテレシネ検出信号を出力するステップと、上記テレシネ検出信号に基づいて上記飛び越し走査映像信号及び上記遅延した飛び越し走査映像信号に基づいて生成される複数種類の補間走査線信号の内からいずれかを選択して出力するステップと、上記飛び越し走査映像信号及び上記選択された補間走査線信号に基づいて、上記順次走査映像信号を生成するステップとを有するものである。 The video signal processing method of the present invention is a video signal processing method for converting an interlaced video signal into a progressive video signal, the step of delaying the interlaced video signal in units of fields, and the interlaced video signal Detecting a correlation between the field of interest and a field one frame before the field of interest, and outputting a signal indicating the strength of the correlation between the frames, and a signal indicating the strength of the correlation between the frames And determining whether or not the interlaced scanning video signal satisfies the condition of the field sequence of the telecine-converted video signal, generating and outputting a telecine sequence detection signal based on the determination result, and the frame A field sequence of the telecine-converted video signal based on a signal indicating the strength of the correlation between Measuring the appearance frequency of a field sequence that satisfies a condition, outputting a prediction control signal based on the measurement result, outputting the telecine sequence detection signal and the telecine detection signal based on the prediction control signal, and the telecine detection Selecting and outputting one of a plurality of types of interpolated scanning line signals generated based on the interlaced scanning video signal and the delayed interlaced scanning video signal based on a signal; and the interlaced scanning video signal and Generating the progressive scanning video signal based on the selected interpolated scanning line signal.
さらに、本発明の映像信号表示装置は、上記映像信号処理装置と、映像を表示する表示手段と、上記映像信号処理装置から出力された上記順次走査の映像信号に基づく映像を上記表示手段に表示させる表示処理回路とを有するものである。 Furthermore, the video signal display device of the present invention displays the video signal processing device, display means for displaying video, and video based on the progressive scanning video signal output from the video signal processing device on the display means. Display processing circuit.
本発明の映像信号処理装置又は映像信号処理方法によれば、順次入力される飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを検出すると共に、テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、これらの結果に基づいて映像信号がテレシネ変換されたものであるか否かを示すテレシネ検出信号を出力するようにしている。このように、映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かの検出結果に加え、テレシネ変換された映像信号であることの確からしさを示す指標としての意味を持つフィールドシーケンスの出現頻度に基づいたテレシネ検出信号を出力するようにしているので、テレシネ検出信号の信頼度が向上している。したがって、本発明によれば、テレシネ検出信号の信頼度の向上によって、テレシネ検出信号に基づいて選択される補間信号を適切に選択することができるので、テレシネ変換された映像信号の途中でテレシネ変換された映像信号以外の信号が混在する場合等において発生することがあるコーミング現象による画質劣化の発生頻度を低減し、テレシネ変換された映像信号を良好な順次走査映像信号に変換することができるという効果を得ることができる。 According to the video signal processing apparatus or the video signal processing method of the present invention, it is detected whether or not the interlaced scanning video signal that is sequentially input satisfies the condition of the field sequence of the video signal subjected to telecine conversion, and the telecine conversion is performed. The appearance frequency of the field sequence that satisfies the condition of the field sequence of the video signal is measured, and a telecine detection signal indicating whether or not the video signal has been subjected to telecine conversion is output based on these results. Thus, in addition to the detection result of whether or not the video signal satisfies the condition of the field sequence of the video signal subjected to telecine conversion, the field has a meaning as an index indicating the certainty that the video signal is a telecine converted video signal. Since the telecine detection signal based on the appearance frequency of the sequence is output, the reliability of the telecine detection signal is improved. Therefore, according to the present invention, it is possible to appropriately select an interpolation signal selected based on the telecine detection signal by improving the reliability of the telecine detection signal, so that telecine conversion is performed in the middle of the telecine-converted video signal. It is possible to reduce the frequency of image quality degradation due to the combing phenomenon that may occur when signals other than the video signals that have been mixed are mixed, and to convert the telecine-converted video signal into a good progressive scan video signal An effect can be obtained.
また、本発明の映像信号表示装置によれば、コーミング現象による画質劣化を低減した良好なプログレッシブ映像信号に基づく高品質な映像を表示することができるという効果を得ることができる。 In addition, according to the video signal display device of the present invention, it is possible to obtain an effect that it is possible to display a high-quality video based on a good progressive video signal with reduced image quality degradation due to the combing phenomenon.
本発明の実施の形態における映像信号処理装置、映像信号処理方法、及び映像信号表示装置は、1フレーム前のフィールドとの間の差分情報から1フレーム間の相関を得て、入力映像信号がテレシネ映像信号における5フィールドのフィールドシーケンス(「テレシネシーケンス」という。)の繰り返し条件を満たす映像信号であるか否かを検出すると共に、入力映像信号におけるテレシネシーケンスの出現頻度を検出し(テレシネシーケンスの出現頻度が高い場合にはテレシネ映像信号である可能性が高いので、テレシネシーケンスの出現頻度は、テレシネ映像信号であることの確からしさを示す指標としての意味を持つ。)、これら検出結果に基づいてテレシネ検出の結果を予測し、IP変換を制御するものである。なお、本出願において「…手段」として示される構成は、電気回路(ハードウェア)によって実現されるもの、又は、ソフトウェアによって実現されるもののいずれであってもよい。 The video signal processing device, the video signal processing method, and the video signal display device according to the embodiment of the present invention obtain the correlation between one frame from the difference information from the previous frame, and the input video signal is telecine. It is detected whether or not the video signal satisfies a repetition condition of a five-field field sequence (referred to as “telecine sequence”) in the video signal, and the appearance frequency of the telecine sequence in the input video signal is detected (appearance of the telecine sequence). If the frequency is high, there is a high possibility that the video signal is a telecine video signal, so the appearance frequency of the telecine sequence has a meaning as an index indicating the probability of being a telecine video signal.) Based on these detection results The result of telecine detection is predicted and IP conversion is controlled. In the present application, the configuration indicated as “... Means” may be realized by an electric circuit (hardware) or realized by software.
実施の形態1.
図1は、本発明の実施の形態1の映像信号処理装置(すなわち、実施の形態1の映像信号処理方法を実施することができる装置)の構成を示すブロック図である。
FIG. 1 is a block diagram showing a configuration of a video signal processing apparatus according to
図1に示されるように、実施の形態1の映像信号処理装置は、インターレース映像信号(「入力映像信号」又は「現フィールド信号」ともいう。)Iaが順次入力される入力端子100と、タイミング信号発生手段1と、インターレース映像信号Iaを1フィールド遅延させる1フィールド遅延手段2と、1フィールド遅延手段2から出力される1フィールド遅延信号Ibを1フィールド遅延させる1フィールド遅延手段3と、順次入力されるインターレース映像信号Iaがテレシネ映像信号における5フィールドのフィールドシーケンス(すなわち、テレシネシーケンス)の繰り返し条件を満たす映像信号であるか否かを検出すると共に、2−3プルダウンにおける補間の位相を検出するテレシネ検出手段6とを有する。タイミング信号発生手段1は、入力端子100から入力されたインターレース映像信号Iaから垂直及び水平同期信号を分離し、分離した同期信号に基づいて、タイミング信号を発生する。ここでは、タイミング信号発生手段1は、タイミング信号として、例えば、1フィールド内の所定の領域を示すためのエリア信号teを発生する。また、実施の形態1の映像信号処理装置は、補間信号(「補間走査線信号」ともいう。)を生成し、テレシネ検出手段6からのテレシネ検出信号tciに基づき補間信号を選択する補間信号生成手段110と、補間信号生成手段110から出力された補間信号Iを実走査線信号Rの対応する走査線間にはめ込み、倍速変換して、プログレッシブ映像信号Progに変換して出力する倍速変換手段9と、プログレッシブ映像信号Progを出力する出力端子101とを有する。
As shown in FIG. 1, the video signal processing apparatus according to the first embodiment includes an
図1に示されるように、補間信号生成手段110は、動き検出手段4と、動き適応補間処理手段5と、テレシネ補間処理手段7と、選択手段8とを有する。動き検出手段4は、現フィールド信号Iaと1フールド遅延手段3から出力された2フィールド遅延信号Icとを受け取り、映像信号のフレーム間差分に基づいて動きを検出し、この検出結果である動き検出信号detmを出力する。動き適応補間処理手段5は、1フールド遅延手段2から出力された1フィールド遅延信号Ibと、1フールド遅延手段3から出力された2フィールド遅延信号Icと、動き検出手段4から出力された動き検出信号detmとを受け取り、動き検出信号detmに応じた走査線補間処理を行う。テレシネ補間処理手段7は、現フィールドIaと、1フールド遅延手段3から出力された2フィールド遅延信号Icと、テレシネ検出手段6からの補間位相フラグtcfとを受け取り、補間位相フラグtcfに基づき2−3プルダウンの信号に対応した走査線補間処理を行う。選択手段8は、動き適応補間処理手段5で生成された補間信号Imと、テレシネ補間処理手段7で生成された補間信号Itと、テレシネ検出手段6からのテレシネ検出信号tciとを受け取り、テレシネ検出信号tciに応じて、動き適応補間処理手段5からの補間信号Im又はテレシネ補間処理手段7からの補間信号Itのいずれかを選択して補間信号Iとして出力する。
As shown in FIG. 1, the interpolation
また、図1に示されるように、テレシネ検出手段6は、1フレーム前のフィールドとの間の差分情報から1フレーム間の相関を検出する相関検出手段120と、シーケンス検出手段14と、入力映像信号を監視する出現頻度検出手段15と、予測制御手段16とを有する。相関検出手段120は、1フレーム間の差分を検出する差分検出手段11と、差分検出手段11からの出力信号を所定の閾値と比較する比較手段12と、所定エリア内累積カウンタ13とを有する。
Further, as shown in FIG. 1, the telecine detection means 6 includes a correlation detection means 120 for detecting a correlation between one frame from the difference information from the previous field, a sequence detection means 14, and an input video. Appearance frequency detection means 15 for monitoring the signal and prediction control means 16 are provided. The correlation detection unit 120 includes a
テレシネ検出手段6には、現フィールド信号Iaと、1フィールド遅延手段3からの2フィールド遅延信号Icとが入力される。テレシネ検出手段6は、1フレーム間の差分情報から、入力映像信号が、2−3プルダウンにおけるテレシネ映像信号における5フィールドのテレシネシーケンスの繰り返し条件を満たす映像信号であるか否かを検出すると共に、入力映像信号におけるテレシネシーケンスの出現頻度を検出し(すなわち、「テレシネ映像信号であることの確からしさ」を判定し)、これら検出結果に基づいてテレシネ映像信号の検出を示すテレシネ検出信号tciと、2−3プルダウンの位相(すなわち、同一フレームから変換されたフィールドの方向)を示す補間位相フラグtcfを生成して出力する。テレシネ検出手段6は、入力映像信号Iaがテレシネ映像信号であると検出した場合には、例えば、テレシネ検出信号tciの値を‘1’(すなわち、tci=1)とし、入力映像信号Iaがテレシネ映像信号ではないと検出した場合には、例えば、テレシネ検出信号tciの値を‘0’(すなわち、tci=0)とする。また、テレシネ検出手段6は、例えば、前フィールドが同一フィールドである場合には、例えば、補間位相フラグtcfの値を‘1’(すなわち、tcf=1)とし、後フィールドが同一フィールドである場合には、例えば、補間位相フラグtcfの値を‘0’(すなわち、tcf=0)とする。補間位相フラグtcfは、補間信号生成手段110内のテレシネ補間処理手段7へ送られ、テレシネ検出信号tciは、補間信号生成手段110内の選択手段8へ制御信号として送られる。テレシネ検出手段6の詳細については後述する。
The telecine detection means 6 receives the current field signal Ia and the two-field delay signal Ic from the one-field delay means 3. The telecine detection means 6 detects whether or not the input video signal is a video signal satisfying the repetition condition of the telecine sequence of 5 fields in the telecine video signal in 2-3 pulldown from the difference information between one frame, A telecine detection signal tci that detects the frequency of appearance of a telecine sequence in the input video signal (ie, determines “probability of being a telecine video signal”) and indicates the detection of the telecine video signal based on these detection results; An interpolation phase flag tcf indicating a 2-3 pull-down phase (that is, the direction of a field converted from the same frame) is generated and output. When the telecine detection means 6 detects that the input video signal Ia is a telecine video signal, for example, the value of the telecine detection signal tci is set to '1' (that is, tci = 1), and the input video signal Ia is telecine. When it is detected that it is not a video signal, for example, the value of the telecine detection signal tci is set to “0” (that is, tci = 0). For example, when the previous field is the same field, the
図1に示されるように、補間信号生成手段110は、現フィールド信号Iaと、1フィールド遅延手段2からの1フィールド遅延信号Ibと、1フィールド遅延手段3からの2フィールド遅延信号Icとを受け取り、補間信号Iを出力する。 As shown in FIG. 1, the interpolation signal generation means 110 receives the current field signal Ia, the 1-field delay signal Ib from the 1-field delay means 2, and the 2-field delay signal Ic from the 1-field delay means 3. The interpolation signal I is output.
補間信号生成手段110内の動き検出手段4は、現フィールド信号Iaと、1フィールド遅延手段3からの2フィールド遅延信号Icとを受け取り、2つのフィールドにおける信号間の差分情報を求める。そして、動き検出手段4は、得られた差分情報に基づき、1フレーム間の映像信号の動きを検出し、映像信号の動きを示す動き検出信号detmを動き適応補間処理手段5へ送る。
The motion detection means 4 in the interpolation signal generation means 110 receives the current field signal Ia and the 2-field delay signal Ic from the 1-field delay means 3, and obtains difference information between the signals in the two fields. Then, based on the obtained difference information, the
補間信号生成手段110内の動き適応補間処理手段5は、1フィールド遅延手段2からの1フィールド遅延信号Ibと、1フィールド遅延手段3からの2フィールド遅延信号Icに対し、動き検出手段4からの出力である動き検出信号detmに基づき、動き適応IP変換を行う。補間走査線信号の生成処理は、1フィールド遅延信号Ibに対して行われる。動き適応補間処理手段5は、動き検出信号detmに基づいて、時間的に前の2フィールド遅延信号Icから対応する走査線の画素をはめ込むことによるフィールド間補間、又は、1フィールド遅延信号Ibにおける垂直方向の上下に位置する画素信号からのフィールド内補間処理を行い、補間走査線信号(補間信号)Imを出力する。 The motion adaptive interpolation processing means 5 in the interpolation signal generating means 110 receives the 1 field delay signal Ib from the 1 field delay means 2 and the 2 field delay signal Ic from the 1 field delay means 3 from the motion detection means 4. Based on the output motion detection signal detm, motion adaptive IP conversion is performed. The interpolation scanning line signal generation process is performed on the one-field delay signal Ib. Based on the motion detection signal detm, the motion adaptive interpolation processing means 5 performs inter-field interpolation by inserting pixels corresponding to the scanning line from the temporally previous two-field delay signal Ic, or vertical in the one-field delay signal Ib. Intra-field interpolation processing is performed from pixel signals positioned above and below the direction, and an interpolation scanning line signal (interpolation signal) Im is output.
補間信号生成手段110内のテレシネ補間処理手段7は、現フィールド信号Iaと、1フィールド遅延手段3からの2フィールド遅延信号Icとを受け取り、テレシネ検出手段6からの補間位相フラグtcfに基づき、2−3プルダウンの変換位相に対応したフィールドを現フィールド信号Ia又は2フィールド遅延信号Icから選択し、テレシネ映像信号の場合における補間信号(「テレシネ補間信号」という。)Itとして出力する。 The telecine interpolation processing means 7 in the interpolation signal generating means 110 receives the current field signal Ia and the two-field delay signal Ic from the one-field delay means 3, and based on the interpolation phase flag tcf from the telecine detection means 6, 2 The field corresponding to the −3 pull-down conversion phase is selected from the current field signal Ia or the two-field delay signal Ic, and output as an interpolated signal (referred to as “telecine interpolated signal”) It in the case of a telecine video signal.
補間信号生成手段110内の選択手段8は、動き適応補間処理手段5からの補間信号Im及びテレシネ補間処理手段7からのテレシネ補間信号Itのいずれか一方を、テレシネ検出手段6から出力されるテレシネ検出信号tciに応じて選択し、補間信号Iとして倍速変換手段9へと送る。テレシネ検出信号tciは、入力映像信号Iaがテレシネ映像信号であるか否かのテレシネ検出手段6による検出結果を示す信号である。選択手段8は、テレシネ検出信号tciがテレシネ映像信号であることを示す場合(実施の形態1においては、tci=1の場合)には、テレシネ補間処理手段7からのテレシネ補間信号Itを選択して出力し、テレシネ検出信号tciがテレシネ映像信号でないことを示す場合(実施の形態1においては、tci=0の場合)には、通常の映像信号であるとして動き適応補間処理手段5からの補間信号Imを選択して出力する。 The selection means 8 in the interpolation signal generation means 110 is a telecine output from the telecine detection means 6, either the interpolation signal Im from the motion adaptive interpolation processing means 5 or the telecine interpolation signal It from the telecine interpolation processing means 7. The signal is selected according to the detection signal tci and sent to the double speed conversion means 9 as an interpolation signal I. The telecine detection signal tci is a signal indicating a detection result by the telecine detection means 6 as to whether or not the input video signal Ia is a telecine video signal. The selection means 8 selects the telecine interpolation signal It from the telecine interpolation processing means 7 when the telecine detection signal tci indicates a telecine video signal (in the case of tci = 1 in the first embodiment). When the telecine detection signal tci indicates that it is not a telecine video signal (in the case of tci = 0 in the first embodiment), it is assumed that the telecine detection signal tci is a normal video signal. The signal Im is selected and output.
倍速変換手段9は、補間対象フィールドであり、実走査線信号となる1フィールド遅延手段2からの1フィールド遅延信号R(すなわち、Ib)と、選択手段8からの補間信号I(すなわち、補間信号Im又はIt)が入力され、補間信号を実走査線信号の対応する走査線間にはめ込み、倍速変換して、プログレッシブ映像信号Progへ変換して出力する。そして、出力端子101からは、倍速変換手段9の出力であるプログレッシブ映像信号Progが出力される。
The double speed conversion means 9 is a field to be interpolated, and is a 1-field delay signal R (ie, Ib) from the 1-field delay means 2 that is an actual scanning line signal, and an interpolation signal I (ie, an interpolation signal) from the selection means 8. Im or It) is input, the interpolation signal is fitted between the corresponding scanning lines of the actual scanning line signal, double-speed converted, converted to a progressive video signal Prog, and output. From the
テレシネ検出手段6内の相関検出手段120は、入力端子100からの現フィールド信号Iaと、1フィールド遅延手段3からの2フィールド遅延信号Icと、タイミング信号発生手段1からの1フィールド内の所定エリアを示すエリア信号teとに基づき、1フレーム間の相関を検出し、1フレーム間の相関の強さを示す値として1フィールド期間単位の動画素累積値cntを出力する。
The correlation detection means 120 in the telecine detection means 6 includes a current field signal Ia from the
相関検出手段120内の差分検出手段11には、入力端子100からの現フィールド信号Iaと、1フィールド遅延手段3からの2フィールド遅延信号Icとが入力される。差分検出手段11は、現フィールド信号Iaと、2フィールド遅延信号Icとの各画素間の差分を求め、その差分の絶対値をとり、1フレーム間差分情報を出力する。
The difference detection means 11 in the correlation detection means 120 receives the current field signal Ia from the
相関検出手段120内の比較手段12には、差分検出手段11からの1フレーム間差分情報が入力される。比較手段12は、入力された差分検出手段11からの1フレーム間差分情報を所定の閾値と比較し、比較結果を出力する。比較は、例えば、1フレーム間差分情報が所定の閾値より小さければその画素を静止画素と判断し、所定の閾値以上であればその画素を動画素と判断し、結果として、2値化した値を出力する。2値化した値は、例えば、静止画素と判断された場合は‘0’とし、動画素と判断された場合は‘1’とする。なお、この2値化した値は、上記したものに限るものではなく、比較により静止画素又は動画素として判断された各画素の結果を示す値であれば、他の値であってもよい。
The inter-frame difference information from the
相関検出手段120内の所定エリア内累積カウンタ13には、比較手段12により静止画素又は動画素として2値化された値と、タイミング信号発生手段1からの1フィールド内の所定エリアを示すエリア信号teとが入力される。所定エリア内累積カウンタ13は、静止画素又は動画素として2値化された値に応じて、タイミング信号発生手段1からの1フィールド内の所定エリアを示すエリア信号teに示されたエリア内において、動画素となる値の画素の数を累積する。すなわち、比較手段12からの動画素と判断された値‘1’となる場合をエリア信号teのエリア内にわたり累積して、エリア内における動画素累積値cntを1フィールド内の動画素の数に対応する値(動画素数又は動画素累積値)としてフィールド単位ごとで出力する。この累積結果である動画素累積値cntは、1フレーム間の相関の強さを示す値であり、相関が強い場合(すなわち、静止画の場合)は、1フィールド内の動画素の数が小さくなり、相関が弱い場合(すなわち、動きが大きい、動画の場合)は、1フィールド内の動画素の数が大きくなる。
A predetermined
映像信号によっては、レターボックスと呼ばれる画面上下の帯部分に黒信号部(無画部)が存在する映画素材で送られる場合があり、エリア信号teは、例えば、1フィールド内の上下の帯部分と画像のブランキング期間を除く画素の期間を示す信号としてタイミング信号発生手段1において発生される。したがって、所定エリア内累積カウンタ13においては、上下の帯部分と画像のブランキング期間を除くエリア内における動画素の数を1フィールド内の動画素数として出力することなり、誤判定を防止できる。
Depending on the video signal, it may be sent as a movie material in which a black signal portion (no image portion) exists in the upper and lower band portions called letter boxes, and the area signal te is, for example, the upper and lower band portions in one field. The timing signal generating means 1 generates a signal indicating the pixel period excluding the image blanking period. Therefore, in the predetermined
テレシネ検出手段6内のシーケンス検出手段14には、所定エリア内累積カウンタ13から出力される1フィールド期間単位の動画素累積値cntが入力される。シーケンス検出手段14は、入力された動画素累積値cntから、フィールドが静止画フィールドであるか否か、入力映像信号が5フィールドのテレシネシーケンスの繰り返し条件を満たす映像信号であるか否か、及び2−3プルダウンのシーケンス位相を検出する。
The sequence detection means 14 in the telecine detection means 6 receives the moving pixel accumulated value cnt in units of one field period output from the predetermined
図2は、実施の形態1による映像信号処理装置におけるテレシネ検出手段6内のシーケンス検出手段14の構成を示すブロック図である。図2に示されるように、実施の形態1のシーケンス検出手段14は、第1、第2、第3の静止画検出手段21a,21b,21cと、動画フィールドカウンタ22と、テレシネシーケンスの位相を検出するシーケンス位相検出手段141と、テレシネシーケンスの繰り返し条件を検出し、テレシネシーケンスの繰り返し条件を満たす映像信号であるか否かを判定するテレシネシーケンス判定手段142と、テレシネシーケンスの繰り返し条件を満たしていないことを検出するテレシネ解除検出手段143とを有する。
FIG. 2 is a block diagram showing the configuration of the sequence detection means 14 in the telecine detection means 6 in the video signal processing apparatus according to the first embodiment. As shown in FIG. 2, the
図2に示されるように、シーケンス位相検出手段141は、テレシネシーケンス位相カウンタ23と、補間位相フラグ生成手段35とを有する。また、テレシネシーケンス判定手段142は、テレシネ起動カウンタ24と、シーケンス検出信号生成手段36と、起動カウント値設定手段37とを有する。さらに、テレシネ解除検出手段143は、動画連続検出手段25と、静止画連続検出手段27と、比較手段28と、シーケンス内静止画カウンタ30及び比較手段31からなるシーケンスずれ検出手段29と、シーンチェンジ検出手段32と、比較閾値設定手段33と、解除信号生成手段34とを有する。
As shown in FIG. 2, the sequence
ここで、テレシネ映像信号は、5フィールドに1回、2フィールド前と同一のフィールドを繰り返して変換されており、1フレーム前のフィールドとの差分に基づく所定エリア内累積カウンタ13から出力される動画素累積値cntは、テレシネ映像信号の場合、5フィールドに一度の周期でゼロ又は所定の閾値以下となるフィールド(静止画)が存在することになる。
Here, the telecine video signal is converted once by every five fields, and the same field as the previous two fields is repeatedly converted, and the video output from the predetermined area
図3は、実施の形態1による映像信号処理装置における相関検出手段120内の所定エリア内累積カウンタ13から出力される動画素累積値cnt(縦軸)とフィールド番号(時間、すなわち、横軸)との関係(テレシネ映像信号の場合)を示す図である。図3には、画像シミュレーションにおいて、テレシネ映像信号からのフィールド画像を差分検出手段11、比較手段12、及び所定エリア内累積カウンタ13により処理した場合が示されている。図3においてフィールド番号1、6、11、…、41として示されるように、テレシネ映像信号の動画素累積値cntは、5フィールドに一度の周期でゼロ又は所定の閾値以下となる静止画フィールドを繰り返すシーケンスとなっている。
FIG. 3 shows the moving pixel accumulated value cnt (vertical axis) and field number (time, that is, horizontal axis) output from the predetermined area
よって、テレシネシーケンスであることの条件の検出は、動画フィールドが4フィールド連続した後、静止画フィールドが1フィールドとなる5フィールド繰り返しシーケンスの検出により行うことができる。シーケンス検出手段14は、動画素累積値cntからフィールドが静止画フィールドであるか否かを検出し、この5フィールドに一度の静止画フィールドを検出することで、入力映像信号がテレシネシーケンスであることの条件を満たすか否かを検出し、その結果(すなわち、テレシネシーケンス検出結果)を示す検出信号tci0と、テレシネ補間時の位相を示す補間位相フラグtcfとを出力する。 Therefore, the detection of the condition of being a telecine sequence can be performed by detecting a five-field repeated sequence in which a still picture field becomes one field after four consecutive moving picture fields. The sequence detection means 14 detects whether or not the field is a still picture field from the moving pixel accumulated value cnt, and detects the still picture field once in these five fields, so that the input video signal is a telecine sequence. The detection signal tci 0 indicating the result (that is, the telecine sequence detection result) and the interpolation phase flag tcf indicating the phase at the time of telecine interpolation are output.
また、出現頻度検出手段15は、シーケンス検出手段14と同一のシーケンス検出条件を用いてテレシネシーケンスの出現頻度を検出する。シーケンス検出手段14は、シーケンス検出手段14により検出しているフィールドの静止画検出結果stl1、動画の連続数mvf、及びテレシネシーケンスの位相seqを、出現頻度検出手段15へ出力する。
Further, the appearance
なお、テレシネ検出手段6におけるテレシネ検出は、フィールド単位で行われ、テレシネシーケンスの検出を行うシーケンス検出手段14、出現頻度検出手段15、及び予測制御手段16における各ブロックの動作は、フィールド毎で処理するものであり、垂直同期信号に基づくフィールドパルスのタイミングで動作する。 The telecine detection in the telecine detection means 6 is performed on a field basis, and the operation of each block in the sequence detection means 14, the appearance frequency detection means 15, and the prediction control means 16 for detecting the telecine sequence is processed for each field. It operates at the timing of the field pulse based on the vertical synchronization signal.
所定エリア内累積カウンタ13からシーケンス検出手段14へ入力された1フィールド単位の動画素累積値cntは、第1、第2、第3の静止画検出手段21a,21b,21cと、テレシネ解除検出手段143内のシーンチェンジ検出手段32へ送られる。
The moving pixel cumulative value cnt in units of one field inputted from the predetermined
第1、第2、第3の静止画検出手段21a,21b,21cは、それぞれにおいて所定エリア内累積カウンタ13からの1フィールド単位の動画素累積値cntを所定の閾値と比較し、そのフィールドが静止画フィールドであるか否かを検出する。入力された動画素累積値cntが所定の閾値より小さい場合(すなわち、1フィールド内の動画素の数が所定の個数より小さい場合)、そのフィールドを静止画として、静止画フィールドを検出する。なお、動画素累積値cntが所定の閾値より大きい場合(すなわち、1フィールド内に所定の閾値より多くの動画素が含まれる場合)には、そのフィールドを動画フィールドとして、それ以外の場合は静止画と検出することもできる。
Each of the first, second, and third still
第1の静止画検出手段21aは、動画素累積値cntを所定の閾値STL_TH1と比較し、入力された動画素累積値cntが所定の閾値STL_TH1より小さい場合に、そのフィールドを静止画として、検出結果stl1の値を‘1’(stl1=1であり、静止画を示す。)とし、それ以外の場合は、検出結果stl1の値を‘0’(stl1=0であり、動画を示す。)とする。ここで、静止画検出のための所定の閾値STL_TH1は、テレシネシーケンスにおいて、5フィールドに一度ある同一フィールドによる静止画フィールドを検出することができるような値に設定される。
The first still
同様に、第2の静止画検出手段21bは、動画素累積値cntを所定の閾値STL_TH2と比較し、入力された動画素累積値cntが所定の閾値STL_TH2より小さい場合に、そのフィールドを静止画として、検出結果stl2の値を‘1’(stl2=1であり、静止画を示す。)とし、それ以外の場合は、検出結果stl2の値を‘0’(stl2=0であり、動画を示す。)とする。この静止画検出のための所定の閾値STL_TH2は、連続する静止画を検出する値とし、字幕等の静止画素の挿入時を考慮した値、若しくは、完全に静止画となる場合のみを検出できるような値とすることができる。なお、第1の静止画検出手段21aにおける所定の閾値と同一の値とすることも可能である。
Similarly, the second still
また、第3の静止画検出手段21cは、動画素累積値cntを所定の閾値STL_TH3と比較し、入力された動画素累積値cntが所定の閾値STL_TH3より小さい場合に、そのフィールドを静止画として、検出結果stl3の値を‘1’(stl3=1であり、静止画を示す。)とし、それ以外の場合は、検出結果stl3の値を‘0’(stl3=0であり、動画を示す。)とする。この静止画検出のための所定の閾値STL_TH3は、テレシネシーケンスの5フィールドに一度の静止画とは異なるフィールドにおける静止画フィールドを検出することができるような値に設定される。この所定の閾値は、第1の静止画検出手段21aにおける所定の閾値と同一の値とすることも可能である。
The third still
そして、第1の静止画検出手段21aからの検出結果stl1は、5フィールドのテレシネシーケンスを検出するため、動画フィールドカウンタ22、シーケンス位相検出手段141、テレシネシーケンス判定手段142、及びテレシネ解除検出手段143内の動画連続検出手段25へと送られると共に、出現頻度検出手段15へと出力される。また、第2の静止画検出手段21bからの検出結果stl2は、テレシネ解除検出手段143内の静止画連続検出手段27へ、第3の静止画検出手段21cからの検出結果stl3は、テレシネ解除検出手段143内のシーケンスずれ検出手段29へと出力される。
The detection result stl 1 from the first still image detection means 21a is a moving
動画フィールドカウンタ22には、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1が入力される。動画フィールドカウンタ22は、入力された検出結果stl1に基づき、動画フィールドの連続をカウントし、前フィールドまでの動画フィールド連続数mvfを出力する。すなわち、動画フィールドカウンタ22は、入力された検出結果stl1が静止画を示す‘1’である場合(すなわち、stl1=1の場合)、カウンタをリセットし、動画を示す‘0’である場合(すなわち、stl1=0の場合)はカウントして、次フィールドにタイミングを合わせ、カウントした動画フィールドの連続数mvfを出力する。
Video The
シーケンス位相検出手段141は、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1と、動画フィールドカウンタ22からの前フィールドまでの動画連続数mvfとに基づいて5フィールド単位で繰り返すテレシネシーケンスの位相を検出し、5フィールドのシーケンス位相を示すカウント値seqと、補間位相フラグtcfとを出力する。
The sequence
シーケンス位相検出手段141内のテレシネシーケンス位相カウンタ23には、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1と、動画フィールドカウンタ22からの前フィールドまでの動画連続数mvfとが入力される。テレシネシーケンス位相カウンタ23は、フィールド毎で5フィールド周期となる‘0’から‘4’までを繰り返しカウントし、静止画検出結果stl1とその前フィールドまでの動画フィールドの連続数mvfに基づき、繰り返しの周期カウンタのリセットを行う。すなわち、テレシネシーケンス位相カウンタ23は、静止画検出結果stl1が‘1’であり(静止画)、かつ、前フィールドまでの動画連続数mvfが‘4’であるときに、テレシネ映像信号における5フィールドに一度の完全静止画フィールドであると判定して、カウント値をゼロへリセットする。その後、テレシネシーケンス位相カウンタ23は、静止画検出結果stl1が1であり、かつ、動画連続数mvfが‘4’となるまで(すなわち、カウント値seqが‘1’から‘4’まで)、フィールド毎にカウントする。
The telecine sequence phase counter 23 in the sequence
テレシネシーケンス位相カウンタ23のカウント値seqは、5フィールド単位で繰り返しており、テレシネ映像信号においては5フィールドごとに一度の完全静止画フィールドに同期してリセットされるので、5フィールドの繰り返しシーケンス、すなわち、2−3プルダウンにおけるシーケンスの位相を示すことになる。そして、テレシネシーケンスの位相であるカウント値seqは、補間位相フラグ生成手段35へ送られる。また、カウント値seqは、テレシネ解除検出手段143におけるシーケンスずれ検出手段29と出現頻度検出手段15へも出力される。
The count value seq of the telecine
シーケンス位相検出手段141内の補間位相フラグ生成手段35は、テレシネシーケンス位相カウンタ23からのテレシネシーケンス位相カウント値seqを受け取り、テレシネ補間における同一フレームから変換されたフィールドの方向を示す補間位相フラグtcfを生成する。テレシネシーケンス位相カウンタ23からのテレシネシーケンス位相カウント値seqは、5フィールド単位で繰り返す信号となっており、2−3プルダウンの位相に同期している。よって、テレシネシーケンス位相カウント値seqにより、補間時のフィールド方向を示すように、例えば、時間的に前のフィールドからテレシネ補間をするフィールド位相においては補間位相フラグtcfを‘1’とし、時間的に後ろのフィールドからテレシネ補間をするフィールドにおいては補間位相フラグtcfを‘0’とする。なお、補間位相フラグtcfの値は上記したものに限らず、前のフィールドからのテレシネ補間の場合と後ろのフィールドからのテレシネ補間の場合を区別できる値であれば、他の値であってもよい。補間位相フラグ生成手段35による補間位相フラグtcfは、補間信号生成手段110内のテレシネ補間処理手段7へ送られる。
The interpolation phase flag generation means 35 in the sequence phase detection means 141 receives the telecine sequence phase count value seq from the telecine
次に、テレシネ解除検出手段143には、第1、第2、第3の静止画検出手段21a,21b,21cからの静止画検出結果stl1,stl2,stl3と、動画フィールドカウンタ22からの動画連続数mvfと、所定エリア内累積カウンタ13からの1フィールド単位の動画素累積値cntとが入力され、入力される各信号に基づいて入力映像信号がテレシネシーケンスの条件を満たしていない場合を検出し、テレシネシーケンスの条件を満たさない場合に、シーケンス検出信号の解除を行う(すなわち、入力映像信号がテレシシーケンスではないとする)ための解除信号rstを生成し出力する。以下、テレシネ解除検出手段143内の各ブロックについて説明する。
Next, the telecine release detection means 143 includes the still picture detection results stl 1 , stl 2 , and stl 3 from the first, second and third still picture detection means 21a, 21b and 21c, and the moving
テレシネ解除検出手段143内の動画連続検出手段25には、第1の静止画検出手段21aからの静止画検出結果stl1と、動画フィールドカウンタ22からの動画連続数mvfが入力される。動画連続検出手段25は、動画フィールドの連続数mvfが‘4’であり、かつ、静止画検出結果stl1が‘0’(動画)である場合を検出し、検出結果を出力する。テレシネ映像信号においては5フィールドに1回、同一フィールドがあるので、動画フィールドの連続は5フィールド以上とならない。したがって、静止画検出結果stl1により検出フィールドが動画(すなわち、stl1=0)で、前フィールドまでの動画連続数mvfが‘4’(すなわち、mvf=4)であれば、5フィールド動画が連続したことになる。このため、mvfが‘4’であり、かつ、stl1が‘0’(動画)であるの場合には、テレシネ解除を示す信号として、例えば、‘1’となる検出結果を出力し、解除信号生成手段34へと送る。
The continuous
テレシネ解除検出手段143内の静止画連続検出手段27には、第2の静止画検出手段21bからのフィールドの静止画検出結果stl2が入力される。静止画連続検出手段27は、静止画検出結果stl2に基づいて静止画フィールドの連続をカウントする。すなわち、静止画連続検出手段27は、静止画検出結果が動画を示すstl2が‘0’(動画)のときに、カウント値をゼロへリセットし、stl2が‘1’(静止画)であるときにカウントする。静止画連続検出手段27のカウント値は、テレシネ解除検出手段143内の比較手段28へ出力される。 The still image continuous detection means 27 in the telecine release detection means 143 receives the field still image detection result stl 2 from the second still image detection means 21b. The still image continuation detecting means 27 counts the continuation of the still image field based on the still image detection result stl 2 . That is, the still image continuous detection means 27 resets the count value to zero when stl 2 indicating that the still image detection result indicates a moving image is “0” (moving image), and stl 2 is “1” (still image). Count when there is. The count value of the still image continuous detection means 27 is output to the comparison means 28 in the telecine release detection means 143.
テレシネ解除検出手段143内の比較手段28は、静止画連続検出手段27から出力された静止画連続カウント値を受け取り、この静止画連続カウント値を所定の閾値と比較し、連続数が所定の閾値以上となる場合を検出する。比較手段28は、静止画の連続数が所定の閾値以上である場合に、テレシネ解除を示す信号として、例えば、‘1’となる検出結果を、解除信号生成手段34へと送る。比較の所定の閾値は、テレシネ映像信号の5フィールドの繰り返しシーケンスを考慮し、例えば、5フィールドとして、よって、静止画が5フィールド以上連続する場合に検出結果‘1’が解除信号生成手段34へ出力される。
The
テレシネ解除検出手段143内のシーケンスずれ検出手段29は、テレシネシーケンスの検出中に、5フィールドに一度の静止画フィールドとは異なるシーケンス途中のフィールドで、静止画が存在することを検出して、フィールドシーケンスの位相のずれを検出する。シーケンスずれ検出手段29は、シーケンス内静止画カウンタ30と、比較手段31により構成されている。
The sequence shift detection means 29 in the telecine release detection means 143 detects that a still picture exists in a field in the middle of a sequence different from the still picture field once in five fields during the detection of the telecine sequence. Detects phase shift in the sequence. The sequence
シーケンス内静止画カウンタ30には、第3の静止画検出手段21cからの静止画検出結果stl3と、テレシネシーケンス位相カウンタ23からのシーケンス位相カウント値seqと、シーケンス検出信号生成手段36からのテレシネシーケンス検出信号tci0が入力される。シーケンス内静止画カウンタ30は、シーケンス検出信号生成手段36からのテレシネシーケンス検出信号tci0が、テレシネシーケンスであることを示す場合、第3の静止画検出手段21cからの静止画検出結果stl3が‘1’(静止画)となるフィールドをカウントする。但し、静止画フィールドのカウントは、2−3プルダウン位相に同期したシーケンス位相カウント値seqの1周期ごとに行い、5フィールドに一度の静止画フィールドの位置でカウント値をゼロへリセットする。よって、シーケンス内静止画カウンタ30は、テレシネ映像信号における5フィールドに1回ある静止画フィールドの位置とは異なるフィールドで、シーケンス中に静止画フィールドとなる場合を検出し、そのフィールドの数を出力することとなる。このシーケンス内静止画カウンタ30におけるカウント値は、シーケンスずれ検出手段29内の比較手段31へと出力される。
The in-sequence still
シーケンスずれ検出手段29内の比較手段31は、シーケンス内静止画カウンタ30からのカウント値を所定の閾値と比較し、このカウント値が所定の閾値以上の場合に、5フィールドのシーケンス途中における静止画の検出結果dbeを、テレシネ解除を示す信号(例えば、‘1’)として出力する。テレシネ映像信号の場合、5フィールドごとに一度完全静止画フィールドとなるため、シーケンス途中におけるその完全静止画フィールドとは異なるフィールドで、静止画フィールドが存在することを検出した場合には、シーケンスが変更して規則性が乱れ、2−3プルダウン位相のずれがあると判断できる。よって、比較手段31は、この比較結果を、2−3プルダウン位相のずれを示す信号dbeとして出力する。なお、比較手段31における比較の所定の閾値は、例えば、‘1’とする。シーケンスずれ検出手段29内の比較手段31からの出力dbeは、解除信号生成手段34へ出力される。
The
一方、テレシネ解除検出手段143内のシーンチェンジ検出手段32には、所定エリア内累積カウンタ13からの1フィールド単位の動画素累積値cntと、比較閾値設定手段33により設定される所定の閾値STHが入力される。シーンチェンジ検出手段32は、動画素累積値cntと閾値STHを比較し、この比較結果に基づいてそのフィールドにおけるシーンチェンジを検出する。
On the other hand, the scene change detection means 32 in the telecine release detection means 143 has a moving pixel cumulative value cnt from the predetermined area
ここで、一般に映像信号における編集点は、シーンの切り換わりである可能性が高く、その場合フィールド内のほとんどの画素が動画素と判定される。よって、1フレーム前のフィールドからの差分に基づく動画素累積値cntは、通常のシーケンス内における値と比較して大きく変化する。図4は、画像シミュレーションにおいて、編集点が存在するテレシネ映像信号からのフィールド画像を差分検出手段11、比較手段12、及び所定エリア内累積カウンタ13により処理した場合の1フィールド単位の動画素累積値cnt(縦軸)とフィールド番号(時間、すなわち、横軸)との関係を示す図である。図4に示されるように、編集点となるシーンの切り換わり(図4において、フィールド番号538及び539)においては、動画素累積値cntは他のフィールドにおける値と比較して大きく変化している。
Here, in general, an edit point in a video signal is highly likely to be a scene change, and in this case, most pixels in the field are determined to be moving pixels. Therefore, the moving pixel cumulative value cnt based on the difference from the field one frame before changes greatly compared to the value in the normal sequence. FIG. 4 shows a moving pixel accumulated value for each field when a field image from a telecine video signal having an editing point is processed by the
よって、シーンチェンジ検出手段32は、動画素累積値cntが閾値STHより大きい場合(すなわち、1フィールド内の所定の閾値より多くの画素が動画素となる場合)には、そのフィールドでシーンチェンジがあったとして、シーンチェンジ検出結果schを‘1’として出力し、それ以外の場合はシーンチェンジ検出結果schを‘0’として出力する。シーンチェンジ検出のための閾値STHは、比較閾値設定手段33により設定され、シーンチェンジ検出結果schは、解除信号生成手段34へ出力される。
Therefore, when the moving pixel cumulative value cnt is larger than the threshold value STH (that is, when more pixels than the predetermined threshold value in one field become moving pixels), the scene
テレシネ解除検出手段143内の解除信号生成手段34には、動画連続検出手段25からの動画連続検出結果と、比較手段28からの静止画連続検出結果と、シーケンスずれ検出手段29からのシーケンスの位相ずれを示す信号dbeと、シーンチェンジ検出手段32からのシーンチェンジ検出結果schとが入力される。解除信号生成手段34は、テレシネ映像信号からの切り換わりや位相ずれが起こった場合や、テレシネシーケンスの条件を満たさない場合に、シーケンス検出信号の解除を行う(すなわち、入力映像信号がテレシネシーケンスではないとする)ための解除信号を、入力された各検出結果のいずれかに基づき生成する。例えば、動画連続検出手段25からの動画連続検出結果と、比較手段28の静止画連続検出結果と、シーケンスずれ検出手段29からのシーケンスの位相ずれを示す信号dbeと、シーンチェンジ検出手段32からのシーンチェンジ検出結果schの中から、いずれか1つ以上の検出結果が‘1’となった場合に、テレシネ解除信号rstを‘1’とし、テレシネ解除しない場合はrstを‘0’とする。この場合は、動画又は静止画が所定フィールド(5フィールド)連続することが検出された場合と、テレシネ映像信号の検出中に2−3プルダウン位相がずれた場合、シーンチェンジが検出された場合のいずれかにおいて、解除信号rstを‘1’とする。
The cancellation
なお、解除信号生成手段34における解除信号rstの生成は、上記条件に限られるものではなく、例えば、動画連続検出手段25からの動画連続検出結果と、比較手段28からの静止画連続検出結果と、シーケンスずれ検出手段29からのシーケンスの位相ずれを示す信号dbeと、シーンチェンジ検出手段32からのシーンチェンジ検出結果schの中から、いずれか2つ以上の検出結果が‘1’となった場合、又は、予め決められた検出結果の組み合わせにおいてそれぞれの検出結果が‘1’となった場合に、値が‘1’となる解除信号rstを出力するように構成してもよい。また、動画連続検出手段25からの動画連続検出結果と、比較手段28の静止画連続検出結果とシーンチェンジ検出手段32からのシーンチェンジ検出結果schとにより、動画又は静止画が所定フィールド(5フィールド)連続することが検出された場合とシーンチェンジが検出された場合に値が‘1’の解除信号rstを出力する条件として設定することもできる。
The generation of the release signal rst in the release
テレシネシーケンス判定手段142には、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1と、動画フィールドカウンタ22からの前フィールドまでの動画連続数mvfと、テレシネ系所検出手段143による解除信号rstとが入力される。テレシネシーケンス判定手段142は、テレシネシーケンスの繰り返し条件を検出し、テレシネシーケンスであるか否かを判定して、シーケンス検出結果を示すテレシネシーケンス検出信号tci0を出力する。以下に、テレシネシーケンス判定手段142を構成する各ブロックについて説明する。
The telecine
テレシネシーケンス判定手段142内のテレシネ起動カウンタ24には、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1と、動画フィールドカウンタ22からの前フィールドまでの動画連続数mvfと、リセット信号として解除信号生成手段34からの解除信号rstとが入力される。テレシネ起動カウンタ24は、静止画検出結果stl1と、前フィールドまでの動画連続数mvfとに基づいて動画フィールドが4フィールド連続した後、静止画フィールドとなる5フィールドのテレシネシーケンスを検出した場合をカウントする。解除信号生成手段34からの解除信号rstが‘1’(すなわち、rst=1)となった場合は、テレシネシーケンスのカウント値oncntをゼロへリセットする。すなわち、静止画検出結果stl1が‘1’(静止画)であり、かつ、前フィールドまでの動画連続数mvfが‘4’のとき、テレシネ映像信号の5フィールドのシーケンスを検出したとして、テレシネシーケンスの繰り返し回数をカウントする。解除信号生成手段34からの解除信号rstとして‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をゼロとし、解除信号rstによるリセット後は、再び上記の5フィールドごとのテレシネシーケンスの条件となるフィールドの入力を待ち、‘0’からシーケンスの繰り返し回数のカウントを開始する。そして、テレシネ起動カウンタ24によるテレシネシーケンスのカウント値oncntは、シーケンス検出信号生成手段36へと出力される。
The telecine start counter 24 in the telecine
テレシネシーケンス判定手段142内の起動カウント値設定手段37は、テレシネ起動カウンタ24から出力されるテレシネシーケンスのカウント値oncntに対し、テレシネシーケンスであると検出するまでのテレシネシーケンスの繰り返し回数を設定し、シーケンス検出信号を起動するまでの起動カウント値TH1として出力する。
The activation count
テレシネシーケンス判定手段142内のシーケンス検出信号生成手段36には、テレシネ起動カウンタ24からのテレシネシーケンスのカウント値oncntと、起動カウント値設定手段37により設定された起動カウント値TH1が入力される。シーケンス検出信号生成手段36は、テレシネ起動カウンタ24からのテレシネシーケンスカウント値oncntと、起動カウント値TH1とを比較し、テレシネシーケンスカウント値oncntが起動カウント値TH1以上になったとき、すなわち、5フィールドのテレシネシーケンスが所定の回数連続して検出されたときに、シーケンス検出結果を示す検出信号tci0を‘1’とし、テレシネシーケンスカウント値oncntが起動カウント値TH1より小さいときは検出信号tci0を‘0’として出力する。テレシネシーケンス検出信号tci0が‘0’の場合は、テレシネシーケンスがカウントされない(テレシネ映像信号でない)場合や検出されるまでの間、シーケンスカウント値がゼロへリセットされた場合等である。なお、シーケンス検出信号の値は、これに限らず、テレシネシーケンスを所定回数以上連続して検出している場合とそれ以外の場合を判別できればよい。シーケンス検出信号生成手段36からの出力であるテレシネシーケンス検出信号tci0は、シーケンスずれ検出手段31へ送られると共に、予測制御手段16へと出力される。
The sequence detection signal generation means 36 in the telecine sequence determination means 142 receives the telecine sequence count value oncnt from the
次に、テレシネ検出手段6における出現頻度検出手段15には、シーケンス検出手段14から出力される静止画検出結果stl1、動画の連続数mvf、及びテレシネシーケンスの位相カウント値seqが入力される。出現頻度検出手段15は、入力映像信号のシーケンスを監視し、テレシネシーケンスの出現頻度を検出することで、テレシネシーケンスの出現頻度の条件を満たす映像信号であるか否か(すなわち、テレシネ映像信号であることの確からしさ)を判定する。
Next, the appearance
図5は、実施の形態1による映像信号処理装置における出現頻度検出手段15の構成及びシーケンス検出手段14の一部の構成を示すブロック図である。図5に示されるように、出現頻度検出手段15は、シーケンス検出手段14内における第1の静止画検出手段21a、動画フィールドカウンタ22、テレシネシーケンス位相カウンタ23から得られる静止画検出結果stl1、動画連続数mvf、及びテレシネシーケンスの位相カウント値seqを入力としている。しかし、出現頻度検出手段15内に、第1の静止画検出手段21a、動画フィールドカウンタ22、及びテレシネシーケンス位相カウンタ23と同様の手段を持つよう構成することもできる。この場合には、相関検出手段120における所定エリア内累積カウンタ13から出力される1フィールド単位の動画素累積値cntを入力とし、出現頻度検出手段15内でテレシネシーケンス検出の条件となる静止画検出結果stl1と動画の連続数mvf、及びテレシネシーケンスの位相カウント値seqを得ることになる。
FIG. 5 is a block diagram illustrating the configuration of the appearance
以下の説明においては、出現頻度検出手段15が、シーケンス検出手段14から出力される静止画検出結果stl1と動画連続数mvf、及びテレシネシーケンスの位相カウント値seqを入力とする場合を説明する。
In the following description, a case will be described in which the appearance
図5に示されるように、実施の形態1のテレシネ検出手段6における出現頻度検出手段15は、シーケンス判定回数検出手段151と、確からしさ判定手段152とを有する。シーケンス判定回数検出手段151は、入力映像信号におけるシーケンス条件を比較的長い時間(フィールド)にわたって監視し、テレシネシーケンスと判定される回数をカウントする。シーケンス判定回数検出手段151は、出現頻度カウンタ40と、静止画連続検出手段41と、カウント値調整手段42と、最大値設定手段43と、カウント値初期化手段44とを有する。また、確からしさ判定手段152は、シーケンス判定回数検出手段151から出力されるカウント値tcを所定の閾値TH2と比較し、この比較結果をテレシネ変換された映像信号であることの確からしさ示す指標である予測制御信号tciflgとして出力する(すなわち、テレシネ映像信号であることの確からしさを判定し、判定結果を出力する)。
As shown in FIG. 5, the appearance frequency detection means 15 in the telecine detection means 6 of
まず、シーケンス判定回数検出手段151には、シーケンス検出手段14から出力される静止画検出結果stl1と、動画の連続数mvfと、テレシネシーケンスの位相カウント値seqとが入力される。シーケンス判定回数検出手段151は、入力映像信号におけるシーケンス条件を比較的長いフィールドにわたって監視し、テレシネシーケンスと判定される回数をカウントする。シーケンス判定回数検出手段151は、テレシネシーケンス条件が検出される場合は所定の値を加算し、一方、5フィールドごとでテレシネシーケンス条件が検出されず、テレシネシーケンスと判定されない場合は、カウント値から所定の値を減算する。
First, the still image detection result stl 1 output from the
シーケンス判定回数検出手段151内の静止画連続検出手段41には、静止画検出結果stl1と、テレシネシーケンスの位相カウント値seqとが入力される。静止画連続検出手段41は、2−3プルダウン位相に同期したシーケンス位相カウント値seqの1周期ごとに、静止画検出結果stl1が‘1’(静止画)となるフィールドをカウントし、シーケンス位相カウント値seqで示される5フィールドのすべてが静止画フィールドである場合を検出する。静止画の5フィールド連続検出結果は、出現頻度カウンタ40へ出力される。
The still image continuous detection means 41 in the sequence determination number detection means 151 receives the still image detection result stl 1 and the telecine sequence phase count value seq. The still image continuous detection means 41 counts the field in which the still image detection result stl 1 becomes “1” (still image) for each cycle of the sequence phase count value seq synchronized with the 2-3 pull-down phase, and the sequence phase A case is detected where all of the five fields indicated by the count value seq are still picture fields. The five-field continuous detection result of the still image is output to the
出現頻度カウンタ40には、シーケンス検出手段14からのテレシネシーケンスの検出条件となるフィールドの静止画検出結果stl1と、前フィールドまでの動画連続数mvfと、テレシネシーケンスの位相カウント値seqとが入力され、また、静止画連続検出手段41による静止画の5フィールド連続検出結果と、カウント値調整手段42、最大値設定手段43、及びカウント値初期化手段44のそれぞれにおいて設定された設定値とが入力される。
The
出現頻度カウンタ40は、静止画検出結果stl1、動画連続数mvf、テレシネシーケンス位相カウント値seq、及び静止画連続検出手段41による静止画の5フィールド連続検出結果とに基づいて、所定値Adを加算又は所定値Suを減算するアップダウンカウンタである。出現頻度カウンタ40は、入力映像信号におけるシーケンス条件を比較的長い時間(フィールド)にわたって監視し、テレシネシーケンスと判定される回数をカウントする。出現頻度カウンタ40は、入力映像信号をテレシネシーケンスと判定する場合、すなわち、静止画検出結果stl1が‘1’(静止画)であり、かつ、前フィールドまでの動画連続数mvfが‘4’のときは、カウント値tcに所定値Adを加算する(すなわち、tc←tc+Ad)。出現頻度カウンタ40は、5フィールド目の位相(すなわち、テレシネシーケンス位相カウント値seqが‘0’であり、5フィールドに一度の静止画の位置)であっても、静止画検出結果stl1が‘1’(静止画)であり、かつ、前フィールドまでの動画連続数mvfが‘4’となるシーケンス条件が検出されない場合、すなわち、テレシネシーケンスと判定されない場合は、カウント値tcから所定値Suを減算する(すなわち、tc←tc−Su)。但し、静止画連続検出手段41からの静止画の5フィールド連続検出結果により、5フィールド連続して静止画が検出されているときは、静止画検出結果stl1が‘1’(静止画)であり、かつ、動画連続数mvfが‘4’となるシーケンス条件が検出されなくても、カウント値tcの加減算を行わない(すなわち、tc←tc±0)。これは、静止画連続時は、静止画が連続するテレシネ映像信号である場合もあり、テレシネシーケンスか否かどちらにも判定できないためである。
The
また、上記では、カウント値tcから所定値Suを減算する場合(テレシネシーケンスと判定しない場合)は、5フィールドに一度の静止画の位置であっても、シーケンス条件が検出されない場合と説明したが、5フィールドに一度の静止画の位置において、静止画検出結果stl1=0(動画)となる場合のみをテレシネシーケンスと判定しないようにすることもできる。この時は、テレシネシーケンス位相カウント値seqが‘0’であるにもかかわらず、静止画検出結果stl1=0(動画)となる場合にカウント値tcから所定値Suを減算する。 In the above description, when the predetermined value Su is subtracted from the count value tc (when the telecine sequence is not determined), the sequence condition is not detected even if the position of the still image is once in 5 fields. It is also possible not to determine a telecine sequence only when the still image detection result stl 1 = 0 (moving image) at the position of a still image once in five fields. At this time, even if the telecine sequence phase count value seq is “0”, the predetermined value Su is subtracted from the count value tc when the still image detection result stl 1 = 0 (moving image).
これは、5フィールドに一度の静止画の位置において、静止画検出結果stl1=1(静止画)であるときは、上記のシーケンス条件のひとつである動画連続数mvf=‘4’でなくてもテレシネシーケンス中である場合(テレシネシーケンス中の静止画から動画への切り換えなど)が考えられ、テレシネシーケンスであるか否かどちらにも判定できない場合が存在するためである。5フィールドに一度の静止画の位置において、静止画検出結果stl1=0(動画)となる場合のみをテレシネシーケンスと判定しないようにすることで、上記の条件の減算の対象からはずし、カウント値tcの加減算を行わないようにすることもできる。 This is because, when the still image detection result stl 1 = 1 (still image) at the position of a still image once in 5 fields, the moving image continuous number mvf = “4”, which is one of the above sequence conditions, This is because there is a case where the telecine sequence is in progress (eg, switching from a still image to a moving image in the telecine sequence), and there is a case where it cannot be determined whether or not the telecine sequence is present. Only when the still image detection result stl 1 = 0 (moving image) at the position of the still image once in 5 fields is determined not to be a telecine sequence, it is removed from the subtraction target of the above condition, and the count value It is also possible not to add or subtract tc.
カウント値調整手段42は、出現頻度カウンタ40におけるカウントにおける加算値Adと減算値Suのバランス比を調整するもので、例えば、加算値Adを‘1’とした際の減算値Suに相当する値を出現頻度カウンタ40へと出力する。テレシネシーケンスと判定する場合の加算値Adに対し、テレシネシーケンスと判定されない場合の減算値Suを大きくすることで、テレシネシーケンスの判定回数のカウントにおける上下の変動幅が調整される。すなわち、このカウント値調整手段42で設定する加算値Adと減算値Suのバランス比により、テレシネシーケンスと判定される度合いを調整することができる。出現頻度カウンタ40におけるカウントにおける加算値及び減算値は、カウント値調整手段42からの値に基づき設定される。
The count value adjusting means 42 adjusts the balance ratio between the addition value Ad and the subtraction value Su in the count in the
最大値設定手段43は、出現頻度カウンタ40におけるカウントの最大値TMAXを設定する。出現頻度カウンタ40におけるカウントは、最大値設定手段43により設定される最大値TMAXまでカウントを行うことができる。
The maximum value setting means 43 sets the maximum count value TMAX in the
カウント値初期化手段44は、出現頻度カウンタ40におけるカウントの初期化を行うため、初期化イネーブル信号と初期化値INTCNTを設定し、出現頻度カウンタ40へ出力する。これにより、出現頻度のカウントを初期化値INTCNTへ設定でき、出現頻度カウンタ40におけるカウント値は、初期化イネーブル信号が入力された場合に、初期化値INTCNTにセットされる。カウント値初期化手段44による設定で、途中に映像信号の切換等があった場合に、出現頻度カウンタ40におけるカウントを初期化し、カウントを再スタートすることが可能になる。
The count value initialization means 44 sets an initialization enable signal and an initialization value INTCNT and outputs them to the
出現頻度カウンタ40におけるシーケンス判定回数であるカウント値(出現頻度カウント値)tcは、確からしさ判定手段152における予測フラグ生成手段45へと送られる。
A count value (appearance frequency count value) tc that is the number of sequence determinations in the
次に、確からしさ判定手段152は、シーケンス判定回数検出手段151からの出現頻度カウント値tcを受け取り、テレシネ映像信号であることの確からしさを判定し、確からしいと判定されるか否かを示す予測制御フラグtciflgを出力する。確からしさ判定手段152は、予測制御フラグ生成手段45と、有効カウント値設定手段46とを有する。
Next, the
有効カウント値設定手段46は、シーケンス判定回数検出手段151における出現頻度カウンタ40から出力される出現頻度カウント値tcに対し、テレシネ映像信号であると判定するまでの出現頻度(テレシネシーケンス判定回数)を設定し、テレシネ映像信号であることの確からしさを判定するための有効カウント値TH2として出力する。この有効カウント値TH2により、テレシネ映像信号と判定するまでの時間を調整することになる。
The effective count
予測制御フラグ生成手段45には、出現頻度カウンタ40から出力される出現頻度カウント値tcと、有効カウント値設定手段46により設定された有効カウント値TH2が入力される。予測制御フラグ生成手段45は、出現頻度カウンタ40からの出現頻度カウント値tcと有効カウント値TH2の比較により、テレシネ映像信号であることの確からしさを判定する。すなわち、出現頻度カウント値tcと有効カウント値TH2を比較し、出現頻度カウント値tcが有効カウント値TH2以上になったとき、テレシネ映像信号であると判定し、予測制御フラグtciflgを‘1’とする。出現頻度カウント値tcが有効カウント値TH2より小さい場合は、テレシネ映像信号らしくないと判定し、予測制御フラグtciflgは生成せず、予測制御フラグtciflgを‘0’とする。そして、予測制御フラグ生成手段45からの出力である予測制御フラグtciflgは、予測制御手段16へと出力される。
The predictive control
次に、テレシネ検出手段6における予測制御手段16には、シーケンス検出手段14からの出力であるテレシネシーケンス検出信号tci0と、出現頻度検出手段15から出力される予測制御フラグtciflgとが入力される。予測制御手段16は、出現頻度検出手段15において判定されたテレシネ映像信号であることの確からしさを示す予測制御フラグtciflgに基づき、シーケンス検出手段14におけるテレシネシーケンスの検出結果を制御し、テレシネ映像信号の検出を示すテレシネ検出信号tciを出力する。図6は、予測制御手段16の一構成例を示すブロック図である。予測制御手段16は、シーケンス検出手段14におけるテレシネシーケンス検出結果tci0を制御する切換手段50を有する。
Next, the prediction control means 16 in the telecine detection means 6 receives the telecine sequence detection signal tci 0 that is output from the sequence detection means 14 and the prediction control flag tciflg output from the appearance frequency detection means 15. . The prediction control means 16 controls the detection result of the telecine sequence in the sequence detection means 14 based on the prediction control flag tciflg indicating the certainty of being a telecine video signal determined by the appearance frequency detection means 15, and the telecine video signal Telecine detection signal tci indicating the detection of. FIG. 6 is a block diagram illustrating a configuration example of the
予測制御手段16内の切換手段50には、シーケンス検出手段14からの出力であるテレシネシーケンス検出信号tci0と、出現頻度検出手段15から出力される予測制御フラグtciflgとが入力され、出現頻度検出手段15からの予測制御フラグtciflgに基づき、シーケンス検出手段14からのテレシネシーケンス検出信号tci0と固定信号を切り換える。切換手段50は、予測制御フラグtciflgが‘1’として入力される場合は、テレシネ映像信号であると判定し、シーケンス検出手段14によるテレシネシーケンス検出信号tci0を選択し、テレシネ映像信号の検出を示すテレシネ検出信号tciとして出力する。一方、切換手段50は、予測制御フラグtciflgが‘0’の場合は、テレシネ映像信号らしくないと判定された場合又はテレシネ映像信号らしいと判定されるまでのフィールド期間(出現頻度カウント値tcが有効カウント値TH2以上となるまでの時間)であり、シーケンス検出手段14によるテレシネシーケンス検出信号tci0は選択せず、固定信号tci(値‘0’)を選択する。このとき、テレシネシーケンス検出信号tci0が一時的に通常のテレシネシーケンスの条件を満たしテレシネシーケンス検出信号tci0が‘1’であっても、テレシネ処理が起動はされないこととなる。
The switching means 50 in the prediction control means 16 receives the telecine sequence detection signal tci 0 as an output from the sequence detection means 14 and the prediction control flag tciflg output from the appearance frequency detection means 15 to detect the appearance frequency. Based on the prediction control flag tciflg from the
そして、予測制御手段16により制御されたテレシネ映像信号の検出を示すテレシネ検出信号tciは、補間信号生成手段110内の選択手段8へ制御信号として送られる。予測制御手段16により、テレシネ映像信号らしくないと判定された場合は、テレシネ検出信号tciが‘0’であるので、図1における選択手段8においては、通常の映像信号であるとして動き適応補間処理手段5からの補間信号Imが選択される。テレシネ映像信号であると判定された場合には、シーケンス検出手段14によるシーケンス検出の結果により、テレシネ処理が起動される。
The telecine detection signal tci indicating the detection of the telecine video signal controlled by the prediction control means 16 is sent as a control signal to the selection means 8 in the interpolation signal generation means 110. If the prediction control means 16 determines that the telecine video signal does not appear, the telecine detection signal tci is “0”. Therefore, the selection means 8 in FIG. The interpolation signal Im from the
次に、テレシネ検出手段6内のシーケンス検出手段14において、5フィールドのテレシネシーケンスの繰り返し条件を検出して、テレシネシーケンス検出信号tci0を生成、解除する動作について具体的に説明する。図7は、テレシネ検出手段6内のシーケンス検出手段14において、第1の静止画検出手段21aによる静止画フィールドの検出、テレシネシーケンス位相カウンタ23及びテレシネ起動カウンタ24で実行されるテレシネシーケンスの繰り返し回数のカウントまでの処理を説明するフローチャートである。なお、上述したように、テレシネ検出はフィールド毎に行われ、図7に示す処理は、1フィールド単位で実行される。
Next, a specific description will be given of the operation of detecting and repeating the telecine sequence detection signal tci 0 by detecting the repetition condition of the telecine sequence of 5 fields in the sequence detection means 14 in the telecine detection means 6. FIG. 7 shows the number of repetitions of the telecine sequence executed by the first still image detection means 21a in the sequence detection means 14 in the telecine detection means 6 and the telecine
まず、編集点等がなく、2−3プルダウンの位相が規則正しく送られたテレシネ映像信号が入力端子100から入力されたときの、テレシネ検出手段6におけるシーケンス検出手段14の動作について説明する。
First, the operation of the sequence detecting means 14 in the
図8(a)乃至(c)は2−3プルダウン方式のテレシネ変換を示す図であり、同図(a)は24コマ/秒のフィルム映像、同図(b)は2−3プルダウン方式でテレシネ変換されたテレシネ映像信号、同図(c)はフィールド番号を示す。図8(a)乃至(c)に示されるように、映画フィルム等の信号の第1フレームAが映像信号の第1及び第2フィールドAt,Abに対応し、映画フィルム等の信号の第2フレームBが映像信号の第3乃至第5フィールドBt,Bb,Btに対応し、映画フィルム等の信号の第3フレームCが映像信号の第6及び第7フィールドCb,Ctに対応し、映画フィルム等の信号の第4フレームDが映像信号の第8乃至第10フィールドのDb,Dt,Dbに対応するよう変換される。なお、符号At,Btの添字tは、相対的に上ラインのフィールドとなるトップフィールドを表し、符号Ab,Bbの添字bは、下ラインのフィールドとなるボトムフィールドを表す。 FIGS. 8A to 8C are diagrams showing a 2-3 pulldown telecine conversion. FIG. 8A is a film image of 24 frames / second, and FIG. 8B is a 2-3 pulldown method. The telecine-converted telecine video signal, (c) in the figure shows field numbers. As shown in FIGS. 8A to 8C, the first frame A of the signal of the movie film or the like corresponds to the first and second fields At and Ab of the video signal, and the second of the signal of the movie film or the like. The frame B corresponds to the third to fifth fields Bt, Bb, Bt of the video signal, and the third frame C of the signal of the movie film or the like corresponds to the sixth and seventh fields Cb, Ct of the video signal. Are converted so as to correspond to Db, Dt, Db of the eighth to tenth fields of the video signal. The subscript t of the symbols At and Bt represents a top field that is a relatively upper line field, and the subscript b of the symbols Ab and Bb represents a bottom field that is a lower line field.
図8(a)乃至(c)に示されるように、第3フィールドBtと第5フィールドBtとは同一内容のフィールドであり、第8フィールドDbと第10フィールドDbとは同一内容のフィールドである。このように2−3プルダウン方式でテレシネ変換されたテレシネ映像信号においては、5フィールドに1回、2フィールド前と同一のフィールドを繰り返す。したがって、相関検出手段120内の差分検出手段11において得られる1フレーム間差分情報は、第5フィールドにおける検出及び第10フィールドにおける検出時に、ゼロ又は所定の閾値以下(ゼロに近いノイズ分を考慮した値)となる。この1フレーム差分情報の関係は、5フィールドごとに1回繰り返し発生する。
As shown in FIGS. 8A to 8C, the third field Bt and the fifth field Bt are fields having the same contents, and the eighth field Db and the tenth field Db are fields having the same contents. . Thus, in the telecine video signal telecine-converted by the 2-3 pull-down method, the same field as the previous two fields is repeated once every five fields. Accordingly, the inter-frame difference information obtained by the
図9(a)乃至(d)はテレシネ映像信号を検出してIP変換する場合のテレシネ補間と補間位相フラグtcfの関係を説明するための図であり、同図(a)はフィールド番号、同図(b)はテレシネ映像信号であるインターレース映像信号、同図(c)は補間位相、同図(d)はプログレッシブ映像信号を示す。補間走査線信号の生成処理は、1フィールド遅延信号に対して行われる。対象となるテレシネ映像信号フィールドに対し、第1フィールドは時間的に後フィールド(すなわち、現フィールド信号。図9(c)においては補間位相「後」と示す。)である第2フィールドが補間位相に対応し、第2フィールドは、時間的に前フィールド(すなわち、2フィールド遅延信号。図9(c)においては補間位相「前」と示す。)である第1フィールドが、第3フィールドは時間的に後フィールドである第4フィールドが、第4、第5フィールドは時間的に前フィールドである第3、第4フィールドがそれぞれ補間位相に対応するように、繰り返される。そして、補間位相に応じてテレシネ補間を行うことで、元のフレーム(図8(a)のAフレーム、Bフレーム、…に対応)へ復元されたプログレッシブ映像信号となり、出力される。 FIGS. 9A to 9D are diagrams for explaining the relationship between the telecine interpolation and the interpolation phase flag tcf when the telecine video signal is detected and IP converted. FIG. 9A shows the field number, FIG. 4B shows an interlaced video signal which is a telecine video signal, FIG. 4C shows an interpolation phase, and FIG. 4D shows a progressive video signal. The interpolation scanning line signal generation process is performed on the one-field delay signal. With respect to the target telecine video signal field, the first field is a temporally subsequent field (that is, the current field signal. In FIG. 9C, the second field is the interpolation phase “after”). , The second field is the previous field in time (that is, the two-field delay signal. In FIG. 9C, the interpolation phase is indicated as “before”), and the third field is the time. The fourth field, which is a subsequent field, is repeated, and the fourth and fifth fields are repeated so that the third and fourth fields, which are temporally previous fields, respectively correspond to the interpolation phase. Then, by performing telecine interpolation according to the interpolation phase, a progressive video signal restored to the original frame (corresponding to the A frame, B frame,... In FIG. 8A) is obtained and output.
図10(a)乃至(g)は実施の形態1による映像信号処理装置におけるテレシネ検出手段6内のシーケンス検出手段14の動作を説明するための図であり、同図(a)はフィールド番号、同図(b)はテレシネ映像信号であるインターレース映像信号、同図(c)はシーケンス検出手段14内の第1の静止画検出手段21aの出力stl1、同図(d)はシーケンス検出手段14内の動画フィールドカウンタ22の出力mvf、同図(e)はシーケンス検出手段14内のテレシネシーケンス位相カウンタ23の出力seq、同図(f)はシーケンス検出手段14内のテレシネ起動カウンタ24の出力oncnt、同図(g)はシーケンス検出手段14内のシーケンス検出信号生成手段36の出力tci0を示す。以下、テレシネシーケンス検出動作を、図7と図10(a)乃至(g)を用いて説明する。
FIGS. 10A to 10G are diagrams for explaining the operation of the sequence detection means 14 in the telecine detection means 6 in the video signal processing apparatus according to the first embodiment, in which FIG. (B) is an interlaced video signal which is a telecine video signal, (c) is the output stl 1 of the first still image detection means 21a in the sequence detection means 14, and (d) is the sequence detection means 14. (M) is the output seq of the telecine sequence phase counter 23 in the
テレシネ検出手段6内の差分検出手段11は、現フィールド信号Iaと2フィールド遅延信号Ic間における1フレーム間差分情報を検出し、比較手段12でこの1フレーム間差分情報を2値化し、所定エリア内累積カウンタ13において、所定のエリア内の動画素となる画素の数を累積することで、フィールド内の動画素数を得る。図7においては、シーケンス検出手段14へ1フィールド期間単位の動画素累積値cntが入力され(ステップS101)、第1の静止画検出手段21aで動画素累積値cntを所定の閾値STL_TH1と比較する(ステップS102)。動画素累積値cntが所定の閾値STL_TH1より小さい場合は、そのフィールドについての静止画検出結果stl1を‘1’として、静止画フィールドを検出する(ステップS103)。それ以外の場合は、そのフィールドについての静止画検出結果stl1を‘0’として、動画フィールドを検出する(ステップS104)。
The difference detection means 11 in the telecine detection means 6 detects the inter-frame difference information between the current field signal Ia and the two-field delay signal Ic, and the comparison means 12 binarizes the inter-frame difference information, and a predetermined area. In the
ここで、1フィールド期間単位の動画素累積値cntはフィールド内の動画素を累積した値であるので、入力した現フィールド信号Iaと2フィールド遅延信号Ic間における差分に基づく静止画検出結果は、次のフィールド(1フィールド遅延信号Ib)にタイミングを合わせて出力される。よって、静止画検出結果stl1は、図10(c)に示されるように、入力信号の次フィールドにタイミングを合わせて出力され、第5フィールド及び第10フィールドの後のフィールド位置(第6及び第11フィールド)で、静止画検出結果stl1が‘1’(静止画、図中“S”)となり、5フィールドに一度完全静止画フィールドが検出される。 Here, since the accumulated moving pixel value cnt in one field period is a value obtained by accumulating moving pixels in the field, the still image detection result based on the difference between the input current field signal Ia and the two-field delayed signal Ic is: The next field (one-field delay signal Ib) is output in time. Therefore, as shown in FIG. 10C, the still image detection result stl 1 is output in time with the next field of the input signal, and the field positions after the fifth field and the tenth field (the sixth and sixth fields). In the eleventh field), the still image detection result st1 1 becomes “1” (still image, “S” in the figure), and the complete still image field is detected once in five fields.
次に、動画フィールドカウンタ22において、静止画検出結果stl1が‘1’の場合(ステップS105)には動画連続数mvfをゼロへリセットし(ステップS106)、静止画検出結果stl1が‘0’の場合(ステップS105)には1カウント(ステップS107)して、次フィールドにタイミングを合わせ、カウントした動画フィールドの連続数mvfを得る(図10(d))。テレシネシーケンス位相カウンタ23においては、静止画検出結果stl1と前フィールドまでの動画連続数mvfにより、フィールド毎で5フィールド周期となる‘0’から‘4’までを繰り返しカウントする(ステップS108、S110)。但し、静止画検出結果stl1が‘1’であり、かつ、前フィールドまでの動画連続数mvfが‘4’であるとき、シーケンス位相カウント値seqを‘0’にする(ステップS109)。
Next, in the moving
図10(e)はシーケンス位相カウント値seqを示し、静止画検出結果stl1が‘1’であり、かつ、前フィールドまでの動画連続数mvfが‘4’であるときのフィールドで、シーケンス位相カウント値seqが‘0’となっている。図10(e)に示されるように、シーケンス位相カウント値seqは、5フィールド単位で繰り返されており、補間対象フィールドが1フィールド遅延信号であることから、シーケンス位相カウント値seqは‘0’となるフィールドが、テレシネ映像信号の5フィールドに一度2フィールド前と同一のフィールドを繰り返したフィールドの位置となる。 FIG. 10E shows the sequence phase count value seq, the field when the still image detection result stl 1 is “1” and the moving image continuous number mvf up to the previous field is “4”, and the sequence phase The count value seq is “0”. As shown in FIG. 10E, the sequence phase count value seq is repeated in units of 5 fields, and since the interpolation target field is a 1-field delayed signal, the sequence phase count value seq is “0”. Is the position of the field in which the same field as the previous two fields is repeated once in five fields of the telecine video signal.
図11(a)乃至(e)は実施の形態1による映像信号処理装置において、2−3プルダウンのテレシネ補間時に対し、シーケンス位相カウント値seqと補間位相フラグ生成手段35で生成される補間位相フラグtcfの関係を説明するための図であり、同図(a)はフィールド番号、同図(b)はテレシネシーケンス位相カウンタ23の出力、同図(c)は補間位相フラグtcf、同図(d)は1フィールド遅延信号Ib、同図(e)は補間後のプログレッシブ映像信号Progを示す。テレシネシーケンス位相カウント値seqが‘1’又は‘3’の場合、入力された現フィールド信号と1フィールド遅延信号とが同一フレームからのフィールドとなり、テレシネシーケンス位相カウント値seqが‘0’又は‘2’の場合は、2フィールド遅延信号と1フィールド遅延信号とが同一フレームからのフィールドシーケンスとなる。テレシネシーケンス位相カウント値seqが‘4’の場合は、入力された現フィールド信号と2フィールド遅延信号が同一内容のフィールドである。よって、補間位相フラグ生成手段35は、シーケンス位相カウント値seqに応じて、補間位相フラグtcfを決定する。例えば、シーケンス位相カウント値seqが‘1’又は‘3’の場合は、入力された現フィールド信号(後フィールド)からテレシネ補間をするよう、補間位相フラグtcfを‘0’とし、シーケンス位相カウント値seqが‘0’又は‘2’の場合は2フィールド遅延信号(前フィールド)からテレシネ補間をするよう、補間位相フラグtcfを‘1’とする。なお、シーケンス位相カウント値seqが‘4’である場合には、現フィールド又は2フィールド遅延信号からテレシネ補間をできるが、1フレーム前のフィールドとの差分に基づきテレシネシーケンスを検出することを考慮し、2フィールド遅延信号(前フィールド)からテレシネ補間をする。
FIGS. 11A to 11E show the sequence phase count value seq and the interpolation phase flag generated by the interpolation phase flag generation means 35 in the video signal processing apparatus according to the first embodiment at the time of 2-3 pull-down telecine interpolation. It is a figure for demonstrating the relationship of tcf, the figure (a) is a field number, the figure (b) is the output of the telecine
図7において、テレシネ起動カウンタ24は、解除信号生成手段34より、解除信号rstとして値‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をリセット(oncnt=0)する(ステップS111、S113)。テレシネ映像信号の入力の際は、解除信号rstが‘0’であり(ステップS111)、静止画検出結果stl1と前フィールドまでの動画連続数mvfに基づき、テレシネシーケンスの条件を検出する(ステップS112)。静止画検出結果stl1が‘1’(静止画)であり、かつ、動画連続数mvfが‘4’のフィールドとき、テレシネシーケンスの繰り返し回数をカウントする(ステップS114)。
In FIG. 7, when the value “1” is input as the cancellation signal rst from the cancellation
図10(f)は、テレシネ起動カウンタ24におけるカウント値oncntを示す。静止画検出結果stl1が‘1’(静止画)であり、かつ、動画連続数mvfが‘4’であるフィールドのとき、カウント値oncntに‘1’を加算して(すなわち、oncnt←oncnt+1)、テレシネシーケンスの繰り返し回数をカウントしている。シーケンス検出信号生成手段36においては、テレシネシーケンスカウント値oncntと起動カウント値TH1を比較し、テレシネシーケンスカウント値oncntが起動カウント値TH1以上になり、TH1回連続してシーケンスが検出されると、シーケンス検出結果を示すテレシネシーケンス検出信号tci0を‘1’とする。図10(g)のテレシネシーケンス検出信号tci0は、シーケンスのカウントが、例えば、2回以上で入力映像信号がテレシネ映像信号であると検出する場合(TH1=2の場合)を示している。したがって、5フィールドのテレシネシーケンスが2回以上連続して検出され、テレシネシーケンス検出信号tci0が‘1’になると、入力映像信号がテレシネ映像信号のシーケンス条件を満たしているとして、テレシネシーケンス検出信号tci0として‘1’が予測制御手段16へと出力される。
FIG. 10 (f) shows the count value onnt in the
シーケンス検出手段14からのテレシネシーケンス検出信号tci0は、出現頻度検出手段15からの予測制御フラグtciflgとして‘1’が入力され、テレシネ映像信号であると判定されている場合に、予測制御手段16における切換手段50において、テレシネ映像信号の検出を示すテレシネ検出信号tciとして出力される。予測制御手段16において選択されたテレシネ検出信号tciは、選択手段8へ制御信号として送られ、テレシネ検出信号tciが‘0’(この場合、tci0=0)のときは、図1における選択手段8においては、動き適応補間処理手段5からの信号を選択し、テレシネ検出信号tciが‘1’(この場合、tci0=1)のときは、テレシネ処理が起動され、テレシネ補間処理手段7からの信号を選択する。
The telecine sequence detection signal tci 0 from the
なお、テレシネ映像信号から、通常のテレビジョン放送等の映像信号へ切り換わった場合には、差分検出手段11で検出される1フレーム間差分情報は大きな値となり、第1の静止画検出手段21aから出力される静止画検出結果stl1は、‘0’(動画)が連続することになる。よって、5フィールド連続してstl1が‘0’となった時点で、動画連続検出手段25から動画5フィールド連続の検出結果が解除信号生成手段34へと出力され、解除信号生成手段34からは、解除信号rstとして値‘1’がテレシネ起動カウンタ24へと送られる。そして、解除信号rstとして‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をリセット(oncnt=0)することになり(図7のステップS111、S113)、シーケンス検出信号生成手段36において、テレシネシーケンス検出信号tci0が‘0’となる。
When the telecine video signal is switched to a video signal for normal television broadcast or the like, the difference information between the frames detected by the
また、テレシネ映像信号から、静止画フィールドが連続する映像信号へ切り換わった場合においては、差分検出手段11で検出される1フレーム間差分情報は小さな値となり、第2の静止画検出手段21bから出力される静止画検出結果stl2は‘1’(静止画)が連続することになる。よって、静止画連続検出手段27で静止画フィールドが5フィールド連続してカウントされると、比較手段28において静止画が5フィールド連続したことを検出し、検出結果が解除信号生成手段34へ出力される。解除信号生成手段34からは、値が‘1’の解除信号rstがテレシネ起動カウンタ24へと送られ、解除信号rstとして‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をリセット(oncnt=0)することになり(図7のステップS111、S113)、シーケンス検出信号生成手段36において、テレシネシーケンス検出信号tci0が‘0’となる。
When the telecine video signal is switched to a video signal having a continuous still image field, the interframe difference information detected by the
図12(a)乃至(k)は実施の形態1による映像信号処理装置において、テレシネ映像信号の途中に、放送のための編集、CMやテロップの挿入等により、フィールドシーケンスが変更し、シーケンスの規則性が乱れたテレシネ映像信号が入力端子100から入力されたときの、テレシネ検出手段6の動作について説明するための図であり、同図(a)はフィールド番号、同図(b)は入力映像信号Ia、同図(c)は第1の静止画検出手段21aの出力stl1、同図(d)は動画フィールドカウンタ22の出力mvf、同図(e)はテレシネシーケンス位相カウンタ23の出力seq、(f)は補間位相フラグtcf、同図(g)は第3の静止画検出手段21cの出力stl3、同図(h)はシーケンス内静止画カウンタ30の出力、同図(i)はシーケンスずれ検出手段内の比較手段31の出力dbe、同図(j)はテレシネ起動カウンタ24の出力oncnt、同図(k)はシーケンス検出手段14から出力されるテレシネシーケンス検出信号tci0を示す。
12 (a) to 12 (k) show the video signal processing apparatus according to
図12(b)は、テレシネ映像信号の途中の第6フィールドに編集点が存在し、第6フィールドXbでシーケンスの規則性が乱れた場合を示している。図12(b)においては、第3フィールドBtと第5フィールドBtとが同一内容のフィールドであり、第6フィールドXbと第8フィールドXbとが同一内容のフィールドの例である。 FIG. 12B shows a case where an edit point exists in the sixth field in the middle of the telecine video signal, and the regularity of the sequence is disturbed in the sixth field Xb. In FIG. 12B, the third field Bt and the fifth field Bt are fields having the same contents, and the sixth field Xb and the eighth field Xb are examples of fields having the same contents.
図12(c)乃至(k)は、図12(b)で示したようなテレシネ映像信号が入力された場合のテレシネ検出手段6内のシーケンス検出手段14におけるテレシネシーケンス検出動作を説明するための図である。所定エリア内累積カウンタ13からの動画素累積値cnt入力と図12(c)乃至(f)で示す第1の静止画検出手段21aにおける静止画フィールドの検出からテレシネシーケンス位相カウンタ23、補間位相フラグ生成手段35における基本的な動作は、上述したテレシネ映像信号の検出時と同様である。
12C to 12K are diagrams for explaining the telecine sequence detection operation in the sequence detection means 14 in the telecine detection means 6 when the telecine video signal as shown in FIG. 12B is input. FIG. Telecine
シーケンス検出手段14へ入力された1フィールド期間単位の動画素累積値cntは、第3の静止画検出手段21cへも送られており、動画素累積値cntを所定の閾値STL_TH3と比較する。動画素累積値cntが所定の閾値STL_TH3より小さい場合は、そのフィールドについての静止画検出結果stl3を‘1’(静止画)とし、それ以外の場合は、検出結果stl3を‘0’(動画)とする。この動作は、上記第1の静止画検出手段21aの動作と同様である。静止画検出結果stl3は、図12(g)に示されるように、入力信号に対し次フィールドにタイミングを合わせて出力され、第5フィールド及び第8フィールドの後のフィールド位置(第6及び第9フィールド)で、静止画検出結果stl3が‘1’(静止画、図中“S”)となる。
Video element cumulative value cnt of one field period unit input to the sequence detection means 14 is also sent to the third still picture detecting
動画フィールドカウンタ22は、前フィールドまでの動画フィールドの連続数mvfを出力する(図12(d))。テレシネシーケンス位相カウンタ23は、5フィールドごとに‘0’から‘4’までを繰り返しカウントするが、静止画検出結果stl1が‘1’であり、かつ、前フィールドまでの動画連続数mvfが‘4’のフィールドにおいては、シーケンス位相カウント値seqが‘0’となっている。
The moving picture field counter 22 outputs the continuous number mvf of moving picture fields up to the previous field (FIG. 12 (d)). Telecine
第6フィールドで編集点が存在するため、第8フィールドの後(第9フィールド以降)で静止画検出結果stl1が‘1’であるにもかかわらず、動画フィールドの連続数mvfはmvfが‘2’となり、シーケンス位相カウント値seqはゼロへリセットされず、シーケンスの位相ずれが起こることになる。 Since there is an edit point in the sixth field, the continuous number mvf of the moving image field is mvf even though the still image detection result stl 1 is “1” after the eighth field (after the ninth field). 2 ', the sequence phase count value seq is not reset to zero, and a sequence phase shift occurs.
そこで、シーケンスずれ検出手段29は、上記のような2−3プルダウンのシーケンス位相のずれを判別するため、5フィールドごとに一度の静止画フィールドとは異なるフィールドで静止画フィールドが存在することを検出する。
Therefore, the sequence
シーケンスずれ検出手段29内のシーケンス内静止画カウンタ30は、テレシネシーケンス検出信号tci0が‘1’の場合、まず、シーケンス位相カウント値seqが‘0’になるごとにカウンタ値をゼロへリセットする。図12(h)から、テレシネ映像信号のシーケンス位相が規則正しく送られた場合(第6フィールドまで)は、シーケンス位相カウント値seqが‘0’であるフィールドが、動画が4フィールド連続後静止画となるフィールド(即ち、5フィールドごとに一度の静止画フィールド)となり、このフィールドにおいて、シーケンス内静止画カウンタ30のカウント値がゼロへリセットされることになる。そして、次にゼロへリセットされるまでの間(次のフィールドシーケンスの静止画フィールドまで)に、第3の静止画検出手段21cからの静止画検出結果stl3が‘1’(図12(g))となる場合をカウントする。これにより、5フィールドごとに一度の静止画フィールドとは異なるフィールドで静止画となる場合を検出し、その検出したフィールドの数を出力することとなる。図12(h)においては、第9フィールドで静止画検出結果stl3が‘1’となる時、シーケンス内静止画カウンタ30において、静止画がカウントされる。
When the telecine sequence detection signal tci 0 is “1”, the in-sequence still image counter 30 in the sequence
シーケンスずれ検出手段29における比較手段31は、シーケンス内静止画カウンタ30からのカウント値を所定の閾値(例えば、閾値を‘1’とする)と比較し、所定の閾値1以上の場合に、5フィールドのシーケンス途中における静止画の検出結果dbeを‘1’とする(図12(i))。 The comparison means 31 in the sequence deviation detection means 29 compares the count value from the in-sequence still image counter 30 with a predetermined threshold value (for example, the threshold value is “1”). The still image detection result dbe in the middle of the field sequence is set to “1” (FIG. 12I).
そして、シーケンスずれ検出手段29内の比較手段31からの出力dbeは、解除信号生成手段34へ出力される。解除信号生成手段34においては、シーケンスずれ検出手段29の結果を使用する設定の場合、比較手段31からの出力dbeが‘1’のときに解除信号rstを‘1’として、解除信号rstをテレシネ起動カウンタ24へと送る。解除信号rstとして‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をリセット(oncnt=0)することになり(図12(j))、シーケンス検出信号生成手段36において、テレシネシーケンス検出信号tci0が‘0’となる(図12(k))。よって、テレシネ映像信号の途中にシーケンス位相のずれが検出された場合、テレシネシーケンス検出信号tci0が‘0’へ解除される。なお、解除後においても、シーケンス検出手段14においては、上記テレシネ映像信号の検出の動作を行っており、5フィールドのシーケンスが規則正しく入力され、正確に検出されれば、入力映像信号がテレシネ映像信号のシーケンス条件を満たしているとして、再びテレシネシーケンス検出信号tci0が‘1’となり、予測制御手段16へと出力される。
The output dbe from the
出現頻度検出手段15からの予測制御フラグtciflgが‘1’になり、テレシネ映像信号であると判定されている場合、予測制御手段16における切換手段50において、シーケンス検出手段14からのテレシネシーケンス検出信号tci0がテレシネ映像信号の検出を示すテレシネ検出信号tciとして出力される。予測制御手段16において選択されたテレシネ検出信号tciは、選択手段8へ制御信号として送られ、テレシネ検出信号tciが‘0’(このとき、tci0=0)のときは、選択手段8において動き適応補間処理手段5からの信号を選択し、テレシネ検出信号tciが‘1’(この場合、tci0=1)のときは、テレシネ処理が起動され、テレシネ補間処理手段7からの信号を選択する。 When the prediction control flag tciflg from the appearance frequency detection means 15 is “1” and it is determined that the signal is a telecine video signal, the switching means 50 in the prediction control means 16 uses the telecine sequence detection signal from the sequence detection means 14. tci 0 is output as a telecine detection signal tci indicating the detection of the telecine video signal. The telecine detection signal tci selected by the prediction control means 16 is sent to the selection means 8 as a control signal. When the telecine detection signal tci is “0” (at this time tci 0 = 0), the selection means 8 moves. When the signal from the adaptive interpolation processing means 5 is selected and the telecine detection signal tci is “1” (in this case, tci 0 = 1), the telecine processing is started and the signal from the telecine interpolation processing means 7 is selected. .
図13(a)乃至(f)は実施の形態1による映像信号処理装置において、シーケンス位相のずれがある場合に、テレシネ検出信号tci(但し、予測制御フラグtciflgが‘1’でテレシネ映像信号であると判定されている場合)とシーケンス検出手段内のシーケンスずれ検出手段29の結果によるテレシネ補間の動作を説明するための図であり、同図(a)はフィールド番号、同図(b)はテレシネシーケンス位相カウンタ23の出力seq、同図(c)は補間位相フラグtcf、同図(d)はテレシネ検出手段6から出力されるテレシネ検出信号tci、同図(e)は1フィールド遅延信号Ib、同図(f)は補間後のプログレッシブ映像信号Progを示す。テレシネ検出信号tciが‘1’(このとき、tci0=1である。)であるときは、テレシネ処理が行なわれ、テレシネ映像信号の途中に、フィールドシーケンスが変更されてシーケンスの規則性が乱れたことを検出した場合には、テレシネ検出信号tciを‘0’(テレシネシーケンス検出信号tci0=0)として、動き適応補間処理手段5からの信号を選択する。
FIGS. 13A to 13F show the telecine detection signal tci (provided that the prediction control flag tciflg is “1” and the telecine video signal when the sequence phase is shifted in the video signal processing apparatus according to the first embodiment. And (b) is a diagram for explaining the operation of telecine interpolation based on the result of the sequence deviation detection means 29 in the sequence detection means. The output seq of the telecine
したがって、テレシネ映像信号の途中に、フィールドシーケンスが変更されてシーケンスの規則性が乱れたことを検出した場合には、テレシネシーケンス検出信号tci0をゼロとして、テレシネシーケンスの検出されたことを一時的に解除することができ、間違った位相のままテレシネ補間信号を行うことなく、テレシネシーケンスが正確に検出されるまでの間は、動き適応補間処理手段5からの信号を選択する。 Therefore, when it is detected that the field sequence is changed and the regularity of the sequence is disturbed in the middle of the telecine video signal, the telecine sequence detection signal tci 0 is set to zero to temporarily detect that the telecine sequence has been detected. The signal from the motion adaptive interpolation processing means 5 is selected until the telecine sequence is accurately detected without performing the telecine interpolation signal with the wrong phase.
図14(a)乃至(i)は、シーンチェンジ検出手段32の動作を説明するための図であり、同図(a)はフィールド番号、同図(b)は現フィールド信号であるインターレース映像信号Ia、同図(c)は第1の静止画検出手段21aの出力stl1、同図(d)は動画フィールドカウンタ22の出力mvf、同図(e)はテレシネシーケンス位相カウンタ23の出力seq、同図(f)は補間位相フラグtcf、同図(g)はシーンチェンジ検出手段32の出力sch、同図(h)はテレシネ起動カウンタ24の出力oncnt、同図(i)はシーケンス検出手段14から出力されるテレシネシーケンス検出信号tci0を示す。図14(a)乃至(i)は、テレシネ映像信号の途中に、シーンチェンジが起こる映像信号が入力端子100から入力されたときの、テレシネ検出手段6の動作について説明する。
FIGS. 14A to 14I are diagrams for explaining the operation of the scene
図14(b)は、テレシネ映像信号の途中の第6フィールドに編集点が存在し、第6フィールドXbでシーンチェンジが起こる場合を示している。図14(b)は、第3フィールドBtと第5フィールドBtとが同一内容のフィールドである例を示している。 FIG. 14B shows a case where an edit point exists in the sixth field in the middle of the telecine video signal and a scene change occurs in the sixth field Xb. FIG. 14B shows an example in which the third field Bt and the fifth field Bt are fields having the same contents.
図14(c)乃至(i)は、図14(b)で示したようなテレシネ映像信号が入力された場合のシーケンス検出手段14におけるテレシネシーケンス検出動作を示す。所定エリア内累積カウンタ13からの動画素累積値cnt入力と図14(c)乃至(f)で示す第1の静止画検出手段21aにおける静止画フィールドの検出からテレシネシーケンス位相カウンタ23、補間位相フラグ生成手段35における基本的な動作は、上述したテレシネ映像信号の検出時と同様である。
FIGS. 14C to 14I show the telecine sequence detection operation in the sequence detection means 14 when the telecine video signal as shown in FIG. 14B is input. Telecine
シーケンス検出手段14へ入力された1フィールド期間単位の動画素累積値cntは、シーンチェンジ検出手段32へも送られており、動画素累積値cntを閾値STHと比較し、そのフィールドにおけるシーンチェンジを検出する。シーンチェンジにおいては、フィールド内のほとんどの画素が動画素と判定されるため、1フレーム前のフィールドからの差分に基づく動画素累積値cntは、通常のシーケンス内における値と比較して大きく変化する。よって、シーンチェンジ検出手段32は、動画素累積値cntが閾値STHより大きい場合、そのフィールドでシーンチェンジがあったとして、シーンチェンジ検出結果schとして値‘1’を出力する。
The accumulated moving pixel value cnt in one field period input to the
シーンチェンジ検出結果schは、1フレーム前との差分情報に基づく動画素累積値cntと比較するため、図14(g)にあるように、入力信号に対し次フィールドにタイミングを合わせて出力され、第5フィールドの後のフィールド位置(第6フィールド)で、シーンチェンジ検出結果schが‘1’となる。 In order to compare the scene change detection result sch with the moving pixel accumulated value cnt based on the difference information from the previous frame, as shown in FIG. At the field position (sixth field) after the fifth field, the scene change detection result sch becomes “1”.
そして、シーンチェンジ検出手段32からのシーンチェンジ検出結果schは、解除信号生成手段34へ出力される。解除信号生成手段34においては、シーンチェンジ検出手段32における検出結果を使用する設定の場合、シーンチェンジ検出結果schが‘1’のときに解除信号rstを‘1’としてテレシネ起動カウンタ24へと送る。解除信号rstとして‘1’が入力された場合は、入力映像信号がテレシネ映像信号ではないとしてカウント値をリセット(oncnt=0)することになり(図14(h))、シーケンス検出信号生成手段36において、テレシネシーケンス検出信号tci0が‘0’となる(図14(i))。よって、テレシネ映像信号の途中にシーンチェンジが検出された場合、テレシネシーケンス検出信号tci0が‘0’へ解除される。なお、解除後においても、シーケンス検出手段14においては、上記テレシネ映像信号の検出の動作を行っており、5フィールドのシーケンスが規則正しく入力され、正確に検出されれば、入力映像信号がテレシネ映像信号のシーケンス条件を満たしているとして、再びテレシネシーケンス検出信号tci0が‘1’となり、テレシネシーケンス検出信号tci0が‘1’が予測制御手段16へと出力される。
The scene change detection result sch from the scene change detection means 32 is output to the release signal generation means 34. In the cancellation
以下、出現頻度検出手段15及び予測制御手段16における動作は、上記のシーケンス位相のずれがある場合の動作と同様であるが、テレシネ映像信号の途中に、シーンチェンジが検出された場合には、テレシネシーケンス検出信号tci0をゼロとして、テレシネシーケンスの検出されたことを一時的に解除することができる。このように動作する場合には、間違った位相のままテレシネ補間信号を行うことなく、テレシネシーケンスが正確に検出されるまでの間は、選択手段8は、動き適応補間処理手段5からの信号を選択して出力することになる。
Hereinafter, the operation in the appearance
図15(a)乃至(f)は、実施の形態1による映像信号処理装置においてシーンチェンジが検出された場合に、テレシネ検出信号tci(但し、予測制御フラグtciflg=1でテレシネ映像信号であると判定されている場合)とテレシネ補間の関係を説明するための図であり、同図(a)はフィールド番号、同図(b)はテレシネシーケンス位相カウンタの出力seq、同図(c)は補間位相フラグtcf、同図(d)はテレシネ検出手段6から出力されるテレシネ検出信号tci、同図(e)は1フィールド遅延信号(補間フィールドの信号)、(f)は補間後のプログレッシブ信号Progを示す。図15(a)乃至(f)に示されるように、テレシネ検出信号tciが‘1’(このとき、tci0=1である。)のときには(すなわち、フィールド番号が‘6’以前のときには)、テレシネ処理が行なわれ、テレシネ映像信号の途中にシーンチェンジを検出した場合には(すなわち、フィールド番号が‘7’以降のときには)、テレシネ検出信号tciが‘0’(テレシネシーケンス検出信号tci0=0)となり、選択手段8が、動き適応補間処理手段5からの信号を選択する。 FIGS. 15A to 15F show that when a scene change is detected in the video signal processing device according to the first embodiment, the telecine detection signal tci (however, the prediction control flag tciflg = 1 is a telecine video signal). FIG. 4A is a field number, FIG. 2B is an output seq of a telecine sequence phase counter, and FIG. 2C is an interpolation. The phase flag tcf, (d) is a telecine detection signal tci output from the telecine detection means 6, (e) is a one-field delay signal (interpolated field signal), and (f) is a progressive signal Prog after interpolation. Indicates. As shown in FIGS. 15A to 15F, when the telecine detection signal tci is “1” (in this case, tci 0 = 1) (that is, when the field number is before “6”). When the telecine process is performed and a scene change is detected in the middle of the telecine video signal (that is, when the field number is “7” or later), the telecine detection signal tci is “0” (telecine sequence detection signal tci 0. = 0), and the selection means 8 selects the signal from the motion adaptive interpolation processing means 5.
以上より、実施の形態1のシーケンス検出手段14によれば、1フレーム間差分情報から静止画フィールドを検出し、5フィールドのテレシネシーケンスの繰り返し条件を検出すると共に、シーケンスずれ検出手段29で静止画フィールドによる位相ずれを検出し、シーンチェンジ検出手段32においてはシーケンス途中の編集点におけるシーンチェンジを検出して、シーケンス検出信号生成手段36におけるテレシネシーケンス検出信号tci0を一時的に解除(tci0=0)する。よって、テレシネ映像信号中のシーケンス位相のずれや、シーンチェンジによる編集点が存在した場合においても、テレシネ映像信号の検出を安定に行い、IP変換で発生するコーミング現象による画質劣化を低減し、良好なテレシネ映像信号のIP変換を行うことができる。
As described above, according to the
次に、出現頻度検出手段15及び予測制御手段16において実行される動作であって、入力映像信号のシーケンスを監視し、テレシネシーケンスの出現頻度を検出することで、テレシネ映像信号であることの確からしさを判定し、テレシネシーケンス検出信号tci0を制御する動作について具体的に説明する。出現頻度検出手段15は、入力映像信号におけるシーケンス条件を比較的長い時間(フィールド)にわたって監視し、テレシネシーケンスの出現頻度を検出することで、テレシネ映像信号であることの確からしさを判定する。 Next, it is an operation executed in the appearance frequency detection means 15 and the prediction control means 16, and it is confirmed that it is a telecine video signal by monitoring the sequence of the input video signal and detecting the appearance frequency of the telecine sequence. The operation of determining the likelihood and controlling the telecine sequence detection signal tci 0 will be specifically described. The appearance frequency detection means 15 monitors the sequence conditions in the input video signal over a relatively long time (field) and detects the appearance frequency of the telecine sequence, thereby determining the likelihood of being a telecine video signal.
図16は、本発明の実施の形態1による映像信号処理装置における出現頻度検出手段15の動作を説明するためのフローチャートである。図16のフローチャートには、出現頻度検出手段15が、入力映像信号のシーケンス(すなわち、シーケンス検出手段14の出力)を監視し、テレシネシーケンスの出現頻度を検出することによって、入力映像信号がテレシネ映像信号であることの確からしさを判定し、予測制御フラグtciflgを生成するまでの処理が示されている。なお、上述したように、テレシネ検出はフィールド毎に行われ、図16に示す処理は、1フィールド単位で実行される。
FIG. 16 is a flowchart for explaining the operation of the appearance frequency detection means 15 in the video signal processing apparatus according to
まず、図8(b)に示されるような2−3プルダウンテレシネ映像信号が入力された場合の出現頻度検出手段15の動作を、図16のフローチャートに基づいて説明する。 First, the operation of the appearance frequency detection means 15 when a 2-3 pull-down telecine video signal as shown in FIG. 8B is input will be described based on the flowchart of FIG.
図16に示されるように、出現頻度検出手段15内の出現頻度カウンタ40は、静止画検出結果stl1が‘1’(すなわち、静止画)であり、かつ、前フィールドまでの動画連続数mvfが‘4’であるテレシネシーケンスの条件を満たしているか否かを判定する(ステップS201)。テレシネシーケンスの条件を満たしている場合には、出現頻度カウンタの出現頻度カウント値tcに値Adを加算する(すなわち、tc←tc+Adとする)(ステップS203)。次に、予測制御フラグ生成手段45において、出現頻度カウント値tcと有効カウント値TH2を比較し、テレシネ映像信号であることの確からしさを判定する(ステップS208)。出現頻度カウント値tcが有効カウント値TH2以上になったとき、テレシネ映像信号であると判定し、予測制御フラグtciflgを‘1’とする(ステップS210)。なお、テレシネ映像信号らしいと判定されるまでのフィールド期間(すなわち、出現頻度カウント値tcが有効カウント値TH2以上となる以前の期間)は、予測制御フラグtciflgを‘0’とする(ステップS209)。
As shown in FIG. 16, the
図17(a)及び(b)は、出現頻度検出手段15における、テレシネ映像信号入力時の動作を説明するための図であり、同図(a)は出現頻度カウンタ40からの出力値(出現頻度カウント値)tc、同図(b)は予測制御フラグ生成手段45で生成される予測制御フラグtciflgを示す。図17(a)及び(b)において、入力映像信号Iaがテレシネ映像信号である場合は、テレシネシーケンスの条件(静止画検出結果stl1=1、かつ、動画連続数mvf=4)が5フィールド毎に検出されるので、出現頻度カウント値tcは、テレシネシーケンスの条件を満たしているか否かを判定する毎に、値Adが加算される(すなわち、tc←tc+Ad)される(図17(a)及び(b)の期間a及びb)。なお、出現頻度カウント値tcが最大値TMAXに達すると、カウント値tcは最大値TMAXへクリップされるものとする(図17(a)及び(b)の期間b内の値TMAXの期間)。
FIGS. 17A and 17B are diagrams for explaining the operation at the time of telecine video signal input in the appearance frequency detection means 15, and FIG. 17A shows the output value (appearance from the
そして、入力映像信号を比較的長い時間にわたって監視し、予測制御フラグ生成手段45において、出現頻度カウント値tcが有効カウント値TH2以上になった時点で、テレシネ映像信号であると判定し、予測制御フラグtciflgを‘1’とする(図17(a)及び(b)の期間c)。予測制御フラグtciflgが‘1’である間は、予測制御手段16は、シーケンス検出手段14によるテレシネシーケンス検出信号tci0を選択し、テレシネ映像信号の検出を示すテレシネ検出信号tciとして出力し、テレシネ処理の起動が制御される。
The monitored over a relatively long time an input video signal, the predictive control
なお、テレシネ映像信号から、通常のテレビジョン放送等へ映像信号が切り換わった場合(図17(a)の期間dの場合)には、解除信号生成手段34によりシーケンス検出手段14によるテレシネシーケンス検出信号tci0が解除(tci0=0)され、テレシネ検出信号tciも解除(tci=0)となる。さらに、出現頻度検出手段15においても、5フィールド目の位相(すなわち、テレシネシーケンス位相カウント値seqが‘0’である位置であり、5フィールドに一度の静止画の位置)において、テレシネシーケンスの条件が検出されないため(図16のステップS204)、出現頻度カウント値tcから所定値Suを減算する(すなわち、tc←tcーSu)(図16のステップS205,S207)。出現頻度カウント値tcが有効カウント値TH2より小さいくなると、テレシネ映像信号らしくないと判定し、予測制御フラグtciflgは生成せず、tciflgが‘0’となる。よって、予測制御手段16において、予測制御フラグtciflgが‘0’の場合は、テレシネ検出信号tciが‘0’となり、テレシネシーケンス検出信号tci0が一時的に通常のテレシネシーケンスの条件を満たし、テレシネシーケンス検出信号tci0が‘1’であっても、テレシネ処理が起動はされない。
When the video signal is switched from a telecine video signal to a normal television broadcast or the like (in the case of period d in FIG. 17A), the cancellation
次に、テレシネ映像信号を編集しており、図12(a)乃至(k)、図14(a)乃至(i)に示すような編集点が映像信号途中に存在し、テレシネシーケンスの不連続が頻繁に起こる映像信号が入力端子100から入力された場合における、出現頻度検出手段15の動作について説明する。
Next, the telecine video signal is edited, and edit points as shown in FIGS. 12A to 12K and FIGS. 14A to 14I exist in the middle of the video signal, and the telecine sequence is discontinuous. The operation of the appearance frequency detection means 15 when a video signal that frequently occurs is input from the
出現頻度検出手段15内の出現頻度カウンタ40においては、静止画検出結果stl1が‘1’であり(静止画)、かつ、動画連続数mvfが‘4’となるテレシネシーケンスの条件を検出する場合は(図16のステップS201)、出現頻度カウント値tcに値Adを加算(すなわち、tc←tc+Ad)する(図16のステップS203)。一方、テレシネシーケンスの条件が検出されず、5フィールド目の位相、すなわち、テレシネシーケンス位相カウント値seqが‘0’となると(図16のステップS204)、静止画連続検出手段41により、5フィールド連続して静止画が検出されているときは、加減算を行わない(すなわち、tc←tc±0)(図16のステップS205,S206)。これは、静止画連続時は、テレシネシーケンスか否かどちらにも判定できないためである。5フィールド連続して静止画検出でない場合には、テレシネシーケンスと判定されないとして、出現頻度カウント値tcから所定値Suを減算する(すなわち、tc←tc−Su)とする(図16のステップS207)。なお、テレシネシーケンス位相カウント値seqが‘0’で静止画が検出されているとき(静止画検出結果stl1=1)は、加減算を行わないようにすることもできる(図16のステップS205,S206)。このときは、5フィールドに一度の静止画の位置において、静止画検出結果stl1=0(動画)となる(テレシネシーケンス位相カウント値seqが‘0’で静止画検出結果stl1=0である)場合に、テレシネシーケンスと判定せず、出現頻度カウント値tcから所定値Suを減算することになる(ステップS207)。
The
予測制御フラグ生成手段45において、出現頻度カウント値tcと有効カウント値TH2を比較し、テレシネ映像信号であることの確からしさを判定する(図16のステップS208)が、編集点が頻繁にあり、シーケンスの不連続が起こると、テレシネシーケンスの条件が検出されないため、出現頻度カウント値tcが有効カウント値TH2に達することはない。よって、テレシネ映像信号らしくないと判定され、予測制御フラグtciflgは生成されず、tciflgが‘0’のままとなる(図16のステップS209)。
In predictive control
図18(a)及び(b)は、出現頻度検出手段15において、編集点が頻繁に存在するテレシネ映像信号入力時の動作を説明するための図であり、同図(a)は出現頻度カウンタ40からの出力値(出現頻度カウント値)tc、同図(b)は予測制御フラグ生成手段45で生成される予測制御フラグtciflgを示す。図18(a)及び(b)において、テレシネシーケンスの不連続が頻繁に起こる場合は、5フィールド毎にテレシネシーケンスの条件を検出する頻度が少なく、テレシネシーケンスの条件を検出して出現頻度カウント値tcを加算(すなわち、tc←tc+Ad)する頻度よりも、出現頻度カウント値tcを減算(すなわち、tc←tc−Su)する頻度が多くなる。なお、出現頻度カウント値tcが負の値となる場合は、カウント値は0へクリップされるものとする。
FIGS. 18A and 18B are diagrams for explaining the operation at the time of inputting a telecine video signal where edit points frequently exist in the appearance
よって、入力映像信号を比較的長い時間にわたって監視すると、予測制御フラグ生成手段45において、出現頻度カウント値tcが有効カウント値TH2へ達することはなく、テレシネ映像信号らしくない(すなわち、テレシネ映像信号である可能性が低い)と判定し、予測制御フラグtciflgを‘0’にする。予測制御手段16は、予測制御フラグtciflgが‘0’のときは、シーケンス検出手段14によるテレシネシーケンス検出信号tci0を選択せず、選択信号tciとして固定値‘0’を選択して出力する。
Therefore, when the input video signal is monitored over a relatively long time, the occurrence frequency count value tc does not reach the effective count value TH 2 in the predictive control
そして、予測制御手段16により制御されたテレシネ映像信号の検出を示すテレシネ検出信号tciは、選択手段8へ制御信号として送られる。予測制御手段16により、テレシネ映像信号らしくない(すなわち、テレシネ映像信号である可能性が低い)と判定された場合は、テレシネ検出信号tciが‘0’として出力されるので、図1における選択手段8は、テレシネ映像信号ではない通常の映像信号であるとして動き適応補間処理手段5からの信号Imを選択する。 Then, a telecine detection signal tci indicating the detection of the telecine video signal controlled by the prediction control means 16 is sent to the selection means 8 as a control signal. When the prediction control means 16 determines that the video signal is not likely to be a telecine video signal (that is, the possibility of being a telecine video signal is low), the telecine detection signal tci is output as '0', so the selection means in FIG. 8 selects the signal Im from the motion adaptive interpolation processing means 5 as a normal video signal that is not a telecine video signal.
以上説明したように、実施の形態1の映像信号処理装置又は映像信号処理方法によれば、順次入力されるインターレース映像信号Iaが5フィールドのテレシネシーケンスの繰り返し条件を満たすか否かを検出すると共に、テレシネシーケンスの繰り返し条件を満たすフィールドシーケンスの出現頻度を計測し、これらの結果tci0及びtciflgに基づいて映像信号がテレシネ変換されたものであるか否かを示すテレシネ検出信号tciを出力するようにしている。このように、映像信号Iaがテレシネシーケンスの繰り返し条件を満たすか否かの検出結果tci0に加え、比較的長い期間(フィールド)にわたって監視した結果であり、テレシネ変換された映像信号であることの確からしさを示す指標としての意味を持つフィールドシーケンスの出現頻度フラグtciflgに基づいたテレシネ検出信号tciを出力するようにしているので、テレシネ検出信号tciの信頼度が向上している。したがって、実施の形態1の映像信号処理装置又は映像信号処理方法によれば、テレシネ検出信号tciの信頼度の向上によって、テレシネ検出信号tciに基づいて選択される補間走査線信号Im又はItを適切に選択することができる(例えば、編集点が頻繁に存在し、テレシネシーケンスの不連続が頻繁に起こる映像信号テレシネ映像信号らしくないと判定してテレシネ検出信号tciをテレシネ映像信号ではないとする(tci=0)よう制御できるので、例えば、一時的にテレシネシーケンスの条件を満たしても、テレシネ補間をしないように制御することができる。)。このため、テレシネ変換された映像信号の途中でテレシネ変換された映像信号以外の信号が混在する場合等において発生することがあるコーミング現象による画質劣化の発生頻度を低減し、テレシネ変換された映像信号を良好なプログレッシブ映像信号Progに変換することができる。 As described above, according to the video signal processing apparatus or the video signal processing method of the first embodiment, it is detected whether or not the sequentially input interlace video signal Ia satisfies the repetition condition of the 5-field telecine sequence. The frequency of appearance of the field sequence satisfying the telecine sequence repetition condition is measured, and a telecine detection signal tci indicating whether the video signal has been telecine converted based on these results tci 0 and tciflg is output. I have to. As described above, the video signal Ia is a result of monitoring over a relatively long period (field) in addition to the detection result tci 0 of whether or not the repetition condition of the telecine sequence is satisfied. Since the telecine detection signal tci based on the appearance frequency flag tciflg of the field sequence having the meaning as an index indicating the certainty is output, the reliability of the telecine detection signal tci is improved. Therefore, according to the video signal processing apparatus or the video signal processing method of the first embodiment, the interpolation scanning line signal Im or It selected based on the telecine detection signal tci is appropriately selected by improving the reliability of the telecine detection signal tci. (For example, it is determined that the video signal is not a telecine video signal because there are frequent edit points and the discontinuity of the telecine sequence frequently occurs, and the telecine detection signal tci is not a telecine video signal ( tci = 0), for example, even if the telecine sequence condition is temporarily satisfied, it can be controlled not to perform telecine interpolation.) For this reason, the frequency of image quality degradation due to combing phenomenon, which may occur when a signal other than a telecine-converted video signal is mixed in the middle of a telecine-converted video signal, reduces the frequency of image quality degradation due to a combing phenomenon, Can be converted into a good progressive video signal Prog.
なお、上記説明においては、相関検出手段120内の所定エリア内累積カウンタ13が1フィールドの所定エリア内の動画素数を求め、シーケンス検出手段14が動画素数を所定の閾値と比較することによって静止画フィールドの検出及びシーンチェンジの検出を行っている。しかし、本発明は、このような態様に限定されるものではなく、所定エリア内累積カウンタ13が1フィールドの所定エリア内の静止画素の数を求め、シーケンス検出手段14が静止画素の数を所定の閾値と比較することによって静止画フィールドの検出及びシーンチェンジの検出を行うなどのように、1フレーム前のフィールドとの相関の強さを求めることができる他の態様を採用してもよい。
In the above description, the
また、上記説明においては、テレシネ検出手段6内の差分検出手段11により1フレーム間の差分情報を検出する態様を説明したが、本発明は、このような態様に限定されるものではなく、現フィールド信号Iaと2フィールド遅延信号Ic間の差分情報を求めている動き検出手段4における1フレーム差分情報を用いてテレシネ映像信号の検出を行うように構成してもよい。 In the above description, the difference detection means 11 in the telecine detection means 6 detects the difference information between one frame. However, the present invention is not limited to such an aspect. The telecine video signal may be detected using the 1-frame difference information in the motion detection means 4 that obtains the difference information between the field signal Ia and the 2-field delay signal Ic.
さらに、上記説明においては、テレシネ検出手段6内の差分検出手段11が1フレーム間の差分の絶対値を計算し、差分情報として出力する態様を説明した。しかし、本発明は、このような態様に限定されるものではなく、差分の絶対値に所定の値を乗算し、所定値を減算する等の非線形変換を行い、変換した値を1フレーム間差分情報としてもよく、得られた1フレーム差分情報から1フレーム間の相関の強さが検出でき、フィールドが静止画フィールドか、動画フィールドかを検出できる態様であれば他の態様を採用してもよい。
Further, in the above description, a mode has been described in which the
さらにまた、上記説明においては、シーケンス検出手段14内のテレシネシーケンス位相カウンタ23が5フィールドごとに‘0’から‘4’までを繰り返しカウントし、静止画検出結果stl1が‘1’であり(静止画)、かつ、動画連続数mvfが‘4’であるのときにゼロへリセットする態様を説明したが、繰り返しの値とリセット値はこれに限るものではない。本発明は、5フィールドごとで繰り返す信号であり、静止画検出結果stl1が‘1’であり(静止画)、かつ、動画連続数mvfが‘4’である場合、すなわち、5フィールドごとに1回ある静止画フィールドに対して同期し、所定値へリセットされる態様であれば、他の態様にも適用可能である。
Furthermore, in the above description, and repeatedly counts from "0" for each telecine
また、上記説明においては、通常の映像信号に対するIP変換においては動き適応補間処理を行うように説明したが、本発明は、このような態様に限定されるものではなく、フィールド内補間処理のみによる補間信号を用いる態様のような他の態様であってもよい。 In the above description, motion adaptive interpolation processing is performed in IP conversion for a normal video signal. However, the present invention is not limited to such an embodiment, and is based only on intra-field interpolation processing. Other modes such as a mode using an interpolation signal may be used.
さらに、上記説明においては、映像信号処理装置の各構成がハードウェア構成であるように説明しているが、本発明を、プログラム制御におけるソフトウェアの処理により実現するように構成してもよい。 Further, in the above description, each configuration of the video signal processing apparatus is described as being a hardware configuration, but the present invention may be configured to be realized by software processing in program control.
実施の形態2.
上記実施の形態1においては、入力映像信号がテレシネ映像信号であるか否かを検出し、その検出結果に基づいてIP変換を行う映像信号処理装置及び映像信号処理方法について説明したが、本発明は、入力映像信号としてのインターレース映像信号をプログレッシブ映像信号にIP変換し、高画質で表示する映像信号表示装置にも適用できる。実施の形態2においては、TV放送信号やDVD、VTR等の記録再生装置等から入力されるインターレース映像信号を処理し、上記実施の形態1の映像信号処理装置又は映像信号処理方法によりプログレッシブ映像信号にIP変換し、この変換されたプログレッシブ映像信号に基づいて映像を表示する映像信号表示装置について説明する。
In the first embodiment, the video signal processing apparatus and the video signal processing method for detecting whether or not the input video signal is a telecine video signal and performing IP conversion based on the detection result have been described. Can be applied to a video signal display device that converts an interlaced video signal as an input video signal into a progressive video signal and converts it into a high-quality image. In the second embodiment, an interlaced video signal input from a TV broadcast signal or a recording / playback device such as a DVD or VTR is processed, and the progressive video signal is processed by the video signal processing device or the video signal processing method of the first embodiment. A video signal display apparatus that performs IP conversion and displays video based on the converted progressive video signal will be described.
図19は、本発明の実施の形態2による映像信号表示装置の構成を示すブロック図である。図2において、図1の構成と同一又は対応する構成には、同じ符号を付す。図19に示されるように、実施の形態2の映像信号表示装置は、上記実施の形態1の映像信号処理装置(図1参照)の構成に加え、入力端子200と、入力信号処理手段201と、表示処理手段202と、表示手段203とを設け、IP変換した後のプログレッシブ映像信号Progを表示するように構成したものである。これら入力端子200、入力信号処理手段201、表示処理手段202、及び表示手段203に関する部分以外の構成及び動作は、上記実施の形態1に示されるものと同じである。
FIG. 19 is a block diagram showing a configuration of a video signal display apparatus according to
入力端子200には、TV放送信号やDVD,VTR等の記録再生装置等からの信号が入力される。入力端子200に入力された信号は、入力信号処理手段201へと送られる。ここで、TV放送信号やDVD,VTR等から送られる信号は、NTSC方式信号やハイビジョン信号等の標準的なテレビジョン信号であり、インターレース映像信号である。
The
入力信号処理手段201は、TV放送信号やDVD,VTR等の記録再生装置等からの信号に対し、例えば、アナログ信号からデジタル信号への変換、同期信号を分離する等の入力信号処理を施す。入力信号処理手段201の出力は、インターレース映像信号Iaとして、タイミング信号発生手段1、1フィールド遅延手段2、補間信号生成手段110、及びテレシネ検出手段6へ入力される。
The input
倍速変換手段9は、プログレッシブ映像信号Progを表示処理手段202へと出力する。 The double speed conversion means 9 outputs the progressive video signal Prog to the display processing means 202.
表示処理手段202には、倍速変換手段9からのIP変換されたプログレッシブ映像信号Progが入力される。表示処理手段202は、プログレッシブ映像信号Progに、例えば、スケーリング処理等の表示信号へと変換するための信号処理を施し、プログレッシブ映像として表示するための表示信号として表示手段203へ出力する。
The progressive processing video signal Prog subjected to IP conversion from the double speed conversion means 9 is input to the display processing means 202. The
表示手段203は、表示処理手段202からの表示信号に基づく映像をプログレッシブ映像として表示する。
The
以上に説明したように、実施の形態2の映像信号表示装置によれば、実施の形態1の映像信号処理装置又は映像信号処理方法を用いているので、コーミング現象による画質劣化を低減した良好なプログレッシブ映像信号に基づく高品質な映像を表示することができる。 As described above, according to the video signal display device of the second embodiment, since the video signal processing device or the video signal processing method of the first embodiment is used, the image quality deterioration due to the combing phenomenon is reduced. It is possible to display a high-quality video based on the progressive video signal.
1 タイミング信号発生手段、 2,3 1フィールド遅延手段、 4 動き検出手段、 5 動き適応補間処理手段、 6 テレシネ検出手段、 7 テレシネ補間処理手段、 8 選択手段、 9 倍速変換手段、 11 差分検出手段、 12 比較手段、 13 所定エリア内累積カウンタ、 14 シーケンス検出手段、 15 出現頻度検出手段、 16 予測制御手段、 21a,21b,21c 静止画検出手段、 22 動画フィールドカウンタ、 23 テレシネシーケンス位相カウンタ、 24 テレシネ起動カウンタ、 25 動画連続検出手段、 27 静止画連続検出手段、 28 比較手段、 29 シーケンスずれ検出手段、 30 シーケンス内静止画カウンタ、 31 比較手段、 32 シーンチェンジ検出手段、 33 比較閾値設定手段、 34 解除信号生成手段、 35 補間位相フラグ生成手段、 36 シーケンス検出信号生成手段、 37 起動カウント値設定手段、 40 出現頻度カウンタ、 41 静止画連続検出手段、 42 カウント値調整手段、 43 最大値設定手段、 44 カウント値初期化手段、 45 予測制御フラグ生成手段、 46 有効カウント値設定手段、 50 切換手段、 100,200 入力端子、 101 出力端子、 110 補間信号生成手段、 120 相関検出手段、 141 シーケンス位相検出手段、 142 テレシネシーケンス判定手段、 143 テレシネ解除検出手段、 151 シーケンス判定回数検出手段、 152 確からしさ判定手段、 201 入力信号処理手段、 202 表示処理手段、 203 表示手段、 cnt 動画素累積値、 detm 動き検出信号、 Ia 現フィールド信号(インターレース映像信号、入力映像信号)、 Ib,R 1フィールド遅延信号、 Ic 2フィールド遅延信号、 Im 補間走査線信号、 It 補間信号(テレシネ補間信号)、 I 選択された補間走査線信号、 mvf 動画フィールドカウンタ出力、 oncnt テレシネ起動カウンタ出力、 Prog プログレッシブ映像信号、 seq テレシネシーケンス位相カウンタ出力、 stl1,stl2,stl3 静止画検出信号、 tci テレシネ検出信号、 tci0 テレシネシーケンス検出信号、 tciflg 予測制御フラグ、 te エリア信号。 DESCRIPTION OF SYMBOLS 1 Timing signal generation means 2,3 1 field delay means 4 Motion detection means 5 Motion adaptive interpolation processing means 6 Telecine detection means 7 Telecine interpolation processing means 8 Selection means 9 Double speed conversion means 11 Difference detection means , 12 Comparison means, 13 Accumulation counter in predetermined area, 14 Sequence detection means, 15 Appearance frequency detection means, 16 Prediction control means, 21a, 21b, 21c Still picture detection means, 22 Movie field counter, 23 Telecine sequence phase counter, 24 Telecine activation counter, 25 moving image continuous detection means, 27 still image continuous detection means, 28 comparison means, 29 sequence deviation detection means, 30 still image counter in sequence, 31 comparison means, 32 scene change detection means, 33 comparison threshold setting means, 34 release signal generating means, 35 Interpolation phase flag generation means, 36 sequence detection signal generation means, 37 start count value setting means, 40 appearance frequency counter, 41 still image continuous detection means, 42 count value adjustment means, 43 maximum value setting means, 44 count value initialization means 45 Predictive control flag generating means 46 Effective count value setting means 50 Switching means 100 Input input terminal 101 Output terminal 110 Interpolation signal generating means 120 Correlation detecting means 141 Sequence phase detecting means 142 Telecine sequence determination Means, 143 telecine release detection means, 151 sequence determination frequency detection means, 152 probability determination means, 201 input signal processing means, 202 display processing means, 203 display means, cnt moving picture element accumulated value, detm motion detection signal, Ia current field Signal (I Terlace video signal, input video signal), Ib, R 1 field delay signal, Ic 2 field delay signal, Im interpolation scanning line signal, It interpolation signal (telecine interpolation signal), I selected interpolation scanning line signal, mvf video field Counter output, oncnt telecine start counter output, Prog progressive video signal, seq telecine sequence phase counter output, stl 1 , stl 2 , stl 3 still image detection signal, tci telecine detection signal, tci 0 telecine sequence detection signal, tciflg prediction control flag Te area signal.
本発明の映像信号処理装置は、飛び越し走査映像信号を順次走査映像信号に変換する映像信号処理装置であって、上記飛び越し走査映像信号をフィールド単位で遅延させるフィールド遅延手段と、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、この検出結果に基づくフレーム間の相関の強さを示す信号を出力する相関検出手段と、上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するシーケンス検出手段と、上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力する出現頻度検出手段と、上記テレシネシーケンス検出信号を上記予測制御信号により制御し、制御された結果であるテレシネ検出信号を出力する予測制御手段と、上記飛び越し走査映像信号及び上記フィールド遅延手段で遅延した映像信号に基づいて複数種類の補間信号を生成し、上記テレシネ検出信号に基づいて上記複数種類の補間信号の内のいずれかを選択して出力する補間信号生成手段と、上記飛び越し走査映像信号及び上記補間信号生成手段から出力された上記補間信号に基づいて上記順次走査映像信号を生成する変換手段とを有するものである。 The video signal processing device of the present invention is a video signal processing device for converting interlaced scanning video signals into progressive scanning video signals, field delay means for delaying the interlaced scanning video signals in units of fields, and the interlaced scanning video signals. A correlation detecting means for detecting a correlation between the field of interest and a field one frame before the field of interest and outputting a signal indicating the strength of the correlation between frames based on the detection result; Based on the signal indicating the strength of the correlation, it is determined whether the interlaced scanning video signal satisfies the condition of the field sequence of the video signal subjected to telecine conversion, and a telecine sequence detection signal is generated based on the determination result. Based on the output sequence detection means and the signal indicating the strength of the correlation between the frames, the telecine change is performed. Has been measured frequency satisfies the condition field sequence of field sequence of the video signal, the frequency detecting means for outputting a predictive control signal based on the measurement results, the telecine sequence detection signal is controlled by the predictive control signal A plurality of types of interpolation signals are generated based on the prediction control means for outputting a telecine detection signal as a controlled result, and the interlaced scanning video signal and the video signal delayed by the field delay means, and the telecine detection signal Based on the interpolated scanning video signal and the interpolated signal output from the interpolated signal generating means, the interpolated scanning video signal and the interpolated signal output from the interpolated signal generating means. Conversion means for generating a signal.
また、本発明の映像信号処理方法は、飛び越し走査映像信号を順次走査映像信号に変換する映像信号処理方法であって、上記飛び越し走査映像信号をフィールド単位で遅延させるステップと、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、フレーム間の相関の強さを示す信号を出力するステップと、上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するステップと、上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力するステップと、上記テレシネシーケンス検出信号を上記予測制御信号により制御し、制御された結果であるテレシネ検出信号を出力するステップと、上記テレシネ検出信号に基づいて上記飛び越し走査映像信号及び上記遅延した飛び越し走査映像信号に基づいて生成される複数種類の補間走査線信号の内からいずれかを選択して出力するステップと、上記飛び越し走査映像信号及び上記選択された補間走査線信号に基づいて、上記順次走査映像信号を生成するステップとを有するものである。 The video signal processing method of the present invention is a video signal processing method for converting an interlaced video signal into a progressive video signal, the step of delaying the interlaced video signal in units of fields, and the interlaced video signal Detecting a correlation between the field of interest and a field one frame before the field of interest, and outputting a signal indicating the strength of the correlation between the frames, and a signal indicating the strength of the correlation between the frames And determining whether or not the interlaced scanning video signal satisfies the condition of the field sequence of the telecine-converted video signal, generating and outputting a telecine sequence detection signal based on the determination result, and the frame A field sequence of the telecine-converted video signal based on a signal indicating the strength of the correlation between Measures the frequency of satisfying field sequence, and outputting a predictive control signal based on the measurement results, the telecine sequence detection signal is controlled by the predictive control signal, a telecine detection signal that is a controlled results A step of outputting and a step of selecting and outputting one of a plurality of types of interpolated scanning line signals generated based on the interlaced scanning video signal and the delayed interlaced scanning video signal based on the telecine detection signal And generating the progressive scanning video signal based on the interlaced scanning video signal and the selected interpolated scanning line signal.
テレシネシーケンス判定手段142には、第1の静止画検出手段21aからのフィールドの静止画検出結果stl1と、動画フィールドカウンタ22からの前フィールドまでの動画連続数mvfと、テレシネ解除検出手段143による解除信号rstとが入力される。テレシネシーケンス判定手段142は、テレシネシーケンスの繰り返し条件を検出し、テレシネシーケンスであるか否かを判定して、シーケンス検出結果を示すテレシネシーケンス検出信号tci0を出力する。以下に、テレシネシーケンス判定手段142を構成する各ブロックについて説明する。
The telecine
これは、5フィールドに一度の静止画の位置において、静止画検出結果stl1=1(静止画)であるときは、上記のシーケンス条件のひとつである動画連続数mvf=‘4’でなくてもテレシネシーケンス中である場合(テレシネシーケンス中の静止画から動画への切り換えなど)が考えられ、テレシネシーケンスであるか否かどちらにも判定できない場合が存在するためである。5フィールドに一度の静止画の位置において、静止画検出結果stl1=0(動画)となる場合のみをテレシネシーケンスと判定しないようにすることで、上記の条件を減算の対象からはずし、カウント値tcの加減算を行わないようにすることもできる。 This is because, when the still image detection result stl 1 = 1 (still image) at the position of a still image once in 5 fields, the moving image continuous number mvf = “4”, which is one of the above sequence conditions, This is because there is a case where the telecine sequence is in progress (eg, switching from a still image to a moving image in the telecine sequence), and there is a case where it cannot be determined whether or not the telecine sequence is present. By not determining the telecine sequence only when the still image detection result stl 1 = 0 (moving image) at the position of the still image once in 5 fields, the above condition is removed from the subtraction target, and the count value It is also possible not to add or subtract tc.
以上説明したように、実施の形態1の映像信号処理装置又は映像信号処理方法によれば、順次入力されるインターレース映像信号Iaが5フィールドのテレシネシーケンスの繰り返し条件を満たすか否かを検出すると共に、テレシネシーケンスの繰り返し条件を満たすフィールドシーケンスの出現頻度を計測し、これらの結果tci0及びtciflgに基づいて映像信号がテレシネ変換されたものであるか否かを示すテレシネ検出信号tciを出力するようにしている。このように、映像信号Iaがテレシネシーケンスの繰り返し条件を満たすか否かの検出結果tci0に加え、比較的長い期間(フィールド)にわたって監視した結果であり、テレシネ変換された映像信号であることの確からしさを示す指標としての意味を持つフィールドシーケンスの出現頻度フラグtciflgに基づいたテレシネ検出信号tciを出力するようにしているので、テレシネ検出信号tciの信頼度が向上している。したがって、実施の形態1の映像信号処理装置又は映像信号処理方法によれば、テレシネ検出信号tciの信頼度の向上によって、テレシネ検出信号tciに基づいて選択される補間走査線信号Im又はItを適切に選択することができる(例えば、編集点が頻繁に存在し、テレシネシーケンスの不連続が頻繁に起こる映像信号に対しテレシネ映像信号らしくないと判定してテレシネ検出信号tciをテレシネ映像信号ではないとする(tci=0)よう制御できるので、例えば、一時的にテレシネシーケンスの条件を満たしても、テレシネ補間をしないように制御することができる。)。このため、テレシネ変換された映像信号の途中でテレシネ変換された映像信号以外の信号が混在する場合等において発生することがあるコーミング現象による画質劣化の発生頻度を低減し、テレシネ変換された映像信号を良好なプログレッシブ映像信号Progに変換することができる。 As described above, according to the video signal processing apparatus or the video signal processing method of the first embodiment, it is detected whether or not the sequentially input interlace video signal Ia satisfies the repetition condition of the 5-field telecine sequence. The frequency of appearance of the field sequence satisfying the telecine sequence repetition condition is measured, and a telecine detection signal tci indicating whether the video signal has been telecine converted based on these results tci 0 and tciflg is output. I have to. As described above, the video signal Ia is a result of monitoring over a relatively long period (field) in addition to the detection result tci 0 of whether or not the repetition condition of the telecine sequence is satisfied. Since the telecine detection signal tci based on the appearance frequency flag tciflg of the field sequence having the meaning as an index indicating the certainty is output, the reliability of the telecine detection signal tci is improved. Therefore, according to the video signal processing apparatus or the video signal processing method of the first embodiment, the interpolation scanning line signal Im or It selected based on the telecine detection signal tci is appropriately selected by improving the reliability of the telecine detection signal tci. may be selected (e.g., frequently there is an edit point, the discontinuous telecine sequence is not a telecine video signal telecine detection signal tci it is determined that not like telecine video signal to frequent video signal (Tci = 0), for example, even if the telecine sequence condition is temporarily satisfied, it can be controlled not to perform telecine interpolation.) For this reason, the frequency of image quality degradation due to combing phenomenon, which may occur when a signal other than a telecine-converted video signal is mixed in the middle of a telecine-converted video signal, reduces the frequency of image quality degradation due to a combing phenomenon, Can be converted into a good progressive video signal Prog.
図19は、本発明の実施の形態2による映像信号表示装置の構成を示すブロック図である。図19において、図1の構成と同一又は対応する構成には、同じ符号を付す。図19に示されるように、実施の形態2の映像信号表示装置は、上記実施の形態1の映像信号処理装置(図1参照)の構成に加え、入力端子200と、入力信号処理手段201と、表示処理手段202と、表示手段203とを設け、IP変換した後のプログレッシブ映像信号Progを表示するように構成したものである。これら入力端子200、入力信号処理手段201、表示処理手段202、及び表示手段203に関する部分以外の構成及び動作は、上記実施の形態1に示されるものと同じである。
FIG. 19 is a block diagram showing a configuration of a video signal display apparatus according to
本発明の映像信号処理装置は、飛び越し走査映像信号から補間走査線を順次走査映像信号に変換する映像信号処理装置であって、上記飛び越し走査映像信号をフィールド単位で遅延させるフィールド遅延手段と、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、この検出結果に基づくフレーム間の相関の強さ示す信号を出力する相関検出手段と、上記フレーム間の相関の強さ示す信号により、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果から、上記飛び越し走査映像信号において、テレシネ映像信号におけるフィールドシーケンスが検出されたか否かを示すテレシネシーケンス検出信号と、同一フレームからテレシネ変換されたフィールドの時間方向を示す補間位相を出力するシーケンス検出手段と、上記フレーム間の相関の強さ示す信号により、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測した出現頻度を示すカウント値が所定の有効カウント値以上のときには上記飛び越し走査映像信号がテレシネ変換された映像信号であると判定し、前記出現頻度を示すカウント値が前記有効カウント値未満のときにはテレシネ映像信号らしくないと判定した結果を示す予測制御信号を出力する出現頻度検出手段と、上記予測制御信号が上記飛び越し走査映像信号をテレシネ変換された映像信号であると判定したことを示すときは、上記テレシネシーケンス検出手段から出力された上記テレシネシーケンス検出信号を選択して出力し、上記予測制御信号が上記飛び越し走査映像信号をテレシネ映像信号らしくないと判定したことを示すときは、テレシネ映像信号におけるフィールドシーケンスが検出されないことを示す信号を選択してテレシネ検出信号として出力する予測制御手段と、上記飛び越し走査映像信号及び上記フィールド遅延手段で遅延した映像信号から第1の補間信号を生成し、上記補間位相で示されるフィールドの時間方向により、上記飛び越し走査映像信号の注目フィールドに対し前もしくは後に位置するフィールドの信号から第2の補間信号を生成して、上記予測制御手段から出力される上記テレシネ検出信号が上記テレシネシーケンス検出手段から出力された上記テレシネシーケンス検出信号であるときには上記第2の補間信号を出力し、上記予測制御手段から出力される上記テレシネ検出信号が上記テレシネ映像信号におけるフィールドシーケンスが検出されないことを示す信号であるときには上記第1の補間信号を出力する補間信号生成手段と、上記飛び越し走査映像信号及び上記補間信号生成手段から出力された上記補間信号を切り換えて上記順次走査し映像信号を生成する変換手段とを有するものである。 The video signal processing apparatus according to the present invention is a video signal processing apparatus that converts interpolated scanning lines from interlaced scanning video signals to sequential scanning video signals, field delay means for delaying the interlaced scanning video signals in units of fields, and Correlation detecting means for detecting a correlation between a target field of the interlaced scanning video signal and a field one frame before the target field and outputting a signal indicating the strength of correlation between frames based on the detection result; a signal indicating the intensity of the correlation between frames, the interlaced scanning video signal is judged whether or not the condition field sequence telecine converted video signal, from the determination result, in the interlaced scan video signal, telecine Telecine sequence detection indicating whether or not a field sequence has been detected in the video signal No. and a sequence detecting means for outputting a interpolation phase time indicating the direction of the telecine converted fields from the same frame, a signal indicating the intensity of the correlation between the frames, the conditions of the field sequence of the telecine converted video signal The appearance frequency of the field sequence satisfying the above is measured, and when the count value indicating the measured appearance frequency is equal to or greater than a predetermined effective count value, it is determined that the interlaced scanning video signal is a video signal subjected to telecine conversion, and the appearance frequency An appearance frequency detecting means for outputting a predictive control signal indicating a result determined not to be a telecine video signal when the count value indicating less than the effective count value, and the predictive control signal is telecine-converted from the interlaced scan video signal To indicate that it is a video signal, use the telecine When the telecine sequence detection signal output from the motion detection means is selected and output, and the prediction control signal indicates that the interlaced video signal is not likely to be a telecine video signal, the field sequence in the telecine video signal is A prediction control means for selecting a signal indicating that the signal is not detected and outputting it as a telecine detection signal; generating a first interpolation signal from the interlaced scanning video signal and the video signal delayed by the field delay means; The telecine detection signal output from the prediction control means by generating a second interpolation signal from the signal of the field positioned before or after the target field of the interlaced scanning video signal according to the time direction of the field indicated by Is output from the telecine sequence detecting means. The second interpolation signal is output when it is a nesequence detection signal, and the first interpolation signal is output when the telecine detection signal output from the prediction control means is a signal indicating that a field sequence in the telecine video signal is not detected. Interpolation signal generation means for outputting the interpolated signal, and conversion means for switching the interlaced scanning video signal and the interpolation signal output from the interpolation signal generating means to generate the video signal by sequentially scanning. .
また、本発明の映像信号処理方法は、飛び越し走査の映像信号を順次走査映像信号に変換する映像信号処理方法であって、上記飛び越し走査映像信号をフィールド単位で遅延させるステップと、上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、フレーム間の相関の強さ示す信号を出力するステップと、上記フレーム間の相関の強さ示す信号により、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果から、上記飛び越し走査映像信号において、テレシネ映像信号におけるフィールドシーケンスが検出されたか否かを示すテレシネシーケンス検出信号と、同一フレームからテレシネ変換されたフィールドの時間方向を示す補間位相を出力するステップと、上記フレーム間の相関の強さ示す信号により、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測した出現頻度を示すカウント値が所定の有効カウント値以上のときには上記飛び越し走査映像信号がテレシネ変換された映像信号であると判定し、前記出現頻度を示すカウント値が前記有効カウント値未満のときにはテレシネ映像信号らしくないと判定した結果を示す予測制御信号を出力するステップと、上記予測制御信号が上記飛び越し走査映像信号をテレシネ変換された映像信号であると判定したことを示すときは、上記テレシネシーケンス検出信号を選択して出力し、上記予測制御信号が上記飛び越し走査映像信号をテレシネ映像信号らしくないと判定したことを示すときは、テレシネ映像信号におけるフィールドシーケンスが検出されないことを示す信号を選択してテレシネ検出信号として出力するステップと、上記飛び越し走査映像信号及び上記フィールド遅延した映像信号から第1の補間信号を生成し、上記補間位相で示されるフィールドの時間方向により、上記飛び越し走査映像信号の注目フィールドに対し前もしくは後に位置するフィールドの信号から第2の補間信号を生成して、上記選択して出力される上記テレシネ検出信号が上記テレシネシーケンス検出手段から出力された上記テレシネシーケンス検出信号であるときには上記第2の補間信号を出力し、上記選択して出力される上記テレシネ検出信号が上記テレシネ映像信号におけるフィールドシーケンスが検出されないことを示す信号であるときには上記第1の補間信号を出力するステップと、上記飛び越し走査映像信号及び上記選択された補間信号を切り換えて、上記順次走査映像信号を生成するステップとを有するものである。 The video signal processing method of the present invention is a video signal processing method for converting interlaced scanning video signals into sequentially scanned video signals, the step of delaying the interlaced scanning video signals in units of fields, and the interlaced scanning video and the field of interest of the signal, detects a correlation between one frame previous field from the field of interest, and outputting a signal indicative of the strength of the correlation between frames, a signal indicating the intensity of the correlation between the frame the interlaced scanned video signal, it is determined whether or not the condition field sequence telecine converted video signal, whether the result of the judgment, in the interlaced scan video signal, or a field sequence in the telecine video signal is detected Telecine conversion signal from the same frame as the telecine sequence detection signal indicating And outputting the interpolation phase time indicating the direction of the field, the signal that indicates the intensity of the correlation between the frames, to measure the frequency of satisfying field sequence of field sequence of the telecine converted video signal, this When the count value indicating the measured appearance frequency is equal to or greater than a predetermined effective count value, the interlaced scanning video signal is determined to be a telecine-converted video signal, and when the count value indicating the appearance frequency is less than the effective count value. A step of outputting a prediction control signal indicating a result of determining that the video signal is not likely to be a telecine video signal, and when the prediction control signal indicates that the interlaced video signal is determined to be a video signal obtained by telecine conversion; The sequence detection signal is selected and output, and the prediction control signal is skipped. When it indicates that a scanned video signal is determined to not like telecine video signal, and outputting as a telecine detection signal by selecting the signal indicating that the field sequence in the telecine video signal is not detected, the interlaced scanned video signal And a first interpolation signal is generated from the field-delayed video signal, and a second interpolation signal is generated from a signal in a field positioned before or after the target field of the interlaced scanning video signal according to the time direction of the field indicated by the interpolation phase. When the telecine detection signal selected and output is the telecine sequence detection signal output from the telecine sequence detection means, the second interpolation signal is output and the selection is performed. The telecine detection signal output by the When the signal indicates that the field sequence in the signal is not detected, the step of outputting the first interpolation signal and the interlaced scanning video signal and the selected interpolation signal are switched to generate the sequential scanning video signal. Steps.
Claims (17)
上記飛び越し走査映像信号をフィールド単位で遅延させるフィールド遅延手段と、
上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、この検出結果に基づくフレーム間の相関の強さを示す信号を出力する相関検出手段と、
上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するシーケンス検出手段と、
上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力する出現頻度検出手段と、
上記テレシネシーケンス検出信号及び上記予測制御信号に基づくテレシネ検出信号を出力する予測制御手段と、
上記飛び越し走査映像信号及び上記フィールド遅延手段で遅延した映像信号に基づいて複数種類の補間信号を生成し、上記テレシネ検出信号に基づいて上記複数種類の補間信号の内のいずれかを選択して出力する補間信号生成手段と、
上記飛び越し走査映像信号及び上記補間信号生成手段から出力された上記補間信号に基づいて上記順次走査映像信号を生成する変換手段と
を有することを特徴とする映像信号処理装置。 A video signal processing device for converting interlaced scanning video signals into sequential scanning video signals,
Field delay means for delaying the interlaced scanning video signal in field units;
Correlation detecting means for detecting a correlation between a target field of the interlaced scanning video signal and a field one frame before the target field, and outputting a signal indicating the strength of correlation between frames based on the detection result; ,
Based on the signal indicating the strength of the correlation between the frames, it is determined whether the interlaced scanning video signal satisfies the conditions of the field sequence of the video signal subjected to telecine conversion, and the telecine sequence detection signal based on the determination result A sequence detecting means for generating and outputting
Based on the signal indicating the strength of the correlation between the frames, the appearance frequency of the field sequence satisfying the condition of the field sequence of the video signal subjected to the telecine conversion is measured, and the prediction control signal is output based on the measurement result A frequency detection means;
Prediction control means for outputting a telecine detection signal based on the telecine sequence detection signal and the prediction control signal;
A plurality of types of interpolation signals are generated based on the interlaced scanning video signal and the video signal delayed by the field delay means, and one of the plurality of types of interpolation signals is selected and output based on the telecine detection signal. Interpolation signal generating means for
A video signal processing apparatus comprising: conversion means for generating the progressive scanning video signal based on the interlaced scanning video signal and the interpolation signal output from the interpolation signal generating means.
上記フレーム間の相関の強さを示す信号を所定の相関判定用の閾値と比較し、この比較結果に基づいて上記注目フィールドが静止画フィールド又は動画フィールドのいずれであるかを検出する静止画検出手段と、
上記静止画検出手段の検出結果に基づいて、動画フィールドを示すフィールドの連続数を検出する動画フィールドカウント手段と、
上記静止画検出手段の検出結果及び上記動画フィールドカウント手段の検出結果に基づいて、テレシネ変換された映像信号のフィールドシーケンスの位相を検出し、この位相を補間位相として出力するシーケンス位相検出手段と
を有することを特徴とする請求項3に記載の映像信号処理装置。 The sequence detection means includes
Still image detection for comparing the signal indicating the strength of correlation between the frames with a predetermined correlation determination threshold and detecting whether the field of interest is a still image field or a moving image field based on the comparison result Means,
Based on the detection result of the still image detecting means, a moving picture field counting means for detecting a continuous number of fields indicating a moving picture field;
Based on the detection result of the still image detection means and the detection result of the moving image field count means, a sequence phase detection means for detecting the phase of the field sequence of the telecine-converted video signal and outputting the phase as an interpolation phase. The video signal processing apparatus according to claim 3, further comprising:
上記静止画検出手段の検出結果、上記動画フィールドカウント手段の検出結果、及び上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たさない場合を検出するテレシネ解除検出手段と、
上記静止画検出手段の検出結果、上記動画フィールドカウント手段の検出結果、及び上記テレシネ解除検出手段の検出結果に基づいて、上記テレシネシーケンス検出信号を生成して出力するテレシネシーケンス判定手段と
を有することを特徴とする請求項4に記載の映像信号処理装置。 The sequence detection means includes
Based on the detection result of the still image detection unit, the detection result of the moving image field counting unit, and a signal indicating the strength of correlation between the frames, the interlaced scanning video signal is telecine-converted in the field sequence of the video signal. Telecine cancellation detecting means for detecting a case where the condition is not satisfied,
Telecine sequence determination means for generating and outputting the telecine sequence detection signal based on the detection result of the still image detection means, the detection result of the moving picture field count means, and the detection result of the telecine release detection means. The video signal processing apparatus according to claim 4.
上記静止画検出手段の検出結果及び上記動画フィールドカウント手段の検出結果に基づいて、動画フィールドが4フィールド連続した後、静止画フィールドとなるフィールドのタイミングに同期して、5フィールド周期で繰り返す繰り返し信号を生成するテレシネシーケンス位相カウント手段と、
上記繰り返し信号に基づいて2−3プルダウン方式のテレシネ変換の変換位相を示す上記補間位相を生成して出力する補間位相フラグ生成手段と
を有することを特徴とする請求項4又は5のいずれかに記載の映像信号処理装置。 The sequence phase detection means includes
Based on the detection result of the still image detecting means and the detection result of the moving picture field counting means, after the moving picture field continues for four fields, the repeated signal is repeated at a period of five fields in synchronization with the timing of the field to become the still picture field. Telecine sequence phase counting means for generating
6. Interpolation phase flag generation means for generating and outputting the interpolation phase indicating the conversion phase of the 2-3 pull-down telecine conversion based on the repetitive signal. The video signal processing apparatus described.
上記静止画検出手段の検出結果及び上記動画フィールドカウント手段の検出結果に基づいて、動画フィールドが所定フィールド以上連続する場合を検出する動画連続検出手段と、
上記静止画検出手段の検出結果に基づいて、上記飛び越し走査映像信号における静止画フィールドを示すフィールドの連続数を検出する静止画連続検出手段と、
上記静止画連続検出手段により検出された静止画フィールド連続数が所定フィールド以上連続する場合を検出する連続フィールド数比較手段と、
上記静止画検出手段の検出結果、上記テレシネシーケンス位相カウント手段から出力される上記繰り返し信号、及び上記テレシネシーケンス検出信号に基づいて、上記飛び越し走査映像信号におけるシーケンス中の静止画フィールドの位相ずれを検出するシーケンスずれ検出手段と、
上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号におけるシーンチェンジの起こったフィールドを検出するシーンチェンジ検出手段と、
上記動画連続検出手段の検出結果、上記連続フィールド数比較手段の検出結果、上記シーケンスずれ検出手段の検出結果、及び上記シーンチェンジ検出手段の検出結果の内の少なくとも1つ以上の検出結果に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たさない場合を判定し、上記テレシネシーケンス検出信号を、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たさないことを示す値にさせるための解除信号を出力する解除信号生成手段と
を有することを特徴とする請求項5に記載の映像信号処理装置。 The telecine release detecting means is
Based on the detection result of the still image detecting means and the detection result of the moving picture field counting means, a moving picture continuous detecting means for detecting a case where a moving picture field continues for a predetermined field or more,
Based on the detection result of the still image detection means, still image continuous detection means for detecting the number of consecutive fields indicating still image fields in the interlaced scanning video signal;
Continuous field number comparison means for detecting a case where the number of continuous still image fields detected by the still image continuous detection means continues for a predetermined field or more;
Based on the detection result of the still image detecting means, the repetitive signal output from the telecine sequence phase counting means, and the telecine sequence detection signal, the phase shift of the still image field in the sequence in the interlaced scanning video signal is detected. Sequence deviation detecting means for
Scene change detection means for detecting a field where a scene change has occurred in the interlaced scanning video signal based on a signal indicating the strength of correlation between the frames;
Based on at least one of the detection result of the moving image continuous detection means, the detection result of the continuous field number comparison means, the detection result of the sequence deviation detection means, and the detection result of the scene change detection means. Determining that the interlaced scanning video signal does not satisfy the field sequence condition of the telecine-converted video signal, and determining the telecine sequence detection signal as the field sequence condition of the video signal from which the interlaced scanning video signal is telecine-converted. 6. The video signal processing apparatus according to claim 5, further comprising: a cancellation signal generation unit that outputs a cancellation signal for causing the value to indicate that the condition is not satisfied.
上記静止画検出手段の検出結果、上記テレシネシーケンス位相カウント手段から出力される上記繰り返し信号、及び上記テレシネシーケンス検出信号に基づいて、テレシネ変換された映像信号のフィールドシーケンス内の所定フィールド位置において、上記静止画検出手段が検出した静止画フィールドの数をカウントするシーケンス内静止画カウント手段と、
上記シーケンス内静止画カウント手段から出力されたカウント値を所定の閾値と比較し、この比較結果に基づいて上記静止画フィールドの位相ずれを出力する静止画フィールド数比較手段と
を有ることを特徴とする請求項7記載の映像信号処理装置。 The sequence deviation detecting means is
Based on the detection result of the still image detecting means, the repetitive signal output from the telecine sequence phase counting means, and the telecine sequence detection signal based on the telecine-converted video signal field sequence at a predetermined field position In-sequence still image counting means for counting the number of still image fields detected by the still image detection means;
Comparing the count value output from the still image counting means in the sequence with a predetermined threshold value, and still picture field number comparing means for outputting the phase shift of the still picture field based on the comparison result, The video signal processing apparatus according to claim 7.
上記静止画検出手段の検出結果、上記動画フィールドカウント手段の検出結果、及び上記テレシネ解除検出手段の検出結果に基づいて、動画フィールドが4フィールド連続した後、静止画フィールドとなるフィールドシーケンスの連続数をカウントし、上記テレシネ解除検出手段からの解除信号に基づいて上記フィールドシーケンスの連続数のカウント値をリセットするテレシネ起動カウンタと、
上記テレシネ起動カウンタによる上記フィールドシーケンスの連続数のカウント値をフィールドシーケンスの連続数に関する所定の閾値と比較し、この比較結果を上記テレシネシーケンス検出信号として出力するシーケンス検出信号生成手段と
を有することを特徴とする請求項7に記載の映像信号処理装置。 The telecine sequence determination means is
Based on the detection result of the still image detecting means, the detection result of the moving picture field counting means, and the detection result of the telecine release detecting means, the number of consecutive field sequences that become still picture fields after four moving picture fields continue A telecine activation counter that resets the count value of the continuous number of the field sequence based on a release signal from the telecine release detection means,
A sequence detection signal generating means for comparing the count value of the continuous number of the field sequence by the telecine activation counter with a predetermined threshold relating to the continuous number of the field sequence, and outputting the comparison result as the telecine sequence detection signal. 8. The video signal processing apparatus according to claim 7, wherein
上記静止画検出手段の検出結果、上記動画フィールドカウント手段の検出結果、及び上記テレシネシーケンス位相カウント手段から出力される上記繰り返し信号に基づいて、テレシネ変換された映像信号のフィールドシーケンスの条件を満たす場合を検出した回数をカウントするシーケンス判定回数検出手段と、
上記シーケンス判定回数検出手段によるテレシネ変換された映像信号のフィールドシーケンスの条件を満たす場合を検出した回数のカウント値を所定のシーケンス判定回数検出用の閾値と比較し、この比較結果をテレシネ変換された映像信号であることの確からしさ示す指標である上記予測制御信号として出力する確からしさ判定手段と
を有することを特徴とする請求項6に記載の映像信号処理装置。 The appearance frequency detecting means is
When the field sequence condition of the telecine-converted video signal is satisfied based on the detection result of the still image detection unit, the detection result of the moving image field counting unit, and the repetitive signal output from the telecine sequence phase counting unit Sequence determination number detection means for counting the number of times detected,
The count value of the number of times when the condition of the field sequence of the video signal subjected to telecine conversion by the sequence determination number detection unit is satisfied is compared with a predetermined threshold value for detecting the number of sequence determinations, and the comparison result is telecine-converted. The video signal processing apparatus according to claim 6, further comprising: a probability determination unit that outputs the prediction control signal as an index indicating the likelihood of being a video signal.
上記テレシネシーケンス位相カウント手段から出力される上記繰り返し信号に基づいて、5フィールドごとに上記静止画検出手段からの出力が連続して静止画フィールドとなる場合を検出する静止画連続検出手段と、
上記静止画検出手段の検出結果、上記動画フィールドカウント手段の検出結果、上記テレシネシーケンス位相カウント手段から出力される上記繰り返し信号、及び上記静止連続画検出手段の検出結果に基づいて、所定の加算値及び減算値を用いた加減算を行う出現頻度カウント手段と
を有することを特徴とする請求項11に記載の映像信号処理装置。 The sequence determination number detection means includes:
Still image continuous detection means for detecting when the output from the still image detection means continuously becomes a still image field every five fields, based on the repetitive signal output from the telecine sequence phase counting means;
Based on the detection result of the still image detecting means, the detection result of the moving picture field counting means, the repetitive signal output from the telecine sequence phase counting means, and the detection result of the still continuous image detecting means, a predetermined added value And an appearance frequency counting means for performing addition and subtraction using the subtraction value.
上記加算値及び上記減算値のそれぞれの値を設定するカウント値調整手段と、
上記出現頻度カウント手段におけるカウント値の最大値を設定する最大値設定手段と、
上記出現頻度カウント手段におけるカウントを初期化して所定の初期値を設定するカウント値初期化手段と
を有することを特徴とする請求項10に記載の映像信号処理装置。 The appearance frequency counting means is
Count value adjusting means for setting each value of the addition value and the subtraction value;
Maximum value setting means for setting the maximum value of the count value in the appearance frequency counting means;
11. The video signal processing apparatus according to claim 10, further comprising: a count value initializing unit that initializes a count in the appearance frequency counting unit and sets a predetermined initial value.
上記予測制御信号に基づき上記フィールドシーケンスの出現頻度が所定の有効カウント値以上であるか否かを判定し、
上記フィールドシーケンスの出現頻度が上記有効カウント値以上であるときには上記テレシネシーケンス検出信号を上記テレシネ検出信号として出力し、
上記フィールドシーケンスの出現頻度が上記有効カウント値未満であるときには所定の固定値を上記テレシネ検出信号として出力する
ことを特徴とする請求項1から13までのいずれかに記載の映像信号処理装置。 The prediction control means includes
Determining whether the appearance frequency of the field sequence is equal to or higher than a predetermined effective count value based on the prediction control signal;
When the appearance frequency of the field sequence is greater than or equal to the effective count value, the telecine sequence detection signal is output as the telecine detection signal,
The video signal processing apparatus according to any one of claims 1 to 13, wherein when the appearance frequency of the field sequence is less than the effective count value, a predetermined fixed value is output as the telecine detection signal.
動き適応補間処理に用いる第1の補間信号を生成して出力する動き適応補間処理手段と、
テレシネ変換された映像信号に対する補間処理に用いる第2の補間信号を生成して出力するテレシネ補間処理手段と、
上記予測制御手段から出力されるテレシネ検出信号に基づいて、上記第1の補間信号又は上記第2の補間信号のいずれかを選択して出力する選択手段と
を有することを特徴とする請求項1から14までのいずれかに記載の映像信号処理装置。 The interpolation signal generating means includes
Motion adaptive interpolation processing means for generating and outputting a first interpolation signal used for motion adaptive interpolation processing;
Telecine interpolation processing means for generating and outputting a second interpolation signal used for interpolation processing on the telecine-converted video signal;
2. Selection means for selecting and outputting either the first interpolation signal or the second interpolation signal based on a telecine detection signal output from the prediction control means. 15. The video signal processing device according to any one of items 14 to 14.
上記飛び越し走査映像信号をフィールド単位で遅延させるステップと、
上記飛び越し走査映像信号の注目フィールドと、上記注目フィールドより1フレーム前のフィールドとの間の相関を検出し、フレーム間の相関の強さを示す信号を出力するステップと、
上記フレーム間の相関の強さを示す信号に基づいて、上記飛び越し走査映像信号がテレシネ変換された映像信号のフィールドシーケンスの条件を満たすか否かを判断し、この判断結果に基づくテレシネシーケンス検出信号を生成して出力するステップと、
上記フレーム間の相関の強さを示す信号に基づいて、上記テレシネ変換された映像信号のフィールドシーケンスの条件を満たすフィールドシーケンスの出現頻度を計測し、この計測結果に基づく予測制御信号を出力するステップと、
上記テレシネシーケンス検出信号及び上記予測制御信号に基づくテレシネ検出信号を出力するステップと、
上記テレシネ検出信号に基づいて上記飛び越し走査映像信号及び上記遅延した飛び越し走査映像信号に基づいて生成される複数種類の補間走査線信号の内からいずれかを選択して出力するステップと、
上記飛び越し走査映像信号及び上記選択された補間走査線信号に基づいて、上記順次走査映像信号を生成するステップと
を有することを特徴とする映像信号処理方法。 A video signal processing method for converting interlaced scanning video signals into sequential scanning video signals,
Delaying the interlaced scanning video signal in field units;
Detecting a correlation between a field of interest of the interlaced scanning video signal and a field one frame before the field of interest, and outputting a signal indicating the strength of the correlation between frames;
Based on the signal indicating the strength of the correlation between the frames, it is determined whether the interlaced scanning video signal satisfies the conditions of the field sequence of the video signal subjected to telecine conversion, and the telecine sequence detection signal based on the determination result Generating and outputting
A step of measuring the appearance frequency of a field sequence satisfying the condition of the field sequence of the video signal subjected to telecine conversion based on the signal indicating the strength of correlation between the frames and outputting a prediction control signal based on the measurement result When,
Outputting a telecine detection signal based on the telecine sequence detection signal and the prediction control signal;
Selecting and outputting one of a plurality of types of interpolated scanning line signals generated based on the interlaced scanning video signal and the delayed interlaced scanning video signal based on the telecine detection signal;
Generating the progressive scanning video signal based on the interlaced scanning video signal and the selected interpolated scanning line signal.
映像を表示する表示手段と、
上記映像信号処理装置から出力された上記順次走査の映像信号に基づく映像を上記表示手段に表示させる表示処理回路と
を有することを特徴とする映像信号表示装置。 A video signal processing device according to any one of claims 1 to 15,
Display means for displaying video;
And a display processing circuit for displaying on the display means a video based on the progressive scanning video signal output from the video signal processing device.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004278889A JP4293963B2 (en) | 2004-09-27 | 2004-09-27 | Video signal processing device, video signal processing method, and video signal display device |
PCT/JP2005/002288 WO2006035521A1 (en) | 2004-09-27 | 2005-02-16 | Video signal processing device, video signal processing method, and video signal display |
TW94105188A TWI260927B (en) | 2004-09-27 | 2005-02-22 | Image signal processing device and image signal processing method and image signal display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004278889A JP4293963B2 (en) | 2004-09-27 | 2004-09-27 | Video signal processing device, video signal processing method, and video signal display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006094257A true JP2006094257A (en) | 2006-04-06 |
JP4293963B2 JP4293963B2 (en) | 2009-07-08 |
Family
ID=36118673
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004278889A Active JP4293963B2 (en) | 2004-09-27 | 2004-09-27 | Video signal processing device, video signal processing method, and video signal display device |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP4293963B2 (en) |
TW (1) | TWI260927B (en) |
WO (1) | WO2006035521A1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009065630A (en) * | 2007-08-10 | 2009-03-26 | Sony Corp | Image processing apparatus and method, and program |
JP2009260440A (en) * | 2008-04-11 | 2009-11-05 | Canon Inc | Moving image processing apparatus and control method thereof, and program |
JP2011254392A (en) * | 2010-06-03 | 2011-12-15 | Mitsubishi Electric Corp | Video signal processing apparatus and video signal processing method, and video signal display device |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3199720B2 (en) * | 1990-07-13 | 2001-08-20 | 株式会社日立製作所 | Television receiver and signal detection circuit |
JP3102494B2 (en) * | 1990-09-28 | 2000-10-23 | 株式会社日立製作所 | Signal detection circuit |
JP3398396B2 (en) * | 1992-01-07 | 2003-04-21 | ソニー株式会社 | Video signal processing circuit |
JP2001169252A (en) * | 1999-12-06 | 2001-06-22 | Victor Co Of Japan Ltd | Progressive scanning converter and progressive scanning method |
JP4236233B2 (en) * | 2000-12-28 | 2009-03-11 | キヤノン株式会社 | Video signal processing circuit |
JP2002330408A (en) * | 2001-04-27 | 2002-11-15 | Matsushita Electric Ind Co Ltd | Video signal processing unit |
JP2002335441A (en) * | 2001-05-11 | 2002-11-22 | Mitsubishi Electric Corp | Telecine video signal detector |
JP4538174B2 (en) * | 2001-08-31 | 2010-09-08 | パイオニア株式会社 | Telecine conversion system detector for video signal |
JP2003179884A (en) * | 2001-12-11 | 2003-06-27 | Sony Corp | Pull-down signal detector, pull-down signal detection method, high resolution image processing apparatus, high resolution image processing method, image encoder and image encoding method |
-
2004
- 2004-09-27 JP JP2004278889A patent/JP4293963B2/en active Active
-
2005
- 2005-02-16 WO PCT/JP2005/002288 patent/WO2006035521A1/en active Application Filing
- 2005-02-22 TW TW94105188A patent/TWI260927B/en not_active IP Right Cessation
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009065630A (en) * | 2007-08-10 | 2009-03-26 | Sony Corp | Image processing apparatus and method, and program |
JP2009260440A (en) * | 2008-04-11 | 2009-11-05 | Canon Inc | Moving image processing apparatus and control method thereof, and program |
JP2011254392A (en) * | 2010-06-03 | 2011-12-15 | Mitsubishi Electric Corp | Video signal processing apparatus and video signal processing method, and video signal display device |
Also Published As
Publication number | Publication date |
---|---|
TW200611571A (en) | 2006-04-01 |
TWI260927B (en) | 2006-08-21 |
WO2006035521A1 (en) | 2006-04-06 |
JP4293963B2 (en) | 2009-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3916637B2 (en) | Video signal processing apparatus, video signal processing method, and video signal display apparatus | |
US7075581B1 (en) | Interlaced-to-progressive scan conversion based on film source detection | |
JP4863767B2 (en) | Video signal processing apparatus and image display apparatus | |
JP4253327B2 (en) | Subtitle detection apparatus, subtitle detection method, and pull-down signal detection apparatus | |
JP4933209B2 (en) | Video processing device | |
JP4772562B2 (en) | Pull-down signal detection device, pull-down signal detection method, progressive scan conversion device, and progressive scan conversion method | |
US20040119883A1 (en) | Image format conversion apparatus and method | |
US7307670B2 (en) | Bad editing detection device | |
US8203650B2 (en) | Pull-down signal detecting apparatus, pull-down signal detecting method, and video-signal converting apparatus | |
KR20060047649A (en) | Film mode extrapolation | |
JP4293963B2 (en) | Video signal processing device, video signal processing method, and video signal display device | |
US20080100744A1 (en) | Method and apparatus for motion adaptive deinterlacing | |
JP4225930B2 (en) | Video signal processing apparatus and video signal processing method | |
US7796189B2 (en) | 2-2 pulldown signal detection device and a 2-2 pulldown signal detection method | |
JP2007074439A (en) | Video processor | |
US8243814B2 (en) | Combing artifacts detection apparatus and combing artifacts detection method | |
JP5506550B2 (en) | Video signal processing apparatus and method, and video signal display apparatus | |
WO2010092631A1 (en) | Video processing device | |
JP4236233B2 (en) | Video signal processing circuit | |
JP5172999B2 (en) | Video signal processing apparatus and image display apparatus | |
US8237860B2 (en) | Poor video editing detection system | |
JP5265048B2 (en) | Video signal processing apparatus and image display apparatus | |
JP4845569B2 (en) | Signal processing apparatus and signal processing method | |
JP2005204025A (en) | Circuit and method for movement detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051222 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060815 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061012 |
|
A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20061102 |
|
A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20070119 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090407 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120417 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4293963 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120417 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130417 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130417 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140417 Year of fee payment: 5 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |