JP4055109B2 - Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same - Google Patents

Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same Download PDF

Info

Publication number
JP4055109B2
JP4055109B2 JP2001307240A JP2001307240A JP4055109B2 JP 4055109 B2 JP4055109 B2 JP 4055109B2 JP 2001307240 A JP2001307240 A JP 2001307240A JP 2001307240 A JP2001307240 A JP 2001307240A JP 4055109 B2 JP4055109 B2 JP 4055109B2
Authority
JP
Japan
Prior art keywords
field
output
motion
inter
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001307240A
Other languages
Japanese (ja)
Other versions
JP2003116109A (en
Inventor
英樹 相羽
Original Assignee
日本ビクター株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本ビクター株式会社 filed Critical 日本ビクター株式会社
Priority to JP2001307240A priority Critical patent/JP4055109B2/en
Publication of JP2003116109A publication Critical patent/JP2003116109A/en
Application granted granted Critical
Publication of JP4055109B2 publication Critical patent/JP4055109B2/en
Application status is Expired - Fee Related legal-status Critical
Anticipated expiration legal-status Critical

Links

Images

Description

【0001】 [0001]
【発明の属する技術分野】 BACKGROUND OF THE INVENTION
本発明は、フレームレートの低い信号源から2−3プルダウンまたは2−2プルダウン等のプルダウンによってインターレースに変換されたインターレース映像信号の動きを検出するのに好適な動き検出装置及びこれを用いた順次走査変換装置に関する。 The present invention sequentially using a suitable motion detection device and which to detect the movement of the interlaced video signal converted into interlace low signal source frame rate by 2-3 pulldown or 2-2, such as pull-down pulldown in the scanning conversion apparatus.
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
NTSC信号やHDTV信号等の標準的なテレビジョン信号はインターレース(飛び越し走査)信号である。 Standard television signals such as NTSC signals or HDTV signals are interlaced (interlaced scanning) signal. インターレース信号は画像の垂直方向に高い周波線分が多くなるとラインフリッカ等のインターレース妨害を引き起こす。 Interlace signal causes interlace interference such as line flickering is high-frequency segment increases in the vertical direction of the image. そこで、インターレースで間引かれている部分の走査線を周辺の走査線で補間し、順次走査信号(ノンインターレース信号あるいはプログレッシブ信号とも呼ばれる)に変換することによって、インターレース妨害を除去する処理方法がある。 Therefore, interpolated scan lines of the portion are thinned by interlaced around the scanning lines, by converting into progressive scanning signal (also referred to as a non-interlace signal or progressive signal), there is a processing method for removing interlace interference . このような処理装置は、順次走査変換装置と称される。 Such apparatus is referred to as progressive scanning conversion apparatus.
【0003】 [0003]
ここで、順次走査変換のための走査線補間の概略について説明する。 Here, the outline of the scanning line interpolation for progressive scan conversion. 図5は走査線構造を示す図であり、(a)はインターレース信号、(b)は走査線補間によってインターレース信号を順次走査信号に変換した信号を示している。 Figure 5 is a diagram showing a scanning line structure, shows (a) an interlace signal, (b) the signal converted into progressive scanning signal an interlaced signal by scanning line interpolation. 図5中の○は伝送されてくる走査線を示し、×は補間された走査線を示している。 Figure ○ of 5 indicates a scanning line that is transmitted, × indicates a scanning line interpolated. 図5及び後述する図6のVは垂直方向、tは時間方向である。 5 and V in FIG. 6 described below in the vertical direction, t is the time direction.
【0004】 [0004]
最も一般的な順次走査変換のための走査線補間は、画像の動き検出の結果に応じて補間方法を異ならせる動き適応処理で行われる。 The most common sequential scanning line interpolation for the conversion is performed by motion adaptive processing to vary the interpolation method according to the result of the image motion detection. 即ち、図6に示すように、画像が静止している場合は、後フィールドの画素F01,前フィールドの画素F21の平均値またはどちらか一方を×で示す新しい画素Yとして、新しい走査線を生成する。 That is, as shown in FIG. 6, when the image is stationary, as a new pixel Y shown rear field of pixels F01, one mean value or either pixel F21 of the previous field in ×, generates a new scanning line to. これは、フィールド間補間あるいは静止画補間と称される。 This is referred to as inter-field interpolation or the still image interpolation. 画像が動いている場合に静止画と同じ補間方法をすると、画像が多重像になってしまう。 When the same interpolation method as the still image when the image is moving, the image becomes multiple images. そこで、画像が動いている場合は、上下の画素F10,F12の平均値を×で示す新しい画素Yとして、新しい走査線を生成する。 Therefore, if the image is moving, a new pixel Y indicating the average value of the upper and lower pixels F10, F12 by ×, and generates a new scan line. これは、フィールド内補間もしくはライン補間あるいは動画補間と称される。 This is referred to as field interpolation or line interpolation or moving interpolation.
【0005】 [0005]
このとき、画像が静止している場合は折り返し歪みが少なく解像度も高い良好な変換画質が得られるが、画像が動いている場合は折り返し歪みが多く解像度も低い劣化した変換画質となる。 In this case, the image is high good conversion image quality less resolution aliasing distortion if at rest is obtained, but the conversion image quality degraded aliasing more resolution is low when the image is moving. また、画像が動いているか静止しているかどうかを検出する動き検出回路を誤検出のない回路に設計することは一般的に難しい。 Moreover, it is generally difficult to design the circuit with no erroneous detection of a motion detection circuit for detecting whether the image is stationary or in motion.
【0006】 [0006]
ところで、順次走査信号に変換すべき入力信号が、フレームレートが24フレーム/秒である映写フィルムから例えば2−3プルダウンによってインターレースに変換された信号の場合は、上述した動き適応処理とは異なる方法を採用することによって、画像が動いた場合でも良好な変換画質を得ることができる。 Incidentally, in the case of sequentially input signals to be converted into a scan signal, the signal frame rate converted to interlaced by movie film, for example, from the 2-3 pull-down is 24 frames / sec, a method different from the above-mentioned motion adaptive processing by adopting, even if the image is moved it is possible to obtain a good conversion quality.
【0007】 [0007]
2−3プルダウンとは、図7に示すようなフレームレート変換のことである。 2-3 and pull-down, is that the frame rate conversion as shown in FIG. 具体的には、図7(A)に示す24フレーム/秒の映画等のフィルム映像信号A,B,C,…を、図7(B)に示す60フィールド/秒のインターレース信号a,a',b,b',b,c',c…に変換するための方法として用いられる。 Specifically, a film video signal A such as a movie of 24 frames / sec shown in FIG. 7 (A), B, C, ..., and FIG. 7 (B) 60 field / second interlaced signal a shown in, a ' , b, b ', b, c', is used as a method for converting the c .... なお、a',b'…の符号「'」を付したものは偶数フィールドを示しており、符号「'」を付していないものは奇数フィールドを示している。 Incidentally, a ', b' ... code " '" in the specification are used to denote the even field, the code that does not mark "'" indicates an odd field. 2−3プルダウンの他に、フレームレートが30フレーム/秒の信号の場合に用いる2−2プルダウンもあるが、本明細書では代表して2−3プルダウンについて説明する。 2-3 in addition to the pull-down, the frame rate but also 2-2 pulldown used in the case of 30 frames / sec signals, are described herein in 2-3 pulldown on behalf.
【0008】 [0008]
図7に示すように、2−3プルダウンは、元々1フレームであった画像が2もしくは3フィールドに振り分けられている。 As shown in FIG. 7, 2-3 pulldown is allocated originally one frame at a picture within 2 or 3 fields. 図7(B)において、例えばフィールドaとフィールドa'は互いの走査線がずれた状態ではあるものの、同一の映像である。 In FIG. 7 (B), for example, although the field a and the field a 'is in the state shifted by one another scanning line, the same image. 従って、この変換の規則パターンさえ分かれば、隣接フィールドから走査線を補間(フィールド間補間)して順次走査に変換することができる。 Therefore, knowing even regular pattern of this transformation can be converted to progressive scan by interpolation (inter-field interpolation) scanning lines from the adjacent field. 60フィールド/秒のインターレース信号を順次走査に変換すると、図7(C)に示す60フレーム/秒の順次走査信号A,A,B,B,B,C,C…となる。 When converted to progressive scan interlaced signal of 60 fields / second, sequential scanning signals A 60 frames / sec shown in FIG. 7 (C), A, B, becomes B, B, C, and C ....
【0009】 [0009]
図6で説明したように、フィールド間補間は、前フィールドの画素F21または後フィールドの画素F01を新しい画素Yとすることによって新しい走査線を生成するので、折り返し歪みが少なく解像度も高い良好な変換画質が得られる。 As described in FIG. 6, the inter-field interpolation, because it produces a new scanning line by the pixel F01 pixel F21 or the succeeding field of the previous field and the new pixel Y, is high good conversion less resolution aliasing distortion image quality can be obtained. 2−3プルダウンの規則パターンを得る方法は、例えば、どのように振り分けて変換したかをコードで伝送する方法や、画像のフィールド間またはフレーム間の差分を統計的に処理することによって、自動的に規則パターンを推測する方法等がある。 2-3 a method for obtaining a pulldown regular pattern, for example, a method of transmitting or converted how sorting by the code, by statistically processing the differences between fields or between frames of the images, automatically and a method to estimate the rule patterns.
【0010】 [0010]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
しかしながら、上記のプルダウンの規則パターンを利用して順次走査に変換する方法では、次のような場合に不具合を生じる。 However, in the method of converting the sequential scanning using the above pull-down rule pattern, resulting in inconvenience in the following cases.
【0011】 [0011]
(1)プルダウンした規則性を有する映像に字幕等の付加信号が編集によってスーパーインポーズされ、部分的にプルダウンの規則パターンから外れた映像を有する場合。 (1) superimposed additional signal by editing such as subtitles in a video having a pull-down with regularity, if partially having an image out of the pulldown regular pattern.
(2)プルダウンした規則性を有する映像にピクチャ・イン・ピクチャ(PIP)によって通常のインターレース信号やプルダウンの規則パターンから外れた映像がはめ込まれ、部分的にプルダウンの規則パターンから外れた映像を有する場合。 (2) images that deviates from the normal interlace signal or pulldown regular pattern by the pull-down and regularity picture-in-picture image having (PIP) is fitted, partially with the image off the pulldown regular pattern case.
(3)つなぎ編集によって、プルダウンした映像の規則パターンが一時的に乱れる場合。 (3) by connecting editing, if the regular pattern of images pulled down temporarily disturbed.
【0012】 [0012]
上記(1),(2)の場合は、プルダウンした映像の規則パターンをコードで伝送する場合でも、規則パターンを統計的処理によって検出する場合でも大きな問題となる。 (1), in the case of (2), even when transmitting the code rule patterns of images pulled down, a serious problem even if detected by statistical processing regular pattern. また、上記(3)は、プルダウンした映像の規則パターンをコードで伝送する場合には問題となりにくいが、規則パターンを統計的処理によって検出する場合には、規則パターンの検出結果を修正するまでの間、誤った補間による順次走査変換となってしまうので問題となる。 Further, the (3), up to but less likely a problem when transmitting the code rule patterns of images pulled down, when detected by statistical processing rules pattern corrects the detection result of the regular pattern between, a problem since becomes sequential scanning conversion by erroneous interpolation.
【0013】 [0013]
本発明はこのような問題点に鑑みなされたものであり、プルダウンによってインターレースに変換されたインターレース映像信号に部分的または一時的な規則パターン外れがある場合に、適切な動き検出信号を出力することができる動き検出装置を提供し、プルダウンによってインターレースに変換されたインターレース映像信号に部分的または一時的な規則パターン外れがある場合でも、誤補間なく良好に順次走査変換することができる順次走査変換装置を提供することを目的とする。 The present invention has been made in view of such a problem, if there is a partial or temporary regular pattern deviated interlaced video signal converted into interlaced by the pull-down, it outputs the appropriate motion detection signal providing a motion detection device capable, even if there is a partial or temporary regular pattern deviated interlaced video signal converted into interlaced by the pull-down, progressive scan conversion apparatus which can satisfactorily interlacing without erroneous interpolation an object of the present invention is to provide a.
【0014】 [0014]
【課題を解決するための手段】 In order to solve the problems]
本発明は、上述した従来の技術の課題を解決するため、インターレース映像信号の動きを検出する動き検出装置において、前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィールド The present invention for solving the problems of the prior art described above, in the motion detector for detecting motion of the interlaced video signal, the interlaced video signal is converted into interlaced by the pull-down from the frame image having a predetermined frame rate by detecting whether an interlaced video signal, the interlaced video signal is interlaced video signal converted into interlaced by the pull-down, and the field after a field after one field of the target field and field of interest a common a first state indicating that a frame image, the interlaced video signal is interlaced video signal converted into interlaced by the pull-down, one field of the target field and the field of interest のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段(4)と、前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて、動き検出方法を切り換えて動き検出する動き検出回路(5)とを備え、前記動き検出回路は、前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部(50)と、前記注目フィールドと前記前フィールドとの差分に基づいて動き検出 And a second state indicating that the previous and the field has become a common frame image is a field, and a third state in which the interlaced video signal indicates that it is not an interlaced video signal converted into interlaced by the pull-down and pattern detecting means for detecting which one of the patterns (4), wherein the target field and the fields after previous field each signal is input, the said first state and said second state the depending on the third state, and a motion detection circuit (5) for motion detection by switching the motion detection method, the motion detection circuit, the motion detection based on a difference between the post-field and the field of interest between 1 field motion detector (50), motion detection based on a difference between the previous field and the field of interest る第2のフィールド間動き検出部(52)と、前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部(51)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部 That the second inter-field motion detection unit (52), the inter-frame motion detector for motion detection based on a difference between the post-field and the previous field (51), the pattern detecting means of the first state when it detects that the, if larger than the output of the output of the motion detector between the first field is the second field between the motion detecting unit, wherein an output of the first inter-field motion detector first the difference between the output of the motion detector between the two fields is outputted as a motion detection signal, a still picture when the output of the between the first field motion detector is not larger than the output of the second inter-field motion detector and it outputs a motion detection signal value indicating the pattern when the detecting means detects that it is the second state, the second field between the outputs of the motion detector of the first inter-field motion detector の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部(57)とを有することを特徴とする動き検出装置を提供する。 If greater than the output of the output of the second inter-field motion detector the difference between the output of the first inter-field motion detector outputs as a motion detection signal, the second inter-field motion detection output parts outputs a motion detection signal of a value indicating the still image to be larger than the output of the motion detector between the first field, when said pattern detecting means detects that it is the third state, providing a motion detector, characterized in that it comprises a motion-out detection signal output unit you outputs the output of the inter-frame motion detector as a motion detection signal (57).
また、本発明は、上述した従来の技術の課題を解決するため、インターレース映像信号の動きを検出する動き検出装置において、前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィ Further, the present invention is converted to solve the problems of the prior art described above, in the motion detector for detecting motion of the interlaced video signal, the interlaced video signal is interlaced by the pull-down from the frame image having a predetermined frame rate by detecting whether an interlaced video signal, said a interlaced video signal is interlaced video signal converted into interlaced by the pull-down, and the field after a field after one field of the target field and field of interest There a first state indicating that a common frame images, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down, 1 Fi of the field of interest and the field of interest ルド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段(4)と、前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて、動き検出方法を切り換えて動き検出する動き検出回路(5)とを備え、前記動き検出回路は、前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部(50)と、前記注目フィールドと前記前フィールドとの差分に基づいて動 And a second state indicating that the previous field field is a previous field has become a common frame images, the interlaced video signal is a third indicating that it is not an interlaced video signal converted into interlaced by the pull-down and pattern detecting means for detecting whether it is a pattern of the state (4), and the field of interest the rear field and the previous field each signal is input, said first state and said second state in accordance with the said third state, and a motion detection circuit (5) for motion detection by switching the motion detection method, the motion detection circuit, the motion detection based on a difference between the post-field and the field of interest motion detector between the first field (50), based on a difference between the previous field and the field of interest moving to 検出する第2のフィールド間動き検出部(52)と、前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部(51)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド A second inter-field motion detection unit for detecting (52), the previous field as an inter-frame motion detector for motion detection based on a difference between the post-field (51), said pattern detection means said first upon detecting that the state, if the output of the between the first field motion detector is greater than the output of the second inter-field motion detector, the output of the first inter-field motion detector and the difference between the output of the second inter-field motion detection unit, and outputs a small becomes towards the output of the inter-frame motion detector as a motion detection signal, the output of the between the first field motion detector is the first if greater than the output between the two field motion detector outputs a motion detection signal of a value indicating a still image when said pattern detecting means detects that it is the second state, the second field 間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部(57,58)とを有することを特徴とする動き検出装置を提供する。 If during the motion detector output is greater than the output of the motion detector between the first field, the difference between the outputs of said first inter-field motion detector of the motion detector between the second field When outputs a Write small becomes an output of the inter-frame motion detector as a motion detection signal, the output of the second inter-field motion detector is not larger than the output of the first inter-field motion detector and outputs a motion detection signal value indicating field still image when said pattern detecting means detects that it is the third state, the motion detection signal output for outputting an output of said interframe motion detector as a motion detection signal providing a motion detector, characterized in that it comprises a part (57, 58).
さらに、本発明は、上述した従来の技術の課題を解決するため、インターレース映像信号を順次走査の映像信号に変換する順次走査変換装置において、前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注 Furthermore, the present invention is to solve the problems of the prior art described above, in the progressive scan conversion device that converts the video signal of the progressive scan interlaced video signal, from the frame image of the interlaced video signal has a predetermined frame rate by detecting whether an interlaced video signal converted into interlaced by the pull-down, the interlaced video signal is interlaced video signal converted into interlaced by the pull-down, interest fields and field after one field of the field of interest a first state indicating that the field and are a common frame image after it, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down, the said field of interest Note フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段(4)と、前記注目フィールドの信号を用いてフィールド内補間信号を生成するフィールド内補間手段(3)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記注目フィールドに対する前記後フィールドの信号を用いて第1のフィールド間補間信号を生成し、前記パターン検出手段が前記第2の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号を用いて第2のフ Showing a second state indicating that the previous field is one field before the field field has become a common frame image, said interlaced video signal is not the interlaced video signal converted into interlaced by the pull-down the third and the state detected by the pattern detecting means which one of the patterns (4), and intra-field interpolation means (3) for generating a field interpolation signal using the signal of the target field, wherein the pattern detection when unit detects that it is the first state, the generating the first inter-field interpolation signal using the signal of the rear field for the target field and the pattern detecting means is in the second state upon detection of the second off using the signal of the previous field relative to the field of interest ールド間補間信号を生成し、前記パターン検出手段が前記第3の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号または前記後フィールドの信号を用いて第3のフィールド間補間信号を生成するフィールド間補間手段(6)と、前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて動き検出方法を切り換えて動き検出し、動き検出信号を出力する動き検出回路(5)と、前記フィールド内補間手段の出力と前記フィールド間補間手段の出力とを前記動き検出信号に応じて混合または切り換えて出力する補間信号出力手段(7)とを備え、前記動き検出回路は、前記注目フィールドと前記後フィールドとの差分に It generates Rudo interpolation signal, when said pattern detecting means detects that it is the third state, the third inter-field interpolation signal using the signal of the signal or the fields after the previous field relative to the field of interest and inter-field interpolation means (6) for generating the field of interest and each of the signal the previous field and the rear field is input, according to said first state and said second state and said third state switching a motion detecting method and the motion detection Te, a motion detecting circuit which outputs a motion detection signal (5), mixed in accordance with the outputs and the inter-field interpolation means of said intra-field interpolation unit to the motion detection signal or switching and an interpolation signal output means (7) for outputting the motion detection circuit, the difference between the fields after said field of interest 基づいて動き検出する第1のフィールド間動き検出部(50)と、前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部(52)と、前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部(51)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パ A first inter-field motion detector for motion detection based (50), a second inter-field motion detector for motion detection based on a difference between the previous field and the field of interest (52), said previous field inter-frame motion detector for motion detection based on a difference between the post-field (51), when said pattern detecting means detects that it is the first state, the first inter-field motion detector if the output is greater than the output of the second inter-field motion detector, the difference between the outputs of said second inter-field motion detector of the between the first field motion detector as a motion detection signal outputs, and outputs a motion detection signal of the value output of the first inter-field motion detection unit indicating a still image if not larger than the output of the motion detector between the second field, the path ーン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部(57)とを有することを特徴とする順次走査変換装置を提供する。 When the over down detection unit detects that it is the second state, the output of the second inter-field motion detector is equal greater than the output of the motion detector between the first field, the second the difference between the output of the inter-field motion detector and an output of the first inter-field motion detector outputs as a motion detection signal, the second inter-field motion detector output is the first inter-field motion detection if greater than the output parts outputting the motion detection signal of a value indicating the still image, when said pattern detecting means detects that it is the third state, the motion detection signal output from the inter-frame motion detector to have a motion-out detection signal output unit you output (57) as to provide a progressive scanning conversion apparatus and said.
さらにまた、本発明は、上述した従来の技術の課題を解決するため、インターレース映像信号を順次走査の映像信号に変換する順次走査変換装置において、前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前 Furthermore, the present invention is to solve the problems of the prior art described above, in the progressive scan conversion device that converts the video signal of the progressive scan interlaced video signal frame image in which the interlaced video signal has a predetermined frame rate after detecting whether an interlaced video signal converted into interlaced by the pull-down, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down, after one field of the target field and field of interest a first state indicating that the field and are a common frame image after a field is an interlaced video signal, wherein the interlaced video signal is converted into interlaced by the pull-down, the field of interest and the previous 注目フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段(4)と、前記注目フィールドの信号を用いてフィールド内補間信号を生成するフィールド内補間手段(3)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記注目フィールドに対する前記後フィールドの信号を用いて第1のフィールド間補間信号を生成し、前記パターン検出手段が前記第2の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号を用いて第2 And a second state indicating that the previous field is one field before the field field of interest is in the common frame image, said interlaced video signal is not the interlaced video signal converted into interlaced by the pull-down the third and the state detected by the pattern detecting means which one of the patterns (4), the intra-field interpolation means for generating an intra-field interpolation signal using the signal of the target field and (3), the pattern shown when the detecting means detects that it is the first state, the generating the first inter-field interpolation signal using the signal of the rear field for the target field, the pattern detecting means is in the second state upon detection of a, first by using the signal of the previous field relative to the field of interest 2 フィールド間補間信号を生成し、前記パターン検出手段が前記第3の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号または前記後フィールドの信号を用いて第3のフィールド間補間信号を生成するフィールド間補間手段(6)と、前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて動き検出方法を切り換えて動き検出し、動き検出信号を出力する動き検出回路(5)と、前記フィールド内補間手段の出力と前記フィールド間補間手段の出力とを前記動き検出信号に応じて混合または切り換えて出力する補間信号出力手段(7)とを備え、前記動き検出回路は、前記注目フィールドと前記後フィールドとの差 It generates inter-field interpolation signal, when said pattern detecting means detects that it is the third state, the third inter-field interpolation signal using the signal of the signal or the fields after the previous field relative to the field of interest and inter-field interpolation means (6) for generating the field of interest and each of the signal the previous field and the rear field is input, according to said first state and said second state and said third state switching a motion detecting method and the motion detection Te, a motion detecting circuit which outputs a motion detection signal (5), mixed in accordance with the outputs and the inter-field interpolation means of said intra-field interpolation unit to the motion detection signal or switching and an interpolation signal output means (7) for outputting the motion detection circuit, the difference between the fields after said field of interest 分に基づいて動き検出する第1のフィールド間動き検出部(50)と、前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部(52)と、前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部(51)と、前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でな The first inter-field motion detector for motion detection based on the frequency (50), a second inter-field motion detector for motion detection based on a difference between the previous field and the field of interest (52), wherein before field and the inter-frame motion detector for motion detection based on a difference between the post-field (51), when said pattern detecting means detects that it is the first state, the first inter-field motion detection if the output section is greater than the output of the motion detector between the second field, and the difference between the outputs of said second inter-field motion detector of the motion detector between the first field, the outputs Write small becomes the output of the inter-frame motion detector as a motion detection signal, the output of the between the first field motion detection unit Do de larger than the output of the motion detector between the second field れば静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 、前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部(57,58)とを有することを特徴とする順次 And outputs a motion detection signal of a value indicating the lever still image, the pattern when the detecting means detects that it is the second state, between the fields output by the first motion detection unit between the second field if greater than the output of the motion detector, and the difference between the outputs of said first inter-field motion detector of the second inter-field motion detector, the small and the output of the inter-frame motion detector made towards the outputs as a motion detection signal, and outputs a motion detection signal of the second field between a value indicating a static image if the output of the motion detection unit is not larger than the output of the motion detector between the first field when said pattern detecting means detects that it is the third state, and characterized in that it has a motion detection signal output unit (57, 58) for outputting the output of the inter-frame motion detector as a motion detection signal sequentially 査変換装置を提供する。 Providing 査 converter.
【0015】 [0015]
【発明の実施の形態】 DETAILED DESCRIPTION OF THE INVENTION
以下、本発明のインターレース映像信号の動き検出装置及びこれを用いた順次走査変換装置について、添付図面を参照して説明する。 Hereinafter, the progressive scanning conversion apparatus using motion detection device and which of the interlaced video signal of the present invention will be described with reference to the accompanying drawings. 図1は本発明のインターレース映像信号の動き検出装置及びこれを用いた順次走査変換装置の一実施形態を示すブロック図、図2は図1中の動き検出回路5の具体的構成例を示すブロック図、図3は図1中の動き検出回路5の他の具体的構成例を示すブロック図、図4は図2の動作を説明するための波形図である。 Figure 1 is a block diagram illustrating one embodiment of a progressive scanning conversion apparatus using a motion detector and its interlaced video signal of the present invention, the block 2 is showing a specific configuration of the motion detection circuit 5 in FIG. 1 FIG, 3 is a block diagram showing another specific configuration example of the motion detection circuit 5 in FIG. 1, FIG. 4 is a waveform diagram for explaining the operation of Figure 2.
【0016】 [0016]
図1において、入力端子1より入力されたインターレース映像信号は、フィールドメモリ21,22によって順次遅延される。 In Figure 1, interlaced video signal input from the input terminal 1 is sequentially delayed by the field memories 21 and 22. 入力端子1より入力されたインターレース映像信号をフィールドf0、フィールドメモリ21の出力をフィールドf1、フィールドメモリ22の出力をフィールドf2とする。 The interlaced video signal input from the input terminal 1 field f0, field f1 the output of the field memory 21, the output of the field memory 22 and field f2. なお、この図1の構成では、フィールドf0を1フィールド遅延したフィールドf1を基準のフィールドとして扱うため、フィールドf1を注目フィールド、フィールドf0を後フィールド、フィールドf2を前フィールドと称することとする。 In the configuration of FIG. 1, for handling field f1 with the field f0 and 1 field delay as a field of reference, and that the fields f1 field of interest, the rear field f0 field, the field f2 is referred to as the previous field.
【0017】 [0017]
動画補間回路3には、注目フィールドf1が入力される。 The moving image interpolation circuit 3, the noted field f1 is input. 動画補間回路3は注目フィールドf1の信号を用いて動画補間信号Mを生成する。 Video interpolation circuit 3 generates a video interpolation signal M using the signal of the target field f1. 動画補間回路3による動画補間信号Mの生成方法は特に限定されないが、図6で説明したように、上下に位置する走査線の平均値をとる方法が一般的である。 Although video generation method of the moving image interpolation signal M by the interpolation circuit 3 is not particularly limited, as described in FIG. 6, a method of taking the average value of the scanning lines located above and below are common.
【0018】 [0018]
パターン検出回路4には、注目フィールドf1と後フィールドf0とが入力される。 The pattern detection circuit 4, a field of interest f1 and the rear field f0 is input. パターン検出回路4は2−3プルダウンの規則パターンを検出し、パターン検出信号Pを出力する。 Pattern detection circuit 4 detects 2-3 pulldown regular pattern, and outputs a pattern detection signal P. パターン検出回路4は、入力された注目フィールドf1と後フィールドf0の差分の積算値を数〜数十フィールドに渡って統計的に計算することにより、2−3プルダウンの規則パターンを検出する。 Pattern detection circuit 4, by statistically calculated over several to several tens field an integrated value of the difference between the succeeding field f0 a field of interest f1 input, detects a 2-3 pulldown regular pattern. プルダウンの規則パターンを統計的処理によって検出する回路構成自体は公知であるので、パターン検出回路4の具体的構成については省略する。 Since the circuit configuration itself be detected by statistical processing pulldown regular pattern is known, it will be omitted specific configuration of the pattern detecting circuit 4. 規則パターンの検出方法は、これに限定されるものではない。 Detection method of regular pattern is not limited thereto.
【0019】 [0019]
パターン検出回路4より出力されるパターン検出信号Pは、少なくとも次の3つの状態を有している。 Pattern detection signal P output from the pattern detection circuit 4 has at least three states.
(状態1)入力された映像信号がプルダウン変換されたもので、かつ、元のフレームが後フィールドに振り分けられ、注目フィールドと後フィールドとが共通のフレーム画像であると判定された状態。 State (state 1) the input video signal is one pulled down converted, and distributed to the rear field the original frame, a succeeding field and field of interest is determined to be a common frame image.
(状態2)入力された映像信号がプルダウン変換されたもので、かつ、元のフレームが前フィールドに振り分けられ、注目フィールドと前フィールドとが共通のフレーム画像であると判定された状態。 State (state 2) the input video signal is one pulled down conversion, and the original frame is allocated to the previous field, field of interest and the preceding field is determined to be a common frame image.
(状態3)入力された映像信号がプルダウン変換されたものではないと判定された状態。 (Condition 3) state in which the input video signal is determined to not have been pulldown conversion.
【0020】 [0020]
なお、2−3プルダウンの場合、元のフレームが後フィールドと前フィールドの両方に振り分けられている状態が存在するが、ここでは(状態2)として扱うこととする。 In the case of 2-3 pull-down, but there is a state in which the original frame is allocated to both the rear and previous fields, here and be treated as (state 2). 勿論、(状態1)として扱っても問題ない。 Of course, there is no problem be treated as (state 1).
【0021】 [0021]
動き検出回路5には、後フィールドf0と注目フィールドf1と前フィールドf2とが入力される。 The motion detection circuit 5, and the rear field f0 a field of interest f1 and the previous field f2 is input. 動き検出回路5には、また、パターン検出信号Pが入力される。 The motion detection circuit 5, also, the pattern detection signal P is input. 動き検出回路5は、パターン検出信号Pに応じて、即ち、上述した(状態1)〜(状態3)の3つの状態に応じて、動き検出方法を切り換える。 The motion detection circuit 5, in accordance with the pattern detection signal P, that is, according to three states of the above-described (condition 1) to (Condition 3), it switches the motion detection method. 動き検出回路5は、動き検出の結果、動き検出信号Kを出力する。 Motion detection circuit 5, the result of the motion detection, and outputs a motion detection signal K. 動き検出回路5の具体的構成及び動き検出方法を切り換え動作については後述する。 It will be described later operation switches the specific structure and motion detection method of the motion detection circuit 5.
【0022】 [0022]
選択回路6には、後フィールドf0と前フィールドf2とが入力される。 A selection circuit 6, a rear field f0 and the previous field f2 is input. 選択回路6はパターン検出信号Pに応じて後フィールドf0と前フィールドf2との一方を選択し、選択した信号を静止画補間信号Sとして出力する。 Selection circuit 6 while select the subsequent field f0 a previous field f2 in response to the pattern detection signal P, and outputs the selected signal as a still picture interpolation signal S. 選択回路6は、パターン検出信号Pが上記の(状態1)を表すとき、後フィールドf0を選択し、(状態2)を表すとき、前フィールドf2を選択する。 Selection circuit 6, when the pattern detection signal P is representative of the (state 1), to select the subsequent field f0, to represent a (state 2), selects the previous field f2. (状態3)を表すときは後フィールドf0と前フィールドf2とのいずれを選択してもよいが、ここでは前フィールドf2を選択することとする。 You may select one of the subsequent field f0 a previous field f2 when representing the (state 3), but here to be selected previous field f2.
【0023】 [0023]
図1に破線で囲んで示すように、動き検出回路5と選択回路6とは本発明の動き検出装置を構成している。 As shown enclosed by broken lines in FIG. 1, the selection circuit 6 and the motion detection circuit 5 constitute a motion detection device of the present invention.
【0024】 [0024]
混合回路7には、動画補間信号Mと静止画補間信号Sと動き検出信号Kが入力される。 A mixing circuit 7, video interpolation signal M and the still picture interpolation signal S and the motion detection signal K is inputted. 混合回路7は、動画補間信号Mと静止画補間信号Sとを、動き検出信号Kに応じて適応的に混合し、補間信号Hを出力する。 Mixing circuit 7, a still picture interpolation signal S and the moving image interpolation signal M, adaptively mixed according to the motion detection signal K, and outputs the interpolated signal H. 動き検出回路5で完全に静止画と判定された場合はK=0、完全に動画と判定された場合はK=1、中間的な場合は0<K<1とすると、 If it is determined that the completely still image by the motion detection circuit 5 K = 0, completely if it is determined that the moving image K = 1, the intermediate cases is the 0 <K <1,
H=S×(1−K)+M×K …(1) H = S × (1-K) + M × K ... (1)
となる。 To become.
【0025】 [0025]
なお、混合回路7の代わりに選択回路を設け、動き検出信号Kに応じて、動画補間信号Mと静止画補間信号Sとを択一的に切り換えてもよい。 Note that the selection circuit instead of the mixing circuit 7 is provided, in accordance with the motion detection signal K, it may be alternatively switched between the still picture interpolation signal S and the moving image interpolation signal M. 但し、混合回路7の方が好ましい。 However, towards the mixing circuit 7 is preferred.
【0026】 [0026]
倍速処理回路81には、非補間信号である注目フィールドf1が入力され、倍速処理回路81は注目フィールドf1の信号を倍速化して出力する。 The speed processing circuit 81, a non-interpolated signal of interest field f1 is inputted, doubling processing circuit 81 and outputs the double-speed signal of interest field f1. 倍速処理回路82には、混合回路7より出力された補間信号Hが入力され、倍速処理回路82は補間信号Hを倍速化して出力する。 The speed processing circuit 82, the output interpolated signal H from the mixing circuit 7 is input, doubling processing circuit 82 and outputs the double-speed interpolation signal H. そして、選択回路9は、倍速処理回路81の出力と倍速処理回路82の出力とを交互に選択して、順次走査信号を出力する。 The selection circuit 9, the outputs of the doubling processing circuit 82 of the double-speed processing circuit 81 alternately selects and outputs a progressive scanning signal. 順次走査信号は出力端子10より出力される。 Sequential scanning signals are outputted from the output terminal 10.
【0027】 [0027]
本発明の特徴の1つは、動き検出回路5が、プルダウンの規則パターンに従って、少なくとも3つの動作モード(動き検出方法)を有していることである。 One feature of the present invention, the motion detection circuit 5, according to the rules pattern pulldown is that it has at least three operating modes (motion detection method). 従来においては、プルダウンの規則パターンが検出されると、動き検出を完全に禁止し、動画補間を完全に不動作としていたが、本発明では、プルダウンの規則パターンが検出された場合、動き検出を完全に禁止するのではなく、動き検出を部分的に働かせて、動画補間を部分的に動作させるようにする。 Conventionally, when the pull-down rule pattern is detected, and completely inhibited the motion detection has been completely inoperative the video interpolation, in the present invention, if the pull-down rule pattern is detected, the motion detection completely rather than inhibited, by exercising motion detection in part, so as to partially operate the video interpolation.
【0028】 [0028]
ここで、図2を用いて動き検出回路5の具体的構成例について説明する。 Here is a description of a specific configuration example of the motion detection circuit 5 with reference to FIG. 図2において、フレーム差分検出回路51には、後フィールドf0と前フィールドf2とが入力される。 In Figure 2, the frame difference detecting circuit 51, a rear field f0 and the previous field f2 is input. フレーム差分検出回路51は、後フィールドf0と前フィールドf2との差分を検出して、フレーム差分検出信号D1を出力する。 Frame difference detection circuit 51 detects the difference between the subsequent field f0 a previous field f2, and outputs a frame difference detection signal D1. フレーム差分検出信号D1は、後フィールドf0と前フィールドf2との差分の絶対値であり、 Frame difference detection signal D1 is the absolute value of the difference between the previous field f2 and the rear field f0,
D1=|f2−f0| …(2) D1 = | f2-f0 | ... (2)
となる。 To become. フレーム差分検出回路51は、後フィールドf0と前フィールドf2とに基づいて2フィールド(1フレーム)間の動きを検出するフレーム間動き検出部である。 Frame difference detection circuit 51 is interframe motion detector which detects a motion between two fields (one frame) based on the subsequent field f0 and previous field f2.
【0029】 [0029]
フィールド差分検出回路50には、後フィールドf0と注目フィールドf1とが入力される。 The field difference detecting circuit 50, a rear field f0 and noted field f1 is input. フィールド差分検出回路50は、後フィールドf0と注目フィールドf1との差分を検出して、フィールド差分検出信号d0を出力する。 Field difference detecting circuit 50 detects a difference between the target field f1 and the rear field f0, and outputs the field difference detection signal d0. フィールド差分検出信号d0は、後フィールドf0と注目フィールドf1との差分の絶対値であり、 Field difference detection signal d0 is the absolute value of the difference between the target field f1 and the rear field f0,
d0=|f1−f0| …(3) d0 = | f1-f0 | ... (3)
となる。 To become. フィールド差分検出回路50は、後フィールドf0と注目フィールドf1に基づいて1フィールド間の動きを検出するフィールド間動き検出部である。 Field difference detecting circuit 50 is inter-field motion detector to detect motion of one field based on the field of interest f1 and rear field f0.
【0030】 [0030]
フィールド差分検出回路52には、前フィールドf2と注目フィールドf1とが入力される。 The field difference detecting circuit 52, the previous field f2 and the field of interest f1 is input. フィールド差分検出回路52は、前フィールドf2と注目フィールドf1との差分を検出して、フィールド差分検出信号d2を出力する。 Field difference detecting circuit 52 detects a difference between the previous field f2 of interest field f1, and outputs the field difference detection signal d2. フィールド差分検出信号d2は、前フィールドf2と注目フィールドf1との差分の絶対値であり、 Field difference detection signal d2 is the absolute value of the difference between the previous field f2 and the field of interest f1,
d2=|f1−f2| …(3) d2 = | f1-f2 | ... (3)
となる。 To become. フィールド差分検出回路52は、前フィールドf2と注目フィールドf1に基づいて1フィールド間の動きを検出するフィールド間動き検出部である。 Field difference detecting circuit 52 is inter-field motion detector to detect motion of one field based on the field of interest f1 and previous field f2. なお、フィールド差分検出回路52を設ける代わりに、フィールド差分検出信号d0を1フィールド遅延させて、フィールド差分検出信号d2とすることも可能である。 Instead of providing the field difference detecting circuit 52, the field difference detection signal d0 and delayed by one field, it is also possible to field difference detection signal d2.
【0031】 [0031]
2つのフィールド差分検出信号d0,d2は、減算回路53,54に入力される。 Two field difference detection signal d0, d2 are input to the subtraction circuit 53 and 54. 減算回路53はd0−d2を求め、減算回路54はd2−d0を求める。 Subtraction circuit 53 obtains the d0-d2, subtracting circuit 54 finds the d2-d0. 減算回路53,54の出力はそれぞれリミッタ55,56に入力される。 The output of the subtraction circuit 53 and 54 are respectively input to the limiter 55. リミッタ55,56は入力が負になった(アンダーフローした)場合に、0に制限するためのものである。 Limiter 55, 56 when the input is negative (underflow), it is intended to limit to zero. 即ち、減算回路53,54の出力が負になると、リミッタ55,56の出力は0になる。 That is, when the output of the subtraction circuit 53 and 54 is negative, the output of the limiter 55 and 56 becomes zero.
【0032】 [0032]
フレーム差分検出回路51の出力であるフレーム差分検出信号D1と、リミッタ55の出力信号D0と、リミッタ56の出力信号D2は、選択回路57に入力される。 A frame difference detection signal D1 which is the output of the frame difference detecting circuit 51, the output signal D0 of the limiter 55, the output signal D2 of the limiter 56 is input to the selection circuit 57. 選択回路57には、上述したパターン検出信号Pが入力され、選択回路57はパターン検出信号Pに応じていずれかの入力信号を選択し、最終的な動き検出信号Kを得る。 The selection circuit 57, the above-described pattern detection signal P is inputted, the selecting circuit 57 selects one of the input signals in accordance with the pattern detection signal P, to obtain a final motion detection signal K. 選択回路57は、パターン検出信号Pが上記の(状態1)を表すときはD0を選択し、(状態2)を表すときはD2を選択し、(状態3)を表すときはD1を選択する。 Selection circuit 57, when the pattern detection signal P is representative of the (Condition 1) select D0, select D2 when representing the (state 2), selects D1 when representing the (state 3) . 選択回路57は、動き検出信号出力部となっている。 Selection circuit 57 has a motion detection signal output unit.
【0033】 [0033]
図2は、基本的構成のみを示している。 Figure 2 shows only the basic configuration. 画像のエッジ部分での誤検出を避ける目的で、例えば、フレーム差分検出回路51及びフィールド差分検出回路50,52の後段にフィルタを設けて、フレーム差分検出回路51及びフィールド差分検出回路50,52の出力に各種のフィルタ処理を施したり、さらに後段で感度(ゲイン)制御を行うこともある。 In order to avoid erroneous detection of an edge portion of an image, for example, a filter disposed downstream of the frame difference detecting circuit 51 and the field difference detecting circuit 50 and 52, the frame difference detecting circuit 51 and the field difference detecting circuit 50, 52 or performs various filtering the output, sometimes further the sensitivity (gain) control at a later stage. また、フィールド間差分検出の場合に、走査線位相を一致させ、かつ、垂直高域成分による誤検出を避ける目的で、フィールド差分検出回路50,52の入力信号に対して垂直フィルタ処理を施すこともある。 In the case of the inter-field difference detection, to match the scan line phase, and, in order to avoid error detection due to vertical high-frequency component, it is subjected to vertical filtering to the input signal of the field difference detecting circuit 50, 52 there is also.
【0034】 [0034]
次に、図2のように構成して、上記のように動作させる理由について説明する。 Next, configured as shown in FIG. 2 will be described why be operated as described above. まず、(状態3)の場合には、プルダウンの規則パターンが検出されていないので、フレーム差分検出回路51の出力であるフレーム差分検出信号D1を選択することにより、順次走査変換回路の動き検出として一般的に用いられるフレーム差分検出を用いている。 First, in the case of (state 3), since the pull-down rule pattern is not detected, by selecting a frame difference detection signal D1 which is the output of the frame difference detecting circuit 51, as a motion detection progressive scan conversion circuit is used generally frame difference detected for use.
【0035】 [0035]
そして、(状態1)の場合には、プルダウンで振り分けた組み合わせが後フィールドの場合であるので、本来、後フィールドf0と注目フィールドf1との差分d0は現れないはずである。 And, in the case of (state 1), since the combination of the distribution in the pull-down is the case of the rear field, originally, the difference d0 between the target field f1 and the rear field f0 should not appear. ところが、従来の問題点として説明したように、字幕等が後から編集で加えられた場合には規則パターンから局所的に外れていることがある。 However, as described as a conventional problem, sometimes it deviates locally from the regular pattern when made in the editing subtitles and the like later. このような場合には、後フィールドf0と注目フィールドf1との差分d0が局所的に出力される。 In such a case, the difference d0 between the target field f1 and the rear field f0 is output locally. 字幕は連続的に動いているわけではないので、字幕部分では逆に前フィールドf2と注目フィールドf1との差分d2は現れない。 Since the subtitle is not running continuously, the difference d2 between the target field f1 and f2 before field to reverse the caption part does not appear.
【0036】 [0036]
本発明は、この性質を利用して、減算回路53とリミッタ55によってフィールド差分検出信号d0とフィールド差分検出信号d2とを比較し、フィールド差分検出信号d0がフィールド差分検出信号d2より大きい部分、即ち、プルダウンの規則パターンから外れた特異的な部分だけ、動き判定させることができる。 The present invention takes advantage of this property, the subtracting circuit 53 and compares the field difference detection signal d0 and the field difference detection signal d2 by the limiter 55, the field difference detection signal d0 field difference detection signal d2 larger parts, only specific parts deviating from pulldown regular pattern, it is possible to motion determination. なお、局所的とか特異的な部分と表現したが、つなぎ編集等で規則パターンが画面全体で乱れることもあり、この場合は、当然ながら、画面全体が動き判定される。 Although expressed locally Toka specific partial, sometimes the regular pattern in joint editing, etc. disturbed the entire screen, in this case, of course, the entire screen is determined motion.
【0037】 [0037]
一方、(状態2)の場合には、(状態1)とは逆の動作により、減算回路54とリミッタ56によってフィールド差分検出信号d0とフィールド差分検出信号d2とを比較し、フィールド差分検出信号d2がフィールド差分検出信号d0より大きい部分だけ、動き判定させることができる。 On the other hand, in the case of (state 2), the inverse operation to (state 1) and compares the field difference detection signal d0 and the field difference detection signal d2 by subtracting circuit 54 and the limiter 56, the field difference detection signal d2 There only field difference detection signal d0 larger portion can be motion determination.
【0038】 [0038]
さらに、プルダウンされた映像に字幕が重畳されて、部分的に規則パターンから外れた場合の動作について、図4の波形図を用いて説明する。 Furthermore, it is superimposed subtitles pulldown video, the operation when deviated from partially regular pattern, it will be described with reference to the waveform diagram of FIG. 図4は、フレームレートが24フレーム/秒の画像(24フレーム画像)を2−3プルダウンによってインターレース映像信号に変換した状態を示している。 4, the frame rate shows a state converted into an interlace video signal of 24 frames / second image (24 frame images) by 2-3 pulldown. なお、図4において、元のフレームが2フィールドに振り分けられた部分と3フィールドに振り分けられた部分とを理解しやすいよう、2フィールドに振り分けられた部分と3フィールドに振り分けられた部分との間に破線を付している。 Incidentally, during the 4, so that the original frame is easy to understand and a portion allocated to parts and 3 fields distributed to two fields, the distribution was part portion and three fields distributed to two fields It is denoted by the dotted line in.
【0039】 [0039]
図4において、tは時間方向であり、24フレーム画像は(A)から(H)へと変化していく。 In FIG. 4, t is the time direction, 24 frame image will change to the (A) (H). 図4(A)〜(D)に示すように、24フレーム画像の一部に編集によって字幕が重畳されている。 As shown in FIG. 4 (A) ~ (D), it is superimposed subtitles by editing a part of the 24-frame image. 字幕は、図4(E)のフィールドでは消滅している。 Subtitles, has disappeared in the field of FIG. 4 (E). 前フィールドf2と注目フィールドf1と後フィールドf0が、それぞれ、図4(D)〜(F)の状態であるとする。 Before the rear field f2 and the field of interest f1 field f0, respectively, and in the state of FIG. 4 (D) ~ (F). 図4の例は、プルダウンの組み合わせが前フィールドf2と注目フィールドf1になっているので、上述した(状態2)に相当する。 The example of FIG. 4, since the combination of the pull-down is in the field of interest f1 and previous field f2, corresponding to the above-described (condition 2). このとき、図1における選択回路6は前フィールドf2を選択し、動き検出回路5の選択回路57はリミッタ56の出力信号D2を選択している。 At this time, selection circuit 6 in FIG. 1 selects the previous field f2, the selection circuit 57 of the motion detection circuit 5 selects the output signal D2 of the limiter 56.
【0040】 [0040]
図4(I)には、フィールド差分検出信号d2(=|f1−f2|)を示しており、図4(J)には、フィールド差分検出信号d0(=|f1−f0|)を示している。 FIG 4 (I), the field difference detection signal d2 indicates the, in FIG. 4 (J), the field difference detection signal d0 (= | | f1-f2) (= | f1-f0 |) shows the there. フィールド差分検出信号d0とフィールド差分検出信号d2とを比較すれば分かるように、字幕部分以外の24フレーム画像では、フィールド差分検出信号d0の方がフィールド差分検出信号d2より大きくなっている。 As can be seen from the comparison between the field difference detection signal d0 and the field difference detection signal d2, in the 24-frame image other than the caption part, towards the field difference detection signal d0 is greater than the field difference detection signal d2. しかしながら、字幕部分では、フィールド差分検出信号d2の方がフィールド差分検出信号d0より大きくなっている。 However, in the caption part, towards the field difference detection signal d2 is greater than the field difference detection signal d0. このとき、減算回路54の出力はリミッタ56によってリミットされないので、出力信号D2が出力され、字幕部分のみ動き判定されることになる。 At this time, since the output of the subtraction circuit 54 is not the limit by the limiter 56, the output signal D2 is outputted, it will be motion determination caption portion only.
【0041】 [0041]
次に、図3を用いて、動き検出回路5の他の構成例について説明する。 Next, with reference to FIG. 3, illustrating another configuration example of the motion detection circuit 5. 図3において、図2と同一部分には同一符号を付し、その説明を適宜省略する。 3 are denoted by the same reference numerals in FIG. 2 the same parts, and their description will not be repeated. 図3が図2と異なるのは、選択回路57の出力とフレーム差分検出信号D1との最小値を計算するための最小値演算回路58を設けた点である。 Figure 3 is different from the FIG. 2, in that a minimum value calculating circuit 58 for calculating the minimum value of the output and the frame difference detection signal D1 of the selection circuit 57. 最小値演算回路58は、選択回路57の選択結果とフレーム差分検出信号D1とのいずれがより小さいかを計算し、より小さい方を最終的な動き検出信号Kとして出力する。 Minimum value calculating circuit 58, which of the selection result and the frame difference detection signal D1 of the selection circuit 57 calculates the less than or outputs more smaller as final motion detection signal K.
【0042】 [0042]
図3の例では、まず、選択回路57によって、フレーム差分検出信号D1とリミッタ55の出力信号D0とリミッタ56の出力信号D2の内から1つを選択し、そして、最小値演算回路58によって、選択回路57の選択結果とフレーム差分検出信号D1との内の小さい方を選択するようにしているが、次のように構成してもよい。 In the example of FIG. 3, first, the selection circuit 57 selects one from among the output signal D2 of the output signal D0 and the limiter 56 of the frame difference detection signal D1 and the limiter 55, and, by the minimum value calculating circuit 58, Although in so doing selects the smaller of the selection result and the frame difference detection signal D1 of the selection circuit 57 may be configured as follows. リミッタ55の出力信号D0とリミッタ56の出力信号D2それぞれに対し、フレーム差分検出信号D1との最小値をとり、その後に、(状態1)〜(状態3)に応じていずれかの信号を選択してもよい。 Selected for the output signal D2 respective outputs signals D0 and the limiter 56 of the limiter 55, takes a minimum value of the frame difference detection signal D1, thereafter, one of the signals in accordance with (Condition 1) to (Condition 3) it may be.
【0043】 [0043]
即ち、(状態1)のときには、フィールド差分検出回路50の出力であるフィールド差分検出信号d0がフィールド差分検出回路52の出力であるフィールド差分検出信号d2より大なるときのフィールド差分検出信号d0とフィールド差分検出信号d2との差分と、フレーム差分検出回路51の出力であるフレーム差分検出信号D1との小なる方を動き検出信号として出力すればよい。 That is, when (state 1) of the field difference detection signal d0 and field when the field difference detection signal d0 is the output of the field difference detecting circuit 50 becomes larger than the field difference detection signal d2 is output field difference detecting circuit 52 the difference between the difference detection signal d2, may be output toward the small becomes the frame difference detection signal D1 which is the output of the frame difference detecting circuit 51 as a motion detection signal.
【0044】 [0044]
また、(状態2)のときには、フィールド差分検出回路52の出力であるフィールド差分検出信号d2がフィールド差分検出回路50の出力であるフィールド差分検出信号d0より大なるときのフィールド差分検出信号d2とフィールド差分検出信号d0との差分と、フレーム差分検出回路51の出力であるフレーム差分検出信号D1との小なる方を動き検出信号として出力すればよい。 Further, when the (state 2), field-field difference detection signal d2 and the field at which the output field difference detection signal d2 is becomes larger than the field difference detection signal d0 is the output of the field difference detecting circuit 50 of the difference detection circuit 52 the difference between the difference detection signal d0, may be output toward the small becomes the frame difference detection signal D1 which is the output of the frame difference detecting circuit 51 as a motion detection signal. さらに、(状態3)のときには、フレーム差分検出回路51の出力であるフレーム差分検出信号D1を動き検出信号として出力すればよい。 Further, when the (state 3) may output a frame difference detection signal D1 which is the output of the frame difference detecting circuit 51 as a motion detection signal. 図3の構成では、選択回路57及び最小値演算回路58が、動き検出信号出力部となっている。 In the configuration of FIG. 3, the selection circuit 57 and the minimum value calculation circuit 58, and has a motion detection signal output unit.
【0045】 [0045]
この図3のように構成する狙いは、フィールド差分検出回路50,52が垂直高域成分を多く含んだ部分で誤検出しやすいので、その誤検出を避けることである。 The aim configured as shown in FIG. 3, since the field difference detecting circuit 50, 52 is easily detected erroneously in the portion containing much vertical high-frequency component is to avoid the false detection. フィールド差分検出は、本来静止している画像でも垂直高域成分を多く含んだ部分では動き判定してしまう。 Field difference detection, thereby determining the motion in laden portion also vertical high-frequency component in an image that is originally stationary. これを防ぐために垂直方向のローパスフィルタ(垂直LPF)を用いることが多いが、完全に抑えることはできない。 This is often used a vertical low-pass filter (vertical LPF) in order to prevent, but can not be completely suppressed. 本発明では、字幕部分を検出することを1つの目的としており、垂直LPFによって垂直高域成分を除去し過ぎると、字幕部分が動き検出されにくくなり、本発明の効果が薄れてしまうことになる。 In the present invention, to detect that part of the subtitles is set to one object, too removed vertical high-frequency component by the vertical LPF, so that the caption part is less likely to be detected motion, it wanes the effect of the present invention .
【0046】 [0046]
これに対し、フレーム差分検出回路51によるフレーム差分検出にはフィールド差分検出のような不具合はないので、フィールド差分検出であるリミッタ55,56の出力信号D0,D2のいずれかが選択された場合でも、最小値演算回路58によって、フレーム差分検出信号D1との最小値を求めれば、誤った動き検出信号Kを出力することはない。 In contrast, there is no trouble such as a field difference detected in frame difference detection by frame difference detection circuit 51, even if one of the output signals D0, D2 of the limiter 55, 56 is a field difference detected is selected , by the minimum value calculating circuit 58, by obtaining the minimum value of the frame difference detection signal D1, does not output the erroneous motion detection signal K. 図3の構成では、垂直高域成分を除去するための垂直LPFの特性を緩やかにすることが可能である。 In the configuration of FIG. 3, it is possible to moderate the characteristic of vertical LPF for removing vertical high-frequency component. よって、コストダウンも可能である。 Thus, cost reduction is also possible. 以上の点から、動き検出回路5としては、図2の構成よりも図3の構成の方が好ましい。 In view of the foregoing, the motion detection circuit 5, it is preferable in the configuration of FIG. 3 than the configuration of FIG. 2.
【0047】 [0047]
以上のようにして、本発明の動き検出装置においては、プルダウンの規則パターンを検出したときでも、その規則パターンから外れた部分では動き検出を動作させ、動き検出信号を発生させる。 As described above, in the motion detecting apparatus of the present invention, even when detecting a pull-down rule pattern, to operate the motion detection in the portion deviated from the regular pattern, and generates a motion detection signal. よって、そのような部分では適切な動き検出信号を出力することができる。 Therefore, it is possible to output an appropriate motion detection signal in such a portion. 本発明の動き検出装置を用いた本発明の順次走査変換装置においては、規則パターンから外れた部分を有する場合でも、誤補間なく良好に順次走査変換することができる。 In progressive scanning conversion device of the present invention using the motion detecting apparatus of the present invention, even when having a portion deviated from the regular pattern, it is possible to satisfactorily interlacing without erroneous interpolation.
【0048】 [0048]
なお、規則パターンから外れた部分では動画処理され、図6の上下ラインの画素F10,F12から補間信号を得るため、フリッカ妨害や垂直解像度の低下をもたらすが、1フィールド分(60フレーム/秒に対して1枚の画像)しかその妨害を受けないので、全く問題となることはない。 Incidentally, the moving picture processing in the portion deviated from the regular pattern, for obtaining an interpolation signal from the pixel F10, F12 of the upper and lower lines of Figure 6, leads to a decrease in the flicker disturbance and vertical resolution, in one field (60 frames / sec because not subject to the interference one image) only for, it does not become a problem at all.
【0049】 [0049]
以上の基本的構成を基にして次のような変形例とすることができる。 It may be modified as follows based on the basic configuration described above. 図1において、選択回路6が後フィールドf0と前フィールドf2のいずれを選択してもよい場合、即ち、(状態3)のようにプルダウン変換されたものではないと判定された場合や元のフレームが後フィールドと前フィールドの両方に振り分けられている場合には、選択回路6の選択肢として、後フィールドf0と前フィールドf2との平均値を追加してもよい。 In Figure 1, when the selection circuit 6 may select one and subsequent field f0 of the previous field f2, i.e., the case and the original frame is determined to not have been pulled down converted as (state 3) There if they have been distributed to both rear and previous fields, as the choice of the selection circuit 6 may be added average of the subsequent field f0 a previous field f2.
【0050】 [0050]
また、動き検出回路5の構成においても基本的な部分だけを示したが、動き検出の精度を上げる技術を盛り込んでもよい。 Further, although the only essential part in the configuration of the motion detection circuit 5, may incorporate a technique to improve the accuracy of motion detection. 例えば、(状態3)の場合であるプルダウン変換されたものではない通常の60フィールド/秒の映像に対しては、フレーム差分検出信号D1しか動き検出信号として用いていないが、フレーム差分検出信号D1に加えて、フィールド差分検出信号d0,d2を複合的に用いて、動き検出信号を生成してもよい。 For example, for (state 3) when a is pulldown-converted not have normal 60 fields / sec video, only frame difference detection signal D1 is not used as a motion detection signal, frame difference detection signal D1 in addition to the field difference detection signal d0, d2 used in a composite manner, may generate a motion detection signal.
【0051】 [0051]
プルダウンの規則パターンを検出する手段は任意であり、後フィールドf0と前フィールドf2のフレーム差分が5フィールド周期になっていることを検出する方法や送信側からコード化されて伝送されたものをデコードする方法でもよい。 Means for detecting a pull-down of the regular pattern is arbitrary, it decodes those transmitted are coded from the process and the transmitting side detects that the rear field f0 frame difference of the previous field f2 is set to 5 field periods it may be a method to. また、プルダウンは2−3プルダウンに限定されることはなく、2−2プルダウンであってもよい。 Further, the pull-down is not limited to 2-3 pulldown, it may be a 2-2 pulldown. 本発明によれば、規則パターンがずれた場合でも大きな問題とはならないので、規則パターンを検出するための精度をさほどあげる必要がない。 According to the present invention, since not a serious problem even if the deviation is regular pattern, it is not necessary to increase much the accuracy for detecting the regular pattern. よって、コストダウンが可能となる。 Thus, it is possible to cost down.
【0052】 [0052]
【発明の効果】 【Effect of the invention】
以上詳細に説明したように、本発明のインターレース映像信号の動き検出装置によれば、プルダウンによってインターレースに変換されたインターレース映像信号に部分的または一時的な規則パターン外れがある場合に、適切な動き検出信号を出力することができる。 As described above in detail, according to the motion detection device of the interlaced video signal of the present invention, when there is a partial or temporary regular pattern deviated interlaced video signal converted into interlaced by the pull-down, appropriate motion it is possible to output a detection signal.
【0053】 [0053]
また、本発明の順次走査変換装置によれば、プルダウンによってインターレースに変換されたインターレース映像信号に部分的または一時的な規則パターン外れがある場合でも、誤補間なく良好に順次走査変換することができる。 Further, according to the progressive scanning conversion apparatus of the present invention, it is possible to satisfactorily interlacing without any erroneous interpolation if there is a partial or temporary regular pattern deviated interlaced video signal converted into interlaced by the pull-down .
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】本発明の一実施形態を示すブロック図である。 1 is a block diagram illustrating an embodiment of the present invention.
【図2】図1中の動き検出回路5の具体的構成例を示すブロック図である。 2 is a block diagram showing a specific configuration of the motion detection circuit 5 in FIG.
【図3】図1中の動き検出回路5の他の具体的構成例を示すブロック図である。 3 is a block diagram showing another specific configuration example of the motion detection circuit 5 in FIG.
【図4】図2の動作を説明するための波形図である。 4 is a waveform diagram for explaining the operation of Figure 2.
【図5】順次走査変換のための走査線補間の概略を説明するための図である。 5 is a diagram for explaining the outline of the scanning line interpolation for progressive scan conversion.
【図6】走査線補間の具体的方法を説明するための図である。 6 is a diagram for explaining a specific method of scanning line interpolation.
【図7】2−3プルダウンとその場合の順次走査変換を説明するための図である。 7 is a diagram for explaining 2-3 pulldown and the interlacing of the case.
【符号の説明】 DESCRIPTION OF SYMBOLS
3 動画補間回路(フィールド内補間手段) 3 video interpolator (intra-field interpolation means)
4 パターン検出回路( パターン検出手段 4 pattern detection circuit (pattern detecting means)
5 動き検出回路 6 選択回路(フィールド間補間手段) 5 motion detection circuit 6 selects circuit (inter-field interpolation means)
7 混合回路(補間信号出力手段) 7 mixing circuit (interpolation signal output means)
選択回路 21,22 フィールドメモリ 50,52 フィールド差分検出回路(フィールド間動き検出部) 9 selection circuits 21 and 22 field memories 50 and 52 field difference detecting circuit (inter-field motion detector)
51 フレーム差分検出回路(フレーム間動き検出部) 51 frame difference detection circuit (inter-frame motion detector)
57 選択回路(動き検出信号出力部) 57 selection circuit (motion detection signal output unit)
58 最小値演算回路(動き検出信号出力部) 58 Min value calculation circuit (motion detection signal output unit)
81,82 倍速処理回路 81 and 82 double-speed processing circuit

Claims (4)

  1. インターレース映像信号の動きを検出する動き検出装置において、 In the motion detection apparatus for detecting the motion of the interlaced video signal,
    前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映 The interlaced video signal is detected whether or not the interlaced video signal converted into interlace frame image by the pull-down with a predetermined frame rate, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down There, a first state indicating that the field and are a common frame image after a field after one field of the target field and the field of interest, interlace the interlaced video signal is converted into interlaced by the pull-down a video signal, and a second state indicating that the previous field is one field preceding the field of the target field and the field of interest is in the common frame images, movies said interlace 信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段と、 And pattern detecting means signals to detect which one of the pattern of the third state indicating that it is not an interlaced video signal converted into interlaced by the pull-down,
    前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて、動き検出方法を切り換えて動き検出する動き検出回路とを備え、 Movement the target field and the fields after the respective signal the previous field is input, in response to said first state and said second state and said third state, for motion detection by switching the motion detection method and a detection circuit,
    前記動き検出回路は、 The motion detection circuit,
    前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部と、 A first inter-field motion detector for motion detection based on a difference between the post-field and the field of interest,
    前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部と、 A second inter-field motion detector for motion detection based on a difference between the target field and the previous field,
    前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部と、 Inter-frame motion detector for motion detection based on a difference between the post-field and the previous field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the first state, if larger than the output of the output of the motion detector between the first field is the second field between the motion detecting unit, the first the difference between fields and the output of the motion detection portion and the second inter-field motion detector output is outputted as a motion detection signal, the first inter-field motion detector output is the second inter-field motion detection if greater than the output parts outputting the motion detection signal of a value indicating the still picture,
    前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the second state, if larger than the output of the second field between the outputs of the motion detector of the first inter-field motion detection unit, the second the difference between the output of the inter-field motion detector and an output of the first inter-field motion detector outputs as a motion detection signal, the second inter-field motion detector output is the first inter-field motion detection if greater than the output parts outputting the motion detection signal of a value indicating the still picture,
    前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部 When said pattern detecting means detects that it is the third state, the motion detection signal output unit for outputting the output of the inter-frame motion detector as a motion detection signal
    を有することを特徴とする動き検出装置。 Motion detecting apparatus characterized by having a.
  2. インターレース映像信号の動きを検出する動き検出装置において、 In the motion detection apparatus for detecting the motion of the interlaced video signal,
    前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映 The interlaced video signal is detected whether or not the interlaced video signal converted into interlace frame image by the pull-down with a predetermined frame rate, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down There, a first state indicating that the field and are a common frame image after a field after one field of the target field and the field of interest, interlace the interlaced video signal is converted into interlaced by the pull-down a video signal, and a second state indicating that the previous field is one field preceding the field of the target field and the field of interest is in the common frame images, movies said interlace 信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段と、 And pattern detecting means signals to detect which one of the pattern of the third state indicating that it is not an interlaced video signal converted into interlaced by the pull-down,
    前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて、動き検出方法を切り換えて動き検出する動き検出回路とを備え、 Movement the target field and the fields after the respective signal the previous field is input, in response to said first state and said second state and said third state, for motion detection by switching the motion detection method and a detection circuit,
    前記動き検出回路は、 The motion detection circuit,
    前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部と、 A first inter-field motion detector for motion detection based on a difference between the post-field and the field of interest,
    前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部と、 A second inter-field motion detector for motion detection based on a difference between the target field and the previous field,
    前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部と、 Inter-frame motion detector for motion detection based on a difference between the post-field and the previous field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the first state, if larger than the output of the output of the motion detector between the first field is the second field between the motion detecting unit, the first It outputs the difference between the output of the inter-field motion detector and an output of the second inter-field motion detector, small becomes towards the output of the inter-frame motion detector as a motion detection signal, said first field output between the motion detector outputs a motion detection signal of a value indicating the still image to be larger than the output of the motion detector between the second field,
    前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the second state, if larger than the output of the second field between the outputs of the motion detector of the first inter-field motion detection unit, the second outputs the difference of the fields between the output of the motion detection unit and the output of the motion detector between the first field, the small becomes towards the output of the inter-frame motion detector as a motion detection signal, the second field output between the motion detector outputs a motion detection signal of a value indicating the still image to be larger than the output of the motion detector between the first field,
    前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部と を有することを特徴とする動き検出装置。 When said pattern detecting means detects that it is the third state, a movement detecting apparatus characterized by comprising a motion detection signal output unit for outputting the output of the inter-frame motion detector as a motion detection signal.
  3. インターレース映像信号を順次走査の映像信号に変換する順次走査変換装置において、 In progressive scanning conversion apparatus for converting a video signal of the progressive scan interlaced video signal,
    前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映 The interlaced video signal is detected whether or not the interlaced video signal converted into interlace frame image by the pull-down with a predetermined frame rate, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down There, a first state indicating that the field and are a common frame image after a field after one field of the target field and the field of interest, interlace the interlaced video signal is converted into interlaced by the pull-down a video signal, and a second state indicating that the previous field is one field preceding the field of the target field and the field of interest is in the common frame images, movies said interlace 信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段と、 And pattern detecting means signals to detect which one of the pattern of the third state indicating that it is not an interlaced video signal converted into interlaced by the pull-down,
    前記注目フィールドの信号を用いてフィールド内補間信号を生成するフィールド内補間手段と、 And intra-field interpolation means for generating an intra-field interpolation signal using the signal of the target field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記注目フィールドに対する前記後フィールドの信号を用いて第1のフィールド間補間信号を生成し、前記パターン検出手段が前記第2の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号を用いて第2のフィールド間補間信号を生成し、前記パターン検出手段が前記第3の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号または前記後フィールドの信号を用いて第3のフィールド間補間信号を生成するフィールド間補間手段と、 When said pattern detecting means detects that it is the first state, the generating the first inter-field interpolation signal using the signal of the rear field for the target field, the pattern detecting means said second state when it detects that a, using said signal of the previous field for the field of interest to generate a second inter-field interpolation signal, when said pattern detecting means detects that it is the third state, the field of interest and inter-field interpolation means for generating a third inter-field interpolation signal using the signal of the signal or the fields after the previous field for,
    前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて動き検出方法を切り換えて動き検出し、動き検出信号を出力する動き検出回路と、 The field of interest and each of the signal the previous field and the rear field is inputted, switches the motion detecting method and the motion detection in response to said first state and said second state and said third state, movement a motion detection circuit for outputting a detection signal,
    前記フィールド内補間手段の出力と前記フィールド間補間手段の出力とを前記動き検出信号に応じて混合または切り換えて出力する補間信号出力手段とを備え、 And an interpolation signal output means for outputting the outputs of said inter-field interpolation means of said intra-field interpolation means mixed or switched in accordance with the motion detection signal,
    前記動き検出回路は、 The motion detection circuit,
    前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部と、 A first inter-field motion detector for motion detection based on a difference between the post-field and the field of interest,
    前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部と、 A second inter-field motion detector for motion detection based on a difference between the target field and the previous field,
    前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部と、 Inter-frame motion detector for motion detection based on a difference between the post-field and the previous field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the first state, if larger than the output of the output of the motion detector between the first field is the second field between the motion detecting unit, the first the difference between fields and the output of the motion detection portion and the second inter-field motion detector output is outputted as a motion detection signal, the first inter-field motion detector output is the second inter-field motion detection if greater than the output parts outputting the motion detection signal of a value indicating the still picture,
    前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the second state, if larger than the output of the second field between the outputs of the motion detector of the first inter-field motion detection unit, the second the difference between the output of the inter-field motion detector and an output of the first inter-field motion detector outputs as a motion detection signal, the second inter-field motion detector output is the first inter-field motion detection if greater than the output parts outputting the motion detection signal of a value indicating the still picture,
    前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部 When said pattern detecting means detects that it is the third state, the motion detection signal output unit for outputting the output of the inter-frame motion detector as a motion detection signal
    を有することを特徴とする順次走査変換装置。 Deinterlacing apparatus characterized by having a.
  4. インターレース映像信号を順次走査の映像信号に変換する順次走査変換装置において、 In progressive scanning conversion apparatus for converting a video signal of the progressive scan interlaced video signal,
    前記インターレース映像信号が所定のフレームレートを有するフレーム画像からプルダウンによってインターレースに変換されたインターレース映像信号であるか否かを検出して、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、注目フィールドとこの注目フィールドの1フィールド後のフィールドである後フィールドとが共通のフレーム画像となっていることを示す第1の状態と、前記インターレース映像信号がプルダウンによってインターレースに変換されたインターレース映像信号であり、前記注目フィールドと前記注目フィールドの1フィールド前のフィールドである前フィールドとが共通のフレーム画像となっていることを示す第2の状態と、前記インターレース映 The interlaced video signal is detected whether or not the interlaced video signal converted into interlace frame image by the pull-down with a predetermined frame rate, the interlaced video signal is an interlaced video signal converted into interlaced by the pull-down There, a first state indicating that the field and are a common frame image after a field after one field of the target field and the field of interest, interlace the interlaced video signal is converted into interlaced by the pull-down a video signal, and a second state indicating that the previous field is one field preceding the field of the target field and the field of interest is in the common frame images, movies said interlace 信号がプルダウンによってインターレースに変換されたインターレース映像信号ではないことを示す第3の状態とのいずれのパターンであるかを検出するパターン検出手段と、 And pattern detecting means signals to detect which one of the pattern of the third state indicating that it is not an interlaced video signal converted into interlaced by the pull-down,
    前記注目フィールドの信号を用いてフィールド内補間信号を生成するフィールド内補間手段と、 And intra-field interpolation means for generating an intra-field interpolation signal using the signal of the target field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記注目フィールドに対する前記後フィールドの信号を用いて第1のフィールド間補間信号を生成し、前記パターン検出手段が前記第2の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号を用いて第2のフィールド間補間信号を生成し、前記パターン検出手段が前記第3の状態であると検出したとき、前記注目フィールドに対する前記前フィールドの信号または前記後フィールドの信号を用いて第3のフィールド間補間信号を生成するフィールド間補間手段と、 When said pattern detecting means detects that it is the first state, the generating the first inter-field interpolation signal using the signal of the rear field for the target field, the pattern detecting means said second state when it detects that a, using said signal of the previous field for the field of interest to generate a second inter-field interpolation signal, when said pattern detecting means detects that it is the third state, the field of interest and inter-field interpolation means for generating a third inter-field interpolation signal using the signal of the signal or the fields after the previous field for,
    前記注目フィールドと前記後フィールドと前記前フィールドそれぞれの信号が入力され、前記第1の状態と前記第2の状態と前記第3の状態とに応じて動き検出方法を切り換えて動き検出し、動き検出信号を出力する動き検出回路と、 The field of interest and each of the signal the previous field and the rear field is inputted, switches the motion detecting method and the motion detection in response to said first state and said second state and said third state, movement a motion detection circuit for outputting a detection signal,
    前記フィールド内補間手段の出力と前記フィールド間補間手段の出力とを前記動き検出信号に応じて混合または切り換えて出力する補間信号出力手段とを備え、 And an interpolation signal output means for outputting the outputs of said inter-field interpolation means of said intra-field interpolation means mixed or switched in accordance with the motion detection signal,
    前記動き検出回路は、 The motion detection circuit,
    前記注目フィールドと前記後フィールドとの差分に基づいて動き検出する第1のフィールド間動き検出部と、 A first inter-field motion detector for motion detection based on a difference between the post-field and the field of interest,
    前記注目フィールドと前記前フィールドとの差分に基づいて動き検出する第2のフィールド間動き検出部と、 A second inter-field motion detector for motion detection based on a difference between the target field and the previous field,
    前記前フィールドと前記後フィールドとの差分に基づいて動き検出するフレーム間動き検出部と、 Inter-frame motion detector for motion detection based on a difference between the post-field and the previous field,
    前記パターン検出手段が前記第1の状態であると検出したとき、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大であれば、前記第1のフィールド間動き検出部の出力と前記第2のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第1のフィールド間動き検出部の出力が前記第2のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the first state, if larger than the output of the output of the motion detector between the first field is the second field between the motion detecting unit, the first It outputs the difference between the output of the inter-field motion detector and an output of the second inter-field motion detector, small becomes towards the output of the inter-frame motion detector as a motion detection signal, said first field output between the motion detector outputs a motion detection signal of a value indicating the still image to be larger than the output of the motion detector between the second field,
    前記パターン検出手段が前記第2の状態であると検出したとき、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大であれば、前記第2のフィールド間動き検出部の出力と前記第1のフィールド間動き検出部の出力との差分と、前記フレーム間動き検出部の出力との小なる方を動き検出信号として出力し、前記第2のフィールド間動き検出部の出力が前記第1のフィールド間動き検出部の出力より大でなければ静止画を示す値の動き検出信号を出力 When said pattern detecting means detects that it is the second state, if larger than the output of the second field between the outputs of the motion detector of the first inter-field motion detection unit, the second outputs the difference of the fields between the output of the motion detection unit and the output of the motion detector between the first field, the small becomes towards the output of the inter-frame motion detector as a motion detection signal, the second field output between the motion detector outputs a motion detection signal of a value indicating the still image to be larger than the output of the motion detector between the first field,
    前記パターン検出手段が前記第3の状態であると検出したとき、前記フレーム間動き検出部の出力を動き検出信号として出力する動き検出信号出力部と を有することを特徴とする順次走査変換装置。 When said pattern detecting means detects that it is the third state, progressive scan conversion apparatus, comprising a motion detection signal output unit for outputting the output of the inter-frame motion detector as a motion detection signal.
JP2001307240A 2001-10-03 2001-10-03 Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same Expired - Fee Related JP4055109B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001307240A JP4055109B2 (en) 2001-10-03 2001-10-03 Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001307240A JP4055109B2 (en) 2001-10-03 2001-10-03 Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same

Publications (2)

Publication Number Publication Date
JP2003116109A JP2003116109A (en) 2003-04-18
JP4055109B2 true JP4055109B2 (en) 2008-03-05

Family

ID=19126737

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001307240A Expired - Fee Related JP4055109B2 (en) 2001-10-03 2001-10-03 Movement of interlaced video signal detection apparatus and progressive scanning conversion apparatus using the same

Country Status (1)

Country Link
JP (1) JP4055109B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005026885A (en) * 2003-06-30 2005-01-27 Toshiba Corp Television receiver and its control method
JP2005333254A (en) 2004-05-18 2005-12-02 Sony Corp Apparatus and method for image processing
KR100577684B1 (en) 2004-10-08 2006-05-10 삼성전자주식회사 The image processing apparatus using judder-map and the method thereof
KR100594780B1 (en) 2004-10-09 2006-06-30 삼성전자주식회사 Apparatus for converting image and method the same
JP4703267B2 (en) 2005-05-31 2011-06-15 株式会社東芝 Pull-down signal detection apparatus, a pull-down signal detection method, and progressive scanning conversion apparatus
JP4791854B2 (en) 2006-02-28 2011-10-12 株式会社東芝 Video processing circuit and image processing method
US8233087B2 (en) * 2006-11-08 2012-07-31 Marvell International Ltd. Systems and methods for deinterlacing high-definition and standard-definition video
KR101331709B1 (en) * 2006-12-29 2013-11-20 포항공과대학교 산학협력단 Driving circuit of liquid crystal display
WO2008120273A1 (en) * 2007-03-29 2008-10-09 Fujitsu Limited Combined video detecting device and combined video detecting method

Also Published As

Publication number Publication date
JP2003116109A (en) 2003-04-18

Similar Documents

Publication Publication Date Title
EP0624032B1 (en) Video format conversion apparatus and method
US7116372B2 (en) Method and apparatus for deinterlacing
JP4509146B2 (en) Signal processing device
EP0946055B1 (en) Method and system for interpolation of digital signals
US7142247B2 (en) Deinterlacing apparatus and method thereof
US7170562B2 (en) Apparatus and method for deinterlace video signal
US6509930B1 (en) Circuit for scan conversion of picture signal using motion compensation
CN1183768C (en) Format converter using bidirectional motion vector and its method
CN100348035C (en) Method and equipment for calculating kinematical vector
US20040008777A1 (en) Film source video detection
CN1167266C (en) Method for detection of motion interleaved video sequency and device for detection of motion
JP3249060B2 (en) Interlaced sequence conversion apparatus and method using the motion and spatial correlation
EP0743788A1 (en) Automatic image scanning format converter with seamless switching
EP1143716B1 (en) Apparatus and method for concealing interpolation artifacts in a video interlaced to progressive scan converter
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
JP3187409B2 (en) Motion sequence pattern detector
EP1158792B1 (en) Filter for deinterlacing a video signal
JP3563422B2 (en) Film / video detector
US6577345B1 (en) Deinterlacing method and apparatus based on motion-compensated interpolation and edge-directional interpolation
EP1207693B1 (en) Edge direction detector
JP4083265B2 (en) System conversion method and apparatus for an image signal
CN100586151C (en) Method for detecting film style of image sequence and film mode detector
US7075581B1 (en) Interlaced-to-progressive scan conversion based on film source detection
KR0176568B1 (en) An interlace progressive converting apparatus using the motion and also the spatial correlation and a method
CN1041785C (en) Method and device for film-mode detection

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040831

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060829

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061016

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070921

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071018

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071129

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101221

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121221

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121221

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131221

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees