JP5403784B2 - Video processing apparatus and noise reduction method - Google Patents

Video processing apparatus and noise reduction method Download PDF

Info

Publication number
JP5403784B2
JP5403784B2 JP2008260466A JP2008260466A JP5403784B2 JP 5403784 B2 JP5403784 B2 JP 5403784B2 JP 2008260466 A JP2008260466 A JP 2008260466A JP 2008260466 A JP2008260466 A JP 2008260466A JP 5403784 B2 JP5403784 B2 JP 5403784B2
Authority
JP
Japan
Prior art keywords
video
noise reduction
pull
source
reduction amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008260466A
Other languages
Japanese (ja)
Other versions
JP2010093474A (en
Inventor
一徳 野田
晃 小池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008260466A priority Critical patent/JP5403784B2/en
Publication of JP2010093474A publication Critical patent/JP2010093474A/en
Application granted granted Critical
Publication of JP5403784B2 publication Critical patent/JP5403784B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、取得した映像信号に重畳されたノイズを軽減する手段を備えた映像処理装置、および、映像処理装置によるノイズ軽減方法に関する。   The present invention relates to a video processing apparatus including means for reducing noise superimposed on an acquired video signal, and a noise reduction method using the video processing apparatus.

近年、伝送経路などにおいて映像信号に重畳されたノイズを軽減する手段としてノイズリダクション(以下、「NR」という)の機能を備えた映像処理装置(テレビ受像機、など)が多く見受けられる。NRにおいては、「連続する2つの前後フレームの同じ画素位置に出力される映像信号を所定の率で混ぜ合わせた映像信号」で後フレームの映像を出力することで、後フレームの映像信号に重畳されたノイズを軽減する3DNRなどの技術が開発されており、これらの機能を利用することでノイズの少ない映像の出力が可能となっている。   In recent years, many video processing apparatuses (TV receivers, etc.) having a noise reduction (hereinafter referred to as “NR”) function as means for reducing noise superimposed on a video signal in a transmission path or the like have been seen. In NR, a video signal of a rear frame is output as “a video signal obtained by mixing video signals output at the same pixel position in two consecutive frames before and after at a predetermined rate”, and superimposed on the video signal of the rear frame. Technologies such as 3DNR that reduce the generated noise have been developed, and by using these functions, it is possible to output an image with less noise.

しかしながら、3DNRは、動きがあるシーンにおいて動作させた場合、出力する映像に残像が生じてしまい、ボケ感が生まれるなどの弊害が発生する。具体的には、図1(A)に示すようなキャラクターの顔が移動する映像シーンにおいて、3DNRを動作させると、図1(B)に示すように、ノイズは軽減できるものの、前のフレーム映像のキャラクターの顔が後フレームの映像を出力する際にぼんやりと映ってしまう(残像)。前記残像の問題は、3DNRの効果を弱めることで解決することができる。しかし、当然に、3DNRの効果を弱めるとノイズを十分に軽減できなくなるという問題がある。   However, when the 3DNR is operated in a scene with motion, an afterimage is generated in the output video, and a bad effect such as a blur is generated. Specifically, in the video scene in which the character's face moves as shown in FIG. 1A, if 3DNR is operated, noise can be reduced as shown in FIG. The face of the character appears blurry when the image of the back frame is output (afterimage). The problem of the afterimage can be solved by weakening the effect of 3DNR. However, as a matter of course, there is a problem that noise cannot be sufficiently reduced if the 3DNR effect is weakened.

すなわち、3DNRの効果を強くすると、ノイズを十分に軽減することができるが、その分、動きのあるシーンにおいて発生する残像が目立つようになる。一方、3DNRの効果を弱くすると、動きのあるシーンにおいて発生する残像は目立たなくなるが、ノイズを十分に軽減できなくなる。   That is, if the 3DNR effect is strengthened, noise can be sufficiently reduced, but an afterimage generated in a moving scene becomes conspicuous. On the other hand, if the 3DNR effect is weakened, an afterimage generated in a moving scene becomes inconspicuous, but noise cannot be sufficiently reduced.

そこで、前記問題を解決する手段として、映像シーンに応じて、3DNRの効果を動的に切り替える手段などが知られている。具体的には、取得した連続する2つの前後フレームの映像信号の差分を算出し、算出した差分が大きい場合には3DNRを動作させず、差分が小さい場合にはある程度の効果で3DNRを動作させる。   Therefore, as means for solving the above problem, means for dynamically switching the effect of 3DNR according to the video scene is known. Specifically, the difference between the acquired video signals of two consecutive frames before and after is calculated, and if the calculated difference is large, the 3DNR is not operated, and if the difference is small, the 3DNR is operated with a certain effect. .

すなわち、映像信号の差分が大きい場合には、動きがあるシーンと判断して3DNRを動作させず、残像の発生を防止する。一方、映像信号の差分が小さい場合には、動きがあまりないシーンと判断して、3DNRをある程度の効果で動作させ、ノイズの軽減を図る。なお、従来技術においては、前記の通り、差分が小さい場合にも、ある程度の効果でしか3DNRを動作させない。これは、その差分がノイズによるものなのか、映像信号の切替りによるものなのかを明確に判別できないため、残像を発生させないように対処したことなどによる。このような手段を備えた発明は、例えば、特許文献1に記載されている。   That is, when the difference between the video signals is large, it is determined that the scene has a motion, and the 3DNR is not operated, thereby preventing the occurrence of an afterimage. On the other hand, when the difference between the video signals is small, it is determined that the scene does not move much, and the 3DNR is operated with a certain effect to reduce noise. In the prior art, as described above, even when the difference is small, 3DNR is operated only with a certain effect. This is because, since it is not possible to clearly determine whether the difference is due to noise or switching of the video signal, a countermeasure is taken so as not to generate an afterimage. An invention provided with such means is described in Patent Document 1, for example.

確かに、前記従来技術は、3DNRの効果を動的に切り替えることで、残像の問題を効果的に解決している。しかしながら、3DNRを十分な効果で動作させていないため、ノイズの問題を十分には解決できないという問題が残る(図1(C)参照)。   Certainly, the prior art effectively solves the afterimage problem by dynamically switching the effect of 3DNR. However, since the 3DNR is not operated with a sufficient effect, there remains a problem that the noise problem cannot be sufficiently solved (see FIG. 1C).

ここで、映画フィルムに記録されたソースを、テレビ放送などにおいて利用する場合には、「2:2プルダウン」、「2:3プルダウン」などの変換方式が利用される。   Here, when the source recorded on the movie film is used in television broadcasting or the like, a conversion method such as “2: 2 pulldown” or “2: 3 pulldown” is used.

「2:3プルダウン」とは、毎秒24コマで記録された映画フィルムのソースを、テレビ放送用のソースとして60Hzの映像信号に変換する方式である。すなわち、24コマの映像を、60フレーム分の映像信号に変換するものであり、具体的には、図2に示すように、「映画フィルムの1コマ分の映像(N)を連続する2フレーム分の映像として使用→次のコマの映像(Nn+1)を連続する3フレーム分の映像として使用→さらに次のコマの映像(Nn+2)を連続する2フレーム分の映像として使用→さらに次のコマの映像(Nn+3)を連続する3フレーム分の映像として使用→・・・」、という規則正しいルールに従い変換するものである。なお、当該変換方式は、日本などにおいて利用される。 “2: 3 pull-down” is a method of converting a movie film source recorded at 24 frames per second into a 60 Hz video signal as a source for television broadcasting. That is, the video of 24 frames is converted into a video signal of 60 frames. Specifically, as shown in FIG. 2, “one video (N n ) of one frame of movie film is continuous 2 Use as video for frame → use video of next frame (N n + 1 ) as video for 3 consecutive frames → use video of next frame (N n + 2 ) as video for 2 consecutive frames → further The frame image (N n + 3 ) is used as an image for three consecutive frames →... The conversion method is used in Japan and the like.

「2:2プルダウン」とは、毎秒24コマで記録された映画フィルムのソースを、テレビ放送用のソースとして50Hzの映像信号に変換する方式である。すなわち、24コマの映像を、50フレーム分の映像信号に変換するものであり、具体的には、図3に示すように、「映画フィルムの1コマ分の映像(N)を連続する2フレーム分の映像として使用→次のコマの映像(Nn+1)を連続する2フレーム分の映像として使用→さらに次のコマの映像(Nn+2)を連続する2フレーム分の映像として使用→さらに次のコマの映像(Nn+3)を連続する2フレーム分の映像として使用→・・・」、という規則正しいルールに従い変換するものである。なお、当該変換方式は、欧州などにおいて利用される。 “2: 2 pulldown” is a method of converting a movie film source recorded at 24 frames per second into a 50 Hz video signal as a source for television broadcasting. That is, the video of 24 frames is converted into a video signal of 50 frames. Specifically, as shown in FIG. 3, “video (N n ) of one frame of movie film is continuous 2 Use as video for frame → Use video for next frame (N n + 1 ) as video for 2 consecutive frames → Use video for next frame (N n + 2 ) as video for 2 consecutive frames → Further next The frame image (N n + 3 ) is converted as a continuous two-frame image →... This conversion method is used in Europe and the like.

このように、「2:2プルダウン」や「2:3プルダウン」の方式で変換された映像ソース(以下、「プルダウンソース」という)は、必ず、同じ映像のフレームが2回または3回連続して現れることとなる。かかる場合、同じ映像のフレーム間で検出された映像信号の差分は100パーセント、ノイズによるものであり、当該2つのフレームを利用して3DNRを強い効果で動作させても、残像が発生することはない。当該点を考慮して3DNRの動作を動的に適切に切り替えることができれば、残像の問題を生じさせることなく、かつ、従来技術に比べて十分なノイズ軽減効果を実現することが可能になると考えられる。
特開2006−197455
In this way, a video source (hereinafter referred to as “pull-down source”) converted by the “2: 2 pull-down” or “2: 3 pull-down” method always has two or three consecutive frames of the same video. Will appear. In such a case, the difference between the video signals detected between frames of the same video is 100% due to noise, and an afterimage does not occur even when 3DNR is operated with a strong effect using the two frames. Absent. If the 3DNR operation can be dynamically switched in consideration of this point, it is considered that a sufficient noise reduction effect can be realized without causing the afterimage problem and compared with the prior art. It is done.
JP 2006-197455 A

そこで、本発明では、「2:2プルダウン」や「2:3プルダウン」などの変換をされた映像ソースを取得した場合に、3DNRの動作を従来にない方式で適切に制御することで、残像の問題を生じさせることなく、かつ、十分なノイズ軽減効果を実現することが可能に構成された映像処理装置を提供することを課題とする。   Therefore, in the present invention, when a video source having undergone conversion such as “2: 2 pulldown” or “2: 3 pulldown” is acquired, the operation of 3DNR is appropriately controlled by an unconventional method, and thus an afterimage is obtained. It is an object of the present invention to provide a video processing apparatus configured to realize a sufficient noise reduction effect without causing the above problem.

上記課題を解決するための手段として、以下のような発明などを提供する。   As means for solving the above problems, the following inventions are provided.

取得した映像ソースが「2:2プルダウン」や「2:3プルダウン」などの変換をされたプルダウンソースであるか否かを判断する機能を有し、判断結果がプルダウンソースである場合には、映像ソース中での同一映像フレームの繰返し規則に従って3DNRの動作(効果)を適切に制御する映像処理装置を提供する。   When the acquired video source is a pull-down source converted such as “2: 2 pull-down” or “2: 3 pull-down”, and the determination result is a pull-down source, Provided is a video processing apparatus that appropriately controls the operation (effect) of 3DNR according to a repetition rule of the same video frame in a video source.

具体的には、以下のような発明を提供する。   Specifically, the following inventions are provided.

第一発明では、映像信号に重畳されたノイズを軽減する処理を行う3DNR部と、取得した映像ソースがプルダウンソースであるか判断する判断部と、判断結果がプルダウンソースであるとの判断結果である場合には、映像ソース中での同一映像フレームの繰返し規則に従って3DNR部でのノイズ軽減量を決定するノイズ軽減量決定部と、を有する映像処理装置を提供する。   In the first invention, a 3DNR unit that performs processing to reduce noise superimposed on the video signal, a determination unit that determines whether the acquired video source is a pull-down source, and a determination result that the determination result is a pull-down source. In some cases, there is provided a video processing apparatus including a noise reduction amount determination unit that determines a noise reduction amount in a 3DNR unit according to a repetition rule of the same video frame in a video source.

第二発明では、第一発明を基本とし、さらに、ノイズ軽減量決定部は、プルダウンソース種別を判定する判定手段と、判定結果が2:3プルダウンである場合には、出現する2連続同一映像または3連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定する第一動的制御手段を有する映像処理装置を提供する。   The second invention is based on the first invention, and the noise reduction amount determination unit further includes a determination unit for determining a pull-down source type, and two consecutive identical videos that appear when the determination result is 2: 3 pull-down. Alternatively, first dynamic control means for determining a noise reduction amount between the same images of three consecutive identical images as a maximum threshold value, and a noise reduction amount as a value corresponding to the image change amount between the changed images straddling the same continuous video group. An image processing apparatus having the above is provided.

第三発明では、第一発明または第二発明を基本とし、さらに、ノイズ軽減量決定部は、プルダウンソース種別を判定する判定手段と、判定結果が2:2プルダウンである場合には、出現する2連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定する第二動的制御手段を有する映像処理装置を提供する。   The third invention is based on the first invention or the second invention, and the noise reduction amount determination unit appears when the determination means for determining the pull-down source type and the determination result is 2: 2 pull-down. A second dynamic control means for determining a noise reduction amount between the same images of two consecutive identical images as a maximum threshold value, and a noise reduction amount between the changed images straddling the continuous identical image group as a value corresponding to the image change amount; A video processing apparatus is provided.

第四発明では、取得した映像ソースがプルダウンソースであるか判断する判断ステップと、判断結果がプルダウンソースであるとの判断結果である場合には、映像ソース中での同一映像フレームの繰返し規則に従ってノイズ軽減量を決定するノイズ軽減量決定ステップと、ノイズ軽減量決定ステップで決定したノイズ軽減量に基づいて、映像信号に重畳されたノイズを軽減する処理を行う3DNRステップと、を有する映像処理装置によるノイズ軽減方法を提供する。   In the fourth invention, when the determination step is to determine whether the acquired video source is a pull-down source and the determination result is a determination result that the determination is a pull-down source, the repetition rule of the same video frame in the video source is followed. A video processing apparatus comprising: a noise reduction amount determining step for determining a noise reduction amount; and a 3DNR step for performing a process for reducing noise superimposed on the video signal based on the noise reduction amount determined in the noise reduction amount determination step. Provides a noise reduction method.

本発明の映像処理装置および映像処理装置のノイズ軽減方法により、「2:2プルダウン」や「2:3プルダウン」などの変換をされた映像ソースを取得した場合、残像の問題を生じさせることなく、かつ、十分なノイズ軽減効果を実現することが可能になる。   When a video source converted such as “2: 2 pulldown” or “2: 3 pulldown” is acquired by the video processing apparatus and the noise reduction method of the video processing apparatus of the present invention, the afterimage problem does not occur. In addition, a sufficient noise reduction effect can be realized.

以下に、本発明の実施例を説明する。なお、本発明はこれら実施例に何ら限定されるものではなく、その要旨を逸脱しない範囲内において、様々な態様で実施しうる。
<実施形態の概要>
Examples of the present invention will be described below. In addition, this invention is not limited to these Examples at all, and can be implemented in various modes without departing from the gist thereof.
<Overview of embodiment>

本実施形態の映像処理装置は、取得した映像信号に重畳されたノイズを軽減するための3DNRの機能を有する。また、映像ソースを取得すると、その映像ソースが2:3プルダウンや2:2プルダウンなどの変換をされたプルダウンソースであるか否か判断する機能を有する。   The video processing apparatus according to the present embodiment has a 3DNR function for reducing noise superimposed on the acquired video signal. Further, when a video source is acquired, the video source has a function of determining whether or not the video source is a pull-down source that has undergone conversion such as 2: 3 pull-down or 2: 2 pull-down.

そして、取得した映像ソースがプルダウンソースであると判断した場合には、2:3プルダウンや2:2プルダウンなどの変換方式により定まる同一映像フレームの繰返し規則に従い、3DNRによるノイズの効果を動的に切替えることを特徴とする。具体的には、同一映像のフレームが連続するフレーム間においては3DNRを十分に大きな効果で動作させ、異なる映像のフレームが連続するフレーム間においては3DNRを動作させないか、または、ある程度の効果で動作させる。   When it is determined that the acquired video source is a pull-down source, the effect of noise caused by 3DNR is dynamically changed according to the repetition rule of the same video frame determined by a conversion method such as 2: 3 pull-down or 2: 2 pull-down. It is characterized by switching. Specifically, 3DNR is operated with a sufficiently large effect between frames in which the same video frame is continuous, and 3DNR is not operated between frames in which different video frames are continuous, or operates with a certain effect. Let

ここで、本実施形態の映像処理装置によりプルダウンソースを取得して3DNRを動作させた場合の効果を図1(A)〜(D)を用いて説明する。図は、キャラクターの顔が移動する映像シーンを示したものであり、矢印で時間方向を示してある。   Here, the effect when the 3DNR is operated by acquiring the pull-down source by the video processing apparatus according to the present embodiment will be described with reference to FIGS. The figure shows a video scene in which the character's face moves, and the time direction is indicated by arrows.

図1(A)は、取得した映像ソースを原信号のまま使用して、映像を画面に出力した様子を示している。かかる場合、映像信号に重畳したノイズが目立ってしまう。   FIG. 1A shows a state in which video is output to the screen using the acquired video source as the original signal. In such a case, noise superimposed on the video signal becomes conspicuous.

図1(B)は、取得した映像ソースに対して一律に3DNRを動作させた後に、映像を画面に出力した様子を示している。かかる場合、映像信号に重畳したノイズは十分に軽減され目立たなくなるが、動きのあるキャラクターの顔の残像が目立ってしまう。   FIG. 1B shows a state in which the video is output to the screen after the 3DNR is uniformly operated on the acquired video source. In such a case, the noise superimposed on the video signal is sufficiently reduced and becomes inconspicuous, but the afterimage of the face of the moving character becomes conspicuous.

図1(C)は、取得した映像ソースに対して動的に効果を切替えながら3DNRを動作(従来技術)させた後に、映像を画面に出力した様子を示している。かかる場合、動きのあるキャラクターの顔の残像は生じないが、映像信号に重畳したノイズを十分に軽減することができず目立ってしまう。   FIG. 1C shows a state in which video is output to the screen after 3DNR is operated (prior art) while dynamically switching the effect on the acquired video source. In such a case, an afterimage of a moving character's face does not occur, but noise superimposed on the video signal cannot be sufficiently reduced and becomes noticeable.

図1(D)は、本実施形態の映像処理装置により、取得したプルダウンソースである映像ソースに対して3DNRを動作させた後に、映像を画面に出力した様子を示している。かかる場合、動きのあるキャラクターの顔の残像が生じることなく、映像信号に重畳したノイズを十分に軽減することができる。
<本実施形態の機能的構成>
FIG. 1D shows a state in which the video is output to the screen after the 3DNR is operated on the video source which is the acquired pull-down source by the video processing apparatus of the present embodiment. In such a case, the noise superimposed on the video signal can be sufficiently reduced without causing an afterimage of the face of the character in motion.
<Functional configuration of this embodiment>

図4は、本実施形態の映像処理装置の機能ブロックの一例を表す図である。この図にあるように本実施形態の「映像処理装置」(0400)は、「3DNR部」(0401)と、「判断部」(0402)と、「ノイズ軽減量決定部」(0403)を有する。なお、「ノイズ軽減量決定部」(0403)は「判定手段」と「第一動的制御手段」を有してもよい。また、さらに、「ノイズ軽減量決定部」(0403)は「第二動的制御手段」を有してもよい。   FIG. 4 is a diagram illustrating an example of functional blocks of the video processing apparatus according to the present embodiment. As shown in this figure, the “video processing apparatus” (0400) of this embodiment includes a “3DNR unit” (0401), a “determination unit” (0402), and a “noise reduction amount determination unit” (0403). . The “noise reduction amount determination unit” (0403) may include a “determination unit” and a “first dynamic control unit”. Furthermore, the “noise reduction amount determination unit” (0403) may include “second dynamic control means”.

なお、以下に記載する本装置の機能ブロックは、ハードウェア、ソフトウェア、またはハードウェア及びソフトウェアの両方として実現され得る。具体的には、コンピュータを利用するものであれば、CPUやRAM、バス、あるいは二次記憶装置(ハードディスクや不揮発性メモリ、CD−ROMやDVD−ROMなどの記憶メディアとそれらメディアの読取ドライブなど)、印刷機器や表示装置、その他の外部周辺装置などのハードウェア構成部やその外部周辺機器用のI/Oポート、それらハードウェアを制御するためのドライバプログラムやその他アプリケーションプログラム、情報入力に利用されるユーザインターフェースなどが挙げられる。   Note that the functional blocks of the apparatus described below can be realized as hardware, software, or both hardware and software. Specifically, if a computer is used, a CPU, a RAM, a bus, or a secondary storage device (a storage medium such as a hard disk, a non-volatile memory, a CD-ROM or a DVD-ROM, and a read drive for the medium) ), Hardware components such as printing devices, display devices, and other external peripheral devices, I / O ports for the external peripheral devices, driver programs for controlling these hardware, other application programs, and information input User interface.

またこれらハードウェアやソフトウェアは、RAM上に展開したプログラムをCPUで演算処理したり、メモリやハードディスク上に保持されているデータや、インターフェースを介して入力されたデータなどを加工、蓄積、出力処理したり、あるいは各ハードウェア構成部の制御を行ったりするために利用される。また、この発明は装置として実現できるのみでなく、方法としても実現可能である。また、このような発明の一部をソフトウェアとして構成することができる。さらに、そのようなソフトウェアをコンピュータに実行させるために用いるソフトウェア製品、及び同製品を記憶媒体に固定した記憶媒体も、当然にこの発明の技術的な範囲に含まれる(本明細書の全体を通じて同様である)。   In addition, these hardware and software process the programs developed on the RAM with the CPU, and process, store, and output the data stored on the memory and hard disk, and the data input via the interface. Or used to control each hardware component. The present invention can be realized not only as an apparatus but also as a method. A part of the invention can be configured as software. Furthermore, a software product used for causing a computer to execute such software, and a storage medium in which the product is fixed to a storage medium are naturally included in the technical scope of the present invention (the same applies throughout this specification). Is).

以下、本実施形態の「映像処理装置」(0400)の「3DNR部」(0401)と「判断部」(0402)と「ノイズ軽減量決定部」(0403)と「ノイズ軽減量決定部」(0403)の「判定手段」と「第一動的制御手段」と「第二動的制御手段」の機能的構成について説明する。   Hereinafter, the “3DNR unit” (0401), the “determination unit” (0402), the “noise reduction amount determination unit” (0403), and the “noise reduction amount determination unit” of the “video processing apparatus” (0400) of this embodiment ( The functional configuration of “determination means”, “first dynamic control means”, and “second dynamic control means” of 0403) will be described.

「映像処理装置」は、取得した映像ソースに対して、映像を画面に出力するための所定の処理を行う装置であり、例えば、テレビ受像機などが該当する。映像ソースを取得する手段としては、チューナーを介してTV放送波を取得したり、他の外部機器に保存されている映像ソースや他の外部機器にてDVDなどの記録媒体から読み出した映像ソースを有線または無線の通信により取得したりする手段が考えられる。   The “video processing device” is a device that performs predetermined processing for outputting video to the screen with respect to the acquired video source, and corresponds to, for example, a television receiver. As a means for acquiring a video source, a TV broadcast wave is acquired via a tuner, a video source stored in another external device, or a video source read from a recording medium such as a DVD by another external device is used. A means for obtaining by wired or wireless communication is conceivable.

「3DNR部」(0401)は、映像信号に重畳されたノイズを軽減する処理を行うよう構成されている。具体的には、「3DNR(3次元ノイズリダクション)」の技術を利用して、映像信号に重畳されたノイズを軽減するよう構成される。「3DNR」とは、連続する2つのフレームの映像信号を利用してノイズ成分を除去する処理であり、具体的には、「連続する2つの前後フレームの同じ画素位置に出力される映像信号を所定の率で混ぜ合わせた映像信号」で後フレームの映像を出力することで、後フレームの映像信号に重畳されたノイズを軽減する処理などが該当する。   The “3DNR unit” (0401) is configured to perform processing to reduce noise superimposed on the video signal. Specifically, it is configured to reduce noise superimposed on the video signal by using a technique of “3DNR (3D noise reduction)”. “3DNR” is a process of removing noise components using video signals of two consecutive frames. Specifically, “3DNR” is a process of “video signals output to the same pixel position of two consecutive frames”. This corresponds to a process of reducing the noise superimposed on the video signal of the subsequent frame by outputting the video of the subsequent frame with the “video signal mixed at a predetermined rate”.

ここで、本実施形態の3DNR部(0401)は、連続する2つの前後フレームの同じ画素位置に出力される映像信号の差分の和である「差分情報」に応じて、3DNRのノイズ軽減量を動的に切替えながら、ノイズを軽減する処理を行う手段を有してもよい。なお、「ノイズ軽減量」とは、3DNRによるノイズ軽減の効果を表現するための概念であり、軽減したノイズの量を具体的に何らかの単位で示すようなものではない。その表現方法としては任意の設計事項であるが、例えば、3DNRとして、連続する2つの前後フレームの同じ画素位置に出力される映像信号を所定の率で混ぜ合わせた映像信号で後フレームの映像を出力する処理を行う場合には、前フレームの映像信号を混ぜ合わせる割合で「ノイズ軽減量」を表現してもよい。具体的には、前フレームの映像信号を20%混ぜ合わせるような場合には「ノイズ軽減量は20%」、前フレームの映像信号を50%混ぜ合わせるような場合には「ノイズ軽減量は50%」、前フレームの映像信号を全く混ぜ合わせない場合には「ノイズ軽減量は0%」、などである(以下の「ノイズ軽減量」は、当該概念のことである)。   Here, the 3DNR unit (0401) of the present embodiment reduces the 3DNR noise reduction amount according to “difference information” that is the sum of the differences between the video signals output to the same pixel position in two consecutive frames. There may be provided means for performing processing to reduce noise while dynamically switching. The “noise reduction amount” is a concept for expressing the effect of noise reduction by 3DNR, and does not specifically indicate the amount of reduced noise in any unit. The expression method is an arbitrary design matter. For example, as a 3DNR, a video signal in a subsequent frame is a video signal obtained by mixing video signals output at the same pixel positions in two consecutive frames before and after at a predetermined rate. When the output process is performed, the “noise reduction amount” may be expressed by a ratio of mixing the video signal of the previous frame. Specifically, when the video signal of the previous frame is mixed by 20%, “the noise reduction amount is 20%”, and when the video signal of the previous frame is mixed by 50%, the “noise reduction amount is 50%”. % ”And“ Noise reduction amount is 0% ”when the video signal of the previous frame is not mixed at all (the“ noise reduction amount ”is the concept).

なお、差分情報に応じて3DNRのノイズ軽減量を動的に切替える処理は、差分が小さい場合にはノイズ軽減量をある程度大きくする。前記ノイズ軽減量は任意の設計事項であるが、残像の発生などの問題を考慮すると、10〜30%程度にするのが望ましい。一方、差分が大きい場合にはノイズ軽減量を小さくする。前記ノイズ軽減量も任意の設計事項であるが、残像の発生などの問題を考慮すると、0〜10%程度にするのが望ましい。差分が大きいか小さいかは、あらかじめ保持している閾値(任意の設計事項)よりも差分が大きいか小さいかで判別することとなる。   Note that the process of dynamically switching the 3DNR noise reduction amount according to the difference information increases the noise reduction amount to some extent when the difference is small. The noise reduction amount is an arbitrary design item, but is preferably about 10 to 30% in view of problems such as the occurrence of afterimages. On the other hand, when the difference is large, the noise reduction amount is reduced. The noise reduction amount is also an arbitrary design item, but it is desirable to set it to about 0 to 10% in consideration of problems such as the occurrence of afterimages. Whether the difference is large or small is determined based on whether the difference is larger or smaller than a threshold (arbitrary design item) held in advance.

「判断部」(0402)は、取得した映像ソースがプルダウンソースであるか判断するよう構成される。「プルダウンソース」とは、「2:3プルダウン」または「2:2プルダウン」の方式で変換された映像ソースのことである。「2:3プルダウン」、「2:2プルダウン」については、それぞれ図2、3を用いての前記説明通りであるので、ここでの詳細な説明は省略する。   The “determination unit” (0402) is configured to determine whether the acquired video source is a pull-down source. The “pull-down source” is a video source converted by the “2: 3 pull-down” or “2: 2 pull-down” method. Since “2: 3 pull-down” and “2: 2 pull-down” are as described above with reference to FIGS. 2 and 3, detailed description thereof is omitted here.

ここで、取得した映像ソースがプルダウンソースか否かを判断する手段としては、例えば、取得した映像ソース中に、「2:3プルダウン」や「2:2プルダウン」に特有の「同一映像フレーム繰返し規則」に従って、同一映像フレームが現れていないかを監視することで実現してもよい。   Here, as a means for determining whether or not the acquired video source is a pull-down source, for example, “2: 3 pull-down” or “2: 2 pull-down” specific “same video frame repetition” is included in the acquired video source. It may be realized by monitoring whether the same video frame appears according to the “Rule”.

具体的手段としては、例えば、一つのフレーム分の映像信号を取得すると、その都度、直前のフレームの映像信号と同じか否か判断し、その結果(「同じ」か「否か」)を格納していく。そして、前記格納した結果の変遷が「2:3プルダウン」や「2:2プルダウン」に特有の繰返し規則に該当していないか判断することで実現してもよい。   As a specific means, for example, each time a video signal for one frame is acquired, it is determined whether or not it is the same as the video signal of the immediately preceding frame, and the result (“same” or “no”) is stored. I will do it. Then, it may be realized by determining whether the transition of the stored result does not correspond to a repetition rule specific to “2: 3 pulldown” or “2: 2 pulldown”.

すなわち、「違う→同じ→違う→同じ→同じ→違う→同じ→違う→同じ→同じ→違う→・・・」のような結果の変遷(「違う(1回)→同じ(1回)→違う(1回)→同じ(2回)」を一サイクルとし、前記サイクルが繰り返し現れる変遷)が現れている場合には、「2:3プルダウン」の方式で変換されたプルダウンソースと判断する。さらに具体的には、「違う(1回)→同じ(1回)→違う(1回)→同じ(2回)」の一サイクル分の変遷が、連続して所定回数(1回、2回、5回、など)繰り返されていることを確認すると、「2:3プルダウン」の方式で変換されたプルダウンソースと判断するようにしてもよい。   In other words, transition of results such as “different → same → different → same → same → different → same → different → same → same → different → ...” (different (once) → same (once) → different When (1 time) → same (2 times) ”is assumed to be one cycle and the cycle repeatedly appears), it is determined that the source is a pull-down source converted by the“ 2: 3 pull-down ”method. More specifically, the transition for one cycle of “different (once) → same (once) → different (once) → same (once)” is continuously performed a predetermined number of times (once, twice). (5 times, etc.), it may be determined that the source is a pull-down source converted by the “2: 3 pull-down” method.

また、「違う→同じ→違う→同じ→違う→同じ→・・・」のような結果の変遷(「違う(1回)→同じ(1回)」を一サイクルとし、前記サイクルが繰り返し現れる変遷)が現れている場合には、「2:2プルダウン」の方式で変換されたプルダウンソースと判断する。さらに具体的には、「違う(1回)→同じ(1回)」の一サイクル分の変遷が、連続して所定回数(1回、2回、5回、など)繰り返されていることを確認すると「2:2プルダウン」の方式で変換されたプルダウンソースと判断するようにしてもよい。   In addition, the transition of the result such as “different → same → different → same → different → same →…” (“different (1 time) → same (1 time)” is one cycle, and the cycle appears repeatedly. ) Appears, it is determined as a pull-down source converted by the “2: 2 pull-down” method. More specifically, the transition of one cycle “different (once) → same (once)” is repeated a predetermined number of times (once, twice, five times, etc.). If confirmed, it may be determined that the source is a pull-down source converted by the “2: 2 pull-down” method.

なお、「取得したフレームの映像信号と、直前フレームの映像信号とが同じか否かの判断」は任意の設計事項であるが、例えば、それぞれのフレームの映像信号の平均画素値を算出し、その差分があらかじめ保持している閾値より小さい場合には同じ、閾値より大きい場合には異なると判断するような処理であってもよい。または、2つのフレームの映像信号の差分情報を算出し、当該値があらかじめ保持している閾値より小さい場合には同じ、閾値より大きい場合には異なると判断するような処理であってもよい。前記閾値は任意の設計事項である。   Note that “determining whether the video signal of the acquired frame is the same as the video signal of the immediately preceding frame” is an arbitrary design matter, for example, calculating the average pixel value of the video signal of each frame, The process may be the same when the difference is smaller than the threshold stored in advance, and different when it is larger than the threshold. Alternatively, the difference information between the video signals of the two frames may be calculated, and the process may be determined to be the same when the value is smaller than the threshold stored in advance and different when the value is larger than the threshold. The threshold is an arbitrary design item.

判断部(0402)は、取得した映像ソースがプルダウンソースであるか否か判断すると、その結果を、以下で説明する「ノイズ軽減量決定部」(0403)に通知する。また、判断部(0402)は、プルダウンソースであるとの判断結果である場合には、その結果とともに、いずれの種別の方式(「2:3プルダウン」または「2:2プルダウン」)で変換されたプルダウンソースかを識別する情報をもあわせて通知してもよい。   When the determination unit (0402) determines whether or not the acquired video source is a pull-down source, the determination unit (0402) notifies the “noise reduction amount determination unit” (0403) described below of the result. In addition, when the determination unit (0402) determines that the source is a pull-down source, the determination unit (0402) is converted by any type of method ("2: 3 pull-down" or "2: 2 pull-down") together with the result. Information identifying whether the source is a pull-down source may also be notified.

ここで、判断部(0402)が、前記プルダウンソースであるか否かの判断を行うタイミングとしては、例えば、映像ソースを取得中は常時行ってもよいし、または、所定時間ごとに行ってもよい。常時行う場合には、取得した映像ソースのすべてのフレームの映像信号を利用して、直前フレームの映像信号と同じか否かの判断を行い、判断結果の変遷が「2:3プルダウン」または「2:3プルダウン」に特有の変遷になっていないか常時監視することとなる。そして、その結果を常時、または、プルダウンソースか否かの判断およびプルダウンソース種別の判断が切り替わるごとに、その結果を、以下で説明する「ノイズ軽減量決定部」(0403)に通知するようにしてもよい。   Here, as a timing at which the determination unit (0402) determines whether or not it is the pull-down source, for example, the determination unit (0402) may always perform while acquiring the video source, or may perform it every predetermined time. Good. In the case of always performing, it is determined whether or not the video signal of all the frames of the acquired video source is the same as the video signal of the immediately preceding frame, and the transition of the determination result is “2: 3 pulldown” or “ Whether or not the transition is unique to “2: 3 pull-down” will always be monitored. The result is notified to the “noise reduction amount determination unit” (0403) described below at all times or whenever the determination of whether or not the source is a pull-down source and the determination of the pull-down source type are switched. May be.

また、所定時間(任意の設計事項、「例:10秒、30秒、1分、など」)ごとに行う場合には、所定時間経過をトリガに、そのタイミング後に取得される連続する所定数のフレーム(任意の設計事項、「例:8フレーム、10フレーム、20フレーム、など」)の映像信号を利用して、直前フレームの映像信号と同じか否かの判断を行う。そして、判断結果の変遷が「2:3プルダウン」または「2:2プルダウン」に特有の変遷になっていないか判断することで、取得した映像ソースがプルダウンソースか否かの判断を行う。そして、前記処理を行うごとに、または、プルダウンソースか否かの判断およびプルダウンソース種別の判断が切り替わるごとに、その結果を、以下で説明する「ノイズ軽減量決定部」(0403)に通知するようにしてもよい。   In addition, when it is performed every predetermined time (arbitrary design matter, “Example: 10 seconds, 30 seconds, 1 minute, etc.”), a predetermined number of continuous times acquired after that timing triggered by the passage of the predetermined time Using a video signal of a frame (arbitrary design item, “e.g., 8 frames, 10 frames, 20 frames, etc.”), it is determined whether or not it is the same as the video signal of the previous frame. Then, it is determined whether or not the acquired video source is a pull-down source by determining whether or not the transition of the determination result is a transition specific to “2: 3 pull-down” or “2: 2 pull-down”. Each time the above processing is performed or each time the determination of whether or not the source is a pull-down source and the determination of the pull-down source type are switched, the result is notified to a “noise reduction amount determination unit” (0403) described below. You may do it.

「ノイズ軽減量決定部」(0403)は、判断結果がプルダウンソースであるとの判断結果である場合には、映像ソース中での同一映像フレームの繰返し規則に従って、3DNR部でのノイズ軽減量を決定するよう構成される。「映像ソース中での同一映像フレームの繰返し規則」とは、同じ映像のフレームが繰り返し現れる所定の規則であり、「2:3プルダウンソース」の場合には、図2に示すように、「2つ→3つ→2つ→3つ→・・・」であり、「2:2プルダウンソース」の場合には、図3に示すように「2つ→2つ→2つ→・・・」である。   If the determination result is a pull-down source, the “noise reduction amount determination unit” (0403) determines the noise reduction amount in the 3DNR unit according to the repetition rule of the same video frame in the video source. Configured to determine. The “repetition rule of the same video frame in the video source” is a predetermined rule in which the same video frame appears repeatedly. In the case of “2: 3 pull-down source”, as shown in FIG. In the case of “2: 2 pull-down source”, “2 → 2 → 2 →...” As shown in FIG. It is.

すなわち、ノイズ軽減量決定部(0403)は、プルダウンソースの種別に応じた同一映像フレームの繰返し規則に従って、3DNR部でのノイズ軽減量を動的に切替えるように決定する。かかる場合、ノイズ軽減量決定部(0403)は、判断結果がプルダウンソースであるとの判断結果である場合には、(ア)そのプルダウンソースがいずれの種別のものかを判定する手段と、(イ)判定した種別に応じた同一映像フレームの繰返し規則に従って、3DNR部でのノイズ軽減量を動的に切替えるように決定する手段と、を備える必要がある。そこで、前記を実現するため、ノイズ軽減量決定部(0403)は、「判定手段」と「第一動的制御手段」を有してもよい。また、「第二動的制御手段」を有してもよい。   That is, the noise reduction amount determination unit (0403) determines to dynamically switch the noise reduction amount in the 3DNR unit according to the repetition rule of the same video frame according to the type of pull-down source. In this case, when the determination result is a pull-down source, the noise reduction amount determination unit (0403) (a) means for determining which type the pull-down source is, B) It is necessary to include means for dynamically determining the noise reduction amount in the 3DNR unit according to the same video frame repetition rule according to the determined type. Therefore, in order to realize the above, the noise reduction amount determination unit (0403) may include “determination means” and “first dynamic control means”. Further, “second dynamic control means” may be included.

「判定手段」は、プルダウンソース種別を判定するよう構成される。具体的には、取得したプルダウンソースが、「2:3プルダウンソース」または「2:2プルダウンソース」のいずれに該当するかを判定する。判定の具体的手段としては、例えば、前記判断部(0402)から「取得した映像信号がプルダウンソースである」旨の通知を受け取る場合には、その旨を示す情報とともに、取得した映像ソースがいずれの種別の方式により変換されたプルダウンソースであるかを示す情報をも取得する。そして、その情報を解析することで、判定するようにしてもよい。なお、取得した映像ソースがいずれの方式により変換されたものかを判断部(0402)が判断する手段については前記の通りである。   The “determination means” is configured to determine the pull-down source type. Specifically, it is determined whether the acquired pull-down source corresponds to “2: 3 pull-down source” or “2: 2 pull-down source”. As a specific means of determination, for example, when a notification that “the acquired video signal is a pull-down source” is received from the determination unit (0402), along with information indicating that, the acquired video source Also, information indicating whether the source is a pull-down source converted by the method of the type is acquired. And you may make it determine by analyzing the information. The means for the determination unit (0402) to determine by which method the acquired video source has been converted is as described above.

「第一動的制御手段」は、判定結果が2:3プルダウンである場合には、出現する2連続同一映像または3連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定するよう構成される。「2連続同一映像」とは、同一映像のフレームが2回連続して現れたものであり、図2の2:3プルダウン後のソースの場合、1フレーム目と2フレーム目の映像、また、6フレーム目と7フレーム目の映像などが該当する。すなわち、「2連続同一映像の同一映像間」とは、同一映像のフレーム間のことであり、図2の場合、1フレーム目と2フレーム目の間、また、6フレーム目と7フレーム目の間などのことである。   When the determination result is 2: 3 pull-down, the “first dynamic control unit” uses the same amount of noise reduction amount as the maximum threshold between the same video of two consecutive identical videos or three consecutive identical videos that appear. Between the change images straddling the image groups, the noise reduction amount is determined to be a value corresponding to the image change amount. “Two consecutive identical images” means that frames of the same image appear twice in succession, and in the case of the source after 2: 3 pulldown in FIG. 2, the images of the first and second frames, The 6th and 7th frame images are applicable. That is, “between the same images of two consecutive identical images” means between the frames of the same image, and in the case of FIG. 2, between the first frame and the second frame, and between the sixth frame and the seventh frame. It is between things.

同様に、「3連続同一映像」とは、図2の2:3プルダウン後のソースの場合、3フレーム目と4フレーム目と5フレーム目の映像などが該当し、「3連続同一映像の同一映像間」とは、図2の場合、3フレーム目と4フレーム目の間、また、4フレーム目と5フレーム目の間などのことである。   Similarly, in the case of the source after the 3: 3 pull-down in FIG. 2, “3 consecutive identical videos” corresponds to the 3rd, 4th, and 5th frames. In the case of FIG. 2, “between images” means between the third frame and the fourth frame, between the fourth frame and the fifth frame, and the like.

第一動的制御手段は、出現する2連続同一映像間または3連続同一映像間の同一映像間においてノイズ軽減量をあらかじめ定められた最大閾値に決定する。「同一映像間におけるノイズ軽減量」とは、同一映像間を構成する2つのフレームの映像信号を利用して行う3DNRのノイズ軽減量のことであり、すなわち、同一映像間を構成する後ろ側のフレームの映像信号に重畳したノイズを軽減するための3DNRのノイズ軽減量のことである。なお、前記最大閾値は任意の設計事項であり、例えば、50%、70%、90%などとすることができる。このような高い数値に設定しても、残像の問題が生じることはない。   The first dynamic control means determines a noise reduction amount to be a predetermined maximum threshold between two consecutive identical videos that appear or between identical videos between three consecutive identical videos. The “noise reduction amount between the same images” is a noise reduction amount of 3DNR performed by using the video signals of two frames constituting the same image, that is, the rear side constituting the same image. This is a noise reduction amount of 3DNR for reducing noise superimposed on the video signal of the frame. The maximum threshold value is an arbitrary design item, and can be set to 50%, 70%, 90%, or the like, for example. Even when such a high numerical value is set, the problem of afterimage does not occur.

次に、「前記連続同一映像をまたぐ変化映像間」とは、2連続同一映像または3連続同一映像である連続同一映像群どうしの境目のフレーム間のことであり、図2の2:3プルダウン後のソースの場合、2フレーム目と3フレーム目の間、また、5フレーム目と6フレーム目の間などのことである。すなわち、「前記連続同一映像群をまたぐ変化映像間」とは、異なる映像のフレーム間のことである。第一動的制御手段は、連続同一映像群をまたぐ変化映像間においては、ノイズ軽減量をその画像変化量に応じた値にする。例えば、差分情報に基づいた所定のノイズ軽減量に決定する。その手段については、前記3DNR部(0401)での説明通りである。なお、第一動的制御手段は、連続同一映像群をまたぐ変化映像間においては、あらかじめ定められた十分に小さい閾値(例:「0%、5%、など」)にノイズ軽減量を決定するようにしてもよい。   Next, “between the changed videos that straddle the same continuous video” means a frame between the borders of two or more consecutive same video groups that are the same video or three consecutive same videos. For later sources, it is between the second and third frames, between the fifth and sixth frames, and so on. That is, “between the changed video images that straddle the same continuous video group” refers to between different video frames. The first dynamic control means sets the noise reduction amount to a value corresponding to the image change amount between the change images straddling the same continuous video group. For example, a predetermined noise reduction amount based on the difference information is determined. The means is the same as described in the 3DNR section (0401). Note that the first dynamic control means determines the noise reduction amount to a sufficiently small threshold value (eg, “0%, 5%, etc.”) that is set in advance between the change videos that straddle the same video group. You may do it.

ここで、図5を用いて、第一動的制御手段によりノイズ軽減量を動的に変化させた場合の効果を説明する。図5は、2:3プルダウンソースに対して、従来技術で3DNRの効果(ノイズ軽減量)を動的に切替えた場合(図中、上側)と、本件発明を利用して3DNRの効果(ノイズ軽減量)を動的に切替えた場合(図中、下側)とを並べて示したものである。   Here, the effect when the noise reduction amount is dynamically changed by the first dynamic control means will be described with reference to FIG. FIG. 5 shows a case in which the 3DNR effect (noise reduction amount) is dynamically switched (upper side in the figure) by the conventional technique with respect to the 2: 3 pull-down source, and the 3DNR effect (noise) using the present invention. This is a side-by-side view of the case where the reduction amount is dynamically switched (lower side in the figure).

図に示すように、従来技術では(図中、上側)、いずれのフレーム間においても、差分情報に応じたある程度のノイズ軽減量(例:0〜30%)で3DNRを動作させる。かかる場合、残像の問題が生じることはないが、十分なノイズ軽減を実現することはできない。   As shown in the figure, in the conventional technique (upper side in the figure), 3DNR is operated with a certain amount of noise reduction (eg, 0 to 30%) according to the difference information between any frames. In such a case, the problem of afterimage does not occur, but sufficient noise reduction cannot be realized.

一方、本件発明では(図中、下側)、同一映像のフレーム間(1フレーム目と2フレーム目の間、3フレーム目と4フレーム目の間、など)においては強いノイズ軽減量(例:70%)で3DNRを動作させ、ノイズを十分に軽減する。なお、当然に、同一映像のフレーム間においては、ノイズ軽減量をどれだけ強くしても残像の問題が生じることはない。   On the other hand, in the present invention (lower side in the figure), a strong noise reduction amount (for example, between the first frame and the second frame, between the third frame and the fourth frame, etc.) 70%), 3DNR is operated and noise is sufficiently reduced. Needless to say, no matter how much the noise reduction amount is increased between frames of the same video, the problem of afterimage does not occur.

そして、異なる映像のフレーム間(2フレーム目と3フレーム目の間、5フレーム目と6フレーム目の間、など)においては差分情報に応じたある程度のノイズ軽減量(例:0〜30%)で3DNRを動作させる。その結果、残像の問題が生じるのを防止している。   Then, between different video frames (between the second and third frames, between the fifth and sixth frames, etc.), a certain amount of noise reduction according to the difference information (example: 0 to 30%) To operate 3DNR. As a result, the problem of afterimage is prevented.

このように、本件発明を利用して3DNRの効果(ノイズ軽減量)を動的に切替えた場合(図中、下側)には、いずれのフレーム間においても、残像の問題が生じることはない。また、同一映像のフレーム間において、十分に強い効果で3DNRを動作させるので、いずれのフレーム間においても、差分情報に応じたある程度のノイズ軽減量(例:0〜30%)でしか3DNRを動作させない従来技術に比べて、優れたノイズ軽減効果を得ることができる。   As described above, when the 3DNR effect (noise reduction amount) is dynamically switched using the present invention (lower side in the figure), the afterimage problem does not occur between any frames. . In addition, since 3DNR is operated with a sufficiently strong effect between frames of the same video, 3DNR is operated only with a certain amount of noise reduction (for example, 0 to 30%) according to difference information between any frames. An excellent noise reduction effect can be obtained as compared with the conventional technology that does not.

なお、前記説明において記載したノイズ軽減量の数値(「0〜30%」、「70%」)、および、図5中の数値(「0〜30%」、「70%」)はあくまで一例であり、これらに限定されるものではない。   Note that the numerical values of noise reduction (“0 to 30%” and “70%”) described in the above description and the numerical values in FIG. 5 (“0 to 30%” and “70%”) are merely examples. Yes, it is not limited to these.

「第二動的制御手段」は、判定結果が2:2プルダウンである場合には、出現する2連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値にするよう構成される。なお、「2連続同一映像」、「2連続同一映像の同一映像間」の概念については、前記と同様である。また、前記ノイズ軽減量の最大閾値は任意の設計事項であり、例えば、50%、70%、90%などとすることができる。さらに、「連続同一映像群をまたぐ変化映像間」は、2連続同一映像である連続同一映像群同士の境目のフレーム間のことであり、その他の概念(「変化映像間」など)については前記と同様である。   When the determination result is 2: 2 pull-down, the “second dynamic control unit” changes the amount of noise reduction between the same images of the two consecutive identical videos that appear across the consecutive identical video groups. Between images, the noise reduction amount is set to a value corresponding to the image change amount. Note that the concepts of “two consecutive identical videos” and “between identical videos of two consecutive identical videos” are the same as described above. Further, the maximum threshold value of the noise reduction amount is an arbitrary design item, and can be 50%, 70%, 90%, or the like, for example. Furthermore, “between change videos that straddle the same continuous video group” means a frame between the borders of two continuous same video groups that are the same video, and other concepts (such as “between change video”) are described above. It is the same.

第二動的制御手段によりノイズ軽減量を動的に変化させた場合についても、第一動的制御手段によりノイズ軽減量を動的に変化させた場合(図5)と同様の優れた効果を得ることができる。   Even when the noise reduction amount is dynamically changed by the second dynamic control means, the same excellent effect as when the noise reduction amount is dynamically changed by the first dynamic control means (FIG. 5). Can be obtained.

<本実施形態のハードウェア構成>   <Hardware configuration of this embodiment>

図6は、上記映像処理装置の機能的構成をハードウェアとして実現した際の構成の一例を表す図である。図に示すように、本実施形態の映像処理装置は、「3DNR部」、「判断部」、「ノイズ軽減量決定部」、「ノイズ軽減量決定部」の「判定手段」、「第一動的制御手段」、「第二動的制御手段」などを構成する「CPU」(0601)、「主記憶装置」(0602)、「プログラム記憶装置」(0603)、「2次記憶装置」(0604)、「VRAM」(0605)、「ユーザI/F」(0606)、「チューナー」(0607)、「外部機器I/F」(0608)、「ディスプレイ」(0609)、「スピーカー」(0610)、などを備え、これらは「システムバス」(0611)などのデータ通信経路によって相互に接続され、情報の送受信や処理を行う。   FIG. 6 is a diagram illustrating an example of a configuration when the functional configuration of the video processing apparatus is realized as hardware. As shown in the figure, the video processing apparatus of the present embodiment includes a “3DNR unit”, “determination unit”, “noise reduction amount determination unit”, “determination means” of the “noise reduction amount determination unit”, “first motion”. "CPU" (0601), "main storage device" (0602), "program storage device" (0603), "secondary storage device" (0604) constituting "dynamic control means", "second dynamic control means", etc. ), “VRAM” (0605), “User I / F” (0606), “Tuner” (0607), “External Device I / F” (0608), “Display” (0609), “Speaker” (0610) , Etc., which are connected to each other by a data communication path such as “system bus” (0611), and perform transmission / reception and processing of information.

以下、図6のハードウェア図を用いて、本実施形態の映像処理装置の機能を実現する手段の一例を説明する。   Hereinafter, an example of means for realizing the function of the video processing apparatus according to the present embodiment will be described with reference to the hardware diagram of FIG.

まず、主記憶装置(0602)のワーク領域に展開された放送波取得プログラムに従い、チューナ(0607)を介して映像ソースを取得すると、YCbCr信号に変換し、主記憶装置(0602)のデータ領域に格納する。例えば、デジタルチューナを介して映像ソースを取得した場合には、MPEG信号をデコード処理などしてYCbCr信号に変換する。また、アナログチューナを介して映像ソースを取得した場合には、YC分離処理やA/D変換などして、YCbCr信号に変換する。   First, according to the broadcast wave acquisition program developed in the work area of the main storage device (0602), when a video source is acquired via the tuner (0607), it is converted into a YCbCr signal and stored in the data area of the main storage device (0602). Store. For example, when a video source is acquired via a digital tuner, the MPEG signal is converted into a YCbCr signal by decoding processing or the like. When a video source is acquired via an analog tuner, it is converted into a YCbCr signal by YC separation processing or A / D conversion.

その他、HDMI端子、CVBS端子、コンポーネント端子などの外部機器I/F(0608)を介して、外部機器から映像ソースを取得した場合にも、従来技術を利用してYCbCr信号に変換する。   In addition, even when a video source is acquired from an external device via an external device I / F (0608) such as an HDMI terminal, a CVBS terminal, or a component terminal, it is converted into a YCbCr signal using the conventional technology.

その後、NRプログラムに従い1フレーム分のYCbCr信号に対してNR処理(一番初めのフレームの信号に対しては、例えば、2DNRなどの処理を行ってもよいし、何の処理も行わなくてもよい。)を行い、NR処理後の信号を主記憶装置(0602)のデータ領域に格納する。そして、映像出力プログラムに従い、1フレーム分のNR処理後信号に対してIP変換などの所定の処理を行った後、VRAM(0605)に前記信号を書き込んで、ディスプレイ(0609)に映像を出力する。   Thereafter, according to the NR program, NR processing is performed on the YCbCr signal for one frame (for example, 2DNR processing may be performed on the signal of the first frame, or no processing is performed). The signal after NR processing is stored in the data area of the main memory (0602). Then, in accordance with the video output program, predetermined processing such as IP conversion is performed on the signal after NR processing for one frame, and then the signal is written in the VRAM (0605) to output the video to the display (0609). .

また、次のフレームのYCbCr信号に対してNR処理を行い、NR処理後の信号を主記憶装置(0602)のデータ領域に格納する。当該NR処理は、主記憶装置(0602)のデータ領域に格納されている前のフレームのNR処理後信号を利用し、2つのフレームの映像信号の差分情報に応じたノイズ軽減量での3DNR処理であってもよい。その後、NR処理後の信号と、前のフレームのNR処理後信号とを比較し、これら2つのフレームの映像が同一か否かを判定して、判定結果を主記憶装置(0602)のデータ領域に格納する。当該判定は、例えば、2つのフレームそれぞれの平均画素値を算出し、それらの差分があらかじめ保持している所定の値より大きいか否かで判定するような処理であってもよい。また、映像出力プログラムに従い、当該フレーム分のNR処理後信号に対してIP変換などの所定の処理を行った後、VRAM(0605)に前記信号を書き込んで、ディスプレイ(0609)に映像を出力する。   Also, NR processing is performed on the YCbCr signal of the next frame, and the signal after NR processing is stored in the data area of the main storage device (0602). The NR process uses the post-NR signal of the previous frame stored in the data area of the main storage device (0602), and the 3DNR process with the noise reduction amount corresponding to the difference information of the video signals of the two frames It may be. Thereafter, the signal after NR processing is compared with the signal after NR processing of the previous frame, it is determined whether or not the images of these two frames are the same, and the determination result is stored in the data area of the main memory (0602). To store. The determination may be, for example, a process of calculating an average pixel value of each of two frames and determining whether or not a difference between them is larger than a predetermined value held in advance. Further, after performing predetermined processing such as IP conversion on the NR processed signal for the frame in accordance with the video output program, the signal is written to the VRAM (0605) and the video is output to the display (0609). .

前記処理を繰り返し、連続する2つのフレームの映像が同一か否かの判定結果が所定数量蓄積されたら、蓄積された判定結果の変遷が、あらかじめ保持している2:3プルダウンソースに特有の変遷、または、2:2プルダウンソースに特有の変遷と一致しないか比較処理する。比較の結果、例えば、2:3プルダウンソースに特有の変遷と一致した場合には、その後取得したYCbCr信号に対しては、2:3プルダウンソースNRプログラムに従い、2:3プルダウンソースに特有の同一映像フレームの繰返し規則に従って、ノイズ軽減量を動的に切替えながら3DNRを行う。NR処理後の処理については、前記と同様である。   When the above process is repeated and a predetermined number of determination results as to whether or not the images of two consecutive frames are the same are accumulated, the transition of the accumulated determination results is a transition peculiar to the 2: 3 pull-down source held in advance. Or, a comparison process is performed to determine whether the transition is unique to the 2: 2 pull-down source. As a result of the comparison, for example, when it coincides with the transition specific to the 2: 3 pull-down source, the YCbCr signal acquired thereafter is identical to the 2: 3 pull-down source according to the 2: 3 pull-down source NR program. 3DNR is performed while the noise reduction amount is dynamically switched according to a video frame repetition rule. The processing after NR processing is the same as described above.

その後、NR処理後の信号を取得するたびに、前のフレームのNR処理後信号と同一か否かの判定をし、その結果を蓄積していく。また、蓄積した判定結果の変遷が2:3プルダウンソースに特有の変遷と一致しているか比較し続ける。そして、前記比較の結果、判定結果の変遷が2:3プルダウンソースに特有の変遷と一致しなくなった場合には、その後取得したYCbCr信号に対しては、NRプログラムに従い、前のフレームのNR処理後信号を利用し、2つのフレームの映像信号の差分情報に応じたノイズ軽減量での3DNR処理などを行う。NR処理後の処理については、前記と同様である。
<本実施形態の処理の流れ>
Thereafter, each time a signal after NR processing is acquired, it is determined whether or not it is the same as the signal after NR processing of the previous frame, and the result is accumulated. Moreover, it continues to compare whether the transition of the accumulated determination result matches the transition unique to the 2: 3 pull-down source. As a result of the comparison, when the transition of the determination result does not coincide with the transition specific to the 2: 3 pull-down source, the NR processing of the previous frame is performed on the YCbCr signal obtained thereafter according to the NR program. Using the post signal, 3DNR processing or the like is performed with a noise reduction amount corresponding to the difference information between the video signals of the two frames. The processing after NR processing is the same as described above.
<Processing flow of this embodiment>

本実施形態の映像処理装置の処理の流れの一例を、図7のフローチャート図を用いて説明する。   An example of the processing flow of the video processing apparatus of this embodiment will be described with reference to the flowchart of FIG.

まず、本実施形態の映像処理装置は、チューナーなどを介して映像ソースを取得すると(S0701)、取得した映像ソースがプルダウンソース(2:3プルダウンソース、または、2:2プルダウンソース)か否か判断する(S0702)。   First, when the video processing apparatus according to the present embodiment acquires a video source via a tuner or the like (S0701), it is determined whether the acquired video source is a pull-down source (2: 3 pull-down source or 2: 2 pull-down source). Judgment is made (S0702).

判断の結果、映像ソースがプルダウンソースでない場合には(S0703)、連続する2つの前後フレームを比較し、差分情報に応じてノイズ軽減量を動的に決定する(S0705)。なお、ステップS0703における「プルダウンソースでない場合」には、プルダウンソースか否か判断できない場合(例:所定数量分のフレームの映像信号を取得していない場合、など)をも含む。   If the result of the determination is that the video source is not a pull-down source (S0703), two consecutive frames are compared and a noise reduction amount is dynamically determined according to the difference information (S0705). Note that “when it is not a pull-down source” in step S0703 includes a case where it is not possible to determine whether or not it is a pull-down source (for example, when a predetermined number of frames of video signals are not acquired).

一方、映像ソースがプルダウンソースである場合には(S0703)、プルダウンソースに特有の同一映像フレームの繰返し規則に従って、ノイズ軽減量を動的に決定する(S0704)。具体的には、プルダウンソースに出現する2連続同一映像または3連続同一映像の同一映像間では、ノイズ軽減量を最大閾値に決定する。また、2連続同一映像または3連続同一映像である連続同一映像群をまたぐ変化映像間では、その間の画像変換量に応じて画像変化量に決定する。その後、決定したノイズ軽減量で3DNRを動作させながら(S0706)、ノイズ軽減処理を行った映像を画面に出力する。   On the other hand, when the video source is a pull-down source (S0703), the noise reduction amount is dynamically determined according to the same video frame repetition rule specific to the pull-down source (S0704). Specifically, the noise reduction amount is determined as the maximum threshold between the same images of two consecutive identical videos or three consecutive identical videos appearing in the pull-down source. In addition, between the change videos that straddle the same video group that is two consecutive identical videos or three consecutive identical videos, the image change amount is determined according to the image conversion amount between them. Thereafter, while the 3DNR is operated with the determined noise reduction amount (S0706), the image subjected to the noise reduction processing is output to the screen.

そして、映像処理装置の電源をOFFにするまで(S0707)、取得した映像ソースがプルダウンソースか否かの判断を行い(S0702)、判断結果に応じて3DNRのノイズ軽減量を決定する手段を動的に変化させながら3DNRを動作させ、ノイズ軽減処理を行った映像を画面に出力する(S0703〜S0706)。
<本実施形態の効果>
Until the power of the video processing apparatus is turned off (S0707), it is determined whether or not the acquired video source is a pull-down source (S0702), and means for determining the 3DNR noise reduction amount is activated according to the determination result. The 3DNR is operated while changing the image, and the image subjected to the noise reduction processing is output on the screen (S0703 to S0706).
<Effect of this embodiment>

本実施形態の映像処理装置および映像処理装置のノイズ軽減方法により、「2:2プルダウン」や「2:3プルダウン」などの変換をされた映像ソースを取得した場合、残像の問題を生じさせることなく、かつ、十分なノイズ軽減効果を実現することが可能になる。   When a video source converted such as “2: 2 pull-down” or “2: 3 pull-down” is acquired by the video processing apparatus and the noise reduction method of the video processing apparatus according to the present embodiment, a problem of afterimage occurs. And a sufficient noise reduction effect can be realized.

本発明のノイズ軽減方法の効果を説明するための概念図1Conceptual diagram 1 for explaining the effect of the noise reduction method of the present invention 2:3プルダウン変換を説明するための概念図Conceptual diagram for explaining 2: 3 pull-down conversion 2:2プルダウン変換を説明するための概念図Conceptual diagram for explaining 2: 2 pull-down conversion 本発明の映像処理装置の機能ブロック図の一例Example of functional block diagram of video processing apparatus of the present invention 本発明のノイズ軽減方法の効果を説明するための概念図2Conceptual diagram 2 for explaining the effect of the noise reduction method of the present invention 本発明の映像処理装置のハードウェア構成の一例を示した概念図The conceptual diagram which showed an example of the hardware constitutions of the video processing apparatus of this invention 本発明の映像処理装置の処理の流れの一例を示すフローチャート図The flowchart figure which shows an example of the flow of a process of the video processing apparatus of this invention

符号の説明Explanation of symbols

0400 映像処理装置
0401 3DNR部
0402 判断部
0403 ノイズ軽減量決定部
0400 Video processing device 0401 3DNR unit 0402 Judgment unit 0403 Noise reduction amount determination unit

Claims (3)

映像信号に重畳されたノイズを軽減する処理を行う3DNR部と、
取得した映像ソースがプルダウンソースであるか判断する判断部と、
判断結果がプルダウンソースであるとの判断結果である場合には、映像ソース中での同一映像フレームの繰返し規則に従って3DNR部でのノイズ軽減量を決定するノイズ軽減量決定部と、
を有する映像処理装置であって、
ノイズ軽減量決定部は、
プルダウンソース種別を判定する判定手段と、
判定結果が2:3プルダウンである場合には、出現する2連続同一映像または3連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定する第一動的制御手段と、
を有する映像処理装置。
A 3DNR unit that performs processing to reduce noise superimposed on the video signal;
A determination unit that determines whether the acquired video source is a pull-down source;
When the determination result is a determination result indicating that the source is a pull-down source, a noise reduction amount determination unit that determines a noise reduction amount in the 3DNR unit according to the repetition rule of the same video frame in the video source;
A video processing apparatus comprising:
The noise reduction amount determination unit
A determination means for determining a pull-down source type;
When the determination result is 2: 3 pull-down, the noise reduction amount is set to the maximum threshold between the same video of the two consecutive identical videos or the three consecutive identical videos that appear, and the noise is reduced between the change videos across the same video group. First dynamic control means for determining the amount to a value according to the amount of image change;
A video processing apparatus.
ノイズ軽減量決定部は、
プルダウンソース種別を判定する判定手段と、
判定結果が2:2プルダウンである場合には、出現する2連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定する第二動的制御手段と、
を有する請求項1に記載の映像処理装置。
The noise reduction amount determination unit
A determination means for determining a pull-down source type;
When the determination result is 2: 2 pull-down, the noise reduction amount is set to the maximum threshold between the same images of the two consecutive identical videos that appear, and the noise reduction amount is changed between the changed videos across the same video group. Second dynamic control means for determining a value according to the amount;
The video processing apparatus according to claim 1, comprising:
取得した映像ソースがプルダウンソースであるか判断する判断ステップと、
判断結果がプルダウンソースであるとの判断結果である場合には、映像ソース中での同一映像フレームの繰返し規則に従ってノイズ軽減量を決定するノイズ軽減量決定ステップと、
ノイズ軽減量決定ステップで決定したノイズ軽減量に基づいて、映像信号に重畳されたノイズを軽減する処理を行う3DNRステップと、
を有する映像処理装置によるノイズ軽減方法であって、
ノイズ軽減量決定ステップは、
プルダウンソース種別を判定する判定サブステップと、
判定結果が2:3プルダウンである場合には、出現する2連続同一映像または3連続同一映像の同一映像間でノイズ軽減量を最大閾値に、前記連続同一映像群をまたぐ変化映像間はノイズ軽減量をその画像変化量に応じた値に決定する第一動的制御サブステップと、
を有するノイズ軽減方法。
A determination step of determining whether the acquired video source is a pull-down source;
If the determination result is a determination result that is a pull-down source, a noise reduction amount determination step that determines a noise reduction amount according to the repetition rule of the same video frame in the video source;
A 3DNR step for performing a process of reducing noise superimposed on the video signal based on the noise reduction amount determined in the noise reduction amount determination step;
A noise reduction method by a video processing device having
The noise reduction amount determination step
A determination sub-step for determining a pull-down source type;
When the determination result is 2: 3 pull-down, the noise reduction amount is set to the maximum threshold between the same video of the two consecutive identical videos or the three consecutive identical videos that appear, and the noise is reduced between the change videos across the same video group. A first dynamic control substep for determining the amount to a value according to the amount of image change;
A noise reduction method.
JP2008260466A 2008-10-07 2008-10-07 Video processing apparatus and noise reduction method Expired - Fee Related JP5403784B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008260466A JP5403784B2 (en) 2008-10-07 2008-10-07 Video processing apparatus and noise reduction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008260466A JP5403784B2 (en) 2008-10-07 2008-10-07 Video processing apparatus and noise reduction method

Publications (2)

Publication Number Publication Date
JP2010093474A JP2010093474A (en) 2010-04-22
JP5403784B2 true JP5403784B2 (en) 2014-01-29

Family

ID=42255801

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008260466A Expired - Fee Related JP5403784B2 (en) 2008-10-07 2008-10-07 Video processing apparatus and noise reduction method

Country Status (1)

Country Link
JP (1) JP5403784B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10776904B2 (en) 2017-05-03 2020-09-15 Samsung Electronics Co., Ltd. Method and apparatus for processing image

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3234178A1 (en) * 1982-09-15 1984-03-15 Robert Bosch Gmbh, 7000 Stuttgart SYSTEM FOR REDUCING NOISE IN A TELEVISION SIGNAL
JPH11215403A (en) * 1998-01-26 1999-08-06 Toshiba Corp Video signal processor
US6297848B1 (en) * 1998-11-25 2001-10-02 Sharp Laboratories Of America, Inc. Low-delay conversion of 3:2 pulldown video to progressive format with field averaging
JP4259437B2 (en) * 2004-09-17 2009-04-30 日本ビクター株式会社 Recording / playback system
JP2008035439A (en) * 2006-07-31 2008-02-14 Fujitsu Ltd Noise eliminating apparatus, noise elimination control method and noise elimination control program

Also Published As

Publication number Publication date
JP2010093474A (en) 2010-04-22

Similar Documents

Publication Publication Date Title
US7898597B2 (en) Video processing apparatus and control method for the video processing apparatus
JP4863767B2 (en) Video signal processing apparatus and image display apparatus
JP5004309B2 (en) Movie output method and movie output device
JP2007316405A (en) Multi-screen display device
JP4693546B2 (en) Digital noise reduction apparatus and method, and video signal processing apparatus
JP2009111932A (en) Moving image decoding device
JP4691193B1 (en) Video display device and video processing method
US6751404B1 (en) Method and apparatus for detecting processor congestion during audio and video decode
JP5403784B2 (en) Video processing apparatus and noise reduction method
JP2011244328A (en) Video reproduction apparatus and video reproduction apparatus control method
JPWO2009118977A1 (en) Video processing device
US9100663B2 (en) Apparatus, method, and program for video signal processing, and storage medium
CN105704541A (en) Method for seamlessly switching videos
JP2007074439A (en) Video processor
JP2009159321A (en) Interpolation processing apparatus, interpolation processing method, and picture display apparatus
JP2009111631A (en) Video reproduction device and method for video reproduction
JP2009135769A (en) Image processing device
JP2006060335A (en) Image processing apparatus
JP2008160466A (en) Video signal processor
JP2008067205A (en) Frame interpolation circuit, frame interpolation method, and display device
JP2012004890A (en) Video signal output device, and video signal output method
JP5259867B2 (en) Video display device and video processing method
JP2008284128A (en) Video display device
JP4799674B1 (en) Image processing apparatus, image display apparatus, and image processing method
JP2007233120A (en) Liquid crystal display device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110223

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120409

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120507

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120618

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121220

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131004

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131028

R150 Certificate of patent or registration of utility model

Ref document number: 5403784

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees