JP2012085241A - Display device and display method - Google Patents

Display device and display method Download PDF

Info

Publication number
JP2012085241A
JP2012085241A JP2010232060A JP2010232060A JP2012085241A JP 2012085241 A JP2012085241 A JP 2012085241A JP 2010232060 A JP2010232060 A JP 2010232060A JP 2010232060 A JP2010232060 A JP 2010232060A JP 2012085241 A JP2012085241 A JP 2012085241A
Authority
JP
Japan
Prior art keywords
image
display
video signal
noise reduction
input video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010232060A
Other languages
Japanese (ja)
Other versions
JP5694732B2 (en
Inventor
Mitsuru Hashimoto
充 橋本
Takeshi Kawabe
武司 川辺
Tomoaki Takeda
倫明 武田
Wataru Hachitani
渉 蜂谷
Koichi Takaku
晃一 高久
Hiroaki Okumoto
浩章 奥本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2010232060A priority Critical patent/JP5694732B2/en
Publication of JP2012085241A publication Critical patent/JP2012085241A/en
Application granted granted Critical
Publication of JP5694732B2 publication Critical patent/JP5694732B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To display a high-definition image by reducing noise in a displayed image when displaying an image captured from an input image signal as a still image.SOLUTION: When displaying the image captured from the input image signal, an image quality adjustment unit 10 performs processing of holding in a frame memory 14 an image B extracted from the input image signal and displaying the image B as a still image on a display part 20, and increases the strength of a three-dimensional NR (noise reduction) part 11 to a predetermined level, and holds images C and D separated by two or more frames in the frame memory 14. Then, the images C and D are compared with each other to discriminate whether the input image signal is a still image without movement or a moving image with movement. When the input image signal is the still image without movement, an image C is output instead of the image B as a captured image.

Description

本発明は、表示装置および表示方法に関し、より詳細には、入力映像信号からキャプチャした画像を静止画として表示する機能を備えた表示装置とその表示方法に関する。   The present invention relates to a display device and a display method, and more particularly to a display device having a function of displaying an image captured from an input video signal as a still image and a display method thereof.

例えば、テレビジョン装置などの表示装置においては、受信したテレビ放送信号や外部入力した映像信号を表示中に、表示中の画像を静止させた状態で表示させる静止画表示機能をもつものがある。   For example, some display devices such as a television device have a still image display function for displaying a displayed image in a stationary state while displaying a received television broadcast signal or an externally input video signal.

一方、テレビ放送信号を受信可能なテレビジョン装置などの表示装置においては、受信環境等の要因により放送信号の受信状態が悪くなり、アンテナが受信した信号の電界強度が低くなると、映像信号に重畳されてくるノイズの比率が大きくなり、受信した放送信号の出力に障害が発生する。上記のような静止画表示を行う場合にも、入力映像信号のノイズレベルが大きくなれば、キャプチャした画像においてもノイズの多い低品位の画像となり、その画像が静止画像として表示されることになる。   On the other hand, in a display device such as a television device capable of receiving a television broadcast signal, if the reception state of the broadcast signal deteriorates due to factors such as the reception environment, and the electric field strength of the signal received by the antenna decreases, it is superimposed on the video signal. As a result, the ratio of the incoming noise increases, and a failure occurs in the output of the received broadcast signal. Even when the still image is displayed as described above, if the noise level of the input video signal is increased, the captured image becomes a low-quality image with much noise, and the image is displayed as a still image. .

受信信号の電解強度が低い場合の画質改善技術として、例えば、特許文献1には、中間周波増幅回路のゲインを調整するためのIFAGC(Intermediate Frequency Automatic Brightness Limiter)電圧に基づいてACL(Automatic Contrast Limiter)電圧を制御するACL電圧制御回路を備えたテレビ受信機が開示されている。このテレビ受信機は、アンテナで受信した映像信号の電界強度が低下してIFAGC電圧がツェナーダイオードの降伏電圧により定まる所定値を超えたときに、信号処理回路へ帰還されるACL電圧をコントラストが減少する側へ制御して、弱電界時に画面に現れるビートを目立たなくするようにしている。   As a technique for improving image quality when the electrolytic strength of a received signal is low, for example, Patent Document 1 discloses an automatic contrast limiter (ACL) based on an IFAGC (Intermediate Frequency Automatic Brightness Limiter) voltage for adjusting the gain of an intermediate frequency amplifier circuit. ) A television receiver with an ACL voltage control circuit for controlling the voltage is disclosed. This television receiver reduces the contrast of the ACL voltage fed back to the signal processing circuit when the electric field strength of the video signal received by the antenna decreases and the IFAGC voltage exceeds a predetermined value determined by the breakdown voltage of the Zener diode. The beat that appears on the screen when the electric field is weak is made inconspicuous.

また、特許文献2には、AFT(Automatic Fine Tuning)機能を有するテレビ信号受信装置において、テレビ信号の弱電界時、検波された映像信号自身のS/Nの悪化を最小限に抑えるようにするための技術が開示されている。テレビ信号受信装置は、テレビ信号の電界状態を検出する手段を備え、テレビ信号が弱電界状態になったとき、通常のAFT動作により得られるチューナの選局位置を画質がやや甘くなるように所定の設定分だけずらすようにしている。   Further, in Patent Document 2, in a television signal receiving apparatus having an AFT (Automatic Fine Tuning) function, the deterioration of the S / N of the detected video signal itself is minimized when the television signal is weak in electric field. Techniques for disclosing are disclosed. The television signal receiving device includes means for detecting the electric field state of the television signal, and when the television signal is in a weak electric field state, the tuning position of the tuner obtained by the normal AFT operation is predetermined so that the image quality becomes slightly sweet. The amount of setting is shifted.

また、特許文献3には、弱電界時でも、ソフトで見易い映像が得られるようにするための移動体TV用映像信号処理回路が開示されている。この回路は、音声検波回路より信号レベルを検波しDC電圧を発生する信号レベル検出回路で判断された信号レベルに応じて、映像検波回路で検波された映像信号の周波数特性を可変することができる周波数特性可変回路を設け、弱電界時は映像検波回路で検波された映像信号における高域の周波数特性を周波数特性可変回路により落とす。これにより弱電界でもノイズの少ない、見易い映像を得ようとしている。   Patent Document 3 discloses a video signal processing circuit for a mobile TV for obtaining an easy-to-view video even in a weak electric field. This circuit can vary the frequency characteristic of the video signal detected by the video detection circuit in accordance with the signal level detected by the signal level detection circuit that detects the signal level from the audio detection circuit and generates a DC voltage. A frequency characteristic variable circuit is provided, and when the electric field is weak, a high frequency characteristic in the video signal detected by the video detection circuit is dropped by the frequency characteristic variable circuit. As a result, an easy-to-view image with little noise even in a weak electric field is being obtained.

特開2004−328228号公報JP 2004-328228 A 特開2002−314381号公報Japanese Patent Laid-Open No. 2002-314381 特開2000−341595号公報JP 2000-341595 A

例えば、表示装置の一例である現在のテレビジョン装置では、受信した映像信号に対して各種の映像信号処理が行われることが一般的となっている。映像信号処理においては、映像品位を向上させるための各種の画質調整処理が行われる。例えば、映像信号のノイズを目立たなくするような画質調整処理として、3次元ノイズリダクション(3次元NR)が用いられる。   For example, in a current television device which is an example of a display device, various types of video signal processing are generally performed on a received video signal. In the video signal processing, various image quality adjustment processes for improving video quality are performed. For example, three-dimensional noise reduction (three-dimensional NR) is used as an image quality adjustment process that makes video signal noise inconspicuous.

一般的な3次元ノイズリダクションの処理部の構成としては、入力する映像信号から抽出した画像データを入力し、連続する2つの画像間の差分量を画素単位に求め、求めた差分量に応じて適応的に3次元NRの出力データをフィードバックすることにより時間方向のノイズを低減するものが用いられる。
例えば、図2に示すように、3次元NR部11は、差分抽出部111、フレームメモリ112、混合部113を備え、差分抽出部111によって、フレームメモリ112に保持した時間的に前のフレーム画像と入力画像データのフレーム画像との差分を画素単位で抽出し、その値に応じて画素単位に混合比を決定する。そして混合部113において、決定された混合比に従ってフレームメモリ112に保持した時間的に前の画像と現在の画像とを混合して出力する。このように3次元ノイズリダクションは、時間的に異なる画像間の動きに基づいて画像を混合することでノイズを除去するもので、映像の全体にかかったノイズを取り除き、質感の向上とより深みのある画像を実現するものとされる。
As a configuration of a general three-dimensional noise reduction processing unit, image data extracted from an input video signal is input, a difference amount between two consecutive images is obtained in units of pixels, and the obtained difference amount is determined according to the obtained difference amount. One that reduces noise in the time direction by feeding back the output data of the three-dimensional NR adaptively is used.
For example, as illustrated in FIG. 2, the three-dimensional NR unit 11 includes a difference extraction unit 111, a frame memory 112, and a mixing unit 113. The temporally previous frame image held in the frame memory 112 by the difference extraction unit 111. The difference between the input image data and the frame image of the input image data is extracted in units of pixels, and the mixing ratio is determined in units of pixels according to the value. Then, the mixing unit 113 mixes and outputs the temporally previous image and the current image held in the frame memory 112 according to the determined mixing ratio. In this way, three-dimensional noise reduction is to remove noise by mixing images based on the movement between images that are temporally different. It eliminates noise applied to the entire image, improves the texture, and increases the depth. An image is supposed to be realized.

ここで、上記のように静止画表示機能を有する表示装置では、映像信号をキャプチャした画像を静止画として表示し続けることができる。このときに、ノイズの多い画像をキャプチャして表示した場合、ノイズが多く映像品位の低い静止画がずっと表示されることになる。
ノイズレベルを低減させるためには、上記のような3次元ノイズリダクションを用いることができる。3次元ノイズリダクションは、上記のように時間的に異なる画像を混合することにより時間的に発生するノイズを低減しようとするものであるため、画像データが時間的に変化しない、つまり動きのない画像の場合には有効である。しかしながら、動きの多い画像であると、これらの画像を混合したときにいわゆる尾引きと呼ばれる品位の低下が生じる。従って特に動きのある動画の場合には、3次元ノイズリダクションを強める処理を行うことは逆に好ましくない。動画表示中に3次元ノイズリダクションを強くかけて静止画をキャプチャした場合、却って品位の低い画像が静止画として表示されてしまう。
Here, in the display device having the still image display function as described above, the image obtained by capturing the video signal can be continuously displayed as a still image. At this time, when a noisy image is captured and displayed, a still image with a lot of noise and low video quality is displayed.
In order to reduce the noise level, the above three-dimensional noise reduction can be used. The three-dimensional noise reduction is intended to reduce temporally generated noise by mixing temporally different images as described above, so that the image data does not change temporally, that is, an image having no motion. It is effective in the case of. However, in the case of an image with a lot of movement, when these images are mixed, a deterioration of so-called so-called tailing occurs. Therefore, it is not preferable to perform the process of enhancing the three-dimensional noise reduction particularly in the case of a moving image. If a still image is captured with a strong three-dimensional noise reduction during moving image display, a low-quality image is displayed as a still image.

このような場合、入力映像信号が動きのない静止画か動きのある動画かを判定して、静止画の場合には3次元ノイズリダクションを強くかけて、その画像をキャプチャすることが考えられる。しかしながら、3次元NR部11においては静止画を精度よく判定することは困難である。例えば、3次元NR部11に入力する画像Aがノイズレベルの大きい画像データであった場合、フレームメモリ112に保持された画像Bとの差分が大きくなる。ノイズを考慮しなければ、静止画の場合には差分が小さくなるため容易に静止画像であることを判別できる。しかしながらノイズが多い場合には静止画であっても差分が大きくなっていくため、動画と誤判定し、静止画を確実に判定することができない。   In such a case, it is possible to determine whether the input video signal is a still image without motion or a moving movie, and in the case of a still image, it is conceivable to apply the three-dimensional noise reduction and capture the image. However, it is difficult for the three-dimensional NR unit 11 to accurately determine a still image. For example, when the image A input to the three-dimensional NR unit 11 is image data having a high noise level, the difference from the image B held in the frame memory 112 becomes large. If noise is not taken into account, since the difference is small in the case of a still image, it can be easily determined that the image is a still image. However, if there is a lot of noise, the difference will increase even with a still image, so it will be erroneously determined as a moving image, and the still image cannot be reliably determined.

また、フレームメモリ112に記憶した画像Bと入力した画像Aとの時間差は1フレーム分しかなく、動画の場合であってもフレーム間で動きが比較的少なければ、確実に動画か静止画かを判定することができない。また、入力してくる画像Aのデータはメモリ上にないため、ソフトウェア処理を行うことができず、画像Aと画像Bとの差分絶対値和を求めるためのハードウェアが必要となる。   Further, the time difference between the image B stored in the frame memory 112 and the input image A is only one frame, and even in the case of a moving image, if there is relatively little movement between the frames, it is ensured that it is a moving image or a still image. Cannot judge. Further, since the input image A data is not stored in the memory, software processing cannot be performed, and hardware for obtaining the sum of absolute differences between the image A and the image B is required.

つまり、静止画表示機能によってキャプチャ画像を静止画として表示しようとする際、入力映像信号のノイズレベルが大きいと、これをキャプチャした静止画もノイズの多い低品位の画像となってしまう。また、これを解消するために3次元ノイズリダクションの強度を上げた場合、入力映像信号が動きのない静止画であれば、ノイズ低減効果を得ることができるが、入力映像信号が動きのある動画であった場合、却って尾引などが生じた低品位の静止画像となってしまう。入力映像信号が動画か静止画かを判定して3次元ノイズリダクションを使い分ければよいが、従来の3次元ノイズリダクション処理を行う部分では、入力映像信号が動画像であるか静止画であるかを判別することは、上記のように困難であった。   That is, when a captured image is displayed as a still image by the still image display function, if the noise level of the input video signal is large, the captured still image also becomes a low-quality image with much noise. Also, when the intensity of the three-dimensional noise reduction is increased to eliminate this, a noise reduction effect can be obtained if the input video signal is a still image with no motion, but the input video signal is a moving video with motion. If this is the case, a low-quality still image with tailing or the like will be generated. It is sufficient to determine whether the input video signal is a moving image or a still image and to use three-dimensional noise reduction properly. As described above, it was difficult to discriminate.

本発明は、上述のごとき実情に鑑みてなされたものであり、入力映像信号からキャプチャした画像を静止画として表示する際に、表示画像のノイズを低減させて品位の高い画像を表示させることを可能とした表示装置及び表示方法を提供することを目的とするものである。   The present invention has been made in view of the above circumstances, and when displaying an image captured from an input video signal as a still image, it is possible to reduce the noise of the display image and display a high-quality image. An object of the present invention is to provide a display device and a display method that are made possible.

上記課題を解決するため、本発明の第1の技術手段は、入力映像信号の画質を調整する画質調整部と、該画質調整部で画質調整された画像を表示する表示部とを備え、入力映像信号からキャプチャした画像を静止画像として前記表示部に表示させる静止画表示機能を有する表示装置において、前記画質調整部は、3次元ノイズリダクション処理を行う3次元ノイズリダクション処理部と、3次元ノイズリダクション処理された画像を記憶するメモリとを備え、前記入力映像信号からキャプチャした画像を表示する際に、前記ノイズリダクション処理部による処理の強度が異なる複数の画像を前記メモリに記憶し、該メモリに記憶したいずれかの画像を前記キャプチャ画像として前記表示部に表示させることを特徴としたものである。   In order to solve the above-described problem, a first technical means of the present invention includes an image quality adjustment unit that adjusts an image quality of an input video signal, and a display unit that displays an image whose image quality has been adjusted by the image quality adjustment unit. In a display device having a still image display function for displaying an image captured from a video signal as a still image on the display unit, the image quality adjustment unit includes a three-dimensional noise reduction processing unit that performs a three-dimensional noise reduction process, and a three-dimensional noise A memory for storing a reduction-processed image, and when the image captured from the input video signal is displayed, the memory stores a plurality of images having different processing intensities by the noise reduction processing unit. Any one of the stored images is displayed on the display unit as the captured image.

第2の技術手段は、第1の技術手段において、前記キャプチャした画像を表示する際に、前記画質調整部は、入力映像信号から抽出した第1の画像を前記メモリに保持して前記表示部に静止画として表示させる処理を行うとともに、前記3次元ノイズリダクション処理部の強度を所定レベルまで強くし、該強度を強くした第2及び第3の画像を前記メモリに保持し、該2及び第3の画像を比較して入力映像信号が動きのない静止画か否かを判別し、前記動きのない静止画であると判別した場合には、前記第1の画像に代えて、前記第2の画像を前記キャプチャした画像として表示させることを特徴としたものである。   In the first technical means, when the captured image is displayed in the first technical means, the image quality adjustment unit holds the first image extracted from the input video signal in the memory, and the display unit And processing the image to be displayed as a still image, increasing the strength of the three-dimensional noise reduction processing unit to a predetermined level, and holding the second and third images having the increased strength in the memory, and 3 is compared to determine whether the input video signal is a still image without motion, and if it is determined that the input video signal is a still image without motion, the second image is replaced with the second image. This image is displayed as the captured image.

第3の技術手段は、第2の技術手段において、前記画質調整部が、該2及び第3の画像を比較した結果、入力映像信号が前記静止画でないと判別した場合には、前記第2の画像を用いることなく、前記第1の画像を前記キャプチャした画像として表示させる処理を継続することを特徴としたものである。   According to a third technical means, in the second technical means, when the image quality adjustment unit determines that the input video signal is not the still image as a result of comparing the second and third images, the second technical means The process of displaying the first image as the captured image is continued without using the first image.

第4の技術手段は、第2または第3の技術手段において、前記第2の画像と前記第3の画像は、時間軸方向に2フレーム以上離れた画像であることを特徴としたものである。   According to a fourth technical means, in the second or third technical means, the second image and the third image are images separated by two frames or more in the time axis direction. .

第5の技術手段は、第2〜第4のいずれか1の技術手段において、前記画質調整部が、前記第2の画像及び第3の画像を比較する際、該第2の画像と第3の画像との画素毎の差分を抽出し、画面の全画素、または前記画素を間引いた部分画素に対する前記抽出した差分の絶対値和を算出し、該算出した絶対値和が予め定めた値より小さければ、入力映像信号が動きのない静止画であると判断することを特徴としたものである。   According to a fifth technical means, in any one of the second to fourth technical means, when the image quality adjustment unit compares the second image and the third image, the second image and the third image are compared. The pixel-by-pixel difference from the image is extracted, and the absolute value sum of the extracted differences is calculated for all the pixels of the screen or the partial pixel obtained by thinning out the pixels, and the calculated absolute value sum is calculated from a predetermined value. If it is smaller, it is determined that the input video signal is a still image without movement.

第6の技術手段は、表示装置の画質調整部により該表示装置に入力した入力映像信号の画質を調整する画質調整ステップと、該画質調整ステップで画質調整された画像を表示部に表示する表示ステップとを備え、該表示ステップは、入力映像信号からキャプチャした画像を静止画像として前記表示部に表示させる静止画表示を実行する表示方法において、前記画質調整ステップは、3次元ノイズリダクション処理を行う3次元ノイズリダクション処理と、3次元ノイズリダクション処理された画像をメモリに記憶する記憶処理とを行い、前記入力映像信号からキャプチャした画像を表示する際に、前記ノイズリダクション処理の強度が異なる複数の画像を前記メモリに記憶し、該メモリに記憶したいずれかの画像を前記キャプチャ画像として前記表示部に表示させることを特徴としたものである。   The sixth technical means includes an image quality adjustment step for adjusting the image quality of the input video signal input to the display device by the image quality adjustment unit of the display device, and a display for displaying the image adjusted in the image quality adjustment step on the display unit. A display method for executing still image display in which an image captured from an input video signal is displayed on the display unit as a still image. In the display method, the image quality adjustment step performs a three-dimensional noise reduction process. A three-dimensional noise reduction process and a storage process for storing an image subjected to the three-dimensional noise reduction process in a memory, and when displaying an image captured from the input video signal, a plurality of noise reduction processes having different intensities An image is stored in the memory, and any image stored in the memory is used as the captured image. It is obtained and wherein the to be displayed on the serial display unit.

本発明によれば、入力映像信号からキャプチャした画像を静止画として表示する際に、入力映像信号が静止画像か否かを判別し、その判別結果に応じて適切にノイズ低減処理を行うことにより、表示画像のノイズを低減させて品位の高い画像を表示させることを可能とした表示装置及び表示方法を提供することができる。   According to the present invention, when an image captured from an input video signal is displayed as a still image, it is determined whether or not the input video signal is a still image, and noise reduction processing is appropriately performed according to the determination result. In addition, it is possible to provide a display device and a display method capable of displaying a high-quality image by reducing noise in the display image.

本発明に係る表示装置の一実施形態を説明するためのブロック図である。It is a block diagram for demonstrating one Embodiment of the display apparatus which concerns on this invention. 3次元ノイズリダクション処理を行う3次元NR部の構成例を示すブロック図である。It is a block diagram which shows the structural example of the three-dimensional NR part which performs a three-dimensional noise reduction process.

本発明に係る表示装置は、入力映像信号に対して少なくとも3次元ノイズリダクションによる画質調整処理を行うもので、静止画表示機能によって入力映像信号からキャプチャした画像を静止画として表示する際に、ノイズリダクション処理の強度が異なる複数の画像をメモリに記憶し、そのメモリに記憶したいずれかの画像をキャプチャ画像として表示させるようにしたものである。特に、本発明に係る表示装置は、3次元ノイズリダクション処理を強くかけた画像に基づいて入力映像信号が動きのない静止画であるか否かを判定し、動きのない静止画であれば、3次元ノイズリダクションを強くかけた画像を静止画として表示させる。これにより、3次元ノイズリダクションの効果がある静止画の場合には、3次元ノイズリダクションを強くかけてノイズを除去した画像を静止画として表示させることができる。   The display device according to the present invention performs an image quality adjustment process by at least three-dimensional noise reduction on an input video signal. When an image captured from an input video signal by a still image display function is displayed as a still image, noise is displayed. A plurality of images having different reduction processing intensities are stored in a memory, and any one of the images stored in the memory is displayed as a captured image. In particular, the display device according to the present invention determines whether or not the input video signal is a still image without motion based on an image subjected to strong 3D noise reduction processing. An image with strong 3D noise reduction is displayed as a still image. As a result, in the case of a still image having the effect of three-dimensional noise reduction, it is possible to display an image from which noise has been removed by applying strong three-dimensional noise reduction as a still image.

図1は、本発明に係る表示装置の一実施形態を説明するためのブロック図である。表示装置は、画像データを画質調整する画質調整部10、画質調整部10で画質調整された画像データを表示する表示部20、及び画質調整部10の画質調整処理を制御するための画質パラメータを設定する画質パラメータ設定部30を有している。
本実施形態の表示装置は、例えば、テレビジョン装置として実施することができる。この場合には、図示しないアンテナで受信された映像信号は、チューナで選局され復調されて画質調整部10に入力される。また、テレビジョン装置に外部接続された機器から出力された映像信号が画質調整部10に入力される。
FIG. 1 is a block diagram for explaining an embodiment of a display device according to the present invention. The display device includes an image quality adjustment unit 10 that adjusts image quality of image data, a display unit 20 that displays image data adjusted by the image quality adjustment unit 10, and image quality parameters for controlling image quality adjustment processing of the image quality adjustment unit 10. An image quality parameter setting unit 30 for setting is provided.
The display device of this embodiment can be implemented as a television device, for example. In this case, a video signal received by an antenna (not shown) is selected by the tuner, demodulated, and input to the image quality adjustment unit 10. In addition, a video signal output from a device externally connected to the television apparatus is input to the image quality adjustment unit 10.

画質調整部10は、3次元ノイズリダクション処理を行う3次元NR部11、IP変換を行うIP変換部12、スケーリング処理を行うスケーラ13を有している。また、スケーラ13が使用可能なフレームメモリ14を備えている。画質調整部10は、画像データの画質調整を行う機能ブロックであり、ここに示す画質調整処理のみならず、例えば、1次元フィルタ処理、2次元NR(ノイズリダクション)処理、輪郭補正処理、エンハンス処理などを含ませることができる。
画質調整部10は、画質パラメータ設定部30から出力された画質調整処理を制御するためのパラメータ(画質パラメータ)に従って画質調整を行う。
The image quality adjustment unit 10 includes a three-dimensional NR unit 11 that performs three-dimensional noise reduction processing, an IP conversion unit 12 that performs IP conversion, and a scaler 13 that performs scaling processing. In addition, the scaler 13 includes a frame memory 14 that can be used. The image quality adjustment unit 10 is a functional block that adjusts the image quality of image data. In addition to the image quality adjustment processing shown here, for example, one-dimensional filter processing, two-dimensional NR (noise reduction) processing, contour correction processing, and enhancement processing are performed. Etc. can be included.
The image quality adjustment unit 10 performs image quality adjustment according to a parameter (image quality parameter) for controlling the image quality adjustment process output from the image quality parameter setting unit 30.

3次元NR部11は、画像データに対して時間方向のノイズリダクション処理を行う。3次元NR部11としては、上述の図2に示したような構成のものを適用することができる。すなわち、3次元NR部11では、連続して入力される画像データ間の差分量を画素単位に求め、求めた差分量に応じて適応的に3次元NRの出力データをフィードバックすることにより時間方向のノイズを低減する。ここでは、時間的に前のフレームと入力画像データのフレームとの差分を画素単位で抽出し、抽出した差分に応じて画素毎に混合比を決定し、その混合比に従って時間的に前のフレームと現在のフレームの画像データを混合して出力する。従って、3次元NR部11には、図示しないフレームメモリが含まれるが、例えば3次元NR部11に外部接続するRAMをフレームメモリとして用いるものであってもよい。   The three-dimensional NR unit 11 performs noise reduction processing in the time direction on the image data. As the three-dimensional NR unit 11, a configuration as shown in FIG. 2 described above can be applied. That is, the three-dimensional NR unit 11 obtains a difference amount between continuously input image data in units of pixels and adaptively feeds back three-dimensional NR output data according to the obtained difference amount in the time direction. Reduce noise. Here, the difference between the temporally previous frame and the frame of the input image data is extracted in units of pixels, the mixing ratio is determined for each pixel according to the extracted difference, and the temporally previous frame is determined according to the mixing ratio. And the image data of the current frame are mixed and output. Accordingly, the three-dimensional NR unit 11 includes a frame memory (not shown). For example, a RAM externally connected to the three-dimensional NR unit 11 may be used as the frame memory.

3次元NR部11の強度は、画質パラメータにより制御することができる。例えば、差分抽出部で抽出した差分値に対する係数を変化させて、混合比を異ならせることで強度調整を行う。強度を強くする場合には、係数を大きくして差分値を増幅すれば過去の画像の混合比が大きくなる。また、差分値に対して定数をオフセットとして加算することにより過去の画像の混合比を大きくする方法もある。   The intensity of the three-dimensional NR unit 11 can be controlled by an image quality parameter. For example, the intensity adjustment is performed by changing the coefficient for the difference value extracted by the difference extraction unit and changing the mixing ratio. In the case of increasing the intensity, if the difference value is amplified by increasing the coefficient, the mixing ratio of the past images increases. There is also a method of increasing the mixing ratio of past images by adding a constant as an offset to the difference value.

3次元NR部11より出力された画像は、IP変換部12によりプログレッシブ画像に変換される。IP変換部12においても画像処理のためにフレームメモリが含まれる。
スケーラ13は、IP変換された画像を表示部20の解像度に合わせて解像度変換を行う。ここではスケーラ13に入力した画像はフレームメモリ14に保持されて解像度変換処理が行われ、表示部20に出力される。このフレームメモリ14はスケーラ13自体に含まれるものであってもよい。フレームメモリ14内の記憶画像とノイズの状態については後述する。
The image output from the three-dimensional NR unit 11 is converted into a progressive image by the IP conversion unit 12. The IP conversion unit 12 also includes a frame memory for image processing.
The scaler 13 performs resolution conversion of the IP-converted image in accordance with the resolution of the display unit 20. Here, the image input to the scaler 13 is held in the frame memory 14, subjected to resolution conversion processing, and output to the display unit 20. The frame memory 14 may be included in the scaler 13 itself. The stored image in the frame memory 14 and the state of noise will be described later.

表示部20は、液晶パネルなどの表示手段を使用できるがその表示方式は限定されない。スケーラ13では、表示部20に使用される表示画面の解像度に合わせて画像の解像度変換を行って出力している。   The display unit 20 can use display means such as a liquid crystal panel, but the display method is not limited. The scaler 13 converts the resolution of the image according to the resolution of the display screen used for the display unit 20 and outputs the result.

上記のごとくの構成を有する表示装置により、キャプチャ画像による静止画表示を行うときの処理例について説明する。
表示装置で画像表示を行う場合、通常、スケーラ13に入力してきた画像が随時フレームメモリ14に書き込まれ、スケーラ13でスケーリング処理を施して表示部20に出力される。ここで静止画表示機能によってキャプチャ画像を表示する場合、スケーラ13では、入力してくる画像のフレームメモリ14への新たな書き込みを停止し、フレームメモリ14に記憶してある画像を表示部20に出力することで、同じ画像を継続して表示させるようにする。
An example of processing when a still image is displayed as a captured image by the display device having the above-described configuration will be described.
When an image is displayed on the display device, an image input to the scaler 13 is usually written to the frame memory 14 as needed, and scaled by the scaler 13 and output to the display unit 20. When the captured image is displayed by the still image display function, the scaler 13 stops the new writing of the input image to the frame memory 14 and the image stored in the frame memory 14 is displayed on the display unit 20. By outputting, the same image is continuously displayed.

ここで、画質調整部10に入力してきた画像(画像Aとする)のノイズレベルが比較的大きい状態であったものとする。そして、この画像Aには、3次元NR部11で3次元ノイズリダクション処理が行われ、中程度のノイズレベルの画像Bとなったものとする。スケーラ13では、この画像Bをフレームメモリ14に記憶し、あらたな画像の書き込みを停止し、画像Bを解像度変換した画像を静止画として表示部20に出力する。   Here, it is assumed that the noise level of an image (image A) input to the image quality adjustment unit 10 is relatively high. Then, it is assumed that the image A is subjected to a three-dimensional noise reduction process by the three-dimensional NR unit 11 and becomes an image B having a medium noise level. The scaler 13 stores the image B in the frame memory 14, stops writing a new image, and outputs an image obtained by converting the resolution of the image B to the display unit 20 as a still image.

そして上記の処理とともに、画質パラメータ設定部30の制御によって、3次元NR部11の強度が制御され、強度を強めた状態で3次元ノイズリダクション処理を行う。強い強度とは予め定めた高強度の強度レベルで処理を行うことを指す。そしてスケーラ13では、3次元ノイズリダクションの強度を強めて得られた1フレーム分の画像Cをフレームメモリに記憶する。ここではすでに記憶保持している画像Bを書き換えることなく、画像Bとは別領域に画像Cを記憶する。画像Cはノイズリダクションの効果により低レベルのノイズ量であったものとする。   In addition to the above processing, the strength of the three-dimensional NR unit 11 is controlled by the control of the image quality parameter setting unit 30, and the three-dimensional noise reduction processing is performed with the strength increased. Strong intensity refers to processing at a predetermined high intensity level. The scaler 13 stores the image C for one frame obtained by increasing the intensity of the three-dimensional noise reduction in the frame memory. Here, the image C is stored in a different area from the image B without rewriting the image B already stored and held. It is assumed that the image C has a low level of noise due to the effect of noise reduction.

さらに、画像Cに対すると同じように3次元ノイズリダクションを強くした状態で、画像Cと比較するための1フレーム分の画像Dをフレームメモリ14に記憶する。画像Dは、画像B、Cとは異なる領域に記憶させる。このとき、画像Cと画像Dとは時間的に連続するフレームの画像である必要はなく、時間的に2フレーム以上間隔のあいた画像とすることができる。一例として0.5秒程度の時間間隔をあけて取得する。これにより、動きのある画像であれば2フレーム以上の時間間隔をあけることにより、連続したフレームを比較する場合に比して動き量が大きくなる確率が高いため、確実に静止画ではないことを判別することができるようになる。これら画像B、C、Dは、それぞれ本発明の第1の画像、第2の画像、第3の画像に相当する。   Further, the image D for one frame for comparison with the image C is stored in the frame memory 14 in a state in which the three-dimensional noise reduction is strengthened as in the case of the image C. The image D is stored in a different area from the images B and C. At this time, the images C and D do not need to be images of frames that are temporally continuous, and can be images that are spaced by two frames or more in time. As an example, they are acquired with a time interval of about 0.5 seconds. As a result, if there is a moving image, there is a high probability that the amount of motion will be larger than when comparing consecutive frames by leaving a time interval of 2 frames or more. It becomes possible to discriminate. These images B, C, and D correspond to the first image, the second image, and the third image of the present invention, respectively.

ここでスケーラ13では、ソフトウェア処理によって画像Cと画像Dとを比較し、入力映像信号が動きのない静止画であるか否かを判定する。この場合には、上記のように画素ごとの差分を抽出し、差分絶対値和を算出し、予め定めたレベルより差分絶対値和が小さければ静止画であることを判定することができる。ここでは、フレームメモリ14に画像Cと画像Dの両方を記憶保持しているため、ソフトウェアによる処理によって静止画判定を行うことができる。また、ソフトウェアの処理による絶対差分和の計算に時間を要する場合は、全画素の差分計算をやめて、間引いた画素位置の差分を計算することにより、計算時間を短縮してもよい。つまり、画像Cと画像Dとの比較に際しては、画面の全画素、またはその画素を間引いた部分画素に対する抽出した差分の絶対値和に基づいて静止画判定を行うようにすることができる。   Here, the scaler 13 compares the image C and the image D by software processing, and determines whether or not the input video signal is a still image without motion. In this case, the difference for each pixel is extracted as described above, the difference absolute value sum is calculated, and if the difference absolute value sum is smaller than a predetermined level, it can be determined that the image is a still image. Here, since both the image C and the image D are stored and held in the frame memory 14, still image determination can be performed by processing by software. In addition, when it takes time to calculate the absolute difference sum by software processing, the calculation time may be shortened by stopping the difference calculation for all the pixels and calculating the difference between the thinned pixel positions. That is, when comparing the image C and the image D, the still image determination can be performed based on the absolute value sum of the differences extracted for all the pixels of the screen or the partial pixels obtained by thinning out the pixels.

画像Cと画像Dとを比較した結果、入力映像信号が動きのない静止画であると判定された場合、キャプチャ画像として出力している画像Bに代えて、画像Cをスケーリングして出力する。入力映像信号が動きのない静止画の場合には、画像C、画像Dは3次元ノイズリダクションが効果を発揮し、ノイズレベルの低い高品位の画像となっている。これを中程度のノイズレベルの画像Bに置き換えることで、キャプチャ画像として表示している表示画像を高品位なものとすることができる。   As a result of comparing the image C and the image D, when it is determined that the input video signal is a still image without motion, the image C is scaled and output instead of the image B output as the capture image. In the case where the input video signal is a still image without motion, the images C and D are high-quality images with a low noise level due to the effect of three-dimensional noise reduction. By replacing this with an image B having a medium noise level, the display image displayed as the captured image can be made high quality.

また、画像Cと画像Dとを比較した結果、入力映像信号が静止画でないと判定された場合には、画像C及び画像Dは、3次元ノイズリダクションを強くかけることにより尾引などによる品位低下が生じている可能性が高い。従って、この場合には、画像Cを画像Bに置き換えることなく、画像Bのまま静止画を表示させる。
このように、スケーラ13の部分では、3次元ノイズリダクションを強くかけた時間的に2フレーム以上離れた画像を一旦フレームメモリ14に記憶し、ソフトウェア処理によってこれらの画像を比較することで、入力映像信号が動きのない静止画であるか否かを判定することができる。そして判定結果が静止画であった場合、キャプチャ画像として3次元ノイズリダクションを強くかけた画像を出力する。これにより、キャプチャ画像のノイズを低減させて品位の高い映像を表示させることができる。
In addition, as a result of comparing the images C and D, if it is determined that the input video signal is not a still image, the image C and the image D are deteriorated by tailing or the like due to strong three-dimensional noise reduction. Is likely to have occurred. Therefore, in this case, the still image is displayed as it is without replacing the image C with the image B.
As described above, in the scaler 13, images that are separated by two frames or more in time and subjected to strong three-dimensional noise reduction are temporarily stored in the frame memory 14, and these images are compared with each other by software processing. It can be determined whether the signal is a still image without motion. If the determination result is a still image, an image with strong three-dimensional noise reduction is output as a captured image. Thereby, it is possible to reduce the noise of the captured image and display a high-quality video.

10…画質調整部、11…3次元NR部、12…IP変換部、13…スケーラ、14…フレームメモリ、20…表示部、30…画質パラメータ設定部、111…差分抽出部、112…フレームメモリ、113…混合部。 DESCRIPTION OF SYMBOLS 10 ... Image quality adjustment part, 11 ... Three-dimensional NR part, 12 ... IP conversion part, 13 ... Scaler, 14 ... Frame memory, 20 ... Display part, 30 ... Image quality parameter setting part, 111 ... Difference extraction part, 112 ... Frame memory 113 ... Mixing part.

Claims (6)

入力映像信号の画質を調整する画質調整部と、該画質調整部で画質調整された画像を表示する表示部とを備え、入力映像信号からキャプチャした画像を静止画像として前記表示部に表示させる静止画表示機能を有する表示装置において、
前記画質調整部は、3次元ノイズリダクション処理を行う3次元ノイズリダクション処理部と、3次元ノイズリダクション処理された画像を記憶するメモリとを備え、前記入力映像信号からキャプチャした画像を表示する際に、前記ノイズリダクション処理部による処理の強度が異なる複数の画像を前記メモリに記憶し、該メモリに記憶したいずれかの画像を前記キャプチャ画像として前記表示部に表示させることを特徴とする表示装置。
An image quality adjustment unit that adjusts the image quality of the input video signal and a display unit that displays an image whose image quality has been adjusted by the image quality adjustment unit, and a still image that displays an image captured from the input video signal as a still image on the display unit In a display device having an image display function,
The image quality adjustment unit includes a three-dimensional noise reduction processing unit that performs a three-dimensional noise reduction process, and a memory that stores an image subjected to the three-dimensional noise reduction process, and displays an image captured from the input video signal. A display device, wherein a plurality of images having different processing intensities by the noise reduction processing unit are stored in the memory, and any one of the images stored in the memory is displayed on the display unit as the captured image.
請求項1に記載の表示装置において、前記キャプチャした画像を表示する際に、前記画質調整部は、入力映像信号から抽出した第1の画像を前記メモリに保持して前記表示部に静止画として表示させる処理を行うとともに、前記3次元ノイズリダクション処理部の強度を所定レベルまで強くし、該強度を強くした第2及び第3の画像を前記メモリに保持し、該2及び第3の画像を比較して入力映像信号が動きのない静止画か否かを判別し、前記動きのない静止画であると判別した場合には、前記第1の画像に代えて、前記第2の画像を前記キャプチャした画像として表示させることを特徴とする表示装置。   The display device according to claim 1, wherein when displaying the captured image, the image quality adjustment unit holds the first image extracted from the input video signal in the memory and stores the first image as a still image on the display unit. In addition to performing display processing, the intensity of the three-dimensional noise reduction processing unit is increased to a predetermined level, the second and third images having the increased intensity are held in the memory, and the second and third images are stored. In comparison, it is determined whether or not the input video signal is a still image without motion, and when it is determined that the input video signal is a still image without motion, the second image is replaced with the first image instead of the first image. A display device that displays as a captured image. 請求項2に記載の表示装置において、前記画質調整部は、該2及び第3の画像を比較した結果、入力映像信号が前記静止画でないと判別した場合には、前記第2の画像を用いることなく、前記第1の画像を前記キャプチャした画像として表示させる処理を継続することを特徴とする表示装置。   3. The display device according to claim 2, wherein the image quality adjustment unit uses the second image when the input video signal is determined not to be the still image as a result of comparing the second and third images. And a process of displaying the first image as the captured image without continuing. 請求項2または3に記載の表示装置において、前記第2の画像と前記第3の画像は、時間軸方向に2フレーム以上離れた画像であることを特徴とする表示装置。   4. The display device according to claim 2, wherein the second image and the third image are images separated by two frames or more in a time axis direction. 請求項2〜4のいずれか1に記載の表示装置において、前記画質調整部は、前記第2の画像及び第3の画像を比較する際、該第2の画像と第3の画像との画素毎の差分を抽出し、画面の全画素、または前記画素を間引いた部分画素に対する前記抽出した差分の絶対値和を算出し、該算出した絶対値和が予め定めた値より小さければ、入力映像信号が動きのない静止画であると判断することを特徴とする表示装置。   5. The display device according to claim 2, wherein the image quality adjustment unit compares pixels of the second image and the third image when comparing the second image and the third image. 6. The difference between each pixel is extracted, and the absolute value sum of the extracted differences is calculated for all the pixels of the screen or the partial pixels obtained by thinning out the pixels. If the calculated absolute value sum is smaller than a predetermined value, the input video A display device characterized in that a signal is determined to be a still image without movement. 表示装置の画質調整部により該表示装置に入力した入力映像信号の画質を調整する画質調整ステップと、該画質調整ステップで画質調整された画像を表示部に表示する表示ステップとを備え、該表示ステップは、入力映像信号からキャプチャした画像を静止画像として前記表示部に表示させる静止画表示を実行する表示方法において、
前記画質調整ステップは、3次元ノイズリダクション処理を行う3次元ノイズリダクション処理と、3次元ノイズリダクション処理された画像をメモリに記憶する記憶処理とを行い、前記入力映像信号からキャプチャした画像を表示する際に、前記ノイズリダクション処理の強度が異なる複数の画像を前記メモリに記憶し、該メモリに記憶したいずれかの画像を前記キャプチャ画像として前記表示部に表示させることを特徴とする表示方法。
An image quality adjustment step for adjusting the image quality of the input video signal input to the display device by the image quality adjustment unit of the display device; and a display step for displaying the image adjusted in the image quality adjustment step on the display unit. In the display method for executing still image display in which an image captured from an input video signal is displayed on the display unit as a still image,
The image quality adjustment step performs a three-dimensional noise reduction process for performing a three-dimensional noise reduction process and a storage process for storing an image subjected to the three-dimensional noise reduction process in a memory, and displays an image captured from the input video signal. At the time, a plurality of images having different noise reduction processing intensities are stored in the memory, and any one of the images stored in the memory is displayed on the display unit as the captured image.
JP2010232060A 2010-10-15 2010-10-15 Display device and display method Expired - Fee Related JP5694732B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010232060A JP5694732B2 (en) 2010-10-15 2010-10-15 Display device and display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010232060A JP5694732B2 (en) 2010-10-15 2010-10-15 Display device and display method

Publications (2)

Publication Number Publication Date
JP2012085241A true JP2012085241A (en) 2012-04-26
JP5694732B2 JP5694732B2 (en) 2015-04-01

Family

ID=46243595

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010232060A Expired - Fee Related JP5694732B2 (en) 2010-10-15 2010-10-15 Display device and display method

Country Status (1)

Country Link
JP (1) JP5694732B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016208307A (en) * 2015-04-23 2016-12-08 キヤノン株式会社 Image processing apparatus, control method therefor, and program

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021112280A1 (en) * 2019-12-04 2021-06-10 엘지전자 주식회사 Signal processing device and image display device comprising same

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07327191A (en) * 1994-06-02 1995-12-12 Canon Inc Still video recording device and still video recording method
JPH1023330A (en) * 1996-07-02 1998-01-23 Canon Inc Picture processor
JPH11205752A (en) * 1998-01-19 1999-07-30 Victor Co Of Japan Ltd Picture noise reducing device
JP2008035001A (en) * 2006-07-27 2008-02-14 Funai Electric Co Ltd Video device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07327191A (en) * 1994-06-02 1995-12-12 Canon Inc Still video recording device and still video recording method
JPH1023330A (en) * 1996-07-02 1998-01-23 Canon Inc Picture processor
JPH11205752A (en) * 1998-01-19 1999-07-30 Victor Co Of Japan Ltd Picture noise reducing device
JP2008035001A (en) * 2006-07-27 2008-02-14 Funai Electric Co Ltd Video device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016208307A (en) * 2015-04-23 2016-12-08 キヤノン株式会社 Image processing apparatus, control method therefor, and program

Also Published As

Publication number Publication date
JP5694732B2 (en) 2015-04-01

Similar Documents

Publication Publication Date Title
JP4139430B1 (en) Image processing apparatus and method, image display apparatus and method
JP4253327B2 (en) Subtitle detection apparatus, subtitle detection method, and pull-down signal detection apparatus
US6600517B1 (en) System and method for improving the sharpness of a video image
US8098329B2 (en) Image determination apparatus, image determination method, and program, and image processing apparatus, image processing method, and program
US7995146B2 (en) Image processing apparatus and image processing method
US8503814B2 (en) Method and apparatus for spectrum estimation
US9215353B2 (en) Image processing device, image processing method, image display device, and image display method
US7787047B2 (en) Image processing apparatus and image processing method
JP5694732B2 (en) Display device and display method
JP5178579B2 (en) Image processing device
US20120008050A1 (en) Video processing apparatus and video processing method
US20130271650A1 (en) Video display apparatus and video processing method
JP5112528B2 (en) Video display device and video processing method
JP2008003519A (en) Liquid crystal television set
US20110134316A1 (en) Image display apparatus and method
JP2006311166A (en) Video processor and video display apparatus
US20100277647A1 (en) Noise detection method and image processing method using the noise detection method
JP2010124257A (en) Video processing apparatus, video display device, and frame-rate conversion method
JP5219771B2 (en) Video processing apparatus and video processing apparatus control method
JP2006060335A (en) Image processing apparatus
WO2010067456A1 (en) Video processing device, video display device, video processing method, program therefor, and recording medium containing program therefor
RU123615U1 (en) TELEVISION RECEIVER, IMAGE PROCESSING DEVICE WITH ADAPTIVE CORRECTION OF MOVING IMAGES BASED ON MOTION STREAM TECHNOLOGY
JP2009088829A (en) Three-dimensional noise reduction device and video signal processor
JP2012005026A (en) Device and method for improving image quality
JP5167956B2 (en) Video signal processing device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131001

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140815

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140819

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140917

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141111

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141204

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150127

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150205

R150 Certificate of patent or registration of utility model

Ref document number: 5694732

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees