JP5172769B2 - Video device, video processing method, and image quality mode setting method in this device - Google Patents
Video device, video processing method, and image quality mode setting method in this device Download PDFInfo
- Publication number
- JP5172769B2 JP5172769B2 JP2009098304A JP2009098304A JP5172769B2 JP 5172769 B2 JP5172769 B2 JP 5172769B2 JP 2009098304 A JP2009098304 A JP 2009098304A JP 2009098304 A JP2009098304 A JP 2009098304A JP 5172769 B2 JP5172769 B2 JP 5172769B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- signal
- mode
- input
- image quality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
- Picture Signal Circuits (AREA)
- Television Systems (AREA)
Description
この発明は、種々な画質の映像を扱える映像装置と映像処理方法および、この装置に外部映像出力機器が接続された際の画質モードを設定する方法に関する。 The present invention relates to a video apparatus and a video processing method capable of handling video of various image quality, and a method of setting an image quality mode when an external video output device is connected to the apparatus.
DVDビデオなどの標準解像度映像(Standard Definition:SD映像:480×480〜720×480ドット)あるいは地上デジタル放送などの準高解像度映像(1440×1080ドット)を高解像度映像(Full High Definition:フルHD映像:1920×1080ドット)にアップコンバートする技術(超解像処理)が提案されている(特許文献1参照)。 Standard definition video such as DVD video (Standard Definition: SD video: 480 x 480 to 720 x 480 dots) or quasi-high resolution video (1440 x 1080 dots) such as terrestrial digital broadcasts is displayed as high resolution video (Full HD: Full HD) A technique (super-resolution processing) for up-conversion to video (1920 × 1080 dots) has been proposed (see Patent Document 1).
映像のアップコンバートが実用化されたことにより、HD映像信号(ハイビジョン信号)には、本来のフルHD映像信号の他に、SD映像をHD信号形態にアップコンバートしたものが混在し得るようになってきた。しかし、そのHD映像信号を受ける映像表示装置では、画面の明るさ的な要素(ブライトネス、コントラストなど)および見た目の鮮鋭感的な要素(シャープネスなど)の調整はユーザに開放されていても、信号形態応じた解像度的な要素の調整は装置まかせであった。 As video up-conversion has been put to practical use, HD video signals (high-definition signals) can contain SD video up-converted into HD signal format in addition to the original full HD video signal. I came. However, in a video display device that receives the HD video signal, even if adjustments of screen brightness elements (brightness, contrast, etc.) and visual sharpness elements (sharpness, etc.) are open to the user, It was up to the device to adjust the resolution elements according to the form.
同じハイビジョン信号出力の映像機器であってもその出力信号品質は千差万別である。高品質なフルHD映像信号(例えば水平解像度1080本のプログレッシブビデオ信号:1080pと略記)を出力する高級ビデオプレーヤの所持者は、プレーヤ出力の生の高画質映像を見たいであろう。しかし、従来の映像表示装置ではその希望がかなうとは限らず、高品質なフルHD映像が、映像表示装置内部で何らかの処理を受けて、相対的に品位が落ちた画質で視聴される可能性があった。 Even for video equipment with the same high-definition signal output, the output signal quality varies greatly. An owner of a high-end video player that outputs a high-quality full HD video signal (for example, a progressive video signal of 1080 horizontal resolution: abbreviated as 1080p) will want to see the raw high-quality video output from the player. However, the conventional video display device does not always fulfill its desire, and high-quality full HD video may be viewed with a relatively low quality image after undergoing some processing inside the video display device. was there.
この発明の課題の1つは、高品質なHD映像出力が可能な映像出力機器を映像表示装置に接続した際に、映像出力機器が出力する映像に応じて、任意に映像表示装置の画質モードを選べるようにすることである。 One of the problems of the present invention is that, when a video output device capable of high-quality HD video output is connected to a video display device, an image quality mode of the video display device is arbitrarily selected according to the video output from the video output device. It is to be able to choose.
この発明の一実施の形態に係る画質モード設定方法では、入力映像(1080p)をそのまま出力するピュアダイレクトモードと、入力映像(480i/480p)をよりスキャンレートの高い映像信号へアップコンバートして出力するビデオファインモードと、入力映像の種類によって映像成分に補正を自動的に加えて出力するおまかせモードが用いられる。この方法を用いる映像表示装置では、ピュアダイレクトモードとおまかせモードとビデオファインモードの選択メニュー(M3)を表示し、前記ピュアダイレクトモードと前記おまかせモードと前記ビデオファインモードのうちの任意の1つを前記入力映像の視聴者(ユーザ)が選択できるようにしている。 In the image quality mode setting method according to an embodiment of the present invention, a pure direct mode in which an input video (1080p) is output as it is, and an input video (480i / 480p) is up-converted to a video signal having a higher scan rate and output. A video fine mode is used, and an automatic mode is used in which correction is automatically added to the video component depending on the type of input video. In the video display device using this method, a selection menu (M3) of the pure direct mode, the automatic mode and the video fine mode is displayed, and any one of the pure direct mode, the automatic mode and the video fine mode is displayed. A viewer (user) of the input video can select.
この発明によれば、高品質なHD映像出力が可能な映像出力機器を映像表示装置に接続した際に、映像出力機器が出力する映像(1080pなど)に応じて、任意に映像表示装置の画質モード(ピュアダイレクトモードなど)を選ぶことができる。 According to the present invention, when a video output device capable of high-quality HD video output is connected to the video display device, the image quality of the video display device can be arbitrarily selected according to the video (1080p or the like) output from the video output device. You can select a mode (pure direct mode, etc.).
以下、図面を参照してこの発明の種々な実施の形態を説明する。図1は、この発明の一実施の形態に係るメニュー表示例を説明する図である。ユーザが図示しないリモコンの設定メニューキーを押すと、ハイビジョンTVセット等の映像装置の表示画面上に、映像設定項目を含むメニューM1が表示される(図1左側)。図示しないリモコンのカーソルキー操作でメニューM1中の「映像設定」項目を選択し、同リモコンのエンターキーを押すと、当該装置で最高の画質モードである1080p処理モードを設定する項目を含むメニューM2が表示される(図1中央)。続いてリモコンのカーソルキー操作でメニューM2中の「1080p処理モード設定」項目を選択し、同リモコンのエンターキーを押すと、「おまかせ」項目と「DVDファイン」項目と「ピュアダイレクト」項目を含むメニューM3が表示される(図1右側)。 Hereinafter, various embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a diagram for explaining a menu display example according to an embodiment of the present invention. When the user presses a setting menu key on a remote controller (not shown), a menu M1 including video setting items is displayed on the display screen of a video device such as a high-definition TV set (left side in FIG. 1). When the “video setting” item in the menu M1 is selected by the cursor key operation of the remote controller (not shown) and the enter key of the remote controller is pressed, the menu M2 includes an item for setting the 1080p processing mode which is the highest image quality mode in the device. Is displayed (center of FIG. 1). Next, select the “1080p processing mode setting” item in the menu M2 by operating the cursor keys on the remote control, and press the enter key on the remote control to include the “Random” item, the “DVD Fine” item, and the “Pure Direct” item. Menu M3 is displayed (right side of FIG. 1).
ここで、「おまかせ」項目は、映像の種類によって自動的に補正を加えて表示するモードの選択項目である。「DVDファイン」項目は、DVDビデオのSD映像を超解像処理などでアップコンバートした映像に適宜補正を加えて表示するモードの選択項目である。「ピュアダイレクト」項目は、当該映像装置で扱い得る最高の画質モードに対応した高画質HD映像(1080p)に対しては、特別な処理をせずにそのまま表示するモードの選択項目である。 Here, the “Random” item is a selection item for a mode in which correction is automatically performed depending on the type of video. The “DVD fine” item is a selection item of a mode in which an image obtained by up-converting a DVD video SD video by super-resolution processing or the like is appropriately corrected and displayed. The “pure direct” item is a selection item for a mode in which a high-quality HD video (1080p) corresponding to the highest image quality mode that can be handled by the video apparatus is displayed as it is without performing special processing.
図2は、この発明の一実施の形態に係るメニュー表示選択処理の一例を説明する図である。この処理は、図1のメニュー表示に用いる画像情報(オンスクリーン情報)を生成する機能と、このメニューにより選択された項目に対応する映像処理を行う機能と、前記メニュー画像情報および入力映像を表示する機能を持つ映像装置において、実行することができる。この映像装置の具体的な製品形態としては、ビデオ入力端子(HDMI端子、D1〜D5端子、DVI端子、IEEE1394端子など)を持つデジタルハイビジョンTV受信機、ビデオ入力端子を持つモニタ付パーソナルコンピュータ、外部モニタに接続されビデオ入力端子を持つデジタルレコーダ、外部モニタに接続されビデオ入力端子を持つセットトップボックスなどがある。この映像装置に映像信号を供給する外部機器としては、ビデオ出力端子(HDMI端子、D端子など)を持つDVDプレーヤ、BDプレーヤ、DVDレコーダ、BDレコーダ、HDDレコーダ、セットトップボックス(STB)などがある。 FIG. 2 is a diagram for explaining an example of menu display selection processing according to one embodiment of the present invention. This processing includes a function for generating image information (on-screen information) used for the menu display of FIG. 1, a function for performing video processing corresponding to an item selected by this menu, and displaying the menu image information and input video. It can be executed in a video apparatus having a function to do this. As a specific product form of this video apparatus, a digital high-definition TV receiver having a video input terminal (HDMI terminal, D1-D5 terminal, DVI terminal, IEEE1394 terminal, etc.), a personal computer with a monitor having a video input terminal, an external There are digital recorders connected to a monitor and having a video input terminal, and set-top boxes connected to an external monitor and having a video input terminal. External devices that supply video signals to this video device include DVD players, BD players, DVD recorders, BD recorders, HDD recorders, set-top boxes (STBs) having video output terminals (HDMI terminals, D terminals, etc.). is there.
映像装置にHDMI(High Definition Multimedia Interface)などのデジタルインターフェースを介して外部機器が接続され、あるいは接続された外部機器から映像装置に映像入力があると(ST100)、図1のメニューM3が表示される(ST102)。このメニューはオンスクリーン(OSD)処理により生成できる。ここで、メニューを生成する処理は、HDMIなどの信号端子に複数解像度(例えば480i/p〜1080i/p)の入力が得られる場合に、前記メニューの画像情報を提供するように構成できる。 When an external device is connected to the video device via a digital interface such as HDMI (High Definition Multimedia Interface) or when there is video input from the connected external device to the video device (ST100), the menu M3 in FIG. 1 is displayed. (ST102). This menu can be generated by on-screen (OSD) processing. Here, the menu generation processing can be configured to provide image information of the menu when an input of a plurality of resolutions (for example, 480i / p to 1080i / p) is obtained at a signal terminal such as HDMI.
外部機器が例えば高級ハイビジョンプレーヤで高画質HD映像(例えば1080p)を送出する機器であるときは、ユーザはメニューM3から「ピュアダイレクト」の項目を選んでリモコン(後述する図4の装置では17)のエンターキーを押す(ST104の「ピュアダイレクト」分岐)。すると、入力された高画質HD映像(1080p)を無加工でそのまま表示する処理へ移行する。外部機器が例えばDVDプレーヤでSD映像(例えば480iまたは480p)を送出する機器であるときは、ユーザはメニューM3から「DVDファイン」の項目を選んでリモコンのエンターキーを押す(ST104の「DVDファイン」分岐)。すると、入力されたSD映像(480iまたは480p)は超解像処理などでアップコンバート(1080iまたは1080p)され画質改善されてから表示する処理へ移行する(ST106)。ST106の超解像処理には、特開2008−67110号公報に開示された超解像処理(この公報の図4、図5および、段落0020、段落0051等参照)を利用することができる。 When the external device is, for example, a high-definition high-definition player that transmits high-definition HD video (for example, 1080p), the user selects the item “Pure Direct” from the menu M3 and uses the remote controller (17 in the apparatus of FIG. 4 described later). Press the enter key ("Pure Direct" branch of ST104). Then, the process proceeds to a process of displaying the input high-quality HD video (1080p) as it is without processing. If the external device is a device that sends out SD video (for example, 480i or 480p) with a DVD player, for example, the user selects the item “DVD Fine” from the menu M3 and presses the enter key on the remote control (“DVD Fine” in ST104). "Branch). Then, after the input SD video (480i or 480p) is up-converted (1080i or 1080p) by super-resolution processing or the like and the image quality is improved, the process proceeds to display processing (ST106). For the super-resolution processing of ST106, the super-resolution processing disclosed in Japanese Patent Laid-Open No. 2008-67110 (see FIGS. 4 and 5 of this publication, paragraph 0020, paragraph 0051, etc.) can be used.
ここで、超解像処理は、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する処理を含む。「本来の画素値」とは、例えば、低解像度(第1解像度)の画像信号を得たときと同じ被写体を、高解像度(第2解像度)のカメラで撮像したときに得られる画像信号の各画素が示す値をいう。また、「推定して画素を増やす」とは、対象とする画像の特徴を捉えて、同一フレーム内、またはフレーム間において相関の高い画像から、本来の画素値を推定して、新たな画素に対応付ける画素値とすることを意味する。つまり、画像の相関性を利用する。 Here, the super-resolution processing includes processing for restoring the high-resolution image signal by estimating the original pixel value from the low-resolution image signal and increasing the number of pixels. The “original pixel value” is, for example, each of the image signals obtained when the same subject as that obtained when the low resolution (first resolution) image signal is captured by the high resolution (second resolution) camera. The value indicated by the pixel. In addition, “estimate and increase the number of pixels” refers to capturing the characteristics of the target image, estimating the original pixel value from an image highly correlated within the same frame or between frames, and creating a new pixel. This means that the corresponding pixel value is used. That is, the correlation between images is used.
さらに詳しく説明すると、まず、オリジナルの入力映像から、アップコンバート処理によって、仮のフルHD高解像度映像を作る。つまり、隣り合う画素の情報をもとに間の画素を補間し、仮のフルHD高解像度映像を作る。補間された画素は必ずしもオリジナル映像にあったものとは言えない。つまり、計算誤差によるノイズやエッジの乱れなどが発生し得る。 More specifically, first, a temporary full HD high-resolution video is created from the original input video by up-conversion processing. That is, the interpolated pixels are interpolated based on the information of adjacent pixels to create a provisional full HD high-resolution video. The interpolated pixels are not necessarily in the original video. That is, noise or edge disturbance due to calculation errors may occur.
次に、撮像モデル関数に基づき、仮のフルHD高解像度映像から、オリジナル映像と同じ解像度にダウンコンバートした映像を作る。撮像モデル関数とは、一般的なカメラが撮像素子の情報を映像信号に変換するのと同じ処理を計算で再現するものである。 Next, based on the imaging model function, a video that is down-converted to the same resolution as the original video is created from the provisional full HD high-resolution video. The imaging model function is a function that reproduces the same processing that a general camera converts information of an imaging element into a video signal by calculation.
ダウンコンバートした映像はオリジナルの入力映像と同じものになるはずであるが、アップコンバート処理における計算誤差などのため、ダウンコンバートした映像とオリジナルの入力映像との間には相違部分が発生する。この相違部分を検出し、また、周辺の画素の情報などを参考に計算誤差が出ないように補正して、オリジナルの入力映像に近い超解像処理された出力映像が生成される。 The down-converted video should be the same as the original input video, but a difference occurs between the down-converted video and the original input video due to a calculation error in the up-conversion process. This difference is detected, and correction is made so that a calculation error does not occur with reference to information on peripheral pixels and the like, and an output video subjected to super-resolution processing close to the original input video is generated.
このように、超解像処理とは、ダウンコンバートした映像とオリジナルの入力映像とを比較し、オリジナルの入力映像が本来持っているはずの信号を復元する技術である。なお、以上説明した超解像処理は一例であり、他の手法を適用することも出来る。 Thus, the super-resolution processing is a technique for comparing a down-converted video with an original input video and restoring a signal that the original input video should originally have. Note that the super-resolution processing described above is an example, and other methods can be applied.
なお、DVDビデオのSD信号(相対的に低品質な映像信号)をアップコンバートした映像信号(外部機器側でDVDビデオ信号を例えば1080pにアップコンバートした信号など)の信号品質をさらに改善して表示する画質モード(第3の画質モード)がメニューの「DVDファイン」で選択される場合において、前記アップコンバートした映像信号の信号品質改善処理(超解像処理など)を行うように構成することもできる。すなわち、スキャンレートが1080pのまま変わらなくても超解像処理などによりさらに品質改善される場合も、「DVDファイン」におけるアップコンバートに含まれる。 Note that the signal quality of the video signal obtained by up-converting the DVD video SD signal (relatively low-quality video signal) (such as a signal obtained by up-converting the DVD video signal to 1080p on the external device side) is further improved and displayed. When the image quality mode to be performed (third image quality mode) is selected in the “DVD fine” menu, the signal quality improvement processing (super-resolution processing, etc.) of the up-converted video signal may be performed. it can. That is, even when the scan rate remains unchanged at 1080p, the quality can be further improved by super-resolution processing or the like, which is included in the up-conversion in “DVD Fine”.
接続される外部機器が複数あり、あるいは外部機器から入力される映像信号の信号品質が複数あって、入力される信号品質が特定し難いときは、ユーザはメニューM3から「おまかせ」の項目を選んでリモコンのエンターキーを押す(ST104の「おまかせ」分岐)。すると、入力された映像のビデオ属性から解像度およびフレームレート(スキャンレート)を解読し、入力された映像の空間周波数分布をフレーム単位のヒストグラムから分析して、映像分析を行う(ST108)。この分析結果から、入力映像の空間周波数分布(細かい映像成分が多いか少ないか等を示す)に応じた鮮鋭化処理を行い、処理後の映像を表示する処理へ移行する(ST110)。ST110の鮮鋭化処理の詳細については後述する。 When there are multiple external devices to be connected, or there are multiple signal qualities of the video signal input from the external device and it is difficult to specify the input signal quality, the user selects the “Random” item from the menu M3. And press the Enter key on the remote control ("Omakase" branch in ST104). Then, the resolution and frame rate (scan rate) are decoded from the video attributes of the input video, and the spatial frequency distribution of the input video is analyzed from the histogram in units of frames to perform video analysis (ST108). From this analysis result, sharpening processing is performed according to the spatial frequency distribution of the input video (indicating whether there are many or few fine video components), and the process proceeds to processing for displaying the processed video (ST110). Details of the sharpening process in ST110 will be described later.
なお、「おまかせ」モードでST106の超解像処理を行い、「DVDファイン」モードでST108〜ST110の映像分析〜鮮鋭化処理を行うようにしてもよい。 Note that the super-resolution processing of ST106 may be performed in the “automatic” mode, and the video analysis to sharpening processing of ST108 to ST110 may be performed in the “DVD fine” mode.
図3は、この発明の一実施の形態に係るメニュー表示選択処理の他例を説明する図である。図3のST100〜ST110の処理は図2のST100〜ST110の処理と同じでよいが、図3の処理ではST108とST110の間にST109が入っている。ST109では、入力映像信号のビデオ属性から1080p信号であるか否かと、分析映像のヒストグラムに含まれる高域成分が所定値以上であるか否かが判定される。すなわち、「おまかせ」モードにおいて最高画質の映像(1080pで細かい絵柄が多い)が検知されたときは(ST109イエス)、ST104における「ピュアダイレクト」モード分岐と同じ処理が行われる。一方、「おまかせ」モードにおいて最高画質の映像でない(1080pでない、あるいは1080pであってもSD映像のアップコンバート映像であって細かい絵柄が少ないなど)が検知されたときは(ST109ノー)、ST110の処理が行われる。 FIG. 3 is a diagram for explaining another example of the menu display selection process according to the embodiment of the present invention. The processing of ST100 to ST110 of FIG. 3 may be the same as the processing of ST100 to ST110 of FIG. 2, but ST109 is inserted between ST108 and ST110 in the processing of FIG. In ST109, it is determined from the video attribute of the input video signal whether it is a 1080p signal and whether the high frequency component included in the histogram of the analysis video is greater than or equal to a predetermined value. In other words, when a video with the highest image quality (1080p with many fine patterns) is detected in the “automatic” mode (YES in ST109), the same processing as the “pure direct” mode branch in ST104 is performed. On the other hand, when “high-definition” mode does not detect the highest quality image (not 1080p, or even if it is 1080p, it is an SD video up-conversion image with few fine patterns, etc.) (NO in ST109). Processing is performed.
図3の「おまかせ」モードにしておけば、入力される映像の種類をユーザが一々考えなくても、入力される映像信号の品質(480i/p〜1080i/p)に応じて適宜画質改善(ST109ノーからST110へ)が施された映像を表示できるばかりでなく、入力される映像信号の最高品質(1080p)を損なうことなくそのまま当該映像装置の最高画質品位(1080p)で表示することもできる(ST109イエス)。 If the “automatic” mode in FIG. 3 is set, the image quality improvement (appropriately according to the quality of the input video signal (480i / p to 1080i / p) without the user having to think about the type of the input video) In addition to being able to display an image that has been subjected to ST109 NO to ST110), it is also possible to display the input image signal as it is with the highest image quality (1080p) without impairing the highest quality (1080p) of the input video signal. (ST109 YES).
図4は、この発明の一実施の形態に係る、映像装置(デジタルTV受信機11)の構成の一例を説明する図である。このデジタルTV受信機11は、IEEE802.3準拠の通信インターフェース73に繋がる信号端子21、第1のHDMIインターフェース74に繋がる信号端子22、第2のHDMIインターフェース75に繋がる信号端子23、第1のD端子インターフェース74aに繋がる信号端子22a、第2のD端子インターフェース75aに繋がる信号端子23a、USB(Universal Serial Bus)インターフェース76に繋がる信号端子24、IEEE1394準拠の通信インターフェース77に繋がる信号端子25、DVI(Digital Visual Interface)インターフェース78に繋がる信号端子26などを装備している。その他のビデオソースとして、ハイビジョンデジタル放送を録画できるHDDレコーダ84も装備されている。
FIG. 4 is a diagram for explaining an example of the configuration of the video apparatus (digital TV receiver 11) according to the embodiment of the present invention. The digital TV receiver 11 includes a
図4の例では、IEEE802.3信号端子21と第1のHDMI信号端子22と第1のD端子22aにハイビジョン対応DVDレコーダ(衛星デジタル/地上デジタルチューナ内臓)79が接続され、第2のHDMI信号端子23と第2のD端子23aとIEEE1394信号端子25に高級DVDプレーヤ(またはBDプレーヤ)80が接続され、USB信号端子24とDVI信号端子26にDVD/BDドライブ内臓でハイビジョンビデオ再生可能なPC(Personal Computer)81が接続されている。
In the example of FIG. 4, a high-definition DVD recorder (satellite digital / terrestrial digital tuner built-in) 79 is connected to the IEEE 802.3
端子21〜26、22a〜23aに入力された外部映像信号あるいはHDDレコーダ84の再生信号は制御部65で適宜選択され、選択された映像信号S65は映像処理部62へ送られる。一方、OSD信号生成部61で生成されたメニュー画像等のOSD信号S61はグラフィック処理部58へ送られる。メニュー画像(図1参照)の表示処理を含む図2または図3の処理は、制御部65内のファームウエアであるメニュー表示制御部66aにより行われる。
The external video signal input to the
グラフィック処理部58には、信号処理部51を介してTV放送番組等の映像信号S51が入力される。この映像信号S51および/またはメニュー画像を含むOSD信号S61に対応する映像信号S58が、映像処理部62へ送られる。映像処理部62は、入力された信号(S58またはS65)に超解像処理および/または鮮鋭化処理を施し、高品質な映像信号S62として映像表示部(フラットパネルディスプレイなど)14へ送出する。映像処理部62で処理された映像信号S62は、ビデオ端子(HDMI端子、D5端子など)63を介して外部モニタ82へも送出可能となっている。
A
図5は、超解像技術を利用したアップコンバートを行う映像処理部の構成例を説明する図である。図1のグラフィック処理部58からの映像信号S58または制御部65で選択された映像信号S65は、IP変換/NR処理/スケーリング処理部621に入力される。この処理部621において、入力信号がインターレース信号であればプログレッシブ信号に変換され(IP変換)、入力信号がノイズの多い信号であれば適宜ノイズ低減処理が施され(NR処理)、入力信号の画像が映像表示部14の表示エリアに程よく収まらないようなサイズであれば適正サイズで表示エリアに収まるようなスケーリング処理が施される。このような処理が施された信号S621が超解像変換処理部622に入力される。
FIG. 5 is a diagram illustrating a configuration example of a video processing unit that performs up-conversion using super-resolution technology. The video signal S58 from the
超解像変換処理部622は、入力された信号S621に対して超解像処理を施して、1080pにアップコンバートされた信号S622を出力する。アップコンバートされた信号S622は動画像改善処理部623に入力される。この処理部623において、例えば毎秒60コマの画像の隣接フレーム間の動きが毎秒120コマの区切りで補間される。この補間処理(モーションクリア処理)により、信号S622の動画像の見え方がクリアとなる。超解像変換処理部622で1080pにアップコンバートされ、動画像改善処理部623で動画像の見え方が改善された映像信号S62が、表示部14で表示され、あるいは外部モニタ82で表示されることになる。
The super-resolution
上記の超解像処理(図2または図3のST106)は、480i/p〜720i/pのみならず1080i/pの映像に対しても動作可能である。そのため、例えばDVDや地上デジタル放送を1080i/pへアップコンバートした外部入力信号に対しても、超解像処理によりさらに精細感を向上させることができる。さらに、図2または図3のST106〜ST110において、周波数ヒストグラム検出により超解像の再構成処理ゲインやフィルタを自動制御し、入力信号に対して高域成分を補正し、映像シーンに応じた最適な処理も可能である。このような処理は、映像処理部62(その内部の超解像変換処理部622および/または鮮鋭化処理装置62a)により行うことができる。
The above super-resolution processing (ST106 in FIG. 2 or FIG. 3) can operate on 1080i / p video as well as 480i / p to 720i / p. For this reason, for example, even for an external input signal obtained by up-converting a DVD or terrestrial digital broadcast to 1080i / p, the fineness can be further improved by super-resolution processing. Furthermore, in ST106 to ST110 in FIG. 2 or FIG. 3, the super-resolution reconstruction processing gain and filter are automatically controlled by frequency histogram detection, the high frequency component is corrected for the input signal, and the optimum according to the video scene. Can also be processed. Such processing can be performed by the video processing unit 62 (the super-resolution
また、超解像処理は「おまかせ」モードのほか、DVDの再生に最適な画質モード「DVDファイン」でも有効である。また、「ピュアダイレクト」モードでは、BDプレーヤなどで4:4:4にクロマアップサンプリング処理された信号をそのまま表示することもできる。通常は4:4:4信号を入力すると、一部プロセスで4:2:2に変換し、表示時に4:4:4に戻して処理しているが、「ピュアダイレクト」モードでは一部プロセスをスキップして、4:4:4のまま入力から出力までを一貫処理できる。 The super-resolution processing is effective not only in the “automatic” mode but also in the image quality mode “DVD fine” that is optimal for DVD playback. Further, in the “pure direct” mode, a signal subjected to chroma upsampling processing at 4: 4: 4 by a BD player or the like can be displayed as it is. Normally, when a 4: 4: 4 signal is input, it is converted to 4: 2: 2 in some processes and returned to 4: 4: 4 at the time of display. Can be processed consistently from input to output with 4: 4: 4.
HDMI入力については、RGB入力時のダイナミックレンジをフルレンジ(8ビット階調レベル0-255)とリミテッド(階調レベル16-235)から任意に選択できる「RGB入力ダイナミックレンジ切替」も可能である。HDMI入力した映像の解像度や走査方式、アスペクト、色深度、色空間、クロマフォーマットなどを画面(OSD信号生成部61による表示)上で確認することもできる。また、クロマフォーマットごとに最適な処理を行なう色帯域切替も可能である。これにより、「スタンダード」と、より広色域表現が可能という「ワイド」の2モードが選択できる。 For HDMI input, “RGB input dynamic range switching” is also possible, in which the dynamic range at the time of RGB input can be arbitrarily selected from the full range (8-bit gradation level 0-255) and limited (gradation level 16-235). It is also possible to check the resolution, scanning method, aspect, color depth, color space, chroma format, etc. of the HDMI input video on the screen (displayed by the OSD signal generation unit 61). It is also possible to switch the color band for performing optimum processing for each chroma format. As a result, two modes of “standard” and “wide” that can express a wider color gamut can be selected.
図6は、鮮鋭化処理技術を利用した映像処理部の構成例を説明する図である。鮮鋭化処理装置62aに入力される映像信号の原信号としては、例えばレコーダ79からD端子22aへ入力される480i〜1080iの映像信号、プレーヤ80からHDMI端子23へ入力される1080pの高品位映像信号、PC81からDVI端子26へ入力される480i〜720pの映像信号、HDDレコーダ84から制御部65へ送出される480i/p〜1080i/pの映像信号などを想定することができる。
FIG. 6 is a diagram illustrating a configuration example of a video processing unit using the sharpening processing technique. As an original signal of the video signal input to the sharpening
この映像信号(S58、S65またはS621)は、輝度信号(Y)101、色差青信号(Cb/Pb)102、および色差赤信号(Cr/Pr)103を含んでいる(場合によっては赤緑青のRGB信号の場合もあり得る)。映像信号101〜103はフレームメモリ124に一旦格納される。また、映像信号101〜103のうち少なくとも輝度信号(Y)101に対して、フレーム毎に、周波数帯域分布を示すヒストグラムを取得する。このヒストグラム取得はヒストグラム取得/周波数状態判定部104において行われる。
This video signal (S58, S65, or S621) includes a luminance signal (Y) 101, a color difference blue signal (Cb / Pb) 102, and a color difference red signal (Cr / Pr) 103 (in some cases, red, green, and blue RGB) It can be a signal). The video signals 101 to 103 are temporarily stored in the
ヒストグラム取得/周波数状態判定部104は、取得したヒストグラムから、入力された輝度信号(Y)の周波数状態(信号の低域成分から高域成分までがどのように分布しているか)をフレーム単位でチェックしている。このチェック結果から、ヒストグラム取得/周波数状態判定部104は、低域成分に対して高域成分が相対的に少ないのか多いのかの判定を、リアルタイムで行う。ヒストグラム取得/周波数状態判定部104による判定結果が出ると、フレームメモリ124に格納された映像信号101〜103は、それらに対応する信号101*〜103*として読み出される(フレームメモリ124は一種の遅延素子として機能している)。読み出された信号101*〜103*は、鮮鋭化処理ブロック107内の鮮鋭化帯域フィルタ108および鮮鋭化加算処理部110に入力される。
The histogram acquisition / frequency
ヒストグラム取得/周波数状態判定部104は、低域成分に対して高域成分が相対的に少ないのか多いのかを判定し、その判定結果として、状態判定データ(制御パラメータ)105を鮮鋭化帯域フィルタ108に供給する。状態判定データ(制御パラメータ)105は、鮮鋭化を行うための映像信号成分を抽出する鮮鋭化帯域フィルタ108に対する、制御信号(微小信号コアリング制御信号)となる。
The histogram acquisition / frequency
また、ヒストグラム取得/周波数状態判定部104は、低域成分に対して高域成分が相対的に少ないのか多いのかの前記判定結果として、状態判定データ(制御パラメータ)106を加算器111に供給する。状態判定データ(制御パラメータ)106は、鮮鋭化効果を決定するための制御信号(効果ゲイン制御信号)となっている。加算器111には、鮮鋭化の程度を決めるイニシャルパラメータ(装置メーカによる標準設定値あるいはユーザが好みで決めたユーザ設定値)が与えられている。加算器111は、状態判定データ(制御パラメータ)106にイニシャルパラメータを加えた鮮鋭化効果ゲイン制御信号112を、鮮鋭化加算処理部110に供給する。
Further, the histogram acquisition / frequency
鮮鋭化帯域フィルタ108および鮮鋭化加算処理部110で構成される鮮鋭化処理ブロック107は、フレームメモリ124から読み出された信号101*〜103*に対し、フレーム単位で鮮鋭化処理を施す(この鮮鋭化処理の内容は、フレーム内の絵柄が変わると、適宜変化する)。鮮鋭化処理ブロック107により適宜鮮鋭化された輝度信号(Y*)121、色差青信号(Cb*/Pb*)122、および色差赤信号(Cr*/Pr*)123に対応する信号S62は、映像表示部14に供給される。また、この信号S62は、フルHD信号を扱うことができるHDMI端子22、23あるいはD端子(D5端子など)22a、23aを介して、外部に出力することもできる。
A sharpening
図7は、ヒストグラム取得/周波数状態判定部104の構成を説明する図である。鮮鋭化処理ブロック107に入力された映像信号(S58、S65またはS621)のうち、輝度信号(Y)101は、フレーム単位で、n個のバンドパスフィルタBPF1〜BPFnと1個のハイパスフィルタHPFに入力される。ここで、HPFは、フルHD信号でなければ頻繁に表れないような微細映像信号成分(空間周波数の特に高い成分)を通過させる。BPF1は、SD映像あるいはHD映像のうち変化が少ない映像信号成分(空間周波数の低い成分)を選択的に通過させる。BPFnは、SD映像あるいはHD映像のうち変化が多い映像信号成分(空間周波数の高い成分)を選択的に通過させる。BPF2〜BPF(n-1)は、変化が少ない場合と変化が多い場合の間の映像信号成分を、複数の周波数区間に区切って、選択的に通過させる。これらのBPF1〜BPFnおよびHPFを用いて、入力映像のフレーム内情報分布(ヒストグラム)を取得することができる。
FIG. 7 is a diagram illustrating the configuration of the histogram acquisition / frequency
すなわち、ある1つのデジタル映像フレーム(例えば1920×1080ピクセル相当のフレーム)内において、BPF1を通過する信号成分に対応したピクセルの発生頻度(大きな面積の画像の表示に用いられるピクセルの累積ピクセル数)から、BPFnを通過する信号成分に対応したピクセルの発生頻度(小さな面積の画像の表示に用いられるピクセルの累積ピクセル数)までと、HPFを通過する信号成分に対応したピクセルの発生頻度(極小さな面積の画像の表示に用いられるピクセルの累積ピクセル数)のヒストグラムが、BPF1〜BPFnおよびHPFそれぞれの出力を累積記憶することで得られる。この累積記憶は、レジスタ1041〜104nおよび104h内で行われる。
That is, in one digital video frame (for example, a frame corresponding to 1920 × 1080 pixels), the frequency of occurrence of pixels corresponding to signal components passing through the BPF 1 (the cumulative number of pixels used for displaying a large area image) To the occurrence frequency of pixels corresponding to signal components passing through BPFn (the cumulative number of pixels used for displaying an image of a small area) and the occurrence frequency of pixels corresponding to signal components passing through HPF (very small). A histogram of the cumulative number of pixels used to display the area image is obtained by accumulating and storing the outputs of BPF1 to BPFn and HPF. This cumulative storage is performed in the
レジスタ1041は、BPF1の通過帯域に対応する累積ピクセル数に所定の重み付け係数を掛けた値を記憶する。レジスタ1042は、BPF2の通過帯域に対応する累積ピクセル数に所定の重み付け係数を掛けた値を記憶する。以下同様にして、レジスタ104nは、BPFnの通過帯域に対応する累積ピクセル数に所定の重み付け係数を掛けた値を記憶する。また、レジスタ104hは、HPFの通過帯域に対応する累積ピクセル数に所定の重み付け係数を掛けた値を記憶する。なお、各レジスタにおける重み付け係数をどのように選ぶかは、鮮鋭化処理対象の映像コンテンツ(映画フィルム映像かスタジオビデオ映像かCGアニメ映像か等)によりケースバイケースで実験的に決める。
The
レジスタ1041〜104nに記憶された累積ピクセル数は、加算器104aにより合算され、その合算結果が基準データAとして比較器104cに入力される。一方、レジスタ104hに記憶された累積ピクセル数は、比較データBとして比較器104cに入力される。比較器104cは、加算器104aから入力された基準データAを基に、レジスタ104hから入力された比較データBが大きいか小さいかの判定を行う(この大小判定はレジスタ1041〜104n、104hにおける重み付けの程度に影響される)。
The accumulated number of pixels stored in the
なお、比較器104cは、最も簡単な場合は2値コンパレータとなるが、この実施の形態では、データAとデータBの大きさの違いの程度に応じた多値を出力するマルチレベルコンパレータで構成される。このマルチレベルコンパレータの多値出力が、状態判定データ(鮮鋭化コアリング調整パラメータ)105および状態判定データ(鮮鋭化効果ゲインパラメータ)106として使用される。
In the simplest case, the
図8は、映像の鮮鋭化処理の具体例を説明する図である。図7の比較器104cにおいて、基準データA(低域成分に対応)より比較データB(高域成分に対応)が小さいとき(ケース1)は、現在チェックしている映像のフレーム内に微細な映像成分が少ない(あるいは無い)ことになる(図8(a))。この場合は、現在チェックしている映像が「SD映像をアップコンバートした疑似HD映像」であると判定し、状態判定データ(鮮鋭化コアリング調整パラメータ)105および状態判定データ(鮮鋭化効果ゲインパラメータ)106が、「SD映像をアップコンバートした疑似HD映像」を示す値を持つようにする(図8(c)(d)左側参照)。
FIG. 8 is a diagram for explaining a specific example of the image sharpening process. In the
一方、比較データB(高域成分に対応)が基準データA(低域成分に対応)以上であるとき(ケース2)は、現在チェックしている映像のフレーム内に微細な映像成分が多いことになる(図8(b))。この場合は、現在チェックしている映像が「本来のフルHD映像」であると判定し、状態判定データ(鮮鋭化コアリング調整パラメータ)105および状態判定データ(鮮鋭化効果ゲインパラメータ)106が「本来のフルHD映像」を示す値を持つようにする(図8(c)(d)右側参照)。 On the other hand, when the comparison data B (corresponding to the high frequency component) is equal to or higher than the reference data A (corresponding to the low frequency component) (case 2), there are many fine video components in the frame of the currently checked image. (FIG. 8B). In this case, it is determined that the currently checked video is “original full HD video”, and the status determination data (sharpening coring adjustment parameter) 105 and the status determination data (sharpening effect gain parameter) 106 are “ A value indicating “original full HD video” is set (see the right side of FIGS. 8C and 8D).
また、比較データB(高域成分に対応)が基準データA(低域成分に対応)以下であるが、その程度が前記ケース1とケース2の間にあるとき(ケース3)は、状態判定データ105および106は、「SD映像をアップコンバートした疑似HD映像」の場合と「本来のフルHD映像」の場合の間を示す値を持つようになる(図8(c)(d)において、閾値TH1と閾値TH2の間参照)。
Further, when the comparison data B (corresponding to the high frequency component) is equal to or less than the reference data A (corresponding to the low frequency component) but the degree is between the
鮮鋭化処理ブロック107内の鮮鋭化帯域フィルタ108は、入力された映像信号のうち、鮮鋭化処理を行うための交流信号成分を抜き出す。その際のフィルタ帯域設計の一例を以下で説明する。図6の鮮鋭化帯域フィルタ108は可変フィルタ特性を持つ。可変フィルタ108には複数のフィルタ特性(カットオフ周波数が異なる複数のローパスフィルタ)が設定されている。そのうちどのフィルタ特性が選択されるかは、状態判定データ(鮮鋭化コアリング調整パラメータ)105の値により決まる。
A sharpening
すなわち、現在チェックしている映像のフレーム内に微細な映像成分が少ない場合(図8(a))は、高域側に鮮鋭化対象の画素情報が少なくて殆どノイズであると判断する。その場合、高域ノイズの抑制レベルが大きくなるように、すなわちフィルタ108の高域周波数応答が相対的に下降するように、状態判定データ(鮮鋭化コアリング調整パラメータ)105の値が設定される。このように「殆どノイズしかない高域成分」を抑えておけば、状態判定データ(鮮鋭化効果ゲインパラメータ)106により鮮鋭化効果ゲインを上げて低解像度映像の鮮鋭感を改善しても、それに伴いノイジーな映像になることを防止できる。
That is, when there are few fine video components in the currently checked video frame (FIG. 8A), it is determined that there is little pixel information to be sharpened on the high frequency side and that it is almost noisy. In that case, the value of the state determination data (sharpening coring adjustment parameter) 105 is set so that the suppression level of high-frequency noise is increased, that is, the high-frequency response of the
一方、現在チェックしている映像のフレーム内に微細な映像成分が多い場合(図8(b))は、フィルタ108の高域周波数応答が相対的に上昇するように、状態判定データ(鮮鋭化コアリング調整パラメータ)105の値が設定される。このようにして「微細な映像成分が多い高域成分」を素通しすれば、状態判定データ(鮮鋭化効果ゲインパラメータ)106により鮮鋭化効果ゲインを下げても、元々微細映像成分が多く存在するので、映像の精細感は損なわれない。また鮮鋭化効果ゲインを下げるので、鮮鋭化に伴うノイズの増加も回避できる。
On the other hand, when there are many fine video components in the currently checked video frame (FIG. 8B), the state determination data (sharpening) is performed so that the high-frequency response of the
なお、現在チェックしている映像のフレーム内の高域情報(微細な映像成分)が少ない場合と多い場合の間にあるときは、フィルタ108の周波数応答には、複数レスポンスカーブのうち、カットオフ周波数が上限のものと下限ものとの間が選ばれる。
When the high frequency information (fine video component) in the frame of the currently checked video is between a small amount and a large amount, the frequency response of the
図9は、鮮鋭化帯域フィルタ108と鮮鋭化加算処理部110の具体例を説明する図である。フレームメモリ124から読み出された輝度信号(Y)101*は加算器1103yおよびカットオフ可変のローパスフィルタLPF(Y)108yに入力される。フレームメモリ124から読み出された色差信号(Cb/Pb)102*は加算器1103bおよびカットオフ可変のローパスフィルタLPF(Cb/Pb)108bに入力される。フレームメモリ124から読み出された色差信号(Cr/Pr)103*は加算器1103rおよびカットオフ可変のローパスフィルタLPF(Cr/Pr)108rに入力される。
FIG. 9 is a diagram illustrating a specific example of the sharpening
LPF(Y)108y、LPF(Cb/Pb)108b、およびLPF(Cb/Pb)108bは、いずれも、状態判定データ(鮮鋭化コアリング調整パラメータ)105y、105b、105rの値に応じて周波数応答特性が変化し、カットオフ周波数が移動するようになっている。なお、フィルタ108y、108b、および108rは、状態判定データ105y、105b、105rの値に応じて通過帯域が変化するバンドパスフィルタでもよい。
LPF (Y) 108y, LPF (Cb / Pb) 108b, and LPF (Cb / Pb) 108b all have frequency responses according to the values of state determination data (sharpening coring adjustment parameters) 105y, 105b, and 105r. The characteristic changes and the cut-off frequency moves. Note that the
LPF(Y)108yの出力109y、LPF(Cb/Pb)108bの出力109b、およびLPF(Cb/Pb)108bの出力109rは、それぞれ、2次微分回路1101y、1101b、および1101rを介して、可変ゲインアンプ1102y、1102b、および1102rに入力される。2次微分回路1101y、1101b、および1101rは、入力された映像信号の不要低域成分をカットするとともに、入力された映像信号の高域成分を抽出し、画像エッジをシャープに立てる。これらの2次微分回路でエッジがシャープに立てられた鮮鋭化信号のレベルは、可変ゲインアンプ1102y、1102b、および1102rで適切に調整される。可変ゲインアンプ1102y、1102b、および1102rのゲインは、それぞれ、鮮鋭化効果ゲイン制御信号112y、112b、および112rによって決定される。ここで、鮮鋭化効果ゲイン制御信号112y、112b、および112rは、それぞれ、加算器111y、111b、および111rにおいて、状態判定データ(鮮鋭化効果ゲインパラメータ)106y、106b、および106rに所定のイニシャルパラメータを加えることで得られる。
The
こうして鮮鋭化効果ゲイン制御信号112y、112b、および112rによりレベル調整された鮮鋭化信号は、加算器1103y、1103b、および1103rにおいて、元の信号101*、102*、および103*に加えられ、鮮鋭感が改善された信号121、122、および123となって出力される。
The sharpening signals level-adjusted by the sharpening effect
<実施の形態のまとめ>
1.ハイビジョン出力が可能な映像出力機器(DVDプレーヤ/レコーダ、BDプレーヤ/レコーダ等)をテレビセット等に接続した際、映像出力機器に出力させる映像に応じてユーザ(機器の操作者)が任意に画質モードを選ぶ手段(ST104)を提供する。
<Summary of Embodiment>
1. When a video output device capable of high-definition output (DVD player / recorder, BD player / recorder, etc.) is connected to a television set or the like, the user (device operator) can arbitrarily select the image quality according to the video output to the video output device. A means for selecting a mode (ST104) is provided.
2.映像出力機器が出力する最高画質のハイビジョン映像出力(例えば1080p信号)は、接続するテレビセットが入力可能とする最大解像度とする。 2. The highest-definition high-definition video output (for example, 1080p signal) output from the video output device has the maximum resolution that can be input by the connected TV set.
3.映像出力機器が出力する映像信号が上記最高画質の映像信号でない場合は、その映像信号を上記最大解像度にアップコンバートして表示する。 3. If the video signal output from the video output device is not the video signal with the highest image quality, the video signal is up-converted to the maximum resolution and displayed.
上記の画質モードを選ぶ手段(ST104)は、ユーザメニュー(図1)による切り換えで提供される。このユーザメニューでは、3つの画質モード(「おまかせ」モードと「DVDファイン」モードと「ピュアダイレクト」モード)を選択できる。 The means (ST104) for selecting the image quality mode is provided by switching by the user menu (FIG. 1). In this user menu, three image quality modes ("automatic" mode, "DVD fine" mode, and "pure direct" mode) can be selected.
「おまかせ」モードは、ハイビジョン対応DVD/BDレコーダなどに録画を行ったデジタル放送番組の視聴に適用できる。このモードでは、入力画像の周波数帯域等を検出する事でどのような映像か判断し、図6〜図9を参照して説明した鮮鋭化処理を行うことで自動的に最適な映像補正を行う。 The “Random” mode can be applied to viewing a digital broadcast program recorded on a high-definition DVD / BD recorder or the like. In this mode, an image is determined by detecting the frequency band of the input image and the like, and the optimum image correction is automatically performed by performing the sharpening process described with reference to FIGS. .
「DVDファイン」モードは、DVDビデオ等の低解像度映像(SD映像)に特化された専用設定モードとすることができる。このモードでは、DVDなどの低解像度映像が出力機器側でアップコンバート処理されて入力される場合にも対応するが、出力機器側でアップコンバートされていない場合にも対応する。出力機器側でアップコンバートされている場合、ユーザ(機器操作者)がその入力映像を指定している(DVDが見たい)のであれば、図6〜図9を参照して説明した鮮鋭化処理を行うことができる。出力機器側でアップコンバートされていない場合は、図5等を参照して説明した超解像処理を行うことができる。 The “DVD fine” mode can be a dedicated setting mode specialized for low-resolution video (SD video) such as DVD video. This mode corresponds to the case where a low-resolution video such as a DVD is input after being up-converted on the output device side, but also corresponds to the case where it is not up-converted on the output device side. When up-conversion is performed on the output device side, if the user (device operator) designates the input video (want to watch a DVD), the sharpening process described with reference to FIGS. It can be performed. When the output device is not up-converted, the super-resolution processing described with reference to FIG. 5 and the like can be performed.
「ピュアダイレクト」モードは、高級ハイビジョンプレーヤ向けのモードとすることができる。高額なハイビジョンプレーヤを所持するユーザからは、そのプレーヤ(映像出力機器)から送出される高品位映像をそのまま表示したいという要求がある。この「ピュアダイレクト」モードでは、映像表示パネルのバラツキ吸収や色見補正程度の最低限の処理のみを行い、映像へのフィルタ処理や強調処理といったものを一切行わず、映像出力機器の素の信号を表示させる。 The “pure direct” mode can be a mode for a high-end high-definition player. There is a request from a user who has an expensive high-definition player to display a high-definition video sent from the player (video output device) as it is. In this “Pure Direct” mode, only minimal processing such as dispersion of the video display panel and color correction is performed, and no filtering or enhancement processing is performed on the video. Is displayed.
<実施の形態の効果>
高品質なフルHD映像(ハイビジョン)出力が可能な映像出力機器(DVDプレーヤ/レコーダ、BDプレーヤ/レコーダ等)を映像表示装置(フルHD対応テレビジョンセット等)に接続した際に、映像出力機器が出力する最高画質の映像(1080pなど)をそのままの品質で表示できるように、ユーザ(機器の操作者)が映像表示装置の画質モード(ピュアダイレクトモードなど)を自由に選べるようになる。
<Effect of Embodiment>
When a video output device (DVD player / recorder, BD player / recorder, etc.) capable of high-quality full HD video (high-definition) output is connected to a video display device (full HD compatible television set, etc.), the video output device The user (the operator of the device) can freely select the image quality mode (pure direct mode, etc.) of the video display device so that the highest quality video (1080p, etc.) output by can be displayed with the same quality.
<実施の形態と発明との対応例>
この発明の一実施の形態に係る映像装置は、所定の高品質映像信号(1080p)をその信号品質のまま表示する第1の画質モード(ピュアダイレクトモード)と、前記所定の高品質映像信号(1080p)より相対的に低品質な映像信号(480i、480p、1080i、720pなど)の信号品質を適宜改善して表示する第2の画質モード(おまかせモード)を有する。この映像装置は、前記所定の高品質映像信号(1080p)または前記相対的に低品質な映像信号(480i、480p、1080i、720pなど)が入力される信号端子(21〜26)と、前記信号端子に外部映像機器(79〜81)が接続された際あるいは前記信号端子に外部映像信号が入力された際もしくはユーザがメニューを出す操作をした際に、前記第1の画質モードまたは前記第2の画質モードを選択するメニュー(M3)の画像情報を提供するメニュー手段(58、61、66a)と、前記メニュー(M3)により前記第1の画質モードが選択されたときは前記信号端子に入力された前記高品質映像信号(1080p)をそのまま出力し、前記メニュー(M3)により前記第2の画質モードが選択されたときは前記信号端子に入力された前記映像信号(480i、480p、1080i、720pなど)の信号品質をその信号成分に応じて改善する処理(ヒストグラム分析を利用した鮮鋭化処理や超解像処理など)を施す映像処理手段(62、62a)を備えている。
<Correspondence Example between Embodiment and Invention>
A video apparatus according to an embodiment of the present invention includes a first image quality mode (pure direct mode) for displaying a predetermined high quality video signal (1080p) as it is, and the predetermined high quality video signal ( A second image quality mode (automatic mode) for appropriately improving and displaying the signal quality of a video signal (480i, 480p, 1080i, 720p, etc.) having a lower quality than 1080p). The video apparatus includes a signal terminal (21 to 26) to which the predetermined high quality video signal (1080p) or the relatively low quality video signal (480i, 480p, 1080i, 720p, etc.) is input, and the signal When an external video device (79-81) is connected to a terminal, when an external video signal is input to the signal terminal, or when a user performs an operation to display a menu, the first image quality mode or the second image quality mode is selected. Menu means (58, 61, 66a) for providing image information of a menu (M3) for selecting the image quality mode of the image, and input to the signal terminal when the first image quality mode is selected by the menu (M3) The high-quality video signal (1080p) is output as it is, and when the second image quality mode is selected by the menu (M3), the video signal (480i, 480p) input to the signal terminal is output. 1080i, and a video processing means for performing processing to improve in response to the signal quality in the signal components of 720p, etc.) (such as histogram analysis sharpening processing and super-resolution processing using) (62, 62a).
なお、この発明は前述した実施の形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。例えば、ヒストグラム取得/周波数状態判定部104から判定結果をNフレーム(Nは整数)毎に取り出し、鮮鋭化処理ブロック107における鮮鋭化処理を入力映像のNフレーム毎に行うようにしてもよい。このようにNフレーム毎の処理もフレーム単位の範疇とする。また、各実施形態は可能な限り適宜組み合わせて実施してもよく、その場合組み合わせた効果が得られる。更に、上記実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適当な組み合わせにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
In addition, this invention is not limited to embodiment mentioned above, In the implementation stage, it can change variously in the range which does not deviate from the summary. For example, the determination result may be extracted from the histogram acquisition / frequency
14…映像表示器、51…信号処理部、65…制御部、58…グラフィック処理部、61…OSD信号生成部、62…映像処理部、62a…映像の鮮鋭化処理装置、104…ヒストグラム取得/周波数状態判定部、107…鮮鋭化処理ブロック、108…鮮鋭化帯域フィルタ、110…鮮鋭化加算処理部(鮮鋭化処理部)、124…フレームメモリ。
DESCRIPTION OF SYMBOLS 14 ...
Claims (9)
前記所定の高品質映像信号または前記相対的に低品質な映像信号が入力される信号端子と、
前記第1の画質モードまたは前記第2の画質モードを選択するメニューの画像情報を提供するメニュー手段と、
前記メニューにより前記第1の画質モードが選択されたときは前記信号端子に入力された前記高品質映像信号をそのまま出力し、前記メニューにより前記第2の画質モードが選択されたときは前記信号端子に入力された前記映像信号の信号品質をその信号成分に応じて改善する処理を施す映像処理手段を備えた映像装置において、
前記映像処理手段が、
前記信号端子に入力された映像信号に含まれる映像コンテンツの周波数状態を判定する周波数状態判定部と、
前記入力された映像信号のうち映像の鮮鋭化処理に用いる信号成分を取り出すものであって、前記周波数状態判定部により前記入力された映像信号の高域成分が相対的に少ないと判定されたときは高域周波数応答が相対的に下降するように調整され、前記周波数状態判定部により前記入力された映像信号の高域成分が相対的に多いと判定されたときは高域周波数応答が相対的に上昇するように周波数応答特性が調整される鮮鋭化帯域フィルタと、
前記鮮鋭化帯域フィルタのフィルタ帯域を入力された映像信号に含まれる高域成分の相対的な量に応じて連続的に変化させ前記鮮鋭化帯域フィルタから取り出された信号成分を用いて前記入力された映像信号に対して鮮鋭化処理を行ない、鮮鋭化処理が施された映像出力信号を提供する鮮鋭化処理部を含む
映像装置。 An image quality mode in which a predetermined high quality video signal is displayed in its signal quality is defined as a first image quality mode, and the image quality of the video signal having a lower quality than the predetermined high quality video signal is improved and displayed. When the mode is the second image quality mode,
A signal terminal to which the predetermined high quality video signal or the relatively low quality video signal is input;
Menu means for providing image information of a menu for selecting the first image quality mode or the second image quality mode;
When the first image quality mode is selected by the menu, the high-quality video signal input to the signal terminal is output as it is, and when the second image quality mode is selected by the menu, the signal terminal In a video apparatus comprising video processing means for performing processing for improving the signal quality of the video signal input to the signal component according to the signal component,
The video processing means is
A frequency state determination unit that determines a frequency state of video content included in the video signal input to the signal terminal;
When a signal component used for image sharpening processing is extracted from the input video signal, and the frequency state determination unit determines that the high frequency component of the input video signal is relatively small Is adjusted so that the high frequency response is relatively lowered, and when the frequency state determination unit determines that the high frequency component of the input video signal is relatively large, the high frequency response is relatively A sharpened bandpass filter whose frequency response is adjusted to rise to
Using said pre Ki鮮 sharpening band signal components taken from continuously varying the sharpening band filter depending on the relative amount of high-frequency components included in the video signal input to the filter band of the filter A video apparatus including a sharpening processing unit that performs a sharpening process on an input video signal and provides a sharpened video output signal.
前記周波数状態判定部により前記入力された映像信号が前記所定の高品質映像信号と同等と判定されたときは、前記入力された映像信号がそのまま出力される請求項1に記載の映像装置。 The video processing means includes a frequency state determination unit that determines a frequency state of video content included in the video signal input to the signal terminal,
The video apparatus according to claim 1, wherein when the input video signal is determined to be equivalent to the predetermined high quality video signal by the frequency state determination unit, the input video signal is output as it is.
前記所定の高品質映像信号または前記相対的に低品質な映像信号が入力される信号端子信号端子に外部映像機器が接続された際、あるいは前記信号端子に外部映像信号が入力された際、もしくはユーザがメニューを出す操作をした際に、前記第1の画質モードまたは前記第2の画質モードを選択するメニューの画像を表示し、
前記メニューにより前記第1の画質モードが選択されたときは前記信号端子に入力された前記高品質映像信号をそのまま出力し、前記メニューにより前記第2の画質モードが選択されたときは前記信号端子に入力された前記映像信号の信号品質をその信号成分に応じて改善する処理を施す映像処理方法において、
前記信号端子に入力された映像信号に含まれる映像コンテンツの周波数状態を判定し、
前記周波数状態判定により前記入力された映像信号の高域成分が相対的に少ないと判定されたときは高域周波数応答が相対的に下降するように調整され、前記周波数状態判定により前記入力された映像信号の高域成分が相対的に多いと判定されたときは高域周波数応答が相対的に上昇するように周波数応答特性が調整される鮮鋭化帯域フィルタを用い、
前記鮮鋭化帯域フィルタのフィルタ帯域を入力された映像信号に含まれる高域成分の相対的な量に応じて連続的に変化させ前記鮮鋭化帯域フィルタから取り出された信号成分を用いて前記入力された映像信号に対して鮮鋭化処理を行ない、鮮鋭化処理が施された映像出力信号を提供する処理を含んだ
映像処理方法。 An image quality mode in which a predetermined high quality video signal is displayed in its signal quality is defined as a first image quality mode, and the image quality of the video signal having a lower quality than the predetermined high quality video signal is improved and displayed. When the mode is the second image quality mode,
When an external video device is connected to a signal terminal signal terminal to which the predetermined high quality video signal or the relatively low quality video signal is input, or when an external video signal is input to the signal terminal, or When a user performs an operation for displaying a menu, an image of a menu for selecting the first image quality mode or the second image quality mode is displayed.
When the first image quality mode is selected by the menu, the high-quality video signal input to the signal terminal is output as it is, and when the second image quality mode is selected by the menu, the signal terminal In a video processing method for performing a process for improving the signal quality of the video signal input to the signal component according to the signal component,
Determining the frequency state of the video content included in the video signal input to the signal terminal;
When it is determined by the frequency state determination that the high frequency component of the input video signal is relatively small, the high frequency response is adjusted so as to decrease relatively, and the frequency signal is input by the frequency state determination. When it is determined that the high frequency component of the video signal is relatively large, a sharpening band filter whose frequency response characteristic is adjusted so that the high frequency response is relatively increased,
Using said pre Ki鮮 sharpening band signal components taken from continuously varying the sharpening band filter depending on the relative amount of high-frequency components included in the video signal input to the filter band of the filter An image processing method including a process for performing a sharpening process on an input video signal and providing a sharpened video output signal.
ピュアダイレクトモードとおまかせモードとビデオファインモードの選択メニューを表示し、
前記ピュアダイレクトモードと前記おまかせモードと前記ビデオファインモードのうちの任意の1つを選択できるように構成した画質モード設定方法において、
前記入力映像に含まれる映像コンテンツの周波数状態を判定し、
前記周波数状態判定により前記入力映像の高域成分が相対的に少ないと判定されたときは高域周波数応答が相対的に下降するように調整され、前記周波数状態判定により前記入力映像の高域成分が相対的に多いと判定されたときは高域周波数応答が相対的に上昇するように周波数応答特性が調整される鮮鋭化帯域フィルタを用い、
前記鮮鋭化帯域フィルタのフィルタ帯域を入力された映像信号に含まれる高域成分の相対的な量に応じて連続的に変化させ前記鮮鋭化帯域フィルタから取り出された信号成分を用いて前記入力映像に対して鮮鋭化処理を行ない、鮮鋭化処理が施された映像出力信号を提供する処理を含んだ
画質モード設定方法。 When the input video is output as it is, the pure direct mode is set, and when the input video is up-converted to a higher quality video and output, the video fine mode is set. When setting the output mode to auto mode,
Display the selection menu for pure direct mode, automatic mode and video fine mode,
In an image quality mode setting method configured to be able to select any one of the pure direct mode, the automatic mode and the video fine mode,
Determining a frequency state of video content included in the input video;
When it is determined by the frequency state determination that the high frequency component of the input video is relatively small, the high frequency response is adjusted so as to decrease relatively, and the high frequency component of the input video is determined by the frequency state determination. When it is determined that the frequency response is relatively large, a sharpening band filter whose frequency response characteristic is adjusted so that the high frequency response is relatively increased is used.
Using said pre Ki鮮 sharpening band signal components taken from continuously varying the sharpening band filter depending on the relative amount of high-frequency components included in the video signal input to the filter band of the filter An image quality mode setting method including a process of performing a sharpening process on an input video and providing a video output signal subjected to the sharpening process.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009098304A JP5172769B2 (en) | 2009-04-14 | 2009-04-14 | Video device, video processing method, and image quality mode setting method in this device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009098304A JP5172769B2 (en) | 2009-04-14 | 2009-04-14 | Video device, video processing method, and image quality mode setting method in this device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012280902A Division JP5509306B2 (en) | 2012-12-25 | 2012-12-25 | Image quality mode setting method, video processing method, and video apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010251988A JP2010251988A (en) | 2010-11-04 |
JP5172769B2 true JP5172769B2 (en) | 2013-03-27 |
Family
ID=43313838
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009098304A Expired - Fee Related JP5172769B2 (en) | 2009-04-14 | 2009-04-14 | Video device, video processing method, and image quality mode setting method in this device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5172769B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5582920B2 (en) | 2010-08-23 | 2014-09-03 | 三菱電機株式会社 | Image processing device |
JP5028546B1 (en) * | 2011-07-14 | 2012-09-19 | シャープ株式会社 | Recording / reproducing apparatus, recording / reproducing method, television receiver, program, and recording medium |
JP6027585B2 (en) * | 2014-09-24 | 2016-11-16 | 株式会社コロプラ | Display system, display method and program |
JP6836415B2 (en) | 2017-02-13 | 2021-03-03 | 株式会社ジャパンディスプレイ | Display device with touch detection function and control device |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07219854A (en) * | 1994-02-03 | 1995-08-18 | Victor Co Of Japan Ltd | Microcomputer device containing nonvolatile memory |
JP2002084446A (en) * | 2000-09-07 | 2002-03-22 | Minolta Co Ltd | Image pickup device |
JP2003143439A (en) * | 2001-11-02 | 2003-05-16 | Matsushita Electric Ind Co Ltd | Image quality compensating device |
JP4415614B2 (en) * | 2003-09-02 | 2010-02-17 | ソニー株式会社 | Digital broadcast receiving apparatus and signal processing method |
JP2005130046A (en) * | 2003-10-21 | 2005-05-19 | Olympus Corp | Image pickup device |
JP2006179976A (en) * | 2004-12-20 | 2006-07-06 | Toshiba Corp | Video signal processor, video signal processing method, and television broadcast receiver |
JP4561482B2 (en) * | 2005-06-01 | 2010-10-13 | 株式会社日立製作所 | Video display device |
JP4071788B2 (en) * | 2005-08-31 | 2008-04-02 | 株式会社東芝 | Apparatus and method for removing cross color and dot interference |
JP5056242B2 (en) * | 2006-08-29 | 2012-10-24 | ソニー株式会社 | Image determination apparatus, image determination method, and program |
JP2008067316A (en) * | 2006-09-11 | 2008-03-21 | Olympus Corp | Image distribution system, server, and client terminal |
JP4221434B2 (en) * | 2006-10-04 | 2009-02-12 | 株式会社ナナオ | Outline correction method, image processing apparatus, and display apparatus |
-
2009
- 2009-04-14 JP JP2009098304A patent/JP5172769B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010251988A (en) | 2010-11-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8819760B2 (en) | Methods and systems for improving low-resolution video | |
US8885099B2 (en) | Methods and systems for improving low resolution and low frame rate video | |
US8373700B2 (en) | Image processing apparatus | |
US8675138B2 (en) | Method and apparatus for fast source switching and/or automatic source switching | |
US20070154173A1 (en) | Broadcasting receiver and method for recording and reproducing video signal | |
US20100026695A1 (en) | Image Processing Apparatus and Image Processing Method | |
JP4996725B2 (en) | Video processing device | |
JP2010041337A (en) | Image processing unit and image processing method | |
JP5172769B2 (en) | Video device, video processing method, and image quality mode setting method in this device | |
JP4543105B2 (en) | Information reproduction apparatus and reproduction control method | |
JP5509306B2 (en) | Image quality mode setting method, video processing method, and video apparatus | |
JP5178579B2 (en) | Image processing device | |
KR101225558B1 (en) | Information processing apparatus, information processing method, and recording medium | |
JP2011166315A (en) | Display device, method of controlling the same, program, and recording medium | |
JP5066041B2 (en) | Image signal processing apparatus and image signal processing method | |
JP4530373B2 (en) | Apparatus and method for indicating degree detected for video attributes | |
JP2007060169A (en) | Image processing apparatus, image display apparatus and image processing method | |
WO2011013670A1 (en) | Video displaying device, program, and storage medium | |
JP2010093856A (en) | Image processing apparatus and method | |
JP5075923B2 (en) | Image processing apparatus and image processing method | |
JP2010200112A (en) | Video sharpening processing unit, video device including video sharpening processing function, and method of sharpening video | |
JP4897036B2 (en) | Image processing apparatus and image processing method | |
KR100404218B1 (en) | Video Processing Apparatus for DTV | |
JP2013051632A (en) | Video signal processing device and method for video signal processing device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100819 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120524 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120605 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120904 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121005 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121030 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121226 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160111 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |