JP2011223598A - Image quality adjustment device and image quality adjustment method - Google Patents

Image quality adjustment device and image quality adjustment method Download PDF

Info

Publication number
JP2011223598A
JP2011223598A JP2011120594A JP2011120594A JP2011223598A JP 2011223598 A JP2011223598 A JP 2011223598A JP 2011120594 A JP2011120594 A JP 2011120594A JP 2011120594 A JP2011120594 A JP 2011120594A JP 2011223598 A JP2011223598 A JP 2011223598A
Authority
JP
Japan
Prior art keywords
frame
image
image quality
unit
frame rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011120594A
Other languages
Japanese (ja)
Inventor
Takayuki Arai
隆之 新井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2011120594A priority Critical patent/JP2011223598A/en
Publication of JP2011223598A publication Critical patent/JP2011223598A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal Display Device Control (AREA)

Abstract

PROBLEM TO BE SOLVED: To perform a process for improving image quality by reference to an appropriate image frame.SOLUTION: The image quality adjustment device comprises an output means, a detection means, and an image quality adjustment means. The output means alternately outputs a first and second frame images after frame rate conversion in which each frame rate of a first and second frame images inputted is converted into a higher frame rate, by performing time division processing. The detection means detects lightness information of the first frame image. The image quality adjustment means performs image quality adjustment to any of the first frame image after frame rate conversion and the second frame image after frame rate conversion that are output from the output means based on the lightness information detected by the detection means.

Description

本発明は、映像の画質を調整する画質調整装置および画質調整方法に関する。   The present invention relates to an image quality adjustment apparatus and an image quality adjustment method for adjusting the image quality of an image.

近年、テレビジョン受像機などが備える映像表示部の画面の大型化や高解像度化に伴い、テレビジョン受像機の一般的な利用者でさえも、映像品位の良し悪しを視認することができるようになってきている。このため、画面に高品位な映像を表示させるために、画面に表示される映像に係る情報を利用して画質を自動的に改善する技術を実現するための手法が多数開示されている。   In recent years, with the increase in the size and resolution of the screen of a video display unit provided in a television receiver or the like, even a general user of the television receiver can visually recognize whether the video quality is good or bad. It is becoming. For this reason, in order to display a high-definition video on the screen, many methods for realizing a technique for automatically improving the image quality using information related to the video displayed on the screen are disclosed.

例えば特許文献1では、複数のゲートラインのそれぞれにおける液晶の応答開始から、この液晶による液晶表示部の全面を照らす光源が点灯する時刻までの時間に合わせて、ゲートラインごとの映像データの階調値を補償する手法が開示されている。この手法によって、液晶の応答遅れによる輝度ムラやゴースト発生を防止することができる。   For example, in Patent Document 1, the gradation of video data for each gate line is matched with the time from the start of the response of the liquid crystal in each of the plurality of gate lines to the time when the light source that illuminates the entire surface of the liquid crystal display unit is turned on A technique for compensating the value is disclosed. By this method, it is possible to prevent luminance unevenness and ghost generation due to liquid crystal response delay.

特開2006−157775号公報JP 2006-157775 A

ところが特許文献1による手法は、最新フィールドの画像データである最新入力画像データの階調値を補償するために、1フィールド前に表示されていた直前入力画像データに基づいて、最新入力画像データに対する画像表示用の液晶の応答時間の立ち上がりが急峻になるような駆動電圧を印加するものであった。すなわち、この手法は、画面に表示される画像フレームの直前の画像フレームのデータに基づいて最新の画像フレームの画質を改善するものであった。   However, the method according to Patent Document 1 is based on the latest input image data displayed on the previous field in order to compensate for the gradation value of the latest input image data that is the image data of the latest field. A driving voltage is applied so that the response time of the liquid crystal for image display rises sharply. That is, this method improves the image quality of the latest image frame based on the data of the image frame immediately before the image frame displayed on the screen.

しかし、この手法を利用して、例えば、右目用画像フレームと左目用画像フレームとが交互に順次画面に表示される時分割方式の3D映像を画面に表示する場合には、次のような問題が生じる可能性があった。   However, using this technique, for example, when displaying a time-division 3D video in which a right-eye image frame and a left-eye image frame are alternately displayed on the screen in sequence, the following problem is caused. Could occur.

一般に3D映像は、画像中の特定のオブジェクトが立体視されるように、このオブジェクトの画面上の位置を、視差をつけるために右目用画像と左目用画像とでずらして表示させる。そして、この3D映像に対して、例えばシャッタつき眼鏡のシャッタを左右個別に開閉可能として、右目用画像が表示されるときには右目シャッタは開き且つ左目用シャッタが閉じ、逆に左目用画像が表示されるときには左目シャッタは開き且つ右目用シャッタが閉じるように制御される。このような、映像とシャッタつき眼鏡との同期制御を利用して画面上の映像を立体視させる手法が採用されることが多い。   In general, 3D video is displayed by shifting the position of this object on the screen between the right-eye image and the left-eye image so as to give a parallax so that a specific object in the image is stereoscopically viewed. For this 3D image, for example, the shutters of the glasses with shutters can be opened and closed individually, and when the right eye image is displayed, the right eye shutter is opened and the left eye shutter is closed, and conversely the left eye image is displayed. The left-eye shutter is opened and the right-eye shutter is closed. In many cases, a technique for stereoscopically viewing a video on a screen using such synchronous control of the video and glasses with a shutter is employed.

すなわち、時分割方式の3D映像に対して、特許文献1による手法を適用すると、右目用画像フレームの補償のために左目用画像フレームが利用され、逆に、左目用画像フレームの補償のために右目用画像フレームが利用されてしまうことになる。   That is, when the method according to Patent Document 1 is applied to time-division 3D video, the left-eye image frame is used for compensation of the right-eye image frame, and conversely, for compensation of the left-eye image frame. The right-eye image frame will be used.

ところが前述したとおり、右目用画像フレームと左目用画像フレームとでは視差をつけるために表示画像がずれているので、直前画像フレームの映像情報を利用して最新画像フレームを補償してしまうと、誤った情報で最新画像フレームが補償される可能性が大いにあった。   However, as described above, the display image is shifted in order to add parallax between the right-eye image frame and the left-eye image frame, so if the latest image frame is compensated using the video information of the immediately preceding image frame, an error occurs. There was a great possibility that the latest image frame was compensated with the information.

そこで、本発明は上述した課題を解決するために、適切な画像フレームを参照して画質改善のための処理を実行することができる画質調整装置および画質調整方法を提供することを目的とする。   Accordingly, an object of the present invention is to provide an image quality adjustment apparatus and an image quality adjustment method capable of executing processing for improving image quality with reference to an appropriate image frame in order to solve the above-described problems.

本発明は、上述した課題を解決するため、入力された第1及び第2のフレーム画像それぞれのフレームレートを高く変換した第1及び第2のフレームレート変換後フレーム画像を時分割して交互に出力する出力手段と、前記第1のフレーム画像の明度情報を検出する検出手段と、前記出力手段が出力した前記第1のフレームレート変換後フレーム画像及び前記第2のフレームレート変換後フレーム画像のうちのいずれかに対して、前記検出手段により検出される前記明度情報に基づいた画質調整を実行する画質調整手段と、を具備する画質調整装置を提供する。   In order to solve the above-described problems, the present invention alternately converts the first and second frame rate-converted frame images obtained by converting the input first and second frame images to a high frame rate in a time-division manner. An output means for outputting, a detection means for detecting lightness information of the first frame image, a frame image after the first frame rate conversion and a frame image after the second frame rate conversion outputted by the output means. There is provided an image quality adjustment apparatus comprising image quality adjustment means for executing image quality adjustment based on the brightness information detected by the detection means for any one of them.

また、本発明は、上述した課題を解決するため、入力された第1及び第2のフレーム画像それぞれのフレームレートを高く変換した第1及び第2のフレームレート変換後フレーム画像を時分割して交互に出力するステップと、前記第1のフレーム画像の明度情報を検出するステップと、前記出力された前記第1のフレームレート変換後フレーム画像及び前記第2のフレームレート変換後フレーム画像のうちのいずれかに対して、前記検出された明度情報に基づく画質調整を実行するステップと、を有する画質調整方法を提供する。   In order to solve the above-described problem, the present invention time-divides the first and second frame rate-converted frame images obtained by converting the input frame rates of the first and second frame images to be high. Of the step of alternately outputting, the step of detecting the brightness information of the first frame image, and the output of the first frame rate converted frame image and the second frame rate converted frame image For any of the above, there is provided an image quality adjustment method comprising: performing image quality adjustment based on the detected brightness information.

本発明によれば、適切な画像フレームを参照して画質改善のための処理を実行することができる。   According to the present invention, it is possible to execute processing for improving image quality with reference to an appropriate image frame.

本発明の実施形態に係る画質調整装置であるテレビジョン受像機の構成を示すブロック図。1 is a block diagram showing a configuration of a television receiver that is an image quality adjustment device according to an embodiment of the present invention. 本実施形態における、入力された映像信号に対して複数の処理を実行する各ブロックによるシステム構成図。The system block diagram by each block which performs a some process with respect to the input video signal in this embodiment. 本実施形態における、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックによるシステム構成図。The system block diagram by each block which performs an image quality adjustment process with respect to the specific frame image after the frame rate conversion corresponding to this frame image based on the frame image before frame rate conversion in this embodiment. LRフレーム分離部及びフレームレート変換部それぞれの入力/出力における左目用/右目用フレーム画像の概念図。The conceptual diagram of the frame image for left eyes / right eyes in each input / output of LR frame separation part and frame rate conversion part. フレームレート変換前の左目用/右目用フレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することの必要性を説明するための概念図。The conceptual diagram for demonstrating the necessity of adjusting image quality with respect to the specific frame image after the frame rate conversion corresponding to these frame images based on the frame images for left eyes / right eyes before frame rate conversion. 本実施形態における、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックによるシステム構成図の変形例。The modification of the system block diagram by each block which performs an image quality adjustment process with respect to the specific frame image after the frame rate conversion corresponding to this frame image based on the frame image before frame rate conversion in this embodiment.

以下、本発明における実施形態について図面を用いて説明する。
図1は、本発明の実施形態に係る画質調整装置であるテレビジョン受像機10の構成を示すブロック図である。
本実施形態に係るテレビジョン受像機10は、放送波処理部20、外部機器IF部21、ネットワークIF部22、操作部31、受光部32、信号処理制御部40、表示器51、スピーカ52などで構成されている。また、放送波処理部20にはアンテナANTが接続されていて、受光部32はリモートコントローラ(以下、リモコンと称する)RCと情報のやりとりを行う。この表示器51は、表示パネル101、バックライト102などで構成されている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a configuration of a television receiver 10 which is an image quality adjusting apparatus according to an embodiment of the present invention.
The television receiver 10 according to the present embodiment includes a broadcast wave processing unit 20, an external device IF unit 21, a network IF unit 22, an operation unit 31, a light receiving unit 32, a signal processing control unit 40, a display 51, a speaker 52, and the like. It consists of The broadcast wave processing unit 20 is connected to an antenna ANT, and the light receiving unit 32 exchanges information with a remote controller (hereinafter referred to as a remote controller) RC. The display 51 includes a display panel 101, a backlight 102, and the like.

このテレビジョン受像機10は、放送波処理部20、外部機器IF部21またはネットワークIF部22から入力された所定フォーマットの3D映像(立体視映像)に所定の処理を施して、表示器51に3D映像を表示させる。表示器51に表示されるこの3D映像は、左目用フレーム画像(以下、Lフレームと称する)と右目用フレーム画像(以下、Rフレームと称する)とが交互に順次画面に表示される時分割方式である。また、前述した各ブロックから入力された所定フォーマットの3D映像は、左目用/右目用フレーム画像(以下、L/Rフレームとも称する)が同一フレーム画像に混在している態様や、L/Rフレームが交互に順次配列された時分割方式の態様である。このテレビジョン受像機10は、入力された3D映像のフレームレートを高く変換した3D映像を表示器51に表示する。   The television receiver 10 performs predetermined processing on a 3D video (stereoscopic video) in a predetermined format input from the broadcast wave processing unit 20, the external device IF unit 21, or the network IF unit 22, and the display 51 3D video is displayed. The 3D video displayed on the display 51 is a time-division method in which a left-eye frame image (hereinafter referred to as L frame) and a right-eye frame image (hereinafter referred to as R frame) are alternately displayed on the screen. It is. In addition, in the 3D video of a predetermined format input from each block described above, the left-eye / right-eye frame images (hereinafter also referred to as L / R frames) are mixed in the same frame image, or the L / R frames Is a mode of a time division system in which are sequentially arranged alternately. The television receiver 10 displays a 3D image obtained by converting a frame rate of the input 3D image at a high level on the display 51.

放送波処理部20は、アンテナANTによって受信された地上または衛星によるデジタル放送波やアナログ放送波に対応するチューナおよびデコーダを有する。また放送波処理部20は、アンテナANTが受信した信号を取得して、この取得した信号に対して特定チャンネルの選局処理および復調復号処理を施し、番組の映像音声情報や番組関連情報などが含まれる信号を信号処理制御部40に出力する。番組関連情報は、番組に関するチャンネル番号や、放送波、放送局名、番組名、ジャンルなどの情報である。この放送波処理部20は、3D映像信号を取得して、この3D映像信号を出力する。   The broadcast wave processing unit 20 includes a tuner and a decoder corresponding to a digital broadcast wave or an analog broadcast wave received from the antenna ANT by the ground or satellite. Also, the broadcast wave processing unit 20 acquires a signal received by the antenna ANT, performs channel selection processing and demodulation decoding processing of a specific channel on the acquired signal, and program audio / video information, program related information, and the like are obtained. The included signal is output to the signal processing control unit 40. The program related information is information such as a channel number, a broadcast wave, a broadcast station name, a program name, and a genre related to the program. The broadcast wave processing unit 20 acquires a 3D video signal and outputs the 3D video signal.

外部機器IF部21は、HDMI(登録商標)規格、USB規格又はIEEE1394規格などの様々な規格に準じた接続端子および、これらの規格に基づいて特定の情報を抽出する情報抽出部を有する。また外部機器IF部21は、接続端子に接続された外部機器や、外部HDD、メモリカードなどの記録媒体などの情報提供源から、コンテンツの映像音声情報や番組関連情報などが含まれる信号を取得して信号処理制御部40へ出力する。本実施形態では、外部機器IF部21は、3D映像信号を取得して、この3D映像信号を出力する。   The external device IF unit 21 includes a connection terminal that conforms to various standards such as the HDMI (registered trademark) standard, the USB standard, or the IEEE 1394 standard, and an information extraction unit that extracts specific information based on these standards. In addition, the external device IF unit 21 acquires a signal including video / audio information of the content, program-related information, and the like from an external device connected to the connection terminal and an information supply source such as a recording medium such as an external HDD or a memory card. And output to the signal processing control unit 40. In the present embodiment, the external device IF unit 21 acquires a 3D video signal and outputs the 3D video signal.

ネットワークIF部22は、インターネット、LAN又はWANなどのネットワークに接続するための接続端子および、この接続端子を経由したネットワークを介して通信を行う通信部を有する。またネットワークIF部22は、接続したネットワーク先の特定サーバなどの情報提供源から、コンテンツの映像音声情報や番組関連情報などが含まれる信号を取得して信号処理制御部40へ出力する。さらにネットワークIF部22は、ネットワークを介して接続した、テレビジョン受像機10の外部HDD、メモリカードなどの記録媒体からコンテンツの映像音声情報や番組関連情報などが含まれる信号を取得し、信号処理制御部40へ出力する。このネットワークIF部22は、3D映像信号を取得して、この3D映像信号を出力する。   The network IF unit 22 includes a connection terminal for connecting to a network such as the Internet, a LAN, or a WAN, and a communication unit that performs communication via the network via the connection terminal. The network IF unit 22 acquires a signal including video / audio information of the content, program related information, and the like from an information providing source such as a specific server connected to the network, and outputs the signal to the signal processing control unit 40. Further, the network IF unit 22 acquires a signal including video / audio information of the content and program related information from a recording medium such as an external HDD of the television receiver 10 or a memory card connected via the network, and performs signal processing. Output to the control unit 40. The network IF unit 22 acquires a 3D video signal and outputs the 3D video signal.

操作部31は、テレビジョン受像機10を操作するための操作入力を受ける操作キーを有し、この操作入力の情報を受信して信号処理制御部40へ出力する。同様に受光部32は、リモコンRCからの操作入力の情報を受光(受信)して信号処理制御部40へ出力する。この操作部31またはリモコンRCは、放送波処理部20、外部機器IF部21又はネットワークIF部22の何れから信号を取得するかを選択する選択キーなどを備えている。   The operation unit 31 includes an operation key that receives an operation input for operating the television receiver 10, receives information on the operation input, and outputs the information to the signal processing control unit 40. Similarly, the light receiving unit 32 receives (receives) operation input information from the remote controller RC and outputs the received information to the signal processing control unit 40. The operation unit 31 or the remote controller RC includes a selection key for selecting whether to acquire a signal from the broadcast wave processing unit 20, the external device IF unit 21, or the network IF unit 22.

信号処理制御部40は、操作部31や受光部32からの操作入力の情報に応じて、放送波処理部20、外部機器IF部21又はネットワークIF部22などから入力された信号に対して、圧縮されたデータの伸張処理や、番組表を作成するための情報抽出処理などの様々な処理を施す。また信号処理制御部40は、入力された信号に対して、映像信号と音声信号の分離処理、MPEG復号化演算処理又は映像の画質調整処理などの様々な処理を施して表示器51へ映像信号を出力し、スピーカ52へ音声信号を出力する。さらに信号処理制御部40は、制御部としてのCPU又はマイコン(不図示)を備えていて、信号処理制御部40自身に備えられた各モジュールや信号処理制御部40に接続された各モジュールを利用して、複数の処理の実行を制御する。   The signal processing control unit 40 responds to a signal input from the broadcast wave processing unit 20, the external device IF unit 21, the network IF unit 22, or the like according to operation input information from the operation unit 31 or the light receiving unit 32. Various processes such as decompression processing of compressed data and information extraction processing for creating a program guide are performed. Further, the signal processing control unit 40 performs various processes such as a video signal and audio signal separation process, an MPEG decoding calculation process, or a video image quality adjustment process on the input signal, and sends the video signal to the display 51. And an audio signal is output to the speaker 52. Further, the signal processing control unit 40 includes a CPU or a microcomputer (not shown) as a control unit, and uses each module provided in the signal processing control unit 40 itself or each module connected to the signal processing control unit 40. Thus, execution of a plurality of processes is controlled.

本実施形態では、信号処理制御部40は、入力された映像信号が、L/Rフレームが同一フレーム画像に混在している3D映像(原フレーム画像)である場合に、L/Rフレームそれぞれを分離して時分割して交互に配列するLRフレーム分離処理を実行する。また信号処理制御部40は、入力された3D映像のフレームレートを変換して出力するフレームレート変換処理を実行する。さらに、信号処理制御部40は、フレームレート変換されたL/Rフレームそれぞれの画質を調整する画質調整処理を実行する。   In the present embodiment, when the input video signal is a 3D video (original frame image) in which L / R frames are mixed in the same frame image, the signal processing control unit 40 outputs each L / R frame. LR frame separation processing is performed that is separated and time-divisionally arranged alternately. In addition, the signal processing control unit 40 executes a frame rate conversion process for converting the frame rate of the input 3D video and outputting it. Further, the signal processing control unit 40 executes image quality adjustment processing for adjusting the image quality of each of the L / R frames subjected to frame rate conversion.

表示器51は、信号処理制御部40から入力された映像信号を表示する表示モジュールである。例えば表示器51には、LCD(Liquid Crystal Display)やPDP(Plasma Display Panel)などの薄型ディスプレイを適用することができる。この表示器51は、信号処理制御部40から入力された映像信号を、映像を表示する光透過型のパネルである表示パネル101に表示し、また、信号処理制御部40からの制御信号に応じてバックライト102の照明を点灯又は消灯する。このバックライト102は、複数の領域ごとの照明の照度を調整可能としたエリア制御(ローカルディミングとも称する)を可能とする態様である。以下の説明では、表示器51の例としてLCDを適用するが、これに限定されるものではない。   The display 51 is a display module that displays the video signal input from the signal processing control unit 40. For example, a thin display such as an LCD (Liquid Crystal Display) or a PDP (Plasma Display Panel) can be applied to the display 51. The display 51 displays the video signal input from the signal processing control unit 40 on the display panel 101 which is a light transmission type panel for displaying video, and also according to the control signal from the signal processing control unit 40. The backlight 102 is turned on or off. This backlight 102 is an aspect that enables area control (also referred to as local dimming) in which the illumination intensity of illumination for each of a plurality of regions can be adjusted. In the following description, an LCD is applied as an example of the display 51, but is not limited to this.

スピーカ52は、信号処理制御部40から入力された音声信号を出力する。
なお、信号処理制御部40は、放送波処理部20、外部機器IF部21又はネットワークIF部22などからの入力信号に対して複数の処理を施すのではなく、テレビジョン受像機10の内部に備えられ、信号データが保存されたHDDなどの記録媒体(不図示)からの入力信号に対して、複数の処理を施す実施形態であってもよい。
The speaker 52 outputs the audio signal input from the signal processing control unit 40.
The signal processing control unit 40 does not perform a plurality of processes on the input signal from the broadcast wave processing unit 20, the external device IF unit 21, the network IF unit 22, or the like, but inside the television receiver 10. An embodiment in which a plurality of processes are performed on an input signal from a recording medium (not shown) such as an HDD provided and storing signal data may be used.

また本実施形態は、本発明に係る構成を適用した画質調整装置として、テレビジョン受像機10を例とした形態である。しかし、本実施形態に係る画質調整装置と同様の構造の、HDDレコーダ、DVDレコーダ、パーソナルコンピュータ、移動携帯端末、セットトップボックスなどを例とした形態であっても構わない。すなわち本発明に係る実施形態では、例えば放送波種別、信号取得経路などといった項目において限定されるものではなく、単に映像信号を処理する構成部を有する画質調整装置であれば、本発明を適用することが可能である。   In the present embodiment, a television receiver 10 is taken as an example of an image quality adjustment apparatus to which the configuration according to the present invention is applied. However, an embodiment such as an HDD recorder, a DVD recorder, a personal computer, a mobile portable terminal, a set top box, or the like having the same structure as that of the image quality adjustment apparatus according to the present embodiment may be used. That is, in the embodiment according to the present invention, the present invention is not limited to items such as broadcast wave type, signal acquisition path, and the like, and the present invention is applied to any image quality adjustment apparatus having a configuration unit that simply processes a video signal. It is possible.

このような構成により、本発明の実施形態に係るテレビジョン受像機10は、入力されたL/Rフレームが同一フレーム画像に混在している3D映像である場合に、L/Rフレームそれぞれを分離する。またテレビジョン受像機10は、入力された所定フォーマットの3D映像のL/Rフレームをフレームレート変換して出力する。そして、このテレビジョン受像機10は、フレームレート変換されたL/Rフレームそれぞれに対して、適切な画像フレームを参照した画質改善のための画質調整処理を実行する。   With such a configuration, the television receiver 10 according to the embodiment of the present invention separates each L / R frame when the input L / R frame is a 3D video mixed in the same frame image. To do. The television receiver 10 converts the frame rate of the input 3D video L / R frame in a predetermined format and outputs the result. Then, the television receiver 10 executes image quality adjustment processing for improving image quality with reference to an appropriate image frame for each of the L / R frames subjected to frame rate conversion.

これらの処理は、放送波処理部20などから入力された信号に基づいて、主に信号処理制御部40が実行するものである。
次に、図2を用いて、図1で説明した信号処理制御部40に備えられ、入力された映像信号に対して複数の処理を実行する各ブロックを説明する。
図2は、本実施形態における、入力された映像信号に対して複数の処理を実行する各ブロックによるシステム構成図である。
本実施形態に係る信号処理制御部40は、セレクタ201、映像信号処理部202、画質調整部203、ドライバ204などを備えている。信号処理制御部40は、これらの映像信号に対して処理するブロック以外にも音声信号に対して様々な処理を施す複数のブロックを備えている。しかしこれ以降では、音声信号に対して処理するブロックの説明は省略して、映像信号に対して様々な処理を施す複数のブロックを説明する。
These processes are mainly executed by the signal processing control unit 40 based on a signal input from the broadcast wave processing unit 20 or the like.
Next, each block provided in the signal processing control unit 40 described in FIG. 1 and performing a plurality of processes on the input video signal will be described with reference to FIG.
FIG. 2 is a system configuration diagram of each block that executes a plurality of processes on an input video signal in the present embodiment.
The signal processing control unit 40 according to the present embodiment includes a selector 201, a video signal processing unit 202, an image quality adjustment unit 203, a driver 204, and the like. The signal processing control unit 40 includes a plurality of blocks that perform various processes on the audio signal in addition to the blocks that process the video signal. However, hereinafter, description of blocks to be processed with respect to the audio signal will be omitted, and a plurality of blocks for performing various processes on the video signal will be described.

セレクタ201は、テレビジョン受像機10の利用者が、操作部31又はリモコンRCに備えられた選択キー(不図示)などを利用して選択した、放送波処理部20、外部機器IF部21又はネットワークIF部22の何れかからの映像情報を映像信号処理部202へ出力する。なおセレクタ201は、信号処理制御部40の内部ではなく、信号処理制御部40の外部に設けられてもよい。   The selector 201 is selected by the user of the television receiver 10 using a selection key (not shown) provided in the operation unit 31 or the remote controller RC, or the broadcast wave processing unit 20, the external device IF unit 21 or Video information from any of the network IF units 22 is output to the video signal processing unit 202. The selector 201 may be provided outside the signal processing control unit 40 instead of inside the signal processing control unit 40.

映像信号処理部202は、セレクタ201から入力された映像信号に対してMPEG復号化演算処理などを施して、表示器51に表示するためのフレーム単位の映像信号であるフレーム画像の信号を画質調整部203へ出力する。この映像信号処理部202は、入力された映像信号が3D映像である場合、L/Rフレームが混在しているフレーム画像(原フレーム画像)や、交互に順次配列されたL/Rフレームの信号を出力する。   The video signal processing unit 202 performs MPEG decoding arithmetic processing on the video signal input from the selector 201 and adjusts the image quality of a frame image signal, which is a frame-based video signal to be displayed on the display unit 51. The data is output to the unit 203. When the input video signal is a 3D video, the video signal processing unit 202 is a frame image in which L / R frames are mixed (original frame image) or an L / R frame signal that is alternately arranged in sequence. Is output.

画質調整部203は、映像信号処理部202から入力されたフレーム画像のフレームレートを高く変換するフレームレート変換処理をする。そして画質調整部203は、フレームレート変換前のフレーム画像の特徴に基づいて、フレームレート変換後のフレーム画像それぞれに対して画質調整処理を施し、この画質調整後のフレーム画像の信号をドライバ204へ出力する。また特に画質調整部203は、入力されたフレーム画像が1つのフレーム画像にL/Rフレームが混在している3D映像である場合、入力された1つのフレーム画像をL/Rフレームそれぞれに分離し、この分離したL/Rフレームそれぞれのフレームレートの変換処理をする。そして画質調整部203は、分離したフレームレート変換前のL/Rフレームそれぞれの特徴に基づいて、フレーム変換後のL/Rフレームそれぞれに対して画質調整処理を施す。   The image quality adjustment unit 203 performs a frame rate conversion process for converting the frame rate of the frame image input from the video signal processing unit 202 to a high level. Then, the image quality adjustment unit 203 performs image quality adjustment processing on each frame image after frame rate conversion based on the characteristics of the frame image before frame rate conversion, and sends the signal of the frame image after image quality adjustment to the driver 204. Output. In particular, when the input frame image is a 3D image in which L / R frames are mixed in one frame image, the image quality adjustment unit 203 separates the input frame image into L / R frames. The frame rate conversion process for each of the separated L / R frames is performed. Then, the image quality adjustment unit 203 performs image quality adjustment processing on each L / R frame after frame conversion based on the characteristics of each separated L / R frame before frame rate conversion.

すなわちこの画質調整は、フレームレート変換前のフレーム画像の特徴に基づいて、フレームレート変換後のフレーム画像に対して施されるものである。特に、入力されたフレーム画像が3D映像である場合、フレームレート変換前のLフレームの特徴に基づいてフレームレート変換後のLフレームに対して、フレームレート変換前のRフレームの特徴に基づいてフレームレート変換後のRフレームに対して、それぞれ個別に画質調整が施される。   That is, the image quality adjustment is performed on the frame image after the frame rate conversion based on the characteristics of the frame image before the frame rate conversion. In particular, when the input frame image is a 3D video, a frame based on the characteristics of the R frame before the frame rate conversion is compared with the L frame after the frame rate conversion based on the characteristics of the L frame before the frame rate conversion. The image quality adjustment is individually performed on the R frames after the rate conversion.

ドライバ204は、画質調整部203から入力されたフレーム画像の信号を表示器51で表示させるように制御して、表示器51が備える表示パネル101へフレーム画像の信号を出力する。またドライバ204は、画質調整部203から入力されたフレーム画像の信号と同期をとって、バックライト102の特定領域の照明を点灯または消灯するように制御する。   The driver 204 controls the display device 51 to display the frame image signal input from the image quality adjustment unit 203, and outputs the frame image signal to the display panel 101 included in the display device 51. The driver 204 controls to turn on or off the illumination of the specific area of the backlight 102 in synchronization with the frame image signal input from the image quality adjustment unit 203.

このようなシステムの構成により、本発明の実施形態に係る信号処理制御部40の一部が、フレームレート変換前のフレーム画像の特徴に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を施すので、適切な画像フレームを参照した画質改善のための画質調整処理が実行される   With such a system configuration, a part of the signal processing control unit 40 according to the embodiment of the present invention can specify the post-frame rate conversion corresponding to these frame images based on the characteristics of the frame images before the frame rate conversion. Since the image quality adjustment processing is performed on the frame image, the image quality adjustment processing for improving the image quality with reference to an appropriate image frame is executed.

次に、図3を用いて、図2で説明した画質調整部203に備えられ、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックの動作を説明する。   Next, referring to FIG. 3, the image quality adjustment unit 203 described with reference to FIG. 2 is provided, and based on the frame image before frame rate conversion, a specific frame image after frame rate conversion corresponding to this frame image is processed. The operation of each block that executes image quality adjustment processing will be described.

図3は、本実施形態における、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックによるシステム構成図である。   FIG. 3 is a system configuration diagram of each block that executes image quality adjustment processing on a specific frame image after frame rate conversion corresponding to this frame image based on the frame image before frame rate conversion in the present embodiment. is there.

画質調整部203は、LRフレーム分離部301、調整値計算部302、フィルタ303、フレームレート変換部304、更新タイミング制御部305、調整部306などを備えている。   The image quality adjustment unit 203 includes an LR frame separation unit 301, an adjustment value calculation unit 302, a filter 303, a frame rate conversion unit 304, an update timing control unit 305, an adjustment unit 306, and the like.

LRフレーム分離部301は、前段のブロックから入力された1フレーム分のフレーム画像に、L/Rフレームが混在している場合、L/Rフレームそれぞれを分離して時分割して交互に配列するLRフレーム分離処理を実行する。そしてLRフレーム分離処理後のL/Rフレームは、フレームレート変換部304へ出力される。L/Rフレームそれぞれの分離は、例えばSide-by-Side方式でL/Rフレームが混在されている場合、水平方向の伸張処理を、またLine-by-Line方式でL/Rフレームが混在されている場合、垂直方向の伸張処理を実行することによって実現可能である。また、このとき入力されたフレーム画像のフレームレートに対して、L/Rフレームのフレームレートは倍になって出力される。例えば、60[fps]のフレームレートの画像フレームは、120[fps]のフレームレートで出力される。これは出力されるL/Rフレームが、時分割して配列されているからである。またLRフレーム分離部301は、フレームパッキング方式などのように、1フレームにL/Rフレームが交互に順次配列された画像フレームが前段のブロックから入力された場合、交互に配列されたL/Rフレームそれぞれを独立した画像フレームとして分離し、2フレームの画像フレームとして出力する。すなわちこのときでも、入力されたフレーム画像のフレームレートに対して、出力されるフレーム画像のフレームレートは倍になって出力される。   When the L / R frame is mixed in the frame image for one frame input from the previous block, the LR frame separation unit 301 separates the L / R frames and arranges them alternately in a time division manner. LR frame separation processing is executed. The L / R frame after the LR frame separation processing is output to the frame rate conversion unit 304. For example, when L / R frames are mixed in the Side-by-Side format, the L / R frames are separated in the horizontal direction, and the L / R frames are mixed in the Line-by-Line format. If this is the case, it can be realized by executing a vertical extension process. In addition, the frame rate of the L / R frame is doubled with respect to the frame rate of the frame image input at this time. For example, an image frame having a frame rate of 60 [fps] is output at a frame rate of 120 [fps]. This is because the output L / R frames are arranged in a time-sharing manner. Also, the LR frame separation unit 301, when an image frame in which L / R frames are alternately arranged in one frame is input from the previous block, as in the frame packing method, etc., Each frame is separated as an independent image frame and output as two image frames. That is, even at this time, the frame rate of the output frame image is doubled with respect to the frame rate of the input frame image.

調整値計算部302は、LRフレーム分離部301から入力されたL/Rフレームそれぞれの特徴として、特定画素の輝度又は明るさに関する明度情報を検出し、この検出した明度情報に基づいて調整値を算出してフィルタ303へ出力する。また調整値計算部302は、L/Rフレームそれぞれを複数に分割した特定の領域ごとに明度情報を検出し調整値を算出する。この調整値には、特定の領域内の全ての画素の明度情報の平均値又は最大値、特定の領域内の任意の画素の明度情報の平均値又は最大値などを適用することが可能である。また調整値計算部302は、特定画素の明度情報でなく色に関する色情報を検出してもよい。さらに調整値計算部302は、LRフレーム分離部301から入力されたL/Rフレームそれぞれに基づいて、調整値を算出する実施形態ではなく、L/Rフレームの何れかに基づいて調整値を算出する実施形態であってもよい。この調整値計算部302は、L/Rフレームそれぞれに対応すべく、2系統設けられていることが好ましい。   The adjustment value calculation unit 302 detects brightness information regarding the luminance or brightness of a specific pixel as a feature of each L / R frame input from the LR frame separation unit 301, and calculates an adjustment value based on the detected brightness information. Calculate and output to the filter 303. The adjustment value calculation unit 302 detects lightness information for each specific region obtained by dividing each L / R frame into a plurality, and calculates an adjustment value. For this adjustment value, it is possible to apply the average value or maximum value of the brightness information of all the pixels in the specific area, the average value or maximum value of the brightness information of any pixel in the specific area, and the like. . In addition, the adjustment value calculation unit 302 may detect color information regarding the color instead of the lightness information of the specific pixel. Further, the adjustment value calculation unit 302 calculates the adjustment value based on one of the L / R frames, not the embodiment for calculating the adjustment value based on each L / R frame input from the LR frame separation unit 301. It may be an embodiment. The adjustment value calculation unit 302 is preferably provided in two systems so as to correspond to each L / R frame.

フィルタ303は、調整値計算部302から入力された調整値を、所定の伝達特性で変換した実効的な調整値である実効調整値を調整部306へ出力する。例えば伝達特性は、一次または二次のLPFや、単に1サンプル前の値を出力する遅延であってもよい。このフィルタ303は、調整値をデジタル値で受けてデジタル値の実効調整値を出力するデジタルフィルタとして構成される。またフィルタ303は、調整値計算部302から入力されたL/Rフレームそれぞれに対する調整値に基づいて、それぞれに対する実効調整値を出力する。すなわちフィルタ303は、L/Rフレームそれぞれに対応すべく、2系統設けられていることが好ましい。   The filter 303 outputs an effective adjustment value, which is an effective adjustment value obtained by converting the adjustment value input from the adjustment value calculation unit 302 with a predetermined transfer characteristic, to the adjustment unit 306. For example, the transfer characteristic may be a first-order or second-order LPF, or simply a delay that outputs a value one sample before. The filter 303 is configured as a digital filter that receives an adjustment value as a digital value and outputs an effective adjustment value of the digital value. The filter 303 outputs an effective adjustment value for each of the L / R frames input from the adjustment value calculation unit 302 based on the adjustment value for each L / R frame. That is, it is preferable that two systems of the filter 303 are provided so as to correspond to each L / R frame.

フレームレート変換部304は、LRフレーム分離部301から入力されたL/Rフレームそれぞれのフレームレートを高く変換したL/Rフレーム(レート変換後L/Rフレーム)を調整部306へ出力する。フレームレート変換部304は、入力されたL/Rフレームに対して、それぞれを新たなフレーム画像としてコピーして追加することでフレームレートを高く変換する。さらにフレームレート変換部304は、入力されたL/Rフレームに対して、L/R個別に、前後のL/Rフレームに基づいて補完した新たなL/Rフレームを追加することでフレームレートを高くしてもよい。すなわち、入力されたフレーム画像のフレームレートを高く変換する方法は特に限定されず様々な方法で実現することが可能である。このとき、フレームレート変換部304は、LRLRといったように交互に配列する態様や、LLRRといったように同一フレーム画像を連続して配列する態様などで出力する。例えば、フレームレート変換部304が、入力された120[fps]のフレームレートのL/Rフレームを、LLRRと同一フレーム画像が2つ連続するように配列した場合でも、240[fps]のフレームレートのL/Rフレームが出力される。   The frame rate conversion unit 304 outputs the L / R frame (the L / R frame after rate conversion) obtained by converting the frame rate of each L / R frame input from the LR frame separation unit 301 to the adjustment unit 306. The frame rate conversion unit 304 converts the input L / R frame to a higher frame rate by copying and adding each as a new frame image. Further, the frame rate conversion unit 304 adds a new L / R frame that is complemented based on the preceding and succeeding L / R frames for each L / R to the input L / R frame, thereby changing the frame rate. May be high. In other words, the method for converting the frame rate of the input frame image to be high is not particularly limited, and can be realized by various methods. At this time, the frame rate conversion unit 304 outputs in an aspect in which the frame images are alternately arranged, such as LRLR, or in an aspect in which the same frame images are continuously arranged, such as LLRR. For example, even when the frame rate conversion unit 304 arranges the input L / R frames having a frame rate of 120 [fps] so that two same frame images as the LLRR are consecutive, a frame rate of 240 [fps]. L / R frames are output.

更新タイミング制御部305は、フレームレート変換部304へ入力されたL/Rフレームに基づいてフレームレート変換されたL/Rフレームが、どの程度遅延して(どの程度の更新タイミングで)出力されるかを示す出力遅延情報を調整部306へ出力する。すなわち出力遅延情報は、フレームレート変換部304への入力フレーム画像とフレームレート変換部304からの入力フレーム画像とを同期させるための情報であるといえる。   The update timing control unit 305 outputs the L / R frame that has been subjected to the frame rate conversion based on the L / R frame input to the frame rate conversion unit 304, with a certain delay (with an update timing). Output delay information indicating the above is output to the adjustment unit 306. That is, the output delay information can be said to be information for synchronizing the input frame image to the frame rate conversion unit 304 and the input frame image from the frame rate conversion unit 304.

調整部306は、更新タイミング制御部305から入力された出力遅延情報に基づいて、フィルタ303から入力された実効調整値に基づく調整結果を、フレームレート変換部304から入力された特定のタイミングのL/Rフレームに対して適用させる。調整結果は、表示パネル101に表示する映像の信号レベルに対する輝度又は明るさを調整するための信号情報(パラメータ)と、バックライト102の光量に対する輝度又は明るさ(照明の照度)を調整するための光量情報との何れかを適用することが可能である。具体的には、調整部306は、入力された実効調整値に基づいて、バックライト102に対する光量情報を決定してバックライト102の光量を調整するための光量情報を、入力されたL/Rフレームと同期させてドライバ204へ出力する。また調整部306は、決定した光量情報に基づいて、さらに表示パネル101に表示する映像の信号レベルに対する信号情報を決定し、この信号情報単独によって入力されたL/Rフレームを調整するか、又は信号情報による調整と光量情報の同期出力とを適宜配分して実行する。ここで、調整対象のL/Rフレームが、同一フレーム画像が連続して配列される態様で、且つ、バックライト102の照明の照度で調整する場合、同一フレーム画像の連続数に応じて、それぞれのフレーム画像への照明の照度を異ならせること実施形態を適用することも可能である。具体的には、照度100を同一フレーム画像2つへ照明して調整する場合、前のフレーム画像には照度70、後のフレーム画像には照度30として合計の照度100となるように適宜配分して照明してもよい。   Based on the output delay information input from the update timing control unit 305, the adjustment unit 306 displays the adjustment result based on the effective adjustment value input from the filter 303 as the L at a specific timing input from the frame rate conversion unit 304. / R This is applied to the frame. The adjustment result is for adjusting the signal information (parameter) for adjusting the luminance or brightness with respect to the signal level of the video displayed on the display panel 101, and the luminance or brightness (illuminance of illumination) with respect to the light amount of the backlight 102. It is possible to apply any one of the light quantity information. Specifically, the adjustment unit 306 determines the light amount information for the backlight 102 based on the input effective adjustment value, and inputs the light amount information for adjusting the light amount of the backlight 102 to the input L / R. The data is output to the driver 204 in synchronization with the frame. Further, the adjustment unit 306 further determines signal information for the signal level of the video displayed on the display panel 101 based on the determined light amount information, and adjusts the L / R frame input based on the signal information alone, or The adjustment based on the signal information and the synchronized output of the light amount information are appropriately distributed and executed. Here, when the L / R frame to be adjusted is an aspect in which the same frame image is continuously arranged and is adjusted by the illumination intensity of the backlight 102, each of the L / R frames is adjusted according to the continuous number of the same frame image. It is also possible to apply the embodiment in which the illuminance of the illumination on the frame image is varied. Specifically, when adjusting the illuminance 100 by illuminating two identical frame images, the illuminance 70 is assigned to the previous frame image and the illuminance 30 is assigned to the subsequent frame image so that the total illuminance 100 is obtained. May be illuminated.

なお、画質調整部203に備えられた各ブロックは、ハードウェア又はハードウェアとソフトウェアとの協働で構成される実施形態である。
このような各ブロックによる動作により、画質調整部203は、フレームレート変換前のフレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することができるので、適切な画像フレームを参照した画質改善のための処理が実行される。
Each block provided in the image quality adjustment unit 203 is an embodiment configured by hardware or cooperation of hardware and software.
By such an operation by each block, the image quality adjustment unit 203 can adjust the image quality for a specific frame image after frame rate conversion corresponding to these frame images based on the frame images before frame rate conversion. Therefore, processing for improving image quality with reference to an appropriate image frame is executed.

次に、図4を用いて、LRフレーム分離部301の入力/出力、フレームレート変換部304の入力/出力における左目用/右目用フレーム画像の概念図を説明する。   Next, a conceptual diagram of the left-eye / right-eye frame images in the input / output of the LR frame separation unit 301 and the input / output of the frame rate conversion unit 304 will be described with reference to FIG.

図4は、LRフレーム分離部301及びフレームレート変換部304それぞれの入力/出力における左目用/右目用フレーム画像の概念図である。
この概念図では、LRフレーム分離部301に入力されたL/Rフレームが、同一フレーム画像に混在している3D映像の態様を用いて説明する。またLRフレーム分離部301に、60[fps]のフレームレートのL/Rフレームが入力される例である。
FIG. 4 is a conceptual diagram of a left-eye / right-eye frame image at the input / output of each of the LR frame separation unit 301 and the frame rate conversion unit 304.
This conceptual diagram will be described using a 3D video mode in which L / R frames input to the LR frame separation unit 301 are mixed in the same frame image. In addition, an L / R frame having a frame rate of 60 [fps] is input to the LR frame separation unit 301.

すなわち、LRフレーム分離部301の入力では、60[fps]のフレームレートのL/Rフレームが同一フレーム画像に混在している。
そしてLRフレーム分離部301で、LRフレーム分離処理が実行されて、L/Rフレームそれぞれが分離されて時分割して配列される。このときLフレームとRフレームとがそれぞれ1フレームとして分離されて出力されるので、LRフレーム分離部301の出力(フレームレート変換部304の入力)では、フレーム同期信号は60[fps]の2倍の120[fps]のフレームレートとなる。また、LRフレーム分離処理の実行によって、分離後のL/Rフレームは、LRフレーム分離部301の入力におけるL/Rフレームに対して遅延して出力される。
That is, at the input of the LR frame separation unit 301, L / R frames having a frame rate of 60 [fps] are mixed in the same frame image.
Then, the LR frame separation unit 301 executes LR frame separation processing, and the L / R frames are separated and time-divided and arranged. At this time, since the L frame and the R frame are separated and output as one frame, the frame synchronization signal is twice 60 [fps] at the output of the LR frame separation unit 301 (input of the frame rate conversion unit 304). The frame rate is 120 [fps]. Further, by performing the LR frame separation process, the separated L / R frame is output with a delay from the L / R frame at the input of the LR frame separation unit 301.

さらに、フレームレート変換部304で、入力された120[fps]のフレームレートのL/Rフレームが、LLRR(例1)といったように同一フレーム画像が連続するように、又は、LRLR(例2)といったようにL/Rフレームが交互になるように配列される。このとき新たに追加されたL/Rフレームもそれぞれ1フレームとして出力されることになる。従って、フレームレート変換部304の出力(調整部306の入力)では、フレーム同期信号は120[fps]の2倍の240[fps]のフレームレートとなる。また、フレームレート変換の処理によって、変換後のL/Rフレームは、フレームレート変換部304の入力におけるL/Rフレームに対して遅延して出力される。   Further, in the frame rate conversion unit 304, the input L / R frame having a frame rate of 120 [fps] is such that the same frame image is continuous as in LLRR (example 1) or LRLR (example 2). Thus, the L / R frames are arranged alternately. At this time, each newly added L / R frame is also output as one frame. Therefore, at the output of the frame rate conversion unit 304 (input of the adjustment unit 306), the frame synchronization signal has a frame rate of 240 [fps], which is twice 120 [fps]. Also, by the frame rate conversion process, the converted L / R frame is output after being delayed with respect to the L / R frame at the input of the frame rate conversion unit 304.

このようにして、LRフレーム分離部301の入力/出力、フレームレート変換部304の入力/出力におけるL/Rフレームそれぞれが遅延を伴いながら出力されるが、フレーム画像ごとの対応関係は管理することができる。すなわち、フレームレート変換前のフレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することができるので、適切な画像フレームを参照した画質改善のための処理が実行される。   In this way, the L / R frames at the input / output of the LR frame separation unit 301 and the input / output of the frame rate conversion unit 304 are output with a delay, but the correspondence between the frame images should be managed. Can do. That is, based on the frame images before the frame rate conversion, the image quality can be adjusted with respect to the specific frame images after the frame rate conversion corresponding to these frame images. Processing for this is executed.

次に、図5を用いて、フレームレート変換前の左目用/右目用フレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することの必要性を説明する。   Next, referring to FIG. 5, it is necessary to adjust the image quality for specific frame images after frame rate conversion corresponding to these frame images based on the left / right eye frame images before frame rate conversion. Explain sex.

図5は、フレームレート変換前の左目用/右目用フレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することの必要性を説明するための概念図である。   FIG. 5 illustrates the necessity of adjusting the image quality of specific frame images after frame rate conversion corresponding to these frame images based on the left / right eye frame images before frame rate conversion. FIG.

この概念図においては、L/Rフレームは、L/Rフレームそれぞれを複数に分割した特定の領域である複数の領域A,B,C,…に分割されている。また、特定のタイミングにおける、Lフレームの領域Aの明度情報が輝度100、領域Bの明度情報が輝度10、領域Cの明度情報が輝度250であり、Rフレームの領域Aの明度情報が輝度250、領域Bの明度情報が輝度100、領域Cの明度情報が輝度10である例を説明する。これは、3D映像におけるL/Rフレームそれぞれでの特定のオブジェクトの画面上の表示位置が、このオブジェクトが立体視されるような視差をつけるために右目用画像と左目用画像とでずらされていることに起因する。   In this conceptual diagram, the L / R frame is divided into a plurality of areas A, B, C,... That are specific areas obtained by dividing each L / R frame into a plurality of parts. Further, at a specific timing, the brightness information of the area A in the L frame is luminance 100, the brightness information of the area B is brightness 10, the brightness information of the area C is brightness 250, and the brightness information of the area A of the R frame is brightness 250. An example in which the brightness information of the area B is luminance 100 and the brightness information of the area C is luminance 10 will be described. This is because the display position of a specific object on the screen in each L / R frame in 3D video is shifted between the right-eye image and the left-eye image in order to give a parallax so that this object is stereoscopically viewed. Due to being.

すなわちこの概念図では、Lフレーム上の領域Aに表示される映像はRフレーム上の領域Bに、Lフレーム上の領域Bに表示される映像はRフレーム上の領域Cにそれぞれずらされて表示されている。そして前述した明度情報を有するL/Rフレームが時分割で配列される場合、L/Rフレームそれぞれの特定領域ごとの輝度は、L/Rフレームの間で異なる可能性がある。例えば領域Aに着目すると、Lフレームでは輝度100であるがRフレームでは輝度250であり、領域Bに着目すると、Lフレームでは輝度10であるがRフレームでは輝度100である。   That is, in this conceptual diagram, the video displayed in the area A on the L frame is shifted to the area B on the R frame, and the video displayed in the area B on the L frame is shifted to the area C on the R frame. Has been. And when the L / R frame which has the brightness information mentioned above is arranged by a time division, the brightness | luminance for every specific area | region of each L / R frame may differ between L / R frames. For example, if attention is paid to the area A, the luminance is 100 in the L frame but 250 brightness in the R frame, and if attention is paid to the area B, the brightness is 10 in the L frame but 100 brightness in the R frame.

従って、例えばLフレームの直前のRフレームや、Rフレームの直前のLフレームの特徴に基づいて、最新のフレーム画像に対応させた画質調整が実行されると、直前のフレーム画像と最新のフレーム画像との輝度が異なるので、誤った画質調整を実行してしまうことになる。具体的には、例えば領域Aでは、Rフレームの特徴である輝度250がLフレームの輝度100の要素を含んだ調整値によって調整されてしまう。   Therefore, for example, when image quality adjustment corresponding to the latest frame image is performed based on the characteristics of the R frame immediately before the L frame or the L frame immediately before the R frame, the immediately preceding frame image and the latest frame image are executed. Therefore, the image quality is erroneously adjusted. Specifically, for example, in the region A, the luminance 250 that is a characteristic of the R frame is adjusted by an adjustment value including an element of the luminance 100 of the L frame.

また、図4に示した概念図のように、フレームレート変換部304の出力におけるL/Rフレームのフレームレートは240[fps]であるため、このようなフレームレートのフレーム画像に対して複数の処理を実行するブロックは高い演算処理能力を必要とされ、システムを構成する上でコスト的又は技術的な課題が多くなってしまう。従って、フレームレート変換前のフレームレートが60又は120[fps]のフレーム画像に対して、このフレーム画像の特徴を検出する処理や、検出した特徴に基づいて調整値を算出する処理を実行することは、前述した課題を容易に解決できることになる。   Also, as shown in the conceptual diagram of FIG. 4, the frame rate of the L / R frame at the output of the frame rate conversion unit 304 is 240 [fps]. A block that executes processing is required to have a high arithmetic processing capability, which increases cost or technical problems in configuring the system. Therefore, for a frame image having a frame rate of 60 or 120 [fps] before frame rate conversion, a process for detecting the feature of the frame image and a process for calculating an adjustment value based on the detected feature are executed. Can easily solve the aforementioned problems.

このような理由により、フレームレート変換前のL/Rフレームに基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することの必要性が生じる。そして、適切な画像フレームを参照した画質改善のための処理の実行が求められ、本発明の実施形態に係るテレビジョン受像機10は、この課題を解決することが可能である。   For these reasons, there is a need to adjust the image quality of specific frame images after frame rate conversion corresponding to these frame images based on L / R frames before frame rate conversion. And execution of the process for the image quality improvement which referred the suitable image frame is calculated | required, and the television receiver 10 which concerns on embodiment of this invention can solve this subject.

(変形例)
次に、図6を用いて、図2で説明した画質調整部203に備えられ、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックの動作の変形例を説明する。
(Modification)
Next, referring to FIG. 6, the image quality adjustment unit 203 described in FIG. 2 is provided for a specific frame image after frame rate conversion corresponding to this frame image based on the frame image before frame rate conversion. A modification of the operation of each block that executes image quality adjustment processing will be described.

図6は、本実施形態における、フレームレート変換前のフレーム画像に基づき、このフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質調整処理を実行する各ブロックによるシステム構成図の変形例である。   FIG. 6 is a system configuration diagram of each block that executes image quality adjustment processing on a specific frame image after frame rate conversion corresponding to this frame image based on the frame image before frame rate conversion in the present embodiment. It is a modification.

画質調整部203は、LRフレーム分離部601、調整値計算部602、フィルタ603、フレームレート変換部604、更新タイミング制御部605、調整部606などを備えている。   The image quality adjustment unit 203 includes an LR frame separation unit 601, an adjustment value calculation unit 602, a filter 603, a frame rate conversion unit 604, an update timing control unit 605, an adjustment unit 606, and the like.

この図6に示すシステム構成図の変形例は、図3に示したシステム構成図と略同じであるが、調整値計算部602及び更新タイミング制御部605の動作の一部において異なる。LRフレーム分離部601、フィルタ603、フレームレート変換部604及び調整部606それぞれのブロックの動作は、図3に示したLRフレーム分離部301、フィルタ303、フレームレート変換部304、調整部306それぞれのブロックの動作と同じであるので詳細な説明は省略する。   The modification of the system configuration diagram illustrated in FIG. 6 is substantially the same as the system configuration diagram illustrated in FIG. 3, but differs in part of the operations of the adjustment value calculation unit 602 and the update timing control unit 605. The operation of each block of the LR frame separation unit 601, the filter 603, the frame rate conversion unit 604, and the adjustment unit 606 is the same as that of the LR frame separation unit 301, the filter 303, the frame rate conversion unit 304, and the adjustment unit 306 illustrated in FIG. Since it is the same as the operation of the block, detailed description is omitted.

LRフレーム分離部601は、前段のブロックから入力された1フレーム分のフレーム画像に、L/Rフレームが混在している場合、L/Rフレームそれぞれを分離して時分割して個別のフレーム画像として配列し、LRフレーム分離処理後のL/Rフレームをフレームレート変換部604へ出力する。   When the L / R frame is mixed in the frame image for one frame input from the previous block, the LR frame separation unit 601 separates each L / R frame and time-divides each frame image. And outputs the L / R frame after the LR frame separation processing to the frame rate conversion unit 604.

調整値計算部602は、前段のブロックからLRフレーム分離部601へ入力される、LRフレーム分離前のL/Rフレームそれぞれの特徴として、特定画素の輝度又は明るさに関する明度情報を検出し、この検出した明度情報に基づいて調整値を算出してフィルタ603へ出力する。調整値計算部602は、L/Rフレームそれぞれを複数に分割した特定の領域ごとに明度情報を検出し調整値を算出する。さらに調整値計算部602は、LRフレーム分離部601から入力されたL/Rフレームそれぞれではなく、L/Rフレームの何れかに基づいて調整値を算出してもよい。この調整値計算部602は、L/Rフレームそれぞれに対応すべく、2系統設けられていることが好ましい。   The adjustment value calculation unit 602 detects brightness information regarding the luminance or brightness of a specific pixel as a feature of each L / R frame before LR frame separation, which is input from the previous block to the LR frame separation unit 601. Based on the detected brightness information, an adjustment value is calculated and output to the filter 603. The adjustment value calculation unit 602 detects lightness information for each specific region obtained by dividing each L / R frame into a plurality, and calculates an adjustment value. Furthermore, the adjustment value calculation unit 602 may calculate the adjustment value based on any of the L / R frames instead of the L / R frames input from the LR frame separation unit 601. The adjustment value calculation unit 602 is preferably provided in two systems so as to correspond to each L / R frame.

フィルタ603は、調整値計算部602から入力された調整値を、所定の伝達特性で変換した実効的な調整値である実効調整値を調整部606へ出力する。またフィルタ603は、調整値計算部602から入力されたL/Rフレームそれぞれに対する調整値に基づいて、それぞれに対する実効調整値を出力する。すなわちフィルタ603は、L/Rフレームそれぞれに対応すべく、2系統設けられていることが好ましい。   The filter 603 outputs an effective adjustment value, which is an effective adjustment value obtained by converting the adjustment value input from the adjustment value calculation unit 602 with a predetermined transfer characteristic, to the adjustment unit 606. The filter 603 outputs an effective adjustment value for each L / R frame based on the adjustment value input from the adjustment value calculation unit 602. That is, it is preferable that two systems of the filter 603 are provided so as to correspond to each L / R frame.

フレームレート変換部604は、LRフレーム分離部601から入力されたL/Rフレームそれぞれのフレームレートを高く変換したL/Rフレームを調整部606へ出力する。   The frame rate conversion unit 604 outputs, to the adjustment unit 606, the L / R frame obtained by converting the frame rate of each L / R frame input from the LR frame separation unit 601 to be high.

更新タイミング制御部605は、LRフレーム分離部601へ入力されたL/Rフレームに基づいて、フレームレート変換部604がフレームレート変換して出力したL/Rフレームが、どの程度遅延して(どの程度の更新タイミングで)出力されるかを示す出力遅延情報を調整部606へ出力する。   Based on the L / R frame input to the LR frame separation unit 601, the update timing control unit 605 determines how much the L / R frame output by the frame rate conversion unit 604 after the frame rate conversion is delayed (which Output delay information indicating whether or not the data is to be output is output to the adjustment unit 606.

調整部606は、更新タイミング制御部605から入力された出力遅延情報に基づいて、フィルタ603から入力された実効調整値を、フレームレート変換部604から入力された特定のタイミングのL/Rフレームに対して適用させて調整し、調整結果を後段のブロックへ出力する。   Based on the output delay information input from the update timing control unit 605, the adjustment unit 606 converts the effective adjustment value input from the filter 603 into an L / R frame at a specific timing input from the frame rate conversion unit 604. The adjustment result is applied to the block, and the adjustment result is output to the subsequent block.

このような各ブロックによる動作により、画質調整部203は、LRフレーム画像分離前且つフレームレート変換前のフレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することができるので、適切な画像フレームを参照した画質改善のための処理が実行される。   By such an operation by each block, the image quality adjustment unit 203 performs processing on specific frame images after frame rate conversion corresponding to these frame images based on the frame images before LR frame image separation and before frame rate conversion. Since the image quality can be adjusted, processing for improving the image quality with reference to an appropriate image frame is executed.

以上説明したように本実施形態によれば、主にテレビジョン受像機10に備えられた信号処理制御部40の一部のブロックが、左目用/右目用フレーム画像分離前の又は、少なくともフレームレート変換前のフレーム画像に基づき、これらのフレーム画像に対応したフレームレート変換後の特定のフレーム画像に対して画質を調整することができるので、適切な画像フレームを参照した画質改善のための処理の実行が可能となる。   As described above, according to the present embodiment, a part of the blocks of the signal processing control unit 40 mainly provided in the television receiver 10 is at least before the left eye / right eye frame image separation or at least the frame rate. Since image quality can be adjusted for specific frame images after frame rate conversion corresponding to these frame images based on the pre-conversion frame images, processing for improving image quality with reference to appropriate image frames Execution becomes possible.

また本発明は、上述した実施形態に限定されるものではなく、本発明の要旨を変えない範囲において、種々の変更、改変等が可能である。   The present invention is not limited to the above-described embodiments, and various changes and modifications can be made without departing from the scope of the present invention.

10…テレビジョン受像機、20…放送波処理部、21…外部機器IF部、22…ネットワークIF部、31…操作部、32…受光部、40…信号処理制御部、51…表示器、52…スピーカ、101…表示パネル、102…バックライト、RC…リモコン、201…セレクタ、202…映像信号処理部、203…画質調整部、204…ドライバ、301,601…LRフレーム分離部、302,602…調整値計算部、303,603…フィルタ、304,604…フレームレート変換部、305,605…更新タイミング制御部、306,606…調整部。   DESCRIPTION OF SYMBOLS 10 ... Television receiver, 20 ... Broadcast wave process part, 21 ... External apparatus IF part, 22 ... Network IF part, 31 ... Operation part, 32 ... Light-receiving part, 40 ... Signal processing control part, 51 ... Display, 52 DESCRIPTION OF SYMBOLS ... Speaker 101 ... Display panel 102 ... Back light RC ... Remote control 201 ... Selector 202 ... Video signal processing unit 203 ... Image quality adjustment unit 204 ... Driver 301, 601 ... LR frame separation unit 302, 602 ... adjustment value calculation unit, 303, 603 ... filter, 304, 604 ... frame rate conversion unit, 305, 605 ... update timing control unit, 306, 606 ... adjustment unit.

Claims (6)

入力された第1及び第2のフレーム画像それぞれのフレームレートを高く変換した第1及び第2のフレームレート変換後フレーム画像を時分割して交互に出力する出力手段と、
前記第1のフレーム画像の明度情報を検出する検出手段と、
前記出力手段が出力した前記第1のフレームレート変換後フレーム画像及び前記第2のフレームレート変換後フレーム画像のうちのいずれかに対して、前記検出手段により検出される前記明度情報に基づいた画質調整を実行する画質調整手段と、
を具備する画質調整装置。
Output means for alternately outputting the frame images after the first and second frame rate conversion obtained by converting the frame rates of the input first and second frame images to be high and alternately.
Detecting means for detecting lightness information of the first frame image;
The image quality based on the brightness information detected by the detection means for either the first frame rate converted frame image or the second frame rate converted frame image output by the output means Image quality adjusting means for performing the adjustment;
An image quality adjustment apparatus comprising:
前記検出手段は、前記第2のフレーム画像の明度情報を検出し、
前記画質調整手段は、前記出力手段が出力した前記第2のフレームレート変換後フレーム画像に対して、前記検出手段が検出した前記第2のフレーム画像の明度情報に基づく画質調整を実行する、
請求項1に記載の画質調整装置。
The detecting means detects brightness information of the second frame image;
The image quality adjustment means performs image quality adjustment based on lightness information of the second frame image detected by the detection means on the second frame rate converted frame image output by the output means,
The image quality adjusting apparatus according to claim 1.
前記第1のフレーム画像が3D映像の左目用フレーム画像でありかつ前記第2のフレーム画像が3D映像の右目用フレーム画像であるか、
又は、前記第1のフレーム画像が3D映像の右目用フレーム画像でありかつ前記第2のフレーム画像が3D映像の左目用フレーム画像である、
請求項1又は2に記載の画質調整装置。
Whether the first frame image is a 3D video left-eye frame image and the second frame image is a 3D video right-eye frame image;
Alternatively, the first frame image is a 3D video right-eye frame image and the second frame image is a 3D video left-eye frame image.
The image quality adjustment apparatus according to claim 1 or 2.
前記出力手段は、前記左目用フレーム画像のフレームレートを高く変換したフレームレート変換後左目用フレーム画像と、前記右目用フレーム画像のフレームレートを高く変換したフレームレート変換後右目用フレーム画像と、を交互に出力する、
請求項3に記載の画質調整装置。
The output means includes a frame-rate-converted left-eye frame image obtained by converting a frame rate of the left-eye frame image to a high value, and a frame-rate-converted right-eye frame image obtained by converting a frame rate of the right-eye frame image to be high. Output alternately,
The image quality adjustment apparatus according to claim 3.
前記出力手段は、前記左目用フレーム画像のフレームレートを高く変換したフレームレート変換後左目用フレーム画像を連続させて配列した変換後左目用フレーム画像群と、前記右目用フレーム画像のフレームレートを高く変換したフレームレート変換後右目用フレーム画像を連続させて配列した変換後右目用フレーム画像群と、を交互に出力する、
請求項3に記載の画質調整装置。
The output means increases the frame rate of the converted left-eye frame image obtained by continuously arranging the converted left-eye frame images after converting the frame rate of the left-eye frame image to a high frame rate, and the right-eye frame image. The converted right-eye frame images after the converted frame rate conversion and the converted right-eye frame images are alternately output,
The image quality adjustment apparatus according to claim 3.
入力された第1及び第2のフレーム画像それぞれのフレームレートを高く変換した第1及び第2のフレームレート変換後フレーム画像を時分割して交互に出力するステップと、
前記第1のフレーム画像の明度情報を検出するステップと、
前記出力された前記第1のフレームレート変換後フレーム画像及び前記第2のフレームレート変換後フレーム画像のうちのいずれかに対して、前記検出された明度情報に基づく画質調整を実行するステップと、
を有する画質調整方法。
Outputting the first and second frame rate-converted frame images obtained by converting the input frame rates of the first and second frame images to be time-divided and alternately output;
Detecting lightness information of the first frame image;
Performing image quality adjustment based on the detected lightness information on any of the output first frame rate converted frame image and the second frame rate converted frame image;
An image quality adjustment method comprising:
JP2011120594A 2011-05-30 2011-05-30 Image quality adjustment device and image quality adjustment method Pending JP2011223598A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011120594A JP2011223598A (en) 2011-05-30 2011-05-30 Image quality adjustment device and image quality adjustment method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011120594A JP2011223598A (en) 2011-05-30 2011-05-30 Image quality adjustment device and image quality adjustment method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2009298516A Division JP4762343B2 (en) 2009-12-28 2009-12-28 Image quality adjusting apparatus and image quality adjusting method

Publications (1)

Publication Number Publication Date
JP2011223598A true JP2011223598A (en) 2011-11-04

Family

ID=45039866

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011120594A Pending JP2011223598A (en) 2011-05-30 2011-05-30 Image quality adjustment device and image quality adjustment method

Country Status (1)

Country Link
JP (1) JP2011223598A (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157775A (en) * 2004-12-01 2006-06-15 Mitsubishi Electric Corp Stereoscopic image display device
JP2008306335A (en) * 2007-06-06 2008-12-18 Sony Corp Liquid crystal projector and control method of liquid crystal projector
JP2009025436A (en) * 2007-07-18 2009-02-05 Seiko Epson Corp Electro-optical device, display method and electronic apparatus
JP2010011184A (en) * 2008-06-27 2010-01-14 Toshiba Corp Video signal processing apparatus, television receiver and method of controlling the same
JP2010262276A (en) * 2009-04-08 2010-11-18 Semiconductor Energy Lab Co Ltd Method for driving liquid crystal display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006157775A (en) * 2004-12-01 2006-06-15 Mitsubishi Electric Corp Stereoscopic image display device
JP2008306335A (en) * 2007-06-06 2008-12-18 Sony Corp Liquid crystal projector and control method of liquid crystal projector
JP2009025436A (en) * 2007-07-18 2009-02-05 Seiko Epson Corp Electro-optical device, display method and electronic apparatus
JP2010011184A (en) * 2008-06-27 2010-01-14 Toshiba Corp Video signal processing apparatus, television receiver and method of controlling the same
JP2010262276A (en) * 2009-04-08 2010-11-18 Semiconductor Energy Lab Co Ltd Method for driving liquid crystal display device

Similar Documents

Publication Publication Date Title
JP4762343B2 (en) Image quality adjusting apparatus and image quality adjusting method
US9117396B2 (en) Three-dimensional image playback method and three-dimensional image playback apparatus
US9041783B2 (en) Shutter glasses, display apparatus and control method thereof
CN105872419B (en) A kind of display methods, device and LCD TV
US8643697B2 (en) Video processing apparatus and video processing method
US20110050850A1 (en) Video combining device, video display apparatus, and video combining method
JP5740885B2 (en) Display device and display method
US20110181707A1 (en) Method for driving 3d binocular eyewear from standard video stream
EP2779152A1 (en) Display apparatus and control method thereof for applying motion compensation to remove artifacts from images
US20160366390A1 (en) Ultra high definition 3d conversion device and an ultra high definition 3d display system
CN102695072A (en) Display apparatus, control method thereof, shutter glasses and control method thereof
US9264700B2 (en) Multi viewer display and displaying method of the same
US20120182405A1 (en) Image display method and image display system for adjusting display control signal transmitted to display screen during extra driving period
EP2448272A1 (en) 3d image providing device, display device, and method thereof
US20130016196A1 (en) Display apparatus and method for displaying 3d image thereof
WO2012107985A1 (en) Image signal processing device and image signal processing method
US20120032954A1 (en) Apparatus and method for reproducing stereoscopic images, providing a user interface appropriate for a 3d image signal
US9392251B2 (en) Display apparatus, glasses apparatus and method for controlling depth
US20130169771A1 (en) Display apparatus for displaying a plurality of content views, glasses apparatus, display system comprising them, and display methods thereof
KR20110055196A (en) Image displaying apparatus and image signal processing method of the same
KR20130078507A (en) Display apparatus and display method using the same
US9955146B2 (en) Display device and driving method thereof
KR101748765B1 (en) Device and Method for Automatically Brightness Regulating Display According to Video Mode
JP2011223598A (en) Image quality adjustment device and image quality adjustment method
KR101671033B1 (en) Apparatus, method and recording medium for displaying 3d video

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130205

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130903