JP2010088133A - Image processing apparatus, and image processing method - Google Patents

Image processing apparatus, and image processing method Download PDF

Info

Publication number
JP2010088133A
JP2010088133A JP2010000216A JP2010000216A JP2010088133A JP 2010088133 A JP2010088133 A JP 2010088133A JP 2010000216 A JP2010000216 A JP 2010000216A JP 2010000216 A JP2010000216 A JP 2010000216A JP 2010088133 A JP2010088133 A JP 2010088133A
Authority
JP
Japan
Prior art keywords
image
image quality
resolution
processing
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010000216A
Other languages
Japanese (ja)
Other versions
JP5075923B2 (en
Inventor
Muneshiro Terada
宗城 寺田
Kenichi Nagai
賢一 永井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2010000216A priority Critical patent/JP5075923B2/en
Publication of JP2010088133A publication Critical patent/JP2010088133A/en
Application granted granted Critical
Publication of JP5075923B2 publication Critical patent/JP5075923B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image processing apparatus and image processing method for providing a video image on which image quality processing has been appropriately performed in accordance with a video mode. <P>SOLUTION: The image processing apparatus includes: a level storage means, to which a video signal of a first resolution is input, and which stores an image quality processing level indicating a strength of image quality processing including sharpening processing to the video signal of the first resolution and a video mode by associating them with each other; a video determining means for determining a video mode and determining an image quality processing level in accordance with the determined video mode; and an image quality processing means for performing image quality processing at the determined image quality processing level on the video signal of the first resolution. The level storage means stores the video mode and the image quality processing level by associating them with each other so that, in a video mode for performing lighter viewing than that in a predetermined video mode, image quality processing is made stronger than that in the predetermined video mode. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、映像を高解像度化する技術に関し、特に、映像モードに応じて高解像度化する画像処理装置、画像処理方法に関するものである。   The present invention relates to a technique for increasing the resolution of a video, and particularly to an image processing apparatus and an image processing method for increasing the resolution according to a video mode.

近年、PC(Personal Computer)とテレビジョンの融合が進み、SD(Standard Definition)サイズを超えた、ハイビジョン放送等のいわゆるHD(High Definition)サイズの高解像度のディスプレイで様々な映像(例えば、サッカー等のスポーツ番組、アニメや洋画等の映画番組等)を視聴する機会が増えている。   In recent years, fusion of PCs (Personal Computers) and televisions has progressed, and various images (for example, soccer etc.) are displayed on a high-definition display of so-called HD (High Definition) size such as high-definition broadcasting that exceeds SD (Standard Definition) size. Of sports programs, movie programs such as anime and movies) are increasing.

しかし、SDテレビ放送される映像、あるいはDVDに記録された映像等は解像度が低く、ユーザがHDサイズ(特に、1920×1080のいわゆるフルHDサイズ)の映像を視聴する場合には、その映像の画像を高解像度に変換する必要がある。この点、従来から、画像の画素値を線形内挿や3次畳み込み内挿することによって、画像を高解像度化することが行われていたが、鮮鋭な画像が得られないという問題があった。   However, a video broadcast on an SD TV or a video recorded on a DVD has a low resolution, and when a user views a video of HD size (especially 1920 × 1080 so-called full HD size), The image needs to be converted to high resolution. In this regard, conventionally, image resolution has been increased by linear interpolation or cubic convolution interpolation of image pixel values, but there has been a problem that a sharp image cannot be obtained. .

そこで、このような問題を解決するために、画像を伸張すると同時に、当該伸張処理により生じた画像の画素と画素の間に高い周波数成分の画素を補間して、鮮鋭な高解像度の画像を得ることができる超解像度化技術の研究が行われている(例えば、特許文献1、特許文献2)。   Therefore, in order to solve such a problem, the image is decompressed, and at the same time, a pixel having a high frequency component is interpolated between the pixels of the image generated by the decompression process to obtain a sharp high-resolution image. Research on super-resolution technology that can be performed is performed (for example, Patent Document 1 and Patent Document 2).

特開2008−067110号公報JP 2008-067110 A 特開2008−146190号公報JP 2008-146190 A

超解像度化技術によれば、映像の鮮鋭感が増すので、シャープな映像・クリアな映像をユーザは楽しむことができる。
しかしながら、超解像度化技術によって画像を鮮鋭化した場合、画素のブロックノイズが目立ち過ぎてしまったり、あるいは背景と人物の遠近感が不自然に映ってしまうという問題が生じ得た。
According to the super-resolution technology, the sharpness of the image is increased, so that the user can enjoy a sharp image and a clear image.
However, when the image is sharpened by the super-resolution technique, there may be a problem that the block noise of the pixel becomes too conspicuous or the perspective between the background and the person appears unnatural.

また、従来から、画像を鮮鋭化する方法として、画像のエッジを立てることによって、映像を見かけ上鮮鋭にするシャープネス処理がある。しかしながら、超解像度化技術は、新たに高周波成分の画素を生成するという点で、シャープネス処理とは全く異なる技術であり、シャープネス処理で行われている鮮鋭化の処理と同様の手法によって鮮鋭化の度合いを調整することが困難であるという問題があった。   Conventionally, as a method for sharpening an image, there is a sharpness process that makes an image appear sharp by raising an edge of the image. However, the super-resolution technology is a technology that is completely different from the sharpness processing in that it newly generates high-frequency component pixels, and the sharpening processing is performed by the same method as the sharpening processing performed in the sharpness processing. There was a problem that it was difficult to adjust the degree.

本発明は、上記に鑑みてなされたものであって、適切に画質処理された映像を提供できる画像処理装置、画像処理方法を提供することを目的とする。   The present invention has been made in view of the above, and an object of the present invention is to provide an image processing apparatus and an image processing method that can provide an image that has been appropriately processed for image quality processing.

上述した課題を解決し、目的を達成するために、本発明に係る画像処理装置は、第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、を備え、前記レベル記憶手段は、所定の映像モードよりも明るく視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも強くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、ことを特徴とする。   In order to solve the above-described problems and achieve the object, an image processing apparatus according to the present invention receives a first resolution video signal, and performs image quality processing including sharpening processing on the first resolution video signal. Level storage means for associating and storing an image quality processing level indicating a video mode and a video mode; video determination means for determining the video mode and determining the image quality processing level according to the determined video mode; Image quality processing means for performing the image quality processing of the determined image quality processing level for a 1-resolution video signal, and the level storage means is a video mode for viewing brighter than a predetermined video mode. In some cases, the video mode and the image quality processing level are stored in association with each other so that the strength of the image quality processing is stronger than that of the predetermined video mode.

また、本発明に係る画像処理装置は、第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、を備え、前記レベル記憶手段は、所定の映像モードよりも暗くした状況で視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、ことを特徴とする。   In addition, the image processing apparatus according to the present invention corresponds to an image quality processing level and a video mode indicating the strength of image quality processing including a sharpening process for the first resolution video signal when the first resolution video signal is input. Level storage means for adding and storing, video determining means for determining the video mode and determining the image quality processing level according to the determined video mode, and the determined video signal for the first resolution An image quality processing means for performing the image quality processing at the image quality processing level, and the level storage means is configured to enhance the image quality processing when the video mode is for viewing in a darker state than a predetermined video mode. The video mode and the image quality processing level are stored in association with each other so that the image quality is weaker than the predetermined video mode.

また、本発明に係る画像処理装置は、第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、を備え、前記レベル記憶手段は、所定の映像モードよりも映画の視聴に適した映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、ことを特徴とする。   In addition, the image processing apparatus according to the present invention corresponds to an image quality processing level and a video mode indicating the strength of image quality processing including a sharpening process for the first resolution video signal when the first resolution video signal is input. Level storage means for adding and storing, video determining means for determining the video mode and determining the image quality processing level according to the determined video mode, and the determined video signal for the first resolution An image quality processing means for performing the image quality processing at an image quality processing level, and the level storage means indicates the strength of the image quality processing when the video mode is more suitable for movie viewing than a predetermined video mode. The video mode and the image quality processing level are stored in association with each other so as to be weaker than a predetermined video mode.

また、本発明に係る画像処理方法は、第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段を備え、前記レベル記憶手段は、所定の映像モードよりも明るく視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも強くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する画像処理装置で行われる画像処理方法であって、映像判断手段が、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断ステップと、画質処理手段が、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理ステップと、を含むことを特徴とする。   In addition, the image processing method according to the present invention corresponds to an image quality processing level and an image mode indicating the strength of image quality processing including a sharpening process for the image signal of the first resolution when the image signal of the first resolution is input. Level storage means for storing information, and when the level storage means is a video mode for viewing brighter than a predetermined video mode, the strength of the image quality processing is stronger than that of the predetermined video mode. An image processing method performed by an image processing apparatus that stores the video mode and the image quality processing level in association with each other, wherein the video determination unit determines the video mode, and determines the determined video mode. In response, the image determination step for determining the image quality processing level, and the image quality processing means performs the image quality processing at the determined image quality processing level for the first resolution image signal. Cormorants and image quality processing steps, characterized in that it comprises a.

また、本発明に係る画像処理方法は、第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段を備え、前記レベル記憶手段は、所定の映像モードよりも暗くした状況で視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の状態よりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する画像処理装置で行われる画像処理方法であって、映像判断手段が、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断ステップと、画質処理手段が、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理ステップと、を含むことを特徴とする。   In addition, the image processing method according to the present invention corresponds to an image quality processing level and an image mode indicating the strength of image quality processing including a sharpening process for the image signal of the first resolution when the image signal of the first resolution is input. Level storage means for storing information, and when the level storage means is a video mode for viewing in a darker condition than the predetermined video mode, the strength of the image quality processing is set from the predetermined state. The image processing method is performed by an image processing apparatus that stores the video mode and the image quality processing level in association with each other so that the video determination unit determines the video mode and determines the video. A video determination step for determining the image quality processing level according to the mode, and the image quality processing means at the image quality processing level determined by the image quality processing means for the video signal of the first resolution. Characterized in that it comprises a quality processing step of performing, the.

本発明によれば、映像モードに応じて画質処理レベルを決定するので、適切に画質処理された映像を提供できるという効果を奏する。   According to the present invention, since the image quality processing level is determined according to the video mode, it is possible to provide an image that has been appropriately subjected to image quality processing.

本実施の形態にかかる画像処理装置の構成を示すブロック図である。It is a block diagram which shows the structure of the image processing apparatus concerning this Embodiment. 図1に示すメイン処理部の構成を示すブロック図である。It is a block diagram which shows the structure of the main process part shown in FIG. 図1に示す高解像度化部の構成を示すブロック図である。It is a block diagram which shows the structure of the high resolution part shown in FIG. 操作部の操作によって表示部に表示される映像モードの設定画面の例を示す図である。It is a figure which shows the example of the setting screen of the video mode displayed on a display part by operation of an operation part. EEPROMメモリが超解像度パラメータと映像モード値を対応付けて記憶する例を示す図である。It is a figure which shows the example which an EEPROM memory matches and memorize | stores a super-resolution parameter and a video mode value. 第1の実施の形態にかかる超解像度処理の実行手順を示すフローチャートである。It is a flowchart which shows the execution procedure of the super-resolution process concerning 1st Embodiment. 第2の実施の形態にかかる超解像度処理の実行手順を示すフローチャートである。It is a flowchart which shows the execution procedure of the super-resolution process concerning 2nd Embodiment.

(第1の実施の形態)
以下に添付図面を参照して、この発明にかかる画像処理装置および画像処理方法の最良な実施の形態を詳細に説明する。図1は、本実施形態に係る画像表示装置100のシステムを概略的に示したブロック図である。同図に示したように、画像表示装置100は、映像信号入力部11と、メイン処理部12と、画像処理装置に対応する高解像度化部13と、動画改善処理部14と、表示処理部15と、表示部16と、音声処理部17と、音声出力部18とを備えている。
(First embodiment)
Exemplary embodiments of an image processing apparatus and an image processing method according to the present invention are explained in detail below with reference to the accompanying drawings. FIG. 1 is a block diagram schematically showing a system of the image display apparatus 100 according to the present embodiment. As shown in the figure, the image display device 100 includes a video signal input unit 11, a main processing unit 12, a resolution increasing unit 13 corresponding to the image processing device, a moving image improvement processing unit 14, and a display processing unit. 15, a display unit 16, an audio processing unit 17, and an audio output unit 18.

映像信号入力部11は、表示の対象となる映像信号が入力される部位であって、デジタル放送受信部111と、IPTV(インターネットプロコトルTV)信号処理部112と、インターネット等のIP網を介して送信されるデータを受信するインターネット信号処理部113と、アナログ信号の入力を受け付ける外部入力部114とを備えている。ここで「映像信号」とは、静止画像や動画像からなる画像信号の他、音声信号をも含む概念である。   The video signal input unit 11 is a part to which a video signal to be displayed is input. The video signal input unit 11 is connected to a digital broadcast receiving unit 111, an IPTV (Internet Protocol TV) signal processing unit 112, and an IP network such as the Internet. An Internet signal processing unit 113 that receives data to be transmitted and an external input unit 114 that receives an analog signal input are provided. Here, the “video signal” is a concept including an audio signal in addition to an image signal composed of a still image or a moving image.

デジタル放送受信部111は、BS、CS、地上波等のデジタル放送を受信するためのデジタルアンテナ1111と、デジタル放送を選局するためのデジタルチューナ1112と、デジタル放送を復調しデジタルの映像信号としてメイン処理部12に出力するデジタル信号復調部1113とを有している。   The digital broadcast receiver 111 includes a digital antenna 1111 for receiving digital broadcasts such as BS, CS, and terrestrial waves, a digital tuner 1112 for selecting digital broadcasts, and demodulating the digital broadcasts as digital video signals. And a digital signal demodulating unit 1113 for outputting to the main processing unit 12.

IPTV信号処理部112は、専用のIP網を介して送信されるIP放送を受信し、デジタルの映像信号としてメイン処理部12に出力する。   The IPTV signal processing unit 112 receives an IP broadcast transmitted via a dedicated IP network, and outputs it to the main processing unit 12 as a digital video signal.

インターネット信号処理部113は、インターネット等のIP網を介して送信されるデータ(静止画像や動画像)を受信し、デジタルの映像信号としてメイン処理部12に出力する。   The Internet signal processing unit 113 receives data (still images and moving images) transmitted via an IP network such as the Internet and outputs the data to the main processing unit 12 as a digital video signal.

外部入力部114は、アナログ放送を受信するためのアナログアンテナ1141と、アナログ放送を選局するためのアナログチューナ1142と、アナログ信号にA/D変換等の信号処理を施し、デジタルの映像信号としてメイン処理部12に出力する外部入力信号処理部1143とを有している。なお、外部入力信号処理部1143は、ゲーム機やPC(Personal Computer)、DVD(Digital Versatile Disk)プレーヤ等の外部機器と接続するための端子を有し(図示せず)、当該入力端子を介して外部機器から入力されるアナログ信号に対しても信号処理を施すものとする。   The external input unit 114 includes an analog antenna 1141 for receiving an analog broadcast, an analog tuner 1142 for selecting the analog broadcast, and performs signal processing such as A / D conversion on the analog signal to obtain a digital video signal. An external input signal processing unit 1143 for outputting to the main processing unit 12. The external input signal processing unit 1143 has a terminal (not shown) for connecting to an external device such as a game machine, a PC (Personal Computer), a DVD (Digital Versatile Disk) player, and the like, via the input terminal. Signal processing is also performed on an analog signal input from an external device.

図2は、メイン処理部12の機能的構成を示すブロック図である。図2に示すように、メイン処理部12は、操作受信部121と、映像判断部122と、制御部123と、フラッシュメモリ19とを有している。   FIG. 2 is a block diagram illustrating a functional configuration of the main processing unit 12. As illustrated in FIG. 2, the main processing unit 12 includes an operation reception unit 121, a video determination unit 122, a control unit 123, and a flash memory 19.

操作受信部121は、後述するように、操作部200であるリモコンから指定された映像モードの種類の選択する旨の信号(以下、選択信号と呼ぶ。)を受信し、受信した選択信号に応じた映像モードの種類を後述する映像判断部122に出力する。   As will be described later, the operation receiving unit 121 receives a signal indicating that the type of video mode designated (hereinafter referred to as a selection signal) is selected from the remote controller that is the operation unit 200, and responds to the received selection signal. The type of the selected video mode is output to the video determination unit 122 described later.

具体的には、ユーザが操作部200の映像モードを指定するためのモード選択ボタン等(不図示)を押下すると、図4に示すように、表示部16の一部に映像モードを選択するためのサブ画面を表示する。そして、ユーザが、操作部200の上下キー等の選択キー(不図示)を押下して「あざやか」「標準」「映画」「メモリ」等の各種の映像モードを選択すると、操作受信部121は、このとき出力される選択信号を受信し、映像判断部122に出力する。このように、いくつかの映像モードの中からユーザが好みの映像モードを指定する映像モード指定手段が設けられている。なお、本実施形態では「メモリ」を除く各映像モードは、例えばユニカラー,バックライトレベル,黒レベル,色の濃さ,色合い,シャープネスなどの画質調整項目の値がデフォルトで決められたモードであり、「メモリ」のモード、各画質調整項目をユーザが自由に調整可能なモードである。このように、映像モードは、視聴する番組やテレビの使用状態に応じてユーザにお好みの映像を提供するために設けられている。なお、図示しないが、Autoモード(視聴映像やテレビの使用状態に応じて自動的に各調整項目が調整されるモード)があってもよい。   Specifically, when the user presses a mode selection button or the like (not shown) for designating the video mode of the operation unit 200, the video mode is selected for a part of the display unit 16 as shown in FIG. Display the sub screen. When the user presses a selection key (not shown) such as an up / down key of the operation unit 200 to select various video modes such as “Azureka”, “Standard”, “Movie”, and “Memory”, the operation reception unit 121 The selection signal output at this time is received and output to the video determination unit 122. In this way, video mode designating means is provided for the user to designate a preferred video mode from among several video modes. In the present embodiment, the image modes other than “memory” are modes in which values of image quality adjustment items such as unicolor, backlight level, black level, color density, hue, and sharpness are determined by default. Yes, it is a mode in which the user can freely adjust the “memory” mode and each image quality adjustment item. As described above, the video mode is provided to provide a user with a favorite video according to a program to be viewed or a usage state of the television. Although not shown, there may be an Auto mode (a mode in which each adjustment item is automatically adjusted according to the viewing video or the use state of the television).

上述した各種の映像モードは、後述するように、制御部123において映像信号から分離された画像信号に対して行う超解像度処理のレベルに対応づけられており、これらの各種の映像モードをユーザが指定することによって、指定された映像モードに応じた超解像度処理が行われる。   As described later, the various video modes described above are associated with the level of super-resolution processing performed on the image signal separated from the video signal by the control unit 123, and the user can select these various video modes. By designating, super-resolution processing corresponding to the designated video mode is performed.

また、上述した映像モードのうち、「あざやか」とは、明るく迫力ある映像の視聴を楽しみたい場合に選択されるモードであって、「標準」よりも強く超解像度処理を行う場合のモードであることを意味する。「映画」とは、暗くした部屋で映画館のような雰囲気で映像の視聴を楽しみたい場合に選択されるモードであって、「標準」よりも弱く超解像度処理を行う場合のモードであることを意味する。また、「メモリ」とは、ユーザが操作部200等から各調整項目(例えば、ユニカラー,バックライト,黒レベル,色の濃さ,色合い,シャープネスなど)に加えて超解像度処理のレベルを個別に指定した場合のモード(すなわち、マニュアルモード)であり、よりきめ細やかな超解像度のレベル設定が可能となる。尚、「標準」となる超解像度のレベルの設定値については、ユーザによって操作部200からの任意に設定が可能となっていてもよいし、デフォルトで固定されていてもよい。   Of the above-mentioned video modes, “Azayaka” is a mode that is selected when the user wants to enjoy watching bright and powerful video, and is a mode for performing super-resolution processing stronger than “Standard”. Means that. “Movie” is a mode that is selected when you want to enjoy watching a movie in a dark room like a movie theater. Means. The “memory” means that the user individually sets the level of super-resolution processing in addition to each adjustment item (for example, unicolor, backlight, black level, color density, hue, sharpness, etc.) from the operation unit 200 or the like. Mode (ie, manual mode), and a finer level of super resolution can be set. It should be noted that the setting value of the super resolution level that is “standard” may be arbitrarily set by the user from the operation unit 200, or may be fixed by default.

映像判断部122は、操作受信部121が操作部200から映像モードを指定した旨の選択信号を受信し、指定された映像モードの種類を示す映像モード値を制御部123に出力するとともに、フラッシュメモリ19に書き込む。例えば、ユーザが指定した映像モードが「あざやか」である場合には「1」、「標準」である場合には「2」、「映画」である場合には「3」、「メモリ」である場合には「4」を、後述する制御部123に出力するとともに、フラッシュメモリ19に書き込む。   The video determination unit 122 receives a selection signal indicating that the operation reception unit 121 has specified the video mode from the operation unit 200, outputs a video mode value indicating the type of the specified video mode to the control unit 123, and flashes. Write to memory 19. For example, when the video mode designated by the user is “Azayaka”, it is “1”, when it is “Standard”, it is “2”, when it is “Movie”, it is “3”, “Memory”. In this case, “4” is output to the control unit 123 described later and written to the flash memory 19.

制御部123は、映像信号を画像信号と音声信号とに分離し、所定の画像処理を施した画像信号を高解像度化部13に出力するとともに、音声信号を音声処理部17に出力する。   The control unit 123 separates the video signal into an image signal and an audio signal, outputs an image signal subjected to predetermined image processing to the high resolution unit 13, and outputs the audio signal to the audio processing unit 17.

ここで、制御部123が施す画像処理としては、入力された画像信号の解像度を所定の解像度(例えば、1280×720等)に変換するスケーリング処理等が挙げられる。   Here, the image processing performed by the control unit 123 includes scaling processing for converting the resolution of the input image signal into a predetermined resolution (for example, 1280 × 720).

フラッシュメモリ19は、上述したように、操作部200から選択信号を受信した場合に、その選択信号に対応する映像モード値を記憶する。操作部200から指定された選択信号に対応する映像モード値は、あらかじめ不図示のメモリ等に記憶されている。   As described above, when the selection signal is received from the operation unit 200, the flash memory 19 stores the video mode value corresponding to the selection signal. The video mode value corresponding to the selection signal designated from the operation unit 200 is stored in advance in a memory (not shown) or the like.

図3は、図1に示す高解像度化部13の機能構成を示すブロック図である。図3に示すように、高解像度化部13は、前処理部131と、超解像度変換処理部132と、後処理部133と、EEPROMメモリ20とを備えている。   FIG. 3 is a block diagram showing a functional configuration of the resolution increasing unit 13 shown in FIG. As shown in FIG. 3, the high resolution unit 13 includes a preprocessing unit 131, a super resolution conversion processing unit 132, a post processing unit 133, and an EEPROM memory 20.

前処理部131は、メイン処理部12から入力された画像信号に対し、インターレース・プログレッシブ変換処理や、ノイズを除去するノイズリダクション処理等の画像処理(以下、前処理と呼ぶ。)を施し、処理済みの映像信号を超解像度変換処理部132に出力する。また、前処理部131は、メイン処理部12から受け取った映像モード値を、後述する超解像度変換処理部132に出力する。なお、映像モード値に関する信号は、メイン処理部12から前処理部131を通らずに超解像度処理部132に入力されてもよい。   The preprocessing unit 131 performs image processing (hereinafter referred to as preprocessing) such as interlace / progressive conversion processing and noise reduction processing for removing noise on the image signal input from the main processing unit 12. The completed video signal is output to the super-resolution conversion processing unit 132. Further, the preprocessing unit 131 outputs the video mode value received from the main processing unit 12 to the super-resolution conversion processing unit 132 described later. The signal related to the video mode value may be input from the main processing unit 12 to the super resolution processing unit 132 without passing through the preprocessing unit 131.

具体的には、前処理部131は、インターレース・プログレッシブ変換処理として、入力された画像信号における画像の動きを検出して静止画と動画とを判定し、静止画と判定したときには静止画用の補間処理を行い、動画と判定したときには動画用の補間処理を行う。   Specifically, as the interlace / progressive conversion process, the preprocessing unit 131 detects the motion of the image in the input image signal and determines a still image and a moving image. Interpolation processing is performed, and when it is determined to be a moving image, interpolation processing for the moving image is performed.

また、前処理部131は、ノイズリダクション処理として、画像信号における画像の輪郭補整や、画像ボケやギラツキ感の低減、過度なイコライジング(高域強調)を抑える補正、水平方向にカメラが移動する際のブレ改善等の処理を行う。   In addition, the pre-processing unit 131 performs noise reduction processing such as image contour correction in an image signal, reduction of image blur and glare, correction for suppressing excessive equalization (high frequency emphasis), and when the camera moves in the horizontal direction. Processes such as blurring improvement.

超解像度変換処理部132は、前処理部131から入力される低解像度フレームを、高解像度化するための画像処理(以下、「超解像度変換処理」という。)を施して、HDサイズの高解像度の動画データのフレーム(以下、「高解像度フレーム」という。)を生成し、後処理部133に出力する。   The super-resolution conversion processing unit 132 performs image processing (hereinafter referred to as “super-resolution conversion processing”) for increasing the resolution of the low-resolution frame input from the pre-processing unit 131, thereby obtaining a high resolution of HD size. Frame of the moving image data (hereinafter referred to as “high resolution frame”) is generated and output to the post-processing unit 133.

ここで、超解像度変換処理とは、第1解像度である低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、第2解像度である高解像度の画像信号を復元する鮮鋭化処理を意味する。ここで、本来の画素値とは、例えば、低解像度(第1解像度)の画像信号を得たときと同じ被写体を、高解像度(第2解像度)の画像信号の画素数を持つカメラで撮像したときに得られる画像信号の各画素が持つ値を指す。   Here, the super-resolution conversion processing is a sharpening that restores a high-resolution image signal that is the second resolution by estimating the original pixel value from the low-resolution image signal that is the first resolution and increasing the number of pixels. Means processing. Here, the original pixel value is, for example, an image of the same subject as that obtained when a low-resolution (first resolution) image signal is obtained with a camera having the number of pixels of the high-resolution (second resolution) image signal. It refers to the value of each pixel of the image signal that is sometimes obtained.

また、「推定して画素を増やす」とは、画像の特徴を捕らえて、相関性があるという画像の特徴を利用して周辺(同一フレーム内またはフレーム間)の画像から本来の画素値を推定して画素を増やすことを意味する。なお、超解像度変換処理については、特開2007−310837号公報、特開2008−98803号公報や特開2000−188680号公報等に開示された公知・公用の技術を用いることが可能である。本実施の形態の超解像度変換処理の技術としては、例えば、入力画像の標本化周期で決まるナイキスト周波数より高い周波数成分を有する画像を復元する技術を用いる。   Also, “estimate and increase pixels” means to capture the image features and use the image features that are correlated to estimate the original pixel value from the surrounding (within the same frame or between frames) image This means increasing the number of pixels. For the super-resolution conversion processing, it is possible to use a publicly known / public technique disclosed in Japanese Unexamined Patent Application Publication No. 2007-310837, Japanese Unexamined Patent Application Publication No. 2008-98803, Japanese Unexamined Patent Application Publication No. 2000-188680, and the like. As a technique for the super-resolution conversion processing of the present embodiment, for example, a technique for restoring an image having a frequency component higher than the Nyquist frequency determined by the sampling period of the input image is used.

例えば、特開2007−310837号公報に開示された超解像度変換処理を用いる場合には、複数の中解像度フレームのそれぞれに対してフレーム中の注目画素を含む注目画像領域中の画素値の変化パターンに最も近い複数の注目画像領域に対応する複数の対応点を基準フレームの中から選択し、対応点での輝度の標本値を対応点に対応している注目画素の画素値に設定し、複数の標本値の大きさと、複数の対応点の配置とに基づいて、基準フレームの画素数よりも多い画素数の高解像度フレームであって基準フレームに対応する高解像度フレームの画素値を算出することにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。   For example, when using the super-resolution conversion process disclosed in Japanese Patent Application Laid-Open No. 2007-310837, the change pattern of the pixel value in the target image area including the target pixel in the frame for each of a plurality of medium resolution frames. Select a plurality of corresponding points corresponding to a plurality of target image areas closest to the reference frame from the reference frame, set the sample value of the luminance at the corresponding point to the pixel value of the target pixel corresponding to the corresponding point, and Calculating a pixel value of a high-resolution frame corresponding to the reference frame, which is a high-resolution frame having a number of pixels larger than the number of pixels of the reference frame, based on the size of the sample value and the arrangement of a plurality of corresponding points. Thus, the original pixel value is estimated from the low resolution image signal and the number of pixels is increased to restore the high resolution image signal.

また、特開2008−98803号公報に開示された同一フレーム画像内の自己合同位置探索を利用した超解像度変換処理を用いる場合には、中解像度フレームの探索領域の各画素の誤差を比較して最小となる第1の画素位置を算出し、第1の画素位置及びこの第1の誤差、第1の画素の周辺の第2の画素位置及びこの第2の誤差に基づいて、探索領域のなかで誤差が最小となる位置を小数精度で算出する。そして、この位置を終点及び注目画素を始点とする小数精度ベクトルを算出し、小数精度ベクトルを用いて、探索領域に含まれない画面上の画素を終点とする、小数精度ベクトルの外挿ベクトルを算出する。そして、小数精度ベクトル、外挿ベクトル及び画像信号から取得された画素値に基づいて、画像信号に含まれる画素数よりも多い画素数の高解像度画像の画素値を算出する。超解像度変換処理部133は、このような処理を行うことにより、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する。   In addition, when using the super-resolution conversion process using self-congruent position search in the same frame image disclosed in Japanese Patent Application Laid-Open No. 2008-98803, the error of each pixel in the search area of the medium resolution frame is compared. The minimum first pixel position is calculated, and based on the first pixel position and the first error, the second pixel position around the first pixel, and the second error, The position where the error is minimized is calculated with decimal precision. Then, a decimal precision vector with this position as the end point and the target pixel as the start point is calculated, and an extrapolation vector of the decimal precision vector with the pixel on the screen not included in the search region as the end point is calculated using the decimal precision vector. calculate. Then, based on the decimal precision vector, the extrapolation vector, and the pixel value acquired from the image signal, the pixel value of the high-resolution image having a larger number of pixels than the number of pixels included in the image signal is calculated. By performing such processing, the super-resolution conversion processing unit 133 estimates the original pixel value from the low-resolution image signal and increases the number of pixels, thereby restoring the high-resolution image signal.

また、特開2000−188680号公報に開示された複数フレーム画像間でのマッピングを利用した超解像度変換処理を用いることもできる。   Also, a super-resolution conversion process using mapping between a plurality of frame images disclosed in Japanese Patent Laid-Open No. 2000-188680 can be used.

ただし、超解像度変換処理部132における超解像度変換処理の手法は、上記に限定されるものではなく、低解像度の画像信号から本来の画素値を推定して画素を増やすことにより、高解像度の画像信号を復元する処理であれば、あらゆる手法を適用することができる。   However, the method of the super resolution conversion processing in the super resolution conversion processing unit 132 is not limited to the above, and a high resolution image is obtained by estimating the original pixel value from the low resolution image signal and increasing the number of pixels. Any technique can be applied as long as the process restores the signal.

また、超解像度変換処理部132は、前処理部131がノイズリダクション処理等を行った後の画像信号を受け取ると、設定された映像モードに応じた超解像度変換処理を行う。具体的には、例えば後述するEEPROMメモリ20から映像モード値に対応する超解像度パラメータを超解像度変換処理部132が取得する。   When the pre-processing unit 131 receives an image signal after the noise reduction processing or the like is performed, the super-resolution conversion processing unit 132 performs super-resolution conversion processing according to the set video mode. Specifically, for example, the super-resolution conversion processing unit 132 acquires a super-resolution parameter corresponding to the video mode value from the EEPROM memory 20 described later.

そして、超解像度変換処理部132は、取得した映像モード値を参照して、その映像モード値に対応する超解像度パラメータを取得する。   Then, the super resolution conversion processing unit 132 refers to the acquired video mode value and acquires a super resolution parameter corresponding to the video mode value.

図5は、EEPROMメモリ20が記憶するパラメータの例を示す図である。図5に示すように、EEPROMメモリ20には、映像モード値と、映像モードと、超解像度パラメータとが対応付けて記憶されている。   FIG. 5 is a diagram illustrating an example of parameters stored in the EEPROM memory 20. As shown in FIG. 5, the EEPROM memory 20 stores video mode values, video modes, and super-resolution parameters in association with each other.

ここで、超解像度パラメータとは、超解像度変換処理の強さを数値で表現したものである。例えば、画素間に挿入する高周波成分の画素数、挿入対象となる画素に対する高周波成分の画素の割合が高い、すなわち超解像度パラメータの数値が大きいほど鮮鋭化のゲインが高く、超解像度変換処理が強くなることを示すものであり、超解像度処理の手法に応じて適宜設定することができる。図5に示す超解像度パラメータは、全ての画素に対して超解像度処理を行う場合を100として、全体の画素数に対して画素間に挿入する高周波成分の画素の割合を示している。このように、超解像度処理を行う指標をパラメータ形式で記憶することによって、超解像度処理の基準に仕様変更が生じた場合であっても、容易にかつ迅速にその仕様変更に対応することができる。   Here, the super resolution parameter is a numerical expression of the strength of the super resolution conversion process. For example, the number of high-frequency component pixels to be inserted between pixels and the ratio of high-frequency component pixels to the pixel to be inserted is high, that is, the larger the numerical value of the super-resolution parameter, the higher the sharpening gain and the stronger the super-resolution conversion processing. This can be appropriately set according to the super-resolution processing method. The super-resolution parameter shown in FIG. 5 indicates the ratio of high-frequency component pixels inserted between pixels with respect to the total number of pixels, where 100 is the case where super-resolution processing is performed on all pixels. As described above, by storing the index for performing the super-resolution processing in the parameter format, even if the specification change occurs in the super-resolution processing standard, it is possible to easily and quickly cope with the specification change. .

また、超解像度変換処理部132は、取得した超解像度パラメータに従って、上述した超解像度処理を行い、超解像度処理を行った画像信号を後述する後処理部133に出力する。   The super-resolution conversion processing unit 132 performs the above-described super-resolution processing according to the acquired super-resolution parameter, and outputs the image signal subjected to the super-resolution processing to a post-processing unit 133 described later.

具体的には、超解像度変換処理部132は、例えば、前処理部131から受け取った映像モード値が「1」(あざやか)である場合には、図5に示すように、超解像度パラメータとして「80」を取得し、取得したパラメータに従って、上述した超解像度処理を行う。   Specifically, for example, when the video mode value received from the pre-processing unit 131 is “1” (bright), the super-resolution conversion processing unit 132 uses “1” as a super-resolution parameter as shown in FIG. 80 "is acquired, and the above-described super-resolution processing is performed according to the acquired parameters.

図3に戻り、後処理部133は、超解像度変換処理部132から入力される画像信号に対し、ガンマ補正やホワイトバランス調整等の画像補正処理(以下、後処理と呼ぶ。)を施し、動画改善処理部14に出力する。続いて、図1に戻り、動画改善部14について説明する。   Returning to FIG. 3, the post-processing unit 133 performs image correction processing (hereinafter referred to as post-processing) such as gamma correction and white balance adjustment on the image signal input from the super-resolution conversion processing unit 132, and a moving image. Output to the improvement processing unit 14. Next, returning to FIG. 1, the moving image improving unit 14 will be described.

動画改善処理部14は、後処理部133から受け取った画像信号に対して、倍速処理を行う。具体的には、60fps(Frame Per Second)で送信される映像信号を120fpsにフレームレート変換する処理を行うことにより、横、縦、斜め方向や回転する被写体など動きのある部分の映像ブレを低減し、ノイズも効果的に抑えて、流れるテロップや動きの速いスポーツシーンがくっきりと表示される。そして、フレームレート変換された画像信号を表示処理部15に出力する。   The moving image improvement processing unit 14 performs double speed processing on the image signal received from the post-processing unit 133. Specifically, by performing processing to convert the frame rate of a video signal transmitted at 60 fps (Frame Per Second) to 120 fps, video blurring in moving parts such as horizontal, vertical, diagonal directions and rotating subjects is reduced. In addition, noise is also effectively suppressed, and flowing telop and fast-moving sports scenes are clearly displayed. The frame rate converted image signal is output to the display processing unit 15.

なお、補間処理の方法としては、特開2008−35404号公報に記載されたブロックマッチング法による動きベクトル検出に基づいた補間生成処理方法等、一般的に行われているフレーム画像の補間方法に従って補間フレーム画像を生成し、補間することも可能である。さらに、補間フレーム画像の枚数についても任意に定めることができる。   As a method of interpolation processing, interpolation is performed in accordance with a generally performed frame image interpolation method such as an interpolation generation processing method based on motion vector detection by a block matching method described in Japanese Patent Application Laid-Open No. 2008-35404. It is also possible to generate and interpolate frame images. Furthermore, the number of interpolated frame images can be arbitrarily determined.

表示処理部15は、画像信号を表示部16に出力するためのドライバ等から構成され、動画改善処理部14から受け取った画像信号を表示部16に表示させる。   The display processing unit 15 includes a driver or the like for outputting an image signal to the display unit 16, and causes the display unit 16 to display the image signal received from the moving image improvement processing unit 14.

表示部16は、LCD(Liquid Crystal Display)、プラズマパネル、SED(Surface-conduction Electron-emitter Display)パネル等のディスプレイから構成され、表示処理部15からの制御を受けた画像信号を表示する。   The display unit 16 includes a display such as an LCD (Liquid Crystal Display), a plasma panel, and an SED (Surface-conduction Electron-emitter Display) panel, and displays an image signal controlled by the display processing unit 15.

操作部200は、リモートコントローラ等の遠隔操作装置から構成され、ユーザがモード選択ボタン(不図示)を押下した場合に、その選択信号をメイン処理部12に送信する。   The operation unit 200 is configured by a remote operation device such as a remote controller, and transmits a selection signal to the main processing unit 12 when a user presses a mode selection button (not shown).

続いて、上述した画像表示装置100で行われる実行処理について説明する。   Subsequently, an execution process performed in the above-described image display apparatus 100 will be described.

図6は、ユーザが映像モードを指定した場合の超解像度変換処理の処理手順を示すフローチャートである。   FIG. 6 is a flowchart showing a processing procedure of super-resolution conversion processing when the user designates a video mode.

本図に示すように、メイン処理部12の映像判断部122は、設定された映像モードを識別する(ステップS601)。   As shown in the figure, the video determination unit 122 of the main processing unit 12 identifies the set video mode (step S601).

続いて、映像判断部122は、設定された映像モードに対応する映像モード値をフラッシュメモリに記憶する(ステップS602)。なお、映像モードに対応する映像モード値はフラッシュメモリなどに事前に記憶されていてもよい。   Subsequently, the video determination unit 122 stores the video mode value corresponding to the set video mode in the flash memory (step S602). Note that the video mode value corresponding to the video mode may be stored in advance in a flash memory or the like.

その後、映像判断部122は、映像モード値を高解像度化部13に送信する(ステップS603)。   Thereafter, the video determination unit 122 transmits the video mode value to the resolution enhancement unit 13 (step S603).

高解像度化部13の前処理部131は、映像判断部122から映像モード値を受け取ると、インターレース・プログレッシブ変換処理やノイズリダクション処理等の画像処理を行い、映像モード値と共に、画像信号を超解像度変換処理部132に出力する(ステップS604)。なお、映像モード値に関する信号は、メイン処理部12(映像判断部122)から前処理部131を通らずに超解像度処理部132に入力されてもよい。   Upon receiving the video mode value from the video determination unit 122, the preprocessing unit 131 of the resolution increasing unit 13 performs image processing such as interlace / progressive conversion processing and noise reduction processing, and superimposes the image signal together with the video mode value. The data is output to the conversion processing unit 132 (step S604). A signal related to the video mode value may be input from the main processing unit 12 (video determination unit 122) to the super-resolution processing unit 132 without passing through the preprocessing unit 131.

超解像度変換処理部132は、前処理部131から映像モード値と画像信号を受け取ると、その映像モード値に対応する超解像度パラメータを、EEPROM20から取得する(ステップS605)。   Upon receiving the video mode value and the image signal from the preprocessing unit 131, the super resolution conversion processing unit 132 acquires a super resolution parameter corresponding to the video mode value from the EEPROM 20 (step S605).

そして、超解像度変換処理部132は、取得した超解像度パラメータに応じた超解像度レベルの超解像度処理を画像信号に対して行う(ステップS606)。その後、超解像度変換処理部132は、超解像度処理を行った画像信号を後処理部133に出力し、後処理部133は、ガンマ補正やホワイトバランス調整等の補正処理を行い、動画改善処理部14に出力する(ステップS607)。以降、表示処理部15を介して画像信号が表示部16に表示される。尚、動画改善処理部14に上述したような各種の補正処理の機能が含まれている場合には、後処理部133で補正処理を行わず、動画改善処理部14側で補正処理を行うこととしても良い。   Then, the super resolution conversion processing unit 132 performs super resolution processing at a super resolution level corresponding to the acquired super resolution parameter on the image signal (step S606). Thereafter, the super-resolution conversion processing unit 132 outputs the image signal subjected to the super-resolution processing to the post-processing unit 133, and the post-processing unit 133 performs correction processing such as gamma correction and white balance adjustment, and the moving image improvement processing unit 14 (step S607). Thereafter, the image signal is displayed on the display unit 16 via the display processing unit 15. When the moving image improvement processing unit 14 includes various correction processing functions as described above, the correction processing is not performed by the post-processing unit 133 but the correction processing is performed on the moving image improvement processing unit 14 side. It is also good.

このように、メイン処理部12の映像判断部122が、設定された映像モードに応じて超解像度変換処理を行うので、映像モードに応じて適切に超解像度処理された映像を提供できる。   As described above, the video determination unit 122 of the main processing unit 12 performs the super-resolution conversion process according to the set video mode, so that it is possible to provide a video that is appropriately super-resolution processed according to the video mode.

第1の実施形態では、明るく迫力ある映像の視聴を楽しみたい場合を想定して画質調整された映像モードが選択されている場合には、超解像度パラメータの値を高く設定し、超解像度処理を強めにかける一方、暗くした部屋で映画館のような雰囲気で映像の視聴を楽しみたい場合を想定して画質調整された映像モードが選択されている場合には、超解像度パラメータの値を小さく設定し、超解像度処理を弱めにする構成である。かかる構成では、鮮やかな映像に対して、超解像度化の効果をユーザが認識しやすく、より鮮明な映像を楽しむことが出来る。また、映画のように落ち着いた映像を楽しみたい映像モードでは、超解像度処理が弱めにかかるため、超解像度化によるノイズ強調を低減することが出来、より落ちついた映像を楽しむことができる。
なお、映像に対しては人間の嗜好があるため、本実施形態とは逆のパラメータの値を設定することも可能である。つまり、本実施形態でいう鮮やかモードにおいて、超解像度処理が弱めにかかるようにしてもよい。これによって、ノイズ成分が多い映像に対しては、ノイズ強調などを低減することができる。本実施形態でいう映画モードにおいて、超解像度パラメータの値を大きくしてもよい。これによって、高解像度な映像信号を受信している場合には、ノイズ強調の不具合が無い/少ないので、より鮮明な映像を映画モードにおいてユーザが楽しむことができる。
In the first embodiment, when a video mode whose image quality has been adjusted is selected assuming that the user wants to enjoy viewing bright and powerful video, the super resolution parameter value is set high and super resolution processing is performed. If a video mode with image quality adjustment is selected, assuming that you want to enjoy watching the movie in a darkened room, like a movie theater, set a small value for the super resolution parameter. However, the super resolution processing is weakened. With such a configuration, it is easy for the user to recognize the effect of super-resolution with respect to a vivid video, and a clearer video can be enjoyed. In addition, in a video mode where a user wants to enjoy a calm video like a movie, the super-resolution processing is weakened. Therefore, noise enhancement due to the super-resolution can be reduced, and a more calm video can be enjoyed.
Since the video has human preference, it is possible to set parameter values opposite to those in the present embodiment. In other words, in the vivid mode referred to in the present embodiment, the super-resolution process may be weakened. As a result, noise enhancement or the like can be reduced for an image with a lot of noise components. In the movie mode referred to in this embodiment, the value of the super resolution parameter may be increased. As a result, when a high-resolution video signal is received, there is no or little noise enhancement defect, so that the user can enjoy a clearer video in the movie mode.

(第2の実施の形態)
上述した第1の実施の形態においては、ユーザが、「あざやか」「映画」等のいくつかの映像モードから任意の映像モードを指定することによって、指定された映像モードに対応する超解像パラメータに応じた超解像度変換処理を行うこととした。しかし、ユーザにとっては、どの映像モードを指定すべきか判断が難しい場合も存在する。そこで、映像モードに代えて、映像信号に含まれる番組等の種類を示すコード(例えば、スポーツ番組であれば「1」、バラエティ番組であれば「2」、映画番組であれば「3」等。以下、番組ジャンルコードと呼ぶ。)に応じて自動的に超解像度変換処理を行う場合について説明する。
(Second Embodiment)
In the first embodiment described above, the user designates an arbitrary video mode from several video modes such as “Azakaya” and “Movie”, whereby the super-resolution parameter corresponding to the designated video mode. The super-resolution conversion process according to However, it may be difficult for the user to determine which video mode should be specified. Therefore, instead of the video mode, a code indicating the type of program included in the video signal (for example, “1” for a sports program, “2” for a variety program, “3” for a movie program, etc. Hereinafter, the case where the super-resolution conversion process is automatically performed according to the program genre code will be described.

第2の実施の形態における構成要素は第1の実施の形態における構成要素と同様の構成であるため、ブロック図を用いた説明は省略し、図7に示す処理手順に従って説明する。   Since the components in the second embodiment are the same as the components in the first embodiment, description using a block diagram will be omitted, and description will be made according to the processing procedure shown in FIG.

映像判断部122は、第1の実施の形態と同様の処理を行うほか、映像信号入力部11が受信した映像信号に含まれる番組ジャンルコードを識別し(ステップS701)、識別した番組ジャンルコードをフラッシュメモリ19に記憶する(ステップS702)。   In addition to performing the same processing as in the first embodiment, the video determination unit 122 identifies a program genre code included in the video signal received by the video signal input unit 11 (step S701), and identifies the identified program genre code. The data is stored in the flash memory 19 (step S702).

その後、映像判断部122は、識別した番組ジャンルコードを高解像度化部に送信し(ステップS703)、第1の実施の形態と同様の前処理を行う(ステップS704)。   Thereafter, the video determination unit 122 transmits the identified program genre code to the high resolution unit (step S703), and performs pre-processing similar to that of the first embodiment (step S704).

そして、超解像度変換処理部132は、前処理部131から受け取った番組ジャンルコードを受け取ると、その番組ジャンルコードに対応する超解像度パラメータを、EEPROM20から取得する(ステップS705)。   Then, when receiving the program genre code received from the preprocessing unit 131, the super resolution conversion processing unit 132 acquires the super resolution parameter corresponding to the program genre code from the EEPROM 20 (step S705).

そして、超解像度変換処理部132は、第1の実施の形態と同様に、超解像度パラメータに応じた超解像度レベルの超解像度処理等を行う(ステップS706、S707)。   Then, the super-resolution conversion processing unit 132 performs super-resolution processing at a super-resolution level corresponding to the super-resolution parameter, as in the first embodiment (steps S706 and S707).

このように、メイン処理部12の映像判断部122が番組ジャンルコードを識別し、識別した番組ジャンルコードに応じて超解像度変換処理を行うので、ユーザが映像モードの判断が困難な場合であっても、番組のジャンルに応じて適切に超解像度処理された映像を提供できる。   As described above, since the video determination unit 122 of the main processing unit 12 identifies the program genre code and performs the super-resolution conversion process according to the identified program genre code, it is difficult for the user to determine the video mode. However, it is possible to provide a video that has been appropriately super-resolution processed according to the genre of the program.

なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。   Note that the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.

例えば、映像モードが指定されていない場合(例えば、映像モードの指定手段が特に無いテレビなどの場合)には、映像判断部122が自動的に番組ジャンルコードを識別して超解像度変換処理を行う等、第1の実施形態と第1の実施形態における各処理とを組み合わせて実施することも可能である。また、設定された映像モードと番組ジャンルの両者の情報を組み合わせて超解像度処理のパラメータを設定してもよい。例えば、映像モードが「鮮やか」であって、番組ジャンルが「スポーツ」の場合と、映像モードが「鮮やか」であって、番組ジャンルが「映画」の場合とで、超解像度処理のパラメータを変更する構成も可能である。   For example, when the video mode is not specified (for example, in the case of a television or the like that does not particularly have a video mode specifying means), the video determination unit 122 automatically identifies the program genre code and performs the super-resolution conversion process. For example, the first embodiment and the processes in the first embodiment can be combined. Also, the super resolution processing parameters may be set by combining information of both the set video mode and the program genre. For example, when the video mode is “Vivid” and the program genre is “Sports”, and when the video mode is “Vivid” and the program genre is “Movies”, the parameters of the super-resolution processing are changed. It is also possible to configure.

また、本実施の形態では、本発明の画像処理装置を、表示部16、表示処理部15、音声出力部18および音声処理部17を有するデジタルTV等の画像表示装置100に適用した例をあげて説明したが、表示部16、表示処理部15、音声出力部18および音声処理部17を有さない、例えば、チューナやセットトップボックス等にも本発明の画像処理装置を適用することができる。   In this embodiment, an example in which the image processing apparatus of the present invention is applied to an image display apparatus 100 such as a digital TV having a display unit 16, a display processing unit 15, an audio output unit 18, and an audio processing unit 17 is given. As described above, the image processing apparatus of the present invention can be applied to, for example, a tuner, a set top box, or the like that does not include the display unit 16, the display processing unit 15, the audio output unit 18, and the audio processing unit 17. .

以上のように、本発明にかかる画像処理装置、画像処理方法は、映像信号を高解像度化する際に有用であり、特に、映像モードに応じて超解像度処理する技術に適している。   As described above, the image processing apparatus and the image processing method according to the present invention are useful for increasing the resolution of a video signal, and are particularly suitable for a technique for performing super-resolution processing according to a video mode.

100 画像表示装置
11 映像信号入力部
12 メイン処理部
13 高解像度化部
14 動画改善処理部
15 表示処理部
16 表示部
17 音声処理部
18 音声出力部
19 フラッシュメモリ
20 EEPROMメモリ
111 デジタル放送受信部
112 IPTV信号処理部
113 インターネット信号処理部
114 外部入力部
121 操作受信部
122 映像判断部
123 制御部
131 前処理部
132 超解像度変換処理部
133 後処理部
200 操作部(リモート・コントローラ)
1111 デジタルアンテナ
1112 デジタルチューナ
1113 デジタル信号復調部
1141 アナログアンテナ
1142 アナログチューナ
1143 外部入力信号処理部
DESCRIPTION OF SYMBOLS 100 Image display apparatus 11 Video signal input part 12 Main processing part 13 High resolution part 14 Movie improvement processing part 15 Display processing part 16 Display part 17 Audio | voice processing part 18 Audio | voice output part 19 Flash memory 20 EEPROM memory 111 Digital broadcast receiving part 112 IPTV signal processing unit 113 Internet signal processing unit 114 External input unit 121 Operation receiving unit 122 Video determination unit 123 Control unit 131 Preprocessing unit 132 Super-resolution conversion processing unit 133 Post processing unit 200 Operation unit (remote controller)
1111 Digital antenna 1112 Digital tuner 1113 Digital signal demodulator 1141 Analog antenna 1142 Analog tuner 1143 External input signal processor

Claims (10)

第1解像度の映像信号が入力され、
前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、
前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、
前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、
を備え、
前記レベル記憶手段は、所定の映像モードよりも明るく視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも強くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、
ことを特徴とする画像処理装置。
A first resolution video signal is input,
Level storage means for storing an image quality processing level indicating a strength of image quality processing including a sharpening process for a video signal of the first resolution and a video mode in association with each other;
Video determining means for determining the video mode and determining the image quality processing level according to the determined video mode;
Image quality processing means for performing the image quality processing at the determined image quality processing level for the first resolution video signal;
With
The level storage means, in the case of a video mode for viewing brighter than a predetermined video mode, the video mode and the image quality so that the strength of the image quality processing is stronger than that of the predetermined video mode. Store processing levels in association with each other.
An image processing apparatus.
前記画質処理は、前記第1解像度よりも高い第2解像度の映像信号を生成する解像度変換処理を含み、
前記レベル記憶手段は、所定の映像モードよりも明るく視聴を行うための映像モードである場合には前記解像度変換処理の強さを前記所定の映像モードよりも強くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、
ことを特徴とする請求項1に記載の画像処理装置。
The image quality processing includes resolution conversion processing for generating a video signal having a second resolution higher than the first resolution,
When the level storage means is a video mode for viewing brighter than a predetermined video mode, the level storage means and the video mode and the video mode so as to make the resolution conversion process stronger than the predetermined video mode. Store the image quality processing level in association with each other.
The image processing apparatus according to claim 1.
第1解像度の映像信号が入力され、
前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、
前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、
前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、
を備え、
前記レベル記憶手段は、所定の映像モードよりも暗くした状況で視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、
ことを特徴とする画像処理装置。
A first resolution video signal is input,
Level storage means for storing an image quality processing level indicating a strength of image quality processing including a sharpening process for a video signal of the first resolution and a video mode in association with each other;
Video determining means for determining the video mode and determining the image quality processing level according to the determined video mode;
Image quality processing means for performing the image quality processing at the determined image quality processing level for the first resolution video signal;
With
The level storage means is configured to reduce the strength of the image quality processing to be lower than that of the predetermined video mode when the video mode is for viewing in a darker state than the predetermined video mode. And the image quality processing level are stored in association with each other.
An image processing apparatus.
前記画質処理は、前記第1解像度よりも高い第2解像度の映像信号を生成する解像度変換処理を含み、
前記レベル記憶手段は、所定の映像モードよりも暗くした状況で視聴を行うための映像モードである場合には前記解像度変換の強さを前記所定の映像モードよりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、
ことを特徴とする請求項3に記載の画像処理装置。
The image quality processing includes resolution conversion processing for generating a video signal having a second resolution higher than the first resolution,
The level storage means is configured to reduce the strength of the resolution conversion to be lower than that of the predetermined video mode when the video mode is for viewing in a situation darker than the predetermined video mode. And the image quality processing level are stored in association with each other.
The image processing apparatus according to claim 3.
前記解像度変換処理は超解像処理であり、
前記画質処理レベルは、前記超解像処理における、画素間に挿入する画素における高周波成分の画素の割合を示す、
ことを特徴とする請求項2又は4に記載の画像処理装置。
The resolution conversion process is a super-resolution process,
The image quality processing level indicates a ratio of high-frequency component pixels in pixels inserted between pixels in the super-resolution processing.
The image processing apparatus according to claim 2, wherein the image processing apparatus is an image processing apparatus.
前記第2解像度の映像信号を表示する表示手段、
をさらに備えたことを特徴とする請求項2、4、5のいずれか一項に記載の画像処理装置。
Display means for displaying the video signal of the second resolution;
The image processing apparatus according to claim 2, further comprising:
ユーザの操作により、前記映像モードを指定する映像モード指定手段を更に備え、
前記映像判断手段は、指定された前記映像モードに応じて前記画質処理レベルを決定する、
ことを特徴とする請求項1乃至6のいずれか一項に記載の画像処理装置。
A video mode designating unit for designating the video mode by a user operation;
The image determination means determines the image quality processing level according to the specified image mode;
The image processing apparatus according to claim 1, wherein the image processing apparatus is an image processing apparatus.
第1解像度の映像信号が入力され、
前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段と、
前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断手段と、
前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理手段と、
を備え、
前記レベル記憶手段は、所定の映像モードよりも映画の視聴に適した映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する、
ことを特徴とする画像処理装置。
A first resolution video signal is input,
Level storage means for storing an image quality processing level indicating a strength of image quality processing including a sharpening process for a video signal of the first resolution and a video mode in association with each other;
Video determining means for determining the video mode and determining the image quality processing level according to the determined video mode;
Image quality processing means for performing the image quality processing at the determined image quality processing level for the first resolution video signal;
With
The level storage means, when the video mode is more suitable for movie viewing than the predetermined video mode, the video mode and the image quality so as to make the strength of the image quality processing weaker than the predetermined video mode. Store processing levels in association with each other.
An image processing apparatus.
第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段を備え、前記レベル記憶手段は、所定の映像モードよりも明るく視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の映像モードよりも強くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する画像処理装置で行われる画像処理方法であって、
映像判断手段が、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断ステップと、
画質処理手段が、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理ステップと、
を含むことを特徴とする画像処理方法。
Level storage means for receiving an image signal of the first resolution and storing an image quality processing level indicating the strength of image quality processing including a sharpening process for the image signal of the first resolution in association with the image mode; The level storage means is configured to make the image mode and the image quality processing so that the intensity of the image quality processing is stronger than that of the predetermined image mode when the image mode is for viewing brighter than the predetermined image mode. An image processing method performed by an image processing apparatus that stores levels in association with each other,
A video determining step for determining the video mode and determining the image quality processing level according to the determined video mode;
An image quality processing step in which the image quality processing means performs the image quality processing at the determined image quality processing level on the video signal of the first resolution;
An image processing method comprising:
第1解像度の映像信号が入力され、前記第1解像度の映像信号に対する鮮鋭化処理を含む画質処理の強さを示す画質処理レベルと映像モードとを対応付けて記憶するレベル記憶手段を備え、前記レベル記憶手段は、所定の映像モードよりも暗くした状況で視聴を行うための映像モードである場合には前記画質処理の強さを前記所定の状態よりも弱くするように、前記映像モードと前記画質処理レベルとを対応付けて記憶する画像処理装置で行われる画像処理方法であって、
映像判断手段が、前記映像モードを判定し、判定した前記映像モードに応じて前記画質処理レベルを決定する映像判断ステップと、
画質処理手段が、前記第1解像度の映像信号に対して、決定した前記画質処理レベルの前記画質処理を行う画質処理ステップと、
を含むことを特徴とする画像処理方法。
Level storage means for receiving an image signal of the first resolution and storing an image quality processing level indicating the strength of image quality processing including a sharpening process for the image signal of the first resolution in association with the image mode; The level storage means, when the video mode is for viewing in a situation darker than the predetermined video mode, the video mode and the video mode so that the strength of the image quality processing is weaker than the predetermined state. An image processing method performed by an image processing apparatus that stores an image quality processing level in association with each other,
A video determining step for determining the video mode and determining the image quality processing level according to the determined video mode;
An image quality processing step in which the image quality processing means performs the image quality processing at the determined image quality processing level on the video signal of the first resolution;
An image processing method comprising:
JP2010000216A 2010-01-04 2010-01-04 Image processing apparatus and image processing method Active JP5075923B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010000216A JP5075923B2 (en) 2010-01-04 2010-01-04 Image processing apparatus and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010000216A JP5075923B2 (en) 2010-01-04 2010-01-04 Image processing apparatus and image processing method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2008201200A Division JP2010041336A (en) 2008-08-04 2008-08-04 Image processing unit and image processing method

Publications (2)

Publication Number Publication Date
JP2010088133A true JP2010088133A (en) 2010-04-15
JP5075923B2 JP5075923B2 (en) 2012-11-21

Family

ID=42251549

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010000216A Active JP5075923B2 (en) 2010-01-04 2010-01-04 Image processing apparatus and image processing method

Country Status (1)

Country Link
JP (1) JP5075923B2 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH113062A (en) * 1997-06-10 1999-01-06 Canon Inc Picture processor
JP2002044604A (en) * 2000-07-21 2002-02-08 Sharp Corp Information compression recorder
JP2007140436A (en) * 2005-10-20 2007-06-07 Sharp Corp Liquid crystal display apparatus
JP2008067110A (en) * 2006-09-07 2008-03-21 Toshiba Corp Generation device for superresolution image
JP2008146190A (en) * 2006-12-07 2008-06-26 Seiko Epson Corp Resolution conversion device, resolution conversion method, resolution conversion program, and image display system
JP2008167102A (en) * 2006-12-28 2008-07-17 Hitachi Ltd Video processor and video display device provided with same

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH113062A (en) * 1997-06-10 1999-01-06 Canon Inc Picture processor
JP2002044604A (en) * 2000-07-21 2002-02-08 Sharp Corp Information compression recorder
JP2007140436A (en) * 2005-10-20 2007-06-07 Sharp Corp Liquid crystal display apparatus
JP2008067110A (en) * 2006-09-07 2008-03-21 Toshiba Corp Generation device for superresolution image
JP2008146190A (en) * 2006-12-07 2008-06-26 Seiko Epson Corp Resolution conversion device, resolution conversion method, resolution conversion program, and image display system
JP2008167102A (en) * 2006-12-28 2008-07-17 Hitachi Ltd Video processor and video display device provided with same

Also Published As

Publication number Publication date
JP5075923B2 (en) 2012-11-21

Similar Documents

Publication Publication Date Title
JP2010041336A (en) Image processing unit and image processing method
JP4444354B2 (en) Image processing apparatus and image processing method
JP4521468B1 (en) Image processing apparatus and image processing method
US8581906B2 (en) Image processing apparatus and image processing method
JP4686594B2 (en) Image processing apparatus and image processing method
JP4528857B2 (en) Image processing apparatus and image processing method
JP4427592B2 (en) Image processing apparatus and image processing method
JP5178579B2 (en) Image processing device
JP4543116B1 (en) Image processing apparatus and image processing method
JP2011066542A (en) Apparatus and method for processing video
JP5172769B2 (en) Video device, video processing method, and image quality mode setting method in this device
JP5075923B2 (en) Image processing apparatus and image processing method
US20100215286A1 (en) Image processing apparatus and image processing method
JP4991884B2 (en) Image processing apparatus and image processing method
JP4897036B2 (en) Image processing apparatus and image processing method
JP4869302B2 (en) Image processing apparatus and image processing method
JP2010039135A (en) Image processor and image processing method
JP5023092B2 (en) Image processing apparatus and image processing method
JP2010251818A (en) Video output device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100104

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111129

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120731

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120827

R151 Written notification of patent or utility model registration

Ref document number: 5075923

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150831

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

Free format text: JAPANESE INTERMEDIATE CODE: R313121

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250