JP4048835B2 - Information processing apparatus, information processing method, recording medium, and program - Google Patents

Description

【００６６】
動きクラス検出部４５は、第３のタップ選択部４３で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）より、主に、動きの程度を表すための動きクラスを検出し、そのクラス情報を出力する。
【００６７】
この動きクラス検出部４５では、第３のタップ選択部４３で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）ｍｉおよびｎｉからフレーム間差分が算出され、更に、その差分の絶対値の平均値に対してしきい値処理が行われて、動きの指標である動きクラスが検出される。すなわち、動きクラス検出部４５は、式（２）によって、差分の絶対値の平均値ＡＶを算出する。第３のタップ選択部４３で、例えば、上述したように、１２個のＳＤ画素データｍ１乃至ｍ６およびｎ１乃至ｎ６が取り出されるとき、式（２）におけるＮｂは６である。
【００６８】
【数２】

【００６９】
そして、動きクラス検出部４５では、上述したように算出された平均値ＡＶが、１個または複数個のしきい値と比較されて、動きクラスのクラス情報ＭＶが得られる。例えば、３個のしきい値ｔｈ１，ｔｈ２，およびｔｈ３（ｔｈ１＜ｔｈ２＜ｔｈ３）が用意され、４つの動きクラスが検出される場合、ＡＶ≦ｔｈ１のときはＭＶ＝０、ｔｈ１＜ＡＶ≦ｔｈ２のときはＭＶ＝１、ｔｈ２＜ＡＶ≦ｔｈ３のときはＭＶ＝２、ｔｈ３＜ＡＶのときはＭＶ＝３とされる。
【００７０】
クラス合成部４６は、空間クラス検出部４４より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出部４５より出力される動きクラスのクラス情報ＭＶに基づき、作成すべきＨＤ信号（１０５０ｉ信号）の画素データ（注目位置の画素データ）が属するクラスを示すクラスコードＣＬを得る。
【００７１】
このクラス合成部４６では、式（３）によって、クラスコードＣＬの演算が行われる。なお、式（３）において、Ｎａは空間クラスタップのデータ（ＳＤ画素データ）の個数、ＰはＡＤＲＣにおける再量子化ビット数を示している。
【００７２】
【数３】

【００７３】
係数メモリ５３は、後述する推定予測演算部４７で使用される推定式で用いられる複数の係数データＷｉを、クラス毎に格納するものである。この係数データＷｉは、ＳＤ信号（５２５ｉ信号）を、ＨＤ信号（１０５０ｉ信号）に変換するための情報である。係数メモリ５３には、クラス合成部４６より出力されるクラスコードＣＬが、読み出しアドレス情報として供給され、係数メモリ５３からは、クラスコードＣＬに対応した推定式の係数データＷｉ（ｉ＝１乃至ｎ）が読み出され、推定予測演算部４７に供給される。
【００７４】
また、持ち運び部１５は、情報メモリバンク５１を有している。後述する推定予測演算部４７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ５３より読み出される係数データＷｉとから、式（４）の推定式によって、作成すべきＨＤ画素データｙが演算される。式（４）のｎは、第１のタップ選択部４１で選択される予測タップの数を表している。
【００７５】
ここで、タップ選択部４１で選択的に取り出された予測タップのｎ個の画素データの位置は、ＨＤ信号における注目位置に対して、空間方向（水平、垂直の方向）および時間方向に亘っている。
【００７６】
【数４】

【００７７】
そして、推定式の係数データＷｉ（ｉ＝１乃至ｎ）は、式（５）に示すように、パラメータｓ、およびｚを含む生成式によって生成される。情報メモリバンク５１は、この生成式における係数データである係数種データｗ₁₀乃至ｗ_n9を、クラス毎に格納する。この係数種データの生成方法については後述する。
【００７８】
【数５】

【００７９】
上述したように、５２５ｉ信号を１０５０ｉ信号に変換する場合、奇数、および偶数のそれぞれのフィールドにおいて、５２５ｉ信号の１画素に対応して１０５０ｉ信号の４画素を得る必要がある。この場合、奇数、偶数のそれぞれのフィールドにおける１０５０ｉ信号を構成する２×２の単位画素ブロック内の４画素は、それぞれ中心予測タップに対して異なる位相ずれを持っている。
【００８０】
図４は、奇数フィールドにおける１０５０ｉ信号を構成する２×２の単位画素ブロック内の４画素ＨＤ１乃至ＨＤ４における中心予測タップＳＤ₀からの位相ずれを示している。ここで、ＨＤ１乃至ＨＤ４の位置は、それぞれ、ＳＤ₀の位置から水平方向にｋ１乃至ｋ４、垂直方向にｍ１乃至ｍ４だけずれている。
【００８１】
図５は、偶数フィールドにおける１０５０ｉ信号を構成する２×２の単位画素ブロック内の４画素ＨＤ１′乃至ＨＤ４′における中心予測タップＳＤ₀′からの位相ずれを示している。ここで、ＨＤ１′乃至ＨＤ４′の位置は、それぞれ、ＳＤ₀′の位置から水平方向にｋ１′乃至ｋ４′、垂直方向にｍ１′乃至ｍ４′だけずれている。
【００８２】
従って、情報メモリバンク５１には、クラスおよび出力画素（ＨＤ１乃至ＨＤ４，ＨＤ１′乃至ＨＤ４′）の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9が格納されている。
【００８３】
係数生成部５２は、各クラスの係数種データ、並びに、パラメータｓ、およびｚの値を用い、式（５）によって、クラス毎に、パラメータｓ、およびｚの値に対応した推定式の係数データＷｉ（ｉ＝１乃至ｎ）を生成する。係数生成部５２には、情報メモリバンク５１より、上述した各クラスの係数種データがロードされる。また、係数生成部５２には、システムコントローラ１２より、パラメータｓ、およびｚの値が供給される。
【００８４】
係数生成部５２で生成される各クラスの係数データＷｉ（ｉ＝１乃至ｎ）は、上述した係数メモリ５３に格納される。この係数生成部５２における各クラスの係数データＷｉの生成は、例えば、各垂直ブランキング期間で行われる。これにより、ユーザのリモートコマンダ２の操作によってパラメータｓ、およびｚの値が変更されても、係数メモリ５３に格納される各クラスの係数データＷｉを、そのパラメータｓ、およびｚの値に対応したものに即座に変更することができ、ユーザによる解像度の調整がスムーズに行われる。
【００８５】
正規化係数演算部５４は、係数生成部５２で求められた係数データＷｉ（ｉ＝１乃至ｎ）に対応した正規化係数Ｓを、式（６）によって演算する。正規化係数メモリ５５は、この正規化係数Ｓを格納する。正規化係数メモリ５５には、上述したクラス合成部４６より出力されるクラスコードＣＬが、読み出しアドレス情報として供給され、正規化係数メモリ５５からは、クラスコードＣＬに対応した正規化係数Ｓが読み出され、後述する正規化演算部４８に供給される。
【００８６】
【数６】

【００８７】
推定予測演算部４７は、第１のタップ選択部４１で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ５３より読み出される係数データＷｉとから、式（４）の推定式によって、作成すべきＨＤ信号の画素データ（注目位置の画素データ）を演算する。
【００８８】
上述したように、ＳＤ信号（５２５ｉ信号）をＨＤ信号（１０５０ｉ信号）に変換する際には、ＳＤ信号の１画素に対してＨＤ信号の４画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）を得る必要があることから、この推定予測演算部４７では、ＨＤ信号を構成する２×２の単位画素ブロック毎に、画素データが生成される。すなわち、この推定予測演算部４７には、第１のタップ選択部４１より単位画素ブロック内の４画素（注目画素）に対応した予測タップのデータｘｉと、係数メモリ５３よりその単位画素ブロックを構成する４画素に対応した係数データＷｉとが供給され、単位画素ブロックを構成する４画素のデータｙ₁乃至ｙ₄は、それぞれ個別に、上述した式（４）の推定式で演算される。
【００８９】
正規化演算部４８は、推定予測演算部４７より順次出力される４画素のデータｙ₁乃至ｙ₄を、正規化係数メモリ５５より読み出される、それぞれの演算に使用された係数データＷｉ（ｉ＝１乃至ｎ）に対応した正規化係数Ｓで除算して正規化する。上述したように、係数生成部５２は、推定式の係数データＷｉを求めるものであるが、求められる係数データは丸め誤差を含み、係数データＷｉ（ｉ＝１乃至ｎ）の総和が１．０になることは保証されない。そのため、推定予測演算部４７で演算される各画素のデータｙ₁乃至ｙ₄は、丸め誤差によってレベル変動したものとなる。従って、正規化演算部４８で正規化することで、そのレベル変動を除去することができる。
【００９０】
後処理部４９は、正規化演算部４８で正規化されて順次供給される単位画素ブロック内の４画素のデータｙ₁′乃至ｙ₄′を線順次化して、１０５０ｉ信号のフォーマットで出力する。
【００９１】
履歴情報記憶部５０は、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値の履歴情報を格納する。
【００９２】
図６は、履歴情報記憶部５０の更に詳細な構成を示すブロック図である。履歴情報記憶部５０は、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のそれぞれの度数分布の情報を格納する度数分布メモリ９１を備えている。度数分布メモリ９１には、パラメータｓ、およびｚの各値における度数が平均化されて格納される。この度数分布メモリ９１は、例えば、不揮発性のメモリで構成され、テレビジョン受信装置１の電源がオフの状態となっても、その記憶内容が保持されるようになされている。
【００９３】
そのために、履歴情報記憶部５０は、更に、パラメータｓ、およびｚの値の係数生成部５２への入力回数をカウントするカウンタ９２と、このカウンタ９２のカウント値に基づいて、パラメータｓ、およびｚの値における度数を平均化する平均化部９３とを備えている。
【００９４】
カウンタ９２のカウントアップは、システムコントローラ１２の制御によって行われる。ユーザは、図７および図８を用いて後述するように、調整画面上でパラメータｓ、およびｚの値を調整し得るが、カウンタ９２はその調整が終了した時点でカウントアップされる。
【００９５】
平均化部９３は、入力されたパラメータｓ、およびｚの値、カウンタ９２のカウント値および度数分布メモリ９１に格納されている前回までのパラメータｓ、およびｚの各値における度数の平均値を用いて、パラメータｓ、およびｚの各値における新たな度数の平均値を求める。
【００９６】
この場合、入力回数がＭ、つまりカウンタ９２のカウント値がＭとなるとき、入力されるパラメータの値における度数に関しては、前回までのそのパラメータにおける度数の平均値をｎ_M-1とするとき、新たな度数の平均値ｎ_Mは、次の式（７）の演算により求められる。一方、入力回数がＭであるとき、入力されるパラメータの値とは異なるパラメータの値における度数に関しては、前回までのそのパラメータにおける度数の平均値をｎ_M-1とするとき、新たな度数の平均値ｎ_Mは、次の式（８）の演算により求められる。
【００９７】
【数７】

【００９８】
【数８】

【００９９】
このように、度数分布メモリ９１に格納されるパラメータｓ、およびｚの値の度数分布の情報として、パラメータｓ、およびｚの各値における度数の平均値を用いることで、オーバーフローを防止することができる。
【０１００】
なお、パラメータｓ、およびｚの各値における度数の平均値を用いる変わりに、パラメータｓ、およびｚの各値における度数を、最大度数によって正規化した値を用いるようにしても、同様にオーバーフローを防止できる。
【０１０１】
また、履歴情報記憶部５０は、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のうち、所定数、例えば１０個の最新のパラメータｓ、およびｚの値を格納する経時変化メモリ９４を有している。この経時変化メモリ９４は、例えば、不揮発性のメモリで構成され、テレビジョン受信装置１の電源がオフの状態でもその記憶内容が保持されるようになされている。
【０１０２】
経時変化メモリ９４への書き込み動作は、システムコントローラ１２の制御によって行われる。図７および図８を用いて後述するように、ユーザは、調整画面上でパラメータｓ、およびｚの値を調整することができるが、経時変化メモリ９４には、その調整が終了した時点で、新たなパラメータｓ、およびｚの値が書き込まれる。この書き込みに伴って、格納されているパラメータｓ、およびｚの値の個数が所定数を越えるときは、最も古いパラメータｓ、およびｚの値が削除される。
【０１０３】
また、テレビジョン受信装置１において、持ち運び部１５、もしくは、持ち運び部１５を含む、例えば、基板などのユニットは、装脱可能に構成されているので、持ち運び部１５を外部に持ち出して利用したり、持ち運び部１５を交換したりすることによって、テレビジョン受信装置１の機能のバージョンアップを行うこと等が可能になっている。これにより、履歴情報記憶部５０は持ち運び部１５とともに装脱されることとなる。
【０１０４】
なお、持ち運び部１５全体を着脱可能に構成するのではなく、履歴情報記憶部５０、あるいは度数分布メモリ９１、経時変化メモリ９４のみが装脱可能に構成されていてもよい。
【０１０５】
図１に戻り、再び、テレビジョン受信装置１の構成について説明する。
【０１０６】
ＯＳＤ（On Screen Display）処理部１６は、表示部１８の画面上に文字図形などの表示を行うための表示信号ＳＣＨを発生する。合成部１７は、ＯＳＤ処理部１６から出力される表示信号ＳＣＨを、持ち運び部１５から出力されるＨＤ信号に合成して、表示部１８に供給する。表示部１８は、例えば、ＣＲＴ（cathode-ray tube）ディスプレイ、あるいはＬＣＤ（liquid crystal display）等のフラットパネルディスプレイで構成され、持ち運び部１５より出力されるＨＤ信号による画像と、必要に応じて合成部１７により合成された表示信号ＳＣＨとを表示する。
【０１０７】
また、システムコントローラ１２には、必要に応じてドライブ１９が接続され、磁気ディスク２１、光ディスク２２、光磁気ディスク２３、あるいは、半導体メモリ２４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じてシステムコントローラ１２にインストールされる。
【０１０８】
図１のテレビジョン受信装置１の動作について説明する。
【０１０９】
システムコントローラ１２は、リモートコマンダ２を用いて入力されるユーザの操作に基づいて、チューナ１３を制御する。チューナ１３は、システムコントローラ１２の制御に従って、アンテナ３で受信された放送信号に対して、選局処理、中間周波増幅処理、および検波処理などを行い、バッファメモリ１４に出力する。
【０１１０】
チューナ１３より出力されるＳＤ信号（５２５ｉ信号）は、バッファメモリ１４に供給されて、一時的に保存される。そして、バッファメモリ１４に一時的に記憶されたＳＤ信号は、持ち運び部１５に供給され、システムコントローラ１２から供給される制御信号を基に、ＨＤ信号（１０５０ｉ信号）に変換される。
【０１１１】
すなわち、持ち運び部１５では、ＳＤ信号を構成する画素データ（以下、「ＳＤ画素データ」と称する）から、ＨＤ信号を構成する画素データ（以下、「ＨＤ画素データ」と称する）を得ることができる。持ち運び部１５より出力されるＨＤ信号は、必要に応じて、合成部１７において、ＯＳＤ処理部１６から出力される表示信号ＳＣＨによる文字図形などと合成されて、表示部１８に供給され、表示部１８の画面上に、画像が表示される。
【０１１２】
また、ユーザは、リモートコマンダ２の操作によって、表示部１８の画面上に表示される画像の空間方向および時間方向の解像度を調整することができる。持ち運び部１５では、推定式によって、ＨＤ画素データが算出されるが、この推定式の係数データとして、ユーザのリモートコマンダ２の操作によって調整された、空間方向、および時間方向の解像度を定めるパラメータｓ、およびｚに対応したものが、これらパラメータｓ、およびｚを含む生成式によって生成されて使用される。これにより、持ち運び部１５から出力されるＨＤ信号による画像の空間方向、および時間方向の解像度は、調整されたパラメータｓ、およびｚに対応したものとなる。
【０１１３】
図７は、パラメータｓ、およびｚを調整するためのユーザインターフェースの一例を示している。調整時には、表示部１８に、パラメータｓ、およびｚの調整位置を、図中星印のアイコン７２で示した調整画面７１が、ＯＳＤ表示される。また、リモートコマンダ２は、ユーザ操作手段としてのジョイスティック８１を備えている。
【０１１４】
ユーザは、ジョイスティック８１を操作することで、調整画面７１上でアイコン７２の位置を動かすことができ、空間方向、時間方向の解像度を決定するパラメータｓ、およびｚの値を調整することができる。
【０１１５】
図８に、図７の調整画面７１の部分を拡大して示す。アイコン７２が左右に動かされることで時間方向の解像度（時間解像度）を決定するパラメータｚの値が調整され、一方アイコン７２が上下に動かされることで空間方向の解像度（空間解像度）を決定するパラメータｓの値が調整される。ユーザは、表示部１８に表示される調整画面７１を参照して、パラメータｓ、およびｚの値の調整を容易に行うことができる。
【０１１６】
なお、リモートコマンダ２は、ジョイスティック８１の代わりに、マウスやトラックボール等のその他のポインティングデバイスを備えるようにしてもよい。更に、ユーザによって調整されたパラメータｓ、およびｚの値が、調整画面７１上に数値表示されるようにしてもよい。
【０１１７】
次に、図３を用いて説明した持ち運び部１５の動作を説明する。
【０１１８】
第２のタップ選択部４２は、バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）の供給を受け、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）を、選択的に取り出す。第２のタップ選択部４２で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）は、空間クラス検出部４４に供給される。空間クラス検出部４４は、空間クラスタップのデータとしての各ＳＤ画素データに対して、ＡＤＲＣ処理を施して、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉを得る（式（１）参照）。
【０１１９】
また、第３のタップ選択部４３は、バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）の供給を受け、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）を選択的に取り出す。第３のタップ選択部４３で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）は、動きクラス検出部４５に供給される。動きクラス検出部４５は、動きクラスタップのデータとしての各ＳＤ画素データより、動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶを得る。
【０１２０】
この動き情報ＭＶと、再量子化コードｑｉとは、クラス合成部４６に供給される。クラス合成部４６は、供給された動き情報ＭＶと再量子化コードｑｉとから、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック毎に、その単位画素ブロック内の４画素（注目画素）が属するクラスを示すクラスコードＣＬを得る（式（３）参照）。そして、このクラスコードＣＬは、係数メモリ５３および正規化係数メモリ５５に、読み出しアドレス情報として供給される。
【０１２１】
例えば、各垂直ブランキング期間に、係数生成部５２で、ユーザによって調整されたパラメータｓ、およびｚの値に対応して、クラスおよび出力画素（ＨＤ１乃至ＨＤ４，ＨＤ１′乃至ＨＤ４′）の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9を用いて、推定式の係数データＷｉ（ｉ＝１乃至ｎ）が求められて、係数メモリ５３に格納される（式（５）参照）。また、係数生成部５２で求められた推定式の係数データＷｉ（ｉ＝１乃至ｎ）に対応した正規化係数Ｓが、正規化係数演算部５４で生成されて、正規化係数メモリ５５に格納される（式（６）参照）。
【０１２２】
クラスコードＣＬが、係数メモリ５３に読み出しアドレス情報として供給されることで、この係数メモリ５３からクラスコードＣＬに対応した４出力画素（奇数フィールドではＨＤ１乃至ＨＤ４、偶数フィールドではＨＤ１′乃至ＨＤ４′）分の推定式の係数データＷｉが読み出されて、推定予測演算部４７に供給される。また、第１のタップ選択部４１は、バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）の供給を受け、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する予測タップのデータ（ＳＤ画素データ）を選択的に取り出す。
【０１２３】
推定予測演算部４７は、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ５３より読み出される４出力画素分の係数データＷｉとから、作成すべきＨＤ信号を構成する単位画素ブロック内の４画素（注目位置の画素）のデータｙ₁乃至ｙ₄を演算する（式（４）参照）。そして、この推定予測演算部４７より順次出力されるＨＤ信号を構成する単位画素ブロック内の４画素のデータｙ₁乃至ｙ₄は、正規化演算部４８に供給される。
【０１２４】
正規化係数メモリ５５には、上述したように、クラスコードＣＬが読み出しアドレス情報として供給され、正規化係数メモリ５５からはクラスコードＣＬに対応した正規化係数Ｓ、つまり、推定予測演算部４７より出力されるＨＤ画素データｙ₁乃至ｙ₄の演算に使用された係数データＷｉに対応した正規化係数Ｓが読み出されて、正規化演算部４８に供給される。正規化演算部４８は、推定予測演算部４７より出力されるＨＤ画素データｙ₁乃至ｙ₄を、それぞれ対応する正規化係数Ｓで除算して正規化する。これにより、係数生成部５２で係数データＷｉを求める際の丸め誤差によるデータｙ₁乃至ｙ₄のレベル変動が除去される。
【０１２５】
このように、正規化演算部４８で正規化されて順次出力される単位画素ブロック内の４画素のデータｙ₁′乃至ｙ₄′は、後処理部４９に供給される。後処理部４９は、正規化演算部４８より順次供給される単位画素ブロック内の４画素のデータｙ₁′乃至ｙ₄′を線順次化し、１０５０ｉ信号のフォーマットで出力する。つまり、後処理部４９からは、ＨＤ信号としての１０５０ｉ信号が出力される。
【０１２６】
このように、持ち運び部１５は、調整されたパラメータｓ、およびｚの値に対応した推定式の係数データＷｉ（ｉ＝１乃至ｎ）を用いて、ＨＤ画素データｙを演算するものである。従って、ユーザは、パラメータｓ、およびｚの値を調整することで、ＨＤ信号による画像の空間方向および時間方向の解像度を自由に調整することができる。また、調整されたパラメータｓ、およびｚの値に対応した各クラスの係数データは、その都度、係数生成部５２で生成されて使用されるものであるので、大量の係数データを格納しておくメモリは必要なくなり、メモリの節約を図ることができる。
【０１２７】
また、上述したように、ユーザは、調整画面７１上でパラメータｓ、およびｚの値を調整することができる。履歴情報記憶部５０の度数分布メモリ９１（図６参照）には、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のそれぞれの度数分布の情報が格納される。また、履歴情報記憶部５０の経時変化メモリ９４（図６参照）には、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のうち、所定数、例えば、１０個の最新のパラメータｓ、およびｚの値が格納される。
【０１２８】
このように、履歴情報記憶部５０の度数分布メモリ９１、および経時変化メモリ９４に格納される履歴情報は、例えば、テレビジョン受信装置１のバージョンアップ時に、持ち運び部１５、もしくは持ち運び部１５が含まれる基板を取り換える場合や、持ち運び部１５を他の装置に装着して利用する場合において、その情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際などに利用される。
【０１２９】
次に、係数種データｗ₁₀乃至ｗ_n9の生成方法の一例について説明する。この例においては、上述した式（５）の生成式における係数データである係数種データｗ₁₀乃至ｗ_n9を求める例を示すものとする。
【０１３０】
ここで、以下の説明のため、式（９）のように、ｔｉ（ｉ＝０乃至９）を定義する。
【０１３１】
【数９】

この式（９）を用いると、式（５）は、式（１０）のように書き換えられる。
【０１３２】
【数１０】

【０１３３】
最終的に、学習によって未定係数ｗ_ijが求められる。すなわち、クラスおよび出力画素の組合わせ毎に、複数のＳＤ画素データとＨＤ画素データを用いて、二乗誤差を最小にする係数値が決定される。これは、いわゆる、最小二乗法による解法である。学習数をｍ、ｋ（１≦ｋ≦ｍ）番目の学習データにおける残差をｅ_k、二乗誤差の総和をＥとすると、式（４）および式（５）を用いて、Ｅは式（１１）で表される。ここで、ｘ_ikはＳＤ画像のｉ番目の予測タップ位置におけるｋ番目の画素データ、ｙ_kはそれに対応するｋ番目のＨＤ画像の画素データを表している。
【０１３４】
【数１１】

【０１３５】
最小二乗法による解法では、式（１１）のｗ_ijによる偏微分が０になるようなｗ_ijを求める。これは、式（１２）で示される。
【０１３６】
【数１２】

【０１３７】
以下、式（１３）、式（１４）のように、Ｘ_ipjq、Ｙ_ipを定義すると、式（１２）は、式（１５）のように行列を用いて書き換えられる。
【０１３８】
【数１３】

【０１３９】
【数１４】

【０１４０】
【数１５】

【０１４１】
この方程式は、一般に、正規方程式と称されている。正規方程式は、掃き出し法（Gauss-Jordanの消去法）等を用いて、ｗ_ijについて解かれ、係数種データが算出される。
【０１４２】
図９は、上述した係数種データの生成方法の一例の概念を示す図である。
【０１４３】
ＨＤ信号から、複数のＳＤ信号が生成される。例えば、ＨＤ信号からＳＤ信号を生成する際に使用されるフィルタの空間方向（垂直方向および水平方向）の帯域と時間方向（フレーム方向）の帯域を可変するパラメータｓ、およびｚをそれぞれ９段階に可変することによって、合計８１種類のＳＤ信号が生成される。このようにして生成された複数のＳＤ信号とＨＤ信号との間で、学習が行われて、係数種データが生成される。
【０１４４】
図１０は、上述したテレビジョン受信装置１の情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成するための、係数種データ生成装置１２１の構成を示すブロック図である。
【０１４５】
入力端子１４１には、教師信号としてのＨＤ信号（１０５０ｉ信号）が入力される。ＳＤ信号生成部１４３は、このＨＤ信号に対して、入力端子１４２から入力される履歴情報、並びに、パラメータｓ、およびｚの値を用いて、水平および垂直の間引き処理を行って、生徒信号としてのＳＤ信号を得る。
【０１４６】
ＳＤ信号生成部１４３は、入力端子１４２から入力されるパラメータｓ、およびｚに基づいて、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの、空間方向および時間方向の帯域を変更する。
【０１４７】
また、このＳＤ信号生成部１４３に入力される履歴情報は、履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納されている、入力されたパラメータｓ、およびｚの値の履歴情報である。
【０１４８】
なお、使用開始前のテレビジョン受信装置１の情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際には、いまだ履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に履歴情報が格納されていないので、ＳＤ信号生成部１４３に履歴情報は入力されない。
【０１４９】
つまり、ＳＤ信号生成部１４３に履歴情報が入力されるのは、例えば、テレビジョン受信装置１のバージョンアップ時に持ち運び部１５、もしくは持ち運び部１５が含まれる基板を取り換える場合などであって、その情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際などである。
【０１５０】
ここで、入力端子１４２には、図３を用いて説明した持ち運び部１５において、システムコントローラ１２と接続され、履歴情報記憶部５０と情報が授受可能になされている接続端子が接続されるようにすればよい。すなわち、入力端子１４２の端子１６１および端子１６２は、履歴情報記憶部５０と接続されて、履歴情報の入力を受け、情報の授受が可能である。
【０１５１】
ＳＤ信号生成部１４３では、履歴情報に基づいて、入力されたパラメータｓ、およびｚの値が調整され、この調整されたパラメータｓ、およびｚの値に応じて、空間方向および時間方向の帯域が可変される。履歴情報の入力がないときは、入力されたパラメータｓ、およびｚの値そのものに応じて、空間方向および時間方向の帯域が可変される。
【０１５２】
ここで、テレビジョン受信装置１では、ユーザの操作によって、パラメータｓ、およびｚの値が、例えばそれぞれ０乃至８の範囲内で、所定のステップをもって調整され、空間方向および時間方向の解像度の調整が行われていた。
【０１５３】
この場合、ＳＤ信号生成部１４３において入力されるパラメータｓ、およびｚの値そのものに応じて空間方向および時間方向の帯域が可変されるとき、テレビジョン受信装置１では、図１１に実線枠ＢＦで示す範囲（空間解像度はｙ₁乃至ｙ₂、時間解像度はｘ₁乃至ｘ₂）内で解像度の調整を行い得るように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０１５４】
履歴情報が入力される場合、ＳＤ信号生成部１４３では、パラメータｓ、およびｚの値のそれぞれにおける度数分布の情報が用いられて重心位置が求められる。この場合、所定数の最新のパラメータｓ、およびｚの値に対応する値のうち新しい値ほど大きな重み付けがされる。そして、ＳＤ信号生成部１４３では、この重心位置に基づいて、入力されるパラメータｓ、およびｚの値が調整される。この場合、パラメータｓ、およびｚの値が大きくなるほど帯域が狭くなるようにされる。これにより、調整されたパラメータを得たテレビジョン受信装置１では、パラメータｓ、およびｚの値が大きくされるほど解像度が上がるように調整されるようになる。
【０１５５】
ここでは、テレビジョン受信装置１側で調整されるパラメータｓ、およびｚの値の変化範囲の中心が、求められた重心位置に移動するように、入力されるパラメータｓ、およびｚの値が線形変換されるようになされている。例えば、テレビジョン受信装置１側で調整されるパラメータｓ、およびｚの値の変化範囲の中心値がｓ₀，ｚ₀、求められる重心位置がｓ_m，ｚ_m、入力されるパラメータｓ、およびｚの値がｓ₁，ｚ₁であるとき、調整後のパラメータｓ、およびｚの値ｓ₂，ｚ₂は、次の変換式で求められる。
【０１５６】
【数１６】

【０１５７】
【数１７】

【０１５８】
このように調整されたパラメータｓ、およびｚの値に応じて、空間方向および時間方向の帯域が可変される場合、テレビジョン受信装置１では、図１１に実線枠ＢＦで示す範囲内の解像度調整位置（「×」印で図示）の重心位置を中心とする、図１１の一点鎖線枠ＡＦで示す範囲（空間解像度はｙ₁′乃至ｙ₂′、時間解像度はｘ₁′乃至ｘ₂′）内で解像度の調整を行い得るように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０１５９】
なお、上述した処理では、パラメータｓ、およびｚの値のそれぞれにおける度数分布の情報を用いて重心位置を求める際に、所定数の最新のパラメータｓ、およびｚの値に対応する値のうち、新しい値ほど大きな重み付けがされるものであったが、このような重み付けがされずに求められる重心位置を使用するようにしてもよい。また、度数分布の情報は用いずに、所定数の最新のパラメータｓ、およびｚの値を用い、新しい値ほど大きな重み付けがされて求められた重心位置を使用するようにしてもよい。更には、パラメータｓ、およびｚの値のそれぞれにおける度数分布の情報から最も度数の大きなパラメータｓ、およびｚの値を求め、その値を重心位置の代わりに使用するようにしてもよい。また、所定数の最新のパラメータｓ、およびｚの値のうち、最も新しいパラメータｓ、およびｚの値を、重心位置の代わりに使用するようにしてもよい。
【０１６０】
図１０に戻って、再び、係数種データ生成装置１２１の構成について説明する。
【０１６１】
第１のタップ選択部１４４、第２のタップ選択部１４５、および第３のタップ選択部１４６は、ＳＤ信号生成部１４３より出力されるＳＤ信号（５２５ｉ信号）より、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する複数のＳＤ画素のデータを選択的に取り出して出力する。これら第１のタップ選択部１４４乃至第３のタップ選択部１４６は、図３を用いて説明した持ち運び部１５の第１のタップ選択部４１乃至第３のタップ選択部４３と、基本的に同様に構成される。
【０１６２】
空間クラス検出部１４７は、第２のタップ選択部１４５で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）のレベル分布パターンを検出し、このレベル分布パターンに基づいて空間クラスを検出し、そのクラス情報を出力する。この空間クラス検出部１４７は、図３を用いて説明した持ち運び部１５の空間クラス検出部４４と基本的に同様に構成される。この空間クラス検出部１４７からは、空間クラスタップのデータとしての各ＳＤ画素データの再量子化コードｑｉが、空間クラスを示すクラス情報として出力される。
【０１６３】
動きクラス検出部１４８は、第３のタップ選択部１４６で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）より、主に動きの程度を表すための動きクラスを検出し、そのクラス情報ＭＶを出力する。この動きクラス検出部１４８は、図３を用いて説明した持ち運び部１５の動きクラス検出部４５と基本的に同様に構成される。この動きクラス検出部１４８では、第３のタップ選択部１４６で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）からフレーム間差分が算出され、更に、その差分の絶対値の平均値に対してしきい値処理が行われて、動きの指標である動きクラスが検出される。
【０１６４】
クラス合成部１４９は、空間クラス検出部１４７より出力される空間クラスのクラス情報としての再量子化コードｑｉと、動きクラス検出部１４８より出力される動きクラスのクラス情報ＭＶとに基づき、ＨＤ信号（１０５０ｉ信号）に係る注目画素が属するクラスを示すクラスコードＣＬを得る。このクラス合成部１４９も、図３を用いて説明した持ち運び部１５のクラス合成部４６と基本的に同様に構成される。
【０１６５】
正規方程式生成部１５０は、入力端子１４１に供給されるＨＤ信号から得られる注目位置の画素データとしての各ＨＤ画素データｙ、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択部１４４で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉ、パラメータｓおよびｚの値、並びに、各ＨＤ画素データｙにそれぞれ対応してクラス合成部１４９より出力されるクラスコードＣＬとから、クラス毎に、係数種データｗ₁₀乃至ｗ_n9を得るための正規方程式（式（１５）参照）を生成する。
【０１６６】
この場合、１個のＨＤ画素データｙと、それに対応するｎ個の予測タップのデータ（ＳＤ画素データ）ｘｉとの組合わせで、学習データが生成されるが、調整後のパラメータｓ、およびｚの値の変化に対応して、ＳＤ信号生成部１４３における空間方向および時間方向の帯域が可変され、複数のＳＤ信号が順次生成されて、ＨＤ信号と各ＳＤ信号との間でそれぞれ学習データの生成が行われる。これにより、正規方程式生成部１５０では、パラメータｓ、およびｚの値が異なる多くの学習データが登録された正規方程式が生成され、係数種データｗ₁₀乃至ｗ_n9を求めることが可能となる。
【０１６７】
また、この場合、１個のＨＤ画素データｙとそれに対応するｎ個の予測タップのデータ（ＳＤ画素データ）ｘｉとの組合わせで学習データが生成されるが、正規方程式生成部１５０では、出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）毎に、正規方程式が生成される。例えば、ＨＤ１に対応した正規方程式は、中心予測タップに対するずれ値がＨＤ１と同じ関係にあるＨＤ画素データｙから構成される学習データから生成される。
【０１６８】
係数種データ決定部１５１は、正規方程式生成部１５０で、クラスおよび出力画素の組合わせ毎に生成された正規方程式のデータの供給を受け、正規方程式を解いて、クラスおよび出力画素の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9を求める。係数種データ決定部１５１は、正規方程式を、例えば、掃き出し法などによって解くことにより、係数種データを求める。係数種メモリ１５２は、係数種データ決定部１５１で求められた係数種データを格納する。入出力インターフェース１５３は、必要に応じて、他の機器（例えば、図３を用いて説明した持ち運び部１５の情報メモリバンク５１）と接続され、係数種メモリ１５２に格納されている係数種データを出力する。
【０１６９】
次に、図１０の係数種データ生成装置１２１の動作について説明する。
【０１７０】
入力端子１４１には、教師信号としてのＨＤ信号（１０５０ｉ信号）が供給され、そしてこのＨＤ信号に対して、ＳＤ信号生成部１４３で、水平および垂直の間引き処理が行われて、生徒信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０１７１】
この場合、ＳＤ信号生成部１４３には、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域を定めるパラメータ、換言すれば、生成されるＳＤ信号の空間方向および時間方向の解像度を定めるパラメータｓ、およびｚの値が入力される。
【０１７２】
また、ＳＤ信号生成部１４３には、例えば、テレビジョン受信装置１のバージョンアップ時に、持ち運び部１５、もしくは持ち運び部１５が含まれる基板を取り換える場合など、その情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際には、取り換え前の持ち運び部１５、もしくは持ち運び部１５が含まれる基板における履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納されている、ユーザ操作によって過去に入力されたパラメータｓ、およびｚの履歴情報が、入力端子１４２を介して入力される。
【０１７３】
ＳＤ信号生成部１４３では、履歴情報が入力されるときは、この履歴情報に基づいて入力されたパラメータｓ、およびｚの値が調整される。例えば、履歴情報によってパラメータｓ、およびｚの重心位置が求められ、テレビジョン受信装置１側で調整されるパラメータｓ、およびｚの値の変化範囲の中心が、求められた重心位置に移動するように、入力されるパラメータｓ、およびｚの値が線形変換される。そして、ＳＤ信号生成部１４３では、調整されたパラメータｓ、およびｚの値に応じて、上述したように、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。
【０１７４】
なお、使用開始前のテレビジョン受信装置１の情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際には、履歴情報の入力がないので、入力されたパラメータｓ、およびｚの値そのものに応じて、上述したようにＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。
【０１７５】
ＳＤ信号生成部１４３に入力されるパラメータｓ、およびｚの値が順次変更されることで、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が変更されることから、空間方向および時間方向の帯域が段階的に変化した複数のＳＤ信号が生成される。
【０１７６】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号（５２５ｉ信号）より、第２のタップ選択部１４５で、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択部１４５で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）は、空間クラス検出部１４７に供給される。空間クラス検出部１４７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（式（１）参照）。
【０１７７】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号より、第３のタップ選択部１４６で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第３のタップ選択部１４６で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）は、動きクラス検出部１４８に供給される。この動きクラス検出部１４８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０１７８】
クラス情報ＭＶと再量子化コードｑｉとは、クラス合成部１４９に供給される。クラス合成部１４９は、供給されたクラス情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（１０５０ｉ信号）における注目位置の画素データが属するクラスを示すクラスコードＣＬを得る（式（３）参照）。
【０１７９】
また、ＳＤ信号生成部１４３で生成されるＳＤ信号より、第１のタップ選択部１４４で、ＨＤ信号における注目位置の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。
【０１８０】
そして、正規方程式生成部１５０では、入力端子１４１に供給されるＨＤ信号より得られる注目位置の画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択部１４４で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉと、パラメータｓ、およびｚの値と、各ＨＤ画素データｙにそれぞれ対応してクラス合成部１４９より出力されるクラスコードＣＬとから、クラスおよび出力画素の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9を得るための正規方程式（式（１５）参照）が個別に生成される。
【０１８１】
そして、係数種データ決定部１５１で各正規方程式が解かれ、クラスおよび出力画素の組合わせ毎の係数種データｗ₁₀乃至ｗ_n9が求められ、それらの係数種データｗ₁₀乃至ｗ_n9は、係数種メモリ１５２に格納され、必要に応じて、入出力インターフェース１５３を介して、外部に出力される。
【０１８２】
このように、図１０に示す係数種データ生成装置１２１においては、図１の持ち運び部１５の情報メモリバンク５１に格納される、クラスおよび出力画素（ＨＤ１乃至ＨＤ４，ＨＤ１′乃至ＨＤ４′）の組合わせ毎の、推定式で用いられる係数データＷｉを求めるための生成式（式（５）参照）における係数データである係数種データｗ₁₀乃至ｗ_n9を生成することができる。
【０１８３】
また、この係数種データ生成装置１２１において、例えば、テレビジョン受信装置１のバージョンアップ時に、持ち運び部１５、もしくは持ち運び部１５が含まれる基板を取り換える場合であって、その情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際には、入力端子１４２を介して、ＳＤ信号生成部１４３に、テレビジョン受信装置１の履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納されている、ユーザ操作によって過去に入力されたパラメータｓ、およびｚの履歴情報が入力される。
【０１８４】
ＳＤ信号生成部１４３では、この履歴情報に基づいて、入力されるパラメータｓ、およびｚの値が調整され、この調整されたパラメータｓ、およびｚによって、ＨＤ信号からＳＤ信号を得る際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。
【０１８５】
このようにして求められた係数種データｗ₁₀乃至ｗ_n9を、テレビジョン受信装置１のバージョンアップ時に新たに装着される持ち運び部１５、もしくは持ち運び部１５が含まれる基板の情報メモリバンク５１に格納して使用することで、ユーザは、パラメータｓ、およびｚの値の調整により、過去の解像度調整の重心位置を中心とする範囲（図１１の一点鎖線枠ＡＦ参照）内で解像度の調整を行うことが可能となる。すなわち、ユーザの好みに合わせた解像度調整範囲が自動的に設定され、ユーザはその範囲内で解像度の調整を行うことができる。
【０１８６】
次に、係数種データの生成方法の他の例について説明する。この例においても、上述した式（５）の生成式における係数データである係数種データｗ₁₀乃至ｗ_n9を求める第２の例を示すものとする。
【０１８７】
図１２は、係数種データの生成方法の、第２の例の概念を示している。ＨＤ信号から複数のＳＤ信号が生成される。例えば、ＨＤ信号からＳＤ信号を生成する際に使用するフィルタの空間方向（垂直方向および水平方向）の帯域と時間方向（フレーム方向）の帯域を可変するパラメータｓ、およびｚをそれぞれ９段階に可変することにより、合計８１種類のＳＤ信号が生成される。このようにして生成された各ＳＤ信号とＨＤ信号との間で学習を行って、式（４）の推定式の係数データＷｉが生成される。そして、各ＳＤ信号に対応して生成された係数データＷｉを使用して、係数種データが生成される。
【０１８８】
まず、推定式の係数データの求め方について説明する。ここでは、式（４）の推定式の係数データＷｉ（ｉ＝１乃至ｎ）を最小二乗法により求める例を示すものとする。一般化した例として、Ｘを入力データ、Ｗを係数データ、Ｙを予測値として、式（１８）および式（１９）の観測方程式を考える。この式（１９）において、ｍは学習データの数を示し、ｎは予測タップの数を示している。
【０１８９】
【数１８】

【０１９０】
【数１９】

【０１９１】
式（１８）および式（１９）の観測方程式により収集されたデータに最小二乗法を適用する。式（１８）および式（１９）の観測方程式をもとに、式（２０）の残差方程式を考える。
【０１９２】
【数２０】

【０１９３】
式（２０）の残差方程式から、各Ｗｉの最確値は、式（２１）のｅ²（ｅの２乗）を最小にする条件が成り立つ場合と考えられる。すなわち、式（２２）の条件を考慮すればよいわけである。
【０１９４】
【数２１】

【０１９５】
【数２２】

【０１９６】
つまり、式（２２）のｉに基づくｎ個の条件を考え、これを満たす、Ｗ₁，Ｗ₂，・・・，Ｗ_nを算出すればよい。そこで、式（２０）の残差方程式から、式（２３）が得られる。更に、式（２３）と式（１８）とから、式（２４）が得られる。
【０１９７】
【数２３】

【０１９８】
【数２４】

【０１９９】
そして、式（２０）と式（２４）とから、式（２５）の正規方程式が得られる。
【０２００】
【数２５】

【０２０１】
式（２５）の正規方程式は、未知数の数ｎと同じ数の方程式を立てることが可能であるので、各Ｗｉの最確値を求めることができる。この場合、掃き出し法等を用いて連立方程式を解くことになる。
【０２０２】
次に、各ＳＤ信号に対応して生成された係数データＷｉを使用した、係数種データの求め方について説明する。
【０２０３】
パラメータｓ、およびｚに対応したＳＤ信号を用いた学習による、あるクラスの係数データが、ｋ_sziとなったとする。ここで、ｉは予測タップの番号である。このｋ_sziから、このクラスの係数種データを求める。
【０２０４】
係数データＷｉ（ｉ＝１乃至ｎ）は、係数種データｗ₁₀乃至ｗ_n9を使って、上述した式（５）で表現される。ここで、係数データＷｉに対して最小二乗法を使用することを考えると、残差は、式（２６）で表される。
【０２０５】
【数２６】

【０２０６】
ここで、ｔ_jは、上述の式（９）に示されている。式（２６）に最小二乗法を作用させると、式（２７）が得られる。
【０２０７】
【数２７】

【０２０８】
ここで、Ｘ_jk，Ｙ_jをそれぞれ式（２８）、式（２９）のように定義すると、式（２７）は式（３０）のように書き換えられる。この式（３０）も正規方程式であり、この式を掃き出し法等の一般解法で解くことにより、係数種データｗ₁₀乃至ｗ_n9を算出することができる。
【０２０９】
【数２８】

【０２１０】
【数２９】

【０２１１】
【数３０】

【０２１２】
図１３は、図１２に示す概念に基づいて係数種データを生成する係数種データ生成装置１７１の構成を示している。図１３において、図１０と対応する部分には同一符号を付し、その詳細な説明は適宜省略する。
【０２１３】
すなわち、図１３の係数種データ生成装置１７１は、正規方程式生成部１５０に代わって、正規方程式生成部１８１が設けられ、係数種データ決定部１５１に代わって、係数データ決定部１８２が設けられ、新たに、正規方程式生成部１８３および係数種データ決定部１８４が設けられている以外は、図１０を用いて説明した係数種データ生成装置１２１と、基本的に同様の構成を有している。
【０２１４】
正規方程式生成部１８１は、入力端子１４１に供給されるＨＤ信号より得られる注目位置の画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択部１４４で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成部１４９より出力されるクラスコードＣＬとから、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）を得るための正規方程式（式（２５）参照）を生成する。
【０２１５】
この場合、１個のＨＤ画素データｙとそれに対応するｎ個の予測タップのデータ（ＳＤ画素データ）ｘｉとの組合わせで学習データが生成されるが、調整後のパラメータｓ、およびｚの値の変化に対応してＳＤ信号生成部１４３における空間方向および時間方向の帯域が可変され、複数のＳＤ信号が順次生成されていき、ＨＤ信号と各ＳＤ信号との間でそれぞれ学習データの生成が行われる。これにより、正規方程式生成部１８１では、各ＳＤ信号と対応して、クラスおよび出力画素の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）を得るための正規方程式が生成される。
【０２１６】
係数データ決定部１８２は、正規方程式生成部１８１で生成された正規方程式のデータの供給を受け、その正規方程式を解いて、各ＳＤ信号にそれぞれ対応した、クラスおよび出力画素の各組合わせの係数データＷｉを求める。正規方程式生成部１８３は、パラメータｓ、およびｚの値、並びに各ＳＤ信号にそれぞれ対応した係数データＷｉを使用して、クラスおよび出力画素の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9を得るための正規方程式（式（２８）参照）を生成する。
【０２１７】
係数種データ決定部１８４は、正規方程式生成部１８３でクラスおよび出力画素の組合わせ毎に生成された正規方程式のデータの供給を受け、その組合わせ毎に正規方程式を解いて、クラスおよび出力画素の各組合わせの係数種データｗ₁₀乃至ｗ_n9を求める。係数種メモリ１５２は、係数種データ決定部１８４で求められた係数種データｗ₁₀乃至ｗ_n9を格納する。
【０２１８】
図１３に示す係数種データ生成装置１７１のその他の部分は、図１０に示す係数種データ生成装置１２１と同様に構成されるので、その詳細な説明については省略する。
【０２１９】
次に、図１３に示す係数種データ生成装置１７１の動作を説明する。
【０２２０】
入力端子１４１には教師信号としてのＨＤ信号（１０５０ｉ信号）が供給され、そして、ＳＤ信号生成部１４３で、このＨＤ信号に対して水平および垂直の間引き処理が行われて、生徒信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０２２１】
ＳＤ信号生成部１４３に入力されるパラメータｓ、およびｚの値が順次変更されることで、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が変更されることから、空間方向および時間方向の帯域が段階的に変化した複数のＳＤ信号が生成されていく。
【０２２２】
この場合、ＳＤ信号生成部１４３では、履歴情報が入力されるときは、この履歴情報に基づいて入力されたパラメータｓ、およびｚの値が調整され、調整されたパラメータｓ、およびｚの値に応じて、上述したようにＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。
【０２２３】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号（５２５ｉ信号）より、第２のタップ選択部１４５で、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択部１４５で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）は、空間クラス検出部１４７に供給される。この空間クラス検出部１４７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（式（１）参照）。
【０２２４】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号より、第３のタップ選択部１４６で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第３のタップ選択部１４６で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）は、動きクラス検出部１４８に供給される。この動きクラス検出部１４８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０２２５】
このクラス情報ＭＶと上述した再量子化コードｑｉとは、クラス合成部１４９に供給される。このクラス合成部１４９では、これらクラス情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（１０５０ｉ信号）における注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる（式（３）参照）。
【０２２６】
また、ＳＤ信号生成部１４３で生成されるＳＤ信号より、第１のタップ選択部１４４で、ＨＤ信号における注目位置の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。
【０２２７】
そして、正規方程式生成部１８１では、入力端子１４１に供給されるＨＤ信号より得られる注目位置の画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択部１４４で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成部１４９より出力されるクラスコードＣＬとから、ＳＤ信号生成部１４３で生成される各ＳＤ信号のそれぞれに対応して、クラスおよび出力画素の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）を得るための正規方程式（式（２５）参照）が生成される。
【０２２８】
そして、係数データ決定部１８２で、その正規方程式が解かれ、各ＳＤ信号にそれぞれ対応したクラスおよび出力画素の各組合わせの係数データＷｉが求められる。正規方程式生成部１８３では、この各ＳＤ信号にそれぞれ対応した各クラスの係数データＷｉから、クラスおよび出力画素の組合わせ毎に、係数種データｗ₁₀乃至ｗ_n9を得るための正規方程式（式（２８）参照）が生成される。
【０２２９】
そして、係数種データ決定部１８４でその正規方程式が解かれ、クラスおよび出力画素の各組合わせの係数種データｗ₁₀乃至ｗ_n9が求められ、その係数種データｗ₁₀乃至ｗ_n9は係数種メモリ１５２に格納される。
【０２３０】
このように、図１３に示す係数種データ生成装置１７１においても、図１の持ち運び部１５の情報メモリバンク５１に格納される、クラスおよび出力画素（ＨＤ１乃至ＨＤ４，ＨＤ１′乃至ＨＤ４′）の組合わせ毎の係数種データｗ₁₀乃至ｗ_n9を生成することができる。
【０２３１】
また、この係数種データ生成装置１７１においても、ＳＤ信号生成部１４３では、この履歴情報に基づいて、入力されるパラメータｓ、およびｚの値が調整され、この調整されたパラメータｓ、およびｚによって、ＨＤ信号からＳＤ信号を得る際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変されるものである。従って、このようにして求められた係数種データｗ₁₀乃至ｗ_n9を、テレビジョン受信装置１のバージョンアップ時に新たに装着される持ち運び部１５、もしくは持ち運び部１５が含まれる基板の情報メモリバンク５１に格納して使用することで、ユーザは、パラメータｓ、およびｚの値の調整により、過去の解像度調整の重心位置を中心とする範囲（図１１の一点鎖線枠ＡＦ参照）内で解像度の調整を行うことが可能となる。
【０２３２】
なお、図１の持ち運び部１５では、係数データＷｉ（ｉ＝１乃至ｎ）を生成するために式（５）の生成式を使用したが、次数の異なった多項式や、他の関数で表現される式でも、係数データＷｉの生成は実現可能である。
【０２３３】
また、図１の持ち運び部１５では、空間方向（垂直方向および水平方向）の解像度を定めるパラメータｓと時間方向（フレーム方向）の解像度を定めるパラメータｚとを設定し、これらパラメータｓ、およびｚの値を調整することで画像の空間方向および時間方向の解像度を調整し得るものとして説明したが、その他の画像の質を定めるパラメータを設けるものも、同様にして構成することができる。例えば、パラメータとしては、垂直方向の解像度を定めるパラメータ、水平方向の解像度を定めるパラメータ、ノイズ除去度を定めるパラメータなどの種々のパラメータが考えられる。
【０２３４】
また、図１の持ち運び部１５では、パラメータｓ、およびｚの２つのパラメータを調整し得るものとして説明したが、１個または３個以上のパラメータを取り扱うものも同様に構成することができる。その場合も、履歴情報記憶部５０には、それぞれのパラメータの履歴情報が格納されることとなる。そして、図１０に示す係数種データ生成装置１２１、あるいは図１３に示す係数種データ生成装置１７１では、それぞれのパラメータの履歴情報を使用して、上述した場合と同様の生成処理を行うことができる。
【０２３５】
なお、図１の持ち運び部１５における処理を、例えば図１４に示すような画像信号処理可能なパーソナルコンピュータ２０１によって、ソフトウェアで実現することも可能である。
【０２３６】
まず、図１４に示すパーソナルコンピュータ２０１について説明する。パーソナルコンピュータ２０１は、装置全体の動作を制御するＣＰＵ２１１と、このＣＰＵ２１１の動作プログラムや係数種データ等が格納されたＲＯＭ２１２と、ＣＰＵ２１１の作業領域を構成するＲＡＭ２１３とを有している。これらＣＰＵ２１１、ＲＯＭ２１２およびＲＡＭ２１３は、それぞれバス２１４に接続されている。
【０２３７】
また、パーソナルコンピュータ２０１は、例えば、ハードディスクドライブなどで構成されている記憶部２１５を有している。記憶部２１５は、バス２１４に接続されている。
【０２３８】
また、パーソナルコンピュータ２０１は、インターネット等の通信網２０２に有線または無線で接続する通信部２１６を有している。この通信部２１６は、入出力インターフェース２１７を介してバス２１４に接続されている。
【０２３９】
また、パーソナルコンピュータ２０１は、ユーザインターフェース２１８を備えている。このユーザインターフェース２１８は、バス２１４に接続されるとともに、リモートコマンダ２０３からのリモートコントロール信号を受信する信号受信部２１９、キーボード、マウス、あるいはジョイスティックなどから構成され、ユーザの操作入力を受ける入力部２２０、例えば、ＬＣＤ（liquid crystal display）等からなる表示部２２１と接続されている。
【０２４０】
また、パーソナルコンピュータ２０１は、ＳＤ信号を入力するための入力端子２２２と、ＨＤ信号を出力するための出力端子２２３とを有している。入力端子２２２はインターフェース２２４を介してバス２１４に接続され、同様に出力端子２２３はインターフェース２２５を介してバス２１４に接続される。
【０２４１】
またバス２１４には、必要に応じてドライブ２２６が接続され、磁気ディスク２３１、光ディスク２３２、光磁気ディスク２３３、あるいは、半導体メモリ２３４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じてＲＡＭ２１３にインストールされる。
【０２４２】
ここで、ＲＯＭ２１２に処理プログラムや係数種データ等を予め格納しておく代わりに、例えばインターネットなどの通信網２０２より通信部２１６を介して、処理プログラムや係数種データ等をダウンロードし、記憶部２１５やＲＡＭ２１３に蓄積して使用することもできる。また、これら処理プログラムや係数種データ等を磁気ディスク２３１、光ディスク２３２、光磁気ディスク２３３、あるいは、半導体メモリ２３４などで提供するようにしてもよい。
【０２４３】
また、入力端子２２２から、処理すべきＳＤ信号の入力を受ける代わりに、予め記憶部２１５に記録しておくか、あるいはインターネットなどの通信網２０２より通信部２１６を介してダウンロードするようにしてもよい。また、処理後のＨＤ信号を出力端子２２３から出力する代わりに、あるいは出力端子２２３から出力する処理と並行して、例えば、表示部２２１に供給して画像表示をしたり、更には、記憶部２１５に格納したり、通信部２１６を介してインターネットなどの通信網２０２に送出するようにしてもよい。
【０２４４】
次に、図１５のフローチャートを参照して、図１４を用いて説明したパーソナルコンピュータ２０１において実行される、ＳＤ信号よりＨＤ信号を得るための画像信号処理１について説明する。
【０２４５】
ステップＳ１において、ＣＰＵ２１１は、ＳＤ画素データをフレーム単位またはフィールド単位で取得する。このＳＤ画素データが入力端子２２２より入力される場合、ＣＰＵ２１１は、取得したＳＤ画素データを、バス２１４を介して、ＲＡＭ２１３に一時的に格納する。また、このＳＤ画素データが記録部２１５に予め記録されている場合、ＣＰＵ１１１は、バス２１４を介して、記録部２１５からＳＤ画素データを読み出し、ＲＡＭ２１３に一時的に格納する。
【０２４６】
ステップＳ２において、ＣＰＵ２１１は、入力ＳＤ画素データの全フレームまたは全フィールドの処理が終わっているか否かを判断する。ステップＳ２において、処理が終わっていないと判断された場合、ステップＳ３において、ＣＰＵ２１１は、ユーザのリモートコマンダ２０３の操作によって入力された画質指定値（例えばパラメータｓ、およびｚ）を取得する。例えば、画質指定値が予め入力されている場合、ＣＰＵ２１１は、ＲＡＭ２１３に記録されている画質指定値を読み込むことにより、画質指定値を取得する。
【０２４７】
ステップＳ４において、ＣＰＵ２１１は、例えば、記録部２１５などに格納されている履歴情報（図１のテレビジョン受信装置１の履歴情報記憶部５０における度数分布メモリ９１、経時変化メモリ９４の記憶内容に相当する）を、ステップＳ３において取得された新たな画質指定値を用いて更新する。
【０２４８】
ステップＳ５において、ＣＰＵ２１１は、読み込んだ画質指定値、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の各組合わせの係数種データを使用して、例えば式（５）の生成式によって、各組合わせの推定式（式（４）参照）の係数データＷｉを生成する。
【０２４９】
ステップＳ６において、ＣＰＵ２１１は、ステップＳ１において取得されたＳＤ画素データより、生成すべき各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。
【０２５０】
ステップＳ７において、ＣＰＵ２１１は、取得されたＳＤ画素データの全領域において、ＨＤ画素データを得る処理が終了したか否かを判断する。ステップＳ７において、取得されたＳＤ画素データの全領域において処理は終了していると判断された場合、処理は、ステップＳ１に戻り、同様の処理が繰り返されることにより、次のフレームまたはフィールドのＳＤ画素データに対する処理が実行される。
【０２５１】
ステップＳ７において、取得されたＳＤ画素データの全領域において処理は終了していないと判断された場合、ステップＳ８において、ＣＰＵ２１１は、ステップＳ６において取得されたクラスタップのＳＤ画素データから、クラスコードＣＬを生成する。
【０２５２】
ステップＳ９において、ＣＰＵ２１１は、クラスコードＣＬに対応した係数データＷｉと予測タップのＳＤ画素データとを使用して、推定式により、ＨＤ画素データを生成する。ステップＳ９の処理の終了後、処理は、ステップＳ６に戻り、上述した処理と同様の処理が繰り返される。
【０２５３】
ステップＳ２において、全フレーム、または全フィールドの処理が終了したと判断された場合、処理が終了される。
【０２５４】
このように、図１５に示すフローチャートに沿って処理をすることで、図１４を用いて説明したパーソナルコンピュータ２０１において、入力されたＳＤ信号を構成するＳＤ画素データを処理して、ＨＤ信号を構成するＨＤ画素データを得ることができる。上述したように、このように処理して得られたＨＤ信号は、バス２１４を介して、出力端子２２３から外部の装置に出力されたり、バス２１４およびユーザインターフェース２１８を介して、表示部２２１に供給されて、ＨＤ信号に対応する画像が表示されたり、更に、記録部２１５に供給されて、記録部２１５を構成するハードディスクなどに記録される。
【０２５５】
上述したように、例えば、記録部２１５などに格納される履歴情報は、ステップＳ８で使用する新たな係数種データを生成する際に利用される。このように、新たに生成される係数種データを利用することで、ユーザの好みに合わせた調整範囲での画質調整が可能となる。なお、上述の履歴情報は、記録部２１５ではなく、ドライブ２２６に装着される各種記録媒体（半導体メモリ２３４の具体例として、例えば、メモリカードなど）に格納するようにしてもよい。
【０２５６】
また、図１０の係数種データ生成装置１２１における処理も、同様にして、図１４のパーソナルコンピュータ２０１を用いて、ソフトウェアで実現することが可能である。
【０２５７】
図１６のフローチャートを参照して、係数種データ生成処理１について説明する。
【０２５８】
ステップＳ２１において、ＣＰＵ２１１は、学習に使われる画質パターン（例えば、パラメータｓ、およびｚで特定される）を選択するとともに、選択した画質パターンを履歴情報に基づいて調整する。
【０２５９】
ステップＳ２２において、ＣＰＵ２１１は、全ての画質パターンに対して学習が終了したか否かを判断する。
【０２６０】
ステップＳ２２において、全ての画質パターンに対して学習が終了していないと判断された場合、ステップＳ２３において、ＣＰＵ２１１は、既知のＨＤ画素データをフレーム単位またはフィールド単位で取得する。
【０２６１】
ステップＳ２４において、ＣＰＵ２１１は、全てのＨＤ画素データについて処理は終了したか否かを判断する。ステップＳ２４において、全てのＨＤ画素データについて処理は終了したと判断された場合、処理は、ステップＳ２１に戻り、同様の処理が繰り返される。
【０２６２】
ステップＳ２４において、全てのＨＤ画素データについて処理は終了していないと判断された場合、ステップＳ２５において、ＣＰＵ２１１は、ステップＳ２３で取得されたＨＤ画素データより、ステップＳ２１で調整された画質パターンに基づいて、ＳＤ画素データを生成する。
【０２６３】
ステップＳ２６において、ＣＰＵ２１１は、ステップＳ２５で生成されたＳＤ画素データより、ステップＳ２３で取得された各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。
【０２６４】
ステップＳ２７において、ＣＰＵ２１１は、生成されたＳＤ画素データの全領域において学習処理は終了したか否かを判断する。ステップＳ２７において、学習処理は終了したと判断された場合、処理は、ステップＳ２３に戻り、次のＨＤ画素データが取得され、同様の処理が繰り返される。
【０２６５】
ステップＳ２７において、学習処理は終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ２８において、ステップＳ２６で取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成し、ステップＳ２９において、正規方程式（式（１５）参照）を生成する。ステップＳ２９の処理の終了後、処理は、ステップＳ２６に戻り、それ以降の処理が繰り返される。
【０２６６】
ステップＳ２２において、全ての画質パターンに対して学習が終了したと判断された場合、ＣＰＵ２１１は、ステップＳ３０において、正規方程式を掃き出し法等で解くことによって、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の各組合わせの係数種データを算出し、ステップＳ３１において、その係数種データを、例えば、記憶部２１５、あるいは、ドライブ２２６に装着された記録媒体などに保存して、処理が終了される。
【０２６７】
図１６を用いて説明した処理により、パーソナルコンピュータ２０１を用いて図１０に示す係数種データ生成装置１２１と同様の手法によって、係数種データを得ることができる。
【０２６８】
また、図１３の係数種データ生成装置１７１における処理も、同様にして、図１４のパーソナルコンピュータ２０１を用いて、ソフトウェアで実現することが可能である。
【０２６９】
図１７のフローチャートを参照して、係数種データ生成処理２について説明する。
【０２７０】
ＣＰＵ２１１は、ステップＳ５１において、学習に使われる画質パターン（例えば、パラメータｓ、およびｚで特定される画質パターン）を選択するとともに、その画質パターンを履歴情報に基づいて調整し、ステップＳ５２において、全ての画質パターンに対する係数データの算出処理が終了したか否かを判断する。
【０２７１】
ステップＳ５２において、係数データの算出処理が終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ５３において、既知のＨＤ画素データをフレーム単位またはフィールド単位で取得し、ステップＳ５４において、全てのＨＤ画素データについて処理が終了したか否かを判断する。
【０２７２】
ステップＳ５４において、全てのＨＤ画素データについて処理が終了していないと判断された場合、ステップＳ５５において、ＣＰＵ２１１は、ステップＳ５３において取得されたＨＤ画素データより、ステップＳ５１において調整された画質パターンに基づいて、ＳＤ画素データを生成する。
【０２７３】
ＣＰＵ２１１は、ステップＳ５６において、ステップＳ５５で生成されたＳＤ画素データより、ステップＳ５３で取得された各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得し、ステップＳ５７において、生成されたＳＤ画素データの全領域において学習処理は終了しているか否かを判断する。ステップＳ５７において、学習処理は終了していると判断された場合、ステップＳ５３に戻り、次のＨＤ画素データを取得して、上述した処理と同様の処理が繰り返される。
【０２７４】
ステップＳ５７において、学習処理は終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ５８において、ステップＳ５６で取得されたクラスタップのＳＤ画素データから、クラスコードＣＬを生成し、ステップＳ５９において、係数データを得るための正規方程式（式（２５）参照）を生成する。ステップＳ５９の処理の終了後、処理は、ステップＳ５６に戻り、それ以降の処理が繰り返される。
【０２７５】
ステップＳ５４において、全てのＨＤ画素データについて処理が終了したと判断された場合、ステップＳ６０において、ＣＰＵ２１１は、ステップＳ５９において生成された正規方程式を、掃き出し法などで解いて、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の各組合わせの係数データを算出し、処理は、ステップＳ５１に戻り、次の画質パターンの選択、および調整を行って、上述した処理と同様の処理を繰り返し、次の画質パターンに対応した、各組み合わせの係数データを求める。
【０２７６】
ステップＳ５２において、全ての画質パターンに対する係数データの算出処理が終了したと判断された場合、ステップＳ６１において、ＣＰＵ２１１は、全ての画質パターンに対する係数データから、係数種データを求めるための正規方程式（式（２８）参照）を生成する。
【０２７７】
ＣＰＵ２１１は、ステップＳ６２において、ステップＳ６１で生成された正規方程式を、掃き出し法等で解くことによって、クラスおよび出力画素の各組合わせの係数種データを算出し、ステップＳ６３において、その係数種データを、例えば、記憶部２１５、あるいはドライブ２２６に装着されている記録媒体などに保存して、処理が終了される。
【０２７８】
図１７を用いて説明した処理により、図１４を用いて説明したパーソナルコンピュータ２０１において、図１３に示す係数種データ生成装置１７１と同様の手法によって、係数種データを得ることができる。
【０２７９】
次に、この発明の他の実施の形態について説明する。
【０２８０】
図１８は、図１のテレビジョン受信装置１の他の構成において、持ち運び部１５に代わって用いられる持ち運び部２５１の構成を示すブロック図である。持ち運び部２５１を備えたテレビジョン受信装置１も、放送信号よりＳＤ信号としての５２５ｉ信号を得て、この５２５ｉ信号をＨＤ信号としての１０５０ｉ信号に変換し、その１０５０ｉ信号を出力するものである。なお、図１８において、図３と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【０２８１】
すなわち、持ち運び部２５１は、情報メモリバンク５１に代わって、情報メモリバンク２６１を有し、正規化演算部４８、係数生成部５２、正規化係数演算部５４、および、正規化係数メモリ５５が設けられていないこと以外は、図３を用いて説明した持ち運び部１５と同様の構成を有している。
【０２８２】
情報メモリバンク２６１には、クラス、出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）およびパラメータｓ、およびｚの値の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）が予め格納されている。この係数データＷｉの生成方法については後述する。
【０２８３】
図１８の持ち運び部２５１の動作について説明する。
【０２８４】
バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）より、第２のタップ選択部４２で、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択部４２で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）は、空間クラス検出部４４に供給される。この空間クラス検出部４４では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（式（１）参照）。
【０２８５】
また、バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）より、第３のタップ選択部４３で、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第３のタップ選択部４３で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）は、動きクラス検出部４５に供給される。この動きクラス検出部４５では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０２８６】
動き情報ＭＶと再量子化コードｑｉとはクラス合成部４６に供給される。クラス合成部４６では、供給された動き情報ＭＶと再量子化コードｑｉとから、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック毎にその単位画素ブロック内の４画素（注目画素）が属するクラスを示すクラスコードＣＬが得られる（式（３）参照）。そして、このクラスコードＣＬは、係数メモリ５３に読み出しアドレス情報として供給される。
【０２８７】
係数メモリ５３には、例えば垂直ブランキング期間に、ユーザによって調整されたパラメータｓ、およびｚの値に対応したクラスおよび出力画素の各組合わせの係数データＷｉが、システムコントローラ１２の制御によって、情報メモリバンク２６１よりロードされて格納される。
【０２８８】
なお、情報メモリバンク２６１に、調整されたパラメータｓ、およびｚの値に対応した係数データが蓄えられていない場合には、係数メモリ１５３は、その調整されたパラメータｓ、およびｚの値の前後の値に対応した係数データＷｉを、情報メモリバンク２６１より読み出すようにし、それらを用いた補間演算処理によって、調整されたパラメータｓ、およびｚの値に対応した係数データを得るようにしてもよい。
【０２８９】
上述したように、クラスコードＣＬが読み出しアドレス情報として係数メモリ５３に供給されることで、係数メモリ５３から、クラスコードＣＬに対応した４出力画素（奇数フィールドではＨＤ１乃至ＨＤ４、偶数フィールドではＨＤ１′乃至ＨＤ４′）分の推定式の係数データＷｉが読み出されて、推定予測演算部４７に供給される。
【０２９０】
また、バッファメモリ１４に記憶されているＳＤ信号（５２５ｉ信号）より、第１のタップ選択部４１で、作成すべきＨＤ信号（１０５０ｉ信号）を構成する単位画素ブロック内の４画素（注目位置の画素）の周辺に位置する予測タップのデータ（ＳＤ画素データ）が、選択的に取り出される。
【０２９１】
推定予測演算部４７では、予測タップのデータ（ＳＤ画素データ）ｘｉと、係数メモリ５３より読み出される４出力画素分の係数データＷｉとから、作成すべきＨＤ信号を構成する単位画素ブロック内の４画素（注目位置の画素）のデータｙ₁乃至ｙ₄が演算される（式（４）参照）。そして、推定予測演算部４７より順次出力されるＨＤ信号を構成する単位画素ブロック内の４画素のデータｙ₁乃至ｙ₄は、後処理部４９に供給される。
【０２９２】
後処理部４９では、推定予測演算部４７より順次供給される単位画素ブロック内の４画素のデータｙ₁乃至ｙ₄が線順次化され、１０５０ｉ信号のフォーマットで出力される。つまり、後処理部４９からは、ＨＤ信号としての１０５０ｉ信号が出力される。
【０２９３】
このように、持ち運び部２５１では、調整されたパラメータｓ、およびｚの値に対応した推定式の係数データＷｉ（ｉ＝１乃至ｎ）が使用されて、ＨＤ画素データｙが演算される。従って、ユーザは、パラメータｓ、およびｚの値を調整することで、ＨＤ信号による画像の空間方向および時間方向の解像度を自由に調整することができる。
【０２９４】
また、履歴情報記憶部５０には、システムコントローラ１２から情報メモリバンク２６１に入力されるパラメータｓ、およびｚの値が入力される。そして、履歴情報記憶部５０の度数分布メモリ９１および経時変化メモリ９４（図６参照）には、システムコントローラ１２の制御により、図３に示す持ち運び部１５における場合と同様に、パラメータｓ、およびｚの値の履歴情報が格納される。
【０２９５】
このように、履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納される履歴情報は、例えば、テレビジョン受信装置１のバージョンアップ時に、持ち運び部２５１、もしくは持ち運び部２５１が含まれる基板を取り換える場合において、その情報メモリバンク２６１に格納される係数データＷｉを生成する際などに利用される。
【０２９６】
次に、係数データＷｉ（ｉ＝１乃至ｎ）の生成方法について説明する。
【０２９７】
既に説明したように、係数種データの生成方法の他の例として、まずパラメータｓ、およびｚの値を段階的に可変して得られるＳＤ信号毎に、それを用いた学習によってクラスおよび出力画素の各組合わせの係数データＷｉを生成し、次にＳＤ信号毎の各組合わせの係数データＷｉを使用して、クラスおよび出力画素の各組合わせの係数種データｗ₁₀乃至ｗ_n9を求めることができる。そして、情報メモリバンク２６１に予め蓄えられる、クラス、出力画素およびパラメータｓ、およびｚの値の組合わせ毎の係数データＷｉは、この係数種データの生成方法における、前半部分と同様の方法で生成することができる。
【０２９８】
図１９は、係数データ生成装置２７１の構成を示すブロック図である。この係数データ生成装置２７１において、図１３に示す係数種データ生成装置１７１と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【０２９９】
すなわち、図１９の係数データ生成装置２７１は、係数種メモリ１５２に代わって、係数メモリ２８１が設けられ、正規方程式生成部１８３および係数種データ決定部１８４が設けられていないこと以外は、図１３を用いて説明した係数種データ生成装置１７１と同様の構成を有している。
【０３００】
係数メモリ２８１には、係数データ決定部１８２で決定された、パラメータｓ、およびｚの各値に対応した、クラスおよび出力画素の各組合わせの係数データＷｉが記憶される。
【０３０１】
次に、図１９に示される係数データ生成装置２７１の動作について説明する。
【０３０２】
入力端子１４１には、教師信号としてのＨＤ信号（１０５０ｉ信号）が供給され、このＨＤ信号に対してＳＤ信号生成部１４３で水平および垂直の間引き処理が行われて、生徒信号としてのＳＤ信号（５２５ｉ信号）が生成される。
【０３０３】
ＳＤ信号生成部１４３に入力されるパラメータｓ、およびｚの値が順次変更されることで、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が変更されることから、空間方向および時間方向の帯域が段階的に変化した、複数のＳＤ信号が生成される。
【０３０４】
この場合、ＳＤ信号生成部１４３では、履歴情報が入力されるときは、この履歴情報に基づいて入力されたパラメータｓ、およびｚの値が調整され、調整されたパラメータｓ、およびｚの値に応じて、上述したようにＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。
【０３０５】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号（５２５ｉ信号）より、第２のタップ選択部１４５で、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する空間クラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第２のタップ選択部１４５で選択的に取り出された空間クラスタップのデータ（ＳＤ画素データ）は、空間クラス検出部１４７に供給される。空間クラス検出部１４７では、空間クラスタップのデータとしての各ＳＤ画素データに対してＡＤＲＣ処理が施されて、空間クラス（主に空間内の波形表現のためのクラス分類）のクラス情報としての再量子化コードｑｉが得られる（式（１）参照）。
【０３０６】
また、ＳＤ信号生成部１４３で生成されたＳＤ信号より、第３のタップ選択部１４６で、ＨＤ信号に係る注目画素の周辺に位置する動きクラスタップのデータ（ＳＤ画素データ）が選択的に取り出される。この第３のタップ選択部１４６で選択的に取り出された動きクラスタップのデータ（ＳＤ画素データ）は、動きクラス検出部１４８に供給される。この動きクラス検出部１４８では、動きクラスタップのデータとしての各ＳＤ画素データより動きクラス（主に、動きの程度を表すためのクラス分類）のクラス情報ＭＶが得られる。
【０３０７】
このクラス情報ＭＶと上述した再量子化コードｑｉとは、クラス合成部１４９に供給される。このクラス合成部１４９では、これらクラス情報ＭＶと再量子化コードｑｉとから、ＨＤ信号（１０５０ｉ信号）における注目位置の画素データが属するクラスを示すクラスコードＣＬが得られる（式（３）参照）。
【０３０８】
また、ＳＤ信号生成部１４３で生成されるＳＤ信号より、第１のタップ選択部１４４で、ＨＤ信号における注目位置の周辺に位置する予測タップのデータ（ＳＤ画素データ）が選択的に取り出される。
【０３０９】
そして、正規方程式生成部１８１では、入力端子１４１に供給されるＨＤ信号より得られる注目位置の画素データとしての各ＨＤ画素データｙと、この各ＨＤ画素データｙにそれぞれ対応して第１のタップ選択部１４４で選択的に取り出された予測タップのデータ（ＳＤ画素データ）ｘｉと、各ＨＤ画素データｙにそれぞれ対応してクラス合成部１４９より出力されるクラスコードＣＬとから、ＳＤ信号生成部１４３で生成される各ＳＤ信号のそれぞれに対応して、クラスおよび出力画素の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）を得るための正規方程式（式（２５）参照）が生成される。
【０３１０】
そして、係数データ決定部１８２において、その正規方程式が解かれ、各ＳＤ信号にそれぞれ対応した、クラスおよび出力画素の各組合わせの係数データＷｉが求められる。すなわち、係数データ決定部１８２からは、クラス、出力画素およびパラメータｓ、およびｚの値の組合わせ毎の係数データＷｉが得られる。この係数データＷｉは係数メモリ２８１に格納される。
【０３１１】
このように、図１９に示される係数データ生成装置２７１において、図１８の持ち運び部２５１の情報メモリバンク２６１に格納される、クラス、出力画素（ＨＤ１乃至ＨＤ４，ＨＤ１′乃至ＨＤ４′）およびパラメータｓ、およびｚの値の組合わせ毎の係数データＷｉが生成される。
【０３１２】
また、この係数データ生成装置２７１において、ＳＤ信号生成部１４３では、履歴情報に基づいて、入力されるパラメータｓ、およびｚの値が調整され、この調整されたパラメータｓ、およびｚによって、ＨＤ信号からＳＤ信号を得る際に用いられる帯域制限フィルタの空間方向および時間方向の帯域が可変される。従って、このようにして求められた係数データＷｉを、テレビジョン受信装置１のバージョンアップ時に新たに装着される、持ち運び部２５１、もしくは、持ち運び部２５１が含まれる基板の情報メモリバンク２６１に格納して使用することで、ユーザは、パラメータｓ、およびｚの値の調整により、過去の解像度調整の重心位置を中心とする範囲（図１１の一点鎖線枠ＡＦ参照）内で解像度の調整を行うことが可能となる。
【０３１３】
なお、図１８の持ち運び部２５１では、空間方向（垂直方向および水平方向）の解像度を定めるパラメータｓと時間方向（フレーム方向）の解像度を定めるパラメータｚとを設定し、これらパラメータｓ、およびｚの値を調整することで画像の空間方向および時間方向の解像度を調整し得るものとして説明したが、その他の画像の質を定めるパラメータを設けるものも、同様に構成することができる。パラメータとしては、例えば、垂直方向の解像度を定めるパラメータ、水平方向の解像度を定めるパラメータ、ノイズ除去度を定めるパラメータなど、種々のパラメータが考えられる。
【０３１４】
また、図１８の持ち運び部２５１では、パラメータｓ、およびｚの２つのパラメータを調整し得るものを示したが、１個または３個以上のパラメータを取り扱うものも、同様にして構成することができる。その場合も、履歴情報記憶部５０には、それぞれのパラメータの履歴情報が格納されることとなる。そして、図１９に示す係数データ生成装置２７１では、それぞれのパラメータの履歴情報を使用して、上述した場合と同様の生成処理を行うことができる。
【０３１５】
また、図１８の持ち運び部２５１における処理を、図１の持ち運び部１５における処理と同様に、例えば、図１４に示されるパーソナルコンピュータ２０１において、ソフトウェアで実現することも可能である。この場合、ＲＯＭ２１２等に、係数データが予め格納されて使用される。
【０３１６】
図２０のフローチャートを参照して、図１４に示されるパーソナルコンピュータ２０１が実行する、ＳＤ信号よりＨＤ信号を得るための画像信号処理２について説明する。
【０３１７】
ステップＳ８１において、ＣＰＵ２１１は、ＳＤ画素データをフレーム単位またはフィールド単位で取得する。このＳＤ画素データが入力端子２２２より入力される場合、ＳＤ画素データは、ＲＡＭ２１３に一時的に格納される。また、このＳＤ画素データが記録部２１５に記録されている場合、記録部２１５からＳＤ画素データが読み出されて、ＲＡＭ２１３に一時的に格納される。
【０３１８】
ステップＳ８２において、ＣＰＵ２１１は、入力ＳＤ画素データの全フレームまたは全フィールドの処理が終了しているか否かを判断する。ステップＳ８２において、全データの処理が終了していないと判断された場合、ステップＳ８３において、ＣＰＵ２１１は、ユーザがリモートコマンダ２０３を操作して入力した画質指定値（例えばパラメータｓ、およびｚの値など）を、例えば、ＲＡＭ２１３より読み込むなどして取得する。
【０３１９】
ＣＰＵ２１１は、ステップＳ８４において、例えば、記録部２１５（図１８の持ち運び部２５１の履歴情報記憶部５０における度数分布メモリ９１、経時変化メモリ９４の記憶内容に相当する）に格納されている履歴情報を、取得された新たな画質指定値に基づいて更新し、ステップＳ８５において、取得された画質指定値に基づいて、ＲＯＭ２１２等から、その画質指定値に対応したクラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の各組合わせの係数データＷｉを読み出し、ＲＡＭ２１３に一時的に格納する。
【０３２０】
ＣＰＵ２１１は、ステップＳ８６において、ステップＳ８１で取得されたＳＤ画素データより、生成すべき各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得し、ステップＳ８７において、入力されたＳＤ画素データの全領域において、ＨＤ画素データを得る処理が終了したか否かを判断する。ステップＳ８７において、終了していると判断された場合、処理は、ステップＳ８１に戻り、次のフレームまたはフィールドのＳＤ画素データに対して、同様の処理が繰り返される。
【０３２１】
ステップＳ８７において、入力されたＳＤ画素データの全領域において、ＨＤ画素データを得る処理が終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ８８において、ステップＳ８６において取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成し、ステップＳ８９において、そのクラスコードＣＬに対応した係数データと予測タップのＳＤ画素データを使用して、推定式により、ＨＤ画素データを生成する。ステップＳ８９の処理の終了後、処理は、ステップＳ８６に戻り、それ以降の処理が繰り返される。
【０３２２】
ステップＳ８２において、処理が終了していると判断された場合、処理が終了される。
【０３２３】
このように、図２０を用いて説明した処理が実行されることにより、パーソナルコンピュータ２０１を用いて、入力されたＳＤ信号を構成するＳＤ画素データを処理して、ＨＤ信号を構成するＨＤ画素データを得ることができる。上述したように、このように処理して得られたＨＤ信号は、出力端子２２３から他の装置などに出力されたり、表示部２２１に供給されて、ＨＤ信号に対応する画像が表示されたり、更に、記録部２１５に供給されて、記録部２１５を構成するハードディスクなどに記録されたりする。
【０３２４】
上述したように、例えば、記録部２１５に格納される履歴情報は、ステップＳ８５で使用する新たな係数データを生成する際に利用される。このように、新たに生成される係数データを利用することで、ユーザの好みに合わせた調整範囲での画質調整が可能となる。なお、上述の履歴情報は、記録部２１５ではなく、ドライブ２２６に装着された記録媒体（例えば、半導体メモリ２３４の一種である、メモリカードなどの装脱可能なメモリ）に格納されるようにしてもよい。
【０３２５】
また、図１９の係数データ生成装置２７１における処理も、同様にして、例えば、図１４に示されるパーソナルコンピュータ２０１によって、ソフトウェアで実現することが可能である。
【０３２６】
図２１のフローチャートを参照して、図１４のパーソナルコンピュータ２０１が実行する係数データ生成処理について説明する。
【０３２７】
ＣＰＵ２１１は、ステップＳ１０１において、学習に使われる画質パターン（例えば、パラメータｓ、およびｚで特定される）を選択するとともに、その画質パターンを履歴情報に基づいて調整し、ステップＳ１０２において、全ての画質パターンに対する係数データの算出処理が終了したか否かを判断する。
【０３２８】
ステップＳ１０２において、全ての画質パターンに対する係数データの算出処理が終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ１０３において、既知のＨＤ画素データをフレーム単位またはフィールド単位で取得し、ステップＳ１０４において、全てのＨＤ画素データについて処理が終了したか否かを判断する。
【０３２９】
ステップＳ１０４において、全てのＨＤ画素データについて処理が終了していないと判断された場合、ＣＰＵ２１１は、ステップＳ１０５において、ステップＳ１０３において取得されたＨＤ画素データより、ステップＳ１０１において調整された画質パターンに基づいて、ＳＤ画素データを生成し、ステップＳ１０６において、ステップＳ１０５で生成されたＳＤ画素データより、ステップＳ１０３で取得された各ＨＤ画素データに対応して、クラスタップおよび予測タップの画素データを取得する。
【０３３０】
ステップＳ１０７において、ＣＰＵ２１１は、生成されたＳＤ画素データの全領域において学習処理は終了しているか否かを判断する。
【０３３１】
ステップＳ１０７において、学習処理は終了していないと判断された場合、ステップＳ１０８において、ＣＰＵ２１１は、ステップＳ１０６で取得されたクラスタップのＳＤ画素データからクラスコードＣＬを生成し、ステップＳ１０９において、係数データを得るための正規方程式（式（２５）参照）を生成する。ステップＳ１０９の処理の終了後、処理は、ステップＳ１０６に戻り、それ以降の処理が繰り返される。
【０３３２】
ステップＳ１０７において、学習処理は終了していると判断された場合、処理は、ステップＳ１０３に戻り、次のＨＤ画素データを取得して、それ以降、上述した処理と同様の処理が繰り返される。
【０３３３】
ステップＳ１０４において、全てのＨＤ画素データについて処理が終了したと判断された場合、ステップＳ１１０において、ＣＰＵ２１１は、ステップＳ１０９で生成された正規方程式を、掃き出し法などで解いて、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の各組合わせの係数データを算出する。ステップＳ１１０の処理の終了後、処理は、ステップＳ１０１に戻り、次の画質パターンが選択されて調整が行われ、それ以降の処理が繰り返されて、次の画質パターンに対応した、各組合わせの係数データが求められる。
【０３３４】
ステップＳ１０２において、全ての画質パターンに対する係数データの算出処理が終了したと判断された場合、ステップＳ１１１において、ＣＰＵ２１１は、全ての画質パターンに対する各クラスの係数データを、例えば、記憶部２１５、もしくはドライブ２２６に装着された記録媒体などに保存して、処理が終了される。
【０３３５】
このように、図２１を用いて説明した処理により、図１４のパーソナルコンピュータにおけるソフトウェアの処理により、図１９に示す係数データ生成装置２７１と同様の手法によって、係数データを得ることができる。
【０３３６】
次に、この発明の、更に異なる他の実施の形態について説明する。
【０３３７】
図２２は、図１を用いて説明したテレビジョン受信装置１の他の実施の形態として、持ち運び部１５に代わって設けられる持ち運び部３０１の構成を示すブロック図である。この持ち運び部３０１も、図３を用いて説明した持ち運び部１５および図１８を用いて説明した持ち運び部２５１と同様にして、放送信号よりＳＤ信号としての５２５ｉ信号を得て、この５２５ｉ信号をＨＤ信号としての１０５０ｉ信号に変換し、その１０５０ｉ信号を出力するものである。図２２において、図３と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【０３３８】
すなわち、持ち運び部３０１は、情報メモリバンク５１に代わって、情報メモリバンク３１１が備えられ、システムコントローラ１２から、第１のタップ選択部４１に制御信号が供給されること以外は、図３を用いて説明した持ち運び部１５と同様の構成を有している。
【０３３９】
情報メモリバンク３１１には、クラスおよび出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）の組合わせ毎に、推定式（式（４）参照）で用いられる係数データＷｉ（ｉ＝１乃至ｎ）を生成するための生成式（式（５）参照）における係数データである係数種データｗ₁₀乃至ｗ_n9が格納されている。この係数種データｗ₁₀乃至ｗ_n9の生成方法については後述する。
【０３４０】
また、この情報メモリバンク３１１には、格納されている係数種データｗ₁₀乃至ｗ_n9に関連して、第１のタップ選択部４１で選択される予測タップのタップ位置情報が格納されている。このタップ位置情報は、係数種データｗ₁₀乃至ｗ_n9を生成した際の生成装置における予測タップの位置情報である。システムコントローラ１２は、このように、情報メモリバンク３１１に格納されているタップ位置情報に基づいて、第１のタップ選択部４１で選択される予測タップの位置を、係数種データｗ₁₀乃至ｗ_n9を生成した際の生成装置における予測タップの位置と等しくなるように切り換えるための制御信号を生成し、第１のタップ選択部４１に供給する。
【０３４１】
ここで、第１のタップ選択部４１で選択される予測タップの位置は、水平方向、垂直方向、時間方向に亘っている。本実施の形態においては、情報メモリバンク３１１に格納されるタップ位置情報に基づいて、Ａタイプ、Ｂタイプ、Ｃタイプのいずれかに、予測タップの位置が切り換えられる。
【０３４２】
図２３乃至図２５は、それぞれ、Ａタイプ乃至Ｃタイプの予測タップ位置を示す図である。ここで、「○」は選択される予測タップの位置を示している。また、Ｆ０は、作成すべきＨＤ信号の画素データ（注目位置の画素データ）が存在するフィールドであり、このフィールドＦ０に中心予測タップＴＰが存在する。また、Ｆ−１は、フィールドＦ０より前のフィールドであり、Ｆ＋１は、フィールドＦ０より後のフィールドである。
【０３４３】
図２３に示すＡタイプの予測タップ位置は、空間方向（垂直方向および水平方向）の予測タップの個数を多くしたものである。これにより、パラメータｚの値で定められる時間方向の解像度に比べて、パラメータｓの値で定められる空間方向の解像度が精度よく創造されるものとなる。図２５に示すＣタイプの予測タップ位置は、時間方向の予測タップの個数を多くしたものである。これにより、パラメータｓの値で定められる空間方向の解像度に比べて、パラメータｚの値で定められる時間方向の解像度が精度よく創造されるものとなる。図２４に示すＢタイプの予測タップ位置は、ＡタイプとＢタイプの中間である。なお、Ａタイプ乃至Ｃタイプのそれぞれにおいて、予測タップの個数は等しくされている。
【０３４４】
このように構成される持ち運び部３０１の動作は、図３の持ち運び部１５の動作と全く同様である。すなわち、持ち運び部３０１は、入力されたＳＤ信号（５２５ｉ信号）をＨＤ信号（１０５０ｉ信号）に変換することができる。また、ユーザは、パラメータｓ、およびｚの値を調整することで、ＨＤ信号による画像の空間方向および時間方向の解像度を自由に調整できる。
【０３４５】
また、履歴情報記憶部５０の度数分布メモリ９１（図６参照）には、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のそれぞれの度数分布の情報が格納される。また、履歴情報記憶部５０の経時変化メモリ９４（図６参照）には、システムコントローラ１２から係数生成部５２に入力されるパラメータｓ、およびｚの値のうち、所定数、例えば１０個の最新のパラメータｓ、およびｚの値が格納される。
【０３４６】
このように、履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納される履歴情報は、例えばテレビジョン受信装置１のバージョンアップ時に持ち運び部３０１、もしくは持ち運び部３０１が含まれる基板を取り換える場合において、その情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際などに利用される。
【０３４７】
情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9は、図１の持ち運び部１５の情報メモリバンク５１に格納される係数種データｗ₁₀乃至ｗ_n9と同様の方法で生成される。
【０３４８】
図２６は、図２２の持ち運び部３０１の情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を生成するための係数種データ生成装置３２１の構成を示すブロック図である。なお、図２６において、図１０と対応する部分には同一の符号を付してあり、その説明は適宜省略する。
【０３４９】
すなわち、係数種データ生成装置３２１は、ＳＤ信号生成部１４３に代わって、入力端子１４１に入力されるＨＤ信号に対して水平および垂直の間引き処理を行って、生徒信号としてのＳＤ信号を得るＳＤ信号生成部３３１が設けられ、第１のタップ選択部１４４に代わって、履歴情報の供給を受ける第１のタップ選択部３３２が設けられている以外は、図１０を用いて説明した、係数種データ生成装置１２１と同様の構成を有するものである。
【０３５０】
ＳＤ信号生成部３３１には、図２２を用いて説明した持ち運び部３０１におけるパラメータｓ、およびｚの値と対応した、パラメータｓ、およびｚの値が入力される。しかし、ＳＤ信号生成部３３１には、図１０の係数種データ生成装置１２１におけるＳＤ信号生成部１４３とは異なり、履歴情報は入力されない。
【０３５１】
従って、このＳＤ信号生成部３３１では、入力されたパラメータｓ、およびｚの値が調整されることはなく、入力されたパラメータｓ、およびｚの値そのものに応じて、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの、空間方向および時間方向の帯域が可変される。
【０３５２】
また、第１のタップ選択部３３２は、ＳＤ信号生成部１４３より出力されるＳＤ信号（５２５ｉ信号）より、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する予測タップのデータ（ＳＤ画素データ）ｘｉを選択的に取り出す。
【０３５３】
この第１のタップ選択部３３２には、図１０の係数種データ生成装置１２１における第１のタップ選択部１４４とは異なり、図２２を用いて説明した持ち運び部３０１の履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４（図６参照）に格納されている、入力されたパラメータｓ、およびｚの値の履歴情報が供給される。
【０３５４】
なお、使用開始前のテレビジョン受信装置１の情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際には、いまだ履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に履歴情報が格納されていないので、第１のタップ選択部３３２に履歴情報は入力されない。つまり、第１のタップ選択部３３２に履歴情報が入力されるのは、例えば、テレビジョン受信装置１のバージョンアップ時に、持ち運び部３０１、もしくは持ち運び部３０１が含まれる基板を取り換える場合であって、その情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を生成する際などである。
【０３５５】
第１のタップ選択部３３２では、予測タップ位置が、履歴情報に基づいて、図２３乃至図２５を用いて説明したＡタイプ乃至Ｃタイプのうちのいずれかに切り換えられる。また、第１のタップ選択部３３２において履歴情報の入力がない場合、予測タップ位置は、図２４に示されるＢタイプとされる。この場合、パラメータｓの値で定められる空間方向の解像度と、パラメータｚの値で定められる時間方向の解像度とが、それぞれ一定の精度で創造されるように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０３５６】
第１のタップ選択部３３２において、履歴情報が入力された場合、パラメータｓ、およびｚの値のそれぞれにおける度数分布の情報が用いられて重心位置が求められる。この場合、所定数の最新のパラメータｓ、およびｚの値に対応する値で新しいほど大きな重み付けがされる。そして、第１のタップ選択回路３３２では、この重心位置に応じて、予測タップ位置のタイプが選択される。
【０３５７】
図２２を用いて説明した持ち運び部２２を有するテレビジョン受信装置１では、ユーザの操作によってパラメータｓ、およびｚの値が、例えばそれぞれ０乃至８の範囲内で、所定のステップをもって調整され、空間方向および時間方向の解像度の調整が行われる。
【０３５８】
上述した重心位置が、図２７に示されるユーザ調整範囲において、ＡＲａの範囲に存在し、ユーザが空間方向の解像度に重きをおいた調整を行っていると想定されるとき、予測タップ位置は、図２３に示すＡタイプが選択される。この場合、空間方向（垂直方向および水平方向）の予測タップの個数が多くなるため、パラメータｚの値で定められる時間方向の解像度に比べて、パラメータｓの値で定められる空間方向の解像度が精度よく創造されるように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０３５９】
また、この重心位置が図２７に示されるユーザ調整範囲において、ＡＲｂの範囲に存在し、ユーザが空間方向および時間方向の解像度の一方にのみ重きを置いた調整を行っているとは想定されないとき、予測タップ位置は、図２４に示すＢタイプが選択される。この場合、上述の履歴情報の入力がない場合と同様に、パラメータｓの値で定められる空間方向の解像度と、パラメータｚの値で定められる時間方向の解像度とが、それぞれ一定の精度で創造されるように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０３６０】
更に、この重心位置が図２７のＡＲｃの範囲に存在し、ユーザが空間方向の解像度に重きを置いた調整を行っていると想定されるとき、予測タップ位置は、図２５に示すＣタイプが選択される。例えば、テレビジョン受信装置１の持ち運び部３０１におけるパラメータｓ、およびｚの調整位置が、図２７に「×」印で示す位置にある場合には、重心位置はＡＲｃの範囲に存在するため、予測タップ位置は、図２５に示すＣタイプが選択されることとなる。
【０３６１】
この場合、時間方向の予測タップの個数が多くなるため、パラメータｓの値で定められる空間方向の解像度に比べて、パラメータｚの値で定められる時間方向の解像度が精度よく創造されるように、係数種データｗ₁₀乃至ｗ_n9が生成される。
【０３６２】
係数種データ生成装置３２１のその他の構成は、図１０の係数種データ生成装置１２１と同様である。詳細説明は省略するが、このように構成される係数種データ生成装置３２１の動作は、図１０の係数種データ生成装置１２１と同様であり、図２２に示す持ち運び部３０１の情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を良好に生成することができる。なお、図２２を用いて説明した持ち運び部３０１の情報メモリバンク３１１に格納されるタップ位置情報は、このように係数種データ生成装置３２１で係数種データｗ₁₀乃至ｗ_n9を生成した際におけるタップ位置の情報である。
【０３６３】
このようにして求められた係数種データｗ₁₀乃至ｗ_n9を、テレビジョン受信装置１のバージョンアップ時に、新たに装着される持ち運び部３０１、もしくは持ち運び部３０１が含まれる基板の情報メモリバンク３１１に格納して使用することで、ユーザが過去に空間方向の解像度に重きをおいている場合には空間方向の解像度が精度よく創造されるようになり、一方、ユーザが過去に時間方向の解像度に重きをおいている場合には時間方向の解像度が精度よく創造される。すなわち、新たに求められた係数種データｗ₁₀乃至ｗ_n9を使用することにより、ユーザの好みに合わせた解像度創造を行うことができる。
【０３６４】
なお、図２６に示す係数種データ生成装置３２１は、図１０に示す係数種データ生成装置１２１に対応したものであったが、図１３に示す係数種データ生成装置１７１に対応する係数種データ生成装置によっても、持ち運び部３０１の情報メモリバンク３１１に格納される係数種データｗ₁₀乃至ｗ_n9を生成することができる。この場合、係数種データ生成装置１７１におけるＳＤ信号生成部１４３および第１のタップ選択部１４４の部分を、図２６に示す係数種データ生成装置３２１におけるＳＤ信号生成部３３１および第１のタップ選択部３３２に置き換えればよい。
【０３６５】
また、図２２の持ち運び部３０１では、空間方向（垂直方向および水平方向）の解像度を定めるパラメータｓと時間方向（フレーム方向）の解像度を定めるパラメータｚとを設定し、これらパラメータｓ、およびｚの値を調整することで画像の空間方向および時間方向の解像度を調整し得るものを示したが、その他の２以上の方向の解像度を調整し得るものも同様に構成することができる。例えば、垂直方向および水平方向の解像度を調整するもの、あるいは垂直方向、水平方向および時間方向の解像度を調整するものにおいても、同様に構成することが可能である。
【０３６６】
また、図２２の持ち運び部３０１では、第１のタップ選択部４１で選択できる予測タップのタップ位置のタイプは図２３乃至図２５を用いて説明したタイプＡ乃至タイプＣの３タイプであったが、選択し得るタップ位置のタイプの個数は、これに限定されるものではない。
【０３６７】
また、図２２の持ち運び部３０１における処理を、例えば、図１４を用いて説明したパーソナルコンピュータ２０１によって、ソフトウェアで実現することも可能である。この場合の画像信号処理は、基本的には、図１５に示すフローチャートに沿って行われるが、ステップＳ６において、予測タップの画素データを取得する際に、予測タップの画素位置は、ステップＳ５の処理において使用された係数種データｗ₁₀乃至ｗ_n9が生成された際の生成装置における予測タップの位置と等しくされる。
【０３６８】
また、図２６の係数種データ生成装置３２１における処理も、同様にして、ソフトウェアで実現可能である。この場合の係数種データ生成処理は、基本的には、図１６に示すフローチャートに沿って行われるが、ステップＳ２１においては、画質パターン（パラメータｓ、およびｚで特定される）の選択のみ行われ、履歴情報による調整は行われない。また、ステップＳ２６において予測タップの画素データを取得する際、その予測タップの画素位置は、取得された履歴情報に基づいて選択される。
【０３６９】
次に、この発明の他の実施の形態について説明する。
【０３７０】
図２８は、他の実施の形態として、図１のテレビジョン受信装置１の持ち運び部１５に代わって設けられる持ち運び部３４１の構成を示すブロック図である。この持ち運び部３４１も、放送信号よりＳＤ信号としての５２５ｉ信号を得て、この５２５ｉ信号をＨＤ信号としての１０５０ｉ信号に変換し、その１０５０ｉ信号を出力するものである。持ち運び部１５に代わって持ち運び部３４１が設けられたテレビジョン受信装置１は、持ち運び部１５が設けられている場合と同様の動作をすることは言うまでもない。
【０３７１】
図２８を用いて、持ち運び部３４１の詳細について説明する。図２８において、図１８と対応する部分には同一符号を付し、その詳細な説明は適宜省略する。
【０３７２】
すなわち、持ち運び部３４１は、情報メモリバンク２６１に代わって、情報メモリバンク３５１が設けられ、システムコントローラ１２から、第１のタップ選択部４１に制御信号が供給されている以外は、図１８の持ち運び部２５１と基本的に同様の構成を有している。この情報メモリバンク３５１には、クラス、出力画素（図４のＨＤ１乃至ＨＤ４、図５のＨＤ１′乃至ＨＤ４′参照）およびパラメータｓ、およびｚの値の組合わせ毎に、係数データＷｉ（ｉ＝１乃至ｎ）が予め格納されている。この係数データＷｉの生成方法については後述する。
【０３７３】
また、この情報メモリバンク３５１には、格納されている係数データＷｉ（ｉ＝１乃至ｎ）に関連して、第１のタップ選択部４１で選択される予測タップのタップ位置情報が格納されている。このタップ位置情報は、係数データＷｉを生成した際の生成装置における予測タップの位置情報である。システムコントローラ１２は、このように、情報メモリバンク３５１に格納されているタップ位置情報に基づいて、第１のタップ選択部４１で選択される予測タップの位置を、係数データＷｉを生成した際の生成装置における予測タップの位置と等しくなるように切り換える。
【０３７４】
ここで、第１のタップ選択部４１で選択される予測タップの位置は、水平方向、垂直方向、時間方向に亘っている。この予測タップの位置は、図２２の持ち運び部３０１におけると同様に、情報メモリバンク３５１に格納されるタップ位置情報に基づいて、Ａタイプ、Ｂタイプ、Ｃタイプのいずれかに切り換えられる。
【０３７５】
図２８の持ち運び部３４１の動作は、図１８の持ち運び部２５１の動作と全く同様であるので、その詳細な説明は省略する。
【０３７６】
すなわち、持ち運び部３４１は、ＳＤ信号（５２５ｉ信号）をＨＤ信号（１０５０ｉ信号）に変換することができる。また、ユーザは、パラメータｓ、およびｚの値を調整することで、ＨＤ信号による画像の空間方向および時間方向の解像度を自由に調整できる。
【０３７７】
また、履歴情報記憶部５０の度数分布メモリ９１（図６参照）には、システムコントローラ１２から情報メモリバンク３５１に入力されるパラメータｓ、およびｚの値のそれぞれの度数分布の情報が格納される。また、履歴情報記憶部５０の経時変化メモリ９４（図６参照）には、システムコントローラ１２から情報メモリバンク３５１に入力されるパラメータｓ、およびｚの値のうち、所定数、例えば１０個の最新のパラメータｓ、およびｚの値が格納される。
【０３７８】
このように、履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に格納される履歴情報は、例えば、テレビジョン受信装置１のバージョンアップ時に持ち運び部３４１、もしくは持ち運び部３４１が含まれる基板を取り換える場合において、その情報メモリバンク３５１に格納される係数データＷｉを生成する際などに利用される。
【０３７９】
情報メモリバンク３５１に格納される係数データＷｉ（ｉ＝１乃至ｎ）は、図１８の持ち運び部２５１の情報メモリバンク２６１に格納される係数データＷｉと同様の方法で生成される。
【０３８０】
図２９は、上述した持ち運び部３４１の情報メモリバンク３５１に格納される係数データＷｉを生成するための係数データ生成装置３６１の構成を示している。この図２９において、図１９と対応する部分には同一符号を付し、その詳細説明は省略する。
【０３８１】
すなわち、係数データ生成装置３６１は、ＳＤ信号生成部１４３に代わってＳＤ信号生成部３７１が設けられ、第１のタップ選択部１４４に代わって、第１のタップ選択部３７２が設けられている以外は、図１９の係数データ生成装置２７１と同様の構成を有している。
【０３８２】
ＳＤ信号生成部３７１は、入力端子１４１に入力されるＨＤ信号に対して水平および垂直の間引き処理を行って、生徒信号としてのＳＤ信号を得ることができる。ＳＤ信号生成部３７１には、上述した持ち運び部３４１におけるパラメータｓ、およびｚの値と対応した、パラメータｓ、およびｚの値が入力される。しかし、ＳＤ信号生成部３７１には、図１９の係数データ生成装置２７１におけるＳＤ信号生成部１４３とは異なり、履歴情報は入力されない。
【０３８３】
従って、このＳＤ信号生成部３７１では、入力されたパラメータｓ、およびｚの値が調整されることはなく、入力されたパラメータｓ、およびｚの値そのものに応じて、ＨＤ信号からＳＤ信号を生成する際に用いられる帯域制限フィルタの、空間方向および時間方向の帯域が可変される。
【０３８４】
また、係数データ生成装置３６１は、ＳＤ信号生成部３７１より出力されるＳＤ信号（５２５ｉ信号）より、ＨＤ信号（１０５０ｉ信号）における注目位置の周辺に位置する予測タップのデータ（ＳＤ画素データ）ｘｉを選択的に取り出す第１のタップ選択部３７２を有している。
【０３８５】
この第１のタップ選択部３７２には、図１９の係数データ生成装置２７１における第１のタップ選択部１４４とは異なり、上述したテレビジョン受信装置１に搭載される持ち運び部３４１の履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４（図６参照）に格納されている、入力されたパラメータｓ、およびｚの値の履歴情報が供給される。
【０３８６】
なお、使用開始前のテレビジョン受信装置１に搭載される持ち運び部３４１の情報メモリバンク３５１に格納される係数データＷｉを生成する際には、いまだ履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に履歴情報が格納されていないので、第１のタップ選択部３７２に履歴情報は入力されない。つまり、第１のタップ選択部３７２に履歴情報が入力されるのは、例えばテレビジョン受信装置１のバージョンアップ時に、持ち運び部３４１、もしくは持ち運び部３４１が含まれる基板を取り換える場合であって、その情報メモリバンク３５１に格納される係数データＷｉを生成する際などである。
【０３８７】
第１タップ選択部３７２では、履歴情報に基づいて、予測タップ位置は、図２３乃至図２５に示すＡタイプ乃至Ｃタイプのいずれかに切り換えられる。
【０３８８】
履歴情報の入力がないときは、図２５に示すＢタイプとされる。この場合、パラメータｓの値で定められる空間方向の解像度と、パラメータｚの値で定められる時間方向の解像度とが、それぞれ一定の精度で創造されるように、係数データＷｉが生成される。
【０３８９】
履歴情報が入力される場合、第１のタップ選択部３７２では、パラメータｓ、およびｚの値のそれぞれにおける度数分布の情報が用いられて重心位置が求められる。この場合、所定数の最新のパラメータｓ、およびｚの値に対応する値で新しいほど大きな重み付けがされる。そして、第１のタップ選択回路３７２では、この重心位置に応じて、予測タップ位置のタイプが選択される。
【０３９０】
持ち運び部３４１では、ユーザの操作によってパラメータｓ、およびｚの値が、例えばそれぞれ０乃至８の範囲内で、所定のステップをもって調整され、空間方向および時間方向の解像度の調整が行われる。
【０３９１】
上述の重心位置が図２７のＡＲａの範囲に存在し、ユーザが空間方向の解像度に重きを置いた調整を行っていると想定されるときは、図２３に示すＡタイプが選択される。この場合、空間方向（垂直方向および水平方向）の予測タップの個数が多くなるため、パラメータｚの値で定められる時間方向の解像度に比べて、パラメータｓの値で定められる空間方向の解像度が精度よく創造されるように、係数データＷｉが生成される。
【０３９２】
また、この重心位置が図２７のＡＲｂの範囲に存在し、ユーザが空間方向および時間方向の解像度の一方にのみ重きを置いた調整を行っているとは想定されないときは、図２４に示すＢタイプが選択される。この場合、上述の履歴情報の入力がない場合と同様に、パラメータｓの値で定められる空間方向の解像度と、パラメータｚの値で定められる時間方向の解像度とが、それぞれ一定の精度で創造されるように、係数データＷｉが生成される。
【０３９３】
更に、この重心位置が図２７のＡＲｃの範囲に存在し、ユーザが空間方向の解像度に重きを置いた調整を行っていると想定されるときは、図２５に示すＣタイプが選択される。この場合、時間方向の予測タップの個数が多くなるため、パラメータｓの値で定められる空間方向の解像度に比べて、パラメータｚの値で定められる時間方向の解像度が精度よく創造されるように、係数データＷｉが生成される。
【０３９４】
係数データ生成装置３６１のその他の構成は、図１９の係数データ生成装置２７１と同様である。詳細説明は省略するが、このように構成される係数データ生成装置３６１の動作は、図１９の係数データ生成装置２７１と同様であり、図２８に示すテレビジョン受信装置１に搭載される持ち運び部３４１の情報メモリバンク３５１に格納される係数データＷｉを良好に生成することができる。なお、上述した持ち運び部３４１の情報メモリバンク３５１に格納されるタップ位置情報は、このように係数データ生成装置３６１で係数データＷｉを生成した際におけるタップ位置の情報である。
【０３９５】
このようにして求められた係数データＷｉを、テレビジョン受信装置１のバージョンアップ時に新たに装着される、持ち運び部３４１、もしくは持ち運び部３４１が含まれる基板の情報メモリバンク３５１に格納して使用することで、ユーザが過去に空間方向の解像度に重きをおいている場合には空間方向の解像度が精度よく創造されるようになり、一方、ユーザが過去に時間方向の解像度に重きをおいている場合には時間方向の解像度が精度よく創造される。すなわち、新たに求められた係数データＷｉを使用することにより、ユーザの好みに合わせた解像度創造を行うことができる。
【０３９６】
なお、図２８の持ち運び部３４１では、空間方向（垂直方向および水平方向）の解像度を定めるパラメータｓと時間方向（フレーム方向）の解像度を定めるパラメータｚとを設定し、これらパラメータｓ、およびｚの値を調整することで画像の空間方向および時間方向の解像度を調整し得るものを示したが、その他の２以上の方向の解像度を調整し得るものも同様に構成することができる。例えば、垂直方向および水平方向の解像度を調整するもの、あるいは垂直方向、水平方向および時間方向を調整するものである。
【０３９７】
また、図２８の持ち運び部３４１では、第１のタップ選択部４１で選択できる予測タップのタップ位置のタイプはＡタイプ乃至Ｃの３タイプであったが、選択し得るタップ位置のタイプの個数はこれに限定されるものではない。
【０３９８】
また、図２８の持ち運び部３４１における処理を、例えば、図１４に示すようなパーソナルコンピュータ２０１によって、ソフトウェアで実現することも可能である。この場合の画像信号処理は、基本的には、図２０に示すフローチャートに沿って行われるが、ステップＳ８６で予測タップの画素データを取得する際に、予測タップの画素位置は、ステップＳ８５で読み出される係数データＷｉが生成された際の生成装置における予測タップの位置と等しくされる。
【０３９９】
また、同様に、図２９の係数データ生成装置３６１における処理も、ソフトウェアで実現可能である。この場合の係数データ生成処理は、基本的には、図２１に示すフローチャートに沿って行われるが、ステップＳ１０１では、画質パターン（パラメータｓ、およびｚで特定される）の選択のみ行われ、履歴情報による調整は行われない。また、ステップＳ１０６で予測タップの画素データを取得する際、その予測タップの画素位置は履歴情報に基づいて選択される。
【０４００】
なお、上述した図３、図１８、図２２および図２８に示す持ち運び部においては、ＨＤ信号を生成する際の推定式として線形一次方程式を使用したものを例に挙げて説明したが、これに限定されるものではなく、例えば推定式として高次方程式を使用するものであってもよい。
【０４０１】
更に、テレビジョン受信装置１は、例えば、磁気テープ、光ディスク、磁気ディスク、光磁気ディスク、もしくは、半導体メモリなどの記録媒体にデータを記録したり、これらの記録媒体に記録されているデータを再生したりすることができる記録再生装置を備えるか、もしくは、記録再生装置と接続可能であるものとしてもよい。
【０４０２】
その場合、上述した図３、図１８、図２２および図２８に示す持ち運び部を備えたテレビジョン受信装置１は、ＳＤ信号の放送データを受信して、ＨＤ信号に変換して、各種記録媒体に記録させたり、もしくは、各種記録媒体に記録されているＳＤ信号の映像データをＨＤ信号に変換して、再生させたり、再び各種記録媒体に記録させることができる。すなわち、本発明は、放送データに限らず、あらゆるコンテンツデータを処理する場合に適用可能である。
【０４０３】
また、上述した図３、図１８、図２２および図２８に示す持ち運び部においては、ＳＤ信号（５２５ｉ信号）をＨＤ信号（１０５０ｉ信号）に変換する例を示したが、この発明はそれに限定されるものでなく、推定式を使用して第１の画像信号を第２の画像信号に変換するその他の場合にも、同様に適用できることは勿論である。
【０４０４】
また、上述した図３、図１８、図２２および図２８に示す持ち運び部においては、情報信号が画像信号である場合を示したが、この発明はこれに限定されない。例えば、情報信号が音声信号である場合にも、この発明を同様に適用することができる
【０４０５】
また、上記した図１０、図１３、図１９、図２６および図２９の生成装置においては、ＳＤ信号生成回路により、教師信号としてのＨＤ信号から生徒信号としてのＳＤ信号を生成して、学習を行う例について説明した。しかし、ＨＤ信号とＳＤ信号とを同時に取得できる撮像装置を利用するなどして、独立して得られたＨＤ信号とＳＤ信号を用いて学習を行うようにしてもよい。
【０４０６】
なお、上述した図３、図１８、図２２および図２８に示す持ち運び部の履歴情報記憶部５０には、それぞれのパラメータの履歴情報が格納される、すなわち、履歴情報記憶部５０の度数分布メモリ９１、経時変化メモリ９４に履歴情報が格納され、また、情報メモリバンク５１などには、係数種データｗ₁₀乃至ｗ_n9が格納されるものとして説明したが、図３、図１８、図２２および図２８を用いて説明した持ち運び部、あるいは、持ち運び部に含まれる履歴情報記憶部５０、もしくは、度数分布メモリ９１、経時変化メモリ９４などの着脱可能に構成されている部分には、更に異なる情報が格納されるようにしてもよい。
【０４０７】
例えば、テレビジョン受信装置１がＥＰＧ（Electronic Program Guide）による番組表のデータを含む、デジタル放送データを受信することが可能である場合、例えば、システムコントローラ１２に、受信したデジタル放送データから、ＥＰＧデータを抽出して取得させるようにすることができる。番組表のデータには、数日分の番組のそれぞれにおける情報、例えば放送日時、チャネル、タイトル、出演者の人名、ジャンル、概要などの情報が含まれている。
【０４０８】
システムコントローラ１２は、デジタル放送データから抽出したＥＰＧデータを基に、例えば、ユーザが視聴中、もしくは、録画中の番組のジャンルを検出し、履歴情報記憶部５０、もしくは、度数分布メモリ９１、経時変化メモリ９４などの着脱可能に構成されている部分に格納される履歴情報や係数種データなどが、番組のジャンル毎に、区別されて格納されるように制御する。
【０４０９】
このことにより、持ち運び部、あるいは、履歴情報記憶部５０、もしくは、度数分布メモリ９１、経時変化メモリ９４などの着脱可能に構成されている部分には、番組のジャンル毎に区別されて、履歴情報や係数種データなどが格納される。
【０４１０】
また、テレビジョン受信装置１においては、持ち運び部を含む、例えば、基板などのユニットが、装脱可能に構成されているか、もしくは、持ち運び部全体を着脱可能に構成するのではなく、履歴情報記憶部５０、あるいは度数分布メモリ９１、経時変化メモリ９４のみが装脱可能に構成されているので、対応する部分を交換することによって、テレビジョン受信装置１の機能のバージョンアップを行うことなどが可能になっている。
【０４１１】
そして、この着脱可能な構成部分は、テレビジョン受信装置１のバージョンアップ以外にも利用可能である。以下、着脱可能な部分を、図３を用いて説明した持ち運び部１５として、バージョンアップ以外の利用方法の具体的な例について説明する。
【０４１２】
例えば、映画館など、多数の視聴者が集まる場所において、持ち運び部１５に格納されている履歴情報や係数種データを集計し、そのデータを基に、表示される画像の画質を、視聴者が全体的に高い満足度を得ることができる画質に調整して表示させるようにしたり、集計された多数のデータからよりよい調整値を算出し、それぞれの持ち運び部１５に格納されている係数種データを更新したりすることが可能である。
【０４１３】
図３０は、複数の持ち運び部１５−１乃至持ち運び部１５−ｎから、格納されている履歴情報や係数種データを集計し、そのデータを基に、表示される画像の画質を調整して、表示させる画像処理装置４０１の構成を示すブロック図である。
【０４１４】
画像処理装置４０１の構成について説明する。
【０４１５】
データ収集部４１１は、持ち運び部１５−１乃至持ち運び部１５−ｎからデータを収集し、蓄積して、演算処理部４１２に供給するとともに、演算処理部４１２から供給された、それぞれのユーザにフィードバックされる係数種データを、持ち運び部１５−１乃至持ち運び部１５−ｎに出力して、情報メモリバンク５１に記録させる。
【０４１６】
図３１は、データ収集部４１１の、更に詳細な構成を示すブロック図である。
【０４１７】
データ読み出し部４２１−１乃至データ読み出し部４２１−ｎは、持ち運び部１５−１乃至持ち運び部１５−ｎに格納されている履歴情報や係数種データを読み出す。データ書き込み部４２２−１乃至データ書き込み部４２２−ｎは、データ読み出し部４２１−１乃至データ読み出し部４２１−ｎが読み出した履歴情報や係数種データを蓄積部４２３に書き込む。
【０４１８】
蓄積部４２３は、書き込まれた情報を蓄積し、所定のタイミングで、入出力インターフェース４２４を介して、演算処理部４１２に出力する。この際、蓄積部４２３に蓄積される情報は、例えば、持ち運び部１５−１乃至１５−ｎのそれぞれに固有に割り当てられた持ち運び部ＩＤ、もしくは、これらを所有するユーザに固有に割り当てられたユーザＩＤなどによって管理されるようにしてもよい。
【０４１９】
入出力インターフェース４２４は、データ収集部４１１と、演算処理部４１２とのデータの授受を行うインターフェースであり、蓄積部４２３で蓄積された履歴情報や係数種データを、演算処理部４１２に出力したり、演算処理部４１２から供給された、更新用の係数種データを、データ書き込み部４２５−１乃至データ書き込み部４２５−ｎに出力したりする。
【０４２０】
データ書き込み部４２５−１乃至データ書き込み部４２５−ｎは、入出力インターフェース４２４から、それぞれのユーザにフィードバックされる、例えば、更新用の係数種データなどの入力を受け、持ち運び部１５−１乃至持ち運び部１５−ｎに出力して、情報メモリバンク５１に記録させる。
【０４２１】
データ読み出し部４２１−１乃至データ読み出し部４２１−ｎおよびデータ書き込み部４２５−１乃至データ書き込み部４２５−ｎと、持ち運び部１５−１乃至持ち運び部１５−ｎとの情報の通信は、有線によって行われるものであっても無線によって行われるものであっても、あるいは、電気的な接触によるものであっても非接触で行われるものであってもよい。
【０４２２】
データ読み出し部４２１−１乃至データ読み出し部４２１−ｎおよびデータ書き込み部４２５−１乃至データ書き込み部４２５−ｎは、別々に構成されていなくてもよく、例えば、図３２に示されるように、映画館などにおいて、観客が使用するいす４３１などに、データ読み取りおよび書き込み部４４１として設けられ、持ち運び部１５が装着可能なように構成されていてもよい。
【０４２３】
更に、画像処理装置４０１のデータ読み出し部４２１−１乃至データ読み出し部４２１−ｎおよびデータ書き込み部４２５−１乃至データ書き込み部４２５−ｎは、図３３に示されるように、例えば、インターネット４５１などのネットワークと接続されているものとしてもよい。この場合、例えば、図１４を用いて説明したパーソナルコンピュータ２０１と同様に、持ち運び部１５が実行する処理をソフトウェアによって実行可能なパーソナルコンピュータ２０１−１乃至パーソナルコンピュータ２０１−ｌと、インターネット４５１を介して情報が授受される。また、持ち運び部１５−１乃至持ち運び部１５−ｍを、例えば、一般的なパーソナルコンピュータ４５２、ＰＡＤ（Personal Digital（Data) Assistants）４５３、あるいは、携帯型電話機４５４などの、インターネット４５１と接続して通信可能な情報機器と接続させることにより、画像処理装置４０１と持ち運び部１５−１乃至持ち運び部１５−ｍとの通信が可能となる。
【０４２４】
データ収集部４１１は、これ以外にも、蓄積部４２３に蓄積されている情報を演算処理部４１２に出力する前に演算処理することが可能なように、もしくは、それぞれのユーザにフィードバックされる係数種データなどを、データ収集部４１１において算出することができるように、例えば、データを取捨選択する機能を有する選択部や、平均化などの演算を行う機能を有する演算部などを備えるようにしてもよい。また、データ収集部４１１が、選択部や演算部などを備える場合、蓄積部４２３には、選択部により選択されたデータや、演算部による演算結果を更に蓄積するようにしてもよい。
【０４２５】
また、データ収集部４１１は、持ち運び部１５−１乃至１５−ｎから、履歴情報や係数種データ以外の情報を収集して、蓄積し、演算処理部４１２に供給するようにしてもよい。
【０４２６】
再び、図３０に戻り、画像処理装置４０１について説明する。
【０４２７】
演算処理部４１２は、データ収集部４１１から、履歴情報や係数種データの供給を受け、それらのデータを集計して、最も適した係数種データなどの、画像処理に利用されるパラメータを演算し、画像処理制御部４１３に供給するとともに、データ収集部４１１に供給して、持ち運び部１５−１乃至持ち運び部１５−ｎにフィードバックさせる。
【０４２８】
また、多くの観客、すなわち、不特定多数のユーザから収集された画像の嗜好情報である履歴情報や係数種データは、例えば、新たなテレビジョン受信機や各種画像表示装置などの画質のパラメータ設計において、好ましい画質を設計する上で非常に有効なデータである。従って、演算処理部４１２で演算された、新たな係数種データ、あるいは、データ収集部４１１で収集された履歴情報や係数種データを、外部に出力して、二次利用することができるようにしてもよい。
【０４２９】
図３４は、演算処理部４１２の更に詳細な構成を示すブロック図である。
【０４３０】
入出力インターフェース４７１は、データ収集部４１１など、外部との情報の授受を行うインターフェースであり、データ収集部４１１から、履歴情報や係数種データの供給を受けたり、係数種データ生成装置１２１で生成された新たな係数種データを、データ収集部４１１、もしくは、画像処理装置４０１の外部の装置に出力したりする。集計演算部４７２は、複数の履歴情報や係数種データに対して、例えば、平均演算や、代表値算出などの統計処理を行う。係数種データ生成装置１２１については、図１０を用いて上述しているとおりであるので、その詳細な説明は省略する。
【０４３１】
ここでは、画像処理に利用されるパラメータを、係数種データ生成装置１２１を用いて生成するものとして説明しているが、画像処理に利用されるパラメータは、他の方法を用いて生成されるようにしてもよい。
【０４３２】
次に、演算処理部４１２の処理について説明する。
【０４３３】
集計演算部４７２は、入出力インターフェース４７１を介して供給された、複数の履歴情報や係数種データに対して行った統計処理の結果を、係数種データ生成装置１２１に出力する。係数種データ生成装置１２１は、集計演算部４７２から供給された値を用いて、新たな係数種データを算出し、画像処理制御部４１３に出力するとともに、入出力インターフェース４７１を介して、データ収集部４１１に出力するとともに、必要に応じて、新たな画像処理装置のパラメータの作りこみのための二次利用などのために、画像処理装置４０１の外部の装置に出力する。
【０４３４】
ここでは、演算処理部４１２は、図１０を用いて説明した係数種データ生成装置１２１を有し、複数の履歴情報や係数種データを用いて、新たな係数種データを生成するものとして説明したが、演算処理部４１２に供給される情報は、画質を決定するためのパラメータとして利用することができる情報であれば、例えば、空間解像度、時間解像度、画像のシャープネス、画面の明るさ、もしくはコントラストなど、履歴情報や係数種データ以外のものであってもかまわない。
【０４３５】
また、演算処理部４１２は、供給される情報が、例えば、履歴情報や係数種データであっても、新たな係数種データ以外の、例えば、空間解像度、時間解像度、画像のシャープネス、画面の明るさ、もしくはコントラストなどのパラメータを算出するようにしてもよい。
【０４３６】
すなわち、演算処理部４１２は、データ収集部４１１が、複数の持ち運び部１５から収集した、例えば、履歴情報や係数種データなどの、複数のユーザの画像の嗜好をあらわす情報の入力を受け、これらの情報を基に、複数のユーザにとって、最も良好であると思われる画像を表示させるためのパラメータを算出するものである。
【０４３７】
再び、図３０に戻り、画像処理装置４０１について説明する。
【０４３８】
画像処理制御部４１３は、演算処理部４１２から、例えば、係数種データなどの、画質を決定するためのパラメータの入力を受け、画像処理部４１４が実行する画像処理（例えば、空間解像度および時間解像度の設定、シャープネスの設定、画面の明るさの設定、もしくは、コントラストの設定など）を制御するための制御信号を生成し、画像処理部４１４に出力する。
【０４３９】
画像処理部４１４は、コンテンツデータ格納部４１５から、画像処理前のコンテンツデータを取得し、画像処理制御部４１３から供給された制御信号を基に、コンテンツデータに対して、持ち運び部１５を有する複数のユーザが最も良好であると思われる画像を表示させるための画像処理（例えば、空間解像度および時間解像度の設定、シャープネスの設定、画面の明るさの設定、もしくは、コントラストの設定など）を実行する。
【０４４０】
コンテンツデータ格納部４１５は、例えば、従来の映画館で上映される画質の映画の画像データなどの、画像処理前のコンテンツデータを格納している。ここでは、コンテンツデータ格納部４１５は、画像処理装置４０１の内部に設けられているものとして説明しているが、コンテンツデータ格納部４１５は、画像処理装置４０１の外部に設けられていてもよいし、コンテンツデータ格納部４１５を設けることなく、画像処理部４１４が、ネットワークなどの通信手段を介して、コンテンツデータを取得することができるようにしてもよい。
【０４４１】
表示制御部４１６は、画像処理部４１４から供給された、画像処理済の画像データの、図示しないスクリーンなどへの表示を制御する。
【０４４２】
また、ユーザの画像の嗜好は、例えば、そのコンテンツのカテゴリによって偏りがあると考えられる。例えば、ラブストーリであれば、コントラストやシャープネスの低い、淡い印象の画像が好適であると考えるユーザが、アクション映画に対しては、コントラストやシャープネスが高く、はっきりとした印象を持つ画像が好適であると考える場合などが考えられる。
【０４４３】
そこで、上述したように、持ち運び部１５−１乃至持ち運び部１５−ｎに記録されている、例えば、履歴情報や係数種データなどの、複数のユーザの画像の嗜好をあらわす情報が、ＥＰＧなどを基に、そのコンテンツのカテゴリによって区別されているような場合、画像処理部４０１は、画像処理部４１４によって処理されるコンテンツのカテゴリに対応した嗜好情報を、持ち運び部１５−１乃至持ち運び部１５−ｎから取得し、それらの情報を用いて、画像処理を行うようにする。このことにより、ユーザの嗜好により合致した画像を生成することができる。
【０４４４】
また、例えば、多くの映画上映施設を有する、いわゆるシネマコンプレックスなどにおいて、同一の映画が複数の会場で上映される場合、それぞれの会場において上映される映画の画質を、予め異なるものとし、持ち運び部１５に記録されているそれぞれのユーザの嗜好情報に基づいて、対応するユーザの嗜好に最も合致した画質で上映される会場を案内することができるようにしてもよい。
【０４４５】
図３５は、上映会場案内装置５０１の外観を示す図である。上映会場案内装置５０１は、例えば、シネマコンプレックスの入り口などに設置されている。
【０４４６】
ユーザは、上映会場案内装置５０１の持ち運び部挿入部５１２に持ち運び部１５を挿入する。図３５においては、持ち運び部１５を、上映会場案内装置５０１に挿入するものとして図示したが、上映会場案内装置５０１は、持ち運び部１５と非接触で通信可能であるようにしてもよい。
【０４４７】
上映会場案内装置５０１は、持ち運び部１５に格納されている、例えば、履歴情報や係数種データなどの、持ち運び部１５を保有するユーザの画像の嗜好をあらわす情報を読み出して、複数の上映会場のうち、対応するユーザの画像の嗜好に最も合致した上映会場を判定し、判定結果を表示部５１１に表示する。
【０４４８】
図３６は、上映会場案内装置５０１の構成を示すブロック図である。
【０４４９】
データ読み出し部５２１は、持ち運び部挿入部５１２に挿入された持ち運び部１５に格納されている、例えば、履歴情報や係数種データなどの、ユーザの画像の嗜好をあらわす情報を読み出す。データ書き込み部５２２は、データ読み出し部５２１によって読み出されたユーザの画像の嗜好を表す情報を蓄積部５２３に書き込む。蓄積部５２３は、書き込まれた情報を蓄積し、必要に応じて、入出力インターフェース５２４を介して、蓄積された嗜好情報を、外部の装置に出力する。ここでも、多くの観客から収集された履歴情報や係数種データは、例えば、新たなテレビジョン受信機や各種画像表示装置などの画質のパラメータ設計において非常に有効なデータであるので、これらの目的のために、二次利用することができる。
【０４５０】
また、入出力インターフェース５２４は、必要に応じて、持ち運び部挿入部５１２に挿入されている持ち運び部１５に記録されている係数種データなどを更新するための情報の入力を受け、データ書き込み部５２５に出力する。データ書き込み部５２５は、入力された情報を、持ち運び部挿入部５１２に挿入されている持ち運び部１５に出力し、情報メモリバンク５１に格納されている係数種データなどを更新させる。
【０４５１】
データ読み出し部５２１は、更に、読み出したユーザの画像の嗜好情報を判定部５２６に供給する。上映会場データ格納部５２８は、入出力インターフェース５２４を介して、上映会場毎の、上映される画像の特徴量に関する情報（例えば、空間解像度および時間解像度の設定、シャープネスの設定、画面の明るさの設定、もしくは、コントラストの設定など）の入力を受け、格納する。判定部５２６は、上映会場データ格納部５２８に格納されている、上映会場毎の、上映される画像の特徴量に関する情報を参照し、データ読み出し部５２１から供給されたユーザの画像の嗜好情報に最も合致する上映会場を判定し、判定結果を表示制御部５２７に出力する。
【０４５２】
表示制御部５２７は、判定部５２６から供給された判定結果を基に、例えば、「スクリーン３に御入場下さい」などの、ユーザに上映会場を通知するために表示部５１１に表示させるテキスト、あるいは画像データを生成し、表示部５１１に表示させる。
【０４５３】
ここでは、判定部５２６から供給された判定結果を基に、例えば、「スクリーン３に御入場下さい」などの、ユーザに上映会場を通知するためのメッセージを表示部５１１に表示させるものとして説明したが、ユーザに上映会場を通知するためのメッセージを、例えば、音声として出力したり、紙媒体などに印刷して出力したりしてもよい。また、例えば、携帯型電話機などの、ユーザが保有する情報処理装置などに、判定部５２６から供給された判定結果を送信して表示させるようにしてもよい。
【０４５４】
ここでも、持ち運び部１５に記録されている、例えば、履歴情報や係数種データなどの、複数のユーザの画像の嗜好をあらわす情報が、ＥＰＧなどを基に、そのコンテンツのカテゴリによって区別されているような場合、判定部５２６は、上映されるコンテンツのカテゴリに対応した嗜好情報を基に、ユーザの画像の嗜好情報に最も合致する上映会場を判定するようにすることができる。
【０４５５】
このような処理により、それぞれのユーザの画像の嗜好にできるだけ合致するような画像処理が施されたコンテンツをユーザに提供することができるのみならず、新たなテレビジョン受信機や各種画像表示装置などの画質のパラメータ設計において非常に有効なデータを効率よく収集することができる。
【０４５６】
なお、図３５および図３６においては、持ち運び部１５が、上映会場案内装置５０１の持ち運び部挿入部５１２に挿入されるものとして説明したが、持ち運び部１５と上映会場案内装置５０１とは、例えば、インターネットなどのネットワークを介して、情報の授受が可能なようにしてもよい。この場合、上映会場案内装置５０１には、持ち運び部挿入部５１２に代わって、インターネットなどのネットワークを介した通信が可能な、図示しない通信処理部などが備えられる。
【０４５７】
この場合、ユーザは、持ち運び部１５に予め記録されている、例えば、履歴情報や係数種データなどの、ユーザの画像の嗜好をあらわす情報を、ユーザＩＤなどとともに、インターネットを介して、上映会場案内装置５０１に送信する。上映会場案内装置５０１は、供給されたユーザの画像の嗜好を表す情報を基に、対応するユーザの嗜好に合致した上映会場を判定する。そして、上映会場案内装置５０１は、上映会場の判定結果を、即時にインターネットを介してユーザに対して通知するようにしてもよいし、上映会場の判定結果をユーザＩＤに対応つけて一時保存しておき、ユーザがシネマコンプレックスなどの上映会場に来場した際に、ユーザＩＤの入力を受けて、表示部５１１に表示させるようにしてもよい。
【０４５８】
また、持ち運び部１５と上映会場案内装置５０１とで、例えば、インターネットなどを介して、情報の授受が行われる場合においては、入出力インターフェース５２４から入力された、係数種データなどを更新するための情報は、データ書き込み部５２５によって、インターネットを介して持ち運び部１５に出力され、情報メモリバンク５１に格納されている係数種データなどが更新される。
【０４５９】
図３０乃至図３６を用いて説明した処理においては、ユーザが多数集まる場所として、映画館を想定し、提供されるコンテンツを映画であるものとして説明したが、本発明は、映画館における使用のみに限定されるものではなく、例えば、テーマパークなど、ユーザが多く集まるあらゆる場所や、インターネットを介したコンテンツデータの配信など、ユーザの嗜好情報が効率よく集められる手段において適用することが可能である。
【０４６０】
以上説明したように、ユーザが画質調整を行うことにより蓄積されたユーザの画像の嗜好情報を記録している部分を含む、例えば、図３を用いて説明した持ち運び部１５などを、テレビジョン受信装置１から取り外して持ち運び可能にすることにより、ユーザの画質の嗜好情報を利用することができる。
【０４６１】
ユーザの画質の嗜好情報は、テレビジョン受信装置１のバージョンアップにおいて利用されるのみならず、例えば、映画館など、多数の視聴者が集まる場所において、持ち運び部１５などに格納されている履歴情報や係数種データを集計し、そのデータを基に、表示される画像の画質を、視聴者が全体的に高い満足度を得ることができる画質に調整して表示させるようにしたり、集計された多数のデータからよりよい調整値を算出し、それぞれの持ち運び部１５に格納されている係数種データを更新したりすることが可能である。
【０４６２】
また、例えば、多くの映画上映施設を有する、いわゆるシネマコンプレックスなどにおいて、同一の映画が複数の会場で上映される場合、それぞれの会場において上映される映画の画質を、予め異なるものとし、持ち運び部１５などに記録されているそれぞれのユーザの嗜好情報に基づいて、対応するユーザの嗜好に最も合致した画質で上映される会場を案内することが可能である。
【０４６３】
また、ユーザの画質の嗜好情報は、新たなテレビジョン受信機や各種画像表示装置などの画質のパラメータ設計において非常に有効なデータであり、ユーザが多数集まる、例えば、映画館やテーマパークなどにおいて本発明を適用すること、もしくは、インターネットを介する情報通信など、不特定多数のユーザと情報の授受が可能な場合に本発明を適用することなどにより、効率よく収集することができる。
【０４６４】
上述した一連の処理は、ソフトウェアにより実行することもできる。そのソフトウェアは、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。
【０４６５】
この記録媒体は、図１、もしくは、図１４に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク２１、もしくは２３１（フレキシブルディスクを含む）、光ディスク２２、もしくは２３２（CD-ROM（Compact Disk-Read Only Memory），DVD（Digital Versatile Disk）を含む）、光磁気ディスク２３、もしくは２３３（ＭＤ（Mini-Disk)（商標）を含む）、あるいは、半導体メモリ２４、もしくは２３４などよりなるパッケージメディアなどにより構成される。
【０４６６】
また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０４６７】
【発明の効果】
第１の本発明によれば、コンテンツデータを処理することができる。
また、第１の本発明によれば、複数のユーザに対して提供されるコンテンツデータを、複数のユーザが有する情報処理装置に記憶されている付加情報を基に処理することができる。
【０４６８】
第２の本発明によれば、ユーザの嗜好に合致したコンテンツの表示場所をユーザに案内することができる。
また、第２の本発明によれば、複数のユーザが有する情報処理装置に記憶されている付加情報を基に、ユーザの嗜好に合致したコンテンツの表示場所を表示させることができる。
【図面の簡単な説明】
【図１】テレビジョン受信装置の構成を示すブロック図である。
【図２】５２５ｉ信号と１０５０ｉ信号の画素位置関係を示す図である。
【図３】図１の持ち運び部１５の構成を示すブロック図である。
【図４】ＨＤ信号（１０５０ｉ信号）の単位画素ブロック内の４画素の中心予測タップからの位相ずれ（奇数フィールド）を示す図である。
【図５】ＨＤ信号（１０５０ｉ信号）の単位画素ブロック内の４画素の中心予測タップからの位相ずれ（偶数フィールド）を示す図である。
【図６】履歴情報記憶部の構成を示すブロック図である。
【図７】画質を調整するためのユーザインターフェース例を示す図である。
【図８】図７の調整画面を拡大して示した図である。
【図９】係数種データの生成方法の一例を示す図である。
【図１０】係数種データ生成装置の構成例を示すブロック図である。
【図１１】解像度調整範囲の変化を説明するための図である。
【図１２】係数種データの生成方法の他の例を示す図である。
【図１３】係数種データ生成装置の他の構成例を示すブロック図である。
【図１４】パーソナルコンピュータの構成を示すブロック図である。
【図１５】画像信号処理１について説明するフローチャートである。
【図１６】係数種データ生成処理１について説明するフローチャートである。
【図１７】係数種データ生成処理２について説明するフローチャートである。
【図１８】他の実施の形態としての持ち運び部の構成を示すブロック図である。
【図１９】係数データ生成装置の構成例を示すブロック図である。
【図２０】画像信号処理２について説明するフローチャートである。
【図２１】係数データ生成処理について説明するフローチャートである。
【図２２】更に他の実施の形態としての持ち運び部の構成を示すブロック図である。
【図２３】予測タップの変更を説明するための図である。
【図２４】予測タップの変更を説明するための図である。
【図２５】予測タップの変更を説明するための図である。
【図２６】他の実施の形態としての係数種データ生成装置の構成を示すブロック図である。
【図２７】ユーザ調整範囲について説明するための図である。
【図２８】更に他の実施の形態としての持ち運び部の構成を示すブロック図である。
【図２９】他の実施の形態としての係数データ生成装置の構成を示すブロック図である。
【図３０】画像処理装置の構成を示すブロック図である。
【図３１】図３０のデータ収集部の構成を示すブロック図である。
【図３２】データ収集方法の例について説明する図である。
【図３３】データ収集方法の例について説明する図である。
【図３４】図３０の演算処理部の構成を示すブロック図である。
【図３５】上映会場案内装置の外観構成図である。
【図３６】図３５の上映会場案内装置の構成を示すブロック図である。
【符号の説明】
１ テレビジョン受信装置， １２ システムコントローラ， １５ 持ち運び部， ４１ 第１のタップ選択部， ４２ 第２のタップ選択部， ４３ 第３のタップ選択部， ４４ 空間クラス検出部， ４５ 動きクラス検出部， ４６ クラス合成部， ４７ 推定予測演算部， ４８ 正規化演算部， ４９後処理部， ５０ 履歴情報記憶部 ５１ 情報メモリバンク， ５２ 係数生成部， ５３ 係数メモリ， ５４ 正規化係数演算部， ５５ 正規化係数メモリ， ９１ 度数分布メモリ， ９２ カウンタ， ９３ 平均化部， ９４ 経時変化メモリ， １２１ 係数種データ生成装置， １４１，１４２ 入力端子， １４３ ＳＤ信号生成部， １４４ 第１のタップ選択部， １４５第２のタップ選択部， １４６ 第３のタップ選択部， １４７ 空間クラス検出部， １４８ 動きクラス検出部， １４９ クラス合成部， １５０ 正規方程式生成部， １５１ 係数種データ決定部， １５２ 係数種メモリ， ４０１ 画像処理装置， ４１１ データ収集部， ４１２ 演算処理部， ４１３ 画像処理制御部， ４１４ 画像処理部， １４５ コンテンツデータ格納部， ４１６ 表示制御部， ４２３ 蓄積部， ４５１ インターネット，４７２ 集計演算部， ５０１ 上映会場案内装置， ５２３ 蓄積部， ５２６ 判定部， ５２７ 表示制御部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an information processing device, an information processing method, a recording medium, and a program, and is particularly suitable for performing image processing using preference information for image quality of a plurality of users or collecting preference information. The present invention relates to an information processing apparatus and information processing method, a recording medium, and a program.
[0002]
[Prior art]
In recent years, the development of television receivers capable of obtaining higher-resolution images has been desired due to the increase in audio / visual orientation, and so-called high-vision has been developed in response to this demand. The number of high-definition scanning lines is 1125, which is more than twice the number of NTSC scanning lines, which is 525. The aspect ratio of the high-definition television is 9:16, whereas the aspect ratio of the NTSC system is 3: 4. For this reason, high-definition images can be displayed with a higher resolution and presence than in the NTSC system.
[0003]
Hi-Vision has such excellent characteristics, but even if an NTSC video signal is supplied as it is, image display by Hi-Vision cannot be performed. This is because the standards differ between the NTSC system and the high-definition as described above.
[0004]
Therefore, the present applicant has previously proposed a conversion device for converting an NTSC video signal into a high-definition video signal in order to display an image corresponding to the NTSC video signal in a high-definition method. No. 8-51599). In this conversion apparatus, pixel data of a block (area) corresponding to pixel data at a target position of a high-definition video signal is extracted from an NTSC video signal, and the above-described conversion is performed based on the level distribution pattern of the pixel data of this block. The class to which the pixel data of the target position belongs is determined, and the pixel data of the target position is generated corresponding to this class.
[0005]
[Problems to be solved by the invention]
However, in the above-described conversion device, the resolution of the image by the high-definition video signal is fixed, and the resolution can be set to the user's preference according to the image content, etc., as in the conventional adjustment of contrast and sharpness. could not.
[0006]
Therefore, the present applicant further generates a high-definition video signal corresponding to the input parameter value when converting the NTSC video signal to a high-definition video signal, and obtains the high-definition video signal. The thing which the user can adjust the resolution of an image freely was proposed (Japanese Patent Laid-Open No. 2001-238185).
[0007]
In this case, the user can freely adjust the resolution of the image, but the adjustment range is fixed. For example, a sufficient adjustment range is secured for a user who performs adjustment around one end of the adjustment range. I can't say. In other words, it is desirable to be able to make adjustments according to user preferences.
[0008]
In addition, when developing a new television receiver or upgrading the television receiver, in order to create the image quality of the image displayed by the television receiver, it matches the user's preference as described above. The adjustment value data is very effective data, and by collecting the adjustment value data of many users, it is possible to create an image quality preferable for the majority of users.
[0009]
However, it has been very difficult to collect image quality adjustment value data of an unspecified number of users. For example, collecting preference information of an unspecified number of users through a questionnaire or the like is not realistic because it requires enormous costs and time.
[0010]
In addition, an unspecified number of users appreciate the same image. For example, in a movie theater or the like, there is no technology that reflects the preference of each user's image. There was no choice but to watch at.
[0011]
The present invention has been made in view of such a situation, and collects image quality preferences of an unspecified number of users, and uses them to reflect the preferences of individual users in, for example, movie theaters. It is possible to provide a selected image and collect preference information of an unspecified number of users.
[0012]
[Means for Solving the Problems]
The first information processing apparatus of the present invention relates to processing means for processing the first content data, collection means for collecting additional information for controlling the processing means, and additional information collected by the collection means. Storage means for storing the information to be processed, and control means for controlling the processing means based on information related to the additional information stored by the storage means, and the collecting means is another information processing possessed by a plurality of users. The first content data collected by the additional information stored in the apparatus and processed by the processing means is content data provided to a plurality of users.
[0013]
An arithmetic processing means for arithmetically processing information related to the additional information stored by the storage means can be further provided, and the control means includes information related to the additional information arithmetically processed by the arithmetic processing means. Based on this, the processing means can be controlled.
[0014]
The storage means can further store the result of the arithmetic processing by the arithmetic processing means.
[0015]
A display control means for controlling the display of the first content data processed by the processing means can be further provided.
[0016]
The additional information can include information related to image quality preferences of the second content data viewed by the user in the past.
[0017]
The additional information can further include the category information of the second content data referred to by the user when the information related to the preference is collected, and the control means includes storage means. The processing means can be controlled based on the additional information that matches the category of the first content data provided to a plurality of users among the information related to the additional information stored in the above.
[0023]
The additional information stored in other information processing apparatuses owned by a plurality of users relates to the adjustment value of the image quality adjustment performed by the user with respect to the image quality of the second content data viewed by each user in the past. Information can be included.
[0024]
It is possible to further include output means for outputting the result of the arithmetic processing by the arithmetic processing means to other information processing apparatuses owned by a plurality of users.
[0025]
It is possible to attach another information processing apparatus owned by a plurality of users and to further include a mounting means for exchanging information with the other information processing apparatus. The collection means is mounted on the mounting means. Additional information stored in another information processing apparatus can be collected.
[0026]
Computation processing means for computing information related to the additional information stored by the storage means, and output means for outputting computation processing results by the computation processing means to other information processing apparatuses owned by a plurality of users, respectively. The output means can cause the other information processing apparatus attached to the attachment means to output the result of the arithmetic processing by the arithmetic processing means.
[0027]
An information exchanging means for exchanging information via a predetermined network can be further provided, and the collecting means is stored in another information processing apparatus via the predetermined network by the information exchanging means. Additional information can be collected.
[0028]
Computation processing means for computing information related to the additional information stored by the storage means, and output means for outputting computation processing results by the computation processing means to other information processing apparatuses owned by a plurality of users, respectively. The output means can cause the other information processing apparatus to output the result of the arithmetic processing by the arithmetic processing means via the predetermined network by the information transfer means.
[0030]
The first information processing method of the present invention includes a processing step for processing content data, a collecting step for collecting additional information for controlling processing of the processing step, and additional information collected by processing of the collecting step. A storage control step for controlling storage of related information; and a control step for controlling processing of the processing step based on information related to additional information whose storage is controlled by processing of the storage control step. In the processing, additional information stored in other information processing apparatuses held by a plurality of users is collected, and the content data processed by the processing step processing is content data provided to the plurality of users. Features.
[0031]
The program recorded on the first recording medium of the present invention is collected by a processing step for processing content data, a collecting step for collecting additional information for controlling the processing of the processing step, and a processing of the collecting step A storage control step that controls storage of information related to the additional information, and a control step that controls processing of the processing step based on information related to additional information whose storage is controlled by processing of the storage control step. In addition, in the process of the collecting step, additional data stored in other information processing apparatuses held by a plurality of users is collected, and the content data processed by the processing of the processing step is content provided to the plurality of users. It is characterized by being data.
[0032]
The first program of the present invention relates to a processing step for processing content data, a collecting step for collecting additional information for controlling the processing of the processing step, and additional information collected by the processing of the collecting step. A storage control step for controlling storage of information, and a control step for controlling the processing of the processing step based on information related to the additional information whose storage is controlled by the processing of the storage control step. Collecting additional information stored in other information processing apparatuses owned by a plurality of users, and the content data processed by the processing step is content data provided to a plurality of users To do.
[0033]
The second information processing apparatus according to the present invention includes a first storage unit that stores information on each display location of the same first content data displayed with a plurality of image quality, and other information held by a plurality of users. Collecting means for collecting additional information stored in the information processing apparatus, information on the display location stored by the first storing means, and display with a plurality of image quality based on the additional information collected by the collecting means Determination means for determining a display location where the first content data is displayed with an image quality that matches the preference of the corresponding user among the first content data to be displayed, and display means for displaying a determination result by the determination means The additional information includes information related to image quality preference of content data viewed by the user.
[0034]
Second storage means for storing additional information collected by the collecting means can be further provided.
[0035]
The additional information can further include the category information of the second content data referred to by the user when the information related to the preference is collected. Based on the additional information that matches the category of the first content data among the collected additional information, the display location where the first content data is displayed with the image quality that matches the preference of the corresponding user is determined. can do.
[0041]
The additional information stored in other information processing apparatuses owned by a plurality of users includes an adjustment value of image quality adjustment performed by the user with respect to the display image quality of the second content data referred to by each user in the past. Information can be included.
[0042]
An acquisition unit that acquires information for updating additional information stored in another information processing device held by the user, and an output that outputs the information acquired by the acquisition unit to another information processing device held by the user Means can be further provided.
[0043]
The information processing apparatus can be further equipped with a mounting means for sending and receiving information by mounting another information processing apparatus held by the user, and the collection means is stored in the other information processing apparatus mounted on the mounting means. Additional information can be collected.
[0044]
An acquisition unit that acquires information for updating additional information stored in another information processing device held by the user, and an output that outputs the information acquired by the acquisition unit to another information processing device held by the user And the output means can cause the other information processing apparatus attached to the attachment means to output the information acquired by the acquisition means.
[0045]
An information exchanging means for exchanging information via a predetermined network can be further provided, and the collecting means is stored in another information processing apparatus via the predetermined network by the information exchanging means. Additional information can be collected.
[0046]
An acquisition unit that acquires information for updating additional information stored in another information processing device held by the user, and an output that outputs the information acquired by the acquisition unit to another information processing device held by the user And the output means causes the information exchange means to output the information acquired by the acquisition means to another information processing apparatus via a predetermined network. Can do.
[0048]
The second information processing method of the present invention includes a storage control step for controlling storage of information relating to each display location of the same content data displayed with a plurality of image quality, and another information processing apparatus possessed by a plurality of users. A plurality of image quality based on the collection step for collecting the additional information stored in the memory, the information on the display location whose storage is controlled by the processing of the storage control step, and the additional information collected by the processing of the collection step. A determination step of determining a display location where the content data is displayed with an image quality that matches the preference of the corresponding user among the displayed content data;
And a display step for displaying a determination result obtained by the determination step. The additional information includes information related to a preference of image quality of content data viewed by the user.
[0049]
The program recorded on the second recording medium of the present invention includes a storage control step for controlling storage of information related to each display location of the same content data displayed with a plurality of image quality, Based on the collection step for collecting the additional information stored in the information processing apparatus, the information on the display location whose storage is controlled by the process of the storage control step, and the additional information collected by the process of the collection step, A determination step for determining a display location where the content data is displayed with an image quality that matches the preference of the corresponding user among the content data displayed with a plurality of image quality, and a display step for displaying a determination result by the processing of the determination step; The additional information includes information related to image quality preference of content data viewed by the user. To.
[0050]
A second program according to the present invention stores a storage control step for controlling storage of information related to each display location of the same content data displayed with a plurality of image quality, and stores the information in another information processing apparatus owned by a plurality of users A collection step that collects additional information that is stored, information about a display location whose storage is controlled by the processing of the storage control step, and additional information collected by the processing of the collection step. Content information including a determination step for determining a display location where the content data is displayed with an image quality that matches a corresponding user's preference, and a display step for displaying a determination result by the processing of the determination step. In addition, the content data includes information related to image quality preferences of content data viewed by the user.
[0051]
In the first information processing apparatus, information processing method, and program of the present invention, content data is processed, additional information for controlling the processing of the content data is collected, and information related to the collected additional information is stored. Based on the information stored and related to the additional information, the processing of the content data is controlled, the additional information stored in the other information processing devices held by a plurality of users is collected, and the processed content data is Content data provided to a plurality of users.
[0052]
In the second information processing apparatus, the information processing method, and the program of the present invention, information about each display location of the same first content data displayed with a plurality of image quality is stored and held by a plurality of users. Additional information stored in another information processing apparatus is collected and based on the information about the display location and the additional information, the first content data displayed in multiple image quality matches the corresponding user's preference. The display location where the first content data is displayed with the image quality is determined, the determination result is displayed, and the additional information includes information regarding the image quality preference of the content data viewed by the user.
[0053]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0054]
FIG. 1 is a block diagram showing the configuration of the television receiver 1. The television receiver 1 obtains an SD (Standard Definition) signal called a 525i signal from a broadcast signal, converts the 525i signal into an HD (High Definition) signal called a 1050i signal, and displays an image based on the HD signal. It is.
[0055]
FIG. 2 shows the pixel position relationship of a frame (F) in which a 525i signal and a 1050i signal are present. The pixel position of an odd (o) field is indicated by a solid line, and the pixel position of an even (e) field is indicated by a broken line. ing. Large dots are pixels of 525i signal, and small dots are pixels of 1050i signal. As can be seen from FIG. 2, the pixel data of the 1050i signal includes line data L1 and L1 ′ at positions close to the line of the 525i signal and line data L2 and L2 ′ at positions far from the line of the 525i signal. Here, L1 and L2 are line data of odd fields, and L1 'and L2' are line data of even fields. The number of pixels in each line of the 1050i signal is twice the number of pixels in each line of the 525i signal.
[0056]
Returning to FIG. 1, the configuration of the television receiver 1 will be described. The user operates the television receiver 1 using the remote commander 2. The television receiver 1 includes a microcontroller including a central processing unit (CPU), a random access memory (RAM), and a read only memory (ROM), a system controller 12 for controlling the operation of the entire system, and a remote And a signal receiving unit 11 for receiving a control signal. The signal receiving unit 11 is connected to the system controller 12, receives a remote control signal output from the remote commander 2 according to a user operation, and supplies an operation signal corresponding to the signal to the system controller 12. It is configured.
[0057]
The receiving antenna 3 receives a broadcast signal (RF modulated signal). The tuner 13 receives a broadcast signal captured by the receiving antenna 3 and performs a channel selection process for selecting a channel selected by the user using the remote commander 2 in accordance with a control signal input from the system controller 12. Further, the above-described SD signal (525i signal) is obtained by performing intermediate frequency amplification processing, detection processing, and the like. The buffer memory 14 temporarily stores the SD signal output from the tuner 13.
[0058]
The carrying unit 15 is configured to be removable from the television receiver 1 or to be carried, or a substrate including the carrying unit 15 is configured to be removable from the television receiver 1 and carried. Yes. The carrying unit 15 performs image signal processing for converting an SD signal (525i signal) temporarily stored in the buffer memory 14 into an HD signal (1050i signal).
[0059]
FIG. 3 is a block diagram showing a more detailed configuration of the carrying unit 15.
[0060]
The first tap selection unit 41, the second tap selection unit 42, and the third tap selection unit 43 of the carrying unit 15 are configured to receive an HD signal (525i signal) from the SD signal (525i signal) stored in the buffer memory 14. The data of a plurality of SD pixels located around the target position in (1050i signal) is selectively extracted and output.
[0061]
The first tap selection unit 41 selectively extracts data of SD pixels used for prediction (hereinafter referred to as “prediction tap”). The second tap selection unit 42 selectively extracts data of SD pixels (hereinafter referred to as “space class taps”) used for class classification corresponding to the level distribution pattern of the SD pixel data. The third tap selection unit 43 selectively extracts data of SD pixels (hereinafter referred to as “motion class taps”) used for class classification corresponding to motion. When the space class is determined using SD pixel data belonging to a plurality of fields, motion information is also included in this space class.
[0062]
The space class detection unit 44 detects the level distribution pattern of the space class tap data (SD pixel data) selectively extracted by the second tap selection unit 42, and detects the space class based on the level distribution pattern. And output the class information.
[0063]
In the space class detection unit 44, for example, an operation is performed to compress each SD pixel data from 8-bit data to 2-bit data. The space class detection unit 44 outputs compressed data corresponding to each SD pixel data as class information of the space class. In the present embodiment, data compression is performed by ADRC (Adaptive Dynamic Range Coding). As the information compression means, DPCM (predictive coding), VQ (vector quantization), or the like may be used in addition to ADRC.
[0064]
Originally, ADRC is an adaptive requantization method developed for high-performance coding for VTR (Video Tape Recorder), but it can efficiently express a local pattern of signal level with a short word length. It is suitable for use in data compression. When ADRC is used, the maximum value of space class tap data (SD pixel data) is MAX, the minimum value is MIN, the dynamic range of space class tap data is DR (= MAX−MIN + 1), and the number of requantization bits Is P, the requantized code qi as compressed data is obtained by the calculation of the equation (1) for each SD pixel data ki as the space class tap data. However, in the formula (1), [] means a truncation process. When there are Na SD pixel data as space class tap data, i = 1 to Na.
[0065]
[Expression 1]

[0066]
The motion class detection unit 45 mainly detects a motion class for representing the degree of motion from the motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 43. Output class information.
[0067]
In this motion class detection unit 45, the inter-frame difference is calculated from the motion class tap data (SD pixel data) mi and ni selectively extracted by the third tap selection unit 43, and the absolute value of the difference is further calculated. A threshold value process is performed on the average value of the motion vectors, and a motion class that is an index of motion is detected. In other words, the motion class detection unit 45 calculates the average value AV of the absolute value of the difference according to the equation (2). In the third tap selection unit 43, for example, as described above, when 12 pieces of SD pixel data m1 to m6 and n1 to n6 are extracted, Nb in Expression (2) is 6.
[0068]
[Expression 2]

[0069]
Then, in the motion class detection unit 45, the average value AV calculated as described above is compared with one or a plurality of threshold values, and class information MV of the motion class is obtained. For example, when three threshold values th1, th2, and th3 (th1 <th2 <th3) are prepared and four motion classes are detected, MV = 0 and th1 <AV ≦ th2 when AV ≦ th1. When MV = 1, MV = 2 when th2 <AV ≦ th3, and MV = 3 when th3 <AV.
[0070]
The class synthesis unit 46 should be created based on the re-quantization code qi as the class information of the space class output from the space class detection unit 44 and the motion class class information MV output from the motion class detection unit 45. A class code CL indicating the class to which the pixel data (pixel data at the target position) of the HD signal (1050i signal) belongs is obtained.
[0071]
In the class synthesis unit 46, the calculation of the class code CL is performed by Expression (3). In Equation (3), Na represents the number of space class tap data (SD pixel data), and P represents the number of requantization bits in ADRC.
[0072]
[Equation 3]

[0073]
The coefficient memory 53 stores, for each class, a plurality of coefficient data Wi used in the estimation formula used in the estimated prediction calculation unit 47 described later. The coefficient data Wi is information for converting an SD signal (525i signal) into an HD signal (1050i signal). The class code CL output from the class synthesizing unit 46 is supplied to the coefficient memory 53 as read address information. The coefficient memory 53 receives the coefficient data Wi (i = 1 to n) of the estimation formula corresponding to the class code CL. ) Is read out and supplied to the estimated prediction calculation unit 47.
[0074]
The carrying unit 15 includes an information memory bank 51. In an estimated prediction calculation unit 47 to be described later, the HD pixel data y to be created is calculated from the prediction tap data (SD pixel data) xi and the coefficient data Wi read from the coefficient memory 53 by the estimation expression of Expression (4). Calculated. N in Expression (4) represents the number of prediction taps selected by the first tap selection unit 41.
[0075]
Here, the n pixel data positions of the prediction tap selectively extracted by the tap selection unit 41 are in the spatial direction (horizontal and vertical directions) and the time direction with respect to the target position in the HD signal. Yes.
[0076]
[Expression 4]

[0077]
Then, coefficient data Wi (i = 1 to n) of the estimation formula is generated by a generation formula including parameters s and z as shown in formula (5). The information memory bank 51 stores coefficient seed data w which is coefficient data in this generation formula. _Ten Thru w _n9 Is stored for each class. A method for generating the coefficient seed data will be described later.
[0078]
[Equation 5]

[0079]
As described above, when the 525i signal is converted into the 1050i signal, it is necessary to obtain four pixels of the 1050i signal corresponding to one pixel of the 525i signal in each of the odd and even fields. In this case, the four pixels in the 2 &times; 2 unit pixel block constituting the 1050i signal in each of the odd and even fields have different phase shifts with respect to the central prediction tap.
[0080]
FIG. 4 shows center prediction taps SD in four pixels HD1 to HD4 in a 2 &times; 2 unit pixel block constituting a 1050i signal in an odd field. ₀ The phase shift from is shown. Here, the positions of HD1 to HD4 are respectively SD. ₀ Are shifted by k1 to k4 in the horizontal direction and m1 to m4 in the vertical direction.
[0081]
FIG. 5 shows the center prediction tap SD in the four pixels HD1 'to HD4' in the 2 &2; unit pixel block constituting the 1050i signal in the even field. ₀ The phase shift from ′ is shown. Here, the positions of HD1 'to HD4' are respectively SD. ₀ Is shifted from the position of ′ by k1 ′ to k4 ′ in the horizontal direction and by m1 ′ to m4 ′ in the vertical direction.
[0082]
Accordingly, the information memory bank 51 stores coefficient seed data w for each combination of class and output pixels (HD1 to HD4, HD1 ′ to HD4 ′). _Ten Thru w _n9 Is stored.
[0083]
The coefficient generation unit 52 uses the coefficient seed data of each class and the values of the parameters s and z, and the coefficient data of the estimation formula corresponding to the values of the parameters s and z for each class according to the equation (5). Wi (i = 1 to n) is generated. The coefficient generation unit 52 is loaded with the above-described coefficient seed data of each class from the information memory bank 51. Further, the values of parameters s and z are supplied to the coefficient generation unit 52 from the system controller 12.
[0084]
The coefficient data Wi (i = 1 to n) of each class generated by the coefficient generation unit 52 is stored in the coefficient memory 53 described above. The generation of coefficient data Wi of each class in the coefficient generation unit 52 is performed, for example, in each vertical blanking period. Thereby, even if the values of the parameters s and z are changed by the user's operation of the remote commander 2, the coefficient data Wi of each class stored in the coefficient memory 53 corresponds to the values of the parameters s and z. It can be changed immediately, and the user can adjust the resolution smoothly.
[0085]
The normalization coefficient calculation unit 54 calculates the normalization coefficient S corresponding to the coefficient data Wi (i = 1 to n) obtained by the coefficient generation unit 52 according to Expression (6). The normalization coefficient memory 55 stores this normalization coefficient S. The normalization coefficient memory 55 is supplied with the class code CL output from the class synthesis unit 46 described above as read address information, and the normalization coefficient memory 55 reads the normalization coefficient S corresponding to the class code CL. And is supplied to a normalization calculation unit 48 described later.
[0086]
[Formula 6]

[0087]
The estimated prediction calculation unit 47 uses the prediction tap data (SD pixel data) xi selectively extracted by the first tap selection unit 41 and the coefficient data Wi read from the coefficient memory 53, as shown in Expression (4). The pixel data (pixel data at the target position) of the HD signal to be created is calculated using the estimation formula.
[0088]
As described above, when an SD signal (525i signal) is converted to an HD signal (1050i signal), four pixels of the HD signal (HD1 to HD4 in FIG. 4 and HD1 in FIG. Therefore, the estimated prediction calculation unit 47 generates pixel data for each 2 &2; unit pixel block constituting the HD signal. That is, in the estimated prediction calculation unit 47, the first tap selection unit 41 configures the prediction pixel data xi corresponding to four pixels (target pixel) in the unit pixel block, and the unit memory block includes the coefficient memory 53. The coefficient data Wi corresponding to the four pixels to be supplied is supplied, and the data y of the four pixels constituting the unit pixel block ₁ To y _Four Are individually calculated by the above-described estimation formula (4).
[0089]
The normalization calculation unit 48 outputs 4-pixel data y sequentially output from the estimated prediction calculation unit 47. ₁ To y _Four Is divided by the normalization coefficient S corresponding to the coefficient data Wi (i = 1 to n) used for each calculation read out from the normalization coefficient memory 55 and normalized. As described above, the coefficient generation unit 52 calculates the coefficient data Wi of the estimation formula, but the obtained coefficient data includes a rounding error, and the sum total of the coefficient data Wi (i = 1 to n) becomes 1.0. It is not guaranteed to be. Therefore, the data y of each pixel calculated by the estimated prediction calculation unit 47 ₁ To y _Four Becomes a level fluctuation due to a rounding error. Therefore, normalization by the normalization calculation unit 48 can eliminate the level fluctuation.
[0090]
The post-processing unit 49 normalizes the data y of four pixels in the unit pixel block that is normalized and sequentially supplied by the normalization calculation unit 48. ₁ 'To y _Four 'Is line-sequentially output in the format of 1050i signal.
[0091]
The history information storage unit 50 stores history information of parameters s and z values input from the system controller 12 to the coefficient generation unit 52.
[0092]
FIG. 6 is a block diagram showing a more detailed configuration of the history information storage unit 50. The history information storage unit 50 includes a frequency distribution memory 91 that stores information on the frequency distributions of the parameters s and z values input from the system controller 12 to the coefficient generation unit 52. In the frequency distribution memory 91, the frequencies at the respective values of the parameters s and z are averaged and stored. The frequency distribution memory 91 is constituted by, for example, a non-volatile memory, and the stored contents are retained even when the power of the television receiver 1 is turned off.
[0093]
For this purpose, the history information storage unit 50 further includes a counter 92 that counts the number of times the values of the parameters s and z are input to the coefficient generation unit 52, and the parameters s and z based on the count value of the counter 92. And an averaging unit 93 that averages the frequencies in the values.
[0094]
The counter 92 is counted up by the control of the system controller 12. As will be described later with reference to FIGS. 7 and 8, the user can adjust the values of the parameters s and z on the adjustment screen, but the counter 92 is counted up when the adjustment is completed.
[0095]
The averaging unit 93 uses the input values of the parameters s and z, the count value of the counter 92, and the average value of the frequencies in the previous values of the parameter s and z stored in the frequency distribution memory 91. Thus, an average value of new frequencies in the respective values of the parameters s and z is obtained.
[0096]
In this case, when the number of times of input is M, that is, when the count value of the counter 92 is M, the frequency of the input parameter value is n _M-1 The average value n of the new frequencies _M Is obtained by the calculation of the following equation (7). On the other hand, when the number of inputs is M, regarding the frequency at a parameter value different from the input parameter value, the average value of the frequency up to the previous time is n _M-1 The average value n of the new frequencies _M Is obtained by the calculation of the following equation (8).
[0097]
[Expression 7]

[0098]
[Equation 8]

[0099]
Thus, overflow is prevented by using the average value of the frequencies of the parameters s and z as the frequency distribution information of the parameters s and z stored in the frequency distribution memory 91. it can.
[0100]
In addition, instead of using the average value of the frequencies at the values of the parameters s and z, even if the value obtained by normalizing the frequencies at the values of the parameters s and z with the maximum frequency is used, overflow similarly occurs. Can be prevented.
[0101]
The history information storage unit 50 stores a predetermined number, for example, the 10 latest parameters s and z values among the values of the parameters s and z input from the system controller 12 to the coefficient generation unit 52. A time-varying memory 94 is provided. The time-varying memory 94 is constituted by, for example, a non-volatile memory, and the stored contents are retained even when the television receiver 1 is turned off.
[0102]
The writing operation to the time-varying memory 94 is performed under the control of the system controller 12. As will be described later with reference to FIGS. 7 and 8, the user can adjust the values of parameters s and z on the adjustment screen. New parameters s and z are written. When the number of stored parameter s and z values exceeds a predetermined number as a result of this writing, the oldest parameter s and z values are deleted.
[0103]
In the television receiver 1, the carrying unit 15 or the unit including the carrying unit 15, for example, a unit such as a substrate is configured to be removable, so that the carrying unit 15 can be taken out and used. The function of the television receiver 1 can be upgraded by exchanging the carrying unit 15 or the like. As a result, the history information storage unit 50 is attached and detached together with the carrying unit 15.
[0104]
Note that the entire carrying unit 15 may not be configured to be removable, but only the history information storage unit 50, the frequency distribution memory 91, and the time-change memory 94 may be configured to be removable.
[0105]
Returning to FIG. 1, the configuration of the television receiver 1 will be described again.
[0106]
An OSD (On Screen Display) processing unit 16 generates a display signal SCH for displaying a character figure on the screen of the display unit 18. The combining unit 17 combines the display signal SCH output from the OSD processing unit 16 with the HD signal output from the carrying unit 15 and supplies the combined signal to the display unit 18. The display unit 18 is configured by a flat panel display such as a CRT (cathode-ray tube) display or LCD (liquid crystal display), for example. The display unit 18 synthesizes an image based on the HD signal output from the carrying unit 15 and if necessary. The display signal SCH synthesized by the unit 17 is displayed.
[0107]
In addition, a drive 19 is connected to the system controller 12 as necessary, and a magnetic disk 21, an optical disk 22, a magneto-optical disk 23, a semiconductor memory 24, or the like is appropriately mounted, and a computer program read from them is loaded. Installed in the system controller 12 as necessary.
[0108]
The operation of the television receiver 1 in FIG. 1 will be described.
[0109]
The system controller 12 controls the tuner 13 based on a user operation input using the remote commander 2. The tuner 13 performs channel selection processing, intermediate frequency amplification processing, detection processing, and the like on the broadcast signal received by the antenna 3 under the control of the system controller 12 and outputs the result to the buffer memory 14.
[0110]
The SD signal (525i signal) output from the tuner 13 is supplied to the buffer memory 14 and temporarily stored. The SD signal temporarily stored in the buffer memory 14 is supplied to the carrying unit 15 and converted into an HD signal (1050i signal) based on a control signal supplied from the system controller 12.
[0111]
That is, the carrying unit 15 can obtain pixel data constituting the HD signal (hereinafter referred to as “HD pixel data”) from pixel data constituting the SD signal (hereinafter referred to as “SD pixel data”). . The HD signal output from the carrying unit 15 is combined with a character graphic or the like by the display signal SCH output from the OSD processing unit 16 in the combining unit 17 as necessary, and is supplied to the display unit 18 to be displayed on the display unit. An image is displayed on the 18 screen.
[0112]
Further, the user can adjust the spatial and temporal resolutions of the image displayed on the screen of the display unit 18 by operating the remote commander 2. In the carrying unit 15, HD pixel data is calculated by the estimation formula. As the coefficient data of this estimation formula, a parameter s that determines the resolution in the spatial direction and the time direction adjusted by the user's operation of the remote commander 2. , And z are generated and used by a generation formula including these parameters s and z. As a result, the resolution in the spatial direction and temporal direction of the image by the HD signal output from the carrying unit 15 corresponds to the adjusted parameters s and z.
[0113]
FIG. 7 shows an example of a user interface for adjusting the parameters s and z. At the time of adjustment, an adjustment screen 71 in which the adjustment positions of the parameters s and z are indicated by an asterisk icon 72 in the drawing is displayed on the display unit 18 in an OSD manner. The remote commander 2 also includes a joystick 81 as user operation means.
[0114]
The user can move the position of the icon 72 on the adjustment screen 71 by operating the joystick 81, and can adjust the values of parameters s and z that determine the resolution in the spatial direction and the time direction.
[0115]
FIG. 8 shows an enlarged portion of the adjustment screen 71 in FIG. The value of the parameter z for determining the resolution in the time direction (time resolution) is adjusted by moving the icon 72 to the left and right, while the parameter for determining the resolution in the space direction (spatial resolution) by moving the icon 72 up and down. The value of s is adjusted. The user can easily adjust the values of the parameters s and z with reference to the adjustment screen 71 displayed on the display unit 18.
[0116]
Note that the remote commander 2 may include other pointing devices such as a mouse and a trackball instead of the joystick 81. Furthermore, the values of the parameters s and z adjusted by the user may be displayed numerically on the adjustment screen 71.
[0117]
Next, the operation of the carrying unit 15 described with reference to FIG. 3 will be described.
[0118]
The second tap selection unit 42 is supplied with the SD signal (525i signal) stored in the buffer memory 14 and receives four pixels (attention position) in the unit pixel block constituting the HD signal (1050i signal) to be generated. The space class tap data (SD pixel data) located around the pixel) is selectively extracted. The space class tap data (SD pixel data) selectively extracted by the second tap selection unit 42 is supplied to the space class detection unit 44. The space class detection unit 44 performs ADRC processing on each SD pixel data as space class tap data, and re-classifies the space class (mainly class classification for waveform expression in space) as class information. A quantization code qi is obtained (see equation (1)).
[0119]
In addition, the third tap selection unit 43 receives the SD signal (525i signal) stored in the buffer memory 14 and receives the four pixels (unit pixel block) constituting the HD signal (1050i signal) to be created. Data of motion class taps (SD pixel data) located around the pixel of interest position) is selectively extracted. The motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 43 is supplied to the motion class detection unit 45. The motion class detection unit 45 obtains class information MV of a motion class (mainly class classification for representing the degree of motion) from each SD pixel data as motion class tap data.
[0120]
The motion information MV and the requantization code qi are supplied to the class synthesis unit 46. For each unit pixel block constituting the HD signal (1050i signal) to be created from the supplied motion information MV and the requantization code qi, the class synthesis unit 46 includes four pixels (target pixel) in the unit pixel block. ) To obtain the class code CL indicating the class to which it belongs (see equation (3)). The class code CL is supplied to the coefficient memory 53 and the normalized coefficient memory 55 as read address information.
[0121]
For example, in each vertical blanking period, a combination of classes and output pixels (HD1 to HD4, HD1 ′ to HD4 ′) corresponding to the values of parameters s and z adjusted by the user in the coefficient generation unit 52 Coefficient seed data w for each _Ten Thru w _n9 Is used to obtain coefficient data Wi (i = 1 to n) of the estimation formula, and is stored in the coefficient memory 53 (see formula (5)). Also, the normalization coefficient S corresponding to the coefficient data Wi (i = 1 to n) of the estimation formula obtained by the coefficient generation unit 52 is generated by the normalization coefficient calculation unit 54 and stored in the normalization coefficient memory 55. (See equation (6)).
[0122]
By supplying the class code CL to the coefficient memory 53 as read address information, four output pixels corresponding to the class code CL from the coefficient memory 53 (HD1 to HD4 in the odd field, HD1 ′ to HD4 ′ in the even field). The coefficient data Wi of the estimation equation for minutes is read and supplied to the estimated prediction calculation unit 47. In addition, the first tap selection unit 41 receives the SD signal (525i signal) stored in the buffer memory 14 and receives four pixels (unit pixels) in the unit pixel block constituting the HD signal (1050i signal) to be generated. Predictive tap data (SD pixel data) located around the pixel of interest) is selectively extracted.
[0123]
The estimated prediction calculation unit 47 uses prediction tap data (SD pixel data) xi and coefficient data Wi for four output pixels read from the coefficient memory 53, and the 4 in the unit pixel block constituting the HD signal to be created. Pixel y (pixel at the target position) data y ₁ To y _Four Is calculated (see equation (4)). The four-pixel data y in the unit pixel block constituting the HD signal sequentially output from the estimated prediction calculation unit 47 ₁ To y _Four Is supplied to the normalization calculator 48.
[0124]
As described above, the normalization coefficient memory 55 is supplied with the class code CL as read address information. From the normalization coefficient memory 55, the normalization coefficient S corresponding to the class code CL, that is, the estimated prediction calculation unit 47. Output HD pixel data y ₁ To y _Four The normalization coefficient S corresponding to the coefficient data Wi used for the calculation is read out and supplied to the normalization calculation unit 48. The normalization calculation unit 48 outputs the HD pixel data y output from the estimated prediction calculation unit 47. ₁ To y _Four Are respectively divided by the corresponding normalization coefficient S to normalize. Thereby, the data y due to the rounding error when the coefficient generation unit 52 obtains the coefficient data Wi. ₁ To y _Four Level fluctuations are eliminated.
[0125]
In this way, the data y of the four pixels in the unit pixel block that is normalized and sequentially output by the normalization calculation unit 48. ₁ 'To y _Four ′ Is supplied to the post-processing unit 49. The post-processing unit 49 receives the data y of four pixels in the unit pixel block sequentially supplied from the normalization calculation unit 48. ₁ 'To y _Four 'Is line-sequentially output in a 1050i signal format. That is, the post-processing unit 49 outputs a 1050i signal as an HD signal.
[0126]
In this way, the carrying unit 15 calculates the HD pixel data y using the coefficient data Wi (i = 1 to n) of the estimation formula corresponding to the adjusted parameters s and z. Therefore, the user can freely adjust the resolution in the spatial direction and temporal direction of the image by the HD signal by adjusting the values of the parameters s and z. In addition, since the coefficient data of each class corresponding to the adjusted parameters s and z is generated and used by the coefficient generation unit 52 each time, a large amount of coefficient data is stored. Memory is not necessary, and memory saving can be achieved.
[0127]
Further, as described above, the user can adjust the values of the parameters s and z on the adjustment screen 71. The frequency distribution memory 91 (see FIG. 6) of the history information storage unit 50 stores the frequency distribution information of the parameters s and z values input from the system controller 12 to the coefficient generation unit 52. In addition, the time-varying memory 94 (see FIG. 6) of the history information storage unit 50 stores a predetermined number, for example, 10 of the values of the parameters s and z input from the system controller 12 to the coefficient generation unit 52. The values of the latest parameters s and z are stored.
[0128]
As described above, the history information stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50 includes, for example, the carrying unit 15 or the carrying unit 15 when the television receiver 1 is upgraded. Coefficient type data w stored in the information memory bank 51 when the board to be replaced is replaced or when the carrying unit 15 is mounted on another device and used. _Ten Thru w _n9 It is used when generating
[0129]
Next, coefficient seed data w _Ten Thru w _n9 An example of the generation method will be described. In this example, coefficient seed data w which is coefficient data in the generation formula of the above-described formula (5). _Ten Thru w _n9 The example which calculates | requires is shown.
[0130]
Here, for the following description, ti (i = 0 to 9) is defined as in Expression (9).
[0131]
[Equation 9]

Using this equation (9), equation (5) can be rewritten as equation (10).
[0132]
[Expression 10]

[0133]
Finally, the undetermined coefficient w _ij Is required. That is, for each combination of class and output pixel, a coefficient value that minimizes the square error is determined using a plurality of SD pixel data and HD pixel data. This is a so-called least square method. The learning number is m, and the residual in the kth learning data (1 ≦ k ≦ m) is e. _k When E is the sum of squared errors, E is expressed by equation (11) using equations (4) and (5). Where x _ik Is the k-th pixel data at the i-th predicted tap position of the SD image, y _k Represents pixel data of the k-th HD image corresponding thereto.
[0134]
## EQU11 ##

[0135]
In the least square method, w in equation (11) _ij W such that the partial differential due to becomes zero _ij Ask for. This is shown by equation (12).
[0136]
[Expression 12]

[0137]
Hereinafter, as in the equations (13) and (14), X _ipjq , Y _ip Is defined, Equation (12) can be rewritten using a matrix as shown in Equation (15).
[0138]
[Formula 13]

[0139]
[Expression 14]

[0140]
[Expression 15]

[0141]
This equation is generally referred to as a normal equation. The normal equation is calculated using the sweep-out method (Gauss-Jordan elimination method), etc. _ij The coefficient seed data is calculated.
[0142]
FIG. 9 is a diagram illustrating a concept of an example of the above-described coefficient seed data generation method.
[0143]
A plurality of SD signals are generated from the HD signal. For example, the parameters s and z for varying the spatial direction (vertical and horizontal) bands and the temporal (frame direction) band of the filter used when generating the SD signal from the HD signal are each in nine stages. By making it variable, a total of 81 types of SD signals are generated. Learning is performed between the plurality of SD signals generated in this way and the HD signal, and coefficient seed data is generated.
[0144]
FIG. 10 shows coefficient seed data w stored in the information memory bank 51 of the television receiver 1 described above. _Ten Thru w _n9 It is a block diagram which shows the structure of the coefficient seed data generation apparatus 121 for producing | generating.
[0145]
An HD signal (1050i signal) as a teacher signal is input to the input terminal 141. The SD signal generation unit 143 performs a horizontal and vertical thinning process on the HD signal using the history information input from the input terminal 142 and the values of the parameters s and z to obtain a student signal. SD signal is obtained.
[0146]
The SD signal generation unit 143 changes the band in the spatial direction and the time direction of the band limiting filter used when generating the SD signal from the HD signal based on the parameters s and z input from the input terminal 142. .
[0147]
The history information input to the SD signal generation unit 143 is history information of the input parameters s and z values stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50. It is.
[0148]
The coefficient seed data w stored in the information memory bank 51 of the television receiver 1 before use is started. _Ten Thru w _n9 Is not yet stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50, the history information is not input to the SD signal generation unit 143.
[0149]
That is, the history information is input to the SD signal generation unit 143 when, for example, the carrying unit 15 or the board including the carrying unit 15 is replaced when the television receiver 1 is upgraded. Coefficient seed data w stored in memory bank 51 _Ten Thru w _n9 For example.
[0150]
Here, the input terminal 142 is connected to the system controller 12 in the carrying unit 15 described with reference to FIG. 3 and connected to the connection terminal that can exchange information with the history information storage unit 50. do it. That is, the terminal 161 and the terminal 162 of the input terminal 142 are connected to the history information storage unit 50, can receive history information, and can exchange information.
[0151]
The SD signal generation unit 143 adjusts the values of the input parameters s and z based on the history information, and according to the adjusted parameters s and z, the band in the spatial direction and the time direction is adjusted. Variable. When no history information is input, the bandwidth in the spatial direction and the time direction are varied according to the input parameters s and z values themselves.
[0152]
Here, in the television receiver 1, the values of the parameters s and z are adjusted by a user operation in predetermined steps within a range of 0 to 8, for example, and the resolutions in the spatial direction and the temporal direction are adjusted. Was done.
[0153]
In this case, when the bandwidths in the spatial direction and the time direction are varied in accordance with the parameters s and z values input in the SD signal generation unit 143, the television receiver 1 uses a solid line frame BF in FIG. Range to show (spatial resolution is y ₁ To y ₂ , Time resolution is x ₁ Thru x ₂ ) Coefficient seed data w so that the resolution can be adjusted within _Ten Thru w _n9 Is generated.
[0154]
When history information is input, the SD signal generation unit 143 uses the frequency distribution information in each of the values of the parameters s and z to obtain the position of the center of gravity. In this case, a larger value is weighted as a new value among values corresponding to a predetermined number of latest parameters s and z. Then, the SD signal generation unit 143 adjusts the input parameters s and z based on the position of the center of gravity. In this case, the band is narrowed as the values of the parameters s and z are increased. Thereby, in the television receiver 1 that has obtained the adjusted parameters, the resolution is increased as the values of the parameters s and z are increased.
[0155]
Here, the values of the input parameters s and z are linear so that the center of the change range of the values of the parameters s and z adjusted on the television receiver 1 side is moved to the obtained center of gravity position. It is supposed to be converted. For example, the parameter s adjusted on the television receiver 1 side and the center value of the change range of the value of z are s. ₀ , Z ₀ S _m , Z _m , The input parameter s, and the value of z is s ₁ , Z ₁ The parameter s after adjustment and the value s of z ₂ , Z ₂ Is obtained by the following conversion formula.
[0156]
[Expression 16]

[0157]
[Expression 17]

[0158]
When the spatial and temporal bands are varied according to the parameters s and z thus adjusted, the television receiver 1 adjusts the resolution within the range indicated by the solid line frame BF in FIG. A range indicated by a one-dot chain line AF in FIG. 11 (spatial resolution is y ₁ 'To y ₂ ', Time resolution is x ₁ 'To x ₂ ') Coefficient seed data w so that the resolution can be adjusted within _Ten Thru w _n9 Is generated.
[0159]
In the above-described processing, when the barycentric position is obtained using the frequency distribution information in each of the parameters s and z, among the values corresponding to the predetermined number of the latest parameters s and z, The new value is weighted more heavily, but the center of gravity position obtained without such weighting may be used. Further, instead of using the frequency distribution information, a predetermined number of the latest parameters s and z may be used, and the centroid position obtained by weighting the new value with greater weight may be used. Furthermore, the parameter s and z having the largest frequency may be obtained from the frequency distribution information in each of the parameters s and z, and the values may be used instead of the barycentric position. Of the predetermined number of latest parameters s and z, the newest parameters s and z may be used instead of the barycentric position.
[0160]
Returning to FIG. 10, the configuration of the coefficient seed data generation device 121 will be described again.
[0161]
The first tap selection unit 144, the second tap selection unit 145, and the third tap selection unit 146 use the HD signal (1050i signal) based on the SD signal (525i signal) output from the SD signal generation unit 143. Data of a plurality of SD pixels located around the target position is selectively extracted and output. The first tap selection unit 144 to the third tap selection unit 146 are basically the same as the first tap selection unit 41 to the third tap selection unit 43 of the carrying unit 15 described with reference to FIG. Configured.
[0162]
The space class detection unit 147 detects the level distribution pattern of the space class tap data (SD pixel data) selectively extracted by the second tap selection unit 145, and detects the space class based on the level distribution pattern. And output the class information. The space class detection unit 147 is basically configured in the same manner as the space class detection unit 44 of the carrying unit 15 described with reference to FIG. From this space class detection unit 147, the re-quantization code qi of each SD pixel data as space class tap data is output as class information indicating the space class.
[0163]
The motion class detection unit 148 detects a motion class mainly representing the degree of motion from the motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 146, and the class Output information MV. The motion class detection unit 148 is basically configured in the same manner as the motion class detection unit 45 of the carrying unit 15 described with reference to FIG. In this motion class detection unit 148, the inter-frame difference is calculated from the motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 146, and the average absolute value of the difference is further calculated. Is subjected to threshold processing, and a motion class which is a motion index is detected.
[0164]
Based on the re-quantization code qi as the class information of the space class output from the space class detection unit 147 and the motion class class information MV output from the motion class detection unit 148, the class synthesis unit 149 A class code CL indicating the class to which the target pixel relating to (1050i signal) belongs is obtained. The class composition unit 149 is basically configured in the same manner as the class composition unit 46 of the carrying unit 15 described with reference to FIG.
[0165]
The normal equation generation unit 150 corresponds to each HD pixel data y as pixel data of the target position obtained from the HD signal supplied to the input terminal 141, and the first tap selection unit 144 corresponding to each HD pixel data y. From the prediction tap data (SD pixel data) xi, the values of parameters s and z, and the class code CL output from the class synthesis unit 149 corresponding to each HD pixel data y. Coefficient seed data w for each class _Ten Thru w _n9 Generate a normal equation (see equation (15)) to obtain
[0166]
In this case, learning data is generated by a combination of one HD pixel data y and n prediction tap data (SD pixel data) xi corresponding thereto, but the adjusted parameters s and z In response to the change in the value, the spatial and temporal bandwidths in the SD signal generator 143 are varied, a plurality of SD signals are sequentially generated, and each of the learning data is transferred between the HD signal and each SD signal. Generation occurs. As a result, the normal equation generation unit 150 generates a normal equation in which many learning data having different values of the parameters s and z are registered, and the coefficient seed data w _Ten Thru w _n9 Can be obtained.
[0167]
Further, in this case, learning data is generated by a combination of one HD pixel data y and n prediction tap data (SD pixel data) xi corresponding thereto, but the normal equation generation unit 150 outputs the learning data. A normal equation is generated for each pixel (see HD1 to HD4 in FIG. 4 and HD1 ′ to HD4 ′ in FIG. 5). For example, the normal equation corresponding to HD1 is generated from learning data composed of HD pixel data y in which the deviation value with respect to the center prediction tap has the same relationship as HD1.
[0168]
The coefficient seed data determination unit 151 is supplied with the data of the normal equation generated for each combination of the class and the output pixel by the normal equation generation unit 150, solves the normal equation, and for each combination of the class and the output pixel. And coefficient seed data w _Ten Thru w _n9 Ask for. The coefficient seed data determination unit 151 obtains coefficient seed data by solving a normal equation by, for example, a sweep-out method. The coefficient seed memory 152 stores the coefficient seed data obtained by the coefficient seed data determining unit 151. The input / output interface 153 is connected to other devices (for example, the information memory bank 51 of the carrying unit 15 described with reference to FIG. 3) as necessary, and the coefficient seed data stored in the coefficient seed memory 152 is input. Output.
[0169]
Next, the operation of the coefficient seed data generation device 121 in FIG. 10 will be described.
[0170]
An HD signal (1050i signal) as a teacher signal is supplied to the input terminal 141, and the HD signal is subjected to horizontal and vertical thinning processing by the SD signal generation unit 143 to obtain a student signal. An SD signal (525i signal) is generated.
[0171]
In this case, the SD signal generation unit 143 has parameters that determine the spatial direction and time direction band of the band limiting filter used when generating the SD signal from the HD signal, in other words, the spatial direction of the generated SD signal. The values of parameters s and z that define the resolution in the time direction are input.
[0172]
The SD signal generation unit 143 also includes a coefficient type stored in the information memory bank 51 when the television receiver 1 is upgraded, for example, when the carrying unit 15 or a board including the carrying unit 15 is replaced. Data w _Ten Thru w _n9 Is generated in the past by a user operation stored in the frequency distribution memory 91 and the time-varying memory 94 of the history information storage unit 50 in the carrying unit 15 before replacement or the substrate including the carrying unit 15. The history information of the parameters s and z is input through the input terminal 142.
[0173]
In the SD signal generation unit 143, when history information is input, the values of parameters s and z input based on the history information are adjusted. For example, the gravity center positions of the parameters s and z are obtained from the history information, and the center of the change range of the parameter s and z values adjusted on the television receiver 1 side is moved to the obtained gravity center position. The input parameters s and z are linearly transformed. Then, in the SD signal generation unit 143, according to the adjusted values of the parameters s and z, as described above, the spatial direction and time direction of the band limiting filter used when generating the SD signal from the HD signal The bandwidth is varied.
[0174]
The coefficient seed data w stored in the information memory bank 51 of the television receiver 1 before use is started. _Ten Thru w _n9 Since there is no input of history information when generating the signal, the band limiting filter used when generating the SD signal from the HD signal as described above according to the input parameters s and z itself. The spatial and temporal bands are varied.
[0175]
By sequentially changing the values of the parameters s and z input to the SD signal generation unit 143, the spatial and temporal bands of the band limiting filter used when generating the SD signal from the HD signal are changed. Therefore, a plurality of SD signals in which the spatial and temporal bands are changed in stages are generated.
[0176]
Further, based on the SD signal (525i signal) generated by the SD signal generation unit 143, the second tap selection unit 145 uses the spatial class tap data (SD pixel) located around the target position in the HD signal (1050i signal). Data) is selectively retrieved. The space class tap data (SD pixel data) selectively extracted by the second tap selection unit 145 is supplied to the space class detection unit 147. In the space class detection unit 147, each SD pixel data as space class tap data is subjected to ADRC processing, and reclassified as class information of a space class (mainly class classification for waveform expression in space). A quantization code qi is obtained (see equation (1)).
[0177]
Further, from the SD signal generated by the SD signal generation unit 143, the third tap selection unit 146 selectively extracts data of motion class taps (SD pixel data) located around the target pixel related to the HD signal. It is. The motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 146 is supplied to the motion class detection unit 148. In this motion class detection unit 148, class information MV of a motion class (mainly class classification for representing the degree of motion) is obtained from each SD pixel data as motion class tap data.
[0178]
The class information MV and the requantization code qi are supplied to the class synthesis unit 149. The class synthesis unit 149 obtains a class code CL indicating the class to which the pixel data at the target position in the HD signal (1050i signal) belongs, from the supplied class information MV and the requantization code qi (see Expression (3)). .
[0179]
Further, from the SD signal generated by the SD signal generation unit 143, the first tap selection unit 144 selectively extracts data of predicted taps (SD pixel data) located around the target position in the HD signal.
[0180]
Then, in the normal equation generation unit 150, each HD pixel data y as pixel data of the target position obtained from the HD signal supplied to the input terminal 141, and the first tap corresponding to each HD pixel data y, respectively. Predictive tap data (SD pixel data) xi selectively extracted by the selection unit 144, the values of the parameters s and z, and the class output from the class synthesis unit 149 corresponding to each HD pixel data y From the code CL, coefficient seed data w for each combination of class and output pixel _Ten Thru w _n9 A normal equation (see equation (15)) is obtained individually.
[0181]
Then, the coefficient seed data determination unit 151 solves each normal equation, and coefficient seed data w for each combination of class and output pixel. _Ten Thru w _n9 Are obtained, and their coefficient seed data w _Ten Thru w _n9 Is stored in the coefficient seed memory 152 and output to the outside via the input / output interface 153 as necessary.
[0182]
As described above, in the coefficient seed data generation device 121 shown in FIG. 10, a set of classes and output pixels (HD1 to HD4, HD1 ′ to HD4 ′) stored in the information memory bank 51 of the carrying unit 15 of FIG. Coefficient seed data w which is coefficient data in a generation formula (see formula (5)) for obtaining coefficient data Wi used in the estimation formula for each combination. _Ten Thru w _n9 Can be generated.
[0183]
Further, in the coefficient seed data generation device 121, for example, when the television receiver 1 is upgraded, the carrying unit 15 or a board including the carrying unit 15 is replaced and stored in the information memory bank 51. Coefficient seed data w _Ten Thru w _n9 Is generated in the SD signal generation unit 143 via the input terminal 142 and stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50 of the television receiver 1. The history information of the parameters s and z input in the past is input.
[0184]
The SD signal generation unit 143 adjusts the values of the input parameters s and z based on the history information, and is used when obtaining the SD signal from the HD signal using the adjusted parameters s and z. The band in the spatial direction and time direction of the band limiting filter is varied.
[0185]
Coefficient seed data w thus obtained _Ten Thru w _n9 Are stored in the information memory bank 51 of the board that is newly installed when the version of the television receiver 1 is upgraded, or the board including the carrying part 15, and the user can use the parameters s and z. By adjusting this value, it becomes possible to adjust the resolution within the range centered on the center of gravity of the past resolution adjustment (see the one-dot chain line frame AF in FIG. 11). That is, a resolution adjustment range according to the user's preference is automatically set, and the user can adjust the resolution within the range.
[0186]
Next, another example of the coefficient seed data generation method will be described. Also in this example, coefficient seed data w which is coefficient data in the generation formula of the above-described formula (5). _Ten Thru w _n9 A second example of obtaining
[0187]
FIG. 12 shows the concept of the second example of the coefficient seed data generation method. A plurality of SD signals are generated from the HD signal. For example, the parameters s and z for varying the spatial direction (vertical direction and horizontal direction) band and the time direction (frame direction) band of the filter used when generating the SD signal from the HD signal can be varied in 9 stages. As a result, a total of 81 types of SD signals are generated. Learning is performed between each SD signal generated in this way and the HD signal, and coefficient data Wi of the estimation expression of Expression (4) is generated. Then, coefficient seed data is generated using the coefficient data Wi generated corresponding to each SD signal.
[0188]
First, how to obtain coefficient data of an estimation formula will be described. Here, an example is shown in which the coefficient data Wi (i = 1 to n) of the estimation formula of Formula (4) is obtained by the least square method. As a generalized example, consider the observation equations of equations (18) and (19), where X is input data, W is coefficient data, and Y is a predicted value. In this equation (19), m represents the number of learning data, and n represents the number of prediction taps.
[0189]
[Formula 18]

[0190]
[Equation 19]

[0191]
The least square method is applied to the data collected by the observation equations of Equation (18) and Equation (19). Consider the residual equation of equation (20) based on the observation equations of equation (18) and equation (19).
[0192]
[Expression 20]

[0193]
From the residual equation of equation (20), the most probable value for each Wi is e in equation (21). ² It is considered that the condition for minimizing (e squared) is satisfied. That is, the condition of Expression (22) should be considered.
[0194]
[Expression 21]

[0195]
[Expression 22]

[0196]
That is, consider n conditions based on i in Equation (22) and satisfy this condition. ₁ , W ₂ , ..., W _n May be calculated. Therefore, Expression (23) is obtained from the residual equation of Expression (20). Furthermore, Expression (24) is obtained from Expression (23) and Expression (18).
[0197]
[Expression 23]

[0198]
[Expression 24]

[0199]
And the normal equation of Formula (25) is obtained from Formula (20) and Formula (24).
[0200]
[Expression 25]

[0201]
Since the normal equation of the equation (25) can establish the same number of equations as the unknown number n, the most probable value of each Wi can be obtained. In this case, simultaneous equations are solved using a sweeping method or the like.
[0202]
Next, how to obtain coefficient seed data using coefficient data Wi generated corresponding to each SD signal will be described.
[0203]
A class of coefficient data obtained by learning using an SD signal corresponding to the parameters s and z is k _szi Suppose that Here, i is the number of the prediction tap. This k _szi From this, coefficient class data of this class is obtained.
[0204]
The coefficient data Wi (i = 1 to n) is the coefficient seed data w _Ten Thru w _n9 Is expressed by the above-described equation (5). Here, considering that the least square method is used for the coefficient data Wi, the residual is expressed by Expression (26).
[0205]
[Equation 26]

[0206]
Where t _j Is shown in equation (9) above. When the least square method is applied to equation (26), equation (27) is obtained.
[0207]
[Expression 27]

[0208]
Where X _jk , Y _j Are defined as Equation (28) and Equation (29), respectively, Equation (27) can be rewritten as Equation (30). This equation (30) is also a normal equation, and the coefficient seed data w is obtained by solving this equation by a general solution method such as a sweep-out method. _Ten Thru w _n9 Can be calculated.
[0209]
[Expression 28]

[0210]
[Expression 29]

[0211]
[30]

[0212]
FIG. 13 shows a configuration of a coefficient seed data generation device 171 that generates coefficient seed data based on the concept shown in FIG. 13, portions corresponding to those in FIG. 10 are denoted by the same reference numerals, and detailed description thereof is omitted as appropriate.
[0213]
That is, the coefficient seed data generation device 171 of FIG. 13 includes a normal equation generation unit 181 instead of the normal equation generation unit 150, and a coefficient data determination unit 182 instead of the coefficient seed data determination unit 151. The configuration is basically the same as that of the coefficient seed data generation apparatus 121 described with reference to FIG. 10 except that a normal equation generation section 183 and a coefficient seed data determination section 184 are newly provided.
[0214]
The normal equation generation unit 181 includes each HD pixel data y as pixel data of the target position obtained from the HD signal supplied to the input terminal 141, and a first tap selection unit corresponding to each HD pixel data y. From the prediction tap data (SD pixel data) xi selectively extracted in 144 and the class code CL output from the class synthesis unit 149 corresponding to each HD pixel data y, a class and an output pixel (FIG. 4 for each combination of HD1 to HD4 and HD1 ′ to HD4 ′ in FIG. 5), a normal equation (see equation (25)) for obtaining coefficient data Wi (i = 1 to n) is generated.
[0215]
In this case, learning data is generated by a combination of one HD pixel data y and n prediction tap data (SD pixel data) xi corresponding to the HD pixel data y, but the values of the adjusted parameters s and z The spatial and temporal bandwidths of the SD signal generator 143 are varied in response to the change in the number of SD signals, and a plurality of SD signals are sequentially generated, and learning data is generated between the HD signal and each SD signal. Done. As a result, the normal equation generation unit 181 generates a normal equation for obtaining coefficient data Wi (i = 1 to n) for each combination of class and output pixel corresponding to each SD signal.
[0216]
The coefficient data determination unit 182 receives the data of the normal equation generated by the normal equation generation unit 181, solves the normal equation, and the coefficient of each combination of class and output pixel respectively corresponding to each SD signal Data Wi is obtained. The normal equation generation unit 183 uses the values of the parameters s and z, and the coefficient data Wi corresponding to each SD signal, for each combination of class and output pixel, coefficient seed data w. _Ten Thru w _n9 Generate a normal equation (see equation (28)) to obtain
[0217]
The coefficient seed data determination unit 184 receives supply of normal equation data generated for each combination of class and output pixel by the normal equation generation unit 183, solves the normal equation for each combination, and outputs the class and output pixel. Coefficient seed data w for each combination _Ten Thru w _n9 Ask for. The coefficient seed memory 152 stores the coefficient seed data w obtained by the coefficient seed data determination unit 184. _Ten Thru w _n9 Is stored.
[0218]
The other parts of the coefficient seed data generation device 171 shown in FIG. 13 are configured in the same manner as the coefficient seed data generation device 121 shown in FIG. 10, and thus detailed description thereof is omitted.
[0219]
Next, the operation of the coefficient seed data generation device 171 shown in FIG. 13 will be described.
[0220]
An HD signal (1050i signal) as a teacher signal is supplied to the input terminal 141, and the SD signal generation unit 143 performs horizontal and vertical thinning processing on the HD signal, and SD as a student signal. A signal (525i signal) is generated.
[0221]
By sequentially changing the values of the parameters s and z input to the SD signal generation unit 143, the spatial and temporal bands of the band limiting filter used when generating the SD signal from the HD signal are changed. As a result, a plurality of SD signals in which the spatial and temporal bands change stepwise are generated.
[0222]
In this case, when the history information is input, the SD signal generation unit 143 adjusts the values of the parameters s and z input based on the history information, and sets the adjusted parameters s and z to the adjusted values. Accordingly, as described above, the band in the spatial direction and the time direction of the band limiting filter used when generating the SD signal from the HD signal is varied.
[0223]
Further, based on the SD signal (525i signal) generated by the SD signal generation unit 143, the second tap selection unit 145 uses the spatial class tap data (SD pixel) located around the target position in the HD signal (1050i signal). Data) is selectively retrieved. The space class tap data (SD pixel data) selectively extracted by the second tap selection unit 145 is supplied to the space class detection unit 147. In this space class detection unit 147, ADRC processing is performed on each SD pixel data as space class tap data, and the class information of the space class (mainly class classification for waveform expression in space) is used. A requantization code qi is obtained (see equation (1)).
[0224]
Further, from the SD signal generated by the SD signal generation unit 143, the third tap selection unit 146 selectively extracts data of motion class taps (SD pixel data) located around the target pixel related to the HD signal. It is. The motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 146 is supplied to the motion class detection unit 148. In this motion class detection unit 148, class information MV of a motion class (mainly class classification for representing the degree of motion) is obtained from each SD pixel data as motion class tap data.
[0225]
The class information MV and the above-described requantization code qi are supplied to the class synthesis unit 149. The class synthesis unit 149 obtains a class code CL indicating the class to which the pixel data at the target position in the HD signal (1050i signal) belongs from the class information MV and the requantization code qi (see Expression (3)). .
[0226]
Further, from the SD signal generated by the SD signal generation unit 143, the first tap selection unit 144 selectively extracts data of predicted taps (SD pixel data) located around the target position in the HD signal.
[0227]
In the normal equation generation unit 181, each HD pixel data y as pixel data at the target position obtained from the HD signal supplied to the input terminal 141, and the first tap corresponding to each HD pixel data y, respectively. From the prediction tap data (SD pixel data) xi selectively extracted by the selection unit 144 and the class code CL output from the class synthesis unit 149 corresponding to each HD pixel data y, an SD signal generation unit Corresponding to each of the SD signals generated in 143, a normal equation (see equation (25)) for generating coefficient data Wi (i = 1 to n) is generated for each combination of class and output pixel. Is done.
[0228]
Then, the coefficient data determination unit 182 solves the normal equation to obtain coefficient data Wi for each combination of class and output pixel corresponding to each SD signal. In the normal equation generation unit 183, the coefficient seed data w for each combination of class and output pixel is obtained from the coefficient data Wi of each class corresponding to each SD signal. _Ten Thru w _n9 A normal equation (see equation (28)) is generated to obtain
[0229]
Then, the coefficient equation data determination unit 184 solves the normal equation, and coefficient species data w for each combination of class and output pixel. _Ten Thru w _n9 Is obtained and its coefficient seed data w _Ten Thru w _n9 Is stored in the coefficient seed memory 152.
[0230]
As described above, also in the coefficient seed data generation device 171 shown in FIG. 13, a set of classes and output pixels (HD1 to HD4, HD1 ′ to HD4 ′) stored in the information memory bank 51 of the carrying unit 15 of FIG. Coefficient seed data w for each combination _Ten Thru w _n9 Can be generated.
[0231]
Also in the coefficient seed data generation device 171, the SD signal generation unit 143 adjusts the values of the input parameters s and z based on the history information, and the adjusted parameters s and z The band in the spatial direction and the time direction of the band limiting filter used when obtaining the SD signal from the HD signal is variable. Therefore, the coefficient seed data w thus obtained is _Ten Thru w _n9 Are stored in the information memory bank 51 of the board that is newly installed when the version of the television receiver 1 is upgraded, or the board including the carrying part 15, and the user can use the parameters s and z. By adjusting this value, it becomes possible to adjust the resolution within the range centered on the center of gravity of the past resolution adjustment (see the one-dot chain line frame AF in FIG. 11).
[0232]
In the carrying unit 15 in FIG. 1, the generation formula of the formula (5) is used to generate the coefficient data Wi (i = 1 to n). However, it is expressed by a polynomial having a different order or another function. The generation of the coefficient data Wi can also be realized by the above equation.
[0233]
Further, the carrying unit 15 in FIG. 1 sets a parameter s that defines the resolution in the spatial direction (vertical direction and horizontal direction) and a parameter z that defines the resolution in the time direction (frame direction), and sets the parameters s and z. Although it has been described that the resolution in the spatial direction and the temporal direction of the image can be adjusted by adjusting the value, other parameters that determine the quality of the image can be similarly configured. For example, various parameters such as a parameter for determining the vertical resolution, a parameter for determining the horizontal resolution, and a parameter for determining the degree of noise removal can be considered as the parameters.
[0234]
1 has been described as being capable of adjusting two parameters s and z, but one that handles one or three or more parameters can be similarly configured. Also in that case, the history information storage unit 50 stores the history information of each parameter. The coefficient seed data generation device 121 shown in FIG. 10 or the coefficient seed data generation device 171 shown in FIG. 13 can perform the same generation processing as described above using the history information of each parameter. .
[0235]
Note that the processing in the carrying unit 15 in FIG. 1 can be realized by software with a personal computer 201 capable of image signal processing as shown in FIG. 14, for example.
[0236]
First, the personal computer 201 shown in FIG. 14 will be described. The personal computer 201 includes a CPU 211 that controls the operation of the entire apparatus, a ROM 212 that stores an operation program of the CPU 211, coefficient seed data, and the like, and a RAM 213 that forms a work area of the CPU 211. The CPU 211, ROM 212, and RAM 213 are each connected to a bus 214.
[0237]
Further, the personal computer 201 has a storage unit 215 configured with, for example, a hard disk drive. The storage unit 215 is connected to the bus 214.
[0238]
Further, the personal computer 201 has a communication unit 216 that is connected to a communication network 202 such as the Internet by wire or wireless. The communication unit 216 is connected to the bus 214 via the input / output interface 217.
[0239]
The personal computer 201 also includes a user interface 218. The user interface 218 is connected to the bus 214 and includes a signal receiving unit 219 that receives a remote control signal from the remote commander 203, a keyboard, a mouse, a joystick, and the like, and an input unit 220 that receives a user operation input. For example, it is connected to a display unit 221 made of an LCD (liquid crystal display) or the like.
[0240]
The personal computer 201 also has an input terminal 222 for inputting an SD signal and an output terminal 223 for outputting an HD signal. Input terminal 222 is connected to bus 214 via interface 224, and similarly output terminal 223 is connected to bus 214 via interface 225.
[0241]
A drive 226 is connected to the bus 214 as necessary, and a magnetic disk 231, an optical disk 232, a magneto-optical disk 233, a semiconductor memory 234, or the like is appropriately mounted, and a computer program read from them is required. Is installed in the RAM 213 accordingly.
[0242]
Here, instead of storing the processing program, coefficient seed data, and the like in the ROM 212 in advance, the processing program, coefficient seed data, etc. are downloaded from the communication network 202 such as the Internet via the communication unit 216, and the storage unit 215. It can also be stored in the RAM 213 and used. These processing programs, coefficient seed data, and the like may be provided by the magnetic disk 231, the optical disk 232, the magneto-optical disk 233, the semiconductor memory 234, or the like.
[0243]
Further, instead of receiving the input of the SD signal to be processed from the input terminal 222, it is recorded in advance in the storage unit 215 or downloaded from the communication network 202 such as the Internet via the communication unit 216. Good. Further, instead of outputting the processed HD signal from the output terminal 223 or in parallel with the process of outputting from the output terminal 223, for example, it is supplied to the display unit 221 to display an image, and further, the storage unit It may be stored in 215 or sent to the communication network 202 such as the Internet via the communication unit 216.
[0244]
Next, image signal processing 1 for obtaining an HD signal from an SD signal, which is executed in the personal computer 201 described with reference to FIG. 14, will be described with reference to a flowchart of FIG.
[0245]
In step S1, the CPU 211 acquires SD pixel data in frame units or field units. When this SD pixel data is input from the input terminal 222, the CPU 211 temporarily stores the acquired SD pixel data in the RAM 213 via the bus 214. When the SD pixel data is recorded in the recording unit 215 in advance, the CPU 111 reads the SD pixel data from the recording unit 215 via the bus 214 and temporarily stores it in the RAM 213.
[0246]
In step S2, the CPU 211 determines whether or not the processing of all frames or all fields of the input SD pixel data has been completed. If it is determined in step S <b> 2 that the processing has not ended, in step S <b> 3, the CPU 211 acquires image quality designation values (for example, parameters s and z) input by the user's operation of the remote commander 203. For example, when the image quality designation value is input in advance, the CPU 211 acquires the image quality designation value by reading the image quality designation value recorded in the RAM 213.
[0247]
In step S4, the CPU 211 corresponds to, for example, history information stored in the recording unit 215 or the like (the frequency distribution memory 91 in the history information storage unit 50 of the television receiver 1 in FIG. Is updated using the new image quality designation value acquired in step S3.
[0248]
In step S5, the CPU 211 uses the coefficient seed data of each combination of the read image quality designation value, class, and output pixel (see HD1 to HD4 in FIG. 4 and HD1 ′ to HD4 ′ in FIG. 5), for example, The coefficient data Wi of the estimation formula (see formula (4)) of each combination is generated by the generation formula of (5).
[0249]
In step S6, the CPU 211 acquires the pixel data of the class tap and the prediction tap corresponding to each HD pixel data to be generated from the SD pixel data acquired in step S1.
[0250]
In step S <b> 7, the CPU 211 determines whether or not the process for obtaining the HD pixel data has been completed in the entire area of the acquired SD pixel data. If it is determined in step S7 that the process has been completed in the entire area of the acquired SD pixel data, the process returns to step S1 and the same process is repeated, so that the SD of the next frame or field is repeated. Processing on the pixel data is executed.
[0251]
If it is determined in step S7 that the processing has not been completed in the entire area of the acquired SD pixel data, in step S8, the CPU 211 determines the class code CL from the SD pixel data of the class tap acquired in step S6. Is generated.
[0252]
In step S9, the CPU 211 uses the coefficient data Wi corresponding to the class code CL and the SD pixel data of the prediction tap to generate HD pixel data using an estimation formula. After the process of step S9 is complete | finished, a process returns to step S6 and the process similar to the process mentioned above is repeated.
[0253]
If it is determined in step S2 that all the frames or all the fields have been processed, the processing ends.
[0254]
In this way, by performing processing according to the flowchart shown in FIG. 15, the personal computer 201 described with reference to FIG. 14 processes the SD pixel data constituting the input SD signal to form the HD signal. HD pixel data to be obtained can be obtained. As described above, the HD signal obtained by such processing is output from the output terminal 223 to an external device via the bus 214, or is displayed on the display unit 221 via the bus 214 and the user interface 218. Then, an image corresponding to the HD signal is displayed or further supplied to the recording unit 215 and recorded on a hard disk or the like constituting the recording unit 215.
[0255]
As described above, for example, history information stored in the recording unit 215 or the like is used when generating new coefficient seed data used in step S8. As described above, by using the newly generated coefficient seed data, it is possible to adjust the image quality within the adjustment range according to the user's preference. The history information described above may be stored not in the recording unit 215 but in various recording media attached to the drive 226 (a specific example of the semiconductor memory 234 such as a memory card).
[0256]
Similarly, the processing in the coefficient seed data generation apparatus 121 of FIG. 10 can be realized by software using the personal computer 201 of FIG.
[0257]
The coefficient seed data generation process 1 will be described with reference to the flowchart of FIG.
[0258]
In step S21, the CPU 211 selects an image quality pattern (for example, specified by parameters s and z) used for learning, and adjusts the selected image quality pattern based on history information.
[0259]
In step S22, the CPU 211 determines whether learning has been completed for all image quality patterns.
[0260]
If it is determined in step S22 that learning has not been completed for all image quality patterns, in step S23, the CPU 211 acquires known HD pixel data in frame units or field units.
[0261]
In step S24, the CPU 211 determines whether or not the processing has been completed for all the HD pixel data. If it is determined in step S24 that the process has been completed for all HD pixel data, the process returns to step S21 and the same process is repeated.
[0262]
If it is determined in step S24 that the processing has not been completed for all the HD pixel data, in step S25, the CPU 211 uses the image quality pattern adjusted in step S21 based on the HD pixel data acquired in step S23. SD pixel data is generated.
[0263]
In step S26, the CPU 211 acquires pixel data of the class tap and the prediction tap corresponding to each HD pixel data acquired in step S23 from the SD pixel data generated in step S25.
[0264]
In step S <b> 27, the CPU 211 determines whether or not the learning process has been completed in the entire region of the generated SD pixel data. If it is determined in step S27 that the learning process has ended, the process returns to step S23, the next HD pixel data is acquired, and the same process is repeated.
[0265]
If it is determined in step S27 that the learning process has not ended, the CPU 211 generates a class code CL from the SD pixel data of the class tap acquired in step S26 in step S28, and in step S29, the normal equation (See equation (15)). After the process of step S29 is complete | finished, a process returns to step S26 and the process after it is repeated.
[0266]
If it is determined in step S22 that learning has been completed for all image quality patterns, the CPU 211 solves the normal equation by a sweeping method or the like in step S30, thereby class and output pixels (HD1 to HD4 in FIG. 4). The coefficient seed data of each combination of HD1 ′ to HD4 ′ in FIG. 5 is calculated, and in step S31, the coefficient seed data is stored in, for example, the storage unit 215 or a recording medium mounted in the drive 226. The process is terminated.
[0267]
With the processing described with reference to FIG. 16, coefficient seed data can be obtained using the personal computer 201 by the same method as the coefficient seed data generation apparatus 121 illustrated in FIG. 10.
[0268]
Similarly, the processing in the coefficient seed data generation device 171 in FIG. 13 can be realized by software using the personal computer 201 in FIG.
[0269]
The coefficient seed data generation process 2 will be described with reference to the flowchart of FIG.
[0270]
In step S51, the CPU 211 selects an image quality pattern (for example, an image quality pattern specified by the parameters s and z) used for learning, and adjusts the image quality pattern based on the history information. It is determined whether or not the coefficient data calculation process for the image quality pattern is completed.
[0271]
When it is determined in step S52 that the coefficient data calculation process has not been completed, the CPU 211 acquires known HD pixel data in frame units or field units in step S53, and in step S54, all the HD pixel data are acquired. It is determined whether or not processing has been completed for data.
[0272]
If it is determined in step S54 that the processing has not been completed for all the HD pixel data, in step S55, the CPU 211 uses the image quality pattern adjusted in step S51 based on the HD pixel data acquired in step S53. SD pixel data is generated.
[0273]
In step S56, the CPU 211 acquires pixel data of the class tap and the prediction tap corresponding to each HD pixel data acquired in step S53 from the SD pixel data generated in step S55, and generates it in step S57. It is determined whether or not the learning process has been completed in all regions of the SD pixel data that has been obtained. If it is determined in step S57 that the learning process has been completed, the process returns to step S53, the next HD pixel data is acquired, and the same process as described above is repeated.
[0274]
If it is determined in step S57 that the learning process has not ended, the CPU 211 generates a class code CL from the SD pixel data of the class tap acquired in step S56 in step S58, and in step S59, the coefficient A normal equation for obtaining data (see equation (25)) is generated. After the process of step S59 is completed, the process returns to step S56, and the subsequent processes are repeated.
[0275]
If it is determined in step S54 that the processing has been completed for all the HD pixel data, in step S60, the CPU 211 solves the normal equation generated in step S59 by a sweeping method or the like, and class and output pixels (FIG. 4 HD1 to HD4 (see HD1 ′ to HD4 ′ in FIG. 5)), and the process returns to step S51 to select and adjust the next image quality pattern. The same processing as the processing is repeated to obtain coefficient data of each combination corresponding to the next image quality pattern.
[0276]
If it is determined in step S52 that the calculation processing of coefficient data for all image quality patterns has been completed, in step S61, the CPU 211 obtains a normal equation (formula for obtaining coefficient seed data from coefficient data for all image quality patterns). (See (28)).
[0277]
In step S62, the CPU 211 calculates coefficient seed data for each combination of class and output pixel by solving the normal equation generated in step S61 by a sweeping method or the like. In step S63, the coefficient seed data is calculated. For example, the data is stored in the storage unit 215 or a recording medium attached to the drive 226, and the process is terminated.
[0278]
Through the processing described with reference to FIG. 17, the coefficient seed data can be obtained in the personal computer 201 described with reference to FIG. 14 by the same method as the coefficient seed data generation device 171 illustrated in FIG. 13.
[0279]
Next, another embodiment of the present invention will be described.
[0280]
FIG. 18 is a block diagram showing a configuration of a carrying unit 251 used in place of the carrying unit 15 in another configuration of the television receiver 1 of FIG. The television receiver 1 having the carrying unit 251 also obtains a 525i signal as an SD signal from a broadcast signal, converts the 525i signal into a 1050i signal as an HD signal, and outputs the 1050i signal. In FIG. 18, parts corresponding to those in FIG. 3 are denoted by the same reference numerals, and description thereof will be omitted as appropriate.
[0281]
That is, the carrying unit 251 includes an information memory bank 261 instead of the information memory bank 51, and includes a normalization calculation unit 48, a coefficient generation unit 52, a normalization coefficient calculation unit 54, and a normalization coefficient memory 55. Except not being provided, it has the same configuration as the carrying unit 15 described with reference to FIG.
[0282]
The information memory bank 261 stores coefficient data Wi (i = 1) for each combination of class, output pixel (see HD1 to HD4 in FIG. 4, HD1 ′ to HD4 ′ in FIG. 5), parameter s, and z. To n) are stored in advance. A method for generating the coefficient data Wi will be described later.
[0283]
The operation of the carrying unit 251 in FIG. 18 will be described.
[0284]
From the SD signal (525i signal) stored in the buffer memory 14, the second tap selection unit 42 uses the four pixels (the pixel at the target position) in the unit pixel block constituting the HD signal (1050i signal) to be created. The data of space class taps (SD pixel data) located in the vicinity of is selectively extracted. The space class tap data (SD pixel data) selectively extracted by the second tap selection unit 42 is supplied to the space class detection unit 44. In this space class detection unit 44, ADRC processing is performed on each SD pixel data as space class tap data, and as class information of a space class (mainly class classification for waveform expression in space). A requantization code qi is obtained (see equation (1)).
[0285]
In addition, from the SD signal (525i signal) stored in the buffer memory 14, the third tap selection unit 43 uses the four pixels (units of the target position) in the unit pixel block constituting the HD signal (1050i signal) to be generated. The motion class tap data (SD pixel data) located around the (pixel) is selectively extracted. The motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 43 is supplied to the motion class detection unit 45. In this motion class detection unit 45, class information MV of a motion class (mainly class classification for representing the degree of motion) is obtained from each SD pixel data as motion class tap data.
[0286]
The motion information MV and the requantization code qi are supplied to the class synthesis unit 46. In the class synthesis unit 46, four pixels (target pixel) in the unit pixel block for each unit pixel block constituting the HD signal (1050i signal) to be created from the supplied motion information MV and the requantization code qi. A class code CL indicating the class to which the symbol belongs is obtained (see equation (3)). The class code CL is supplied to the coefficient memory 53 as read address information.
[0287]
In the coefficient memory 53, for example, the coefficient data Wi of each combination of the class and the output pixel corresponding to the values of the parameter s and z adjusted by the user in the vertical blanking period is controlled by the system controller 12. The data is loaded from the memory bank 261 and stored.
[0288]
When the coefficient data corresponding to the adjusted parameters s and z values is not stored in the information memory bank 261, the coefficient memory 153 stores the values before and after the adjusted parameters s and z. The coefficient data Wi corresponding to the values of the values may be read from the information memory bank 261, and the coefficient data corresponding to the adjusted values of the parameters s and z may be obtained by the interpolation calculation process using them. .
[0289]
As described above, the class code CL is supplied as read address information to the coefficient memory 53, so that the four output pixels corresponding to the class code CL (HD1 to HD4 in the odd field, HD1 ′ in the even field) from the coefficient memory 53. To HD4 ′), the coefficient data Wi of the estimation formula is read and supplied to the estimated prediction calculation unit 47.
[0290]
In addition, from the SD signal (525i signal) stored in the buffer memory 14, the first tap selection unit 41 uses the four pixels (units at the target position) in the unit pixel block constituting the HD signal (1050i signal) to be generated. Predictive tap data (SD pixel data) located around the (pixel) is selectively extracted.
[0291]
In the estimated prediction calculation unit 47, the prediction tap data (SD pixel data) xi and the coefficient data Wi for four output pixels read from the coefficient memory 53, 4 in the unit pixel block constituting the HD signal to be created. Pixel y (pixel at the target position) data y ₁ To y _Four Is calculated (see equation (4)). Then, data y of four pixels in the unit pixel block constituting the HD signal sequentially output from the estimated prediction calculation unit 47 ₁ To y _Four Is supplied to the post-processing unit 49.
[0292]
In the post-processing unit 49, data y of four pixels in the unit pixel block sequentially supplied from the estimated prediction calculation unit 47 ₁ To y _Four Are line-sequentially output in a 1050i signal format. That is, the post-processing unit 49 outputs a 1050i signal as an HD signal.
[0293]
As described above, the carry unit 251 uses the coefficient data Wi (i = 1 to n) of the estimation formula corresponding to the adjusted parameters s and z to calculate the HD pixel data y. Therefore, the user can freely adjust the resolution in the spatial direction and temporal direction of the image by the HD signal by adjusting the values of the parameters s and z.
[0294]
Further, the history information storage unit 50 receives values of parameters s and z input from the system controller 12 to the information memory bank 261. Then, in the frequency distribution memory 91 and the temporal change memory 94 (see FIG. 6) of the history information storage unit 50, the parameters s and z are controlled by the system controller 12 as in the case of the carrying unit 15 shown in FIG. The history information of the value of is stored.
[0295]
As described above, the history information stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50 includes, for example, the carrying unit 251 or the carrying unit 251 when the television receiver 1 is upgraded. When replacing the substrate, it is used when generating coefficient data Wi stored in the information memory bank 261.
[0296]
Next, a method for generating coefficient data Wi (i = 1 to n) will be described.
[0297]
As already described, as another example of the coefficient seed data generation method, first, for each SD signal obtained by changing the values of the parameters s and z stepwise, the class and the output pixel are learned by using the SD signal. Coefficient data Wi for each combination is generated, and then the coefficient data Wi for each combination of class and output pixel is used using the coefficient data Wi for each combination of SD signals. _Ten Thru w _n9 Can be requested. The coefficient data Wi for each combination of class, output pixel and parameter s, and z values stored in advance in the information memory bank 261 is generated in the same manner as in the first half of the coefficient seed data generation method. can do.
[0298]
FIG. 19 is a block diagram illustrating a configuration of the coefficient data generation device 271. In this coefficient data generation device 271, the same reference numerals are given to the portions corresponding to the coefficient seed data generation device 171 shown in FIG. 13, and the description thereof will be omitted as appropriate.
[0299]
That is, the coefficient data generation device 271 of FIG. 19 is provided with a coefficient memory 281 instead of the coefficient seed memory 152, except that the normal equation generation unit 183 and the coefficient seed data determination unit 184 are not provided. Has the same configuration as that of the coefficient seed data generation device 171 described with reference to FIG.
[0300]
The coefficient memory 281 stores coefficient data Wi for each combination of class and output pixel corresponding to the values of the parameters s and z determined by the coefficient data determination unit 182.
[0301]
Next, the operation of the coefficient data generation device 271 shown in FIG. 19 will be described.
[0302]
An HD signal (1050i signal) as a teacher signal is supplied to the input terminal 141, and the HD signal is subjected to horizontal and vertical thinning processing by the SD signal generation unit 143 to obtain an SD signal (Student signal) ( 525i signal) is generated.
[0303]
By sequentially changing the values of the parameters s and z input to the SD signal generation unit 143, the spatial and temporal bands of the band limiting filter used when generating the SD signal from the HD signal are changed. As a result, a plurality of SD signals are generated in which the spatial and temporal bands change stepwise.
[0304]
In this case, when the history information is input, the SD signal generation unit 143 adjusts the values of the parameters s and z input based on the history information, and sets the adjusted parameters s and z to the adjusted values. Accordingly, as described above, the band in the spatial direction and the time direction of the band limiting filter used when generating the SD signal from the HD signal is varied.
[0305]
Further, based on the SD signal (525i signal) generated by the SD signal generation unit 143, the second tap selection unit 145 uses the spatial class tap data (SD pixel) located around the target position in the HD signal (1050i signal). Data) is selectively retrieved. The space class tap data (SD pixel data) selectively extracted by the second tap selection unit 145 is supplied to the space class detection unit 147. In the space class detection unit 147, each SD pixel data as space class tap data is subjected to ADRC processing, and reclassified as class information of a space class (mainly class classification for waveform expression in space). A quantization code qi is obtained (see equation (1)).
[0306]
Further, from the SD signal generated by the SD signal generation unit 143, the third tap selection unit 146 selectively extracts data of motion class taps (SD pixel data) located around the target pixel related to the HD signal. It is. The motion class tap data (SD pixel data) selectively extracted by the third tap selection unit 146 is supplied to the motion class detection unit 148. In this motion class detection unit 148, class information MV of a motion class (mainly class classification for representing the degree of motion) is obtained from each SD pixel data as motion class tap data.
[0307]
The class information MV and the above-described requantization code qi are supplied to the class synthesis unit 149. The class synthesis unit 149 obtains a class code CL indicating the class to which the pixel data at the target position in the HD signal (1050i signal) belongs from the class information MV and the requantization code qi (see Expression (3)). .
[0308]
Further, from the SD signal generated by the SD signal generation unit 143, the first tap selection unit 144 selectively extracts data of predicted taps (SD pixel data) located around the target position in the HD signal.
[0309]
In the normal equation generation unit 181, each HD pixel data y as pixel data at the target position obtained from the HD signal supplied to the input terminal 141, and the first tap corresponding to each HD pixel data y, respectively. From the prediction tap data (SD pixel data) xi selectively extracted by the selection unit 144 and the class code CL output from the class synthesis unit 149 corresponding to each HD pixel data y, an SD signal generation unit Corresponding to each of the SD signals generated in 143, a normal equation (see equation (25)) for generating coefficient data Wi (i = 1 to n) is generated for each combination of class and output pixel. Is done.
[0310]
Then, the coefficient data determination unit 182 solves the normal equation and obtains coefficient data Wi of each combination of class and output pixel corresponding to each SD signal. That is, coefficient data determination unit 182 obtains coefficient data Wi for each combination of class, output pixel, parameter s, and z values. The coefficient data Wi is stored in the coefficient memory 281.
[0311]
As described above, in the coefficient data generation device 271 shown in FIG. 19, the class, output pixels (HD1 to HD4, HD1 ′ to HD4 ′) and parameters s stored in the information memory bank 261 of the carrying unit 251 in FIG. , And coefficient data Wi for each combination of z values is generated.
[0312]
Further, in the coefficient data generation device 271, the SD signal generation unit 143 adjusts the values of the input parameters s and z based on the history information, and the adjusted signal s and z provides the HD signal. The band in the spatial direction and the time direction of the band limiting filter used when obtaining the SD signal from is varied. Accordingly, the coefficient data Wi thus determined is stored in the carrying unit 251 or the information memory bank 261 of the board that includes the carrying unit 251 that is newly installed when the television receiver 1 is upgraded. The user can adjust the resolution within the range centered on the center of gravity of the past resolution adjustment (see the one-dot chain line AF in FIG. 11) by adjusting the values of the parameters s and z. Is possible.
[0313]
Note that the carrying unit 251 in FIG. 18 sets a parameter s that determines the resolution in the spatial direction (vertical direction and horizontal direction) and a parameter z that determines the resolution in the time direction (frame direction), and sets the parameters s and z. Although it has been described that the resolution in the spatial direction and the temporal direction of the image can be adjusted by adjusting the values, other devices that provide parameters for determining the quality of the image can be similarly configured. As the parameters, for example, various parameters such as a parameter for determining the vertical resolution, a parameter for determining the horizontal resolution, and a parameter for determining the noise removal degree can be considered.
[0314]
In addition, in the carrying unit 251 of FIG. 18, the one that can adjust the two parameters s and z is shown, but one that handles one or three or more parameters can be similarly configured. . Also in that case, the history information storage unit 50 stores the history information of each parameter. Then, the coefficient data generation device 271 shown in FIG. 19 can perform generation processing similar to that described above using the history information of each parameter.
[0315]
18 can be realized by software in the personal computer 201 shown in FIG. 14, for example, similarly to the process in the carry unit 15 in FIG. In this case, coefficient data is stored in advance in the ROM 212 or the like and used.
[0316]
With reference to the flowchart of FIG. 20, the image signal processing 2 for obtaining the HD signal from the SD signal executed by the personal computer 201 shown in FIG. 14 will be described.
[0317]
In step S81, the CPU 211 acquires SD pixel data in frame units or field units. When the SD pixel data is input from the input terminal 222, the SD pixel data is temporarily stored in the RAM 213. When the SD pixel data is recorded in the recording unit 215, the SD pixel data is read from the recording unit 215 and temporarily stored in the RAM 213.
[0318]
In step S82, the CPU 211 determines whether or not processing of all frames or all fields of input SD pixel data has been completed. If it is determined in step S82 that the processing of all data has not been completed, in step S83, the CPU 211 determines the image quality designation value (for example, values of parameters s and z, etc.) input by the user operating the remote commander 203. ) Is acquired from, for example, the RAM 213.
[0319]
In step S84, for example, the CPU 211 stores the history information stored in the recording unit 215 (corresponding to the storage contents of the frequency distribution memory 91 and the time-dependent memory 94 in the history information storage unit 50 of the carrying unit 251 in FIG. 18). In step S85, the class and output pixels (HD1 to HD1 in FIG. 4) corresponding to the image quality designation value are updated from the ROM 212 or the like based on the obtained image quality designation value. The coefficient data Wi of each combination of HD4 and HD1 ′ to HD4 ′ in FIG. 5) is read out and temporarily stored in the RAM 213.
[0320]
In step S86, the CPU 211 acquires the pixel data of the class tap and the prediction tap corresponding to each HD pixel data to be generated from the SD pixel data acquired in step S81, and in step S87, the input SD It is determined whether or not the processing for obtaining HD pixel data has been completed in the entire area of pixel data. If it is determined in step S87 that the process has ended, the process returns to step S81, and the same process is repeated for the SD pixel data of the next frame or field.
[0321]
If it is determined in step S87 that the process of obtaining HD pixel data has not been completed in the entire area of the input SD pixel data, the CPU 211 determines in step S88 that the SD pixel of the class tap acquired in step S86. A class code CL is generated from the data. In step S89, HD pixel data is generated by an estimation formula using the coefficient data corresponding to the class code CL and the SD pixel data of the prediction tap. After the process of step S89 is completed, the process returns to step S86, and the subsequent processes are repeated.
[0322]
If it is determined in step S82 that the process has ended, the process ends.
[0323]
As described above, the processing described with reference to FIG. 20 is executed, so that the personal computer 201 is used to process the SD pixel data that constitutes the input SD signal, and the HD pixel data that constitutes the HD signal. Can be obtained. As described above, the HD signal obtained by processing in this way is output from the output terminal 223 to another device or the like, or supplied to the display unit 221 to display an image corresponding to the HD signal. Further, the data is supplied to the recording unit 215 and recorded on a hard disk or the like constituting the recording unit 215.
[0324]
As described above, for example, the history information stored in the recording unit 215 is used when generating new coefficient data used in step S85. In this way, by using newly generated coefficient data, it is possible to perform image quality adjustment within an adjustment range that matches the user's preference. The history information described above is not stored in the recording unit 215 but stored in a recording medium attached to the drive 226 (for example, a removable memory such as a memory card, which is a kind of the semiconductor memory 234). Also good.
[0325]
Further, the processing in the coefficient data generation device 271 in FIG. 19 can be similarly realized by software by, for example, the personal computer 201 shown in FIG.
[0326]
The coefficient data generation process executed by the personal computer 201 in FIG. 14 will be described with reference to the flowchart in FIG.
[0327]
In step S101, the CPU 211 selects an image quality pattern (for example, specified by the parameters s and z) used for learning, adjusts the image quality pattern based on the history information, and in step S102, selects all image quality patterns. It is determined whether the coefficient data calculation process for the pattern is completed.
[0328]
If it is determined in step S102 that the coefficient data calculation process for all image quality patterns has not been completed, the CPU 211 acquires known HD pixel data in frame units or field units in step S103, and in step S104. Then, it is determined whether or not the processing has been completed for all the HD pixel data.
[0329]
If it is determined in step S104 that the processing has not been completed for all the HD pixel data, the CPU 211 determines, based on the image quality pattern adjusted in step S101, from the HD pixel data acquired in step S103 in step S105. SD pixel data is generated, and in step S106, the pixel data of the class tap and the prediction tap are acquired from the SD pixel data generated in step S105, corresponding to each HD pixel data acquired in step S103. .
[0330]
In step S <b> 107, the CPU 211 determines whether or not the learning process has been completed in the entire region of the generated SD pixel data.
[0331]
If it is determined in step S107 that the learning process has not ended, in step S108, the CPU 211 generates a class code CL from the SD pixel data of the class tap acquired in step S106. In step S109, the coefficient data Generate a normal equation (see equation (25)) to obtain After the process of step S109 ends, the process returns to step S106, and the subsequent processes are repeated.
[0332]
If it is determined in step S107 that the learning process has been completed, the process returns to step S103, the next HD pixel data is acquired, and thereafter, the same process as described above is repeated.
[0333]
If it is determined in step S104 that the processing has been completed for all the HD pixel data, in step S110, the CPU 211 solves the normal equation generated in step S109 by a sweeping method or the like, and class and output pixels (FIG. 4 HD1 through HD4, and HD1 ′ through HD4 ′ in FIG. 5) are calculated. After the processing of step S110 is completed, the processing returns to step S101, the next image quality pattern is selected and adjusted, and the subsequent processing is repeated, and each combination corresponding to the next image quality pattern is repeated. Coefficient data is obtained.
[0334]
When it is determined in step S102 that the coefficient data calculation processing for all image quality patterns has been completed, in step S111, the CPU 211 stores coefficient data of each class for all image quality patterns, for example, the storage unit 215 or the drive. The data is stored in a recording medium attached to H.226, and the process ends.
[0335]
As described above, the coefficient data can be obtained by the same method as that of the coefficient data generation device 271 shown in FIG. 19 by the processing described with reference to FIG. 21 and the software processing in the personal computer shown in FIG.
[0336]
Next, still another embodiment of the present invention will be described.
[0337]
FIG. 22 is a block diagram showing a configuration of a carrying unit 301 provided in place of the carrying unit 15 as another embodiment of the television receiver 1 described with reference to FIG. Similarly to the carrying unit 15 described with reference to FIG. 3 and the carrying unit 251 described with reference to FIG. 18, the carrying unit 301 obtains a 525i signal as an SD signal from the broadcast signal, and converts the 525i signal into the HD signal. The signal is converted into a 1050i signal as a signal, and the 1050i signal is output. 22, parts corresponding to those in FIG. 3 are denoted by the same reference numerals, and description thereof will be omitted as appropriate.
[0338]
That is, the carrying unit 301 includes an information memory bank 311 in place of the information memory bank 51, and uses FIG. 3 except that a control signal is supplied from the system controller 12 to the first tap selection unit 41. It has the same configuration as the carrying unit 15 described above.
[0339]
In the information memory bank 311, coefficient data Wi used in the estimation formula (see formula (4)) is provided for each combination of class and output pixels (see HD 1 to HD 4 in FIG. 4 and HD 1 ′ to HD 4 ′ in FIG. 5). Coefficient seed data w which is coefficient data in the generation formula (see formula (5)) for generating (i = 1 to n) _Ten Thru w _n9 Is stored. This coefficient seed data w _Ten Thru w _n9 The generation method of will be described later.
[0340]
The information memory bank 311 stores the coefficient type data w stored therein. _Ten Thru w _n9 The tap position information of the prediction tap selected by the first tap selection unit 41 is stored. This tap position information is the coefficient seed data w _Ten Thru w _n9 Is the position information of the prediction tap in the generating device when generating. As described above, the system controller 12 determines the position of the predicted tap selected by the first tap selection unit 41 based on the tap position information stored in the information memory bank 311 as the coefficient seed data w. _Ten Thru w _n9 A control signal for switching so as to be equal to the position of the prediction tap in the generation device when generating the signal is generated and supplied to the first tap selection unit 41.
[0341]
Here, the position of the prediction tap selected by the first tap selection unit 41 extends in the horizontal direction, the vertical direction, and the time direction. In the present embodiment, based on the tap position information stored in the information memory bank 311, the position of the predicted tap is switched to any of A type, B type, and C type.
[0342]
23 to 25 are diagrams showing predicted tap positions of A type to C type, respectively. Here, “◯” indicates the position of the selected prediction tap. Further, F0 is a field in which pixel data (pixel data of the target position) of the HD signal to be created exists, and the center prediction tap TP exists in this field F0. F-1 is a field before the field F0, and F + 1 is a field after the field F0.
[0343]
The type A prediction tap position shown in FIG. 23 is obtained by increasing the number of prediction taps in the spatial direction (vertical direction and horizontal direction). As a result, the spatial resolution determined by the parameter s can be created with higher precision than the temporal resolution determined by the parameter z. The C type prediction tap positions shown in FIG. 25 are obtained by increasing the number of prediction taps in the time direction. Thereby, the resolution in the time direction determined by the value of the parameter z is created with higher accuracy than the resolution in the spatial direction determined by the value of the parameter s. The type B predicted tap position shown in FIG. 24 is between the A type and the B type. In each of the A type to the C type, the number of prediction taps is made equal.
[0344]
The operation of the carrying unit 301 configured as described above is exactly the same as the operation of the carrying unit 15 of FIG. That is, the carrying unit 301 can convert the input SD signal (525i signal) into an HD signal (1050i signal). Further, the user can freely adjust the resolution in the spatial direction and temporal direction of the image by the HD signal by adjusting the values of the parameters s and z.
[0345]
Further, the frequency distribution memory 91 (see FIG. 6) of the history information storage unit 50 stores the frequency distribution information of the parameters s and z values input from the system controller 12 to the coefficient generation unit 52. . Further, the time-varying memory 94 (see FIG. 6) of the history information storage unit 50 stores a predetermined number, for example, 10 latest values among the values of the parameters s and z input from the system controller 12 to the coefficient generation unit 52. Parameters s and z are stored.
[0346]
As described above, the history information stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50 is, for example, the portable unit 301 or the substrate including the portable unit 301 when the television receiver 1 is upgraded. In the case of replacement, coefficient seed data w stored in the information memory bank 311 _Ten Thru w _n9 It is used when generating
[0347]
Coefficient seed data w stored in the information memory bank 311 _Ten Thru w _n9 Is the coefficient seed data w stored in the information memory bank 51 of the carrying unit 15 of FIG. _Ten Thru w _n9 It is generated in the same way.
[0348]
26 shows coefficient seed data w stored in the information memory bank 311 of the carrying unit 301 in FIG. _Ten Thru w _n9 2 is a block diagram showing a configuration of a coefficient seed data generation device 321 for generating In FIG. 26, parts corresponding to those in FIG. 10 are denoted by the same reference numerals, and description thereof is omitted as appropriate.
[0349]
That is, the coefficient seed data generation device 321 performs a horizontal and vertical thinning process on the HD signal input to the input terminal 141 instead of the SD signal generation unit 143, and obtains an SD signal as a student signal. The coefficient type described with reference to FIG. 10 except that a signal generation unit 331 is provided and a first tap selection unit 332 that receives supply of history information is provided instead of the first tap selection unit 144. It has the same configuration as the data generation device 121.
[0350]
The SD signal generation unit 331 receives the values of the parameters s and z corresponding to the values of the parameters s and z in the carrying unit 301 described with reference to FIG. However, unlike the SD signal generation unit 143 in the coefficient seed data generation apparatus 121 of FIG. 10, history information is not input to the SD signal generation unit 331.
[0351]
Therefore, the SD signal generation unit 331 does not adjust the values of the input parameters s and z, and generates an SD signal from the HD signal according to the input parameters s and z itself. The band in the spatial direction and the time direction of the band limiting filter used at the time is varied.
[0352]
Further, the first tap selection unit 332 uses the SD signal (525i signal) output from the SD signal generation unit 143 to predict data (SD pixel data) of a predicted tap located around the target position in the HD signal (1050i signal). ) Select xi selectively.
[0353]
Unlike the first tap selection unit 144 in the coefficient seed data generation apparatus 121 in FIG. 10, the first tap selection unit 332 includes the frequency of the history information storage unit 50 of the carrying unit 301 described with reference to FIG. 22. The history information of the input parameters s and z values stored in the distribution memory 91 and the temporal change memory 94 (see FIG. 6) is supplied.
[0354]
The coefficient seed data w stored in the information memory bank 311 of the television receiver 1 before use is started. _Ten Thru w _n9 Is not yet stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50, the history information is not input to the first tap selection unit 332. That is, the history information is input to the first tap selection unit 332, for example, when the television receiver 1 is upgraded, when the portable unit 301 or the board including the portable unit 301 is replaced. Coefficient seed data w stored in the information memory bank 311 _Ten Thru w _n9 For example.
[0355]
In the first tap selection unit 332, the predicted tap position is switched to any one of the A type to the C type described with reference to FIGS. 23 to 25 based on the history information. Further, when no history information is input in the first tap selection unit 332, the predicted tap position is the B type shown in FIG. In this case, the coefficient seed data w so that the spatial resolution determined by the value of the parameter s and the temporal resolution determined by the value of the parameter z are created with a certain accuracy. _Ten Thru w _n9 Is generated.
[0356]
In the first tap selection unit 332, when history information is input, the position of the center of gravity is obtained using the frequency distribution information for each of the values of the parameters s and z. In this case, a newer value is weighted with a value corresponding to a predetermined number of the latest parameters s and z. Then, in the first tap selection circuit 332, the type of the predicted tap position is selected according to the position of the center of gravity.
[0357]
In the television receiver 1 having the carrying unit 22 described with reference to FIG. 22, the values of the parameters s and z are adjusted in predetermined steps within a range of 0 to 8, for example, by the user's operation. The resolution in the direction and time direction is adjusted.
[0358]
When the above-described center-of-gravity position is present in the range of ARa in the user adjustment range shown in FIG. 27, and the user is assumed to make adjustments with emphasis on spatial resolution, the predicted tap position is The A type shown in FIG. 23 is selected. In this case, since the number of prediction taps in the spatial direction (vertical direction and horizontal direction) is increased, the resolution in the spatial direction determined by the value of the parameter s is more accurate than the resolution in the time direction determined by the value of the parameter z. Coefficient seed data w to be well created _Ten Thru w _n9 Is generated.
[0359]
In addition, when the gravity center position exists in the ARb range in the user adjustment range shown in FIG. 27, it is not assumed that the user is making adjustments with emphasis only on one of the resolution in the spatial direction and the time direction. As the predicted tap position, the B type shown in FIG. 24 is selected. In this case, the spatial resolution determined by the value of the parameter s and the temporal resolution determined by the value of the parameter z are created with a certain accuracy, respectively, as in the case where no history information is input. The coefficient seed data w _Ten Thru w _n9 Is generated.
[0360]
Furthermore, when this barycentric position exists in the range of ARc in FIG. 27 and it is assumed that the user is making adjustments with emphasis on the resolution in the spatial direction, the predicted tap position is the C type shown in FIG. Selected. For example, when the adjustment positions of the parameters s and z in the carrying unit 301 of the television receiver 1 are at the positions indicated by “&times;” in FIG. 27, the center of gravity position is in the range of ARc. As the predicted tap position, the C type shown in FIG. 25 is selected.
[0361]
In this case, since the number of prediction taps in the time direction is increased, the resolution in the time direction determined by the value of the parameter z is accurately created compared to the resolution in the spatial direction determined by the value of the parameter s. Coefficient seed data w _Ten Thru w _n9 Is generated.
[0362]
Other configurations of the coefficient seed data generation device 321 are the same as those of the coefficient seed data generation device 121 of FIG. Although detailed description is omitted, the operation of the coefficient seed data generation device 321 configured in this way is the same as that of the coefficient seed data generation device 121 of FIG. 10, and the information memory bank 311 of the carrying unit 301 shown in FIG. Coefficient seed data w to be stored _Ten Thru w _n9 Can be generated satisfactorily. Note that the tap position information stored in the information memory bank 311 of the carrying unit 301 described with reference to FIG. _Ten Thru w _n9 It is the information of the tap position at the time of generating.
[0363]
Coefficient seed data w thus obtained _Ten Thru w _n9 Is stored in the information memory bank 311 of the board to be newly installed when the television receiver 1 is upgraded, or the board including the carrying part 301 is used. If the emphasis is on resolution, the spatial resolution will be created accurately. On the other hand, if the user has emphasized the temporal resolution in the past, the temporal resolution will be accurate. Created. That is, the newly obtained coefficient seed data w _Ten Thru w _n9 By using, it is possible to create a resolution that suits the user's preference.
[0364]
The coefficient seed data generation device 321 shown in FIG. 26 corresponds to the coefficient seed data generation device 121 shown in FIG. 10, but the coefficient seed data generation corresponding to the coefficient seed data generation device 171 shown in FIG. Depending on the device, coefficient seed data w stored in the information memory bank 311 of the carrying unit 301 may be used. _Ten Thru w _n9 Can be generated. In this case, the SD signal generation unit 143 and the first tap selection unit 144 in the coefficient seed data generation device 171 are replaced with the SD signal generation unit 331 and the first tap selection unit in the coefficient seed data generation device 321 shown in FIG. It may be replaced with 332.
[0365]
Also, in the carrying unit 301 in FIG. 22, a parameter s that determines the resolution in the spatial direction (vertical direction and horizontal direction) and a parameter z that determines the resolution in the time direction (frame direction) are set, and the parameters s and z Although what can adjust the resolution of the image in the spatial direction and the temporal direction by adjusting the values has been shown, those that can adjust the resolution in the other two or more directions can be similarly configured. For example, a configuration that adjusts the resolution in the vertical direction and the horizontal direction, or a configuration that adjusts the resolution in the vertical direction, the horizontal direction, and the time direction can be similarly configured.
[0366]
Further, in the carrying unit 301 of FIG. 22, the types of tap positions of the prediction taps that can be selected by the first tap selection unit 41 are the three types A to C described with reference to FIGS. The number of types of tap positions that can be selected is not limited to this.
[0367]
Further, the processing in the carrying unit 301 in FIG. 22 can be realized by software, for example, by the personal computer 201 described with reference to FIG. The image signal processing in this case is basically performed according to the flowchart shown in FIG. 15, but when the pixel data of the prediction tap is acquired in step S6, the pixel position of the prediction tap is determined in step S5. Coefficient seed data used in processing _Ten Thru w _n9 It is made equal to the position of the prediction tap in the generation device when is generated.
[0368]
Similarly, the processing in the coefficient seed data generation device 321 in FIG. 26 can be realized by software. The coefficient seed data generation process in this case is basically performed according to the flowchart shown in FIG. 16, but in step S21, only the image quality pattern (specified by the parameters s and z) is selected. No adjustment based on history information is performed. Further, when the pixel data of the prediction tap is acquired in step S26, the pixel position of the prediction tap is selected based on the acquired history information.
[0369]
Next, another embodiment of the present invention will be described.
[0370]
FIG. 28 is a block diagram showing a configuration of a carrying unit 341 provided in place of the carrying unit 15 of the television receiver 1 of FIG. 1 as another embodiment. The carrying unit 341 also obtains a 525i signal as an SD signal from a broadcast signal, converts the 525i signal into a 1050i signal as an HD signal, and outputs the 1050i signal. It goes without saying that the television receiver 1 provided with the carrying unit 341 in place of the carrying unit 15 operates in the same manner as when the carrying unit 15 is provided.
[0371]
The detail of the carrying part 341 is demonstrated using FIG. 28, parts corresponding to those in FIG. 18 are denoted by the same reference numerals, and detailed description thereof is omitted as appropriate.
[0372]
That is, the carrying unit 341 includes the information memory bank 351 in place of the information memory bank 261, and the carrying unit shown in FIG. The unit 251 has basically the same configuration. In this information memory bank 351, coefficient data Wi (i = i = 4) is set for each combination of class, output pixel (see HD1 to HD4 in FIG. 4, HD1 ′ to HD4 ′ in FIG. 5), parameter s, and z. 1 to n) are stored in advance. A method for generating the coefficient data Wi will be described later.
[0373]
The information memory bank 351 stores the tap position information of the prediction tap selected by the first tap selection unit 41 in association with the stored coefficient data Wi (i = 1 to n). Yes. This tap position information is the position information of the prediction tap in the generation device when the coefficient data Wi is generated. As described above, the system controller 12 determines the position of the predicted tap selected by the first tap selection unit 41 based on the tap position information stored in the information memory bank 351 when the coefficient data Wi is generated. Switch to be equal to the position of the prediction tap in the generation device.
[0374]
Here, the position of the prediction tap selected by the first tap selection unit 41 extends in the horizontal direction, the vertical direction, and the time direction. The position of the predicted tap is switched to any of A type, B type, and C type based on the tap position information stored in the information memory bank 351 as in the carrying unit 301 of FIG.
[0375]
The operation of the carrying unit 341 in FIG. 28 is exactly the same as the operation of the carrying unit 251 in FIG. 18, and thus detailed description thereof is omitted.
[0376]
That is, the carrying unit 341 can convert the SD signal (525i signal) into the HD signal (1050i signal). Further, the user can freely adjust the resolution in the spatial direction and temporal direction of the image by the HD signal by adjusting the values of the parameters s and z.
[0377]
Further, the frequency distribution memory 91 (see FIG. 6) of the history information storage unit 50 stores the frequency distribution information of the parameters s and z values input from the system controller 12 to the information memory bank 351. . In addition, the time-varying memory 94 (see FIG. 6) of the history information storage unit 50 stores a predetermined number, for example, 10 latest values of the parameters s and z input from the system controller 12 to the information memory bank 351. Parameters s and z are stored.
[0378]
As described above, the history information stored in the frequency distribution memory 91 and the time-dependent memory 94 of the history information storage unit 50 is, for example, the carrying unit 341 or the board on which the carrying unit 341 is included when the television receiver 1 is upgraded. Is used when generating coefficient data Wi stored in the information memory bank 351.
[0379]
The coefficient data Wi (i = 1 to n) stored in the information memory bank 351 is generated by the same method as the coefficient data Wi stored in the information memory bank 261 of the carrying unit 251 in FIG.
[0380]
FIG. 29 shows a configuration of a coefficient data generating device 361 for generating coefficient data Wi stored in the information memory bank 351 of the carrying unit 341 described above. In FIG. 29, parts corresponding to those in FIG. 19 are denoted by the same reference numerals, and detailed description thereof is omitted.
[0381]
That is, the coefficient data generation device 361 is provided with an SD signal generation unit 371 in place of the SD signal generation unit 143 and a first tap selection unit 372 in place of the first tap selection unit 144. Has the same configuration as the coefficient data generation device 271 of FIG.
[0382]
The SD signal generation unit 371 can perform horizontal and vertical thinning processing on the HD signal input to the input terminal 141 to obtain an SD signal as a student signal. The SD signal generation unit 371 receives the values of the parameters s and z corresponding to the values of the parameters s and z in the carry unit 341 described above. However, unlike the SD signal generation unit 143 in the coefficient data generation device 271 of FIG. 19, no history information is input to the SD signal generation unit 371.
[0383]
Therefore, the SD signal generation unit 371 does not adjust the values of the input parameters s and z, and generates an SD signal from the HD signal according to the input parameters s and z values themselves. The band in the spatial direction and the time direction of the band limiting filter used at the time is varied.
[0384]
In addition, the coefficient data generation device 361 uses the SD signal (525i signal) output from the SD signal generation unit 371 to predict tap data (SD pixel data) xi located around the position of interest in the HD signal (1050i signal). Has a first tap selection unit 372 for selectively extracting.
[0385]
Unlike the first tap selection unit 144 in the coefficient data generation device 271 of FIG. 19, the first tap selection unit 372 includes a history information storage unit of the carrying unit 341 mounted on the television reception device 1 described above. The history information of the input parameters s and z values stored in the 50 frequency distribution memory 91 and the time-dependent memory 94 (see FIG. 6) is supplied.
[0386]
It should be noted that when generating coefficient data Wi stored in the information memory bank 351 of the carrying unit 341 mounted on the television receiver 1 before the start of use, the frequency distribution memory 91 of the history information storage unit 50, Since no history information is stored in the change memory 94, no history information is input to the first tap selection unit 372. That is, the history information is input to the first tap selection unit 372 when, for example, when the television receiver 1 is upgraded, the carrying unit 341 or the board including the carrying unit 341 is replaced. For example, when the coefficient data Wi stored in the information memory bank 351 is generated.
[0387]
In the first tap selection unit 372, the predicted tap position is switched to any of A type to C type shown in FIGS. 23 to 25 based on the history information.
[0388]
When there is no input of history information, the type B is shown in FIG. In this case, the coefficient data Wi is generated so that the spatial resolution determined by the value of the parameter s and the temporal resolution determined by the value of the parameter z are created with a certain accuracy.
[0389]
When history information is input, the first tap selection unit 372 uses the frequency distribution information in each of the values of the parameters s and z to obtain the center of gravity position. In this case, a newer value is weighted with a value corresponding to a predetermined number of the latest parameters s and z. Then, in the first tap selection circuit 372, the type of the predicted tap position is selected according to the position of the center of gravity.
[0390]
In the carrying unit 341, the values of the parameters s and z are adjusted by a user operation in predetermined steps within a range of 0 to 8, for example, and the resolution in the spatial direction and the time direction are adjusted.
[0390]
When it is assumed that the above-described center-of-gravity position exists in the range of ARa in FIG. 27 and the user is making adjustments with emphasis on spatial resolution, the A type shown in FIG. 23 is selected. In this case, since the number of prediction taps in the spatial direction (vertical direction and horizontal direction) is increased, the resolution in the spatial direction determined by the value of the parameter s is more accurate than the resolution in the time direction determined by the value of the parameter z. The coefficient data Wi is generated so as to be well created.
[0392]
Further, when the position of the center of gravity exists in the range of ARb in FIG. 27 and it is not assumed that the user is making adjustments with emphasis only on one of the resolution in the spatial direction and the time direction, B shown in FIG. A type is selected. In this case, the spatial resolution determined by the value of the parameter s and the temporal resolution determined by the value of the parameter z are created with a certain accuracy, respectively, as in the case where no history information is input. Thus, the coefficient data Wi is generated.
[0393]
Furthermore, when it is assumed that the position of the center of gravity exists in the range of ARc in FIG. 27 and the user is making adjustments with emphasis on the resolution in the spatial direction, the C type shown in FIG. 25 is selected. In this case, since the number of prediction taps in the time direction is increased, the resolution in the time direction determined by the value of the parameter z is accurately created compared to the resolution in the spatial direction determined by the value of the parameter s. Coefficient data Wi is generated.
[0394]
The other configuration of the coefficient data generation device 361 is the same as that of the coefficient data generation device 271 of FIG. Although detailed description is omitted, the operation of the coefficient data generation device 361 configured as described above is the same as that of the coefficient data generation device 271 of FIG. 19, and the carrying unit mounted on the television receiver 1 shown in FIG. 28. The coefficient data Wi stored in the information memory bank 351 of 341 can be generated satisfactorily. The tap position information stored in the information memory bank 351 of the carrying unit 341 described above is information on the tap position when the coefficient data Wi is generated by the coefficient data generation device 361 as described above.
[0395]
The coefficient data Wi thus obtained is stored and used in the carrying unit 341 or the information memory bank 351 of the board that includes the carrying unit 341 that is newly installed when the television receiver 1 is upgraded. Thus, when the user has emphasized the resolution in the spatial direction in the past, the resolution in the spatial direction can be accurately created, while the user has emphasized the resolution in the temporal direction in the past. In this case, the resolution in the time direction is created with high accuracy. That is, by using the newly obtained coefficient data Wi, it is possible to create a resolution according to the user's preference.
[0396]
In the carrying unit 341 in FIG. 28, a parameter s that determines the resolution in the spatial direction (vertical direction and horizontal direction) and a parameter z that determines the resolution in the time direction (frame direction) are set, and the parameters s and z Although what can adjust the resolution of the image in the spatial direction and the temporal direction by adjusting the values has been shown, those that can adjust the resolution in the other two or more directions can be similarly configured. For example, the vertical and horizontal resolutions are adjusted, or the vertical, horizontal, and time directions are adjusted.
[0397]
In the carry unit 341 in FIG. 28, the types of tap positions of the prediction taps that can be selected by the first tap selection unit 41 are three types, A type to C, but the number of tap position types that can be selected is as follows. It is not limited to this.
[0398]
Also, the processing in the carrying unit 341 in FIG. 28 can be realized by software by, for example, a personal computer 201 as shown in FIG. The image signal processing in this case is basically performed according to the flowchart shown in FIG. 20, but when the pixel data of the prediction tap is acquired in step S86, the pixel position of the prediction tap is read in step S85. It is made equal to the position of the prediction tap in the generating device when the coefficient data Wi to be generated is generated.
[0399]
Similarly, the processing in the coefficient data generation device 361 in FIG. 29 can be realized by software. The coefficient data generation processing in this case is basically performed in accordance with the flowchart shown in FIG. 21, but in step S101, only the image quality pattern (specified by the parameters s and z) is selected, and the history There is no adjustment by information. Further, when the pixel data of the prediction tap is acquired in step S106, the pixel position of the prediction tap is selected based on the history information.
[0400]
In addition, in the carrying part shown in FIG. 3, FIG. 18, FIG. 22, and FIG. 28 described above, an example using a linear linear equation as an estimation formula when generating an HD signal has been described as an example. For example, a higher order equation may be used as an estimation equation.
[0401]
Furthermore, the television receiver 1 records data on a recording medium such as a magnetic tape, an optical disk, a magnetic disk, a magneto-optical disk, or a semiconductor memory, and reproduces data recorded on these recording media. Or a recording / reproducing apparatus that can be connected to the recording / reproducing apparatus.
[0402]
In that case, the television receiver 1 having the carrying unit shown in FIG. 3, FIG. 18, FIG. 22, and FIG. 28 described above receives the broadcast data of the SD signal, converts it into an HD signal, and various recording media Or video data of an SD signal recorded on various recording media can be converted into an HD signal and reproduced, or recorded on various recording media again. That is, the present invention is not limited to broadcast data, and can be applied to processing any content data.
[0403]
Moreover, in the carrying part shown in FIG. 3, FIG. 18, FIG. 22 and FIG. 28 described above, an example in which an SD signal (525i signal) is converted into an HD signal (1050i signal) has been shown, but the present invention is not limited thereto. Of course, the present invention can be similarly applied to other cases in which the first image signal is converted into the second image signal using the estimation formula.
[0404]
Moreover, in the carrying part shown in FIG. 3, FIG. 18, FIG. 22 and FIG. 28 described above, the case where the information signal is an image signal is shown, but the present invention is not limited to this. For example, the present invention can be similarly applied when the information signal is an audio signal.
[0405]
In addition, in the above-described generation devices of FIGS. 10, 13, 19, 26, and 29, the SD signal generation circuit generates an SD signal as a student signal from an HD signal as a teacher signal, and performs learning. An example of performing was described. However, learning may be performed using the HD signal and the SD signal obtained independently, such as by using an imaging device that can simultaneously acquire the HD signal and the SD signal.
[0406]
The history information storage unit 50 of the carrying unit shown in FIGS. 3, 18, 22, and 28 described above stores the history information of each parameter, that is, the frequency distribution memory of the history information storage unit 50. 91, history information is stored in the time-varying memory 94, and the coefficient seed data w is stored in the information memory bank 51 and the like. _Ten Thru w _n9 3, 18, 22, and 28, the history information storage unit 50 included in the carrying unit, or the frequency distribution memory 91, Different information may be stored in the detachable portion such as the change memory 94.
[0407]
For example, when the television receiver 1 can receive digital broadcast data including program guide data by EPG (Electronic Program Guide), for example, the system controller 12 can receive the EPG from the received digital broadcast data. Data can be extracted and acquired. The program guide data includes information on each of several days worth of programs, such as broadcast date, channel, title, performer name, genre, outline, and the like.
[0408]
Based on the EPG data extracted from the digital broadcast data, the system controller 12 detects, for example, the genre of the program being viewed or recorded by the user, and records the history information storage unit 50 or the frequency distribution memory 91, Control is performed so that history information, coefficient seed data, and the like stored in a detachable portion such as the change memory 94 are stored separately for each program genre.
[0409]
As a result, the carrying unit, the history information storage unit 50, the frequency distribution memory 91, the aging memory 94, and the like are configured to be detachable for each program genre. And coefficient seed data are stored.
[0410]
Further, in the television receiver 1, a unit including a carrying unit, for example, a unit such as a substrate is configured to be removable, or the entire carrying unit is not configured to be removable, but history information is stored. Since only the unit 50, the frequency distribution memory 91, and the time-change memory 94 are configured to be removable, it is possible to upgrade the function of the television receiver 1 by exchanging corresponding parts. It has become.
[0411]
The detachable component can be used in addition to the upgrade of the television receiver 1. Hereinafter, a specific example of the usage method other than the version upgrade will be described with the removable portion as the carrying unit 15 described with reference to FIG.
[0412]
For example, in a place where a large number of viewers gather such as a movie theater, the history information and coefficient type data stored in the carrying unit 15 are aggregated, and the viewer can determine the image quality of the displayed image based on the data. Coefficient seed data stored in each carrying unit 15 by adjusting and displaying the image quality so that high satisfaction can be obtained as a whole, or by calculating a better adjustment value from a large number of aggregated data Can be updated.
[0413]
FIG. 30 summarizes stored history information and coefficient type data from a plurality of carrying units 15-1 to 15-n, and adjusts the image quality of the displayed image based on the data, It is a block diagram which shows the structure of the image processing apparatus 401 to display.
[0414]
A configuration of the image processing apparatus 401 will be described.
[0415]
The data collection unit 411 collects data from the carrying unit 15-1 to the carrying unit 15-n, accumulates the data, supplies the collected data to the arithmetic processing unit 412, and provides feedback to each user supplied from the arithmetic processing unit 412. The coefficient seed data is output to the carrying unit 15-1 to the carrying unit 15-n and recorded in the information memory bank 51.
[0416]
FIG. 31 is a block diagram showing a more detailed configuration of the data collection unit 411.
[0417]
The data reading units 421-1 to 421-n read history information and coefficient type data stored in the carrying units 15-1 to 15-n. The data writing units 422-1 to 422-n write the history information and coefficient type data read by the data reading units 421-1 to 421-n to the storage unit 423.
[0418]
The accumulation unit 423 accumulates the written information and outputs it to the arithmetic processing unit 412 via the input / output interface 424 at a predetermined timing. At this time, the information stored in the storage unit 423 is, for example, the carrying unit ID uniquely assigned to each of the carrying units 15-1 to 15-n, or the user uniquely assigned to the user who owns them. You may make it manage by ID etc. FIG.
[0419]
The input / output interface 424 is an interface that exchanges data between the data collection unit 411 and the arithmetic processing unit 412, and outputs history information and coefficient seed data accumulated in the accumulating unit 423 to the arithmetic processing unit 412. The coefficient type data for update supplied from the arithmetic processing unit 412 is output to the data writing units 425-1 to 425-n.
[0420]
The data writing unit 425-1 to data writing unit 425-n receive input of, for example, coefficient type data for update fed back to each user from the input / output interface 424, and carry unit 15-1 to carrying unit. The data is output to the unit 15-n and recorded in the information memory bank 51.
[0421]
Communication of information between the data reading unit 421-1 to the data reading unit 421-n and the data writing unit 425-1 to the data writing unit 425-n and the carrying unit 15-1 to the carrying unit 15-n is performed by wire. May be performed wirelessly, or may be performed by electrical contact or non-contact.
[0422]
The data reading unit 421-1 to data reading unit 421-n and the data writing unit 425-1 to data writing unit 425-n may not be configured separately, for example, as shown in FIG. In a hall or the like, a chair 431 or the like used by a spectator may be provided as a data reading and writing unit 441 so that the carrying unit 15 can be attached.
[0423]
Furthermore, the data reading unit 421-1 to data reading unit 421-n and the data writing unit 425-1 to data writing unit 425-n of the image processing apparatus 401 are, for example, the Internet 451 as shown in FIG. It may be connected to a network. In this case, for example, similarly to the personal computer 201 described with reference to FIG. 14, the personal computer 201-1 to the personal computer 201-1 capable of executing the processing executed by the carrying unit 15 by software and the Internet 451. Information is exchanged. Further, the carrying unit 15-1 to the carrying unit 15-m are connected to the Internet 451 such as a general personal computer 452, PAD (Personal Digital (Data) Assistants) 453, or a portable phone 454, for example. By connecting to a communicable information device, communication between the image processing apparatus 401 and the carrying unit 15-1 to the carrying unit 15-m becomes possible.
[0424]
In addition to this, the data collection unit 411 can perform arithmetic processing before the information stored in the storage unit 423 is output to the arithmetic processing unit 412 or is fed back to each user. In order to be able to calculate seed data or the like in the data collection unit 411, for example, a selection unit having a function of selecting data and a calculation unit having a function of performing averaging and the like are provided. Also good. When the data collection unit 411 includes a selection unit, a calculation unit, and the like, the storage unit 423 may further store data selected by the selection unit and a calculation result by the calculation unit.
[0425]
Further, the data collection unit 411 may collect information other than history information and coefficient seed data from the carrying units 15-1 to 15-n, accumulate the information, and supply the collected information to the arithmetic processing unit 412.
[0426]
Returning to FIG. 30 again, the image processing apparatus 401 will be described.
[0427]
The arithmetic processing unit 412 receives supply of history information and coefficient seed data from the data collecting unit 411, aggregates the data, and calculates parameters used for image processing such as the most suitable coefficient seed data. In addition to being supplied to the image processing control unit 413, the data is supplied to the data collection unit 411 and fed back to the carrying unit 15-1 to the carrying unit 15-n.
[0428]
In addition, history information and coefficient seed data, which are preference information of images collected from many spectators, that is, an unspecified number of users, are designed for image quality parameters such as new television receivers and various image display devices. In this case, the data is very effective in designing a preferable image quality. Therefore, new coefficient seed data calculated by the arithmetic processing unit 412 or history information and coefficient seed data collected by the data collecting unit 411 can be output to the outside for secondary use. May be.
[0429]
FIG. 34 is a block diagram showing a more detailed configuration of the arithmetic processing unit 412.
[0430]
The input / output interface 471 is an interface for exchanging information with the outside such as the data collection unit 411. The input / output interface 471 receives supply of history information and coefficient seed data from the data collection unit 411, and is generated by the coefficient seed data generation device 121. The new coefficient seed data is output to the data collection unit 411 or a device external to the image processing device 401. The aggregation calculation unit 472 performs statistical processing such as average calculation and representative value calculation on the plurality of history information and coefficient seed data, for example. The coefficient seed data generation device 121 is the same as described above with reference to FIG.
[0431]
Here, the parameters used for the image processing are described as being generated using the coefficient seed data generation apparatus 121, but the parameters used for the image processing are generated using other methods. It may be.
[0432]
Next, processing of the arithmetic processing unit 412 will be described.
[0433]
The aggregation calculation unit 472 outputs the result of statistical processing performed on the plurality of history information and coefficient seed data supplied via the input / output interface 471 to the coefficient seed data generation apparatus 121. The coefficient seed data generation device 121 calculates new coefficient seed data using the value supplied from the total calculation unit 472, outputs the new coefficient seed data to the image processing control unit 413, and collects data via the input / output interface 471. In addition to the output to the unit 411, the output to a device external to the image processing device 401 for secondary use for creating a parameter of a new image processing device, if necessary.
[0434]
Here, the arithmetic processing unit 412 is described as having the coefficient seed data generation device 121 described with reference to FIG. 10 and generating new coefficient seed data using a plurality of history information and coefficient seed data. However, if the information supplied to the arithmetic processing unit 412 is information that can be used as a parameter for determining the image quality, for example, spatial resolution, temporal resolution, image sharpness, screen brightness, or contrast. For example, it may be other than history information and coefficient seed data.
[0435]
In addition, the arithmetic processing unit 412 may provide information other than new coefficient seed data, for example, spatial resolution, time resolution, image sharpness, screen brightness, even if the supplied information is, for example, history information or coefficient seed data. Alternatively, parameters such as contrast may be calculated.
[0436]
That is, the arithmetic processing unit 412 receives input of information representing the preferences of the images of a plurality of users, such as history information and coefficient seed data, collected by the data collecting unit 411 from the plurality of carrying units 15. Based on this information, a parameter for displaying an image considered to be the best for a plurality of users is calculated.
[0437]
Returning to FIG. 30 again, the image processing apparatus 401 will be described.
[0438]
The image processing control unit 413 receives input of parameters for determining image quality, such as coefficient seed data, from the arithmetic processing unit 412, and performs image processing (for example, spatial resolution and temporal resolution) executed by the image processing unit 414. Control signal, sharpness setting, screen brightness setting, contrast setting, and the like are generated and output to the image processing unit 414.
[0439]
The image processing unit 414 acquires content data before image processing from the content data storage unit 415, and has a plurality of carrying units 15 for the content data based on the control signal supplied from the image processing control unit 413. Executes image processing (for example, setting of spatial and temporal resolution, setting of sharpness, setting of screen brightness, or setting of contrast, etc.) to display an image that seems to be the best for the user .
[0440]
The content data storage unit 415 stores content data before image processing, such as image data of a movie with a quality that is shown in a conventional movie theater, for example. Here, the content data storage unit 415 is described as being provided inside the image processing apparatus 401, but the content data storage unit 415 may be provided outside the image processing apparatus 401. The image processing unit 414 may acquire the content data via a communication unit such as a network without providing the content data storage unit 415.
[0441]
The display control unit 416 controls display of image-processed image data supplied from the image processing unit 414 on a screen (not shown).
[0442]
In addition, it is considered that the user's preference for the image is biased depending on the content category, for example. For example, for a love story, a user who thinks that an image with low contrast and sharpness and a light impression is suitable, but for action movies, an image with high contrast and sharpness and a clear impression is suitable. The case where it thinks that there may be considered.
[0443]
Therefore, as described above, information indicating the preference of the images of a plurality of users, such as history information and coefficient seed data, recorded in the carrying unit 15-1 to the carrying unit 15-n, is EPG or the like. Based on the content category, the image processing unit 401 stores the preference information corresponding to the content category processed by the image processing unit 414 in the carrying unit 15-1 to the carrying unit 15-. n, and image processing is performed using the information. This makes it possible to generate an image that matches the user's preference.
[0444]
Also, for example, in a so-called cinema complex having many movie screening facilities, when the same movie is screened at a plurality of venues, the image quality of the movies screened at each venue should be different in advance, On the basis of each user's preference information recorded in 15, it may be possible to guide the venue to be screened with an image quality that best matches the corresponding user's preference.
[0445]
FIG. 35 is a diagram showing the appearance of the screening venue guide device 501. As shown in FIG. The screening venue guide device 501 is installed, for example, at the entrance of a cinema complex.
[0446]
The user inserts the carrying unit 15 into the carrying unit insertion unit 512 of the screening venue guide device 501. In FIG. 35, the carrying unit 15 is illustrated as being inserted into the screening venue guide device 501, but the screening venue guide device 501 may be able to communicate with the carrying unit 15 in a non-contact manner.
[0447]
The screening venue guide device 501 reads information indicating the preference of the image of the user who owns the carrying section 15 such as history information and coefficient seed data stored in the carrying section 15, for example. Among these, the venue that best matches the image preference of the corresponding user is determined, and the determination result is displayed on the display unit 511.
[0448]
FIG. 36 is a block diagram showing the configuration of the screening venue guide device 501. As shown in FIG.
[0449]
The data reading unit 521 reads information representing the user's image preference such as history information and coefficient seed data stored in the carrying unit 15 inserted in the carrying unit insertion unit 512. The data writing unit 522 writes information indicating the user's image preference read by the data reading unit 521 in the storage unit 523. The storage unit 523 stores the written information, and outputs the stored preference information to an external device via the input / output interface 524 as necessary. Again, since the history information and coefficient seed data collected from many spectators are very effective data in the design of image quality parameters such as new television receivers and various image display devices, for example, For secondary use.
[0450]
Further, the input / output interface 524 receives an input of information for updating coefficient type data and the like recorded in the carrying unit 15 inserted in the carrying unit insertion unit 512 as necessary, and receives a data writing unit 525. Output to. The data writing unit 525 outputs the input information to the carrying unit 15 inserted in the carrying unit insertion unit 512, and updates the coefficient seed data and the like stored in the information memory bank 51.
[0451]
The data read unit 521 further supplies the read user image preference information to the determination unit 526. The exhibition hall data storage unit 528 receives information on the feature amount of the image to be shown for each exhibition hall (for example, setting of spatial resolution and temporal resolution, setting of sharpness, screen brightness, etc.) via the input / output interface 524. The setting or contrast setting is received and stored. The determination unit 526 refers to the information about the feature amount of the image to be displayed for each screening venue stored in the screening venue data storage unit 528, and uses the user image preference information supplied from the data reading unit 521. The best matching venue is determined, and the determination result is output to the display control unit 527.
[0452]
Based on the determination result supplied from the determination unit 526, the display control unit 527 displays text to be displayed on the display unit 511 in order to notify the user of the venue, for example, “Please enter the screen 3”, or Image data is generated and displayed on the display unit 511.
[0453]
Here, based on the determination result supplied from the determination unit 526, for example, a message for notifying the user of the screening venue such as “Please enter the screen 3” is displayed on the display unit 511. However, a message for notifying the user of the screening venue may be output as audio, for example, or printed on a paper medium or the like. In addition, for example, the determination result supplied from the determination unit 526 may be transmitted and displayed on an information processing apparatus owned by the user, such as a mobile phone.
[0454]
Here too, for example, information representing the preferences of the images of a plurality of users, such as history information and coefficient seed data, recorded in the carrying unit 15, is distinguished by the category of the content based on the EPG or the like. In such a case, the determination unit 526 can determine the screening venue that most closely matches the preference information of the user's image based on the preference information corresponding to the category of the content to be screened.
[0455]
Through such processing, it is possible not only to provide the user with content subjected to image processing that matches each user's image preferences as much as possible, but also to new television receivers, various image display devices, etc. It is possible to efficiently collect very effective data in designing image quality parameters.
[0456]
35 and 36, the carrying unit 15 has been described as being inserted into the carrying unit insertion unit 512 of the screening venue guide device 501, but the carrying unit 15 and the screening venue guide device 501 include, for example, Information may be exchanged via a network such as the Internet. In this case, the screening venue guide device 501 is provided with a communication processing unit (not shown) that can communicate via a network such as the Internet, instead of the carrying unit insertion unit 512.
[0457]
In this case, the user provides information about the user's image preference, such as history information and coefficient seed data, recorded in advance in the carrying unit 15, along with the user ID and the like, via the Internet. Transmit to device 501. The screening venue guide device 501 determines a screening venue that matches the corresponding user's preference based on the supplied information indicating the preference of the user's image. The screening venue guide device 501 may immediately notify the determination result of the screening venue to the user via the Internet, or temporarily store the determination result of the screening venue in association with the user ID. In addition, when a user visits a screening venue such as a cinema complex, the user ID may be input and displayed on the display unit 511.
[0458]
Further, when information is exchanged between the carrying unit 15 and the screening venue guide device 501 via, for example, the Internet, the coefficient seed data input from the input / output interface 524 is updated. The information is output by the data writing unit 525 to the carrying unit 15 via the Internet, and the coefficient seed data stored in the information memory bank 51 is updated.
[0459]
In the processing described with reference to FIGS. 30 to 36, a movie theater is assumed as a place where a large number of users gather, and the provided content is assumed to be a movie. However, the present invention is only used in a movie theater. The present invention is not limited to this, and can be applied to any place where a large number of users gather, such as theme parks, and means for efficiently collecting user preference information such as distribution of content data via the Internet. .
[0460]
As described above, for example, the carrying unit 15 described with reference to FIG. 3 including the portion in which the user's image preference information accumulated by adjusting the image quality is recorded on the television receiver. The user can use the user's image quality preference information by removing the device 1 and making it portable.
[0461]
The user's image quality preference information is not only used in the upgrade of the television receiver 1 but also, for example, history information stored in the carrying unit 15 or the like in a place where a large number of viewers gather such as a movie theater. And the coefficient seed data are aggregated, and based on the data, the image quality of the displayed image is adjusted to an image quality that allows the viewer to obtain a high overall satisfaction, or displayed. It is possible to calculate a better adjustment value from a large number of data and update the coefficient seed data stored in each carrying unit 15.
[0462]
Also, for example, in a so-called cinema complex having many movie screening facilities, when the same movie is screened at a plurality of venues, the image quality of the movies screened at each venue should be different in advance, Based on the preference information of each user recorded in 15 or the like, it is possible to guide the venue to be screened with an image quality that best matches the preference of the corresponding user.
[0463]
The user's image quality preference information is very effective data for image quality parameter design such as a new television receiver and various image display devices. For example, in a movie theater or a theme park where many users gather. By applying the present invention, or by applying the present invention when information can be exchanged with an unspecified number of users, such as information communication via the Internet, it is possible to collect efficiently.
[0464]
The series of processes described above can also be executed by software. The software is a computer in which the program constituting the software is incorporated in dedicated hardware, or various functions can be executed by installing various programs, for example, a general-purpose personal computer For example, it is installed from a recording medium.
[0465]
As shown in FIG. 1 or FIG. 14, this recording medium is distributed to provide a program to a user separately from a computer. The recording medium is a magnetic disk 21 or 231 (a flexible disk is recorded). Optical disk 22 or 232 (including CD-ROM (Compact Disk-Read Only Memory), DVD (Digital Versatile Disk)), magneto-optical disk 23, or 233 (MD (Mini-Disk) (trademark)) Or a package medium composed of the semiconductor memory 24 or 234.
[0466]
Further, in the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in chronological order according to the described order, but may be performed in parallel or It also includes processes that are executed individually.
[0467]
【The invention's effect】
According to the first aspect of the present invention, content data can be processed.
Further, according to the first aspect of the present invention, content data provided to a plurality of users can be processed based on additional information stored in information processing apparatuses possessed by the plurality of users.
[0468]
According to the second aspect of the present invention, it is possible to guide the display location of the content that matches the user's preference to the user.
Further, according to the second aspect of the present invention, it is possible to display the display location of the content that matches the user's preference based on the additional information stored in the information processing apparatus possessed by a plurality of users.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration of a television receiver.
FIG. 2 is a diagram illustrating a pixel positional relationship between a 525i signal and a 1050i signal.
FIG. 3 is a block diagram showing a configuration of a carrying unit 15 in FIG.
FIG. 4 is a diagram illustrating a phase shift (odd field) from a center prediction tap of four pixels in a unit pixel block of an HD signal (1050i signal).
FIG. 5 is a diagram illustrating a phase shift (even field) from a center prediction tap of four pixels in a unit pixel block of an HD signal (1050i signal).
FIG. 6 is a block diagram illustrating a configuration of a history information storage unit.
FIG. 7 is a diagram illustrating an example of a user interface for adjusting image quality.
8 is an enlarged view of the adjustment screen of FIG.
FIG. 9 is a diagram illustrating an example of a method for generating coefficient seed data.
FIG. 10 is a block diagram illustrating a configuration example of a coefficient seed data generation apparatus.
FIG. 11 is a diagram for explaining a change in a resolution adjustment range.
FIG. 12 is a diagram illustrating another example of a coefficient seed data generation method.
FIG. 13 is a block diagram illustrating another configuration example of the coefficient seed data generation apparatus.
FIG. 14 is a block diagram illustrating a configuration of a personal computer.
FIG. 15 is a flowchart for explaining image signal processing 1;
FIG. 16 is a flowchart for explaining coefficient seed data generation processing 1;
FIG. 17 is a flowchart for explaining coefficient seed data generation processing 2;
FIG. 18 is a block diagram showing a configuration of a carrying unit as another embodiment.
FIG. 19 is a block diagram illustrating a configuration example of a coefficient data generation apparatus.
FIG. 20 is a flowchart illustrating image signal processing 2;
FIG. 21 is a flowchart illustrating coefficient data generation processing.
FIG. 22 is a block diagram showing a configuration of a carrying unit as still another embodiment.
FIG. 23 is a diagram for explaining a change of a prediction tap.
FIG. 24 is a diagram for explaining a change of a prediction tap.
FIG. 25 is a diagram for explaining a change of a prediction tap.
FIG. 26 is a block diagram illustrating a configuration of a coefficient seed data generation device as another embodiment.
FIG. 27 is a diagram for describing a user adjustment range.
FIG. 28 is a block diagram showing a configuration of a carrying unit as still another embodiment.
FIG. 29 is a block diagram showing a configuration of a coefficient data generation apparatus as another embodiment.
FIG. 30 is a block diagram illustrating a configuration of an image processing apparatus.
31 is a block diagram showing a configuration of a data collection unit in FIG. 30. FIG.
FIG. 32 is a diagram illustrating an example of a data collection method.
FIG. 33 is a diagram illustrating an example of a data collection method.
34 is a block diagram showing a configuration of an arithmetic processing unit in FIG. 30. FIG.
FIG. 35 is an external configuration diagram of a screening venue guide device.
36 is a block diagram showing a configuration of the screening venue guide device of FIG. 35. FIG.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Television receiver, 12 System controller, 15 Carrying part, 41 1st tap selection part, 42 2nd tap selection part, 43 3rd tap selection part, 44 Space class detection part, 45 Motion class detection part, 46 class synthesis unit, 47 estimation prediction calculation unit, 48 normalization calculation unit, 49 post-processing unit, 50 history information storage unit, 51 information memory bank, 52 coefficient generation unit, 53 coefficient memory, 54 normalization coefficient calculation unit, 55 normalization Coefficient memory, 91 frequency distribution memory, 92 counter, 93 averaging unit, 94 time-varying memory, 121 coefficient seed data generation device, 141, 142 input terminal, 143 SD signal generation unit, 144 first tap selection unit, 145 Second tap selection unit, 146 third tap selection unit, 147 space class detection unit, 148 motion class Output unit, 149 class synthesis unit, 150 normal equation generation unit, 151 coefficient seed data determination unit, 152 coefficient seed memory, 401 image processing device, 411 data collection unit, 412 arithmetic processing unit, 413 image processing control unit, 414 image processing Unit, 145 content data storage unit, 416 display control unit, 423 storage unit, 451 internet, 472 total calculation unit, 501 screening venue guide device, 523 storage unit, 526 determination unit, 527 display control unit

Claims (27)

In the information processing apparatus that processes the first content data,
Processing means for processing the first content data;
Collecting means for collecting additional information for controlling the processing means;
Storage means for storing information related to the additional information collected by the collection means;
Control means for controlling the processing means based on information related to the additional information stored by the storage means, and
The collecting means collects the additional information stored in another information processing apparatus held by a plurality of users,
The information processing apparatus, wherein the first content data processed by the processing means is content data provided to a plurality of the users. Computation processing means for computing information related to the additional information stored by the storage means is further provided,
The information processing apparatus according to claim 1, wherein the control unit controls the processing unit based on information related to the additional information that has been arithmetically processed by the arithmetic processing unit. The information processing apparatus according to claim 2, wherein the storage unit further stores a calculation processing result by the calculation processing unit. The information processing apparatus according to claim 1, further comprising: a display control unit that controls display of the first content data processed by the processing unit. The information processing apparatus according to claim 1, wherein the additional information includes information related to image quality preference of second content data viewed by the user in the past. The additional information further includes category information of the second content data that the user was referring to when the information about the preference was collected,
The control means performs the processing based on the additional information that matches the category of the first content data provided to a plurality of users among the information related to the additional information stored by the storage means. The information processing apparatus according to claim 5, wherein the information processing apparatus is controlled. The additional information stored in the other information processing apparatus held by the plurality of users is the image quality adjustment performed by the user with respect to the image quality of the second content data viewed by each of the users in the past. The information processing apparatus according to claim 1, further comprising: information related to the adjustment value. The information processing apparatus according to claim 2, further comprising: an output unit that outputs a result of the arithmetic processing performed by the arithmetic processing unit to each of the other information processing apparatuses held by the plurality of users. A mounting means for mounting the other information processing apparatus held by the plurality of users and exchanging information with the other information processing apparatus,
The information processing apparatus according to claim 1, wherein the collection unit collects the additional information stored in the other information processing apparatus mounted on the mounting unit. Arithmetic processing means for arithmetically processing information related to the additional information stored by the storage means;
An output means for outputting the result of the arithmetic processing by the arithmetic processing means to each of the other information processing devices held by a plurality of users, and
The information processing apparatus according to claim 9 , wherein the output unit outputs a calculation processing result by the calculation processing unit to the other information processing apparatus mounted on the mounting unit. It further comprises information exchange means for exchanging information via a predetermined network,
The information processing apparatus according to claim 1, wherein the collection unit collects the additional information stored in the other information processing apparatus via the predetermined network by the information exchange unit. . Arithmetic processing means for arithmetically processing information related to the additional information stored by the storage means;
An output means for outputting the result of the arithmetic processing by the arithmetic processing means to each of the other information processing devices held by a plurality of users, and
The information processing unit according to claim 11 , wherein the output unit outputs the calculation processing result by the calculation processing unit to the other information processing apparatus via the predetermined network by the information transfer unit. apparatus. In an information processing method of an information processing apparatus that processes content data,
Processing steps for processing the content data;
A collecting step of collecting additional information for controlling the processing of the processing step;
A storage control step for controlling storage of information related to the additional information collected by the processing of the collection step;
A control step for controlling the processing of the processing step based on information related to the additional information whose storage is controlled by the processing of the storage control step, and
In the process of the collecting step, the additional information stored in another information processing apparatus held by a plurality of users is collected,
The content data processed by the processing in the processing step is content data provided to a plurality of the users. A program for an information processing apparatus that processes content data,
Processing steps for processing the content data;
A collecting step of collecting additional information for controlling the processing of the processing step;
A storage control step for controlling storage of information related to the additional information collected by the processing of the collection step;
A control step for controlling the processing of the processing step based on information related to the additional information whose storage is controlled by the processing of the storage control step, and
In the process of the collecting step, the additional information stored in another information processing apparatus held by a plurality of users is collected,
The content data processed by the processing of the processing step is content data provided to a plurality of the users. A recording medium on which a computer-readable program is recorded. A program that can be executed by a computer that controls an information processing apparatus that processes content data,
Processing steps for processing the content data;
A collecting step of collecting additional information for controlling the processing of the processing step;
A storage control step for controlling storage of information related to the additional information collected by the processing of the collection step;
A control step for controlling the processing of the processing step based on information related to the additional information whose storage is controlled by the processing of the storage control step, and
In the process of the collecting step, the additional information stored in another information processing apparatus held by a plurality of users is collected,
The content data processed by the processing of the processing step is content data provided to a plurality of the users. Among a plurality of display locations of the same first content data,
In an information processing apparatus that executes processing for guiding a user to the appropriate display location,
First storage means for storing information relating to each display location of the same first content data displayed with a plurality of image quality;
A collecting means for collecting additional information stored in another information processing apparatus held by the plurality of users;
Corresponding among the first content data displayed with a plurality of image quality based on the information on the display location stored by the first storage unit and the additional information collected by the collection unit. Determining means for determining the display location where the first content data is displayed with an image quality that matches a user's preference;
Display means for displaying a determination result by the determination means,
The information processing apparatus, wherein the additional information includes information related to a preference of image quality of content data viewed by the user. The information processing apparatus according to claim 16 , further comprising: a second storage unit that stores the additional information collected by the collection unit. The additional information further includes associated with category information of the second content data that the user was referring to when the information about the preference was collected,
The determination means has the image quality that matches the preference of the corresponding user based on the additional information that matches the category of the first content data among the additional information collected by the collecting means. The information processing apparatus according to claim 16 , wherein the display location where content data is displayed is determined. The additional information stored in the other information processing apparatus held by the plurality of users is the image quality performed by the user with respect to the display image quality of the second content data referred to by each of the users in the past. the information processing apparatus according to請Motomeko 16, characterized in that it includes information about the adjustment value of the adjustment. Obtaining means for obtaining information for updating the additional information stored in the other information processing apparatus held by the user;
The information processing apparatus according to claim 16 , further comprising: an output unit that outputs the information acquired by the acquisition unit to the other information processing apparatus held by the user. The apparatus further comprises an attaching means for attaching / receiving information by attaching the other information processing apparatus held by the user,
The information processing apparatus according to claim 16 , wherein the collection unit collects the additional information stored in the other information processing apparatus mounted on the mounting unit. Obtaining means for obtaining information for updating the additional information stored in the other information processing apparatus held by the user;
An output means for outputting the information acquired by the acquisition means to the other information processing apparatus held by the user;
The information processing apparatus according to claim 21 , wherein the output means outputs the information acquired by the acquisition means to the other information processing apparatus mounted on the mounting means. It further comprises information exchange means for exchanging information via a predetermined network,
The information processing apparatus according to claim 16 , wherein the collection unit collects the additional information stored in the other information processing apparatus via the predetermined network by the information exchange unit. . Obtaining means for obtaining information for updating the additional information stored in the other information processing apparatus held by the user;
An output means for outputting the information acquired by the acquisition means to the other information processing apparatus held by the user;
24. The information according to claim 23 , wherein the output unit outputs the information acquired by the acquisition unit to the other information processing apparatus via the predetermined network by the information transfer unit. Processing equipment. In an information processing method of an information processing apparatus that executes processing for guiding an appropriate display location to a user among a plurality of display locations of the same content data,
A storage control step for controlling storage of information relating to each display location of the same content data displayed in a plurality of image quality;
A collecting step of collecting additional information stored in another information processing apparatus held by the plurality of users;
Corresponding among the content data displayed with a plurality of image quality based on the information on the display location whose storage is controlled by the processing of the storage control step and the additional information collected by the processing of the collecting step A determination step of determining the display location where the content data is displayed with an image quality that matches a user's preference;
A display step for displaying a determination result obtained by the determination step;
The information processing method, wherein the additional information includes information related to image quality preference of content data viewed by the user. A program for an information processing apparatus that executes processing for guiding a user to an appropriate display location among a plurality of display locations of the same content data,
A storage control step for controlling storage of information relating to each display location of the same content data displayed in a plurality of image quality;
A collecting step of collecting additional information stored in another information processing apparatus held by the plurality of users;
Corresponding among the content data displayed in a plurality of image quality based on the information on the display location whose storage is controlled by the process of the storage control step and the additional information collected by the process of the collecting step A determination step of determining the display location where the content data is displayed with an image quality that matches a user's preference;
A display step for displaying a determination result obtained by the determination step;
The additional information includes information related to image quality preferences of content data viewed by the user. A recording medium on which a computer-readable program is recorded. A program that can be executed by a computer that controls an information processing apparatus that executes processing for guiding a user to an appropriate display location among a plurality of display locations of the same content data,
A storage control step for controlling storage of information relating to each display location of the same content data displayed in a plurality of image quality;
A collecting step of collecting additional information stored in another information processing apparatus held by the plurality of users;
Corresponding among the content data displayed with a plurality of image quality based on the information on the display location whose storage is controlled by the processing of the storage control step and the additional information collected by the processing of the collecting step A determination step of determining the display location where the content data is displayed with an image quality that matches a user's preference;
A display step for displaying a determination result obtained by the determination step;
The additional information includes information related to image quality preferences of content data viewed by the user.

Images