JP4103070B2 - Signal processing system and method, signal processing apparatus and method, recording medium, and program - Google Patents
Signal processing system and method, signal processing apparatus and method, recording medium, and program Download PDFInfo
- Publication number
- JP4103070B2 JP4103070B2 JP2002143039A JP2002143039A JP4103070B2 JP 4103070 B2 JP4103070 B2 JP 4103070B2 JP 2002143039 A JP2002143039 A JP 2002143039A JP 2002143039 A JP2002143039 A JP 2002143039A JP 4103070 B2 JP4103070 B2 JP 4103070B2
- Authority
- JP
- Japan
- Prior art keywords
- signal processing
- information
- signal
- processing device
- coefficient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【0001】
【発明の属する技術分野】
本発明は、信号処理システムおよび方法、信号処理装置および方法、記録媒体、並びにプログラムに関し、特に、信号処理の内容を変更する情報がバージョンアップされた場合、そのバージョンアップされた情報を秘匿性を確保しつつ提供することができるようにした信号処理システムおよび方法、信号処理装置および方法、記録媒体、並びにプログラムに関する。
【0002】
【従来の技術】
入力した信号に、所定の信号処理を施して出力する信号処理装置に対して基板を装着し、その信号処理の内容を変更するための情報を、基板から有線で信号処理装置に供給するようにすることが知られている。この場合、例えば、信号処理装置のバスに基板が接続されることで、情報が基板から信号処理装置にバスを介して供給される。
【0003】
【発明が解決しようとする課題】
そのような情報はバージョンアップされることがあるが、その場合、基板は、バスの制約により、バージョンアップされた情報を信号処理装置に提供することができなくなることがあるという第1の課題があった。
【0004】
また、基板から信号処理装置に対して情報が提供されるとき、情報が漏洩する恐れがあるという第2の課題があった。
【0005】
本発明は、このような状況に鑑みてなされたものであり、信号処理の内容を変更する情報がバージョンアップされた場合、そのバージョンアップされた情報を秘匿性を確保しつつ提供することができるようにするものである。
【0006】
【課題を解決するための手段】
本発明の信号処理システムは、入力した信号に、所定の信号処理を施して出力する第1の信号処理装置と、第1の信号処理装置に信号を供給する第2の信号処理装置とからなる信号処理システムであり、第2の信号処理装置は、第1の信号処理装置の信号処理で利用する第1の情報を表す信号を、第1の信号処理装置に有線で供給する有線供給手段と、第1の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、第1の信号処理装置に無線で供給する無線供給手段とを備え、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0007】
第2の信号処理装置は、第1の信号処理装置に対して装着される基板として形成されるようにすることができる。
【0008】
第2の情報は、第1の情報に基づく信号処理の機能を向上する情報であるようにすることができる。
【0011】
第2の情報は、第1の情報に基づく信号処理の機能を追加する情報であるようにすることができる。
【0012】
第1の情報は、クラス分類適応処理で利用する第1の機能に対応する係数であり、第2の情報は、クラス分類適応処理で利用する第1の機能とは異なる第2の機能に対応する係数であるようにすることができる。
【0015】
第2の信号処理装置の有線供給手段は、第1の信号処理装置と物理的および電気的に接続する第1のコネクタを有するようにすることができる。
【0016】
第2の信号処理装置は、第1の信号処理装置に対して装着される基板として形成され、基板はパッケージに収納され、第1のコネクタは、パッケージに配設されるようにすることができる。
【0017】
第1の信号処理装置は、第1のコネクタと接続される第2のコネクタを有し、第2のコネクタとして、複数種類の第1のコネクタのそれぞれに対応する複数種類のコネクタが設けられているようにすることができる。
【0018】
第2のコネクタは、第1の信号処理装置に対して着脱可能であり、所定の規格で規定される種類のコネクタを含むようにすることができる。
【0019】
第1の信号処理装置は、テレビジョン受像機であり、第2の信号処理装置の無線供給手段は、テレビジョン受像機に対して、画像または音声信号を無線でさらに供給するようにすることができる。
【0020】
本発明の信号処理システムの信号処理方法は、第1の信号処理装置が、入力した信号に、所定の信号処理を施して出力し、第2の信号処理装置が、第1の信号処理装置の信号処理で利用する第1の情報を表す信号を、第1の信号処理装置に有線で供給し、第1の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、第1の信号処理装置に無線で供給し、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0021】
本発明の信号処理システムおよび方法においては、第1の信号処理装置により、入力された信号が、所定の信号処理が施されて出力される。第2の信号処理装置により、第1の信号処理装置の信号処理で利用する第1の情報を表す信号が、第1の信号処理装置に有線で供給されるとともに、第1の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号が、第1の信号処理装置に無線で供給される。信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数である。
【0022】
第1の信号処理装置は、信号を有線および無線にて受信する受信専用装置であっても構わないし、信号を有線または無線にて送信することも可能な送受信装置であってもよい。
【0023】
また、第2の信号処理装置は、信号を有線および無線にて送信する送信専用装置であっても構わないし、信号を有線または無線にて受信することも可能な送受信装置であってもよい。
【0024】
さらに、第1および第2の情報は、第2の信号処理装置により予め保持されている情報でも構わないし、他の装置より第2の信号処理装置に供給される情報でも構わない。
【0025】
本発明の第1の信号処理装置は、入力した信号に、所定の信号処理を施して出力する信号処理装置であり、他の信号処理装置により有線で送信された、信号処理で利用する第1の情報を表す信号を有線で受信する有線受信手段と、他の信号処理装置により無線で送信された、信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信手段とを備え、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0026】
第2の情報は、第1の情報に基づく信号処理の機能を向上する情報であるようにすることができる。
【0029】
第2の情報は、第1の情報に基づく信号処理の機能を追加する情報であるようにすることができる。
【0030】
第1の情報は、クラス分類適応処理で利用する第1の機能に対応する係数であり、第2の情報は、クラス分類適応処理で利用する第1の機能とは異なる第2の機能に対応する係数であるようにすることができる。
【0033】
有線受信手段は、他の信号処理装置が有する第1のコネクタと、物理的および電気的に接続する第2のコネクタを有し、第2のコネクタが他の信号処理装置の第1のコネクタに接続されている場合、他の信号処理装置により送信される第1の情報を、第1および第2のコネクタを介して受信するようにすることができる。
【0034】
第2のコネクタとして、複数種類の第1のコネクタのそれぞれに対応する複数種類のコネクタが設けられているようにすることができる。
【0035】
第2のコネクタは、信号処理装置に対して着脱可能であり、所定の規格で規定される種類のコネクタを含むようにすることができる。
【0036】
第1の信号処理装置は、テレビジョン受像機であり、無線受信手段は、他の信号処理装置により無線で送信された画像または音声信号を無線でさらに受信するようにすることができる。
【0037】
本発明の第1の信号処理装置の信号処理方法は、他の信号処理装置により有線で送信された、信号処理で利用する第1の情報を表す信号を有線で受信する有線受信ステップと、他の信号処理装置により無線で送信された、信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信ステップとを含み、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0038】
本発明の第1の記録媒体のプログラムは、他の信号処理装置により有線で送信された、信号処理で利用する第1の情報を表す信号を有線で受信する有線受信ステップと、他の信号処理装置により無線で送信された、信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信ステップとを含み、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0039】
本発明の第1のプログラムは、他の信号処理装置により有線で送信された、信号処理で利用する第1の情報を表す信号を有線で受信する有線受信ステップと、他の信号処理装置により無線で送信された、信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信ステップとをコンピュータに実行させ、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0040】
本発明の第1の信号処理装置および方法、第1の記録媒体、並びに、第1のプログラムにおいては、他の信号処理装置により有線で送信された、信号処理で利用する第1の情報を表す信号が有線で受信されるとともに、他の信号処理装置により無線で送信された、信号処理の内容を変更するための第2の情報を表す信号が無線で受信される。そして、受信された第1および第2の情報を利用して、信号処理が行われる。信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数である。
【0041】
第1の信号処理装置は、信号を有線および無線にて受信する受信専用装置であっても構わないし、信号を有線または無線にて送信することも可能な送受信装置であってもよい。
【0042】
本発明の第2の信号処理装置は、入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、他の信号処理装置の信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給手段と、他の信号処理装置に対して、他の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、無線で供給する無線供給手段とを備え、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0043】
信号処理装置は、他の信号処理装置に対して装着させる基板として形成されるようにすることができる。
【0044】
第2の情報は、第1の情報に基づく信号処理の機能を向上する情報であるようにすることができる。
【0047】
第2の情報は、第1の情報に基づく信号処理の機能を追加する情報であるようにすることができる。
【0048】
第1の情報は、クラス分類適応処理で利用する第1の機能に対応する係数であり、第2の情報は、クラス分類適応処理で利用する第1の機能とは異なる第2の機能に対応する係数であるようにすることができる。
【0051】
有線供給手段は、他の信号処理装置と物理的および電気的に接続するコネクタを有するようにすることができる。
【0052】
信号処理装置は、他の信号処理装置に対して装着させる基板として形成され、基板はパッケージに収納され、コネクタは、パッケージに配設されるようにすることができる。
【0053】
他の信号処理装置は、テレビジョン受像機であり、無線供給手段は、テレビジョン受像機に対して、画像または音声信号を無線でさらに供給するようにすることができる。
【0054】
本発明の第2の信号処理装置の信号処理方法は、入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、他の信号処理装置の信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、他の信号処理装置に対して、他の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、他の信号処理装置に無線で供給する無線供給ステップとを含み、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0055】
本発明の第2の記録媒体のプログラムは、入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、他の信号処理装置の信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、他の信号処理装置に対して、他の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、他の信号処理装置に無線で供給する無線供給ステップとを含み、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0056】
本発明の第2のプログラムは、入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、他の信号処理装置の信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、他の信号処理装置に対して、他の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、他の信号処理装置に無線で供給する無線供給ステップとをコンピュータに実行させ、信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数であることを特徴とする。
【0057】
本発明の第2の信号処理装置および方法、第2の記録媒体、並びに、第2のプログラムにおいては、入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、他の信号処理装置の信号処理で利用する第1の情報を表す信号が、有線で供給されるともに、他の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号が、他の信号処理装置に無線で供給される。信号処理は、クラス分類適応処理であり、第1の情報は、クラス分類適応処理で利用する第1の係数であり、第2の情報は、第1の係数とは異なる、クラス分類適応処理で利用する第2の係数である。
【0058】
第2の信号処理装置は、信号を有線および無線にて送信する送信専用装置であっても構わないし、信号を有線または無線にて受信することも可能な送受信装置であってもよい。
【0059】
また、第1および第2の情報は、第2の信号処理装置により予め保持されている情報でも構わないし、他の装置より第2の信号処理装置に供給される情報でも構わない。
【0060】
【発明の実施の形態】
図1は、本発明が適用される信号処理システムの構成例を表している。
【0061】
図1に示されるように、信号処理システム1は、信号処理装置11と、それに装着される基板として構成されるアルゴリズムベイ(商標)12から構成される。
【0062】
信号処理装置11には、入力信号41に、所定の信号処理を施して、出力信号42として出力する信号処理部21、アルゴリズムベイ12より送信された、信号処理部21の信号処理で利用する第1の情報を表す信号を有線43を介して受信する有線インタフェース22、および、アルゴリズムベイ12より送信された、信号処理部21の信号処理の内容を変更するための第2の情報を表す信号を無線44を介して受信する無線インタフェース23が設けられている。
【0063】
アルゴリズムベイ12には、上述した第1の情報を提供する第1の情報提供部33、上述した第2の情報を提供する第2の情報提供部34、信号処理装置11の有線インタフェース22に対して、第1の情報提供部33より提供された第1の情報を表す信号を、有線43を介して送信する有線インタフェース31、および、信号処理装置11の無線インタフェース23に対して、第2の情報提供部34より提供された第2の情報を表す信号を、無線44を介して送信する無線インタフェース32が設けられている。
【0064】
なお、図1の例では、アルゴリズムベイ12が、信号処理装置11に対して装着される基板として形成されているが、このアルゴリズムベイ12を、基板の代わりに、信号処理装置11に対して、第1の情報を有線で供給するとともに、第2の情報を無線で供給することが可能な任意の他の装置として形成してもよい。
【0065】
また、第1の情報提供部33により提供される第1の情報は、それに内蔵するメモリ(図示せず)に予め記憶されている情報としてもよいし、外部(例えば、他の装置(図示せず))から供給される情報としてもよい。
【0066】
同様に、第2の情報提供部34により提供される第2の情報は、それに内蔵するメモリ(図示せず)に予め記憶されている情報としてもよいし、外部(例えば、他の装置(図示せず))から供給される情報としてもよい。
【0067】
次に、信号処理システム1の動作の概略を説明する。
【0068】
信号処理装置11の信号処理部21は、例えば、所定の条件(具体的な条件については、後述する)が満たされた場合、アルゴリズムベイ12の第1の情報提供部33より提供される第1の情報を、有線インタフェース31、有線43、および、有線インタフェース22を介して取得するとともに、第2の情報提供部34より提供される第2の情報を、無線インタフェース32、無線(空間)44、無線インタフェース23を介して取得する。
【0069】
なお、第1および第2の情報の内容や種類は、特に限定されないが、この例においては、例えば、第1の情報は、信号処理部21の信号処理の内容を変更するための基本情報とされ、第2の情報は、第1の情報に基づく信号処理部21の信号処理の機能を向上する情報、または、第1の情報に基づく信号処理部21の信号処理の機能を追加する情報とされる。
【0070】
第1および第2の情報の具体例については、後述する。
【0071】
以上、本発明が適用される信号処理システム1の概略について説明したが、信号処理システム1は、様々な実施形態が実現可能である。
【0072】
そのような様々な実施形態の構成例が、図2、図6、図8、および、図10にそれぞれ示されている。
【0073】
そこで、以下、図2に示される信号処理システム1を、第1実施形態として、図6に示される信号処理システム1を、第2実施形態として、図8に示される信号処理システム1を、第3実施形態として、図10に示される信号処理システム1を、第4実施形態として、それぞれ個別に説明する。
【0074】
(第1実施形態)
図2は、本発明の第1実施形態が適用される信号処理システム1の構成例を表している。
【0075】
第1実施形態においては、信号処理部21は、入力信号41に対して、クラス分類適応処理を施して、出力信号42として出力する。
【0076】
即ち、図2に示されるように、信号処理部21には、クラス分類適応処理、および、信号処理部21の全体の処理を制御する制御部61、入力信号41の特徴を検出し、その特徴に対応するクラスを決定する特徴検出部62、制御部61の制御に基づき、入力信号41と、制御部61より供給される所定のタップ係数とを用いて適応処理を行うことで、出力信号42を生成し、外部に出力する適応処理部63、および、上述した適応処理が行われる場合に、通常利用するタップ係数(図2の例では、解像度創造用係数)を予め記憶しているデフォルト解像度創造用係数記憶部64が設けられている。
【0077】
なお、上述したクラス分類適応処理は、本出願人により先に提案された以下のような処理である。
【0078】
即ち、クラス分類適応処理は、クラス分類処理と適応処理とからなり、クラス分類処理によって、信号(データ)が、その性質に基づいてクラス分けされ、各クラスごとに適応処理が施される。
【0079】
なお、ここでは、クラス分類適応処理の一例として、例えば、画像信号に対する空間解像度を向上するための処理を説明する。具体的には、標準解像度の画像信号(以下、適宜、SD(Standard Definition)画像信号と称する)を、高解像度の画像信号(以下、適宜、HD(High Definition)画像信号と称する)に変換する空間解像度を向上するための適応処理について説明する。
【0080】
この場合、適応処理では、SD画像を構成する画素(以下、適宜、SD画素という)と、所定のタップ係数との線形結合により、そのSD画像の空間解像度を向上させたHD画像の画素の予測値を求めることで、そのSD画像の解像度を向上させた画像が得られる。
【0081】
具体的には、例えば、いま、あるHD画像を教師データとするとともに、そのHD画像の解像度を劣化させたSD画像を生徒データとして、HD画像を構成する画素(以下、適宜、HD画素という)の画素値yの予測値E[y]を、幾つかのSD画素(SD画像を構成する画素)の画素値x1 ,x2 ,・・の集合と、所定のタップ係数w1 ,w2 ,・・の線形結合により規定される線形1次結合モデルにより求めることを考える。この場合、予測値E[y]は、式(1)で表される。
E[y]=w1 x1 +w2 x2 +・・・ (1)
【0082】
式(1)を一般化するために、タップ係数wj の集合でなる行列W、生徒データxijの集合でなる行列X、および予測値E[yi]の集合でなる行列Y’を、式(2)で示されるように定義する。
【0083】
【数1】
【0084】
式(2)に示されるように定義すると、式(3)に示されるような観測方程式が成立する。
XW=Y’ ・・・(3)
【0085】
式(3)において、行列Xの成分xijは、i件目の生徒データの集合(i件目の教師データyi の予測に用いる生徒データの集合)の中のj番目の生徒データを意味し、行列Wの成分wj は、生徒データの集合の中のj番目の生徒データとの積が演算されるタップ係数を表す。また、yi は、i件目の教師データを表し、従って、E[yi ]は、i件目の教師データの予測値を表す。なお、式(1)の左辺におけるyは、行列Yの成分yi のサフィックスiを省略したものであり、また、式(1)の右辺におけるx1 ,x2 ,・・も、行列Xの成分xijのサフィックスiを省略したものである。
【0086】
そして、この観測方程式に最小自乗法を適用して、HD画素の画素値yに近い予測値E[y]を求めることを考える。この場合、教師データとなるHD画素の真の画素値yの集合でなる行列Y、およびHD画素の画素値yに対する予測値E[y]の残差eの集合でなる行列Eを、定義すると、式(4)に示されるようになる。
【0087】
【数2】
【0088】
この式(4)から、式(5)に示されるような残差方程式が成立する。
XW=Y+E ・・・(5)
【0089】
この場合、HD画素の画素値yに近い予測値E[y]を求めるためのタップ係数wj は、式(6)で示される自乗誤差を最小にすることで求めることができる。
【0090】
【数3】
【0091】
従って、上述した自乗誤差をタップ係数wj で微分したものが0になる場合、即ち、式(7)を満たすタップ係数wj が、HD画素の画素値yに近い予測値E[y]を求めるため最適値ということになる。
【0092】
【数4】
【0093】
そこで、まず、上述した式(5)を、タップ係数wj で微分することにより、式(8)が成立する。
【0094】
【数5】
【0095】
上述した式(7)と式(8)より、式(9)が得られる。
【0096】
【数6】
【0097】
さらに、上述した式(5)の残差方程式における生徒データxij、タップ係数wj 、教師データyi 、および残差ei の関係を考慮すると、式(9)から、式(10)に示されるような正規方程式を得ることができる。
【0098】
【数7】
【0099】
なお、式(10)に示される正規方程式は、行列(共分散行列)Aおよびベクトルvを、式(11)に示されるように定義する。
【0100】
【数8】
【0101】
さらに、ベクトルWを、上述した式(2)で示されるように定義すると、式(10)を、式(12)で示されるように表すことができる。
AW=v ・・・(12)
【0102】
上述した式(10)における各正規方程式は、生徒データxijおよび教師データyi のセットを、ある程度の数だけ用意することで、求めるべきタップ係数wj の数Jと同じ数だけたてることができ、従って、上述した式(12)を、ベクトルWについて解くことで(ただし、式(12)を解くには、式(12)における行列Aが正則である必要がある)、最適なタップ係数wj を求めることができる。なお、式(12)を解くにあたっては、例えば、掃き出し法(Gauss-Jordanの消去法)などを用いることが可能である。
【0103】
以上のように、生徒データと教師データを用いて、生徒データとタップ係数から、教師データを予測するのに最適なタップ係数wj を求める学習をしておき、さらに、そのタップ係数wj を用い、上述した式(1)により、教師データyに近い予測値E[y]を求めるのが適応処理である。
【0104】
なお、適応処理は、SD画像には含まれていないが、HD画像に含まれる成分が再現される点で、例えば、単なる補間処理とは異なる。即ち、適応処理では、上述した式(1)だけを見る限りは、いわゆる補間フィルタを用いての補間処理と同一に見えるが、その補間フィルタのタップ係数に相当するタップ係数wが、教師データと生徒データを用いての学習により求められるため、HD画像に含まれる成分を再現することができる。このことから、上述したような適応処理は、いわば画像の創造(解像度創造)作用がある処理と称することができる。
【0105】
従って、以下、上述したような適応処理を、他の適応処理と区別するために、解像度創造適応処理と称する。また、解像度創造適応処理を行う場合に利用するタップ係数(上述したようなタップ係数)を、解像度創造用係数と称する。
【0106】
さらに、上述した例では、適応処理について、空間解像度を向上させる場合を例にして説明したが、適応処理によれば、教師データおよび生徒データを変えて学習を行うことにより得られる種々のタップ係数を用いることで、例えば、S/N(Signal to Noise Ratio) の向上や、ぼけの改善、その他の各種の処理を行うことが可能である。
【0107】
即ち、例えば、S/Nの向上やぼけの改善を、適応処理によって行うには、S/Nの高い画像データを教師データとするとともに、その教師データのS/Nを低下させた画像(あるいは、ぼかした画像)を生徒データとして、タップ係数を求めればよい。
【0108】
このような適応処理を、以下、他の適応処理と区別するために、ノイズ除去適応処理と称する。また、ノイズ除去適応処理で利用するタップ係数を、以下、ノイズ除去用係数と称する。
【0109】
なお、解像度創造適応処理および解像度創造用係数、並びに、ノイズ除去適応処理およびノイズ除去用係数の詳細については、本出願人により先に出願された特願2001−110695号に開示されている。
【0110】
また、例えば、上述したSD信号(例えば、525i信号)を倍率の異なる表示画像を得るためのSD信号に変換する処理を、適応処理によって行うことができる。
【0111】
このような適応処理を、以下、他の適応処理と区別するために、リサイズ適応処理と称する。また、リサイズ適応処理で利用するタップ係数を、以下、リサイズ用係数と称する。
【0112】
なお、リサイズ適応処理およびリサイズ用係数の詳細については、本出願人により先に出願された特願2000−395873号に開示されている。
【0113】
以上、クラス分類適応処理の概略について説明したが、そのようなクラス分類適応処理を行うのが、図2における信号処理部21である。
【0114】
具体的には、特徴検出部62が、上述したクラス分類処理を行い、適応処理部63が、上述した適応処理を行う。
【0115】
即ち、特徴検出部62は、入力信号41からクラス分類を行うために必要な情報(例えば、入力信号41が画像信号である場合、クラスタップ)を抽出し、抽出した情報に基づいて、入力信号41のパターン(特徴)を検出し、検出したパターンに基づいて、入力信号41のクラスを決定し、決定したクラスに対応するクラスコードを適応処理部63に供給する。
【0116】
適応処理部63は、出力信号42を予測生成するために必要な情報(例えば、入力信号41が画像信号である場合、予測タップ)を抽出し、抽出したその情報と、制御部61より供給されるタップ係数とを用いて予測演算を行うことで、出力信号42を生成し、外部に出力する。
【0117】
図2の例では、信号処理部21は、通常、デフォルト解像度創造用係数記憶部64に記憶されている解像度創造用係数(以下、他のタップ係数と区別するために、デフォルト解像度創造用係数と称する)を利用して、解像度創造適応処理を行うようになされているが、上述したように、クラス分類適応処理は、これに限定されるものではない。即ち、信号処理部21は、クラス分類適応処理の機能を向上するために、他のタップ係数を利用して、クラス分類適応処理を行ってもよい。
【0118】
このクラス分類適応処理の機能を向上するためのタップ係数を、信号処理装置11(信号処理部21)に提供するものが、図2に示されるアルゴリズムベイ12である。
【0119】
図2のアルゴリズムベイ12において、第1の情報提供部33には、デフォルト解像度創造用係数とは異なる解像度創造用係数を記憶する解像度創造用係数記憶部72、ノイズ除去用係数を記憶するノイズ除去用係数記憶部73、リサイズ用係数を記憶するリサイズ用係数記憶部74、並びに、解像度創造用係数記憶部72に記憶されている解像度創造用係数、ノイズ除去用係数記憶部73に記憶されているノイズ除去用係数、および、リサイズ用係数記憶部74に記憶されているリサイズ用係数の中から、信号処理装置11(制御部61)により指定された係数を読出し、有線インタフェース31に供給するセレクタ部71が設けられている。
【0120】
即ち、図2の例では、制御部61は、指示信号65に対応する適応処理で利用するタップ係数(解像度創造用係数、ノイズ除去用係数、または、リサイズ用係数)の提供を、有線インタフェース22、有線43、および、有線インタフェース31を介してセレクタ部71に要求する。セレクタ部71は、要求されたタップ係数を、解像度創造用係数記憶部72、ノイズ除去用係数記憶部73、および、リサイズ用係数記憶部74のうちのいずれかから読出し、それを第1の情報として、有線インタフェース31、有線43、および、有線インタフェース22を介して信号処理部21(制御部61)に供給する。
【0121】
適応処理部63の適応処理の機能をさらに向上させるために、第2の情報提供部34は、第1の情報として提供されるタップ係数とは異なるもの(例えば、バージョンアップされたタップ係数等)を、無線インタフェース32、無線44、および、無線インタフェース23を介して信号処理部21(制御部61)に供給する。
【0122】
例えば、いま、第1の情報として提供される解像度創造用係数(解像度創造用係数記憶部72に記憶されるタップ係数)が、以下のようなタップ係数とされる。
【0123】
即ち、例えば、クラスタップとして、図3に示されるように、フレーム内の所定の5つのタップ91を利用し、予測タップとして、図4に示されるように、フレーム内の5つのタップ91に、時間方向に2つのタップ(タップ91のフレームより時間的に前または後のフレームのタップ92−1、および、タップ92−2)を加えた7つのタップを利用し、かつ、クラス数32のクラスを利用するクラス分類適応処理において利用されるタップ係数とされる。
【0124】
この場合、第2の情報として提供される解像度創造用係数(解像度創造用付加係数記憶部76に記憶されるタップ係数)は、例えば、以下のようなタップ係数とすることができる。
【0125】
即ち、例えば、クラスタップおよび予測タップとして、7つのタップ(図4)を利用し、かつ、クラス数128のクラスを利用するクラス分類適応処理において利用されるタップ係数とすることができる。
【0126】
または、第2の情報として提供される解像度創造用係数(解像度創造用付加係数記憶部76に記憶されるタップ係数)は、例えば、以下のようなタップ係数とすることができる。
【0127】
即ち、例えば、クラスタップおよび予測タップとして、7つのタップ(図4)を利用し、かつ、クラス数128のクラスを条件として、クラス分類処理が行われて決定されたクラスに対応するクラスコードの下2桁のビット(図4のタップ92−1,92−2に対応するビット)が「01」、「10」、または「11」のいずれかである場合の、そのクラスコード(クラス)に対応するタップ係数とすることができる。
【0128】
この場合、例えば、図2の特徴検出部62により決定された入力信号41のクラスに対応するクラスコードの下2桁のビットが「00」であるとき、制御部61は、アルゴリズムベイ12の解像度創造用係数記憶部72に記憶されたタップ係数(第1の情報)のうちのそのクラスに対応するものを、有線インタフェース22、有線43、アルゴリズムベイ12の有線インタフェース31、および、セレクタ部71を介して読出し、適応処理部63に供給する。即ち、適応処理部63は、第1の情報に対応するタップ係数(解像度創造用係数)を利用して、入力信号41に解像度創造適応処理を施す。
【0129】
これに対して、例えば、図2の特徴検出部62により決定された入力信号41のクラスに対応するクラスコードの下2桁のビットが「01」、「10」、または、「11」のうちのいずれかであるとき、制御部61は、アルゴリズムベイ12の解像度創造用付加係数記憶部76に記憶されたタップ係数(第2の情報)のうちのそのクラスに対応するものを、無線インタフェース23、無線44、アルゴリズムベイ12の無線インタフェース32、および、セレクタ部75を介して読出し、適応処理部63に供給する。即ち、適応処理部63は、第2の情報に対応するタップ係数(解像度創造用付加係数)を利用して、入力信号41に解像度創造適応処理を施す。
【0130】
なお、以下、図2の第2の情報提供部34により提供されるタップ係数を、第1の情報提供部33により提供される係数と区別するために、付加係数と称する。
【0131】
図2の第2の情報提供部34には、解像度創造用付加係数を記憶する解像度創造用付加係数記憶部76、ノイズ除去用付加係数を記憶するノイズ除去用付加係数記憶部77、リサイズ用付加係数を記憶するリサイズ用付加係数記憶部78、並びに、解像度創造用付加係数記憶部76に記憶されている解像度創造用付加係数、ノイズ除去用付加係数記憶部77に記憶されているノイズ除去用付加係数、および、リサイズ用付加係数記憶部78に記憶されているリサイズ用付加係数の中から、信号処理装置11(制御部61)により指定された付加係数を読出し、無線インタフェース32に供給するセレクタ部75が設けられている。
【0132】
即ち、図2の例では、制御部61は、指示信号65に対応する適応処理で利用するタップ係数(デフォルト解像度創造用係数、または、第1の情報(タップ係数)とは異なる、解像度創造用付加係数、ノイズ除去用付加係数、または、リサイズ用付加係数)の提供を、無線インタフェース23、無線44、および、無線インタフェース32を介してセレクタ部75に要求する。セレクタ部75は、要求されたタップ係数を、対応する記憶部(解像度創造用付加係数記憶部76、ノイズ除去用付加係数記憶部77、および、リサイズ用付加係数記憶部78のうちのいずれか)から読出し、それを第2の情報として、無線インタフェース32、無線44、および、無線インタフェース23を介して信号処理部21(制御部61)に供給する。
【0133】
次に、図5のフローチャートを参照して、図2の信号処理システム1の処理例について説明する。
【0134】
ステップS1において、信号処理装置11の特徴検出部62は、入力信号41の特徴を検出する。即ち、特徴検出部62は、入力信号41の特徴を検出し、特徴に基づいてクラスを決定し、そのクラスに対応するクラスコードを適応処理部63に供給する。
【0135】
ステップS2において、信号処理装置11の制御部61は、アルゴリズムベイ12が装着されているか否かを判定する。
【0136】
ステップS2において、アルゴリズムベイ12が装着されていないと判定した場合、制御部61は、ステップS3において、デフォルト解像度創造用係数記憶部64に記憶されているデフォルト解像度創造用係数を取得する。
【0137】
これに対して、ステップS2において、アルゴリズムベイ12が装着されている判定した場合、制御部61は、ステップS4において、ユーザ等からの指令に基づく指示信号65が入力されたか否かを判定する。
【0138】
ステップS4において、指示信号65が入力されたと判定した場合、制御部61は、ステップS5において、指示信号65に対応する機能(適応処理)のタップ係数をアルゴリズムベイ12より取得する。
【0139】
例えば、指示信号65が、上述したような、クラスタップおよび予測タップとして、7つのタップ(図4)を利用する解像度創造適応処理(機能)を指示した場合、制御部61は、特徴検出部62により決定されたクラスコードに対応する解像度創造用係数の提供をアルゴリズムベイ12に要求する。具体的には、制御部61は、無線インタフェース23、無線44、および、無線インタフェース32を介してセレクタ部75に、特徴検出部62により決定されたクラスコードに対応する解像度創造用付加係数の提供を要求する。
【0140】
セレクタ部75は、要求された解像度創造用付加係数を解像度創造用付加係数記憶部76より読出し、無線インタフェース32、無線44、および、無線インタフェース23を介して制御部61に提供する。
【0141】
これに対して、ステップS4において、指示信号65が入力されていないと判定した場合、ステップS6において、制御部61は、自分自身が指定したタップ係数をアルゴリズムベイ12より取得する。
【0142】
この例においては、例えば、指示信号65が入力されない場合、制御部61が、上述したような、クラスタップとして、5つのタップ(図3)を利用し、かつ、予測タップとして、7つのタップ(図4)を利用する解像度創造適応処理を適応処理部63に実行させるとき、制御部61は、特徴検出部62により決定されたクラスコードに対応する解像度創造用係数の提供をアルゴリズムベイ12に要求する。具体的には、制御部61は、有線インタフェース22、有線43、および、有線インタフェース31を介してセレクタ部71に、特徴検出部62により決定されたクラスコードに対応する解像度創造用係数の提供を要求する。
【0143】
セレクタ部71は、要求された解像度創造用係数を解像度創造用係数記憶部72より読出し、有線インタフェース31、有線43、および、有線インタフェース22を介して制御部61に提供する。
【0144】
ステップS7において、適応処理部63は、制御部61の制御に基づいて、上述したステップS3、S5、または、S6の処理で制御部61により取得されたタップ係数に基づいて、入力信号41に対して、上述した適応処理を実行し、生成した出力信号42を外部に出力する。
【0145】
ステップS8において、制御部61は、全ての入力信号41が処理されたか否かを判定する。
【0146】
制御部61は、まだ全ての入力信号41が処理されていないと判定した場合、その処理を、ステップS1に戻し、それ以降の処理を繰り返す。即ち、全ての入力信号41に対して、上述したクラス分類適応処理が施され、その処理の結果である出力信号42が外部に出力される。
【0147】
そして、全ての入力信号41に対する適応処理が完了すると(最後の出力信号42が出力されると)、ステップS8において、全ての入力信号が入力されたと判定され、その処理が終了される。
【0148】
(第2実施形態)
図6は、本発明の第2実施形態が適用される信号処理システム1の構成例を表しており、図2のそれに対応する部分には、対応する符号が付してある。
【0149】
図6の信号処理装置11は、図2のそれと基本的に同一の構成とされる。即ち、図6の信号処理装置11は、入力信号41に対して、クラス分類適応処理を施して、その処理の結果である出力信号42を外部に出力する。
【0150】
そのような信号処理装置11に対して、第1実施形態においては、図2に示されるように、クラス分類適応処理の機能を向上するためのタップ係数を、信号処理装置11(信号処理部21)に提供するアルゴリズムベイ12が接続される例について説明した。これに対して、第2実施形態においては、図6に示されるように、クラス分類適応処理の機能を追加するためのタップ係数を、信号処理装置11(信号処理部21)に提供するアルゴリズムベイ12が接続される例について説明する。
【0151】
即ち、図6の信号処理装置11は、上述したように、通常、デフォルト解像度創造用係数記憶部64に記憶されているデフォルト解像度創造用係数を利用して、解像度創造適応処理を実行する。
【0152】
図6のアルゴリズムベイ12は、そのような信号処理装置11に対して、第1の情報として、通常と同様の機能(解像度創造適応処理)で利用する解像度創造用係数(ただし、デフォルト解像度創造用係数とは異なるもの)を有線で提供し、かつ、第2の情報として、通常とは異なる機能(例えば、図6の例では、ノイズ除去適応処理)で利用するノイズ除去用係数を無線で提供するものである。
【0153】
具体的には、図6のアルゴリズムベイ12には、有線インタフェース31、無線インタフェース32、有線インタフェース31を介して第1の情報(図6の例では、解像度創造用係数)を提供する第1の情報提供部33としての解像度創造用係数記憶部101、および、無線インタフェース32を介して第2の情報(図6の例では、ノイズ除去用係数)を提供する第2の情報提供部34としてのノイズ除去用係数記憶部102が設けられている。
【0154】
なお、ここで、機能の追加は、元の第1の機能を利用せずに、第2の機能を利用することを含むだけではなく、元の第1の機能と第2の機能を併用して利用することも含む。即ち、この例においては、例えば、指示信号65が、ノイズ除去の指示信号とされる場合、適応処理部63は、単にノイズ除去適応処理のみを実行するのではなく、ノイズ除去適応処理と解像度創造適応処理の両者の処理を実行する。
【0155】
図6の信号処理システム1の処理が、図7のフローチャートに示されているが、その処理は、基本的に図2のそれと同様である。即ち、図7のステップS21乃至S28のそれぞれの処理は、図5のステップS1乃至S8のそれぞれの処理と基本的に同様の処理である。
【0156】
ただし、図7のステップS24乃至S27の処理は、図5のステップS4乃至S7の処理と若干異なる。そこで、以下、図7のステップS24乃至S27の処理についてのみ説明する。
【0157】
即ち、ステップS22において、図6のアルゴリズムベイ12が装着されていると判定された場合、ステップS24において、制御部61は、ノイズ除去の指示信号65が入力されたか否かを判定する。
【0158】
ステップS24において、ノイズ除去の指示信号65が入力されたと判定した場合、ステップS25において、制御部61は、解像度創造用係数、および、ノイズ除去用係数をアルゴリズムベイ12より取得する。
【0159】
具体的には、制御部61は、有線インタフェース22、有線43、および、有線インタフェース31を介して、対応する解像度創造用係数を解像度創造用係数記憶部101より読出し、取得するととともに、無線インタフェース23、無線44、および、無線インタフェース32を介して、対応するノイズ除去用係数をノイズ除去用係数記憶部102より読出し、取得する。
【0160】
そして、ステップS27において、適応処理部63は、制御部61の制御に基づいて、制御部61により取得された解像度創造用係数で解像度創造適応処理を実行した後、さらに、制御部61により取得されたノイズ除去用係数を利用して、ノイズ除去適応処理を実行する。
【0161】
これに対して、ステップS24において、指示信号65が入力されていないと判定した場合、制御部61は、ステップS26において、解像度創造用係数をアルゴリズムベイ12より取得する。
【0162】
具体的には、制御部61は、有線インタフェース22、有線43、および、有線インタフェース31を介して、対応する解像度創造用係数を解像度創造用係数記憶部101より読出し、取得する。
【0163】
そして、ステップS27において、適応処理部63は、制御部61の制御に基づいて、制御部61により取得された解像度創造用係数を利用して、解像度創造適応処理を実行する。
【0164】
(第3実施形態)
図8は、本発明の第3実施形態が適用される信号処理システム1の構成例を表しており、図1のそれに対応する部分には、対応する符号が付してある。
【0165】
図2と図6の信号処理装置11(第1と第2実施形態が適用される信号処理装置11)は、信号処理として、クラス分類適応処理を実行したが、図8の信号処理装置11(第3実施形態が適用される信号処理装置11)は、信号処理として、符号化処理を実行する。
【0166】
即ち、図8に示されるように、信号処理装置11の信号処理部21には、符号化処理(図8の例では、量子化部124の量子化処理)、および、信号処理部21の全体の処理を制御する制御部121、入力信号41をブロック化データに変換するブロック化部122、および、ブロック化データに、DCT(Discrete Consign Transform:離散コサイン変換)処理を施して、DCT係数に変換するDCT部123が設けられている。
【0167】
信号処理部21にはまた、制御部121の制御に基づいて、制御部121より供給される所定の量子化テーブルを利用して、DCT部123より供給されるDCT係数を量子化する量子化部124、量子化されたデータ(以下、量子化データと称する)に対して、ハフマン符号化処理を施して、出力信号42として外部に出力するハフマン符号化部125、および、上述した量子化処理が行われる場合に、通常利用する量子化テーブル(以下、デフォルト量子化テーブルと称する)を予め記憶しているデフォルト量子化テーブル記憶部126が設けられている。
【0168】
なお、この例においては、例えば、出力信号42は、少なくとも、ハフマン符号化処理が施された符号化データ、および、ハフマンテーブルに対応する信号から構成され、必要に応じて、量子化処理で利用した量子化テーブルに対応する信号も含まれる。
【0169】
図8のアルゴリズムベイ12は、符号化処理(具体的には、量子化部124の量子化処理)の機能を向上するための量子化テーブルを提供するものである。
【0170】
即ち、図8のアルゴリズムベイ12には、有線インタフェース31、無線インタフェース32、第1の情報(デフォルト量子化テーブルとは異なる第1の量子化テーブル)を有線インタフェース31を介して提供する第1の情報提供部33としての第1の量子化テーブル記憶部131、および、第2の情報(デフォルト量子化テーブルと、第1の量子化テーブルとは異なる第2の量子化テーブル)を無線インタフェース32を介して提供する第2の情報提供部34としての第2の量子化テーブル記憶部132が設けられている。
【0171】
第1および第2の量子化テーブルは、特に限定されないが、例えば、第1の量子化テーブルは、通常利用するもの、具体的には、入力信号41が、自然画に対応する信号である場合に利用する量子化テーブル等とすることができる。即ち、自然画には、ビットの割り当てが、広い周波数帯域で利用可能となるように行われる量子化テーブルが好適とされるので、そのような量子化テーブルを、第1の量子化テーブルとすることができる。
【0172】
これに対して、第2の量子化テーブルは、例えば、特殊の用途に利用するもの、具体的には、入力信号41がコンピュータグラフィックスに対応する信号である場合に利用する量子化テーブル等とすることができる。即ち、コンピュータグラフィックスは、自然画に比べて一般的に平坦部分が多いので、コンピュータグラフィックスには、ビットの割り当てが、特定の周波数帯域に集中されるように行われる量子化テーブルが好適であり、そのような量子化テーブルを、第2の量子化テーブルとすることができる。
【0173】
即ち、この例では、第2の量子化テーブルは、第1の量子化テーブルを利用する符号化処理に対して、さらに機能を向上するための符号化処理(例えば、通常使用する自然画だけではなく、コンピュータグラフィックス等の特殊な用途専用の符号化処理)に利用する量子化テーブルとされる。
【0174】
次に、図9のフローチャートを参照して、図8の信号処理システム1の処理例について説明する。
【0175】
ステップS41において、信号処理装置11のブロック化部122は、入力信号41をブロック化し、ブロック化データとしてDCT部123に供給する。
【0176】
ステップS42において、DCT部123は、供給されたブロック化データをDCT係数に変換し、量子化部124に供給する。
【0177】
ステップS43において、制御部121は、アルゴリズムベイ12が装着されているか否かを判定する。
【0178】
ステップS43において、アルゴリズムベイ12が装着されていないと判定した場合、制御部121は、ステップS44において、デフォルト量子化テーブル記憶部126に記憶されているデフォルト量子化テーブルを取得する。
【0179】
これに対して、ステップS43において、アルゴリズムベイ12が装着されている判定した場合、制御部121は、ステップS45において、指示信号127が入力されたか否かを判定する。
【0180】
ステップS43において、制御部121は、指示信号127が入力されたと判定した場合、ステップS46において、指示信号127に対応する量子化テーブルをアルゴリズムベイ12より取得する。
【0181】
具体的には、例えば、指示信号127が、第2の量子化テーブルを利用することを指示する信号である場合、制御部121は、無線インタフェース23、無線44、および、無線インタフェース32を介して、第2の量子化テーブル記憶部132に記憶されている第2の量子化テーブルを取得する。
【0182】
また、指示信号127が、第1の量子化テーブルを利用することを指示する信号である場合、制御部121は、有線インタフェース22、有線43、および、有線インタフェース31を介して、第1の量子化テーブル記憶部131に記憶されている第1の量子化テーブルを取得する。
【0183】
これに対して、ステップS45において、指示信号127が入力されていないと判定した場合、制御部121は、ステップS47において、第1の量子化テーブルをアルゴリズムベイ12より取得する。
【0184】
具体的には、制御部121は、有線インタフェース22、有線43、および、有線インタフェース31を介して、第1の量子化テーブル記憶部131に記憶されている第1の量子化テーブルを取得する。
【0185】
ステップS48において、量子化部124は、制御部121の制御に基づいて、上述したステップS44、S46、または、S47の処理で制御部121により取得された量子化テーブルを利用して、上述したステップS42の処理でDCT部123より供給されたDCT係数を量子化する。そして、量子化部124は、その量子化データ、および、それに対応する量子化テーブルをハフマン符号化部125に供給する。
【0186】
ステップS49において、ハフマン符号化部125は、供給された量子化データをハフマン符号化する。そして、ハフマン符号化部125は、ハフマン符号化した符号化データ、並びに、それに対応するハフマンテーブル、および、量子化テーブル(上述したステップS48の処理で量子化部124より供給された量子化テーブル)から構成される信号を、出力信号42として外部に出力する。
【0187】
ステップS50において、制御部121は、全ての入力信号41が処理されたか否かを判定する。
【0188】
制御部121は、まだ全ての入力信号41が処理されていないと判定した場合、その処理を、ステップS41に戻し、それ以降の処理を繰り返す。即ち、全ての入力信号41が、符号化されて、その符号化データ(並びに、それに対応するハフマンテーブル、および、量子化テーブル)から構成される出力信号42が外部に出力される。
【0189】
そして、全ての入力信号41に対する符号化処理が完了すると(最後の出力信号42が出力されると)、ステップS50において、全ての入力信号が処理されたと判定され、その処理が終了される。
【0190】
(第4実施形態)
図10は、本発明の第4実施形態が適用される信号処理システム1の構成例を表しており、図2のそれに対応する部分には、対応する符号が付してある。
【0191】
図10の信号処理装置11(第4実施形態が適用される信号処理装置11)は、図8の信号処理装置11(第3実施形態が適用される信号処理装置11)と同様に、信号処理として、符号化処理を実行する。
【0192】
ただし、図10の信号処理装置11においては、信号処理装置11の信号処理部21には、符号化処理(図10の例では、DCT部154と量子化部155の処理)、および、信号処理部21の全体の処理を制御する制御部151、入力信号41を、フレームを単位として記憶するフレーム記憶部152、フレームデータをブロック化データに変換するブロック化部153、および、制御部151の制御に基づいて、ブロック化データをDCT係数に変換するDCT部154が設けられている。
【0193】
信号処理部21にはまた、制御部151の制御に基づいて、制御部151より供給される所定の量子化テーブルを利用して、DCT部154より供給されるDCT係数を量子化する量子化部155、量子化データに対して、ハフマン符号化処理を施して、出力信号42として外部に出力するハフマン符号化部156、および、デフォルト量子化テーブルを予め記憶しているデフォルト量子化テーブル記憶部157が設けられている。
【0194】
なお、この例においては、例えば、出力信号42は、図8のそれと同様に、少なくとも、ハフマン符号化処理が施された符号化データ、および、ハフマンテーブルに対応する信号から構成され、必要に応じて、量子化処理で利用した量子化テーブルに対応する信号も含まれる。
【0195】
即ち、図10の信号処理装置11は、フレームを単位として、画像信号を符号化する装置である。
【0196】
しかしながら、図10の信号処理装置11単体では、イントラ(画像内)符号化を行うことは可能であるが、動き補償処理を利用するインター(画像間)符号化を行うことは困難である。即ち、図10の信号処理装置11単体では、MPEG(Moving Picture Experts Group)等の符号化方式を利用して、画像を符号化することは困難である。
【0197】
そこで、そのような符号化を可能にするために(そのような符号化処理の機能を追加するために)、図10のアルゴリズムベイ12が、信号処理装置11に接続される。
【0198】
即ち、図10のアルゴリズムベイ12は、第1の情報として、量子化部155の量子化処理で利用する量子化テーブルを有線で提供するとともに、第2の情報として、これから符号化するブロック化データに対する動き補償の結果を表すデータを無線で提供するものである。
【0199】
これにより、信号処理装置11は、これらの第1の情報(量子化テーブル)、および、第2の情報(動き補償の結果)を利用して、インター(画像間)符号化の処理を行うことが可能になる。
【0200】
具体的には、アルゴリズムベイ12には、有線インタフェース31、無線インタフェース32、第1の情報(量子化テーブル)を、有線インタフェース31に提供する第1の情報提供部33としての量子化テーブル記憶部171、および、第2の情報(動き補償の結果)を、無線インタフェース32に提供する第2の情報提供部34が設けられている。
【0201】
第2の情報提供部31には、逆量子化部172、逆DCT部173、および、動き補償部174が設けられている。
【0202】
逆量子化部172は、量子化部155から出力される量子化データを、制御部151、無線インタフェース23、無線44、および、無線インタフェース32を介して取得し、それを逆量子化して、逆DCT部173に供給する。
【0203】
逆DCT部173は、供給された逆量子化されたデータに対して、逆DCT処理を施して、元のブロック化データに復元して、動き補償部174に供給する。
【0204】
動き補償部174は、この逆DCT化されたデータ(元のブロック化データ)と、フレーム記憶部152より、制御部151、有線インタフェース22、有線43、および、有線インタフェース31を介して供給された前のフレームのデータとの差分値が最小となる位置を演算し、その位置に基づいて動きベクトルを検出する。さらに、動き補償部174は、検出した動きベクトルを基に、元のブロック化データに対応する参照画像データを生成し、元のブロック化データと生成した参照画像データとの差分値を演算する(最小差分値を演算する)。そして、動き補償部174は、この差分値に対応する信号(以下、差分値信号と称する)182を、無線インタフェース32、無線44、無線インタフェース23を介して制御部151に供給する。
【0205】
この差分値信号182は、さらに、DCT部154に供給され、DCT部154によりDCT係数に変換され、量子化部155により、量子化テーブル記憶部171の量子化テーブルを利用して量子化されて、ハフマン符号化部156によりハフマン符号化の処理が施される。
【0206】
次に、図11のフローチャートを参照して、図10の信号処理システム1の処理について説明する。
【0207】
ステップS71において、信号処理装置11のフレーム記憶部152は、入力信号41を、フレームを単位として記憶する。
【0208】
そして、フレーム記憶部152は、これから符号化するフレームデータをブロック化部153に供給する。
【0209】
ステップS72において、ブロック化部153は、供給されたフレームデータをブロック化し、ブロック化データとしてDCT部154に供給する。
【0210】
ステップS73において、DCT部154は、供給されたブロック化データをDCT係数に変換し、量子化部155に供給する。
【0211】
ステップS74において、制御部151は、アルゴリズムベイ12が装着されているか否かを判定する。
【0212】
ステップS74において、アルゴリズムベイ12が装着されていないと判定された場合、スッテプS75において、量子化部155は、制御部151の制御に基づいて、デフォルト量子化テーブル記憶部157に記憶されているデフォルト量子化テーブルを利用して、上述したステップS73の処理でDCT部154により供給されたDCT係数を量子化し、ハフマン符号化部156に供給する。
【0213】
ステップS80において、ハフマン符号化部156は、供給された量子化データをハフマン符号化する。そして、ハフマン符号化部156は、その符号化データ、並びに、それに対応するハフマンテーブル、および、量子化テーブルから構成される出力信号42を外部に出力する。
【0214】
これに対して、ステップS74において、アルゴリズムベイ12が装着されている判定した場合、制御部151は、ステップS76において、アルゴリズムベイ12より量子化テーブルを取得する。
【0215】
具体的には、制御部151は、有線インタフェース22、有線43、および有線インタフェース31を介して量子化テーブル記憶部171より、対応する量子化テーブルを取得する。
【0216】
ステップS77において、量子化部155は、制御部151の制御に基づいて、上述したステップS76の処理で制御部151により取得された量子化テーブルを利用して、上述したステップS73の処理でDCT部154により供給されたDCT係数を量子化する。
【0217】
ステップS78において、制御部151は、動き補償の指示信号158が入力されたか否か判定する。
【0218】
この例においては、例えば、信号処理装置11は、MPEG方式を利用して符号化処理を行うものとすると、指示信号158が、これから符号化するフレームが、Iピクチャ(Intra-Picture)であることを表す信号である場合、制御部151は、ステップS78において、動き補償の指示信号158が入力されていないと判定する。
【0219】
なお、Iピクチャの画像データは、その1フレーム分の画像データが、他のフレームの画像データを利用することなくそのまま符号化された画像データ(イントラ符号化画像データ)である。
【0220】
そして、ステップS80において、ハフマン符号化部156は、上述したステップS77の処理で量子化部155により量子化された量子化データを取得し、ハフマン符号化し、それを出力信号42として外部に出力する。
【0221】
これに対して、指示信号158が、これから符号化するフレームが、Pピクチャ(Predictive-Picture)、またはBピクチャ(Bidirectionally Predictive-Picture)のいずれか一方であることを表す信号である場合、制御部151は、ステップS78において、動き補償の指示信号158が入力されたと判定し、ステップS79において、「動き補償処理」を実行する。
【0222】
なお、Pピクチャの画像データは、基本的には、それより時間的に先行するIピクチャまたはPピクチャの画像データからの差分が符号化された画像データ(フレーム間順方向予測符号化画像データ)である。また、Bピクチャの画像データは、基本的には、時間的に先行するIピクチャ若しくはPピクチャの画像データ、または後行するIピクチャ若しくはPピクチャからの画像データからの差分が符号化された画像データ(フレーム間双方向予測符号化画像データ)である。
【0223】
この例の「動き補償処理」の詳細が、図12のフローチャートに示されている。そこで、図12を参照して、この例の「動き補償処理」の詳細について説明する。
【0224】
上述した(図11に示される)ステップS78において、制御部151は、動き補償の指示信号158が入力されたと判定すると、ステップS77の処理で量子化部155により量子化された量子化データを、無線インタフェース23、無線44、および、無線インタフェース32を介して逆量子化部172に供給する。
【0225】
図12において、このとき、ステップS91において、逆量子化部172は、供給された逆量子化データを逆量子化して、DCT係数(図11のステップS73の処理でDCT部154により出力されたDCT係数に対応するDCT係数)を復元し、逆DCT部173に供給する。
【0226】
ステップS92において、逆DCT部173は、供給されたDCT係数を逆DCTして、ブロック化データ(図11のステップS72の処理でブロック化部153により出力されたブロック化データに対応するブロック化データ)を復元し、動き補償部174に供給する。
【0227】
また、このときまでに、制御部151は、フレーム記憶部152より、その復元されたブロック化データに対応するフレームよりも時間的に前のフレームのデータ(以下、単に、前フレームと称する)を読み出し、有線インタフェース22、有線43、および、有線インタフェース31を介して動き補償部174に供給する。
【0228】
ステップS93において、動き補償部174は、制御部151より供給された前フレームと、逆DCT部173より供給されたブロック化データとの差分値の最小となる位置より、動きベクトルを検出し、さらに、上述したように、最小差分値を演算し、それに対応する最小差分値信号182を出力する。
【0229】
出力された最小差分値信号182は、無線インタフェース32、無線44、および、無線インタフェース23を介して制御部151に供給される。
【0230】
制御部151が、この最小差分値信号182をDCT部154に供給すると、ステップS94において、DCT部154は、供給された最小差分値信号(データ)182をDCT係数に変換し、量子化部155に供給する。
【0231】
ステップS95において、制御部151は、アルゴリズムベイ12より量子化テーブルを取得する。具体的には、制御部151は、有線インタフェース22、有線43、および、有線インタフェース31を介して量子化テーブル記憶部171より、対応する量子化テーブルを取得する。
【0232】
ステップS96において、量子化部155は、上述したステップS95の処理で制御部151により取得された量子化テーブル(量子化テーブル記憶部171に記憶されていた量子化テーブル)を利用して、上述したステップS94の処理でDCT部154により出力されたDCT係数(最小差分値信号182に対応するDCT係数)を量子化し、ハフマン符号化部156に供給する。
【0233】
図11に戻り、ステップS80において、ハフマン符号化部156は、上述したステップS79の処理で量子化部155より供給された量子化データ(最小差分値信号182に対応する量子化データ)をハフマン符号化し、それを出力信号42として外部に出力する。
【0234】
ステップS81において、制御部151は、全てのフレーム(入力信号41に対応する全てのフレーム)が符号化されたか否かを判定する。
【0235】
制御部151は、まだ全てのフレームが符号化されていないと判定した場合、その処理を、ステップS72に戻し、それ以降の処理を繰り返す。即ち、次のフレームに対応する符号化処理が行われる。そして、全てのフレームが、符号化されて、その符号化データ(並びに、それに対応するハフマンテーブル、および、量子化テーブル)から構成される出力信号42が外部に出力されると、ステップS81において、全てのフレームが符号化されたと判定され、その処理が終了される。
【0236】
以上、図1の信号処理システム1の実施形態として、第1と第2の実施形態においては、クラス分類適応処理を施す信号処理システム1について、第3と第4の実施形態においては、符号化処理を施す信号処理システム1について、それぞれ説明したが、上述したように、信号処理システム1は、これらの第1乃至第4の実施形態に限定されるものではない。
【0237】
即ち、信号処理システム1は、入力した信号に、所定の信号処理を施して出力する第1の信号処理装置と、第1の信号処理装置の信号処理で利用する第1の情報を表す信号を、第1の信号処理装置に有線で供給する有線供給部と、第1の信号処理装置の信号処理の内容を変更するための第2の情報を表す信号を、第1の信号処理装置に無線で供給する無線供給部とを設ける第2の信号処理装置とから構成されればよい。
【0238】
例えば、その他の実施形態として、第1の情報は、符号化情報であり、第2の情報は、符号化情報を復号するための復号情報であり、第1の信号処理装置が、第2の信号処理装置により第1および第2の情報を表す信号が供給された場合、信号処理として、第2の情報を利用して、第1の情報を復号する復号処理を行うような信号処理システムでもよい。
【0239】
または、第1の情報は、暗号化された暗号化情報であり、第2の情報は、その暗号化情報を復号するための復号情報(例えば、鍵等)であり、第1の信号処理装置が、第2の信号処理装置により第1および第2の情報を表す信号が供給された場合、信号処理として、第2の情報を利用して、第1の情報を復号する復号処理を行うような信号処理システムでもよい。
【0240】
このように、図1の信号処理システム1においては、例えば、第1の情報として、信号処理装置11の信号処理を変更するための基本情報を有線で、第2の情報として、信号処理を変更するための付加情報を無線で、それぞれ供給するようにしたので、以下のような効果を奏することが可能になる。
【0241】
即ち、第1の効果として、付加情報に対しては、有線(バス)の制約がなくなり、バージョンアップされた付加情報を容易に取り扱うことが可能になる。
【0242】
第2の効果として、付加情報は、一般に情報量が少ないため、従来の無線方式をそのまま利用することが可能である。
【0243】
第3の効果として、基本情報は、一般にバージョンアップされないので、有線で供給することにより、大容量の情報を供給することが可能になるとともに、安定した安全な供給が可能になる。
【0244】
第4の効果として、無線で供給される第2の情報は、画像や音声データではなく、単に信号処理で利用する情報であるため、たとえ暗号化されていなくてもセキュリティ上支障を生じることが少なくなる。
【0245】
換言すると、図1の信号処理システム1においては、上述した第1と第2の課題を解決することが可能になる。
【0246】
(第5実施形態)
以上、本発明が適用される信号処理システムとして、図1の信号処理システム1を基にして、第1乃至第4実施形態について説明したが、その実施形態は、図1の信号処理システム1に限定されるものではない。
【0247】
即ち、図1の信号処理システム1の信号処理装置11は、1つの信号処理を実行する信号処理部21が設けられているが、本発明が適用される信号処理装置として、複数の信号処理部を有するものでもよい。また、それらの複数の信号処理部のそれぞれに対して、対応するアルゴリズムベイを装着してもよいし、それらの複数の信号処理部のうちの所定のものに対してのみ、対応するアルゴリズムベイを装着してもよい。
【0248】
そこで、第5実施形態においては、そのような複数の信号処理部を有する信号処理装置を、テレビジョン受像機を例として説明する。
【0249】
図13は、本発明の第5実施形態が適用されるテレビジョン受像機201の構成例を表している。
【0250】
この例においては、例えば、テレビジョン受像機201は、NTSC(National Television System Committee)方式のテレビジョン受像機とされる。
【0251】
図13に示されるように、テレビジョン受像機201においては、所定のチャンネルの映像搬送波信号をアンテナ211を介して受信し、その映像搬送波信号を復調し、映像中間周波信号を出力するチューナ212、映像中間周波信号を復調し、コンポジット映像信号とするVIF(Video Intermediate Frequency)部213、コンポジット映像信号から適切な映像信号(例えば、図13の例では、3原色のR信号、G信号、および、B信号)を生成する信号処理部214、および、3原色のR信号、G信号、および、B信号を入力し、画像として表示するディスプレイ等からなる表示部215が設けられている。
【0252】
信号処理部214は、入力された信号に対応する画像を、任意のサイズの画像に変換して、適切な映像信号(例えば、図13の例では、3原色のR信号、G信号、および、B信号)を生成する信号処理を行う。
【0253】
具体的には、信号処理部214は、本出願人により、例えば、特願平2000−047947号等として先に提案されているように、SD画像が入力されたとき、4倍密度の画像(HD画像)を出力する解像度創造装置や、出力画像信号による画像の解像度をユーザが所望の値に任意に調整することが可能な画像信号変換装置等に適用されている任意の解像度創造を行うという手法に基づいて、画像のリサイズやズームを行うものである。
【0254】
例えば、デジタルスチルカメラ、ビデオカメラ、または、インターネット等からの画像のサイズは、必ずしもテレビジョン放送により送られてくるSD画像またはHD画像のサイズに一致するとは限らない。このような場合、信号処理部214は、それらの様々な画像のサイズを、例えば、SD画像等の標準のサイズに変換した後、3原色のR信号、G信号、および、B信号として表示部215に出力することが可能である。
【0255】
ところで、このようなテレビジョン放送により送られてくる画像以外の画像信号、例えば、デジタルスチルカメラの画像をテレビジョン受像機に取り込むためには、従来、デジタルスチルカメラに搭載されている記録媒体(例えば、メモリースティック(本出願人であるソニー(株)の商標))等に対応する接続端子を搭載することで実現していた。
【0256】
例えば、ビデオカメラからの画像をテレビジョン受像機に取り込むためには、従来、ビデオカメラに搭載されている接続端子(例えば、i-Link(商標))等に対応する接続端子を搭載することで実現していた。
【0257】
また、例えば、インターネットからの画像をテレビジョン受像機に取り込むためには、従来、インターネットの接続ケーブル(例えば、ADSL(Asymmetrical Digital Subscriber Line)用の接続ケーブル)に対応する接続端子を搭載することで実現していた。
【0258】
これらのテレビジョン受像機側の接続端子は、従来、表示部(ディスプレイ)まで有線によってつながれている。
【0259】
しかしながら、デジタルスチルカメラの記録媒体、ビデオカメラの接続端子、および、インターネットの接続ケーブル等は、テレビジョン放送信号(例えば、NTSC信号等)のように1つに統一されていない。そのため、例えば、テレビジョン受像機に予め搭載された端子が、所望の画像を提供するメディア(例えば、デジタルスチルカメラ、ビデオカメラ、または、インターネット等)の端子と異なる場合、上述したように、その画像をテレビジョン受像機に取り込むことが困難であるという第3の課題があった。
【0260】
また、一般にテレビジョン受像機の買い替え周期は約10年と称されているのに対して、これらのメディアの画像提供方式(例えば、デジタルスチルカメラの記録媒体等)は、数年周期で変更されることがあり、テレビジョン受像機に単に所定の端子のみを搭載しただけでは、新たなメディア、または、新たな画像提供方式に対応することが困難であるという第4の課題があった。
【0261】
本出願人は、これらテレビジョン受像機に特有な第3および第4の課題を解決する手法として、以下のような知見を得た。即ち、特定の接続端子を、あらかじめテレビジョン受像機に搭載するのではなく、オプションとして必要な接続端子を選択することができ、入れ替えることが可能な構造にする。さらに、この接続端子部分からテレビジョン受像機の内部基板までの接続を、有線から無線にする。即ち、有線の場合、搭載された接続線の伝送容量を超えることはできないので、無線にすることで、任意の伝送容量に変更することができる。さらにまた、チャンネル数(接続端子数)も自由に設定可能になる。
【0262】
そのような知見に基づいて、上述した図1の信号処理システム1をテレビジョン受像機に適用したものが、図13のテレビジョン受像機201である。
【0263】
即ち、図13に示されるように、テレビジョン受像機201にはさらに、信号処理部214に対して、テレビジョン放送信号(図13の例では、アンテナ211を介してチューナ212により受信され、VIF部213を介して信号処理部214に供給されるNTSC信号)以外の信号を提供するために、着脱自在な有線インタフェース(接続端子)216、無線インタフェース217、並びに、有線インタフェース216、若しくは、無線インタフェース217を介して受信した各種のフォーマットに対応する画像信号のそれぞれをデコードするデコード部218が設けられている。
【0264】
有線インタフェース216は、例えば、上述した図1のアルゴリズムベイ12の有線インタフェース31と接続される。従って、デコード部218は、第1の情報提供部33より供給される第1の情報を、有線で(有線インタフェース31および有線インタフェース216を介して)取得することができる。
【0265】
無線インタフェース217は、例えば、上述した図1のアルゴリズムベイ12の無線インタフェース32と無線で接続される。従って、デコード部218は、第2の情報提供部34より供給される第2の情報を、無線で(無線インタフェース32および無線インタフェース217を介して)取得することができる。
【0266】
第1と第2の情報は、上述したように、様々な情報を適用することが可能であるが、この例が、テレビジョン受像機であることを考慮すると、例えば、上述したように、第1の情報は、符号化情報(符号化された画像データ)とされ、第2の情報は、符号化情報を復号するための復号情報とされる。この場合、デコード部218は、第2の情報を利用して、第1の情報(符号化された画像データ)を復号し、信号処理部214に供給する。
【0267】
または、第1の情報は、暗号化された暗号化情報(暗号化された有料画像等の画像データ)とされ、第2の情報は、その暗号化情報を復号するための復号情報(例えば、鍵等)とされる。この場合、デコード部218は、第2の情報を利用して、第1の情報(暗号化された画像データ)を復号し、信号処理部214に供給する。
【0268】
これにより、上述した第4の効果と同様の効果を奏することが可能になる。
【0269】
また、有線インタフェース216は、着脱可能とされるので、図14に示されるように、アルゴリズムベイ12に対応する有線インタフェース216−1以外に、他の外部メディア219の有線インタフェース231と接続可能な有線インタフェース216−2を設ける等、様々な形態を取ることが可能になる。
【0270】
例えば、外部メディア219が、デジタルスチルカメラで撮影された画像を記憶するメモリスティック等の記録媒体とされると、有線インタフェース216−2は、その記録媒体に対応する接続端子とされる。
【0271】
例えば、外部メディア219が、ビデオカメラとされると、有線インタフェース216−2は、そのビデオカメラに対応する接続端子(例えば、i-Link端子等)とされる。
【0272】
例えば、外部メディア219が、インターネットとされると、有線インタフェース216−2は、インターネットに接続するためのケーブルを接続する接続端子とされる。
【0273】
このように、有線インタフェース216−2として、所定の規格で規定される種類のコネクタを設けることで、テレビジョン受像機201は、その規格に対応する信号を容易に取り込むことが可能になる。さらに、新たな規格が規定されても、単にその規格に対応する有線インタフェース216−2を製作すればよいので、新たな規格に対応する信号を容易に取り込むことが可能になる。これにより、上述した第3と第4の課題を解決することが可能になる。
【0274】
また、外部メディア219は、図14に示されるように、無線インタフェース217と無線で接続可能な無線インタフェース232をさらに設けることによって、情報(画像データ等)を無線でテレビジョン受像機201に供給することが可能になる。これにより、上述した第3と第4の課題を解決することが可能になる。
【0275】
さらに、他の外部メディア233と有線で接続する外部インタフェース234、および、テレビジョン受像機201の無線インタフェース217と無線で接続する無線インタフェース235からなる接続端子220も設けることが可能である。
【0276】
この場合も、上述した第3と第4の課題を解決することが可能になる。
【0277】
なお、図14に示されるアルゴリズムベイ12、外部メディア219のうちの有線インタフェース231、および、無線インタフェース232を構成する部分、並びに、接続端子220の形態は、特に限定されないが、これらは、テレビジョン受像機201に装着される基板として形成され、その基板はパッケージに収納され、有線インタフェース31、無線インタフェース32、有線インタフェース231、無線インタフェース232、および、無線インタフェース235のそれぞれは、対応するパッケージに配設するるとよい。
【0278】
また、テレビジョン受像機201は、このパッケージを収納する収納部(図示せず)を設け、その収納部のうちの、パッケージが収納された場合に、パッケージの有線インタフェースと接続可能な位置に有線インタフェース216を配設するとともに、パッケージの無線インタフェースと接続可能な位置に無線インタフェース217を配設するとよい。
【0279】
これにより、ユーザは、アルゴリズムベイ12、外部メディア219、または、接続端子220を、容易にテレビ受像機201に接続することが可能になる。
【0280】
次に、図15のフローチャートを参照して、図13のテレビジョン受像機201の処理例について説明する。
【0281】
図13に示されるように、例えば、いま、テレビジョン受像機201には、アルゴリズムベイ12が接続されているものとする。即ち、有線インタフェース31と有線インタフェース216とが有線で接続されており、かつ、無線インタフェース32と無線インタフェース217とが無線で接続されているものとする。
【0282】
また、この例においては、例えば、第1の情報提供部33は、第1の情報として、符号化された映像データ(以下、符号化映像データと称する)を供給し、かつ、第2の情報提供部34は、第2の情報として、第1の情報である符号化映像データを復号するために必要なデータ(以下、復号情報と称する)を供給するものとする。
【0283】
はじめに、ステップS101において、図13のテレビジョン受像機201のデコード部218は、外部機器からの映像を取り込む。
【0284】
具体的には、この例においては、デコード部218は、有線インタフェース216、および、有線インタフェース31を介して第1の情報提供部33より符号化映像データを取得し(取り込み)、かつ、無線インタフェース217、および、無線インタフェース32を介して第2の情報提供部34より復号情報を取得する。
【0285】
ステップS102において、デコード部218は、取り込んだ映像をデコード(復号)する。
【0286】
具体的には、この例においては、デコード部218は、上述したステップS101の処理で取得した復号情報を利用して、上述したステップS101の処理で取り込んだ符号化映像データをデコードし、元の映像データに復元して、信号処理部214に供給する。
【0287】
このとき、信号処理部214には、同時に、チューナ212がアンテナ211を介して受信し、出力したテレビジョン放送の映像中間周波信号が、VIF部213により復調され、コンポジット映像信号(以下、単に、テレビジョン放送の映像信号と称する)として、供給されているものとする。
【0288】
ステップS103において、信号処理部214は、ステップS102の処理でデコード部218により供給された外部機器(この例では、アルゴリズムベイ12)からの映像データ、および、テレビジョン放送の映像信号のうちのいずれか一方を選択する。
【0289】
そして、ステップS104において、信号処理部214は、上述したステップS103の処理で選択した映像(データまたは信号)のサイズを変換し、適切な映像信号(例えば、図13の例では、3原色のR信号、G信号、および、B信号)として表示部215に供給する。
【0290】
ステップS105において、表示部215は、ステップS104の処理で信号処理部214によりサイズが変換された映像を表示する。具体的には、表示部215は、3原色のR信号、G信号、および、B信号を入力し、それららの信号に対応する映像を表示する。
【0291】
このように、図13のテレビジョン受像機201は、着脱可能な有線インタフェース216、および、無線インタフェース217を有しているので、上述した図1の信号処理システム1(信号処理装置11)と同様に、上述した第1および第2の課題を解決するとともに、さらに、上述したテレビジョン受像機特有の第3および第4の課題も解決することが可能になる。
【0292】
上述した一連の処理は、ハードウエアにより実行させることもできるが、ソフトウエアにより実行させることができる。
【0293】
この場合、上述した各種の信号処理装置や、アルゴリズムベイに相当する信号処理装置は、例えば、図16に示されるようなパーソナルコンピュータにより構成される。
【0294】
図16に示されるように、CPU(Central Processing Unit)301は、ROM(Read Only Memory)302に記録されているプログラム、または記憶部308からRAM(Random Access Memory)303にロードされたプログラムに従って各種の処理を実行する。RAM303にはまた、CPU301が各種の処理を実行する上において必要なデータなども適宜記憶される。
【0295】
CPU301、ROM302、およびRAM303は、バス304を介して相互に接続されている。このバス304にはまた、入出力インタフェース305も接続されている。
【0296】
入出力インタフェース305には、キーボード、マウスなどよりなる入力部306、ディスプレイなどよりなる出力部307、ハードディスクなどより構成される記憶部308、モデム、ターミナルアダプタなどより構成される通信部309が接続されている。通信部309には、有線インタフェース312と無線インタフェース313が接続されている。即ち、通信部309は、有線インタフェース312を介して他の信号処理装置との有線の通信処理を行うとともに、無線インタフェース313を介しての他の信号処理装置との無線の通信処理を行う。
【0297】
入出力インタフェース305にはまた、必要に応じてドライブ310が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどよりなるリムーバブル記録媒体311が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部308にインストールされる。
【0298】
一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【0299】
この記録媒体は、図16に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク(フロッピディスクを含む)、光ディスク(CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む)、光磁気ディスク(MD(Mini-Disk)を含む)、もしくは半導体メモリなどよりなるリムーバブル記録媒体(パッケージメディア)311により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM302や、記憶部308に含まれるハードディスクなどで構成される。
【0300】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【0301】
また、本明細書において、システムとは、複数の装置や処理部により構成される装置全体を表すものである。
【0302】
【発明の効果】
以上のごとく、本発明の信号処理システムおよび方法によれば、信号処理の内容を変更することができるシステムを実現することが可能となる。特に、信号処理の内容を変更する情報が更新されても、その更新された情報を秘匿性を確保しつつ提供することができるシステムを実現することが可能となる。
【0303】
本発明の第1の信号処理装置および方法、記録媒体、並びにプログラムによれば、信号処理の内容を変更することができる。特に、その変更を容易に行い、秘匿性を確保することができる。
【0304】
本発明の第2の信号処理装置および方法、記録媒体、並びにプログラムによれば、信号処理の内容を変更させることができる。特に、その変更を容易に行わせ、秘匿性を確保させることができる。
【図面の簡単な説明】
【図1】本発明が適用される信号処理システムの構成例を示すブロック図である。
【図2】クラス分類適応処理を行う場合の図1の信号処理システムの構成例を示すブロック図である。
【図3】クラス分類適応処理で利用するタップ例を説明する図である。
【図4】クラス分類適応処理で利用するタップ例を説明する図である。
【図5】図2の信号処理システムの処理を説明するフローチャートである。
【図6】クラス分類適応処理を行う場合の図1の信号処理システムの他の構成例を示すブロック図である。
【図7】図6の信号処理システムの処理を説明するフローチャートである。
【図8】符号化処理を行う場合の図1の信号処理システムの構成例を示すブロック図である。
【図9】図8の信号処理システムの処理を説明するフローチャートである。
【図10】符号化処理を行う場合の図1の信号処理システムの他の構成例を示すブロック図である。
【図11】図10の信号処理システムの処理を説明するフローチャートである。
【図12】図11の信号処理システムの処理の動き補償処理の詳細を説明するフローチャートである。
【図13】本発明が適用されるテレビジョン受像機の構成例を示すブロック図である。
【図14】図13のテレビジョン受像機の有線インタフェース、または、無線インタフェースに接続される外部機器を説明する図である。
【図15】図13のテレビジョン受像機の処理を説明するフローチャートである。
【図16】本発明が適用される信号処理装置の他の構成例を示すブロック図である。
【符号の説明】
1 信号処理システム, 11 信号処理装置, 12 アルゴリズムベイ,21 信号処理部, 22 有線インタフェース, 23 無線インタフェース, 31 有線インタフェース, 32 無線インタフェース, 33 第1の情報提供部, 34 第2の情報提供部, 43 有線, 44 無線, 62 特徴検出部, 63 適応処理部, 72 解像度創造用係数記憶部, 73 ノイズ除去用係数記憶部, 74 リサイズ用係数記憶部, 76 解像度創造用付加係数記憶部, 77 ノイズ除去用付加係数記憶部, 78 リサイズ用付加係数記憶部, 101 解像度創造用係数記憶部, 102 ノイズ除去用係数記憶部, 122 ブロック化部, 123 DCT部, 124 量子化部, 131 第1の量子化テーブル記憶部, 132 第2の量子化テーブル記憶部, 153 ブロック化部, 154 DCT部, 155 量子化部, 171 量子化テーブル記憶部, 172 逆量子化部, 173 逆DCT部, 174 動き補償部, 182 動き補償処理の結果(最小差分値), 201 テレビジョン受像機, 214 信号処理部, 216 有線インタフェース, 217 無線インタフェース[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a signal processing system and method, a signal processing device and method, a recording medium, and a program. In particular, when information that changes the content of signal processing is upgraded, the confidentiality of the upgraded information is improved. The present invention relates to a signal processing system and method, a signal processing apparatus and method, a recording medium, and a program that can be provided while being secured.
[0002]
[Prior art]
A board is mounted on a signal processing apparatus that performs predetermined signal processing on the input signal and outputs the signal, and information for changing the contents of the signal processing is supplied from the board to the signal processing apparatus by wire. It is known to do. In this case, for example, information is supplied from the substrate to the signal processing device via the bus by connecting the substrate to the bus of the signal processing device.
[0003]
[Problems to be solved by the invention]
Such information may be upgraded, but in that case, there is a first problem that the board may not be able to provide the upgraded information to the signal processing device due to bus restrictions. there were.
[0004]
In addition, when information is provided from the substrate to the signal processing device, there is a second problem that information may be leaked.
[0005]
The present invention has been made in view of such a situation, and when information that changes the content of signal processing is upgraded, the upgraded information can be provided while ensuring confidentiality. It is what you want to do.
[0006]
[Means for Solving the Problems]
The signal processing system of the present invention includes a first signal processing device that outputs a signal that has been subjected to predetermined signal processing, and a second signal processing device that supplies the signal to the first signal processing device. A signal processing system, wherein the second signal processing device includes a wired supply unit that supplies a signal representing the first information used in the signal processing of the first signal processing device to the first signal processing device in a wired manner. Wireless supply means for wirelessly supplying a signal representing the second information for changing the content of the signal processing of the first signal processing device to the first signal processing device.The signal processing is class classification adaptive processing, the first information is a first coefficient used in the class classification adaptive processing, and the second information is different from the first coefficient, the class classification adaptive processing. Is the second coefficient used inIt is characterized by that.
[0007]
The second signal processing device can be formed as a substrate attached to the first signal processing device.
[0008]
The second information can be information that improves the function of signal processing based on the first information.
[0011]
The second information may be information that adds a signal processing function based on the first information.
[0012]
First informationIs a coefficient corresponding to the first function used in the class classification adaptation process, and the second information is a coefficient corresponding to a second function different from the first function used in the class classification adaptation process. Can be.
[0015]
The wired supply means of the second signal processing device may have a first connector that is physically and electrically connected to the first signal processing device.
[0016]
The second signal processing device may be formed as a substrate to be attached to the first signal processing device, the substrate may be housed in a package, and the first connector may be disposed in the package. .
[0017]
The first signal processing device includes a second connector connected to the first connector, and a plurality of types of connectors corresponding to the plurality of types of first connectors are provided as the second connector. Can be.
[0018]
The second connector can be attached to and detached from the first signal processing device, and can include a type of connector defined by a predetermined standard.
[0019]
The first signal processing device is a television receiver, and the wireless supply means of the second signal processing device further supplies an image or audio signal to the television receiver wirelessly. it can.
[0020]
In the signal processing method of the signal processing system according to the present invention, the first signal processing device performs predetermined signal processing on the input signal and outputs the signal, and the second signal processing device outputs the signal from the first signal processing device. A signal representing the first information used in the signal processing is supplied to the first signal processing device by wire, and a signal representing the second information for changing the content of the signal processing of the first signal processing device , Wirelessly supplied to the first signal processing deviceThe signal processing is class classification adaptation processing, the first information is a first coefficient used in the class classification adaptation processing, and the second information is different from the first coefficient. The second coefficient used in processingIt is characterized by that.
[0021]
In the signal processing system and method of the present invention, an input signal is subjected to predetermined signal processing and output by the first signal processing device. The second signal processing device supplies a signal representing the first information used in the signal processing of the first signal processing device to the first signal processing device in a wired manner. A signal representing the second information for changing the content of the signal processing is wirelessly supplied to the first signal processing device.The signal processing is a class classification adaptation process, the first information is a first coefficient used in the class classification adaptation process, and the second information is a class classification adaptation process different from the first coefficient. This is the second coefficient to be used.
[0022]
The first signal processing device may be a reception-only device that receives signals in a wired or wireless manner, or may be a transmission / reception device that can also transmit signals in a wired or wireless manner.
[0023]
Further, the second signal processing device may be a transmission-only device that transmits a signal by wire or wireless, or may be a transmission / reception device that can also receive a signal by wire or wireless.
[0024]
Furthermore, the first and second information may be information previously held by the second signal processing device, or may be information supplied from another device to the second signal processing device.
[0025]
The first signal processing apparatus of the present invention is a signal processing apparatus that performs predetermined signal processing on an input signal and outputs the signal. The first signal processing apparatus that is transmitted by wire from another signal processing apparatus is used for signal processing. Wireless reception for wirelessly receiving a signal representing the second information for changing the content of the signal processing transmitted wirelessly by another signal processing device and a wired reception means for receiving a signal representing the information of the wireless communication With meansThe signal processing is class classification adaptive processing, the first information is a first coefficient used in the class classification adaptive processing, and the second information is different from the first coefficient, the class classification adaptive processing. Is the second coefficient used inIt is characterized by that.
[0026]
The second information can be information that improves the function of signal processing based on the first information.
[0029]
The second information may be information that adds a signal processing function based on the first information.
[0030]
First informationIs a coefficient corresponding to the first function used in the class classification adaptation process, and the second information is a coefficient corresponding to a second function different from the first function used in the class classification adaptation process. Can be.
[0033]
The wired reception means has a first connector of another signal processing device and a second connector that is physically and electrically connected, and the second connector is a first connector of the other signal processing device. When connected, the first information transmitted by the other signal processing device can be received via the first and second connectors.
[0034]
A plurality of types of connectors corresponding to each of the plurality of types of first connectors can be provided as the second connector.
[0035]
The second connector can be attached to and detached from the signal processing device, and can include a type of connector defined by a predetermined standard.
[0036]
The first signal processing device is a television receiver, and the wireless receiving means can further receive an image or audio signal transmitted wirelessly by another signal processing device wirelessly.
[0037]
The signal processing method of the first signal processing device according to the present invention includes a wired reception step of receiving a signal representing the first information used in signal processing, which is transmitted by wire from another signal processing device. A wireless reception step of wirelessly receiving a signal representing the second information for changing the content of the signal processing transmitted wirelessly by the signal processing device ofThe signal processing is class classification adaptation processing, the first information is a first coefficient used in the class classification adaptation processing, and the second information is different from the first coefficient. The second coefficient used in processingIt is characterized by that.
[0038]
The program of the first recording medium of the present invention includes a wired reception step for wiredly receiving a signal representing the first information used in signal processing, transmitted by wired from another signal processing device, and other signal processing A wireless reception step of wirelessly receiving a signal representing the second information for wirelessly transmitting the signal processing content transmitted by the device;The signal processing is class classification adaptation processing, the first information is a first coefficient used in the class classification adaptation processing, and the second information is different from the first coefficient. The second coefficient used in processingIt is characterized by that.
[0039]
The first program of the present invention includes a wired reception step of receiving a signal representing the first information used in signal processing transmitted by wire from another signal processing device, and wirelessly using the other signal processing device. A wireless reception step of wirelessly receiving a signal representing the second information for changing the content of signal processing transmitted in stepThe signal processing is class classification adaptive processing, the first information is a first coefficient used in the class classification adaptive processing, and the second information is different from the first coefficient, the class classification adaptive processing. Is the second coefficient used inIt is characterized by that.
[0040]
In the first signal processing apparatus and method, the first recording medium, and the first program of the present invention, the first information used in signal processing transmitted by another signal processing apparatus by wire is represented. The signal is received by wire, and the signal representing the second information for changing the content of the signal processing transmitted wirelessly by another signal processing device is wirelessly received. Then, signal processing is performed using the received first and second information.The signal processing is a class classification adaptation process, the first information is a first coefficient used in the class classification adaptation process, and the second information is a class classification adaptation process different from the first coefficient. This is the second coefficient to be used.
[0041]
The first signal processing device may be a reception-only device that receives signals in a wired or wireless manner, or may be a transmission / reception device that can also transmit signals in a wired or wireless manner.
[0042]
The second signal processing device according to the present invention applies the first information used in the signal processing of the other signal processing device to the other signal processing device that performs predetermined signal processing on the input signal and outputs the signal. A signal representing the second information for changing the content of the signal processing of the other signal processing device is wirelessly supplied to the wire supply means for supplying the signal to be represented by wire and the other signal processing device. Wireless supply meansThe signal processing is class classification adaptive processing, the first information is a first coefficient used in the class classification adaptive processing, and the second information is different from the first coefficient, the class classification adaptive processing. Is the second coefficient used inIt is characterized by that.
[0043]
The signal processing device can be formed as a substrate to be attached to another signal processing device.
[0044]
The second information can be information that improves the function of signal processing based on the first information.
[0047]
The second information may be information that adds a signal processing function based on the first information.
[0048]
First informationIs a coefficient corresponding to the first function used in the class classification adaptation process, and the second information is a coefficient corresponding to a second function different from the first function used in the class classification adaptation process. Can be.
[0051]
The wired supply means may have a connector that is physically and electrically connected to another signal processing device.
[0052]
The signal processing device may be formed as a substrate to be attached to another signal processing device, the substrate may be housed in a package, and the connector may be disposed in the package.
[0053]
The other signal processing device is a television receiver, and the wireless supply means can further supply an image or audio signal to the television receiver wirelessly.
[0054]
The signal processing method of the second signal processing device according to the present invention is a signal processing method used for signal processing of another signal processing device with respect to the other signal processing device that outputs the input signal by performing predetermined signal processing. A signal representing the information of 1 is supplied in a wired manner, and a signal representing the second information for changing the content of the signal processing of the other signal processing device to the other signal processing device, A wireless supply step for supplying wirelessly to other signal processing devices;The signal processing is class classification adaptation processing, the first information is a first coefficient used in the class classification adaptation processing, and the second information is different from the first coefficient. The second coefficient used in processingIt is characterized by that.
[0055]
The program of the second recording medium of the present invention is the first information used in the signal processing of the other signal processing device with respect to the other signal processing device that performs the predetermined signal processing on the input signal and outputs it. A signal that represents the second information for changing the content of the signal processing of the other signal processing device to the other signal processing device, A wireless supply step for supplying wirelessly to the processing device;The signal processing is class classification adaptation processing, the first information is a first coefficient used in the class classification adaptation processing, and the second information is different from the first coefficient. The second coefficient used in processingIt is characterized by that.
[0056]
The second program of the present invention is a signal representing first information used in signal processing of another signal processing device for another signal processing device that performs predetermined signal processing on the input signal and outputs the signal. To the other signal processing device, and a signal representing the second information for changing the content of the signal processing of the other signal processing device to the other signal processing device. Wireless supply step for supplying wirelessly to a computerThe signal processing is a class classification adaptation process, the first information is a first coefficient used in the class classification adaptation process, and the second information is a class classification different from the first coefficient. This is the second coefficient used in adaptive processingIt is characterized by that.
[0057]
In the second signal processing apparatus and method, the second recording medium, and the second program of the present invention, with respect to another signal processing apparatus that performs predetermined signal processing on the input signal and outputs it. A signal representing the first information used in the signal processing of the other signal processing device is supplied by wire, and a signal representing the second information for changing the content of the signal processing of the other signal processing device , Wirelessly supplied to other signal processing devices.The signal processing is a class classification adaptation process, the first information is a first coefficient used in the class classification adaptation process, and the second information is a class classification adaptation process different from the first coefficient. This is the second coefficient to be used.
[0058]
The second signal processing device may be a transmission-only device that transmits a signal by wire or wireless, or may be a transmission / reception device that can also receive a signal by wire or wireless.
[0059]
Further, the first and second information may be information held in advance by the second signal processing device, or may be information supplied from another device to the second signal processing device.
[0060]
DETAILED DESCRIPTION OF THE INVENTION
FIG. 1 shows a configuration example of a signal processing system to which the present invention is applied.
[0061]
As shown in FIG. 1, the
[0062]
In the
[0063]
In the
[0064]
In the example of FIG. 1, the
[0065]
The first information provided by the first
[0066]
Similarly, the second information provided by the second
[0067]
Next, an outline of the operation of the
[0068]
For example, the
[0069]
The contents and types of the first information and the second information are not particularly limited. In this example, for example, the first information is basic information for changing the contents of signal processing of the
[0070]
Specific examples of the first and second information will be described later.
[0071]
The outline of the
[0072]
Examples of configurations of such various embodiments are shown in FIGS. 2, 6, 8, and 10, respectively.
[0073]
Therefore, hereinafter, the
[0074]
(First embodiment)
FIG. 2 shows a configuration example of the
[0075]
In the first embodiment, the
[0076]
That is, as shown in FIG. 2, the
[0077]
The class classification adaptation process described above is the following process previously proposed by the present applicant.
[0078]
In other words, the class classification adaptive process includes a class classification process and an adaptive process. By the class classification process, signals (data) are classified based on their properties, and the adaptive process is performed for each class.
[0079]
Here, as an example of the class classification adaptation process, for example, a process for improving the spatial resolution for an image signal will be described. Specifically, a standard resolution image signal (hereinafter referred to as an SD (Standard Definition) image signal as appropriate) is converted into a high resolution image signal (hereinafter referred to as an HD (High Definition) image signal as appropriate). An adaptive process for improving the spatial resolution will be described.
[0080]
In this case, in the adaptive processing, prediction of pixels of the HD image in which the spatial resolution of the SD image is improved by linear combination of the pixels constituting the SD image (hereinafter referred to as SD pixels as appropriate) and a predetermined tap coefficient. By obtaining the value, an image in which the resolution of the SD image is improved can be obtained.
[0081]
Specifically, for example, a certain HD image is used as teacher data, and an SD image with degraded resolution of the HD image is used as student data, and pixels constituting the HD image (hereinafter, referred to as HD pixels as appropriate) The predicted value E [y] of the pixel value y is obtained from a set of pixel values x1, x2,... Of a number of SD pixels (pixels constituting an SD image) and predetermined tap coefficients w1, w2,. Consider obtaining by a linear linear combination model defined by linear combination. In this case, the predicted value E [y] is expressed by Expression (1).
E [y] = w1 x1 + w2 x2 + (1)
[0082]
In order to generalize equation (1), a matrix W composed of a set of tap coefficients wj, a matrix X composed of a set of student data xij, and a matrix Y ′ composed of a set of predicted values E [yi] ).
[0083]
[Expression 1]
[0084]
If defined as shown in Equation (2), an observation equation as shown in Equation (3) is established.
XW = Y ′ (3)
[0085]
In Equation (3), the component xij of the matrix X means jth student data in the i-th set of student data (set of student data used for prediction of the i-th teacher data yi), The component wj of the matrix W represents a tap coefficient by which a product with the jth student data in the student data set is calculated. Yi represents the i-th teacher data, and therefore E [yi] represents the predicted value of the i-th teacher data. Note that y on the left side of Equation (1) is obtained by omitting the suffix i of the component yi of the matrix Y, and x1, x2,... On the right side of Equation (1) are also the components xij of the matrix X. The suffix i is omitted.
[0086]
Then, it is considered to apply the least square method to this observation equation to obtain a predicted value E [y] close to the pixel value y of the HD pixel. In this case, a matrix Y composed of a set of true pixel values y of HD pixels serving as teacher data and a matrix E composed of a set of residuals e of predicted values E [y] for the pixel values y of HD pixels are defined. As shown in equation (4).
[0087]
[Expression 2]
[0088]
From this equation (4), a residual equation as shown in equation (5) is established.
XW = Y + E (5)
[0089]
In this case, the tap coefficient wj for obtaining the predicted value E [y] close to the pixel value y of the HD pixel can be obtained by minimizing the square error represented by the equation (6).
[0090]
[Equation 3]
[0091]
Therefore, in order to obtain the predicted value E [y] close to the pixel value y of the HD pixel, when the above-mentioned square error differentiated by the tap coefficient wj becomes 0, that is, the tap coefficient wj satisfying the equation (7). That is the optimum value.
[0092]
[Expression 4]
[0093]
Therefore, firstly, the equation (8) is established by differentiating the above-described equation (5) by the tap coefficient wj.
[0094]
[Equation 5]
[0095]
Equation (9) is obtained from Equation (7) and Equation (8) described above.
[0096]
[Formula 6]
[0097]
Further, considering the relationship among the student data xij, the tap coefficient wj, the teacher data yi, and the residual ei in the residual equation of the above-described equation (5), from the equation (9) to the equation (10), A normal equation can be obtained.
[0098]
[Expression 7]
[0099]
Note that the normal equation shown in Expression (10) defines a matrix (covariance matrix) A and a vector v as shown in Expression (11).
[0100]
[Equation 8]
[0101]
Furthermore, when the vector W is defined as shown by the above-described equation (2), the equation (10) can be expressed as shown by the equation (12).
AW = v (12)
[0102]
Each normal equation in the above-described equation (10) can be set to the same number as the number J of tap coefficients wj to be obtained by preparing a certain number of sets of student data xij and teacher data yi. Therefore, by solving the above-described equation (12) for the vector W (however, in order to solve the equation (12), the matrix A in the equation (12) needs to be regular), the optimal tap coefficient wj is obtained. Can be sought. In solving the equation (12), for example, a sweeping method (Gauss-Jordan elimination method) or the like can be used.
[0103]
As described above, using the student data and the teacher data, learning is performed to obtain an optimum tap coefficient wj for predicting the teacher data from the student data and the tap coefficient, and further, the tap coefficient wj is used. The adaptive process is to obtain the predicted value E [y] close to the teacher data y by the above-described equation (1).
[0104]
The adaptive process is not included in the SD image, but is different from, for example, a simple interpolation process in that the component included in the HD image is reproduced. That is, in the adaptive process, as long as only the above-described equation (1) is seen, it looks the same as the interpolation process using a so-called interpolation filter. Since it is obtained by learning using student data, the components included in the HD image can be reproduced. From this, the adaptive processing as described above can be referred to as processing having an image creation (resolution creation) operation.
[0105]
Therefore, the adaptive processing as described above is hereinafter referred to as resolution creation adaptive processing in order to distinguish it from other adaptive processing. A tap coefficient (tap coefficient as described above) used when performing the resolution creation adaptation process is referred to as a resolution creation coefficient.
[0106]
Furthermore, in the above-described example, the case where the spatial resolution is improved has been described as an example of the adaptive processing. However, according to the adaptive processing, various tap coefficients obtained by performing learning by changing teacher data and student data. For example, it is possible to improve S / N (Signal to Noise Ratio), improve blurring, and perform various other processes.
[0107]
That is, for example, in order to improve S / N and blur by adaptive processing, image data with a high S / N is used as teacher data, and an image (or an S / N of the teacher data is reduced) (or , Blurred image) is used as student data, and the tap coefficient may be obtained.
[0108]
Such adaptive processing is hereinafter referred to as noise removal adaptive processing in order to distinguish it from other adaptive processing. The tap coefficient used in the noise removal adaptive process is hereinafter referred to as a noise removal coefficient.
[0109]
Details of the resolution creation adaptation process and the resolution creation coefficient, and the noise removal adaptation process and the noise removal coefficient are disclosed in Japanese Patent Application No. 2001-110695 filed earlier by the present applicant.
[0110]
Further, for example, the process of converting the above-described SD signal (for example, 525i signal) into an SD signal for obtaining display images having different magnifications can be performed by adaptive processing.
[0111]
Such an adaptive process is hereinafter referred to as a resizing adaptive process in order to distinguish it from other adaptive processes. Further, the tap coefficient used in the resizing adaptation process is hereinafter referred to as a resizing coefficient.
[0112]
The details of the resizing adaptation processing and the resizing coefficient are disclosed in Japanese Patent Application No. 2000-395873 filed earlier by the present applicant.
[0113]
The outline of the class classification adaptive processing has been described above. The
[0114]
Specifically, the
[0115]
That is, the
[0116]
The
[0117]
In the example of FIG. 2, the
[0118]
The
[0119]
In the
[0120]
In other words, in the example of FIG. 2, the
[0121]
In order to further improve the function of the adaptive processing of the
[0122]
For example, the resolution creation coefficient (tap coefficient stored in the resolution creation coefficient storage unit 72) provided as the first information is set as the following tap coefficient.
[0123]
That is, for example, as class taps, as shown in FIG. 3, predetermined five
[0124]
In this case, the resolution creation coefficient provided as the second information (the tap coefficient stored in the resolution creation additional coefficient storage unit 76) can be, for example, the following tap coefficient.
[0125]
That is, for example, tap coefficients used in the class classification adaptation process using seven taps (FIG. 4) as class taps and prediction taps and using 128 classes.
[0126]
Alternatively, the resolution creation coefficient (tap coefficient stored in the resolution creation additional coefficient storage unit 76) provided as the second information may be, for example, the following tap coefficient.
[0127]
That is, for example, as a class tap and a prediction tap, seven taps (FIG. 4) are used, and a class code corresponding to a class determined by class classification processing is performed on the condition that the number of classes is 128. In the case where the last two digits (bits corresponding to the taps 92-1 and 92-2 in FIG. 4) are “01”, “10”, or “11”, the class code (class) It can be a corresponding tap coefficient.
[0128]
In this case, for example, when the last two digits of the class code corresponding to the class of the
[0129]
On the other hand, for example, the last two digits of the class code corresponding to the class of the
[0130]
Hereinafter, the tap coefficient provided by the second
[0131]
2 includes a resolution creation additional
[0132]
That is, in the example of FIG. 2, the
[0133]
Next, a processing example of the
[0134]
In step S <b> 1, the
[0135]
In step S2, the
[0136]
If it is determined in step S2 that the
[0137]
On the other hand, when it is determined in step S2 that the
[0138]
If it is determined in step S4 that the
[0139]
For example, when the
[0140]
The
[0141]
On the other hand, if it is determined in step S4 that the
[0142]
In this example, for example, when the
[0143]
The
[0144]
In step S7, the
[0145]
In step S8, the
[0146]
When it is determined that all the input signals 41 have not been processed yet, the
[0147]
When the adaptive processing for all the input signals 41 is completed (when the
[0148]
(Second Embodiment)
FIG. 6 illustrates a configuration example of the
[0149]
The
[0150]
For such a
[0151]
That is, as described above, the
[0152]
The
[0153]
Specifically, the
[0154]
Here, the addition of the function not only includes using the second function without using the original first function, but also using the original first function and the second function together. Including use. That is, in this example, for example, when the
[0155]
The processing of the
[0156]
However, steps S24 to S27 in FIG. 7 are slightly different from steps S4 to S7 in FIG. Therefore, only the processing in steps S24 to S27 in FIG. 7 will be described below.
[0157]
That is, if it is determined in step S22 that the
[0158]
When it is determined in step S24 that the noise
[0159]
Specifically, the
[0160]
In step S <b> 27, the
[0161]
On the other hand, if it is determined in step S24 that the
[0162]
Specifically, the
[0163]
In step S <b> 27, the
[0164]
(Third embodiment)
FIG. 8 illustrates a configuration example of the
[0165]
2 and 6 (the
[0166]
That is, as shown in FIG. 8, the
[0167]
The
[0168]
In this example, for example, the
[0169]
The
[0170]
That is, the
[0171]
The first and second quantization tables are not particularly limited. For example, the first quantization table is normally used. Specifically, the
[0172]
On the other hand, the second quantization table is used, for example, for a special purpose, specifically, a quantization table used when the
[0173]
In other words, in this example, the second quantization table is an encoding process for further improving the function compared to the encoding process using the first quantization table (for example, a natural image that is normally used only). Rather, the quantization table is used for a special purpose-specific encoding process such as computer graphics.
[0174]
Next, a processing example of the
[0175]
In step S <b> 41, the blocking
[0176]
In step S <b> 42, the
[0177]
In step S43, the
[0178]
If it is determined in step S43 that the
[0179]
On the other hand, when it is determined in step S43 that the
[0180]
In step S43, when it is determined that the
[0181]
Specifically, for example, when the
[0182]
When the
[0183]
On the other hand, if it is determined in step S45 that the
[0184]
Specifically, the
[0185]
In step S <b> 48, the
[0186]
In step S49, the
[0187]
In step S50, the
[0188]
If the
[0189]
When encoding processing for all input signals 41 is completed (when the
[0190]
(Fourth embodiment)
FIG. 10 illustrates a configuration example of the
[0191]
The
[0192]
However, in the
[0193]
The
[0194]
In this example, for example, the
[0195]
That is, the
[0196]
However, the
[0197]
Therefore, in order to enable such encoding (in order to add a function of such encoding processing), the
[0198]
That is, the
[0199]
Accordingly, the
[0200]
Specifically, the
[0201]
The second
[0202]
The
[0203]
The
[0204]
The
[0205]
The
[0206]
Next, processing of the
[0207]
In step S71, the
[0208]
Then, the
[0209]
In step S72, the blocking
[0210]
In step S <b> 73, the
[0211]
In step S74, the
[0212]
If it is determined in step S74 that the
[0213]
In step S80, the Huffman coding unit 156 performs Huffman coding on the supplied quantized data. Then, the Huffman encoder 156 outputs the encoded data and the
[0214]
On the other hand, if it is determined in step S74 that the
[0215]
Specifically, the
[0216]
In step S77, the quantization unit 155 uses the quantization table acquired by the
[0217]
In step S78, the
[0218]
In this example, for example, if the
[0219]
Note that the I-picture image data is image data (intra-coded image data) in which the image data for one frame is encoded as it is without using image data of other frames.
[0220]
In step S80, the Huffman encoder 156 acquires the quantized data quantized by the quantizer 155 in the process of step S77 described above, encodes it to Huffman, and outputs it as an
[0221]
On the other hand, when the
[0222]
Note that image data of a P picture is basically image data in which a difference from image data of an I picture or P picture preceding in time is encoded (interframe forward prediction encoded image data). It is. In addition, the image data of the B picture is basically an image in which the difference from the image data of the preceding I picture or P picture or the image data from the subsequent I picture or P picture is encoded. Data (inter-frame bi-directional predictive encoded image data).
[0223]
Details of the “motion compensation process” in this example are shown in the flowchart of FIG. The details of the “motion compensation process” in this example will be described with reference to FIG.
[0224]
In step S78 (shown in FIG. 11) described above, when the
[0225]
In FIG. 12, at this time, in step S91, the
[0226]
In step S92, the
[0227]
By this time, the
[0228]
In step S93, the
[0229]
The output minimum
[0230]
When the
[0231]
In step S <b> 95, the
[0232]
In step S96, the quantization unit 155 uses the quantization table (quantization table stored in the quantization table storage unit 171) acquired by the
[0233]
Returning to FIG. 11, in step S80, the Huffman encoder 156 converts the quantized data (quantized data corresponding to the minimum difference value signal 182) supplied from the quantizer 155 in the process of step S79 described above into the Huffman code. And output it as an
[0234]
In step S81, the
[0235]
If the
[0236]
As described above, in the first and second embodiments, as the
[0237]
That is, the
[0238]
For example, as another embodiment, the first information is encoded information, the second information is decoded information for decoding the encoded information, and the first signal processing device has the second information When a signal representing the first and second information is supplied by the signal processing device, even in a signal processing system that performs a decoding process for decoding the first information using the second information as the signal processing. Good.
[0239]
Alternatively, the first information is encrypted encrypted information, the second information is decryption information (for example, a key) for decrypting the encrypted information, and the first signal processing device However, when a signal representing the first and second information is supplied by the second signal processing device, the second information is used as the signal processing to perform a decoding process for decoding the first information. A simple signal processing system may be used.
[0240]
Thus, in the
[0241]
That is, as a first effect, there is no wired (bus) restriction on the additional information, and the upgraded additional information can be easily handled.
[0242]
As a second effect, since the additional information generally has a small amount of information, the conventional wireless method can be used as it is.
[0243]
As a third effect, since the basic information is not generally upgraded, it is possible to supply a large amount of information and supply it stably and safely by supplying it by wire.
[0244]
As a fourth effect, since the second information supplied wirelessly is not image or audio data but information used only for signal processing, it may cause a security problem even if it is not encrypted. Less.
[0245]
In other words, the
[0246]
(Fifth embodiment)
The first to fourth embodiments have been described above based on the
[0247]
That is, the
[0248]
Therefore, in the fifth embodiment, a signal processing apparatus having such a plurality of signal processing units will be described using a television receiver as an example.
[0249]
FIG. 13 shows a configuration example of a
[0250]
In this example, for example, the
[0251]
As shown in FIG. 13, the
[0252]
The
[0253]
Specifically, the
[0254]
For example, the size of an image from a digital still camera, a video camera, the Internet, or the like does not necessarily match the size of an SD image or HD image sent by television broadcasting. In such a case, the
[0255]
By the way, in order to capture an image signal other than an image transmitted by such a television broadcast, for example, an image of a digital still camera, into a television receiver, a recording medium ( For example, it has been realized by mounting a connection terminal corresponding to a memory stick (trademark of Sony Corporation, the present applicant).
[0256]
For example, in order to capture an image from a video camera into a television receiver, a connection terminal corresponding to a connection terminal (for example, i-Link (trademark)) or the like conventionally mounted on a video camera is installed. It was realized.
[0257]
In addition, for example, in order to capture an image from the Internet into a television receiver, conventionally, a connection terminal corresponding to an Internet connection cable (for example, a connection cable for ADSL (Asymmetrical Digital Subscriber Line)) is installed. It was realized.
[0258]
Conventionally, the connection terminals on the television receiver side are connected to the display unit (display) by wire.
[0259]
However, the recording medium of the digital still camera, the connection terminal of the video camera, the connection cable of the Internet, and the like are not unified as in a television broadcast signal (for example, an NTSC signal). Therefore, for example, when the terminal preinstalled in the television receiver is different from the terminal of a medium (for example, a digital still camera, a video camera, or the Internet) that provides a desired image, as described above, There was a third problem that it was difficult to capture an image into a television receiver.
[0260]
In addition, the replacement cycle of a television receiver is generally called about 10 years, whereas the image providing system for these media (for example, the recording medium of a digital still camera) is changed every several years. Thus, there is a fourth problem that it is difficult to cope with a new medium or a new image providing method simply by mounting only a predetermined terminal on the television receiver.
[0261]
The present applicant has obtained the following knowledge as a technique for solving the third and fourth problems peculiar to these television receivers. In other words, a specific connection terminal is not mounted in the television receiver in advance, but a necessary connection terminal can be selected as an option and can be replaced. Further, the connection from the connection terminal portion to the internal substrate of the television receiver is changed from wired to wireless. That is, in the case of a wired connection, the transmission capacity of the installed connection line cannot be exceeded, so it can be changed to an arbitrary transmission capacity by making it wireless. Furthermore, the number of channels (number of connection terminals) can be freely set.
[0262]
Based on such knowledge, the
[0263]
That is, as shown in FIG. 13, the
[0264]
The
[0265]
For example, the
[0266]
As described above, various information can be applied to the first and second information. However, considering that this example is a television receiver, for example, as described above, The information of 1 is encoded information (encoded image data), and the second information is decoded information for decoding the encoded information. In this case, the
[0267]
Alternatively, the first information is encrypted encrypted information (image data such as an encrypted pay image), and the second information is decryption information for decrypting the encrypted information (for example, Key). In this case, the
[0268]
This makes it possible to achieve the same effect as the fourth effect described above.
[0269]
Further, since the
[0270]
For example, when the
[0271]
For example, when the
[0272]
For example, when the
[0273]
As described above, by providing the type of connector defined by a predetermined standard as the wired interface 216-2, the
[0274]
Further, as shown in FIG. 14, the
[0275]
Further, it is possible to provide a connection terminal 220 including an
[0276]
Also in this case, the third and fourth problems described above can be solved.
[0277]
Note that the
[0278]
In addition, the
[0279]
Thus, the user can easily connect the
[0280]
Next, a processing example of the
[0281]
As shown in FIG. 13, for example, it is assumed that the
[0282]
In this example, for example, the first
[0283]
First, in step S101, the
[0284]
Specifically, in this example, the
[0285]
In step S102, the
[0286]
Specifically, in this example, the
[0287]
At this time, the
[0288]
In step S103, the
[0289]
In step S104, the
[0290]
In step S105, the
[0291]
Thus, since the
[0292]
The series of processes described above can be executed by hardware, but can also be executed by software.
[0293]
In this case, the various signal processing devices described above and the signal processing device corresponding to the algorithm bay are configured by, for example, a personal computer as shown in FIG.
[0294]
As shown in FIG. 16, a CPU (Central Processing Unit) 301 performs various processes according to a program recorded in a ROM (Read Only Memory) 302 or a program loaded from a
[0295]
The
[0296]
Connected to the input /
[0297]
A
[0298]
When a series of processing is executed by software, a program constituting the software executes various functions by installing a computer incorporated in dedicated hardware or various programs. For example, a general-purpose personal computer is installed from a network or a recording medium.
[0299]
As shown in FIG. 16, the recording medium is distributed to provide a program to the user separately from the apparatus main body, and includes a magnetic disk (including a floppy disk) on which the program is recorded, an optical disk (CD- ROM (Compact Disk-Read Only Memory), DVD (including Digital Versatile Disk)), magneto-optical disk (including MD (Mini-Disk)), or removable recording medium (package media) 311 made of semiconductor memory, etc. In addition, the program is configured by a
[0300]
In the present specification, the step of describing the program recorded on the recording medium is not limited to the processing performed in chronological order according to the order, but is not necessarily performed in chronological order, either in parallel or individually. The process to be executed is also included.
[0301]
Further, in the present specification, the system represents the entire apparatus including a plurality of apparatuses and processing units.
[0302]
【The invention's effect】
As described above, according to the signal processing system and method of the present invention, it is possible to realize a system capable of changing the contents of signal processing. In particular, even if information that changes the content of signal processing is updated, it is possible to realize a system that can provide the updated information while ensuring confidentiality.
[0303]
According to the first signal processing apparatus and method, recording medium, and program of the present invention, the contents of signal processing can be changed. In particular, the change can be easily performed and confidentiality can be ensured.
[0304]
According to the second signal processing apparatus and method, recording medium, and program of the present invention, the contents of signal processing can be changed. In particular, the change can be easily performed and confidentiality can be ensured.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a configuration example of a signal processing system to which the present invention is applied.
2 is a block diagram illustrating a configuration example of the signal processing system of FIG. 1 when performing class classification adaptive processing. FIG.
FIG. 3 is a diagram illustrating an example of taps used in class classification adaptation processing.
FIG. 4 is a diagram illustrating an example of taps used in class classification adaptation processing.
FIG. 5 is a flowchart for explaining processing of the signal processing system of FIG. 2;
6 is a block diagram showing another configuration example of the signal processing system of FIG. 1 when performing class classification adaptive processing. FIG.
7 is a flowchart for explaining processing of the signal processing system of FIG. 6;
8 is a block diagram illustrating a configuration example of the signal processing system in FIG. 1 when performing an encoding process. FIG.
9 is a flowchart for explaining processing of the signal processing system of FIG. 8;
10 is a block diagram showing another configuration example of the signal processing system of FIG. 1 when performing encoding processing. FIG.
11 is a flowchart for explaining processing of the signal processing system of FIG. 10;
12 is a flowchart illustrating details of motion compensation processing of the signal processing system of FIG.
FIG. 13 is a block diagram illustrating a configuration example of a television receiver to which the present invention is applied.
14 is a diagram illustrating an external device connected to a wired interface or a wireless interface of the television receiver of FIG.
15 is a flowchart for explaining processing of the television receiver in FIG. 13. FIG.
FIG. 16 is a block diagram showing another configuration example of the signal processing apparatus to which the present invention is applied.
[Explanation of symbols]
DESCRIPTION OF
Claims (33)
前記第1の信号処理装置に信号を供給する第2の信号処理装置とからなる信号処理システムにおいて、
前記第2の信号処理装置は、前記第1の信号処理装置の前記信号処理で利用する第1の情報を表す信号を、前記第1の信号処理装置に有線で供給する有線供給手段と、
前記第1の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、前記第1の信号処理装置に無線で供給する無線供給手段と
を備え、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理システム。A first signal processing device that performs predetermined signal processing on the input signal and outputs the signal;
In a signal processing system comprising a second signal processing device for supplying a signal to the first signal processing device,
The second signal processing device includes a wired supply unit that supplies a signal representing the first information used in the signal processing of the first signal processing device to the first signal processing device by wire.
Wireless supply means for wirelessly supplying a signal representing second information for changing the content of the signal processing of the first signal processing device to the first signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A signal processing system.
ことを特徴とする請求項1に記載の信号処理システム。The signal processing system according to claim 1, wherein the second signal processing device is formed as a substrate attached to the first signal processing device.
ことを特徴とする請求項1に記載の信号処理システム。The signal processing system according to claim 1, wherein the second information is information that improves a function of the signal processing based on the first information.
ことを特徴とする請求項1に記載の信号処理システム。The signal processing system according to claim 1, wherein the second information is information that adds a function of the signal processing based on the first information.
前記第2の情報は、前記クラス分類適応処理で利用する、前記第1の機能とは異なる第2の機能に対応する係数である
ことを特徴とする請求項4に記載の信号処理システム。 The first information is a coefficient corresponding to a first function used in the class classification adaptation process,
5. The signal processing system according to claim 4 , wherein the second information is a coefficient corresponding to a second function different from the first function, which is used in the classification adaptation process.
ことを特徴とする請求項1に記載の信号処理システム。The signal processing system according to claim 1, wherein the wired supply unit of the second signal processing device includes a first connector that is physically and electrically connected to the first signal processing device. .
ことを特徴とする請求項6に記載の信号処理システム。The second signal processing device is formed as a substrate attached to the first signal processing device, the substrate is housed in a package, and the first connector is disposed in the package. The signal processing system according to claim 6 .
前記第2のコネクタとして、複数種類の前記第1のコネクタのそれぞれに対応する複数種類のコネクタが設けられている
ことを特徴とする請求項6に記載の信号処理システム。The first signal processing device has a second connector connected to the first connector,
The signal processing system according to claim 6 , wherein a plurality of types of connectors corresponding to a plurality of types of the first connectors are provided as the second connectors.
ことを特徴とする請求項8に記載の信号処理システム。The signal processing system according to claim 8 , wherein the second connector is detachable from the first signal processing device, and includes a type of connector defined by a predetermined standard.
前記第2の信号処理装置の前記無線供給手段は、前記テレビジョン受像機に対して、画像または音声信号を無線でさらに供給する
ことを特徴とする請求項1に記載の信号処理システム。The first signal processing device is a television receiver;
The signal processing system according to claim 1, wherein the wireless supply unit of the second signal processing device further supplies an image or audio signal wirelessly to the television receiver.
前記第1の信号処理装置は、入力した信号に、所定の信号処理を施して出力し、
前記第2の信号処理装置は、
前記第1の信号処理装置の前記信号処理で利用する第1の情報を表す信号を、前記第1の信号処理装置に有線で供給し、
前記第1の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、前記第1の信号処理装置に無線で供給し、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理方法。In the signal processing method of the signal processing system including the first and second signal processing devices,
The first signal processing device performs predetermined signal processing on the input signal and outputs it,
The second signal processing device includes:
Supplying a signal representing the first information used in the signal processing of the first signal processing device to the first signal processing device in a wired manner;
A signal representing second information for changing the content of the signal processing of the first signal processing device is wirelessly supplied to the first signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The signal processing method characterized in that the second information is a second coefficient used in the class classification adaptation process, which is different from the first coefficient .
他の信号処理装置により有線で送信された、前記信号処理で利用する第1の情報を表す信号を有線で受信する有線受信手段と、
前記他の信号処理装置により無線で送信された、前記信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信手段と
を備え、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理装置。In a signal processing apparatus that performs predetermined signal processing on an input signal and outputs the signal,
Wired receiving means for receiving, by wire, a signal representing the first information used in the signal processing, transmitted by wire from another signal processing device;
Wireless reception means for wirelessly receiving a signal representing the second information for changing the content of the signal processing transmitted wirelessly by the other signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A signal processing apparatus.
ことを特徴とする請求項12に記載の信号処理装置。The signal processing apparatus according to claim 12 , wherein the second information is information that improves a function of the signal processing based on the first information.
ことを特徴とする請求項12に記載の信号処理装置。The signal processing apparatus according to claim 12 , wherein the second information is information for adding a function of the signal processing based on the first information.
前記第2の情報は、前記クラス分類適応処理で利用する、前記第1の機能とは異なる第2の機能に対応する係数である
ことを特徴とする請求項14に記載の信号処理装置。 The first information is a coefficient corresponding to a first function used in the class classification adaptation process,
The signal processing apparatus according to claim 14 , wherein the second information is a coefficient corresponding to a second function different from the first function, which is used in the classification adaptation process.
前記第2のコネクタが前記他の信号処理装置の前記第1のコネクタに接続されている場合、前記他の信号処理装置により送信される前記第1の情報を、前記第1および前記第2のコネクタを介して受信する
ことを特徴とする請求項14に記載の信号処理装置。The wired receiving means has a first connector that the other signal processing device has and a second connector that is physically and electrically connected,
When the second connector is connected to the first connector of the other signal processing device, the first information transmitted by the other signal processing device is changed to the first and second It receives via a connector. The signal processing apparatus of Claim 14 characterized by the above-mentioned.
ことを特徴とする請求項16に記載の信号処理装置。The signal processing device according to claim 16 , wherein a plurality of types of connectors corresponding to each of a plurality of types of the first connectors are provided as the second connector.
ことを特徴とする請求項17に記載の信号処理装置。The signal processing apparatus according to claim 17 , wherein the second connector is detachable from the signal processing apparatus, and includes a type of connector defined by a predetermined standard.
前記無線受信手段は、前記他の信号処理装置により無線で送信された画像または音声信号を無線でさらに受信する
ことを特徴とする請求項12に記載の信号処理装置。The signal processing device is a television receiver,
The signal processing apparatus according to claim 12 , wherein the wireless reception unit further receives an image or audio signal transmitted wirelessly by the other signal processing apparatus wirelessly.
他の信号処理装置により有線で送信された、前記信号処理で利用する第1の情報を表す信号を有線で受信する有線受信ステップと、
前記他の信号処理装置により無線で送信された、前記信号処理の内容を変更するための第2の情報を表す信号を無線で受信する無線受信ステップと
を含み、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理方法。In a signal processing method of a signal processing device that performs predetermined signal processing on an input signal and outputs the signal,
A wired reception step of receiving a signal representing the first information used in the signal processing, which is transmitted by wire from another signal processing device;
A wireless reception step of wirelessly receiving a signal representing the second information for changing the content of the signal processing transmitted wirelessly by the other signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
And a signal processing method.
他の信号処理装置により有線で送信された、前記信号処理で利用する第1の情報を表す信号を有線で受信するように制御する有線受信制御ステップと、
前記他の信号処理装置により無線で送信された、前記信号処理の内容を変更するための第2の情報を表す信号を無線で受信するように制御する無線受信制御ステップと
を含み、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。A computer program for controlling a signal processing apparatus that performs predetermined signal processing on an input signal and outputs the signal,
A wired reception control step for controlling to receive a signal representing the first information used in the signal processing transmitted by wire from another signal processing device;
A radio reception control step for controlling to wirelessly receive a signal representing the second information for changing the content of the signal processing transmitted by the other signal processing device ,
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A recording medium on which a computer-readable program is recorded.
他の信号処理装置により有線で送信された、前記信号処理で利用する第1の情報を表す信号を有線で受信するように制御する有線受信制御ステップと、
前記他の信号処理装置により無線で送信された、前記信号処理の内容を変更するための第2の情報を表す信号を無線で受信するように制御する無線受信制御ステップと
を実行させ、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とするプログラム。To a computer that controls a signal processing apparatus that performs predetermined signal processing and outputs the input signal,
A wired reception control step for controlling to receive a signal representing the first information used in the signal processing transmitted by wire from another signal processing device;
A wireless reception control step for performing control so as to wirelessly receive a signal representing the second information for changing the content of the signal processing transmitted wirelessly by the other signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A program characterized by that.
前記他の信号処理装置に対して、前記他の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、無線で供給する無線供給手段と
を備え、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理装置。Wired supplying a signal representing the first information used in the signal processing of the other signal processing device by wire to another signal processing device that performs predetermined signal processing on the input signal and outputs it Supply means;
Wireless supply means for wirelessly supplying a signal representing second information for changing the content of the signal processing of the other signal processing device to the other signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A signal processing apparatus.
ことを特徴とする請求項23に記載の信号処理システム。The signal processing system according to claim 23 , wherein the signal processing device is formed as a substrate to be attached to the other signal processing device.
ことを特徴とする請求項23に記載の信号処理装置。The signal processing apparatus according to claim 23 , wherein the second information is information that improves a function of the signal processing based on the first information.
ことを特徴とする請求項23に記載の信号処理装置。The signal processing apparatus according to claim 23 , wherein the second information is information that adds a function of the signal processing based on the first information.
前記第2の情報は、前記クラス分類適応処理で利用する、前記第1の機能とは異なる第2の機能に対応する係数である
ことを特徴とする請求項26に記載の信号処理装置。 The first information is a coefficient corresponding to a first function used in the class classification adaptation process,
27. The signal processing apparatus according to claim 26 , wherein the second information is a coefficient corresponding to a second function different from the first function, which is used in the classification adaptation process.
ことを特徴とする請求項23に記載の信号処理装置。The signal processing apparatus according to claim 23 , wherein the wired supply unit includes a connector that is physically and electrically connected to the other signal processing apparatus.
ことを特徴とする請求項28に記載の信号処理装置。29. The signal processing device according to claim 28 , wherein the signal processing device is formed as a substrate to be attached to the other signal processing device, the substrate is accommodated in a package, and the connector is disposed in the package. The signal processing apparatus as described.
前記無線供給手段は、前記テレビジョン受像機に対して、画像または音声信号を無線でさらに供給する
ことを特徴とする請求項23に記載の信号処理装置。The other signal processing device is a television receiver,
The signal processing apparatus according to claim 23 , wherein the wireless supply unit further supplies an image or audio signal wirelessly to the television receiver.
入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、前記他の信号処理装置の前記信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、
前記他の信号処理装置に対して、前記他の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、無線で供給する無線供給ステップと
を含み、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とする信号処理方法。In the signal processing method of the signal processing device,
Wired supplying a signal representing the first information used in the signal processing of the other signal processing device by wire to another signal processing device that performs predetermined signal processing on the input signal and outputs it A supply step;
Wirelessly supplying a signal representing second information for changing the content of the signal processing of the other signal processing device to the other signal processing device ,
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
And a signal processing method.
入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、前記他の信号処理装置の前記信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、
前記他の信号処理装置に対して、前記他の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、無線で供給する無線供給ステップと
を含み、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。A computer program for controlling a signal processing device,
Wired supplying a signal representing the first information used in the signal processing of the other signal processing device by wire to another signal processing device that performs predetermined signal processing on the input signal and outputs it A supply step;
Wirelessly supplying a signal representing second information for changing the content of the signal processing of the other signal processing device to the other signal processing device ,
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A recording medium on which a computer-readable program is recorded.
入力した信号に、所定の信号処理を施して出力する他の信号処理装置に対して、前記他の信号処理装置の前記信号処理で利用する第1の情報を表す信号を、有線で供給する有線供給ステップと、
前記他の信号処理装置に対して、前記他の信号処理装置の前記信号処理の内容を変更するための第2の情報を表す信号を、無線で供給する無線供給ステップと
を実行させ、
前記信号処理は、クラス分類適応処理であり、
前記第1の情報は、前記クラス分類適応処理で利用する第1の係数であり、
前記第2の情報は、前記第1の係数とは異なる、前記クラス分類適応処理で利用する第2の係数である
ことを特徴とするプログラム。To the computer that controls the signal processor,
Wired supplying a signal representing the first information used in the signal processing of the other signal processing device by wire to another signal processing device that performs predetermined signal processing on the input signal and outputs it A supply step;
A wireless supply step of wirelessly supplying a signal representing second information for changing the content of the signal processing of the other signal processing device to the other signal processing device ;
The signal processing is classification classification adaptive processing,
The first information is a first coefficient used in the classification adaptation process,
The second information is a second coefficient used in the classification adaptation process, which is different from the first coefficient.
A program characterized by that.
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002143039A JP4103070B2 (en) | 2002-05-17 | 2002-05-17 | Signal processing system and method, signal processing apparatus and method, recording medium, and program |
US10/439,150 US7694326B2 (en) | 2002-05-17 | 2003-05-15 | Signal processing system and method, signal processing apparatus and method, recording medium, and program |
KR1020030031193A KR100966192B1 (en) | 2002-05-17 | 2003-05-16 | Signal processing system and method, signal processing device and method, recording medium, and program |
US12/711,548 US8037509B2 (en) | 2002-05-17 | 2010-02-24 | Signal processing system and method, signal processing apparatus and method, recording medium, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2002143039A JP4103070B2 (en) | 2002-05-17 | 2002-05-17 | Signal processing system and method, signal processing apparatus and method, recording medium, and program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007336690A Division JP4569844B2 (en) | 2007-12-27 | 2007-12-27 | Signal processing system, signal processing apparatus and method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2003332913A JP2003332913A (en) | 2003-11-21 |
JP4103070B2 true JP4103070B2 (en) | 2008-06-18 |
Family
ID=29703153
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002143039A Expired - Fee Related JP4103070B2 (en) | 2002-05-17 | 2002-05-17 | Signal processing system and method, signal processing apparatus and method, recording medium, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4103070B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005190083A (en) * | 2003-12-25 | 2005-07-14 | Sony Corp | Device and method for controlling functional block, functional block, information signal processor, program and medium having same program recorded thereon |
JP4544203B2 (en) * | 2006-06-02 | 2010-09-15 | セイコーエプソン株式会社 | Information transmission method, electronic device, and semiconductor integrated circuit |
-
2002
- 2002-05-17 JP JP2002143039A patent/JP4103070B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2003332913A (en) | 2003-11-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10614593B2 (en) | Image processing device and method | |
RU2409005C2 (en) | Method of scalable coding and decoding of video signal | |
US8037509B2 (en) | Signal processing system and method, signal processing apparatus and method, recording medium, and program | |
US20120076203A1 (en) | Video encoding device, video decoding device, video encoding method, and video decoding method | |
JP4114885B2 (en) | Image encoding apparatus, method, and program | |
US20030095603A1 (en) | Reduced-complexity video decoding using larger pixel-grid motion compensation | |
MX2013013764A (en) | Image processing device and image processing method. | |
JPH07264580A (en) | Method for transmitting video signal and video signal transmitter and receiver | |
JP2001145113A (en) | Device and method for image information conversion | |
JP3703299B2 (en) | Video coding method, system and computer program product for optimizing picture center image quality | |
US6188730B1 (en) | Highly programmable chrominance filter for 4:2:2 to 4:2:0 conversion during MPEG2 video encoding | |
JPH11266457A (en) | Method and device for picture processing and recording medium | |
JP2001258004A (en) | Image coder and image decoder and its method | |
JPH07212761A (en) | Hierarchical coder and hierarchical decoder | |
WO2010100991A1 (en) | Movie stream decoding apparatus, control method of same, program, and recording medium | |
JP2007019995A (en) | Image processing device, method, and program | |
JP4103070B2 (en) | Signal processing system and method, signal processing apparatus and method, recording medium, and program | |
JP4569844B2 (en) | Signal processing system, signal processing apparatus and method, and program | |
JP2003061091A (en) | Method and apparatus for up-sampling compressed bitstream | |
JP2000036963A (en) | Image coder, image coding method and image decoder | |
KR20150045951A (en) | Receiving device, transmission device, and image transmission method | |
JP2006525731A (en) | Multi-layer coding to support transition to new standards | |
JP2006054760A (en) | Image processor and image processing method | |
JP4100067B2 (en) | Image information conversion method and image information conversion apparatus | |
JP4552263B2 (en) | Digital signal processing apparatus and method, and digital image signal processing apparatus and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050427 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071102 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071107 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080229 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080313 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110404 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120404 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120404 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130404 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130404 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140404 Year of fee payment: 6 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |