JP2004304390A - Signal processor - Google Patents

Signal processor Download PDF

Info

Publication number
JP2004304390A
JP2004304390A JP2003093117A JP2003093117A JP2004304390A JP 2004304390 A JP2004304390 A JP 2004304390A JP 2003093117 A JP2003093117 A JP 2003093117A JP 2003093117 A JP2003093117 A JP 2003093117A JP 2004304390 A JP2004304390 A JP 2004304390A
Authority
JP
Japan
Prior art keywords
signal processing
data
frame memory
line
overdrive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003093117A
Other languages
Japanese (ja)
Other versions
JP4322533B2 (en
Inventor
Junichi Maruyama
純一 丸山
Shinya Iguchi
慎也 井口
Yukari Katayama
ゆかり 片山
Kenichi Ono
健一 小野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Renesas Technology Corp
Original Assignee
Renesas Technology Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Renesas Technology Corp filed Critical Renesas Technology Corp
Priority to JP2003093117A priority Critical patent/JP4322533B2/en
Publication of JP2004304390A publication Critical patent/JP2004304390A/en
Application granted granted Critical
Publication of JP4322533B2 publication Critical patent/JP4322533B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Liquid Crystal (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Television Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a signal processor capable of reducing the number of frame memories by making frame memories to be used for IP conversion adapted to motion and an overdrive in common. <P>SOLUTION: In the case of executing the IP conversion adapted to motion, the gradation value of a pixel at the same position of the previous field necessary for an overdrive operation is simultaneously operated to thereby reduce a data transfer amount to the frame memories, reducing the number of the frame memories. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、液晶素子や有機EL素子プラズマ等を用いた表示装置向けの映像信号を処理する信号処理装置に係わり、特に前記信号処理装置において、インターレース形式の映像信号をプログレッシブ形式の映像信号に変換するインターレース−プログレッシブ変換や、表示素子の応答速度を向上させるオーバードライブ制御に関する。
【0002】
【従来の技術】
インターレース形式の映像信号を液晶パネル等のプログレッシブ形式で映像表示を行なう表示装置へ表示する場合、インターレース形式の映像信号をプログレッシブ形式の映像信号に変換するインターレース−プログレッシブ変換を実施する必要がある。従来、インターレース−プログレッシブ変換の方法としては、例えば、特開2000−152246号公報に開示されているように、補間対象と異なったフレームまたはフィールドの画像信号から形成される画像間補間信号と、補間対象と同じフレームまたはフィールドの画像信号から形成される画像内補間信号とを混合する手段が知られている。ここで、画像間補間信号の形成にはフィールド遅延器を使用する。
【0003】
また、液晶表示装置では、液晶が電圧変化に応答する応答時間が大きいことによる残像現象を解決するために、例えば、特開2001−125067号公報に開示されているように、フレームメモリを使用したデータ強調手段を用いて、表示データに変化があった場合、変化をより大きくするように表示データを強調して変換することで、応答時間を短縮する手段が知られている。
【0004】
【特許文献1】
特開2000−152246号公報
【特許文献2】
特開2001−125067号公報
【0005】
【発明が解決しようとする課題】
液晶素子などを用いた表示装置において、動きに適応したインターレース−プログレッシブ変換(以後、IP変換と呼ぶ)を実施する場合には、例えばフレームメモリなどのフィールド遅延器を使用する必要がある。また、前記のようなデータ強調手段(以後、オーバードライブと呼ぶ)を実施する場合にもフレームメモリを使用する。つまり、IP変換とオーバードライブを別個に実施しようとした場合、2つのフレームメモリが必要となり、表示装置の原価向上につながってしまう。
【0006】
本発明の目的は、動きに適応したIP変換とオーバードライブとに使用するフレームメモリを共通化することで、フレームメモリ数を削減する信号処理装置を提供することである。
【0007】
【課題を解決するための手段】
本発明は、表示装置向けの信号処理装置において、タイミング制御部と、フィールド判定部と、フレームメモリ制御部と、ラインメモリと、ラインメモリ制御部と、ラインメモリ選択部と、オーバードライブ対応IP変換部と、オーバードライブ部と、を設け、前記フィールド判定部には、入力映像信号のデータが奇数フィールドのデータであるか、偶数フィールドのデータであるかを判別する手段と、入力映像信号のデータが奇数ラインのデータであるか、偶数ラインのデータであるかを判別する手段と、を設けた。前記オーバードライブ対応IP変換部には、前記フィールド判定部に判別データを手がかりに、フレームメモリを使用することで、動きに適応したIP変換を行なうための動き検知IP変換部を設け、更に、補間対象となる画素の前フィールドの階調値を演算によって求める手段に加え、オーバードライブ用に、同時に、同画素の前フィールドにおけるデータを演算するための手段を設けた。また、前記オーバードライブ部は、前記現フィールド階調値と前記前フィールド階調値に基づいてオーバードライブ制御を施すための補正値決定手段を設け、現フィールド階調値に前記補正値を利用したオーバードライブ制御を加えるための手段を設ける。
【0008】
従って、前記動きに適応したIP変換とオーバードライブの2つの演算を別個に処理するよりも、フレームメモリへのアクセス量を低減することができ、その結果、上記信号処理装置に接続するフレームメモリのチップ数を削減できる効果がある。
【0009】
【発明の実施の形態】
以下、本発明の一実施例を図面を用いて詳細に説明する。
【0010】
前述のように、液晶素子等を用いた表示装置において、例えばテレビ映像などの動画を表示する場合、画質を向上させるためには、IP変換と、オーバードライブを搭載することが有効である。
【0011】
IP変換は、インターレース(飛び越し走査)信号を、プログレッシブ(順次走査)信号に変換する機能である。例えばNTSC,PAL,D1,D3等のインターレース形式の映像信号を、液晶パネル等のプログレッシブ形式で映像表示を行なう表示装置へ表示する場合に適用する。
【0012】
一方、オーバードライブ機能は、液晶パネルの応答速度を向上させることで動画を表示した際の動画ぼやけを軽減する機能である。
【0013】
本発明は、液晶表示装置等を用いた表示装置向けに、IP変換とオーバードライブの2つの機能を実現する信号処理装置を提供する。
【0014】
本発明の信号処理装置の動作を説明する前に、IP変換とオーバードライブについて概要を説明する。
【0015】
まず、IP変換について説明する。
【0016】
プログレッシブ信号並びにインターレース信号は共に映像信号の形式である。
【0017】
図1にプログレッシブ信号を、図2にインターレース信号を構成するデータの位置関係についての概要図をそれぞれ示す。
【0018】
プログレッシブ信号は、図1に示すように、あるサンプリング時刻における一画面分のデータを一つのフレームとし,同一フレーム内の全てのデータを画面の左上から右下に向かって水平ライン単位に順次走査することで構成する信号である。例えば映像信号規格のD2,D4などの信号では1秒間に約60枚のフレームから構成する。
【0019】
一方、インターレース信号は、図2に示すように、サンプリング時刻毎に交互に奇数フィールドと偶数フィールドを構成し、奇数フィールドでは奇数番号の水平ラインのみ、偶数フィールドでは偶数番号の水平ラインのみを、画面の左上から右下に向かって水平ライン単位に飛び越し走査することで構成する信号である。例えばNTSCやD1,D3などの信号では、1秒間に奇数フィールドと偶数フィールドをそれぞれ約30枚づつ、合計約60フィールドから構成する。
【0020】
IP変換とは、インターレース信号に含まれていない信号、すなわち奇数フィールドの偶数ライン並びに偶数フィールドの奇数ラインのデータを補間する処理である。
【0021】
本発明では、IP変換の方法として、画質に優れた動き検知IP変換を行なう。次に、動き検知IP変換について述べる。
【0022】
IP変換の方法としては、例えば同一フィールド内のラインデータで補間するフィールド内補間方式と、複数のフィールド間のデータを参照し、フィールド間でデータを補間するフィールド間補間方式がある。
【0023】
図3に、IP変換による補間の対象となるラインと、補間の参照データとして使用するラインの相互の位置関係についての概略図を示す。
【0024】
フィールド内補間では、例えば図3に示すラインC301に含まれる画素の階調値を求める場合、ラインC301の上下のラインU302並びにL303のデータを用いて補間する。このときの補間方法は、例えばラインU302のデータをそのまま使用したり(ラインダブラ方式)、ラインU302の階調値とL303の階調値の平均値を使用したり(直線補間方式)することができる。いずれの場合もオリジナルのプログレッシブ信号に比べ、垂直方向の解像度の低下が発生する。
【0025】
フィールド間補間では、例えば図3に示すラインC301の値を求める場合、ラインCの前後のフィールドの同位置のラインP304並びにN305のデータを用いて補間する。このときの補間方法は、例えばラインN305のデータをそのまま使用したり、ラインP304の階調値とラインN305の階調値の平均値を使用したりすることができる。フィールド間補間では、フィールド内補間と異なり垂直方向の解像度の低下は発生しない。しかし、サンプリング時刻の異なる画像を1ラインおきに合成することとなるため、ラインP304とラインN305の期間で画像に動きがある場合、水平方向に縞模様のノイズが発生することがある。
【0026】
以上のように、フィールド内補間とフィールド間補間の一方だけでは解像度の低下やノイズの発生による画質の劣化が発生してしまう。
【0027】
動き検知IP変換は、これらの問題を解決するために、動画に強いフィールド内補間と静止画に強いフィールド間補間の長所を組合せた方式であり、画像の動きを検知し、動きのある部分では、フィールド内補間を、動きのない部分ではフィールド間補間を使用する方式であり、画像に合せて適宜最適なデータを選択できるため高画質な画像が得られる。
【0028】
以上、動き検知IP変換について説明した。次にオーバードライブについて説明する。
【0029】
オーバードライブは、液晶パネルの応答速度を向上させ、動画ぼやけを改善する機能である。
【0030】
フレームメモリを使用して、フレーム間で同位置画素の階調差分を検出し、階調に変化があった画素には変化量に応じた補正値を原階調値に加算することにより、液晶パネルの応答時間を短縮することができる。
【0031】
図5に、オーバードライブによる表示素子の輝度応答時間の短縮の概略図を示す。
【0032】
特定画素において、jフレームにおいて目的とする輝度値を得るために、j−1フレームの輝度値から輝度値を変化させるために、j−1フレームの入力階調値とjフレームの入力階調値の差分値から求めた階調補正値を、jフレームの階調データに加えた場合の例を示した。
【0033】
オーバードライブによる補正がない場合、応答時間が1フレーム期間を超えてしまうため、jフレームの目的輝度に到達するのに複数フレーム期間を要する。この応答期間及び、波形の鈍りによる実効輝度不足が動画ぼけとして認識されることとある。一方オーバードライブを施すと、目的輝度に到達するまでの応答時間が短縮し、動画ぼけ現象を改善できる。
【0034】
図4に、オーバードライブに使用するラインの相互の位置関係の概要図を示す。
【0035】
同図中の位置Cのライン401に含まれる画素の階調値I(C)に対し、オーバードライブを施した後の階調値I (O)は,前フレームの同位置の画素P402の階調値I(P)を用いて,例えば、式(1)のように計算できる。
【0036】
I(O) = I(C) + α(I(C) I(P)) …(1)
ここでαはオーバードライブ係数であり,応答速度が向上するように液晶パネルの特性に応じて適切な値を決定する。
【0037】
以上、動き検知IP変換とオーバードライブについて述べたが、このように動き検知IP変換とオーバードライブは演算に複数のフィールドのデータを必要とするため、フィールドデータを格納するためのフレームメモリをそれぞれ使用する必要がある。
【0038】
そのため、従来の液晶素子を用いた表示装置の構成分担は,例えば図6に示す構成となっていた。
【0039】
表示装置601は、例えばインターフェースモジュール602と液晶パネルモジュール603から構成する。
【0040】
インターフェースモジュール602は、例えば、チューナー604、入力端子605、606,607、Y/C分離装置608、RGB変換装置608、信号処理装置610、フレームメモリ611から構成する。
【0041】
チューナー604は、例えばテレビ放送用電波から選局を行なって、例えばNTSC信号を取り出す機能を有する。
【0042】
入力端子605,606,607は、例えばビデオデッキやDVDプレーヤー、PC(パーソナルコンピュータ)などの外部装置(不図示)から各種映像信号を入力するための端子である。例えば、コンポジット端子、S端子、D端子、D−Sub端子、DVI端子、コンポーネント端子等である。図では3つの入力端子を設ける構成例を示したが、異なった構成としても良い。
【0043】
Y/C分離装置608は、チューナ604や入力端子605,606,607から入力された信号が、例えばNTSC信号などのように、輝度信号と色信号が合成された信号であった場合に、輝度信号と色信号を分離する機能を有する。
【0044】
RGB変換装置609は、入力された映像信号が輝度信号と色信号から構成される信号であった場合に、入力信号を、R成分、G成分、B成分のそれぞれの階調値データに変換する機能を有する。
【0045】
信号処理装置610は、入力された信号をIP変換する手段617を少なくとも有する。
【0046】
フレームメモリ611は、信号処理装置610で実行するIP変換手段617に必要なフレームデータを格納するために使用する。
【0047】
液晶パネルモジュール603は、例えばタイミング制御部612、フレームメモリ613、ドライバ614、615、液晶パネル616などから構成する。
【0048】
ドライバ614,615は液晶パネル616の所定の液晶素子を駆動するために、所定の電圧を印加する機能を有する。
【0049】
タイミング制御部612は、所定のタイミングでドライバ614,615に入力データを転送する機能を有する。また、入力されたデータにオーバードライブによるデータ変調を加えるためのオーバードライブ手段618を有する。
【0050】
フレームメモリ613は、タイミング制御部612で実行するオーバードライブ手段618に必要なフレームデータを格納するために使用する。
【0051】
ここに例を示すように,従来IP変換手段617はインターフェースモジュール602の信号処理装置610において実装し、オーバードライブ手段618は液晶パネルモジュール603のタイミング制御部612において実装するというように、2つのフレームメモリ611,613を別々のモジュールに個別に搭載していたため、部品点数が増加してシステムの原価向上につながっていた。
【0052】
そこで本発明では、IP変換用のフレームメモリとオーバードライブ用のフレームメモリを共通化することで、部品点数を減らして表示装置の原価低減を図った。
【0053】
図7は、本発明の一実施例を適用した表示装置701の構成例を示す図である。
【0054】
図6の構成では、フレームメモリが611と613の2つあることに対し、図7の構成では1つのフレームメモリ711のみを使用する点が異なる。
【0055】
また、図6の構成では、IP変換手段617はインターフェースモジュール612の信号処理装置610において実装し、オーバードライブ手段618は液晶パネルモジュール613において実装していたのに対し、図7の構成では、IP変換手段717とオーバードライブ手段718の2つをインターフェースモジュール702の信号処理装置718において実装する点が異なる。
【0056】
しかし、図7の構成において、単純にフレームメモリを共通化しただけでは、1つのフレームメモリ711に対して、IP変換手段によるメモリアクセスと、オーバードライブによるメモリアクセスの2つのメモリアクセスが同時に発生することとなり、入力映像信号と出力映像信号の組合せによっては、単位時間あたりのデータ転送量が大きくなり、フレームメモリの動作可能速度を超過してしまうケースが生じる可能性がある。
【0057】
そこで本発明では、図7に示したフレームメモリの共通化に加え、IP変換とオーバードライブを連携させて処理することでフレームメモリへのデータ転送量を低減する。データ転送量を低減することにより、フレームメモリを削減するすることが可能となった。
【0058】
次にデータ転送量の削減方法について説明する。
【0059】
本方式では、動き検知IP変換とオーバードライブ双方の処理で、使用するラインに共通性があることを利用し、双方の演算処理を連携させる。動き検知IP変換の処理の一部をオーバードライブ用の演算のために利用することで、データ転送量を削減する。
【0060】
図8並びに図9は、本方式おいて動き検知IP変換とオーバードライブでそれぞれ使用するラインの相互の位置関係の概略を示す図である。
【0061】
ここで、階調値の演算方法は (1) 奇数フィールドの奇数ラインもしくは、偶数フィールドの偶数ラインを演算する場合と、 (2) 奇数フィールドの偶数ラインもしくは、偶数フィールドの奇数ラインを演算する場合と、の2通りの場合に分けることができる。
【0062】
図8は、奇数フィールドの奇数ラインもしくは偶数フィールドの偶数ラインを表示する場合の演算方法の例である。
【0063】
ラインC801に含まれる画素の階調値を計算する場合、現フィールドの階調値は、該当する実データが入力映像信号中に既に存在するので、補間処理を行なわずにそのまま使用できる。一方、オーバードライブに必要な、前フィールドのラインP802の画素の階調値は,入力映像信号中に実データが存在しないため、前述の動き検知IP変換により、U’803,L’804,P’805,C801の位置のラインに含まれる画素から補間する。
【0064】
図9は、奇数フィールドの偶数ラインもしくは偶数フィールドの奇数ラインを表示する場合の演算方法の例である。
【0065】
ラインC901に含まれる画素の階調値を計算する場合、現フィールドの階調値は、該当する実データが入力映像信号中に存在しないため,前述の動き検知IP変換を用いてU902,L903,P904,N905の位置のラインに含まれる画素から補間する。一方、オーバードライブに必要な、前フィールドのラインP904の画素の階調値は、該当する実データが入力映像信号中に存在するので補間処理を行なわずにそのまま使用できる。
【0066】
以上、図8、図9を用いて説明したように、動き検知IP変換とオーバードライブに用いるラインには共通性がある。
【0067】
図10に、以上述べたフィールドとラインの組合せによる、前フィールドの画素の階調値と現フィールドの画素の階調値の演算方法についてまとめた表を示す。
【0068】
フィールド並びにラインの種別によって現フィールド階調値と前フィールド階調値をそれぞれ選択できる。
【0069】
I(C)1001,1007はラインC801の現フィールドの階調値、I(S’)1002,1008は、ラインU’803,L’804,P’805,C801から動き検知IP変換によって求めた前フィールドの階調値である。
【0070】
一方、I(S)1003,1005はラインU902,L903,P904,N905から動き検知IP変換によって求めた現フィールドの階調値、I(P)1004,1006はラインC901の前フィールドの階調値である。
【0071】
以上、IP変換とオーバードライブを実現しつつ、双方の演算を連携させることで、データ転送量を低減してフレームメモリを共通化する方式について説明した。続いて、以上の方式を実現する論理回路の構成例について説明する。
【0072】
図11に、前述のデータ転送量低減方法を実現するためのオーバードライブ対応IP変換部1100の構成例を示す。
【0073】
オーバードライブ対応IP変換部1100は、動き検知IP変換部1101と、セレクタ1102から構成する。
【0074】
動き検知IP変換部1101は、フィールド内補間部1103と、フィールド間補間部1104と、動き検知部1105、セレクタ1106から構成する。
【0075】
フィールド内補間部1103は補間対象画素の上下のラインの画素データを用いてフィールド内補間を実行する。
【0076】
フィールド間補間部1104は補間対象画素の前後のフィールドのラインの画素データを用いてフィールド間補間を実行する。
【0077】
動き検知部1105は、前フィールドと次フィールドを比較して、補間対象画素に動きがあるかどうかを検知し、動きが検知された場合は、動き検知信号を生成する。例えば前フィールドの階調値と次フィールドの階調値の差分値を計算し、前記差分値が所定の閾値以上の値であった場合は、動きがあったと判断する、という方法をとることができる。あるいは、補間対象画素の周囲でパターンマッチングを行い、動きを検知する、といった方法をとっても良い。
【0078】
セレクタ1106は、前記動き検知信号に基づいて、フィールド内補間の結果得られた補間対象画素のデータとフィールド間補間の結果得られた補間対象画素のデータとを適宜選択する。
【0079】
前記セレクタ1106の働きにより、フィールド内補間とフィールド間補間を組合せた動き検知IP変換が実行できる。
【0080】
セレクタ1107は、図10に示した判定条件に基づき、フィールド判別信号と、ライン判別信号を用いて条件判別することにより、動き検知IP変換結果の階調値、前フィールドのラインの階調値、次フィールドのラインの階調値の中から、現フィールド階調値と前フィールド階調値をそれぞれ選択する。
【0081】
前記フィールド判別信号とは、オーバードライブ対応IP変換部1100の補間対象のデータが、奇数フィールドのデータであるのか、偶数フィールドのデータであるのかを随時示す信号である。
【0082】
前記ライン判別信号とは、オーバードライブ対応IP変換部1100の補間対象のデータが、奇数ラインのデータであるのか、偶数ラインのデータであるのかを随時示す信号である。
【0083】
ここで、前記動き検知IP変換部1101を、奇数フィールドの偶数ライン/偶数フィールドの奇数ラインでは、現フィールドの階調値の演算に使用し、奇数フィールドの奇数ライン/偶数フィールドの偶数ラインでは、オーバードライブ用の前フィールドの階調値の演算に使用する、というように2つの目的に対してライン毎に交互に役割を切替えて使用することで、同一の動き検知IP変換部1101を時分割で別用途に使用することが可能になり、回路規模の削減が可能となる。
【0084】
図12にオーバードライブ部1200の構成例を示す。
【0085】
オーバードライブ部1200は、補正値決定部1201と加算部1202から構成する。
【0086】
補正値決定部1201は、現フィールドの階調値、前フィールドの階調値、オーバードライブ係数αから補正値を算出する。
【0087】
加算部1202は、補正値決定部1201で決定した補正値を現フィールド階調値に加算する。
【0088】
補正値決定部1201は、例えば式(1)のαをレジスタ等に保持し、現フィールド階調値と前フィールド階調値から、随時演算を行い、オーバードライブの補正値を決定する構成とすることができる。あるいは、例えば現フィールド階調値と前フィールド階調の組合せと、前記組合せに対応するオーバードライブ値をマトリクス状に設定したテーブルを設け、RAMあるいはROM等を使用して、前記テーブルを参照することで補正値を決定する構成としても良い。
【0089】
図13は本発明を適用した論理回路の構成方法の一例を示す図である。
【0090】
信号処理装置1300は、 例えばタイミング制御部1301、フィールド判定部1302、S/P部1303、フレームメモリ制御部1304、ラインメモリ1305〜1310、P/S部1311〜1316、ラインメモリ制御部1317、ラインメモリ選択部1318、オーバードライブ対応IP変換部1319、オーバードライブ部1320、から構成する。
【0091】
タイミング制御部1301は、入力された映像信号の垂直同期信号、水平同期信号、データ有効信号から、液晶パネル出力用の垂直同期信号、水平同期信号、データ有効信号を生成する機能を有する。
【0092】
フィールド判定部1302は、入力された信号が、奇数フィールドのデータであるのか、偶数フィールドのデータであるのかを判別し、フィールド判別信号を生成する機能を有する。
【0093】
また、フィールド判定部1302は、入力された信号が奇数ラインのデータであるのか、偶数ラインのデータであるのかを判別し、ライン判別信号を生成する機能を有する。
【0094】
フレームメモリ制御部1304は、フレームメモリ1321へのデータアクセスを制御する。ここでフレームメモリ1321は例えばSDRAMを使用することができる。フレームメモリ1321には1フレーム分のデータを格納できる領域を少なくとも2つ、すなわち2フレーム分の記憶領域を設け、それぞれの領域でフレームメモリからの読出しと、書き込みアクセスが衝突しないように調停する。
【0095】
S/P部1303は、データのシリアル−パラレル変換を行なう。
【0096】
またP/S部1311〜1316は、S/P部1303でパラレルに変換した信号を元に戻すために、データのパラレル−シリアル変換を行なう。
【0097】
S/P部1303並びにP/S部1311〜1316は、フレームメモリ1321へのデータ転送効率を向上させるため、複数画素のデータアクセスを一回で実行するために設ける。例えば入力データがR成分、G成分、B成分に対してそれぞれ8bitを割当てて構成した24bit信号であった場合、フレームメモリ1321のデータバス幅を48bitとすれば、2画素分のデータを一回のメモリアクセスで転送できる。
【0098】
ラインメモリ1305〜1310は、フレームメモリ1321から読み出したデータを水平ライン単位で格納する機能を有する。また、ラインメモリ1305〜1310は、入力と出力のタイミングを調整するためのバッファの機能を持つ。加えて、ラインメモリ1305〜1310は、オーバードライブ対応IP変換部1319における演算において、複数ラインの演算にわたって同一ラインのデータを複数回使用するような場合に、当該ラインのデータをフレームメモリ1321から読み出して格納した後、当該データを一度の演算に使用した後すぐに廃棄して、次の演算に際して再び同一のラインデータをフレームメモリ1321から読み出して格納することをせずに、一度フレームメモリ1321から読み出して格納したデータは、オーバードライブ対応IP変換部1319の演算に、少なくとも当該データを必要とする期間はラインメモリ1305〜1310に保持しておき、前記複数回のデータ演算は、ラインメモリ1305〜1310に格納した当該データを用いて実行することで、フレームメモリ1321へのアクセス回数を減少させるために用いる。
【0099】
ラインメモリ制御部1318は、フレームメモリ1321からラインメモリ1305〜1310へのデータ転送を制御する。IP変換やオーバードライブを正確に行なうためには、必要なときに必要なデータを演算回路部に入力しなければならない。そのため、ラインメモリ制御部1318は、フレームメモリ1321に格納したデータを適切なタイミングでラインメモリ1305〜1310に転送するよう、フレームメモリ制御部1304に対して指示する。フレームメモリ制御部1314は、前記指示をを受けて、フレームメモリ1321に格納されているフレームデータのうち、前記指示により指定されたデータを、ラインメモリ1305〜1310のうち、前記指示により指定されたラインメモリへ格納する。
【0100】
ラインメモリ選択部1318は、複数のラインメモリ1305〜1310から、オーバードライブ対応IP変換部1319の演算に必要なU,L,P,N(あるいはU’,L’,P’,C)の4本のラインデータを格納しているラインメモリを選択する機能を持つ。どのラインメモリがどのラインデータを格納しているという情報は、ラインメモリ制御部1317が管理しており、ラインメモリ制御部1317は、前記情報に基づき、ラインメモリ選択部1318に対して前記4本のラインデータを格納している4本のラインメモリを特定するための情報を送る。なお、フレームメモリ制御部1304とラインメモリ制御部には、フレームメモリ制御部1304がフレームメモリ1321からラインメモリ1305〜1310にデータを転送する書き込みアクセスと、ラインメモリ1305〜1310に格納したデータをオーバードライブ対応IP変換部1319が読み出すための読出しアクセスとにおいて、同一時刻に同一ラインメモリへ2つのアクセスが衝突することを回避する機能を設ける。
【0101】
フレームメモリ1321は入力映像信号をフレームデータとして格納する機能を有する。フレームメモリ1321は、例えばSDRAMなどを用いて構成することができる。フレームメモリ1321は信号処理装置1300に外付けする構成としても良いし、信号処理装置1300に内蔵する構成としても良い。
【0102】
フレームメモリ1321のどのアドレスにどのフレームのどのラインのデータが格納されているか、という情報は、フレームメモリ制御部1304が管理する。
【0103】
フレームメモリ1321とフレームメモリ制御部1304は所定のbit数のバス幅を持つデータバスを用いて接続する。ここで、前記データバスのバス幅を増やすと、データ転送速度の向上が見込めるが、その分フレームメモリ1321を構成するチップ数の増加、消費電力の増加、などの問題が発生してしまう。そのため、適当なバス幅を選択することが必要となる。
【0104】
例えば、1画素あたりの階調値をR成分、G成分、B成分にそれぞれ8bitで合計24bit信号で表現する構成とした場合、フレームメモリ1321にデータを格納する際には、データバス幅は24の倍数であることが望ましい。
【0105】
一方、フレームメモリ1321を構成するメモリチップに、例えば1チップあたり16bitあるいは32bitのデータバス幅を持つSDRAMチップを用いる場合、複数のSDRAMチップを並列に接続してデータバス幅を増やすことで、データ転送速度を向上させる構成とすることを考慮すると、データバス幅は16の倍数であることが望ましい。
【0106】
以上の2点を考え合せると、データバス幅は16と24の公倍数、例えば48bitもしくは96bitなどの値とすることが適当である。
【0107】
しかし、例えばデータバス幅を48bitとした場合は、16bitのバス幅を持つSDRAMチップを3つ用いることでフレームメモリ1321を構成することが可能であることに対し、データバス幅を96bitとした場合は、16bitのバス幅を持つSDRAMチップを用いてフレームメモリ1321を構成する場合なら前記SDRAMチップを6個使うことが必要となり、あるいは32bitのバス幅を持つSDRAMチップを用いてフレームメモリ1321を構成する場合なら前記SDRAMチップが3個使うことが必要となり、フレームメモリ1321のデータバス幅を48bitの構成とした場合と比較して、SDRAMチップの使用数が増えてしまうため、信号処理装置1300を用いた表示装置701の原価向上につながる。
【0108】
以上の理由により、フレームメモリ1321のデータバス幅は例えば48bitすることが適当であると考えることができる。前述のようにフレームメモリ1321のデータバス幅を48bitとすると、例えば1チップあたり16bitのデータバス幅を持つSDRAMチップ3つを並列に接続することでフレームメモリ1321を構成することができる。
【0109】
しかし、以上述べた、1画素あたりの解像度、データ形式、メモリチップの種類やデータバス幅等はあくまで一例であり、他の組合せで構成することもできる。
【0110】
以上、本発明の適用例を説明した。
【0111】
【発明の効果】
このように、本発明によれば、表示装置向けに映像信号を処理する信号処理装置において、動きに適応したIP変換とオーバードライブを実現しつつ、両方式で演算を共通化することでフレームメモリに対するデータ転送量を低減することができ、その結果、演算に使用するフレームメモリの個数を削減することが可能となるため、本信号処理装置を用いた、表示装置の原価低減を図ることができる。
【0112】
また、信号処理装置とフレームメモリの間のデータ転送量が少なくなると、フレームメモリの動作周波数を低減できることや、消費電力を削減できることという効果を得ることができる。
【図面の簡単な説明】
【図1】プログレッシブ形式の映像信号の概略を示す図である。
【図2】インターレース形式の映像信号の概略を示す図である。
【図3】本発明を適用した信号処理装置におけるインターレース−プログレッシブ変換の概略の一例を示す図である。
【図4】本発明を適用した信号処理装置におけるオーバードライブの概略の一例を示す図である。
【図5】本発明を適用した信号処理装置におけるオーバードライブによる応答時間の短縮の一例を示す図である。
【図6】液晶素子などを用いた表示装置の概略構成の一例を示す図である。
【図7】本発明を適用した液晶素子などを用いた表示装置の概略構成の一例を示す図である。
【図8】本発明を適用した信号処理装置のオーバードライブ対応IP変換の例について概略を示す図である。
【図9】本発明を適用した信号処理装置のオーバードライブ対応IP変換の例について概略を示す図である。
【図10】本発明を適用した信号処理装置のオーバードライブ対応IP変換における補間対象の画素の階調値演算方法の例を示す図である。
【図11】本発明を適用した信号処理装置におけるオーバードライブ対応IP変換部の概略構成の一例を示す図である。
【図12】本発明を適用した信号処理装置におけるオーバードライブ部の概略構成の一例を示す図である。
【図13】本発明を適用した信号処理装置の概略構成の一例を示す図である。
【符号の説明】
301,801,901…補間対象ライン、302,803,902…補間対象ラインの上側ライン、303,804,903…補間対象ラインの下側ライン、304,805,904…補間対象ラインの前フィールドのライン、305,905…補間対象ラインの次フィールドのライン、401…オーバードライブ対象ライン、401,802…オーバードライブ対象ラインの前フィールドのライン、601,701…表示装置、602,702…インターフェースモジュール、603,703…液晶パネルモジュール、604,704…チューナ、605,606,607,705,706,707…入力端子、608,708…Y/C分離装置、609,709…RGB変換装置、610,710…信号処理装置、611,613,711…フレームメモリ、612,712…タイミング制御装置、614,615,714,715…ドライバ、616,716…液晶パネル、1100,1319…オーバードライブ対応IP変換部、1101…動き検知IP変換部、1102,1106…セレクタ、1103…フィールド内補間部、1104…フィールド間補間部、1105…動き検知部、1200,1320…オーバードライブ部、1201…補正値決定部、1202…加算部、1300…信号処理装置、1301…信号処理装置、1302…フィールド判定部、1303…S/P部、1304…フレームメモリ制御部、1305,1306,1307,1308,1309,1310…ラインメモリ、1311,1312,1313,1314,1315,1316…P/S部、1317…ラインメモリ制御部、1318…ラインメモリ選択部。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a signal processing apparatus for processing a video signal for a display device using a liquid crystal element, an organic EL element plasma, or the like, and in particular, in the signal processing apparatus, converts an interlaced video signal into a progressive video signal. The present invention relates to interlace-progressive conversion and overdrive control for improving the response speed of a display element.
[0002]
[Prior art]
When displaying an interlaced video signal on a display device such as a liquid crystal panel which displays a video in a progressive format, it is necessary to perform an interlace-progressive conversion for converting the interlaced video signal into a progressive video signal. Conventionally, as a method of interlace-progressive conversion, for example, as disclosed in Japanese Patent Application Laid-Open No. 2000-152246, an inter-image interpolation signal formed from an image signal of a frame or a field different from an interpolation target and an interpolation method Means for mixing an object with an intra-image interpolation signal formed from an image signal of the same frame or field are known. Here, a field delay device is used to form an inter-image interpolation signal.
[0003]
Further, in a liquid crystal display device, a frame memory is used, for example, as disclosed in Japanese Patent Application Laid-Open No. 2001-125067, in order to solve an afterimage phenomenon due to a long response time in which a liquid crystal responds to a voltage change. There is known a means for shortening the response time by using a data emphasis unit to emphasize and convert the display data so as to increase the change when the display data is changed.
[0004]
[Patent Document 1]
JP 2000-152246 A
[Patent Document 2]
JP 2001-125067 A
[0005]
[Problems to be solved by the invention]
In a display device using a liquid crystal element or the like, when performing interlace-progressive conversion (hereinafter, referred to as IP conversion) adapted to motion, it is necessary to use a field delay device such as a frame memory. The frame memory is also used when implementing the above-described data emphasis means (hereinafter referred to as overdrive). That is, if the IP conversion and the overdrive are to be performed separately, two frame memories are required, which leads to an increase in the cost of the display device.
[0006]
An object of the present invention is to provide a signal processing device that reduces the number of frame memories by sharing a frame memory used for IP conversion and overdrive adapted to motion.
[0007]
[Means for Solving the Problems]
The present invention relates to a signal processing device for a display device, wherein a timing control unit, a field determination unit, a frame memory control unit, a line memory, a line memory control unit, a line memory selection unit, an overdrive compatible IP conversion And an overdrive unit, wherein the field determination unit includes means for determining whether data of the input video signal is data of an odd field or data of an even field, and data of the input video signal. For determining whether the data is data of an odd-numbered line or data of an even-numbered line. The overdrive-compatible IP conversion unit is provided with a motion detection IP conversion unit for performing IP conversion adapted to motion by using a frame memory based on the discrimination data in the field determination unit. In addition to means for calculating the gradation value of the previous field of the target pixel by calculation, means for simultaneously calculating data of the previous field of the same pixel for overdrive is provided. Further, the overdrive unit includes a correction value determination unit for performing overdrive control based on the current field grayscale value and the previous field grayscale value, and uses the correction value as a current field grayscale value. Means are provided for adding overdrive control.
[0008]
Therefore, the amount of access to the frame memory can be reduced as compared with the case where the two operations of the IP conversion and the overdrive adapted to the motion are separately processed. As a result, the frame memory connected to the signal processing apparatus can be reduced. This has the effect of reducing the number of chips.
[0009]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.
[0010]
As described above, when a moving image such as a television image is displayed on a display device using a liquid crystal element or the like, it is effective to mount the IP conversion and the overdrive in order to improve the image quality.
[0011]
The IP conversion is a function of converting an interlaced (interlaced scanning) signal into a progressive (sequential scanning) signal. For example, the present invention is applied to a case where an interlaced video signal such as NTSC, PAL, D1, or D3 is displayed on a display device such as a liquid crystal panel which performs progressive video display.
[0012]
On the other hand, the overdrive function is a function of improving the response speed of the liquid crystal panel to reduce moving image blur when displaying a moving image.
[0013]
The present invention provides a signal processing device that realizes two functions of IP conversion and overdrive for a display device using a liquid crystal display device or the like.
[0014]
Before describing the operation of the signal processing device of the present invention, an overview of IP conversion and overdrive will be described.
[0015]
First, the IP conversion will be described.
[0016]
Both the progressive signal and the interlace signal are in the form of a video signal.
[0017]
FIG. 1 shows a schematic diagram of a progressive signal, and FIG. 2 shows a schematic diagram of a positional relationship of data constituting an interlace signal.
[0018]
As shown in FIG. 1, the progressive signal forms one frame of data for one screen at a certain sampling time, and sequentially scans all data in the same frame from the upper left to the lower right of the screen in units of horizontal lines. This is a signal composed of For example, a signal such as D2 or D4 of the video signal standard is composed of about 60 frames per second.
[0019]
On the other hand, as shown in FIG. 2, the interlaced signal alternately forms odd fields and even fields at each sampling time, and displays only odd-numbered horizontal lines in odd fields and only even-numbered horizontal lines in even fields. Is a signal formed by performing interlaced scanning in horizontal line units from the upper left to the lower right. For example, in a signal such as NTSC, D1, D3, etc., about 30 odd-numbered fields and about 30 even-numbered fields are formed in one second, each consisting of about 60 fields.
[0020]
The IP conversion is a process of interpolating a signal that is not included in the interlace signal, that is, data of an even line of an odd field and data of an odd line of an even field.
[0021]
In the present invention, as a method of IP conversion, motion detection IP conversion excellent in image quality is performed. Next, the motion detection IP conversion will be described.
[0022]
IP conversion methods include, for example, an intra-field interpolation method for interpolating with line data in the same field, and an inter-field interpolation method for interpolating data between fields by referring to data between a plurality of fields.
[0023]
FIG. 3 is a schematic diagram illustrating a mutual positional relationship between a line to be interpolated by IP conversion and a line used as reference data for interpolation.
[0024]
In the intra-field interpolation, for example, when obtaining the gradation value of the pixel included in the line C301 shown in FIG. 3, the interpolation is performed using the data of the lines U302 and L303 above and below the line C301. As an interpolation method at this time, for example, the data of the line U302 can be used as it is (line doubler method), or the average value of the gradation value of the line U302 and the gradation value of L303 can be used (linear interpolation method). . In each case, the resolution in the vertical direction is reduced as compared with the original progressive signal.
[0025]
In the inter-field interpolation, for example, when obtaining the value of the line C301 shown in FIG. 3, the interpolation is performed using the data of the lines P304 and N305 at the same position in the fields before and after the line C. As the interpolation method at this time, for example, the data of the line N305 can be used as it is, or the average value of the gradation value of the line P304 and the gradation value of the line N305 can be used. Unlike the intra-field interpolation, the inter-field interpolation does not cause a reduction in the vertical resolution. However, since images having different sampling times are synthesized every other line, if there is motion in the image during the period between the line P304 and the line N305, striped noise may occur in the horizontal direction.
[0026]
As described above, when only one of the intra-field interpolation and the inter-field interpolation is used, the resolution is reduced and the image quality is deteriorated due to the generation of noise.
[0027]
In order to solve these problems, the motion detection IP conversion is a method that combines the advantages of intra-field interpolation for moving images and inter-field interpolation for still images, and detects motion of an image. This is a method that uses intra-field interpolation and inter-field interpolation in a portion where there is no motion. Since optimum data can be appropriately selected according to the image, a high-quality image can be obtained.
[0028]
The motion detection IP conversion has been described above. Next, overdrive will be described.
[0029]
Overdrive is a function that improves the response speed of the liquid crystal panel and reduces moving image blur.
[0030]
Using a frame memory, the gradation difference of the same position pixel between frames is detected, and a correction value according to the amount of change is added to the pixel having a change in gradation to the original gradation value, thereby obtaining a liquid crystal display. The response time of the panel can be reduced.
[0031]
FIG. 5 shows a schematic diagram of shortening the luminance response time of the display element by overdrive.
[0032]
In order to obtain a target luminance value in the j-th frame at a specific pixel, the input gradation value of the j-th frame and the input gradation value of the j-th frame are used to change the luminance value from the luminance value of the j-1 frame. The example in which the gradation correction value obtained from the difference value of (1) is added to the gradation data of the j-frame.
[0033]
If there is no correction by the overdrive, the response time exceeds one frame period, so that it takes a plurality of frame periods to reach the target luminance of the j frame. The response period and the lack of effective luminance due to the blunted waveform may be recognized as moving image blur. On the other hand, when overdriving is performed, the response time until the target luminance is reached can be reduced, and the moving image blur phenomenon can be improved.
[0034]
FIG. 4 is a schematic diagram showing the mutual positional relationship of lines used for overdrive.
[0035]
The grayscale value I (O) after overdrive is applied to the grayscale value I (C) of the pixel included in the line 401 at the position C in FIG. Using the adjustment value I (P), it can be calculated, for example, as in equation (1).
[0036]
I (O) = I (C) + α (I (C) I (P)) (1)
Here, α is an overdrive coefficient, and an appropriate value is determined according to the characteristics of the liquid crystal panel so that the response speed is improved.
[0037]
The motion detection IP conversion and the overdrive have been described above. Since the motion detection IP conversion and the overdrive require data of a plurality of fields for the calculation as described above, the frame memory for storing the field data is used respectively. There is a need to.
[0038]
For this reason, the configuration sharing of a display device using a conventional liquid crystal element is, for example, as shown in FIG.
[0039]
The display device 601 includes, for example, an interface module 602 and a liquid crystal panel module 603.
[0040]
The interface module 602 includes, for example, a tuner 604, input terminals 605, 606, 607, a Y / C separation device 608, an RGB conversion device 608, a signal processing device 610, and a frame memory 611.
[0041]
The tuner 604 has a function of, for example, selecting a channel from a television broadcast radio wave and extracting an NTSC signal, for example.
[0042]
The input terminals 605, 606, and 607 are terminals for inputting various video signals from an external device (not shown) such as a video deck, a DVD player, and a PC (personal computer). For example, there are a composite terminal, an S terminal, a D terminal, a D-Sub terminal, a DVI terminal, a component terminal, and the like. Although the configuration example in which three input terminals are provided is shown in the drawing, a different configuration may be employed.
[0043]
The Y / C separation device 608 generates a luminance signal when a signal input from the tuner 604 or the input terminals 605, 606, and 607 is a signal obtained by combining a luminance signal and a color signal, such as an NTSC signal. It has the function of separating signals and color signals.
[0044]
When the input video signal is a signal composed of a luminance signal and a chrominance signal, the RGB conversion device 609 converts the input signal into gradation value data of each of an R component, a G component, and a B component. Has functions.
[0045]
The signal processing device 610 has at least means 617 for performing IP conversion on the input signal.
[0046]
The frame memory 611 is used to store frame data necessary for the IP conversion means 617 executed by the signal processing device 610.
[0047]
The liquid crystal panel module 603 includes, for example, a timing control unit 612, a frame memory 613, drivers 614 and 615, a liquid crystal panel 616, and the like.
[0048]
The drivers 614 and 615 have a function of applying a predetermined voltage to drive a predetermined liquid crystal element of the liquid crystal panel 616.
[0049]
The timing control unit 612 has a function of transferring input data to the drivers 614 and 615 at a predetermined timing. Further, an overdrive unit 618 for applying data modulation by overdrive to the input data is provided.
[0050]
The frame memory 613 is used to store necessary frame data in the overdrive unit 618 executed by the timing control unit 612.
[0051]
As shown in the example here, the conventional IP conversion means 617 is implemented in the signal processing device 610 of the interface module 602, and the overdrive means 618 is implemented in the timing control unit 612 of the liquid crystal panel module 603. Since the memories 611 and 613 were individually mounted on separate modules, the number of parts increased, which led to an increase in the cost of the system.
[0052]
Thus, in the present invention, the frame memory for IP conversion and the frame memory for overdrive are shared, thereby reducing the number of components and reducing the cost of the display device.
[0053]
FIG. 7 is a diagram illustrating a configuration example of a display device 701 to which an embodiment of the present invention has been applied.
[0054]
In the configuration of FIG. 6, there are two frame memories 611 and 613, whereas in the configuration of FIG. 7, only one frame memory 711 is used.
[0055]
Also, in the configuration of FIG. 6, the IP conversion unit 617 is mounted on the signal processing device 610 of the interface module 612, and the overdrive unit 618 is mounted on the liquid crystal panel module 613, whereas in the configuration of FIG. The difference lies in that two of the conversion means 717 and the overdrive means 718 are mounted in the signal processing device 718 of the interface module 702.
[0056]
However, in the configuration of FIG. 7, simply using a common frame memory causes two memory accesses to one frame memory 711 at the same time, a memory access by the IP conversion unit and a memory access by the overdrive. In other words, depending on the combination of the input video signal and the output video signal, the amount of data transferred per unit time may increase, possibly causing a case where the operable speed of the frame memory is exceeded.
[0057]
Therefore, in the present invention, in addition to the common use of the frame memory shown in FIG. 7, the amount of data transferred to the frame memory is reduced by performing the processing in cooperation with the IP conversion and overdrive. By reducing the data transfer amount, the frame memory can be reduced.
[0058]
Next, a method of reducing the data transfer amount will be described.
[0059]
In this method, the processing used for both motion detection IP conversion and overdrive is cooperated by utilizing the fact that the lines used have commonality. By using a part of the motion detection IP conversion processing for the operation for overdrive, the data transfer amount is reduced.
[0060]
FIG. 8 and FIG. 9 are diagrams showing the outline of the mutual positional relationship of the lines respectively used in the motion detection IP conversion and the overdrive in the present method.
[0061]
Here, the method of calculating the gradation value is as follows: (1) a case of calculating an odd line of an odd field or an even line of an even field; and (2) a case of calculating an even line of an odd field or an odd line of an even field. And two cases.
[0062]
FIG. 8 shows an example of a calculation method for displaying an odd line of an odd field or an even line of an even field.
[0063]
When calculating the gradation value of the pixel included in the line C801, the gradation value of the current field can be used as it is without performing the interpolation processing because the corresponding actual data already exists in the input video signal. On the other hand, the gradation value of the pixel of the line P802 of the previous field necessary for overdrive is determined by U′803, L′ 804, P ′ by the above-described motion detection IP conversion because there is no actual data in the input video signal. '805, interpolation is performed from the pixels included in the line at the position of C801.
[0064]
FIG. 9 shows an example of a calculation method for displaying an even line of an odd field or an odd line of an even field.
[0065]
When calculating the gradation values of the pixels included in the line C901, since the corresponding actual data does not exist in the input video signal, the gradation values of the current field are calculated using the above-described motion detection IP conversion. Interpolation is performed from the pixels included in the line at positions P904 and N905. On the other hand, the gradation value of the pixel of the line P904 in the previous field necessary for overdrive can be used as it is without performing the interpolation processing because the corresponding actual data exists in the input video signal.
[0066]
As described above with reference to FIGS. 8 and 9, the lines used for motion detection IP conversion and overdrive have commonality.
[0067]
FIG. 10 is a table summarizing a method of calculating the gradation values of the pixels of the previous field and the gradation values of the pixels of the current field based on the combinations of the fields and the lines described above.
[0068]
The current field gradation value and the previous field gradation value can be selected according to the type of the field and the line.
[0069]
I (C) 1001 and 1007 are the gradation values of the current field of line C801, and I (S ') 1002 and 1008 are obtained from lines U'803, L'804, P'805, and C801 by motion detection IP conversion. This is the gradation value of the previous field.
[0070]
On the other hand, I (S) 1003 and 1005 are the gradation values of the current field obtained by the motion detection IP conversion from the lines U902, L903, P904 and N905, and I (P) 1004 and 1006 are the gradation values of the previous field of the line C901. It is.
[0071]
As described above, the method of realizing the IP conversion and the overdrive while cooperating the two operations to reduce the data transfer amount and share the frame memory has been described. Next, a configuration example of a logic circuit that realizes the above method will be described.
[0072]
FIG. 11 shows a configuration example of an overdrive-compatible IP conversion unit 1100 for realizing the above-described data transfer amount reduction method.
[0073]
The overdrive-compatible IP conversion unit 1100 includes a motion detection IP conversion unit 1101 and a selector 1102.
[0074]
The motion detection IP conversion unit 1101 includes an intra-field interpolation unit 1103, an inter-field interpolation unit 1104, a motion detection unit 1105, and a selector 1106.
[0075]
The intra-field interpolation unit 1103 performs intra-field interpolation using pixel data of lines above and below the interpolation target pixel.
[0076]
The inter-field interpolation unit 1104 performs inter-field interpolation using pixel data of a line of a field before and after the interpolation target pixel.
[0077]
The motion detection unit 1105 compares the previous field with the next field to detect whether or not the interpolation target pixel has a motion. When the motion is detected, the motion detection unit 1105 generates a motion detection signal. For example, a method of calculating a difference value between the gradation value of the previous field and the gradation value of the next field, and determining that there is a motion when the difference value is equal to or larger than a predetermined threshold value, may be adopted. it can. Alternatively, a method may be adopted in which pattern matching is performed around the pixel to be interpolated to detect movement.
[0078]
The selector 1106 appropriately selects, based on the motion detection signal, data of an interpolation target pixel obtained as a result of intra-field interpolation and data of an interpolation target pixel obtained as a result of inter-field interpolation.
[0079]
By the operation of the selector 1106, the motion detection IP conversion combining the intra-field interpolation and the inter-field interpolation can be executed.
[0080]
The selector 1107 performs a condition determination using the field determination signal and the line determination signal based on the determination conditions illustrated in FIG. 10, thereby obtaining the gradation value of the motion detection IP conversion result, the gradation value of the line of the previous field, The current field gradation value and the previous field gradation value are respectively selected from the gradation values of the line of the next field.
[0081]
The field determination signal is a signal that indicates at any time whether the data to be interpolated by the overdrive compatible IP conversion unit 1100 is data of an odd field or even field.
[0082]
The line discrimination signal is a signal that indicates at any time whether the data to be interpolated by the overdrive-compatible IP conversion unit 1100 is odd-numbered line data or even-numbered line data.
[0083]
Here, the motion detection IP conversion unit 1101 is used to calculate the gradation value of the current field in the odd lines of the even lines / even lines of the even fields, and in the odd lines of the odd fields / even lines of the even fields. The same motion detection IP conversion unit 1101 is time-divisionally used by alternately switching the role for each line for two purposes, such as calculating the gradation value of the previous field for overdrive. Thus, it can be used for another purpose, and the circuit scale can be reduced.
[0084]
FIG. 12 shows a configuration example of the overdrive unit 1200.
[0085]
The overdrive unit 1200 includes a correction value determination unit 1201 and an addition unit 1202.
[0086]
The correction value determination unit 1201 calculates a correction value from the gradation value of the current field, the gradation value of the previous field, and the overdrive coefficient α.
[0087]
The adder 1202 adds the correction value determined by the correction value determiner 1201 to the current field gradation value.
[0088]
The correction value determination unit 1201 has a configuration in which, for example, α in Expression (1) is held in a register or the like, and a calculation is performed as needed from the current field grayscale value and the previous field grayscale value to determine an overdrive correction value. be able to. Alternatively, for example, a table in which the combination of the current field gradation value and the previous field gradation and the overdrive value corresponding to the combination are set in a matrix is provided, and the table is referred to using a RAM or a ROM. May be used to determine the correction value.
[0089]
FIG. 13 is a diagram illustrating an example of a method of configuring a logic circuit to which the present invention is applied.
[0090]
The signal processing device 1300 includes, for example, a timing control unit 1301, a field determination unit 1302, an S / P unit 1303, a frame memory control unit 1304, line memories 1305 to 1310, P / S units 1311 to 1316, a line memory control unit 1317, It comprises a memory selector 1318, an overdrive compatible IP converter 1319, and an overdrive unit 1320.
[0091]
The timing control unit 1301 has a function of generating a vertical synchronizing signal, a horizontal synchronizing signal, and a data valid signal for liquid crystal panel output from a vertical synchronizing signal, a horizontal synchronizing signal, and a data valid signal of an input video signal.
[0092]
The field determination unit 1302 has a function of determining whether an input signal is data of an odd field or data of an even field, and generating a field determination signal.
[0093]
In addition, the field determination unit 1302 has a function of determining whether an input signal is data of an odd line or data of an even line, and generating a line determination signal.
[0094]
The frame memory control unit 1304 controls data access to the frame memory 1321. Here, for the frame memory 1321, for example, an SDRAM can be used. The frame memory 1321 is provided with at least two areas in which data for one frame can be stored, that is, storage areas for two frames, and arbitration is performed in each area so that reading from the frame memory and writing access do not collide.
[0095]
S / P section 1303 performs serial-parallel conversion of data.
[0096]
Further, P / S sections 1311 to 1316 perform parallel-to-serial conversion of data in order to restore the signal converted in parallel by S / P section 1303 to the original state.
[0097]
The S / P unit 1303 and the P / S units 1311 to 1316 are provided to execute data access to a plurality of pixels at one time in order to improve the efficiency of data transfer to the frame memory 1321. For example, when the input data is a 24-bit signal configured by allocating 8 bits to each of the R component, the G component, and the B component, if the data bus width of the frame memory 1321 is 48 bits, data of two pixels is transmitted once. Can be transferred by memory access.
[0098]
The line memories 1305 to 1310 have a function of storing data read from the frame memory 1321 in units of horizontal lines. The line memories 1305 to 1310 have a buffer function for adjusting input and output timings. In addition, the line memories 1305 to 1310 read the data of the line from the frame memory 1321 when the data of the same line is used a plurality of times over the calculation of a plurality of lines in the calculation in the overdrive-compatible IP conversion unit 1319. After the data is used for one operation, the data is discarded immediately, and the same line data is not read out and stored again from the frame memory 1321 in the next operation, but is stored in the frame memory 1321 once. The read and stored data is stored in the line memories 1305 to 1310 at least for a period in which the data is required for the operation of the overdrive-compatible IP conversion unit 1319. Using the data stored in 1310 By row, it used to reduce the number of accesses to the frame memory 1321.
[0099]
The line memory control unit 1318 controls data transfer from the frame memory 1321 to the line memories 1305 to 1310. In order to accurately perform IP conversion and overdrive, necessary data must be input to the arithmetic circuit unit when necessary. Therefore, the line memory control unit 1318 instructs the frame memory control unit 1304 to transfer the data stored in the frame memory 1321 to the line memories 1305 to 1310 at appropriate timing. Upon receiving the instruction, the frame memory control unit 1314 replaces the data specified by the instruction among the frame data stored in the frame memory 1321 with the data specified by the instruction among the line memories 1305 to 1310. Store in line memory.
[0100]
The line memory selecting unit 1318 outputs U, L, P, N (or U ′, L ′, P ′, C) necessary for the operation of the overdrive-compatible IP conversion unit 1319 from the plurality of line memories 1305 to 1310. It has a function of selecting a line memory storing the line data of a book. The line memory control unit 1317 manages information indicating which line memory stores which line data, and the line memory control unit 1317 sends the four line data to the line memory selection unit 1318 based on the information. Is transmitted to specify the four line memories storing the line data. Note that the frame memory control unit 1304 and the line memory control unit have write access for transferring the data from the frame memory 1321 to the line memories 1305 to 1310 and write access to transfer the data stored in the line memories 1305 to 1310. A function is provided to prevent two accesses to the same line memory from colliding at the same time in a read access for reading by the drive-compatible IP conversion unit 1319.
[0101]
The frame memory 1321 has a function of storing an input video signal as frame data. The frame memory 1321 can be configured using, for example, an SDRAM. The frame memory 1321 may be configured to be externally attached to the signal processing device 1300, or may be configured to be built in the signal processing device 1300.
[0102]
The frame memory control unit 1304 manages information on which line of which frame is stored in which address of the frame memory 1321.
[0103]
The frame memory 1321 and the frame memory control unit 1304 are connected using a data bus having a bus width of a predetermined number of bits. Here, if the bus width of the data bus is increased, an improvement in the data transfer rate can be expected. However, problems such as an increase in the number of chips constituting the frame memory 1321 and an increase in power consumption occur. Therefore, it is necessary to select an appropriate bus width.
[0104]
For example, when the gradation value per pixel is represented by a total of 24-bit signals of 8 bits for each of the R component, the G component, and the B component, when storing data in the frame memory 1321, the data bus width is 24 bits. It is desirable to be a multiple of.
[0105]
On the other hand, when an SDRAM chip having a data bus width of, for example, 16 bits or 32 bits per chip is used as a memory chip constituting the frame memory 1321, a plurality of SDRAM chips are connected in parallel to increase the data bus width. Considering a configuration for improving the transfer speed, the data bus width is desirably a multiple of 16.
[0106]
Considering the above two points, it is appropriate that the data bus width be a common multiple of 16 and 24, for example, a value of 48 bits or 96 bits.
[0107]
However, for example, when the data bus width is set to 48 bits, the frame memory 1321 can be configured by using three SDRAM chips having a bus width of 16 bits, whereas when the data bus width is set to 96 bits. In the case where the frame memory 1321 is configured using an SDRAM chip having a bus width of 16 bits, it is necessary to use six SDRAM chips, or the frame memory 1321 is configured using an SDRAM chip having a bus width of 32 bits. In this case, it is necessary to use three SDRAM chips, and the number of SDRAM chips used is increased as compared with the case where the data bus width of the frame memory 1321 is configured to be 48 bits. This leads to an increase in the cost of the display device 701 used. That.
[0108]
For the above reasons, it is considered appropriate that the data bus width of the frame memory 1321 is, for example, 48 bits. As described above, when the data bus width of the frame memory 1321 is 48 bits, the frame memory 1321 can be configured by connecting three SDRAM chips having a data bus width of 16 bits per chip in parallel, for example.
[0109]
However, the above-described resolution per pixel, data format, type of memory chip, data bus width, and the like are merely examples, and other combinations may be employed.
[0110]
The application example of the present invention has been described above.
[0111]
【The invention's effect】
As described above, according to the present invention, in a signal processing device for processing a video signal for a display device, a frame memory is realized by performing common operations in both systems while realizing IP conversion and overdrive adapted to motion. Can be reduced, and as a result, the number of frame memories used for the calculation can be reduced, so that the cost of the display device using the present signal processing device can be reduced. .
[0112]
Further, when the amount of data transferred between the signal processing device and the frame memory is reduced, it is possible to obtain an effect that the operating frequency of the frame memory can be reduced and that the power consumption can be reduced.
[Brief description of the drawings]
FIG. 1 is a diagram schematically showing a progressive video signal.
FIG. 2 is a diagram schematically illustrating an interlaced video signal.
FIG. 3 is a diagram schematically illustrating an example of interlace-progressive conversion in a signal processing device to which the present invention has been applied.
FIG. 4 is a diagram schematically illustrating an example of overdrive in a signal processing device to which the present invention has been applied.
FIG. 5 is a diagram illustrating an example of a reduction in response time due to overdrive in a signal processing device to which the present invention has been applied.
FIG. 6 is a diagram illustrating an example of a schematic configuration of a display device using a liquid crystal element or the like.
FIG. 7 is a diagram illustrating an example of a schematic configuration of a display device using a liquid crystal element or the like to which the present invention is applied.
FIG. 8 is a diagram schematically illustrating an example of overdrive-compatible IP conversion of a signal processing device to which the present invention has been applied.
FIG. 9 is a diagram schematically illustrating an example of overdrive-compatible IP conversion of a signal processing device to which the present invention has been applied.
FIG. 10 is a diagram illustrating an example of a method of calculating a tone value of a pixel to be interpolated in overdrive-compatible IP conversion of a signal processing device to which the present invention has been applied.
FIG. 11 is a diagram illustrating an example of a schematic configuration of an overdrive-capable IP conversion unit in a signal processing device to which the present invention has been applied.
FIG. 12 is a diagram illustrating an example of a schematic configuration of an overdrive unit in a signal processing device to which the present invention has been applied.
FIG. 13 is a diagram illustrating an example of a schematic configuration of a signal processing device to which the present invention has been applied.
[Explanation of symbols]
301,801,901 ... interpolation target line, 302,803,902 ... upper line of interpolation target line, 303,804,903 ... lower line of interpolation target line, 304,805,904 ... previous field of interpolation target line Lines, 305, 905: lines in the next field of the line to be interpolated, 401: lines to be overdriven, 401, 802: lines in the field before the line to be overdriven, 601, 701: display device, 602, 702: interface module, 603, 703: liquid crystal panel module; 604, 704: tuner; 605, 606, 607, 705, 706, 707: input terminal; ... Signal processing devices, 611, 613, 7 DESCRIPTION OF SYMBOLS 1 ... Frame memory, 612, 712 ... Timing control device, 614, 615, 714, 715 ... Driver, 616, 716 ... Liquid crystal panel, 1100, 1319 ... Overdrive compatible IP conversion unit, 1101 ... Motion detection IP conversion unit, 1102 , 1106... Selector, 1103... Intra-field interpolation unit, 1104... Inter-field interpolation unit, 1105... Motion detection unit, 1200, 1320... Overdrive unit, 1201. , 1301 ... signal processing device, 1302 ... field determination unit, 1303 ... S / P unit, 1304 ... frame memory control unit, 1305, 1306, 1307, 1308, 1309, 1310 ... line memory, 1311, 1312, 1313, 1314 1315, 1316 ... / S unit, 1317 ... line memory control unit, 1318 ... line memory selection unit.

Claims (7)

表示装置向けに映像信号の信号処理を行なう信号処理装置であって、フレームメモリを接続する手段と、前記フレームメモリに映像信号をフレームデータとして格納し、前記フレームデータの変化に応じてインターレース−プログレッシブ変換を行なう手段と、表示素子の輝度値の応答速度を制御するオーバードライブを行なう手段とを有し、前記インターレース−プログレッシブ変換手段は、補間対象画素の現フィールドの階調値を演算すると共に、前フィールドの階調値を演算すること、を特徴とする信号処理装置。What is claimed is: 1. A signal processing device for performing signal processing of a video signal for a display device, comprising: means for connecting a frame memory; a video signal stored in the frame memory as frame data; Means for performing the conversion, and means for performing overdrive for controlling the response speed of the luminance value of the display element, the interlace-progressive conversion means calculates the gradation value of the current field of the pixel to be interpolated, A signal processing device for calculating a gradation value of a previous field. 前記請求項1に記載の信号処理装置であって、前記フレームメモリに格納した前記フレームデータを、水平ライン単位で格納することができるラインメモリを少なくとも1つ以上有し、前記インターレース−プログレッシブ変換並びにオーバードライブの演算を実行するにあたっては、前記ラインメモリに格納したデータを使用することで、前記フレームメモリに対する単位時間あたりのデータ転送量を削減することを可能にすること、を特徴とする信号処理装置。2. The signal processing device according to claim 1, further comprising at least one line memory capable of storing the frame data stored in the frame memory in units of horizontal lines, wherein the interlace-progressive conversion and Signal processing characterized in that in executing the overdrive operation, it is possible to reduce the amount of data transferred to the frame memory per unit time by using data stored in the line memory. apparatus. 前記請求項1に記載の信号処理装置であって、前記演算の実行対象は、NTSC,PAL,D1,D2,D3,D4の映像信号規格のうちの少なくとも一つ以上の映像信号に対応していること、を特徴とする信号処理装置。2. The signal processing apparatus according to claim 1, wherein the execution target of the operation corresponds to at least one video signal among video signal standards of NTSC, PAL, D1, D2, D3, and D4. A signal processing device. 前記請求項1に記載の信号処理装置であって、前記フレームメモリとしてSDRAMを使用すること、を特徴とする信号処理装置。2. The signal processing device according to claim 1, wherein an SDRAM is used as the frame memory. 前記請求項1に記載の信号処理装置であって、1チップあたりのデータバス幅が16bitであるメモリチップ3つを並列に接続して48bitのデータバス幅を持つフレームメモリとして使用すること、を特徴とする信号処理装置。2. The signal processing device according to claim 1, wherein three memory chips each having a data bus width of 16 bits per chip are connected in parallel and used as a frame memory having a data bus width of 48 bits. Characteristic signal processing device. 表示装置向けに映像信号の信号処理を行なう機能を有する表示装置向けインタフェースモジュールであって、チューナや入力端子を用いた映像信号の入力手段と、前記信号処理結果を出力するための出力手段を有し、前記インターフェースモジュールは、前記請求項1に記載の信号処理装置を用いて構成すること、を特徴とする表示装置向けインターフェースモジュール。An interface module for a display device having a function of performing signal processing of a video signal for a display device, comprising: input means for a video signal using a tuner and an input terminal; and output means for outputting the signal processing result. An interface module for a display device, wherein the interface module is configured using the signal processing device according to claim 1. 前記請求項1に記載の信号処理装置を用いて構成すること、を特徴とする表示装置。A display device comprising the signal processing device according to claim 1.
JP2003093117A 2003-03-31 2003-03-31 Signal processing device Expired - Fee Related JP4322533B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003093117A JP4322533B2 (en) 2003-03-31 2003-03-31 Signal processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003093117A JP4322533B2 (en) 2003-03-31 2003-03-31 Signal processing device

Publications (2)

Publication Number Publication Date
JP2004304390A true JP2004304390A (en) 2004-10-28
JP4322533B2 JP4322533B2 (en) 2009-09-02

Family

ID=33405983

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003093117A Expired - Fee Related JP4322533B2 (en) 2003-03-31 2003-03-31 Signal processing device

Country Status (1)

Country Link
JP (1) JP4322533B2 (en)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007128034A (en) * 2005-10-07 2007-05-24 Seiko Epson Corp Display driver, electro-optical device, electronic instrument, and drive method
WO2008056457A1 (en) * 2006-09-22 2008-05-15 Sharp Kabushiki Kaisha Display device drive method, display device, and television receiver
JP2008191443A (en) * 2007-02-06 2008-08-21 Nec Electronics Corp Display driver ic
US7847771B2 (en) 2005-05-11 2010-12-07 Hitachi Displays, Ltd. Display device capable of adjusting divided data in one frame
JP2011055188A (en) * 2009-09-01 2011-03-17 Canon Inc Image capturing apparatus, and method of manufacturing the same
US7916106B2 (en) 2006-04-17 2011-03-29 Samsung Electronics Co., Ltd. LCD driving device
CN102194397A (en) * 2010-03-11 2011-09-21 瑞昱半导体股份有限公司 Over-drive controller applied to a display panel and method for over-drive control therein
US8044912B2 (en) 2007-01-11 2011-10-25 Samsung Electronics Co., Ltd. Semiconductor device including correction parameter generator and method of generating correction parameters
US8339341B2 (en) 2007-11-29 2012-12-25 Mitsubishi Electric Corporation Image display system which performs overdrive processing
TWI383362B (en) * 2007-10-19 2013-01-21 Chunghwa Picture Tubes Ltd An adjustable method on display images

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7847771B2 (en) 2005-05-11 2010-12-07 Hitachi Displays, Ltd. Display device capable of adjusting divided data in one frame
JP2007128034A (en) * 2005-10-07 2007-05-24 Seiko Epson Corp Display driver, electro-optical device, electronic instrument, and drive method
US7916106B2 (en) 2006-04-17 2011-03-29 Samsung Electronics Co., Ltd. LCD driving device
US8289453B2 (en) 2006-09-22 2012-10-16 Sharp Kabushiki Kaisha Method for driving a display device, a display device, and a television receiver
CN101517631B (en) * 2006-09-22 2012-06-13 夏普株式会社 Display device drive method, display device, and television receiver
WO2008056457A1 (en) * 2006-09-22 2008-05-15 Sharp Kabushiki Kaisha Display device drive method, display device, and television receiver
US8044912B2 (en) 2007-01-11 2011-10-25 Samsung Electronics Co., Ltd. Semiconductor device including correction parameter generator and method of generating correction parameters
JP2008191443A (en) * 2007-02-06 2008-08-21 Nec Electronics Corp Display driver ic
TWI383362B (en) * 2007-10-19 2013-01-21 Chunghwa Picture Tubes Ltd An adjustable method on display images
US8339341B2 (en) 2007-11-29 2012-12-25 Mitsubishi Electric Corporation Image display system which performs overdrive processing
JP2011055188A (en) * 2009-09-01 2011-03-17 Canon Inc Image capturing apparatus, and method of manufacturing the same
CN102194397A (en) * 2010-03-11 2011-09-21 瑞昱半导体股份有限公司 Over-drive controller applied to a display panel and method for over-drive control therein
CN102194397B (en) * 2010-03-11 2016-06-01 瑞昱半导体股份有限公司 Application overdrive controller and control method of overdriving thereof on a display panel

Also Published As

Publication number Publication date
JP4322533B2 (en) 2009-09-02

Similar Documents

Publication Publication Date Title
US6593939B2 (en) Image display device and driver circuit therefor
JP4320989B2 (en) Display device
KR100806858B1 (en) High definition image dislpay device and method for frame rate conversion thereof
JP4884481B2 (en) Image display device
JP2008286908A (en) Image display device and method, and image generating device and method
JP2001100687A (en) Device and method for displaying image
JP2003018500A (en) Image processing circuit, image display device, and an image processing method
JP4322533B2 (en) Signal processing device
JP2005309326A (en) Liquid crystal display device
JP2006064964A (en) Flat display apparatus and driving method for the same
JP2003005723A (en) Liquid crystal display device and electronic equipment
JP2004357253A (en) Video signal conversion apparatus, video signal processor, and video display apparatus
JPH05113767A (en) Multigradation display device
JP2008040384A (en) Video signal processing system and display apparatus using the same
US20080218629A1 (en) Method and system for processing image data in LCD by integrating de-interlace and overdrive operations
JP2006030352A (en) Liquid crystal display device
KR100339401B1 (en) Apparatus for converting format
JPH07175451A (en) Liquid crystal display device
JP3347234B2 (en) Liquid crystal display
JP2006184619A (en) Video display device
JP2000148059A (en) Line number conversion circuit and display device loading the same
JP2001067042A (en) Scan converter for interlace driving panel
JPH05336477A (en) Liquid crystal display device
JPH11308550A (en) Television receiver
JPH1011049A (en) Method and device for overlay display

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060112

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20060112

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081007

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090512

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090603

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120612

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130612

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130612

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140612

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees