JP3959425B2 - Receiving device and display device - Google Patents

Receiving device and display device Download PDF

Info

Publication number
JP3959425B2
JP3959425B2 JP2005213605A JP2005213605A JP3959425B2 JP 3959425 B2 JP3959425 B2 JP 3959425B2 JP 2005213605 A JP2005213605 A JP 2005213605A JP 2005213605 A JP2005213605 A JP 2005213605A JP 3959425 B2 JP3959425 B2 JP 3959425B2
Authority
JP
Japan
Prior art keywords
circuit
enlargement
horizontal
vertical
video signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2005213605A
Other languages
Japanese (ja)
Other versions
JP2005341616A (en
Inventor
賢治 勝又
茂 平畠
敏則 村田
春樹 高田
忍 鳥越
隆則 江田
浩一 石橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Hitachi Advanced Digital Inc
Original Assignee
Hitachi Ltd
Hitachi Advanced Digital Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd, Hitachi Advanced Digital Inc filed Critical Hitachi Ltd
Priority to JP2005213605A priority Critical patent/JP3959425B2/en
Publication of JP2005341616A publication Critical patent/JP2005341616A/en
Application granted granted Critical
Publication of JP3959425B2 publication Critical patent/JP3959425B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Description

本発明は、映像を画面に違和感なく表示させることができる映像圧縮拡大装置に関する。 The present invention relates to a video compression / enlargement apparatus capable of displaying video on a screen without a sense of incongruity.

高品位テレビの試験放送が1991年より始まり、画面のアスペクト比が16
:9の受信機も家庭用としての普及が始まりつつある。画面のアスペクト比が1
6:9の受信機は、従来放送との整合性をとることが普及の重要なポイントであ
り、従来放送のアスペクト比をいかに16:9に変換するかが大きな課題となっ
ている。さらに、最近のパッケージソフト等に多数存在する映画サイズ、即ち、
映像の上下に黒帯が付いて全体のアスペクト比が4:3である、いわゆるレター
ボックスの映像(映像のアスペクト比は様々である)は、画面のアスペクト比が
16:9の表示装置に映した場合、垂直方向に拡大することによって16:9に
近いアスペクト比を得ることができるため、垂直方向への拡大も必須の技術とな
っている。
High-definition television test broadcasting began in 1991, with a screen aspect ratio of 16
: 9 receivers are also starting to spread for household use. Screen aspect ratio is 1
It is an important point for the 6: 9 receiver to be consistent with the conventional broadcast, and how to convert the aspect ratio of the conventional broadcast to 16: 9 is a major issue. Furthermore, there are many movie sizes that exist in recent package software, that is,
A so-called letterbox image (with various aspect ratios) is displayed on a display device with a screen aspect ratio of 16: 9, with black bands at the top and bottom of the image and an overall aspect ratio of 4: 3. In this case, since an aspect ratio close to 16: 9 can be obtained by enlarging in the vertical direction, enlargement in the vertical direction is also an essential technique.

例えば、特開平1−194784号公報では、ラインメモリの書き込み周波数
と読みだし周波数を変えることによって映像を水平方向に圧縮し、アスペクト比
が16:9の画面の中にアスペクト比が4:3の映像をはめ込む方法と、偏向回
路の出力振幅を変化させることによって映像を垂直方向に拡大し、上下の映像の
一部分を切って表示する方法とを併用する方式が開示されている。
For example, in JP-A-1-194784, a video is compressed in the horizontal direction by changing the writing frequency and the reading frequency of the line memory, and the aspect ratio is 4: 3 in a screen having an aspect ratio of 16: 9. There is disclosed a method that uses both a method of fitting an image and a method of expanding an image in the vertical direction by changing the output amplitude of a deflection circuit and cutting and displaying a part of the upper and lower images.

また、特開平3−11891号公報では、映像の垂直方向の拡大をディジタル
信号処理で行う技術が開示されている。図2に、ディジタル信号処理によって走
査線を補間し、映像を垂直方向に拡大する、この既提案例における構成を示す。
Japanese Patent Laid-Open No. 3-11891 discloses a technique for performing vertical enlargement of an image by digital signal processing. FIG. 2 shows a configuration in the already proposed example in which scanning lines are interpolated by digital signal processing to enlarge an image in the vertical direction.

図2において、201、202はディジタル化された映像信号の入力端子と出
力端子、203は少なくとも120ライン程度の容量を持ったメモリ、204は
1ラインメモリ、205、206は入力信号を係数倍するROMテーブル、20
7は加算器、208はメモリ203の制御信号の入力端子、209はROM20
5,206のテーブルを切り換える制御信号の入力端子である。
In FIG. 2, 201 and 202 are input terminals and output terminals for digitized video signals, 203 is a memory having a capacity of at least about 120 lines, 204 is a one-line memory, and 205 and 206 multiply input signals by a coefficient. ROM table, 20
7 is an adder, 208 is a control signal input terminal of the memory 203, and 209 is a ROM 20.
This is an input terminal for a control signal for switching the table of 5,206.

この既提案例では、メモリ203は、入力端子208からの制御信号に従って
、あらかじめ定められたライン周期で同一ラインを再度読み出すよう制御される
。1ラインメモリ204で1ライン映像信号を遅延した結果、ROM205、2
06には上下2ラインの走査線信号が供給され、入力端子209からの制御信号
によって選択されたROMテーブルにおける係数が乗ぜられ、加算器207より
正しい走査線の重心を持った信号を得ることができる。
In this proposed example, the memory 203 is controlled to read the same line again at a predetermined line period in accordance with a control signal from the input terminal 208. As a result of delaying the one-line video signal by the one-line memory 204, the ROM 205, 2
The upper and lower two scanning line signals are supplied to 06, multiplied by the coefficient in the ROM table selected by the control signal from the input terminal 209, and a signal having the correct scanning line centroid can be obtained from the adder 207. it can.

この様にして得られた拡大映像は、順次走査の信号では、偏向回路の出力振幅
を変化させることによって拡大した場合に比べて、走査線の間隔が変化しないた
め、大画面の表示装置においても高画質な映像を得ることができる。
The enlarged image obtained in this way is not changed in the scanning signal interval as compared with the case where the scanning signal is enlarged by changing the output amplitude of the deflection circuit. High quality images can be obtained.

この様に、アスペクト比が4:3の映像を、アスペクト比が16:9の画面に
表示させるために、様々な工夫が為されていた。
As described above, various ideas have been made to display an image having an aspect ratio of 4: 3 on a screen having an aspect ratio of 16: 9.

特開平1−194784号公報Japanese Patent Laid-Open No. 1-194484 特開平3−11891号公報Japanese Patent Laid-Open No. 3-11891

上記した2つの既提案例は、それぞれ、アスペクト比が4:3の映像を、アス
ペクト比が16:9の画面に表示させる方式としては優れている。しかしながら
、最近のパッケージソフトに多く見られる映画ソフトのレターボックスの映像に
は、様々なアスペクト比を持ったものが存在し、これらを、画面のアスペクト比
が16:9である表示装置にとって最適な大きさに合わせることは困難になって
いる。
The above-mentioned two already proposed examples are excellent as methods for displaying an image having an aspect ratio of 4: 3 on a screen having an aspect ratio of 16: 9. However, some of the letterbox images of movie software often found in recent package software have various aspect ratios, which are optimal for display devices with a screen aspect ratio of 16: 9. It has become difficult to adapt to the size.

また、大半を占めるアスペクト比が4:3の映像を圧縮して表示する方法につ
いては、特に、プロジェクションタイプの表示装置において、画面が焼き付く恐
れもある。
Further, with regard to a method for compressing and displaying a video having an aspect ratio of 4: 3 that occupies the majority, there is a possibility that the screen may be burned, particularly in a projection type display device.

本発明の目的は、映像を画面に違和感なく表示させるための受信装置を提供することである。 An object of the present invention is to provide a receiving apparatus for displaying video on a screen without a sense of incongruity.

上記課題を解決するため、例えば、映像信号を入力して表示部に出力する受信装置であって、映像信号が入力される入力手段と、 前記入力手段に入力された映像信号が表示された場合の表示位置に対応した拡大率ルックアップテーブルを用いてを決定するデータ参照型の拡大率決定手段と前記拡大率決定手段を用いて、前記入力された映像信号の垂直方向及び/または水平方向に連続的に映像を拡大させることにより、前記映像信号を前記表示部の所定のアスペクト比に合うように前記映像信号を制御する手段と、を備えるように構成すればよい。
In order to solve the above-described problem, for example, a receiving device that inputs a video signal and outputs the video signal to a display unit, where the video signal is input and the video signal input to the input unit is displayed and data reference type enlargement ratio determining means for determining the using magnification look-up table corresponding to the display position of, using the expansion factor determining means, vertical and / or horizontal direction of the input video signal the manner by expanding the video continuous, and means for controlling the video signal to match the video signal to a predetermined aspect ratio of the display unit may be configured to include.

以上説明したように、本発明によれば、映像を画面に違和感なく表示させるための受信装置を提供することができる。As described above, according to the present invention, it is possible to provide a receiving device for displaying video on a screen without a sense of incongruity.

以下に、本発明の最良の実施形態を記載する。同一番号・記号は同一構成を意味するものとする。   The best embodiment of the present invention will be described below. The same number / symbol means the same configuration.

本発明の一実施例を図1に示す。図1において、101はディジタル化した映
像信号の入力端子、102は映像信号の出力端子、103はフィールドメモリ、
104は垂直補間拡大回路、105は1ラインメモリ、106は垂直補間回路、
107は水平補間拡大回路、108は画素遅延回路、109は水平補間回路、1
10は垂直拡大制御回路、111はメモリ制御回路、112は垂直補間係数発生
回路、113は水平拡大制御回路、114は画像遅延制御回路、115は水平補
間係数発生回路、116は第1の遅延回路、117は第2の遅延回路、118は
書き込みクロックの入力端子、119は読みだしクロック発生回路、120は垂
直拡大率設定値の入力端子、121は水平拡大率設定値の入力端子、122はメ
モリ制御信号の合成回路である。
An embodiment of the present invention is shown in FIG. In FIG. 1, 101 is an input terminal for a digitized video signal, 102 is an output terminal for a video signal, 103 is a field memory,
104 is a vertical interpolation enlargement circuit, 105 is a one-line memory, 106 is a vertical interpolation circuit,
107 is a horizontal interpolation enlargement circuit, 108 is a pixel delay circuit, 109 is a horizontal interpolation circuit,
10 is a vertical enlargement control circuit, 111 is a memory control circuit, 112 is a vertical interpolation coefficient generation circuit, 113 is a horizontal enlargement control circuit, 114 is an image delay control circuit, 115 is a horizontal interpolation coefficient generation circuit, and 116 is a first delay circuit. Reference numeral 117 denotes a second delay circuit, 118 denotes a write clock input terminal, 119 denotes a read clock generation circuit, 120 denotes an input terminal for a vertical enlargement ratio setting value, 121 denotes an input terminal for a horizontal enlargement ratio setting value, and 122 denotes a memory This is a control signal synthesis circuit.

図1において、入力端子101から入力された映像信号は、入力端子118か
らの書き込みクロックによってラインごとに管理され、順次フィールドメモリ1
03に書き込まれる。クロック発生回路119は、入力された書き込みクロック
の約4/3倍の周波数を持つ読みだしクロックを発生し、合成回路122を通し
てフィールドメモリ103に供給する。従って、映像が水平方向に圧縮された映
像信号がフィールドメモリ103より読みだされることとなる。垂直拡大制御回
路110は、拡大率に応じたライン周期でフィールドメモリ103から映像信号
を読みだすよう、合成回路122を介して制御する。また、同様の周期で垂直拡
大回路104に含まれる1ラインメモリ105の書き込みを停止させ、フィール
ドメモリ103の出力信号のライン遅延出力を得る。この様子を図3に示す。
In FIG. 1, the video signal input from the input terminal 101 is managed for each line by the write clock from the input terminal 118, and sequentially the field memory 1.
03 is written. The clock generation circuit 119 generates a read clock having a frequency about 4/3 times the input write clock and supplies it to the field memory 103 through the synthesis circuit 122. Accordingly, a video signal obtained by compressing the video in the horizontal direction is read from the field memory 103. The vertical enlargement control circuit 110 performs control via the synthesis circuit 122 so as to read the video signal from the field memory 103 at a line cycle corresponding to the enlargement ratio. Further, the writing of the one-line memory 105 included in the vertical enlargement circuit 104 is stopped at the same cycle, and the line delay output of the output signal of the field memory 103 is obtained. This is shown in FIG.

図3は垂直方向に4/3倍に拡大する場合の走査線の様子を示す説明図である
。(b)はフィールドメモリ103の出力信号であり、メモリ制御回路111に
よるラインリセット(a)のタイミングで同一走査線が繰返し読みだされる。(
c)は1ラインメモリ105の書き込み禁止制御信号でラインリセット(a)の
1ライン前で書き込みを停止させ、1ラインメモリ105の出力信号(d)を得
る。この結果、垂直補間回路106には上下2つの走査線の信号が供給されるこ
ととなる。すなわち、(b)と(d)は必ず隣合わせの走査線の信号となる。
FIG. 3 is an explanatory diagram showing the state of the scanning line when it is enlarged 4/3 times in the vertical direction. (B) is an output signal of the field memory 103, and the same scanning line is repeatedly read at the timing of the line reset (a) by the memory control circuit 111. (
c) is a write inhibition control signal for the one-line memory 105, and writing is stopped one line before the line reset (a), and an output signal (d) for the one-line memory 105 is obtained. As a result, the vertical interpolation circuit 106 is supplied with signals from the upper and lower scanning lines. That is, (b) and (d) are always signals of adjacent scanning lines.

垂直補間回路106では、垂直拡大制御回路110からの制御信号にしたがっ
て、補間演算(e)により走査線信号を作成する。
In the vertical interpolation circuit 106, a scanning line signal is generated by interpolation calculation (e) in accordance with the control signal from the vertical enlargement control circuit 110.

図4に、垂直拡大制御回路110の構成を示す。図4において、120は拡大
率に応じて決められた拡大設定値の入力端子、402は補間係数の出力端子、4
03はメモリ制御信号の出力端子、404は1ライン周期のパルスの入力端子、
405は補間係数と入力端子120から入力された拡大設定値を加算する加算器
、406は加算器405の出力信号のラッチ回路、407は加算器405の桁上
がり信号のラッチ回路である。
FIG. 4 shows the configuration of the vertical enlargement control circuit 110. In FIG. 4, 120 is an input terminal for an enlargement set value determined according to the enlargement ratio, 402 is an output terminal for an interpolation coefficient, 4
03 is an output terminal for a memory control signal, 404 is an input terminal for a pulse of one line period,
Reference numeral 405 denotes an adder for adding the interpolation coefficient and the enlarged set value input from the input terminal 120; 406, an output signal latch circuit of the adder 405; and 407, a carry signal latch circuit of the adder 405.

この構成例は、出力される補間係数の精度を8ビットとしたものである。拡大
設定値とフィードバックされた補間係数を、入力端子404から入力されるパル
スに従って加算器405で繰り返し加算することにより、各ラインにおける新た
な補間係数が順次得られる。また、この時、加算器405の桁上がり信号は、フ
ィールドメモリ103で同一ラインを繰り返し読みだすためのメモリ制御信号と
なる。拡大率の設定値xと実際の拡大率zの関係は8ビットのシステムの場合、
次の式で表すことができる。
In this configuration example, the accuracy of the output interpolation coefficient is 8 bits. The enlargement set value and the fed back interpolation coefficient are repeatedly added by the adder 405 in accordance with the pulse input from the input terminal 404, whereby new interpolation coefficients in each line are sequentially obtained. At this time, the carry signal of the adder 405 becomes a memory control signal for repeatedly reading the same line in the field memory 103. In the case of an 8-bit system, the relationship between the set value x of the enlargement ratio and the actual enlargement ratio z is
It can be expressed by the following formula.

(数1)
z=256/(256−x)
上式から判るようにビット精度をあげることによって、理論的には任意の拡大
率を得ることができる。
(Equation 1)
z = 256 / (256-x)
As can be seen from the above equation, an arbitrary enlargement ratio can be obtained theoretically by increasing the bit precision.

一方、垂直補間回路106によって得られた走査線は、図3(f)に示す入力
映像信号(入力端子101から入力された映像信号)に対して(g)の位置に重
心がある信号となる。これを実際の走査線の位置(h)に表示することで、映像
が垂直方向に拡大された映像信号が得られる。
On the other hand, the scanning line obtained by the vertical interpolation circuit 106 has a center of gravity at the position (g) with respect to the input video signal (video signal input from the input terminal 101) shown in FIG. . By displaying this at the position (h) of the actual scanning line, a video signal in which the video is enlarged in the vertical direction can be obtained.

水平方向の拡大も垂直方向の拡大と同様の構成で行なうことができる。水平拡
大制御回路113で生成した遅延制御信号は合成回路122を通してフィールド
メモリ103に供給される。フィールドメモリ103では、遅延制御信号に従っ
て、拡大倍に応じた周期で同一画素を再度読みだす制御を行ない、映像が水平方
向に拡大された映像信号を得る。さらに、水平拡大回路107では、水平拡大制
御回路113からの制御信号にしたがって水平補間を行なって、映像が水平方向
に拡大され、かつ重心のそろった映像信号を得る。遅延回路116、117は、
フィールドメモリ103の制御と画素遅延回路108、水平補間回路109との
遅延時間調整のために、挿入される。
The horizontal expansion can be performed with the same configuration as the vertical expansion. The delay control signal generated by the horizontal enlargement control circuit 113 is supplied to the field memory 103 through the synthesis circuit 122. In the field memory 103, in accordance with the delay control signal, the same pixel is read again with a period corresponding to the magnification, and a video signal in which the video is expanded in the horizontal direction is obtained. Further, the horizontal enlargement circuit 107 performs horizontal interpolation according to the control signal from the horizontal enlargement control circuit 113 to obtain an image signal in which the image is expanded in the horizontal direction and has a uniform center of gravity. The delay circuits 116 and 117 are
It is inserted for controlling the field memory 103 and adjusting the delay time between the pixel delay circuit 108 and the horizontal interpolation circuit 109.

この様に、本実施例では、フィールドメモリ103と1ラインメモリ105等
を用いることによって、アスペクト比が4:3の映像をアスペクト比が16:9
の画面に表示させるために映像を水平方向に一旦圧縮し、同時に、映像を垂直方
向及び水平方向に任意の大きさに拡大することが、簡単な回路構成で実現できる
。例えば、フィールドメモリとして日立製のフィールドメモリHM530281
を用いれば、ラインリセット機能を用いて同一ラインを繰り返し読みだすことが
でき、制御が簡単になる。
As described above, in this embodiment, by using the field memory 103, the one-line memory 105, and the like, an image having an aspect ratio of 4: 3 is converted to an aspect ratio of 16: 9.
In order to display the image on the screen, the image is temporarily compressed in the horizontal direction, and at the same time, the image can be enlarged to an arbitrary size in the vertical direction and the horizontal direction with a simple circuit configuration. For example, Hitachi field memory HM530281 is used as the field memory.
By using, the same line can be read repeatedly using the line reset function, and the control becomes simple.

図5に、本発明の他の実施例を示す。図5において、501はフィールドメモ
リ103の制御信号を遅延する遅延回路、502は補間係数の遅延回路であり、
その他の構成要素は図1の実施例と同じである。本実施例は、水平拡大回路10
7で水平方向の拡大を行なった後に、垂直拡大回路104で垂直方向の拡大を行
なっている点が、図1の実施例の構成と異なっている。回路の動作は図1の実施
例と同様である。
FIG. 5 shows another embodiment of the present invention. In FIG. 5, 501 is a delay circuit for delaying the control signal of the field memory 103, 502 is a delay circuit for the interpolation coefficient,
Other components are the same as those in the embodiment of FIG. In this embodiment, the horizontal enlargement circuit 10
1 is different from the embodiment of FIG. 1 in that the vertical enlargement circuit 104 performs the vertical enlargement after the horizontal enlargement in FIG. The operation of the circuit is the same as in the embodiment of FIG.

本実施例では遅延回路116、117の遅延量が図1の実施例に比べて極めて
小さく、回路規模を削減できる効果がある。遅延回路501、502はライン単
位で制御するため、垂直拡大制御回路110の制御信号発生タイミングを考慮す
ることによって、ほとんど遅延を行なう必要は無くなる。すなわち、本実施例の
構成を採ることによって、さらに小さな回路規模で任意の圧縮,拡大が可能な回
路を提供することができる。
In this embodiment, the delay amounts of the delay circuits 116 and 117 are extremely small compared to the embodiment of FIG. 1, and the circuit scale can be reduced. Since the delay circuits 501 and 502 are controlled on a line-by-line basis, there is almost no need to delay by considering the control signal generation timing of the vertical enlargement control circuit 110. That is, by adopting the configuration of the present embodiment, it is possible to provide a circuit that can be arbitrarily compressed and expanded with a smaller circuit scale.

図6に、本発明の別の実施例を示す。図6において、601は水平拡大制御回
路113と同様の構成を成す第2の水平拡大制御回路であり、その他は図1の実
施例と同じである。本実施例は、水平拡大制御回路113の他に同様の働きをす
る第2の水平拡大制御回路601を備えていることが、図1の実施例と異なる。
回路の動作は図1の実施例と同様である。
FIG. 6 shows another embodiment of the present invention. In FIG. 6, reference numeral 601 denotes a second horizontal enlargement control circuit having the same configuration as that of the horizontal enlargement control circuit 113, and the others are the same as those in the embodiment of FIG. This embodiment is different from the embodiment of FIG. 1 in that a second horizontal enlargement control circuit 601 having the same function is provided in addition to the horizontal enlargement control circuit 113.
The operation of the circuit is the same as in the embodiment of FIG.

第1の水平拡大制御回路113は、入力端子121より与えられた拡大設定値
に従ってフィールドメモリ103を制御し、映像が水平方向に拡大された映像信
号を得る。第2の水平拡大制御回路601は、第1の水平拡大制御回路113の
リセットタイミングに対して、フィールドメモリ103と水平補間拡大回路10
7との間の遅延時間差を持ってリセットし、水平補間拡大回路107中の画素遅
延回路108を制御する遅延制御信号と、水平補間回路109を制御する係数値
を供給する。この結果、図1の実施例で必要となった遅延回路116、117が
不必要となる。従って、回路の遅延時間を考慮し、図1の遅延回路116、11
7と図6の第2の水平拡大制御回路601のうち、回路規模の小さい方の実施例
を選択することによって、最適な回路を構成することができる。
The first horizontal enlargement control circuit 113 controls the field memory 103 according to the enlargement setting value given from the input terminal 121 to obtain a video signal in which the video is enlarged in the horizontal direction. The second horizontal enlargement control circuit 601 receives the field memory 103 and the horizontal interpolation enlargement circuit 10 in response to the reset timing of the first horizontal enlargement control circuit 113.
7 is supplied with a delay control signal for controlling the pixel delay circuit 108 in the horizontal interpolation enlargement circuit 107 and a coefficient value for controlling the horizontal interpolation circuit 109. As a result, the delay circuits 116 and 117 required in the embodiment of FIG. 1 are unnecessary. Accordingly, the delay circuits 116 and 11 in FIG.
7 and the second horizontal enlargement control circuit 601 shown in FIG. 6 can be used to configure an optimum circuit by selecting an embodiment having a smaller circuit scale.

前述の実施例では、垂直拡大制御回路110と水平拡大制御回路113によっ
て、映像全体を垂直方向、水平方向とも任意の大きさに圧縮,拡大することがで
きた。これは、現行方式の映像信号による映像のうち、レターボックスタイプの
映画のような横長の映像をアスペクト比が16:9の画面を持った表示装置に映
す際、無信号の黒帯部分を少なくするうえで大きな効果があった。しかしながら
、通常のアスペクト比が4:3の映像では、拡大することによって画面からはみ
出し、見えなくなってしまう部分も大きい。さらには、レターボックスの映像に
おいても、そのサイズによっては、拡大した場合に、上下のサイズを合わせるこ
とによって左右の映像が見えなくなったり、左右のサイズを合わせることによっ
て上下に黒帯の部分が残ったりして、違和感を与えることがあった。また、黒帯
の部分は画面の焼き付きを起こすという問題点も指摘されている。
In the above-described embodiment, the entire image can be compressed and enlarged to an arbitrary size both in the vertical and horizontal directions by the vertical enlargement control circuit 110 and the horizontal enlargement control circuit 113. This is because when a horizontally long image such as a letterbox type movie is projected on a display device having a screen with an aspect ratio of 16: 9 among the images based on the current format video signal, the black band portion with no signal is reduced. There was a big effect in doing. However, in an image with a normal aspect ratio of 4: 3, there is a large part that is out of the screen due to enlargement and becomes invisible. Furthermore, even in letterbox images, depending on the size, when enlarged, the left and right images become invisible by adjusting the top and bottom sizes, or black bands remain at the top and bottom by adjusting the left and right sizes. Sometimes gave a sense of incongruity. In addition, it has been pointed out that the black belt part causes screen burn-in.

そこで、この様な問題点を解決した実施例を、図7を用いて説明する。すなわち、本実施例は、前述の実施例における垂直拡大制御回路110,水平拡大制御回路113を改良したものであり、図7はそのうち、垂直拡大制御回路110の構成を示すブロック図である。     An embodiment that solves such problems will be described with reference to FIG. In other words, this embodiment is an improvement of the vertical enlargement control circuit 110 and the horizontal enlargement control circuit 113 in the above-described embodiment, and FIG. 7 is a block diagram showing the configuration of the vertical enlargement control circuit 110.

図7において、701は画面のライン数をカウントする垂直カウンタ、702
はある関数に従って垂直カウンタ701の値を変換する数値変換器、その他は図
4の構成例と同じである。本実施例によれば、図4の構成例で示した入力端子1
20からの拡大率の設定値が、画面の位置によって数値変換器702の設定にし
たがい自由に変換できるため、映像における任意の位置を任意の倍率で拡大する
ことができる。数値変換器702は簡単な関数であれば論理回路で構成すること
ができる。また、複雑な関数においてはROM等を用いたルックアップテーブル
方式を採っても良い。この実施例の使用例を図8に示す。
In FIG. 7, reference numeral 701 denotes a vertical counter for counting the number of lines on the screen, 702
Is a numerical value converter for converting the value of the vertical counter 701 according to a certain function, and the others are the same as the configuration example of FIG. According to this embodiment, the input terminal 1 shown in the configuration example of FIG.
Since the setting value of the enlargement ratio from 20 can be freely converted according to the setting of the numerical converter 702 depending on the position of the screen, an arbitrary position in the video can be enlarged at an arbitrary magnification. The numerical value converter 702 can be configured with a logic circuit as long as it is a simple function. For complex functions, a look-up table method using a ROM or the like may be employed. An example of use of this embodiment is shown in FIG.

図8(a)は、現行方式の映像信号による映像を水平方向に圧縮して、アスペ
クト比が16:9の画面に表示したものである。この映像は、横長のレターボッ
クスタイプのもので、そのアスペクト比はほぼ2:1のものを想定しており、圧
縮前における全体(映像及び黒帯の部分)のアスペクト比は4:3である。(b
)は(a)を垂直方向,水平方向とも4/3倍に拡大したものであり、16:9
の画面では映像の水平方向の大きさがほぼ合致する。しかしながら、前述のよう
にこの場合には上下に黒帯の部分が多少残ってしまい違和感を生ずる画面となる
FIG. 8A shows an image obtained by compressing an image based on the current image signal in the horizontal direction and displaying it on a screen having an aspect ratio of 16: 9. This video is of a horizontally long letterbox type, and its aspect ratio is assumed to be about 2: 1, and the overall aspect ratio (video and black belt portion) before compression is 4: 3. . (B
) Is an enlargement of (a) 4/3 times in both the vertical and horizontal directions. 16: 9
In this screen, the horizontal size of the video is almost the same. However, as described above, in this case, a portion of the black band remains on the top and bottom, resulting in a screen that gives a sense of discomfort.

(c)は図7に示す数値変換器702における関数を示したものである。縦軸
は垂直カウンタ701の値であり、横軸は拡大率を示している。この関数は画面
の中央付近で4/3倍の拡大率を与え、画面上下の端部で拡大率を大きくし、垂
直方向の平均拡大率を3/2倍としたものである。この様な関数を数値変換器7
02において定義することにより、(d)に示すように黒帯が無く、アスペクト
比が16:9の画面に収まった映像を提供することができる。この時、画面の中
央部分では、水平と垂直方向の拡大率が一致しているため、正しい真円率で表示
しており、真円率が変化しているのは画面の端部のみであるので、映像としての
違和感はほとんど無くなる。
(C) shows a function in the numerical value converter 702 shown in FIG. The vertical axis represents the value of the vertical counter 701, and the horizontal axis represents the enlargement ratio. This function gives an enlargement factor of 4/3 near the center of the screen, increases the enlargement factor at the top and bottom edges of the screen, and makes the average enlargement factor in the vertical direction 3/2. Such a function is converted into a numeric converter 7
By defining in 02, it is possible to provide an image that has no black band and has an aspect ratio of 16: 9 as shown in (d). At this time, since the horizontal and vertical enlargement ratios match in the center of the screen, the correct roundness is displayed, and the roundness is changing only at the edge of the screen. Therefore, there is almost no sense of incongruity as a video.

一方、(e)は、垂直方向,水平方向とも3/2倍に拡大した場合であり、垂
直方向のサイズはアスペクト比が16:9の画面に一致するが、水平方向は映像
の欠ける部分が生じてしまう。この場合には、水平拡大制御回路113に関して
前述の数値変換器702の概念を導入する。数値変換器702の入力信号は水平
カウンタ(図示せず)のカウント値となり、拡大率を決める関数は(f)のよう
に画面の水平方向の両端で拡大率が小さくなるものを選択する。この時、水平方
向の平均拡大率が4/3倍となるように設定すると、(g)に示すようにアスペ
クト比が16:9の画面に全ての映像が収まるようにすることができる。この場
合も(d)と同様に映像に歪が発生するのは水平方向の両端だけであり、ほとん
ど違和感は無い映像となる。
On the other hand, (e) shows a case where the image is enlarged 3/2 times in both the vertical direction and the horizontal direction, and the size in the vertical direction coincides with a screen having an aspect ratio of 16: 9. It will occur. In this case, the concept of the numerical value converter 702 described above with respect to the horizontal enlargement control circuit 113 is introduced. The input signal of the numerical value converter 702 becomes a count value of a horizontal counter (not shown), and a function for determining the enlargement ratio is selected such that the enlargement ratio is small at both ends in the horizontal direction of the screen as shown in (f). At this time, if the average magnification in the horizontal direction is set to be 4/3 times, as shown in (g), it is possible to fit all the images on a screen with an aspect ratio of 16: 9. In this case as well, as in (d), the image is distorted only at both ends in the horizontal direction, and the image has almost no sense of incongruity.

この様に、本実施例では、図7に示す数値変換器702を導入して、図1に示
したような映像を任意の大きさに拡大できる回路と組み合わせることによって、
映像を部分的に圧縮,拡大することができるので、アスペクト比が16:9の画
面に、アスペクト比が4:3の映像や、レターボックスの映像を違和感無く表示
させることが可能となる。
In this way, in this embodiment, by introducing the numerical value converter 702 shown in FIG. 7 and combining it with a circuit capable of expanding the image as shown in FIG. 1 to an arbitrary size,
Since the video can be partially compressed and enlarged, it is possible to display a video with an aspect ratio of 4: 3 and a letterbox video on a screen with an aspect ratio of 16: 9 without any discomfort.

図9に、本発明のさらに別の実施例を示す。図9において、901は映像信号
の入力端子、902はアスペクト比が4:3の画面を持つディスプレイ、903
は入力映像信号にY/C分離等の信号処理を行なってディスプレイ902へ供給
する映像処理回路、904は映像信号から同期信号を取り出す同期処理回路、9
05は映像信号の拡大圧縮率を設定するモード設定回路、906は同期処理回路
904の出力信号からモード設定回路905の指定するモードにしたがいディス
プレイ902を駆動するための垂直偏向電流を出力する垂直偏向回路、907は
同期処理回路904の出力信号からモード設定回路905の指定するモードにし
たがいディスプレイ902を駆動するための水平偏向電流を出力する水平偏向回
路、908、909は垂直偏向回路906と水平偏向回路907の偏向電流出力
に補正を加える第1、第2の偏向電流補正回路、910は高圧発生回路である。
FIG. 9 shows still another embodiment of the present invention. In FIG. 9, reference numeral 901 denotes a video signal input terminal, 902 a display having a screen with an aspect ratio of 4: 3, and 903
Is a video processing circuit for performing signal processing such as Y / C separation on the input video signal and supplying it to the display 902, 904 is a synchronization processing circuit for extracting a synchronization signal from the video signal, 9
05 is a mode setting circuit for setting an expansion compression ratio of the video signal. 906 is a vertical deflection for outputting a vertical deflection current for driving the display 902 in accordance with a mode designated by the mode setting circuit 905 from the output signal of the synchronization processing circuit 904. A circuit 907 is a horizontal deflection circuit that outputs a horizontal deflection current for driving the display 902 in accordance with a mode specified by the mode setting circuit 905 from an output signal of the synchronization processing circuit 904, and 908 and 909 are a vertical deflection circuit 906 and a horizontal deflection. First and second deflection current correction circuits 910 for correcting the deflection current output of the circuit 907 are high voltage generation circuits.

本実施例では、映像の部分的な圧縮,拡大を偏向回路及び偏向電流補正回路に
よって行なっている点が前述の実施例と異なる。垂直偏向回路906は同期処理
回路904からの垂直パルスにしたがって、ディスプレイ902を駆動する垂直
ののこぎり波を発生する。同様に、水平偏向回路907は同期処理回路904か
らの水平パルスにしたがって、ディスプレイ902を駆動する水平ののこぎり波
を発生する。この時、垂直偏向回路906、水平偏向回路907は、モード設定
回路905により設定されたモードによって、発生するのこぎり波の傾きと位相
をそれぞれ変える。したがって、映像は垂直方向,水平方向に全体的に拡大され
る。
This embodiment is different from the above-described embodiment in that partial compression and enlargement of an image are performed by a deflection circuit and a deflection current correction circuit. The vertical deflection circuit 906 generates a vertical sawtooth wave that drives the display 902 in accordance with the vertical pulse from the synchronization processing circuit 904. Similarly, the horizontal deflection circuit 907 generates a horizontal sawtooth wave that drives the display 902 in accordance with the horizontal pulse from the synchronization processing circuit 904. At this time, the vertical deflection circuit 906 and the horizontal deflection circuit 907 change the slope and phase of the generated sawtooth wave according to the mode set by the mode setting circuit 905, respectively. Therefore, the image is enlarged as a whole in the vertical and horizontal directions.

一方、第1の偏向電流補正回路908は垂直偏向回路906に、また、第2の
偏向電流補正回路909は水平偏向回路907に、それぞれ補正を加え、のこぎ
り波に部分的な歪を与える。この補正により、のこぎり波の傾きが部分的に変化
し、映像は画面の場所ごとに拡大圧縮率が変わることとなる。
On the other hand, the first deflection current correction circuit 908 corrects the vertical deflection circuit 906, and the second deflection current correction circuit 909 corrects the horizontal deflection circuit 907, respectively, to give partial distortion to the sawtooth wave. As a result of this correction, the inclination of the sawtooth wave partially changes, and the video image has a different expansion / compression rate for each screen location.

本実施例は、アスペクト比が4:3の画面にレターボックス形式の映像を表示
する場合に特に有効である。この実施例の使用例を図10に示す。
This embodiment is particularly effective when displaying a letterbox video on a screen having an aspect ratio of 4: 3. An example of use of this embodiment is shown in FIG.

図10(a)は、アスペクト比が4:3の画面にレターボックス形式の映像を
表示したものである。レターボックス映像は、第2世代のEDTV方式で取り入
れられる方法で、今後普及することが予想される。第2世代のEDTVでは、上
下の無画部に高精細情報が挿入されるため、アスペクト比が4:3の画面上では
多少不自然さが残ると考えられる。(b)は、垂直偏向回路906と水平偏向回
路907を用いて映像を垂直方向,水平方向に全体的に拡大し、無画部の領域を
減らす工夫を施したものである。しかしながら、左右両端に見えなくなる部分が
存在するため問題が残る。(c)は第2の偏向電流補正回路909を用いて、水
平ののこぎり波の傾きを左右両端で小さくして映像を圧縮し、第1の偏向電流補
正回路908を用いて、垂直ののこぎり波の傾きを上下両端で大きくして映像を
拡大したものである。したがって、必要な映像のほとんどすべてが表示可能とな
る。(d)は(c)の表示方法をとった場合、表示した映像に生ずる歪を表した
ものである。中央部(ア)は歪が無く、歪が最も大きくなるのは四隅(エ)であ
り、ほとんど問題とならない。
FIG. 10A shows a letterbox format image displayed on a screen having an aspect ratio of 4: 3. Letterbox video is a method that can be adopted in the second generation EDTV system and is expected to spread in the future. In the second-generation EDTV, high-definition information is inserted in the upper and lower non-picture portions, so that it seems that some unnaturalness remains on a screen with an aspect ratio of 4: 3. (B) is a device in which a vertical deflection circuit 906 and a horizontal deflection circuit 907 are used to enlarge the entire image in the vertical and horizontal directions to reduce the area of the non-image area. However, the problem remains because there are portions that cannot be seen at both the left and right ends. (C) The second deflection current correction circuit 909 is used to compress the image by reducing the slope of the horizontal sawtooth wave at both left and right ends, and the first deflection current correction circuit 908 is used to compress the vertical sawtooth wave. The image is enlarged by increasing the inclination of the image at both the upper and lower ends. Therefore, almost all necessary images can be displayed. (D) shows the distortion which arises in the displayed image | video when the display method of (c) is taken. The central part (a) has no distortion, and the distortion becomes the largest at the four corners (D), which hardly causes a problem.

本実施例の方式は図8に示したアスペクト比が16:9の画面に表示する場合
においても効果がある。また、前述のディジタル処理による拡大圧縮率の可変方
式に比べて、比較的簡単であり、アナログ方式の表示装置に関しては、特に有効
な方法である。
The system of this embodiment is also effective when displaying on a screen with an aspect ratio of 16: 9 shown in FIG. Further, it is relatively simple as compared with the above-described variable compression ratio method using digital processing, and is particularly effective for an analog display device.

以上、上述した実施例によれば、例えば、アスペクト比が4:3の映像をアスペクト比が16:9の画面に表示させるに当たって、映像全体を任意の大きさに縮小,拡大することができるので、画面のアスペクト比に合致した映像を得ることができ、映像を違和感なく画面に表示させることができる。     As described above, according to the above-described embodiment, for example, when an image having an aspect ratio of 4: 3 is displayed on a screen having an aspect ratio of 16: 9, the entire image can be reduced and enlarged to an arbitrary size. Therefore, it is possible to obtain an image that matches the aspect ratio of the screen and display the image on the screen without a sense of incongruity.

また、映像を部分的に縮小,拡大することができるので、映像全体の拡大により映像が部分的に失われたり黒帯の部分が残ったりする等の問題点を解決でき、
画面のアスペクト比に合致した映像を得ることができる。その結果、焼き付きを
防ぐことも可能となる。しかも、いずれの場合も、小さな回路規模で実現することができる。
In addition, since the video can be partially reduced or enlarged, problems such as partial loss of the video or black band remaining due to the enlargement of the entire video can be solved.
Video that matches the aspect ratio of the screen can be obtained. As a result, it is possible to prevent burn-in. In either case, it can be realized with a small circuit scale.

本発明の一実施例を示すブロック図である。It is a block diagram which shows one Example of this invention. 既提案例における構成を示すブロック図である。It is a block diagram which shows the structure in a prior proposal example. 図1の回路における動作内容及び映像の拡大の原理を説明するための説明図である。FIG. 2 is an explanatory diagram for explaining the operation contents and the principle of video enlargement in the circuit of FIG. 1. 図1の垂直拡大制御回路の構成を示すブロック図である。FIG. 2 is a block diagram illustrating a configuration of a vertical enlargement control circuit in FIG. 1. 本発明の他の実施例を示すブロック図である。It is a block diagram which shows the other Example of this invention. 本発明の別の実施例を示すブロック図である。It is a block diagram which shows another Example of this invention. 本発明のさらに他の実施例における垂直拡大制御回路の構成を示すブロック図である。It is a block diagram which shows the structure of the vertical expansion control circuit in the further another Example of this invention. 図7の実施例の使用例を示す説明図である。It is explanatory drawing which shows the usage example of the Example of FIG. 本発明のさらに別の実施例を示すブロック図である。It is a block diagram which shows another Example of this invention. 図10の実施例の使用例を示す説明図である。It is explanatory drawing which shows the usage example of the Example of FIG.

符号の説明Explanation of symbols

103…フィールドメモリ、104…垂直補間拡大回路、105…1ラインメ
モリ、106…垂直補間回路、107…水平補間拡大回路、108…画素遅延回
路、109…水平補間回路、110…垂直拡大制御回路、111…メモリ制御回
路、112…垂直補間係数発生回路、113…水平拡大制御回路、114…画素
遅延制御回路、115…水平補間係数発生回路、116、117…遅延回路、1
20…垂直拡大率設定値の入力端子、121…水平拡大率設定値の入力端子、1
22…メモリ制御信号の合成回路、402…補間係数の出力端子、403…メモ
リ制御信号の出力端子、405…加算器、406、408…ラッチ回路、501
、502…遅延回路、601…水平拡大制御回路、701…カウンタ、702…
数値変換器、903…映像信号処理回路、904…同期処理回路、905…モー
ド設定回路、906…垂直偏向回路、907…水平偏向回路、908、909…
偏向電流補正回路、910…高圧回路。
DESCRIPTION OF SYMBOLS 103 ... Field memory, 104 ... Vertical interpolation expansion circuit, 105 ... 1 line memory, 106 ... Vertical interpolation circuit, 107 ... Horizontal interpolation expansion circuit, 108 ... Pixel delay circuit, 109 ... Horizontal interpolation circuit, 110 ... Vertical expansion control circuit, DESCRIPTION OF SYMBOLS 111 ... Memory control circuit, 112 ... Vertical interpolation coefficient generation circuit, 113 ... Horizontal expansion control circuit, 114 ... Pixel delay control circuit, 115 ... Horizontal interpolation coefficient generation circuit, 116, 117 ... Delay circuit, 1
20... Input terminal for the vertical magnification setting value 121... Input terminal for the horizontal magnification setting value 1
22 ... Memory control signal synthesis circuit, 402 ... Interpolation coefficient output terminal, 403 ... Memory control signal output terminal, 405 ... Adder, 406, 408 ... Latch circuit, 501
, 502 ... Delay circuit, 601 ... Horizontal enlargement control circuit, 701 ... Counter, 702 ...
Numerical value converter, 903... Video signal processing circuit, 904... Synchronization processing circuit, 905... Mode setting circuit, 906 .. vertical deflection circuit, 907 ... horizontal deflection circuit, 908, 909.
Deflection current correction circuit, 910... High voltage circuit.

Claims (3)

映像信号を入力して表示部に出力する受信装置であって、
映像信号が入力される入力手段と、
前記入力手段に入力された映像信号が表示された場合の表示位置に対応した拡大率ルックアップテーブルを用いてを決定するデータ参照型の拡大率決定手段と
前記拡大率決定手段を用いて、前記入力された映像信号の垂直方向及び/または水平方向に連続的に映像を拡大させることにより、前記映像信号を前記表示部の所定のアスペクト比に合うように前記映像信号を制御する手段と、を備えてなることを特徴とする受信装置。
A receiving device for inputting a video signal and outputting it to a display unit,
An input means for inputting a video signal;
A data reference type enlargement ratio determining means for determining using an enlargement ratio lookup table corresponding to a display position when the video signal input to the input means is displayed;
Using the expansion factor determining unit, by expanding the continuous image in the vertical direction and / or horizontal direction of the input video signal, so as to match the video signal to a predetermined aspect ratio of the display unit And a means for controlling the video signal.
請求項1記載の受信装置において、
前記拡大率決定手段は、前記表示部に表示される表示画面の耽美に行くほど拡大率の変が前記表示画面の中央付近より大きくなるように構成され、その変換過程において、前記表示画面の端部に行くにつれ前記拡大率が連続的に変されるように構成されることを特徴とする受信装置。
The receiving device according to claim 1,
The enlargement ratio determining means is configured to change enough magnification goes to aesthetic of the display screen displayed on the display unit is greater than near the center of the display screen, in the conversion process, the display screen receiving device, characterized in that said magnification is configured to be continuously changes as the go end.
請求項1又は2のいずれか1項に記載の受信装置と、
該受信装置より出力された信号を表示する表示画面とを備えてなることを特徴とする表示装置。
The receiving device according to any one of claims 1 and 2,
A display device comprising a display screen for displaying a signal output from the receiving device.
JP2005213605A 2005-07-25 2005-07-25 Receiving device and display device Expired - Lifetime JP3959425B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005213605A JP3959425B2 (en) 2005-07-25 2005-07-25 Receiving device and display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005213605A JP3959425B2 (en) 2005-07-25 2005-07-25 Receiving device and display device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2002242805A Division JP3716239B2 (en) 2002-08-23 2002-08-23 Video signal receiving apparatus and video signal display apparatus

Publications (2)

Publication Number Publication Date
JP2005341616A JP2005341616A (en) 2005-12-08
JP3959425B2 true JP3959425B2 (en) 2007-08-15

Family

ID=35494572

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005213605A Expired - Lifetime JP3959425B2 (en) 2005-07-25 2005-07-25 Receiving device and display device

Country Status (1)

Country Link
JP (1) JP3959425B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007208894A (en) * 2006-02-06 2007-08-16 Olympus Corp Image resolution converting apparatus

Also Published As

Publication number Publication date
JP2005341616A (en) 2005-12-08

Similar Documents

Publication Publication Date Title
JP3231142B2 (en) Video compression / expansion circuit and device
KR100195590B1 (en) Two stage interpolation system
WO1998020670A2 (en) System for converting computer graphics to television format with scaling requiring no frame buffers
JP3068988B2 (en) Interlaced and non-interlaced video signal display devices
KR100548664B1 (en) Image processing apparatus, image processing method, and television receiver
JP3559758B2 (en) Video compression / expansion equipment
JP3959425B2 (en) Receiving device and display device
JP3594596B2 (en) Letterbox display control
JP4557739B2 (en) Video conversion device and video display device
JP3716239B2 (en) Video signal receiving apparatus and video signal display apparatus
JP2003069959A (en) Video signal processing circuit, video signal processing method and image display device
JP2004040696A (en) Video image format converting apparatus and digital broadcasting receiving apparatus
JP2003198980A (en) Video display device
JP2006227442A (en) Video signal processor and video display device equipped therewith
KR100743520B1 (en) Video Scaler and method for scaling video signal
JPH118799A (en) Video display controller
JP2001346125A (en) Image display device and method, and recording medium
JP2002218415A (en) Video signal processor and video display device
JPH07123335A (en) Double screen display television receiver
JP4677755B2 (en) Image filter circuit and interpolation processing method
JP2002218348A (en) Image signal processing device and image display device
KR100209849B1 (en) Horizontal panning for wide screen tv
JP2001251591A (en) Aspect ratio conversion circuit
JPH0795490A (en) Video signal processor for interlace display device
JPH05211632A (en) Two-screen television circuit

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20060512

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060512

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070130

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070424

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070514

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110518

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110518

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120518

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120518

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130518

Year of fee payment: 6

EXPY Cancellation because of completion of term