JP4557739B2 - Video conversion device and video display device - Google Patents

Video conversion device and video display device Download PDF

Info

Publication number
JP4557739B2
JP4557739B2 JP2005028784A JP2005028784A JP4557739B2 JP 4557739 B2 JP4557739 B2 JP 4557739B2 JP 2005028784 A JP2005028784 A JP 2005028784A JP 2005028784 A JP2005028784 A JP 2005028784A JP 4557739 B2 JP4557739 B2 JP 4557739B2
Authority
JP
Japan
Prior art keywords
video
video signal
signal
input
ratio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005028784A
Other languages
Japanese (ja)
Other versions
JP2006215320A (en
Inventor
春樹 石持
美保子 渡辺
政明 守屋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2005028784A priority Critical patent/JP4557739B2/en
Publication of JP2006215320A publication Critical patent/JP2006215320A/en
Application granted granted Critical
Publication of JP4557739B2 publication Critical patent/JP4557739B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、映像変換装置、及び映像表示装置に関し、より詳細には、アスペクト比率16:9の解像度をもつ表示パネルに、アスペクト比率4:3の映像信号(以下、4:3映像信号という)を表示するための映像変換装置、及びその装置を備えた映像表示装置に関する。   The present invention relates to a video conversion device and a video display device. More specifically, the present invention relates to a video signal having an aspect ratio of 4: 3 (hereinafter referred to as 4: 3 video signal) on a display panel having a resolution of an aspect ratio of 16: 9. The present invention relates to a video conversion device for displaying a video and a video display device including the device.

映像ソースを表示するために、液晶パネル、プラズマパネル等のマトリックス型表示パネルを用いた映像表示装置が知られている。このような映像表示装置には、通常、パーソナルコンピュータの表示規格に従った表示パネルが用いられる。このような表示パネルの例としては、画素数のアスペクト比率が4:3である4:3型のVGA(640ドット×480ドット)の表示パネルや、同じく4:3型のXGA(1024ドット×768ドット)の表示パネルなどが挙げられる。   In order to display a video source, a video display device using a matrix type display panel such as a liquid crystal panel or a plasma panel is known. For such a video display device, a display panel according to the display standard of a personal computer is usually used. Examples of such a display panel include a 4: 3 type VGA (640 dots × 480 dots) display panel having an aspect ratio of 4: 3 pixels, and a 4: 3 type XGA (1024 dots × 768 dots) display panel.

一方、映像ソースのフォーマットでは、走査線が525本で有効走査線が480本のインターレース信号からなる525i(NTSCなど)や走査線が525本で有効走査線が480本のプログレッシブ信号からなる525pなどが標準方式として規定され、さらにHDTV(High Definition TeleVision)として映像信号の走査線が1125本で有効走査線が1080本のインターレース信号からなる1125iや1125p(1080p)や750p(720p)なども同様に規定されている。このように、映像ソースの走査線数は、マトリックス型表示パネルの画素の行数と異なる。   On the other hand, in the format of the video source, 525i (such as NTSC) including 525 scanning lines and 480 effective scanning lines, and 525p including 525 scanning lines and 480 progressive scanning lines are effective. 1125i, 1125p (1080p), 750p (720p), etc., which are composed of 1125 video signal scanning lines and 1080 effective scanning lines as HDTV (High Definition TeleVision). It is prescribed. As described above, the number of scanning lines of the video source is different from the number of rows of pixels of the matrix display panel.

したがって、映像ソースをマトリックス型表示パネルに表示するためには、垂直スケーリングを行う必要がある。ここでいう垂直スケーリングとは、映像走査線数をパネルの垂直方向画素数に変換するために、新たな水平走査信号を作り出す処理である。また、映像ソースをマトリックス型表示パネルに表示するためには、垂直スケーリングと併せて水平方向のスケーリングも適時行われる。   Therefore, in order to display the video source on the matrix type display panel, it is necessary to perform vertical scaling. The vertical scaling here is a process of creating a new horizontal scanning signal in order to convert the number of video scanning lines into the number of vertical pixels of the panel. In addition, in order to display the video source on the matrix type display panel, horizontal scaling is performed in combination with vertical scaling.

しかしながら、上述したVGAやXGAの表示パネルをはじめとする表示画面のアスペクト比率が4:3の表示パネルは、有効画素数のアスペクト比率が4:3である映像信号を歪み無く表示することができるが、有効画素数のアスペクト比率が16:9の映像信号(以下、16:9映像信号と称す)に対しては、映像のアスペクト比率をそのままにするか、歪ませて表示することになる。   However, display panels having an aspect ratio of 4: 3 such as the above-described VGA and XGA display panels can display an image signal having an effective pixel aspect ratio of 4: 3 without distortion. However, a video signal having an effective pixel count aspect ratio of 16: 9 (hereinafter referred to as a 16: 9 video signal) is displayed with the video aspect ratio unchanged or distorted.

一方、16:9映像信号に適した16:9型の表示パネル(ハイビジョンパネルという)として、水平方向解像度×垂直方向解像度が1,366×768である、16:9型のW−XGAの表示パネルも市場に流通している。また、ハイビジョンパネルの中には、デジタル放送のハイビジョン信号フォーマット(1080i)をそのままに表現可能なよう、水平方向解像度×垂直方向解像度が1,920×1,080であるフルスペックハイビジョンパネルも流通し始めている。   On the other hand, as a 16: 9 type display panel suitable for 16: 9 video signals (referred to as a high-definition panel), a 16: 9 type W-XGA display having horizontal resolution × vertical resolution of 1,366 × 768 is provided. Panels are also on the market. In addition, among high-definition panels, a full-spec high-definition panel with horizontal resolution x vertical resolution of 1,920 x 1,080 is also available so that the high-definition signal format (1080i) of digital broadcasting can be expressed as it is. I'm starting.

図7は、16:9型の表示パネルにおいて、アスペクト比率4:3の映像信号を表示する際の従来の方法を説明するための図である。従来、16:9型の表示パネルでは、図7(A)で例示のごとき、4:3映像信号71をそのままのアスペクト比率をもつ映像72に変倍して表示し、さらに映像72の左右に黒帯72a,72bを付ける表示方法がある。その他に、図7(B)で例示のごとき、4:3映像信号73を16:9の映像74になるように変倍(中央部分のアスペクト比は保ちつつ、水平方向の両端に近づくにつれ大きく変倍させる)して表示する表示方法、図7(C)で例示のごとき、上端及び下端に黒帯75a,75bをもつレターボックス型の4:3映像信号75から、黒帯75a,75bを除いた部分をそのままのアスペクト比率(16:9)で変倍して映像76として表示する表示方法、並びに、図7(D)で例示のごとき、元々16:9映像信号から4:3に圧縮された映像信号77を16:9の映像78に戻して表示する場合に好適な表示方法などがある。   FIG. 7 is a diagram for explaining a conventional method for displaying a video signal having an aspect ratio of 4: 3 on a 16: 9 type display panel. Conventionally, on a 16: 9 type display panel, as shown in FIG. 7A, the 4: 3 video signal 71 is scaled and displayed as a video 72 having the same aspect ratio, and further to the left and right of the video 72. There is a display method for adding black bands 72a and 72b. In addition, as illustrated in FIG. 7B, the 4: 3 video signal 73 is scaled so that it becomes a 16: 9 video 74 (the aspect ratio of the central portion is maintained, and the larger the closer to the both ends in the horizontal direction, the larger the size becomes. A display method of displaying the image with a variable magnification), as illustrated in FIG. 7C, black bands 75a and 75b are converted from letterbox type 4: 3 video signal 75 having black bands 75a and 75b at the upper and lower ends. A display method in which the removed portion is scaled as it is with an aspect ratio (16: 9) and displayed as a video 76, and, as illustrated in FIG. 7D, originally compressed from a 16: 9 video signal to 4: 3. For example, there is a display method suitable for returning the displayed video signal 77 to the 16: 9 video 78 for display.

図7(A)〜(D)で例示した4:3の映像を16:9の画面に表示する従来の方法は、それぞれノーマルモード,ワイドモード,シネマモード,フルモードなどと呼ばれる各画面モードに対応している。表示パネルにおける各画面モードでの映像表示は、リモートコントローラなどによりユーザ選択可能となっている。   The conventional method of displaying the 4: 3 video illustrated in FIGS. 7A to 7D on the 16: 9 screen is in each of the screen modes called normal mode, wide mode, cinema mode, full mode, and the like. It corresponds. Video display in each screen mode on the display panel can be selected by a user using a remote controller or the like.

なお、16:9型などのワイド型の表示システムにおいて、垂直ズームとパンを制御するものが提案されている(例えば、特許文献1を参照)。
特表平5−507597号公報
Note that a wide display system such as a 16: 9 type has been proposed that controls vertical zoom and pan (see, for example, Patent Document 1).
Japanese Patent Publication No. 5-507597

上述のごとく、16:9型の表示パネルに4:3映像信号を表示させる場合、ノーマルモードでは、画像のない左右に黒帯があり、その黒帯が目立ちすぎて違和感を生じるうえに、4:3映像が小さく表示され、表示パネルの広さを十分に生かしきれない。また、ワイドモードは、中央付近のアスペクト比率(縦横比率)は略元の映像信号のままであるが、端に行くにつれて倍率が変化したり、端のアスペクト比率が極端に横長になるので、違和感がある。シネマモードは、アスペクト比率は元の映像信号のままであって正しいが、水平方向に拡大率を合わせるため、上下を大幅に切り取る必要がある。従って、シネマモードでは、上下の映像情報が消失し、映像情報をそのまま見ることが可能な入力映像は限られてしまう。また、フルモードは、元々16:9映像信号から4:3に圧縮された映像信号でない限り、映像が明らかに横長になり、違和感を生ずる。   As described above, when a 4: 3 video signal is displayed on a 16: 9 type display panel, in the normal mode, there are black bands on the left and right sides without an image, and the black bands are too conspicuous and cause a sense of incongruity. : 3 images are displayed in a small size and the display panel is not fully utilized. In the wide mode, the aspect ratio (vertical / horizontal ratio) near the center remains almost the same as the original video signal, but the magnification changes as it goes to the end, and the end aspect ratio becomes extremely long, which makes it strange. There is. In the cinema mode, the aspect ratio is correct as it is the original video signal, but in order to adjust the enlargement ratio in the horizontal direction, it is necessary to cut off the top and bottom significantly. Therefore, in the cinema mode, the upper and lower video information is lost, and the input video that allows the video information to be viewed as it is is limited. In the full mode, unless the video signal is originally compressed from the 16: 9 video signal to 4: 3, the video is clearly horizontally long, which causes a sense of incongruity.

このように、16:9型の表示パネルに4:3映像信号を表示させる場合、16:9型の表示パネルを十分に生かしきれない表示や、違和感を感じる表示、ごく限られた入力映像信号でしか上下の映像情報の消失を無視できないような表示を行わざるを得ない。   In this way, when a 4: 3 video signal is displayed on a 16: 9 type display panel, a display that cannot fully utilize the 16: 9 type display panel, a display that feels uncomfortable, a very limited input video signal In other words, it is necessary to display such that the disappearance of the upper and lower video information cannot be ignored.

本発明は、上述のごとき実情に鑑みてなされたものであり、16:9型の表示パネルに4:3のアスペクト比率をもつ映像信号を表示させる場合に、4:3の映像信号と縦横の比率は略同じ状態で、必要な上下の映像情報を消失させることやユーザに違和感を与えることなく、できるだけ大きく表示パネルの画面に表示するように、4:3の映像信号を変換する映像変換装置、及び該映像変換装置を備えた映像表示装置を提供することをその目的とする。   The present invention has been made in view of the above circumstances, and in the case where a video signal having an aspect ratio of 4: 3 is displayed on a 16: 9 type display panel, A video conversion device that converts a 4: 3 video signal so that it is displayed on the screen of the display panel as large as possible without losing necessary upper and lower video information and giving the user a sense of incongruity while maintaining the same ratio. An object of the present invention is to provide a video display device including the video conversion device.

本発明は、上述のごとき課題を解決するために、以下の各技術手段でそれぞれ構成される。   The present invention is constituted by the following technical means in order to solve the above-described problems.

第1の技術手段は、アスペクト比率16:9の解像度をもつ表示パネルで映像信号を表示する際に、入力された映像信号を変換する映像変換装置であって、アスペクト比率4:3の映像信号を入力する入力手段と、該入力された4:3映像信号を、水平方向に倍率X、垂直方向に倍率Yで変倍する変倍手段と、該変倍手段で変倍した映像信号を前記表示パネル側に出力する出力手段とを備え、前記倍率Xと倍率Yの比X/Yは、1より大きく且つ1.33より小さい一定値をもつことを特徴としたものである。   A first technical means is a video conversion device that converts an input video signal when the video signal is displayed on a display panel having an aspect ratio of 16: 9, and the video signal has an aspect ratio of 4: 3. Input means, a scaling means for scaling the inputted 4: 3 video signal with a magnification X in the horizontal direction and a magnification Y in the vertical direction, and a video signal scaled by the scaling means. Output means for outputting to the display panel side, and the ratio X / Y of the magnification X and the magnification Y has a constant value larger than 1 and smaller than 1.33.

第2の技術手段は、第1の技術手段において、前記入力手段は、入力された4:3映像信号から所定の切り出し範囲で切り出す信号切出手段を有し、前記所定の切り出し範囲のうち垂直方向の切り出し範囲は、上側で除外する走査線数と下側で除外する走査線数との比率を、上側が下側より小さい所定の比率とし、前記変倍手段は、前記信号切出手段で切り出した映像信号を変倍することを特徴としたものである。   According to a second technical means, in the first technical means, the input means has signal cutout means for cutting out the input 4: 3 video signal in a predetermined cutout range, and the vertical cutout of the predetermined cutout range. The direction cutout range has a predetermined ratio between the number of scanning lines excluded on the upper side and the number of scanning lines excluded on the lower side, and the scaling means is the signal cutting means. This is characterized by scaling the cut-out video signal.

第3の技術手段は、第1又は第2の技術手段において、前記比X/Yは、1より大きく且つ1.1以下の一定値をもつことを特徴としたものである。   According to a third technical means, in the first or second technical means, the ratio X / Y has a constant value greater than 1 and 1.1 or less.

第4の技術手段は、第1又は第2の技術手段において、前記比X/Yは、1.05より大きく且つ1.1以下の一定値をもつことを特徴としたものである。   According to a fourth technical means, in the first or second technical means, the ratio X / Y has a constant value larger than 1.05 and not larger than 1.1.

第5の技術手段は、第1乃至第4のいずれかの技術手段において、前記入力手段は、アスペクト比率4:3の映像信号を元としてアップコンバートされた16:9映像信号を入力する手段を有し、前記変倍手段は、前記入力手段で16:9映像信号が入力された場合、該16:9映像信号を他の一定値をもつ比X/Yに基づいて変倍し、該他の一定値は、前記入力手段で映像信号が入力された場合に前記一定値に基づき変倍した結果の出力画素比と同じ比率になるように設定された値であることを特徴としたものである。   A fifth technical means is any one of the first to fourth technical means, wherein the input means includes means for inputting a 16: 9 video signal up-converted based on a video signal having an aspect ratio of 4: 3. And when the input means receives a 16: 9 video signal, the scaling means scales the 16: 9 video signal based on a ratio X / Y having another constant value. The constant value is a value set so as to be the same ratio as the output pixel ratio as a result of scaling based on the constant value when a video signal is input by the input means. is there.

第6の技術手段は、第1乃至第5のいずれかの技術手段における映像変換装置と、表示パネルとを備えた映像表示装置であって、入力された映像信号に対して前記映像変換装置で変倍させて前記表示パネルで表示する表示モードを、ユーザ選択可能に前記表示パネルに提示する手段を備えたことを特徴としたものである。   A sixth technical means is a video display device comprising the video conversion device according to any one of the first to fifth technical means and a display panel, wherein the video conversion device is used for the input video signal. The present invention is characterized by comprising means for presenting on the display panel a display mode for scaling and displaying on the display panel so that the user can select the display mode.

本発明によれば、16:9型の表示パネルに4:3の映像信号を表示させる場合に、4:3の映像信号と縦横の比率は略同じ状態で、必要な上下の映像情報を消失させることやユーザに違和感を与えることなく、できるだけ大きく表示パネルの画面に表示するように、4:3の映像信号を変換することが可能となる。   According to the present invention, when a 4: 3 video signal is displayed on a 16: 9 type display panel, the vertical and horizontal ratios of the 4: 3 video signal are substantially the same and the necessary upper and lower video information is lost. It is possible to convert a 4: 3 video signal so that it is displayed as large as possible on the screen of the display panel without causing the user to feel uncomfortable.

本発明に係る映像変換装置は、アスペクト比率16:9の解像度をもつ表示パネルで映像信号を表示する際に、入力された映像信号を変換する装置であり、後述する入力手段、変倍手段、及び出力手段を備えるものとする。この映像変換装置は、例えば、テレビジョン受像機や各種レコーダ、各種チューナ機器、パーソナルコンピュータ(PC)などに組み込まれる。また、表示パネルとしては、デジタル映像ソース用の液晶パネルだけでなく、プラズマパネル等などの他のマトリックス型の表示装置に対しても、またアナログ映像信号に対応するものであっても同様に適用可能である。   A video conversion apparatus according to the present invention is an apparatus for converting an input video signal when the video signal is displayed on a display panel having an aspect ratio of 16: 9. The input means, scaling means, And output means. This video conversion apparatus is incorporated in, for example, a television receiver, various recorders, various tuner devices, a personal computer (PC), and the like. The display panel applies not only to liquid crystal panels for digital video sources, but also to other matrix type display devices such as plasma panels, etc., and also applicable to analog video signals. Is possible.

入力手段は、アスペクト比率4:3の映像信号(例えば525i信号や525p信号)を入力する手段であり、デジタル放送又はアナログ放送を受信するチューナ等の手段や、DVD等の可搬記録媒体から各種フォーマットの映像信号を読み出す手段、さらには映像変換回路を組み込む機器において外部から映像信号を入力する入力端子等でなる手段、或いはそれらを組み合わせた手段などがそれに該当する。   The input means is a means for inputting a video signal having an aspect ratio of 4: 3 (for example, a 525i signal or a 525p signal), and various means such as a tuner for receiving a digital broadcast or an analog broadcast, or a portable recording medium such as a DVD. A means for reading out a video signal in a format, a means including an input terminal for inputting a video signal from the outside in a device incorporating a video conversion circuit, a means combining them, and the like correspond thereto.

変倍手段は、入力手段で入力された4:3映像信号を、水平方向に倍率X、垂直方向に倍率Yで変倍する手段であり、例えば垂直方向及び水平方向のスケーラや映像信号を保持しておくためのフレームメモリやラインメモリなどで構成される。出力手段は、変倍手段で変倍した映像信号を表示パネル側に出力する手段であり、表示パネルへの出力線や出力端子がそれに該当する。なお、出力手段と表示パネルとの間に何らかの処理を実行する回路などが設けられていてもよいことは言及するまでもない。   The scaling means is a means for scaling the 4: 3 video signal input by the input means with a magnification X in the horizontal direction and a magnification Y in the vertical direction, and holds, for example, a vertical scale and a horizontal scaler and video signals. It consists of a frame memory, a line memory, etc. The output means is means for outputting the video signal scaled by the scaling means to the display panel side, and corresponds to an output line and an output terminal to the display panel. It goes without saying that a circuit or the like for executing some processing may be provided between the output means and the display panel.

そして、本発明に係る映像変換装置では、その主たる特徴として、変倍手段における倍率Xと倍率Yの比X/Yは、1より大きく且つ1.33より小さい一定値をもつものとする。すなわち、この変倍手段では、16:9型の表示パネルに4:3のアスペクト比率をもつ映像信号を表示させる場合に、入力映像信号のアスペクト比率4:3と表示パネルの画面のアスペクト比率16:9との中間的なアスペクト比率をもつ映像に変換する。ここで、X/Y=1.33は、図7(D)で例示したフルモードにおける変倍比率である。   In the video conversion device according to the present invention, as a main feature, the ratio X / Y of the magnification X and the magnification Y in the scaling unit has a constant value larger than 1 and smaller than 1.33. That is, in this scaling means, when a video signal having an aspect ratio of 4: 3 is displayed on a 16: 9 type display panel, the aspect ratio 4: 3 of the input video signal and the aspect ratio 16 of the screen of the display panel are displayed. : Converts to an image having an aspect ratio intermediate to 9. Here, X / Y = 1.33 is a zoom ratio in the full mode illustrated in FIG.

これにより、4:3の映像信号と縦横の比率は余り変わらない状態で、シネマモードのように必要な上下の映像情報を消失させることやユーザに違和感を与えることなく、できるだけ大きく表示パネルの画面に表示するように、4:3の映像信号を変換することが可能となる。例えば、左右の黒帯を小さくするために若干水平方向に大きく拡大することで、ノーマルモードに比べ、表示パネルの広さを十分に生かしきることができるだけでなく、左右の黒帯の表示幅をより狭くすること(黒帯部分を少なくすること)ができ、さらにフルモードのように横長に感じることやワイドモードのように変倍率の変化を感じることなどによる違和感を、ユーザに与えることもなくなる。さらに、シネマモードのように必要な上下映像情報を消失することはない。すなわち、この実施形態では、入力された4:3映像信号に対して16:9型表示パネルの画面一杯に歪んだ比率で表示するのではなく、4:3の比率を余り変化させないで、違和感のない表示を実現している。   As a result, the 4: 3 video signal and the aspect ratio do not change much, and the display panel screen is as large as possible without losing the necessary upper and lower video information and making the user feel uncomfortable as in the cinema mode. As a result, a 4: 3 video signal can be converted. For example, in order to make the left and right black bands smaller, it is possible to make full use of the area of the display panel compared to the normal mode by enlarging it slightly in the horizontal direction. It can be made narrower (reducing the black belt part), and it does not give the user a sense of incongruity due to the feeling of being horizontally long like the full mode or the change of the scaling factor like the wide mode. . Furthermore, the necessary upper and lower video information is not lost as in the cinema mode. That is, in this embodiment, the input 4: 3 video signal is not displayed at a distorted ratio to the full screen of the 16: 9 type display panel, but the ratio of 4: 3 is not changed so much. The display without any is realized.

さらに、他の形態として、入力手段に次の信号切出手段を備えるようにすることが好ましい。信号切出手段は、入力された4:3映像信号から所定の切り出し範囲で切り出す手段で、例えばフレームメモリやラインメモリへの映像信号の入出力を制御するなどして実装できる。そして、所定の切り出し範囲のうち垂直方向の切り出し範囲は、上側で除外する走査線数と下側で除外する走査線数との比率を、上側が下側より小さい所定の比率とする。変倍手段は、この信号切出手段で切り出した映像信号に対して変倍処理を施す。   Furthermore, as another form, it is preferable that the input means is provided with the following signal cutout means. The signal cutout means is a means for cutting out the input 4: 3 video signal in a predetermined cutout range, and can be mounted by controlling input / output of the video signal to the frame memory or line memory, for example. In the vertical cutout range of the predetermined cutout range, the ratio between the number of scanning lines excluded on the upper side and the number of scanning lines excluded on the lower side is set to a predetermined ratio that the upper side is smaller than the lower side. The scaling unit performs a scaling process on the video signal cut out by the signal cutting out unit.

上下の切り出し比率を上述のごとく設定する理由は、テレビ放送などの映像はテロップ等の位置が少し上に寄っていることが統計的に見ても経験上も多いためである。垂直方向の切り出し位置を中央より若干上にすることで、テロップ等の必要な映像情報を消失してしまうような事態は略避けることができる。さらに、このような信号の切り出しによって、同じ左右の黒帯幅を想定した場合でも変倍比X/Yをより小さく設定できるので、より違和感を感じさせない映像の表示が可能となる。すなわち、この実施形態では、入力された4:3映像信号に対して16:9型表示パネルの画面一杯に歪んだ比率で表示するのではなく、4:3の比率を余り変化させず、4:3映像内のより重要な中央付近が大きく表示でき、さらにはユーザからみて必要な情報が欠けることがないような上下切り出し範囲で切出している。なお、変倍比X/Y=1の場合でも、この切り出しによって垂直方向の中心をずらすことにより、従来のモードに比べて4:3信号を表示する際の黒帯幅の低減や画面の有効利用などの効果は得られる。   The reason why the upper and lower cut-out ratios are set as described above is that, in terms of statistics and experience, it is often the case that the position of a telop or the like is slightly up in a video such as a television broadcast. By making the cutout position in the vertical direction slightly above the center, a situation in which necessary video information such as a telop is lost can be substantially avoided. Further, by cutting out such a signal, even when the same left and right black band widths are assumed, the zoom ratio X / Y can be set smaller, so that it is possible to display an image that does not make the user feel more uncomfortable. That is, in this embodiment, the 4: 3 video signal is not displayed at a distorted ratio to the full screen of the 16: 9 type display panel, but the 4: 3 ratio is not changed so much. : The area near the more important center in the three images can be displayed in a large size, and further, the image is cut out in the upper and lower cutout range so that necessary information is not lost when viewed from the user. Even in the case of the zoom ratio X / Y = 1, by shifting the center in the vertical direction by this cutting, the black band width when displaying 4: 3 signals compared to the conventional mode can be reduced and the screen can be effectively used. Use and other effects can be obtained.

以下、本発明に係る映像変換装置について、上述のごとき切り出し処理を伴う好適な実施形態のみを説明するが、本発明はこのような切り出し処理を伴うことを必須とするものではなく、変倍比X/Yの適切な設定並びにそれによる変倍処理がなされる形態であればよい。   Hereinafter, the video conversion apparatus according to the present invention will be described only with respect to a preferred embodiment accompanied by the clipping process as described above, but the present invention does not necessarily require such a clipping process, Any configuration may be used as long as appropriate setting of X / Y and a scaling process based thereon are performed.

図1は、本発明の一実施形態に係る映像変換装置における映像変換処理の一例を説明するための図で、図中、11は入力手段によって入力された映像信号、12は映像信号11から信号切出手段で切り出させる切り出し範囲、13は表示パネルで表示された画面、14aは画面13上に表示された左端黒帯部分、14bは画面13上に表示された右端黒帯部分、14cは画面13上に表示された映像部分である。   FIG. 1 is a diagram for explaining an example of a video conversion process in a video conversion apparatus according to an embodiment of the present invention. In the figure, 11 is a video signal input by input means, and 12 is a signal from the video signal 11. The cutout range to be cut out by the cutting means, 13 is a screen displayed on the display panel, 14a is the left end black band portion displayed on the screen 13, 14b is the right end black band portion displayed on the screen 13, and 14c is the screen. 13 is a video portion displayed on the screen.

まず、入力手段によって4:3映像信号11がフレームメモリに入力される。図1で示す例は、4:3映像信号11が480p信号である場合のものである。480p信号は、525本の走査線のうち有効走査線数が480本の信号であって、例として図1の場合、1走査線当り水平方向に720画素のサンプリングを行っている。この場合、1画素は若干垂直方向に長い形状となる。なお、インターレース信号(480i信号)の場合、フレームメモリを用いて奇フィールド及び偶フィールドからフレームを生成するなどIP変換処理を、事前に又は同時に行えばよい。   First, the 4: 3 video signal 11 is input to the frame memory by the input means. The example shown in FIG. 1 is a case where the 4: 3 video signal 11 is a 480p signal. The 480p signal is a signal having 480 effective scanning lines among 525 scanning lines. For example, in the case of FIG. 1, 720 pixels are sampled in the horizontal direction per scanning line. In this case, one pixel is slightly long in the vertical direction. In the case of an interlace signal (480i signal), IP conversion processing such as generating a frame from an odd field and an even field using a frame memory may be performed in advance or simultaneously.

入力された4:3映像信号11は、信号切出手段により切り出し範囲12で切り出される。通常、本発明に係る画面モード(以下、スマートズームモードという)だけでなく他の画面モード(ノーマル,ワイド,シネマ,フル)を含む画面モードでは、映像の上下端及び左右端に発生しがちな映像の乱れ等を表示させないために、有効走査線(この例では480本:以下同様)のうち少なくとも95%程度、水平分解能(720画素)のうち少なくとも95%程度が、切り出し範囲として設定される。なお、この最低の切り出し範囲(除外部分でいうところのオーバースキャン領域)は、メーカ設定などにより変わり得るものである。   The input 4: 3 video signal 11 is cut out in the cutout range 12 by the signal cutout means. Usually, in screen modes including not only the screen mode according to the present invention (hereinafter referred to as smart zoom mode) but also other screen modes (normal, wide, cinema, full), the image tends to occur at the upper and lower ends and the left and right ends of the image. In order not to display image disturbance or the like, at least 95% of the effective scanning lines (480 lines in this example: the same applies hereinafter) and at least 95% of the horizontal resolution (720 pixels) are set as the cutout range. . Note that this minimum cutout range (overscan area in the excluded portion) can vary depending on the manufacturer setting.

一方、スマートズームモードでは、水平方向の切り出し範囲は同様に95%程度でよいが、垂直方向の切り出し範囲を小さくする方が、本発明の効果をより強めることができる。さらに、時刻表示「9:10」,著作表示「BS2」,地震情報,株価情報などのテロップを除外しないように、且つ垂直方向の切り出し範囲をより小さくするために、上述したように上側で除外する走査線数(23本)と下側で除外する走査線数(30本)との比率を、上側が下側より小さい所定の比率(23:30≒1:1.30)とする。切り出し範囲12は、いずれも数ある発信元の4:3映像信号に対して統計的又は経験的に決定すればよい。この例では、より好ましい値として、水平方向切り出し範囲が95%の684画素、左右端の除外部分が2.5%の18画素、垂直方向切り出し範囲が89%の427本、上側の除外部分が5%、下側の除外部分が6%としたものを挙げている。   On the other hand, in the smart zoom mode, the horizontal cutout range may be about 95%, but the effect of the present invention can be further enhanced by reducing the vertical cutout range. Further, in order not to exclude telops such as time display “9:10”, copyright display “BS2”, earthquake information, stock price information, etc., and to make the vertical cutout range smaller, it is excluded on the upper side as described above. The ratio of the number of scanning lines to be performed (23 lines) and the number of scanning lines to be excluded on the lower side (30 lines) is a predetermined ratio (23: 30≈1: 1.30) in which the upper side is smaller than the lower side. The cutout range 12 may be determined statistically or empirically with respect to 4: 3 video signals of a number of transmission sources. In this example, more preferable values are 684 pixels with a horizontal cutout range of 95%, 18 pixels with a 2.5% cutout at the left and right edges, 427 pixels with a vertical cutout range of 89%, and an upper cutout portion. 5%, and the lower exclusion part is 6%.

このように切り出された映像信号に対して、変倍手段が比X/Yで拡大スケーリングを施す。この例では、最も好ましい一定値X/Y=1.07を用いている。この一定値により、切り出し範囲12の映像信号(684画素×427画素でなる映像)が、画面13上に表示された映像部分14c(1640×1080)に拡大スケーリングされる。ここで、X/Y=(1640/684)/(1080/427)×(724/640)≒1.07となっていることが分かる。なお、×(720/640)の部分は、この例の場合、変倍前の1画素が若干垂直方向に長い形状であるため、それを補正するものである。そして、映像部分14cの左右端に左端黒帯部分14a及び右端黒帯部分14bの映像信号が付加されて、表示パネルで画面13の映像が表示できる。   The scaling unit performs enlargement scaling with the ratio X / Y on the video signal thus cut out. In this example, the most preferable constant value X / Y = 1.07 is used. With this constant value, the video signal in the cutout range 12 (video composed of 684 pixels × 427 pixels) is enlarged and scaled to the video portion 14 c (1640 × 1080) displayed on the screen 13. Here, it can be seen that X / Y = (1640/684) / (1080/427) × (724/640) ≈1.07. In this example, the x (720/640) portion corrects one pixel before zooming because it has a slightly longer shape in the vertical direction. Then, the video signals of the left end black belt portion 14a and the right end black belt portion 14b are added to the left and right ends of the video portion 14c, and the video of the screen 13 can be displayed on the display panel.

また、この比X/Yは、4:3映像信号11と画面13に表示した映像14cとのアスペクト比率の変化がユーザに違和感を与えない程度に、統計的又は経験的に決定すればよく、好ましくは1より大きく且つ1.1以下の一定値をとればよい。しかし、本発明の効果をより得るためには、比X/Yが1.05より大きく且つ1.1以下の一定値をとることがさらに好ましい。より好ましくは、この例で挙げたように、比X/Yが1.07付近とするとよい。   The ratio X / Y may be determined statistically or empirically to such an extent that a change in aspect ratio between the 4: 3 video signal 11 and the video 14c displayed on the screen 13 does not give the user a sense of incongruity. Preferably, a constant value greater than 1 and 1.1 or less may be taken. However, in order to obtain the effect of the present invention, it is more preferable that the ratio X / Y is a constant value larger than 1.05 and not larger than 1.1. More preferably, as mentioned in this example, the ratio X / Y may be around 1.07.

図2は、図1の映像変換処理の流れを説明するための図で、図中、21はフレームメモリへの映像信号の入力処理、22はラインバッファによる切り出し処理、23は垂直スケーリング処理、24は水平スケーリング処理、25はラインメモリへの映像信号出力処理を示している。   FIG. 2 is a diagram for explaining the flow of the video conversion process of FIG. 1, in which 21 is a video signal input process to the frame memory, 22 is a line buffer cut-out process, 23 is a vertical scaling process, 24 Indicates horizontal scaling processing, and 25 indicates video signal output processing to the line memory.

図1で説明した例での映像変換処理は、例えば次のような処理手順でなされる。まず、映像入力処理で、4:3映像信号11がフレームメモリ21に入力される。映像入力処理の後、ラインバッファを利用して、水平方向の720画素分から684画素分を切り出す水平方向の切り出し処理22が施される。次に、垂直スケーリング処理23では、上述した垂直方向の切り出し処理により480本の走査線を427本の走査線に切り出した後、垂直方向の補間処理によって垂直方向の変倍処理が施される。   The video conversion process in the example described with reference to FIG. 1 is performed by the following processing procedure, for example. First, the 4: 3 video signal 11 is input to the frame memory 21 in the video input process. After the video input process, a horizontal cutout process 22 for cutting out 684 pixels from 720 pixels in the horizontal direction is performed using a line buffer. Next, in the vertical scaling process 23, after the 480 scanning lines are cut out to 427 scanning lines by the above-described vertical cutting process, the vertical scaling process is performed by the vertical interpolation process.

そして、水平スケーリング処理24では、水平方向684画素分の映像信号から1640画素分へ補間する水平方向の補間処理が施され、映像信号出力処理25でラインメモリへ走査線毎に映像信号が順次出力され、表示パネル側へと出力されることになる。   In the horizontal scaling process 24, a horizontal interpolation process is performed to interpolate from the video signal for 684 pixels in the horizontal direction to 1640 pixels, and the video signal is sequentially output to the line memory in the video signal output process 25 for each scanning line. And output to the display panel side.

図3は、図1及び図2で説明した映像変換処理を実行するための映像処理回路の一構成例を示す図で、図中、30はICなどでなる映像処理回路、31,41はラインメモリコントローラ、32,42はラインメモリ、33,37はDMA(Direct Memory Access)、34は内部バス、35は外部メモリコントローラ、36はフレームバッファ、38はラインバッファコントローラ、39はラインバッファ、40はスケーリング回路、43はサブプロセッサである。   FIG. 3 is a diagram showing an example of the configuration of the video processing circuit for executing the video conversion processing described in FIGS. 1 and 2, in which 30 is a video processing circuit made up of ICs, and 31 and 41 are lines. Memory controller, 32 and 42 are line memories, 33 and 37 are DMA (Direct Memory Access), 34 is an internal bus, 35 is an external memory controller, 36 is a frame buffer, 38 is a line buffer controller, 39 is a line buffer, 40 is A scaling circuit 43 is a sub processor.

図3で例示する映像処理回路30は、必要最小限の部分を抜き出した回路構成のみを示しているが、各種映像信号の入力を切り換える入力切換処理、アナログ信号をデジタル信号に変換するAD変換処理、i信号をp信号に変換するIP変換処理、デジタルフィルタにより映像のエッジを強調するなどの画質強調補正処理、OSD(On Screen Display)制御、OSDを画面に合成するために重畳するOSD合成処理、及び、映像のγ特性をγテーブルに従って変更して映像のトーンを調整するγ補正処理など、他の処理を実行するための手段、さらには表示パネルのゲートドライバ及びソースドライバなどを制御するコントローラも併せて設けてもよい。なお、IP変換処理は、本発明におけるスケーリング時に同時に施すような回路構成であってもよい。   The video processing circuit 30 illustrated in FIG. 3 shows only a circuit configuration in which a necessary minimum part is extracted, but an input switching process for switching input of various video signals and an AD conversion process for converting an analog signal into a digital signal , IP conversion processing for converting i signal to p signal, image quality enhancement correction processing such as enhancement of video edge by digital filter, OSD (On Screen Display) control, OSD composition processing for superimposing OSD on screen , And means for executing other processes such as a gamma correction process for adjusting the video tone by changing the gamma characteristic of the video according to the gamma table, and a controller for controlling the gate driver and source driver of the display panel May also be provided. The IP conversion process may have a circuit configuration that is performed simultaneously with scaling in the present invention.

以下、映像処理回路30の動作を、具体例として図1の映像変換処理を例示しながら、概略的に説明する。   Hereinafter, the operation of the video processing circuit 30 will be schematically described with reference to the video conversion process of FIG. 1 as a specific example.

ラインメモリコントローラ31は、入力された映像信号について、同期信号等から判断して有効な映像データを取り出し、映像入力のクロックに同期して、その有効なデータをラインメモリ32に書き込む。ラインメモリ32は、FIFO構造又はダブルバッファ構造の同期メモリで、2つのクロックに同期してアクセスが可能となっている。2つのクロックのうち、一方のクロックに同期した書き込み、もう一方のクロックに同期した読み出しが可能となっている。   The line memory controller 31 extracts valid video data from the input video signal based on a synchronization signal or the like, and writes the valid data to the line memory 32 in synchronization with the video input clock. The line memory 32 is a synchronous memory having a FIFO structure or a double buffer structure, and can be accessed in synchronization with two clocks. Of the two clocks, writing synchronized with one clock and reading synchronized with the other clock are possible.

ラインメモリコントローラ31は、ラインメモリ32に有効な映像データが決められた量だけたまったら、その映像データを、映像処理回路30の内部クロックに同期して読み出し、DMA33へ送る。   The line memory controller 31 reads the video data in synchronism with the internal clock of the video processing circuit 30 and sends the video data to the DMA 33 when the amount of valid video data accumulated in the line memory 32 is accumulated.

DMA33は、映像データが決められた量だけたまったら、外部メモリコントローラ35に対してリクエストを発行する。その後、外部メモリコントローラ35の調停に従って、内部バス34を介して、外部メモリであるフレームバッファ36の所定のアドレスに映像データを転送する。内部バス34は、映像処理回路30内で外部メモリ36を使用するすべての回路に接続されている。なお、図3では、本発明に関係するDMA33,37と外部メモリコントローラ35以外は省略してある。   The DMA 33 issues a request to the external memory controller 35 when the video data is accumulated by the determined amount. Thereafter, in accordance with the arbitration of the external memory controller 35, the video data is transferred to a predetermined address of the frame buffer 36 which is an external memory via the internal bus 34. The internal bus 34 is connected to all circuits that use the external memory 36 in the video processing circuit 30. In FIG. 3, except for the DMAs 33 and 37 and the external memory controller 35 related to the present invention are omitted.

外部メモリコントローラ35は、内部バス34に接続する様々な回路からのリクエストを受け付け、調停を行った後、内部回路と外部メモリ36間のデータ転送とその制御を行う。また、フレームバッファ36には、DMA33から転送された映像データが格納される。映像データは、映像入力されたすべての範囲(図1では、720×480)が格納される。   The external memory controller 35 receives requests from various circuits connected to the internal bus 34 and performs arbitration, and then performs data transfer and control between the internal circuit and the external memory 36. The frame buffer 36 stores the video data transferred from the DMA 33. The video data stores the entire range of video input (720 × 480 in FIG. 1).

DMA37は、映像出力するために、映像の新しいラインを読み込む必要が発生したとき、外部メモリコントローラ35に対してリクエストを発行する。その後、外部メモリコントローラ35の調停に従って、内部バス34を介して、フレームバッファ36の所定のアドレスから映像データを読み出し、ラインバッファコントローラ38に転送する。この転送の際、スケーリング前の映像の水平ライン上の左右の不要部分は転送しない。図1で説明すると、水平方向720画素(ピクセル)のうち、左右18画素ずつを除いた中央の684画素だけが転送される。   The DMA 37 issues a request to the external memory controller 35 when it is necessary to read a new line of video for video output. Thereafter, in accordance with the arbitration of the external memory controller 35, the video data is read from a predetermined address of the frame buffer 36 via the internal bus 34 and transferred to the line buffer controller 38. During this transfer, the left and right unnecessary portions on the horizontal line of the video before scaling are not transferred. Referring to FIG. 1, only the central 684 pixels excluding the left and right 18 pixels among the 720 pixels (pixels) in the horizontal direction are transferred.

ラインバッファコントローラ38は、DMA37より送られてきた映像データをラインバッファ39の所定の位置に書き込む。ラインバッファ39は、スケーリング回路40で垂直方向のスケーリングを行うのに必要な映像データのラインを格納する。格納するライン数は、最低でも垂直スケーリングのフィルタのタップ数と同じである。ラインバッファコントローラ38は、DMA37からの転送と並行、或いは時分割で、ラインバッファ39からスケーリング回路40へ映像データを送る。スケーリング回路40ではまず垂直方向のスケーリングを行うので、そのフィルタのタップ数と同じ個数の垂直方向の画素を組にして順次スケーリング回路40へ送る。   The line buffer controller 38 writes the video data sent from the DMA 37 at a predetermined position in the line buffer 39. The line buffer 39 stores video data lines necessary for the scaling circuit 40 to perform vertical scaling. The number of lines to be stored is at least the same as the number of taps of the vertical scaling filter. The line buffer controller 38 sends video data from the line buffer 39 to the scaling circuit 40 in parallel or in time division with the transfer from the DMA 37. Since the scaling circuit 40 first performs vertical scaling, the same number of vertical pixels as the number of taps of the filter are paired and sent to the scaling circuit 40 sequentially.

スケーリング回路40は、まず垂直方向のスケーリングを行う。これにより垂直方向の複数の画素がフィルタ演算された結果、水平方向のスケーリング前の垂直方向1画素分に相当する映像データが算出される。スケーリング回路40は、次に水平方向のスケーリングを行う。垂直スケーリングの結果の映像データが、水平フィルタのタップ数分だけ集まったところで順次、水平フィルタの積和演算を行い、スケーリング後の1画素の映像データを得る。この水平スケーリングによって、図1で説明すると元映像の684画素が1640画素へ拡大される。   The scaling circuit 40 first performs vertical scaling. As a result, a plurality of pixels in the vertical direction are subjected to a filter operation, so that video data corresponding to one pixel in the vertical direction before scaling in the horizontal direction is calculated. The scaling circuit 40 then performs horizontal scaling. When the video data as a result of the vertical scaling is collected by the number of taps of the horizontal filter, the product sum operation of the horizontal filter is sequentially performed to obtain video data of one pixel after scaling. This horizontal scaling expands the 684 pixels of the original video to 1640 pixels as described in FIG.

スケーリング回路40で演算された結果の映像データは、順次、ラインメモリコントローラ41に送られ、ラインメモリコントローラ41は、ラインメモリ42の所定の位置に書き込む。ラインメモリ42は、ダブルバッファ構成をとるメモリで、それぞれ2つのクロックに同期してアクセスでき、一方のクロックに同期した書き込み、もう一方のクロックに同期した読み出しが可能となっている。また、1つのメモリは、最低でも表示装置の水平画素分の映像データを格納できる容量を持つものとする。   The resulting video data calculated by the scaling circuit 40 is sequentially sent to the line memory controller 41, and the line memory controller 41 writes the data in a predetermined position in the line memory 42. The line memory 42 is a memory having a double buffer configuration, and can be accessed in synchronization with two clocks, and can be written in synchronization with one clock and read in synchronization with the other clock. Further, it is assumed that one memory has a capacity capable of storing video data for at least horizontal pixels of the display device.

ラインメモリコントローラ41は、出力映像中の映像データが表示されない部分(図1ではスケーリング後の映像の左右の黒帯部分)のデータを書き込む機能を持ち、映像データを書き込む前に、まず黒帯に相当するデータを一方のメモリ全体に書き込む。ラインメモリコントローラ41は、その後、そのメモリに対してスケーリング回路40から送られてきたデータを最終的に表示する位置に相当するアドレスに書き込む。図1で説明すると、メモリの先頭から140画素分に相当するアドレスだけ空けた位置から、スケーリング後の映像データを書き込む。これによって映像の左右に黒帯がついた、最終的な出力映像の1ライン分が完成する。   The line memory controller 41 has a function of writing data of a portion of the output video where the video data is not displayed (in FIG. 1, the left and right black belt portions of the scaled video). Corresponding data is written to the entire memory. Thereafter, the line memory controller 41 writes the data sent from the scaling circuit 40 to the memory at an address corresponding to the position where the data is finally displayed. Referring to FIG. 1, the scaled video data is written from a position spaced by an address corresponding to 140 pixels from the beginning of the memory. This completes one line of the final output video with black bands on the left and right sides of the video.

ラインメモリ42は、ダブルバッファ構成であるので、ラインメモリコントローラ41は、一方のメモリに新しい映像データを書き込むのと並行して、もう一方のメモリからそれ以前に作成した映像データ(その時書き込んでいる映像データの1ライン上に相当する出力映像データ)を出力の同期信号等に合わせて、読み出し、映像出力として出力する。   Since the line memory 42 has a double buffer configuration, the line memory controller 41 writes video data previously created from the other memory in parallel with writing new video data to one memory (at that time, writing is performed). The output video data corresponding to one line of the video data) is read out in accordance with an output synchronization signal or the like and output as a video output.

DMA37,ラインバッファコントローラ38,ラインバッファ39,スケーリング回路40,ラインメモリコントローラ41,ラインメモリ42は、出力の任意の水平同期信号から次の水平同期信号までを1動作期間として、その1動作期間毎に、出力する映像データを1ライン分作成するように動作する。ここで図1のように垂直方向427ラインを1080ラインに拡大する場合、出力の1動作期間を基準にすると、DMA37は新しいラインを転送する場合と転送しない場合がある。   The DMA 37, the line buffer controller 38, the line buffer 39, the scaling circuit 40, the line memory controller 41, and the line memory 42 take one operation period from an arbitrary horizontal synchronizing signal to the next horizontal synchronizing signal as one operating period. In addition, the operation is performed so as to create one line of video data to be output. Here, when the 427 lines in the vertical direction are expanded to 1080 lines as shown in FIG. 1, the DMA 37 may or may not transfer a new line based on one output operation period.

サブプロセッサ43は、DMA37におけるこの新しいラインの転送の有無を決定したり、拡大元映像の上部・下部に見られる不使用ラインを考慮して、DMA37の転送に必要なフレームバッファ36内の映像データの転送元アドレスを決定したり、その他、DMA37,ラインバッファコントローラ38,スケーリング回路40,ラインメモリコントローラ41に対してそれぞれ必要なレジスタ設定等を行い、垂直スケーリングに関する制御を中心とした映像出力全般の制御を行う。   The sub-processor 43 decides whether or not to transfer this new line in the DMA 37, or considers unused lines seen at the upper and lower parts of the enlarged original video, and the video data in the frame buffer 36 necessary for the DMA 37 transfer. Transfer source addresses, and other necessary register settings for the DMA 37, the line buffer controller 38, the scaling circuit 40, and the line memory controller 41, etc. Take control.

図4は、アスペクト比率4:3の映像信号を元としてアップコンバートされた16:9映像信号を説明するための図である。また、図5は、本発明の他の実施形態に係る映像変換装置における映像変換処理の一例を説明するための図で、図4のごとき16:9映像信号を図1乃至図3で説明した映像変換装置で変換して表示パネルに表示する処理について説明するための図である。   FIG. 4 is a diagram for explaining a 16: 9 video signal up-converted based on a video signal having an aspect ratio of 4: 3. FIG. 5 is a diagram for explaining an example of a video conversion process in a video conversion apparatus according to another embodiment of the present invention, and a 16: 9 video signal as shown in FIG. 4 has been described with reference to FIGS. It is a figure for demonstrating the process converted by a video converter and displayed on a display panel.

図4及び図5において、50は4:3映像信号、51は映像信号50をアップコンバートした16:9映像信号を示す。放送局側でアップコンバートされた映像は、左右の両端に発生しがちな映像の乱れなどを表示させないために、水平方向略97%の切り出し範囲(51c)を映像として、残り3%(51d)はアップコンバート時に付加される映像部分に加わるとして仮定する。すなわち、図4の51a及び51b及び51dは放送局側で付加される映像部分(以後、付属映像部分と称す)であり、51cは16:9映像信号50における元の4:3映像部分である。ただし、水平方向に略97%で切り出されていると仮定するため、縦横拡大比率1:1で映像は歪んでいないがアスペクト比率は4:3ではない、1397×1080を映像範囲として考える。図5の52は16:9映像信号50から信号切出手段で切り出させる切り出し範囲、53は表示パネルで表示された画面、54a及び54b及び54dは画面53上に表示された付属映像部分、54cは画面53上に表示された映像部分である。   4 and 5, 50 indicates a 4: 3 video signal, and 51 indicates a 16: 9 video signal obtained by up-converting the video signal 50. The video up-converted on the broadcast station side does not display the video disturbance that tends to occur at the left and right ends, and the remaining cut-out range (51c) of approximately 97% in the horizontal direction is used as the video, and the remaining 3% (51d) Is assumed to be added to the video portion added during up-conversion. That is, 51a, 51b and 51d in FIG. 4 are video portions added on the broadcast station side (hereinafter referred to as attached video portions), and 51c is the original 4: 3 video portion in the 16: 9 video signal 50. . However, since it is assumed that the image is cut out at approximately 97% in the horizontal direction, the image range is considered as 1397 × 1080, in which the image is not distorted at the aspect ratio of 1: 1 and the aspect ratio is not 4: 3. In FIG. 5, 52 is a clipping range that is clipped from the 16: 9 video signal 50 by the signal clipping means, 53 is a screen displayed on the display panel, 54a, 54b and 54d are attached video portions displayed on the screen 53, 54c. Is a video portion displayed on the screen 53.

図4及び図5で説明する実施形態における入力手段は、図4で例示したようなアスペクト比率4:3の標準映像信号50を元としてアップコンバートされた16:9映像信号51(例えば1125i信号,1125p信号,750p信号)を入力する手段を有するものとする。ここで上述した各実施形態での4:3映像信号の入力と16:9映像信号51との入力は、映像信号によっていずれの入力であるかが判定され、切り換えられる。   The input means in the embodiment described with reference to FIGS. 4 and 5 is a 16: 9 video signal 51 (for example, 1125i signal, up-converted based on a standard video signal 50 having an aspect ratio of 4: 3 as illustrated in FIG. 1125p signal, 750p signal). Here, the input of the 4: 3 video signal and the input of the 16: 9 video signal 51 in each of the above-described embodiments is determined and switched according to the video signal.

そして、本実施形態における変倍手段は、入力手段で16:9映像信号51が入力された場合、16:9映像信号のうちアップコンバート元の4:3映像信号が示す映像51cを他の一定値をもつ比X/Yに基づいて変倍する。ここで、他の一定値とは、入力手段で4:3映像信号が入力された場合に一定値に基づき変倍した結果の出力画素比(図1の例では1640:1080)と同じ比率になるように設定された値である。なお、比X/Yの値は、例えば2種類(この例では、値1.07及び1.04)メモリ等に格納しておき、入力された信号を判別することで、それらの値を切り換えればよく、この考え方は切り出し範囲についても適用できる。   When the 16: 9 video signal 51 is input by the input unit, the scaling unit according to the present embodiment displays the video 51c indicated by the up-converting 4: 3 video signal in the 16: 9 video signal. Scale based on the ratio X / Y with values. Here, the other constant value is the same ratio as the output pixel ratio (1640: 1080 in the example of FIG. 1) as a result of scaling based on the constant value when a 4: 3 video signal is input by the input means. It is a value set to be The ratio X / Y values are stored in, for example, two types of memory (in this example, values 1.07 and 1.04), and the values are switched by discriminating the input signal. This idea can be applied to the cutout range.

まず、入力手段によって16:9映像信号51がフレームメモリに入力される。図5で示す例は、16:9映像信号51が1080i信号である場合のものである。1080i信号は、1125本の走査線のうち有効走査線数が1080本の信号であって、1走査線当り水平方向に1920画素のサンプリングを可能とする信号である。なお、1080pで表示する場合は、フレームメモリを用いて奇フィールド及び偶フィールドからフレームを生成するなどIP変換処理を、事前に又は同時に行う必要がある。   First, the 16: 9 video signal 51 is input to the frame memory by the input means. The example shown in FIG. 5 is for the case where the 16: 9 video signal 51 is a 1080i signal. The 1080i signal is a signal having 1080 effective scanning lines among 1125 scanning lines, and is a signal that enables sampling of 1920 pixels in the horizontal direction per scanning line. When displaying at 1080p, it is necessary to perform IP conversion processing in advance or simultaneously, such as generating a frame from an odd field and an even field using a frame memory.

16:9映像信号51は、図1のように映像の乱れなどを表示しないようにする両端処理する必要が無いため、付属映像部分と共に52の点線部で示す範囲で切り出し、図1と同様のスケーリング表示結果(1640×1080)となるように拡大を行う。そのため、図1に比べ、同様なスケーリング表示結果になるにもかかわらず、拡大比率は1.04:1.00と小さくなり、より歪みが小さな映像となる。また、付属映像部分と共に切り出しているため、付属映像部分に文字情報などがある場合、情報を全て消失することもなく、アップコンバートではない正規の16:9映像についても、大抵のテロップは切り出し範囲内に入っており、画面モードを変えずにスマートズームのままで見ることも可能であるという利点がある。   Since the 16: 9 video signal 51 does not need to be processed at both ends so as not to display image disturbance as shown in FIG. 1, it is cut out in the range indicated by the dotted line 52 together with the attached video portion, and is the same as FIG. Enlargement is performed so that a scaled display result (1640 × 1080) is obtained. Therefore, compared with FIG. 1, although the same scaled display result is obtained, the enlargement ratio is as small as 1.04: 1.00, resulting in a video with less distortion. In addition, since the attached video portion is cut out, if there is character information in the attached video portion, all the information is not lost, and even for regular 16: 9 video that is not up-converted, most telops are cut out. There is an advantage that it is possible to view with the smart zoom without changing the screen mode.

この実施形態でのスマートズームモードでは、垂直方向の切り出し範囲を小さくする方が、本発明の効果をより強めることができる。さらに、テロップを除外しないように、且つ垂直方向の切り出し範囲をより小さくするために、上述したように上側で除外する走査線数(59本)と下側で除外する走査線数(60本)との比率を、上側が下側より小さい所定の比率(59:60≒1:1.02)とする。切り出し範囲52は、いずれも数ある発信元の16:9映像信号51に対して統計的又は経験的に決定すればよい。この例では、より好ましい値として、垂直方向切り出し範囲が89%の961本、上側の除外部分が5%、下側の除外部分が6%としたものを挙げている。   In the smart zoom mode in this embodiment, the effect of the present invention can be further enhanced by reducing the vertical cutout range. Further, as described above, the number of scanning lines excluded on the upper side (59 lines) and the number of scanning lines excluded on the lower side (60 lines) as described above in order not to exclude the telop and to further reduce the vertical cutout range. Is a predetermined ratio (59: 60≈1: 1.02) where the upper side is smaller than the lower side. The cutout range 52 may be determined statistically or empirically for any number of 16: 9 video signals 51 of the transmission source. In this example, more preferable values include 961 with a vertical cutout range of 89%, an upper exclusion portion of 5%, and a lower exclusion portion of 6%.

このように切り出された映像信号に対して、変倍手段が比X/Yで拡大スケーリングを施す。この例では、図1で例示した最も好ましい一定値X/Y=1.07を採用した結果と同じスケーリング結果(1640×1080)になるように、他の一定値X/Y=1.04を用いている。この値により、切り出し範囲52の映像信号(1397画素×961画素でなる映像)が、画面53上に表示された映像部分54c(1640×1080)に拡大スケーリングされる。ここで、X/Y=(1640/1397)/(1080/961)≒1.04となっていることが分かる。そして、54a及び54b及び54dで示す付属映像部分を、切り出し範囲51cから映像部分54cへの水平方向の拡大率と等しくなるように16:9映像信号51から切り出す。この例の場合、(1397/1640)×140≒119となり、水平方向の切り出し範囲としては、1397+119×2=1635となる。また、この場合の比X/Yも、図1で説明した様々な好適範囲の値と共に、この好適範囲によって16:9映像信号用に計算される値を、その効果を鑑みて適宜選択して用いればよい。   The scaling unit performs enlargement scaling with the ratio X / Y on the video signal thus cut out. In this example, other constant values X / Y = 1.04 are set so that the same scaling result (1640 × 1080) as the result of adopting the most preferable constant value X / Y = 1.07 illustrated in FIG. Used. With this value, the video signal in the cutout range 52 (video consisting of 1397 pixels × 961 pixels) is enlarged and scaled to the video portion 54 c (1640 × 1080) displayed on the screen 53. Here, it can be seen that X / Y = (1640/1397) / (1080/961) ≈1.04. Then, the attached video portions indicated by 54a, 54b, and 54d are cut out from the 16: 9 video signal 51 so as to be equal to the horizontal enlargement ratio from the cutout range 51c to the video portion 54c. In this example, (1397/1640) × 140≈119, and the horizontal cutout range is 1397 + 119 × 2 = 1635. In addition, the ratio X / Y in this case is selected as appropriate in consideration of the effect of the values calculated for the 16: 9 video signal according to the preferable range together with the values of the various preferable ranges described in FIG. Use it.

図6は、本発明に係る映像表示装置の一例を示す概略図で、図中、60は映像表示装置の一例としてのテレビジョン受像機、61はテレビジョン受像機60と通信をして遠隔ユーザ操作を可能とするリモートコントローラ、61a,61cはリモコン61における選択キー、61bはリモコン61における決定キー、61dはリモコン61における機能キー、62は画面サイズ切換メニュー、63は画面モード選択肢、63aは「スマートズーム」選択肢である。   FIG. 6 is a schematic diagram showing an example of a video display device according to the present invention, in which 60 is a television receiver as an example of the video display device, and 61 is a remote user communicating with the television receiver 60. 61a and 61c are select keys on the remote controller 61, 61b is a decision key on the remote controller 61, 61d is a function key on the remote controller 61, 62 is a screen size switching menu, 63 is a screen mode option, and 63a is “ “Smart zoom” option.

本発明に係る映像表示装置は、上述した各実施形態の映像変換装置と表示パネルとを少なくとも備えるものとし、図6で例示するテレビジョン受像機60や16:9型モニタ付きのPCなどでの実装が可能である。また、本発明に係る映像表示装置は、入力された映像信号に対して映像変換装置で変倍させて表示パネルで表示する表示モードを、ユーザ選択可能に表示パネルに提示する提示手段を備えるものとする。以下、本発明に係る映像表示装置をテレビジョン受像機60を例として、簡単に説明する。   The video display device according to the present invention includes at least the video conversion device and the display panel of each of the above-described embodiments, and is used in the television receiver 60 illustrated in FIG. 6 or a PC with a 16: 9 type monitor. Implementation is possible. The video display device according to the present invention further includes a display unit that presents on the display panel a display mode in which the input video signal is scaled by the video conversion device and displayed on the display panel. And Hereinafter, a video display device according to the present invention will be briefly described by taking a television receiver 60 as an example.

まず、テレビジョン受像機60の画面に、図1で例示したような4:3映像信号がノーマルモードで表示されているものとする。ユーザは、ノーマルモードでは違和感を感じ、リモコン61の機能キー61dを押下するなどして、画面サイズ切換メニュー62を画面上に表示させる。そして、ノーマル,ワイド,シネマ,フル,スマートズームの各モードの一覧が表示された画面モード選択肢63の中から、「スマートズーム」選択肢を上下選択キー61a,61cによって選択し、「スマートズーム」の画面モードを決定する。この決定により、上述した映像変換(スケーリング)処理がなされ、図1の画面13で示すような映像がテレビジョン受像機60の画面に表示される。   First, it is assumed that the 4: 3 video signal illustrated in FIG. 1 is displayed in the normal mode on the screen of the television receiver 60. The user feels uncomfortable in the normal mode, and displays the screen size switching menu 62 on the screen by pressing the function key 61d of the remote controller 61 or the like. Then, the “smart zoom” option is selected by the up / down selection keys 61a and 61c from the screen mode options 63 on which the list of modes of normal, wide, cinema, full, and smart zoom is displayed. Determine the screen mode. By this determination, the video conversion (scaling) process described above is performed, and a video as shown on the screen 13 in FIG. 1 is displayed on the screen of the television receiver 60.

なお、画面サイズ切換メニュー62の表示を含め、その他のOSD表示は、例えば、内蔵するフォントデータ又はビットマップデータにより生成したフォントや図形等を画面に重畳するために映像信号に混合するとよい。ここで、補足的に表示パネルについて、液晶パネルを例に挙げて簡単に説明しておく。液晶パネルは、液晶コントローラによって、映像データを液晶パネルを駆動する信号に変換してゲートドライバ及びソースドライバに出力することで制御される。ゲートドライバは、液晶パネルのアクティブマトリックスのゲート信号を制御してどのラインに書込むかを決定する。ソースドライバは、液晶パネルのアクティブマトリックスのソース信号を制御する。   It should be noted that other OSD displays including the display of the screen size switching menu 62 may be mixed with a video signal in order to superimpose fonts or graphics generated by built-in font data or bitmap data on the screen, for example. Here, the display panel will be briefly described by taking a liquid crystal panel as an example. The liquid crystal panel is controlled by the video controller converting the video data into a signal for driving the liquid crystal panel and outputting the signal to the gate driver and the source driver. The gate driver determines which line is written by controlling the gate signal of the active matrix of the liquid crystal panel. The source driver controls the source signal of the active matrix of the liquid crystal panel.

本発明の一実施形態に係る映像変換装置における映像変換処理の一例を説明するための図である。It is a figure for demonstrating an example of the video conversion process in the video converter which concerns on one Embodiment of this invention. 図1の映像変換処理の流れを説明するための図である。It is a figure for demonstrating the flow of the video conversion process of FIG. 図1及び図2で説明した映像変換処理を実行するための映像処理回路の一構成例を示す図である。FIG. 3 is a diagram illustrating a configuration example of a video processing circuit for executing the video conversion processing described with reference to FIGS. 1 and 2. アスペクト比率4:3の映像信号を元としてアップコンバートされた16:9映像信号を説明するための図である。It is a figure for demonstrating the 16: 9 video signal up-converted based on the video signal of aspect ratio 4: 3. 本発明の他の実施形態に係る映像変換装置における映像変換処理の一例を説明するための図である。It is a figure for demonstrating an example of the video conversion process in the video converter which concerns on other embodiment of this invention. 本発明に係る映像表示装置の一例を示す概略図である。It is the schematic which shows an example of the video display apparatus which concerns on this invention. 16:9型の表示パネルにおいて、アスペクト比率4:3の有効画素数をもつ映像信号を表示する際の従来の方法を説明するための図である。It is a figure for demonstrating the conventional method at the time of displaying the video signal which has the effective pixel number of aspect ratio 4: 3 in a 16: 9 type | mold display panel.

符号の説明Explanation of symbols

11…入力映像信号(4:3映像信号)、12,52…切り出し範囲、13,53…表示画面、14a,51a,54a…左端黒帯部分、14b,51b,54b…右端黒帯部分、14c,51c,54c…表示映像部分、21…映像信号入力処理、22…切り出し処理、23…垂直スケーリング処理、24…水平スケーリング処理、25…映像信号出力処理、30…映像処理回路、31,41…ラインメモリコントローラ、32,42…ラインメモリ、33,37…DMA、34…内部バス、35…外部メモリコントローラ、36…フレームバッファ、38…ラインバッファコントローラ、39…ラインバッファ、40…スケーリング回路、43…サブプロセッサ、50…16:9映像信号の元信号、51…16:9映像信号、60…テレビジョン受像機、61…リモートコントローラ、61a,61c…選択キー、61b…決定キー、61d…機能キー、62…画面サイズ切換メニュー、63…画面モード選択肢、63a…「スマートズーム」選択肢。 11 ... Input video signal (4: 3 video signal), 12, 52 ... Cut out range, 13, 53 ... Display screen, 14a, 51a, 54a ... Left end black belt portion, 14b, 51b, 54b ... Right end black belt portion, 14c , 51c, 54c ... display video portion, 21 ... video signal input processing, 22 ... clipping processing, 23 ... vertical scaling processing, 24 ... horizontal scaling processing, 25 ... video signal output processing, 30 ... video processing circuit, 31, 41 ... Line memory controller, 32, 42 ... Line memory, 33,37 ... DMA, 34 ... Internal bus, 35 ... External memory controller, 36 ... Frame buffer, 38 ... Line buffer controller, 39 ... Line buffer, 40 ... Scaling circuit, 43 ... sub processor, 50 ... 16: 9 video signal original signal, 51 ... 16: 9 video signal, 60 ... telephone Television receiver, 61 ... remote controller, 61a, 61c ... selection key, 61b ... enter key, 61d ... function keys, 62 ... Screen size selection menu, 63 ... screen mode option, 63a ... "Smart Zoom" option.

Claims (6)

アスペクト比率16:9の解像度をもつ表示パネルで映像信号を表示する際に、入力された映像信号を変換する映像変換装置であって、アスペクト比率4:3の映像信号(以下、4:3映像信号という)を入力する入力手段と、該入力された4:3映像信号を、水平方向に倍率X、垂直方向に倍率Yで変倍する変倍手段と、該変倍手段で変倍した映像信号を前記表示パネル側に出力する出力手段とを備え、前記倍率Xと倍率Yの比X/Yは、1より大きく且つ1.33より小さい一定値をもつことを特徴とする映像変換装置。   A video conversion device that converts an input video signal when the video signal is displayed on a display panel having a resolution of an aspect ratio of 16: 9. The video signal has an aspect ratio of 4: 3 (hereinafter referred to as 4: 3 video). Input means), a scaling means for scaling the input 4: 3 video signal with a magnification X in the horizontal direction and a magnification Y in the vertical direction, and an image scaled by the scaling means Output means for outputting a signal to the display panel, and the ratio X / Y between the magnification X and the magnification Y has a constant value larger than 1 and smaller than 1.33. 前記入力手段は、入力された4:3映像信号から所定の切り出し範囲で切り出す信号切出手段を有し、前記所定の切り出し範囲のうち垂直方向の切り出し範囲は、上側で除外する走査線数と下側で除外する走査線数との比率を、上側が下側より小さい所定の比率とし、前記変倍手段は、前記信号切出手段で切り出した映像信号を変倍することを特徴とする請求項1に記載の映像変換装置。   The input unit includes a signal cutout unit that cuts out the input 4: 3 video signal in a predetermined cutout range, and the vertical cutout range of the predetermined cutout range is the number of scanning lines excluded on the upper side. The ratio of the number of scanning lines excluded on the lower side is set to a predetermined ratio on the upper side which is smaller than the lower side, and the scaling unit scales the video signal cut out by the signal cutting unit. Item 2. The video conversion device according to Item 1. 前記比X/Yは、1より大きく且つ1.1以下の一定値をもつことを特徴とする請求項1又は2に記載の映像変換装置。   The video conversion apparatus according to claim 1, wherein the ratio X / Y has a constant value greater than 1 and 1.1 or less. 前記比X/Yは、1.05より大きく且つ1.1以下の一定値をもつことを特徴とする請求項1又は2に記載の映像変換装置。   The video conversion apparatus according to claim 1, wherein the ratio X / Y has a constant value greater than 1.05 and less than or equal to 1.1. 前記入力手段は、アスペクト比率4:3の映像信号を元としてアップコンバートされたアスペクト比率16:9の映像信号(以下、16:9映像信号という)を入力する手段を有し、前記変倍手段は、前記入力手段で16:9映像信号が入力された場合、該16:9映像信号を他の一定値をもつ比X/Yに基づいて変倍し、該他の一定値は、前記入力手段で4:3映像信号が入力された場合に前記一定値に基づき変倍した結果の出力画素比と同じ比率になるように設定された値であることを特徴とする請求項1乃至4のいずれか1項に記載の映像変換装置。   The input means has means for inputting a video signal with an aspect ratio of 16: 9 (hereinafter referred to as a 16: 9 video signal) up-converted based on a video signal with an aspect ratio of 4: 3, and the scaling means When a 16: 9 video signal is input by the input means, the 16: 9 video signal is scaled based on a ratio X / Y having another constant value, and the other constant value is 5. A value set to have the same ratio as an output pixel ratio as a result of scaling based on the constant value when a 4: 3 video signal is input by the means. The video conversion apparatus of any one of Claims. 請求項1乃至5のいずれか1項に記載の映像変換装置と、表示パネルとを備えた映像表示装置であって、入力された映像信号に対して前記映像変換装置で変倍させて前記表示パネルで表示する表示モードを、ユーザ選択可能に前記表示パネルに提示する手段を備えたことを特徴とする映像表示装置。   6. A video display device comprising the video conversion device according to claim 1 and a display panel, wherein an input video signal is scaled by the video conversion device and the display is performed. A video display device comprising means for presenting a display mode to be displayed on the panel on the display panel so as to be selectable by a user.
JP2005028784A 2005-02-04 2005-02-04 Video conversion device and video display device Expired - Fee Related JP4557739B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005028784A JP4557739B2 (en) 2005-02-04 2005-02-04 Video conversion device and video display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005028784A JP4557739B2 (en) 2005-02-04 2005-02-04 Video conversion device and video display device

Publications (2)

Publication Number Publication Date
JP2006215320A JP2006215320A (en) 2006-08-17
JP4557739B2 true JP4557739B2 (en) 2010-10-06

Family

ID=36978599

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005028784A Expired - Fee Related JP4557739B2 (en) 2005-02-04 2005-02-04 Video conversion device and video display device

Country Status (1)

Country Link
JP (1) JP4557739B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100123822A1 (en) * 2008-11-14 2010-05-20 General Instrument Corporation Method for Converting Between Display Information Scales
JP2011237501A (en) * 2010-05-07 2011-11-24 Mitsubishi Electric Corp Image display device
JP6146852B2 (en) 2012-10-30 2017-06-14 シナプティクス・ジャパン合同会社 Display control apparatus and data processing system
US9497358B2 (en) * 2013-12-19 2016-11-15 Sony Interactive Entertainment America Llc Video latency reduction

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0564161A (en) * 1991-08-30 1993-03-12 Hitachi Ltd Wide screen television receiver
JPH09121295A (en) * 1996-07-22 1997-05-06 Victor Co Of Japan Ltd Display device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0564161A (en) * 1991-08-30 1993-03-12 Hitachi Ltd Wide screen television receiver
JPH09121295A (en) * 1996-07-22 1997-05-06 Victor Co Of Japan Ltd Display device

Also Published As

Publication number Publication date
JP2006215320A (en) 2006-08-17

Similar Documents

Publication Publication Date Title
US6493036B1 (en) System and method for scaling real time video
KR100386579B1 (en) format converter for multi source
JP4646446B2 (en) Video signal processing device
US20040012724A1 (en) Video process device capable of realizing triple-window and method of realizing the same
KR20030046713A (en) Image display device and operating method for thereof
JP4557739B2 (en) Video conversion device and video display device
JP5072419B2 (en) Image display device
JP4332312B2 (en) Video signal processing apparatus, video display apparatus, and video signal processing method
JP4299496B2 (en) Display device and television receiver
JP2005275357A5 (en)
JP2006227442A (en) Video signal processor and video display device equipped therewith
EP0921495B1 (en) Picture size conversion method and device thereof
KR100239466B1 (en) Multi-pip generation apparatus in hdtv
JP3799048B2 (en) Video display device and video display method
JPH07131734A (en) Television receiver and on-screen signal generator
JP3959425B2 (en) Receiving device and display device
US6078702A (en) Image display apparatus
JP2005215375A (en) Display device and method
JP6289559B2 (en) Image display device
JP2004101924A (en) Image signal processor and image signal processing method
JP4110363B2 (en) Image processing apparatus, image processing method, and image display apparatus
JP2004252009A (en) Display control method, display control device and display device
KR100744519B1 (en) Device for an on screen display scaling and the method thereof
KR100759224B1 (en) Method for displaying video of display apparatus
JP4513313B2 (en) Video signal processing apparatus and method

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060915

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070302

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100629

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100720

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100720

R150 Certificate of patent or registration of utility model

Ref document number: 4557739

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130730

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees