JP4048870B2 - Projector system - Google Patents

Projector system Download PDF

Info

Publication number
JP4048870B2
JP4048870B2 JP2002229069A JP2002229069A JP4048870B2 JP 4048870 B2 JP4048870 B2 JP 4048870B2 JP 2002229069 A JP2002229069 A JP 2002229069A JP 2002229069 A JP2002229069 A JP 2002229069A JP 4048870 B2 JP4048870 B2 JP 4048870B2
Authority
JP
Japan
Prior art keywords
projector
data
image data
image
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002229069A
Other languages
Japanese (ja)
Other versions
JP2004069996A (en
JP2004069996A5 (en
Inventor
明善 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2002229069A priority Critical patent/JP4048870B2/en
Publication of JP2004069996A publication Critical patent/JP2004069996A/en
Publication of JP2004069996A5 publication Critical patent/JP2004069996A5/ja
Application granted granted Critical
Publication of JP4048870B2 publication Critical patent/JP4048870B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、パーソナルコンピュータ(以下PCとい)及びプロジェクタ(投射型映像機器)を備えたプロジェクタシステムに関する。
【0002】
【従来の技術】
従来のプロジェクタシステムは、PCとプロジェクタとを接続して構成されている。PCからプロジェクタに送信される画像データ等はアナログRGB信号から構成されている。このため、PC側で持っているデジタルデータ(プレゼンテーションの資料や、内蔵するDVDプレーヤの映像出力など)を一旦アナログ信号に変換してからプロジェクタに出力している。プロジェクタ側では、そのアナログRGB信号をA/Dコンバータによりデジタル化し、PCからの解像度をプロジェクタの解像度に合うように解像度変換し(以下、リサイズ処理という)、その後、ライトバルブの表示デバイス(LCD)のタイミングに合うようLCD駆動回路を介して表示デバイス(LCD)の液晶パネルを駆動するような構成となっている。LCD駆動回路では、駆動する個別の液晶パネルに対応したガンマ補正や、輝度むら、色むらの補正値をルックアップテーブル(LUT)等に設けることで個別に調整を行っている。そして、最終的なデジタル信号は、D/Aコンバータにより変換され、液晶パネルの仕様に合わせたアナログ信号に変換されている。
【0003】
【発明が解決しようとする課題】
従来のプロジェクタシステムにおいては以下の問題点が存在していた。
▲1▼元々デジタル信号である映像ソースを一旦アナログにPC側で変換し、プロジェクタ側でそのアナログ信号をデジタルに再び戻し、更に、映像ソースを加工後アナログに変換し直すので、画像信号を変換する際に画像信号の劣化が生じる。
▲2▼プロジェクタ側に、多大な回路が必要でありコストアップとスペースの増大、消費電力の増大を招いている。
▲3▼消費電力の増大に伴い、電池駆動が困難であった。
▲4▼画像(映像)にこだわるとプロジェクタ側に多くのユーザーインターフェースが必要になり、わかりにくい操作になってしまう。
▲5▼画像(映像)ごとのパラメータ設定が、実質的には困難である。
▲6▼一般的にアナログRGBコネクタは大きく、ケーブルも太いためとり回しが不便であった。
【0004】
本発明は、このような背景のもとでなされたものであり、少なくとも、映像信号の劣化を防ぐとともにプロジェクタの消費電力の低減を図ることを可能にするプロジェクタシステムを提供することを目的とする。
【0005】
【課題を解決するための手段】
本発明に係るプロジェクタシステムは、画像データを供給するパーソナルコンピュータと、前記パーソナルコンピュータから供給された画像データに基づいて画像を生成してスクリーンに投射して表示させるプロジェクタとを備えたプロジェクタシステムにおいて、前記プロジェクタは、少なくともリサイズ、ガンマ補正及び色むら補正のための映像パラメータが保存されるパラメータ記憶手段を備え、前記パーソナルコンピュータからの送信要求に基づいて前記映像パラメータを前記パーソナルコンピュータに送信し、前記パーソナルコンピュータは、前記プロジェクタに前記映像パラメータの送信を要求して前記プロジェクタから取り込んだ前記映像パラメータを保存する記憶手段と、前記映像パラメータに基づいて映像ソースの画像データに画像処理を施し、前記プロジェクタの表示デバイスの仕様に対応した画像データを生成する画像加工手段を備え、前記画像加工手段は、前記プロジェクタと投射されるスクリーンとの位置関係に応じた台形歪みを補正するための台形補正手段を少なくとも備えたものである。
【0006】
本発明に係るプロジェクタシステムにおいて、前記画像加工手段は、前記プロジェクタの表示デバイスを構成するLCDの個体ばらつき等を含んだ特性データを反映して画像データを補正するガンマ補正手段と、前記画像データの色むらを補正する色むら補正手段とを備えたものである。
【0007】
本発明に係るプロジェクタシステムにおいて、前記画像加工手段は、画像データの明るさに対応してプロジェクタの光源の明るさを制御するための調光信号を生成して、前記プロジェクタに送信させて当該光源の明るさを制御させる調光制御手段と、前記調光制御手段の出力に基づいて前記画像データの階調を変更する階調変更手段とを備えたものである。
【0008】
本発明に係るプロジェクタシステムにおいて、前記画像加工手段は、プロジェクタにより得られる画像を調整するための映像調整部を備えたものである。
【0037】
【発明の実施の形態】
実施形態1.
図1は本発明の実施形態1に係るプロジェクタシステムの説明図である。このプロジェクタシステムは、プロジェクタ100とPC200とを備えている。両者はそれぞれに設けられたUSBコネクタ111,261にUSBケーブル150が接続され、プロジェクタ100とPC200とはUSBケーブル150を介して接続されている。
【0038】
図2は図1のプロジェクタ100の構成図である。プロジェクタ100は、光学系として、表示デバイス101(101R,101G,101B)、光源102及び投射レンズ103を備えている。また、プロジェクタ100は、USBコネクタ111、USBコントローラ112、LCD駆動回路113、バス114、フレームメモリ105(105R,105G,105B)、CPU107、パラメータメモリ108、メモリ109、DC/DCコンバータ120及び内蔵電池121を備えている。
【0039】
プロジェクタ100の表示デバイス101としては、LCD(Liquid crystaldisplay)を利用したもの(このLCDはライトバルブと称される)や光変調素子であるDMD(Digital Micro Mirror Device テキサスインスツルメント社の登録商標)等がある。表示デバイス101としてどれを用いてもよいが、本実施形態においてはLCDを用いた例について説明する。なお、LCDを用いたプロジェクタでも、単板式(1枚の液晶パネルを用いるもの)や3板式(R,G,Bに対応する3枚の液晶パネルを用いるもの)等があるが、ここでは3板式のものについて説明する。
【0040】
プロジェクタ100の光源102としては、超高圧水銀ランプやハロゲンランプ、LED等が用いられるが、ここではLEDを用いる例について説明する。
【0041】
また、プロジェクタ100の光学系の構成については、ランプからの光源を集光し均一化する手段や、ランプからの白色光源をR,G,Bにダイクロイックミラーなどで分離する手段や、表示デバイス(LCD)101を通った後に合成するプリズムや、その後に実際に投射するための投射レンズ郡が一般的には存在するが、本実施形態においてはそれらの構成は本発明に直接関係がないので省略しており、投射レンズ103のみを図示している。
【0042】
次に、上記の表示デバイス(LCD)101を駆動する部分の詳細を説明する。USBコントローラ112は、USBコネクタ111に接続され、USB規格に基づきPC200との間でデータ転送の制御を行うものである。本発明においては、PC200とプロジェクタ100とを接続する手段であればどのような形式でもプロトコルでもかまわない。しかしながら、転送レートを考慮すると、USB2.0かIEEE1394の2種類が適当である。更に、PC200の搭載率等からやはり汎用性の高いUSB 2.0が現時点では理想である。したがって、本実施形態のUSBコントローラ112はUSB 2.0を念頭においている。
【0043】
なお、USBとはユニバーサル・シリアル・バス(Universal Serial Bus)というシリアル転送のインターフェース規格である。その特徴として、480Mbpsの転送レート、ホストからターゲット機器への電源供給が可能であり(5V,500mA)、電源を入れたまま抜き差し可能である等がある。なお、このUSBコントローラ112は単体でもIPコアとしても幅広く販売されているため、ここではその詳細は省略するが、主として、USBシリアル・インタフエース・エンジン、USBトランシーバ、高速データ伝送用FIFO、DMA、コントロール/ステータス・レジスタ群、発振回路、パスパワード制御ブロック等から構成されている。また、図2のUSBコントローラ112は、CPU107と分離して図示されているが、一般的にはシステムLSIとしてCPUやUSBは統合化されて1つのLSIで実現されていることが多い。本発明は何れの構成であってもよいが、ここでは分離されている状態のものについて説明する。
【0044】
CPU107はプロジェクタ全体の制御を行うものであり、USBコントローラ112やLCD駆動回路(LCDC)113を制御するとともに、電源関係の制御を行う。CPU107にはプログラムが格納されたROM(図示せず)や、処理を行う為のRAMからなるメモリ109が内蔵又は外付けで接続される。本実施形態の特徴としては、CPU107に接続する形でパラメータメモリ108を用意している。このパラメータメモリ108にはプロジェクタの固有データが格納されている。パラメータメモリ108は電源オフ時にも値を保持できるようにフラッシュメモリ等で構成されている。なお、プログラムメモリやパラメータメモリ108や、処理用メモリ109は物理的に1つのメモリで構成されていてもかまわない。しかし、ここでは、プログラムメモリ(図示せず)とパラメータメモリ108は同一のフラッシュROMから構成され、メモリ109はDRAMで構成されているものとする。
【0045】
次にLCD駆動回路(LCDC)113とフレームメモリ105との関係を説明する。このLCD駆動回路(LCDC)113はその機能によって幾つもの構成が考えられる。ここでは2つの例について説明する。
【0046】
(例1)
USBコントローラ112を介して、ホストであるPC200から転送されてきたデータは、LCD駆動回路(LCDC)113によってフレームメモリ105(105R,105G,105B)に格納される。このフレームメモリ105(105R,105G,105B)に格納される時点でR,G,B各色ごとに分けられる。ここで、表示デバイス(LCD)101がSVGAだとすると、1フレームの画素数は800*600となる。色数が24ビットのフルカラーであるとすると、800*600を1フレームとした24枚のフレームで構成される。ここでは800*600としたが、XGA(1024*768)等でももちろんかまわない。但し、この値は、搭載する表示デバイス(LCD)101の解像度で一義的に決まるので、機器固有のデータとなる。前述したパラメータメモリ108にはこのような固有データが格納される(図10参照)。
【0047】
ここで、フレームメモリ105に格納されたデータは、RGB各色8ビットとして3枚のRGB各色に対応する表示デバイス(LCD)101(101R,101G,101B)に供給される。この信号は実際には、各色信号に分かれた後に、LCD駆動回路(LCDC)113に内蔵されているD/Aコンバータを介して、表示デバイス(LCD)101に内蔵されているLCDドライバー101aに対してアナログ信号の形式で出力される。LCD駆動回路(LCDC)113は、搭載している表示デバイス(LCD)101に対応するタイミングコントロール信号を発生すると共に、その信号に同期して、フレームメモリ105の画像データをLCDドライバー101aに対して出力する。
【0048】
(例2)
次に、LCD駆動回路(LCDC)113に幾つかの機能を付加した例を説明する。たとえば、PC200とプロジェクタ100とが接続されるシリアルデータの転送レートが低い場合には、圧縮データの送信や、前画面データの差分データ送信などの工夫が必要になってくる。そこで、例えばPC200から差分データが圧縮されて送られてくる場合について説明する。
【0049】
図3はこの場合のLCD駆動回路(LCDC)113の構成を示した構成図である。LCD駆動回路(LCDC)113は差分データ格納メモリ131、復号化手段132及び書き込み手段133を備える。LCD駆動回路(LCDC)113は差分データを受け取るとそれを差分データ格納メモリ131に格納する。このときの差分データは図4に示されるように座標データ131aとその座標データ131aにより特定される領域の画像データ131bから構成される。復号化手段132は差分データ格納メモリ131の差分データの複合化を行う。書き込み手段133は、複合化されたデータに含まれる座標データ131aに基づき、復号化された差分データをフレームメモリ105に上書きする。差分データは四辺形で表された複数のエリアに区切られているので、差分データの個数分だけこの処理を繰り返すことで、例えば図5の▲1▼〜▲4▼に示される領域に差分データを書き込むことにより、現在のフレームデータが再現することになる。ここでは、復号化手段132や書き込み手段133をLCD駆動回路(LCDC)113に設けた例について説明したが、CPU107で処理してもよい。この例2では、構成が若干複雑になるが、接続手段の転送レートが低くても、動画などの配信が可能であるという利点がある。
【0050】
プロジェクタ100の電源構成は、従来のプロジェクタのようにAC電源(国内では100V)を入力とし、ロジック系用電源やLCDを駆動する液晶駆動電源や、ランプ用電源を生成してもよい。ランプの種類によっては、特別な電源制御回路が必要となる場合もある。例えば超高圧のような直流放電ランプを点灯するには点灯装置が必要となる。これは高電圧発生回路や安定器(バラスト)等で構成される。しかし、この電源部分に関しては、本実施形態では以下の工夫を行っている。
【0051】
まず、光源102をLEDにすることで、特別な点灯装置を不要とした。次に、PC200からのUSBケーブル150を介して供給される+5V電源から本体電源を生成するようにした。即ち、DC/DCコンバータ120を設けて、これをUSBコネクタ111を介してUSBケーブル150の電源線(+5V)に接続するようにしている。USBケーブル150がプロジェクタ100とPC200との間に接続されると、PC200からDC/DCコンバータ120に+5Vの電圧VCCが供給される。DC/DCコンバータ120はその入力電圧を電圧変換して、VDD、VLCDの各駆動電圧を生成して、VDDはLCD駆動回路(LCDC)113、CPU107、パラメータメモリ108、メモリ109等に供給し、VLCDはLCD駆動回路(LCDC)113及び表示デバイス(LCD)101に供給する。なお、USBコントローラ112にはUSBケーブル150の電源線(+5V)が接続されており、USBケーブル150からの+5Vの電圧VCCが駆動電圧として供給されている。
【0052】
なお、光源102の駆動電圧は、USBケーブル150の電源線(+5V)を利用してもよいが、USBの+5Vの供給ラインには500mAという制限があるため、プロジェクタ200の基本性能に影響を与えないように、光源(LED)102のみに内蔵電池121から駆動電圧を供給するようにした。このような構成により、AC100Vがないところでもプロジェクタ100を使用できるようにしている。
【0053】
図6は光源102の回路図である。この光源102は、抵抗102a、LED102b及びトランジスタ102cが直列に接続されて構成されており、内蔵電池121からの電圧VBattが供給されている。トランジスタ102cはCPU107により制御され、LED112bのオン・オフ及び駆動電流が制御される。
【0054】
次に、PC200の詳細について説明する。本実施形態において、PC100はLCD駆動回路(LCDC)113に供給する画像データをUSBケーブル150を介して供給するホストとして機能する。ここでは代表的な例としてWINDOWS(登録商標)(以下、同様である)搭載のPCについて説明する。
【0055】
PC200はハードウェア構成として概ね次のデバイスで構成される。まず、メインの処理を行うCPUとプログラムメモリ、処理用メモリ、キーボードやDVD機器などを制御するIOコントローラ、HDDやFDD、CD−ROMなどの外部記憶装置(DVDが含まれてももちろんかまわない)、内蔵するディスプレイや外部にアナログRGBを経由して映像データを出力するためのグラフィックコントローラ、USBコントローラや電源回路等である。なお、このハード構成自体は一般的なものである。
【0056】
図7はPC200に搭載されるソフトウェアの構成図である。ハードウェア200aの構成は上述のように従来のものと同じであるが、ソフトウェア200bについては次のような特徴がある。外部記憶装置に記憶され、内蔵メモリに展開されて動作を行うベースのソフトウェアとして、ハードウェアと密接に関係のあるBIOS(basic input/output system)201、システム管理や基本的なユーザー操作環境を提供するソフトウェアであるOS(operating system)202、そして、OS202の上にのって各種アプリケーションを提供するアプリケーションプログラム203がある。その他に、周辺機器などを管理するためのデバイスドライバー(図示せず)も存在している。表示部に限って説明すると、PC200に搭載されるグラフィックボードはそのハードウェアに対応するグラフィックドライバー204を提供する。BIOS201は主としてメインボード上に搭載されているデバイスを管理するため、表示の関係では、OS202がインストールされる前までの簡易的な機能(設定画面を表示したりする機能)を備えるのみである。
【0057】
プロジェクタ100とPC200とを接続するUSB(USBケーブル150)に関しては、USBの各機能に応じたUSBドライバー205等がインストールされる。本実施形態では、プロジェクタ100とPC200との間は固有のデータ処理を行うので、まず最初にUSBドライバー205をインストールしなければならない。ただし、OS側であらかじめ準備されている場合はこの限りではない。
【0058】
また、本実施形態においては、上記のグラフィックドライバー204とOS202の間に仮想グラフィックコントローラ206を設けて、全画面動作を認識する。それと同時にOS202上にある1つのアプリケーションプログラムとして存在している。この状態で、たとえばPC200でパワーポイント(POWERPOINT,マイクロソフト社)などを立ち上げてプレゼンテーションを行うと、画面データは自動的に最適なデータに加工されて、USBを経由して、プロジェクタ100のLCD駆動回路(LCDC)113に入力される。
【0059】
上記の仮想グラフィックコントローラ206を更に詳細に説明する。OS202は、アプリケーションプログラム203から画面変更の依頼を受けると、OS202はグラフィックコントローラ252に対して書き換えを依頼する。このOS202の命令を間に仮想的に入った仮想グラフィックコントローラ206が受け取り、画面状態を把握しつつ本来のグラフィックドライバー204に制御を渡す。このような機能はいわゆるフックと呼ばれるものである。この機能は画面書き換えを判別するためであり、全画面キャプチャの繰り返しであれば、必要ない。転送レートが低い場合、差分データを検出して送信するような場合に必要になる。
【0060】
また、本実施形態においては、プロジェクタコントロールアプリケーションプログラム(以下、PJAプログラムという)210がインストールされる。これはアプリケーションプログラムの一つである。使用者は明示的にこのPJAプログラムを立ち上げる必要がある。但し、スタートアップに入れておけば、電源投入時に立ちあがるのはいうまでもない。PJAプログラム210が立ちあがると上記仮想グラフィックコントローラ206の機能も有効となる。両プログラムは同時に使用される。因みにUSBドライバー205はUSBケーブル150が接続された際に不明なデバイスとして検出されてその際にインストールされてもよいし、予めインストールされておりUSBケーブル150が接続されたときに該当するドライバーが認識され有効となってもよい。USBに関しては、PJAプログラムと同期関係はないことに注意する必要がある(USBの接続状態と同期関係にある。)。
【0061】
PJAプログラム210はPC200上のアプリケーションプログラムとして存在できるので、さまざまな機能を実現できる。例えば、選択された画面を抜き出して表示する、DVDのソースに応じて画面データを修正して表示する、映像ソースに応じて各種画像パラーメータを自動的に変更して表示する等である。更に、ネットワークにつながる昨今では、ネットワークと接続し、映像ソースとその映像ソースに付随する画像パラメータを受信してストリーミングで表示する、等各種アプリケーションが考えられる。特定の画像データ出力から汎用のデータ転送線に接続を入れ替えることで、画像データの確かな受け渡しと共に、全てがデジタルでかつ内蔵するグラフィックボードの機能に制限されない各種アプリケーションの展開を可能にする。
【0062】
但し、本実施形態においては、基本構成として上記の付加的な効果を省き、従来のプロジェクタの機能をPC200にどのように組み込んだかを中心に説明する。
【0063】
本実施形態において、PJAプログラム210は、全画面データを取得する全画面キャプチャ手段211、前画面データと差分データを検出する差分データ検出手段212、キャプチャされたデータ等を加工する画像加工手段213、最終的な画像データをUSBドライバー205を介してプロジェクタ100に送信するデータ送受信手段214、その画像加工手段に対し使用者の好みによる設定を行う為のユーザーインターフェースとしてのメニュー画面を表示させるメニュー表示手段215及びパラメータ送受信手段216の各機能を実現している。
【0064】
図8は図7の画像加工手段213の詳細を示した構成図である。画像加工手段213は、映像制御部220、映像パラメータ制御部230、映像調整部240、調光制御手段250及び階調変更手段251から構成されている。映像制御部220は、フリーズ(FREEZE)221、ミュート(MUTE)222、ズーム(ZOOM)223及びエフェクト(EFFECT)224の各処理を行うものである。映像パラメータ制御部230は、台形補正手段231、リサイズ(RESIZE)手段232、ガンマ(γ)補正手段233及び色むら補正手段234を備えており、各種の処理を行うものである。映像調整部240は、シャープネス、明るさ、コントラスト、色の濃さ及色あいの各調整処理を行うものである。調光制御手段250はプロジェクタ100の光源102の明るさを調整するためのものであり、階調変更手段251は光源102の明るさに応じて画像データの階調を変更するものである。なお、映像パラメータ制御部230の各部のパラメータはプロジェクタ100のパラメータメモリ108に初期値が保存されており、起動時にそのパラメータを取り込むようにしている。
【0065】
次に、映像制御部220について説明する。映像制御部220による「フリーズ」とは、動いている映像を一時停止させる処理である。本実施形態においては、PC200の映像データの転送を中止する、或いは同一データを送信(又は差分データなしで送信)させればよい。「ミュート」とは、映像と音声を一時的に消す処理である。映像に関しては、消すに相当するデータを送信することで実現できる。即ち、消すに相当するデータは全黒、全白、特定のパターンのどれであってもよい。特定のパターンなどは、PC側で実現するのでメモリ容量の制限のあるプロジェクタと違い、多くの画像データを入れ替えられるためより有効である。音声に関しては、本実施形態の目的から離れてしまうため、説明を省いていたが、音声はPC側のスピーカで対応すればよいので、プロジェクタ側には備わっていない。しかしながら、別にプロジェクタ側に備わっていてもよいのはいうまでもない。「ズーム」とは、画面の拡大やスクロールを行うものであり、これは画像データを加工することにより容易に実現できる。「エフェクト」とは、映像データにカーソルやマーカなどの装飾を施す機能である。これは、上記と同じく画像データを加工することにより実現することができる。
【0066】
次に、映像パラメータ制御部230について説明する。ガンマ補正手段233は、液晶パネルの非線形な入出力持性(ガンマ特性)を補正するために行うもので、赤(R)、緑(G)、青(B)の各色信号の線形な階調値と、ガンマ特性を補正するための非線形な階調値との対応関係が示されたルックアップテーブル(LUT)により、入出力特性の補正を行う。ルックアップテーブル(LUT)はフルカラーの24ビットカラーであれば各色8ビットとなり、その8ビットをアドレス入力とし8ビットのデータを出力するものであるから、256*8*3=6144ビット(bit)のデータとなる。
【0067】
このサイズが問題となる場合には、以下の処理方法がある。第1には、予めPC側に転送されれば、変更の必要がないので以降転送しない。第2には、適当にデータを間引きしてデータを圧縮する。そもそもガンマ補正は、表示デバイス(LCD)の印加電圧Vと透過率Tとの関係で示されるT−V特性がリニアでないものを補正することによって適正化させるものである。特に、階調値の低い黒レベル付近では、印加電圧Vの変化に対して透過率Tの変化が少なくなっているため、階調の変化が少なく解像度が低下してしまう。つまり、その特性には、均一性がないため階調をあまり損なわない領域もある。そこでこの領域のデータを間引きけばよい。
【0068】
色むら補正手段234は画像データの色むらを補正するためのものであるが、画像データを補正するための色むら補正データは次のようにして得る。中間調の一様な画像、典型的にはグレーの一様な画像を投射表示し、表示された投射画像をビデオカメラで撮影したり、或いはその投射画像の輝度を輝度計で測定することにより、投射画像の色むらの分布を測定する。次に、色むらの発生している画素の画像データの調整と、調整後の画像データの投射画像に発生する色むら測定とを繰り返し行うことにより、適切な色むら補正データを求める。つまり、補正データはプロジェクタ1台1台が異なった値をもつものであり、これはその機器個体の特性に依存している。このように、機器に固有の補正データは機器内に保存しておくのが望ましい。そこで、本実施形態においてはプロジェクタ100のパラメータメモリ108に色むらの補正データを保存している。
【0069】
次に、リサイズ手段232の機能について説明する。リサイズ(RESIZE)とは画面解像度を変換することである。本実施形態においては、PC200の表示画面を、プロジェクタ100の表示デバイス(LCD)101の解像度に合わせて変換する。例えばPC側の解像度が640*480で、プロジェクタの解像度が1024*768であれば、640*480を1024*768に拡大して表示する。この解像度変換の自体は公知の技術であるのでその詳細は省略する(例えば特開平9−114443号公報参照)。通常は表示デバイス(LCD)101の解像度に合わせた解像度をパラメータメモリ108の初期データの保存領域(後述の図10参照)に保存しておく。PC200がこの解像度を読み込むことにより、プロジェクタの表示デバイス(LCD)101の解像度を把握する。
【0070】
ところで、上述のリサイズ(RESIZE)手段232による解像度変換を無効にしたい場合がある。そのような場合には、使用者が解像度を設定できるようにしており、その設定された解像度はPC200側からプロジェクタ100側のパラメータメモリ108の最新設定領域(図10参照)に書き込まれる。このようにすることでプロジェクタ側の使用者が入れ替わり異なったPC200にプロジェクタ100が接続されても、プロジェクタ側の電源がオンである限り設定値は継続する。なお、この最新の設定値は、電源オフ時に保持しておいてももちろんかまわないが、通常は初期設定で使用されることが多いため、電源投入時に又は電源遮断時にクリアしておくのが望ましい。
【0071】
次に、台形補正手段231の機能について説明をするが、考え方は上記のリサイズ手段232と全く同様である。台形補正情報は、プロジェクタの設置形態に依存するので、通常の初期設定は「台形補正をしない」である。PC側でプロジェクタの設置状態によって発生する台形を画像を加工することで補正する。なお、この台形補正の処理自体は公知の技術であるからその詳細は省略する(例えば特開平11−305715号公報参照)。プロジェクタ100のパラメータメモリ108に台形補正情報を入れたのは、使用者が変わる場合を考慮したためである。使用者が変わりPC100を入れ替えても、通常はプロジェクタ100とスクリーン122の相対位置関係は変わらない。台形補正パラメータをプロジェクタ100側に保存しておくことで、使用者が変わってもそのたびごとに台形補正を行わなくてもよいようになっている。なお、傾斜センサーや方位センサーを搭載し自動的に台形補正をすることも可能であり、この場合は、プロジェクタ100側に上記センサーを装備しその値をPC200側で読むことで補正を行う(PC側では画像を加工することが補正となる)。
【0072】
調光制御手段250は画像データの輝度レベル(例えば平均値)を検出してそのレベルに応じてプロジェクタ100の光源102の明るさを調整するための調光制御信号を生成してプロジェクタ100側に送信させる。例えば輝度レベルが70%の場合には光源102の明るさを70%にする。また、階調変更手段251はその輝度レベルに応じて画像データの階調を変更する。例えばある画素の輝度レベルが70%の場合には対応するその画素の階調度を100%に変更する。この場合には画素の輝度レベルが70〜100%の場合には全て階調度を100%に設定することになる。このように画素の輝度レベルに応じてプロジェクタ100の光源102の明るさを制御するとともに画像データの階調を変更することにより、プロジェクタ100側では見易い画像が得られる。
【0073】
図9は上記の映像制御部220、映像パラメータ制御部230、映像調整部240及び調光制御手段250のパラメータを設定するためのメニュー画面の説明図である。PC200の表示画面に図示のようなメニュー表示欄215aが表示される。このメニュー表示欄215aはメニュー表示手段215により表示され、メニュー表示欄215aを操作することにより各種のパラメータが取り込まれる。
【0074】
図10はプロジェクタ100のパラメータメモリ108に格納されたパラメータの説明図である。ガンマ補正及び色むら補正のパラメータについては、初期データ保存領域にルックアップテーブル(LUT)値及び補正値がそれぞれ保存されており、最新設定領域には該当するデータが保存されない(その必要がない)。リサイズ(RESIZE)のパラメータについては、初期データ保存領域に表示デバイス(LCD)101の解像度(1024×768)が保存されており、最新設定領域には最新のデータが保存されるようになっている。この最新のデータは図9のメニュー画面により設定され、それが後述のようにプロジェクタ100のに送信された該当する領域に保存される。また、台形補正のパラメータについては、初期データ保存領域に保存されず(初期データがない)、最新設定領域には最新のデータが保存されるようになっている。
【0075】
次に、図7に再び戻って、パラメータ送受信手段216について説明する。映像制御部220及び映像調整部240のパラメータのように、プロジェクタの種類や特性に全く関係ないものがあるが、上述のように、映像パラメータ制御部23のパラメータのようにプロジェクタの種類や特性に依存するものもある。そこで、映像パラメータ制御部23のパラメータをプロジェクタのパラメータメモリ108に予め保存しておいて、PCの起動時にそのパラメータを取り込む必要がある。また、図9のメニュー表示画面において設定された最新のパラメータについてもパラメータメモリ108に保存しておくことが望ましい。このようなことから、パラメータ送受信手段216はプロジェクタのパラメータメモリ108のパラメータをUSBドライバー205を介して取り込んだり、PC200側で設定した場合にそのパラメータをプロジェクタ100にUSBドライバー205を介して送信する処理を行う。
【0076】
次に、PC200とプロジェクタ100との間のデータ転送について説明する。本実施形態は、PCとプロジェクタ間の転送に関する改善を目的としたものでないため概要のみ説明する。データ転送はUSBケーブル150を用い行われる。物理層では、シリアル転送となる。USBはいくつもの転送方式が規定されており、たとえばストレージクラス(ドライブとして扱う)、コントロールクラス(機器の状態を知る)等が存在する。本実施形態では、PJAプログラムが、上記USBドライバーを複数コントロールすることで、プロジェクタの状態を知ったり、プロジェクタに対して大量のデータを転送したりすることでデータの送受信を行う。さて、転送されるデータであるが簡単に例を提示する。
【0077】
まず前提として、USB2.0規格に応じて480Mbpsの転送を行うとする。PC200側がXGA1024*768であり、フルカラーの24ビットだとすると、1フレームのデータは約18.8Mbとなる。プロジェクタ100は通常60Frame/sで表示されるので、転送スピードとして約1.1Gbpsが必要となる。転送速度が480Mbpsであれば、単純計算で26frame/sの表示となる。プロジェクタ100側では、同一フレームを約2.29回表示することとなる。実際にはUSB転送時のソフトウェア処理でのロスや、プロジェクタ側でのUSB周辺回路構成等でロスするので、フレームレートは幾分落ちることになる。
【0078】
この課題に対処する方法としては、プロジェクタ100側の解像度を落とす(例えばSVGA800*600)とするとか色数を落とすなどが考えられる。フレームレートに関してはビジネスプレゼンテーションのシーンでは、NTSCの通常フレームレートである30フレーム/S(60フィールド/S)以下でも十分問題はないので、SVGA800*600,24ビットカラー、30フレームで345bpsととなり理論上はSVGAであればストリーム転送が可能である。この場合には画像圧縮や差分データ転送等を一切行わないので、プロジェクタ側の回路は非常にシンプルでよいため、低価格のシステムを構築可能である。
【0079】
また、その他の対応手段としては、インターネットのストリーミング技術などを応用し、データ圧縮技術や、差分データ転送、バッファリング技術等を組み合わせて転送を行えば、より転送レートを上げることが可能である。しかしながら、プロジェクタ側の構成が複雑となるため、消費電力とコストの増大を招いてしまう。前述したように、どの方式を選択するかはケースバイケースである。
【0080】
図11はPC200側の動作を概念的に示した説明図である。画像加工手段213はUSBドライバー205を経由して初期設定パラメータを受信して設定する。また、全画面キャプチャ手段211又は差分データ検出手段212により表示画面の変更が認識されると、画像加工手段213はUSBドライバー203を経由して画面データをプロジェクタ100側に送信する。また、メニュー画面を表示し、ユーザーの操作によりパラメータが変更されると、画像加工手段213に対して画像加工を要求し、画像加工手段213はそのパラメータに応じて画像を加工してプロジェクタ100側に送信する。また、画像加工手段213は、映像パラメータ制御部230のパラメータが変更されると、そのパラメータをプロジェクタ100側に送信させる。
【0081】
図12及び図13はPC200からプロジェクタ100側に画像データを送信する際の処理を示したフローチャートである。
(S11)PC200のスタートアップにはPJAプログラム(図においてはPJAと記述してある)が設定されているものとする。PC200の電源がオンすると、スタートアップに設定してあったPJAが起動し、以下常住することになる。
(S12)ここでは例えばプロジェクタ100を使用してプレゼンテーションを行うものとし、プレゼンテーションのためのソフトウェアを起動させる。
(S13)操作者により指定されたファイルを開いてプレゼンテーションを開始する。
(S14)PC200とプロジェクタ100とをUSBケーブル150で接続する。プロジェクタ100の後述の処理(S34)によりデータラインの電位が変化し、その電位変化を検出することにより、USBケーブル150の接続を認識する。
(S15)PC200はUSBドライバーをロードするとともに、USBを初期設定する。
【0082】
(S16)PC200は上記の処理によりUSBの設定が完了する。
(S17)USBの設定が完了すると、PJAプログラム210はUSBの接続完了を認識し、以下の処理を行う。
(S18)PJAプログラム210は、プロジェクタ100に対して初期パラメータの送信要求を行い、プロジェクタ100からパラメータメモリ108に保存されている初期パラメータ(図10参照)が送信されてくると、それを読み込んで、PC内の設定領域に保存する。この処理はパラメータ送受信手段216によってUSBドライバー205を経由して行われる。
(S19)PJAプログラム210は、プロジェクタ100に対して電源オンコマンドを送信させる。この処理はデータ送受信手段214によってUSBドライバー205を経由して行われる。なお、プロジェクタ100はこの電源オンコマンドを受信すると、光源102に駆動電圧を印加して発光させる(後述の処理(S38)参照)。
【0083】
(S20)PJAプログラム210は、PC画面の画面データををキャプチャしてPC内に保存する。この処理は全画面キャプチャ手段211によって行われる。
(S21)PJAプログラム210は、画面データをパラメータに基づいて加工(例えばリサイズ等)する。この処理は画像加工手段213によって行なわれる。上述のように、画像加工手段213には、映像制御部220、映像パラメータ制御部230及び映像調整部240が含まれており、それぞれに対して設定されているパラメータに基づいた演算処理を行って画面データを加工する。即ち、PC200側においてプロジェクタ100側の最適な画像データを生成する。
(S22)PJAプログラム210は、加工された画面データをUSBドライバー205経由でプロジェクタ100側に送信する。この送信処理は、データ送受信手段214により行われる。
【0084】
(S23)PJAプログラム210は、送信対象となっている次画面があるかどうかを判断し、或いは画像データが変化したかどうかを仮想グラフィックコントローラ206を経由して差分データ検出手段が検出する。次画面が無い場合又は画像データが変化しない場合にはここで終了することになる。
(S24)PJAプログラム210は、次画面があるという判断をした場合又は画像データが変化した場合には、差分データ検出手段212が現画面データと次画面データとの差分を検出する。この差分データの処理については、上記の処理(S21)に戻って、最終の画面まで上記の処理(S21)〜(S24)を繰り返すことになる。
【0085】
図14はプロジェクタ100側の動作を概念的に示した説明図である。プロジェクタ100のCPU107はPC200側からパラメータの送信要求があると、パラメータメモリ108から読み出してPC200側にUSBコントローラ112を経由して送信する。また、PC200側から画像データをコントローラ112を経由して受信すると、LCD駆動回路113は画像合成をして画像データを表示デバイス(LCD)101に送信して表示させる。
【0086】
図15はプロジェクタ100がPC200から画像データを受信して表示する際の処理を示したフローチャートである。
(S31)PC200とプロジェクタ100とがUSBケーブル150で接続されると、USBコントローラ112はUSB接続を認識する。
(S32)PC200とプロジェクタ100とがUSBケーブル150で接続されると、DC/DCコンバータ120にUSBケーブル150からの5V電圧Vccが電圧が入力電圧として供給され、DC/DCコンバータ120は、VDD、VLCD、VLを生成して、CPU107、メモリ108,109、LCDコントローラ113及び表示デバイス101に駆動電圧を供給する。
(S33)プロジェクタ100の内部を初期設定する。
(S34)USBケーブル150のデータライン(+D)のプルアップ抵抗(図示せず)を接続する。このプルアップ抵抗の接続によりデータラインの電位が変化し、PC200側ではUSBケーブル150の接続を認識することになる。
【0087】
(S35)USBコントローラは初期設定をする。
(S36)CPU107は、USBコントローラ112を介してPC200からパラメータの送信依頼を受信すると、パラメータメモリ108の初期パラメータを読み出す。
(S37)CPU107は、そのパラメータをUSBコントローラ112を介してPC200側に送信する。PC200はそのパラメータを受信すると、上述のように所定領域に保存することとなる。
(S38)CPU107は、PC200からの電源オンコマンドを受信すると、トランジスタ102c(図6参照)をオンにしてLED112bに駆動電圧を印加して点灯させる。
【0088】
(S39)USBコントローラ112は、PC200からの画像データを受信してバス114を介してLCD駆動回路113に出力する。
(S40)LCD駆動回路113はその画像データを入力すると復号する。
【0089】
(S41)LCD駆動回路113は、その画像データをフレームメモリ105に描画していく。このとき、画像データが差分データである場合には、差分データがもっている座標データにより特定される領域に上書きする。
(S42)LCD駆動回路113は、表示デバイス(LCD)101のタイミングに合わせて、フレームメモリ105に描画された画像の画像データを表示デバイス(LCD)101に送信する。
(S43)表示デバイス(LCD)101のドライバー101aは画像データを受信すると、その液晶の透過率を制御して画像を生成する。表示デバイス(LCD)101に形成された画像は投射レンズ103により拡大照射してスクリーン122上に拡大画像を表示される。なお、CPU107は、PC200からの調光制御信号をUSBコントローラ112を介して受信すると、光源102のトランジスタ102Cのベース電流を制御し、LED102bの駆動電流を制御することで光源102の明るさを調整する。
【0090】
なお、以上の処理のうち、処理(S39)〜(S43)はPC200から画像データが送信されてくる間繰り返されることになる。
【0091】
図16はPC側でのパラメータの設定変更の処理過程を示したフローチャートである。
(S51)PC200を操作してメニュー表示の指示を与えると、PC200の表示画面にメニュー画面が表示される。このとき、メニュー画面はPC200にのみ表示され、プロジェクタ100側には表示されない。この処理はメニュー表示手段215により行われ、上述の図9はそのときの状態を示した説明図である。このメニュー画面には、台形ひずみ、リサイズ、色むら補正等のメニューが含まれる。
(S52)PC200を操作して例えば台形歪みのメニュー表示の指示を与えると、メニュー画面には台形歪み調整のためのメニュー表示欄215aが表示される。
(S53)そのメニュー表示欄215aの台形歪みボタンを操作して台形歪み調整値(パラメータ)が設定されると、PC200はその台形歪み調整値をPC内の設定領域に保存する。
【0092】
(S54)PC200の台形補正手段231は、歪み補正パラメータが設定されると、画像加工の要求を受けて、その歪み補正パラメータに基づいて画像データを加工した後に、その画像データをプロジェクタ100側に送信する。このときの送信処理はデータ送受信手段214により行われる。
(S55)PC200のパラメータ送受信手段216は、台形歪み補正パラメータをUSBドライバー205を介してプロジェクタ100側に送信する。プロジェクタ100のCPU107はUSBコントローラ112を介して歪み補正パラメータを受信すると、それをパラメータメモリ108の最新設定領域(図10参照)に保存する。
【0093】
なお、上記の説明は歪み補正パラメータの例であるが、他のパラメータにおいても同様になされる。
【0094】
以上のように本実施形態1においては、PC200側において画像加工手段213が従来のプロジェクタ側においてなされていた各種の画像加工処理を行うようにし、且つ、デジタル信号のままで(アナログ信号に変換しないで)プロジェクタ100側に送信するようにしたので、プロジェクタ100内の回路を大幅に簡素化することが可能になっており、プロジェクタ100側の負荷が軽くなったことで電池駆動も可能になっている。また、映像を加工するユーザーインターフェースをPC200側で統合的に設けたので、分かり易い操作体系を提供することが可能になっている。また、プロジェクタ100側の表示デバイス(LCD)の液晶に個別に対応したパラメータをプロジェクタ100からPC200側に読み込むようにしたので、プロジェクタ100に対応した適切な画像データを生成して送信することが可能になっている。また、コントロール系とデータ転送系を1つのシリアルバスで統一したことにより、コネクタ及びケーブルの太さを抑えることができ、とり回しが簡便になっている。
【0095】
実施形態2.
なお、上記の実施形態においては、PC200は1個のプロジェクタ100のパラメータを読み込む例について説明したが、PC200は個別のパラメータの設定テーブルを設けておいて、その設定をプロジェクタに対応した個別IDごとに読み込むようにしてもよい。このようにすることで、PC200は複数のプロジェクタ100を適宜コントロールすることができる。
【0096】
また、上記の実施形態においては、シリアルバスをUSBケーブルによって実現した例について説明したが、無線手段によって実現してもよい。
【0097】
また、上記の実施形態においては、PC200の表示画面に表示された画面をそのままプロジェクタ100側に表示させる例について説明したが、PC200で選択されたウインドウ又は画面の一部のみをプロジェクタ100側に送信して表示させるようにしてもよい。
【0098】
また、上記の実施形態においては、プロジェクタ100を使用してプレゼンテーションを行う例について説明したが、映画等の動画についても同様に適用される。
【0099】
また、上記の実施形態においては、PJAプログラムは仮想グラフイックコントローラを含んでいない場合について説明したが、仮想グラフイックコントローラを含めた構成にしてもよい。
【0100】
また、LCD駆動回路113にカーソルの画像データを保存するメモリを内蔵させて、PC200からはカーソルの位置データのみをプロジェクタ100に送信させて、LCD駆動回路113がその位置データとカーソルの画像データとに基づいてフレームメモリ105に画像を描画させるようにしてよい。このようにすることで、画像データの送信量を軽減させることができる。このことは、カーソルだけではなく、他の特定の形状についても同様に適用される。
【0101】
また、PC内の映像の種類、例えばプレゼンテーション用の映像、アニメーション、映画等の種類に応じた画像データの加工手段を用意しておいて、映像の種類に応じて加工手段を変えるようにしてもよい。このようにすることで、その映像に最適な画像データを得ることができる。また、映像の種類ごとの個別のパラメータを後から任意に設定できるようにしてもよい。
【0102】
【発明の効果】
以上のように本発明によれば、情報処理装置がプロジェクタの表示デバイスの仕様に対応した画像データを生成してプロジェクタに送信するようにし、プロジェクタ側での従来のような変換処理を不要にしたので、映像信号の劣化を防ぐことが可能になり、また、プロジェクタ側での処理の簡素化が図れることから消費電力の低減を図ることが可能になっている。
【図面の簡単な説明】
【図1】本発明の実施形態1に係るプロジェクタシステムの説明図である。
【図2】図1のプロジェクタの構成図である。
【図3】図2のLCD駆動回路(LCDC)の特定の機能を実現するための構成例を示した構成図である。
【図4】差分データのデータ構成を示した構成図である。
【図5】差分データを書き込み際の処理の説明図である。
【図6】図2の光源の回路図である。
【図7】図1のPCに搭載されるソフトウェアの構成図である。
【図8】図7の画像加工手段の詳細を示した構成図である。
【図9】PC側でパラメータを設定するためのメニュー画面の説明図である。
【図10】プロジェクタパラメータメモリに格納されたパラメータの説明図である。
【図11】PC側の動作を概念的に示した説明図である
【図12】PCからプロジェクタ側に画像データを送信する際の処理を示したフローチャート(その1)である。
【図13】PCからプロジェクタ側に画像データを送信する際の処理を示したフローチャート(その2)である。
【図14】プロジェクタ側の動作を概念的に示した説明図である。
【図15】プロジェクタがPCから画像データを受信して表示する際の処理を示したフローチャートである。
【図16】PC側でのパラメータの設定変更の処理過程を示したフローチャートである。
【符号の説明】
100 プロジェクタ
101 表示デバイス
101a ドライバー
102 光源
102a 抵抗
102b LED
102c トランジスタ
103 投射レンズ
105 フレームメモリ
108 パラメータメモリ
109 処理用メモリ
111 コネクタ
112 USBコントローラ
113 LCD駆動回路
114 バス
120 コンバータ
121 内蔵電池
122 スクリーン
131 差分データ格納メモリ
132 復号化手段
133 書き込み手段
150 USBケーブル
200 PC
203 アプリケーションプログラム
204 グラフィックドライバー
206 仮想グラフィックコントローラ
210 プロジェクタアプリケーションプログラム(PJAプログラム)
211 全画面キャプチャ手段
212 差分データ検出手段
213 画像加工手段
214 データ送受信手段
215 メニュー表示手段
215a メニュー表示欄
216 パラメータ送受信手段
220 映像制御部
230 映像パラメータ制御部
231 台形補正手段
232 リサイズ手段
233 ガンマ補正手段
234 色むら補正手段
240 映像調整部
250 調光制御手段
251 階調変更手段
252 グラフィックコントローラ
[0001]
BACKGROUND OF THE INVENTION
  The present invention relates to a personal computer (hereinafter referred to as PC) and a projector (projection type video equipment).Projector system withAbout.
[0002]
[Prior art]
A conventional projector system is configured by connecting a PC and a projector. Image data transmitted from the PC to the projector is composed of analog RGB signals. For this reason, digital data (presentation materials, video output of a built-in DVD player, etc.) held on the PC side is once converted into an analog signal and then output to the projector. On the projector side, the analog RGB signals are digitized by an A / D converter, and the resolution from the PC is converted to match the resolution of the projector (hereinafter referred to as resize processing), and then the light valve display device (LCD) The liquid crystal panel of the display device (LCD) is driven via the LCD driving circuit so as to meet the timing of the above. In the LCD driving circuit, gamma correction corresponding to the individual liquid crystal panel to be driven and correction values for luminance unevenness and color unevenness are provided in a look-up table (LUT) or the like to make individual adjustments. The final digital signal is converted by a D / A converter and converted to an analog signal that matches the specifications of the liquid crystal panel.
[0003]
[Problems to be solved by the invention]
The conventional projector system has the following problems.
(1) Video source that was originally a digital signal is converted to analog once on the PC side, then the analog signal is converted back to digital on the projector side, and the video source is converted back to analog after processing, so the image signal is converted. In this case, the image signal is deteriorated.
{Circle around (2)} Many circuits are required on the projector side, resulting in an increase in cost, space and power consumption.
(3) With the increase in power consumption, it is difficult to drive the battery.
(4) Sticking to images (video) requires a lot of user interfaces on the projector side, which makes operation difficult to understand.
(5) It is practically difficult to set parameters for each image (video).
(6) Generally, the analog RGB connector is large and the cable is thick.
[0004]
  The present invention has been made under such a background, and at least a projector system capable of preventing deterioration of a video signal and reducing power consumption of the projector.ProvideThe porpose is to do.
[0005]
[Means for Solving the Problems]
  A projector system according to the present invention includes a personal computer that supplies image data, and a projector that generates an image based on the image data supplied from the personal computer, and projects and displays the image on a screen.InThe projector isParameter storage means for storing video parameters for at least resizing, gamma correction, and uneven color correction, Transmitting the video parameter to the personal computer based on a transmission request from the personal computer,The personal computer requests the projector to transmit the video parameter and stores the video parameter captured from the projector, and performs image processing on the video source image data based on the video parameter,Image processing means for generating image data corresponding to the specifications of the display device of the projector, the image processing means for correcting the trapezoidal distortion according to the positional relationship between the projector and the projected screen Meansat leastIt is provided.
[0006]
  According to the present inventionProjector systemThe image processing means includes gamma correction means for correcting image data reflecting characteristic data including individual variations of the LCD constituting the display device of the projector, and color for correcting color unevenness of the image data. And unevenness correcting means.
[0007]
  According to the present inventionProjector systemThe image processing means generates a dimming signal for controlling the brightness of the light source of the projector corresponding to the brightness of the image data, and transmits the dimming signal to the projector to control the brightness of the light source. A light control unit and a gradation changing unit that changes the gradation of the image data based on the output of the light control unit.
[0008]
  According to the present inventionProjector systemThe image processing means includes a video adjusting unit for adjusting an image obtained by the projector.
[0037]
DETAILED DESCRIPTION OF THE INVENTION
Embodiment 1. FIG.
  FIG. 1 is an explanatory diagram of a projector system according to Embodiment 1 of the present invention. This projector system includes a projector 100 and a PC 200. In both cases, a USB cable 150 is connected to the USB connectors 111 and 261 provided on each of them, and the projector 100 and the PC 200 are connected via the USB cable 150.Yes.
[0038]
FIG. 2 is a configuration diagram of the projector 100 of FIG. The projector 100 includes a display device 101 (101R, 101G, 101B), a light source 102, and a projection lens 103 as an optical system. The projector 100 includes a USB connector 111, a USB controller 112, an LCD drive circuit 113, a bus 114, a frame memory 105 (105R, 105G, 105B), a CPU 107, a parameter memory 108, a memory 109, a DC / DC converter 120, and a built-in battery. 121 is provided.
[0039]
The display device 101 of the projector 100 uses an LCD (Liquid Crystal Display) (this LCD is called a light valve) or a DMD (Digital Micro Mirror Device, a registered trademark of Texas Instruments) which is a light modulation element. Etc. Any display device 101 may be used, but in the present embodiment, an example using an LCD will be described. Note that projectors using an LCD include a single-plate type (one using one liquid crystal panel) and a three-plate type (using three liquid crystal panels corresponding to R, G, and B). The plate type will be described.
[0040]
As the light source 102 of the projector 100, an ultra-high pressure mercury lamp, a halogen lamp, an LED, or the like is used. Here, an example using an LED will be described.
[0041]
Further, regarding the configuration of the optical system of the projector 100, a means for condensing and uniformizing the light source from the lamp, a means for separating the white light source from the lamp into R, G, and B by a dichroic mirror, a display device ( In general, there are prisms to be combined after passing through (LCD) 101 and projection lens groups for actually projecting after that. However, in this embodiment, those configurations are not directly related to the present invention, and thus are omitted. Only the projection lens 103 is shown.
[0042]
Next, details of a portion for driving the display device (LCD) 101 will be described. The USB controller 112 is connected to the USB connector 111 and controls data transfer with the PC 200 based on the USB standard. In the present invention, any means or protocol may be used as long as it is a means for connecting the PC 200 and the projector 100. However, considering the transfer rate, two types of USB 2.0 or IEEE 1394 are appropriate. Furthermore, USB 2.0, which is also highly versatile, is ideal at the present time due to the mounting rate of the PC 200 and the like. Therefore, the USB controller 112 of the present embodiment has USB 2.0 in mind.
[0043]
USB is a serial transfer interface standard called Universal Serial Bus. Its features include a transfer rate of 480 Mbps, power supply from the host to the target device (5 V, 500 mA), and insertion / removal while the power is on. Since the USB controller 112 is widely sold as a single unit or an IP core, the details thereof are omitted here, but the USB serial interface engine, USB transceiver, FIFO for high-speed data transmission, DMA, It consists of a control / status register group, an oscillation circuit, a pass-powered control block, and the like. The USB controller 112 in FIG. 2 is illustrated separately from the CPU 107, but in general, the CPU and USB are often integrated as a system LSI and realized as a single LSI. The present invention may have any configuration, but here, the separated state will be described.
[0044]
The CPU 107 controls the entire projector, controls the USB controller 112 and the LCD drive circuit (LCDC) 113, and controls the power supply. The CPU 107 is connected with a ROM (not shown) in which a program is stored and a memory 109 including a RAM for performing processing, either internally or externally. As a feature of the present embodiment, a parameter memory 108 is prepared so as to be connected to the CPU 107. The parameter memory 108 stores projector specific data. The parameter memory 108 is constituted by a flash memory or the like so that the value can be held even when the power is turned off. Note that the program memory, the parameter memory 108, and the processing memory 109 may be physically composed of one memory. However, here, it is assumed that the program memory (not shown) and the parameter memory 108 are composed of the same flash ROM, and the memory 109 is composed of DRAM.
[0045]
Next, the relationship between the LCD drive circuit (LCDC) 113 and the frame memory 105 will be described. The LCD driving circuit (LCDC) 113 can have various configurations depending on its function. Here, two examples will be described.
[0046]
(Example 1)
The data transferred from the PC 200 as the host via the USB controller 112 is sent to the frame memory 105 (LCDC) 113 by the LCD drive circuit (LCDC) 113.105R, 105G, 105B). This frame memory 105 (105R, 105G, 105B) Are stored for each color of R, G, B. Here, if the display device (LCD) 101 is SVGA, the number of pixels in one frame is 800 * 600. If the number of colors is 24-bit full color, it is composed of 24 frames with 800 * 600 as one frame. Here, 800 * 600 is used, but XGA (1024 * 768) or the like may of course be used. However, since this value is uniquely determined by the resolution of the display device (LCD) 101 to be mounted, it is data unique to the device. Such unique data is stored in the parameter memory 108 (see FIG. 10).
[0047]
Here, the data stored in the frame memory 105 is supplied to the display device (LCD) 101 (101R, 101G, 101B) corresponding to the three RGB colors as 8-bit RGB colors. This signal is actually divided into each color signal, and then passed through a D / A converter built in the LCD drive circuit (LCDC) 113 to the LCD driver 101a built in the display device (LCD) 101. Are output in the form of analog signals. The LCD drive circuit (LCDC) 113 generates a timing control signal corresponding to the mounted display device (LCD) 101, and synchronizes with the signal to send image data in the frame memory 105 to the LCD driver 101a. Output.
[0048]
(Example 2)
Next, an example in which some functions are added to the LCD driving circuit (LCDC) 113 will be described. For example, when the transfer rate of serial data to which the PC 200 and the projector 100 are connected is low, it is necessary to devise such as transmission of compressed data and transmission of difference data of previous screen data. Therefore, for example, a case where difference data is compressed and sent from the PC 200 will be described.
[0049]
FIG. 3 is a configuration diagram showing the configuration of the LCD drive circuit (LCDC) 113 in this case. The LCD driving circuit (LCDC) 113 includes a difference data storage memory 131, a decoding unit 132, and a writing unit 133. When the LCD drive circuit (LCDC) 113 receives the difference data, it stores it in the difference data storage memory 131. The difference data at this time is composed of coordinate data 131a and image data 131b of an area specified by the coordinate data 131a as shown in FIG. Decryption means 132 combines the difference data in difference data storage memory 131. The writing unit 133 overwrites the decoded difference data in the frame memory 105 based on the coordinate data 131a included in the combined data. Since the difference data is divided into a plurality of areas represented by quadrilaterals, by repeating this process for the number of difference data, for example, the difference data is displayed in the areas indicated by (1) to (4) in FIG. The current frame data is reproduced by writing. Here, the example in which the decoding unit 132 and the writing unit 133 are provided in the LCD driving circuit (LCDC) 113 has been described, but the CPU 107 may perform the processing. In this example 2, the configuration is slightly complicated, but there is an advantage that a moving image or the like can be distributed even if the transfer rate of the connection means is low.
[0050]
As for the power supply configuration of the projector 100, an AC power supply (100V in Japan) may be input as in a conventional projector, and a logic power supply, a liquid crystal drive power supply for driving the LCD, and a lamp power supply may be generated. Depending on the type of lamp, a special power supply control circuit may be required. For example, a lighting device is required to light a DC discharge lamp such as an ultra-high pressure. This is composed of a high voltage generation circuit, a ballast. However, with respect to this power supply portion, the present embodiment is devised as follows.
[0051]
First, a special lighting device is not required by using the light source 102 as an LED. Next, the main body power source is generated from the +5 V power source supplied via the USB cable 150 from the PC 200. That is, a DC / DC converter 120 is provided and connected to the power supply line (+5 V) of the USB cable 150 via the USB connector 111. When the USB cable 150 is connected between the projector 100 and the PC 200, a voltage VCC of +5 V is supplied from the PC 200 to the DC / DC converter 120. The DC / DC converter 120 converts the input voltage to generate VDD and VLCD drive voltages. The VDD is supplied to the LCD drive circuit (LCDC) 113, the CPU 107, the parameter memory 108, the memory 109, etc. The VLCD is supplied to an LCD drive circuit (LCDC) 113 and a display device (LCD) 101. The USB controller 112 is connected to the power line (+ 5V) of the USB cable 150, and the + 5V voltage VCC from the USB cable 150 is supplied as a drive voltage.
[0052]
The drive voltage of the light source 102 may use the power line (+ 5V) of the USB cable 150, but the USB + 5V supply line has a limit of 500 mA, which affects the basic performance of the projector 200. The drive voltage is supplied from the built-in battery 121 only to the light source (LED) 102. With such a configuration, the projector 100 can be used even in the absence of AC 100V.
[0053]
FIG. 6 is a circuit diagram of the light source 102. The light source 102 is configured by connecting a resistor 102a, an LED 102b, and a transistor 102c in series, and is supplied with a voltage VBatt from a built-in battery 121. The transistor 102c is controlled by the CPU 107, and the on / off of the LED 112b and the drive current are controlled.
[0054]
  Next, details of the PC 200 will be described. In this embodiment, the PC 100 functions as a host that supplies image data to be supplied to the LCD drive circuit (LCDC) 113 via the USB cable 150.To do. ThisHere, as a typical example, a WINDOWS (registered trademark) (hereinafter the same) PC will be described.
[0055]
The PC 200 is generally composed of the following devices as a hardware configuration. First, a CPU that performs main processing, a program memory, a processing memory, an IO controller that controls a keyboard, a DVD device, and the like, and an external storage device such as an HDD, FDD, or CD-ROM (of course, a DVD may be included). , A built-in display, a graphic controller for outputting video data to the outside via analog RGB, a USB controller, a power supply circuit, and the like. The hardware configuration itself is a general one.
[0056]
FIG. 7 is a configuration diagram of software installed in the PC 200. The configuration of the hardware 200a is the same as the conventional one as described above, but the software 200b has the following characteristics. BIOS (basic input / output system) 201 closely related to hardware, system management, and basic user operation environment are provided as base software that is stored in an external storage device and deployed to the internal memory. There is an OS (operating system) 202 that is software to be executed, and an application program 203 that provides various applications on the OS 202. In addition, there are also device drivers (not shown) for managing peripheral devices and the like. To explain only the display unit, the graphic board mounted on the PC 200 provides a graphic driver 204 corresponding to the hardware. Since the BIOS 201 mainly manages devices mounted on the main board, only a simple function (a function for displaying a setting screen) before the OS 202 is installed is provided in terms of display.
[0057]
For the USB (USB cable 150) for connecting the projector 100 and the PC 200, a USB driver 205 or the like corresponding to each USB function is installed. In the present embodiment, since unique data processing is performed between the projector 100 and the PC 200, the USB driver 205 must be installed first. However, this is not the case when the OS is prepared in advance.
[0058]
In the present embodiment, a virtual graphic controller 206 is provided between the graphic driver 204 and the OS 202 to recognize full screen operation. At the same time, it exists as one application program on the OS 202. In this state, for example, when a presentation is made by starting up a power point (POWERPOINT, Microsoft Corporation) on the PC 200, the screen data is automatically processed into optimum data, and the LCD drive circuit of the projector 100 is connected via USB. (LCDC) 113 is input.
[0059]
The virtual graphic controller 206 will be described in more detail. When the OS 202 receives a screen change request from the application program 203, the OS 202 requests the graphic controller 252 to rewrite. The virtual graphic controller 206 that virtually inserts the command of the OS 202 receives it, and passes control to the original graphic driver 204 while grasping the screen state. Such a function is a so-called hook. This function is for discriminating screen rewriting, and is not necessary if full screen capture is repeated. When the transfer rate is low, it is necessary when differential data is detected and transmitted.
[0060]
In this embodiment, a projector control application program (hereinafter referred to as a PJA program) 210 is installed. This is one of the application programs. The user must explicitly launch this PJA program. However, if you put it in startup, it goes without saying that it will start up when the power is turned on. When the PJA program 210 is launched, the function of the virtual graphic controller 206 is also effective. Both programs are used simultaneously. Incidentally, the USB driver 205 may be detected as an unknown device when the USB cable 150 is connected and may be installed at that time, or may be installed in advance and recognized by the corresponding driver when the USB cable 150 is connected. And may be valid. It should be noted that USB is not synchronized with the PJA program (it is synchronized with the USB connection state).
[0061]
Since the PJA program 210 can exist as an application program on the PC 200, various functions can be realized. For example, the selected screen is extracted and displayed, the screen data is corrected and displayed according to the DVD source, and various image parameters are automatically changed and displayed according to the video source. Furthermore, in recent years connected to a network, various applications such as connecting to a network, receiving a video source and an image parameter associated with the video source, and displaying them by streaming can be considered. By switching the connection from a specific image data output to a general-purpose data transfer line, it is possible to develop various applications that are all digital and not restricted by the function of the built-in graphic board, as well as reliable transfer of image data.
[0062]
However, in this embodiment, the above-described additional effects are omitted as a basic configuration, and how the function of a conventional projector is incorporated in the PC 200 will be mainly described.
[0063]
In this embodiment, the PJA program 210 includes a full screen capture unit 211 that acquires full screen data, a difference data detection unit 212 that detects previous screen data and difference data, an image processing unit 213 that processes captured data and the like. Data transmission / reception means 214 for transmitting final image data to the projector 100 via the USB driver 205, and menu display means for displaying a menu screen as a user interface for setting the image processing means according to the user's preference. Each function of 215 and parameter transmission / reception means 216 is realized.
[0064]
FIG. 8 is a block diagram showing details of the image processing means 213 in FIG. The image processing unit 213 includes a video control unit 220, a video parameter control unit 230, a video adjustment unit 240, a dimming control unit 250, and a gradation changing unit 251. The video control unit 220 performs each process of freeze (FREEZE) 221, mute (MUTE) 222, zoom (ZOOM) 223, and effect (EFFECT) 224. The video parameter control unit 230 includes a keystone correction unit 231, a resizing unit 232, a gamma (γ) correction unit 233, and a color unevenness correction unit 234, and performs various processes. The image adjustment unit 240 performs adjustment processing for sharpness, brightness, contrast, color density, and hue. The dimming control means 250 is for adjusting the brightness of the light source 102 of the projector 100, and the gradation changing means 251 is for changing the gradation of the image data in accordance with the brightness of the light source 102. Note that the initial values of the parameters of each part of the video parameter control unit 230 are stored in the parameter memory 108 of the projector 100, and the parameters are taken in at startup.
[0065]
Next, the video control unit 220 will be described. “Freeze” by the video control unit 220 is a process of temporarily stopping a moving video. In the present embodiment, the video data transfer of the PC 200 may be stopped, or the same data may be transmitted (or transmitted without difference data). “Mute” is a process of temporarily erasing video and audio. For video, it can be realized by transmitting data corresponding to erase. That is, the data corresponding to erasure may be all black, all white, or a specific pattern. Since a specific pattern is realized on the PC side, it is more effective because a lot of image data can be replaced, unlike a projector having a limited memory capacity. Since the voice is not included in the purpose of the present embodiment, the explanation is omitted. However, the voice is not provided on the projector side because it only needs to be handled by a speaker on the PC side. However, it goes without saying that the projector may be provided separately. “Zoom” is to enlarge or scroll the screen, and this can be easily realized by processing image data. “Effect” is a function for decorating video data such as a cursor and a marker. This can be realized by processing the image data as described above.
[0066]
Next, the video parameter control unit 230 will be described. The gamma correction unit 233 is used to correct the nonlinear input / output property (gamma characteristic) of the liquid crystal panel, and linear gradation of each color signal of red (R), green (G), and blue (B). The input / output characteristics are corrected by a look-up table (LUT) showing the correspondence between the values and the non-linear gradation values for correcting the gamma characteristics. If the look-up table (LUT) is a full-color 24-bit color, each color has 8 bits, and 8 bits are used as an address to output 8-bit data, so 256 * 8 * 3 = 6144 bits (bits). It becomes the data of.
[0067]
When this size is a problem, there are the following processing methods. First, if it is transferred to the PC side in advance, there is no need to change, so no subsequent transfer is performed. Second, the data is compressed by appropriately thinning out the data. In the first place, the gamma correction is made appropriate by correcting the TV characteristic indicated by the relationship between the applied voltage V and the transmittance T of the display device (LCD) that is not linear. In particular, in the vicinity of a black level having a low gradation value, the change in the transmittance T with respect to the change in the applied voltage V is small, so the change in gradation is small and the resolution is lowered. In other words, there is a region in which the gradation is not significantly impaired because there is no uniformity in the characteristics. Therefore, the data in this area may be thinned out.
[0068]
The color unevenness correcting means 234 is for correcting the color unevenness of the image data. Color unevenness correction data for correcting the image data is obtained as follows. By projecting and displaying a uniform halftone image, typically a gray uniform image, and shooting the displayed projection image with a video camera, or measuring the brightness of the projected image with a luminance meter The distribution of color unevenness in the projected image is measured. Next, appropriate color unevenness correction data is obtained by repeatedly adjusting the image data of the pixel in which color unevenness occurs and measuring the color unevenness occurring in the projected image of the adjusted image data. In other words, the correction data has different values for each projector, and this depends on the characteristics of the individual device. Thus, it is desirable to store correction data unique to a device in the device. Therefore, in the present embodiment, color unevenness correction data is stored in the parameter memory 108 of the projector 100.
[0069]
Next, the function of the resizing means 232 will be described. Resizing means converting the screen resolution. In the present embodiment, the display screen of the PC 200 is converted in accordance with the resolution of the display device (LCD) 101 of the projector 100. For example, if the resolution on the PC side is 640 * 480 and the resolution of the projector is 1024 * 768, 640 * 480 is enlarged to 1024 * 768 and displayed. Since the resolution conversion itself is a known technique, its details are omitted (see, for example, Japanese Patent Laid-Open No. 9-114443). Usually, the resolution matching the resolution of the display device (LCD) 101 is stored in the initial data storage area of the parameter memory 108 (see FIG. 10 described later). When the PC 200 reads this resolution, the resolution of the display device (LCD) 101 of the projector is grasped.
[0070]
Incidentally, there is a case where it is desired to invalidate the resolution conversion by the resizing means 232 described above. In such a case, the user can set the resolution, and the set resolution is written from the PC 200 side to the latest setting area (see FIG. 10) of the parameter memory 108 on the projector 100 side. In this way, even if the projector-side user is switched and the projector 100 is connected to a different PC 200, the set value continues as long as the projector-side power is on. This latest setting value may be retained when the power is turned off, but it is usually used at the initial setting, so it is desirable to clear it when the power is turned on or when the power is turned off. .
[0071]
Next, the function of the trapezoid correction unit 231 will be described. The concept is the same as that of the resize unit 232 described above. Since the keystone correction information depends on the installation form of the projector, the normal initial setting is “do not perform keystone correction”. The trapezoid generated by the installation state of the projector on the PC side is corrected by processing the image. Since the trapezoid correction process itself is a known technique, its details are omitted (see, for example, Japanese Patent Laid-Open No. 11-305715). The reason why the keystone correction information is entered in the parameter memory 108 of the projector 100 is that the case where the user changes is taken into consideration. Even if the user changes and the PC 100 is replaced, the relative positional relationship between the projector 100 and the screen 122 usually does not change. By storing the keystone correction parameters on the projector 100 side, it is not necessary to perform keystone correction each time the user changes. It is also possible to automatically correct the trapezoid by installing a tilt sensor or azimuth sensor. In this case, the projector 100 is equipped with the sensor and the correction is performed by reading the value on the PC 200 side (PC On the side, processing the image is the correction).
[0072]
The dimming control means 250 detects a luminance level (for example, an average value) of the image data, generates a dimming control signal for adjusting the brightness of the light source 102 of the projector 100 according to the level, and sends it to the projector 100 side. Send it. For example, when the luminance level is 70%, the brightness of the light source 102 is set to 70%. The gradation changing unit 251 changes the gradation of the image data according to the luminance level. For example, when the luminance level of a certain pixel is 70%, the gradation level of the corresponding pixel is changed to 100%. In this case, when the luminance level of the pixel is 70 to 100%, the gradation is set to 100% in all cases. In this way, by controlling the brightness of the light source 102 of the projector 100 according to the luminance level of the pixel and changing the gradation of the image data, an image that is easy to see on the projector 100 side can be obtained.
[0073]
FIG. 9 is an explanatory diagram of a menu screen for setting parameters of the video control unit 220, the video parameter control unit 230, the video adjustment unit 240, and the dimming control means 250. A menu display field 215a as shown in the figure is displayed on the display screen of the PC 200. This menu display field 215a is displayed by the menu display means 215, and various parameters are taken in by operating the menu display field 215a.
[0074]
FIG. 10 is an explanatory diagram of parameters stored in the parameter memory 108 of the projector 100. For the parameters of gamma correction and color unevenness correction, look-up table (LUT) values and correction values are stored in the initial data storage area, respectively, and the corresponding data is not stored in the latest setting area (it is not necessary). . Regarding the resizing parameter, the resolution (1024 × 768) of the display device (LCD) 101 is stored in the initial data storage area, and the latest data is stored in the latest setting area. . This latest data is set on the menu screen of FIG. 9, and is stored in the corresponding area transmitted to the projector 100 as described later. The trapezoid correction parameters are not stored in the initial data storage area (there is no initial data), and the latest data is stored in the latest setting area.
[0075]
Next, returning to FIG. 7, the parameter transmission / reception means 216 will be described. Some of the parameters of the video control unit 220 and the video adjustment unit 240 have nothing to do with the type or characteristics of the projector. Some are dependent. Therefore, it is necessary to store the parameters of the video parameter control unit 23 in the parameter memory 108 of the projector in advance and capture the parameters when the PC is started up. In addition, it is desirable that the latest parameters set on the menu display screen of FIG. For this reason, the parameter transmission / reception means 216 takes in the parameters in the parameter memory 108 of the projector via the USB driver 205 or transmits the parameters to the projector 100 via the USB driver 205 when set on the PC 200 side. I do.
[0076]
Next, data transfer between the PC 200 and the projector 100 will be described. Since this embodiment is not intended to improve the transfer between the PC and the projector, only the outline will be described. Data transfer is performed using the USB cable 150. In the physical layer, serial transfer is performed. A number of transfer methods are defined for USB, and there are, for example, a storage class (handled as a drive), a control class (knowing the status of a device), and the like. In this embodiment, the PJA program controls a plurality of the USB drivers, thereby transmitting / receiving data by knowing the state of the projector and transferring a large amount of data to the projector. Now, a simple example of data to be transferred.
[0077]
First, it is assumed that 480 Mbps transfer is performed according to the USB 2.0 standard. If the PC 200 side is XGA1024 * 768 and is full-color 24 bits, one frame of data is about 18.8 Mb. Since the projector 100 is normally displayed at 60 Frame / s, a transfer speed of about 1.1 Gbps is required. If the transfer rate is 480 Mbps, 26 frames / s is displayed by simple calculation. On the projector 100 side, the same frame is displayed about 2.29 times. Actually, the frame rate is somewhat reduced because of loss due to software processing at the time of USB transfer or due to USB peripheral circuit configuration on the projector side.
[0078]
As a method of coping with this problem, it is conceivable to reduce the resolution on the projector 100 side (for example, SVGA 800 * 600) or reduce the number of colors. With regard to the frame rate, there is no problem with the NTSC normal frame rate of 30 frames / S (60 fields / S) or less in the business presentation scene. Above is SVGA, stream transfer is possible. In this case, since image compression, difference data transfer, etc. are not performed at all, the circuit on the projector side may be very simple, and a low-cost system can be constructed.
[0079]
In addition, as another means for responding, it is possible to increase the transfer rate by applying Internet streaming technology or the like, and performing transfer by combining data compression technology, differential data transfer, buffering technology, and the like. However, since the configuration on the projector side is complicated, power consumption and cost are increased. As described above, which method to select is case by case.
[0080]
FIG. 11 is an explanatory diagram conceptually showing the operation on the PC 200 side. The image processing means 213 receives and sets initial setting parameters via the USB driver 205. When the change of the display screen is recognized by the full screen capture unit 211 or the difference data detection unit 212, the image processing unit 213 transmits the screen data to the projector 100 side via the USB driver 203. Further, when the menu screen is displayed and the parameter is changed by the user's operation, the image processing unit 213 is requested to perform image processing, and the image processing unit 213 processes the image according to the parameter, and the projector 100 side Send to. Further, when the parameter of the video parameter control unit 230 is changed, the image processing unit 213 transmits the parameter to the projector 100 side.
[0081]
FIG. 12 and FIG. 13 are flowcharts showing processing when image data is transmitted from the PC 200 to the projector 100 side.
(S11) It is assumed that a PJA program (denoted as PJA in the figure) is set in the startup of the PC 200. When the power source of the PC 200 is turned on, the PJA that has been set as the startup is started, and the permanent residence is made.
(S12) Here, for example, it is assumed that a presentation is performed using the projector 100, and software for the presentation is activated.
(S13) The file specified by the operator is opened and the presentation is started.
(S14) The PC 200 and the projector 100 are connected by the USB cable 150. The potential of the data line is changed by a process (S34) described later of the projector 100, and the connection of the USB cable 150 is recognized by detecting the change in the potential.
(S15) The PC 200 loads the USB driver and initializes the USB.
[0082]
(S16) The PC 200 completes the USB setting by the above processing.
(S17) When the USB setting is completed, the PJA program 210 recognizes the completion of the USB connection and performs the following processing.
(S18) The PJA program 210 requests the projector 100 to transmit an initial parameter. When the initial parameter (see FIG. 10) stored in the parameter memory 108 is transmitted from the projector 100, the PJA program 210 reads the initial parameter. , It is stored in the setting area in the PC. This process is performed by the parameter transmission / reception means 216 via the USB driver 205.
(S19) The PJA program 210 causes the projector 100 to transmit a power-on command. This process is performed by the data transmitting / receiving unit 214 via the USB driver 205. When the projector 100 receives the power-on command, the projector 100 applies a driving voltage to the light source 102 to emit light (see processing (S38) described later).
[0083]
(S20) The PJA program 210 captures the screen data of the PC screen and saves it in the PC. This process is performed by the full screen capture unit 211.
(S21) The PJA program 210 processes (eg, resizes) the screen data based on the parameters. This processing is performed by the image processing means 213. As described above, the image processing unit 213 includes the video control unit 220, the video parameter control unit 230, and the video adjustment unit 240, and performs arithmetic processing based on the parameters set for each. Process screen data. That is, optimal image data on the projector 100 side is generated on the PC 200 side.
(S22) The PJA program 210 transmits the processed screen data to the projector 100 via the USB driver 205. This transmission process is performed by the data transmission / reception means 214.
[0084]
(S23) The PJA program 210 determines whether there is a next screen to be transmitted, or the difference data detection means detects whether the image data has changed via the virtual graphic controller 206. If there is no next screen or if the image data does not change, the process ends here.
(S24) When the PJA program 210 determines that there is a next screen or the image data changes, the difference data detection unit 212 detects the difference between the current screen data and the next screen data. Regarding the processing of the difference data, the processing returns to the above processing (S21), and the above processing (S21) to (S24) is repeated until the final screen.
[0085]
FIG. 14 is an explanatory diagram conceptually showing the operation on the projector 100 side. When there is a parameter transmission request from the PC 200 side, the CPU 107 of the projector 100 reads it from the parameter memory 108 and transmits it to the PC 200 side via the USB controller 112. When image data is received from the PC 200 via the controller 112, the LCD drive circuit 113 performs image composition and transmits the image data to the display device (LCD) 101 for display.
[0086]
FIG. 15 is a flowchart showing processing when the projector 100 receives and displays image data from the PC 200.
(S31) When the PC 200 and the projector 100 are connected by the USB cable 150, the USB controller 112 recognizes the USB connection.
(S32) When the PC 200 and the projector 100 are connected by the USB cable 150, the 5V voltage Vcc from the USB cable 150 is supplied as an input voltage to the DC / DC converter 120, and the DC / DC converter 120 VLCD and VL are generated, and a drive voltage is supplied to the CPU 107, the memories 108 and 109, the LCD controller 113, and the display device 101.
(S33) The inside of the projector 100 is initialized.
(S34) A pull-up resistor (not shown) of the data line (+ D) of the USB cable 150 is connected. The connection of the pull-up resistor changes the potential of the data line, and the PC 200 recognizes the connection of the USB cable 150.
[0087]
(S35) The USB controller performs initial setting.
(S36) Upon receiving a parameter transmission request from the PC 200 via the USB controller 112, the CPU 107 reads an initial parameter in the parameter memory 108.
(S37) The CPU 107 transmits the parameters to the PC 200 side via the USB controller 112. When the PC 200 receives the parameter, it saves it in a predetermined area as described above.
(S38) Upon receiving the power-on command from the PC 200, the CPU 107 turns on the transistor 102c (see FIG. 6) and applies a drive voltage to the LED 112b to light it.
[0088]
(S39) The USB controller 112 receives the image data from the PC 200 and outputs it to the LCD drive circuit 113 via the bus 114.
(S40) The LCD drive circuit 113 receives the image data and decodes it.
[0089]
(S41) The LCD drive circuit 113 draws the image data in the frame memory 105. At this time, if the image data is difference data, the area specified by the coordinate data that the difference data has is overwritten.
(S42) The LCD drive circuit 113 transmits the image data of the image drawn in the frame memory 105 to the display device (LCD) 101 in accordance with the timing of the display device (LCD) 101.
(S43) Upon receiving the image data, the driver 101a of the display device (LCD) 101 generates an image by controlling the transmittance of the liquid crystal. The image formed on the display device (LCD) 101 is enlarged and irradiated by the projection lens 103, and the enlarged image is displayed on the screen 122. When the CPU 107 receives the dimming control signal from the PC 200 via the USB controller 112, the CPU 107 controls the base current of the transistor 102C of the light source 102 and adjusts the brightness of the light source 102 by controlling the driving current of the LED 102b. To do.
[0090]
Of the above processes, the processes (S39) to (S43) are repeated while image data is transmitted from the PC 200.
[0091]
FIG. 16 is a flowchart showing a process for changing parameter settings on the PC side.
(S51) When a menu display instruction is given by operating the PC 200, a menu screen is displayed on the display screen of the PC 200. At this time, the menu screen is displayed only on the PC 200 and is not displayed on the projector 100 side. This process is performed by the menu display means 215, and FIG. 9 described above is an explanatory diagram showing the state at that time. This menu screen includes menus such as trapezoidal distortion, resizing, and uneven color correction.
(S52) When the PC 200 is operated to give an instruction to display a trapezoidal distortion menu, for example, a menu display field 215a for keystone distortion adjustment is displayed on the menu screen.
(S53) When the trapezoidal distortion adjustment value (parameter) is set by operating the trapezoidal distortion button in the menu display field 215a, the PC 200 stores the trapezoidal distortion adjustment value in the setting area in the PC.
[0092]
(S54) When the distortion correction parameter is set, the trapezoidal correction unit 231 of the PC 200 receives a request for image processing, processes the image data based on the distortion correction parameter, and then transmits the image data to the projector 100 side. Send. The transmission process at this time is performed by the data transmission / reception means 214.
(S55) The parameter transmission / reception means 216 of the PC 200 transmits the trapezoidal distortion correction parameter to the projector 100 side via the USB driver 205. When the CPU 107 of the projector 100 receives the distortion correction parameter via the USB controller 112, it stores it in the latest setting area (see FIG. 10) of the parameter memory 108.
[0093]
Although the above description is an example of the distortion correction parameter, the same applies to other parameters.
[0094]
As described above, in the first embodiment, the image processing unit 213 performs various types of image processing on the PC 200 side, which has been performed on the conventional projector side, and remains a digital signal (not converted to an analog signal). Since the transmission is made to the projector 100 side, it is possible to greatly simplify the circuit in the projector 100, and the load on the projector 100 side is lightened, so that the battery can be driven. Yes. In addition, since a user interface for processing video is integrated on the PC 200 side, an easy-to-understand operation system can be provided. In addition, since the parameters individually corresponding to the liquid crystal of the display device (LCD) on the projector 100 side are read from the projector 100 to the PC 200 side, appropriate image data corresponding to the projector 100 can be generated and transmitted. It has become. Further, by unifying the control system and the data transfer system with one serial bus, the thickness of the connector and the cable can be suppressed, and the routing is simplified.
[0095]
Embodiment 2. FIG.
In the above embodiment, the PC 200 has described an example of reading the parameters of one projector 100. However, the PC 200 provides a setting table for individual parameters, and the setting is set for each individual ID corresponding to the projector. You may make it read in. By doing so, the PC 200 can appropriately control the plurality of projectors 100.
[0096]
In the above-described embodiment, the example in which the serial bus is realized by the USB cable has been described. However, the serial bus may be realized by wireless means.
[0097]
In the above-described embodiment, the example in which the screen displayed on the display screen of the PC 200 is displayed on the projector 100 side as it is has been described. However, only a part of the window or screen selected on the PC 200 is transmitted to the projector 100 side. You may make it display.
[0098]
In the above-described embodiment, an example in which a presentation is performed using the projector 100 has been described. However, the present invention is similarly applied to a moving image such as a movie.
[0099]
In the above embodiment, the PJA program does not include the virtual graphic controller. However, the PJA program may include the virtual graphic controller.
[0100]
Further, a memory for storing cursor image data is incorporated in the LCD drive circuit 113, and only the cursor position data is transmitted from the PC 200 to the projector 100, and the LCD drive circuit 113 transmits the position data, the cursor image data, and the like. The image may be drawn in the frame memory 105 based on the above. By doing in this way, the transmission amount of image data can be reduced. This applies not only to the cursor but also to other specific shapes.
[0101]
Also, image data processing means corresponding to the type of video in the PC, for example, video for presentation, animation, movie, etc., may be prepared, and the processing means may be changed according to the type of video. Good. In this way, it is possible to obtain image data that is optimal for the video. Also, individual parameters for each video type may be arbitrarily set later.
[0102]
【The invention's effect】
As described above, according to the present invention, the information processing apparatus generates image data corresponding to the specifications of the display device of the projector and transmits it to the projector, eliminating the need for conventional conversion processing on the projector side. Therefore, it is possible to prevent the deterioration of the video signal, and it is possible to reduce the power consumption because the processing on the projector side can be simplified.
[Brief description of the drawings]
FIG. 1 is an explanatory diagram of a projector system according to a first embodiment of the invention.
FIG. 2 is a configuration diagram of the projector of FIG.
3 is a configuration diagram showing a configuration example for realizing a specific function of the LCD drive circuit (LCDC) of FIG. 2; FIG.
FIG. 4 is a configuration diagram showing a data configuration of difference data.
FIG. 5 is an explanatory diagram of processing when differential data is written.
6 is a circuit diagram of the light source of FIG. 2. FIG.
7 is a configuration diagram of software installed in the PC of FIG. 1;
8 is a configuration diagram showing details of the image processing means of FIG. 7;
FIG. 9 is an explanatory diagram of a menu screen for setting parameters on the PC side.
FIG. 10 is an explanatory diagram of parameters stored in a projector parameter memory.
FIG. 11 is an explanatory diagram conceptually showing the operation on the PC side.
FIG. 12 is a flowchart (part 1) illustrating a process when image data is transmitted from the PC to the projector side.
FIG. 13 is a flowchart (part 2) illustrating a process when image data is transmitted from the PC to the projector side.
FIG. 14 is an explanatory diagram conceptually showing the operation on the projector side.
FIG. 15 is a flowchart showing processing when the projector receives and displays image data from a PC.
FIG. 16 is a flowchart showing a process of parameter setting change on the PC side.
[Explanation of symbols]
100 projector
101 Display device
101a Driver
102 Light source
102a resistance
102b LED
102c transistor
103 Projection lens
105 frame memory
108 Parameter memory
109 Processing memory
111 connector
112 USB controller
113 LCD drive circuit
114 bus
120 converter
121 Built-in battery
122 screen
131 Differential data storage memory
132 Decryption means
133 Writing means
150 USB cable
200 PC
203 Application program
204 Graphic driver
206 Virtual graphic controller
210 Projector application program (PJA program)
211 Full screen capture means
212 Differential data detection means
213 Image processing means
214 Data transmission / reception means
215 Menu display means
215a Menu display field
216 Parameter transmission / reception means
220 Video controller
230 Video Parameter Control Unit
231 Keystone correction means
232 Resizing means
233 Gamma correction means
234 Color unevenness correction means
240 Image adjustment unit
250 Light control means
251 Gradation changing means
252 Graphic controller

Claims (4)

画像データを供給するパーソナルコンピュータと
前記パーソナルコンピュータから供給された画像データに基づいて画像を生成してスクリーンに投射して表示させるプロジェクタと
を備えたプロジェクタシステムにおいて、
前記プロジェクタは、少なくともリサイズ、ガンマ補正及び色むら補正のための映像パラメータが保存されるパラメータ記憶手段を備え、前記パーソナルコンピュータからの送信要求に基づいて前記映像パラメータを前記パーソナルコンピュータに送信し、
前記パーソナルコンピュータは、
前記プロジェクタに前記映像パラメータの送信を要求して前記プロジェクタから取り込んだ前記映像パラメータを保存する記憶手段と、
前記映像パラメータに基づいて映像ソースの画像データに画像処理を施し、前記プロジェクタの表示デバイスの仕様に対応した画像データを生成する画像加工手段を備え、
前記画像加工手段は、
前記プロジェクタと投射されるスクリーンとの位置関係に応じた台形歪みを補正するための台形補正手段を少なくとも備えたことを特徴とするプロジェクタシステム。
A personal computer for supplying image data;
In a projector system comprising a projector that generates an image based on image data supplied from the personal computer and projects and displays the image on a screen .
The projector includes parameter storage means for storing video parameters for at least resizing, gamma correction, and uneven color correction, and transmits the video parameters to the personal computer based on a transmission request from the personal computer.
The personal computer is
Storage means for requesting the projector to transmit the video parameters and storing the video parameters captured from the projector;
Image processing means for performing image processing on image data of a video source based on the video parameters, and generating image data corresponding to the specifications of the display device of the projector,
The image processing means includes
A projector system comprising at least trapezoid correction means for correcting trapezoidal distortion corresponding to a positional relationship between the projector and a projected screen .
前記画像加工手段は、
前記プロジェクタの表示デバイスを構成するLDの個体ばらつき等を含んだ特性データを反映して画像データを補正するガンマ補正手段と、
前記画像データの色むらを補正する色むら補正手段と
を備えたことを特徴とする請求項1記載のプロジェクタシステム。
The image processing means includes
Gamma correction means for correcting image data reflecting characteristic data including individual variations of L CD constituting the display device of the projector;
The projector system according to claim 1, further comprising color unevenness correcting means for correcting color unevenness of the image data.
前記画像加工手段は、
画像データの明るさに対応してプロジェクタの光源の明るさを制御するための調光信号を生成して、前記プロジェクタに送信させて当該光源の明るさを制御させる調光制御手段と、
前記調光制御手段の出力に基づいて前記画像データの階調を変更する階調変更手段と
を備えたことを特徴とする請求項1又は2記載のプロジェクタシステム。
The image processing means includes
A dimming control means for generating a dimming signal for controlling the brightness of the light source of the projector corresponding to the brightness of the image data and transmitting the signal to the projector to control the brightness of the light source;
The projector system according to claim 1, further comprising a gradation changing unit that changes a gradation of the image data based on an output of the light control unit .
前記画像加工手段は、
プロジェクタにより得られる画像を調整するための映像調整部を備えたことを特徴とする請求項1〜3の何れかに記載のプロジェクタシステム。
The image processing means includes
The projector system according to claim 1, further comprising a video adjusting unit for adjusting an image obtained by the projector.
JP2002229069A 2002-08-06 2002-08-06 Projector system Expired - Fee Related JP4048870B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002229069A JP4048870B2 (en) 2002-08-06 2002-08-06 Projector system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002229069A JP4048870B2 (en) 2002-08-06 2002-08-06 Projector system

Publications (3)

Publication Number Publication Date
JP2004069996A JP2004069996A (en) 2004-03-04
JP2004069996A5 JP2004069996A5 (en) 2005-09-02
JP4048870B2 true JP4048870B2 (en) 2008-02-20

Family

ID=32015596

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002229069A Expired - Fee Related JP4048870B2 (en) 2002-08-06 2002-08-06 Projector system

Country Status (1)

Country Link
JP (1) JP4048870B2 (en)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4142024B2 (en) * 2005-03-07 2008-08-27 セイコーエプソン株式会社 Program for causing computer to execute display system and data transfer method
JP2007072130A (en) 2005-09-06 2007-03-22 Seiko Epson Corp Image display system, image display device, image data output device, image processing program, and recording medium with this image processing program recorded
JP4872282B2 (en) * 2005-09-08 2012-02-08 セイコーエプソン株式会社 Image display system, image display method, image display program, recording medium, data processing device, image display device
JP5087830B2 (en) 2005-09-09 2012-12-05 セイコーエプソン株式会社 Projection system
JP4882320B2 (en) * 2005-09-09 2012-02-22 セイコーエプソン株式会社 Projection system, information processing apparatus, change image data generation method, change image data generation program, and recording medium on which this program is recorded
JP4375313B2 (en) 2005-09-16 2009-12-02 セイコーエプソン株式会社 Image / audio output system, image / audio data output apparatus, audio processing program, and recording medium
JP4923863B2 (en) * 2005-10-07 2012-04-25 セイコーエプソン株式会社 Image display system, image display apparatus, and image correction processing program
JP2007163725A (en) 2005-12-13 2007-06-28 Seiko Epson Corp Image display system, image display method, information processor, image display device, control program, and recording medium
JP4835160B2 (en) 2006-01-10 2011-12-14 セイコーエプソン株式会社 projector
JP2007206644A (en) * 2006-02-06 2007-08-16 Seiko Epson Corp Image display system, image display method, image display program, recording medium, data processor, and image display device
JP4635892B2 (en) 2006-02-09 2011-02-23 セイコーエプソン株式会社 Projection system, projector, image processing program, and recording medium on which image processing program is recorded
JP4876610B2 (en) 2006-02-14 2012-02-15 セイコーエプソン株式会社 Image display system, image display method, image display program, recording medium, data processing apparatus
JP4635898B2 (en) 2006-02-17 2011-02-23 セイコーエプソン株式会社 Projection system, image processing apparatus, image processing method, image processing program, and recording medium on which image processing program is recorded
JP4650318B2 (en) * 2006-03-27 2011-03-16 セイコーエプソン株式会社 Communication between image supply device and image display device
JP2008009253A (en) * 2006-06-30 2008-01-17 Seiko Epson Corp Image display system, image supply device, and image display device
JP4816569B2 (en) * 2006-07-06 2011-11-16 セイコーエプソン株式会社 Image display system
JP4816563B2 (en) 2006-07-06 2011-11-16 セイコーエプソン株式会社 Image display system
JP4238901B2 (en) 2006-08-17 2009-03-18 セイコーエプソン株式会社 Projection system, information processing apparatus, information processing program, recording medium thereof, projector, program thereof, and recording medium thereof
JP2008058574A (en) 2006-08-31 2008-03-13 Seiko Epson Corp Image display system and image display device
JP4258540B2 (en) 2006-09-01 2009-04-30 セイコーエプソン株式会社 Information processing apparatus, information processing program, and recording medium thereof
JP2008134675A (en) * 2006-11-27 2008-06-12 Seiko Epson Corp Computer, projector system, and data communication system
JP5309667B2 (en) * 2008-04-08 2013-10-09 セイコーエプソン株式会社 Image display system and image display apparatus
JP4518181B2 (en) * 2008-04-17 2010-08-04 セイコーエプソン株式会社 Image transmission apparatus, display system, image transmission program, and recording medium
JP2011158915A (en) * 2011-03-14 2011-08-18 Seiko Epson Corp Image display system, image display device, method of controlling the image display device, and method of displaying image by the image display system
JP5961945B2 (en) * 2011-08-18 2016-08-03 株式会社リコー Image processing apparatus, projector and projector system having the image processing apparatus, image processing method, program thereof, and recording medium recording the program
JP5849522B2 (en) * 2011-08-18 2016-01-27 株式会社リコー Image processing apparatus, projector, projector system, image processing method, program thereof, and recording medium recording the program
JP2013167881A (en) * 2013-03-18 2013-08-29 Seiko Epson Corp Image display unit and control method of image display unit
JP2013164598A (en) * 2013-03-18 2013-08-22 Seiko Epson Corp Image display unit
JP6759813B2 (en) * 2016-07-29 2020-09-23 株式会社Jvcケンウッド Processing equipment, display system, display method, and program

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0566501A (en) * 1991-09-09 1993-03-19 Toshiba Corp Projection type liquid crystal display device
JPH11296152A (en) * 1998-04-07 1999-10-29 Oki Electric Ind Co Ltd Generating method of compensation picture supplied to video projecting device and recording medium of program for its method
JP2000278714A (en) * 1999-03-23 2000-10-06 Minolta Co Ltd Stereoscopic picture display method, stereoscopic picture display device, computer-readable recording medium storing stereoscopic picture display data and method for generating stereoscopic picture display data
JP2001067051A (en) * 1999-08-31 2001-03-16 Seiko Epson Corp Image display device and its control method
JP4089106B2 (en) * 1999-10-25 2008-05-28 ソニー株式会社 Projection display device, projection display system
EP1980996A1 (en) * 2000-06-09 2008-10-15 Seiko Epson Corporation Creation of an image designating file
JP3497805B2 (en) * 2000-08-29 2004-02-16 オリンパス株式会社 Image projection display device

Also Published As

Publication number Publication date
JP2004069996A (en) 2004-03-04

Similar Documents

Publication Publication Date Title
JP4048870B2 (en) Projector system
JP2004069997A (en) Projector system, projector and information processor
JP2004086277A (en) Information processor, projector system and program
US9064440B2 (en) Display apparatus and method of controlling display apparatus
JP4725255B2 (en) Image display device, projector, parameter set selection method, and parameter set storage method
US20100171933A1 (en) Method for compensating for color loss of image in image projector and apparatus thereof
JP2004177784A (en) Projector system and projector
JP2004069996A5 (en)
US7537351B2 (en) Image forming projection system and projector using input and output signals
JP2004088194A (en) Information processor, projector system, and program
JP4788248B2 (en) Image display device, projector and image display method
US11093205B2 (en) Display device included in a plurality of display devices daisy-chained via connectors, display system, and control method thereof
JP2018004919A (en) Display and method for controlling the same
JP5212593B2 (en) Projector, projection system, and projection method
JP2003078842A (en) Image processing accompanying trapezoidal distortion correction of digital image data supplied to projector
JP2011164878A (en) Projector, control method of projector, and image display system
US9300905B2 (en) Projector, projector control method, and recording medium storing projector control program
JP2019113647A (en) Display device and method for controlling the same
JP2010226483A (en) Remote controller, and remote control system
JP2008107477A (en) Multi-display system, information processor, program, and recording medium
JP2022036737A (en) Projection apparatus, control method, and program
JP2005117616A (en) Method, device, and medium for video image recording and method and device for video image display
JP5131310B2 (en) Image display device, projector and image display method
JP2008139771A (en) Image display device, control method, control program, and recording medium
JP7166775B2 (en) Display device control device, control method, display system and program

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050302

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050302

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070517

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070529

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070730

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071003

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071106

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071119

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101207

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101207

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111207

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111207

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121207

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121207

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131207

Year of fee payment: 6

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees