JP4011987B2 - Presentation system using laser pointer - Google Patents

Presentation system using laser pointer Download PDF

Info

Publication number
JP4011987B2
JP4011987B2 JP2002184327A JP2002184327A JP4011987B2 JP 4011987 B2 JP4011987 B2 JP 4011987B2 JP 2002184327 A JP2002184327 A JP 2002184327A JP 2002184327 A JP2002184327 A JP 2002184327A JP 4011987 B2 JP4011987 B2 JP 4011987B2
Authority
JP
Japan
Prior art keywords
infrared light
laser
laser pointer
screen
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002184327A
Other languages
Japanese (ja)
Other versions
JP2003173235A (en
Inventor
昭典 濱名
淳一 横山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujinon Corp
Original Assignee
Fujinon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujinon Corp filed Critical Fujinon Corp
Priority to JP2002184327A priority Critical patent/JP4011987B2/en
Priority to US10/375,068 priority patent/US6910778B2/en
Publication of JP2003173235A publication Critical patent/JP2003173235A/en
Application granted granted Critical
Publication of JP4011987B2 publication Critical patent/JP4011987B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、スクリーンに映した画像をレーザポインタで指示しながら行う講演等のプレゼンテーションシステムに係り、特に、パソコン画面のマウス操作をレーザポインタで可能とするシステムおよびレーザ光を人体に向けて発射する危険を防止するシステムに関する。
【0002】
【従来の技術】
プロジェクタ等を用いて講演等のプレゼンテーションを行う場合には、レーザ光を投射してスクリーンに指示用のポイントを明示するレーザポインタがよく使用されている。また、近年ではパソコンの画面を液晶プロジェクタ等を用いてスクリーンに投影してプレゼンテーションを行う機会が多くなっており、その場合には、パソコン用の入力デバイスの一つであるマウス操作も合わせて行われる。ところで近年では、目に対して危険なレーザポインタの代わりに赤外光等の光をスクリーンに照射し、その照射スポットを撮像手段で撮像して座標を演算し、演算した座標に対してポイント画像を投影するといったシステムが提案されている。このようなプレゼンテーション用のポインティングシステムとしては、例えば、特許第2622620号、特許第2977559号、特開平11ー85395号、特開平11ー143636号等によって公知である。
【0003】
【発明が解決しようとする課題】
上記マウス操作は、パソコンに接続されているマウスそのものをプレゼンターが操作しているのが現状であるが、マウス操作を上記公報等に記載のポインティングシステムに応用することも可能である。しかしながら、これら従来の技術においては、スクリーン上での赤外光等の照射スポットの位置は撮像画面における1つの座標としか読み込まれない。つまり、赤外光の投射スポットの絶対的な位置を座標として演算し、その演算結果からポイント画像をスクリーンに投影するので、システムを構成する際には、撮像手段とスクリーンとの位置関係を光学的に厳密に定める必要がある。すなわち、撮像手段によって撮像されるスクリーン画像は遠近差の関係から台形状に歪む場合が多く、そのスクリーンに対する座標を設定するために各種の補正が必要であり、それらを実施するためには、光学的デバイスおよび電気システムあるいはシステムソフト等が複雑化することが推測される。
【0004】
よって請求項1に記載の本発明は、ポインタマークの投影に要する構成を簡素かつ安価に実現することができるレーザポインタを用いたプレゼンテーションシステムを提供することを目的としている。さらに請求項2および3に記載の本発明では、人に向けて、あるいはスクリーン以外に向けてのレーザ光の投射を規制して安全なプレゼンテーションシステムを提供することを目的としている。
【0005】
【課題を解決するための手段】
本発明は、スクリーン手段と、このスクリーン手段にコンピュータによって発生された可視像を投影する投影手段と、使用者によって操作され、スクリーン手段にレーザ光を投射するレーザポインタとを備えたプレゼンテーションシステムにおいて、レーザポインタには、レーザ光の投射方向とほぼ同方向に赤外光を発光する赤外光発光手段と、レーザ光の投射であるレーザポインタモードと赤外光発光手段からの赤外光の発光であるマウスモードとに切り換えるスイッチ手段とが設けられており、さらに、赤外光発光手段からスクリーン手段に発光された赤外光の投影像を感知する赤外光感知手段と、この赤外光感知手段で感知される赤外光の投影像の移動方向ならびに移動距離である移動データを生成するとともにコンピュータにその移動データを供給する処理部とを備え、投影手段はコンピュータからの該移動データを反映した可視像をスクリーン手段に投影することを特徴としている。
【0006】
本発明によれば、レーザポインタが備えるスイッチ手段により、レーザ光が投射されるレーザポインタモードと、マウス操作が行われるマウスモードのいずれかに切り換えることができる。レーザポインタモードではレーザ光が投射され、スクリーン手段に向けることによりレーザ光がスクリーン手段に投影される。マウスモードでは、赤外光発光手段から赤外光が発光され、この状態でレーザポインタをスクリーン手段に向けるとスクリーン手段に不可視像である赤外光が投影される。その赤外光の投影像の動きは、適宜な箇所に設置された赤外光感知手段で感知され、その投影像の移動方向ならびに移動距離が処理部に供給される。処理部は、その移動データに基づきマウスデータを生成してコンピュータに供給する。コンピュータはマウスデータを反映させた可視像を生成して投影手段に供給し、スクリーン手段に投影する。すなわち、レーザポインタの動きに応じたポインタマークが投影手段からスクリーン手段にリアルタイムで投影される。
【0007】
本発明では、従来のようなマウスやジョイスティックを用いることなく、マウスモードにしたレーザポインタを直感的に動かすことにより、マウス操作を行うことができる。プレゼンターはレーザポインタのスイッチ手段でレーザポインタモードかマウスモードかのいずれかに速やかに切り換えることができる。したがって、マウス操作を行うためにプレゼンターの近辺にパソコンを設置したり、プレゼンターがパソコンから離れられなかったりといった制限は生じず、プレゼンターの位置あるいは移動の自由度が高まる。これらのことから、円滑なプレゼンテーションを行うことができる。
【0008】
また、マウスを画像化するにあたっては、赤外光の投影像の絶対的な位置を座標として演算し、その演算結果からポインタマークをスクリーン手段に投影するのではなく、赤外光感知手段が赤外光の投影像を感知し、その移動方向ならびに移動距離のみを換算してマウスデータを生成する。すなわち、スクリーンに対する赤外光の投影像を相対的に把握して座標を生成するので、システムを構成するデバイスや処理部のプログラムは複雑なものを要さず、よって安価に構成することができる。プレゼンターによるマウス操作は、プレゼンター自身がスクリーン手段に投影されたポインタマークを見ながら、所望の箇所へのポインタマークの移動を調整することにより行われる。
【0009】
本発明では、レーザポインタからのレーザ光の投射方向に存在する人体の発熱を感知する人体感知センサと、この人体感知センサが作動した時にレーザポインタからのレーザ光の投射を規制するレーザ光制御手段とを備えることを付加的構成としている。
【0010】
この構成によれば、レーザ光の投射方向に人が存在していると、それが人体感知センサで検出され、レーザ光制御手段によりレーザ光の投射が規制される。この場合のレーザ光の投射の規制は、レーザ光の投射の停止か、もしくはレーザ光の強度を無害な程度に低くすることである。この構成により、レーザポインタモードにおいてレーザ光を人の目に投射する危険が回避される。人体感知センサは、例えばレーザポインタに搭載されていてもよく、スクリーン手段や投影手段等に設置されていてもよい。その人体感知センサとしては、人体から放出される赤外線を検出するものが好適に用いられる。
【0011】
また、レーザ光の危険回避手段としては、上記の他に次の構成が挙げられる。すなわち、スクリーン手段のほぼ全面に向けて赤外光を投射する赤外光投射手段を備える一方、レーザポインタには、レーザ光の投射方向と同方向に指向し、赤外光投射手段から投射されてスクリーン手段から反射する赤外光を受ける赤外光受光部と、この赤外光受光部が赤外光を受光している時にのみレーザ光を投射させるレーザ光制御手段とが設けられている。
【0012】
この構成によれば、レーザポインタをスクリーン手段に向けている状態で、レーザポインタに設けられた赤外光受光部がスクリーン手段から反射する赤外光を受光し、この時、レーザポインタからレーザ光が投射され、そのレーザ光はスクリーン手段に投射される。一方、レーザポインタの向きをスクリーン手段から外した状態では、赤外光受光部はスクリーン手段から反射する赤外光を受光せず、レーザ光は投射されない。すなわち、レーザポインタをスクリーン手段に向けている時にのみレーザ光が投射される。この構成により、レーザポインタモードにおいてレーザ光を人の目に投射する危険が回避される。
【0013】
【発明の実施の形態】
以下、図面を参照して本発明の実施形態を説明する。
(1)第1実施形態
図1は、本発明の第1実施形態に係る全体システムを概略的に示している。同図の符号1はスクリーン(スクリーン手段)、2はスクリーン1に液晶画像を投影する液晶プロジェクタ(投影手段)、3は画像処理部(処理部)、4はパソコン(コンピュータ)、5は図示せぬプレゼンターが手にするレーザポインタである。パソコン4で生成する可視像は、液晶プロジェクタ2によってスクリーン1に投影される。
【0014】
図2はレーザポインタ5の外観図であり、図3はレーザポインタ5の構成を示すブロック図である。このレーザポインタ5は、レーザ発光素子52およびレーザ光投射部52aを備えており、さらに、赤外光発光部(赤外光発光手段)53を備えている。赤外光発光部53からの赤外光の発光方向は、レーザ光投射部52aから投射されるレーザ光の投射方向とほぼ同じ方向に設定されている。赤外光発光部53から発光される赤外光の波長は、例えば850〜950nm程度であり、人体から放出される10μm近辺の赤外線波長とは著しく異なる。
【0015】
図3に示すように、レーザポインタ5には、OFFポジションを挟んで使用モードをレーザポインタモードとマウスモードとに切り換えるスイッチ(スイッチ手段)54が設けられている。スクリーン1にレーザポインタ5の先端を向け、スイッチ54をOFFからレーザポインタモードに切り換える(ONする)ことにより、レーザ発光素子52の投射部52aからレーザ光がスクリーン1に向けて投射される。一方、スイッチ54をマウスモードに切り換えると、レーザ発光素子52が停止した状態で、後述するようにレーザポインタ5をマウス代わりに用いることができる。また、レーザポインタ5には、マウスモードで使用される左ボタン55および右ボタン56が設けられている。スイッチ54のモード切り換え信号および各ボタン55,56の操作信号は、制御部(レーザ光制御手段)57に供給される。また、レーザポインタ5は、後述するレーザ光発光素子52の駆動停止信号を受信するワイヤレス信号受信部58を有し、その信号を受けた時、制御部57はレーザ発光素子52の駆動を停止させる。
【0016】
図1に示すように、液晶プロジェクタ2には、レーザポインタ5の赤外光発光部53から発光されてスクリーン1に投影される赤外光の投影像を撮影する赤外光感知部(赤外光感知手段)21が設置されている。この赤外光感知部21は、CCD、PSDあるいは多分割型フォトダイオード(例えば4分割型)等の撮像素子が用いられ、赤外光の投影像の中心を感知する。レーザポインタ5をスクリーン1に向けて、スイッチ54をマウスモードに設定して、スクリーン1上の投影像を動かして必要量を動かしたらスイッチ54をOFFにすると、スクリーン1上の投影像の動きが赤外光感知部21で感知される。画像処理部3には、赤外光感知部21が感知したスクリーン1上における赤外光の投影像の中心の移動方向ならびに移動距離が供給され、画像処理部3は、その移動データに基づきマウスデータを生成してパソコン4に供給する。パソコン4はそのマウスデータを反映した可視像を生成し、液晶プロジェクタ2に供給する。これにより、スクリーン1上ではレーザポインタ5の移動に応じてポインタマークが移動する。
【0017】
また、上記マウスモードでレーザポインタ5の左右のボタン55,56を適宜に押すクリック操作しながら従来のマウス操作と同様の操作を行うことにより、各種コマンド(例えば範囲指定、画像のスクロールやページめくり等)を可視像に反映させることができるようになっている。なお、マウスモードにおいて、上記のようにポインタマークを移動させる場合と、ボタン55,56のクリック操作の場合は、レーザポインタ5の赤外光発光部53から発光される赤外光の波長を各々異なるものとし、それら異なる波長の赤外光が赤外光感知部21で感知される。ボタン55,56によるクリック操作においては、各々の赤外光に基づくボタン操作信号が赤外光感知部21から画像処理部3に伝達され、画像処理部3はボタン操作信号をマウスデータに変換してパソコン4に供給し、パソコン4はそのマウスデータを反映した可視像を生成し、液晶プロジェクタ2に供給する。
【0018】
また、図1に示すように、液晶プロジェクタ2には、人体感知センサ22が設置されている。この人体感知センサ22は、液晶プロジェクタ2の周囲における人体の発熱を感知するものであり、具体的には、熱源である人体の表面と背景の温度差に相当する量の赤外線を受けて人体であるか否かを検出するものである。ちなみに、人体からは10μm近辺の赤外線がもっとも多く放出されており、人体感知センサ22はこのような波長の赤外線を感知する。人体感知センサ22の作動状態(人体を感知したか否か)は、同じく液晶プロジェクタ2に設置された制御部(レーザ光制御手段)23によって逐一検出される。そして、この制御部23からは、人体感知センサ22が人体を感知して作動した時に、レーザポインタ5のワイヤレス信号受信部58に対しワイヤレス信号によってレーザ発光素子52の駆動停止信号が送信され、レーザポインタ5内でワイヤレス信号受信部58から制御部57に伝えられる。これにより、人体感知センサ22が作動するとレーザポインタ5からはレーザ光が投射されないように制御される。
【0019】
上記実施形態によれば、プレゼンターは、液晶プロジェクタ2から可視像が投影されているスクリーン1にレーザポインタ5を向け、スイッチ54をレーザポインタモードに切り換えてレーザ光を投射し、そのレーザ光によって可視像を指示しながらプレゼンテーションを行う。ここで、人体感知センサ22の周囲に人が存在して人体感知センサが作動すると、制御部23からレーザポインタ5の制御部57にレーザ発光素子54の駆動停止信号が発せられ、レーザ光は投射されなくなる。したがって、レーザポインタモードにおいてレーザ光を人の目に投射する危険が回避される。
【0020】
続いて、マウス操作を行う場合には、レーザポインタ5をスクリーン1に向けてスイッチ54をマウスモードに切り換える。すると、赤外光発光部53から発光してスクリーン1に投影される赤外光の投影像の中心が赤外光感知部21で感知され、レーザポインタ5の動き(マウス操作)に応じた移動データに基づくマウスデータが画像処理部3で生成される。そのマウスデータはパソコン4に供給され、そのマウスデータを反映した可視像を生成して液晶プロジェクタ2に供給し、スクリーン1に投影する。すなわち、レーザポインタ5の動きに応じたポインタマークがスクリーン1に投影されるので、プレゼンターはそのポインタマークを見ながら所望の箇所へのポインタマークの移動を調整する。また、レーザポインタ5の左右のボタン55,56を適宜に押しながら従来のマウス操作と同様の操作を行うことにより、各種コマンド(例えば範囲指定、画像のスクロールやページめくり等)を可視像に反映させることができる。
【0021】
上記実施形態では、従来のようにマウスを用いることなく、レーザポインタ5をスクリーン1に向けてマウスモードに切り換え、スクリーン1上のポインタマークを見ながら動かすことにより、マウス操作を行うことができる。プレゼンターはレーザポインタ5のスイッチ54でレーザポインタモードかマウスモードかのいずれかに速やかに切り換えることができる。したがって、マウス操作を行うためにプレゼンターの近辺にパソコン4を設置したり、プレゼンターがパソコン4から離れられなかったりといった制限は生じず、プレゼンターの位置あるいは移動の自由度が高まる。これらのことから、円滑なプレゼンテーションを行うことができる。
【0022】
また、マウスを画像化するにあたっては、スクリーン1上での赤外光の投影像の絶対的な位置を座標として演算し、その演算結果からポインタマークをスクリーン1に投影するのではなく、赤外光感知部21が赤外光の投影像を感知し、画像処理部3がその移動方向ならびに移動距離のみを換算してポインタマークに生成する。すなわち、スクリーン1に対する赤外光の投影像を相対的に把握してポインタマークの座標を生成するので、画像処理部3のプログラムは複雑なものを要さず、よってコストの増大が抑えられる。
【0023】
(2)第2実施形態
図4は、本発明の第2実施形態に係る全体システムを概略的に示しており、上記第1実施形態と同様のスクリーン1、液晶プロジェクタ2、画像処理部3およびパソコン4を備えている。本実施形態では、画像処理部3に、スクリーン1のほぼ全面に向けて赤外光を投射する赤外光投射部31(赤外光投射手段)が設置されている。赤外光投射部31から投射される赤外光とレーザポインタ6の赤外光発光部53から発光される赤外光は、互いの干渉を避けるためにある程度波長の離れたもので、しかも変調がかけられていることが望ましい。例えば赤外光投射部から投射される赤外光の波長は850nm程度に設定され、レーザポインタ6の赤外光発光部53から発光される赤外光の波長は950nm程度に設定される。なお、赤外光発光部53から発光される赤外光は、マウスモードにおけるポインタマークの移動操作、ボタン55,56のクリック操作において、それぞれ異なる波長の赤外光が発光する。
【0024】
図5は、第2実施形態のレーザポインタ6の外観を示しており、図6は、このレーザポインタ6の構成を示すブロック図である。このレーザポインタ6は、第1実施形態と同様に、レーザポインタモード用のレーザ発光素子52およびレーザ光投射部52aと、マウスモード用の赤外光発光部53と、左右のボタン55,56を備えている。そしてこのレーザポインタ6は、さらに、赤外光受光部61を備えている。この赤外光受光部61は、レーザ光投射部52aからのレーザ光の投射方向と同じ方向に指向し、前記赤外光投射部31から投射されてスクリーン1から反射する赤外光を受ける。赤外光投射部31から投射された赤外光は、スクリーン1に反射することにより光量が減衰し、赤外光受光部61が受光する赤外光の光量は、その減衰した光量の範囲内に設定されている。
【0025】
レーザポインタ6の制御部57は、スイッチ54がレーザポインタモードの状態で、赤外光受光部61が赤外光を受光している時にのみレーザ発光素子52を駆動させ、受光していない時にはレーザ発光素子52の駆動を停止する。すなわち、制御部57により、赤外光受光部61が赤外光を受光している時にはレーザポインタ6からレーザ光が投射され、受光していない時にはレーザ光は投射されないように制御される。
【0026】
上記第2実施形態では、レーザポインタモードおよびマウスモードの作用は第1実施形態と同様になされる。そして、レーザポインタモードでは、レーザポインタ6をスクリーン1に向けている状態で、赤外光受光部61がスクリーン1から反射する赤外光を受光し、この時は、レーザポインタ6からレーザ光がスクリーン1に投射される。一方、レーザポインタ6の向きをスクリーン1から外した状態では、赤外光受光部61はスクリーン1から反射する赤外光を受光せず、レーザ光は投射されない。すなわち、レーザポインタ6をスクリーン1に向けている時にのみレーザ光が投射される。
【0027】
図7は、スクリーン1から反射する赤外光の光量の変化によってレーザ光の投射がON/OFFされる状態を示しており、レーザポインタ6がスクリーン1に向けられて所定範囲の赤外光の波長を受光している場合(Bの範囲)には、レーザ光が投射される。また、レーザポインタ6が赤外光投射部31から投射されている赤外光の領域に向けられている場合(Cの範囲)には、レーザ光は投射されない。さらに、スクリーン1および赤外光投射部31から投射されている赤外光の領域以外にレーザポインタ6が向けられている場合(Aの範囲)でも、レーザ光は投射されない。したがって、レーザ光の誤投射が未然に防がれ、安全にプレゼンテーションを行うことができる。
【0028】
【発明の効果】
以上説明したように、本発明によれば、スクリーン手段に投影した赤外光の投影像の移動方向ならびに移動距離を、スクリーン手段に対して相対的な移動データとして読み込み、この移動データに基づいてポインタマークをスクリーン手段に投影するので、ポインタマークの投影に要する構成を簡素かつ安価に実現することができるといった効果を奏する。
【図面の簡単な説明】
【図1】 本発明の第1実施形態に係るシステムの概念図である。
【図2】 本発明の第1実施形態に係るレーザポインタの斜視図である。
【図3】 本発明の第1実施形態に係るレーザポインタの構成を表すブロック図である。
【図4】 本発明の第2実施形態に係るシステムの概念図である。
【図5】 本発明の第2実施形態に係るレーザポインタの斜視図である。
【図6】 本発明の第2実施形態に係るレーザポインタの構成を表すブロック図である。
【図7】 本発明の第2実施形態において赤外光の光量範囲に応じたレーザポインタのON/OFF状態を概念的に示す図である。
【符号の説明】
1…スクリーン(スクリーン手段)
2…液晶プロジェクタ(投影手段)
3…画像処理部(処理部)
5,6…レーザポインタ
21…赤外光感知部(赤外光感知手段)
22…人体感知センサ
23,57…制御部(レーザ光制御手段)
31…赤外光投射部(赤外光投射手段)
53…赤外光発光部(赤外光発光手段)
54…スイッチ(スイッチ手段)
61…赤外光受光部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a presentation system such as a lecture that is performed while pointing an image projected on a screen with a laser pointer, and in particular, a system that enables a mouse operation on a personal computer screen with a laser pointer and emitting a laser beam toward a human body. It relates to a system for preventing danger.
[0002]
[Prior art]
When a presentation such as a lecture is performed using a projector or the like, a laser pointer is often used that projects a laser beam to clearly indicate an instruction point on a screen. In recent years, there have been many opportunities to give presentations by projecting a personal computer screen onto a screen using a liquid crystal projector or the like. In that case, mouse operation, one of PC input devices, is also performed. Is called. By the way, in recent years, instead of a laser pointer that is dangerous for eyes, light such as infrared light is irradiated on the screen, the irradiation spot is imaged by an imaging means, coordinates are calculated, and a point image is calculated with respect to the calculated coordinates. A system for projecting images has been proposed. Such a pointing system for presentation is known, for example, from Japanese Patent No. 2622220, Japanese Patent No. 2977559, Japanese Patent Laid-Open No. 11-85395, Japanese Patent Laid-Open No. 11-143636, and the like.
[0003]
[Problems to be solved by the invention]
Currently, the presenter is operating the mouse itself connected to the personal computer, but the mouse operation can also be applied to the pointing system described in the above publication. However, in these conventional techniques, the position of an irradiation spot such as infrared light on the screen is read as only one coordinate on the imaging screen. In other words, the absolute position of the infrared light projection spot is calculated as coordinates, and the point image is projected on the screen from the calculation result. Therefore, when configuring the system, the positional relationship between the imaging means and the screen is optically determined. Need to be strictly determined. That is, the screen image picked up by the image pickup means is often distorted in a trapezoidal shape due to the difference in perspective, and various corrections are necessary to set the coordinates for the screen. It is presumed that complicated devices and electrical systems or system software will become complicated.
[0004]
Accordingly, an object of the present invention described in claim 1 is to provide a presentation system using a laser pointer capable of realizing a configuration required for projecting a pointer mark in a simple and inexpensive manner. Furthermore, it is an object of the present invention described in claims 2 and 3 to provide a safe presentation system by regulating the projection of laser light toward a person or other than the screen.
[0005]
[Means for Solving the Problems]
The present invention provides a presentation system comprising screen means, projection means for projecting a visible image generated by a computer onto the screen means, and a laser pointer operated by a user to project laser light onto the screen means. The laser pointer includes an infrared light emitting means for emitting infrared light in substantially the same direction as the laser light projection direction, and a laser pointer mode for projecting laser light and infrared light from the infrared light emitting means. Switch means for switching to mouse mode, which is light emission, and infrared light sensing means for sensing a projected image of the infrared light emitted from the infrared light light emitting means to the screen means, and this infrared light Movement data that is the movement direction and movement distance of the projected image of infrared light detected by the light sensing means is generated and transferred to the computer. And a processor for supplying data, the projection means is characterized by projecting the visible image that reflects the movement data from the computer to the screen means.
[0006]
According to the present invention, it is possible to switch between the laser pointer mode in which the laser beam is projected and the mouse mode in which the mouse operation is performed by the switch means provided in the laser pointer. In the laser pointer mode, laser light is projected, and the laser light is projected onto the screen means by being directed toward the screen means. In the mouse mode, infrared light is emitted from the infrared light emitting means, and when the laser pointer is pointed at the screen means in this state, infrared light that is an invisible image is projected onto the screen means. The movement of the projected image of the infrared light is sensed by infrared light sensing means installed at an appropriate location, and the moving direction and moving distance of the projected image are supplied to the processing unit. The processing unit generates mouse data based on the movement data and supplies it to the computer. The computer generates a visible image reflecting the mouse data, supplies it to the projection means, and projects it on the screen means. That is, a pointer mark corresponding to the movement of the laser pointer is projected from the projection unit to the screen unit in real time.
[0007]
In the present invention, the mouse operation can be performed by intuitively moving the laser pointer in the mouse mode without using a conventional mouse or joystick. The presenter can quickly switch to either the laser pointer mode or the mouse mode with the laser pointer switch means. Therefore, there is no restriction that a personal computer is installed in the vicinity of the presenter in order to perform a mouse operation, or the presenter cannot be separated from the personal computer, and the degree of freedom of the presenter's position or movement is increased. From these things, a smooth presentation can be performed.
[0008]
When imaging a mouse, the absolute position of the projected image of infrared light is calculated as coordinates, and the pointer mark is not projected on the screen means from the calculation result. A projection image of external light is sensed, and mouse data is generated by converting only the moving direction and moving distance. In other words, since the coordinates are generated by relatively grasping the projected image of the infrared light on the screen, the program of the device and the processing unit constituting the system does not need a complicated one, and can be configured at low cost. . The mouse operation by the presenter is performed by adjusting the movement of the pointer mark to a desired location while the presenter sees the pointer mark projected on the screen means.
[0009]
In the present invention, a human body sensor that senses the heat generated by the human body existing in the direction in which the laser beam is projected from the laser pointer, and a laser beam control means that regulates the projection of the laser beam from the laser pointer when the human body sensor is activated. And an additional configuration.
[0010]
According to this configuration, if a person is present in the laser light projection direction, the human body detection sensor detects the person, and the laser light control unit regulates the laser light projection. In this case, the restriction of the laser light projection is to stop the laser light projection or to reduce the intensity of the laser light harmlessly. With this configuration, the danger of projecting laser light into the human eye in the laser pointer mode is avoided. The human body sensor may be mounted on, for example, a laser pointer, or may be installed on a screen unit, a projection unit, or the like. As the human body sensor, a sensor that detects infrared rays emitted from the human body is preferably used.
[0011]
In addition to the above, laser beam danger avoiding means may include the following configuration. That is, while the infrared light projection means for projecting infrared light toward almost the entire surface of the screen means is provided, the laser pointer is directed in the same direction as the projection direction of the laser light and is projected from the infrared light projection means. An infrared light receiving unit that receives infrared light reflected from the screen means, and a laser light control unit that projects laser light only when the infrared light receiving unit receives infrared light. .
[0012]
According to this configuration, the infrared light receiving unit provided on the laser pointer receives the infrared light reflected from the screen means while the laser pointer is directed to the screen means, and at this time, the laser light is emitted from the laser pointer. Is projected, and the laser beam is projected onto the screen means. On the other hand, in a state where the direction of the laser pointer is removed from the screen means, the infrared light receiving unit does not receive the infrared light reflected from the screen means, and the laser light is not projected. That is, the laser beam is projected only when the laser pointer is directed to the screen means. With this configuration, the danger of projecting laser light into the human eye in the laser pointer mode is avoided.
[0013]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
(1) First Embodiment FIG. 1 schematically shows an overall system according to a first embodiment of the present invention. In the figure, reference numeral 1 is a screen (screen means), 2 is a liquid crystal projector (projection means) for projecting a liquid crystal image on the screen 1, 3 is an image processing section (processing section), 4 is a personal computer (computer), and 5 is not shown. It is a laser pointer that the presenter holds. A visible image generated by the personal computer 4 is projected onto the screen 1 by the liquid crystal projector 2.
[0014]
FIG. 2 is an external view of the laser pointer 5, and FIG. 3 is a block diagram showing the configuration of the laser pointer 5. The laser pointer 5 includes a laser light emitting element 52 and a laser light projection unit 52a, and further includes an infrared light emitting unit (infrared light emitting means) 53. The light emitting direction of the infrared light from the infrared light emitting unit 53 is set to be substantially the same as the direction of the laser light projected from the laser light projecting unit 52a. The wavelength of infrared light emitted from the infrared light emitting unit 53 is, for example, about 850 to 950 nm, and is significantly different from the infrared wavelength around 10 μm emitted from the human body.
[0015]
As shown in FIG. 3, the laser pointer 5 is provided with a switch (switch means) 54 for switching the use mode between the laser pointer mode and the mouse mode across the OFF position. By directing the tip of the laser pointer 5 toward the screen 1 and switching the switch 54 from OFF to the laser pointer mode (ON), the laser light is projected from the projection unit 52 a of the laser light emitting element 52 toward the screen 1. On the other hand, when the switch 54 is switched to the mouse mode, the laser pointer 5 can be used in place of the mouse as described later with the laser light emitting element 52 stopped. The laser pointer 5 is provided with a left button 55 and a right button 56 that are used in the mouse mode. The mode switching signal of the switch 54 and the operation signals of the buttons 55 and 56 are supplied to the control unit (laser light control means) 57. The laser pointer 5 has a wireless signal receiving unit 58 that receives a drive stop signal for a laser light emitting element 52, which will be described later. When receiving the signal, the control unit 57 stops driving the laser light emitting element 52. .
[0016]
As shown in FIG. 1, the liquid crystal projector 2 includes an infrared light sensing unit (infrared ray) that captures a projected image of infrared light emitted from the infrared light emitting unit 53 of the laser pointer 5 and projected onto the screen 1. (Light sensing means) 21 is installed. The infrared light sensing unit 21 uses an image sensor such as a CCD, PSD, or multi-division photodiode (for example, 4-division type), and senses the center of the projected image of infrared light. When the laser pointer 5 is pointed at the screen 1 and the switch 54 is set to the mouse mode, the projected image on the screen 1 is moved to move the required amount, and the switch 54 is turned OFF, the projected image on the screen 1 moves. It is sensed by the infrared light sensing unit 21. The image processing unit 3 is supplied with the moving direction and moving distance of the center of the projected image of the infrared light on the screen 1 detected by the infrared light sensing unit 21, and the image processing unit 3 uses the movement data to move the mouse. Data is generated and supplied to the personal computer 4. The personal computer 4 generates a visible image reflecting the mouse data and supplies it to the liquid crystal projector 2. As a result, the pointer mark moves on the screen 1 in accordance with the movement of the laser pointer 5.
[0017]
In addition, various commands (for example, range designation, image scrolling and page turning) can be performed by performing the same operation as a conventional mouse operation while appropriately clicking the left and right buttons 55 and 56 of the laser pointer 5 in the mouse mode. Etc.) can be reflected in the visible image. In the mouse mode, when the pointer mark is moved as described above and when the buttons 55 and 56 are clicked, the wavelength of the infrared light emitted from the infrared light emitting unit 53 of the laser pointer 5 is set. Infrared lights having different wavelengths are detected by the infrared light detection unit 21. In the click operation using the buttons 55 and 56, the button operation signal based on each infrared light is transmitted from the infrared light sensing unit 21 to the image processing unit 3, and the image processing unit 3 converts the button operation signal into mouse data. Is supplied to the personal computer 4, and the personal computer 4 generates a visible image reflecting the mouse data and supplies it to the liquid crystal projector 2.
[0018]
As shown in FIG. 1, the liquid crystal projector 2 is provided with a human body sensor 22. The human body sensor 22 detects the heat generated by the human body around the liquid crystal projector 2. Specifically, the human body sensor 22 receives infrared rays in an amount corresponding to the temperature difference between the surface of the human body, which is a heat source, and the background. This is to detect whether or not there is. Incidentally, the human body emits the most infrared rays in the vicinity of 10 μm, and the human body sensor 22 senses infrared rays having such a wavelength. The operating state of the human body sensor 22 (whether or not a human body has been detected) is detected one by one by the control unit (laser light control means) 23 installed in the liquid crystal projector 2. Then, when the human body sensor 22 senses a human body and operates, the control unit 23 transmits a drive stop signal for the laser light emitting element 52 to the wireless signal receiving unit 58 of the laser pointer 5 by a wireless signal. The signal is transmitted from the wireless signal receiver 58 to the controller 57 within the pointer 5. Thus, when the human body sensor 22 is activated, the laser pointer 5 is controlled so that the laser beam is not projected.
[0019]
According to the above embodiment, the presenter directs the laser pointer 5 toward the screen 1 on which the visible image is projected from the liquid crystal projector 2, switches the switch 54 to the laser pointer mode, and projects the laser light. Give a presentation while instructing a visible image. Here, when a human is present around the human body sensor 22 and the human body sensor is activated, a drive stop signal for the laser light emitting element 54 is issued from the control unit 23 to the control unit 57 of the laser pointer 5, and the laser light is projected. It will not be done. Therefore, the danger of projecting the laser beam to the human eye in the laser pointer mode is avoided.
[0020]
Subsequently, when a mouse operation is performed, the laser pointer 5 is directed toward the screen 1 and the switch 54 is switched to the mouse mode. Then, the center of the projected image of infrared light emitted from the infrared light emitting unit 53 and projected onto the screen 1 is detected by the infrared light sensing unit 21, and moved in accordance with the movement of the laser pointer 5 (mouse operation). Mouse data based on the data is generated by the image processing unit 3. The mouse data is supplied to the personal computer 4, a visible image reflecting the mouse data is generated, supplied to the liquid crystal projector 2, and projected onto the screen 1. That is, since a pointer mark corresponding to the movement of the laser pointer 5 is projected on the screen 1, the presenter adjusts the movement of the pointer mark to a desired location while viewing the pointer mark. Further, various commands (for example, range designation, image scrolling, page turning, etc.) are made visible by performing operations similar to the conventional mouse operation while appropriately pressing the left and right buttons 55, 56 of the laser pointer 5. It can be reflected.
[0021]
In the above-described embodiment, the mouse operation can be performed by switching the laser pointer 5 to the mouse mode toward the screen 1 and moving it while looking at the pointer mark on the screen 1 without using a mouse as in the prior art. The presenter can quickly switch to either the laser pointer mode or the mouse mode with the switch 54 of the laser pointer 5. Therefore, there is no restriction that the personal computer 4 is installed in the vicinity of the presenter in order to perform the mouse operation, and the presenter cannot be separated from the personal computer 4, and the position of the presenter or the freedom of movement increases. From these things, a smooth presentation can be performed.
[0022]
Further, when imaging the mouse, the absolute position of the projected image of infrared light on the screen 1 is calculated as coordinates, and the pointer mark is not projected on the screen 1 from the calculation result, but infrared. The light sensing unit 21 senses a projected image of infrared light, and the image processing unit 3 converts only the moving direction and the moving distance into a pointer mark. That is, since the coordinates of the pointer mark are generated by relatively grasping the projected image of the infrared light on the screen 1, the program of the image processing unit 3 is not required to be complicated, and thus the increase in cost can be suppressed.
[0023]
(2) Second Embodiment FIG. 4 schematically shows an entire system according to a second embodiment of the present invention. The screen 1, the liquid crystal projector 2, the image processing unit 3 and the same as those in the first embodiment are shown. A personal computer 4 is provided. In the present embodiment, the image processing unit 3 is provided with an infrared light projection unit 31 (infrared light projection means) that projects infrared light toward almost the entire surface of the screen 1. The infrared light projected from the infrared light projection unit 31 and the infrared light emitted from the infrared light emission unit 53 of the laser pointer 6 are separated by a certain amount in order to avoid mutual interference, and are modulated. It is desirable that For example, the wavelength of infrared light projected from the infrared light projection unit is set to about 850 nm, and the wavelength of infrared light emitted from the infrared light emission unit 53 of the laser pointer 6 is set to about 950 nm. It should be noted that the infrared light emitted from the infrared light emitting unit 53 emits infrared light having different wavelengths when the pointer mark is moved in the mouse mode and when the buttons 55 and 56 are clicked.
[0024]
FIG. 5 shows the appearance of the laser pointer 6 of the second embodiment, and FIG. 6 is a block diagram showing the configuration of the laser pointer 6. As with the first embodiment, the laser pointer 6 includes a laser light emitting element 52 and a laser light projection unit 52a for laser pointer mode, an infrared light emitting unit 53 for mouse mode, and left and right buttons 55 and 56. I have. The laser pointer 6 further includes an infrared light receiving unit 61. The infrared light receiving unit 61 is directed in the same direction as the projection direction of the laser light from the laser light projection unit 52a, and receives infrared light projected from the infrared light projection unit 31 and reflected from the screen 1. The amount of infrared light projected from the infrared light projection unit 31 is attenuated by reflection on the screen 1, and the amount of infrared light received by the infrared light receiving unit 61 is within the range of the attenuated light amount. Is set to
[0025]
The control unit 57 of the laser pointer 6 drives the laser light emitting element 52 only when the switch 54 is in the laser pointer mode and the infrared light receiving unit 61 is receiving infrared light. The drive of the light emitting element 52 is stopped. That is, the control unit 57 performs control so that the laser light is projected from the laser pointer 6 when the infrared light receiving unit 61 is receiving infrared light, and is not projected when it is not receiving light.
[0026]
In the second embodiment, the operations of the laser pointer mode and the mouse mode are the same as in the first embodiment. In the laser pointer mode, the infrared light receiving unit 61 receives infrared light reflected from the screen 1 with the laser pointer 6 facing the screen 1. At this time, the laser light is emitted from the laser pointer 6. Projected onto the screen 1. On the other hand, in a state where the direction of the laser pointer 6 is removed from the screen 1, the infrared light receiving unit 61 does not receive the infrared light reflected from the screen 1 and no laser light is projected. That is, the laser beam is projected only when the laser pointer 6 is directed toward the screen 1.
[0027]
FIG. 7 shows a state in which the projection of laser light is turned on / off by a change in the amount of infrared light reflected from the screen 1, and the laser pointer 6 is directed toward the screen 1 to transmit infrared light within a predetermined range. When receiving a wavelength (range B), a laser beam is projected. Further, when the laser pointer 6 is directed to the infrared light region projected from the infrared light projection unit 31 (range C), the laser light is not projected. Further, even when the laser pointer 6 is directed outside the infrared light region projected from the screen 1 and the infrared light projection unit 31 (range A), the laser light is not projected. Therefore, erroneous projection of laser light can be prevented and presentation can be performed safely.
[0028]
【The invention's effect】
As described above, according to the present invention, the movement direction and the movement distance of the projected image of the infrared light projected on the screen means are read as movement data relative to the screen means, and based on this movement data Since the pointer mark is projected on the screen means, the configuration required for the projection of the pointer mark can be realized simply and inexpensively.
[Brief description of the drawings]
FIG. 1 is a conceptual diagram of a system according to a first embodiment of the present invention.
FIG. 2 is a perspective view of a laser pointer according to the first embodiment of the present invention.
FIG. 3 is a block diagram showing a configuration of a laser pointer according to the first embodiment of the present invention.
FIG. 4 is a conceptual diagram of a system according to a second embodiment of the present invention.
FIG. 5 is a perspective view of a laser pointer according to a second embodiment of the present invention.
FIG. 6 is a block diagram showing a configuration of a laser pointer according to a second embodiment of the present invention.
FIG. 7 is a diagram conceptually showing an ON / OFF state of a laser pointer corresponding to a light amount range of infrared light in the second embodiment of the present invention.
[Explanation of symbols]
1 ... Screen (screen means)
2 ... Liquid crystal projector (projection means)
3. Image processing unit (processing unit)
5, 6 ... Laser pointer 21 ... Infrared light sensing unit (infrared light sensing means)
22 ... human body sensor 23, 57 ... control unit (laser light control means)
31 ... Infrared light projection unit (infrared light projection means)
53. Infrared light emitting section (infrared light emitting means)
54 ... Switch (switch means)
61. Infrared light receiving part

Claims (3)

スクリーン手段と、
このスクリーン手段にコンピュータにより発生された可視像を投影する投影手段と、
使用者によって操作され、前記スクリーン手段にレーザ光を投射するレーザポインタとを備えたプレゼンテーションシステムにおいて、
前記レーザポインタには、レーザ光の投射方向とほぼ同方向に赤外光を発光する赤外光発光手段と、レーザ光の投射であるレーザポインタモードと前記赤外光発光手段からの赤外光の発光であるマウスモードとに切り換えるスイッチ手段とが設けられており、
さらに、前記赤外光発光手段から前記スクリーン手段に発光された赤外光の投影像を感知する赤外光感知手段と、
この赤外光感知手段で感知される赤外光の投影像の移動方向ならびに移動距離である移動データを生成するとともに前記コンピュータにその移動データを供給する処理部とを備え、
前記投影手段は前記コンピュータからの該移動データを反映した可視像を前記スクリーン手段に投影することを特徴とするレーザポインタを用いたプレゼンテーションシステム。
Screen means;
Projection means for projecting a computer generated visible image onto the screen means;
In a presentation system comprising a laser pointer operated by a user and projecting laser light onto the screen means,
The laser pointer includes infrared light emitting means that emits infrared light in substantially the same direction as the laser light projection direction, laser pointer mode that is the projection of laser light, and infrared light from the infrared light light emitting means. Switch means for switching to the mouse mode, which is the light emission of
And infrared light sensing means for sensing a projected image of infrared light emitted from the infrared light emitting means to the screen means;
A processing unit that generates moving data that is a moving direction and a moving distance of a projected image of infrared light that is detected by the infrared light sensing means, and that supplies the moving data to the computer,
The presentation system using a laser pointer, wherein the projection means projects a visible image reflecting the movement data from the computer onto the screen means.
前記レーザポインタからのレーザ光の投射方向に存在する人体の発熱を感知する人体感知センサと、この人体感知センサが作動した時にレーザポインタからのレーザ光の投射を規制するレーザ光制御手段とを備えることを特徴とする請求項1に記載のレーザポインタを用いたプレゼンテーションシステム。A human body sensor for detecting heat generated by the human body existing in the direction in which the laser beam is projected from the laser pointer, and a laser beam control unit for regulating the projection of the laser beam from the laser pointer when the human body sensor is activated. The presentation system using a laser pointer according to claim 1. 前記スクリーン手段のほぼ全面に向けて赤外光を投射する赤外光投射手段を備える一方、前記レーザポインタには、レーザ光の投射方向と同方向に指向し、前記赤外光投射手段から投射されて前記スクリーン手段から反射する赤外光を受ける赤外光受光部と、この赤外光受光部が赤外光を受光している時にのみレーザ光を投射させるレーザ光制御手段とが設けられていることを特徴とする請求項1に記載のレーザポインタを用いたプレゼンテーションシステム。While provided with infrared light projection means for projecting infrared light toward almost the entire surface of the screen means, the laser pointer is directed in the same direction as the projection direction of the laser light and projected from the infrared light projection means. And an infrared light receiving part for receiving infrared light reflected from the screen means, and a laser light control means for projecting laser light only when the infrared light receiving part is receiving infrared light. The presentation system using a laser pointer according to claim 1, wherein:
JP2002184327A 2001-09-28 2002-06-25 Presentation system using laser pointer Expired - Fee Related JP4011987B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2002184327A JP4011987B2 (en) 2001-09-28 2002-06-25 Presentation system using laser pointer
US10/375,068 US6910778B2 (en) 2001-09-28 2003-02-28 Presentation system using laser pointer

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2001299245 2001-09-28
JP2001-299245 2001-09-28
JP2002184327A JP4011987B2 (en) 2001-09-28 2002-06-25 Presentation system using laser pointer

Publications (2)

Publication Number Publication Date
JP2003173235A JP2003173235A (en) 2003-06-20
JP4011987B2 true JP4011987B2 (en) 2007-11-21

Family

ID=26623210

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002184327A Expired - Fee Related JP4011987B2 (en) 2001-09-28 2002-06-25 Presentation system using laser pointer

Country Status (1)

Country Link
JP (1) JP4011987B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10386987B2 (en) 2014-10-15 2019-08-20 Samsung Electronics Co., Ltd. Remote controller apparatus and control method thereof
JP2021044022A (en) * 2020-02-07 2021-03-18 株式会社ワコム Electronic pen and position detection system
JP2022000815A (en) * 2020-12-21 2022-01-04 株式会社ワコム Electronic pen and position detection system

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005119356A2 (en) 2004-05-28 2005-12-15 Erik Jan Banning Interactive direct-pointing system and calibration method
TWI291122B (en) 2004-06-11 2007-12-11 Micro Nits Co Ltd Array type optical sensor pointing system and its method
KR101156236B1 (en) * 2004-09-07 2012-06-13 엘지전자 주식회사 Method and apparatus for controlling presentation
JP2006163360A (en) 2004-11-11 2006-06-22 Casio Comput Co Ltd Projector device, projecting method and projection control program
JP4577612B2 (en) * 2005-03-30 2010-11-10 カシオ計算機株式会社 Information display system and information display method
US9285897B2 (en) 2005-07-13 2016-03-15 Ultimate Pointer, L.L.C. Easily deployable interactive direct-pointing system and calibration method therefor
JP5446085B2 (en) * 2007-11-05 2014-03-19 カシオ計算機株式会社 Projection apparatus, projection method, and program
JP5573908B2 (en) * 2012-09-28 2014-08-20 カシオ計算機株式会社 Pointing device, information transmission method thereof, and information transmission program
JP7384836B2 (en) 2019-01-18 2023-11-21 株式会社半導体エネルギー研究所 Display device, display system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10386987B2 (en) 2014-10-15 2019-08-20 Samsung Electronics Co., Ltd. Remote controller apparatus and control method thereof
JP2021044022A (en) * 2020-02-07 2021-03-18 株式会社ワコム Electronic pen and position detection system
JP2022000815A (en) * 2020-12-21 2022-01-04 株式会社ワコム Electronic pen and position detection system
JP7144584B2 (en) 2020-12-21 2022-09-29 株式会社ワコム Electronic pen and position detection system

Also Published As

Publication number Publication date
JP2003173235A (en) 2003-06-20

Similar Documents

Publication Publication Date Title
US6910778B2 (en) Presentation system using laser pointer
US6698897B2 (en) Presentation system using laser pointer
JP4011987B2 (en) Presentation system using laser pointer
US6791531B1 (en) Device and method for cursor motion control calibration and object selection
US9552072B2 (en) Image projection device
US20030067441A1 (en) Presentation system using laser pointer
JP2790965B2 (en) Optical pointing system
EP0786117B1 (en) Apparatus and method for controlling the position of a graphical pointer
US20110242054A1 (en) Projection system with touch-sensitive projection image
US20220202515A1 (en) Operating mode control systems and methods for a computer-assisted surgical system
EP2524289A1 (en) Controlling and/or operating a medical device by means of a light pointer
JP2016057426A5 (en)
EP2940525B1 (en) Infrared interactive remote control device and projection system using same
US10805586B2 (en) Projection display unit with detection function
JP6350175B2 (en) POSITION DETECTION DEVICE, PROJECTOR, AND POSITION DETECTION METHOD
US20080142691A1 (en) Optical navigation device that utilizes a vertical cavity surface emitting laser (vcsel) configured to emit visible coherent light
US7492352B2 (en) Optical computer pointer and optical cursor/frame control method
JP2010511221A (en) Three-dimensional control of data processing via a handheld pointing device
US20030210230A1 (en) Invisible beam pointer system
CN110603513A (en) Eye tracking based on imaging of eye features and structured illumination probe light assistance
TW201435656A (en) Information technology device input systems and associated methods
JP4035003B2 (en) Presentation system using laser pointer
JP3770308B2 (en) Light pointer
JP2006260487A (en) Pointer system
JP2004310528A (en) Input device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041101

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070205

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070823

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070906

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100914

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees