JP4142814B2 - Image projection system - Google Patents

Image projection system Download PDF

Info

Publication number
JP4142814B2
JP4142814B2 JP18712299A JP18712299A JP4142814B2 JP 4142814 B2 JP4142814 B2 JP 4142814B2 JP 18712299 A JP18712299 A JP 18712299A JP 18712299 A JP18712299 A JP 18712299A JP 4142814 B2 JP4142814 B2 JP 4142814B2
Authority
JP
Japan
Prior art keywords
image
screen
coordinates
projector
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP18712299A
Other languages
Japanese (ja)
Other versions
JP2001013935A (en
Inventor
才明 鴇田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP18712299A priority Critical patent/JP4142814B2/en
Publication of JP2001013935A publication Critical patent/JP2001013935A/en
Application granted granted Critical
Publication of JP4142814B2 publication Critical patent/JP4142814B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、プロジェクタからスクリーンに画像を投影する画像投影システムに関する。
【0002】
【従来の技術】
近年、プロジェクタを使用し、複数の聴講者に講義、講演、説明等を行う機会が増えている。これは専ら、プロジェクタの投影画像の品質が高まったこと、パソコン等の情報入力機器のハード及びソフトの機能が充実したこと等による。
【0003】
しかし従来の画像投影システムにおいて、スクリーン上に投影されている画像の編集を行うためには、プロジェクタ使用者(プレゼンテータと呼ぶ)、もしくはその代行がパソコン等の情報入力機器上でマウス操作、キー入力操作等を行わなければならなかった。
【0004】
従って、プレゼンテータが、説明の効果を上げるために説明文中の、強調したい文字列に下線を引いたり文字列を囲んだりしようとしても、説明しながらのパソコン操作が煩わしく、思うに任せなかった。
【0005】
この不具合を解決するためには、説明しながら恰も黒板にペンで線を書く感覚で、スクリーン上の元画像にある種の画像パターンをマーキングできる技術が必要である。
【0006】
特開平5−46129号公報においては、磁気センサを配置したスクリーンと、先端に磁石を備えた指示棒(磁石ポインタ)を組み合わせ、プレゼンテータが磁石ポインタでスクリーン上の位置を指示し、磁石センサにより検出された信号を座標検出装置に供給して、ここからの座標データを画像信号処理装置に入力すると共に、画像源から供給される画像信号にシンボルMとして合成し、この表示信号をプロジェクタからスクリーンに投影する画像表示装置が提供されている。また、特開平8−160539号公報においては、接触式の入力方法の他、非接触式の入力方法が挙げられている。
【0007】
【発明が解決しようとする課題】
上記特開平5−46129号公報に示す装置は、指示棒で位置指定し、スクリーン上に画像を形成することができるので、上記煩わしさが改善できる。しかし、大きな会場で講演する場合等は、プレゼンテータがスクリーン近傍で指示棒を持ちながら説明するのではなく、光学式のポインタによりある程度スクリーンから距離を置いて場所から説明する場合が多く、このような会場には適用することができない。
【0008】
また、画像信号処理装置内でスクリーン上の座標データと画像信号データを一致させる手段がなく、プロジェクタをスクリーンに対して動かした場合、スクリーン上の元画像の位置とシンボルMの位置関係が合わなくなる。
【0009】
また、特開平8−160539号公報の技術は、透過型プロジェクタにのみ有効な手段であり、反射型のプロジェクタには適さない(通常、プロジェクタの画像投影は、半透明スクリーンの裏面より投影しスクリーン上に画像を形成する方式「透過型」と、白地スクリーンの表面側から投影しスクリーン表面に像を形成する方式「反射型」がある)。
【0010】
反射型プロジェクタにおいては、プロジェクタ本体とスクリーンを切り離して搬送できるため、可搬性に優れ便利であり、また透過型に比較して安価であり、さらに透過型に比較して画像品質が良好である。従って、このような利点を持つ反射型プロジェクタに適さないというのは致命的な欠陥となる。
【0011】
本発明は、上記のような問題に鑑みてなされたものであり、反射型プロジェクタにおいて、プレゼンテータが説明時にスクリーン上の画像に重ね合わせて簡単な操作でマーキング等ができる画像投影システムを提供することを目的とするものである。
【0012】
【課題を解決するための手段】
上記目的を達成するために、請求項1記載の発明は、反射型のスクリーン、画像をスクリーンに投影するためのプロジェクタ、プロジェクタに画像信号を供給する画像入力装置、スクリーン上の画像を指示するための光学的ポインタを備えた画像形成システムにおいて、スクリーンは、光学的ポインタから照射される光線を感知する光センサがマトリクス状に配置されており、プロジェクタは、光学的ポインタと同種の光信号を複数個所含んだ状態でスクリーンに画像投影し、画像入力装置は、光線を感知した光センサから発せられる電気信号に基づき、スクリーン上の光線の位置であるスクリーン上座標を計算する光線位置検出機能、光線位置検出機能により計算されたスクリーン上座標を基準に、ある定められた画像パタンを元画像に重ね合わせるための位置合わせ機能、及び元画像と画像パタンの画像信号を合成する画像編集機能を有し、位置合わせ機能は、スクリーン上の前記光信号を検出した位置であるスクリーン上座標と投影画像中の光信号照射位置である投影画像座標とから、スクリーン上座標と投影画像座標の相対位置関係を計算して両者の位置合わせを行うことを特徴とするものである。
【0013】
また上記目的を達成するために、請求項2記載の発明は、請求項1記載の画像投影システムにおいて、画像入力装置は、前記光線位置検出機能で得られた投影画像のスクリーン上座標から補正投影領域を計算し、スクリーン上で投影画像に歪みが生じないように、元画像を補正する補正機能を有することを特徴とするものである。
【0015】
請求項1記載の発明では、画像入力装置は、光線を感知した光センサから発せられる電気信号に基づき、スクリーン上の光線の位置であるスクリーン上座標を計算し、計算されたスクリーン上座標を基準に、ある定められた画像パタンを元画像に重ね合わせ、さらに、元画像と画像パタンの画像信号を合成する。
【0017】
また、請求項1記載の発明では、スクリーン上に形成(投影)されている元画像に重ね合わせ、プレゼンテータの操作により、あるパタンの画像を描画(投影)する技術において、必要となる位置合わせに際し、プレゼンテータが意識することなく、自動で位置合わせが行われる。
【0018】
【発明の実施の形態】
以下、本発明の実施の形態を図面に基づいて説明する。
図1は本発明の実施の形態を示す画像投影システムの全体構成図である。
この画像投影システムは、反射型のスクリーン1、画像をスクリーン1に投影するためのプロジェクタ2、プロジェクタ2に画像信号を供給する画像入力装置3、スクリーン1上の画像を指示するための光学的ポインタ4を備えている。
【0019】
画像入力装置3は、光信号受信時にスクリーン1上の光センサより発せられる電気信号が送られ、この信号に基づき、スクリーン1上の光線の照射位置5を計算する光線位置検出手段、光線位置検出手段により計算された光線位置を基準に、ある定められた画像を元画像に重ね合わせた画像信号を合成する画像編集手段を兼ねることもできる。プレゼンテータPは、光学的ポインタ4により可視光をスクリーン1に照射し、スクリーン1上の投影画像の所望の位置を指示することができる。
【0020】
図2はスクリーンの概略構成図である。
スクリーン1表面には、マトリクス状に配置された複数の透明もしくはスクリーン地と同系色の光センサ11が存在し、それぞれの光センサ11が特定の光線(光信号)を受け取ると、光センサ11はオフレベルからオンレベルに変位し、その電気信号から、変位した(即ち光が照射された)光センサ11の位置が、スクリーン上座標として、光線位置検出手段12により認識される。
【0021】
この光線位置検出手段12は、単独の機器として設置し、光線位置信号を画像編集手段に伝えてもよいが、画像入力装置3内に組み込むこともできる。光センサ11の配置間隔は、位置分解能を高めるためには密にすべきであるが、密にすればする程製作コストが高くなるため、コストパフォーマンスの観点から決定されるべきである。通常、光センサ11は数mm〜数cm間隔に配置される。
【0022】
このようにスクリーン1に光センサ11をマトリクス状に配置することで、スクリーン1上に形成(投影)されている元画像に重ね合わせ、プレゼンテータPの操作により、ある画像パタンを描画(投影)することが可能となる。
【0023】
また、光信号及び光センサ11を用いることで、従来技術にあるようにスクリーン1に指示棒を接触させる必要がないため、プレゼンテータPがスクリーン1から離れた位置にいても説明がし易く、説明しながら恰も黒板にペンで線を書く感覚でスクリーン1上の元画像にある種の画像パタンをマーキングできる。また、反射型スクリーンであるので、前述の投影型スクリーンにあるような不具合もない。
【0024】
光センサ11で光信号を感知する場合、投影画像自体が画像に応じて様々な色を放っているので、光センサ11は光信号と投影画像の光とを分離してセンシングできなければならず、このため光信号としては、赤外光を用いるか、あるいは光の照射強度にある変調を掛けた可視光を用い、光センサ11が画像の光と分離し感知できるように構成することが望ましい。
【0025】
光信号として赤外光を用いる場合、光センサ11としては、従来より一般に使用されている光センサ11を用いることができ、例えば、焦電型センサ、量子型センサ(参考;丹野他「センサの基礎とその応用」森北出版)等を利用できる。これらのセンサは比較的安価であるため、スクリーン1の製作コストの点で有利である。また投影画像と光の波長域が異なるため、フィルタリング等を施すことで、安定した信号検出が可能である。
【0026】
また、光信号として可視光を用いる場合、光学的ポインタ4に赤外光と可視光を共に発信する機構を設ける必要がなく、光学的ポインタ4の構成を簡素化できる。また、位置合わせ手段としてプロジェクタ2で扱う可視光によって光信号を発信できるので、プロジェクタ2に赤外光を発信するための機構か必要なく、負担が掛からない。但し、光センサ11及び光センサ11の信号を伝達する導体は、透明かスクリーンの地の色と同系統の色合いとし、投影画像の品質が低下しないように配慮する必要がある。
【0027】
ここで、本発明は、図1の画像入力装置3に、光線(光信号)を感知した光センサ11から発せられる電気信号に基づきスクリーン1上の光線の位置(スクリーン上座標)を計算する光線位置検出手段、光線位置検出手段により計算されたスクリーン上座標を基準に、ある定められた画像パタンを元画像に重ね合わせるための位置合わせ手段、及び画像信号を合成する画像編集手段としての機能を持たせている。
【0028】
ここで、スクリーン上座標と投影画像座標の位置合わせの概念について以下説明する。
図4(a),(b),(c)はスクリーン1に画像が投影されている場合の投影範囲10(一点鎖線で表示される領域)を示している。プロジェクタ2からの投影画像は、一般的には放射状の光であり、輪郭は長方形をなしている。
【0029】
その光軸がスクリーン1の法線と平行であれば、(a)に示す通り画像が歪むことなく長方形を保っている。光線が法線に対して上下方向にある角度を持っている場合は、長方形は(b)に示すような形状に歪み、同時に画像も歪む。光軸が法線に対して左右方向にある角度を持っている場合は、長方形は(c)に示すような形状に歪み、同時に画像も歪む。
【0030】
図5にはスクリーン1とその表面に配置された光センサ11が示されており、各光センサ11はスクリーン上座標と対応している。図では便宜上(1,1)から(24,14)までの336個のセンサが示されている。また、図では光センサ11の配置が認識できるように輪郭を示しているが、実際には投影画像の視認性を妨げないように、透明かスクリーン地の色と同系色にすることが望ましい。
【0031】
一方、投影画像は前述の通り、ある歪みを持ってスクリーン1上に投影されることが多い(投影範囲10)。投影画像座標を仮に(1,1)から(640,480)に設定すると、その(1,1)のスクリーン上座標〔図中では(3,3)〕、(640,1)のスクリーン上座標〔図中では(23,3)〕、及び(640,480)のスクリーン上座標〔図中では(18,13)〕を予め光線位置検出手段により認識しておくことで、位置合わせ手段により、任意の投影画像座標に対応するスクリーン上座標が比例計算により得られる。
【0032】
即ち、任意の位置の文字列に下線を引く、あるいは文字列を線で囲む等の操作を行う場合、予め位置合わせを行っておくことにより、スクリーン1上の該当部分に光線を照射することで、投影画像座標のどの部分にこれらの画像パタンを合成すべきか計算できるようになる。
【0033】
ここに示した例においては、投影画像の左上隅の点〔投影画像座標における(1,1)の点〕と、右上隅の点〔投影画像座標における(640,1)の点〕、及び右下隅の点〔投影画像座標における(640,480)の点)を光学的ポインタ4で指示し、位置合わせを行っているが、投影画像座標は(1,1)、(640,1)及び(640,480)である必要はなく、任意の複数の点(3点以上が望ましい)を設定してよい。
【0034】
ここで、例えば、プレゼンテータPの手による位置合わせを行っても良い(以下、本発明における参考例と称する)が、本発明では、予め投影画像中に位置合わせ用の光信号を加えている。どちらの場合もプロジェクタ2を立ち上げた直後にこの操作を行うことで、投影画像座標とスクリーン上座標の位置関係が画像入力装置3内に記憶されるので、以後プロジェクタ2とスクリーン1の位置関係が変わらない限り、操作する必要はない。
【0035】
参考例では、位置合わせ用の光信号の照射をプレゼンテータP自身が行うので、プロジェクタ2または画像入力装置3に光信号発生のための機構を設ける必要がなく、コスト的に有利である。一方、本発明では、使用者が意識することなく、自動で位置合わせが行われるため、便利である。
【0036】
次に図7を用いて、スクリーン上座標と投影画像座標の位置関係計算までの動作説明を行う。ここでは光学的ポインタ4による位置合わせを説明する。
プロジェクタ2、画像入力装置3、光学的ポインタ4、スクリーン1の各電源を投入すると、プロジェクタ2、画像入力装置3、光学的ポインタ4は内部テスト等のイニシャライズを行う(S1−1〜S1−3)。またスクリーン1は光センサ11の電源をオンする(S1−4)。
【0037】
イニシャライズ終了後、プロジェクタ2から光線位置検出用画像パタンが表示される(S2)。この画像では使用者に対して位置合わせのための光照射を行うよう画面中で促し、照射する部分を示す(図8参照)。この照射部に向けてプレゼンテータPは光学的ポインタ4の光線を照射する(S3)。
【0038】
光線が照射されると、光センサ11により光線が検出され(S4)、その信号が画像入力装置3内の光線位置検出手段にてスクリーン上座標として認識され、さらに投影画像座標との位置関係が位置合わせ手段により計算される(S5)。
【0039】
この光学的ポインタ4を使用した画像パタン形成方法の例を図3及び図9を用いて説明する。図9においては、図7におけるスクリーン上座標と投影画像座標の位置合わせが終了し、実際に使用する場面から説明する。
【0040】
始めにプレゼンテータPは、画像入力装置3から投影すべき元画像をプロジェクタ2に送り(S11)、プロジェクタ2はこの画像をスクリーン1に投影する(S12)。画像入力装置3としてパソコンを使用する場合、プレゼンテーション用のアプリケーションソフトを起動し、このアプリケーションソフト上で投影すべき所望のファイルを読み込み、これをパソコン画面に出力する代わりに、もしくはパソコン画面に出力するのと同時に、プロジェクタ2に出力するのが一般的である。プレゼンテータPは、投影された画像を基に、聴講者に光学的ポインタ4を使用して説明を行い、必要に応じて元画像に画像パタンを書き加える。
【0041】
図3において、ボタン42aを押し続けることで光線(光信号)が照射され、可視光線によってスクリーン1上の画像が指示できると共に、赤外光線によって光センサ11に位置が検出される。ボタン42aを離すと最後に検出した光センサ11の位置情報(画像パタン開始点と呼ぶ)が光線位置検出手段に送られる(S13)。
【0042】
引き続き別の点を同様にボタン42aにより指示し、画像パタンの別の点(画像パタン終了点)を指定する(S14)。画像パタンとして、ボタン43のそれぞれに直線、波線、長方形、楕円等が割り当てられており、画像パタン開始点及び終了点を指定後、所望のボタン43を押すことで(S15)、画像パタンが元画像に合成され形成できる。
【0043】
仮に直前の指示をキャンセルする場合はボタン42bを押せばよい。また、形成した画像パタンを消去するには、ボタン42bをダブルクリックすることで対応させる。これらの操作に対応するボタンはここに示した例に止まらず、本発明の意図を逸脱するものでなければ、自由に組み合わせることができる。
【0044】
上述したように本発明では、プロジェクタ2の立ち上げ時にプロジェクタ2からスクリーン1に投影した元画像の輪郭を位置検出手段により検出し、計算するものであるが、これが歪んで視認性に欠ける場合には、画像を補正し視認性に優れた画像を投影することもできる。
【0045】
プロジェクタ2の画像をスクリーン1に映し出すとき、上述したように往々にして図4(b),(c)に示すように投影領域が歪んでしまうことがある。この歪みが大き過ぎると視認性が悪化してしまい支障となる。そこでこの領域が長方形から大幅に歪んでおり補正の必要がある場合は、現状の投影領域内で最も大きな形状となる元画像と相似形の長方形を補正投影領域として計算し、補正画像を投影すれば、視認性が回復する。勿論この補正画像投影を行っているときに前述の画像パタンマーキングを行うこともできる。
【0046】
図10には位置合わせ手段により計算される元画像の画像投影範囲を、ある定まった領域に変換する画像編集の例を示す。
スクリーン上座標と投影画像座標の位置関係計算までは(S1−1〜S1−4,S2〜S5)、図7と同様であるので説明は省略する。図10に示すフローではその後、投影領域の補正(S6)、元画像の座標変換(S7)を行い、補正画像をスクリーン1に投影する。
【0047】
具体的には、位置合わせの例として、図6において元画像の投影範囲10の4つの頂点〔図中スクリーン上座標として(2,1)、(24,1)、(4,13)、(22,13)に相当する〕を光センサ11により測定し、この領域内で投影画像の長方形と相似形の最大の長方形となる補正領域13を計算し、元画像を上述した手動、自動の位置合わせ手段により計算し、補正領域13に収まる補正画像を得て投影すればよい。
【0048】
【発明の効果】
請求項1記載の発明によれば、画像入力装置は、光線を感知した光センサから発せられる電気信号に基づき、スクリーン上の光線の位置であるスクリーン上座標を計算し、計算されたスクリーン上座標を基準に、ある定められた画像パタンを元画像に重ね合わせ、さらに、元画像と画像パタンの画像信号を合成するので、光学的ポインタを利用して、黒板に線を書く感覚でスクリーン上の元画像にある種の画像パタンを容易にマーキングすることができる。
【0050】
また本発明によれば、スクリーン上に形成(投影)されている元画像に重ね合わせ、プレゼンテータの操作により、あるパタンの画像を描画(投影)する技術において、必要となる位置合わせに際し、プレゼンテータが意識することなく、自動で位置合わせを行うことができ、使い勝手を向上することができる。
【図面の簡単な説明】
【図1】本発明の実施の形態を示す画像投影システムの全体構成図である。
【図2】スクリーンの概略構成図である。
【図3】光学的ポインタの概略構成図である。
【図4】スクリーン上に画像が投影されている場合の投影範囲を示す図である。
【図5】スクリーン上の光センサと投影範囲を示す図である。
【図6】元画像の投影範囲と補正領域を示す図である。
【図7】光学的ポインタによるスクリーン上座標と投影画像座標の位置合わせ時のフローチャートである。
【図8】光線位置検出用画像パタンを示す図である。
【図9】画像パタン形成方法のフローチャートである。
【図10】位置合わせ手段により計算される元画像の画像投影範囲を、ある定まった領域に変換する画像編集時のフローチャートである。
【符号の説明】
1 スクリーン
2 プロジェクタ
3 画像入力装置
4 光学的ポインタ
5 ポインタ照射位置
11 光センサ
12 光線位置検出手段
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image projection system that projects an image from a projector onto a screen.
[0002]
[Prior art]
In recent years, there have been increasing opportunities for lecturers, lectures, explanations and the like to a plurality of listeners using a projector. This is mainly due to the fact that the quality of the projected image of the projector has increased and the hardware and software functions of information input devices such as personal computers have been enhanced.
[0003]
However, in the conventional image projection system, in order to edit the image projected on the screen, the projector user (referred to as the presenter), or an agent on the information input device such as a personal computer, operates the mouse and inputs the key. I had to do some operations.
[0004]
Therefore, even if the presenter tries to underline or surround the character string to be emphasized in the explanatory text in order to increase the effect of the explanation, the operation of the personal computer during the explanation is troublesome and it cannot be left to the thought.
[0005]
In order to solve this problem, it is necessary to have a technique capable of marking a certain image pattern in the original image on the screen as if writing a line with a pen on the blackboard while explaining.
[0006]
In Japanese Patent Laid-Open No. 5-46129, a screen having a magnetic sensor and an indicator bar (magnet pointer) provided with a magnet at the tip are combined, and the presenter indicates the position on the screen with the magnetic pointer and is detected by the magnet sensor. The supplied signal is supplied to the coordinate detection device, and the coordinate data from this is input to the image signal processing device, and the image signal supplied from the image source is synthesized as a symbol M, and this display signal is sent from the projector to the screen. An image display apparatus for projecting is provided. Japanese Patent Application Laid-Open No. 8-160539 discloses a non-contact type input method in addition to a contact type input method.
[0007]
[Problems to be solved by the invention]
The apparatus disclosed in Japanese Patent Application Laid-Open No. 5-46129 can improve the annoyance because the position can be specified with an indicator bar and an image can be formed on the screen. However, when giving a lecture at a large venue, the presenter often explains from the place with some distance from the screen with an optical pointer, rather than explaining while holding the pointing rod near the screen. It cannot be applied to the venue.
[0008]
Further, there is no means for matching the coordinate data on the screen with the image signal data in the image signal processing apparatus, and when the projector is moved with respect to the screen, the positional relationship between the position of the original image on the screen and the symbol M is not matched. .
[0009]
Further, the technique disclosed in Japanese Patent Laid-Open No. 8-160539 is effective only for a transmissive projector and is not suitable for a reflective projector (usually, the image projection of a projector is performed by projecting from the back surface of a translucent screen. There is a “transmission type” that forms an image on top and a “reflection type” that projects from the surface side of the white screen and forms an image on the screen surface).
[0010]
In a reflection type projector, since the projector main body and the screen can be separated and transported, the projector is excellent in portability, is inexpensive compared with the transmission type, and has better image quality than the transmission type. Therefore, it is a fatal defect that it is not suitable for a reflection type projector having such advantages.
[0011]
The present invention has been made in view of the above-described problems, and provides an image projection system that allows a presenter to perform marking or the like with a simple operation by superimposing an image on a screen at the time of explanation in a reflective projector. It is intended.
[0012]
[Means for Solving the Problems]
In order to achieve the above object, the invention described in claim 1 is directed to a reflective screen, a projector for projecting an image on the screen, an image input device for supplying an image signal to the projector, and an image on the screen. In the image forming system provided with the optical pointer, the screen has a matrix of optical sensors that detect light emitted from the optical pointer, and the projector outputs a plurality of optical signals of the same type as the optical pointer. The image input device projects an image on the screen in a state including the location, and the image input device calculates the coordinates on the screen, which is the position of the light beam on the screen, based on the electrical signal emitted from the light sensor that senses the light beam. Based on the coordinates on the screen calculated by the position detection function, a certain image pattern is superimposed on the original image. Alignment features for aligning, and the original image and the image signal of the image pattern have a image editing function of combining, the alignment feature is a screen on the coordinates and the projection image in a detected position the optical signal on the screen The relative position relationship between the on-screen coordinates and the projected image coordinates is calculated from the projected image coordinates which are the light signal irradiation positions of the two, and the two are aligned .
[0013]
In order to achieve the above object, according to a second aspect of the present invention, there is provided the image projection system according to the first aspect , wherein the image input device performs correction projection from the coordinates on the screen of the projection image obtained by the light beam position detection function. It has a correction function of calculating an area and correcting the original image so that the projected image is not distorted on the screen .
[0015]
According to the first aspect of the present invention, the image input device calculates the coordinates on the screen, which is the position of the light beam on the screen, based on the electrical signal emitted from the light sensor that senses the light beam, and uses the calculated screen coordinate as a reference. In addition, a predetermined image pattern is superimposed on the original image, and further, the original image and the image signal of the image pattern are synthesized.
[0017]
According to the first aspect of the present invention, in the technique for superimposing the original image formed (projected) on the screen and drawing (projecting) an image of a certain pattern by the operation of the presenter, the necessary alignment is performed. Alignment is performed automatically without the presenter being aware of it.
[0018]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is an overall configuration diagram of an image projection system showing an embodiment of the present invention.
The image projection system includes a reflective screen 1, a projector 2 for projecting an image onto the screen 1, an image input device 3 for supplying an image signal to the projector 2, and an optical pointer for indicating an image on the screen 1. 4 is provided.
[0019]
The image input device 3 receives an electrical signal emitted from the optical sensor on the screen 1 when receiving the optical signal, and based on this signal, a light beam position detecting means for calculating the light irradiation position 5 on the screen 1, a light beam position detection It can also serve as image editing means for synthesizing an image signal obtained by superimposing a predetermined image on the original image on the basis of the light beam position calculated by the means. The presenter P can irradiate the screen 1 with visible light by the optical pointer 4 to indicate a desired position of the projected image on the screen 1.
[0020]
FIG. 2 is a schematic configuration diagram of the screen.
On the surface of the screen 1, there are a plurality of transparent or similar color optical sensors 11 arranged in a matrix, and when each optical sensor 11 receives a specific light beam (optical signal), the optical sensor 11 The position of the photosensor 11 that has been displaced from the off level to the on level and that has been displaced (that is, irradiated with light) is recognized by the light beam position detecting means 12 as on-screen coordinates.
[0021]
The light beam position detection unit 12 may be installed as a single device and transmit a light beam position signal to the image editing unit, but may be incorporated in the image input device 3. The arrangement interval of the photosensors 11 should be close in order to increase the position resolution, but the manufacturing cost increases as the density increases, so it should be determined from the viewpoint of cost performance. Usually, the optical sensors 11 are arranged at intervals of several mm to several cm.
[0022]
Thus, by arranging the optical sensors 11 on the screen 1 in a matrix, the image is superimposed on the original image formed (projected) on the screen 1 and a certain image pattern is drawn (projected) by the operation of the presenter P. It becomes possible.
[0023]
In addition, by using the optical signal and the optical sensor 11, it is not necessary to bring the indicator bar into contact with the screen 1 as in the prior art. Therefore, even when the presenter P is away from the screen 1, it is easy to explain. On the other hand, it is possible to mark a certain image pattern in the original image on the screen 1 as if writing a line with a pen on the blackboard. Moreover, since it is a reflection type screen, there is no malfunction which exists in the above-mentioned projection type screen.
[0024]
When the optical signal is sensed by the optical sensor 11, the projection image itself emits various colors depending on the image. Therefore, the optical sensor 11 must be able to sense the optical signal and the light of the projection image separately. For this reason, it is desirable to use infrared light as the optical signal or visible light obtained by applying a modulation to the light irradiation intensity so that the optical sensor 11 can be separated and sensed from the image light. .
[0025]
When infrared light is used as the optical signal, the optical sensor 11 that has been conventionally used can be used as the optical sensor 11. For example, a pyroelectric sensor, a quantum sensor (reference: Tanno et al. Basic and its application (Morita Kita Publishing) etc. can be used. Since these sensors are relatively inexpensive, they are advantageous in terms of the production cost of the screen 1. In addition, since the projection image and the wavelength range of light are different, stable signal detection is possible by performing filtering or the like.
[0026]
Further, when visible light is used as an optical signal, it is not necessary to provide the optical pointer 4 with a mechanism for transmitting both infrared light and visible light, and the configuration of the optical pointer 4 can be simplified. Further, since the optical signal can be transmitted by the visible light handled by the projector 2 as the alignment means, a mechanism for transmitting the infrared light to the projector 2 is not necessary and no burden is applied. However, the optical sensor 11 and the conductor that transmits the signal of the optical sensor 11 should be transparent or have the same color as the background color of the screen so that the quality of the projected image does not deteriorate.
[0027]
Here, in the present invention , the image input device 3 in FIG. 1 calculates the position (coordinate on the screen) of the light beam on the screen 1 based on the electric signal emitted from the optical sensor 11 that senses the light beam (light signal). Functions as a position detecting means, a positioning means for superimposing a predetermined image pattern on the original image, and an image editing means for synthesizing image signals based on the coordinates on the screen calculated by the light position detecting means. I have it.
[0028]
Here, the concept of alignment between the coordinates on the screen and the projected image coordinates will be described below.
4A, 4 </ b> B, and 4 </ b> C show a projection range 10 (region displayed by a one-dot chain line) when an image is projected on the screen 1. The projection image from the projector 2 is generally radial light and has a rectangular outline.
[0029]
If the optical axis is parallel to the normal line of the screen 1, the image is kept rectangular without distortion as shown in FIG. When the light ray has an angle in the vertical direction with respect to the normal line, the rectangle is distorted into a shape as shown in (b), and the image is also distorted at the same time. When the optical axis has an angle in the left-right direction with respect to the normal, the rectangle is distorted into a shape as shown in (c), and the image is also distorted at the same time.
[0030]
FIG. 5 shows a screen 1 and optical sensors 11 arranged on the surface thereof, and each optical sensor 11 corresponds to a coordinate on the screen. In the figure, 336 sensors from (1,1) to (24,14) are shown for convenience. Further, in the drawing, the contour is shown so that the arrangement of the optical sensor 11 can be recognized, but in reality, it is desirable to be transparent or a color similar to the color of the screen so as not to disturb the visibility of the projected image.
[0031]
On the other hand, as described above, the projected image is often projected onto the screen 1 with a certain distortion (projection range 10). If the projected image coordinates are set from (1,1) to (640,480), the (1,1) on-screen coordinates ((3,3) in the figure), (640,1) on-screen coordinates. The coordinates on the screen [(23, 3) in the figure] and (18, 13) in the figure ((18, 13) in the figure) are recognized in advance by the light beam position detecting means. On-screen coordinates corresponding to arbitrary projected image coordinates are obtained by proportional calculation.
[0032]
In other words, when an operation such as underlining a character string at an arbitrary position or enclosing the character string with a line is performed, by aligning in advance, the corresponding part on the screen 1 is irradiated with light. It becomes possible to calculate to which part of the projected image coordinates these image patterns should be synthesized.
[0033]
In the example shown here, a point at the upper left corner of the projected image (point (1, 1) in the projected image coordinates), a point at the upper right corner (point (640, 1) in the projected image coordinates), and the right The lower corner point (point of (640, 480) in the projected image coordinates) is pointed by the optical pointer 4 to perform alignment, but the projected image coordinates are (1, 1), (640, 1) and ( 640, 480), and a plurality of arbitrary points (preferably three or more points) may be set.
[0034]
Here, for example, positioning by the hand of the presenter P may be performed (hereinafter referred to as a reference example in the present invention), but in the present invention , an optical signal for positioning is added to the projection image in advance. In either case, by performing this operation immediately after starting up the projector 2, the positional relationship between the projected image coordinates and the coordinates on the screen is stored in the image input device 3. As long as does not change, there is no need to operate.
[0035]
In the reference example , since the presenter P itself emits the optical signal for alignment, it is not necessary to provide the projector 2 or the image input device 3 with a mechanism for generating the optical signal, which is advantageous in terms of cost. On the other hand, the present invention is convenient because the alignment is performed automatically without the user being aware of it.
[0036]
Next, with reference to FIG. 7, the operation up to the calculation of the positional relationship between the coordinates on the screen and the projected image coordinates will be described. Here, alignment by the optical pointer 4 will be described.
When each power source of the projector 2, the image input device 3, the optical pointer 4, and the screen 1 is turned on, the projector 2, the image input device 3, and the optical pointer 4 perform initialization such as an internal test (S1-1 to S1-3). ). The screen 1 turns on the power of the optical sensor 11 (S1-4).
[0037]
After the initialization is completed, a light beam position detection image pattern is displayed from the projector 2 (S2). In this image, the user is prompted on the screen to irradiate with light for alignment, and the irradiated portion is shown (see FIG. 8). The presenter P emits the light beam of the optical pointer 4 toward the irradiation unit (S3).
[0038]
When the light beam is irradiated, the light beam is detected by the optical sensor 11 (S4), the signal is recognized as a coordinate on the screen by the light beam position detecting means in the image input device 3, and the positional relationship with the projected image coordinate is further determined. Calculated by the alignment means (S5).
[0039]
An example of an image pattern forming method using the optical pointer 4 will be described with reference to FIGS. In FIG. 9, a description will be given from a scene where the on-screen coordinates and the projected image coordinates in FIG.
[0040]
First, the presenter P sends an original image to be projected from the image input device 3 to the projector 2 (S11), and the projector 2 projects this image on the screen 1 (S12). When a personal computer is used as the image input device 3, the application software for presentation is started, and a desired file to be projected on the application software is read and output to the personal computer screen instead of being output to the personal computer screen. At the same time, it is generally output to the projector 2. The presenter P explains to the listener using the optical pointer 4 based on the projected image, and adds an image pattern to the original image as necessary.
[0041]
In FIG. 3, a light beam (light signal) is irradiated by continuing to press the button 42a, an image on the screen 1 can be indicated by a visible light beam, and the position of the optical sensor 11 is detected by an infrared light beam. When the button 42a is released, the last detected position information of the optical sensor 11 (referred to as an image pattern start point) is sent to the light beam position detecting means (S13).
[0042]
Subsequently, another point is similarly designated by the button 42a, and another point of the image pattern (image pattern end point) is designated (S14). As the image pattern, a straight line, a wavy line, a rectangle, an ellipse, etc. are assigned to each of the buttons 43. After designating the image pattern start point and end point, pressing the desired button 43 (S15), the image pattern is restored to the original pattern. Can be synthesized and formed into an image.
[0043]
If the previous instruction is canceled, the button 42b may be pressed. Further, the formed image pattern can be erased by double-clicking the button 42b. The buttons corresponding to these operations are not limited to the examples shown here, and can be freely combined without departing from the intention of the present invention.
[0044]
As described above, in the present invention, when the projector 2 is started up, the contour of the original image projected from the projector 2 onto the screen 1 is detected and calculated by the position detection means, but this is distorted and lacks visibility. Can also correct the image and project an image with excellent visibility.
[0045]
When the image of the projector 2 is displayed on the screen 1, as described above, the projection area is often distorted as shown in FIGS. 4 (b) and 4 (c). If this distortion is too large, the visibility deteriorates, which is a problem. Therefore, if this area is significantly distorted from the rectangle and needs to be corrected, calculate the corrected image with a rectangle similar to the original image that has the largest shape in the current projection area, and project the corrected image. Visibility is restored. Of course, the above-mentioned image pattern marking can also be performed during the correction image projection.
[0046]
FIG. 10 shows an example of image editing in which the image projection range of the original image calculated by the alignment means is converted into a predetermined area.
Since the calculation of the positional relationship between the coordinates on the screen and the projected image coordinates (S1-1 to S1-4, S2 to S5) is the same as that in FIG. In the flow shown in FIG. 10, the projection area is corrected (S 6) and the original image coordinates are converted (S 7), and the corrected image is projected onto the screen 1.
[0047]
Specifically, as an example of alignment, four vertices of the projection range 10 of the original image in FIG. 6 ((2, 1), (24, 1), (4, 13) ( 22 and 13)] is measured by the optical sensor 11, and a correction area 13 which is the largest rectangle similar to the rectangle of the projected image is calculated within this area, and the original image is manually and automatically positioned as described above. What is necessary is just to obtain and project a corrected image that is calculated by the matching means and fits in the correction area 13.
[0048]
【The invention's effect】
According to the first aspect of the present invention, the image input device calculates the coordinates on the screen, which is the position of the light beam on the screen, based on the electrical signal emitted from the optical sensor that senses the light beam, and the calculated on-screen coordinates. Based on the above, a predetermined image pattern is superimposed on the original image, and further, the image signal of the original image and the image pattern is synthesized, so the optical pointer is used to draw a line on the blackboard on the screen. It is possible to easily mark certain image patterns in the original image.
[0050]
Further , according to the present invention , in the technique for superimposing the original image formed (projected) on the screen and drawing (projecting) an image of a pattern by the operation of the presenter, the presenter Without being conscious, it is possible to automatically align the position and improve usability.
[Brief description of the drawings]
FIG. 1 is an overall configuration diagram of an image projection system showing an embodiment of the present invention.
FIG. 2 is a schematic configuration diagram of a screen.
FIG. 3 is a schematic configuration diagram of an optical pointer.
FIG. 4 is a diagram illustrating a projection range when an image is projected on a screen.
FIG. 5 is a diagram showing an optical sensor on a screen and a projection range.
FIG. 6 is a diagram illustrating a projection range and a correction area of an original image.
FIG. 7 is a flowchart at the time of alignment of on-screen coordinates and projected image coordinates with an optical pointer.
FIG. 8 is a diagram showing a light position detection image pattern;
FIG. 9 is a flowchart of an image pattern forming method.
FIG. 10 is a flowchart at the time of image editing for converting the image projection range of the original image calculated by the alignment unit into a predetermined area.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Screen 2 Projector 3 Image input device 4 Optical pointer 5 Pointer irradiation position 11 Optical sensor 12 Ray position detection means

Claims (2)

反射型のスクリーン、画像をスクリーンに投影するためのプロジェクタ、プロジェクタに画像信号を供給する画像入力装置、スクリーン上の画像を指示するための光学的ポインタを備えた画像形成システムにおいて、
スクリーンは、光学的ポインタから照射される光線を感知する光センサがマトリクス状に配置されており、
プロジェクタは、光学的ポインタと同種の光信号を複数個所含んだ状態でスクリーンに画像投影し、
画像入力装置は、光線を感知した光センサから発せられる電気信号に基づき、スクリーン上の光線の位置であるスクリーン上座標を計算する光線位置検出機能、光線位置検出機能により計算されたスクリーン上座標を基準に、ある定められた画像パタンを元画像に重ね合わせるための位置合わせ機能、及び元画像と画像パタンの画像信号を合成する画像編集機能を有し、
位置合わせ機能は、スクリーン上の前記光信号を検出した位置であるスクリーン上座標と投影画像中の光信号照射位置である投影画像座標とから、スクリーン上座標と投影画像座標の相対位置関係を計算して両者の位置合わせを行うことを特徴とする画像投影システム。
In an image forming system comprising a reflective screen, a projector for projecting an image on a screen, an image input device for supplying an image signal to the projector, and an optical pointer for indicating an image on the screen,
The screen is arranged in a matrix of optical sensors that detect the light emitted from the optical pointer.
The projector projects an image onto the screen with multiple optical signals of the same type as the optical pointer,
The image input device calculates the coordinates on the screen, which is the position of the light beam on the screen, based on the electrical signal emitted from the light sensor that senses the light beam, and the coordinates on the screen calculated by the light beam position detection function. the reference, possess certain defined position adjustment function for superimposing on the original image the image pattern, and the image editing function of combining the image signals of the original image and the image pattern,
The alignment function calculates the relative positional relationship between the on-screen coordinates and the projected image coordinates from the on-screen coordinates where the light signal is detected on the screen and the projected image coordinates as the light signal irradiation position in the projected image. Then , the image projection system is characterized in that both are aligned .
請求項1記載の画像投影システムにおいて、  The image projection system according to claim 1.
画像入力装置は、前記光線位置検出機能で得られた投影画像のスクリーン上座標から補正投影領域を計算し、スクリーン上で投影画像に歪みが生じないように、元画像を補正する補正機能を有することを特徴とする画像投影システム。  The image input device has a correction function for calculating a corrected projection area from the coordinates on the screen of the projection image obtained by the light beam position detection function and correcting the original image so that the projection image is not distorted on the screen. An image projection system characterized by that.
JP18712299A 1999-07-01 1999-07-01 Image projection system Expired - Fee Related JP4142814B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP18712299A JP4142814B2 (en) 1999-07-01 1999-07-01 Image projection system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP18712299A JP4142814B2 (en) 1999-07-01 1999-07-01 Image projection system

Publications (2)

Publication Number Publication Date
JP2001013935A JP2001013935A (en) 2001-01-19
JP4142814B2 true JP4142814B2 (en) 2008-09-03

Family

ID=16200508

Family Applications (1)

Application Number Title Priority Date Filing Date
JP18712299A Expired - Fee Related JP4142814B2 (en) 1999-07-01 1999-07-01 Image projection system

Country Status (1)

Country Link
JP (1) JP4142814B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100467612B1 (en) * 2002-09-17 2005-01-24 삼성전자주식회사 Apparatus and method for determining the location of mouse laser pointer
US7746321B2 (en) 2004-05-28 2010-06-29 Erik Jan Banning Easily deployable interactive direct-pointing system and presentation control system and calibration method therefor
JP4770197B2 (en) * 2005-02-28 2011-09-14 カシオ計算機株式会社 Presentation control apparatus and program
US9285897B2 (en) 2005-07-13 2016-03-15 Ultimate Pointer, L.L.C. Easily deployable interactive direct-pointing system and calibration method therefor
JP2007114820A (en) * 2005-10-18 2007-05-10 Sharp Corp Portable pointer device and display system
JP5152317B2 (en) * 2010-12-22 2013-02-27 カシオ計算機株式会社 Presentation control apparatus and program
JP2015097042A (en) * 2013-11-15 2015-05-21 キヤノン株式会社 Image correction system and coordinate input device
CN110365950A (en) * 2018-04-09 2019-10-22 深圳市诚壹科技有限公司 A kind of projecting method, projector and computer readable storage medium

Also Published As

Publication number Publication date
JP2001013935A (en) 2001-01-19

Similar Documents

Publication Publication Date Title
US7176904B2 (en) Information input/output apparatus, information input/output control method, and computer product
US6507339B1 (en) Coordinate inputting/detecting system and a calibration method therefor
JP4627781B2 (en) Coordinate input / detection device and electronic blackboard system
US6847356B1 (en) Coordinate input device and its control method, and computer readable memory
US20030222849A1 (en) Laser-based user input device for electronic projection displays
JP2000105671A (en) Coordinate input and detecting device, and electronic blackboard system
EP1081635A2 (en) Coordinate input apparatus
JP2007048135A (en) Method for acquiring coordinate position on projection plane using dmd
JP4142814B2 (en) Image projection system
JP2001075735A (en) Coordinate input device, its method and computer readable memory
CA2367864C (en) Interactive display apparatus for displaying computer-generated image projected thereon
JPH0980372A (en) Projection type display device
JP3832132B2 (en) Display system and presentation system
US6317266B1 (en) Coordinate input apparatus
US20030210230A1 (en) Invisible beam pointer system
US10409143B2 (en) Tracking a handheld device on surfaces with optical patterns
JP2001075737A (en) Coordinate input device, its method and computer readable memory
JP2017117020A (en) Display device, display system, and method
JP4434381B2 (en) Coordinate input device
JP6569259B2 (en) POSITION DETECTION DEVICE, DISPLAY DEVICE, POSITION DETECTION METHOD, AND DISPLAY METHOD
JPS60138628A (en) Screen indication input device
JP2006260487A (en) Pointer system
JP4612751B2 (en) Input / output integrated device
JP2969285B2 (en) Input device for CAD
JPH08160539A (en) Optical blackboard

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040902

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20040930

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080226

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080428

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080610

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080613

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110620

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110620

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120620

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130620

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees