JP2006154902A - 手書き画像表示システム及び空間手書き用携帯情報端末 - Google Patents

Abstract

【課題】所望の空間に仮想的な書き込みを行うとともに、その書き込み内容を書き込み位置に関する情報とともに記録することができる手書き画像表示システムを提供すること。
【解決手段】仮想面に手書きで書き込む様子を撮像した書き込み画像を入力する画像入力部１と、書き込み画像から画像処理により手書き画像を得る手書き抽出部２と、絶対座標及び書き込み／読み込み方向を含む書き込み及び読み込みの位置情報を検出する絶対座標検出部３と、手書き画像を書き込み位置の情報とともに記録する画像記録部４と、手書き画像等の情報を送受信する通信部５と、手書き画像を表示する画像表示部２０及び画像表示部２０からの光を反射するとともに使用者の視線方向の実視野からの光を透過するコンバイナーを有する手書き画像表示装置とを備え、コンバイナーを通すことで画像表示部２０に表示した手書き画像の虚像を実視野に重畳して表示する。
【選択図】図１

Description

本発明は、所望の空間上に書き込んだ仮想的な書き込みの内容を位置情報とともに記録し、この書き込みを複数の装置保持者が同一位置で互いに読み出すとともに、追加の書き込みも行うことができる手書き画像表示システムに関する。

従来より、平面的な実体（たとえば手書き入力パネル等）のない状況でも、空間上に手書き等の方法で仮想的に文字や図形をなぞることにより、その経路から文字パターンや図形パターンを入力することができる空間手書き図形入力装置が提案されている。この装置では、手書きにより文字や図形をなぞる指先にセンサを装着し、同センサの移動に伴う空間位置の空間座標から移動速度や加速度を測定してトレース像を抽出するように構成されている。（たとえば、特許文献１参照）
特開平６−２８０９６号公報（〔図１〕及び〔図２〕を参照）

しかしながら、上述した従来技術の空間手書き図形入力装置は、指先と一体に移動するセンサの移動速度や加速度を測定して指先の軌跡を抽出し、センサと一体に移動する指先をトレースしてその軌跡を入力（記録）するものであるから、実際に手書き入力を行った位置に関する情報を得ることはできなかった。
そこで、装置保持者が指先等による仮想的な手書き入力（書き込み）を所望の空間上で行うとともに、その書き込み位置に関する情報も得ることができる手書き画像表示システムの開発が望まれる。

本発明は、上記の事情に鑑みてなされたものであり、その目的とするところは、所望の空間に仮想的な書き込みを行うとともに、その書き込み内容を書き込み位置に関する情報とともに記録することができる手書き画像表示システムを提供することにある。

本発明は、上記の課題を解決するため、下記の手段を採用した。
本発明に係る手書き画像表示システムは、所望の空間に設定した仮想面に手書きで書き込む様子を撮像した書き込み画像を入力する画像入力手段と、前記書き込み画像から画像処理により手書きの軌跡を抽出して手書き画像を得る手書き抽出手段と、前記手書き画像の書き込みを行う位置に関する絶対座標及び書き込み方向を含む書き込み位置の情報と、前記手書き画像の読み出しを行う位置に関する絶対座標及び読み出し方向を含む読み出し位置の情報とを検出する座標検出手段と、前記手書き画像を前記書き込み位置の情報とともに記録する画像記録手段と、前記手書き画像、前記書き込み位置の情報及び前記読み出し位置の情報を送受信する通信手段と、前記手書き画像を前記絶対座標とともに記録する画像記録手段と、前記手書き画像及び絶対座標の情報を送受信する通信手段と、前記手書き画像を表示する画像表示手段及び該画像表示手段からの光を反射するとともに使用者の視線方向の実視野からの光を透過する半透過型光学素子とを少なくとも有する手書き画像表示装置とを備え、前記手書き画像表示装置の使用者から見て前記半透過型光学素子よりも前方の実視野に前記画像表示手段が表示する手書き画像の虚像を重畳して表示することを特徴とするものである。

このような手書き画像表示システムによれば、所望の空間に設定した仮想面に手書きで書き込む様子（背景上で指先や筆記具先端等が移動する様子）を画像入力手段で撮像した書き込み画像を入力し、この書き込み画像から手書き抽出手段の画像処理により手書きの軌跡を抽出して手書き画像を得るとともに、この手書き画像を画像表示手段に表示する。また、手書き画像を画像表示手段に表示することにより、半透過型光学素子が画像表示手段からの光を反射するとともに使用者の視線方向の実視野からの光を透過し、使用者から見て半透過型光学素子よりも前方の実視野に、画像表示手段に表示した手書き画像の虚像が重畳して表示される。
さらに、手書き画像を書き込んだ位置（装置及び仮想面）について、その絶対座標及び書き込み方向を包含する書き込み位置の情報が座標検出手段で検出される。手書き画像及び書き込み位置の情報は、通信手段により他の手書き画像表示システムとの間で送受信できるため、複数の手書き画像表示システム使用者で情報を共有することができる。また、書き込み位置の情報を手書き画像とともに画像記録手段に記録することで、手書き画像表示システムの書き込みモードが完了する。

また、表示モードにおいては、座標検出手段により読み出しをしたい使用者が読み出し位置の情報（絶対座標及び読み出し方向）を検出し、通信手段により送受信される情報の中から、検出した読み出し位置の情報と同じ書き込み位置に対応する手書き画像を検索して画像表示手段に表示する。この結果、半透過型光学素子が画像表示手段からの光を反射するとともに使用者の視線方向の実視野からの光を透過し、使用者から見て半透過型光学素子よりも前方の実視野に、画像表示手段に表示した手書き画像の虚像が重畳して表示される。

請求項１に記載の手書き画像表示システムは、たとえば携帯電話機、デジタルカメラ及びＰＤＡ（Personal Digital Assistance ）等のように、常時持ち歩くことが容易な携帯情報端末に一体化して組み込んだ空間手書き用携帯情報端末とすることが好ましい。

上述した本発明によれば、手書き画像表示システムの使用者が所望の空間上に設定した仮想面に対して指先等による仮想的な手書き入力（書き込み）を行い、この手書き入力による書き込み内容を書き込み位置の情報とともに通信手段により送受信して共有すれば、読み出し時においては、書き込み位置の情報と読み出し位置の情報とが一致する空間上の仮想面に書き込み内容を表示して複数のシステム保有者が互いに読み出し、かつ、同仮想面に新たな書き込みを行うこともできる。
すなわち、実体がなく絶対座標で規定されて移動しない仮想面（たとえば、仮想メモ用紙、仮想掲示板及び仮想のり付き付箋紙等）に手書きで仮想の書き込みを行い、この書き込みを他のシステム所有者が読んだり、あるいは新たに書き加えたりすることが可能になるので、手書き画像表示システムの所有者間のみで互いに情報を共有することが可能になる。

以下、本発明に係る手書き画像表示システムの一実施形態を図面に基づいて説明する。
手書き画像表示システムは、たとえば仮想掲示板のように、所望の実視野空間に設定した仮想面上に手書きで仮想的な書き込みを行い、その書き込み内容を記録するとともに、必要に応じて同一仮想面上に重畳表示した書き込み内容を読み出すことができるように構成されている。なお、仮想掲示板等の仮想面については、予め概略の位置を定めておくことが好ましい。

図３及び図４は、本発明による空間手書き用携帯情報端末及び手書き画像表示システムの具体的な使用状況に係る第１の実施形態を示す図であり、この場合の空間手書き用携帯情報端末（以下、「端末装置」と呼ぶ）１０は、たとえば携帯電話機、デジタルカメラ及びＰＤＡ等の小型で携帯性に優れている携帯情報端末機器類の本体１１内に、手書き画像表示システム（以下、「表示システム」と呼ぶ）を一体的に組み込んだ構成とされる。端末装置１０の本体１１には、画像入力手段となる撮影レンズ１２、図示しない電源等の各種操作スイッチ類、各種制御機構及び制御基板等の他、本体１１を貫通させた開口部１１ａから取り出して使用する開閉式の手書き画像表示装置が設けられている。この手書き画像表示装置は、画像表示部２０及び半透過型光学素子のコンバイナー３０を有する構成とされる。
上述した構成の端末装置１０は、表示システムを使用する際、画像表示部２０及びコンバイナー３０を開き、本体適所を使用者の側頭部に押し当てた状態にして、コンバイナー３０を通して実視界に見える所望の空間に設定した仮想面を見ながら、手書きの書き込みまたは読み出しを行うように構成されている。

ここで、表示システムの構成を図１のブロック図に基づいて説明する。
この表示システム（以下、「第１システム」と呼ぶ）Ｗ１は、所望の空間に設定した仮想掲示板等の仮想面に指先等による手書きで書き込む様子を背景とともに撮像した書き込み画像を入力する画像入力部（画像入力手段）１と、書き込み画像から画像処理により背景の画像を取り除き、手書きの軌跡のみを抽出することで手書き画像を得る手書き抽出部（手書き抽出手段）２と、手書き画像の書き込みを行う位置に関する絶対座標及び書き込み方向を含む書き込み位置の情報と、手書き画像の読み出しを行う位置に関する絶対座標及び読み出し方向を含む読み出し位置の情報とを検出する絶対座標検出部（座標検出手段）３と、手書き画像を書き込み位置の情報とともに互いに関連づけして記録する画像記録部（画像記録手段）４と、手書き画像、書き込み位置の情報及び読み出し位置の情報を送受信する通信部（通信手段）５と、手書き画像を表示する画像表示部（画像表示手段）２０と、画像表示部２０からの光を反射するとともに使用者の視線方向の実視野からの光を透過するコンバイナー３０とを備えており、使用者から見てコンバイナー３０よりも前方の実視野に、画像表示部２０が表示した手書き画像の虚像を仮想面に重畳表示するように構成されている。

画像入力部１は、撮影レンズ１２を含む各種レンズ等を組み合わせた撮影光学系を介して撮像する画像をＣＣＤやＭＯＳ等の半導体素子によりデジタルデータの画像情報に変換し、この画像情報（書き込み画像）を手書き抽出部２に送る機能を有している。ここで撮像する書き込み画像は、たとえば仮想掲示板や仮想のり付き付箋紙（以下、「仮想付箋紙」と呼ぶ）等のように、所望の空間上に設定された実体のない仮想面上に仮想で手書きする様子、すなわち図３に示すように、使用者の指先Ｆ等を移動させることで仮想掲示板４０に仮想の書き込みをしている動作を背景とともに撮像する。なお、手書きにより仮想の書き込みをする仮想面は、後述する絶対座標により規定されるため、位置が移動することはない。

手書き抽出部２は、画像入力部１で撮像した書き込み画像の入力を受け、画像処理により手書きの軌跡を抽出する機能を有している。この場合の画像処理は、書き込み画像に含まれる移動または変化しない背景画像と、手書きで移動する指先Ｆ等の軌跡画像とに分けて区別し、書き込み画像から手書きで入力した文字等の軌跡画像のみを手書き画像として抽出する。すなわち、手書き抽出部２は、入力された書き込み画像の画像処理を行うことにより、手書きの軌跡を抽出して書き込み内容の手書き画像を得るものである。

絶対座標検出部３は、手書き画像を書き込んだ位置に関する絶対座標及び書き込み方向を含む書き込み位置の情報を検出する機能を有している。
第１システムＷ１の書き込み位置座標（絶対座標）は、複数のＧＰＳ衛星５０から発信される電波を受信することにより、地球上における位置や移動方向等を全地球的測位システム（以下、「ＧＰＳシステム」と呼ぶ）を用いて検出される。また、第１システムＷ１の書き込み方向、すなわち書き込み時における第１システムＷ１の向き（上下左右方向）は、図示しないジャイロ等を用いた姿勢検出手段により検出される。この結果、第１システムＷ１で書き込んだ書き込み画像に関して、絶対座標及び書き込み方向を含む書き込み位置の情報を得ることができる。また、画像処理により第１システムＷ１と仮想面４０との位置関係を把握できるので、書き込んだ仮想面４０に関する書き込み位置の情報を得ることもできる。

画像記録部４は、たとえばフラッシュメモリ等の記憶媒体が用いられ、手書き抽出部２で抽出した手書き画像を絶対座標検出部３で検出した書き込み位置の情報と関連づけして記憶する機能を有している。すなわち、手書きの内容を抽出した手書き画像は、書き込みモードで新たに手書き入力を行うたびに、実際に手書きした書き込み位置の情報と関連づけした一対の書き込み情報として画像記録部４に記憶される。

通信部５は、手書き画像、書き込み位置の情報及び読み出し位置の情報を送受信する機能を有している。図示の例では、第１システムＷ１から第ｎシステムＷｎまで複数の表示システムが存在し、各表示システム間は基地局６０を介して情報の送受信を行うことが可能とされる。すなわち、書き込み情報を他の表示システムへ送信するとともに、他の表示システムから書き込み情報を受信することができる。なお、たとえば事業所内のように比較的狭い範囲内で使用する場合には、トランシーバーのように表示システム間で直接送受信するようにして、基地局６０をなくすことも可能である。

画像表示部２０は、書き込みモードにおいては、手書き抽出部２で抽出した手書き中の書き込み画像を表示し、さらに、表示モードにおいては、画像記録部４に記録した書き込み画像（他の表示システムから受信した書き込み画像を含む）を表示する機能を有している。この画像表示部２０は、たとえば液晶表示パネル（ＬＣＤ）や有機ＥＬ表示パネル等のいわゆる薄型ディスプレイが用いられる。なお、画像表示部２０は、図示しないヒンジ等を用い、本体１１に対して揺動自在に軸支されている。

コンバイナー３０は、画像表示部２０からの光、すなわち画像表示部２０の表示面２１（図４参照）に表示される画像の光を反射するとともに、使用者の視線方向の実視野からの光を透過する半透過型光学素子である。換言すれば、コンバイナー３０は、少なくとも１面に自由曲面（３次元非球面）を有し、実視野となる外界像（実像）を透過するとともに、画像表示部２０の表示面２１に表示された手書き軌跡画像の電子画像を光学的に虚像として投影し、外界像の実像に電子画像の虚像を重畳的に表示する半透過型光学素子である。

ここで、図４に基づいてコンバイナー３０の構成を具体的に説明する。
このコンバイナー３０は、格納状態で表示面２１と対向する面に凹曲面状の反射面３１を有する部材であって、使用時には、この反射面３１と表示面２１とが略対向し、かつ、本体１１とともに略Ｚ字状を形成するように開かれている。この使用状態では、本体１１を貫通する開口部１１ａを通じて画像表示部２０の表示面２１から斜め前方へ向けて手書き画像（電子画像）の光が出され、この光（手書き画像の電子画像）は、反射面３１によって本体１１の後端部側（使用者の頭部側）へ向けて反射される。

この反射面３１は凹面鏡として機能するため、本体１１の後端部側となる側面を使用者の頭側部に押し当てた使用状態では、コンバイナー３０の前方に、すなわち、使用者から見てコンバイナー３０よりも遠方に、手書き画像の虚像が結像して表示される。
また、コンバイナー３０において、反射面３１が形成される領域は、使用者の実視界からの光を透過させる構成とされるため、使用者は、コンバイナー３０を通して視線方向遠方に背景を実像として視認できるようになっている。

本実施形態では、コンバイナー３０は、アクリルやポリカーボネート等の透明な材質からなる略長方形の曲面板状部材であって、その片面側に形成された金属膜等の反射層がハーフミラーとして機能する。この反射層の表面が、画像表示部２０の表示面２１から入射した手書き軌跡画像等の光線を表面で反射させる反射面３１となる。
なお、コンバイナー３０は、図示しないヒンジ等を用い、本体１１に対して揺動自在に軸支されている。

次に、上述した構成の空間手書き用携帯情報端末１０について、その作用と、操作及び動作の手順を図２のフローチャートに基づいて説明する。
ステップＳ１で端末装置１０の操作を開始すると、続くステップＳ２では図示しないスイッチ操作により操作モードの選択を実施する。最初の使用では、書き込みモードを選択するため、ステップＳ３では「ＹＥＳ」に進んだ後、ステップＳ４で書き込み画像の入力を実施する。なお、以下の説明では、１または複数の仮想面として仮想掲示板４０が予め定められた位置にあるものとする。

書き込み画像の入力は、たとえば図３（ａ）に示すように、指先Ｆや適当な筆記具等による手書きで仮想の書き込みを行う様子が、画像入力部１で背景とともに撮像されることにより実施される。図示の例では、選択した仮想掲示板４０に「ＡＢＣ」のような仮想の文字を指先Ｆで手書きしているが、この動作による指先Ｆの移動が手書きの軌跡として、背景ととともに撮像される。このような文字を書き込む手書きの軌跡及び背景は、コンバイナー３０を通して使用者の目により実像として見ることができる。なお、上述した書き込みの文字は、実際には全く存在しない仮想の文字である。

続くステップＳ５では、手書き抽出部２で画像処理により手書きの抽出を実施する。すなわち、ステップＳ４で入力した書き込み画像について、所定の画像処理により背景画像から手書きの軌跡を抽出する。この場合の画像処理は、たとえば書き込み画像に含まれる移動または変化しない背景画像と、手書きの動作で移動する軌跡画像とに分けて区別し、一方の軌跡画像が手書きで入力した文字等の手書き画像として抽出され、同時に画像表示部２０に表示される。
画像表示部２０に表示された手書き画像は、第１システムＷ１の使用者がコンバイナー３０を通して、仮想掲示板４０に重畳された虚像として見ることができる。すなわち、使用者は、図３（ｂ）に示すように、仮想掲示板４０に書き込まれていく文字「ＡＢＣ」の虚像を見て、実際に入力される書き込み内容を確認しながら書き込みを継続して行うことができる。なお、図中に示す書き込み「ＶＷＸＹＺ」は、他の端末による書き込みを受信して表示した例を示している。

ステップＳ５で抽出及び表示された手書き画像は、次のステップＳ６において、絶対座標検出部３で書き込み位置の絶対座標及び書き込み方向を検出する。すなわち、地球上における書き込み位置の絶対座標をＧＰＳシステムで検出し、さらに、検出した絶対座標においてどの方向を向いて書き込みをしているかをジャイロ等で検出し、これらの位置情報を書き込み位置情報とする。このとき、書き込み位置情報と書き込み画像との関係から、仮想掲示板４０の書き込み位置に関する情報を得ることもできる。

ステップＳ５及びステップＳ６で検出された手書き画像及び書き込み位置情報は、次のステップＳ７において、互いを関連づけした一対の書き込み情報として通信部５から基地局６０を介して他の端末へ送信される。また、これらの書き込み情報は、同時にステップＳ８において画像記録部４にも記録して保存される。
この結果、仮想掲示板４０に書き込みをして記録するという書き込みモードは終了する（ステップＳ９）が、同様に他の仮想掲示板等に書き込みを続ける場合は上述したステップＳ２に戻り、以下同様の操作を繰り返して書き込み情報（手書き画像及び書き込み位置情報）を順次画像記録部４に記録する。
なお、上述した実施形態の説明では、各表示システムＷ１〜Ｗｎが画像記録部４をそれぞれ保有しているものとしたが、基地局６０に画像記録部を設けて全表示システムの書き込み情報を一括管理したり、あるいは、各表示システム及び基地局６０の両方で保存するようにしてもよい。

一方、上述した操作で記録した手書き画像を表示して読み出す場合、たとえば第２システムＷ２の使用者が読み出す場合には、所定の仮想掲示板４０が設けられた場所において、ステップＳ３で「ＮＯ」に進んだ後、ステップＳ１１に進んで絶対座標検出部３により読み出し位置の情報を検出する。ここで検出する読み出し位置の情報は絶対座標及び読み出し方向である。すなわち、地球上における読み出し位置の絶対座標をＧＰＳシステムで検出し、さらに、検出した絶対座標においてどの方向を向いて読み出しをしているかをジャイロ等で検出し、これらの位置情報を読み込み位置情報とする。

次のステップＳ１２では、通信部Ｓ１２の通信により、検出した読み出し位置の情報と一致する書き込み位置の情報に対応している手書き画像を受信する。この手書き画像は、次のステップＳ１３で画像記録部４に記録された後に、あるいは直接、画像表示部２０に表示される。
従って、第２システムＷ２の使用者は、コンバイナー３０を通して、画像表示部２０に表示された手書き画像を仮想掲示板４０に重畳された虚像を見て読み出すことができる。すなわち、書き込みモードで書き込んだ書き込み内容の虚像が、仮想掲示板４０に重畳して表示されるので、書き込みをした使用者と同様に他の使用者も同様の書き込みを読み出すことが可能になる。

この結果、仮想掲示板４０の書き込みを読み出すという表示モードは終了する（ステップＳ１４）が、同様に他の仮想掲示板等の読み出しを続ける場合は上述したステップＳ２に戻り、以下同様の操作を繰り返すことにより、各仮想掲示板に書き込まれた書き込み画像を読み出すことができる。
また、書き込み画像を読み出した後、同じ仮想掲示板４０に新たな書き込みを追加する場合には、やはり上述したステップＳ２に戻って操作モードの切替操作を行い、以下上述した書き込みモードを実施すればよい。

続いて、上述した構成の空間手書き用携帯情報端末１０について、その具体的使用例に係る第２の実施形態を図５に示して説明する。
この実施形態では、たとえばパーソナルコンピュータのディスプレイ７０の周囲に配置した仮想付箋紙７１に対して、仮想の書き込みを行う場合の使用例を示している。この使用例でも、絶対座標や書き込み方向により規定される仮想付箋紙７１に対し、端末装置１０を使用して仮想の書き込み及び読み出しを行うとともに、他の端末装置の使用者も同様の書き込み内容を読み出したり、あるいは、新たな仮想付箋紙７１に書き込んで貼り付けることも可能である。
このような使用例によれば、実際のディスプレイ７０には実在して目に見える仮想付箋紙が貼られるようなことはなく、従って、必要時に端末装置１０を使用して書き込み及び読み出しをすることでメモの用途を確保し、しかもすっきりとした作業環境を提供することができる。

また、各端末装置毎に個別の認証番号を付与し、たとえば認証番号毎に読み出し許可を与えるような管理をすれば、仮想面に対する書き込みの内容に応じて、特定の個人やグループ内だけで情報を共有することも可能になる。
また、上述した実施形態では、仮想の枠で囲った仮想掲示板４０や仮想付箋紙７１としたが、仮想枠のない仮想面に書き込むようにしてもよい。

上述したように、本発明の手書き画像表示システムによれば、この表示システムを備えた端末装置１０の使用者が所望の空間上に設定した仮想掲示板４０や仮想付箋紙７１のような仮想面に対して指先Ｆ等による仮想的な手書き入力の書き込みを行い、この書き込み内容を書き込み位置の情報とともに通信部５により送受信することで端末装置１０の所有者が共有すれば、読み出し時においては、書き込み位置の情報と読み出し位置の情報とが一致する空間上の仮想面に書き込み内容を表示して複数の装置保持者が互いに読み出ししたり、あるいは、同じ仮想面に新たな書き込みを行うことも可能になる。従って、実体がなく絶対座標で規定されて移動しない仮想面に手書きで仮想の書き込みを行い、同仮想面の書き込み情報を端末装置１０の所有者間で互いに共有することが可能になる。

また、このような手書き画像表示システムは、携帯電話機、デジタルカメラ及びＰＤＡ等の携帯情報端末機器類に組み込んで一体化した端末装置１０とすれば、使用者は端末装置１０を常時携帯して必要時に書き込み及び読み出しを容易に行うことができるようになり、多機能で利便性の高い装置を提供することができる。特に、広範な通信網に接続可能な通信機能を予め備えている携帯電話機等に組み込めば、多様な用途が期待できる。
なお、本発明は上述した実施形態に限定されるものではなく、たとえば手書き画像表示システムを携帯情報端末機器類に組み込まないでシステム単独の機能を有する装置とするなど、本発明の要旨を逸脱しない範囲内において適宜変更することができる。

本発明に係る手書き画像表示システムの一実施形態として、構成例を示すブロック図である。 図１の手書き画像表示システムについて、操作及び動作の手順を示すフローチャートである。 本発明に係る空間手書き用携帯情報端末の使用例を示す第１の実施形態の図で、（ａ）は書き込み状況を示す斜視図、（ｂ）は使用者がコンバイナーを通して見ることができる書き込みの状態例である。 本発明に係る空間手書き用携帯情報端末の使用状況とともにコンバイナーの構成例を示す平面図である。 本発明に係る空間手書き用携帯情報端末の使用例を示す第２の実施形態の図である。

符号の説明

１ 画像入力部
２ 手書き抽出部
３ 絶対座標検出部
４ 画像記録部
５ 通信部
１０ 空間手書き用携帯情報端末（端末装置）
１１ 本体
１２ 撮影レンズ
２０ 画像表示部
２１ 表示面
３０ コンバイナー
３１ 反射面
４０ 仮想掲示板（仮想面）
７１ 仮想付箋紙（仮想面）

Claims (2)

1. 所望の空間に設定した仮想面に手書きで書き込む様子を撮像した書き込み画像を入力する画像入力手段と、
   前記書き込み画像から画像処理により手書きの軌跡を抽出して手書き画像を得る手書き抽出手段と、
   前記手書き画像の書き込みを行う位置に関する絶対座標及び書き込み方向を含む書き込み位置の情報と、前記手書き画像の読み出しを行う位置に関する絶対座標及び読み出し方向を含む読み出し位置の情報とを検出する座標検出手段と、
   前記手書き画像を前記書き込み位置の情報とともに記録する画像記録手段と、
   前記手書き画像、前記書き込み位置の情報及び前記読み出し位置の情報を送受信する通信手段と、
   前記手書き画像を表示する画像表示手段及び該画像表示手段からの光を反射するとともに使用者の視線方向の実視野からの光を透過する半透過型光学素子を少なくとも有する手書き画像表示装置とを備え、
   前記手書き画像表示装置の使用者から見て前記半透過型光学素子よりも前方の実視野に前記画像表示手段が表示する手書き画像の虚像を重畳して表示することを特徴とする手書き画像表示システム。
2. 請求項１に記載の手書き画像表示システムが一体化して組み込まれていることを特徴とする空間手書き用携帯情報端末。

Images