WO2007105819A1

WO2007105819A1 - 情報処理装置への入力処理システム

Info

Publication number: WO2007105819A1
Application number: PCT/JP2007/055334
Authority: WO
Inventors: Kenji Yoshida
Original assignee: Kenji Yoshida
Priority date: 2006-03-10
Filing date: 2007-03-12
Publication date: 2007-09-20
Also published as: SG155892A1; KR20120032042A; KR101304290B1; CA2646022C; SG155893A1; KR20120123732A; KR101412653B1; JP4042065B1; AU2007225655A1; KR101209087B1; KR101310115B1; AU2007225655B2; MY152620A; EP2026177A4; US20160320861A1; CN102902378A; CA2646022A1; KR101067360B1; CA2937958A1; RU2012106761A

Abstract

　容易な操作でコンピュータに対して文字等の入力や、オペレーションを行うことのできるキーボード、マウス、タブレット等のハードウエアデバイスに代わる新たな入力システム、すなわち、ペーパーアイコン、ペーパーコントローラ、ペーパーキーボードおよびマウスパッドを提案する。情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドットパターンを読み込ませて当該ドットパターンに定義されたコード値または／および座標値に変換して、情報処理装置に記憶された前記コード値または／および座標値に対応する音声、画像、動画、文字またはプログラム、ウェブへのアクセス情報を出力させるための、媒体上に形成されたアイコンを設けることによって、キーボードやマウス等を用いることなく、あらかじめ用意された音声、画像、動画、文字等の情報、プログラムの起動、ウェブへのアクセス等が可能となる。

Description

明細書

情報処理装置への入力処理システム技術分野

本発明は、紙面等の媒体面に形成（印刷）されたドットパターン ί - を用いた情報処理装置の入力システムに関する。背景技術

コンピュータは、生活のあらゆる場面で使用されるようになってきている。文書を作成したり計算を行ったりというような従来の用途に加え、インターネットのゥェブベージ（WEB Page)にアクセスして必要な情報を得たり、商品の購入を行ったり等、コンピュータの機能および用途は飛躍的に増加している。

従来、これらの行為を行うにあたり、キーボードおよびマウスを用いて文字の入力等の操作をすることが必要とされている。

しかし、キーボードで文字を入力するには、煩雑な操作が多く、習得するまでに時間を要する。特に、高齢者や障害者等、機器を操作するのに支障のある者にとっては操作が困難であるという問題があった。さらに、キーボードやマウスの操作が可能でコンピュータを使いこなせる者と、それらの操作ができずにコンピュータを使いこなせない者との間で、情報や機会の格差が生じる「デジタルデバイド」も問題となってきている。

このような問題を解決するものとして、バーコ一ドゃ QRコード等

f (以下、総称して「パーコード」という）の媒体面上に印刷されるコードパターンを用いてコンピュータに情報を入力することのできる情報処理機器およびサービス提供システムが提案されている。すな'わち、業者が提供するカタ口グゃホームページ上にバーコ一ドが記載されており、ユーザ（オペレータ）力コンピュータに接続されたバーコ一ドリーダを用いてバーコ一ドを読み取ると、希望する情報を得たり商品を購入したりすることのできるものである（たとえば、特許文献 1参照）。

特許文献 1 ：特開 2 0 0 5— 4 5 7 4号公報

発明の開示

発明が解決しょうとする課題 '

しかし、バーコードは、バ"コードを表示させるためだけに媒体面上の所定領域を確保しなければならないため、媒体面上に表示できるコード数に限界があり、キーボード'に較べて多種の文字や記号に対応するコードを入力することは困難だった。しかも、バーコ一ドは媒体面の美観を損ねる要因となっていた。

本発明は以上の点に鑑みてなされたものであり、容易な操作でコンピュータに対して文字等の入力や、オペレーションを行うことのできるキーボード、マウス、タブレット等のハードウェアデバイスに代わる新たな入力システム、すなわち、ペーパーアイコン、ぺーパーコントローラ、ペーパーキーボードおよびマウスパッドを提案するものである。課題を解決するための手段

前記課題を解決するために本発明は以下のような手段を採用した本発明の請求項 1は、情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値とコード値と力 1つのフォマツトで定義されたドットパターンを読み込ませて、当該ドットパターンに ί 定義された情報処理装置の中央処理装置に座標値および Zまたはコード値入力のためのオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパターンを読み取つて当該ドットパターンに対応した座標値および/またはコード値を情報処理装置の中央処理装置に入力させる情報処理装置への入力処理システムである。

本発明の請求項 2は、情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドトパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボードの割り込みキーのコ 7"ド値に変換して、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが媒体面上に印刷されたアイコン毎に形 j¾されており、前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパターンが形成されたアイコン上を走査する際に、前記ドットパターンを読み取る前または後に前記スキャナが媒体面に対して傾けられたことを前記スキャナの撮像画像の明暗の差によつて認識し、媒体面に対するスキャナの傾き方向にしたがって定義されたキー入力割り込み処理を発生させることを特徴とする情報処理装置への入力処理システムである。本発明の請求項 3は、前記スキャナの撮像画像の明暗の差が変化することによって、スキャナの動作を認識し、スキャナの動作にしたがってキー入力割り込み処理を発生させることを特徴とする請求項 2記載の情報処理装置への入力処理システムである。

本発明の請求項 4は、前記キー入力割り込み処理は、入力される文字種の変更、文字変換の指示、カーソル移動等であることを特徴

I

とする請求項 2または 3記載の情報処理装置への入力処理システムである。

本発明の請求項 5は、情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドットパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボードの割り込みキーのコードに変換して、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが媒体面上に印刷されたアイコン毎に形成されており、前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパ'ターンが形成されたアイコン上を走查する際に、母音のみの語の入力の際には、前記スキャナの先端を、当該母音に対応するコード値がドットパターンとして定義されたアイコンに接触させて当該アイコン上のドットパターンを読み取り、子音と母音とからなる語の入力の際には、前記スキャナの先端の読取部を、当該子音に対応するコード値がドットパターンとして定義されたアイコンに接触停止させて当該子音に対応するドットパターンを読み込ませた後、続く母音に対応するコード値がドットパターンとして定義されたアイコンまで前記スキャナの読取部を媒体面上を摺動させて、当該母音に該当するアイコンで一旦停止さ'せてドットパターンの読取を行った後、スキャナの先端の読取部を媒体面から離反させてドットパターンが認識できないよう'にすることで、単独の文字または一連の単語、文節の入力を行う日本語入カシステムである。

このように、ドットパターンが印刷されたアイコン上をスキャナで接触，離反動作することによって、文字入力に際して、ハードウ ί

エアのキーポードでは実現不可能だったまったく新しい入力方式を実現することが可能となる。

本発明の請求項 6は、オペレータの音声情報を入力する音声入力手段と、入力された音声情報を解析してそれに対応する文字からなる 1または 2以上の単語候補に変換する変換手段と、前記で変換された 1または 2以上の単語候補を表示する表示手段と、前記表示手段に表示された単語候補を選択するために、媒体面に形成され、力一ソルを任意に移動するための座標値および/またはコード値がパターン化されたドットパターンを読み取るスキャナと、前記スキヤナで読み取られたドッドパターンをコード値に変換し、当該コード値に対応する単語候補を確定単語として入力する確定手段とからなる情報入力装置である。

このように、情報処理装置への音声入力の際に、情報処理装置の画面上に表示された入力候補情報（たとえば候補文字ゃメニュー）に対して、媒体の.ドットパターンの印刷面をスキャナで選択的に読み取ることにより、音声入力を補完することができる。

本発明の請求項 7は、情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値およぴノまたはコード値がパタ一ン化されたドットパターンを読み込ませて当該ドットパターンに定義された情報処理装置の中央処理装置にオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、前記

6.

ドットパターンを読み取るスキャナを用いて媒体面上のドットパタ

—ンを読み取る際に、前記スキヤ.ナが媒体面に対して傾けられたことを前記スキャナの撮像画像の明暗の差によって認識し、媒体面に対するスキャナの傾き方向にしたがって画面上の G U Iのオペレーションを行うことを特徴とする情報処理装置への入力処理システムである。

本発明の請求項 8は、前記スキャナの撮像画像の明暗の差が変化することによって、スキャナの動作を認識し、当該スキャナの動作にしたがって画面上の G U Iのオペレーションを行うことを特徴とする請求項 7記載の情報処理装置への入力処理システムである。本発明の請求項 9は、前記画面上の G U Iのオペレーションは、画面のスクロール、カーソル移動、画面上のアイコンの指定、ドラッ f &ドロップ操作、メニュー選択、文字等の入力位置指示動作等のマウス操作のオペレーションであることを特徴とする請求項 7または 8記載の情報処理装置への入力処理システムである。

本発明の請求項 1 0は、情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドットパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボードの割り込みキーのコードに変換して、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが点字の凹凸部とともに媒体面上にアイコンとして印刷された情報処理装置への入力処理システムである。

本発明の請求項 1 1は、前記媒体面には、ドットパターンとそれ

7·

を意味する点字とが組になって所定領域に形成されており、当該領域毎に領域を隔成するバンクが設けられている請求項 1 0記載の情報処理装置への入力処理システムである。

本発明の請求項 1 2は、媒体面に印刷された番組情報、サイト情報に基づいて視聴 ·録画予約またはサイトへのアクセスを行うリモコンであって、媒体面に印刷された番組情報、サイト情報の領域毎に所定のコード値が所定のアルゴリズムに基づいてパターン化されて形成されたドットパターンを光学的に読み取る撮像手段と、前記撮像手段からの撮像画像からドットパターンを解析してその意味するコード値に復号する制御手段と、当該復号化されたコード値を番組放送受信機、チューナ一、録画 '再生装置、再生装置またはネットワークアクセス装置、 .あるいは放送受信用 'ネットワークァクセス用セットトップボックス、パーソナルコンピュータに送信する送信手 f 段とからなるリモコンである。

本発明の請求項 1 3は、番組放送受信機、チューナー、録画 ·再生装置、再生装置またはネットワークアクセス装置、あるいは放送受信用 ·ネットワークアクセス用セットトップボックス、パーソナルコンピュータの制御ボタンを意味する媒体面上のアイコンに、所

I

定のコ一ド値が所定のアルゴリズムに基づいてパターン化されて形成されたドットパターンが形成されており、前記ドットパターンを光学的に読み取る撮像手段と、前記撮像手段からの撮像画像からドットパターンを解析してその意味するコード値に復号する制御手段と、当該復号化されたコード値を番組放送受信機、チューナー、録画 ·再生装置、再生装置またはネットワークアクセス装置、あるいは放送受信用 ·ネットワークァク.セス用セットトップボックス、パ一ソナルコンピュータに送信する送信手段とからなるリモコンである。

本発明の請求項 1 4は、前記撮像手段は、前記リモコンと一体に設けられた読取部である請求項 1 2または 1 3記載のリモコンである。

本発明の請求項 1 5は、前記リモコンは、リモコン本体を構成し、前記制御手段と送信手段とを内蔵したクレードルと、前記クレードルと有線または無線で接続されて制御手段と通信可能な撮像手段を備えたスキャナとからなる請求項 1 2または 1 3記載のリモコンである。

本発明の請求項 1 6は、所定の座標値おょぴまたはコード値が所定のアルゴリズムでパターン化されたドットパターンが形成された影ボードと，前記投影ボードの一面は、動画または画像が投影される映像表示エリアと、その映像表示エリアに投影される動画または画像を制御するためのアイコン画像が表示されるコントローラエリアとからなり、少なくとも映像表示エリアに動画または画像を投影する投影手段と、前記コントローラエリアに形成されたドット ί

パターンを読み取る読取手段と、前記読取手段が読み取ったコントローラエリアのアイコン画像上のドットパターンを解析してその意味する座標値またはコード値に変換し、当該座標値またはコード値に対応する制御信号を前記投影手段に対して出力して映像表示ェリァに表示される動画または画像の出力を制御する制御手段とからなる投影画像 ·動画制御システムである。

本発明の請求項 1 7は、前記投影ボードは、ホワイトボードの表面に粘着層を介して透明シートが貼付されており、前記ドットパターンは透明シートと粘着層との間に形成されていることを特徴とする請求項 1 6記載の投影画像 ·動画制御システムである。

本発明の請求項 1 8は、所定の座標値および Ζまたはコード値が所定のアルゴリズムでパターン化されたドットパターンが形成された投影ボードと、前記投影ボード上に少なくともプログラムの起動を意味するアイコン画像を投影するとどもに、当該アイコン画像に対応した記憶装置にィンストールされたプログラムの表示画像または動画を投影する投影手段と、前記で投影されたアイコン画像に形成されたドットパターンを読み取る読取手段と、前記読取手段が読み取ったアイコン画像上のドットパターンを解析してその意味する座標値またはコード値に変換し、当該座標値またはコード値に対応する起動信号に基づいて記憶装置からプログラムを起動する制御手段とからなる、情報処理表示システムである。本発明の請求項 1 9は、前記投影ボードのドットパターンが形成された面と、画像、動画またはアイコン画像を投影する面とは異なる面であり、前記投影ボードに対して投影手段はリアプロジェクタとして配置される請求項 1 6または 1 8記載の投影画像 ·動画制御システムまたは情報処理表示システムである。本発明の請求項 2 0は、前記投影ポードのドットパターンは赤外線吸収特性材料で構成され、少なくとも投影手段側の面には、赤外線力ットフィルタが設けられていることを特徴とする請求項 1 9記載の投影画像 ·動画制御システムまたは情報処理表示システムである。本発明の請求項 2 1は、表示手段に表示させたアイコン画像を、そのアイコン画像に対応したドットパターンとともに紙面に印刷するペーパーコントローラ生成システムであって、アイコン画像を生

I

成し表示する表示手段と、表示手段に表示されたアイコン画像をあらかじめ定義された座標値およぴまたはコード値に関係付けて、当該アイコン画像とドットパターンとめ印刷を指示する制御手段と、前記制御手段からの指示に基づいて前記アイコン画像と前記ドットパターンとを所定の媒体面に印刷する印刷手段とからなるアイコン画像の印刷制御システムである。本発明の請求項 2 2は、表示手段に表示されたデスクトップ画面をドットパターンとともに紙面に印刷する情報処理装置の印刷方法であって、前記デスクトップ画面に対応した座標値をャッビングし、前記デスクトップ画面を印刷する際に画面上の座標値を意味するドットパターンを生成し、前記デスクトップ画面上のアイコン画像等の機能画像上には、前記座標値とともに当該機能を意味するコード値を 1つのフォーマツトに含めたドットパターンを生成し、前記デスクトップ画面を前記ドットパターンとともに印刷する印刷方法である。

本発明の請求項 2 3は、前記投影ボード上に形成されたドットパターンは、座標値とコード値とが同一のパターン中に定義されており、前記ボード上は所定のマトリクス区画が形成されており、同一のマトリクス区画内では、座標値の変化にかかわらず同一のコード値が付与されている請求項 1 6〜2 0のいずれかに記載の投影画像 •動画制御システムまたは情報処理表示システムである。

本発明の請求項 2 4は、前記アイコン画像は、前記 1つまたは複数のマトリクス区画にわたって配置されており、当該アイコン画像のドットパターンが読取手段で読み取られることにより、当該アイコン画像に対応した映像の制御またはプログラムの起動が指示されることを特徴とする請求項 2 3記載の投影画像 ·動画制御システムまたは情報処理表示システムである。

本発明の請求項 2 5は、前記ドットパターンは赤外線吸収材料で形成されるとともに、座標値とコード値とが一つのフォーマット中に定義されていることを特徴とする請求項 2，' 5〜7 , 1 0〜1 3 および 1 6， 1 .8 , 2 1のいずれかに記載の情報処理装置への入力処理システム、日本語入力システム、情報入力装置、リモコン、投影画像 '動画制御システム、情報処理表示システムまたはアイコン画像の印刷制御システムである。

本発明の請求項 2 6は、情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値とコード値と力 S 1つのフォーマットで定義されたドットパターンを読み込ませて、当該ドットバターンに定義された情報処理装置の中央処理装置に座標値および/ま

I 、

たはコード値入力のためのオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、前記媒体面上のドットパターンは、コントローラまたはキーポードの図柄と重畳して縦横方向に所定間隔ごとに基準格子点ドットを配置し、それぞれ 4 点の基準格子点ドットに囲まれた中心の仮想格子点の周囲にその仮想格子点からのずれ方で値を定義した情報ドットを配置した所定のドットの集合であり、一つのドットパターンのフォーマット中に X 座標値と Y座標値とコード値とを含めたドットパターンが印刷された多重情報領域を有しており、前記ドヅトパターンを読み取るスキャナを用いて媒体面上のドットパターンを読み取って当該ドットパターンに対応した座標値およぴまたはコード値を情報処理装置の中央処理装置に入力させる情報処理装置への入力処理システムである。

発明の効果

本発明によれば、容易な操作でコンピュータに対して文字等の入力や、オペレーションを行うことのできるキーボード、マウス、タブレツト等のハードゥエアデパイスに代わる新たな入力システム、すなわち、ペーパーアイコン、ペーパーコントローラ、ペーパーキ一ボードおよびマウスパッドを実現することができる。図面の簡単な説明

図 1は、スキャナおよびコンピュータのシステム構成を示すブロック図である。

ί

図 2は、 G R I D 1のドットパターンを示す説明図である。図 3は、 G R I D 1における'ドットパターンの情報ドットの一例を示す拡大図である。 .

図 4は、 G R I D 1における情報ドットの配置を示す説明図である。

図 5は、 G R I D 1における情報ドットおよびそこに定義されたデータのビット表示の例であり、他の形態を示すものである。図 6は、 G R I D 1における情報ドットおよびそこに定義されたデータのビット表示の例であり、（a ) はドットを 2個、（b ) はドットを 4個および（c ) はドットを 5'個配置したものである。

i

図 7は、 G R I D 1におけるドットパターンの変形例を示すものであり、（ a ) は情報ド.ット 6個配置型、（ b ) は情報ドット 9個配置型、（c ) は情報ドット 1 2個配置型、（d ) は情報ドット 3 6個配置型の概略図である。

図 8は、 G R .I D 1におけるドットの配置を示す説明図である。図 9は、本実施形態におけるドットパターンのフォ一マツトについて説明した図である。図 1 0は、 G R I D 2のドットパターンを示す説明図である。図 1 1は、 G R I D 2におけるドットと格子線との関係を示す図で'ある。図 1 2は、 G R I D 2における情報ドットの格子点からのずれ方の態様を示す図である。図 1 3は、 G R I D 2における差分による情報取得を説明するためのドットパターン図である。図 1 4は、' G R I D 2における情報ビットとセキュリティテープルと真値との関係を説明するための図である。図 1 5は、本発明の実施形態であるペーパーキーボードの使用状態を示す説明図である。図 1 6は、ペーパーキーボードの見開きページを示した図である

図 1 7は、ペーパーキ一ボードの見開きページを示した図である

図 1 8は、本発明の実施形態であるペーパーコントローラを示す説明図である。

ί

図 1 9は、ペーパーコントローラの他の実施形態を示すものであり、インターネットの U R Lをブックマークとして登録するためのペーパーコントローラである。図 2 0は、ペーパーコントローラの使用状態を示す説明図である図 2 1は、ペーパーコントローラの使用状態を示す説明図である図 2 2は、ペーパーコントローラを用いて操作を行なった場合にモニタ上に表示される画面を示した図である。

図 2 3は、ペーパーコントローラを用いて操作を行なった場合にモニタ上に表示される画面を示した図である。

図 2 4.は、本実施形態で用いられるテーブルについて説明した図であり、（a ) はパーソナルコンピュータ内に設けられたインデックステーブル、（b ) は管理サーバ内に設けられた管理サーバテーブルについて示した図である。 '

図 2 5は、ペーパーコントローラの他の実施形態について説明した図であり、ガイドバンクが設けられたものについて示す図である図 2 6は、ペーパーコントローラの他の実施形態について説明した図であり、ブックマークを行なうためのペーパーコントローラについて示す図である。

図 2 7は、図 2 5に示すペーパーコントローラの断面図である。図 2 8は、ペーパーコントローラとガイドバンクが別体となっている状態を示す説明図である。

図 2 9は、ペーパーコントローラの他の実施形態を示す図であり、ドットパターンとともに点字の突起を設けたものについて示す図である。

図 3 0は、ペーパーコントローラの他の実施形態を示す図であり、 'ドットパターンとともに点字の突起を設けたものについて示す図である。

図 3 1は、スキャナを動作させることによるペーパーキーポードの'操作について説明する図であり、（a ) はグリッドスクラッチ動作、（ b ) はグリツドタッピング動作、（ c ) はグリッドスライディング動作について説明する図である。

図 3 2は、スキャナを動作させることによるペーパーキーボードの操作について説明する図であり、（a ) はグリッドグラインドライト、（b ) はグリッドグライン.ドレフトについて説明する図である。 '

図 3 3は、本発明の実施形態であるマウスパッドの使用状態について示した説明図である。

図 3 4は、マウスパッドについて説明する図であり、（a ) およぴ（b ) は円形のマウスパッド、（c ) および（d ) は四角形状のマウスパッドについて示した図である。 '

図 3 5は、マウスパッドの具体例について説明した図である。図 3 6は、マウスパッドを用いた、スキャナの動作によるブラウザプログラムのウェブページのスクローノレオペレーションについて説明した図である。

図 3 .7は、マウスパッドを用いた、スキャナの動作によるブラウザプログラムのゥェブページのスク口一/レオぺレーションにっいて説明した図である。

図 3 8は、マウスパッドの他の実施形態について説明した図であり、環状の溝を設けたものについて示す図である。

i

図 3 9は、マウスパッドの他の実施形態について説明した図であり、放射状の溝を設けたものについて示す図である。

'図 4 0は、ペーパーキーボードの他の実施形態について示す図であり、タツチ ' アンド · リリース動作により入力を行なうも'のについて説明する図である。

図 4 Iは、図 4 0に示したペーパーキーボードを用いて文字を入力する際の文字入力方法について説 7·明した図である。

図 4 2は、図 4 0に示したペーパーキーボードを用いた文字入力の具体例について説明した図である。

図 4 3は、音声認識により文字入力を行なうための補助装置としての用途について説明した図である。

図 4 4は、赤外線リモコンと一体となったスキャナについて示す図である。

図 4 5は、クレードルにスキャナが載置できる構造のリモコンを用いて、テレビに赤外線信号を送信する操作について説明する図である。

図 4 6は、クレードルにスキャナが載置できる構造のリモコンを用いて、セットトップボックスに赤外線信号を送信する操作について説明する図である。

図 4 7は、テレビのリモコン機能およぴセットトツプボッタスの制御機能を有するペーパーコントローラについて説明する図である図 4 8は、テレビのリモコン機能およびセットトツプポックスの制御機能を有するペーパーコントローラについて説明する図である

'図 4 9は、図 4 7及ぴ図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。 ' 図 5 0は、図 4 7及び図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。

図 5 1は、図 4 7及び図 4 8に示 . 8したペーパーコントローラの機能及び操作について説明した図である。

図 5 2は、図 4 7及ぴ図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。

図 5 3は、図 4 7及び図 4 8に示したペーパーコントローラの機 i

能及ぴ操作について説明した図である。

図 5 4は、図 4 7及ぴ図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。'

図 5 5は、図 4 7及ぴ図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。'

図 5 6は、図 4 7及び図 4 8に示したペーパーコントローラの機能及び操作について説明した図である。

図 5 7は、ホテルで各種サービスを提供するためのペーパーコントローラについて説明した図である。

図 5 8は、音楽あるいは動画プレイヤの制御を行なうためのぺーパーコントローラについて説明した図である。図 5 9は、音楽あるいは動画プレイヤの制御を行なうためのぺーパーコントローラについて説明した図である。

図 6 0は、図 5 8及び図 5 '9に示したペーパーコントローラの使

I

用方法について説明した図である。

図 6 1は、図 5 8及ぴ図 5 9に示したペーパーコントローラを用いた際にディスプレイに表示ざれる具体例を示した図である。図 6 2は、図 5 8及ぴ図 5 9に示したペーパーコントローラの機能及ぴ操作について説明した図である。

図 6 3は、図 5 8及び図 5 9'に示したペーパーコントローラの機能及び操作について説明した図である。

図 6 4は、図 5 8及び図 5 9に示したペーパーコントローラの機能及び操作について説明した図である。

図 6 5は、図 5 8及ぴ図 5 9に示したペーパーコントローラの機能及び操作について説明した図である。

図 6 6は、図 5 8及ぴ図 5 9に示した 'ペーパーコントローラの機能及び操作について説明した図である。

図 6 7は、図 5 8及び図 5 9に示した'ペーパーコントローラの機能及び操作について説明した図である。

図 6 8は、ドットパターンが印刷されたホワイトボードについて説明した図であり、プロジェクタを用いてコントローラおよび映像を表示した状態を示す図である。

図 6 9は、ホワイトボードの断面構造を拡大して示す縦断面図でめる。図 7 0は、ドットパターンが印刷されたホワイトボードについて説明した図であり、プロジェクタを用いてアイコンを表示した状態を示す図である。

'図 7 1は、ドットパターンが印刷されたァクリルボードについて説明した図であり、リアプロジェクタを用いてアイコンの初期画面を表示した状態を示す図である。図 7 2は、アタリルボードの断面構造を拡大して示す縦断面図でめる。図 7 3は、ペーパーキーボードをユーザ自身が作成する機能について説明した図であり、（a ) はディスプレイ装置に表示された映像、（b ) は用紙にプリントアウトされた状態について示した図であ。

図 7 4は、本発明の一実施形態である G AMについて説明した図である。

I

図 7 5は、本発明の一実施形態である G AMについて説明した図である。

図 7 6は、本発明の一実施形態であるレストランメニューのォーダーシステムについて説明した図である。図 7 7は、本発明の一実施形態であるレストランメニューのォーダーシステムについて説明した図である。図 7 8は、スキャナに内蔵されたカメラの向きおょぴスキャナの傾きについて説明した図である。図 7 9は、スキャナの傾きによりキー入力割り込み処理または G U Iのオペレーションを行う場合において、傾けた方向および角度を測定する方法を説明するための図（1 ) である。

図 8 0は、スキャナの傾きによりキー入力割り込み処理または G U' lのオペレーションを行う場合において、傾けた方向および角度を測定する方法を説明するための図（2 ) である。

図 8 1は、スキャナの傾きによりキー入力割り込み処理または G U Iのオペレーションを行う場合において、傾けた方向を測定する方法を説明するための図である。

図 8 2は、スキャナの傾きによ.りキー入力割り込み処理または G U Iのオペレーションを行う場合において、フーリエ関数を用いることにより傾けた方向を測定する方法を説明するための図である。図 8 3は、スキャナの傾きによりキー入力割り込み処理または G U Iのオペレーションを行う場合において、 n次方程式を用いることにより傾けた方向を測定する方法を説明するための図である。図 8 4は、 X Y座標値をマウスパッドとして使用したペーパーキ ί

一ボードについて説明するための図である。

図 8 5は、マトリクス区画が形成されたホワイトボードについて説明するための図である。

図 8 6は、図 8 5に示.したホワイトボードに用いるドットパターンのフォーマツトについて説明するための図である。

図 8 7は、図 8 5に示したホワイトボードに用いるドットパターンのコード値とロマンドとの対応テーブルを示した図である。図 8 8は、ディスプレイ上のデスクトップ画面を印刷し、ぺ一パ一キーボードを作成する機能について説明するための図である。図 8 9は、ディスプレイ上のデスクトップ画面を印刷し、ぺーパ一キーボードを作成する際に生成される、コード値と起動プログラムの対応テーブルについて示した図である。図 9 0は、ディスプレイ上のデスクトップ画面を印刷し、ペーパ一キーボードを作成する際に生成されるドットパターンのフォーマ

I 、

ットについて説明するための図である。符号の説明

1 ドットパターン 2 キードット .

3 情報ドット

4 基準格子点ドット

5 仮想格子点

CPU 中央処理装置 MM メインメモリ

US B I /F US Bインターフェース

i

HD ハードディスク装置 D I S P ディスプレイ装置（表示手段）

KB D キーボード NW I /F ネットワークインターフェース

S C N スキャナ

発明を実施するための最良の形態図 1は、パーソナルコンピュータとスキャナの構成を示すハードウェアブロック図である。同図に示すように、パーソナルコンピュータは、中央処理装置（

CPU) を中心に、メインメモリ（MM) 、バス（BUS)で接続されたハードディスク装置（HD) 、出力手段としての表示装置（D I S P) 、入力手段としてのキーボード（KB D) を有している。そして、 US Bインターフェース（US B I /F) を介して撮

I

影手段としてのスキャナ（S CN)が接続されている。このスキャナ（SCN) の内部構成については図示を省略するが、赤外線照射手段（LED) とその反射光の所定波長成分をカツトするフィルタ、およぴ撮像する撮像素子（CCDや CMOS) が内蔵されており、後述の媒体としての IDタグ、ペーパーキーボードゃペーパーコントローラからの反射光を撮像して、その媒体面に印刷されたドットパターンを画像データとして処理できるようになつている。そして、スキャナ（SCN) の側面には右クリックボタンと左タリックボタンとが設けられており、それぞれマウスの右クリック、左クリックの機能が実現可能となっている。'なお、同図では読み取り部を下にした状態で、右クリックボタンを上方、左クリックボタンを下方に配置しているが、配置はこれに限られない。なお図示を省略してあるが、ディスプレイ装置（D I S P) の他に、出力装置として、プリンタ、スピーカ等が接続されていてもよレ、„

また、バス (BUS) は、ネットワークインターフェース (NW I/F) を介してインターネット等の汎用ネットワーク（NW) に接続されており、電子地図データ、文字情報、画像情報、音声情報、動画情報、プログラム等が図示しないサーバよりダウンロード可能'となっている。ハードディスク（HD) 内には、オペレーティングシステ'ム (O S) とともに、本実施形態で用いられるドットパターンの解析プログラム等のアプリケーションプログラム、電子地図データ、文字情報、画像情報、音声情報、動画情報や各種テーブル等のデータが登録されている。 . · 中央処理装置（C PU) は、スキャナ（S CN) からの媒体面のドットパターンの撮影データを読み取りコードまたは座標値に変換した入力信号を US Bインターフェースを介して受信すると、当該入力信号に対応した電子地図データ、文字情報、画像情報、音声情報、動画情報、プログラム等をハードディスク（HD) から読み出してディスプレイ装置（D I S P) まだは図示しないスピーカ等の出力装置から出力させるようになつている。なお、スキャナ（S CN) で読み込むコードや座標値については後で詳述する。

ί - スキャナは、詳細な図.示は省略するが、赤外線照射手段（赤色 L ED) と I Rフィルタと、 CMOSセンサ、 CCDセンサ等の光学撮像素子を備えており、媒体面に照射した照射光の反射光を撮影する機能を有している。ここで媒体面上のドットパターンはカーボンインクで印刷されており、ドットパターン以外の画像や文字部分は i ノンカーボンィンクで印刷されている。このカーボンィンクは赤外光を吸収する特性を有しているため、前記光学撮像素子での撮像画像では、ドットの部分のみ黒く撮影されることになる。このように、ドットパターンのみがカーボンインクで印刷'されているため、他のカーボンィンクで印刷された画像や文字に可視的に影響を与えることなく、ドットパターンを通常の印刷と重畳印刷す

2

ることができる。 5. なお、赤外光を吸収する特性を有するインクとしてカーボンィンクを例示したが、ドットパターンの印刷は、特定波長に反応するィンクであれば、カーボンインクに限定されない。このようにして読み取ったドットパターンの撮像画像は、スキヤナ内の中央処理装置（CPU) によって解析されて座標値またはコ一ド値に変換されて、 U S Bケーブルおよび U S Bインターフエ一ス（US B I /O) を介してパーソナルコンピュータに送信される。パーソナルコンピュータの中央処理装置（C PU) は、受信した座標値またはコード値を示すテーブルを参照して、これらに対応した電子地図データ、文字情報、画像情報、音声情報、動画情報がデ

I

イスプレイ装置（D I S P) や図示しないスピーカから出力されるようになつている。くドットパターの説明 GRID1〉次に、本発明で用いるドットパターンについて図 2〜図 7を用いて ^¾明する。

図 2は本発明のドットパタ^"ンの一例である G R I D 1を示す説明図である。

お、これらの図において、縦横方向の格子線は説明の便宜のために付したものであり実際の印刷面には存在していない。ドットパターン 1を構成するキードット 2、情報ドット 3、基準格子点ドット 4等は撮像手段であるスキャナが赤外線照射手段を有している場合、当該赤外光を吸収するカーボンィンクで印刷されていることが望ましい。 ·

図 3はドットパターンの情報ドットおよびそれに定義されたデータのビット表示の一例を示す拡大図である。図 4 ( a ) 、 ( b ) はキードットを中心に配置した情報ドットを示す説明図である。

本発明のドットパターンを用いた情報入出力方法は、ドットパターン 1の生成と、そのドットパターン 1の認識と、このドットパターン 1から情報およびプログラムを出力'する手段とからなる。すなわち、ドットパターン 1をカメラにより-画像データとして取り込み、まず、基準格子点ドット 4を抽出し、 '次に本来基準格子点ドット 4がある位置にドットが打たれていないことによってキードット 2 を抽出し、次に情報ドッ.ト 3を抽出することによりデジタル化して情報領域を抽出して情報の数値化を図り、その数値情報より、このドットパターン 1から情報おょぴプログラムを出力させる。たとえば、このドットパターン 1から音声等の情報やプログラムを、情報出力装置、パーソナルコンピュータ、 P D Aまたは携帯電話等に出力させる。

本発明のドットパターン 1の生成は、ドットコード生成アルゴリズムにより、音声等の情報を認識させるために微細なドット、すなわち、キードット 2、情報ドット 3、基準格子点ドット 4を所定の規則に則って配列する。図 2に示すように、情報を表すドッ'トパターン 1のブロックは、キードット 2を基準に 5 X 5の基準格子点ドット 4を配置し、 4点の基準格子点ドット 4に囲まれた中心の仮想格

2

子点 5の周囲に情報ドット 3を配置する。このプロックには任意の数値情報が定義される。なお、'図.2の図示例では、ドットパターン 1のブロック（太線枠内）を 4個並列させた状態を示している。ただし、ドットパターン 1は 4ブロックに限定されないことはもちろ

I

んである。

1つのブロックに 1つの対応した情報おょぴプログラムを出力させ、または、複数のブロックに 1つの対応した情報およびプログラムを出力させることができる。基準格子点ドット 4は、カメラでこのドットパターン 1を画像データとして取り込む際に、そのカメラのレンズの歪みや斜めからの撮像、紙面の伸縮、媒体表面の湾曲、印刷時の歪みを矯正することができる。具体的には歪.んだ 4点の基準格子点ドット 4を元の正方形に変換する補正用の関数（X _n ， Y _n ) = f ( X _n ' ， Y _n ' ) を求め、その同一の関数で情報ドット 3を補正して、正しい情報ドッ

I

ト 3のべクトルを求める。

ドットパターン 1に基準格子点ドット 4を配置してあると、このドットパターン 1をカメラで取り込んだ画像データは、カメラが原因する歪みを補正するので、歪み率の高いレンズを付けた普及型のカメラでドットパターン 1の画像データを取り込むときにも正確に認識することができる。また、ドットパターン 1の面に対してカメラを傾けて読み取っても、そのドットパターン 1を正確に認識することができる。

キードット 2は、図 2に示すように、ブロックの四隅の角部にある 4個の基準格子点ドット 4を一定方向にずらして配置したドットである。このキードット 2は、情報ドット 3を表す 1ブロック分のドットパターン 1の代表点である。たとえば、ドットパターン 1のプロックの四隅の角部にある基準格子点ドット 4を上方に 0 . 1 m mずらしたものである。情報ドット 3が X， Y座標値を表す場合に、キードット 2を下方に 0 . 1 m mずらした位置が座標点となる。ただし、この数値はこれに限定されずに、ドットパターン 1のプロックの大小に応じて可変し得るものである。

情報ドット 3は種々の情報を認識させるドットである。この情報ドット 3は、キードット 2を代表点にじて、その周辺に配置すると共に、 4点の基準格子点ドット 4で囲まれた中心を仮想格子点 5にして、これを始点としてべクトルにより表現した終点に配置したものである。たとえば、この情報ドット 3は、基準格子点ドット 4に囲まれ、図 3 ( a ) に示すように、その仮想^子点 5から 0 . l m m離れたドットは、ベタトルで表現される方向と長さを有するために、時計方向に 4 5度ずつ回転させて 8方向に配置し、 · 3ビットを + 表現する。したがって、 1プロックのドットパターン 1で 3ビット X 1 6個 = 4 8ビットを表現することができる。

図 3 ( b ) は、図 2のドットパターンにおいて、 1個の格子毎に 2 'ビットを有する情報ドット 3の定義の方法であり、 +方向および X 方向にドットをずらして各 2ビットの情報を定義している。 'これにより、本来 4 8ビットの情報を定義できるが、用途によって分割して 3 2ビット毎にデータを与えることができる。 +方向および X方向の組み合わせによって最大 2 ^{1 6} (約 6 5 0 0 0 ) 通りのドットパターンフォーマットが実現できる。 .

なお、図示例では 8方向に配置して 3 ビットを表現しているが、これに限定されずに、 1 6方向に配置して 4ビットを表現することも可能であり、種々変更できることはもちろんである。

キードット 2、情報ドット 3または基準格子点ドット 4のドット ί

の径は、見栄えと、紙質に対する印刷の精度、カメラの解像度およぴ最適なデジタル化を考慮して、 0 . 0' 5 m m程度が望ましい。また、撮像面積に対する必要な情報量と、各種ドット 2， 3， 4 の誤認を考慮して基準格子点ドット 4の間隔は縦 ·横 0 . 5 m m前後が望ましい。基準格子点ドット 4および情報ドット 3 との誤認を考慮して、キードット 2 .のずれは格子間隔の 2 0 %前後が望ましい。

この情報ドット 3と、 4点の基準格子点ドット 4で囲まれた仮想格子点 5との間隔は、隣接する仮想格子点 5間の距離の 1 5〜3 0 %程度の間隔であることが望ましい。情報ドット 3と仮想格子点 5

I 間の距離がこの間隔より近いと、ドット同士が大きな塊と視認されやすく、ドットパターン 1 として見苦しくなるからである。逆に、情報ドット 3と仮想格子点 5間の距離がこの間隔より遠いと、隣接するいずれの仮想格子点 5を中心にしてべクトル方向性を持たせた情報ドット 3であるかの認定が困難になるためである。

たとえば，情報ドット 3は、図 4 (a) に示すように、ブロック中心から時計回りで I ェカゝら I ェ ₆ を配置する格子間隔は 0. 5mm であり、 2 mmX 2 mmで 3ビット X 1 6 = 4 8ビットを表現する。なお、ブロック内に個々に独立した情報内容を有し、かつ他の情報内容に影響されないサブプロックをさらに設けることができる。図 4 (b) はこれを図示したものであり、 4つの情報ドット 3で構成されるサブブロック [ I i 、 I ₂ 、 I ₃ 、 I ₄ ]、 [ I ₅ 、 I _s 、 I

7 、 I 8 J、 [I ₉ 、 I ！ 0 ^ I ！！ , I ！ ₂ ]> i 3 、 I ₄ 、ェ

_{1 5} 、 I ！ ₆ ]は各々独立したデータ ( 3ビット X 4 = 1 2ビット) ί

が情報ドット 3に展開されるようになっている。このようにサブブ口ックを設けることにより、エラーチェックをサブプロック単位で容易に行うことができる。

情報ドット 3のベクトル方向（回転方向）は、 3 0度〜 9 0度毎に均等に定めるのが望ましい。

図 5は情報ドット 3おょぴそこに定義されたデータのビット表示の例であり、他の形態を示すものである。

また、情報ドット 3について基準格子点ドット 4で囲まれた仮想格子点 5から長 ·短の 2種類を使用し、べクトル方向を 8方向とす

I ' ると、 4ビットを表現することができる。このとき、長い方が隣接する仮想格子点 5間の距離の 2 5〜 3 0 %程度、短い方は 1 5〜 2 0 °/。程度が望ましい。ただし、長 ·短の情報ドット 3の中心間隔は、 'これらのドットの径より長くなることが望ましい。

4点の基準格子点ドット 4で囲まれた情報ドット 3は、見栄えを考慮し、 1 ドットが望ましい。しかし、見栄えを無視し、情報量を多くしたい場合は、 1ベクトル毎に、 1 ビットを割り当て情報ドット 3を複数のドットで表現することにより、多量の情報を有することができる。たとえば、同心円 8方向のベクトルでは、 4点の格子ドット 4に囲まれた情報ドット 3で 2 ⁸ の情報を表現でき、 1ブロックの情報ドット 1 6個で 2 ^{1 2 8} となる。

図 6は情報ドットおよぴそこに定義されたデータのビット表示の例であり、（ a ) はドットを 2個、（ b ) はドットを 4個および（ c ) はドットを 5個配置したものを示すものである。

図 7はドットパターンの変形例を示すものであり、（a ) は情報ドット 6個配置型、（ b ) は情報ドット 9個配置型、（ c ) は情報ドット 1 2個配置型、（d ) は情報ドジト 3 6個配置型の概略図でめる。

図 2と図 4に示すドッ.トパターン 1は、 1ブロックに 1 6 ( 4 X 4 ) の情報ドット 3を配置した例を示している。しかし、この情報ドット 3は 1プロックに 1 6個配置することに限定されずに、種々変更することができる。たとえば、必要とする情報量の大小またはカメラの解像度に応じて、情報ドット 3を 1ブロックに 6個（2 X

ί 3) 配置したもの（a) 、情報ドット 3を 1ブロックに 9個（3 X

3) 配置したもの（ b ) 、情報ドット 3を 1ブロックに 1 2個（ 3 X

4) 配置したもの（c) 、または情報ドット 3を 1ブロックに 3 6 個'配置したもの（d) がある。

図 8〜図 9は、ドットパタンとコード値と識別子との関係を示した説明図である。

ドットパターンは、 4 X 4個のブロック領域で構成されたドットパターンであり、このブロック内で _ 0 〜C₃ ！ _ 3 0 に区画されている。各領域のドットコードフ.ォーマツトを示したものが図 9である。 - 図 9 (a) は、ドットパターンをコード値のみで構成した場合であり、 C。〜C_{2 7} には図 8で示したそれぞれの領域のドットパターンのドット毎のコード値が登録される。そして、 C _{2 8} 〜C ₃ 。にはノリティが登録されるようになつている。

また、図 9 (b) は、コード値とともに XY座標が登録されるようになつている。すなわち、図 8において、 C_Q 〜C₇ には X座標、 C₈ 〜C i ₅ には Y座標、 ₆ 〜C_{2 7} にはコード値がそれぞれ登録されるようになつている。

このように、本実施形態では、ドットパターン内にコード値とともに XY座標を登録しておくことができる。

さらに、図 9 ( c ) は、 XY座標とともに標インデックスを登録したフォーマットである。座標インデックスとは、媒体である紙のページ番号等を登録する領域であり、ドットパターンとして XY 座標が登録された媒体自体を識別する識別子やページ番号を登録することができる。

このように、本発明のドットパターンは、コード値のみを登録する場合、コード値と XY座標を登録する場合、座標インデックスとともに XY座標を登録する場合のように、柔軟性に富んだフォーマットが可能である。

くドットパターンの説明 GR I D 2 >

次に GRID2のドットパターンの基本原理について図 1 0〜 14を用いて説明する。 GR I D 2は差分法を用いたドットの配置アルゴリズムである。

まず、図 1 0に示すように、 XY方向に所定間隔毎に格子線（y ：!〜 y 7、 x l〜x 5) を仮定する。この格子線の交点を格子点と呼ぶことにする。そして、本実施形態ではこの 4つの格子点で囲まれた最小ブロック（1グリッド）として XY方向に 4ブロック（4 グリッド）ずつ、すなわち 4 X 4 = 1 6·ブロック（1 6グリッド）を 1つの情報ブロックとする。なお、この情報ブロックの単位を 1 6 ブロックとしたのはあくまでも一例であり、任意のブロック数で情報プロックを構成することが可能であることはいうまでもない。そしてこの情報プロックの矩形領域を構成する 4つの角点をコーナードット（x l y l， 1 y 5 , x 5 y 1 , 5 y 5 ) とする（図中、円形で囲んだドット）。この 4つのコーナードットは格子点と一致させる。 .

このように、格子点と一致する 4個のコーナードットを発見することにより、情報プロックを認識することができるようになつている。ただし、このコーナードットだけだと情報ブロックは認識できても、その向きが分からない。たとえば情報ブロックの方向が認識できないと同じ情報ブロックであっても土 9 0度または 1 8 0度回転させたものをスキャンしてしまうと全く別の情報となって'しまうためである。

そこで、情報プロックの矩形領域の内部または隣接した矩形領域の格子点にベクトルドット（キードット）を配置している。同図では、三角形で囲まれたドット（x.0 y 3) がそれであり、情報プロックの上辺を構成する格子線の中点の鉛直上方の 1つ目の格子点にキードット（ベクトルドット）が配置されている。これと同様に、当該情報ブロック内において下辺を構成する格子線の中点の鉛直上の 1つ目の格子点（X 4 y 3) に下の情報ブロックキードットが配置されている。

なお、本実施形態では、格子間（ダリ'ッド間）距離を 0. 2 5m mとした。したがって、情報ブロックの 1辺は 0. 2 5 mm X 4ダリッド = 1 mmとなる。そしてこの面積は l nimX l mm= l mni" となる。この範囲内に 1 4ビットの情報が格納可能であり、このうち 2ビットをコントロールデータとして使った場合、 1 2ビット分の情報が格納できることになる。なお、格子間（グリッド間）距離を 0. 2 5 mmとしたのはあくまでも一例であり、たとえば 0. 2 5 〜0. 5 mm超の範囲で自由に変更してもよい。

GR I D 2において、情報ドットは 1つおきに格子点から X方向、 y方向にずらした位置に配置されている。情報ドットの直径は好ましくは 0 . 0 3〜0 . 0 5 m m超であり、格子点からのずれ量は格子間距離の 1 5〜 2 5 %程度とすることが好ましい。このずれ量も一例であるため必ずしもこの範囲でなくてもよいが、一般に 2 5 %よりも大きなずれ量とした場合には目視したときにドットパターンが模様となって表れやすい傾向がある。

つまり格子点からのずれ方が、上下（y方向）のずれと左右（X 方向）へのずれとが交互となっているため、ドットの配置分布の偏在がなくなり、紙面上にモアレや模様となって見えることがなくなり、印刷紙面の美観が保てる。 '

このような配置原則を採用することにより、情報ドットは 1つおきに必ず y方向（図 1 1参照）の格子線上に配置されることになる。このことは、ドットパターンを読み取る際には、 1つおきに y方向または X方向に直線状に配置された格子線を発見すればよいこととなり、認識の際の情報処理装置におげ'る計算アルゴリズムを単純かつ高速化できる利点がある。

また、たとえドットパターンが紙面の湾曲等により変形していた場合、格子線は正確な直線とならない場合があるが、直線に近似した緩やかな曲線であるた.め、格子線の発見は比較的容易であるため、紙面の変形や読取光学系のずれや歪みに強いアルゴリズムであるということがいえる。

情報ドットの意味について説明したものが図 1 2である。同図中において +は格子点、秦はドット（情報ドット）を示している。格子に対して— y方向に情報ドットを配置した場合を 0、 + y方向に情報ドットを配置した場合を 1とする。

次に図 1 3を用いて具体的な情報ドットの配置状態と読み取りァルゴリズムについて説明する。

同図中、丸付き数字の 1の情報ドット（以下、情報ドッ（1) とする）は格子点（x 2 y l) よりも +方向にずれているため " 1" を意味している。また、情報ドット（2) (図では丸付き数値）は格子点（X 3 y 1 ) よりも + y方向にずれているため "1" を意味している。さらに情報ドット（3) . (図では丸付き数字）は格子点（ X 4 y 1 ) よりも一 X方向にずれているため "0" 、情報ドット（ 4) (図では丸付き数字）は "0" 、情報ドット（5) (図では丸付き数字）は "0" を意味している。

図 1 3に示したドットパターンの場合、情報ドット（1) 〜（1 7) は以下の値となる。

(1) = 1

(2) = 1

(3) = 0

(4) = 0

(5) = 0

(6) = 1

(7) = 0

(8) = 1

(9) = 0 (1 0) = 1

'(1 1) = 1

(1 2) = 0

. (1 3) = 0

( 14 ) = 0

(1 5) = 0

(1 6) = 1

(1 7) = 1

なお、本実施形態では上記情報ビットに対して、さらに以下に説明する差分法による情報取得アルゴリズムを用いて値を算出するようにしたが、この情報ドットをそのまま情報ビットとして出力してもよい。また、この情報ビットに対して後述するセキュリティテーブルの値を演算処理して真値を算出するようにしてもよい。

次に、図 1 3を用いて本実施形態のドットパターンに基づいて差分法を適用した情報取得方法を説明する。

なお、本実施形態の説明において、（）で囲まれた数字は図における円形で囲まれた数字（丸付き数字） '、口で囲まれた数字は図における四角形状で囲まれた数字を意味している。

本実施形態において、情報ブロック内の 14ビットそれぞれの値は隣接した情報ドットの差分によって表現されている。たとえば、第 1ビットは情報ドット '（1) に対して X方向に + 1格子分の位置 ί

にある情報ドット（5) との差分によって求められる。すなわち、 [ 1]= (5) - (1) となる。ここで情報ドット（ 5 ) は " 0 " を、情報ドット（ 1 ) は "1 " を意味しているので第 1 ビット [1]は 0— 1、すなわち "1" を意味している。同様に第 2ビット [2]は [2] = (6) ― (2) 、第 3ビット [3]= (7) - (3) で表される。 'なお、下記の差分式において、値は絶対値をとることにする。

[ι] = (5)—（1) = 0— 1=1 '

[2] = (6)—（2) =1—1= 0 [3] = (7)- (3) = 0 - 0 = 0 次に、第 4ビット [4]については、ベクトルドットの直下位置にある情報ドット（8)と情報ドット' (5).との差分で求める。したがって、第 4ビット [4]〜第 6ビット [6]は + X方向に 1格子、 + y方向に 1格子の位置にある情報ドットの値との差分をとる。このようにすると、第 4ビット [4]〜第 6ビット [6]は以下の式で求めることができる。

[4]= (8)- (5)=1- 0 =1 [5] = (9)- (6) = 0 -1 = 1

[6] = (10)—（7)= 1— 0 =1 次に、第 7ビット [7]〜第 9ビット [9]については、 + x方向に 1格子、一 y方向に 1格子の位置にある情報ビットとの値の差分をとる。

このようにすると、第 7ビット [7]〜第 9ビット [9]は以下の式で求めることができる。

[7]=(12)- (8) = 0 -1=1 [8] = (13)- (9) = 0 - 0 = 0

ί

[9] = (14)一（10) = 0—1 = 1 次に、第 1 0ビッ小 [10]〜第 1 2ビット [12]については、 + x方向に 1格子の位置にある情報ドットの差分をとり、以下のようになる

[10]= (15)—（12)= 0 - 0 = 0

[11]= (16)- (13)=1- 0=1

[12]= (17)—（14)=1一 0 =1 最後に、第 1 3ビット [13]と第 1 4ビット [14]は、情報ドット（8) に対して X方向にそれぞれ +1、一 1格子の位置にある情報ドットとの差分をとり、以下のように求める。

[13]= (8) - (4) = 1 - 0 = 1 ·

[14]= (11)一（8)=1— 1= 0 なお、第 1ビット [1]〜第 14ビット [14]をそのまま真値として読み取りデータとして採用してもよいが、セキュリティを確保するために、当該 14ビットに対応するセキュリティテーブルを設けて、各ビットに対応する鍵パラメニタを定義しておき、読取データに対して鍵パラメータを加算、乗算等することにより真値を得るようにしてもよい。

この場合、真値 Tは Tn = [n] + Kn (η ： 1〜14、 Τη ：真値、 [η] ：読取値、 Κη :鍵パラメータ）で求めることができる。このような鍵パラメータを格納したセキュリティテーブルは、光学読取装置内の ROM内に登録しておくことができる。

たとえば、セキュリティテーブルとして、以下のような鍵パラメータを設定した場合、

ί = 0

κ₂ = 0

4 = 0

5 =1

=1

κ₇ = 0

κ₈ =1

9 =1 κ ₁ 1 = 0

2 = 0

3 =1 '

. 4 =1

t

真値 T1〜T 14は、それぞれ以下のように求めることができる

Τ₂ =[2] + Κ₂ = 0 + 0 = 0

Τ 3 =[3] + Κ₃ = 0 +1 = 1

Τ₄ = [4] + Κ ₄ =1+ 0=1

Τ₅ =[5] + Κ₅ =1 + 1=0

Τ₆ =[6] + Κ₆ =1 + 1= 0 '

Τ ₇ = [7]十 Κ ₇ =1+ 0=1

Τ₈ = [8] + Κ₈ = 0 +1=1 τ₉ = [9] + Κ ₉ =1+•1= 0

τ. 1 = [11] + Κ₁ ! =1+ 0 =1 τ. 2 = [12] + Κ_{: 2} =1+ 0=1 τ. 3 = [13] + Κ_Χ 3 = 1 + 1= 0

4 = [14] + Κ_{1 4}

I I

以上に説明した情報ビット οと、セキュリティテーブルと真値との対応を図 14に示す。 II

なお、上記では情報ドットから情報ビットを得て、セキュリティテーブルを参照して真値を求める'場合を説明したが、これとは逆に、真値からドットパターンを生成する場合には、第 ηビットの値 [η] は、 [η] = Τη— Κηで求めることができる。

ここで一例として、 Tl = l、 Τ 2 = 0、 Τ 3 =1とした場合、第 1 ビット [1]〜第 3ビット [3]は、以下の式で求められる。

0-1

[2] = 0 - 0 = 0

[3] = 1— 1=0 そして、第 1ビット [1]〜第 3ビット [3]は、以下の差分式により表される。

[1]=(5)-(1)

[2] = (6) -（2)

[3] -(7) -(3) ここで、（1)=1、（2)=1、（3)= 0という初期値を与えると、以下のようにドット（5)〜（7)を求めることができる。

(5) = ( 1) + [1] = 1 + 1 = 0

(6) = (2) + [2] = 1 + 0 = 1

' (7) = (3) + [3] = 0 + 0 = 0

以下の説明は省略するが、同様にドット（8)〜（14)の値も求めることができ、この値に基づいてドットを配置すればよい。

なお、ドット（1)〜（3)の初期値は任意の乱数（0か1) である。つまり、割り当てられた初期ドット（1)〜（3)に対して情報ビット [1：]〜 [3]の値を加算してやること.で、次の y方向格子線に配置されるドット（5)〜（7)の値を求めることができる。同様に、ドット（5)〜

(7)の値に情報ビット [4]〜 [6]の値を加算してやることにより、ドット（8)〜（10)の値を求めることができる。さらに、これらに情報ビット [7]〜 [9]の値を加算してやることでドット（12)〜（14)の値を求めることができる。さらに、これに情報ビット [10]〜 [12]の値を加算すればドット（15)〜（17)の値を求めることができる。

なお、ドット（4)および（1 1)については前記で算出されたドット

(8) 'に基づいて情報ビット [13]を減算、情報ビット [ 14]を加算することでそれぞれ求められる。

このように、本実施形態では、格子線 y n上のドットの配置を格子線 y ( n— 1) 上のドット配置に基づいて決定し、それを順次繰り返すことにより全体の情報ドットの配置が決定する。

(ぺーノヽ。一キーポード）

図 1 5〜図 1 7は、本発明の実施形態であるペーパーキーボードについて説明した図である。

図 1 5は、媒体としてのペーパーキーボードの一面（媒体面）上に印刷されたドットパターンをスキャナ（S C N) が読み取ることによって、パーソナルコンピュータの種々の入力 ' オペレーションを行う、ペーパーキーボードを示す説明図である。このペーパーキ一ボードは一方の長辺側が綴じられた冊子状となっており、その冊子の各ページ面にキーボード（キートップ）の図柄が印刷されてい

I

る。

具体的には、図 1 6に示すように、パーソナルコンピュータのキ —トップを模した、ひらがな、または英文字の一文字（「あ」、「レ、」、「A」、「B」等）または複数文字からなる文言（「送る」、「はい」等）が印刷された複数の四角い画像領域が設けられている。

このそれぞれの四角形状の画像領域には、それぞれの文字（一文字の四角画像領域の場合）に対応する割り込みキーのコード値がドットパターンとして登録されており、この割り込みキーのコード値は、実際のハードゥエアキ一ボードのそれぞれの文字のキートップに定義されたコード値と一致するようになつている。

つまり、「A」の英文字が印刷された四角画像領域のドットパターンをスキャナ（S C N) が読み取った場合、ハードウェアキーポードの「A」のキーが押されたときに発生する割り込みキーのコード値がパーソナルコンピュータ（情報処理装置）に入力されるようになっている。なお、ハードウェアキーボードにはない機能として、挨拶文などの文言「はじめまして」、「ひさしぶり」、「ありがとう」等が四角画像領域として印刷されており、これらの領域にはそれぞれの文言'に対応した文字列のコード値列がドットパターンとして印刷されている。なお、文字列をそのままキートップに割り当てられたコード値のドットパターンとして印刷しておく場合の他、所定の桁数の入力命令コード値がドットパターンとして印刷されており、後述の図 2 4で説明するインデックステーブルに対応する文字入力情報をあらかじめ保持させておいてもよい。

なお、図 1 6では、これらの文言の他、「ホームページを見る」、「Eメールを送る」等の文言が印刷された四角画像領域が印刷されているが、前者はブラウザプログラム、後者はメーラープログラムの起動コマンドのコ一ド値がドットパターンとして印刷されている。

なお、図 1 6では、キーボドの配置を五十音順、アルファべット順に配置したが、これに限らず、実際の J I S配列キーボードと同じ配列としてもよい。

また、図 1 6に示したペーパーキーボード上には、それぞれの四角 ίί像領域において、ドットパターンとして前記で説明したコード値の他に、前述の座標値も登録されている。

ここで、当該ペーパーキーボード面（媒体面）のドットパターンを撮像したときに、コード値を用いてキーボード入力の代替にする場合の他、座標値を用いてマウスやタブレツト入力の代替にすることも可能である。このように、コード値を用いるか、座標値を用いるかについては、ペーパーキーボード上に「コード '座標切換」の文字が表示された四角画像領域を設けて、この領域にコード値を採用するか座標値を採用するかを切り換えるコード値をドットパターンとして印刷しておき、この四角画像領域をスキャンする毎にコード値と座標値との入力が切り換えられるようにしてもよレ、。

さらに、四角画像領域に印刷されたドットパターン化されたコード値についても、その読み取り手順によって、コード値とは異なる意味を有するコード値として用いることが可能である。

たとえば、「A」の四角画像領域のドットパターンが所定時間内に連続して読み込まれた場合（「A」の四角画像領域上でスキャナをタッピング）、すなわちスキャナの先端を連続的に媒体面に接触させたり離反させるように上下動を繰り返した場合や、スキャナをスクラッチ、すなわち、キートップ画像上でスキャナを前後または左右方向に擦る動作をさせる場合のように、座標値の読み取り画像が変化した場合には、ハードゥエアキ一ボードのシフトキ一が押されたのと同じ状態としてもよい。

具体的には、小文字の「a」をスキャナ（S C N ) で撮影し、当該「A」に対応する割り込みキーのコード値がパーソナルコンビュータに入力され、その後、タッピング動作を行った場合に、パーソナルコンピュータの中央処理装置（C P U ) は、プログラムに基づいて、スキャナ.の撮影画像の変化を検出し、小文字の「a」に対応する割り込みコード値を大文字の「A」に対応する割り込みコード値変換してヮドプロセッサ等のアプリケーションプログラムに引き渡す。

また、タッピング動作の場合、最初の 1回だけドットパターンの読み取りを行い、後はスキャナ（S CN) の CMO Sセンサが認識する光の強弱だけを検出してタツビング動作が行われている'ことを検出してもよい。

また、このようなタッピング動作の他に、当該四角画像領域上でスキャナを一定時間以上停止させてドットパターンの読み取りを行つた場合には大文字の「A」、一定時間以下の場合には小文字の「 a」と判定してそれぞれのコード値をアプリケーションプログラムに^き渡してもよい。

さらに、当該四角画像領域上で同一のコード値を読み取りながら座標値が変化した場合（スキャナのスクラッチ動作）、撮像画像範囲内の光の強弱の分布の変化でスキャナの傾きを検出した場合等に大文字と小文字の入力を切り換えてそれぞれのコード値をアプリケーションプログラムに引き渡すようにしてもよレ、。

図 3 1 (b) はこのグリッドタッピング動作を説明する図であるすなわち、スキャナ（S CN) のグリッドタッピング動作とは、スキャナを地図に垂直に立て、上下にスキャナを動かして媒体面のアイコン（ここでは英文字「A」のキートツ: °画像）を叩く動作を行うことである。.

図 3 1 (a ) および（c ) はスキャナ（S CN) のグリッドスクラツチ動作を示す説明図である。

リツドスクラッチ動作とは、地図上で、引つかくようにスキヤナを複数回動かす動作をいう。ユーザ（オペレータ）は、媒体面のアイコン（ここでは英文字「A」のキートップ画像）上でグリッドスクラッチ動作を行う。これにより、アプリケーションプログラムへの入力文字が大文字の「A」と小文字の「a」の割り込みコードに相互に切り換えられるようになつている。

図 3 2はスキャナ（S C N ) のグリッドグラインド動作を示す説明図である。 .

グリッドグラインド動作とは、. 媒体面上の同一のアイコン（ここでは英文字の「A」のキートップ画像）を撮像しながら、スキャナの後端（図では上方）を回転させる動作のことである。紙面に対して右方向（時計方向）にグリッドグラインドすることを「グリッドグラインドライト」、左方向（反時計方向）にグリッドグラインドすることを「グリッドグラインドレフト」と呼んでもよレ、。

図 7 8に示したように、スキャナの撮像画像の明喑を認識し、その明暗領域が撮像中心に対して変化したときに、中央処理装置は、スキャナが図 3 2のように動作されたことを認識できる。このようなスキャナのオペレーションによって、キーボードのシフト、コントロール、入力文字の変換等を行ってもよい。

また、スキャナの撮像画像の明暗が変化する動作の他の一例として、グリッドポンプ動作（図示は省略）が挙げられる。グリッドポンプ動作とは、スキャナを前方または後方に繰り返し倒す操作のことである。

図 7 8は、スキャナの傾きと角度との関係を説明した図である。

トップ画像上のドットパターンは、紙面の縦方向と同方向に重畳印刷されている。（a ) に示す如く、ドットパターンの向きと、スキャナ内のカメラの向きとがなす角度を αとする。また、' ( b ) に示す如く、ユーザがスキャナを傾けたときに、スキャナの傾きとカメラの向きとがなす角度を J3とする。この場合に、ドットパターンの向きとスキャナの傾きとがなす角度 γが、キートップ画像に対してスキャナを傾けた角度どなる。すなわち、角度 γは、 y ^ a + β . となる。

図 7 9から図 8 3は、上述したスキャナの動作において、スキヤナ撮影画像の明暗および傾斜方向の算出方法について説明した図である。

スキャナ（撮像手段）の媒体面（キートップ画像）の鉛直方向に対する傾きについては、図 7 8 ( b ) に示すように、当該スキャナの撮像視野における明度の差で認識することが可能である。

スキャナの傾斜方向とは、図 8 0 ( a ) に示す如く、スキャナと地図とのなす角度をいう。ユーザがどの方向にスキャナを傾けたかは、以下の方法により求めることができる。

まず、キャリブレーションを行う。スキャナを地図に対して垂直に立て、その場合の、図 7 9に示した、 1〜4 8のセルの明るさを f

測定する。図 7 9は、スキャナ周辺の領域である。このときの明るさを B L O ( i ) とする。 iは、測定したセルの値であり、たとえば、 24番のセルの明るさは、 B L 0 (24) と表示する。

スキャナ内部には、 L E Dが 2個設置されている。そのため、スキナを地図に対して垂直に立てていても、 L ED付近のセルと L EDから離れた位置にあるセルとでは、明るさが異なる。そめため、キャリブレーションを行なう。

次に、スキャナを傾けた場合の明るさを測定する。図 80 (a) に示す如く、スキャナを一定方向に傾けた場合の、セル 1からセル 48までの明るさを測定し、セル. iにおける明るさを B L ( i ) とする。そして、各セルにおける B L ( i ) と B L O ( i ) との差分を計算する。そして、

Ma x (B L O ( i ) —B L ( i ) )

を計算する。

キヤナを傾けた場合、傾けた方向と逆の方向が暗くなる。スキャナを傾けた方向に L EDも傾くため、 '傾けた方向と逆方向では、 LEDとの距離が遠くなるからである。したがって、図 80 (b) に示す如く、差分が最大値となるセルと逆方向が、スキャナを傾けた位置となる。

これにより、スキャナを傾けた方向が定まる。

次に,、図 79〜図 80を用いて、キャリブレーションを行なうことにより、傾斜方向および角度を決定する他の方法について説明する。 .

最初にキャリブレーションを行なう。まず、スキャナを地図に対して垂直に立て、図 7 9に示したセル 1からセル 4 8の明るさを測定し、セル iにおける明るさを B L 0 ( i ) とする。次に、スキャナを 4 5° 傾け、図 8 0に示す如くペン先を軸にして一周させる。この場合に、スキャナがセル iの位置にきた場合の明るきを B L 4 5 ( i ) とする。セル 1力、らセル 48までの B L 4 5 ( i ) を求める。以上の操作によりキャリブレーションが終了する

次に、ユーザがスキャナを傾けた場合の、セル 1からセル 4 8までの明るさを測定し、セル iにおける明るさを B L ( i ) n (= 48) とする。そして、 · BJD(j -BUi)

Max ― ~ - 1, " = 1, n(= 48)

ΒΙβ(ί)-ΒΙΛ5(ί)

を求める。

B L 0 ( i ) — B L 4 5 ( i ) は一定であるため、 B L 0 ( i ) -B L ( i ) の値が最も大きいとき、すなわち、 B L ( i ) が最小となるときに、

は最大値となる。上述した如く、スキャナを傾けた方向と逆の方向が最も暗くなるため、この場合のセル iの逆方向が、スキャナを傾けた方向となる。また、スキャナを傾けた角度は、

i となる。 '

なお、上述した式は、明るさに対して角度 0が線形となることを想定しているが、厳密には、三角関数等で以下のように近似するとさちに精度を高めることができる。このようにすると、角度は

となる

図 8 2は、フーリエ関数を用いて、傾斜方向を測定する方法である。

図 8 1に示す如く、 1から 8の 8個のセルを測点とし、各セルの明るさを測定する。

サイン関数は、

j { s i n ( 1 /2) j - 1 ( θ— /3 j ) }

で表される。すなわち、未知数は 2個となる。

したがって、 n個の測点を有する場合.には、離散したポイントが n倜となるため、 n/2個のサイン関数の和を求め、これが解析中心から半径における明るさ B L ( i ) となる。すなわち、

ただし、 n=2m (nは測点の数）

で表される。 '

本実施例においては、測点が 8個であるため、 n == 8である。したがって、 4個のサイン関数の式を合成することにより.、フーリエ級数の α 1〜 4および ι3 1〜 j3 4を求める。そして、解析中心から半径における明るさ B L ( i ) を、 4個のサイン関数の和で表す

'上記式より、 B L ( i ) が最小値となる角度 0が最も暗い位置であり、その 1 8 0度反対の方向が、スキャナを傾けた方向となる。図 8 3は、 n次方程式を解くことにより、傾斜方向を測定する方法ある。

図 8 3のグラフは、 n次関数を示したものである。 n次関数を用いた場合、解析中心から半径にお.ける明るさ B L ( i ) は、

B L ( i ) = α 1 ( Θ— β 1 )' - a 2 ( θ— β 2). · · · - a j ( θ-β j )

ただし、 j = n / 2 , n = 2 m

で表される。

図 8 1に示す如く、本実施例においては、測点が 8個であるため、 8個の解を求める必要がある。 1個の方程式には、 a j jの 2個の未知数が含まれているため、 4個の方程式を解き、 α 1〜 ο; 4おょぴ j3 1〜 3 4を求める。

これにより、 B L ( i ) が最小値となる角度 0を求める。角度 0 となる位置が最も暗い位置であり、その 1 8 0度反対の方向が、スキヤナを傾けた方向となる。

なお、図 8 2およぴ図' 8 3による測定方法では、キートップ画像の鉛直線に対するスキャナの傾きまでは測定できない。そこで、図 7 9〜図 8 0に示した測定方法と併用することにより、具体的に傾 'けた角度を測定することができる。

さらには、上述の図 7 8で説明したように、スキャナを用いて媒体面上のドットパターンを読み取る際に、スキャナが媒体面に対して傾けられたことをスキャナの撮像画像の明暗の差によって認識することにより、媒体面に対するスキャナの傾き方向にしたがて画面上の G U Iのオペレーションを行うことも可能である。

.図 7 8に示したように、中央処理装置（C P U) がスキャナの撮像 ¾像の明暗を認識し、その明暗領域が撮像中心に対して反対側に移動したときに、スキャナが媒体面に対して傾けられたと判定できる。 '

一方、撮像画像の明暗が前記撮像中心に対して回転するように変ィ匕したときに、中央処理装置（C P U) は、スキャナがグリッドグラインド動作が行われたことを判定する（図 3 2参照）。

また、撮像画像の明暗が撮像中心に対して前方向または後方向に繰り返し変化したときに、'中央処理装置は、スキャナが前方または後方に繰り返し倒される動作（グリッドポンプ動作）が行われたことを判定できる。このようなスキャナの'オペレーション動作にともなって、ディスプレイ画面上に表示されたカーソルの移動、画面のスクローノレ等の G U Iのオペレーションを行ってもよい。

画面上の G U Iのオペレーションは、具体的には、画面のスクロール、カーソル移動、画上のアイコンの指定、ドラッグ &ドロップ操作、メニュー選択、文字等の入力位置指示動作等のマウス操作のオペレーション等である。 (ぺーノーコン卜ローラ) 図 1 8〜図 3 0は、本発明の一実施形態であるペーパーコント口ーラについて説明した図である。

ペーパーコントローラの一面（媒体面）には、図 1 8に示すように、インターネットへのアクセスを行うブラウザプログラム'（マイクロソフト社のインターネットエクスプローラ（商標名）等）への指示を行う命令が紙媒体等の表面にアイコン領域として印刷されている。当該ペーパーコントローラ上には、同図に示すように、「ュ一ザ（オペレータ）登録」指示、ウェブ閲覧の際のカーソルの移動指示、 U R Lのコピーノリンク指示、ディスプレイ装置上に表示される、登録 '編集パネルの操作指示、登録 '編集パネルの開閉指示、登録 ·編集パネルの U R Lおよびそのリンクの削除指示を意味するアイコン領域が印刷されている。そして、これらのアイコン領域にはそれぞれの指示コードを意味するドットパターンが印刷されている。たとえば、ウェブ閲覧のスクロールアイコン領域の「上へ△ 」の領域には、ブラウザプログラムに表示される画面を上方に移動させる割り込みコードが登録されており'、「下へ▽」の領域には、ブラウザプログラムに表示される画面を下方に移動させる割り込みコードが登録されている.。

図 1 9は、インターネットの U R Lをブックマークとして登録するためのペーパーコントローラを示している。英文字の Gがデザィンされた四角形領域（アイコン領域）が 9行 X 1 1列分設けられており、これらの 9 9個のアイコン領域にそれぞれ異なるコード値のドットパターンが登録されている。また、右側には 9行 X 2列にカテゴリを示すアイコン領域が設けられている。

図 2 0は、図 1 8およぴ図 1 9で説明したペーパーコントローラの一面（媒体面）上に印刷されたドットパターンをスキャナ（S C N ) が読み取ることによって、パーソナルコンピュータの種^のォペレーションを行っている状態を示す説明図である。

ペーパーコントローラ本体は、シート状の紙または合成樹脂で形成されており、その上面には、ドットパターンを含む印刷面が構成されており、さらにその印刷面上には透明の保護シートが積層された^ミネート構造となっている。' なお、このような保護シートは必ずしも必須のものではなく、印刷面が露出したものであってもよいことはもちろんである。

また、図 2 1は、図 1 9で説明したペーパーコントローラの各ァイコン領域を剥離可能なシール構造にして、システム手帳等に貼付して、音声や音楽データ等との関連付げを行うものである。

図 2 4 ( a ) は、パーソナルコンピュータのハードディスク装置 ( H D ) 内に設けられたローカルなィンデックステーブルを示している。

ローカルなインデックステーブルには同図（a ) に示すように、ドットコ一ドが意味するコード番号と命令とが対応付けられている。当該インデックステーブルの内容は、具体的にはタグに登録されたドットパターンの I Dを読み取った際に実行される命令を登録した I D (会員用）に関する領域（第 1の領域：図では「 I D (会員用 ) J とした領域）と、ペーパーコントローラのドットパターンを読み取って変換されたコード番号とアクセス先を関係付けた領域（第

2の領域：図では「ペーパーコントローラ」とした領域）と、コ一ド号とコンテンツの登録先を関係付けた領域（第 3の領域：図では「媒体」とした領域）とに分けることができる。 ' たとえば、第 1.の領域を使用する例として、タグのドットパターンの読み取り結果において、コード番号の先頭の一桁が 1である場合には、中央処理装置（C P U ) は、解析プログラムに基づいて、このィンデックステーブルを参照して、タグからの情報であることを認識する。そして、この場合にはドットコード管理サーバへのァクセ^を行いドットコ一ド管理サーバのィンデックステーブル（図 2 4の（b ) に示す管理サーバテーブル）にアクセスするようになつている。

第 2の領域を使用する例として、ペーパーコントローラのドットパターンの読取結果において、' コード番号が 0 0 0 0 1〜 0 0 0 0 4以降である場合には、それぞれに対応付けられたファイルにァクセスするようになつている。

たとえば、同図に示すように、アクセス先としては、ドライブ名と起動ファイル、それにパラメータがセットになって登録されている。具体的には、ペーパーコントローラから読み取られたドットパターンが、コード番号 0 0 0 0 1である場合、電子メールのアプリケーションプログラムがこれに対応付けられており、パラメータとして新規のメール作成を意味するコマンドが設定されている。これによって電子メールのプログラムが起動し、電子メールが新規作成できるような状態になる。

また、たとえばコード番号 0 0 0 0 2の場合にはムービープレイャの起動が指定されており、パーソナルコンピュータ内に登録されたプレイヤソフトが起動するようになっている。

さらに、ペーパーコントローラから物理的なキーボードと同様に文字列が直接入力できるようになつており、たとえばコード番号 0 0 0 0 3が読み取られたときには、特定のァプリケーションにおいて英文字の「A」、または「B」 .が入力され、これらの文字コードがアプリケーションに引き渡されるようになつている。

さらに、第 3の領域を使用する例として、通販カタログ（媒体）等 fc印刷されたドットパターンを読み込んで、コード番号が 0 0 1 0 0〜であった場合、そのコード番号に対応付けられた U R乙へのアクセス（W e b閲覧）、プログラムの実行、ム一ビーファイルの起動（再生）が行われるようになつている。

ここで、スキャナが読み込んでコード番号に変換して、当該コード番号がィンデックステ一ブルに存在じない場合には、中央処理装置（C P U ) は、ネットワークを介して管理サーバへのアクセスを行う。

管理サーバでは、個人情報を管理するユーザデータベースとサーバ側のインデックステーブル（図 2 4 ( b ) 参照）が設けられている。図示を省略.したサーバ側の個人情報管理テーブルにはタグから読み取ったコード番号に対応した個人情報が登録されるようになつているが、前述の先頭桁に 1が付与されたコード番号に対して、個人情報が登録されてない場合には、管理サーバの中央処理装置（C P U ) は、プログラムにしたがって、初期登録プログラムを前記パ一ソナルコンピュータに対してダウンロードさせるようになつている。この初期登録プログラムでは、ユーザの自分の個人情報、' たとえば住所、氏名、電話番号等を入力するようになっている。このように入力された個人情報に基づいて、管理サーバのユーザデータべースが生成されるようになつている。すなわち、管理サーバのユーザデータベースにタグに対応付けた個人情報を登録しておくことにより、ネットワークアクセスや、決済等の認証処理を容易に行うことができるようになつている。管理サーバの管理サーバテーブルにも、前記図 2 4 ( a ) で説明したローカルのィンデッタステーブルと同様なテーブルが生成されている。この管理サーバテーブルは、' ロー力ノレのインデックステーブルに登録されたコード番号を補完するテーブルであり、スキャナでの読み取り結果のコ一ド番号が口一カルのィンデックステーブルに存在しない場合に、当該管理サーバテーブルがアクセスされる。たとえば、スキャナでの読み取り結果が、ローカルなインデックステーブルに存在しなかったコ一ド番号 0 0 2 0 0であった場合、パーソナルコンピュータめ中央処理装置（C P U ) は、プログラムにしたがって、ネットワークを介して管理サーバにアクセスし、管

I

理サーバテーブルを参照する。管理サーバテーブルにおいて、コード番号 0 0 2 0 0は、所定の U R Lのアクセス（W e bの閲覽）が定義されているので、当該パ一ソナルコンピュータは当該 U R Lへのアクセス（W e bの閲覧）を実行する。

また、当該コード番号がたとえば 0 0 2 0 1であり、スト'リーミング配信を意味している場合には、その配信サーバへのアクセスを行い、ストリ一ミングデータをダウンロードさせるようになつている。

なお、この場合、当該ストリー.ミングデータのダウンロードとともに、この管理サーバテーブルの内容も前記パーソナルコンビユータのィンデックステーブルにダウンロードされる。

したがって、その後は、パーソナルコンピュータがスキャナからの読取結果がコード番号 0 0 2 0 1であっても、管理サーバテープルアクセスすることなく、ローカルのィンデックステーブルのみで処理できるようになる。 ■

図 2 5〜図 2 8は、ペーパーコントローラの他の実施形態について説明した図である。

これらの図に示すペーパーコントロ一ラは、図 1 8〜図 2 0で説明したペーパーコントローラとほぼ同様であるが、所定のアイコン領域毎にガイドバンクが設けられている点が異なる。

ガイドバンクは、図 2 7に示すように、ペーパーコントローラ本体の上層にさらに、プラスチック板が設けられており、当該プラスチック板の一部が露出面方向に突出したリブ状のバンクガイドとな ί つている。

このバンクガイドは、上シート面上をスキャナの先端（図では下端）でスライド（シート面に沿って並行移動）させたときに、当該スキャナを把持したオペレータがスライド方向に対して僅かな障害として感じる程度の高さであることが好ましく、意図的に乗'り越えてスライドを継続することも可能である。

このようなバンクガイドを設けることによって、バンクガイドとペーパーコントローラ本体上のアイコン領域の位置関係をある程度覚えておけば、オペレータは目'視に依存しなくてもスキャナを意図するアイコン領域上に配置させることが可能となる。たとえば、図 2 5では、四角状のバンクガイドに囲まれた領域に最大 4個のアイコン領域（たとえば図 2 5の左欄中段には「U R L」、「リンク」、「全ての U R L」、「全てのリンク」）を設けているが、スキヤナをそれぞれ左上、右上、左下、右下の方向に移動できなくなるまで '（ガイドバンクの四隅まで)' スライドさせることで、ユーザ（ォペレータ）は手許のペーパーコントローラの印刷面を注視していなくても、それぞれのアイコン領域上で正確にスキャナを停止させてそれぞれのコード値の読み取りを行わせることができる。

なお、ガイド部は、カード自体をエンボス加工等することにより、カード自体に突起を設けてもよい。また、ガイドは、図 2 8に示すように、プラスチックの別体で構成し、カードのみをそのガイドに対して入れ替え可能にしてもよい。

図 2 9および図 3 0は、このペーパーコントローラのバンクガイ

I . - ドに囲まれた領域にドットパターンとともに点字の突起を設けたものである。このように点字とドットパターンを同じ領域に設けておくことにより、視覚障害を持つユーザ（オペレータ）がスキャナを使用するときにも健常者と同様の入力効率を保つことができる。特に、図 3 0では、媒体（たとえば紙や合成樹脂板）の所定の四角領域の上方にドットパターンが印刷され、下方に点字が設けられており、この四角領域が壁部（バンク）によって囲まれているため、目が不自由なユーザであってもスキャナの先端がバンクを越えることで異なる領域をスキャンする.ことが感覚的に把握できるようになっている。 .

なお、本実施例においては、ドットパターンが印刷されている領域と点字が印刷されている領域を別に設けたが、本発明はこれに限らず、ドットパターンと点字を同一の領域に重畳印刷してもよいことは勿論である。

(マウスパッド） ·

!ί 3 3〜図 3 9は、本発明の一実施形態であるマウスパッドについて説明した図である。 ·

図 3 3は、媒体としてのマウスパッドの一面（媒体面）上に印刷されたドットパターンをスキャナ（S C N) が読み取ることによつて、パーソナノレコンピュータの種々のオペレーションを行う、マウスパッドシステムを示す説明図である。 '

このマウスノヽ⁰ ッドは、前述のぺーハ。一コントローラ、ぺ一ノーキ一ボードと同様に、シート状の紙または合成樹脂で形成されており

ί 、その上面には、ドットパタ ^ンを含む印刷面が構成されており、さらにその印刷面上には透明の保護シートが積層されたラミネ一ト構造となっている。なお、このような保護シートは必ずしも必須のものではなく、印刷面が露出したものであってもよいことはもちろんである。 ' 印刷面は、図 3 4 ( a ) に示すように、内周領域と、環状の外周領域とで構成されている。

内周領域には、座標値とコード Aと力 Sドットパターンとして印刷されている。また、外周領域には.、座標値とコード Bとがドットパターンとして印刷されている。当該マウスパッドを座標入力に用いる場合には、円形内の全ての領域を用いてタブレツトのように座標入力が可能となる。

なお、同図（b ) は、外周領域にアルファベットのコード値を登録した画像領域を設けている。

なお、このようなマウスパッドは必ずしも円形である必要はなく、同図（ c ) および（d ) に示すように四角形状であってもかまわな！;、。 '

図 3 5は、環状の外周領域にパーソナルコンピュータの入力指示領域をそれぞれ配置したものであり、この各入力指示領域には、それぞれコンビユータのオペレーシヨンのためのコード値がドットパターン化されて印刷されており、マウスパッドの機能と前述のぺーパーコントローラの機能を兼ねている。

同図において、各機能領域（同図で丸付き数字で示された領域）における機能は以下の通りである。本詳細な説明では、丸付き数字をカツコつき数字として記載する。

( 1 ) 範囲選択

ァ'イコン（機能領域）をタツチして、内枠内のスキャナの動作で力一ソルを移動し、始点が決まったら、リリースし、もう一度タツチしてカーソルを移動して終点を決めてリリ ^"スすると、その間のテキストがブルー表示され、アクティブとなる。

）コピー

アイコン（機能領域）をタツチすると、範囲選択されたテキストをメモリに蓄える。メモリリストには、今、コピーしたテキストが先頭にリストされる。

( 3 ) 切り取り

アイコン（機能領域）をタツチすると、範囲選択されたテキストを削除し、そのテキストをメモリに貯える。メモリリストには、今、切り取ったテキストが先頭にリストされる。

( 4 ) 挿入

カーソルが入力モードになっていない等の場合、アイコン（機能領域)' をタツチして、カーソルキ · Τ Iを使って力一ソルを移動させるか、内枠内のスキャナの動作でカーソルを移動し、リリースすることにより、挿入位置を定める。

( 5 ) 貼り付け '

アイコン（機能領域）をタツチすると、入力モードになっている力一ソルの位置から、メモリに格納されてアクティブになっているテキストが挿入される。

(6) 消去

アイコン（機能領域）をタツチすると、直前に範囲選択されたテキズトを消去する。直前に範囲選択されていなければ、入力モードになっているカーソルの位置から後のテキストを 1文字消去す'る。 2 秒以上長押しすると、リリースするまで連続して文字が消去される

( 7 ) Back Space

ァコン（機能領域）をタツチす.ると、入力モードになっている力一ソルの位置の前のテキストを 1文字消去する。 2秒以上長押しすると、リリースするまで連続して文字が消去される。

(8) 行替え

アイコン（機能領域）をタツチすると、行替えして入力モードになつているカーソルの位置が行替えした先頭に移動する。

(9) 解除

アイコン（機能領域）をタツチすると、（1 ) 、（4) 、（ 1 5) のアイコン（機能領域）をクリックした後、何も操作していない場合、そのモードを解除し、待機状態となる。

(1 0) UNDO

アイコン（機能領域）をタツチすると、直前に行われたオペレーシヨンが解除され、その前の状態に戻る。何度も繰り返し戻ることが出来る。

(1 1 ) カーソル→ ( 1 2) カーソル—

( 1 3) カーソル ΐ

( 1 4) カーソルアイコン（機能領域）をタツチすると、入力モードになっている力一ソルの位置をその方向に 1文字移動させる。 2秒以上長押'しすると、連続してカーソルの位置をその方向に移動させる。もし、プルダウンメニューが表示されている場合は、（ 1 3) 、（ 1 4) のァ

6

5·

イコン（機能領域）をタツチすると、表示された項目のアクティブとなっている項目を上 · 下に移動させる。 ( Ϊ 5 ) メモリ表示 - アイコンをクリックすると、範囲選択してコピー、もしくは切り取られたテキストのリストが、新しい順で上から表示される。（1 1 ) 、（ 1 2) のアイコン（機能領域）をタツチしてアクティブとなつている項目を上 · 下に移動できる。アクティブとした項目を（6 ) 消去しない限り、全てのテキストは保存される。 (1 6) ENTER カーソルの位置を所定の位置に移動させ、その位置にインストラクシヨンがある場合、アイコン（機能領域）をタツチすると、そのィンストラクションが実行される。カナ漢字変換等の決定もできる。一 jfe的な ENTERキーと同じ機能を有する。図 3 6 (a) 〜（d) および図 3 7 (a) 〜（b) は、このようなマウスパッドを用いたスキャナの動作により、ィンターネットのブラゥザプログラムのウェブページのスク口一ノレオペレーションを示している。

図 3 8 ( a ) は立体マウスパッドの平面図、同図（b ) はその断面図である。

'当該マウスパッドは、環状の溝を設けて、領域の違いを把持したオペレータがスキャナを通じて体感できるようになっている。

このような溝は図 3 8に示した環状のものの他、図 3 9に示すような放射状のものであってもよレ、。

(その他のペーパーコントローラ）

図 4 0は、この入力読取り手段を設けて新たなキーボードを提案するものである。 '

キーボードの配置については、「H」「ダブル」「Y」および「変換」「Enter」を中心に扇状に各キートップの画像が配置されており、各キートップの画像は扇状に中心方に各キートップ画像が直線状に並ばないようにそれぞれずらした位置に配置されている。そして、各キートップ画像は、「Η」 ' 「ダブル」「Υ」および「変換」「Enter」を中心に、より内側に母音（「A」「 I 」「U」「 E」「〇」）、その外側に子音（「K 「S」「T」「Ν」「Μ」「Υ」「R」「W」）が配置されている。

これらのキートップ画像上には、図 9 ( b ) に示されたようなコ一ド値と X Y座標とが同一のフォーマツト中に登録されたドットパターンが重畳印刷されている。

この X Y座標は、アイコンごとに独立して X Y座標が定義されていてもよいし、媒体面全体にわたって X Y座標が定義されていてもよい。

このキーボードを用いれば、スキャナ（S C N) による媒体面のタツチ&リリースで文字入力を行うことが可能である。たとえば、「傘」と入力したい場合、まず、「K」のキートップ画像部分をスキャナで読み取らせる。そしてそのままスキャナ（S C N ) を' 「Α」 → 「 S」 → 「A」の順番にペーパーキーボード上をなぞる（摺動させる）。このようなキートップ間の動作は、媒体上に重畳印刷されたドットパターンの座標値の変化によって認識させることができる。その後、最後の「A」のキードッブ画像からスキャナをリリース (上に引き揚げ）する。パーソナルコンピュータの中央処理装置（ C P U ) は認識プログラムによって、ローマ字入力の「K A S A」の久力と、リリース動作によって「変換命令」であることを認識して、パーソナルコンピュータ等のアプリケーションプログラム（日本語入力プログラム）に引き渡す。これによつて、ディスプレイ装置上のカーソル位置には漢字で「傘」と表示される。また、入力した文字を日本語に変換したい場合には「変換」をスキャナで読み取らせてもよレ、。 ·

また、「特許」と入力したい場合には（図 4 2 ( 1 ) 〜（5 ) 参照）、まず「T」のキートップ画像部分をスキャナで読み取らせて、そのままスライドして.「0」 → 「Κ」 → 「ダブル」 → 「Υ」 → 「 O J にスライドさせ、最後の「〇」のキートップ画像からスキャナをリリース（上引き揚げ）する力さらに「変換」にスライドする。ここで、「ダブル」はその前の文字を 2回続けて入力する場合にスキャナで読み取る領域である。

パーソナルコンピュータの中央処理装置（C P U ) は認識プロダラムによって、ローマ字入力の「T O K (ダブル） Υ Ο」の入力と、リ'リース動作、またはそれに続く「変換」の読み取りによって「変換命令」であることを認識して、パーソナルコンピュータ等'のアブリケーシヨンプログラム（日本語入力プログラム）に引き渡す。これによって、ディスプレイ装置上のカーソル位置には漢字で「特許」と表示される。

図 4 1は、日本語の変換についての規則の一覧であるが、これに限定されなくてもよレ、。 - 図 4 3は、音声読取りの補助装置としての用途を示したものである。

向図は、音声による日本語入力を補助するシステムを示している。ユーザ（オペレータ）力マイクを通じて発声を行うと、パーソナルコンピュータの中央処理装置（C P U) は、マイクから入力された音声情報を分析して、変換候補をディスプレイ装置に表示するようになつている。ここではユーザ（オペレータ）力 S 「いし」と発声した場合を示している。ディスプレイ装置には「いし」の発声に対応した変換候補が「1. 意思」、「2 石」、「3 意志」、「 4 医師」、「 5 遺志」が表示されている。

ここで、ユーザ（オペレータ）はディスプレイ装置に表示された候補から番号を選択して、ペーパーコントローラ（ペーパーキーボ一のその番号のアイコン領域（たとえば「2」）をスキャナでスキャンする。これらの番号のアイコン領域にはそれぞれの番号がコード化されたドットパターンが印刷されており、前記スキャナのオペレーションにより、コード化された番号がパーソナルコンビュータに入力される。パーソナルコンピュータの中央処理装置（C P U ) は、入力されたコードから入力候補に関係付けられた番号を読み出し、当該番号に対応する変換文字（たとえば「石」）をアプリケーションプログラムに引き渡す。

6 9.

図 4 4から 5 6は赤外線リモコンの入力手段としてペーパーキーボードを用いた例である。 . これらは、スキャナをリモコンと一体化したものであり、図 4 4 の（a ) はリモコンの先端にスキャナが設けられた構造、図 4 4の ( b ) はリモコンの操作パネルとは反対側の面にスキャナが設けられた構造を示している。 ώ一ザ（オペレータ）は、リモコンのスキャナを用いて新聞等のラジオ 'テレビ欄を走查するようになつている。新聞のテレビ欄は、チャンネルと放送局とが Χ Υ方向に表示されており、番組名と出演者や内容が文字情報で印刷されている。このようなラジオ .テレビ欄には視聴 ·録画予約コードがドットパターンとして印刷されており、このドットパター.ンをスキャナでスキャンすることによって、番組毎に付与された予約コードをリモコンで読み込んで、セットトップボックス（S T B ) またはテレビ本体の赤外線受光部に向けて送信するようになっている。図 4 5は、クレードル（台）にスキャナが載置できる構造のリモコンであり、クレードル内にはスキャナからの読取信号を分析して赤外線信号を生成する中央処理装置（C P U) と電源（B A T ) 等が内蔵されている。

'図 4 6は、図 4 5のスキャナ（S C N ) とクレードルとを用いて C S放送やインターネット放送用のセットトップボッタスにして番組予約 ·録画する場合の説明図である。

なお、スキャナ（S C N ) とクレードルとの接続は図 4 5および 4 6に示した有線の他、無線で通信を行うようにしてもよレ、。

図 4 7は、図 4 5や図 4 6に示'したリモコンに用いられるぺーパ一コントローラの一例、図 4 8はセットトップボックスを制御対象としたリモコンに用いられるペーパーコントローラの一例である。図 4 9〜図 5 6は、図 4 7に示したペーパーコントローラの各機能領域（ドットパターンが印刷された領域、アイコン）のコード値が意味するテレビ（TV) またはセットトップボックスの実行命令を対 jfeつけたものである。 '

たとえば、図 4 7の表紙に印刷された「電源」の領域をスキャナで読み取ると、当該領域に印刷されたドットパターンが読み取られて、コード値に変換され、電源投入信号がテレビまたはセットトツプボックスに対して送信.される。

図 5 7は、本実施形態のペーパーコントローラを、ホテル内の客室に設けられたセットトップボックスに対しての制御を行う媒体として実現したものである。

このペーパーコントローラ上には、英語、中国語、韓国語、日本 ί - 語、それぞれについてシンボルが印刷されており、各シンボル上にはドットパターンが印刷されている。そしてそれぞれのシンボルが意味する動作をセットトップボックスが行うよう、制御信号が無線ま'たは光通信としてリモコンから出力されるようになっている。図 5 8および 5 9は、音楽あるいは動画プレイヤの制御を行う場合わぺーノ一コントローラ (ぺーノーキーボード) の一例である。音楽 ·動画プレイヤについては詳細な説明は省略するが、これらの音楽 ·動画プレイヤのオペレーションにおいてもスキャナ（S C N ) とこれらのペーパーコントロー.ラ（ペーパーキーボード）を使用して映像や音声の録画、再生が可能である。これらのペーパーコントローラ（ペーパーキーボード）の各命令領域にもドットパターンが入力されている。また、図 5 9に示すように、文字入力が可能なペーパーコントローラ（ペーパーキーボード）を用意してもよい。図 6 0〜図 6 7は、図 5 8および 5 9に示したペーパーコント口一ラの各機能領域（ドットパターンが印刷された領域、アイコン）のコード値が意味する音楽 ·動画プレイヤの実行命令を対応付けたものである。

図 6 8〜図 7 0は、媒体面として、ホワイトボードを用いた場合であり、このホワイトポード上にもドットパターンが印刷されている。このホワイトボード上のドットパターンは座標値を意味するドットコード（図 9参照）が印刷されているものとする。

図 7 0に示すように、座標値を意味するドットパターンが印刷されたホワイトボードに対して、プロジェクタにより所定の画像が投影表示される。プロジェクタは図示しないパーソナルコンピュータに接続されており、このパーソナルコンピュータに接続された本発明のスキャナ（図 1参照）を用いてホワイトボードの任意の位置を操作すると、その位置のドットパターンがスキャナ（S C N ) に読み込まれてパーソナルコンピュータ内で座標値に変換される。パーソナルコンピュータ内のハードディスク装置内には、座標値と命令またはァドレス等が対応付けられたィンデックステーブル（図 2 4 参照）を参照し、それに対応するアドレスに規定された情報表示、命令実行を行うようになっている。

I：のホワイトボードでは、図' 6 9に示すように、ホワイトボードの表面に粘着剤層が設けられており、ここに一面にドットパターンを印刷した透明シートがそのドットパターンを粘着剤層側にして貼付されている。

したがって、ドットパターン自体は透明シートに保護されているため、スキャナの先端が接触'したりホワイトボード用のペン先が接触してもドットパターン自体が劣化することはない。

図 7 0の例では、ホワイトボード上でアイコンが表示された領域上のドットパターンをスキャナで読み取ると、そのドットパターンがパーソナルコンピュータ上で座標値に変換されて、当該座標値に対応してあらかじめ登録されているアプリケーションプログラムが起動するようになっている。 ·

また、図 6 8 .に示すように、ホワイトボードの左側にリモコンの画像が投影され、右側にはリモコンで制御される動画が再生される T/JP2007/055334

ようになっていてもよい。この場合、リモ 3ンの各ポタンの投影画像に対応した箇所をスキャナで読み取ると、その座標値がパーソナルコンピュータに読み込まれて当該座標値に対応する動作、たとえば動画の再生、早送り、卷き戻し、一時停止等が行われ、投影動画（画像）を制御きるようになつている。図 7 1は、ホワイトボードの代わりに、ボードを半透明のアタリ

3·

ルボード（スクリーンボード）とした例であり、背後からリアプロジ: 5ηクタによってパーソナルコンピュータのデスクトップ画面や動画（画像）を投影するようになっている。このスクリーンボードでは、アタリルボードのリアプロジェクタ側に粘着剤層を介して赤外線力ットフィルタシートが貼付されており、その反対側の面には、粘着剤層を介して透明シートが貼付されている。そして透明シート粘着剤層側には座標値を意味するドットパターンが印刷されている。

このように、スクリーンポードのリァプロジェクタ側に赤外線力ットフィルタシートが貼付されていることにより、リアブロジェクタからの照射光の中の赤外線成分がカツトされるため、スキャナ側にはリァプロジェクタからの赤外線成分のノイズ光が届くことがない。そのため、ドットパターンの読み取り精度を高く維持することができる。 ' 図 7 1において.、スキャナによってブラゥザプログラムのアイコン部分が撮影された場合には、この座標値がパーソナルコンピュータの中央処理装置（C P U) によって、座標と処理命令とが対になつた対応テーブル（図示を省略）を参照して、前記ブラウザプロダラムのアイコンの配置位置であることが認識されて、当該座標に対応する処理命令（ここではブラウザプログラムの起動）が実行される図 7 3は、以上に説明したペーパーキーボードをユーザ（ォペレータ）自身が作成するために、画面上にペーパーキーボードのィメージ情報を編集し、たとえば一部の領域にマスクを切ってマスクを形成し、当該マスク上にドットパターンのコードを配置して自由な配攀でユーザ（オペレータ）自身が使えるペーパーキーボードを作成するための一例である。

画面上のアプリケーションで機能アイコンを自分で削除、追加、配置を自由にできるようなプログラムを用意し、その画面のィメ一ジをドットパターンと共に印刷するカヽあるいは、ドットパターンが印刷された用紙に印刷することにより、ワードプロセッサ、表計算ソフトなどのアプリケーションプログラムの機能の実行命令を全て自分専用にカスタマィズして印刷したペーパーキーボードにより実現することができる。

これによつて、画面上の機能ボタンの配置を少なくすることができ ^ ワードプロセッサや表計算、アプリケーションプログラムの画面ィンターフェースを極めてシンプルなものできる。

図 7 4および 7 5は、本実施形態に以上に説明したドットパターン読み取り装置と、インデックステーブル、サーバ管理テーブル等を用した一つの実施形態を技術紹介として配布資料の形式にしたものである。

この配布資料（図 74および 75) に示すように、本技術は Grid O'nput (商標名）として実現することが可能である。

図 74および図 75は、 GAM(Grid Application Manager、'この G AMはパーソナルコンピュータのハードディスク装置内にィンストールされたアプリケーションプログラムの名称である）として、ノヽ一ドウエアとしてはパーソナルコンピュータ（P C) でスキャナを使用する場合の例を示したものである。

同図において、（1) 〜（5)· 、 (7) までは実際の運用例を示しこものである。すなわち図 74の（1) に示すように、ユーザは CD-ROM, もしくはィンターネットの配信サーバにアクセスしてダウンロードしたインストールプログラムをパーソナルコンビュータ（P C) 上で実行し、〇 S (オペレーティングシステム）上に G AMとドライバプログラムを常駐プログラムとして登録する。また、そのときに GAMにバンドルされたアプリケーションプログラムや画像、動画等のコンテンツデータもハードディスク装置（HD) 内にィンストールする。

次に、 US B端子にスキャナが接続されると、前記常駐状態のドライパプログラムがこれを認識する。

次に、スキャナによってタグの表面が読み取られると、その撮影画像（ドットパーン）が US Bケーブルを介してパーソナルコンピュータ（PC) に読み込まれて、ビデオメモリ（VRAM) に展開される。中央処理装置（C PU) に読み込まれた GAMは、前述のアルゴリズム（GR I D 1または GR I D 2) にしたがって当該撮影画像（ドットパターン）からコード（コード番号）に復号する。

'ここでスキャナによってはじめてタグをスキャンしたときには、パーソナルコンピュータ（P C) のディスプレイ装置（D I'S P) には、当該タグに対応した個人情報の入力を促す画面が表示され、この表示画面にしたがって、ユーザは氏名、住所、クレジットカード番号等の個人情報を登録する。このようにして入力された個人情報は、前述の図 24に示した管理サーバテーブルに登録されて、以後の認証に使われる。 ·

つまり、その後はパーソナルコンピュータ（PC) を起動する際に、スキャナでタグをスキャンすることにより、管理サーバでの認証が行われ、この認証が完了すると、 GAMが起動するようになる次に、ドットパターンが印刷された紙媒体やペーパーコントローラ（ペーパーキーボード）がスキャナで走査される（読み取られる

) ことにより、ドットパターンが撮影され撮影画像データがパーソナルコンピュータに入力されて前記と同様に 32ビットの数字列からなるドットコード（コード番号）が復号される。

このドットコード（コード番号）に基づいて、 GAMのドットコード管理テーブル（インデックステーブル）が参照される。

こで、インデックステーブルに既に当該ドットコード（コード番号）が登録されていれば、そのパーソナルコンピュータ（P C) 内に既にィンストールされたコンテンツデータであるということが認識され、そのコンテンツデータが読み出されて再生される。このコ ^テンッデータが動画や画像であれば、それに対応した動画再生アプリケーションプログラムや画像表示プログラムによって、ムービーや画像がディスプレイ装置（D I S P) に表示される。 ' また、インデックステーブルのドットコード（コード番号）にィンターネット上のアドレス（URL) が登録されている場合には、閲覧プログラム（マイクロソフト社のィンターネットェクスプロ一ラ等）が起動して当該ァドレスのアクセスが行われる。

ところで、図 74の（5) に示すように、ドットパターンを読み取った結果のドットコード（コード番号）がローカル（パーソナルコンピュータ内）のドットコード管理テーブル（インデックステーブノ,レ）に登録されていないときには、インターネット上のドットコード管理サーバを参照するようになっている。ここで、ドットコード管理サーバの管理サーバテーブルにドットコード（コード番号）が登録されていればそのドットコード（コード番号）に対してのィンストラクシヨン（命令）にしたがって、指定された We bサーバから（1) コンテンツのダウンロード、具体的にはサーバ Aからのコンテンッのダウンロード、（2) 動画のストリーミング配信、具体的にはストリーミング配信サーバとしてのサーバ Bからのデ一タ配信、 (3) We bの閲覧、具体的にはサーバ Cのアドレス（URL) で指定された "We bファイルのダウンロードが自動的に開始されるようになつている。次にコンテンツデータがパーソナルコンピュータ（P C ) にダウンロードされたときには、そのコンテンツデータとともに、そのコンテンッデータを起動するためのドットコ一ド管理テーブル（ィンデックステーブル）の追加データ（コード番号とアドレスとが対になったデータ）もダウンロードされ、以後はパーソナルコンビユータ内のドットコード管理テーブル（インデックステーブル）で管理されるようになつている。

したがって、その後は前記と同一のコード番号が読み取られた場合、再度インターネット上のサーバ A， Bまたは Cにアクセスすることはなく、新たに追加されたデータを含むドットコード管理テーブル（インデックステーブル）に基づいて、パーソナルコンビユータのハードディスク装置（H D ) 内にダウンロードされたコンテンッデータが再生されることになる。

P 7 6および図 7 7は、ペーパーコントローラをレストラン等の飲食店のオーダーシステムに利用した例を説明したものである。同図に示すように、レストランの各テーブルには、メニュー項目毎に異なるコード番号のドットパターンが印刷されたメニューが置かれており、テーブルの一端にはディスプレイ装置（D I S P ) を備えたコンピュータ端末が設置されている。

スキャナには、ブルートゥース等の近距離無線通信システムが組み込まれており、コンピュータ端末との間で、メニューから読み取つたコード番号と個数情報とが送信が可能となっている。

スキャナから読み取られたメニュー項目に対応するコード番号と個数情報とは、前記コンピュータ端末に送信される。コンピュータ端末内の中央処理装置（C P U ) は、このメニュー項目のコード番号と個数情報とにテーブル番号を付加したオーダー信号を生成し、オーダーサーバに送信する。すーダーサーバでは、当該オーダー信号からテーブル番号とメニユー項目のコード番号と個数情報とを抽出して、厨房に対してォーダーを設定する。具体的には厨房に表示されるディスプレイ装置に対して、テーブル番号とコード番号に対応したメニュー項目とその個数を表示し、厨房担当者が調理の準備にとりかかれるようになつている。 .

なお、オーダー信号生成の際に、テーブル番号はコンピュータ端末内で付加する場合で説明したが、あらかじめコンピュータ端末のスタンドの表面またはテーブルの表面にテーブル番号を意味するドットパターンが印刷されたシール等が貼付されており、テーブル上にキャナを配布する際に、スキャナで前記シールの表面を読み取ることによって、テーブル番号とコンピュータ端末との関係付けが行われる。したがって、テーブル上に複数本のスキャナを配布して複数人からのオーダーを同時に受け付けられるようにしてもよい。図 8 4は、 X Y座標値をマウスパッドとして使用したペーパーキ一ボードの一例である。図 8 4 ( a ) は、ペーパーキーボードの一部にマウスパッド領域を設けたものである。 + 本実施例では、キートップ画像に印刷されたドットパターンにはコード値のみが登録されており、マウスパッド領域に印刷されたドットパターンにはコード値と X Y座標値が登録されている。ユーザがマウスパッド領域でスキャナを上方向にスライドさせると、画面が上方向にスクロールされる。同様に、スキャナを下方向にスライドせると、画面が下方向にスクロールされる。右方向、左方向についても同様である。

図 8 4 ( b ) は、ペーパーキーボード全体をマウスパッド領域として使用するものである。

本実施例では、すべてのキ一トップ画像に、キートップの内容に対応したコード値と、座標値の両方が登録されている。ユーザがぺ一パーキーボード上の任意の位置でスキャナを 2回以上タッビングし、それからスキャナを上方向にスライドさせると、画面が上方向にスクロ一ルされる。同様に、スキャナを 2回以上タッピングした後にスキャナを下方向にスライドさせると、画面が下方向にスクローされる。右方向、左方向についても同様である。

図 8 5では、投影ボード上に形成されたドットパターンは、座標値とコード値とが一つのドットパターンのフォーマツト中に定義されており、ボード上は所定のマトリクス区画が形成されており、同一のマトリクス区画内では、座標値の変化にかかわらず同一のコード値が付与されている。 '

本実施例は、アイコン画像は、 1つまたは複数のマトリクス区画にわたって配置されており、当該アイコン画像のドットパターンが読

I 取手段で読み取られることにより、当該アイコン画像に対応した映像の制御またはプログラムの起動が指示されることを特徴とする。図 8 6は、ホワイトボードの各マトリタスにおけるドットパターンのコ一ド値と X Y座標値との関係を示している。

図 8 6 ( a ) は、本ドットパターンの C。〜 C ₃ ！までの 3 2ビットに定義される値を表で示したものである。同図に示すように C。〜 ₇ が Y座標、 C ₈ 〜〇 ₅ が X座標、 ₆ 〜C _{2 9} がコード値、 C 3 。〜C ₃ , がパリティをそれぞれ意味している。

これらの数値は、（b ) に示す格子領域に配置され、具体的なドットパターンを示したのが（c ) である。

図 8 7は、パーソナルコンピュータのハードディスク装置（H D ) 内に設けられたコード値 ' コマンド対応テーブルについて示したものである。たとえば、スキャナで読み取られたドットパターンに対応したドットコ一ドが 1 1または 1 2である場合には、映像の再生を停止させる。また、ドッコードが 1 3である場合には、再生を一時停止させる。

I 8 8〜図 9 0は、デスクトップ画面をキヤプチヤーして印刷を行うことにより、デスクトップ画面のアイコンが印刷されたぺーパ一キーボードを作成する技術について説明する図である。

本実施例においては、キーボード（K B D ) の「プリントスクリーン」ボタン（p r t s c ) が押されること等によりデスクトツプ画面がキヤプチヤーされると、紙面にドットパターンとともにァイコンが印刷された、ペーパーキーボードが印刷媒体として出力されるプログラムが用意されている。図 8 8 ( a ) は、ディスプレイ（表示手段）のデスクトップ画面を示したものである。たとえばデスクトップ画面には、ワードプロセ'ッサ、ィンターネットおよぴ表計算のアイコン画像およびスタートボタンが表示されている。デスクトップ画面がキヤプチヤーされると、パーソナルコンビュータのハードディスク装置（H D ) は、デスクトップ画面上のどの

8

位にアイコンが表示されているか 2·を認識し、アイコンが表示されている位置の座標値を算出する。そして、デスクトップの X Y座標と印刷用紙の X Y座標とを対応させ、アイコンに対応したドットパターンを生成する。このドットパターンには、画面上の座標値を意味するドットパターンおよびアイコンの機能を意味するコード値が、 1つのフォーマットに含まれている。そして、デスクトップ画面のイメージと、生成したドットパターンとの重畳印刷処理を行う。図 8 8 ( b ) は、デスクトップ画面およびドットパターンが印刷されたペーパーキーボードを示す図である。図 8 9は、コード値と起動プログラムとの対応を示すテーブルにつ V、て説明した図である。上述した処理によりドットパターンが生成されると、ハードディスク装置（H D ) 内に、ドットパターンのコード値と、アイコンが意味する起動プログラム（アイコンの機能 ) とを対応させたテーブルが生成される。例えば、ワードプロセッサを示すアイコンに対応したドットパターンが生成され、コード値 0 0 0 1が割り当てられると、コード値 0 0 0 1 と起動プログラム W a r p r o . e . x e とが対応したテーブルが生成される。インタ一ネット、表計算を示すアイコンに関しても同様である。このようなテーブルが作成されることにより、ユーザが、例えば、図 8 8 ( b ) に示したペーパーキーボードのグラフの絵をスキャナによりクリックすると、表計算プログラムが起動する。 ' 図 9 0は、上述したドットパターンのフォーマツトについて示した図である。ドットパターンのフォーマットについては、前述したものと同様であるので説明は省略する。

fのように、あらかじめデスク.トップ画面上のアイコンを印刷しておくことにより、アイコンの指定が容易となる。例えば、すでに複数のプログラムを起動した等により、デスクトップ上のアイコンが画面から隠れてしまった場合であっても、印刷されたペーパーキ一ボード上でスキャナによりアイコン画像をクリックすれば、容易にプログラムを立ち上げることが可能となる。産業上の利用可能性

本発明は、パーソナルコンピュータやテレビ、音楽プレイヤ等の情報処理機器の入力システムに利用することができる。

ί

Claims

請求の範囲

1 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値とコード値と力 s iつのフォーマツトで定義されたドットパターンを読み込ませて、当該ドットパターンに定義された情報処理装置の中央処理装置に座標値およぴ /またはコード値入力のためのオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、

前記ドットパターンを読み取る.スキャナを用いて媒体面上のドットターンを読み取って当該ドットパターンに対応した座標値および Zまたはコード値を情報処理装置の中央処理装置に入力させる情報処理装置への入力処理システム。

2 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドットパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボー .ドの割り込みキーのコード値に変換して、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが媒体面上に印刷されたアイコン毎に形成されており、

前記ドットパターンを読み取るスキャナを用いて媒体面上のドットイターンが形成されたアイコン上を走査する際に、前記ドットパターンを読み取る前または後に前記スキャナが媒体面に対して傾けられたことを前記スキャナの撮像画像の明暗の差によって認識し、媒体面に対するスキャナの傾き方向にしたがって定義されたキー入 07/105819

85

力割り込み処理を発生させることを特徴とする情報処理装置への入 t

力処理システム。

3 . 前記スキャナの撮像画像の明暗の差が変化することによって、·スキャナの動作を簡、識し、スキャナの動作にしたがってキー入力割り込み処理を発生させることを特徴とする請求項 2記載の情報処理装置への入力処理システム。

4 . 前記キー入力割り込み処理は、入力される文字種の変更、文字変換の指示、カーソル移動であることを特徴とする請求項 2または 3記載の情報処理装置への入力処理システム。

5 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成れたドットパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボードの割り込みキーのコードに変換して

、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが媒体面上に印刷されたアイコン毎に形成されており、 ·

前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパターンが形成されたアイコン上を走査する際に、

母音のみの語の入力の際には、前記スキャナの先端を、当該母音に対応するコード値がドットパターンとして定義されたアイコンに接触させて当該アイコン上のドットパターンを読み取り、

子音と母音とからなる語の入力の際には、前記スキャナの先端の読取部を、当該子音に対応するコード値がドットパターンとして定義されたアイコンに接触停止させて当該子音に対応する.ドットパタ —ンを読み込ませた後、続く母音に対応するコード値がドットパターンとして定義されたアイコンまで前記スキャナの読取部を媒体面 i

上を摺動させて、当該母音に該当するアイコンで一旦停止させてドットパターンの読取を行った後、スキャナの先端の読取部を媒体面から離反させてドットパターンが認識できないようにすることで、単独の文字または一連の単語、文節の入力を行う日本語入力システム。

6 . オペレータの音声情報を入力する音声入力手段と、

入力された音声情報を解析してそれに対応する文字からなる 1または 2以上の単語候補に変換する変換手段と、前記で変換された 1または 2以上の単語候補を表示する表示手段と、

前記表示手段に表示された単語候補を選択するために、媒体面に形成され、カーソルを任意に移動するための座標値および/またはコード値がパターン化された'ドットパターンを読み取るスキャナと

前記スキャナで読み取られたドットパターンをコード値に変換し、当該コード値に対応する単語候捕を確定単語として入力する確定手段とからなる情報入力装置。

7 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値およびまたはコード値がパターン化されたドットパターンを読み込ませて当該ドットパターンに定義された情報処理装置の中央処理装置にオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、

前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパターンを読み取る際に、前記スキャナが媒体面に対して傾けられ'たことを前記スキャナの撮像画像の明暗の差によって認識し、媒体面に対するスキャナの傾き方向にしたがって画面上の G U Iのォペレーションを行うことを特徴とする情報処理装置への入力処理システム。

8 . 前記スキャナの撮像画像の明暗の差が変化することによって、スキャナの動作を認識し、当該スキャナの動作にしたがって画面上の G U Iのオペレーションを行うことを特徴とする請求項 7記載の情報処理装置への入力処理システム。

9 . 前記画面上の G U Iのオペレーションは、画面のスクロール、ーソル移動、画面上のアイコンの指定、ドラッグ &ドロップ操作、メニュー選択、文字等の入力位置指示動作等のマウス操作のォペレ一ションであることを特徴とする請求項 7または 8記載の情報処理装置への入力処理システム。

1 0 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成されたドットパターンを読み込ませて当該ドットパターンに定義されたハードゥエアキ一ボードの割り込みキーのコードに変換して、情報処理装置の中央処理装置にキー入力割り込み処理を発生させる、そのようなドットパターンが点字の凹凸部とともに媒体面上にアイコンとし T印刷された情報処理装置への入力処理システム。 1 I . 前記媒体面には、ドットパターンとそれを意味する点字と 7/105819

88

が組になつて所定領域に形成されており、当該領域毎に領域を隔成するバンクが設けられている請求項 1 0記載の情報処理装置への入力処理システム。

1 2 . 媒体面に印刷された番組情報、サイト情報に基づいて視聴

I

·録画予約またはサイトへのアクセスを行うリモコンであって、媒体面に印刷された番組情報、サイト情報の領域毎に所定のコード値が所定のアルゴリズムに基づいてパターン化されて形成されたドットパターンを光学的に読み取る撮像手段と、

前記撮像手段からの撮像画像か.らドットパターンを解析してその意味するコード値に復号する制御手段と、

当該復号化されたコード値を番組放送受信機、チューナー、録画，再生装置、再生装置またはネットワークアクセス装置、あるいは放送受信用 ·ネットワークアクセス用セットトップボックス、パーソすルコンピュータに送信する送信手段とからなるリモコン。 1 3 . 番組放送受信機、チューナー、録画 ·再生装置、再生装置またはネットワークアクセス装置、あるいは放送受信用 ·ネットヮークアクセス用セットトップボックス、 'パーソナルコンピュータの制御ボタンを意味する媒体面上のアイコンに、所定のコード値が所定のアルゴリズムに基づいてパターン化されて形成されたドットパターンが形成されており、

前記ドットパターンを光学的に読み取る撮像手段と、

前記撮像手段からの撮像画像からドットパターンを解析してその意味するコード値に復号する制御手段と、当該復号化されたコード値を番組放送受信機、チューナー、録画 '再生装置、再生装置またはネットワークアクセス装置、あるいは放送受信用 'ネットワークアクセス用セットトップボックス、パーソナルコンピュータに送信する送信手段とからなるリモコン。 1 4 . 前記撮像手段は、前記リモコンと一体に設けられだ読取部である請求項 1 2または 1 3記載のリモコン。

1 5 . 前記リモコンは、リモコン本体を構成し、前記制御手段と送信手段とを内蔵したクレードルと、

前記クレードルと有線または無線で接続されて制御手段と通信可能な撮像手段を備えたスキャナとからなる請求項 1 2または 1 3記載のリモコン。

1 6 . 所定の座標値おょぴ Zまたはコード値が所定のァルゴリズムでパターン化されたドットパターンが形成された投影ボードと、前記投影ボードの一面は、動画または画像が投影される映像表示ェアと、その映像表示エリアに投影される動画または画像を制御するためのアイコン画像が表示されるコントローラエリアとからなり、少なくとも映像表示エリアに動画または画像を投影する投影手段と、

前記コントローラエリアに形成されたドットパターンを読み取る読取手段と、

前記読取手段が読み取ったコントローラエリァのアイコン画像上のドットパターンを解析してその意味する座標値またはコード値に変換し、当該座標値またはコード値に対応する制御信号を前記投影 i - 手段に対して出力して映像表示エリアに表示される動画または画像の出力を制御する制御手段とからなる投影画像，動画制御システム

1 7 . 前記投影ボードは、ホワイトボードの表面に粘着層を介して透明シートが貼付されており、前記ドットパターンは透明シートと粘着層との間に形成されていることを特徴とする請求項 1 6記載の投影画像 ·動画制御システム。

1 8 . 所定の座標値および/またはコード値が所定のァルゴリズムでパターン化されたドットパターンが形成された投影ボードと、前記投影ボード上に少なくともプログラムの起動を意味するアイコン画像を投影するとともに、当該アイコン画像に対応した記憶装置にィンストールされたプログラムの表示画像または動画を投影する投影手段と、

前記で投影されたアイコン画像に形成されたドットパターンを読み取る読取手段と、 ·

前記読取手段が読み取ったアイコン画像上のドットパターンを解析してその意味する座標値またはコード値に変換し、当該座標値またはコード値に対応する起動信号に基づいて記憶装置からプロダラムを起動する制御手段とからなる、情報処理表示システム。

1 9 . 前記投影ボードのドットパターンが形成された面と、画像、動画またはアイコン画像を投影する面とは異なる面であり、前記投影ボードに対.して投影手段はリァプロジェクタとして配置される請求項 1 6または 1 8記載の投影画像 ·動画制御システムまたは情報処理表示システム。

2 0 . 前記投影ボードのドットパターンは赤外線吸収特性材料で構成され、少なくとも投影手段側の面には、赤外線カットフィルタが'設けられていることを特徴とする請求項 1 9記載の投影画像 ·動画制御システムまたは情報処理表示システム。 ■

2 1 . 表示手段に表示させたアイコン画像を、そのアイコン画像に対応したドットパターンとともに紙面に印刷するペーパーコント i

ローラ生成システムであって、

アイコン画像を生成し表示する表示手段と、

表示手段に表示されたアイコン画像をあらかじめ定義された座標値および/またはコード値に関係付けて、当該アイコン画像とドットパターンとの印刷を指示する制御手段と、

前記制御手段からの指示に基づいて前記アイコン画像と前記ドットパターンとを所定の媒体面に印刷する印刷手段とからなるアイコン画像の印刷制御システム。 .

2 2 . 表示手段に表示されたデスクトップ画面をドットパターンとともに紙面に印刷する情報処理装置の印刷方法であって、前記デスクトップ画面に対応した座標値をマッピングし、前記デスクトップ画面を印刷する際に画面上の座標値を意味するドットパターンを生成し、

前記デスクトップ画面上のアイコン画像等の機能画像上には、前記座標値とともに当該機能を意味するコード値を 1つのフォーマツトに含めたドットパターンを生成し、前記デスクトップ画面を前記ドットパターンとともに印刷する印刷方法。

2 3 . 前記投影ボード上に形成されたドットパターンは、座標値と 'コード値とが同一のパターン中に定義されており、

前記ボード上は所定のマトリクス区画が形成されており、词一のマトリクス区画内では、座標値の変化にかかわらず同一のコード値が付与されている請求項 1 6〜 2 0のいずれかに記載の投影画像 · 動画制御システムまたは情報処理表示システム。

2 4 . 前記アイコン画像は、前.記 1つまたは複数のマトリクス区画にわたつて配置されており、当該アイコン画像のドットパターンが読取手段で読み取られることにより、当該アイコン画像に対応した映像の制御またはプログラムの起動が指示されることを特徴とする請求項 2 3記載の投影画像 ·動画制御システムまたは情報処理表示システム。

2 5 . 前記ドットパターンは赤外線吸収材料で形成されるとともに、座標値とコード値とがーつのフォーマツト中に定義されていることを特徴とする請求項 2 , 5〜7 , 1 0〜 1 3および 1 6， 1 8 ，？ 1のいずれかに記載の情報処理装置への入力処理システム、日本語入力システム、情報入力装置、リモコン、投影画像 ·動画制御システム、情報処理表示システムまたはアイコン画像の印刷制御システム。

2 6 . 情報処理装置に接続されたスキャナを用いてその媒体面に形成された座標値とコード値と力 S 1つのフォーマツトで定義されたドットパターンを読み込ませて、当該ドットパターンに定義された情報処理装置の中央処理装置に座標値および/またはコード値入力のためのオペレーション指示を与える、そのようなドットパターンが媒体面上に印刷されており、

前記媒体面上のドットパターンは、コントローラまたはキ^"ボードの図柄と重畳して縦横方向に所定間隔ごとに基準格子点ドットを配置し、それぞれ 4点の基準格子点ドットに囲まれた中心の仮想格子点の周囲にその仮想格子点からのずれ方で値を定義した情報ドットを配置した所定のドットの集合であり、一つのドットパターンのフォーマツト中に X座標値と Y座標値とコード値とを含めたドットパターンが印刷された多重情報領域を有しており、

前記ドットパターンを読み取るスキャナを用いて媒体面上のドットパターンを読み取って当該ドットパターンに対応した座標値および/またはコード値を情報処理装置の中央処理装置に入力させる情報処理装置への入力処理システム。