JP2008204328A - 読取り装置、筆記情報処理システムおよびプログラム - Google Patents

読取り装置、筆記情報処理システムおよびプログラム Download PDF

Info

Publication number
JP2008204328A
JP2008204328A JP2007042001A JP2007042001A JP2008204328A JP 2008204328 A JP2008204328 A JP 2008204328A JP 2007042001 A JP2007042001 A JP 2007042001A JP 2007042001 A JP2007042001 A JP 2007042001A JP 2008204328 A JP2008204328 A JP 2008204328A
Authority
JP
Japan
Prior art keywords
illumination
unit
medium
information
reading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007042001A
Other languages
English (en)
Other versions
JP4107346B1 (ja
Inventor
Shin Takeuchi
伸 竹内
Kimii Hasuike
公威 蓮池
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2007042001A priority Critical patent/JP4107346B1/ja
Application granted granted Critical
Publication of JP4107346B1 publication Critical patent/JP4107346B1/ja
Publication of JP2008204328A publication Critical patent/JP2008204328A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)

Abstract

【課題】読取り装置による媒体上のドットパターンの正確な読み取りを可能とする。
【解決手段】媒体に対して光を照射する複数の赤外LED63(63a,63b,63c)の中から、ユーザによる媒体への筆記操作の際に点灯させる1または複数の赤外LED63を選択し、選択された赤外LED63にて照明された媒体から、媒体上に記録されたコードパターン画像に含まれる位置情報や識別情報を読み取る。
【選択図】図4

Description

紙等の媒体への筆記を電子化した筆記情報を生成する読取り装置等に関する。
近年、用紙上に筆記された文字や図形等が電子データに変換され、これがパソコンや携帯電話等に転送されて、筆記内容がそのまま保存されたり、メールとして送信される技術が注目されている。
かかる技術では、表面にそれぞれ異なるパターンで形成された微細なドットが印刷された特殊な用紙と、例えば撮像素子が内蔵されたデバイスとが用いられる。そして、デバイスによりこの特殊用紙上に筆記が行われると、筆記された文字や図形等の位置のドットパターンが撮像素子に読み込まれ、文字や図形等の位置(描画トレース)の座標が特定される。それにより、筆記された文字や図形等からなる電子文書の生成や、所定の電子文書への文字や図形等の付加等が可能となる(例えば、特許文献1参照)。
特開2004−94907号公報(第12−14頁)
本発明は、読取り装置による媒体上のドットパターンの正確な読み取りを可能とすることを目的とする。
かかる目的のもと、本発明の読取り装置は、媒体に対して光を照射する複数の照明手段と、複数の照明手段の中から、ユーザによる媒体への操作の際に点灯させる1または複数の照明手段を選択する照明選択手段と、照明選択手段により選択された照明手段にて照明された媒体から、媒体上に存在する情報を読み取る情報読取手段とを備えたことを特徴としている。
ここで、情報読取手段にて読み取った情報の読取認識率を算出する認識率算出手段と、読取り装置の傾き角を検出する傾き角検出手段とをさらに備え、照明選択手段は、認識率算出手段にて算出された読取認識率と傾き角検出手段にて検出された読取り装置の傾き角とのいずれか一方または双方に基づいて、照明手段を選択することを特徴とすることができる。また、情報読取手段は、照明選択手段による照明手段の選択に対応して、情報を読み取る際の撮像条件を変更することを特徴とすることができる。さらに、照明選択手段は、ユーザによる媒体への筆記操作、媒体上の領域に対応して記憶された所定の情報を読み取る操作、およびポインティング操作のそれぞれにおいて、1または複数の照明手段を選択することを特徴とすることができる。また、照明選択手段は、ユーザによる操作の際に、常時または所定の時間間隔にて照明手段を選択することを特徴とすることができる。
また、本発明を筆記情報処理システムとして捉え、本発明の筆記情報処理システムは、ユーザによる媒体への筆記操作に応じて、媒体上に記録された情報を読み取る読取り装置と、読取り装置にて読み取られた情報を取得し、取得した情報に基づいて媒体への筆記内容を媒体または媒体に印刷された電子文書に関連付けて記憶する情報処理装置とを備え、読取り装置は、媒体に対して光を照射する複数の照明手段と、複数の照明手段の中から媒体への筆記操作の際に点灯させる1または複数の照明手段を選択する照明選択手段とを有することを特徴としている。
ここで、読取り装置は、読み取った情報の読取認識率を算出する認識率算出手段をさらに備え、照明選択手段は、認識率算出手段にて算出された読取認識率に基づいて、照明手段を選択することを特徴とすることができる。特に、認識率算出手段は、ユーザによる筆記操作の際に常時または所定の時間間隔にて読取認識率を算出し、照明選択手段は、認識率算出手段にて算出された読取認識率が所定値を下回った場合に、照明手段を再度選択し直すことを特徴とすることができる。さらに、読取り装置は、読取り装置の傾き角を検出する傾き角検出手段をさらに備え、照明選択手段は、傾き角検出手段にて検出された読取り装置の傾き角に基づいて、照明手段を選択することを特徴とすることができる。
また、読取り装置は、読み取った情報の読取認識率を算出する認識率算出手段と、読取り装置の傾き角を検出する傾き角検出手段とをさらに備え、照明選択手段は、認識率算出手段にて算出された読取認識率と傾き角検出手段にて検出された読取り装置の傾き角との双方に基づいて、照明手段を選択することを特徴とすることができる。さらに、読取り装置は、照明選択手段による照明手段の選択に対応して、媒体上に記録された情報を読み取る際の撮像条件を変更する情報読取手段をさらに備えたことを特徴とすることができる。
また、本発明をプログラムとして捉え、本発明のプログラムは、コンピュータに、媒体に対して光を照射する複数の照明手段の中から、ユーザによる媒体への操作の際に点灯される1または複数の照明手段を選択する機能と、選択された照明手段にて照明された媒体から、媒体上に存在する情報を読み取る機能とを実現することを特徴としている。
なお、このプログラムは、例えば、ハードディスク等の予約領域に格納されたプログラムを、RAMにロードして実行される場合がある。また、予めROMに格納された状態にて、CPUで実行される形態がある。さらに、EEPROM等の書き換え可能なROMを備えている場合には、機器がアッセンブリされた後に、プログラムだけが提供されてROMにインストールされる場合がある。このプログラムの提供に際しては、インターネット等のネットワークを介してデータ記録装置を備えたコンピュータにプログラムが伝送され、データ記録装置の有するROMにインストールされる形態も考えられる。
本発明の請求項1によれば、媒体上に存在する情報の正確な読み取りが可能となる。
また、本発明の請求項2によれば、筆記操作の際の様々な状況の変化やユーザ各々の癖によるペンの傾きに対応させて、筆記情報を確実に生成することが可能となる。
また、本発明の請求項3によれば、媒体上に存在する情報の読み取り精度を高めることができる。
また、本発明の請求項4によれば、読取り装置に備えられた各種機能の動作精度を高めることが可能となる。
また、本発明の請求項5によれば、筆記情報の生成に際して、常に最適な照明手段を設定することが可能となる。
本発明の請求項6によれば、筆記情報を電子文書へ付加する際の筆記情報の明確性を高めることが可能となる。
また、本発明の請求項7によれば、筆記操作の際の様々な状況の変化に対応して、筆記情報を確実に生成することが可能となる。
また、本発明の請求項8によれば、筆記情報の生成に際して、常に最適な照明手段を設定することができる。
また、本発明の請求項9によれば、ユーザ各々の癖によるペンの傾きに対応させて、筆記情報を確実に生成することが可能となる。
また、本発明の請求項10によれば、筆記操作の際の様々な状況の変化やユーザ各々の癖によるペンの傾きに対応させて、筆記情報を確実に生成することが可能となる。
また、本発明の請求項11によれば、媒体上に記憶された情報の読み取り精度を高めることができる。
本発明の請求項12によれば、媒体上に存在する情報の正確な読み取りが可能となる。
以下、添付図面を参照して、本発明を実施するための最良の形態(以下、「実施の形態」という)について詳細に説明する。
[実施の形態1]
本実施の形態の筆記情報処理システムでは、紙等の媒体に対し、電子文書の文書画像に加え、コードパターン画像を印刷する。コードパターン画像とは、識別情報および位置情報を符号化して得られる識別符号および位置符号を画像化したものである。
ここで、識別情報としては、媒体を一意に識別する識別情報、または、媒体に印刷された電子文書を一意に識別する識別情報のいずれかが採用される。前者の識別情報を採用した場合、同じ電子文書を複数部数印刷すると、異なる媒体には異なる識別情報が付与される。一方、後者の識別情報を採用した場合、同じ電子文書を印刷すると、異なる媒体であっても同じ識別情報が付与される。
また、位置情報は、媒体上の座標位置を表す情報である。
本実施の形態の筆記情報処理システムでは、このような画像が印刷された媒体に対し、電子ペン(読取り装置)で筆記する。これにより、コードパターン画像に含まれる位置情報に基づいて筆記情報が生成される。また、コードパターン画像に含まれる識別情報に基づいて電子文書が特定される。なお、コードパターン画像に含まれる識別情報が媒体の識別情報である場合は、この識別情報と媒体に印刷された電子文書との対応を管理しておくことで、電子文書を特定することができる。
そして、この特定された電子文書に対し、筆記情報が関連付けられる。
なお、本明細書では、「電子文書」の文言を用いるが、これは、テキストを含む「文書」を電子化したデータのみを意味するものではない。例えば、絵、写真、図形等の画像データ(ラスタデータかベクターデータかによらない)、その他の印刷可能な電子データも含めて「電子文書」としている。
以下、このような概略動作を行う本実施の形態の筆記情報処理システムについて、具体的に説明する。
なお、上述したように、本実施の形態の筆記情報処理システムでは、識別情報として、媒体を一意に識別する識別情報と、媒体に印刷された電子文書を一意に識別する識別情報とを用いることができるが、ここでは媒体を一意に識別する識別情報を採用した場合を例として説明する。
本実施の形態の筆記情報処理システムでは、すでに述べたように、媒体の識別情報をコードパターン画像に埋め込む。そこで、本実施の形態において「識別情報」というときは、媒体の識別情報を指すものとする。例えば、同じ電子文書から作成した印刷文書に各人が別々にメモ等を書き込むような場合に、媒体毎に異なる識別情報を埋め込むと便利である。媒体に対する筆記情報を媒体毎に別々に管理することが容易に行えるからである。
また、媒体毎に異なる識別情報を埋め込んでおけば、情報追跡にも役立つ。例えば、媒体の識別情報と印刷を指示したユーザとの対応を記録しておくことで、特定の印刷文書を誰が出力したか容易に把握できるようになる。
なお、以下では、説明を簡単にするために、識別情報と位置情報とは明確に区別して用いる。しかしながら、媒体毎に異なる位置情報をコードパターン画像に埋め込み、その位置情報の違いにより媒体を識別するという手法もある。そこで、このような手法を採用した場合は、位置情報に媒体を識別する機能も備わっているものと見て、これを識別情報と考えるものとする。
まず、本実施の形態の筆記情報処理システムの構成について説明する。
図1は、本実施の形態が適用される筆記情報処理システムの全体構成を示した図である。この筆記情報処理システムは、情報処理装置の一例としての端末装置10、情報処理装置の一例としての文書サーバ20、情報処理装置の一例としての識別情報サーバ30、および画像形成装置40がネットワーク90に接続されることにより構成されている。また、この筆記情報処理システムは、印刷文書50および読取り装置の一例としての電子ペン60を含んで構成される。
端末装置10は、電子文書の印刷を指示したり、筆記情報を生成したりするために用いられる。なお、この端末装置10としては、例えばパーソナルコンピュータ(PC)が用いられる。
文書サーバ20は、電子文書を記憶している。そして、電子文書の印刷指示があると、電子文書の画像とコードパターン画像とを重畳した重畳画像の形成指示を出力する。また、本実施の形態において、文書サーバ20は、電子文書を複製する機能も有する。なお、この文書サーバ20は、例えば汎用のサーバコンピュータによって実現することができる。
識別情報サーバ30は、媒体に付与する識別情報を発行する。そして、発行した識別情報を、その媒体に印刷される電子文書と関連付けて管理する。また、本実施の形態において、識別情報サーバ30は、筆記情報を関連付ける電子文書を特定する機能も有する。なお、この識別情報サーバ30は、例えば汎用のサーバコンピュータによって実現することができる。
画像形成装置40は、媒体に画像を形成する。ここで、画像形成装置40における画像形成方式としては、例えば、電子写真方式を用いることができるが、インクジェット方式等のその他の如何なる方式を用いてもよい。
印刷文書50は、電子文書の画像とコードパターン画像とを重畳した重畳画像が印刷された媒体である。
電子ペン60は、印刷文書50に文字または図形を記録(筆記)する機能を有する読取り装置である。また、本実施の形態において、電子ペン60は、コードパターン画像から取得した情報を他の装置(例えば、端末装置10)に送信する機構も有する。さらには、ポインティングデバイス(マウス)機能や、媒体上の領域に対応して記録された所定の情報(例えば、コマンド情報)を読み取るスタイラス機能を同時に備えることもできる。
次に、本実施の形態の筆記情報処理システムにおいて印刷文書50を生成する際の動作を説明する。
図2は、印刷文書50を生成する際の筆記情報処理システムでの動作を示したシーケンス図である。
まず、ユーザが、端末装置10を操作し、文書サーバ20に格納された電子文書の中から印刷対象の電子文書を指定する。それにより、端末装置10は、その電子文書の印刷指示を文書サーバ20に送信する(ステップ101)。なお、このとき、端末装置10は、ユーザが指定した印刷パラメータも送信する。ここで、印刷パラメータには、ページ、部数、用紙サイズ、N−up(用紙の1ページ内に電子文書のNページを割り付ける印刷)、余白等がある。
文書サーバ20は、端末装置10から電子文書の印刷指示を受信する(ステップ201)。そして、印刷を指示された電子文書の格納場所と、端末装置10から受信した印刷パラメータとを識別情報サーバ30に送信する(ステップ202)。
それにより、識別情報サーバ30は、電子文書の格納場所と印刷パラメータとを受信する(ステップ301)。そして、識別情報を管理するデータベースから未使用の識別情報を取得する(ステップ302)。ここで、取得する識別情報の数は、印刷パラメータに応じて決定される。つまり、基本的には、印刷するページ数に印刷部数を乗じて得られる数の識別情報が取り出される。ただし、印刷パラメータ中に、N−upの指定等がある場合は、それも考慮される。例えば、10ページの電子文書を2−upで5部印刷する場合は、25(=10÷2×5)個の識別情報が取り出される。
次に、識別情報サーバ30は、識別情報と、電子文書の格納場所と、印刷パラメータとを関連付けてデータベースに登録する(ステップ303)。そして、識別情報サーバ30は、文書サーバ20に対し、識別情報を送信する(ステップ304)。
それにより、文書サーバ20は、識別情報を受信する(ステップ203)。そして、識別情報および位置情報を埋め込んだコードパターン画像を生成する(ステップ204)。なお、コードパターン画像の生成処理の詳細は後段で述べる。
その後、文書サーバ20は、電子文書の文書画像とコードパターン画像とを画像形成装置40に送信し、画像形成を指示する(ステップ205)。この指示は、例えば、電子文書、識別情報、位置情報からページ記述言語(PDL:Print Description Language)を生成し、これを送信することで行うことができる。
画像形成装置40は、文書サーバ20から電子文書の文書画像とコードパターン画像とを受信する(ステップ401)。そして、画像形成装置40は、まず、文書画像をC(シアン)、M(マゼンタ)、Y(イエロー)の画像に展開する(ステップ402)。次に、文書画像はC、M、Yのトナーを用いて、コードパターン画像はK(黒)のトナーを用いて、画像形成を行う(ステップ403)。
ところで、上述した例では、識別情報サーバ30は識別情報を発行するだけで、文書サーバ20が、識別情報を含むコードパターン画像を生成し、画像形成装置40に画像形成を指示する構成とした。しかしながら、識別情報サーバ30が、コードパターン画像を生成し、画像形成装置40に画像形成を指示する構成としてもよい。
また、コードパターン画像は、画像形成装置40で生成することもできる。この場合は、文書サーバ20または識別情報サーバ30が、電子文書から生成したPDLに識別情報を付加して画像形成装置40へ送信し、画像形成装置40が識別情報を含むコードパターン画像を生成することになる。
また、上記では、識別情報と、電子文書の格納場所と、印刷パラメータとが関連付けられて構成されたデータベースを識別情報サーバ30に置く構成について説明した。これは、かかるデータベースを共有可能な装置(識別情報サーバ30)に置くことで、複数ユーザへの対応や、サーバのアクセス制御技術を利用した電子文書のセキュリティ確保が可能となるからである。しかしながら、必ずしもこのような構成を採用しなければならないというわけではなく、端末装置10や文書サーバ20にこのようなデータベースを置く構成を採用してもよい。
また、上記した画像形成装置40では、コードパターン画像をKのトナーを用いて形成するようにした。これは、Kのトナーが、C、M、Yのトナーよりも赤外光の吸収量が多く、電子ペン60でコードパターン画像を読み取ることができるからである。しかしながら、コードパターン画像は、特殊トナーを用いて形成することも可能である。
ここで、特殊トナーとしては、可視光領域(400nm〜700nm)における最大吸収率が7%以下であり、近赤外領域(800nm〜1000nm)における吸収率が30%以上の不可視トナーが例示される。ここで、「可視」および「不可視」は、目視により認識できるかどうかとは関係しない。印刷された媒体に形成された画像が可視光領域における特定の波長の吸収に起因する発色性の有無により認識できるかどうかで「可視」と「不可視」とを区別している。また、可視光領域における特定の波長の吸収に起因する発色性が若干あるが、人間の目で認識し難いものも「不可視」に含める。
また、この不可視トナーは、画像の機械読取りのために必要な近赤外光吸収能力を高めるために、平均分散径が100nm〜600nmの範囲のものが望ましい。
次に、本実施の形態で生成されるコードパターン画像の元となるコードパターンについて説明する。
図3は、コードパターンについて説明するための図である。
まず、コードパターンを構成するビットパターンについて説明する。
図3(a)に、ビットパターンの配置の一例を示す。
ビットパターンとは、情報埋め込みの最小単位である。ここでは、図3(a)に示すように、9箇所の中から選択した2箇所にビットを配置する。図では、黒の四角が、ビットが配置された位置を示し、斜線の四角が、ビットが配置されていない位置を示している。9箇所の中から2箇所を選択する組み合わせは、36(=)通りある。したがって、このような配置方法により、36通り(約5.2ビット)の情報を表現することができる。
ただし、識別情報および位置情報は、この36通りのうち32通り(5ビット)を使用して表現するものとする。
ところで、図3(a)に示した最小単位の四角は、600dpiにおける2ドット×2ドットの大きさを有している。600dpiにおける1ドットの大きさは0.0423mmなので、この最小単位の四角の一辺は、84.6μm(=0.0423mm×2)である。コードパターンを構成するドットは、大きくなればなるほど目に付きやすくなるため、できるだけ小さいほうが好ましい。ところが、あまり小さくすると、プリンタで印刷できなくなってしまう。そこで、ドットの大きさとして、50μmより大きく100μmより小さい上記の値を採用している。これにより、プリンタで印刷可能な最適な大きさのドットを形成することができる。つまり、84.6μm×84.6μmが、プリンタ(画像形成装置40)で安定的に形成可能な最小の大きさなのである。
なお、ドットをこのような大きさにすることで、1つのビットパターンの一辺は、約0.5(=0.0423×2×6)mmとなる。
また、このようなビットパターンから構成されるコードパターンについて説明する。
図3(b)に、コードパターンの配置の一例を示す。
ここで、図3(b)に示した最小単位の四角が、図3(a)に示したビットパターンに相当する。すなわち、識別情報を符号化した識別符号は、16(=4×4)個のビットパターンを使用して埋め込まれる。また、X方向の位置情報を符号化したX位置符号と、Y方向の位置情報を符号化したY位置符号とは、それぞれ、4個のビットパターンを使用して埋め込まれる。さらに、左上角部に、コードパターンの位置と回転を検出するための同期符号が、1つのビットパターンを使用して埋め込まれる。
なお、1つのコードパターンの大きさは、ビットパターンの5個分の幅に等しいため、約2.5mmとなる。本実施の形態では、このように生成したコードパターンを画像化したコードパターン画像を、用紙全面に配置する。
次に、本実施の形態の筆記情報処理システムにおける筆記情報の電子文書への付加について説明する。ただし、以下の説明において、筆記情報は、電子文書に直接付加されるものとする。
まず、印刷文書50に対する筆記を読み取るのに用いられる電子ペン60について説明する。
図4は、電子ペン60の機能構成を示したブロック図である。
図4に示したように、電子ペン60は、ペン全体の動作を制御する制御部61、電子ペン60による筆記動作をペンチップ69に加わる圧力によって検出する圧力センサ62、媒体上に赤外光を照射する照明手段の一例としての第1赤外LED63aと第2赤外LED63bと第3赤外LED63c(以下、これらを総称して単に「赤外LED63」とも記す)、画像を撮像する撮像手段(情報読取手段)の一例としての赤外CMOS64を備えている。ここで、第1赤外LED63aと第2赤外LED63bと第3赤外LED63cとは、それぞれの光軸(図4中、1点鎖線)が媒体に対して異なる角度で交差するように配置されている。
加えて、電子ペン60は、識別情報および位置情報を記憶する情報メモリ65、外部装置との通信を制御する通信部66、電子ペン60を駆動するための充電可能なバッテリ67、電子ペン60の識別情報(ペンID)を記憶するペンIDメモリ68、各種設定を切り替えるスイッチ75を備えている。そして、これら各部は、制御部61に接続されている。
図5は、制御部61の機能構成を示したブロック図である。図5に示したように、制御部61は、コード検出部611、データ処理部612、照明制御部615、照明切替部616を含んで構成されている。
コード検出部611は、赤外CMOS64にて撮像された画像の各々からコードパターン画像を検出すると同時に、検出されたコードパターン画像の検出精度(読取認識率)信号を生成する。したがって、コード検出部611は、認識率算出手段としても機能する。
データ処理部612は、コード検出部611にて検出されたコードパターン画像から識別情報および位置情報を抽出する。
照明制御部615は、照明選択手段の一例であって、第1赤外LED63a、第2赤外LED63b、および第3赤外LED63cの点灯を制御する。具体的には、コード検出部611にて生成されたコードパターン画像の検出精度に基づいて、第1赤外LED63a、第2赤外LED63b、および第3赤外LED63cの中から、コード検出部611にて検出されるコードパターン画像の検出精度を最も高く設定することができる赤外LED63の一または複数を選択する。そして、選択された一または複数の赤外LED63を設定する信号(照明設定信号)を照明切替部616に送る。
照明切替部616は、照明制御部615から送られた照明設定信号に基づいて、設定された一または複数の赤外LED63をパルス点灯させる。
ここで、電子ペン60における制御部61の動作の概略を説明する。
図6は、各赤外LED63のパルス点灯を制御する照明制御信号、赤外CMOS64における画像取込信号と出力画像信号、およびコード検出部611での検出精度信号に関する出力タイミングチャートを示した図である。
ところで、本実施の形態の赤外CMOS64には、赤外領域に感度があるCMOSセンサであって、撮像した画像を同時に転送できるグローバルシャッタ方式のCMOSセンサが使用される。そして、赤外CMOS64は、70fps〜100fps(frame per second)程度の周期の画像取込信号(フレームレート)に従って画像を撮像する。また、それに伴い、本実施の形態の赤外LED63は、消費電力を抑制するために、赤外CMOS64への画像取込信号に同期してパルス点灯するように構成されている。
なお、撮像素子としてはCMOSセンサに限定するものではなく、CCD等の他の撮像素子を使用してもよい。
図6に示したように、電子ペン60による筆記が開始されると、ペンチップ69に接続された圧力センサ62が筆記動作を検出する。それにより、制御部61は、証明用に使用する赤外LED63を選択するための「照明選択サイクル」を開始する。
この照明選択サイクルでは、制御部61の照明制御部615は、まず、第1赤外LED63aをパルス点灯するための第1照明制御信号(図6(A))、第2赤外LED63bをパルス点灯するための第2照明制御信号(図6(B))、第3赤外LED63cをパルス点灯させるための第3照明制御信号(図6(C))を、照明切替部616に対して順次送信する。
照明制御部615から各照明制御信号を受け取った照明切替部616は、各照明制御信号に基づいて第1赤外LED63aと第2赤外LED63bと第3赤外LED63cとを順次パルス点灯させる。
一方、赤外CMOS64は、画像取込信号(図6(D))に同期して媒体上の画像を撮像する。その際に、赤外LED63は、上記したように、赤外CMOS64への画像取込信号に同期してパルス点灯するので、赤外CMOS64は、順次パルス点灯する第1赤外LED63a、第2赤外LED63b、第3赤外LED63cにて照明される媒体上の画像を撮像する。そのため、赤外CMOS64では、第1赤外LED63aにて照明された媒体上の画像、第2赤外LED63bにて照明された媒体上の画像、第3赤外LED63cにて照明された媒体上の画像に関する画像信号(出力画像信号:図6(E))が、順に生成される。
赤外CMOS64にて順次生成された出力画像信号は、コード検出部611に送られる。出力画像信号を受け取ったコード検出部611は、各出力画像信号を処理して、各赤外LED63の点灯により赤外CMOS64にて撮像された画像の各々からコードパターン画像を検出する。すなわち、コード検出部611は、第1赤外LED63aの点灯によるコードパターン画像と、第2赤外LED63bの点灯によるコードパターン画像と、第3赤外LED63cの点灯によるコードパターン画像とを順次検出する。
そして、検出された各コードパターン画像について、予め用意された複数のコードパターン画像とのパターンマッチングをそれぞれ行う。それにより、各コードパターン画像についての予め用意された複数のコードパターン画像に対する類似度がそれぞれ算出される。そして、算出された各コードパターン画像の類似度を表す検出精度信号を生成し(図6(F))、照明制御部615に送る。
なお、コード検出部611では、赤外CMOS64から受け取った出力画像信号を複数に分割し、分割された出力画像信号から検出精度信号を生成することもできる。すなわち、コード検出部611では、赤外CMOS64から受け取った出力画像信号を複数に分割し、分割されたそれぞれの出力画像信号についてコードパターン画像を検出する。そして、各コードパターン画像に対する上記したパターンマッチングをそれぞれ行い、それらの結果を統合して各コードパターンの類似度を表す検出精度信号を生成することもできる。
照明制御部615は、コード検出部611から受け取った検出精度信号を比較し、検出精度信号の中から最も高い検出精度を示すコードパターン画像を選択する。そして、選択されたコードパターン画像を検出した赤外LED63を、照明として用いる赤外LED63として設定する。ここで、図6に例示した出力タイミングチャートでは、第2赤外LED63bの点灯によるコードパターン画像の検出精度が最も高いので、照明として用いる赤外LED63として第2赤外LED63bが設定されることとなる。
照明として用いる赤外LED63(ここでは、第2赤外LED63bとする)が設定されると、照明制御部615は、第2赤外LED63bを設定する信号(照明設定信号)を照明切替部616に送る。
そして、照明切替部616は、媒体上に赤外光を照射する照明として第2赤外LED63bをパルス点灯させ、他の第1赤外LED63aおよび第3赤外LED63cを消灯するように制御する。それにより、それ以降の電子ペン60での筆記においては、第2赤外LED63bが使用されて、識別情報および位置情報を取得する「識別情報および位置情報取得サイクル」が実行されることとなる。
このようにして、本実施の形態の電子ペン60では、識別情報および位置情報取得サイクルにおいて、コードパターン画像の検出精度の最も高いと判断された赤外LED63が選択されて使用される。
使用される赤外LED63(第2赤外LED63b)が設定され、識別情報および位置情報取得サイクルが開始されると、第2赤外LED63bからの照明により撮像された画像がコード検出部611に入力される。そして、コード検出部611は、撮像した画像からコードパターン画像を取得する。コード検出部611により取得されたコードパターン画像はデータ処理部612に送られる。
コードパターン画像を受け取ったデータ処理部612は、コードパターン画像を復号し、コードパターン画像に埋め込まれている識別情報および位置情報を取得する。
なお、本実施の形態の電子ペン60では、上記の赤外LED63の設定に合わせて、照明制御部615は、コードパターン画像の検出精度によっては、選択された赤外LED63の発光時間を調整するように制御することもできる。例えば、最も高いと判断されたコードパターン画像の検出精度が所定値よりも小さい場合には、選択された赤外LED63の発光時間を長く設定することもできる。
また、本実施の形態の電子ペン60では、光軸が媒体に対して異なる角度で交差する複数の赤外LED63を配置し、その中から1または複数を選択的にパルス点灯される構成とした。しかし、本発明はこれに限定されるものではない。すなわち、例えば異なる波長の光を照射する複数の赤外LED63を配置する。そして、媒体に印刷されるコードパターン画像を形成する色材(例えば、トナー)の特性や、コードパターンを構成するコード体系等に対応して、それぞれに適した1または複数の赤外LED63を選択するように構成することもできる。
続いて、以下に、識別情報および位置情報取得サイクルにおける制御部61のコード検出部611およびデータ処理部612の動作について説明する。
図7は、電子ペン60のコード検出部611およびデータ処理部612での動作を示したフローチャートである。
まず、コード検出部611は、赤外CMOS64から印刷文書50上の画像を入力する(ステップ601)。そして、画像に含まれるノイズを除去するための処理を行う(ステップ602)。ここで、ノイズとしては、CMOS感度のばらつきや電子回路により発生するノイズ等がある。ノイズを除去するために如何なる処理を行うかは、電子ペン60の撮像系の特性に応じて決定する。例えば、ぼかし処理やアンシャープマスキング等の先鋭化処理を適用することができる。
次に、コード検出部611は、画像からドットパターン(ドット画像の位置)を検出する(ステップ603)。
また、コード検出部611は、検出したドットパターンを2次元配列上のデジタルデータに変換する(ステップ604)。例えば、2次元配列上で、ドットがある位置を「1」、ドットがない位置を「0」というように変換する。そして、この2次元配列上のデジタルデータ(コードパターン画像)は、コード検出部611からデータ処理部612へと受け渡される。
次いで、データ処理部612は、受け渡されたコードパターン画像から、図3(a)に示した2つのドットの組み合わせからなるビットパターンを検出する(ステップ605)。例えば、ビットパターンに対応するブロックの境界位置を2次元配列上で動かし、ブロック内に含まれるドットの数が2つになるような境界位置を検出することにより、ビットパターンを検出することができる。
このようにしてビットパターンが検出されると、データ処理部612は、ビットパターンの種類を参照することにより、同期符号を検出する(ステップ606)。そして、同期符号からの位置関係に基づいて、識別符号および位置符号を検出する(ステップ607)。
その後、データ処理部612は、識別符号を復号して識別情報を取得し、位置符号を復号して位置情報を取得する(ステップ608)。
ここで、識別情報および位置情報取得サイクルの実行時において、常時または所定の時間サイクルで、照明選択サイクルを実行するように構成することもできる。すなわち、コード検出部611は、常時または所定の時間サイクルで検出精度を算出し、検出精度信号を生成して、照明制御部615に送る。そして、照明制御部615は、コード検出部611から受け取った検出精度信号が所定のレベル(閾値)を下回らないかを監視する。そして、受け取った検出精度信号が閾値を下回った場合に、再度、上記した照明選択サイクルを実行し、照明として用いるのに最適な赤外LED63を設定し直す。
例えば、図6に例示した出力タイミングチャートでは、検出精度信号が(F1)の時点で閾値を下回ったので、照明選択サイクルが実行されることとなる。
なお、本実施の形態の筆記情報処理システムでは、例えばスイッチ75(図4参照)を押しながら筆記すると、照明として用いる赤外LED63が設定されないように構成することもできる。その場合には、識別情報および位置情報は取得されないので、筆記情報は生成されず、電子文書に付加されない。したがって、この場合には、電子ペン60は、単なるペンとして使用されることとなる。
また、赤外LED63から赤外CMOS64に至る光路中に、手動シャッタを設けておき、電子ペン60を単なるペンとして使用する場合には、手動シャッタにより赤外LED63からの照射光を遮断することもできる。この場合にも、識別情報および位置情報は取得されないので、筆記情報は生成されず、電子文書に付加されない。そのため、電子ペン60は、単なるペンとして使用されることとなる。
続いて、電子ペン60が取得した情報(識別情報および位置情報)から筆記情報を生成して電子文書に付加する処理について説明する。この処理は、端末装置10、文書サーバ20、識別情報サーバ30が情報を交換することによって実現される。
図8は、端末装置10、文書サーバ20、識別情報サーバ30の機能構成を示した図である。なお、端末装置10、文書サーバ20、識別情報サーバ30は、印刷文書50を生成するための機能も有しているが、ここでは、筆記情報を電子文書に付加するための機能のみを示す。
図8に示したように、端末装置10は、入力部11、出力部12、筆記生成部13、送信部14、受信部15を含んで構成されている。
入力部11は、ユーザへの問い合わせに対するユーザからの応答等の入力を受け付ける。
出力部12は、ユーザへの問い合わせ等を出力する。
筆記生成部13は、電子ペン60から得た位置情報に基づいて筆記情報を生成する。したがって、筆記生成部13は筆記情報生成手段として機能する。
送信部14は、識別情報、筆記情報、ユーザへの問い合わせに対する応答等を送信する。
受信部15は、電子ペン60からは、識別情報および位置情報を受信し、識別情報サーバ30からは、ユーザへの問い合わせ等を受信する。
なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、端末装置10の図示しないCPUが、入力部11、出力部12、筆記生成部13、送信部14、受信部15の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。
また、文書サーバ20は、文書記憶部21、文書生成部22、筆記付加部23、送信部24、受信部25を含んで構成されている。
文書記憶部21は、記憶手段であって、電子文書を記憶する。
文書生成部22は、文書記憶部21に記憶された電子文書を複製した新たな電子文書(以下、「複製文書」という)を生成し、この複製文書を文書記憶部21に記憶する。
筆記付加部23は、文書記憶部21に記憶された複製文書に筆記情報を付加する。
送信部24は、複製文書の生成や、複製文書に対する筆記情報の付加の結果を送信する。
受信部25は、複製文書の生成や、複製文書に対する筆記情報の付加の指示を受信する。
なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、文書サーバ20の図示しないCPUが、文書生成部22、筆記付加部23、送信部24、受信部25の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。また、文書記憶部21は、例えば、磁気ディスクによって実現される。
また、識別情報サーバ30は、DB(データベース)記憶部31、制御部32、登録部33、送信部34、受信部35を含んで構成されている。
DB記憶部31は、識別情報と、電子文書の格納場所と、印刷パラメータと、複製文書の存否を示すフラグとを対応付けたデータベースを記憶する。
制御部32は、識別情報サーバ30全体の動作を制御する。
登録部33は、DB記憶部31に記憶されたデータベースに情報を登録する。
送信部34は、端末装置10へは、ユーザへの問い合わせ等を送信し、文書サーバ20へは、複製文書の生成や、複製文書に対する筆記情報の付加の指示を送信する。
受信部35は、端末装置10からは、識別情報、筆記情報、ユーザへの問い合わせに対する応答等を受信し、文書サーバ20からは、複製文書の生成や、複製文書に対する筆記情報の付加の結果を受信する。
なお、これらの機能部分は、ソフトウェアとハードウェア資源とが協働することにより実現される。具体的には、識別情報サーバ30の図示しないCPUが、制御部32、登録部33、送信部34、受信部35の各機能を実現するプログラムを外部記憶装置から主記憶装置に読み込んで処理を行う。また、DB記憶部31は、例えば、磁気ディスクによって実現される。
ここで、識別情報サーバ30内のDB記憶部31が記憶するデータベースの内容について具体的に説明しておく。
図9は、このデータベース内のデータの一例を示している。
このうち、図9(a)は、各媒体に印刷された電子文書を管理するためのテーブルを示している。
図9(a)に示したように、このテーブルには、識別情報と、電子文書の格納場所と、印刷パラメータと、フラグとが項目として設けられている。
識別情報は、本実施の形態では、上述したように、各媒体の識別情報である。
電子文書の格納場所は、各媒体に印刷された電子文書が格納された場所の情報(アドレス情報)である。
印刷パラメータは、各媒体に電子文書を印刷した際に設定した印刷パラメータである。図9(a)では、印刷パラメータを、「ページ(P),余白(A,B,C,D)」という形式で示している。Pはページ番号であり、A、B、C、Dは、それぞれ、左側、右側、上側、下側の余白(単位はmm)である。なお、ここでは、印刷パラメータとしてページおよび余白を示したが、これに限られるものではない。この他にも、通常の印刷で用いられる種々の印刷パラメータを管理することが可能である。
また、フラグは、各媒体に印刷された電子文書に対し、複製文書が生成されているかどうかを示すものである。本実施の形態において、フラグ「ON」は、複製文書が生成されていることを示し、フラグ「OFF」は、複製文書が生成されていないことを示している。図2のステップ303でデータが登録された直後は、対応するフラグは初期値である「OFF」に設定されている。しかしながら、その後、印刷文書50に筆記がなされることにより複製文書が生成されると、フラグは「ON」になる。
図9(a)のデータベースについて、より具体的に説明する。
まず、1行目から4行目は、電子文書「aaa.doc」の第1ページから第2ページが2部印刷されたことを示している。その際、1部は、左右上下の余白が1mmで印刷され、もう1部は、左右上下の余白が2mmで印刷されている。
また、5行目は、電子文書「bbb.doc」の第1ページが1部印刷されたことを示している。その際、左右の余白は1mmで、上下の余白は2mmで印刷されている。
そして、1行目から5行目のうち、3行目から5行目におけるフラグは「OFF」なので、オリジナルの電子文書は複製されていない。これに対し、1行目および2行目におけるフラグは「ON」となっている。これは、1行目で管理される媒体、または、2行目で管理される媒体に筆記がなされ、そのオリジナルの電子文書である「aaa.doc」が複製されていることを示している。
このようにオリジナルの電子文書に対する複製文書が生成されると、本実施の形態の識別情報サーバ30では、これを別のテーブルで管理している。
図9(b)は、このような複製文書を管理するテーブルを示している。
すなわち、図9(a)の1行目で管理される媒体に対し、「aaa.doc」に対する複製文書である「aaa.xdw」の1ページ目が関連付けられている。また、図9(a)の2行目で管理される媒体に対し、「aaa.doc」に対する複製文書である「aaa.xdw」の2ページ目が関連付けられている。
なお、ここでは、図9(a)の1行目および2行目で管理される電子文書の複製文書が図9(b)で管理される例を示した。しかしながら、このことは、図9(a)の1行目および2行目で管理される媒体の両方に実際に筆記がなされたことを意味しない。ある媒体に筆記がなされた場合、オリジナルの電子文書全体について複製文書を生成してもよいし、オリジナルの電子文書のうちその媒体に印刷されたページのみについて複製文書を生成してもよいからである。
次に、図10は、筆記情報を電子文書に付加する際の動作を示したシーケンス図である。
まず、電子ペン60は、図6の処理により取得した識別情報および位置情報を端末装置10に送信する(ステップ611)。
端末装置10では、受信部15が、電子ペン60から識別情報および位置情報を受信し、これらの情報を筆記生成部13に受け渡す(ステップ111)。
次に、筆記生成部13は、受け渡された情報のうち位置情報に基づいて筆記情報を生成し、送信部14に受け渡す(ステップ112)。このとき、筆記情報は、媒体上の複数の位置を示す位置情報に基づいて生成される。
なお、電子ペン60から受信した位置情報に誤りがあった場合、筆記生成部13は、次のような処理を行うことで、位置情報を補正するようにしてもよい。
第一に、複数の位置情報を比較し、その中で特異点を取り除くフィルタ処理である。すなわち、1回の筆記動作(ストローク)によって取得した複数の位置情報の連続性を検査し、連続性から大きく外れる点は、復号エラーがあった点として除外する。これにより、スムーズな筆記情報を得ることができる。
第二に、復号に失敗した位置情報を検出し、その位置情報を周辺の位置情報に基づいて補正する補正処理である。すなわち、1回の筆記動作(ストローク)によって取得した複数の位置情報の連続性を検査することで、復号エラーを検出する。そして、復号に失敗した位置情報を、その近傍の復号に成功した位置情報を用いて補正する。ここで、補正方法としては、線形補間、スプライン補間等、公知の手法を用いることができる。
また、筆記生成部13は、受信部15から受け渡された識別情報は、そのまま送信部14に受け渡す。
その後、送信部14は、識別情報および筆記情報を識別情報サーバ30に送信する(ステップ113)。
これにより、識別情報サーバ30では、受信部35が、識別情報および筆記情報を受信し、制御部32に受け渡す(ステップ311)。そして、制御部32は、DB記憶部31に記憶されたデータベースを参照し、受信した識別情報に対応するフラグが「ON」になっているかどうかを判定する(ステップ312)。つまり、過去に同じ媒体に筆記がなされたことにより、その媒体に印刷された電子文書に対する複製文書が生成済みであるかどうかを判定する。
ここで、フラグが「ON」であると判定された場合、すなわち、複製文書があると判定された場合、制御部32は、端末装置10に問い合わせを送信するよう送信部34に指示する。そして、送信部34は、端末装置10に問い合わせを送信する(ステップ313)。
複製文書があれば、その複製文書に筆記情報を追加する場合と、その複製文書とは別に新たな複製文書を生成してその新たな複製文書に筆記情報を付加する場合とが考えられる。そこで、本実施の形態では、このどちらを選択するかをユーザの判断に委ねているのである。例えば、図9(a)の1行目で管理される媒体に筆記がなされた場合、図9(b)の1行目で管理される複製文書に筆記情報を追加するか、図9(a)の1行目で管理されるオリジナルの電子文書から生成された新たな複製文書に筆記情報を付加するかが、問い合わせられる。
これにより、端末装置10では、受信部15が、問い合わせを受信する(ステップ114)。そして、受信部15が、この問い合わせを出力部12に受け渡し、出力部12が、問い合わせのメッセージを出力し、ユーザが、この問い合わせに対する応答を入力する。ここで、応答の内容は、既にある複製文書に筆記情報を追加するか、新たに生成した複製文書に筆記情報を付加するか、の選択情報である。このような応答が入力されると、入力部11が、応答を受け付けて送信部14に受け渡し、送信部14が応答を識別情報サーバ30に送信する(ステップ115)。
これにより、識別情報サーバ30では、受信部35が、応答を受信し、制御部32に受け渡す(ステップ314)。そして、制御部32は、応答内容を参照し、既にある複製文書に筆記情報を追加するか、新たに複製文書を生成してそれに筆記情報を付加するかを判定する(ステップ315)。
ここで、既にある複製文書に筆記情報を追加すると判定した場合は、その旨の指示を送信部34に対して行う。そして、送信部34が、ステップ312で特定した複製文書に対する筆記情報の追加を文書サーバ20に指示する(ステップ319)。
これにより、文書サーバ20では、受信部25が、筆記情報の追加指示を受信し、筆記付加部23に受け渡す。そして、筆記付加部23は、文書記憶部21に記憶された複製文書のうち、指定された複製文書に筆記情報を付加する(ステップ213)。
一方、新たに複製文書を生成してそれに筆記情報を付加すると判定した場合は、ステップ316へ進む。また、本実施の形態では、媒体に印刷された電子文書そのもの(オリジナルの電子文書)に筆記情報を付加することはしない。したがって、ステップ312でフラグが「OFF」であると判定された場合、すなわち、複製文書がないと判定された場合も、同様にステップ316へ進む。
すなわち、制御部32は、ステップ312で特定したオリジナルの電子文書に対する複製文書の生成指示を文書サーバ20に送信するよう送信部34に指示する。そして、送信部34は、文書サーバ20に対し、複製文書の生成を指示する(ステップ316)。例えば、図9(a)の3行目で管理される媒体に筆記がなされた場合、「aaa.doc」に対する複製文書の生成が指示される。
これにより、文書サーバ20では、受信部25がこの指示を受信し、文書生成部22に受け渡す。そして、文書生成部22が、文書記憶部21に記憶された電子文書のうち、指定された電子文書に対する複製文書を生成し、文書記憶部21に記憶する(ステップ211)。
なお、このとき、識別情報サーバ30の制御部32は、DB記憶部31内のデータベースにおいて媒体に対応付けられた印刷パラメータを取得する。そして、送信部34が、この印刷パラメータを文書サーバ20に送信する。こうすることにより、文書サーバ20の文書生成部22は、印刷文書と見た目が同じ複製文書を生成することができる。その結果、筆記情報の電子文書への反映がより高精度に行えるようになる。
また、電子文書が編集されてしまうと、電子文書と筆記情報との対応関係が崩れ、矛盾が生じる場合がある。さらに、電子文書の中には、Webページ等のように、印刷文書に相当するページ構造を持たないものもあり、印刷時の設定により印刷文書のレイアウトが大きく異なる場合がある。このような場合であっても、印刷文書と同じレイアウトを持つ電子文書を生成することで、筆記情報を適切な位置に反映させることができるのである。
このとき、さらに、複製文書は、オリジナルの電子文書に相当する部分が編集できない形式とすることができる。このような複製文書の形式としては、富士ゼロックス社の「DocuWorks」における「XDW形式」や、米国アドビシステムズ社の「Acrobat」における「PDF形式」等がある。そして、このようにオリジナルの電子文書に相当する部分が編集できない形式の複製文書を生成した場合、例えば、富士ゼロックス社の「DocuWorks」における「アノテーション」の機能を用いて複製文書に筆記情報を貼り付けることができる。
このように複製文書が生成されると、文書生成部22は、複製文書の格納場所(ファイル名を含む)の情報を取得し、それを送信部24に受け渡す。そして、送信部24が、この情報を識別情報サーバ30に送信する(ステップ212)。
これにより、識別情報サーバ30では、受信部35が、複製文書の格納場所の情報を受信し、制御部32を介して登録部33に受け渡す(ステップ317)。そして、登録部33は、識別情報とこの格納場所との対応をDB記憶部31に記憶する。また、複製元のオリジナルの電子文書に対応するフラグを「ON」に変更する(ステップ318)。例えば、図9(a)の1行目が登録された直後において媒体に筆記がなされたとすると、ここで図9(b)の1行目が登録される。そして、図9(a)の1行目のフラグが「OFF」から「ON」へ変更される。
その後、制御部32は、複製文書への筆記情報の追加を送信部34に指示する。そして、送信部34が、ステップ317で特定した複製文書に対する筆記情報の付加を文書サーバ20に指示する(ステップ319)。例えば、図9(a)の1行目が登録された直後において媒体に筆記がなされたとすると、図9(b)に1行目に登録された「aaa.xdw」の1ページ目への筆記情報の付加が指示される。
これにより、文書サーバ20では、受信部25が、筆記情報の付加指示を受信し、筆記付加部23に受け渡す。そして、筆記付加部23は、文書記憶部21に記憶された複製文書のうち、指定された複製文書に筆記情報を付加する(ステップ213)。
なお、本実施の形態の筆記情報処理システムでは、筆記情報の付加対象を既にある複製文書とするか新たに生成した複製文書とするかを、ユーザに問い合わせて判断したが、これには種々のバリエーションが考えられる。
まず、ユーザに対する問い合わせ等を行うことなく、筆記情報を付加する電子文書をシステム側で決めてしまうという方法である。
或いは、筆記情報を付加すべき電子文書の選択方法が印刷時に既に決まっている場合は、その選択方法を指定する指定情報をコードパターン画像の一部として媒体に埋め込んでおいてもよい。この場合は、電子ペン60がコードパターン画像から識別情報および位置情報を取得する際に、この指定情報も取得し、識別情報サーバ30に送信する。そして、識別情報サーバ30では、ステップ315での判定をこの指定情報に基づいて行う。
以上説明したように、本実施の形態の筆記情報処理システムでは、電子ペン60での筆記が行われる際には、コードパターン画像の検出精度の最も高いと判断された赤外LED63が選択されて使用されように構成されている。
それにより、ユーザによる電子ペン60での筆記に際して様々な状況の変化が生じた場合にも、媒体上から正確に識別情報および位置情報を取得できる。
[実施の形態2]
実施の形態1の筆記情報処理システムでは、コードパターン画像がどの程度正確に判別されたかを示す検出精度に基づいて、照明として用いる赤外LED63を選択する構成について説明した。本実施の形態の筆記情報処理システムでは、電子ペン60の傾き角に基づいて、照明として用いる赤外LED63を選択する構成について説明する。なお、実施の形態1と同様な構成については同様な符号を用い、ここではその詳細な説明を省略する。
図11は、本実施の形態の筆記情報処理システムにて用いられる電子ペン60の制御部61の機能構成を示したブロック図である。図11に示したように、本実施の形態の制御部61は、コード検出部611、データ処理部612、傾き角検出部614、照明制御部615、照明切替部616を含んで構成されている。
ここで、傾き角検出部614は、傾き角検出手段の一例であって、電子ペン60の所定の平面(例えば、水平面)からの傾き角を検出するセンサを有している。そして、本実施の形態の筆記情報処理システムでは、傾き角検出部614での検出値(傾き検出信号のレベル)により、照明として用いる赤外LED63を選択するように構成している。すなわち、媒体を照射する光の入射角によって、媒体上に形成されたコードパターン画像から赤外CMOS64に入射する反射光量が変化することから、電子ペン60の傾きに応じて、最適な赤外LED63を選択するものである。
ここで、本実施の形態の電子ペン60における制御部61の動作の概略を説明する。
図12は、各赤外LED63のパルス点灯を制御する照明制御信号、赤外CMOS64における画像取込信号と出力画像信号、および傾き角検出部614での傾き検出信号に関する出力タイミングチャートを示した図である。
図12に示したように、電子ペン60による筆記が開始されると、ペンチップ69に接続された圧力センサ62が筆記動作を検出する。それにより、傾き角検出部614は、電子ペン60の傾き角の検出を開始し、電子ペン60の傾き角を表す傾き検出信号を生成する。そして、生成した傾き検出信号を照明制御部615に送る。
傾き検出信号を受け取った照明制御部615は、傾き検出信号のレベルに応じて、第1赤外LED63aをパルス点灯するための第1照明制御信号(図12(A))、第2赤外LED63bをパルス点灯するための第2照明制御信号(図12(B))、第3赤外LED63cをパルス点灯するための第3照明制御信号(図12(C))のいずれか1または複数を選択的に生成する。その際に、各照明制御信号は、赤外CMOS64への画像取込信号に同期して生成される。
図12に示した具体例では、照明制御部615は、傾き検出信号のレベルが“a”以上の場合には、第1照明制御信号と第3照明制御信号を生成する。すなわち、この場合には、第1赤外LED63aと第3赤外LED63cとが同時にパルス点灯される。
傾き検出信号のレベルが“b”以上“a”未満の場合には、第1照明制御信号を生成する。すなわち、この場合には、第1赤外LED63aがパルス点灯される。
傾き検出信号のレベルが“c”以上“b”未満の場合には、第2照明制御信号を生成する。すなわち、この場合には、第2赤外LED63bがパルス点灯される。
傾き検出信号のレベルが“c”未満の場合には、第3照明制御信号を生成する。すなわち、この場合には、第3赤外LED63cがパルス点灯される。
なお、本実施の形態の電子ペン60では、上記の赤外LED63の設定に合わせて、照明制御部615は、傾き検出信号のレベルによっては、選択された赤外LED63の発光時間を調整するように制御することもできる。例えば、傾き検出信号のレベルが所定の範囲内である場合には、選択された赤外LED63の発光時間を長く設定することもできる。
一方、赤外CMOS64は、画像取込信号(図12(D))に同期して媒体上の画像を撮像する。その際に、赤外LED63は、上記したように、赤外CMOS64への画像取込信号に同期してパルス点灯するので、赤外CMOS64は、パルス点灯する第1赤外LED63a、第2赤外LED63bおよび第3赤外LED63cのいずれか1または複数にて照明される媒体上の画像を撮像する。それにより、赤外CMOS64では、照明された媒体上の画像に関する画像信号(出力画像信号:図12(E))が生成される。
赤外CMOS64にて生成された出力画像信号は、コード検出部611に送られる。そして、コード検出部611は、撮像した画像からコードパターン画像を取得する。コード検出部611により取得されたコードパターン画像はデータ処理部612に送られる。
コードパターン画像を受け取ったデータ処理部612は、コードパターン画像を復号し、コードパターン画像に埋め込まれている識別情報および位置情報を取得する。
このように、本実施の形態の筆記情報処理システムでは、電子ペン60での筆記が行われる際には、電子ペン60の傾き角を検出し、その検出結果に基づいて最適な赤外LED63が選択されて使用されように構成されている。
それにより、例えばユーザ各々が有する癖により電子ペン60の傾きが異なる状態で電子ペン60による筆記が行われる場合にも、媒体上から正確に識別情報および位置情報を取得することができる。
[実施の形態3]
実施の形態1の筆記情報処理システムでは、コードパターン画像がどの程度正確に判別されたかを示す検出精度に基づいて、照明として用いる赤外LED63を選択する構成について説明した。また、実施の形態2の筆記情報処理システムでは、電子ペンの傾き角に基づいて、照明として用いる赤外LED63を選択する構成について説明した。本実施の形態の筆記情報処理システムでは、コードパターン画像の検出精度と電子ペンの傾き角との双方に基づいて、照明として用いる赤外LED63を選択する構成について説明する。なお、実施の形態1および実施の形態2と同様な構成については同様な符号を用い、ここではその詳細な説明を省略する。
図13は、本実施の形態の筆記情報処理システムにて用いられる電子ペン60の制御部61の機能構成を示したブロック図である。図13に示したように、本実施の形態の制御部61は、コード検出部611、データ処理部612、傾き角検出部614、照明制御部615、照明切替部616を含んで構成されている。
本実施の形態の筆記情報処理システムでは、コード検出部611にてコードパターン画像がどの程度正確に判別されたかに基づいて設定された赤外LED63と、傾き角検出部614での検出値(傾き検出信号のレベル)に基づいて設定された赤外LED63との双方を、照明として用いる赤外LED63として選択するように構成している。
ここで、本実施の形態の電子ペン60における制御部61の動作の概略を説明する。
図14は、各赤外LED63のパルス点灯を制御する照明制御信号、赤外CMOS64における画像取込信号と出力画像信号、コード検出部611での検出精度信号および傾き角検出部614での傾き検出信号に関する出力タイミングチャートを示した図である。
図14に示したように、電子ペン60による筆記が開始されると、ペンチップ69に接続された圧力センサ62が筆記動作を検出する。それにより、制御部61は、実施の形態1と同様の照明選択サイクルを開始する。そして、制御部61では、照明選択サイクルにおいて、実施の形態1と同様に、コード検出部611により算出された検出精度に基づいて、照明制御部615は、最も高い検出精度を実現する赤外LED63を、照明に用いる赤外LED63として設定する。なお、図14に例示した出力タイミングチャートでは、検出精度が最も高い第2赤外LED63bが照明として用いる赤外LED63に設定される。
照明選択サイクルが終了した後、制御部61は、識別情報および位置情報を取得する「識別情報および位置情報取得サイクル」を実行するが、その際には、実施の形態2と同様に、傾き角検出部614は、電子ペン60の傾き角の検出を開始し、電子ペン60の傾き角を表す傾き検出信号を生成する。そして、傾き検出信号を照明制御部615に送る。
傾き検出信号を受け取った照明制御部615は、識別情報および位置情報取得サイクルの実行中において、傾き検出信号のレベルに応じて、第1赤外LED63aをパルス点灯するための第1照明制御信号(図14(A))、第2赤外LED63bをパルス点灯するための第2照明制御信号(図14(B))、第3赤外LED63cをパルス点灯するための第3照明制御信号(図14(C))のいずれか1または複数を選択的に生成する。そして、電子ペン60の傾き角に応じて選択された赤外LED63の1または複数が設定される。
それにより、本実施の形態の電子ペン60では、照明選択サイクルにおいて設定された赤外LED63に加えて、電子ペン60の傾き角に応じて選択された赤外LED63の1または複数が同時にパルス点灯する。
図14の出力タイミングチャートを用いて、照明として用いる赤外LED63の選択方法を具体的に説明する。ここで、図14では、傾き検出信号のレベルに対応させて点灯させる赤外LED63は、実施の形態2と同様に設定している。
まず、照明制御部615は、照明選択サイクルにて照明として用いる赤外LED63として第2赤外LED63bを設定する。
引き続いて、識別情報および位置情報取得サイクルにおいて、傾き角検出部614により電子ペン60の傾き角を検出し、傾き検出信号のレベルが“a”以上の場合には、第1赤外LED63aと第3赤外LED63cとが同時にパルス点灯される。したがって、照明選択サイクルでの第2赤外LED63bに加えて、傾き検出信号に基づく第1赤外LED63aと第3赤外LED63cとが選択される。すなわち、この場合には、すべての赤外LED63(第1赤外LED63aと第2赤外LED63bと第3赤外LED63c)がパルス点灯する。
また、傾き検出信号のレベルが“b”以上“a”未満の場合には、第1赤外LED63aが同時にパルス点灯される。したがって、この場合には、第1赤外LED63aと第2赤外LED63bとがパルス点灯する。
傾き検出信号のレベルが“c”以上“b”未満の場合には、第2赤外LED63bがパルス点灯されるが、第2赤外LED63bは照明選択サイクルにて元々設定されている。したがって、この場合には、第2赤外LED63bだけがパルス点灯する。
傾き検出信号のレベルが“c”未満の場合には、第3赤外LED63cがパルス点灯される。したがって、この場合には、第2赤外LED63bと第3赤外LED63cとがパルス点灯する。
なお、本実施の形態の電子ペン60においても、識別情報および位置情報取得サイクルの実行時に、常時または所定の時間サイクルで、照明選択サイクルを実行するように構成することもできる。すなわち、コード検出部611は、常時または所定の時間サイクルで検出精度信号を生成して、照明制御部615に送る。そして、照明制御部615は、コード検出部611から受け取った検出精度信号が所定のレベル(閾値)を下回らないかを監視する。そして、検出精度信号が閾値を下回った場合に、再度、上記した照明選択サイクルを実行し、照明として用いるのに最適な赤外LED63を設定し直す。
また、本実施の形態の筆記情報処理システムでは、コードパターン画像の検出精度に基づいて選択された赤外LED63と、電子ペン60の傾き角に基づいて選択された赤外LED63との双方を、照明として用いる赤外LED63として選択した。しかし、本発明はこれに限定されるものではない。すなわち、例えば、コードパターン画像の検出精度に基づいて選択された赤外LED63と、電子ペン60の傾き角に基づいて選択された赤外LED63とのいずれか一方を、照明として用いる赤外LED63として選択することもできる。また、コードパターン画像の検出精度と電子ペン60の傾き角とにそれぞれ重み付けを行い、その重み付けを勘案して赤外LED63を選択することもできる。
このように、本実施の形態の筆記情報処理システムでは、電子ペン60での筆記が行われる際には、コードパターン画像の検出精度と電子ペン60の傾き角との双方に基づいて選択された赤外LED63が使用されるように構成されている。
それにより、ユーザによる電子ペン60での筆記に際した様々な状況の変化に、ユーザ各々が有する癖を加味することで、媒体上からさらに正確に識別情報および位置情報を取得することができる。
[実施の形態4]
実施の形態1〜3の筆記情報処理システムでは、媒体上から識別情報および位置情報を取得する機能(電子ペン機能)を有する電子ペンを用いる構成について説明した。本実施の形態の筆記情報処理システムでは、ポインティングデバイス(マウス)機能や、媒体上の領域に対応して記録された所定の情報(例えば、コマンド情報)を読み取るスタイラス機能を同時に備えた電子ペンを用いる構成について説明する。なお、実施の形態1および実施の形態2と同様な構成については同様な符号を用い、ここではその詳細な説明を省略する。
図15は、本実施の形態の筆記情報処理システムで用いる電子ペン60の構成を説明する図である。図15(a)は、電子ペン60が、媒体への筆記機能と媒体上からの識別情報および位置情報の取得機能(電子ペン機能)、さらには、媒体上の領域に対応して記録された所定の情報(例えば、コマンド情報)を読み取るスタイラス機能を実行する際の形態を示した斜視図である。図15(b)は、ポインティングデバイス(マウス)機能を実行する際の形態を示した斜視図である。図15(c)は、マウス機能を実行する際に使用される光学系を説明する側面図である。
図15に示したように、本実施の形態の電子ペン60は、実施の形態1〜3で説明した電子ペン(図4参照)と同様に構成された電子ペン機能部60Aと、格納部60Bとで構成されている。電子ペン機能部60Aは、電子ペン60の中央部で図15(a)の矢印方向に折り畳み自在に構成され、折り畳まれると、図15(b)に示すように、格納部60Bに収納される。
本実施の形態の電子ペン60において、実施の形態1〜3と同様の電子ペン機能、さらにはスタイラス機能、すなわち筆跡を紙上に残さない筆記動作が実行される場合には、電子ペン機能部60Aは、図15(a)に示したように、伸ばされた状態で使用される。この場合には、電子ペン機能部60Aは、実施の形態1〜3と同様の電子ペン60として機能する。その際には、照明用として電子ペン機能部60Aに内蔵されたペン用赤外LED63dが使用される。なお、図15では、ペン用赤外LED63dは、1個のみを記載したが、実施の形態1〜3で説明した電子ペンと同様に、複数個を備えた構成でもよい。
また、電子ペン機能部60Aは、スイッチ75により、電子ペン機能とスタイラス機能とを切り替えることができるように構成されている。そして、電子ペン機能部60Aが電子ペンとして機能する場合とスタイラスとして機能する場合とにおいて、例えば複数個のペン用赤外LED63dの中から、電子ペン60として機能させるのに適した1または複数のペン用赤外LED63dと、スタイラスとして機能させるのに適した1または複数のペン用赤外LED63dとが自動的に選択される。
なお、その場合に、電子ペン60として機能する場合とスタイラスとして機能する場合とで、それぞれにおいて最適となるように、赤外CMOS64のフレームレート(1秒間に何回画面を書き換えることができるかを表す指標。単位はfps(frame per second))やシャッタスピード等の撮像条件を変更するように設定することもできる。
一方、電子ペン機能部60Aが折り畳まれて格納部60Bに収納されると(図15(b)参照)、電子ペン60はマウスとして機能する。すなわち、電子ペン機能部60Aの折り畳みにより、電子ペン60は自動的にマウス機能が設定される。マウス機能が設定されると、図15(c)に示したように、格納部60Bに内蔵されたマウス用赤外LED63fが使用される。マウスでは、媒体表面上の陰影(例えば、紙繊維の陰影)等を検出するため、マウス用赤外LED63fは媒体に対して大きな入射角で光を照射するように配置される。
マウス用赤外LED63fから照射された光は、媒体で乱反射して、反射光の一部が格納部60Bに配置された反射ミラー71により電子ペン機能部60Aの赤外CMOS64に導かれる。それにより、赤外CMOS64により撮像された画像により、媒体上の位置情報が取得されることとなる。
次に、図16は、電子ペン機能部60Aを格納部60Bから着脱自在に構成した電子ペン60の構成を示した図である。図16(a)は、電子ペン機能部60Aを格納部60Bに格納した状態を示した斜視図である。図16(b)は、電子ペン機能部60Aを格納部60Bから取り外した状態を示した斜視図である。
図16の構成では、格納部60Bはケーブルを介して端末装置10に接続されており、端末装置10との通信が可能であるように構成されている。そして、図16(b)に示したように、電子ペン機能部60Aが格納部60Bから取り外されて使用される場合には、電子ペン機能部60Aは格納部60Bと無線通信を行い、格納部60Bから各種情報を送信することができる。
また、図16(a) に示したように、電子ペン機能部60Aを格納部60Bに格納した場合には、電子ペン60はマウスとして機能する。すなわち、電子ペン機能部60Aが格納部60Bに格納されることにより、電子ペン60は自動的にマウス機能が設定される。さらに、電子ペン機能部60Aが格納部60Bに格納された際に、電子ペン機能部60Aのバッテリ67(図4参照)は、格納部60Bから充電されるように構成されている。
このように、図16に示した構成の電子ペン60では、電子ペン機能部60A単体で使用できるので、電子ペン60の機動性を高めることができる。
このように、本実施の形態の筆記情報処理システムでは、電子ペン60に備えられた各種機能に応じて、赤外LED63が選択的に使用されように構成されている。それにより、電子ペン60の有する各種機能の動作精度を高めることが可能となる。
なお、違う特性を有する赤外LEDとすることも可能である。
本発明の筆記情報処理システムの全体構成を示した図である。 印刷文書を生成する際の筆記情報処理システムでの動作を示したシーケンス図である。 コードパターンについて説明するための図である。 電子ペンの機能構成を示したブロック図である。 制御部の機能構成を示したブロック図である。 照明制御信号、画像取込信号、出力画像信号、および検出精度信号に関する出力タイミングチャートを示した図である。 電子ペンのコード検出部およびデータ処理部での動作を示したフローチャートを示した図である。 端末装置、文書サーバ、識別情報サーバの機能構成を示した図である。 識別情報サーバ内のDB記憶部が記憶するデータベース内のデータの一例を示した図である。 筆記情報を電子文書に付加する際の動作を示したシーケンス図である。 制御部の機能構成を示した他のブロック図である。 照明制御信号、画像取込信号、出力画像信号、傾き検出信号に関する出力タイミングチャートを示した図である。 制御部の機能構成を示した他のブロック図である。 照明制御信号、画像取込信号、出力画像信号、検出精度信号、傾き検出信号に関する出力タイミングチャートを示した図である。 電子ペンの構成を説明する図である。 電子ペンの構成を説明する図である。
符号の説明
10…端末装置、20…文書サーバ、30…識別情報サーバ、40…画像形成装置、50…印刷文書、60…電子ペン、61…制御部、63…赤外LED、63a…第1赤外LED、63b…第2赤外LED63b、63c…第3赤外LED、64…赤外CMOS、
611…コード検出部、612…データ処理部、614…傾き角検出部、615…照明制御部、616…照明切替部

Claims (12)

  1. 媒体に対して光を照射する複数の照明手段と、
    前記複数の照明手段の中から、ユーザによる前記媒体への操作の際に点灯させる1または複数の当該照明手段を選択する照明選択手段と、
    前記照明選択手段により選択された前記照明手段にて照明された前記媒体から、当該媒体上に存在する情報を読み取る情報読取手段と
    を備えたことを特徴とする読取り装置。
  2. 前記情報読取手段にて読み取った前記情報の読取認識率を算出する認識率算出手段と、当該読取り装置の傾き角を検出する傾き角検出手段とをさらに備え、
    前記照明選択手段は、前記認識率算出手段にて算出された前記読取認識率と前記傾き角検出手段にて検出された当該読取り装置の傾き角とのいずれか一方または双方に基づいて、前記照明手段を選択することを特徴とする請求項1記載の読取り装置。
  3. 前記情報読取手段は、前記照明選択手段による前記照明手段の選択に対応して、前記情報を読み取る際の撮像条件を変更することを特徴とする請求項1記載の読取り装置。
  4. 前記照明選択手段は、ユーザによる前記媒体への筆記操作、当該媒体上の領域に対応して記憶された所定の情報を読み取る操作、およびポインティング操作のそれぞれにおいて、1または複数の前記照明手段を選択することを特徴とする請求項1記載の読取り装置。
  5. 前記照明選択手段は、ユーザによる前記操作の際に、常時または所定の時間間隔にて前記照明手段を選択することを特徴とする請求項1記載の読取り装置。
  6. ユーザによる媒体への筆記操作に応じて、当該媒体上に記録された情報を読み取る読取り装置と、
    前記読取り装置にて読み取られた前記情報を取得し、取得した当該情報に基づいて前記媒体への筆記内容を当該媒体または当該媒体に印刷された電子文書に関連付けて記憶する情報処理装置とを備え、
    前記読取り装置は、
    前記媒体に対して光を照射する複数の照明手段と、
    前記複数の照明手段の中から前記媒体への筆記操作の際に点灯させる1または複数の当該照明手段を選択する照明選択手段と
    を有することを特徴とする筆記情報処理システム。
  7. 前記読取り装置は、読み取った前記情報の読取認識率を算出する認識率算出手段をさらに備え、
    前記照明選択手段は、前記認識率算出手段にて算出された前記読取認識率に基づいて、前記照明手段を選択することを特徴とする請求項6記載の筆記情報処理システム。
  8. 前記認識率算出手段は、ユーザによる前記筆記操作の際に常時または所定の時間間隔にて前記読取認識率を算出し、
    前記照明選択手段は、前記認識率算出手段にて算出された前記読取認識率が所定値を下回った場合に、前記照明手段を再度選択し直すことを特徴とする請求項7記載の筆記情報処理システム。
  9. 前記読取り装置は、当該読取り装置の傾き角を検出する傾き角検出手段をさらに備え、
    前記照明選択手段は、前記傾き角検出手段にて検出された前記読取り装置の傾き角に基づいて、前記照明手段を選択することを特徴とする請求項6記載の筆記情報処理システム。
  10. 前記読取り装置は、読み取った前記情報の読取認識率を算出する認識率算出手段と、当該読取り装置の傾き角を検出する傾き角検出手段とをさらに備え、
    前記照明選択手段は、前記認識率算出手段にて算出された前記読取認識率と前記傾き角検出手段にて検出された前記読取り装置の傾き角との双方に基づいて、前記照明手段を選択することを特徴とする請求項6記載の筆記情報処理システム。
  11. 前記読取り装置は、前記照明選択手段による前記照明手段の選択に対応して、前記媒体上に記録された情報を読み取る際の撮像条件を変更する情報読取手段をさらに備えたことを特徴とする請求項6記載の筆記情報処理システム。
  12. コンピュータに、
    媒体に対して光を照射する複数の照明手段の中から、ユーザによる当該媒体への操作の際に点灯される1または複数の当該照明手段を選択する機能と、
    選択された前記照明手段にて照明された前記媒体から、当該媒体上に存在する情報を読み取る機能と
    を実現することを特徴とするプログラム。
JP2007042001A 2007-02-22 2007-02-22 読取り装置、筆記情報処理システムおよびプログラム Active JP4107346B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007042001A JP4107346B1 (ja) 2007-02-22 2007-02-22 読取り装置、筆記情報処理システムおよびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007042001A JP4107346B1 (ja) 2007-02-22 2007-02-22 読取り装置、筆記情報処理システムおよびプログラム

Publications (2)

Publication Number Publication Date
JP4107346B1 JP4107346B1 (ja) 2008-06-25
JP2008204328A true JP2008204328A (ja) 2008-09-04

Family

ID=39608139

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007042001A Active JP4107346B1 (ja) 2007-02-22 2007-02-22 読取り装置、筆記情報処理システムおよびプログラム

Country Status (1)

Country Link
JP (1) JP4107346B1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010152526A (ja) * 2008-12-24 2010-07-08 Fuji Xerox Co Ltd 読取装置
JP2010224746A (ja) * 2009-03-23 2010-10-07 Fuji Xerox Co Ltd 読取装置
JP2013012174A (ja) * 2011-06-29 2013-01-17 Giga-Byte Technology Co Ltd ポインタ装置
US8513547B2 (en) 2009-03-23 2013-08-20 Fuji Xerox Co., Ltd. Image reading apparatus and image reading method
JP2014041602A (ja) * 2012-07-27 2014-03-06 Panasonic Corp 情報読取装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010152526A (ja) * 2008-12-24 2010-07-08 Fuji Xerox Co Ltd 読取装置
US9372551B2 (en) 2008-12-24 2016-06-21 Fuji Xerox Co., Ltd. Image reading apparatus
JP2010224746A (ja) * 2009-03-23 2010-10-07 Fuji Xerox Co Ltd 読取装置
US8513547B2 (en) 2009-03-23 2013-08-20 Fuji Xerox Co., Ltd. Image reading apparatus and image reading method
JP2013012174A (ja) * 2011-06-29 2013-01-17 Giga-Byte Technology Co Ltd ポインタ装置
US9116556B2 (en) 2011-06-29 2015-08-25 Giga-Byte Technology Co., Ltd. Dual mode mouse device
JP2014041602A (ja) * 2012-07-27 2014-03-06 Panasonic Corp 情報読取装置

Also Published As

Publication number Publication date
JP4107346B1 (ja) 2008-06-25

Similar Documents

Publication Publication Date Title
JP5028843B2 (ja) 筆記情報処理装置、筆記情報処理方法、及びプログラム
JP5228889B2 (ja) 読取装置
JP2008077168A (ja) 筆記情報処理システム、筆記情報生成装置およびプログラム
JP2006350650A (ja) 電子文書管理システム、画像形成装置、電子文書管理方法およびプログラム
JP4107346B1 (ja) 読取り装置、筆記情報処理システムおよびプログラム
JP2006326973A (ja) 印刷装置、電子文書管理システム、印刷媒体、印刷処理方法およびプログラム
JP4635945B2 (ja) 筆記情報処理装置、筆記情報処理方法、及びプログラム
US20080074691A1 (en) Print information management apparatus, print information management method, image forming apparatus, print information management system and program
US20120113460A1 (en) Trace information processing apparatus, trace information processing system, trace information processing method and computer readable medium
JP4862466B2 (ja) 下敷き、入力装置及び筆跡情報取得方法
JP2008009833A (ja) 文書管理装置、及びプログラム
JP4844354B2 (ja) 文書管理装置及びプログラム
JP2009181514A (ja) 筆跡情報生成装置、プログラムおよび筆跡情報管理システム
JP2008077218A (ja) 筆記情報処理システム、ペンデバイスおよびプログラム
JP2008021120A (ja) 筆記情報処理システム、筆記情報処理方法およびプログラム
JP2009181521A (ja) 筆跡情報生成装置、プログラムおよび筆跡情報管理システム
JP2007083448A (ja) 印刷装置、および画像印刷方法
JP2008048285A (ja) 文書管理装置、筆記処理装置、及びプログラム
JP5136484B2 (ja) 読取装置
JP2010160744A (ja) 読取装置
JP2008071247A (ja) 印刷情報管理装置、及びプログラム
JP2008140228A (ja) 文書管理装置、及びプログラム
JP2010141525A (ja) 読取装置
JP2007072640A (ja) 印刷指示装置、印刷装置、画像生成装置、印刷媒体、印刷指示方法、及びプログラム
JP2008046988A (ja) 文書管理装置、識別情報生成装置、及びプログラム

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080324

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110411

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4107346

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120411

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130411

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140411

Year of fee payment: 6

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350