JPH05216932A

JPH05216932A - 情報管理システム

Info

Publication number: JPH05216932A
Application number: JP1788692A
Authority: JP
Inventors: Masashi Koga; 昌史古賀; Yuji Toda; 裕二戸田; Junichi Tono; 純一東野; Kiyoshi Aiki; 清愛木; Yoshihiro Shima; 好博嶋
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 1992-02-03
Filing date: 1992-02-03
Publication date: 1993-08-27

Abstract

(57)【要約】【構成】個人の情報を管理する情報管理システムであっ
て、手帳１０２のページなどの紙面を光電変換してデジ
タル画像を得るスキャナ手段１０３と、該スキャナ手段
により得られたデジタル画像に基づいて、当該ページ内
の複数の領域内に印刷もしくは手書きされた文字および
該文字で表わされた項目の属性を認識するページ内容認
識手段１０４と、該ページ内容認識手段により認識され
た文字と前記項目の属性とを対応付けて記憶管理する情
報管理手段１０５とを備えた。【効果】手帳やメモなどに手書きで記入した情報を自動
的にデータベースに登録し、登録した内容を紙に出力し
携帯することが可能となる。従来の文書認識システムで
困難である引出線、取消記号など手帳に固有の記入方法
の認識が可能となる。また、従来のシステム手帳で必要
とされていた手書きで記入した内容を別の書式に書き換
える作業を自動化できる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、スケジュール、住所録
など個人の情報を計算機を用いて管理するシステムに関
する。

【０００２】

【従来の技術】従来、個人の情報を管理する方式として
は、主に手帳やメモなどによって管理するものが知られ
ている。例えば、一般的な手帳では、カレンダー、住所
録など、用途に応じて予め項目の内容を表す語句や枠線
が印刷されている。新たに入手した情報を記録する場
合、あるいは情報を編集した結果を記録する場合には、
予め指定された枠内に手書きで情報を書き込む。また、
様々の書式のページを入れ替えることを可能にしたシス
テム手帳の例もある。システム手帳の具体的内容および
その利用法については、例えばＴＢＳブリタニカ社発行
の「システム手帳活用法」、日本能率協会発行の「マニ
ュアル本システムノート実戦活用法」等に開示されてい
る。

【０００３】さらに、電子手帳を用いた方式もある。こ
れは、簡易型の入力手段と表示手段とスケジュール管理
や名簿管理などのプログラムを内蔵した携帯型の計算機
である。

【０００４】また、卓上型の計算機を用いてスケジュー
ルや名簿を管理する方式も知られている。例えば、氏
名、住所、電話番号などの情報をカード型のデータベー
スに登録し、検索・編集を容易に行うことを可能とする
方式がある。

【０００５】

【発明が解決しようとする課題】従来知られている方式
のうちで、手帳を用いる方式は入力が容易で携帯に便利
であるが、情報を整理するのには不向きである。電子手
帳を用いる方式は情報の整理に好適で携帯に便利である
が、効率的な入力方式が無い。卓上型計算機を用いる方
式は入力が容易で情報の整理に好適であるが、携帯する
ことが困難である。このように従来のいずれの方式も一
長一短である。これらの機器を用途に応じて使いわけ、
入力の簡便さと情報の整理の容易さと携帯の際の便利さ
を兼ね備える情報の入力および管理方式を提供すること
が本発明の第一の目的である。

【０００６】さらに上に述べるような方式を実現するた
めに、手帳の記載内容を認識する方式、認識結果をデー
タベースに登録する方式、およびデータベースの内容を
紙へ出力する方式を提供することが本発明の第二の目的
である。

【０００７】

【課題を解決するための手段】本発明による情報管理シ
ステムは、個人の情報を管理する情報管理システムであ
って、手帳のページなどの紙面を光電変換してデジタル
画像を得るスキャナ手段と、該スキャナ手段により得ら
れたデジタル画像に基づいて、当該ページ内の複数の領
域内に印刷もしくは手書きされた文字および該文字で表
わされた項目の属性を認識するページ内容認識手段と、
該ページ内容認識手段により認識された文字と前記項目
の属性とを対応付けて記憶管理する情報管理手段とを備
えたものである。

【０００８】この情報管理システムにおいて、好ましく
は、前記ページ内容認識手段は、前記得られたデジタル
画像に基づいて、前記印刷もしくは手書きされた文字の
領域を検出する文字領域検出手段と、該手段により検出
された領域中の文字を認識する文字認識手段とを有し、
該文字認識手段は、認識できた文字については文字コー
ドを付与し、認識できなかった文字についてはイメージ
として取り扱う。

【０００９】

【作用】以下、本発明の代表的な構成における作用を説
明する。情報を入力する際には、書き込みの施された手
帳等の紙面をスキャナより入力し、既知の方法により文
字、枠線を検出する。検出された文字、枠線の配置を予
め記憶された手帳の書式の知識と照合し、各記載項目の
属性を表すデータを生成する。各記載項目を生成された
属性に対応付けて切り換えてデータベースに登録する。
利用者がある書式の出力を要求した場合には、予め記憶
された出力の書式を参照することにより、データベース
の内容を紙上の各内容に対応した場所に印刷する。

【００１０】このように、各記載項目には属性が対応付
けられているので、手帳の記載内容を再現して清書印刷
出力することができるのみならず、内容を特定の観点か
ら整理し直し、所望の書式で出力することも可能にな
る。

【００１１】

【実施例】以下に本発明の実施例を図を用いて説明す
る。

【００１２】図１は本発明の一実施例のシステム構成を
示す。このシステムは、手帳１０２と、認識入力・情報
管理部１１４と、キーボード１１０やマウス１１１など
の入力機器と、ＣＲＴ１０９等の表示装置とからなる。
手帳１０２と併用してメモ１０１もしくは電子手帳１１
３を用いることもできる。

【００１３】認識入力・情報管理部１１４は、イメージ
スキャナ１０３、ページ内容認識部１０４、情報管理部
１０５、データベース（ＤＢ）１０６、書式変換部１０
７、ユーザインタフェース１０８、およびプリンタ１１
２を有する。

【００１４】このシステムにおいて、メモ１０１や手帳
１０２の紙面はイメージスキャナ１０３によって光電変
換され、得られたデジタル画像データはページ内容認識
部１０４に格納される。ページ内容認識部１０４は、得
られたデジタル画像データを解析し、メモ１０１や手帳
１０２に記載された情報を抽出し、その結果を情報管理
部１０５に入力する。情報管理部１０５は、記載情報を
所定の形式でデータベース１０６に格納する。書式変換
部１０７は、データベース１０６に格納された情報を予
め指定された書式にしたがって出力用のデジタル画像に
変換する。出力用デジタル画像をＣＲＴ１０９に表示
し、キーボード１１０やマウス１１１などの入力機器を
用いてデータベース１０６に格納された情報のオペレー
タによる編集を可能とする。編集された情報は、情報管
理部１０５に入力され、所定の形式でデータベース１０
６に格納される。また、出力用デジタル画像をプリンタ
１１２により紙に出力し、これを手帳１０２に挿入して
携帯することが可能である。入力手段として電子手帳１
１３を併用した場合、データベースに格納された情報を
情報管理部１０５を介して電子手帳に格納することがで
きる。

【００１５】図２により本実施例の作用を説明する。こ
の例では、認識入力・情報管理部１１４への入力は手帳
の紙面２０１である。認識入力・情報管理部１１４へ入
力・格納した内容は、ＣＲＴやマウスを備える入出力部
２０３に表示し、編集することができる。ここで紙面２
０１に示したのは枠線や所定の活字が印刷されたシステ
ム手帳の週間カレンダーの例であり、この手帳の所有者
により「旅行」、「Ｂ検討会」等の手書文字、および矢
印が書き込まれている。

【００１６】出力形式２０４に示すように、認識入力・
情報管理部１１４へ格納した紙面２０１の内容は、入力
と同様の週間カレンダーの書式で、かつ書込み文字等は
清書した状態で紙に出力することができる。すなわち、
手帳に記載されている文字や矢印などの内、認識可能な
ものは認識入力・情報管理部１１４において認識し、文
字はデジタルフォントを用い、記号などはグラフィック
機能を用いて出力する。また、認識入力・情報管理部１
１４において格納された情報を手帳に固有の書式に変換
して出力することもできる。例えば、データベース１０
６に格納された情報中に連続した同一のスケジュールが
あることを認識入力・情報管理部１１４で認識し、これ
を矢印２０７として出力することが可能である。

【００１７】入出力部２０３に示すように、認識された
文字等を表示画面上で修正することも可能である。

【００１８】出力形式２０５は別の出力の例であり、何
枚かの週間カレンダーより得られた情報をプロジェクト
別進行予定表に変換している。

【００１９】出力形式２０６はさらに別の出力の例であ
る。何枚かの週間カレンダーより得られた情報を特定の
キーワードについてまとめて整理することができる。こ
の例では「Ｂ検討会」の情報をスケジュール表に変換し
ている。

【００２０】なお、入力の対象とする紙面の書式は認識
可能であれば必ずしも１種類に限る必要はない。

【００２１】図３によりページ内容認識部１０４（図
１）の動作の概略を説明する。フィールド・文字認識処
理３０２においては、手帳の紙面を光電変換して得られ
たデジタル画像データ３０１に基づいて、文字、矢印な
どの記載事項の位置を検出し、文字を認識する。項目内
容理解処理３０３においては各記載事項の内容（属性）
を表すデータを生成する。例えば「１９９１」に関して
は、その属性を示す「ＹＥＡＲ」という属性データを生
成する。各記載事項は、情報管理部１０５（図１）によ
って、３０４に示すように、その内容に応じた形式でデ
ータベースＤＢに登録する。

【００２２】図４は、図３で説明した動作を実現するた
めのページ内容認識部１０４のシステム構成の一例を示
す。紙面を光電変換して得られたデジタル画像データ４
０１に基づいて枠線検出部４０２は、既知の方法により
枠線の座標を検出する。枠線形式認識部４０３は、検出
された枠線の座標を枠線形式辞書４０３に格納された枠
線の形式に関する知識と照合し、枠線の形式を既知の方
式により認識する。一方、文字領域検出部４０５は、デ
ジタル画像データ４０１に基づいて既知の方法により文
字や矢印などの記号の記載された領域を検出する。文字
認識部４０６は文字認識辞書４０７を参照し既知の方法
により文字領域中の文字を認識する。書式判別部４０９
は、枠線形式および文字認識の結果を書式判別辞書４１
２と照合し、入力された紙面の書式を判別する。項目内
容判別部４１０は、書式判別の結果と枠線形式認識の結
果と文字認識の結果とを項目内容辞書４０９と照合し、
各項目にその属性を表すデータを付与しページ内容認識
結果４１１として出力する。なお、図示しないが文字認
識に単語辞書を併用して、文字認識の精度向上を図るこ
ともできる。

【００２３】図５はページ内容認識部１０４（図１）の
処理の手順を示す。ステップ５０１において紙面に印刷
された枠線を認識する。ステップ５０２において紙面に
記されている文字や矢印などの記号の領域を検出する。
ステップ５０３において検出されたすべての文字領域に
対して以下の認識を行う。まずステップ５０４において
文字認識を行う。もしリジェクトされたならば、ステッ
プ５０５において取消記号の認識を行う。もしリジェク
トされたならば、ステップ５０６において引出線の認識
を行う。もしリジェクトならば、ステップ５０７におい
て、ユーザーインタフェースを介して認識が不能である
旨のメッセージを表示し、ユーザーインタフェースを介
してユーザーが記載内容を直接入力するよう要求する。
ステップ５０８において各記載内容がどのような内容
（属性）であるかを判別する。このステップ５０８にお
いてリジェクトされたならば、ステップ５０９において
はみ出し文字認識を行う。もしリジェクトならば、ステ
ップ５１０において、ユーザーインタフェースを介して
内容判別が不能である旨のメッセージを表示し、ユーザ
ーインタフェースを介してユーザーが内容を直接指定す
るよう要求する。

【００２４】図６は文字領域検出処理の概要を示す。６
０１は週間カレンダーの入力画像を、６０２は入力画像
６０１から文字領域を検出した結果を模式的に表す。例
えば「１９９１Ｊａｎ」という文字列６０３の領域は
矩形６０４として検出される。印刷された文字列だけで
なく、手書文字列についても同様にその領域が検出され
る。

【００２５】図７（ａ）は、文字領域検出処理および文
字認識処理の出力の形式の一例を示す。７０１は文字デ
ータテーブルである。文字データテーブル７０１の項ｎ
７０２は検出された文字領域の通し番号を格納する。項
ｘ１，ｙ１，ｘ２，ｙ２（７０３〜７０６）は図７
（ｂ）に示すような文字領域の外接矩形の座標を格納す
る。項ｅｌｌ７０７は、検出された文字領域内の文字の
輪郭データを格納する記憶領域７１１へのポインタを格
納する。記憶領域７１１に格納される輪郭データは、図
では便宜上、「３」、「Ｔ」のように対応する文字で示
している。項ｆｎ７０８は、各文字領域が後述する紙面
のフィールドのうちのいずれに属するかを表す値を格納
する。項ｔｙｐｅ７０９は、文字領域内の文字を認識し
た結果がどのような形式のデータで格納されているかを
表す値を格納する。例えば文字認識に成功した場合には
認識結果は文字コードで格納され、ｔｙｐｅ７０９には
「ｓｔｒ」という値を格納する。認識に失敗した場合に
は文字領域内の画像をビットマップデータで格納し、ｔ
ｙｐｅ７０９には「ｉｍ」という値を格納する。項ｒｄ
７１０は認識結果のデータを格納する記憶領域７１２へ
のポインタを格納する。

【００２６】図８は、項目内容判別部４０９（図４）の
構成の一例を示す。項目内容判別部４０９は、フィール
ド照合部８０６およびアイテム照合部８０７よりなる。
ここで、フィールドとは枠線などで区切られた紙面上の
座標領域を表し、アイテムとは月、曜日、メモなど紙面
の各フィールドに記載されている論理的な内容を単位と
する項目である。１フィールド内に２以上のアイテムも
存在しうる。フィールド照合部８０６は、書式判別結果
８０３、枠線認識結果８０４、および文字認識結果８０
５を入力とし、これらを項目内容辞書４１０内のフィー
ルド座標辞書８０８と照合し、各文字領域の属するフィ
ールドを判定する。アイテム照合部８０７は、文字認識
結果とフィールド照合結果とをフィールドアイテム照合
辞書８０９およびアイテム単語辞書８１０と照合し、記
載されているアイテムを特定する。さらにアイテム属性
辞書８１１を照合し、アイテムの属性を決定して出力テ
ーブルに出力する。

【００２７】図９は、フィールド座標辞書８０８（図
８）の形式を示す。フィールド座標辞書８０８には予め
特定の書式の紙面のフィールドの座標を格納しておく。
例えば、図６に示すような週間カレンダーの紙面であれ
ば、図９（ｂ）のようにフィールドを矩形で定義し、図
９（ａ）に示す形式でフィールド座標辞書８０８に格納
する。項ｆｉｅｌｄ９０１はフィールドの通し番号を格
納する。項ｘ１，ｙ１，ｘ２，ｙ２（９０２〜９０５）
は図９（ｃ）に示すようなフィールドの座標を格納す
る。項ｒｅｃｏｇ９０６には、認識に必要な属性、すな
わちそのフィールドが認識可能な文字等の記載領域か否
かに応じて認識の要否（ｙまたはｎ）を格納する。「否
（ｎ）」であれば、その領域については当初から文字認
識の処理を行わない。フィールド照合処理においては、
文字データテーブル７０１とフィールド座標辞書８０８
の座標を照合し、文字領域がどのフィールドに包含され
るかをしらべ、その結果を文字データテーブル７０１の
項ｆｎ７０８に格納する。もし文字領域がどのフィール
ドにも包含されず、かつ後に述べる引出線認識、期間を
表す線の認識、取消し記号認識においてもｆｎが決定さ
れない場合には、はみ出し文字処理を行いｆｎを決定す
る。はみ出し文字処理においては、文字領域と最も共有
する部分の面積が大きいフィールドを探索し、そのフィ
ールドの通し番号をｆｎに格納する。以上の処理におい
てもｆｎの値が決定出来ない場合にはリジェクト記号を
ｆｎに格納する。なお、フィールド座標辞書８０８に複
数の書式のフィールドの座標を記憶しておき、書式判別
結果によって、用いるフィールド座標辞書を切り換えて
フィールド照合処理を行うことにより、種々の書式に対
応することも可能である。

【００２８】図１０はフィールドアイテム照合辞書８０
９（図８）の形式を示す。このフィールドアイテム照合
辞書８０９には、各アイテムがどのフィールドに記載さ
れるかを予め記憶してある。前述のように、同一のフィ
ールド内に複数のアイテムが内包されることもありう
る。図１０の例では、図９のフィールド例に対応して、
年を表わすアイテムｉ０および月を表わすアイテムｉ１
はフィールドｆ０に包含され、日を表わすアイテムｉ２
および曜日を表わすアイテムｉ３はフィールドｆ１に包
含されている。

【００２９】図１１はアイテム単語辞書８１０（図８）
の形式を示す。アイテム単語辞書８１０には各アイテム
で用いられる単語が予め記憶してある。年などの単語と
して確定できない物はワイルドカードで記憶する。例え
ば図中の「［ｎ］」は数字を表すワイルドカードであ
る。手帳中には、「第一会議室」を「１会」と略す等、
使用する者に固有な略語が用いられる場合が多い。アイ
テム単語辞書に、こうした略語を登録することにより、
略語の認識を可能とする。また、メモ欄のように用いら
れる単語が任意である場合にはアイテム単語辞書にはす
べての単語を受け付けることを示すワイルドカード記号
を格納しておく。

【００３０】図１２はアイテム属性辞書８１１の一例を
示す。アイテム属性辞書８１１には、アイテムの属性を
調べ出力テーブルにデータを格納するための規則が予め
記憶されている。図１２の例では、図６の週間カレンダ
ーの書式に対応して７個のレコード（１週間の日数に対
応）を生成するための規則が記憶されている。別の書式
には別のアイテム属性辞書が用いられる。アイテム照合
処理においては、まず文字データテーブル７０１とフィ
ールドアイテム照合辞書８０９とを照合し、各文字領域
に含まれる可能性のあるアイテムを調べ、次に文字デー
タテーブル７０１を介して認識結果７１２にアクセスし
てアイテム単語辞書８１０と照合する。照合のとれたア
イテムをアイテムデータテーブル１３０１（図１３で後
述）に格納する。さらにアイテムデータテーブル１３０
１に格納したデータをアイテム属性辞書８１１を参照し
て出力テーブルに出力する。

【００３１】図１３はアイテム照合部８０７（図８）の
出力の形式を示す。アイテムデータテーブル１３０１の
項ｉｔｅｍ１３０２には照合されたアイテムの通し番号
が格納される。項ｅｌｌ１３０３には照合のされた単語
に対応する画像の輪郭データの記憶領域へのポインタが
格納される。項ｆｎ１３０４にはこのアイテムが所属す
るフィールドの通し番号が格納される。項ｔｙｐｅ１３
０５は、文字領域内の文字を認識した結果がどのような
形式のデータで格納されているかを表す値を格納する。
項ｒｄ１３０６は認識結果のデータを格納する記憶領域
１３０７へのポインタを格納する。１３０８は、図３の
３０４に対応する出力テーブルを示す。出力テーブル１
３０８の各項には年，月などの属性が定められており、
同テーブル内には、その属性を有するアイテムを格納す
る、アイテムデータテーブル１３０１の記憶領域へのポ
インタを格納する。

【００３２】図１４は、一旦記入した書込み内容を取り
消すための取消記号を認識する方式の一例を説明するも
のである。１４０１に示すような取消記号は、文字認識
辞書に「×」などの記号を登録しておくことにより認識
する。１４０２に示すように前に記入した文字の上に重
ねて書かれた取消記号は以下に説明する手順で認識す
る。まず図１においてイメージスキャナ１０３より入力
されたデジタル画像データはデータベースＤＢにすべて
保存するものとする。もし認識処理でリジェクトされた
文字領域が有り、かつ同じ紙面を過去に入力したことが
有る場合には、リジェクトされた文字領域における過去
に保存されたデジタル画像を調べ、何らかの記入が有る
かどうかを判定する。もし１４０３に示すような記入が
有った場合には、これと新たに入力された画像１４０２
の差分をとり、差分に一定数以上の黒画素が含まれる場
合には取消記号が記入されたと認識する。取消記号が認
識された場合には、過去に登録された内容を消去するな
どの例外処理を行う。

【００３３】図１５は、手書きで記入された引出線を認
識する方式の一例を示すものである。この例では、引出
線を、片方に矢じりのある矢印として定めた場合の例を
説明する。入力画像より既知の方式により、片方に矢じ
りのある矢印１５０１を認識する。矢印１５０１の起点
の周囲の一定範囲１５０３（対角座標（Ｘｓ１，Ｙｓ
１）と（Ｘｓ２，Ｙｓ２）で定められる範囲）に図７の
文字データテーブル７０１の点（ｘ１，ｙ１）を有する
文字領域を文字データテーブル７０１の文字領域検出結
果より探索し、該当するものが有る場合には、この文字
領域１５０４は矢印の終点（Ｘｅ，Ｙｅ）１５０２に有
るものとして、文字データテーブル７０１の所属フィー
ルド７０８を修正する。

【００３４】図１６は、カレンダーの期間を表す矢印の
認識方式の一例を説明するものである。この例では、期
間を表わす矢印として両端に矢じりのある矢印を採用し
ている。入力画像より既知の方式により両端に矢じりの
ある矢印１６０１を認識する。矢印１６０１の周囲の一
定範囲１６０４に点（ｘ１，ｙ１）を有する文字領域
（この例では領域１６０５）を文字データテーブル７０
１より探索し、該当するものが有る場合には、この文字
領域１６０５は矢印の端点（Ｘａ，Ｙａ）１６０２およ
び（Ｘｂ，Ｘｂ）１６０３の間のすべてのフィールドに
有るものとして、文字データテーブル７０１の所属フィ
ールド７０８を修正する。

【００３５】図１７は、図４の項目内容判別部４０９に
代わる項目内容判別部１７０１の例を示す。この例は、
フィールド座標辞書８０８を不要とすることを特徴とす
る。項目内容判別部１７０１には枠線認識結果１７０３
および文字認識結果１７０４が入力される。まず、フィ
ールド生成部１７０５において枠線認識結果１７０３を
用いて紙面をフィールドに分割する。次にフィールド記
載事項照合部１７０６において、各文字領域がどのフィ
ールドに含まれるかを調べる。次に、アイテム照合部１
７０７において、文字認識結果をフィールドアイテム照
合辞書８０９およびアイテム単語辞書８１０と照合し、
照合のとれたアイテムをアイテムデータテーブルに格納
する。さらにアイテムデータテーブルに格納したデータ
をアイテム属性辞書８１１を参照し出力テーブルに出力
する。

【００３６】なお、項目内容判定部のさらに別の例とし
て、アイテム照合部に替えて文字の色を認識する手段を
設け、予め記憶した文字の色と記載内容の規則を照合す
る方式も考えられる。

【００３７】図１８は枠線によって生成されるフィール
ドの概略を示す図である。図６の例では、枠線によって
１０個のフィールドが生成される。

【００３８】図１９（ａ）はアイテムデータテーブルの
例である。アイテムは単語照合によって決定されるた
め、認識できなかった記載事項には照合不可を示す値
（×）がアイテムの欄に格納される。図１９（ｂ）はア
イテム属性辞書の例である。図１９（ｃ）は出力テーブ
ルの例である。アイテム照合部においてはアイテムデー
タテーブルを生成した後、アイテム属性辞書にしたがっ
て出力テーブルにデータを格納する。その際、同じフィ
ールドに属するアイテムは出力テーブルの同じ欄に格納
する。また、フィールド内にすべての属性が記入されて
いない場合には、紙面上の他のフィールドで記入された
属性の値を格納する。図１９（ｃ）は年や月が定義され
ていないフィールドが有った場合には、既に出力テーブ
ルに格納された属性の値を複写して格納する例である。

【００３９】図２０は書式変換部１０７の構成の一例で
ある。書式変換部１０７は、情報管理部２００２を介し
てデータベース２００３に格納された情報にアクセスす
る。書式指定部２００４において出力に用いる書式を指
定する。ページ生成部２００６は、指定された書式でデ
ータベースの内容を出力するために必要な座標や文字の
サイズなどに関する情報を書式データベース２００５よ
り読み取り、出力用デジタル画像を生成する。

【００４０】図２１は書式データベース２００５の形式
を示す。書式データベース２００５には、出力するデー
タの格納場所を表す項ｄａｔａ２１０２、データを出力
する座標をあらわすｘ１，ｙ１，ｘ２，ｙ２（２１０３
〜２１０６）、文字フォント２１０７、文字サイズ２１
０８、行ピッチ２１０９等を予め記憶する。

【００４１】図２２は認識および出力の対象を住所録と
するシステムの動作の概略を示す。これは、上述した方
式と同様の認識入力・情報管理システム２２０１を用い
て、活字または手書きの文字が記載された手帳やメモ２
２０２を認識し、記載内容を認識入力・情報管理システ
ム２２０１内のデータベースに登録し、新たに住所録や
電話帳を印刷するシステムである。

【００４２】図２３はネットワークを利用した実施例で
ある。通信用回線２３０３には、それぞれイメージスキ
ャナとプリンタよりなる複数の端末２３０１と、認識入
力・情報管理部２３０２を有する計算機が接続されてい
る。認識入力・情報管理部２３０２は図１における認識
入力・情報管理部１１４よりイメージスキャナとプリン
タを省いた構成である。端末より手帳の紙面２３０４を
入力し、通信用回線２３０３を介して認識入力・情報管
理部２３０２に画像データを転送する。認識入力・情報
管理部２３０２は画像データを認識してデータベースに
登録し、出力用デジタル画像を、通信用回線２３０３を
介して端末２３０１に転送する。端末２３０１に備えら
れたプリンタは出力用デジタル画像を紙に出力する。こ
の際、他の端末や、情報認識入力・情報管理部２３０２
に備えられたユーザーインタフェース部より入力された
情報も共通のデータベースに格納してもよい。例えば、
情報認識入力・情報管理部２３０２に備えられたユーザ
ーインタフェース部によりシステムの利用者のスケジュ
ールを格納したデータベース２３０５の内容を表示し、
Ｂ検討会に出席予定者のスケジュールを確認し、次回会
合の日程を決定し、その結果を出席予定者の端末に通信
回線を通じて出力することが可能である。また、データ
ベース２３０６に示すような会議などの関係者を予め記
憶することにより、スケジュールの変更結果の送信を自
動的に行うことも可能となる。なお、ページ内容の認
識、および計算機から受けた情報に基づくデジタル画像
の生成は端末の側で行うシステムも考えられる。

【００４３】また、図２３の例において、図２４に示す
ようなの制御内容を記載した紙面２４０１を端末２３０
１より入力することにより、端末の利用者が任意の書式
で情報認識入力・情報管理部２３０２に登録された情報
をネットワークを介して入手することができる。また、
情報を必要とするであろう他の端末利用者に情報を送る
ことも可能となる。制御用紙面２４０１には、各制御内
容を文字で表した制御文２４０２と、制御文の内容を実
行するか否かを指定するチェック欄２４０３を有する。
また、人名等の文字を入力するための文字入力フィール
ド２４０４を有する。制御用紙面は上述の発明により認
識可能である。

【００４４】図２５は書式判別の別の方式を説明する図
である。図４の例では枠線形式より書式を判別した。こ
の代案として、図２５（ａ）に示すように紙面の所定の
箇所に手帳の書式を表す文字列を印刷し、これを認識す
ることにより書式を判別してもよい。また、図２５
（ｂ）に示すように紙面上に紙面の書式を表すバーコー
ドを印刷し、これを認識することにより書式を判別して
もよい。

【００４５】

【発明の効果】本発明によれば、手帳やメモなどに手書
きで記入した情報を自動的にデータベースに登録し、登
録した内容を紙に出力し携帯することが可能となる。

【００４６】また、従来の文書認識システムで困難であ
る引出線、取消記号など手帳に固有の記入方法の認識が
可能となる。

【００４７】また、従来のシステム手帳で必要とされて
いた手書きで記入した内容を別の書式に書き換える作業
を自動化できる。

【００４８】また、ファクシミリのような簡単なネット
ワーク上の端末によって、複数の人間のスケジュールな
どを共通のデータベースで利用することが可能となる。

【図面の簡単な説明】

【図１】本発明の一実施例のシステム構成を示すブロッ
ク図。

【図２】実施例の作用の説明図。

【図３】実施例の画像入力からデータベース登録までの
動作の概略を示す説明図。

【図４】ページ内容認識部のシステム構成の一例を示す
ブロック図。

【図５】ページ内容認識部の処理の手順を示すフロー
図。

【図６】文字領域検出処理の概要を示す説明図。

【図７】文字領域検出処理および文字認識処理の出力の
形式の一例を示す説明図。

【図８】項目内容判別部の構成の一例を示すブロック
図。

【図９】フィールド座標辞書の形式を示す説明図。

【図１０】フィールドアイテム照合辞書の形式を示す説
明図。

【図１１】アイテム単語辞書の形式を示す説明図。

【図１２】アイテム属性辞書の一例を示す説明図。

【図１３】アイテム照合部の出力の形式を示す説明図。

【図１４】取消記号認識の方式の一例を示す説明図。

【図１５】引出線認識方式の一例を示す説明図。

【図１６】カレンダーの期間を表す矢印の認識方式の一
例を示す説明図。

【図１７】項目内容判別部の構成の別の例を示すブロッ
ク図。

【図１８】枠線によって生成されるフィールドの概略を
示す説明図。

【図１９】項目内容判別部のデータ形式の説明図。

【図２０】書式変換部の構成の一例を示すブロック図。

【図２１】書式データベースの形式を示す説明図。

【図２２】認識および出力の対象を住所録とするシステ
ムの動作の概略を示す説明図。

【図２３】ネットワークを利用した実施例のブロック
図。

【図２４】制御内容を記入した紙面の例を示す説明図。

【図２５】書式判別の別の方式の説明図。

【符号の説明】

１０１…メモ、１０２…手帳、１０４…ページ内容認識
部、１０３…イメージスキャナ、１０４…ページ内容認
識部、１０５…情報管理部、１０６…データベース、１
０７…書式変換部、１０８…ユーザインタフェース、１
０９…ＣＲＴ、１１０…キーボード、１１１…マウス、
１１３…電子手帳、１１４…認識入力・情報管理部。

───────────────────────────────────────────────────── フロントページの続き (72)発明者愛木清東京都国分寺市東恋ケ窪一丁目280番地株式会社日立製作所中央研究所内 (72)発明者嶋好博東京都国分寺市東恋ケ窪一丁目280番地株式会社日立製作所中央研究所内

Claims

【特許請求の範囲】

【請求項１】個人の情報を管理する情報管理システムで
あって、手帳のページなどの紙面を光電変換してデジタル画像を
得るスキャナ手段と、該スキャナ手段により得られたデジタル画像に基づい
て、当該ページ内の複数の領域内に印刷もしくは手書き
された文字および該文字で表わされた項目の属性を認識
するページ内容認識手段と、該ページ内容認識手段により認識された文字と前記項目
の属性とを対応付けて記憶管理する情報管理手段と、を備えたことを特徴とする情報管理システム。
【請求項２】請求項１記載の情報管理システムにおい
て、前記ページ内容認識手段は、前記得られたデジタル
画像に基づいて、前記印刷もしくは手書きされた文字の
領域を検出する文字領域検出手段と、該手段により検出
された領域中の文字を認識する文字認識手段とを有し、
該文字認識手段は、認識できた文字については文字コー
ドを付与し、認識できなかった文字についてはイメージ
として取り扱うことを特徴とする情報管理システム。
【請求項３】請求項１記載の情報管理システムにおい
て、前記項目の属性は、当該項目の紙面上の位置に関す
るものであることを特徴とする情報管理システム。
【請求項４】請求項１または３記載の情報管理システム
において、前記項目の属性は、当該項目の種別に関する
ものであることを特徴とする情報管理システム。
【請求項５】請求項２記載の情報管理システムにおい
て、前記属性判別手段は、紙面における各項目の存在す
べきフィールドを表わす位置情報を予め記憶する手段
と、該位置情報と前記項目の属性との関係を記憶する手
段とを有し、前記記憶された位置情報と前記検出された
領域とを照合して属性判別を行うことを特徴とする情報
管理システム。
【請求項６】請求項５記載の情報管理システムにおい
て、前記属性判別手段は、前記項目のフィールドからは
み出して記入された記入項目を検出し、該記入領域と共
有する領域の面積が最も大きいフィールドを求め、前記
記入領域中の記入項目の属性を前記求められたフィール
ドの項目の属性と同一とすることを特徴とする情報管理
システム。
【請求項７】請求項５記載の情報管理システムにおい
て、前記属性判別手段は、紙面上に記入された片方のみ
に矢じりのある矢印を認識する手段を有し、矢印の終点
が属する位置を前記位置情報を予め記憶する手段より探
索し、矢印の起点の周辺に記入された記入項目の属性を
上記探索結果の位置の属性と同一とすることを特徴とす
る情報管理システム。
【請求項８】請求項５記載の情報管理システムにおい
て、紙面上に記入された両方に矢じりのある矢印を認識
する手段を有し、該矢印と交差するフィールドを求め、
前記矢印の周辺に記入された記入項目の属性を前記求め
られた各フィールドの項目の属性と同一とすることを特
徴とする情報管理システム。
【請求項９】請求項２記載の情報管理システムにおい
て、上記デジタル画像より黒線の座標を検出する手段
と、紙面上の位置と枠線の相対的な位置関係の規則を予
め記憶する手段と、紙面上の位置と前記項目の属性との
関係を記憶する手段とをさらに備え、前記属性判別手段
は前記記憶された規則と前記検出された黒線の座標とを
照合することにより項目の属性を判別することを特徴と
する情報管理システム。
【請求項１０】請求項２または９記載の情報管理システ
ムにおいて、前記属性判別手段は、前記各属性の項目を
表すために用いられる単語を属性ごとに予め記憶する手
段を有し、該記憶している単語と上記文字認識手段によ
り認識された結果の文字コードとを照合することを特徴
とする情報管理システム。
【請求項１１】請求項１０記載の情報管理システムにお
いて、前記単語辞書に登録する単語として、単語の構成
文字の一部にワイルドカードの指定を許容し、または任
意の単語を受け付けるワイルドカード記号の指定を許容
することを特徴とする情報管理システム。
【請求項１２】請求項２記載の情報管理システムにおい
て、前記属性判別手段は、文字の色に基づいて当該文字
で表わされた項目の属性を認識することを特徴とする情
報管理システム。
【請求項１３】請求項２記載の情報管理システムにおい
て、前記ページ内容認識手段は、紙面の書式を判別する
書式判別手段と、該書式に応じた複数の属性判別手段と
を有し、紙面の書式に応じて属性判別手段を切り換えて
使用することを特徴とする情報管理システム。
【請求項１４】請求項１３記載の情報管理システムにお
いて、前記書式判別手段は、前記得られたデジタル画像
中の枠線の構造を認識することにより書式の判別を行う
ことを特徴とする情報管理システム。
【請求項１５】請求項１３記載の情報管理システムにお
いて、前記書式判別手段は、前記デジタル画像中より紙
面に予め印刷されたバーコードを認識することにより行
うことを特徴とする情報管理システム。
【請求項１６】請求項２記載の情報管理システムにおい
て、文字コードが付与された活字文字および手書文字を
前記ページに対応した形式で清書印刷出力する手段をさ
らに備えたことを特徴とする情報管理システム。
【請求項１７】請求項２記載の情報管理システムにおい
て、前記情報管理手段に記憶管理された複数のページの
内容に基づいて、特定のキーワードによる情報の検索結
果を整理して出力する手段を有することを特徴とする情
報管理システム。
【請求項１８】請求項２記載の情報管理システムにおい
て、特定の領域の項目については文字認識を行わずイメ
ージとして取り扱うことを特徴とする情報管理システ
ム。
【請求項１９】請求項２記載の情報管理システムにおい
て、表示装置と、前記情報管理手段に記憶された情報を
前記表示装置の表示画面上で対話的に修正する手段とを
さらに備えたことを特徴とする情報管理システム。
【請求項２０】請求項１９記載の情報管理システムにお
いて、修正の際に前記表示装置上に紙面の書式と同様の
書式でページ内容を表示することを特徴とする情報管理
システム。
【請求項２１】請求項１記載の情報管理システムにおい
て、紙面上の記入項目に対して記入された取消記号を認
識する手段を有し、該取消記号が認識された場合には過
去に前記情報管理手段に記憶されている当該記入項目を
抹消することを特徴とする情報管理システム。
【請求項２２】請求項２１記載の情報管理システムにお
いて、前記取消記号を認識する手段は、文字認識辞書に
取消記号を登録しておくことを特徴とする情報管理シス
テム。
【請求項２３】請求項２１記載の情報管理システムにお
いて、前記取消記号を認識する手段は、文字認識でリジ
ェクトになった記入領域について、過去に登録された同
じ紙面の画像の同じ領域を調べ、該領域に過去に認識さ
れた文字が記入されており、且つ新たに入力された画像
との差分により一定数以上の黒画素が増大しているのが
認められた場合に前記取消記号が記入されたと判断する
ことを特徴とする情報管理システム。
【請求項２４】請求項１記載の情報管理システムにおい
て、電子手帳を入力手段として併用することを特徴とす
る情報管理システム。
【請求項２５】請求項１記載の情報管理システムにおい
て、メモ用紙を入力手段として併用することを特徴とす
る情報管理システム。
【請求項２６】請求項１記載の情報管理システムにおい
て、一般のカレンダーを入力手段として併用することを
特徴とする情報管理システム。
【請求項２７】ネットワーク上の端末と計算機とを用い
て個人の情報を管理する情報管理システムであって、端末に、紙面を光電変換してデジタル画像を得る手段を
設け、計算機に、前記光電変換により得られたデジタル画像よ
り文字などの記入領域を検出する手段と、該記入領域中
の文字を認識する手段と、該認識により得られた文字コ
ードを記憶する手段と、該手段に記憶された文字コード
を含む記憶情報をデジタル画像に変換する手段とを設
け、前記端末に、さらに前記計算機により転送されたデジタ
ル画像を紙に出力する手段を設けたことを特徴とする情
報管理システム。
【請求項２８】ネットワーク上の端末と計算機とを用い
て個人の情報を管理する情報管理システムであって、端末に、紙面を光電変換してデジタル画像を得る手段
と、該デジタル画像より文字などの記入領域の座標を検
出する手段と、前記記入領域中の文字を認識する手段
と、記入された項目の属性を得る手段とを設け、計算機に、前記端末より転送された文字および項目の属
性を記憶する記憶手段と、前記文字コードを前記属性に
対応付けて記憶管理する手段とを設け、前記端末に、さらに前記計算機より転送された情報をデ
ジタル画像に変換する手段と、該変換により得られたデ
ジタル画像を紙に出力する手段を設けたことを特徴とす
る情報管理システム。
【請求項２９】請求項２７または２８記載の情報管理シ
ステムにおいて、予め定められた要求リストが記載され
た制御用紙を用い、ユーザによりチェックマークの付さ
れた前記制御用紙の紙面を前記端末において光電変換
し、該光電変換により得られたデジタル画像に基づい
て、前記計算機が、指示された要求を認識し、該要求に
応じた情報を前記端末に転送することを特徴とする情報
管理システム。
【請求項３０】活字等の印刷されたページを有する手帳
を用いて個人の情報を管理する情報管理システムであっ
て、手書文字の記入されたページを光電変換して当該ページ
のデジタル画像を得て、前記活字および手書文字を認識
して文字コードで表わし、該文字コードに基づいて前記
活字および手書文字を紙に清書印刷出力することを特徴
とする情報管理システム。
【請求項３１】請求項３０記載の情報管理システムにお
いて、認識できなかった文字等については、前記デジタ
ル画像の当該部分をそのまま印刷出力することを特徴と
する情報管理システム。