JP2001266067A - 文字認識装置および方法ならびに文字認識プログラムを記録したコンピュータで読取可能な記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 文字認識結果の出力作業を所望するようにし
て簡単に行なう。 【解決手段】 画像入力部３１にて画像の情報が入力さ
れると、文字認識部３３にて画像情報中の文字列が認識
される。その後、入力された画像は、ブロック情報表示
部３６などにより文字列毎のブロックに分別した態様で
表示部８の表示領域に表示される。画像が表示された表
示領域の任意の点が、画像座標指定部６により指定され
た際には、指定された該任意点に対応のブロックに表示
されている文字列の認識結果が、認識結果出力部４１に
より出力ファイル３Ｃに出力される。このように、ユー
ザは、文字認識結果が所望される文字列が表示されてい
るブロックに対応の任意点を指定するだけの簡単操作
で、表示されている画像中から所望文字列の文字認識結
果のみを出力して得ることができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は画像を読取って得
られた画像情報中の文字を認識して、文字認識結果を出
力する文字認識装置および方法ならびに文字認識プログ
ラムを記録したコンピュータで読取可能な記録媒体に関
し、特に、所望される文字の認識結果のみを出力するこ
とのできる文字認識装置および方法ならびに文字認識プ
ログラムを記録したコンピュータで読取可能な記録媒体
に関する。

【０００２】

【従来の技術】特開平５−１０８８６５号公報に示され
ている文字認識装置（以下、従来例１と呼ぶ）は、画像
情報を入力し、入力される画像情報において文字認識を
行なう領域を指定し、指定される各領域に対して文字認
識を行なっていた。このように、文字認識したい画像を
表示装置に表示し、ユーザが必要な領域を指定し、指定
された領域についてのみ文字認識し、認識結果を出力す
ることができる。

【０００３】また、特開平４−０４４１８５号公報に示
される装置（以下、従来例２と呼ぶ）では、文書画像を
自動的に領域分割し、読取を行なった順序で文字コード
列を表示し、ユーザがブロックの編集を指示すると、こ
の指示に基づいて、予め読取られた文字コード列を編集
するという特徴を有している。このように、文書画像を
ブロックに分割して、表示装置に表示し、各ブロックに
ついて文字認識の順序などを編集する方法は、従来より
提供されていた。

【０００４】

【発明が解決しようとする課題】しかしながら、上述の
従来例１では、領域を選択してから文字認識が行なわれ
るため、領域指定が必須の作業となり、表示画像が大き
ければ領域指定は容易であるが、携帯型情報処理端末装
置のように表示部における表示領域が小さい場合には、
所望の領域を詳細に指定して選択することは極めて困難
であった。

【０００５】また、上述した従来例２における自動領域
指定に関する技術は、各ブロックに対して文字の認識順
序を指定するために、キーボードなどの入力装置が必要
であり、そのため編集処理が煩雑であった。また、ブロ
ックの読取順序の番号を表示するための画面と編集処理
を指示するための画面とが１つの画面として重なって表
示されていないので、ユーザが読取順序の画面と編集の
画面とを切換えながら見比べる必要があり、ユーザの入
力時の負担が大きかった。

【０００６】また、携帯型情報処理装置のように、表示
部の表示領域が小さい場合には、画像と読取順序編集画
面とを同時に表示することは極めて困難であった。

【０００７】図１７は、従来の名刺の主面を走査して読
み取られた画像を示す図である。図１８（Ａ）と（Ｂ）
は、従来の電子的なアドレス帳の登録内容の１例と他の
例を示す図である。

【０００８】上述したような従来例２のように、ブロッ
クの読取順序などの編集作業を行なわず、領域指定をす
べて自動で行なう場合には、次のような問題が生じてい
た。たとえば図１７の名刺の画像を認識して、その認識
結果によるデータを電子的なアドレス帳に入力する場合
に、ユーザは名刺に書かれた氏名と会社名と電話番号だ
けのデータを入力したいとする場合であっても、一括に
認識結果が出力される場合では、図１８（Ａ）のように
ユーザが望まない本社の電話番号などのデータもアドレ
ス帳に入力されてしまっていた。あるいは、図１８
（Ｂ）のように認識できなかったデータは、勝手に削除
されてしまっていた。

【０００９】このように、従来の文字認識装置では、ブ
ロックごとに認識結果の出力を許可するか否かの指定、
または認識結果の出力順序を指定するための編集作業を
容易に行なうことができなかった。

【００１０】それゆえにこの発明の目的は、文字認識結
果の出力作業を所望するようにして簡単に行なうことの
できる文字認識装置および方法ならびに文字認識プログ
ラムを記録したコンピュータで読取可能な記録媒体を提
供することである。

【００１１】

【課題を解決するための手段】この発明のある局面に係
る文字認識装置は、１つ以上の文字からなる文字列を含
む画像の情報を入力する画像情報入力手段と、前記画像
情報入力手段により入力された前記画像情報中の前記文
字を認識してする認識手段と、表示領域を有して、前記
表示領域において前記画像情報入力手段により入力され
た前記画像情報による画像を、前記表示領域において前
記文字列毎のブロックに分別した態様で表示する表示手
段と、前記画像が表示された前記表示領域の任意の点が
指定された際に、指定された該任意点に対応の前記ブロ
ックに表示されている前記文字列の前記認識手段による
認識結果を出力する出力手段とを備えて構成される。

【００１２】したがって、入力された画像は、文字列毎
のブロックに分別された態様で表示領域において表示さ
れた際には、表示領域の指定された任意点に対応したブ
ロックの文字列の認識結果が出力される。

【００１３】それゆえに、ユーザは、文字認識結果が所
望される文字列が表示されているブロックに対応の任意
点を指定するだけという簡単操作で、表示されている画
像中から所望文字列の文字認識結果のみを出力して得る
ことができる。

【００１４】また、上述のように任意点を指定するだ
け、所望文字列の文字認識結果のみを得ることができる
から、携帯型情報処理端末のように表示領域が極めて小
さい場合でも、表示領域に表示されている画像の文字列
中から、所望する文字列のみの認識結果を簡単、確実に
得ることができる。

【００１５】上述の文字認識装置において、任意点は、
前記ブロック毎に予め設定されたブロック点であって、
前記出力手段は、前記ブロック点が指定された前記ブロ
ックに表示されている前記認識結果を出力するように構
成されてもよい。

【００１６】したがって、入力された画像は、文字列毎
のブロックに分別された態様で表示領域において表示さ
れた際には、設定されたブロック点が指定されたブロッ
クのみに表示されている文字列の認識結果が出力され
る。

【００１７】このように表示領域において、ブロック点
は各ブロックごとに対応付けられているから、ユーザ
は、文字認識結果が所望される文字列が表示されている
ブロックに設けられたブロック点を速やかに特定して指
定操作できるから、上述したように簡単な操作で、表示
されている画像中から所望文字列の文字認識結果のみを
出力して得ることができる。

【００１８】また、上述のようにブロック点を指定する
だけ、所望文字列の文字認識結果のみを得ることができ
るから、携帯型情報処理端末のように表示領域が極めて
小さい場合でも、表示領域に表示されている画像の文字
列中から、所望する文字列のみの認識結果を簡単、確実
に得ることができる。

【００１９】上述の文字認識装置においては、前記画像
情報入力手段から入力された複数の前記画像情報の中か
ら、１つ以上の画像情報を選択するための画像情報選択
手段がさらに備えられて、前記画像情報選択手段により
選択された前記１つ以上の画像情報について、前記認識
手段による処理が施されて、前記認識手段による処理が
施された後の前記１つ以上の画像情報の中から指定され
た１つの画像情報に対して、前記表示手段による処理が
施されるように構成されてもよい。

【００２０】したがって、画像情報入力手段から入力さ
れた複数の画像情報中の選択された１つ以上の、言換え
ると複数の画像情報に対して一括して、認識手段による
文字列の認識処理が施される。そして、認識手段による
処理が施された後の１つ以上の画像情報の中から指定さ
れた１つの画像情報に対して、表示手段による処理が施
される。それゆえに、ユーザは、複数の画像情報につい
て上述のような一括認識処理を施した場合であっても、
その後に所望する１つの画像情報のみを指定して、表示
手段を介して、該所望画像情報から所望する文字列の認
識結果を得ることができるから、複数の画像情報を対象
とした場合の文字認識作業に関するユーザの負担は軽減
される。

【００２１】上述した文字認識装置においては、前記表
示領域において、前記文字列毎のブロックについて、前
記認識結果の出力順序を指定するため出力順序指定手段
をさらに備えて、前記出力手段は、前記ブロックに表示
されている前記文字列の前記認識手段による認識結果
を、前記出力順序指定手段により指定された順序に従い
出力するよう構成されてもよい。

【００２２】したがって、ユーザは、出力順序指定手段
を介して所望する出力順序を指定するだけで、指定され
た各ブロックについての文字認識結果を、所望順序に従
い出力させることで、文字認識結果の編集作業を出力時
点で行なうことができるから利便性に優れる。

【００２３】上述した文字認識装置において、出力手段
は、指定された各ブロックについての前記認識結果を所
定媒体に出力するように構成されてもよい。したがっ
て、所望する認識結果のみを所定媒体に、直接に出力し
て格納することができて利便性に優れる。

【００２４】上述した文字認識装置において、指定され
た各ブロックについての前記認識結果は、上述の所定媒
体に対応の所定形式に従って変換されながら、前記所定
媒体に出力されるようにしてもよい。これにより、上述
した所定媒体への認識結果格納時の利便性はさらに向上
する。

【００２５】この発明の他の局面に係る文字認識方法
は、１つ以上の文字からなる文字列を含む画像の情報を
入力する画像情報入力ステップと、前記画像情報入力ス
テップにより入力された前記画像情報中の前記文字を認
識してする認識ステップと、予め準備された表示領域に
おいて前記画像情報入力ステップにより入力された前記
画像情報による画像を、前記表示領域において前記文字
列毎のブロックに分別した態様で表示する表示ステップ
と、前記画像が表示された前記表示領域の任意の点が指
定された際に、指定された該任意点に対応の前記ブロッ
クに表示されている前記文字列の前記認識ステップによ
る認識結果を出力する出力ステップとを備えて構成され
る。

【００２６】したがって、入力された画像は、文字列毎
のブロックに分別された態様で表示領域において表示さ
れた際には、表示領域の指定された任意点に対応したブ
ロックの文字列の認識結果が出力される。

【００２７】それゆえに、ユーザは、文字認識結果が所
望される文字列が表示されているブロックに対応の任意
点を指定するだけという簡単操作で、表示されている画
像中から所望文字列の文字認識結果のみを出力して得る
ことができる。

【００２８】また、上述のように任意点を指定するだ
け、所望文字列の文字認識結果のみを得ることができる
から、携帯型情報処理端末のように表示領域が極めて小
さい場合でも、表示領域に表示されている画像の文字列
中から、所望する文字列のみの認識結果を簡単、確実に
得ることができる。

【００２９】この発明の更なる他の局面に係る文字認識
方法をコンピュータに実行させるための文字認識プログ
ラムを記録したコンピュータで読取可能な記録媒体は、
以下の特徴を有する。つまり、該媒体に記録された文字
認識プログラムにより実行される文字認識方法は、１つ
以上の文字からなる文字列を含む画像の情報を入力する
画像情報入力ステップと、前記画像情報入力ステップに
より入力された前記画像情報中の前記文字を認識してす
る認識ステップと、予め準備された表示領域において前
記画像情報入力ステップにより入力された前記画像情報
による画像を、前記表示領域において前記文字列毎のブ
ロックに分別した態様で表示する表示ステップと、前記
画像が表示された前記表示領域の任意の点が指定された
際に、指定された該任意点に対応の前記ブロックに表示
されている前記文字列の前記認識ステップによる認識結
果を出力する出力ステップとを備える。

【００３０】したがって、該プログラムが実行されるこ
とにより、入力された画像は、文字列毎のブロックに分
別された態様で表示領域において表示された際には、表
示領域の指定された任意点に対応したブロックの文字列
の認識結果が出力される。

【００３１】それゆえに、ユーザは、文字認識結果が所
望される文字列が表示されているブロックに対応の任意
点を指定するだけという簡単操作で、表示されている画
像中から所望文字列の文字認識結果のみを出力して得る
ことができる。

【００３２】また、上述のように任意点を指定するだ
け、所望文字列の文字認識結果のみを得ることができる
から、携帯型情報処理端末のように表示領域が極めて小
さい場合でも、表示領域に表示されている画像の文字列
中から、所望する文字列のみの認識結果を簡単、確実に
得ることができる。

【００３３】

【発明の実施の形態】（実施の形態１）この実施の形態
では、名刺の主面を走査して読取られた画像データにつ
いて文字認識する場合が説明されるが、認識対象となる
画像データは、名刺のそれに限定されず、他の画像デー
タであってもよい。

【００３４】図１は、この発明の実施の形態に係る名刺
認識装置の機能構成図である。図２は、本発明の実施の
形態に係る名刺認識装置のハードウェア構成図である。

【００３５】図２において名刺認識装置は、該装置自体
を集中的に制御および監視するためＣＰＵ（中央処理装
置の略）１、各種のバッファが格納されるバッファメモ
リ２、メモリ３、画像データが格納される画像データメ
モリ４、スキャナなどからなり画像データを読取るため
の画像読取部５、マウスまたはペンなどからなり画像に
おける座標を指定するために操作される画像座標指定部
６、各種情報を入力するために操作されるキーボード
７、情報を表示するために液晶タブレットまたはＣＲＴ
（陰極線管の略）などからなる表示部８、インターネッ
トなどの外部の通信ネットワーク１０と該文字認識装置
とを通信接続するための通信Ｉ／Ｆ（インターフェイス
の略）９、データおよびプログラムを含む各種の情報を
記憶するためのメモリ１１を含む。

【００３６】メモリ３には、後述する文字特徴辞書３
Ａ、後処理用言語辞書３Ｂおよび出力ファイル３Ｃが格
納される。出力ファイル３Ｃは、例えば、電子的なアド
レス帳に対応する記憶領域である。

【００３７】バッファメモリ２は、後述する画像バッフ
ァ２１、文字矩形バッファ２２、文字画像バッファ２
３、文字特徴バッファ２４、認識結果バッファ２５、ブ
ロック分類バッファ２６、指定点座標バッファ２７およ
び出力バッファ２８を含む。

【００３８】名刺認識装置の機能構成は、図１に示され
るように制御部５０、画像入力部３１、文字切出し部３
２、文字認識部３３、後処理部３４、ブロック分類部３
５、ブロック情報表示部３６、指定点検出部３７、認識
結果選別部３８、認識結果抽出部３９、認識結果修正部
４０および認識結果出力部４１を含んでなる。

【００３９】制御部５０はＣＰＵ１により該名刺認識装
置の動作を制御するためのものである。画像入力部３１
は、画像読取部５により読取られた画像データ、または
画像データメモリ４に予め格納された画像データを読込
んで、画像バッファ２１に格納する。画像データメモリ
４は、たとえばメモリカード、またはハードディスクな
どからなる。画像データメモリ４の媒体はこれらに限定
されず、光記録媒体または光磁気記録媒体であってもよ
い。

【００４０】文字切出し部３２は、画像バッファ２１に
格納された画像データから、ブロック、行、文字などを
切出し、文字矩形座標を抽出し、文字矩形座標データを
文字矩形バッファ２２に格納するとともに、切出された
文字の画像データを文字画像バッファ２３に格納する。

【００４１】文字認識部３３は、特徴抽出処理部、マッ
チング処理部および文字列生成部などを有して、文字画
像バッファ２３中の文字画像データを認識処理し、認識
結果得られた文字コードの候補を出力する。具体的に
は、特徴抽出処理部は、文字画像データから文字の特徴
データを抽出し、文字特徴バッファ２４に格納する。マ
ッチング処理部では、複数種類の文字の標準パターンの
特徴データとが予め登録されているマッチング辞書（図
示省略）の内容と文字特徴バッファ２４中の文字特徴デ
ータとの照合により、該文字を認識して、１つ以上の文
字コード候補を決定し、これを、文字矩形バッファ２２
に予め格納された文字矩形座標データとともに認識結果
バッファ２５に格納する。

【００４２】図３（Ａ）と（Ｂ）は、図１の後処理部３
４の処理内容を説明するための図である。後処理部３４
では、認識結果バッファ２５中の情報をもとに、単語の
照合などにより最適な文字認識結果を出力する。たとえ
ば、後処理前の文字認識結果が図３（Ａ）の場合、第１
〜第３候補文字コードの組合せにより得られる複数の文
字コード列に基づいて、図３（Ｂ）のように後処理用言
語辞書３Ｂ中に登録されている単語を検索し、最適な文
字認識結果‘奈良県天理市’となるよう修正するなどの
処理を行なう。

【００４３】図４と図５には、この発明の実施の形態に
係る認識結果バッファ２５とブロック分類バッファ２６
の内容例が示される。図４の認識結果バッファ２５は、
各ブロックに対応して認識結果情報２５ｉ（ｉ＝１，
２，３、…、ｎ）を含む。認識結果情報２５ｉは、該ブ
ロックを識別するためのブロック番号ＢＮと、該ブロッ
クにおける文字列ついての１位の認識結果文字列２５Ｂ
と、対応する文字列中の各文字についての認識候補文字
データ２５Ｃと、対応する文字列中の各文字の矩形につ
いての表示部８の表示領域における座標を示す文字矩形
座標データ２５Ｄとを含む。ブロック分類部３５は、例
えば図４の認識結果バッファ２５の内容を読込み、各ブ
ロックに対応して、認識結果である１位認識結果文字列
２５Ｂを項目ごとに分類し、認識結果バッファ２５のブ
ロック番号ＢＮと対応付けて、図５に示されるようにブ
ロック分類バッファ２６にブロック情報データ２６ｉ
（ｉ＝１，２、…、ｎ）として格納する。ブロック情報
データ２６ｉは、該ブロックを識別するためのブロック
番号ＢＮ（図４のブロック番号ＢＮに対応する）、該ブ
ロックに対応した情報の項目名を示す項目名データ２６
Ｂおよび該ブロックに対応した表示部８の表示領域にお
ける座標を示す座標データ２６Ｃを含む。

【００４４】図６（Ａ）と（Ｂ）は、本実施の形態にお
いて画像がブロックに分別された態様で表示された状態
を示す図である。

【００４５】ブロック情報表示部３６は、ブロック分類
バッファ２６中に格納されたブロック情報データ２６ｉ
を読出し、座標データ２６Ｃに基づいてブロックごとに
区別して、画像バッファ２１の画像データを表示部８に
表示する。さらに、ユーザが画像座標指定部６を操作す
ることによって指定された座標データを、指定点座標バ
ッファ２７に蓄積するよう格納する。

【００４６】具体的には、ブロック分類バッファ２６の
各ブロック情報データ２６ｉの座標データ２６Ｃを取出
し、表示部８の表示領域において該ブロックの領域を反
転表示させるなどの分別表示態様により、該ブロックに
対応した画像を矩形で囲んで表示する（図６（Ａ）参
照）。

【００４７】指定点検出部３７は、ブロック情報表示部
３６により画像が表示された表示部８の領域内の所望す
る文字列が表示されているブロック上の任意の１点を、
ユーザが画像座標指定部６を操作して指定した際に、指
定された点の座標値を得て、指定点座標バッファ２７に
蓄積して格納する。図６（Ｂ）では、図６（Ａ）の表示
状態において、画像座標指定部６により任意の１点が指
定されている状態を示す図である。

【００４８】認識結果選別部３８は、前述のようにして
指定されて指定点座標バッファ２７に格納された座標値
をもとに、指定されたブロックを選別する。認識結果抽
出部３９は、認識結果バッファ２５とブロック分類バッ
ファ２６との内容から、指定されたブロックに関する情
報（?）を取出して、出力バッファ２８に格納する。

【００４９】認識結果出力部４１は、出力バッファ２８
に格納された指定ブロックに関する情報を、出力ファイ
ル３Ｃのフォーマットに合わせて、該出力ファイル３Ｃ
に書込む。

【００５０】図７（Ａ）と（Ｂ）は、本実施の形態にお
いて指定されたブロックに対応の出力例を示す図であ
る。図においては、画像座標指定部６によって指定され
たブロック（図７（Ａ）の指定点‘＋’で指定されたブ
ロック）が、認識結果選別部３８および認識結果抽出部
３９により選別され、そして抽出され、認識結果出力部
３９により出力ファイル３Ｃの所定フォーマットに従っ
て、出力ファイル３Ｃに出力された内容（図７（Ｂ）参
照）が示されている。

【００５１】図８は、この発明の実施の形態に係る名刺
認識処理の概略フローチャートである。以下、図８のフ
ローチャートを参照して、名刺認識処理について説明す
る。

【００５２】まず、画像入力ステップ（Ｓ８０２）にお
いて、画像読取部５に読取られた画像データまたは画像
データメモリ４に予め格納された画像データを得て、こ
れを一旦画像バッファ２１に格納する。次に、文字切出
しステップ（Ｓ８０３）において、画像バッファ２１に
格納された画像データから、ブロック、行、文字が切出
されて、文字矩形座標が抽出され、抽出された文字矩形
座標データは文字矩形バッファ２２に格納するとともに
切出された文字の画像データは文字画像バッファ２３に
格納される。

【００５３】次に、文字認識ステップ（Ｓ８０４）にお
いて、文字矩形座標データと文字画像データとから、文
字の特徴が抽出されて、抽出された文字の特徴とマッチ
ング辞書（図示省略）に予め登録されている文字の標準
パターン特徴との照合により、文字の認識コードの候補
を決定して、前述の文字切出しステップ（Ｓ８０３）で
抽出された文字の矩形座標データをもとに、文字をまと
まりのある文字列にして、該文字列を候補文字データ２
５Ｃとして認識結果バッファ２５に格納する。

【００５４】次の後処理ステップ（Ｓ８０５）において
は、認識結果バッファ２５に格納された情報に基づい
て、単語照合などの処理により、最適な文字認識結果を
得て、これを認識結果バッファ２５に対応の１位認識結
果文字列２５Ｂとして格納する。次のブロック分類ステ
ップ（Ｓ８０６）においては、１位認識結果文字列２５
Ｂを、項目に分類して文字認識結果バッファ２５の内容
と対応付けて、ブロック分類バッファ２６に格納する。
なお、項目の分類は、単語のマッチング、あるいは認識
結果文字列の画像データにおける位置情報に基づいてな
される。この分類に関する技術は公知のものに従うの
で、説明は省略する。

【００５５】次のブロック情報表示ステップ（Ｓ８０
７）においては、ブロック分類バッファ２６中のブロッ
クの座標データ２６Ｃを取出して、画像バッファ２１中
の画像データをブロックごとに区別した態様で、表示部
８に表示する。

【００５６】指定点検出ステップ（Ｓ８０８）におい
て、ブロック情報表示部３６により表示部８に表示され
た画像データを、ユーザが画像座標指定部６を操作し
て、所望の座標（１点）を指定すると、指定された点の
座標データを得て、これを指定点座標バッファ２７に蓄
積して格納する。

【００５７】次の指定認識結果選別ステップ（Ｓ８０
９）においては、指定点座標バッファ２７に格納された
座標データをもとに、認識結果バッファ２５とブロック
分類バッファ２６に格納された該指定座標データに対応
するブロックの１位認識結果文字列２５Ｂを取出して、
出力バッファ２８に格納する。認識結果修正ステップ
（Ｓ８１０）において、ユーザは出力バッファ２８に格
納された内容は表示部８に表示されるので、表示された
内容に誤認識があったことを発見すると、出力バッファ
２８に格納された該認識結果の修正作業を、キーボード
７などを操作して行なう。その後、認識結果出力ステッ
プ（Ｓ８１１）において、認識結果出力部４１は、出力
バッファ２８に格納された情報を出力ファイル３Ｃのフ
ォーマットに従って、該出力ファイル３Ｃに書込む。

【００５８】図９（Ａ）と（Ｂ）は、図８のブロック情
報表示ステップの処理を示すフローチャートと画面表示
例を示す図である。前述の文字認識ステップ（Ｓ８０
４）による文字認識処理が終了してから、表示部８に表
示されたアイコンが画像座標指定部６またはキーボード
７により指定されて、ブロック情報表示ステップ（Ｓ８
０７）による処理の開始が指示されると、図９（Ａ）の
処理が開始される。

【００５９】まず、図９（Ａ）では、認識結果バッファ
２５から１位認識結果文字列２５Ｂの文字コードと文字
矩形座標データ２５Ｄが得られる（Ｓ９０２）。次に、
ブロック分類バッファ２６から、各ブロックについての
座標データ２６Ｃと項目に関する情報（ブロック番号Ｂ
Ｎと項目名２６Ｂ）が得られる（Ｓ９０３）。次に、画
像バッファ２１から画像データが得られる（Ｓ９０
４）。次に、得られた画像データ中に座標データ２６Ｃ
があるかどうかを判断し（Ｓ９０５）、座標データ２６
Ｃがあり、ブロックがあると判定された場合には、その
ブロックの座標内の画像データを反転表示させる（Ｓ９
０６）。一方、ブロックがない場合は、ブロック情報表
示ステップ自体を終了させる（Ｓ９０７）。

【００６０】図９（Ｂ）には、図９（Ａ）の処理におい
てブロックに対応の画像の情報を反転表示させた場合の
表示例が示される。ここには、１枚の画像に係る画像デ
ータを認識処理した直後の表示部８における表示例が示
されている。図９（Ｂ）の画面において、画面右上端に
表示される出力指定処理を選択するための“ＹＥＳ”の
アイコンが画像座標指定部６またはキーボード７により
指定されると、次の指定点検出ステップが開始される。

【００６１】図１０（Ａ）と（Ｂ）は、図８の指定点検
出ステップの処理フローチャートと表示画面例を示す図
である。前述したブロック情報表示ステップにおいて、
出力指定処理が選択されると、図１０（Ｂ）の画面が表
示されて、指定点検出ステップの処理を終了するかどう
かが判断される（Ｓ１００２）。図１０（Ｂ）は、指定
点検出ステップの処理を終了するか否かを指示する操作
を促すための表示画面例である。

【００６２】この指定点検出ステップによる処理の終了
を指示するか否かは、図１０（Ｂ）に示される画面右上
端の終了アイコン５０の‘ＹＥＳ’（終了を指示す
る）、または‘ＮＯ’（終了を指示しない）のいずれか
が、画像座標指定部６またはキーボード７を用いて指定
されることにより判断される。終了しない場合は、ユー
ザは画像座標指定部６などにより指定点の入力を行なう
（Ｓ１００３）。終了する場合は、それまでに指定され
た点の座標データを指定点座標バッファ２７に出力した
後（Ｓ１００６）、出力指定検出ステップを終了する。

【００６３】前述したようにして指定点が入力される
と、その指定点の座標が検出される（Ｓ１００４）。検
出された座標は、指定点座標バッファ２７に蓄積して格
納される。また、指定点が入力されると、該指定点を矩
形領域内に含むブロックが検出されて、図１０（Ｂ）に
示されるように、指定済マーク５１（‘＋’）が該検出
ブロックに対応して表示されるなどして、画面上におい
て指定されたブロックが一目で判別できるよう表示され
る（Ｓ１００５）。

【００６４】図１１（Ａ）と（Ｂ）は、本実施の形態に
よる指定ブロックの表示態様の変更方法の他の例を説明
する図である。

【００６５】なお、指定されたブロックに関する表示態
様の変更の方法は、図１０（Ｂ）に示されたものに限定
されない。たとえば、図１１（Ａ）および（Ｂ）で示さ
れるようなものであってもよい。図１１（Ａ）では指定
点によりブロックが指定される前の画面表示状態が示さ
れている。ここでは、各ブロックごとにアイコン５２が
設けられており、このアイコン５２が画像座標指定部６
により指定されるか否かにより、該ブロックが指定され
たか否かが決定されて、指定された場合には該ブロック
の表示態様を図１１（Ｂ）に示すように変更するように
してもよい。図１１（Ｂ）では、図示されるように、５
つのアイコン５２が指定されて、指定された各アイコン
５２が反転表示されることにより、該アイコン５２に対
応の５つのブロックが指定された状態であることがわか
る。また、終了アイコン５０には、指定されたブロック
がいくつであるかが示されている。ここでは、指定され
たブロックは５個であることが示されている。

【００６６】次に、Ｓ１００２に戻り、以上の動作が、
出力すべきブロックの指定が終了されるまで繰返され
る。ユーザが出力すべきブロックの指定処理の終了を、
アイコン５０の“ＹＥＳ”）を画像座標指定部６により
指定することで指示すると、それまでに指定された指定
点の座標データは指定点座標バッファ２７に格納される
（Ｓ１００６）。その後、処理は終了する。

【００６７】次に、図８の認識結果選別ステップの処理
を説明する。図１２は、図８の認識結果選別ステップの
処理フローチャートである。上述したようにして指定点
検出ステップの処理が終了すると、図１２の認識結果選
別ステップによる処理がスタートする。

【００６８】まず、指定点座標バッファ２７中に座標デ
ータがあるかどうかが判断されて（Ｓ１２０２）、座標
データはないと判断されると、認識結果選別ステップの
処理は終了する。一方、読出すべき座標データが指定点
座標バッファ２７にあれば、指定点座標バッファ２７か
ら指定点の座標データを読出し（Ｓ１２０３）、認識結
果バッファ２５からは、読出された指定点の座標データ
を含むブロックに対応の文字認識結果である１位認識結
果文字列２５Ｂを読出し（Ｓ１２０４）、出力バッファ
２８に出力する（Ｓ１２０５）。その後、ステップＳ１
２０２に戻り、以上の動作を、指定点座標バッファ２７
から読出すべき指定点の座標データがなくなるまで（Ｓ
１２０２でＮＯとなるまで）繰返す。その後、次の認識
結果修正ステップによる処理に移行する。

【００６９】認識結果修正ステップ（Ｓ８０９）では、
前述の認識結果選別ステップにより出力バッファ２８に
出力された認識結果の文字列（１位認識結果文字列２５
Ｂ）が表示部８に表示される。この表示内容を見たユー
ザが、認識結果が誤っていると判断した場合は、キーボ
ード７または画像座標指定部６などを操作して、手動で
認識結果の修正を行なうことができる。

【００７０】図７（Ａ）と（Ｂ）を参照して、上述のよ
うにして指定点検出ステップにおいて指定されたブロッ
ク（図７（Ａ）参照）の項目名“氏名”、”会社名”、
“郵便番号”、“住所”および“電話番号”に対応した
認識結果のみが出力ファイル３Ｃに出力されており（図
７（Ｂ）参照）、他のブロックに対応の認識結果文字列
は出力されていない。前述の認識結果修正ステップ（Ｓ
８０９）では、図７（Ａ）で示されるように、認識結果
選別ステップで選別されたブロックの文字列だけを修正
すれば、修正後の正しい認識結果の文字列が出力ファイ
ル３Ｃに出力される。

【００７１】その後、認識結果出力ステップ（Ｓ８１
０）では、認識結果修正ステップ（Ｓ８０９）で修正さ
れた後の認識結果が、出力ファイル３Ｃに該ファイルの
フォーマットに変換されて出力される。

【００７２】このように、ユーザは表示部８に表示され
る画像データ中の任意の１点を指定することで、文字認
識のための画像領域を指定することが可能となるから、
該名刺認識装置が携帯型情報処理端末装置に搭載され
て、表示部８における画面表示可能な領域が極めて小さ
い場合でもあっても、所望領域の情報のみを簡単に、か
つ確実に指定して文字認識させることができる。

【００７３】また、認識結果が表示される画面において
も、ユーザは任意の１点を指定することにより、対応ブ
ロックの認識結果のみを出力指定することができて、出
力指定時のユーザの負担を軽減することができる。

【００７４】また、ユーザは必要とする認識結果のみ
を、すなわち出力ファイル３Ｃに出力を所望する認識結
果のみを、認識結果選別部３８を介して点指定により指
定することができるから、ユーザは容易に所望する認識
結果文字列のみを選別して得ることができる。

【００７５】上述したブロック情報表示部３６は、図１
０（Ｂ）に示されるように、ブロック分類バッファ２６
中の座標データ２６Ｃに基づいて画像バッファ２１中の
入力画像データを、対応文字列のブロックを反転させる
などして表示しているから、ユーザが画像座標指定部６
などにより表示画面の任意の１点を指定すると、該誌定
点の座標が検出される。そして、検出された該座標がブ
ロック分類バッファ２６のどのブロックに含まれるかを
検索する機能を有して、指定ブロックが確定した場合に
は、認識結果バッファ２５から、確定したブロックの認
識結果が読出される。このように、ユーザは所望する文
字認識領域を１点の指定で確定し取出すことができる。

【００７６】また、図１１に示されるように、指定する
点をアイコンで固定し、ブロック分類バッファ２６にア
イコンの座標とブロックを対応付けた情報を用い、アイ
コンをＯＮした場合、対応するブロックの認識結果を取
出し、認識領域を確定する方法でもよい。

【００７７】また、図１０（Ｂ）のようにブロックの情
報を表示したとき、認識領域指定終了スイッチであるア
イコンが合わせて表示されて、スイッチを終了（ＹＥ
Ｓ）指定すると認識領域指定作業が終了する。このと
き、指定されていなかったブロックの認識結果は出力さ
れない。このように、ユーザは、所望しないブロックを
指定しないことで、そのブロックの認識結果は出力ファ
イル３Ｃには出力されない。その結果、出力ファイル３
Ｃにはユーザの所望する認識結果（情報）のみを格納す
ることが容易に可能となる。

【００７８】また、上述したように認識対象の画像デー
タの表示と認識対象となるブロックの表示とを同一画面
上で行なって、認識結果の出力の指定が可能である。

【００７９】また、以下のように、複数の画像データ中
から所望する画像データのみについて上述したような一
連の処理を実行することもできる。図１３（Ａ）と
（Ｂ）は画像リストの表示画面例を示す図である。図１
３（Ａ）では、複数の画像データとして、画像ファイル
１〜４が準備されており、これら画像データの全ては未
認識状態にあることがリスト形式にて示されている。こ
こで、ユーザにより、画面右下の一括認識を指定するた
めのアイコン５４がクリックされて、全ての画像データ
についての文字認識処理が指定されると、図１３（Ｂ）
のような画面表示がなされる。この際、リスト表示され
た各画像データについての認識が順次、該装置の内部で
行なわれていく。そして、その旨がアイコン５４が反転
表示されていることで報知される。

【００８０】図１３（Ｂ）では、複数の画像データのう
ち、１番目の画像データについては認識処理が終了して
おり、２番目の画像データについては認識処理中である
ことが示される。ここで、ユーザが、図１３（Ｂ）の認
識済みの１番目の画像データに対応した出力指定アイコ
ン５５を操作すると、対応の画像データについて、ブロ
ック情報表示部３６によるブロック情報表示ステップが
開始される。なお、ここでは、ある画像データの認識処
理が終了したことに応じて、該画像データに対してブロ
ック情報表示ステップによる処理を開始させるとしてい
るが、該処理の開始タイミングは、全ての画像データに
ついての一括認識処理が終了してからであっても良い。

【００８１】図１４は、この発明の実施の形態による一
括認識指定ステップによる処理フローチャートである。
一括認識指定ステップによる処理では、まず、画像デー
タメモリ４などに記憶されている複数の画像データの名
称などが図１３（Ａ）に示されるようにリスト表示され
る（Ｓ１４０２）。ここで、前述した一括認識アイコン
５４が操作されたか否か、すなわち一括認識処理が指定
されたか否かが判断される（Ｓ１４０３）。一括認識が
指定された場合は、認識未処理の画像データが画像デー
タメモリ４中にあるかどうかが判断される（Ｓ１４０
４）。未処理の画像データがあれば、画像入力部３１に
より、該画像データを画像データメモリ４から画像バッ
ファ２１などにロードして（Ｓ１４０５）、認識処理を
行なう（Ｓ１４０６）その後、Ｓ１４０４の処理に戻
り、以下、同様な処理が繰返される。一方、認識未処理
の画像データが画像データメモリ４中になければ、認識
処理は終了する。

【００８２】図１５は、本実施の形態による画像リスト
中の所望の画像に対して認識領域指定の処理を施して、
認識結果を出力する処理のフローチャートである。ま
ず、画像リストが、各画像データに対応して認識処理が
終了しているかどうかの情報とともに表示される（Ｓ１
５０２：図１３（Ａ）参照）。ユーザにより認識領域指
定処理の実行が指定されているか否か判断され（Ｓ１５
０３）、認識領域指定処理を実行しない場合は、認識結
果はすべて出力ファイル３Ｃに出力される（Ｓ１５０
８）。

【００８３】一方、認識領域指定処理の実行が指定され
ている場合は、ユーザがターゲットの画像データを画像
リストから選択し（Ｓ１５０４）、図９（Ａ）のブロッ
ク情報表示ステップにより、ターゲットの画像データに
ついて認識結果が、ブロック情報とともに表示され（Ｓ
１５０５）、次に図１０（Ａ）で説明した指定点検出ス
テップにおいて、ユーザにより指定された指定点が検出
される（Ｓ１５０６）。次に、図１２で示した指定領域
認識結果選別ステップにより指定されたブロックの認識
結果が選別される（Ｓ１５０７）。その後、Ｓ１５０２
の処理に戻り、以下同様にして処理が繰返される。

【００８４】以上のようにすれば、リスト表示された複
数の画像データの一括認識が可能な名刺認識装置におい
て、該リスト中から所望の画像データのみを選択し、選
択された画像データについてのみ認識領域指定処理を施
して、該所望画像データの所望するブロックの認識結果
のみを選択的に出力ファイル３Ｃに出力することが可能
となる。

【００８５】図１６は、この発明の実施の形態による指
定されたブロックの認識結果の出力順序を指定するため
の画面表示例を示す図である。図１６では、図１１
（Ａ）のアイコン５２が、該アイコン５２に対応したブ
ロックの認識結果の出力順番を指定する番号の入力が可
能なようにが拡張されている。このようにして各ブロッ
クの認識結果の出力順番を指定する番号の入力が可能で
あれば、キーボード７などの操作をすることなく、画像
データが表示された画面において、認識結果の出力可否
だけではなく、出力の順序も任意に指定できる。

【００８６】（実施の形態２）上述の実施の形態１の名
刺認識装置は、上述したような画像データにおける文字
認識処理を機能させるためのプログラムで実現される。
このプログラムは図１に示された画像入力部３１〜認識
結果出力部４１を構成するためのプログラムであり、コ
ンピュータで読取可能な記録媒体に格納されている。上
述した実施の形態では、この記録媒体として図２に示さ
れている名刺認識装置で処理が行なわれるために必要な
メモリ１１、たとえばＲＯＭ（リードオンリーメモリ）
のようなそのものであってもよいし、また図示されてい
ないが外部記憶装置としてプログラム読取装置が設けら
れ、そこに記録媒体を挿入することで読取が可能な記録
媒体であってもよい。いずれの場合においても、該記録
媒体に格納されているプログラムはＣＰＵ１が直接にア
クセスして実行させるような構成であってもよいし、あ
るいはいずれの場合もこれら記録媒体からプログラムを
一旦読出し、読出されたプログラムはＣＰＵ１の図示さ
れない内部の所定のプログラム記憶エリアにロードされ
て、ＣＰＵ１によりそのプログラムが読出されて実行さ
れる方式であってもよい。なお、このロード用のプログ
ラムは予め図２の装置内部に格納されているものとす
る。

【００８７】ここで、上述したプログラムを記録した記
録媒体は、名刺認識装置の本体と分離可能に構成される
記録媒体であってもよい。このような記録媒体として
は、磁気テープやカセットテープなどのテープ系、フレ
キシブルディスクやハードディスクなどの磁気ディス
ク、ＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤなどの光ディス
クのディスク系、ＩＣカード（メモリカードを含む）ま
たは光カードなどのカード系、あるいはマスクＲＯＭ、
ＥＰＲＯＭ、ＥＥＰＲＯＭ、フラッシュＲＯＭなどによ
る半導体メモリを含めた固定的にプログラムを担持する
ような記録媒体であってもよい。

【００８８】また、上述した名刺認識装置は、インター
ネットを含む通信ネットワーク１０と通信可能な構成を
有するから、通信ネットワーク１０から上述したような
プログラムが該装置の所定の記憶領域にダウンロードさ
れるような、流動的にプログラムを担持するような記録
媒体であってもよい。なお、このように通信ネットワー
ク１０からプログラムをダウンロードする場合には、そ
のダウンロード用プログラムは予め名刺認識装置本体に
格納されるか、あるいは別の記録媒体から予め該名刺認
識装置内の所定記憶領域にインストールされるものとす
る。

【００８９】なお、記録媒体に格納されている情報は、
プログラムに限定されず、データであってもよい。

【００９０】今回開示された実施の形態はすべての点で
例示であって制限的なものではないと考えられるべきで
ある。本発明の範囲は上記した説明ではなくて特許請求
の範囲によって示され、特許請求の範囲と均等の意味お
よび範囲内でのすべての変更が含まれることが意図され
る。

【図面の簡単な説明】

【図１】 この発明の実施の形態に係る名刺認識装置の
機能構成図である。

【図２】 この発明の実施の形態に係る名刺認識装置の
ハードウェア構成図である。

【図３】 （Ａ）と（Ｂ）は、図１の後処理部の処理内
容を説明するための図である。

【図４】 この発明の実施の形態に係る認識結果バッフ
ァの内容例を示す図である。

【図５】 この発明の実施の形態に係るブロック分類バ
ッファの内容例を示す図である。

【図６】 （Ａ）と（Ｂ）は、本実施の形態において画
像がブロックに分別された態様で表示された状態を示す
図である。

【図７】 （Ａ）と（Ｂ）は、本実施の形態において指
定されたブロックに対応の出力例を示す図である。

【図８】 この発明の実施の形態に係る名刺認識処理の
概略フローチャートである。

【図９】 （Ａ）と（Ｂ）は、図８のブロック情報表示
ステップの処理を示すフローチャートと画面表示例を示
す図である。

【図１０】 （Ａ）と（Ｂ）は、図８の指定点検出ステ
ップの処理フローチャートと表示画面例を示す図であ
る。

【図１１】 （Ａ）と（Ｂ）は、本実施の形態による指
定ブロックの表示態様の変更方法の他の例を説明する図
である。

【図１２】 図８の認識結果選別ステップの処理フロー
チャートである。

【図１３】 （Ａ）と（Ｂ）は画像リストの表示画面例
を示す図である。

【図１４】 この発明の実施の形態による一括認識指定
ステップによる処理フローチャートである。

【図１５】 本実施の形態による画像リスト中の所望の
画像に対して認識領域指定の処理を施して、認識結果を
出力する処理のフローチャートである。

【図１６】 この発明の実施の形態による指定されたブ
ロックの認識結果の出力順序を指定するための画面表示
例を示す図である。

【図１７】 従来の名刺の主面を走査して読み取られた
画像を示す図である。

【図１８】 （Ａ）と（Ｂ）は、従来の電子的なアドレ
ス帳の登録内容の１例と他の例を示す図である。

【符号の説明】

５ 画像読取部、６ 画像座標指定部、８ 表示部、３
１ 画像入力部、３２文字切出し部、３３ 文字認識
部、３４ 後処理部、３５ ブロック分類部、３６ ブ
ロック情報表示部、３７ 指定点検出部、３８ 認識結
果選別部、３９認識結果抽出部、４０ 認識結果修正
部、４１ 認識結果出力部、３Ｃ 出力ファイル。

フロントページの続き (72)発明者 竹原 和宏 大阪府大阪市阿倍野区長池町22番22号 シ ャープ株式会社内 Ｆターム(参考） 5B029 CC25

Claims (6)

【特許請求の範囲】
1. 【請求項１】 １つ以上の文字からなる文字列を含む画
   像の情報を入力する画像情報入力手段と、 前記画像情報入力手段により入力された前記画像情報中
   の前記文字を認識してする認識手段と、 表示領域を有して、前記表示領域において前記画像情報
   入力手段により入力された前記画像情報による画像を、
   前記表示領域において前記文字列毎のブロックに分別し
   た態様で表示する表示手段と、 前記画像が表示された前記表示領域の任意の点が指定さ
   れた際に、指定された該任意点に対応の前記ブロックに
   表示されている前記文字列の前記認識手段による認識結
   果を出力する出力手段とを備える、文字認識装置。
2. 【請求項２】 前記任意点は、前記ブロック毎に予め設
   定されたブロック点であって、 前記出力手段は、 前記ブロック点が指定された前記ブロックに表示されて
   いる前記認識結果を出力することを特徴とする、請求項
   １に記載の文字認識装置。
3. 【請求項３】 前記画像情報入力手段から入力された複
   数の前記画像情報の中から、１つ以上の画像情報を選択
   するための画像情報選択手段をさらに備え、 前記画像情報選択手段により選択された前記１つ以上の
   画像情報について、前記認識手段による処理が施され
   て、 前記認識手段による処理が施された後の前記１つ以上の
   画像情報の中から指定された１つの画像情報に対して、
   前記表示手段による処理が施されることを特徴とする、
   請求項１または２に記載の文字認識装置。
4. 【請求項４】 前記表示領域において、前記文字列毎の
   ブロックについて、前記認識結果の出力順序を指定する
   ため出力順序指定手段をさらに備え、 前記出力手段は、前記ブロックに表示されている前記文
   字列の前記認識手段による認識結果を、前記出力順序指
   定手段により指定された順序に従い出力することを特徴
   とする、請求項１ないし３のいずれかに記載の文字認識
   装置。
5. 【請求項５】 １つ以上の文字からなる文字列を含む画
   像の情報を入力する画像情報入力ステップと、 前記画像情報入力ステップにより入力された前記画像情
   報中の前記文字を認識してする認識ステップと、 予め準備された表示領域において前記画像情報入力ステ
   ップにより入力された前記画像情報による画像を、前記
   表示領域において前記文字列毎のブロックに分別した態
   様で表示する表示ステップと、 前記画像が表示された前記表示領域の任意の点が指定さ
   れた際に、指定された該任意点に対応の前記ブロックに
   表示されている前記文字列の前記認識ステップによる認
   識結果を出力する出力ステップとを備える、文字認識方
   法。
6. 【請求項６】 文字認識方法をコンピュータに実行させ
   るための文字認識プログラムを記録したコンピュータで
   読取可能な記録媒体であって、 前記文字認識方法は、 １つ以上の文字からなる文字列を含む画像の情報を入力
   する画像情報入力ステップと、 前記画像情報入力ステップにより入力された前記画像情
   報中の前記文字を認識してする認識ステップと、 予め準備された表示領域において前記画像情報入力ステ
   ップにより入力された前記画像情報による画像を、前記
   表示領域において前記文字列毎のブロックに分別した態
   様で表示する表示ステップと、 前記画像が表示された前記表示領域の任意の点が指定さ
   れた際に、指定された該任意点に対応の前記ブロックに
   表示されている前記文字列の前記認識ステップによる認
   識結果を出力する出力ステップとを備える、文字認識プ
   ログラムを記録したコンピュータで読取可能な記録媒
   体。