JP2004023158A

JP2004023158A - 画像撮像装置

Info

Publication number: JP2004023158A
Application number: JP2002171616A
Authority: JP
Inventors: Kazuhiro Takehara; 竹原　和宏
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2002-06-12
Filing date: 2002-06-12
Publication date: 2004-01-22

Abstract

【課題】利用者が画像認識に適した撮影状態を容易に調整することができ、画像認識が可能な状態のよい画像を容易に得ることができる画像撮像装置を提供する。
【解決手段】画像認識に適した画像を保存するための保存条件情報に基づいて、画像入力部１０１により撮像された画像の状態が画像認識に適した画像であるか否かを保存条件判断部１０２により判断する。画像入力部１０１により被写体を撮像する毎に、保存条件判断部１０２の判断結果に基づく撮像状態を報知部１０３によりその都度報知する。そして、保存条件判断部１０２が画像入力部１０１により撮像された画像の状態が画像認識に適した画像であると判断すると、画像入力部１０１により撮像された画像を画像保存部１０４に保存する。
【選択図】　図１

Description

【０００１】
【発明の属する技術分野】
この発明は、画像撮像装置に関し、特にカメラ機能付きの携帯情報端末や携帯電話等の画像認識機能を有する画像撮像装置に関する。
【０００２】
【従来の技術】
従来より、画像認識としてのＯＣＲ（光学式文字認識）の技術は、文書画像から文字情報を抽出する技術として、文書読取装置、名刺読取装置、帳票読取装置などの種々の装置に利用されている。このようなＯＣＲの画像入力手段として、スキャナーが用いられることが一般的であったが、近年、ＣＣＤ（チャージ・カップルド・デバイス）やＣＭＯＳ（コンプリメンタリ・メタル・オキサイド・セミコンダクタ）センサーの進歩により、これらのデバイスを使用したデジタルカメラをＯＣＲの画像入力手段として利用するようになっている。
【０００３】
このような画像認識機能を有する画像撮像装置としては、特開平７−７２５４６号公報に記載されたものがある、この画像撮像装置は、情報処理装置にカメラ機能を備え、さらに文字認識手段を備えることにより、カメラ画像の文字認識を実現している。
【０００４】
また、従来の画像認識機能を有する他の画像撮像装置としては、特開２０００−２０７４８７号公報に記載されたものがある。この画像撮像装置は、ＣＣＤビデオカメラにより文字を撮像して、その撮像された画像から自動的に文字領域を抽出した後、文字認識手段により文字認識結果を取得する。さらに、上記画像撮像装置では、文字認識結果を表示したり、認識結果に応じてアプリケーションプログラムへの連動処理なども実現している。
【０００５】
【発明が解決しようとする課題】
ところで、上記特開平７−７２５４６号公報に記載の画像撮像装置は、シャッター駆動部を備え、レリーズ操作により対象物を撮影するものである。この画像撮像装置では、どのような撮影状態で画像を撮影するかといった判断は利用者が決めるものであり、利用者は個人の経験的な判断等に基づいて状態のよい画像を撮影できるよう配慮して撮影を行うしかないという問題がある。
【０００６】
また、上記利用者による撮影状態の調整は、経験的な判断やおおよその見当といった極めてあいまいなものであるため、例えば利用者は適切と判断して撮影した場合でも、実際は明度不足などにより文字認識に適していない画像を撮影してしまうといった可能性が十分あり得る。また、レリーズ操作による撮影では、撮影時の不注意等により、例えば傾いた画像を撮影してしまうといった不具合が起こることもあり得る。特に、片手あるいは両手で持って撮影を行う小型の装置の場合、手ぶれが起こる可能性が十分あり得る。その結果、撮影された画像にぶれが生じてしまい、文字認識等に利用できなくなってしまうという不具合が発生する。このため、利用者は、撮影状態を判断しながら慎重にレリーズ操作を行う必要があるが、これが利用者の大きな負担となっている。
【０００７】
また、上記特開２０００−２０７４８７号公報に記載の画像撮像装置では、文字認識対象物をＣＣＤビデオカメラによって撮像する毎に、文字認識結果をその都度表示している。
【０００８】
しかしながら、この画像撮像装置でも、やはり、利用者はどのようにすれば認識に適した画像を撮影できるかが不明であり、利用者は表示画面や認識結果を監視しながら、撮影状態を修正していかなければならないという問題がある。また、上記画像撮像装置は、撮像された画像の一部分について文字認識を行うものであり、文字認識に適した画像全体を撮影するといった機能は持っていないという欠点がある。そのため、文字認識に適した画像を撮影保存し、画像中の文字全てについて文字認識を行うといった用途には適していない。また、撮影保存を繰り返し、複数枚の画像を保存し、その後で、保存した複数枚の画像について文字認識等を行うといった用途にも適していないといった欠点もある。
【０００９】
そこで、この発明の目的は、利用者が画像認識に適した撮影状態を容易に調整することができ、画像認識が可能な状態のよい画像を容易に得ることができる画像撮像装置を提供することにある。
【００１０】
また、この発明のもう１つの目的は、複数の画像に含まれる情報全てについても画像認識が可能な画像撮像装置を提供することにある。
【００１１】
【課題を解決するための手段】
上記目的を達成するため、この発明の画像撮像装置は、画像入力手段により被写体を撮像し、画像認識に適した画像を保存するための保存条件情報に基づいて、上記画像入力手段により撮像された画像の状態が画像認識に適した画像であるか否かを保存条件判断手段により判断して、上記画像入力手段により被写体を撮像する毎に、上記保存条件判断手段の判断結果に基づく撮像状態（明るさや傾きなど）を報知手段によりその都度報知すると共に、上記保存条件判断手段が画像入力手段により撮像された画像の状態が画像認識に適した画像であると判断すると、上記画像入力手段により撮像された画像を画像保存手段に保存する。ここで、画像認識としては、文字認識、バーコード認識、指紋認識、顔画像認識、図面認識などのいずれでもよく、２つ以上の画像認識を組み合わせてもよい。
【００１２】
上記構成の画像撮像装置によれば、上記画像入力手段により被写体を撮像する毎に、上記報知手段により、保存条件判断手段の判断結果に基づいた撮像状態がその都度報知されるため、利用者は報知情報に基づいて容易に撮影の状態を調整することができる。さらに、保存条件情報を満たす画像を上記画像保存手段に保存することにより、状態のよい画像すなわち画像認識に適した画像が保存できる。
【００１３】
また、一実施形態の画像撮像装置は、画像入力指示手段により画像入力が指示されている間、上記画像入力手段による被写体の撮像と、上記保存条件判断手段により撮像された画像の状態が画像認識に適した画像であるか否かの判断と、上記報知手段による報知と、上記画像保存手段による画像の保存が逐次行われるように、上記画像入力手段，保存条件判断手段，報知手段および画像保存手段を制御手段により制御する。
【００１４】
上記実施形態の画像撮像装置によれば、上記画像入力指示手段により指示が行われている間、画像入力および画像の保存が行われるため、利用者にとって使い勝手がよい画像撮像装置を実現できる。
【００１５】
また、一実施形態の画像撮像装置は、上記画像保存手段は、上記保存条件判断手段により上記保存条件を満たしていると判断された上記画像を複数保存する。
【００１６】
上記実施形態の画像撮像装置によれば、上記画像保存手段に保存された複数の画像に含まれる情報全てについて画像認識が可能な画像撮像装置を実現できる。
【００１７】
また、一実施形態の画像撮像装置は、上記画像保存手段に保存された画像の少なくとも１つを画像指定手段により指定し、その指定された画像を指定画像保存手段に保存する。
【００１８】
上記実施形態の画像撮像装置によれば、利用者が上記画像指定手段により例えば複数の画像の中から所望の画像を指定することにより、利用者が希望する画像を上記指定画像保存手段に保存することが可能である。
【００１９】
また、一実施形態の画像撮像装置は、上記画像保存手段に保存された画像の少なくとも１つを画像指定手段により指定し、その指定された画像の文字を文字認識手段により認識する。
【００２０】
上記実施形態の画像撮像装置によれば、上記画像指定手段により指定された画像に関し、文字認識手段により文字認識を行うことにより、利用者は希望する画像中の文字情報を得ることができる。
【００２１】
また、一実施形態の画像撮像装置は、上記文字認識手段による認識結果を文字認識結果保存手段により保存する。
【００２２】
上記実施形態の画像撮像装置によれば、文字情報を保存することができる。
【００２３】
また、一実施形態の画像撮像装置は、上記報知手段は、上記文字認識結果保存手段に認識結果を保存したことを報知する。
【００２４】
上記実施形態の画像撮像装置によれば、上記報知手段により文字認識されたことが報知されるため、利用者は画像認識に適した画像から文字が認識されたことを知ることができる。
【００２５】
また、一実施形態の画像撮像装置は、上記報知手段は、上記画像保存手段に画像を保存したことを報知する。
【００２６】
上記実施形態の画像撮像装置によれば、上記報知手段により画像が保存されたことが報知されるため、利用者は画像認識に適した画像が保存されたことを知ることができる。
【００２７】
また、この発明の画像撮像装置は、画像入力手段により被写体を撮像し、画像認識に適した画像であるか判断するための認識条件情報に基づいて、上記画像入力手段により入力された画像の状態が画像認識に適した画像であるか否かを認識条件判断手段により判断して、上記画像入力手段により被写体を撮像する毎に、上記認識条件判断手段の判断結果に基づく撮像状態を報知手段によりその都度報知すると共に、上記認識条件判断手段が上記画像入力手段により撮像された画像の状態が画像認識に適した画像であると判断すると、上記画像入力手段により撮像された画像について画像認識手段により画像認識を行う。ここで、画像認識としては、文字認識、バーコード認識、指紋認識、顔画像認識、図面認識などのいずれでもよく、２つ以上の画像認識を組み合わせてもよい。
【００２８】
上記構成の画像撮像装置によれば、上記画像入力手段により被写体を撮像する毎に、上記報知手段により、認識条件判断手段の判断結果に基づいた撮像状態がその都度報知されるため、利用者は報知情報に基づいて容易に撮影の状態を調整することができる。さらに、認識条件情報を満たす画像について上記画像認識手段により画像認識を行うことにより、状態のよい画像すなわち画像認識に適した画像について画像認識ができる。
【００２９】
また、一実施形態の画像撮像装置は、画像入力指示手段により画像入力が指示されている間、上記画像入力手段による被写体の撮像と、上記認識条件判断手段により撮像された画像の状態が画像認識に適した画像であるか否かの判断と、上記報知手段による報知と、上記画像認識手段による画像認識が逐次行われるように、上記画像入力手段，認識条件判断手段，報知手段および画像認識手段を制御手段により制御する。
【００３０】
上記実施形態の画像撮像装置によれば、上記画像入力指示手段により指示が行われている間、画像入力および画像認識が行われるため、利用者にとって使い勝手がよい画像撮像装置を実現できる。
【００３１】
【発明の実施の形態】
以下、この発明の画像撮像装置を図示の実施の形態により詳細に説明する。
【００３２】
（第１実施形態）
図１はこの発明の第１実施形態の画像撮像装置の主要な機能を示す構成図である。図１に示すように、この第１実施形態の画像撮像装置は、画像入力手段としての画像入力部１０１、保存条件判断手段としての保存条件判断部１０２、報知手段としての報知部１０３、画像保存手段としての画像保存部１０４、画像入力指示手段としての画像入力指示部１０５と、制御手段としての制御部１０６とを備えている。
【００３３】
また、図５は上記画像入力部１０１の主要な構成例としての撮像装置５０１と、表示装置５０５を示している。この撮像装置５０１は、図５に示すように、ＣＣＤ５０２と、Ａ／Ｄ（アナログ／デジタル）コンバータ５０３と、画像メモリ５０４とを備えている。上記ＣＣＤ５０２は、被写体像をアナログ信号に変換し、Ａ／Ｄコンバータ５０３は、ＣＣＤ５０２からのアナログ信号をデジタル画像データに変換して、変換されたデジタル画像データを画像メモリ５０４に格納する。そして、上記画像メモリ５０４に格納されたデジタル画像データを、表示装置５０５により表示する。この表示装置５０５は、ＬＣＤ（液晶ディスプレイ）５０６とバックライト５０７とを備えている。
【００３４】
図１に示す保存条件判断部１０２は、画像入力部１０１内（より詳しくは図５に示す画像メモリ５０４内）の画像データが画像認識に適しているか判断するための保存条件情報を保持し、上記画像データが上記保存条件を満たしているか否かを判断する手段である。ここで「保存条件」とは、画像の明るさが適切である、画像が傾いていない、等といった条件情報のことであり、詳細な例については後述する。
【００３５】
また、上記報知部１０３は、保存条件判断部１０２の判断結果を元に、保存条件が満たされない場合、画像の状態や、画像が保存されるための利用者への指示などを報知する手段である。
【００３６】
また、上記画像保存部１０４は、保存条件判断部１０２が保存に適していると判断した時点における画像入力部１０１内の画像データを保存する手段であり、具体的には、ＲＡＭ（ランダム・アクセス・メモリー）などがこれに該当する。なお、上記画像保存部１０４を、フラッシュメモリ、磁気ディスクなどといった、電源の供給なしでデータを保持できる構成にしてもかまわない。
【００３７】
さらに、上記画像保存部１０４は、複数の画像を保存することが可能な例えば図６に示すような構成からなる。図６の画像保存領域６０１は、カウンタ領域６０２と、定められた数（Ｍ個）の画像保存領域６０３とから構成されており、画像データは、カウンタ領域６０２内のカウンタが指す値の番号の画像保存領域に保存されるものとする。
【００３８】
また、図１に示す画像入力指示部１０５は、画像入力部１０１，保存条件判断部１０２，報知部１０３および画像保存部１０４の動作が有効であることを指示するための手段であり、具体的にはスイッチ等である。
【００３９】
また、上記制御部１０６は、画像入力指示部１０５により画像入力が指示されている間、画像入力部１０１による画像の入力と、保存条件判断部１０２による画像の状態が画像認識に適した画像であるか否かの判断と、報知部１０３による報知と、画像保存部１０４による画像の保存が逐次行われるように、画像入力部１０１，保存条件判断部１０２，報知部１０３および画像保存部１０４を制御する。
【００４０】
図３（ａ），（ｂ）は、この第１実施形態の具体的な構成例であるカメラ付き携帯端末型の画像撮像装置を示しており、図３（ａ）は正面図であり、図３（ｂ）は裏面図である。この画像撮像装置は、本体３０１と、ディスプレイ３０２と、カメラ３０３と、起動ボタン３０４とを備えている。
【００４１】
図３（ｂ）に示すカメラ３０３は画像入力部１０１（図１に示す）に該当し、図３（ａ）に示す起動ボタン３０４は画像入力指示部１０５（図１に示す）に該当する。
【００４２】
次に、図２のフローチャートを参照しながら、この第１実施形態の画像撮像装置の動作を説明する。ここでは、利用者が、図４に示す認識対象文書である名刺４０１を、文字認識後に住所録などに利用する目的で、文字認識に適した状態で撮影保存することを試みるものとする。
【００４３】
最初に、図２のステップＳ２０１において、利用者が画像入力指示部１０５にて指示（図３（ａ）の起動ボタン３０４を押し続ける操作）を行うことにより、画像入力を開始する。
【００４４】
次に、ステップＳ２０２において、画像保存部１０４内のカウンタ（図６のカウンタ領域６０２内の数値）が初期化され、カウンタの値は１となる。
【００４５】
次に、ステップＳ２０３において、画像入力部１０１（図３（ｂ）に示すカメラ３０３）により、被写体（名刺４０１）の撮像が開始される。
【００４６】
次に、ステップＳ２０４において、画像入力部１０１内の画像データに対して、保存条件判断部１０２が保存条件を満たすか否かを判断する。この保存条件および保存条件判断部１０２の判断の詳細な説明に関しては、後述する。
【００４７】
次に、ステップＳ２０５で、ステップＳ２０４の結果により保存条件判断部１０２により画像データが保存条件を満たさないと判断した場合は、ステップＳ２０６に進む一方、画像データが保存条件を満たすと判断した場合は、ステップＳ２０７に進む。
【００４８】
ステップＳ２０６では、画像データが保存条件を満たさないため、報知部１０３により画像の状態を報知し、ステップＳ２０９に進む。例えば、ステップＳ２０６で保存条件判断部１０２により明度が不足していると判断された場合、図７の７０１のように「明るさが不足しています」との情報を報知する。また、保存条件判断部１０２により画像が傾いていると判断された場合、図８の８０１のように、「文書が左に傾いています」との情報を報知する。
【００４９】
一方、ステップＳ２０５からステップＳ２０７に進んだ場合、ステップＳ２０７において、画像入力部１０１内の画像データが、画像保存部１０４に保存される。この実施形態では、カウンタ値（図６のカウンタ領域６０２内の値）をｍとすると、画像データは、ｍ番目の画像保存領域６０３に保存される。
【００５０】
次に、ステップＳ２０８において、カウンタ値を１つ増加する。図６では領域数がＭであるが、カウンタ値ｍが　ｍ　＞　Ｍとなった場合は、ｍ　＝　１とするものとする。
【００５１】
次に、ステップＳ２０９において、利用者が画像入力指示部１０５により入力指示を継続中であるか否か（図３（ａ）の起動ボタン３０４を押し続けているか否か）により、処理が分岐し、入力指示が継続中であれば、ステップＳ２０３に戻り、入力指示が行われていなければ、処理を終了する。
【００５２】
すなわち、この実施形態では、画像入力指示部１０５により指示が継続中である（図３（ａ）の例では起動ボタン３０４を押し続けている）場合、保存条件判断部１０２により撮像状態が保存条件を満たさないと判断される間は、ステップＳ２０３、Ｓ２０４、Ｓ２０５、Ｓ２０６、Ｓ２０９の処理を繰り返す。
【００５３】
このようにして、利用者は、報知部１０３により都度報知される画像の状態に関する情報をもとに、明度、傾きなどといった撮像状態を調整していく。
【００５４】
そうして、利用者が撮像状態を調整することによって、保存条件判断部１０２により撮像状態が保存条件を満たすと判断された場合、ステップＳ２０５からステップＳ２０７以下に進み、画像の保存が行われる。
【００５５】
以下、上記ステップＳ２０４における画像状態の判断に関する詳細を、図１３のフローチャートと図１４を用いて説明する。図１３は画像の状態を判断する処理を示すフローチャートであり、図１４は文字列の傾き検出を説明する図である。
【００５６】
まず、図１３の最初のステップＳ１３０１において、画像入力部１０１内の画像の明るさ（明度）が算出され、ステップＳ１３０２で算出された数値が適切な数値であるかが判定される。
【００５７】
明度は、画像入力部１０１内の画像が白黒多値画像の場合、
【数１】

の式で求められる（ただし、Ｐ（ｉ，ｊ）は、画像中の（ｉ，ｊ）座標における画素値、ｗは画像の横幅ピクセル数、ｈは画像の縦幅ピクセル数）。カラー画像で、例えば、Ｒ（赤）、Ｇ（緑）、Ｂ（青）で出力される場合でも、各画素ごとに、
変換後の画素値　＝　（Ｒ＋Ｇ＋Ｂ）／３
の式で変換し、白黒多値画像に変換後、前述の明度を求める式で算出できる。
【００５８】
通常、画像の明度が低すぎる場合、あるいは極端に高すぎる場合でも、認識精度は低下する。したがって、上記算出した明度Ｌについて、
Ｌ０　≦　Ｌ　かつ　Ｌ　≦　Ｌ１
ならば、明度の値は適切であるという条件式、および、下限値Ｌ０，上限値Ｌ１の値が保存条件情報の１つとなっている。
【００５９】
ステップＳ１３０２において、保存条件判断部１０２は、明度Ｌが保存条件情報を満たす、すなわち、
Ｌ０　≦　Ｌ　かつ　Ｌ　≦　Ｌ１
を満たすか否かを判定する。この条件に適していなければ、保存条件は満たさないとして終了する。このとき、満たさない原因がわかっており、さらに、撮影条件をどのように変更すれば保存条件に適するかも簡単に求められる。
【００６０】
例えば、Ｌ　＜　Ｌ０　である場合、明るさが不足しているため、より明るい撮影状態にする必要がある。この状態を報知している例が図７である。
【００６１】
利用者は、表示された報知情報により、現在の撮影環境が文字画像を撮影保存するためには暗い環境であるということを知り、室内を明るくするなどの改善を行う。再度、ステップＳ１３０２に進んだときに明るさに関する条件は満たされたならば、次はステップＳ１３０３に進むことになる。
【００６２】
ステップＳ１３０３からステップＳ１３０６までの処理では、名刺４０１の傾きを計測し、傾きが許容範囲内か否かを測定する。なお、画像の傾きを測定する処理はさまざまな手法が考えられるが、例えば、後述のように最初に文書画像が多値画像であった場合は文書画像の２値化を行い、次に画像中の文字列を抽出し、その後、各文字列の傾きの平均を求めて、求めた平均値を画像の傾きの値とするといった手法で容易に実現できる。
【００６３】
最初にステップＳ１３０３において、画像入力部１０１内の画像の２値化処理を行う。画像が白黒多値画像の場合は、そのまま２値化の閾値を求める。カラー画像である場合、例えばＲＧＢで表される場合などは前述の変換処理により、白黒多値画像に変換後、閾値を求める。閾値が定まると、各画素について、閾値未満ならば１（文字成分）、閾値以上ならば０（背景成分）と変換することにより、２値画像に変換することができる。２値化の閾値の求め方に関しては、さまざまな手法が存在するが、例えば、「大津のアルゴリズム」と呼ばれる判別分析法を用いることにより容易に実現できる。
【００６４】
次に、ステップＳ１３０４において、文字列（行）抽出処理を行う。文字列の抽出に関してはさまざまな方法が存在するが、例えば、特許第３０５８４８９号「文字列抽出方法」に文書画像から文字列を抽出する方法が記載されており、この実施形態でも、この方法を用いることにより、文字列を抽出することが容易に実現できる。
【００６５】
次に、ステップＳ１３０５において、各文字列の傾きの計測を行う。文字列の傾き計測に関しても種々の方法が存在するが、例えば次のような方法で求められる。以下、図８を参照して説明する。ステップＳ１３０４の行抽出処理にて、行数と各行の外接枠の座標が抽出できる。Ｎ行抽出された（この実施形態では、Ｎ＝６）として、各ｉ行（ｉ＝１〜Ｎ）の左上座標を｛ＳＴＸ（ｉ），　ＳＴＹ（ｉ）｝とし、右下座標を｛ＥＮＸ（ｉ），　ＥＮＹ（ｉ）｝とする。この各行を、Ｘ座標値が、（ＳＴＸ（ｉ）＋ＥＮＸ（ｉ））／２　の箇所で、左右に分割する。ここで左の領域をＡ０，　右の領域をＡ１とする。Ａ０，Ａ１　のそれぞれの領域について、それぞれについてＹ方向の重心　Ｙ０，Ｙ１　を次のように求める。
【００６６】
【数２】

ただし、Ｍ０（ｙ）　は、Ａ０　領域内でＹ座標が　ｙ　である直線上に存在する文字画素数である。また、重心Ｙ１　に関しても同様の式により求められる。
【００６７】
以上の重心Ｙ０，Ｙ１　を用いて、各ｉ行（ｉ＝１〜Ｎ）の行の傾きθ（ｉ）［度］を、

で表せるので、傾きθ（ｉ）は、
θ（ｉ）　＝ａｒｃｔａｎ｛２×（Ｙ１−Ｙ０）／｛（ＥＮＸ（ｉ）−ＳＴＸ（ｉ））｝
により求められる。最後に、傾きθ（ｉ）の平均値θを求め、その値を傾きとする。
【００６８】
以上、画像の傾きの計測方法に関して述べたが、その他さまざまな計測方法があり、上記の方法に制限されるものではない。
【００６９】
次に、図１３のステップＳ１３０６において、ステップＳ１３０５で求めた傾きが認識対象として問題ないか否かが判定される。一般にＯＣＲは、認識対象の文書画像の傾きが大きい場合、認識精度は低下する。
【００７０】
ここでは傾き許容範囲は、認識実験等からα［度］以内と定められたとする。
すなわち、
−α≦θ　かつ　θ≦α
ならば、傾きは許容範囲であるという条件が保存条件情報の一構成要素となっている。
【００７１】
ステップＳ１３０６において、ステップＳ１３０５で求めた傾きθが上記条件を満たさないとき、すなわち、
θ＜−α　または　α＜θ
のとき、保存条件は満たさないとして終了する。このときの傾きに関する画像の状態の報知例を図８の８０１に示しており、「文書が左に傾いています」が表示される。
【００７２】
このように、上記第１実施形態の画像撮像装置によれば、保存条件情報による保存条件判断部１０２の判断結果に基づいて画像の保存が行われ、利用者の経験的な判断などといったあいまいな基準でなく、正確な保存条件情報をもとに保存が行われることにより、画像認識に適した状態のよい画像を保存することができる。また、保存条件を満たしている場合、保存条件を満たしている画像が保存されるため、手ぶれ等のレリーズ操作時の不注意により、画像認識に適さない画像を撮影してしまう危険性をなくすことができる。さらに、撮像状態が報知部１０３により都度報知されることにより、利用者は報知された撮影状態をもとにして適切に撮影状態を調整することができる。
【００７３】
また、画像入力指示部１０５により、指示が行われている間、画像の入力が行われるため、利用者にとって使い勝手がよい。
【００７４】
この第１実施形態では、画像保存部１０４内に複数の保存領域を有し、保存領域を順次更新していったが、保存領域は単数で保存に適した画像が更新されて保存される構成としてもよい。また、単数あるいは複数の保存領域すべて保存した場合、新たに保存しないように構成することも容易である。
【００７５】
また、図９に示すように、画像保存部１０４に画像が保存されたことを表示やアラームなどの音声機能を用いて報知することも容易にできる。図９では、画像表示により９０１のように、「画像を保存しました」との情報を報知する。報知を行っているが、アラームなどの音声機能を用いて報知することも容易に実現できる。
【００７６】
さらに、画像が保存されたことを報知部１０３により報知することによって、利用者は画像が保存されたことを知ることができる。
【００７７】
（第２実施形態）
図１０（Ａ）はこの発明の第２実施形態の画像撮像装置の一例としての携帯端末の主要な機能を示す構成図である。図１０（Ａ）に示すように、この第２実施形態の画像撮像装置は、画像入力手段としての画像入力部１０１、保存条件判断手段としての保存条件判断部１０２、報知手段としての報知部１０３、画像保存手段としての画像保存部１０４、画像入力指示手段としての画像入力指示部１０５と、制御手段としての制御部１０６と、画像指定手段としての画像指定部１０７と、指定画像保存手段としての指定画像保存部１０８と、文字認識手段としての文字認識部１１１と、文字認識結果保存手段としての認識結果保存部１１２とを備えている。
【００７８】
この第２実施形態の携帯端末では、フラッシュメモリ，磁気ディスクなどの電源の供給なしで記憶データを保持可能な指定画像保存部１０８，画像指定部１０７を備えることによって、画像保存部１０４に保存された画像を、利用者が画像指定部１０７により指定し、指定された画像を指定画像保存部１０８に保存する。
【００７９】
また、文字認識部１１１と画像指定部１０７を備え、上記指定画像保存部の代わりに文字認識結果の保存が可能な認識結果保存部１１２を備えることにより、画像指定部１０７により指定した画像を文字認識部１１１により文字認識し、その文字認識結果を認識結果保存部１１２に保存する。
【００８０】
図１０（Ｂ）に上記携帯端末の正面図を示している。図１０（Ｂ）では、利用者は、ディスプレイ３０２に表示された画像保存部１０４（図１０（Ａ）に示す）内の画像１００１の中から、１つの画像を画像指定手段としての操作用ペン３０５により指定する。
【００８１】
利用者が、画像保存ボタン１００２を選択することにより、指定された画像は内蔵された指定画像保存部１０８に保存される。また、認識開始ボタン１００３を選択することにより、文字認識部１１１は、指定された画像中の文字を認識する。認識結果は、認識終了後に表示され、認識結果保存部１１２に保存される。
【００８２】
このように、上記第２実施形態の携帯端末によれば、上記画像保存部１０４に複数の画像を保存し、利用者が画像指定部１０７により指定できるため、希望する画像を保存することが可能である。
【００８３】
また、上記画像指定部１０７により指定された画像に関し、文字認識部１１１により文字認識を行うことにより、利用者は希望する画像の文字情報を得ることができる。
【００８４】
さらに、上記文字認識部１１１による認識結果を認識結果保存部１１２により保存することによって、文字情報を保存することができる。
【００８５】
さらに、文字認識部１１１による認識結果が保存されたことが報知部１３により報知されるため、利用者は文字認識されたことを知ることができる。
【００８６】
（第３実施形態）
図１１（Ａ）はこの発明の第３実施形態の画像撮像装置の主要な機能を示す構成図である。図１１（Ａ）に示すように、この第２実施形態の画像撮像装置は、画像入力手段としての画像入力部１０１、報知手段としての報知部１０３、画像入力指示手段としての画像入力指示部１０５と、制御手段としての制御部１０６と、認識条件判断手段としての認識条件判断部１１０と、画像認識手段としての文字認識部１１１と、文字認識結果保存手段としての認識結果保存部１１２とを備えている。
【００８７】
上記第３実施形態の携帯端末では、認識条件判断部１１０は、画像入力部１０１内の画像データが画像認識に適した画像であるか判断するための認識条件情報を保持し、上記画像データが上記認識条件を満たしているか否かを判断する。そして、上記報知部１０３は、認識条件判断部１１０の判断結果を元に、認識条件が満たされない場合、画像の状態や、画像が保存されるための利用者への指示などを報知する。また、上記文字認識部１１１は、認識条件判断部１１０が文字認識に適していると判断した時点における画像入力部１０１内の画像データについて文字認識を行う。そうして得られた文字認識部１１１の認識結果を認識結果保存部１１２に保存する。
【００８８】
また、上記制御部１０６は、画像入力指示部１０５により画像入力が指示されている間、画像入力部１０１による画像の入力と、認識条件判断部１１０により撮像された画像の状態が文字認識に適した画像であるか否かの判断と、報知部１０３による報知と、文字認識部１１１の文字認識と、認識結果保存部１１２の保存が逐次行われるように、画像入力部１０１，報知部１０３，認識条件判断部１１０，文字認識部１１１および認識結果保存部１１２を制御する。
【００８９】
また、図１１（Ｂ）は上記携帯端末の正面図であり、画像の状態（明るさに関する）の報知例を示しており、図１２は画像の認識結果の報知例を示している。
【００９０】
図１１（Ｂ）では、画像入力時に認識対象領域１１０１が表示され、その認識対象領域１１０１について、起動ボタン３０４（画像入力指示部１０５）を押している間、認識条件判断部１１０により、認識条件情報を満たすか否かの判断が行われるものとする。
【００９１】
ここで、認識条件判断部１１０による認識条件情報を満たすか否かの判断は、第１実施形態で述べた画像保存条件を満たすか否かの判断と同様に行えばよい。
【００９２】
認識条件情報を満たさない場合、図１１（Ｂ）の１１０２のように、「画像の状態：明るさが不足しています」との撮像状態を都度報知する。図１１（Ｂ）にて、その例（明度が不足している場合の例）を示している。
【００９３】
一方、認識条件情報を満たす場合、図１２に示すように、認識対象領域１１０１についての認識結果を表示する。図１２の１２０１のように、「認識結果：大阪市阿倍野区長池町２２番２２号」と報知する。
【００９４】
このように、上記第３実施形態の携帯端末によれば、認識条件情報による認識条件判断部１１０の判断結果に基づいて画像の認識が行われ、利用者の経験的な判断などといったあいまいな基準でなく、認識条件情報をもとに画像認識が正確な行われることにより、画像認識に適した撮影状態での認識が可能である。また、認識条件を満たしている場合、認識条件を満たしている画像について画像認識されるため、手ぶれ等のレリーズ操作時の不注意により、認識に適さない画像を撮影してしまう危険性をなくすことができる。同様に、認識条件を満たしている場合、認識が行われるため、認識に適した画像について文字認識を行うため、認識精度の向上が実現できる。さらに、撮像状態が報知部１０３により都度報知されることにより、利用者は報知された撮影状態をもとにして適切に撮影状態を調整することができる。
【００９５】
上記第１〜第３実施形態では、画像認識として文字認識機能を有する画像撮像装置について説明したが、文字認識に限らず、バーコード認識、指紋認識、顔画像認識、図面認識などの一般の画像認識機能を有する画像撮像装置にこの発明を適用してもよい。
【００９６】
この発明の画像撮像装置は、上記第１〜第３実施形態に限定されるものではなく、例えば、第２，第３実施形態を組み合わせて、保存条件判断部と認識条件半段部とを備え、画像の保存と画像認識とを行う画像撮像装置に適用してもよい。
【００９７】
【発明の効果】
以上より明らかなように、この発明の画像撮像装置によれば、保存条件情報による保存条件判断手段の判断結果に基づいて画像の保存を行うことによって、利用者の経験的な判断などといったあいまいな基準でなく、実験等で求められた正確な保存条件情報をもとに画像保存手段により保存が行われることにより、画像認識に適した状態のよい画像の保存が可能である。さらに、保存条件を満たしている場合、保存条件を満たしている画像が保存されるため、手ぶれ等のレリーズ操作時の不注意により、認識に適さない画像を撮影してしまう危険性をなくすことができる。さらに、撮像状態が報知手段により都度報知されることにより、利用者は報知された撮影状態をもとにして適切に撮影状態を調整することができる。
【００９８】
また、この発明の画像撮像装置によれば、認識条件情報による認識条件判断手段の判断結果に基づいて画像認識（文字、バーコード、指紋、顔、図面などの認識）を行うことによって、利用者の経験的な判断などといったあいまいな基準でなく、実験等で求められた正確な認識条件情報をもとに画像認識手段により画像認識が行われることにより、画像認識に適した撮影状態での認識が可能である。さらに、認識条件を満たしている場合、認識条件を満たしている画像について画像認識されるため、手ぶれ等のレリーズ操作時の不注意により、認識に適さない画像を撮影してしまう危険性をなくすことができる。同様に、認識条件を満たしている場合、認識が行われるため、認識に適した画像について文字認識を行うため、認識精度の向上が実現できる。さらに、撮像状態が報知手段により都度報知されることにより、利用者は報知された撮影状態をもとにして適切に撮影状態を調整することができる。
【図面の簡単な説明】
【図１】図１はこの発明の第１実施形態の画像撮像装置のブロック図である。
【図２】図２は上記画像撮像装置のフローチャートである。
【図３】図３（ａ）はカメラ付き携帯端末型の画像撮像装置を示す正面図であり、図３（ｂ）は上記画像撮像装置の裏面図である。
【図４】図４は認識対象とする文書（名刺）を示す図である。
【図５】図５は上記画像撮像装置の画像入力部の構成を示すブロック図である。
【図６】図６は上記画像撮像装置の画像保存部の構成を示す図である。
【図７】図７は画像の状態（明るさに関する）を報知する例を示す図である。
【図８】図８は画像の状態（傾きに関する）を報知する例を示す図である。
【図９】図９は画像を保存したことを報知する例を示す図である。
【図１０】図１０（Ａ）はこの発明の第２実施形態の画像撮像装置の一例としての携帯端末のブロック図であり、図１０（Ｂ）は上記携帯端末の正面図である。
【図１１】図１１（Ａ）はこの発明の第３実施形態の画像撮像装置の一例としての携帯端末のブロック図であり、図１１（Ｂ）は上記携帯端末の正面図であり、画像の状態（明るさに関する）の報知例を示す図である。
【図１２】図１２は上記携帯端末の画像の認識結果の報知例を示す図である。
【図１３】図１３は上記第１実施形態の画像認識装置の画像の状態を判断する処理を示すフローチャートである。
【図１４】図１４は上記第１実施形態の画像認識装置の文字列の傾き検出例を示す図である。
【符号の説明】
１０１…画像入力部、
１０２…保存条件判断部、
１０３…報知部、
１０４…画像保存部、
１０５…画像入力指示部、
１０６…制御部、
１０７…画像指定部、
１０８…指定画像保存部、
１１０…認識条件判別部、
１１１…文字認識部、
１１２…認識結果保存部、
３０１…本体、
３０２…ディスプレイ、
３０３…カメラ、
３０４…起動ボタン、
３０５…操作用ペン、
４０１…名刺、
５０１…撮像装置、
５０２…ＣＣＤ、
５０３…Ａ／Ｄコンバータ、
５０４…画像メモリ、
５０５…表示装置、
５０６…ＬＣＤ、
５０７…バックライト、
６０１…画像保存領域、
６０２…カウンタ領域、
６０３…画像保存領域、
７０１…撮像時の状態（明るさに関する）の報知例、
８０１…撮像時の状態（傾きに関する）の報知例、
９０１…画像保存時の報知例、
１００１…保存された複数の画像のうちの一画像、
１００２…画像保存ボタン、
１００３…認識開始ボタン、
１１０１…認識対象領域、
１１０２…画像の状態の報知例、
１２０１…認識結果の報知例。

Claims

被写体を撮像する画像入力手段と、
画像認識に適した画像を保存するための保存条件情報に基づいて、上記画像入力手段により撮像された画像の状態が画像認識に適した画像であるか否かを判断する保存条件判断手段と、
上記画像入力手段により被写体を撮像する毎に、上記保存条件判断手段の判断結果に基づく撮像状態をその都度報知する報知手段と、
上記保存条件判断手段が上記画像入力手段により撮像された画像の状態が画像認識に適した画像であると判断すると、上記画像入力手段により撮像された画像を保存する画像保存手段とを備えたことを特徴とする画像撮像装置。
請求項１に記載の画像撮像装置において、
上記画像入力手段による画像入力を指示する画像入力指示手段と、
上記画像入力指示手段により画像入力が指示されている間、上記画像入力手段による被写体の撮像と、上記保存条件判断手段により撮像された画像の状態が画像認識に適した画像であるか否かの判断と、上記報知手段による報知と、上記画像保存手段による画像の保存が逐次行われるように、上記画像入力手段，保存条件判断手段，報知手段および画像保存手段を制御する制御手段とを備えたことを特徴とする画像撮像装置。
請求項１に記載の画像撮像装置において、
上記画像保存手段は、上記保存条件判断手段により上記保存条件を満たしていると判断された上記画像を複数保存することを特徴とする画像撮像装置。
請求項１に記載の画像撮像装置において、
上記画像保存手段に保存された画像のうちの少なくとも１つを指定する画像指定手段と、
上記画像指定手段により指定された画像を保存する指定画像保存手段とを備えたことを特徴とする画像撮像装置。
請求項１に記載の画像撮像装置において、
上記画像保存手段に保存された画像のうちの少なくとも１つを指定する画像指定手段と、
上記画像指定手段により指定された画像の文字を認識する文字認識手段とを備えたことを特徴とする画像撮像装置。
請求項５に記載の画像撮像装置において、
上記文字認識手段による認識結果を保存する文字認識結果保存手段を備えたことを特徴とする画像撮像装置。
請求項６に記載の画像撮像装置において、
上記報知手段は、上記文字認識結果保存手段に認識結果を保存したことを報知することを特徴とする画像撮像装置。
請求項１に記載の画像撮像装置において、
上記報知手段は、上記画像保存手段に画像を保存したことを報知することを特徴とする画像撮像装置。
被写体を撮像する画像入力手段と、
画像認識に適した画像であるか判断するための認識条件情報に基づいて、上記画像入力手段により入力された画像の状態が画像認識に適した画像であるか否かを判断する認識条件判断手段と、
上記画像入力手段により被写体を撮像する毎に、上記認識条件判断手段の判断結果に基づく撮像状態をその都度報知する報知手段と、
上記認識条件判断手段が上記画像入力手段により撮像された画像の状態が画像認識に適した画像であると判断すると、上記画像入力手段により撮像された画像について画像認識を行う画像認識手段とを備えたことを特徴とする画像撮像装置。
請求項９に記載の画像撮像装置において、
上記画像入力手段による画像入力を指示する画像入力指示手段と、
上記画像入力指示手段により画像入力が指示されている間、上記画像入力手段による被写体の撮像と、上記認識条件判断手段により撮像された画像の状態が画像認識に適した画像であるか否かの判断と、上記報知手段による報知と、上記画像認識手段による画像認識が逐次行われるように、上記画像入力手段，認識条件判断手段，報知手段および画像認識手段を制御する制御手段とを備えたことを特徴とする画像撮像装置。