JP2004005535A - Character display device, its control method, recording medium and program - Google Patents

Character display device, its control method, recording medium and program Download PDF

Info

Publication number
JP2004005535A
JP2004005535A JP2003095421A JP2003095421A JP2004005535A JP 2004005535 A JP2004005535 A JP 2004005535A JP 2003095421 A JP2003095421 A JP 2003095421A JP 2003095421 A JP2003095421 A JP 2003095421A JP 2004005535 A JP2004005535 A JP 2004005535A
Authority
JP
Japan
Prior art keywords
character
image data
display
image
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003095421A
Other languages
Japanese (ja)
Inventor
Hitoshi Yamakado
山門 均
Kazuhiko Muto
無藤 和彦
Toru Miyamoto
宮本 徹
Daisuke Miyakoshi
宮腰 大輔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2003095421A priority Critical patent/JP2004005535A/en
Publication of JP2004005535A publication Critical patent/JP2004005535A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Character Input (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To display a character to further easily to see even when digitally magnifying the character included in a pickup image. <P>SOLUTION: When a mode setting switch 143 is set in a "character display mode", a character recognizing processing part 20 recognizes the character from digital image data stored in a frame buffer 13 on the basis of character pattern information stored in a character information file 21, and stores the character expressed by an outline font corresponding to this recognized character in a character recognizing buffer 22. A control part 15 stores the digital image data including a partial character among a character group stored in the character recognizing buffer 22 in a VRAM 18, and displays the digital image data stored in the VRAM 18 on an LCD 19 arranged on a back face of a digital camera 1. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、文字表示装置、その制御方法、記録媒体およびプログラムに係り、特に、携帯可能な情報機器において撮像した文字を拡大表示させるための技術に関する。
【0002】
【従来の技術】
従来より新聞などの小さな文字を読みやすくするために、文字を拡大すべくルーペ(拡大鏡)が一般的に用いられている。このような機能と同様なものとして、デジタルカメラには、被写体をデジタルズームにより拡大し、拡大した被写体の画像をLCDに表示させるものがある。このようなデジタルカメラで雑誌や新聞などに掲載されている小さな文字を撮影する場合には、LCDに表示される文字が小さくて読みづらいため、デジタルズームで拡大してLCDに表示させることがある。
【0003】
【発明が解決しようとする課題】
しかしながら、デジタルズームにより拡大された画像は、デジタルカメラの内部に記憶されているデジタル画像データの一部のみを利用して拡大している。したがって、デジタル拡大された画像は、少ない情報量で表示を行うため、ルーペ(拡大鏡)で拡大した場合と異なり拡大はされるがデジタル化に伴って画質が劣化してしまい細かい文字等は、却って読みづらくなることがある。
【0004】
そこで、本発明は、上述した事情に鑑みてなされたものであり、撮像した文字をデジタル的に拡大表示するに際し、文字をより見やすく表示することができる文字表示装置、その制御方法、記録媒体およびプログラムを提供することを目的とする。
【0005】
【課題を解決するための手段】
上述した課題を解決するために、本発明に係る文字表示装置は、所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成部と、前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識部と、所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成部と、前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示部とを備えることを特徴としている。
【0006】
この構成によると、撮像された画像に含まれる文字が認識部により文字の二次元配置とともに認識される。そして、認識された文字を前記二次元配置にしたがって配置し、この配置した文字を所定の文字フォントを用いて表示するための表示用画像データが表示用画像データ生成部により生成される。これにより、表示部は、表示用画像データに対応する表示用画像の一部を抽出して実表示画像を表示させることが可能になる。
【0007】
また、上述した文字表示装置において、前記二次元配置された文字を含む二次元平面を仮定し、当該二次元平面における前記撮像領域の移動量および移動方向を検出する検出部を備えるようにし、前記表示部は、前記検出部により検出された前記撮像領域の移動量および移動方向に応じて抽出位置を変更するようにしてもよい。
【0008】
また、上述した文字表示装置において、前記認識部により文字として認識不能な画像領域があった場合に、前記表示用画像データには、当該認識不能な画像領域に対応する画像データが格納されるようにし、前記表示部は、前記格納された認識不能な画像領域に対応する画像データに基づいて、当該画像データに対応する画像を、認識された文字を表示する文字フォントの文字サイズに合わせて表示させるようにしてもよい。
【0009】
本発明に係る文字表示装置の制御方法は、所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成段階と、前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識段階と、所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成段階と、前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示段階とを備えることを特徴としている。
【0010】
本発明に係る文字表示装置を制御するためのプログラムを記録した記録媒体は、コンピュータを、所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成手段と、前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識手段と、所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成手段と、前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示手段として機能させるためのプログラムを記録したことを特徴としている。
【0011】
本発明に係る文字表示装置を制御するためのプログラムは、コンピュータを、所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成手段と、前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識手段と、所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成手段と、前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示手段として機能させることを特徴としている。
【0012】
【発明の実施の形態】
次に、図面を参照して本発明の好適な実施形態について説明する。
[1] 実施形態の構成
図1を参照して本発明の実施形態に係るルーペ(拡大鏡)の機能を有するデジタルカメラ1の概要構成を説明する。
デジタルカメラ1は、撮像部10を備え、この撮像部10は、レンズ101と、CCD(電荷結合素子;Charge Coupled Device)102と、信号処理部103とを備えている。
【0013】
CCD102は、レンズ101によって投影された撮影画像をアナログ画像信号SAGに変換し、信号処理部103に出力する。信号処理部103は、アナログ画像信SAGからノイズ除去・ゲインコントロール処理等を行うとともに、処理後のアナログ画像信号をデジタル画像データDDGに変換し、フレームバッファ13に出力する。
フレームバッファ13は、デジタル画像データDDGを記憶するメモリである。フレームバッファ13は、1フレーム分のデジタル画像データDDGを記憶する。具体的に説明すると、例えば、CCDがn行m列の画素を有している場合に、フレームバッファ13はn×m画素分のデジタル画像データDDGを記憶する。
【0014】
操作部14は、ユーザがデジタルカメラ1を操作する際に用いる各種のスイッチを備えている。各種のスイッチとしては、以下のものがある。シャッタースイッチ141は、撮影している画像を記録させる際にその旨の指示を与えるための操作を行うために用いる。ポーズスイッチ142は、LCD(Liquid Crystal Display)19上に表示されている画像を一時的に保持させる際にその旨の指示を与えるための操作を行うために用いる。モード設定スイッチ143は、このデジタルカメラ1を、画像を撮影して記録するために機能させる「通常モード」と、このデジタルカメラ1を、LCD19に文字を表示するために機能させる「文字表示モード」とを切り替えるための操作を行うために用いる。
操作部14はユーザの操作状態に対応した信号を出力し、制御部15に供給する。制御部15は操作部14からの操作信号に対応する制御を装置各部に対して行う。制御部15は、後述する文字認識処理部20により生成される文字画像データDMGの表示対象部分に相当する文字表示画像データDMHGをVRAM18に出力させる。
【0015】
文字情報ファイル21は、文字のアウトラインフォントと、登録されている文字の特徴を抽出して生成された標準文字パターンとを対応付けて記憶するファイルである。ここで、文字の特徴とは、文字を上下方向、左右方向、左斜め方向、右斜め方向などの方向成分に分解し、それらの方向成分に基づいて文字の特徴をパターン化したものである。
【0016】
文字認識処理部20は、モード設定スイッチ143が「文字表示モード」側に設定されている場合に、文字情報ファイル21を参照してフレームバッファ13に記憶されているデジタル画像データDDGに対応する画像から文字を認識し、この認識された文字に対応するアウトラインフォントを抽出する。文字認識処理部20は、抽出したアウトラインフォントにより表示される文字に基づいて文字画像データDMGを生成する。ここで、アウトラインフォントにより表示される文字は、予め定められた文字サイズにより表示される。
文字認識バッファ22は、文字認識処理部20により生成された文字画像データDMGを記憶するメモリである。
【0017】
画像処理部17は、モード設定スイッチ143が「通常モード」側に設定されている場合に、フレームバッファ13に記憶されているデジタル画像データDDGに対して、エッジ強調・明るさ調整・色合い調整・ホワイトバランス調整・逆光補正等のデジタル画像処理を行う。画像処理部17は、デジタル画像処理を施したデジタル画像データに対し、LCD19の表示能力に合わせて減色、画素の間引き処理を行い、表示画像データDHGを生成する。画像処理部17は、表示画像データDHGをVRAM18に出力する。
VRAM18は、表示画像データDHGまたは文字表示画像データDMHGを記憶する。LCD19は、デジタルカメラ1の背面に設けられており、VRAM18に記憶された表示画像データDHGまたは文字表示画像データDMHGに対応する画像を表示する。
【0018】
ここで、図2は、デジタルカメラ1のレンズ101によって撮像された文字に対応する所定文字サイズの文字が、LCD19に表示される様子を表したものである。文字が記載されている紙面2上に、「文字表示モード」側に設定されているデジタルカメラ1のレンズ101部分を近づけると、デジタルカメラ1の背面に設けられているLCD19に、撮像された文字に対応する所定文字サイズの文字が表示される。図2に示す場合には、紙面2上に記載されている文字のうち“早期の対策が”という文字の近辺がLCD19に表示されている。
【0019】
フラッシュメモリ16は、デジタルカメラ1を「通常モード」で使用する際にフレームバッファ13に記憶されているデジタル画像データDDGを格納して記憶するメモリである。フラッシュメモリ16に格納されるデジタル画像データDCDGは、JPEG形式により圧縮されてから格納される。なお、フラッシュメモリ16は、RAMや磁気ディスク等であってもよい。また、カードインターフェースを備えることにより、メモリーカード等の着脱可能なメモリであってもよい。
【0020】
[2] 実施形態の動作
[2.1] 通常モード時の動作
次に、図3を参照してモード設定スイッチ143が「通常モード」側に設定されている際の動作例を説明する。
まず、ユーザが被写体を撮影するためにデジタルカメラ1のレンズ101を被写体に向ける。
次に、CCD102は、レンズ101から入ってきた被写体画像(光信号)をアナログ画像信号SAGに変換し、信号処理部103に出力する(ステップS1)。信号処理部103は、入力されたアナログ画像信号SAGに対してノイズ除去・ゲインコントロール処理およびアナログ・デジタル変換処理を行う。制御部15は、フレームバッファ13に1フレーム分のデジタル画像データDDGを記憶させる(ステップS2)。
【0021】
また、制御部15は、モード設定スイッチ143が「通常モード」側に設定されていることを示す信号を画像処理部17に送信する(ステップS3)。
画像処理部17は、フレームバッファ13に記憶されているデジタル画像データDDGに対し、エッジ強調・明るさ調整・色合い調整・ホワイトバランス調整・逆光補正等のデジタル画像処理を行なう(ステップS4)。
次に、画像処理部17は、デジタル画像処理を施したデジタル画像データに対し、LCD19の表示能力に合わせて減色、画素の間引き処理を行い、表示画像データDHGを生成する。そして、画像処理部17は、表示画像データDHGをVRAM18に記憶させる。制御部15は、VRAM18に記憶されたデジタル画像データDHGをデジタルカメラ1の背面に設けられているLCD19に表示させる(ステップS5)。
【0022】
ここで、ユーザによりシャッタースイッチ141が押されると、制御部15は、フレームバッファ13に記憶されている被写体のデジタル画像データDDGをJPEG形式により圧縮する。そして、制御部15は、この圧縮したデジタル画像データDCDGをフラッシュメモリ16に記憶させる。
【0023】
[2.2] 文字表示モード時の動作
次に、図4を参照してモード設定スイッチ143が「文字表示モード」側に設定されている際の動作例を説明する。
まず、ユーザが文字を観るためにデジタルカメラ1のレンズ101を文字含んだ新聞や雑誌などの被写体に向ける。
次に、CCD102は、レンズ101から入ってきた被写体画像(光信号)をアナログ画像信号SAGに変換し、信号処理部103に出力する(ステップS11)。信号処理部103は、変換されたアナログ画像信号SAGに対してノイズ除去・ゲインコントロール処理およびアナログ・デジタル変換処理を行う。制御部15は、フレームバッファ13に1フレーム分のデジタル画像データDDGを記憶させる(ステップS12)。
制御部15は、モード設定スイッチ143が「文字表示モード」側に設定されていることを示す信号を文字認識処理部18に送信する(ステップS13)。
【0024】
次に、文字認識処理部20は、文字情報ファイル21に記憶されている標準文字パターンに基づいて、デジタル画像データDDGに対応する画像から文字を認識する(ステップS14)。そして、文字認識処理部20は、デジタル画像データDDGに対応する画像から認識された文字に対応するアウトラインフォントを文字情報ファイル21から抽出する(ステップS15)。なお、このステップS14およびS15における処理については、後で詳細に説明する。
文字認識処理部20は、抽出したアウトラインフォントにより表される文字に基づいて文字画像データDMGを生成し、生成した文字画像データDMGを文字認識バッファ22に記憶させる(ステップS16)。
【0025】
次に、制御部15は、文字認識バッファ22に記憶された文字画像データDMGに対応する画像のほぼ中央に位置する文字列に対応する文字表示画像データDMHGをVRAM18に記憶させる。制御部15は、VRAM18に記憶された文字表示画像データDMHGに対応する文字列を含んだ画像をデジタルカメラ1の背面に設けられているLCD19に表示させる(ステップS17)。すなわち、文字表示画像データDMHGに対応する文字列を含んだ画像は、文字表示画像データDMHGに対応する文字を予め指定した文字サイズを有するアウトラインフォントで表示した画像に相当することとなる。
【0026】
このようにして、LCD19には、アウトラインフォントにより表される美しい文字がユーザにとって読みやすい所定の大きさで表示される。そして、デジタルカメラ1を動かすと、その方向、移動量を文字認識処理部20が検出し、この検出した方向、移動量に応じてLCD19に表示される画像が更新される。
【0027】
次に、モード設定スイッチ143が「文字表示モード」側に設定されている際にポーズスイッチ142が押されたときの動作例を説明する。
ユーザによりポーズスイッチ142が押されると、制御部15は、文字認識処理部20による処理を停止させるとともに、VRAM18に記憶されている文字表示画像データDMHGを保持させる。そして、再度ユーザによりポーズスイッチ142が押されるまで、制御部15は、文字認識処理部20による処理の停止を継続させるとともに、VRAM18に記憶されている文字表示画像データDMHGの保持を継続させる。
ユーザにより再度ポーズスイッチ142が押されると、制御部15は、文字認識処理部20による処理を再開させるとともに、VRAM18に記憶されている文字表示画像データDMHGを更新させる。
これにより、LCD19に表示させた文字を含んだ画像をユーザが所望する状態で一時的に保持することが可能となる。
【0028】
[2.3] 文字認識の具体的動作
次に、撮像された画像から文字が認識され、認識された文字に対応するアウトラインフォントが文字認識バッファに記憶されるまでの動作例を説明する。
まず、文字認識処理部20は、フレームバッファ13に記憶されているデジタル画像データDDGに含まれるデータから文字部分を特定し、その特定した文字部分を1文字ごとに分解する。この場合において、文字部分を特定する前にデジタル画像データDDGの傾き補正等の各種前処理を必要に応じて行うのが好ましい。次に、文字認識処理部20は、分解した1文字ごとにその文字の特徴を抽出して文字パターンを生成し、生成した文字パターンと、文字情報ファイル21に記憶されている全ての標準文字パターンとの間の距離を計算する。なお、この距離を計算する方法には、ユークリッド距離、あるいは絶対値距離(シティブロック距離)などの方法を用いる。
【0029】
上述した距離計算の結果、文字認識処理部20は、全ての標準文字パターンから最も距離の小さい標準文字パターンを選択し、選択した標準文字パターンに対応する文字を、撮像された画像から認識された文字とする。
次に、文字認識処理部20は、選択した標準文字パターンに対応するアウトラインフォントを文字情報ファイル21から抽出し、抽出したアウトラインフォントにより表される文字を文字パターンの抽出位置(2次元位置)に対応付けて文字認識バッファ22に記憶する。
この一連の動作により、文字認識処理部20は、撮像された画像から文字を認識し、認識した文字に対応するアウトラインフォントを2次元的な表示配列を保持したまま文字認識バッファ22に記憶させている。
【0030】
[2.4] 認識した文字を表示する際の具体的動作
次に、図5を参照して撮像された画像から文字が認識され、認識された文字がLCDに表示されるまで動作例を説明する。
図5は、紙面2上に記載されている文字をデジタルカメラ1で撮像した場合に、文字認識バッファ22に記憶される文字群Baと、LCD19に表示される文字群Laとの関係を表したものである。
【0031】
図5に示すように、LCD19に表示される文字群Laは、文字認識バッファ22に記憶されている文字群Baの中央部に位置する。このように文字群Laを文字群Baの中央部に位置させることにより、デジタルカメラ1が移動した場合であっても、その移動量が小さく、移動後のLCD19に表示させる文字群Laが、移動前の文字認識バッファ22に記憶されていた文字群Baの範囲内に存在する場合には、LCD19にすぐに文字を表示することが可能となる。
一方、移動量が大きく、移動後のLCD19に表示させる文字群Laが、移動前の文字認識バッファ22に記憶されていた文字群Baの範囲内に存在しない場合には、表示対象となる文字が認識され、文字認識バッファ22に記憶されるのを待ってからLCD19に文字が表示されることになる。
【0032】
まず、レンズ101により紙面2上の画像がデジタルカメラ内に取り込まれると、フレームバッファ13には、図5に示す文字群Baを含んだデジタル画像データDDGが取り込まれる。文字認識処理部20は、フレームバッファ13に記憶されたデジタル画像データDDGから全ての文字を認識し、認識した文字に対応するアウトラインフォントにより表される文字を文字認識バッファ22に記憶させる。
【0033】
次に、制御部15は、文字認識バッファ22に記憶された文字群Baを表示すべく平面上に配置したと仮定した場合に中央部に位置する文字群Laである“ノートパソコ”を含む文字表示画像データDMHGを生成し、生成した文字表示画像データDMHGをVRAM18上に記憶させる。これによりLCD19には、“ノートパソコ”という文字全体を含んだ画像が表示される。
【0034】
次に、デジタルカメラ1が紙面2の左斜め下方側に移動すると、フレームバッファ13には、図6に示す文字群Bbを含んだデジタル画像データDDGが取り込まれる。この際に既に取り込んでいる部分がある場合には、当該取り込み済みの部分については再度の取り込みは行わない。
次に、文字認識処理部20は、表示画面上のほぼ中央の位置に予め設定されている基準位置に基づいて、移動ベクトルを算出する。本実施形態の場合には、図5に示す文字群Laの最上段に位置する“ノ”の右上端部が基準位置となる。
【0035】
具体的に説明すると、フレームバッファ13に記憶される文字群が、例えば、図5に示す文字群Baから図6に示す文字群Bbに変化した場合には、図7に示すように、変化前の基準位置に該当していた“ノ”の右上端部が、変化後に移動した先の位置に基づいて、移動ベクトルSが求められる。なお、基準位置に対応させる文字を1文字ではなく、配置位置の離れた複数の文字に対応させて設定し、同様に検出すればより正確に移動方向が検出できる。
【0036】
文字認識処理部20は、算出した移動ベクトルSに基づいて、フレームバッファ13に記憶されているデジタル画像データDDGのうち、移動前に記憶されていなかった文字を含むデジタル画像データの差分領域を求める。具体的には、図7に示すように、フレームバッファ13に記憶されているデジタル画像データDDGうち、デジタル画像データの四方端点を始点とする移動ベクトルSと同じ向きおよび同じ大きさ(移動量)をもつ移動ベクトルS’を含む領域Rが、移動前には記憶されていない文字を含むデジタル画像データの差分領域となる。
【0037】
したがって、文字認識処理部20は、領域Rに含まれる文字を認識し、この認識した文字に対応するアウトラインフォントにより表される文字を文字認識バッファ22の領域R’に記憶させる。
そして、文字認識処理部20は、文字認識バッファ22に記憶された文字群Bbを表示すべく平面上に配置したと仮定した場合に、その中央部に位置する文字群Lbである“カードにも使”を含む文字表示画像データDMHGを生成し、生成した文字表示画像データDMHGをVRAM18に記憶させる。
【0038】
これにより、LCD19には、図8に示すように“ノートパソコ”という文字全体を含んだ画像に変わって“ノートパソコ”という文字の一部のみを含み“カードにも使”という文字全体を含んだ画像が表示される。
なお、フレームバッファ13に記憶される文字群Ba,Bbの四方端点付近にある文字は、文字の一部が欠けている場合が多いが、そのような文字は、文字認識の対象外として文字認識バッファ22に記憶させないこととする。
【0039】
上述した実施形態に係るデジタルカメラの各種機能を実現する方法は、このデジタルカメラにおいて行われる各種機能を実行させるためのプログラムを予めデジタルカメラに格納して実現する場合に限られない。例えば、このプログラムを記録した記録媒体からプログラムを読み取った後にインストールして実現する場合や、このプログラムを電気通信回線を通じてデジタルカメラにダウンロードした後にインストールして実現する場合であってもよい。
【0040】
[3] 実施形態の効果
上述したように、本実施形態に係るデジタルカメラでは、現時点において撮像されている画像に含まれる文字を、各ユーザにとって読みやすい大きさに設定されたアウトラインフォント文字で表示するため、美しくて読みやすい文字を表示部であるLCDに表示することが可能となる。したがって、ユーザは、このデジタルカメラをあたかもルーペのように使用することが可能となる。
【0041】
[4] 実施形態の変形例
なお、上述した実施形態においては、文字認識処理の機能をデジタルカメラに備えた場合について説明しているが、文字認識処理の機能を備えられるのはデジタルカメラに限られない。例えば、この機能を撮像機能および表示機能を有する携帯型情報端末(PDA)、携帯電話機、簡易型携帯電話機、デジタルビデオ、時計などの携帯可能な情報機器に備えてもよい。さらに、上述した情報機器以外であっても、撮像機能および表示機能を備えた情報機器であればどのような情報機器に備えてもよい。
また、撮像機能を備える装置または表示機能を備える装置のいずれかの装置に対して文字認識処理の機能を備えてもよい。この場合には、各装置に赤外線などの無線通信インターフェースを備え、この無線通信インターフェースを介して撮像、文字認識、表示の各処理を行うようにすればよい。
【0042】
また、上述した実施形態においては、LCD19には、文字認識処理部20により認識された文字が表示されるが、LCD19に文字を表示させる方法は、これに限られない。例えば、文字認識処理部20により文字として認識することができない画像があった場合には、その部分には、文字認識される前の文字(あるいは図形等)を含む所定領域の画像を記憶し、文字が認識できた他の文字のアウトラインフォントの文字サイズに合わせて表示させるようにしてもよい。これにより、文字認識ができなかった場合でも、原文に即した文字を表示することが可能となり、ユーザは、判読が可能となる。この場合において、汚れなどを誤検出して不要な画像を記憶するのを防止すべく、適宜、撮像対象の用紙の色(背景色)を判別するためのしきい値を設定するのが好ましい。
【0043】
また、上述した実施形態においては、手に持ったデジタルカメラ1で文字を撮影しているが、これに限られず、例えば、脚付きの台などの上にデジタルカメラを固定し、この台を動かすことによって撮像された文字を表示するようにしてもよい。これによって、デジタルカメラと紙面との間の距離を一定に保ち、さらに、紙面とレンズを並行に保つことができるため、文字の認識率を向上させることができる。さらに、デジタル画像データの傾き補正等の各種前処理工程を簡略化でき、処理の高速化が図れる。
【0044】
また、上述した実施形態においては、LCD19に表示させる文字の文字サイズを予め定められた文字サイズに固定しているが、これに限定するものではない。例えば、操作部14に、文字サイズを設定するサイズ設定部を設け、このサイズ設定部において設定された文字サイズにより、LCD19に表示させる文字の文字サイズを決めてもよい。
また、文字サイズを設定するのではなく、表示させる倍率を設定するようにしてもよい。この場合には、例えば、認識された文字の平均的なサイズを検出し、実際に表示する文字サイズを自動的に設定して表示する。具体的には、平均的な文字サイズが9ポイントであると検出された場合に、倍率が2倍に設定されていれば、表示される文字サイズは18ポイントに自動設定される。
これらの場合に、文字認識処理部20は、アウトラインフォントにより表される文字に対してアウトライン補正処理を行うようにすれば、表示される文字の大きさが変わっても、美しい文字を維持して表示することができる。
【0045】
また、上述した実施形態においては、モード設定スイッチ143が「文字表示モード」側に設定されている際に、LCD19に表示させる文字を移動させる場合には、デジタルカメラ1自体を動かす必要があるが、LCD19に表示させる文字を移動させる方法として、例えば、操作部14に、表示文字を移動させるカーソル部を設け、このカーソル部において指示された移動量および移動方向に応じて、表示させる文字を文字認識バッファ22に記憶されている文字画像データDMGの範囲内で移動させるようにしてもよい。
【0046】
また、上述した実施形態においては、認識された文字を表示するためにアウトラインフォントを用いているが、これに限られない。例えば、認識された文字を表示するためにビットマップフォントを用いてもよい。この場合には、アンチエイリアシング処理やスムージング処理等のジャギー(文字のギザギザ)を軽減する処理を行うのが好ましい。
【0047】
また、上述した実施形態においては、VRAM18に格納されたデジタル画像データをLCD19に表示しているが、LCD19への表示方法は、これに限られない。例えば、VRAM18を2階層に分離し、「文字表示モード」の場合に、VRAM18の一方の階層には、制御部15により生成された文字表示画像データDMHGを記憶し、VRAM18の他方の階層には、画像処理部17により生成された表示画像データDHGを記憶する。そして、操作部14に表示切替スイッチを備え、この表示切換スイッチになされた操作に応じてLCD19に表示させるVRAM18を切り換えるようにしてもよい。これにより、「文字表示モード」の場合には、LCD19に、文字が読みやすく編集された文字表示画像データDMHGに対応する画像と、表示画像データDHGに対応する画像とを交互に表示することが可能になる。
【0048】
【発明の効果】
上述したように本発明によれば、撮像した画像に含まれる文字をデジタル的に拡大した場合でもより見やすく表示することが可能となる。
【図面の簡単な説明】
【図1】実施形態に係るデジタルカメラの概要構成を例示する図である。
【図2】図1に記載するデジタルカメラの使用状態を例示する図である。
【図3】図1に記載するデジタルカメラの動作例を示すフローチャートである。
【図4】図1に記載するデジタルカメラの動作例を示すフローチャートである。
【図5】図1に記載するデジタルカメラの文字認識バッファに記憶される文字群とLCDに表示される文字群との関係を例示する図である。
【図6】図1に記載するデジタルカメラの文字認識バッファに記憶される文字群とLCDに表示される文字群との関係を例示する図である。
【図7】図1に記載するデジタルカメラの文字認識バッファに記憶される文字群の移動時の差分領域を例示する図である。
【図8】図1に記載するデジタルカメラのLCDに表示される画像を例示する図である。
【符号の説明】
1…デジタルカメラ(文字表示装置)、
10…撮像部(画像生成部)、
13…フレームバッファ、
14…操作部(設定部)、
15…制御部(表示部)、
16…フラッシュメモリ、
17…画像処理部、
18…VRAM、
19…LCD(表示部)、
20…文字認識処理部(認識部、表示用画像データ生成部、パターン抽出部、比較部、検出部、)、
21…文字情報ファイル(パターン記憶部)、
22…文字認識バッファ。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a character display device, a control method thereof, a recording medium, and a program, and more particularly to a technique for enlarging and displaying an imaged character in a portable information device.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, a loupe (magnifying glass) has been generally used to enlarge characters so that small characters such as newspapers can be easily read. As a function similar to such a function, some digital cameras enlarge a subject by digital zoom and display an image of the enlarged subject on an LCD. When photographing small characters published in magazines, newspapers and the like with such a digital camera, the characters displayed on the LCD are small and difficult to read.
[0003]
[Problems to be solved by the invention]
However, the image enlarged by the digital zoom is enlarged using only a part of the digital image data stored inside the digital camera. Therefore, a digitally magnified image is displayed with a small amount of information. Therefore, unlike a case where the image is magnified with a loupe (magnifying glass), the image is magnified. On the contrary, it may be difficult to read.
[0004]
Therefore, the present invention has been made in view of the above-described circumstances, and in digitally enlarging and displaying captured characters, a character display device capable of displaying characters more easily, a control method thereof, a recording medium, and The purpose is to provide the program.
[0005]
[Means for Solving the Problems]
In order to solve the above-described problem, a character display device according to the present invention includes an image generation unit configured to capture an image corresponding to a predetermined imaging region to generate image data, and a character included in the image from the image data. And a display image data generation unit that generates display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font and a two-dimensional arrangement. And a display unit for extracting a part of the display image corresponding to the display image data and displaying the extracted image as an actual display image.
[0006]
According to this configuration, the characters included in the captured image are recognized by the recognition unit together with the two-dimensional arrangement of the characters. Then, the recognized characters are arranged in accordance with the two-dimensional arrangement, and display image data for displaying the arranged characters using a predetermined character font is generated by the display image data generation unit. Thus, the display unit can extract a part of the display image corresponding to the display image data and display the actual display image.
[0007]
Further, in the character display device described above, assuming a two-dimensional plane including the two-dimensionally arranged characters, including a detection unit that detects the amount and direction of movement of the imaging region in the two-dimensional plane, The display unit may change the extraction position according to a moving amount and a moving direction of the imaging region detected by the detecting unit.
[0008]
In the character display device described above, when there is an image area that cannot be recognized as a character by the recognition unit, the display image data stores image data corresponding to the unrecognizable image area. The display unit displays an image corresponding to the image data based on the stored image data corresponding to the unrecognizable image area according to the character size of a character font that displays the recognized character. You may make it do.
[0009]
A method for controlling a character display device according to the present invention includes: an image generation step of capturing an image corresponding to a predetermined imaging area to generate image data; and characters included in the image from the image data along with a two-dimensional arrangement thereof. A recognition step of recognizing, a display image data generating step of generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font, and the display image Displaying a part of the display image corresponding to the data and displaying the extracted image as an actual display image.
[0010]
A recording medium storing a program for controlling the character display device according to the present invention includes a computer, an image generation unit that captures an image corresponding to a predetermined imaging area to generate image data, and Recognition means for recognizing characters included in an image together with their two-dimensional arrangement, and display for generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font And a program for functioning as display means for extracting part of the display image corresponding to the display image data and displaying the extracted image as an actual display image.
[0011]
A program for controlling a character display device according to the present invention includes: a computer that captures an image corresponding to a predetermined imaging region to generate image data; and a character included in the image from the image data. And a display image data generating means for generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font. And a function of extracting a part of the display image corresponding to the display image data and displaying the extracted image as an actual display image.
[0012]
BEST MODE FOR CARRYING OUT THE INVENTION
Next, a preferred embodiment of the present invention will be described with reference to the drawings.
[1] Configuration of the embodiment
A schematic configuration of a digital camera 1 having a loupe (magnifying glass) function according to an embodiment of the present invention will be described with reference to FIG.
The digital camera 1 includes an imaging unit 10. The imaging unit 10 includes a lens 101, a charge coupled device (CCD) 102, and a signal processing unit 103.
[0013]
The CCD 102 converts the captured image projected by the lens 101 into an analog image signal SAG, and outputs the analog image signal SAG to the signal processing unit 103. The signal processing unit 103 performs noise removal / gain control processing and the like from the analog image signal SAG, converts the processed analog image signal into digital image data DDG, and outputs the digital image data DDG to the frame buffer 13.
The frame buffer 13 is a memory that stores digital image data DDG. The frame buffer 13 stores digital image data DDG for one frame. More specifically, for example, when the CCD has n rows and m columns of pixels, the frame buffer 13 stores digital image data DDG for n × m pixels.
[0014]
The operation unit 14 includes various switches used when the user operates the digital camera 1. The various switches include the following. The shutter switch 141 is used to perform an operation for giving an instruction to record a captured image when recording the image. The pause switch 142 is used to perform an operation for giving an instruction to temporarily hold an image displayed on the LCD (Liquid Crystal Display) 19. The mode setting switch 143 is a “normal mode” that allows the digital camera 1 to function to capture and record an image, and a “character display mode” that allows the digital camera 1 to function to display characters on the LCD 19. It is used to perform an operation for switching between and.
The operation unit 14 outputs a signal corresponding to the operation state of the user and supplies the signal to the control unit 15. The control unit 15 performs control corresponding to an operation signal from the operation unit 14 for each unit of the apparatus. The control unit 15 causes the VRAM 18 to output character display image data DMHG corresponding to a display target portion of the character image data DMG generated by the character recognition processing unit 20 described later.
[0015]
The character information file 21 is a file that stores an outline font of a character in association with a standard character pattern generated by extracting characteristics of the registered character. Here, the character feature is obtained by decomposing a character into directional components such as a vertical direction, a horizontal direction, an oblique left direction, and an oblique right direction, and patterning the characteristics of the character based on these directional components.
[0016]
When the mode setting switch 143 is set to the “character display mode” side, the character recognition processing unit 20 refers to the character information file 21 and refers to the image corresponding to the digital image data DDG stored in the frame buffer 13. , And extracts an outline font corresponding to the recognized character. The character recognition processing unit 20 generates character image data DMG based on the characters displayed by the extracted outline font. Here, the characters displayed in the outline font are displayed in a predetermined character size.
The character recognition buffer 22 is a memory that stores the character image data DMG generated by the character recognition processing unit 20.
[0017]
When the mode setting switch 143 is set to the “normal mode”, the image processing unit 17 performs edge enhancement, brightness adjustment, color adjustment, and digital image data DDG stored in the frame buffer 13. Performs digital image processing such as white balance adjustment and backlight compensation. The image processing unit 17 performs color reduction and pixel thinning processing on the digital image data subjected to the digital image processing in accordance with the display capability of the LCD 19 to generate display image data DHG. The image processing unit 17 outputs the display image data DHG to the VRAM 18.
The VRAM 18 stores display image data DHG or character display image data DMHG. The LCD 19 is provided on the back of the digital camera 1 and displays an image corresponding to the display image data DHG or the character display image data DMHG stored in the VRAM 18.
[0018]
Here, FIG. 2 illustrates a state in which characters of a predetermined character size corresponding to characters captured by the lens 101 of the digital camera 1 are displayed on the LCD 19. When the lens 101 portion of the digital camera 1 set on the “character display mode” side is brought close to the paper surface 2 on which characters are described, the captured characters are displayed on the LCD 19 provided on the back of the digital camera 1. Is displayed in a predetermined character size. In the case shown in FIG. 2, the vicinity of the character “early countermeasures” among the characters described on the paper 2 is displayed on the LCD 19.
[0019]
The flash memory 16 is a memory that stores and stores digital image data DDG stored in the frame buffer 13 when the digital camera 1 is used in the “normal mode”. The digital image data DCDG stored in the flash memory 16 is stored after being compressed in the JPEG format. Note that the flash memory 16 may be a RAM, a magnetic disk, or the like. Further, a removable memory such as a memory card may be provided by providing a card interface.
[0020]
[2] Operation of the embodiment
[2.1] Operation in normal mode
Next, an operation example when the mode setting switch 143 is set to the “normal mode” will be described with reference to FIG.
First, the user turns the lens 101 of the digital camera 1 toward a subject to photograph the subject.
Next, the CCD 102 converts the subject image (light signal) input from the lens 101 into an analog image signal SAG, and outputs the analog image signal SAG to the signal processing unit 103 (step S1). The signal processing unit 103 performs noise removal / gain control processing and analog / digital conversion processing on the input analog image signal SAG. The control unit 15 stores one frame of digital image data DDG in the frame buffer 13 (step S2).
[0021]
Further, the control unit 15 transmits a signal indicating that the mode setting switch 143 is set to the “normal mode” to the image processing unit 17 (step S3).
The image processing unit 17 performs digital image processing such as edge enhancement, brightness adjustment, hue adjustment, white balance adjustment, backlight correction, and the like on the digital image data DDG stored in the frame buffer 13 (step S4).
Next, the image processing unit 17 performs color reduction and pixel thinning processing on the digital image data subjected to the digital image processing according to the display capability of the LCD 19 to generate display image data DHG. Then, the image processing unit 17 stores the display image data DHG in the VRAM 18. The control unit 15 displays the digital image data DHG stored in the VRAM 18 on the LCD 19 provided on the back of the digital camera 1 (Step S5).
[0022]
Here, when the shutter switch 141 is pressed by the user, the control unit 15 compresses the digital image data DDG of the subject stored in the frame buffer 13 in the JPEG format. Then, the control unit 15 stores the compressed digital image data DCDG in the flash memory 16.
[0023]
[2.2] Operation in character display mode
Next, an operation example when the mode setting switch 143 is set to the “character display mode” will be described with reference to FIG.
First, the user turns the lens 101 of the digital camera 1 toward a subject such as a newspaper or a magazine containing characters in order to view the characters.
Next, the CCD 102 converts the subject image (light signal) input from the lens 101 into an analog image signal SAG and outputs the analog image signal SAG to the signal processing unit 103 (step S11). The signal processing unit 103 performs noise removal / gain control processing and analog / digital conversion processing on the converted analog image signal SAG. The control unit 15 stores the digital image data DDG for one frame in the frame buffer 13 (Step S12).
The control unit 15 transmits a signal indicating that the mode setting switch 143 is set to the “character display mode” to the character recognition processing unit 18 (Step S13).
[0024]
Next, the character recognition processing unit 20 recognizes characters from an image corresponding to the digital image data DDG based on the standard character pattern stored in the character information file 21 (Step S14). Then, the character recognition processing unit 20 extracts an outline font corresponding to the character recognized from the image corresponding to the digital image data DDG from the character information file 21 (Step S15). The processing in steps S14 and S15 will be described later in detail.
The character recognition processing unit 20 generates character image data DMG based on the character represented by the extracted outline font, and stores the generated character image data DMG in the character recognition buffer 22 (step S16).
[0025]
Next, the control unit 15 causes the VRAM 18 to store the character display image data DMHG corresponding to the character string located substantially at the center of the image corresponding to the character image data DMG stored in the character recognition buffer 22. The control unit 15 causes the LCD 19 provided on the back of the digital camera 1 to display an image including a character string corresponding to the character display image data DMHG stored in the VRAM 18 (Step S17). That is, an image including a character string corresponding to the character display image data DMHG corresponds to an image in which characters corresponding to the character display image data DMHG are displayed in an outline font having a character size specified in advance.
[0026]
In this manner, the LCD 19 displays beautiful characters represented by the outline font in a predetermined size that is easy for the user to read. When the digital camera 1 is moved, the character recognition processing unit 20 detects the direction and the amount of movement, and the image displayed on the LCD 19 is updated according to the detected direction and amount of movement.
[0027]
Next, an operation example when the pause switch 142 is pressed while the mode setting switch 143 is set to the “character display mode” will be described.
When the pause switch 142 is pressed by the user, the control unit 15 stops the processing by the character recognition processing unit 20 and holds the character display image data DMHG stored in the VRAM 18. Until the pause switch 142 is pressed again by the user, the control unit 15 continues to stop the processing by the character recognition processing unit 20 and continues to hold the character display image data DMHG stored in the VRAM 18.
When the pause switch 142 is pressed again by the user, the control unit 15 restarts the processing by the character recognition processing unit 20 and updates the character display image data DMHG stored in the VRAM 18.
This makes it possible to temporarily hold an image including the characters displayed on the LCD 19 in a state desired by the user.
[0028]
[2.3] Specific operation of character recognition
Next, a description will be given of an operation example until a character is recognized from a captured image and an outline font corresponding to the recognized character is stored in the character recognition buffer.
First, the character recognition processing unit 20 specifies a character portion from data included in the digital image data DDG stored in the frame buffer 13, and decomposes the specified character portion for each character. In this case, it is preferable to perform various preprocessing such as inclination correction of the digital image data DDG as necessary before specifying the character portion. Next, the character recognition processing unit 20 generates a character pattern by extracting the characteristics of the character for each decomposed character, and generates the generated character pattern and all the standard character patterns stored in the character information file 21. Calculate the distance between As a method of calculating this distance, a method such as a Euclidean distance or an absolute value distance (city block distance) is used.
[0029]
As a result of the above-described distance calculation, the character recognition processing unit 20 selects a standard character pattern having the smallest distance from all the standard character patterns, and a character corresponding to the selected standard character pattern has been recognized from the captured image. Characters.
Next, the character recognition processing unit 20 extracts an outline font corresponding to the selected standard character pattern from the character information file 21, and places a character represented by the extracted outline font in a character pattern extraction position (two-dimensional position). It is stored in the character recognition buffer 22 in association with it.
Through this series of operations, the character recognition processing unit 20 recognizes a character from the captured image, stores an outline font corresponding to the recognized character in the character recognition buffer 22 while maintaining a two-dimensional display array. I have.
[0030]
[2.4] Specific operation when displaying recognized characters
Next, an example of operation until characters are recognized from the captured image and the recognized characters are displayed on the LCD will be described with reference to FIG.
FIG. 5 shows a relationship between a character group Ba stored in the character recognition buffer 22 and a character group La displayed on the LCD 19 when a character described on the paper 2 is captured by the digital camera 1. Things.
[0031]
As shown in FIG. 5, the character group La displayed on the LCD 19 is located at the center of the character group Ba stored in the character recognition buffer 22. By locating the character group La in the center of the character group Ba in this way, even when the digital camera 1 moves, the amount of movement is small, and the character group La displayed on the LCD 19 after the movement is shifted. When the character exists in the range of the character group Ba stored in the previous character recognition buffer 22, the character can be immediately displayed on the LCD 19.
On the other hand, if the movement amount is large and the character group La to be displayed on the LCD 19 after the movement does not exist within the range of the character group Ba stored in the character recognition buffer 22 before the movement, the character to be displayed is not displayed. The characters are displayed on the LCD 19 after being recognized and stored in the character recognition buffer 22.
[0032]
First, when the image on the paper surface 2 is captured by the lens 101 into the digital camera, the digital image data DDG including the character group Ba shown in FIG. The character recognition processing unit 20 recognizes all characters from the digital image data DDG stored in the frame buffer 13 and causes the character recognition buffer 22 to store a character represented by an outline font corresponding to the recognized character.
[0033]
Next, assuming that the character group Ba stored in the character recognition buffer 22 is arranged on a plane so as to be displayed, the control unit 15 determines the character group including the character group La located at the central portion and includes the character “Note Pasoko”. The display image data DMHG is generated, and the generated character display image data DMHG is stored in the VRAM 18. As a result, the LCD 19 displays an image including the entire character “note pasoko”.
[0034]
Next, when the digital camera 1 moves diagonally to the lower left of the paper surface 2, digital image data DDG including the character group Bb shown in FIG. At this time, if there is a part that has already been taken in, the part that has been taken in is not taken in again.
Next, the character recognition processing unit 20 calculates a movement vector based on a reference position preset at a substantially central position on the display screen. In the case of the present embodiment, the upper right end of “No” located at the top of the character group La shown in FIG. 5 is the reference position.
[0035]
More specifically, when the character group stored in the frame buffer 13 changes from the character group Ba shown in FIG. 5 to the character group Bb shown in FIG. 6, for example, as shown in FIG. The movement vector S is obtained based on the position where the upper right end of “NO” corresponding to the reference position has moved after the change. It should be noted that if the character corresponding to the reference position is set not to one character but to a plurality of characters separated from each other, the movement direction can be detected more accurately by detecting the same.
[0036]
The character recognition processing unit 20 obtains, based on the calculated movement vector S, a difference area of the digital image data including characters that were not stored before the movement among the digital image data DDG stored in the frame buffer 13. . Specifically, as shown in FIG. 7, of the digital image data DDG stored in the frame buffer 13, the same direction and the same size (movement amount) as the movement vector S starting from the four end points of the digital image data. Is a difference area of digital image data including characters that are not stored before the movement.
[0037]
Therefore, the character recognition processing unit 20 recognizes a character included in the region R, and stores a character represented by an outline font corresponding to the recognized character in the region R ′ of the character recognition buffer 22.
Then, when assuming that the character group Bb stored in the character recognition buffer 22 is arranged on a plane to be displayed, the character recognition processing unit 20 determines that the character group Lb located at the center of the The character display image data DMHG including “U” is generated, and the generated character display image data DMHG is stored in the VRAM 18.
[0038]
As a result, the LCD 19 includes only a part of the character “Note Notebook” instead of the image including the entire character “Note Notebook” as shown in FIG. Image is displayed.
Characters near the four end points of the character groups Ba and Bb stored in the frame buffer 13 often lack part of the characters, but such characters are excluded from character recognition. It is not stored in the buffer 22.
[0039]
The method for realizing various functions of the digital camera according to the above-described embodiment is not limited to the case where programs for executing various functions performed in the digital camera are stored in the digital camera in advance and realized. For example, there may be a case where the program is read from a recording medium on which the program is recorded and then installed and realized, or a case where the program is downloaded to a digital camera through an electric communication line and then installed and realized.
[0040]
[3] Effects of the embodiment
As described above, in the digital camera according to the present embodiment, characters included in the image currently being captured are displayed in outline font characters set to a size that is easy for each user to read, so that the digital camera is beautiful and easy to read. Characters can be displayed on the LCD, which is a display unit. Therefore, the user can use this digital camera as if it were a loupe.
[0041]
[4] Modification of Embodiment
In the above-described embodiment, the case where the digital camera has the function of character recognition processing is described. However, the function of the character recognition processing is not limited to the digital camera. For example, this function may be provided in a portable information device (PDA) having an imaging function and a display function, a mobile phone, a simplified mobile phone, a digital video, a clock, and other portable information devices. Further, any information device other than the above-described information devices may be provided as long as it has an imaging function and a display function.
In addition, a function of character recognition processing may be provided for any device having an imaging function or a device having a display function. In this case, each device may be provided with a wireless communication interface for infrared rays or the like, and each processing of imaging, character recognition, and display may be performed via the wireless communication interface.
[0042]
Further, in the above-described embodiment, the characters recognized by the character recognition processing unit 20 are displayed on the LCD 19, but the method of displaying the characters on the LCD 19 is not limited to this. For example, when there is an image that cannot be recognized as a character by the character recognition processing unit 20, an image of a predetermined area including a character (or a graphic or the like) before the character recognition is stored in that part. You may make it display according to the character size of the outline font of the other character which recognized the character. As a result, even if the character cannot be recognized, it is possible to display the character according to the original sentence, and the user can read. In this case, it is preferable to appropriately set a threshold value for discriminating the color (background color) of the paper to be imaged in order to prevent erroneous detection of stains and the like and storage of unnecessary images.
[0043]
Further, in the above-described embodiment, characters are photographed by the digital camera 1 held in the hand, but the present invention is not limited to this. For example, the digital camera is fixed on a stand with legs and the stand is moved. Thus, the imaged characters may be displayed. Thereby, the distance between the digital camera and the paper surface can be kept constant, and furthermore, the paper surface and the lens can be kept parallel, so that the character recognition rate can be improved. Further, various pre-processing steps such as correction of inclination of digital image data can be simplified, and the processing can be speeded up.
[0044]
In the above-described embodiment, the character size of the character displayed on the LCD 19 is fixed to a predetermined character size, but the present invention is not limited to this. For example, the operation unit 14 may be provided with a size setting unit for setting the character size, and the character size of the character displayed on the LCD 19 may be determined based on the character size set in the size setting unit.
Also, instead of setting the character size, a magnification for display may be set. In this case, for example, the average size of the recognized character is detected, and the character size to be actually displayed is automatically set and displayed. Specifically, when the average character size is detected to be 9 points, if the magnification is set to 2 times, the displayed character size is automatically set to 18 points.
In these cases, if the character recognition processing unit 20 performs the outline correction processing on the character represented by the outline font, the character recognition processing unit 20 can maintain a beautiful character even if the size of the displayed character changes. Can be displayed.
[0045]
In the above-described embodiment, when characters to be displayed on the LCD 19 are moved when the mode setting switch 143 is set to the “character display mode”, the digital camera 1 itself needs to be moved. As a method of moving a character to be displayed on the LCD 19, for example, a cursor portion for moving a display character is provided in the operation section 14, and the character to be displayed is displayed in accordance with the movement amount and the movement direction instructed by the cursor portion. The character image data DMG stored in the recognition buffer 22 may be moved within the range.
[0046]
In the above-described embodiment, an outline font is used to display a recognized character, but the present invention is not limited to this. For example, a bitmap font may be used to display recognized characters. In this case, it is preferable to perform a process for reducing jaggies (jagged characters) such as an anti-aliasing process and a smoothing process.
[0047]
In the above-described embodiment, the digital image data stored in the VRAM 18 is displayed on the LCD 19; however, the display method on the LCD 19 is not limited to this. For example, the VRAM 18 is divided into two layers, and in the “character display mode”, the character display image data DMHG generated by the control unit 15 is stored in one layer of the VRAM 18, and the other layer of the VRAM 18 is stored in the other layer. The display image data DHG generated by the image processing unit 17 is stored. The operation unit 14 may be provided with a display changeover switch, and the VRAM 18 to be displayed on the LCD 19 may be changed over according to the operation performed on the display changeover switch. Thus, in the “character display mode”, an image corresponding to the character display image data DMHG in which characters are easily read and edited and an image corresponding to the display image data DHG can be alternately displayed on the LCD 19. Will be possible.
[0048]
【The invention's effect】
As described above, according to the present invention, even when characters included in a captured image are digitally enlarged, it is possible to display the characters more easily.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating a schematic configuration of a digital camera according to an embodiment.
FIG. 2 is a diagram illustrating a use state of the digital camera illustrated in FIG. 1;
FIG. 3 is a flowchart illustrating an operation example of the digital camera illustrated in FIG. 1;
FIG. 4 is a flowchart illustrating an operation example of the digital camera illustrated in FIG. 1;
FIG. 5 is a diagram illustrating a relationship between a character group stored in a character recognition buffer of the digital camera shown in FIG. 1 and a character group displayed on an LCD.
FIG. 6 is a diagram exemplifying a relationship between a character group stored in a character recognition buffer of the digital camera shown in FIG. 1 and a character group displayed on an LCD.
FIG. 7 is a diagram exemplifying a difference area when a character group stored in a character recognition buffer of the digital camera shown in FIG. 1 moves.
FIG. 8 is a diagram exemplifying an image displayed on the LCD of the digital camera shown in FIG. 1;
[Explanation of symbols]
1. Digital camera (character display device)
10: imaging unit (image generation unit)
13 ... frame buffer,
14 ... operation unit (setting unit)
15 ... control unit (display unit)
16 Flash memory,
17 ... Image processing unit,
18 ... VRAM,
19 LCD (display unit),
20: character recognition processing unit (recognition unit, display image data generation unit, pattern extraction unit, comparison unit, detection unit),
21: Character information file (pattern storage unit)
22 ... Character recognition buffer.

Claims (19)

所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成部と、
前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識部と、
所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成部と、
前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示部と、
を備えることを特徴とする文字表示装置。
An image generation unit that captures an image corresponding to a predetermined imaging region and generates image data;
A recognition unit that recognizes characters included in the image from the image data together with the two-dimensional arrangement thereof,
A display image data generation unit that generates display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font,
A display unit for extracting a part of the display image corresponding to the display image data and displaying the extracted image as an actual display image,
A character display device comprising:
請求項1記載の文字表示装置において、
複数の文字パターンを標準文字パターンとして記憶させるパターン記憶部を備え、
前記認識部は、前記画像データから文字パターンを抽出するパターン抽出部と、前記抽出された文字パターンと前記記憶された複数の標準文字パターンとを順次比較する比較部とを備え、前記比較結果に基づいて前記抽出された文字パターンに最も似ている標準文字パターンに対応する文字を前記画像に含まれる文字として認識することを特徴とする文字表示装置。
The character display device according to claim 1,
A pattern storage unit for storing a plurality of character patterns as standard character patterns,
The recognition unit includes a pattern extraction unit that extracts a character pattern from the image data, and a comparison unit that sequentially compares the extracted character pattern with the stored plurality of standard character patterns. A character display device, wherein a character corresponding to a standard character pattern most similar to the extracted character pattern is recognized as a character included in the image based on the extracted character pattern.
請求項1記載の文字表示装置において、
前記二次元配置された文字を含む二次元平面を仮定し、当該二次元平面における前記撮像領域の移動量および移動方向を検出する検出部を備え、
前記表示部は、前記検出部により検出された前記撮像領域の移動量および移動方向に応じて抽出位置を変更することを特徴とする文字表示装置。
The character display device according to claim 1,
Assuming a two-dimensional plane including the two-dimensionally arranged characters, a detection unit that detects the amount and direction of movement of the imaging region in the two-dimensional plane,
The character display device, wherein the display unit changes an extraction position according to a movement amount and a movement direction of the imaging region detected by the detection unit.
請求項1記載の文字表示装置において、
前記表示部による抽出の位置を変更指示する操作部を備え、
前記表示部は、前記操作部によりなされた指示に応じて抽出位置を変更することを特徴とする文字表示装置。
The character display device according to claim 1,
An operation unit for instructing a change in the position of extraction by the display unit,
The character display device, wherein the display unit changes an extraction position in accordance with an instruction given by the operation unit.
請求項1記載の文字表示装置において、
前記表示部は、前記実表示画像として、前記表示用画像データに対応する表示用画像のほぼ中央に位置する一部を抽出することを特徴とする文字表示装置。
The character display device according to claim 1,
The character display device, wherein the display unit extracts, as the actual display image, a part located substantially at the center of the display image corresponding to the display image data.
請求項1記載の文字表示装置において、
前記認識部により文字として認識不能な画像領域があった場合に、前記表示用画像データには、当該認識不能な画像領域に対応する画像データが格納されることを特徴とする文字表示装置。
The character display device according to claim 1,
When there is an image area that cannot be recognized as a character by the recognition unit, image data corresponding to the unrecognizable image area is stored in the display image data.
請求項6記載の文字表示装置において、
前記認識不能な画像領域に対応する画像データに基づいて、当該画像データに対応する画像を、認識された文字を表示する文字フォントの文字サイズに合わせて表示することを特徴とする文字表示装置。
The character display device according to claim 6,
A character display device, based on image data corresponding to the unrecognizable image area, displaying an image corresponding to the image data in accordance with the character size of a character font for displaying recognized characters.
請求項1記載の文字表示装置において、
前記表示用画像に含まれる文字の文字サイズあるいは倍率を設定する設定部を備え、
前記表示部は、前記設定された文字サイズあるいは倍率に対応した文字を含む表示用画像を表示させることを特徴とする文字表示装置。
The character display device according to claim 1,
A setting unit that sets a character size or a magnification of characters included in the display image,
The character display device, wherein the display unit displays a display image including characters corresponding to the set character size or magnification.
請求項1記載の文字表示装置において、
前記表示部により表示されている状態を保持することを指示する操作部を備え、
前記表示部は、前記操作部によって表示されている状態を保持することが指示された場合に、表示されている状態を保持することを特徴とする文字表示装置。
The character display device according to claim 1,
An operation unit that instructs to hold a state displayed by the display unit,
The character display device, wherein the display unit holds the displayed state when the display unit is instructed to maintain the displayed state by the operation unit.
請求項1記載の文字表示装置において、
前記文字フォントは、アウトラインフォントであることを特徴とする文字表示装置。
The character display device according to claim 1,
The character display device according to claim 1, wherein the character font is an outline font.
所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成段階と、
前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識段階と、
所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成段階と、
前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示段階と、
を備えることを特徴とする文字表示装置の制御方法。
An image generation step of capturing an image corresponding to a predetermined imaging region and generating image data;
A recognition step of recognizing characters included in the image together with the two-dimensional arrangement from the image data,
A display image data generating step of generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font,
A display step of extracting a part of the display image corresponding to the display image data and displaying it as an actual display image,
A method for controlling a character display device, comprising:
請求項11記載の文字表示装置の制御方法において、
前記二次元配置された文字を含む二次元平面を仮定し、当該二次元平面における前記撮像領域の移動量および移動方向を検出する検出段階を備え、
前記表示段階は、前記検出段階において検出された前記撮像領域の移動量および移動方向に応じて抽出位置を変更することを特徴とする文字表示装置の制御方法。
The control method for a character display device according to claim 11,
Assuming a two-dimensional plane including the two-dimensionally arranged characters, comprising a detection step of detecting the amount and direction of movement of the imaging region in the two-dimensional plane,
The method of controlling a character display device according to claim 1, wherein in the displaying step, an extraction position is changed according to a moving amount and a moving direction of the imaging region detected in the detecting step.
請求項11記載の文字表示装置の制御方法において、
前記認識段階において文字として認識不能な画像領域があった場合に、前記表示用画像データには、当該認識不能な画像領域に対応する画像データが格納され、
前記表示段階は、前記格納された認識不能な画像領域に対応する画像データに基づいて、当該画像データに対応する画像を、認識された文字を表示する文字フォントの文字サイズに合わせて表示させることを特徴とする文字表示装置の制御方法。
The control method for a character display device according to claim 11,
When there is an image area that cannot be recognized as a character in the recognition step, the display image data stores image data corresponding to the unrecognizable image area,
The display step includes displaying an image corresponding to the image data based on the stored image data corresponding to the unrecognizable image area in accordance with the character size of a character font that displays the recognized character. A method for controlling a character display device, comprising:
文字表示装置を制御するためのプログラムを記録した記録媒体であって、
コンピュータを、
所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成手段と、
前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識手段と、
所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成手段と、
前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示手段として機能させるためのプログラムを記録した記録媒体。
A recording medium recording a program for controlling a character display device,
Computer
Image generation means for capturing an image corresponding to a predetermined imaging region and generating image data,
Recognition means for recognizing characters included in the image from the image data together with their two-dimensional arrangement,
Display image data generating means for generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font,
A recording medium storing a program for functioning as display means for extracting a part of a display image corresponding to the display image data and displaying the extracted image as an actual display image.
請求項14記載の記録媒体において、
コンピュータを、
前記二次元配置された文字を含む二次元平面を仮定し、当該二次元平面における前記撮像領域の移動量および移動方向を検出する検出手段として機能させ、
前記表示手段は、前記検出手段により検出された前記撮像領域の移動量および移動方向に応じて抽出位置を変更することを特徴とするプログラムを記録した記録媒体。
The recording medium according to claim 14,
Computer
Assuming a two-dimensional plane including the two-dimensionally arranged characters, function as a detecting means for detecting the amount and direction of movement of the imaging region in the two-dimensional plane,
A recording medium in which a program is recorded, wherein the display unit changes an extraction position according to a moving amount and a moving direction of the imaging region detected by the detecting unit.
請求項14記載の記録媒体において、
前記認識手段により文字として認識不能な画像領域があった場合に、前記表示用画像データには、当該認識不能な画像領域に対応する画像データが格納され、前記表示手段は、前記格納された認識不能な画像領域に対応する画像データに基づいて、当該画像データに対応する画像を、認識された文字を表示する文字フォントの文字サイズに合わせて表示させることを特徴とするプログラムを記録した記録媒体。
The recording medium according to claim 14,
If there is an image area that cannot be recognized as a character by the recognition means, the display image data stores image data corresponding to the unrecognizable image area, and the display means stores the stored recognition data. A recording medium storing a program for displaying, on the basis of image data corresponding to an impossible image area, an image corresponding to the image data in accordance with the character size of a character font for displaying a recognized character. .
文字表示装置を制御するためのプログラムであって、
コンピュータを、
所定の撮像領域に対応する画像を撮像して画像データを生成する画像生成手段と、
前記画像データから前記画像に含まれる文字をその二次元配置とともに認識する認識手段と、
所定の文字フォントを用い前記二次元配置にしたがって前記認識された文字を配置して表示するための表示用画像データを生成する表示用画像データ生成手段と、
前記表示用画像データに対応する表示用画像の一部を抽出して実表示画像として表示させる表示手段として機能させるためのプログラム。
A program for controlling a character display device,
Computer
Image generation means for capturing an image corresponding to a predetermined imaging region and generating image data,
Recognition means for recognizing characters included in the image from the image data together with their two-dimensional arrangement,
Display image data generating means for generating display image data for arranging and displaying the recognized characters according to the two-dimensional arrangement using a predetermined character font,
A program for functioning as display means for extracting a part of a display image corresponding to the display image data and displaying the extracted image as an actual display image.
請求項17記載のプログラムにおいて、
コンピュータを、
前記二次元配置された文字を含む二次元平面を仮定し、当該二次元平面における前記撮像領域の移動量および移動方向を検出する検出手段として機能させ、
前記表示手段は、前記検出手段により検出された前記撮像領域の移動量および移動方向に応じて抽出位置を変更することを特徴とするプログラム。
The program according to claim 17,
Computer
Assuming a two-dimensional plane including the two-dimensionally arranged characters, function as a detecting means for detecting the amount and direction of movement of the imaging region in the two-dimensional plane,
The program, wherein the display unit changes an extraction position according to a moving amount and a moving direction of the imaging region detected by the detecting unit.
請求項17記載のプログラムにおいて、
前記認識手段により文字として認識不能な画像領域があった場合に、前記表示用画像データには、当該認識不能な画像領域に対応する画像データが格納され、前記表示手段は、前記格納された認識不能な画像領域に対応する画像データに基づいて、当該画像データに対応する画像を、認識された文字を表示する文字フォントの文字サイズに合わせて表示させることを特徴とするプログラム。
The program according to claim 17,
If there is an image area that cannot be recognized as a character by the recognition means, the display image data stores image data corresponding to the unrecognizable image area, and the display means stores the stored recognition data. A program for displaying, on the basis of image data corresponding to an impossible image area, an image corresponding to the image data in accordance with the character size of a character font for displaying recognized characters.
JP2003095421A 2003-03-31 2003-03-31 Character display device, its control method, recording medium and program Pending JP2004005535A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003095421A JP2004005535A (en) 2003-03-31 2003-03-31 Character display device, its control method, recording medium and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003095421A JP2004005535A (en) 2003-03-31 2003-03-31 Character display device, its control method, recording medium and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2001101637A Division JP2002298078A (en) 2001-03-30 2001-03-30 Character display, its control method, record medium, and program

Publications (1)

Publication Number Publication Date
JP2004005535A true JP2004005535A (en) 2004-01-08

Family

ID=30437930

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003095421A Pending JP2004005535A (en) 2003-03-31 2003-03-31 Character display device, its control method, recording medium and program

Country Status (1)

Country Link
JP (1) JP2004005535A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006331216A (en) * 2005-05-27 2006-12-07 Sharp Corp Image processor, processing object range designation method in image processor, image processing range designation program and recording medium for recording image processing range designation program
US8144944B2 (en) 2007-08-14 2012-03-27 Olympus Corporation Image sharing system and method
JP2020155912A (en) * 2019-03-20 2020-09-24 国立大学法人福井大学 Illumination device, illumination method, and illumination system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006331216A (en) * 2005-05-27 2006-12-07 Sharp Corp Image processor, processing object range designation method in image processor, image processing range designation program and recording medium for recording image processing range designation program
US8144944B2 (en) 2007-08-14 2012-03-27 Olympus Corporation Image sharing system and method
JP2020155912A (en) * 2019-03-20 2020-09-24 国立大学法人福井大学 Illumination device, illumination method, and illumination system

Similar Documents

Publication Publication Date Title
JP4341629B2 (en) Imaging apparatus, image processing method, and program
US20100302595A1 (en) Image Reproducing Apparatus And Imaging Apparatus
US8582891B2 (en) Method and apparatus for guiding user with suitable composition, and digital photographing apparatus
KR101455018B1 (en) Image capturing apparatus, image capturing method, and computer-readable recording medium
WO2006112490A1 (en) Electronic device
JPWO2008012905A1 (en) Authentication apparatus and authentication image display method
JP2007074579A (en) Image processor, and program
JP2007266667A (en) Camera-equipped mobile apparatus, control method thereof, and photographing support method thereof
US11049303B2 (en) Imaging apparatus, and operation program and operation method for imaging apparatus
CN112995500A (en) Shooting method, shooting device, electronic equipment and medium
EP4287610A1 (en) Focusing method and apparatus, electronic device, and medium
CN103019537A (en) Image preview method and image preview device
JP2007027971A (en) Photographing apparatus, control method thereof, program, and recording medium
JPH11331693A (en) Method for processing picture and its device
JP2006094082A (en) Image photographing device, and program
EP2200275B1 (en) Method and apparatus of displaying portrait on a display
JP2017143354A (en) Image processing apparatus and image processing method
JP2009253925A (en) Imaging apparatus and imaging method, and imaging control program
JP2002298078A (en) Character display, its control method, record medium, and program
JP4632417B2 (en) Imaging apparatus and control method thereof
JP2004005535A (en) Character display device, its control method, recording medium and program
JP4835713B2 (en) Image processing apparatus and computer program
JP2005055973A (en) Personal digital assistant
KR20070117104A (en) Appratus and method for composing image in portable terminal
US20230088309A1 (en) Device and method for capturing images or video