JPWO2019021600A1 - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
JPWO2019021600A1
JPWO2019021600A1 JP2019532399A JP2019532399A JPWO2019021600A1 JP WO2019021600 A1 JPWO2019021600 A1 JP WO2019021600A1 JP 2019532399 A JP2019532399 A JP 2019532399A JP 2019532399 A JP2019532399 A JP 2019532399A JP WO2019021600 A1 JPWO2019021600 A1 JP WO2019021600A1
Authority
JP
Japan
Prior art keywords
character
image data
unit
instruction
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019532399A
Other languages
English (en)
Other versions
JP6816828B2 (ja
Inventor
ジュニア ニクソン・セガーラ
ジュニア ニクソン・セガーラ
レイ・カガータン ヴィナルド
レイ・カガータン ヴィナルド
アイリッシュ・ナバロ
ジェフティ・ネガパタン
ポール・ディングル ジョン
ポール・ディングル ジョン
ジェイ・パバラーテ
ジョバンニ ジョン・ブルゴス イエス
ジョバンニ ジョン・ブルゴス イエス
デニエル・モリナ
メイ・キンボ シーラ
メイ・キンボ シーラ
ロッドネイ・オマガヨン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Publication of JPWO2019021600A1 publication Critical patent/JPWO2019021600A1/ja
Application granted granted Critical
Publication of JP6816828B2 publication Critical patent/JP6816828B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00331Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus performing optical character recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/12Detection or correction of errors, e.g. by rescanning the pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/26Techniques for post-processing, e.g. correcting the recognition result
    • G06V30/262Techniques for post-processing, e.g. correcting the recognition result using context analysis, e.g. lexical, syntactic or semantic context
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/409Edge or detail enhancement; Noise or error suppression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0094Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Character Discrimination (AREA)
  • Character Input (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

画像形成装置(1)は、原稿を光学的に読み取って画像データを取得する画像読取部(10)と、画像データ中の文字パターンを文字として認識する文字認識部(102)と、文字認識部(102)が認識できなかった文字パターンについて、文字認識部(102)により認識されたその前後の文字から文法的規則に則って当該文字パターンが表す文字を推測する文字推測部(103)と、文字認識部(102)により認識された各文字及び文字推測部(103)により推測された各文字を画像データ中の各文字パターンの配置位置と同じ順に配置して再構成画像データを生成する画像データ再構成部(104)とを備える。

Description

本発明は画像処理装置に関し、特に、不鮮明な文字が記載された原稿をスキャンして得られた原稿画像に含まれる文字を鮮明にする技術に関する。
印刷された文字を光学的に読み取って文字コードに変換するOCR(Optical Character Recognition)技術が公知である。OCRでは、原稿の画質が悪くて読取対象の文字が薄かったりかすれていたり、あるいは文字の一部が欠けていたりすると、正しく文字認識できないという問題がある。下記特許文献1には、文書画像等における文字パターンかすれを修復し、文字認識の精度を向上させる文字パターン修復方法として、文字パターンから文字線の先端にある端点を検出し、かすれにより生じた2つの端点からなる端点対を選択し、該選択された端点対を接続して文字パターンのかすれを修復する文字パターン修復方法が記載されている。
特開平6−52356号公報
上記特許文献1に記載の技術の場合、読み取った画像が示す文字パターンがかすれている場合に、当該かすれを修復して文字認識の精度を向上させることが可能である。例えば、特許文献1に記載の技術では、文字パターンの濃度が薄いことを原因としてかすれが生じている場合には、原稿読取装置で原稿の読取濃度を濃くしてスキャンすることで原稿中の文字を濃くすることでかすれを修復する。しかしながら、原稿中の文字の一部が欠けている場合にはいくら読取濃度を濃くしてもかすれは修復できず文字の判別が難しい。このように、上記特許文献1に記載の技術では、かすれが修復できずに文字認識の精度が低下している場合に文字認識精度を向上させることは困難である。
本発明は、上記の事情に鑑みてなされたものであり、不鮮明な文字が記載された原稿をスキャンして得られた原稿画像に含まれる文字に生じたかすれを修復できない場合であっても、当該原稿画像に含まれる文字を鮮明にすることを目的とする。
本発明の一局面に係る画像処理装置は、原稿を光学的に読み取って画像データを取得する画像読取部と、前記画像データ中の文字パターンを文字として認識する文字認識部と、前記文字認識部が認識できなかった文字パターンについて、前記文字認識部により認識されたその前後の文字から文法的規則に則って当該文字パターンが表す文字を推測する文字推測部と、前記文字認識部により認識された各文字、及び前記文字推測部により推測された各文字を、前記画像データ中の各文字パターンの配置順と同じ順に配置して再構成画像データを生成する画像データ再構成部と、を備えたものである。
本発明によれば、不鮮明な文字が記載された原稿をスキャンして得られた原稿画像に含まれる文字に生じたかすれを修復できない場合であっても、当該原稿画像に含まれる文字を鮮明にすることができる。
本発明の一実施形態に係る画像処理装置の一例としての画像形成装置の外観を示す斜視図である。 本発明の一実施形態に係る画像処理装置の一例としての画像形成装置の内部構成を示すブロック図である。 不鮮明な文字パターンの文字認識及び文字推測の一例を説明する図である。 不鮮明な文字パターンの文字認識及び文字推測の別例を説明する図である。 画像読取部により取得された画像データ及びその全体から生成された再構成画像データの例を示す図である。 画像読取部により取得された画像データ及びその一部から生成された再構成画像データの例を示す図である。 本発明の一実施形態に係る画像処理装置の一例としての画像形成装置による画像データの文字鮮明化処理の流れを示すフローチャートである。 図5Aに続くフローチャートである。 画像データの文字鮮明化範囲を選択するための選択メニュー画面の例を示す図である。 画像データの領域指定指示中の画面表示例を示す図である。 再構成画像データの処理メニュー画面の例を示す図である。 再構成画像データのプレビュー画面の例を示す図である。 再構成画像データの編集中の画面表示例を示す図である。
以下、本発明の一実施形態に係る画像処理装置の一例としての画像形成装置について図面を参照して説明する。図1は、画像形成装置の外観を示す斜視図である。図2は、画像形成装置の内部構成を示すブロック図である。
画像形成装置1は、ファクシミリ通信機能、コピー機能、プリンター機能、及びスキャナー機能等の複数の機能を兼ね備えた複合機である。図1に示すように、画像形成装置1は、装置本体2と、装置本体2の上方に配置された画像読取部10と、画像読取部10と装置本体2との間に設けられた連結部3とから概略構成される。
画像読取部10は、原稿搬送部11と、原稿搬送部11により搬送されてくる原稿又は不図示のコンタクトガラスに載置された原稿を光学的に読み取るスキャナーとを有するADF(Auto Document Feeder)である。画像読取部10は、原稿を1枚ずつ読み取ることで保存又は画像形成対象となる画像データを取得する。
装置本体2の内部には、画像形成部20、給紙部30、画像メモリー40、記憶部50、及び通信部60等が収容されている。
画像メモリー40は、画像読取部10によって読み取られた画像データを一時的に記憶する領域である。
画像形成部20は、画像メモリー40に記憶されている画像データを読み出し、当該データを用いて給紙部30から供給される用紙に画像を形成(印刷)する。印刷済みの用紙は、排出トレイ4に排出される。
記憶部50は、HDD(Hard Disk Drive)等の大容量の記憶装置である。
通信部60は、不図示のLANチップ等の通信モジュールを備える通信インターフェイスである。画像形成装置1は、ネットワークを介して他のPC(Personal Computer)等と接続されており、通信部60により接続されたPC等との間でデータの送受信を行う。
装置本体2の前面側には、表示部70及び操作部80が配置されている。表示部70は、液晶ディスプレイ(LCD:Liquid Crystal Display)又は有機EL(OLED:Organic Light-Emitting Diode)ディスプレイを含んで構成される。表示部70には、画像形成装置1の動作を指示するための操作画面等が表示される。
操作部80は、例えば、印刷ジョブ等の実行を指示するためのスタートキー、操作画面を構成するGUI(Graphical User Interface)に対して確定操作を行う決定キー(エンターキー)、数値入力を行うための数値入力キー等を備え、例えば表示部70に表示される画面に対する操作をユーザーから受け付ける。
画像形成装置1は、更に、制御ユニット100を備えている。制御ユニット100は、プロセッサー、RAM(Random Access Memory)、ROM(Read Only Memory) 及び専用のハードウェア回路等から構成される。プロセッサーは、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、又はASIC(Application Specific Integrated Circuit)等である。制御ユニット100は、上記のROM又は記憶部50に記憶された原稿読取処理プログラム等の制御プログラムが上記のプロセッサーに実行されることにより、制御部101、文字認識部102、文字推測部103、画像データ再構成部104、領域指定受付部105、編集指示受付部106、及び画像データ編集部107として機能する。なお、制御ユニット100の上記の各構成は、前述の原稿読取処理プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。
制御部101は、画像形成装置1の全体的な動作制御を司る。制御部101は、画像読取部10、画像形成部20、給紙部30、画像メモリー40、記憶部50、通信部60、表示部70、及び操作部80等と接続されており、接続されている上記各機構の動作制御及び、各機構との間での信号又はデータの送受信を行う。
制御部101は、例えば、表示部70の制御に関して、操作部80を通じてユーザーから受け付けた指示に従って、画像読取部10により取得された画像データ、又は画像データ再構成部104により生成された再構成画像データを択一的に表示部70に表示させる。
文字認識部102は、OCR(Optical Character Recognition)技術を用いて、画像読取部10により取得された画像データ中に含まれる各文字を示す画像、すなわち文字パターンを、文字(キャラクター)として認識する。文字認識部102が認識する文字は、例えば、英文字、数字、記号、漢字、ひらがな、かたかな、等である。なお、文字認識部102は、文字パターンの濃度が多少薄くても、あるいは文字パターンの一部に欠損があっても(かすれが生じていても)、文字パターンの特徴を捉えて文字として認識する。
ただし、文字パターンの濃度が極端に薄い、あるいは文字パターンの欠損(かすれ)部分が多いといった場合には、文字認識部102は、当該文字パターンが表す文字を認識できない場合がある。文字推測部103は、文字認識部102が認識できなかった文字パターンについて、文字認識部102により認識されたその前後の文字から文法的規則に則って、当該文字パターンが表す文字の候補を判定する。すなわち、文字推測部103は、認識不可の文字パターンについて、文字認識部102により認識されたその前後の文字から、当該文字パターンが表す文字を推測する。
図3Aは、不鮮明な文字パターンの文字認識及び文字推測の一例を説明する図である。例えば、ある原稿をスキャンして得られた画像データにおいて、ある文字パターン群mj1が不鮮明であったとする。そして、文字認識部102は、これら文字パターン群mj1から「q」「u」「c」「k」の文字を認識でき、他の文字については文字認識できなかったとする(文字パターンの存在は認識したが、文字までは認識できない)。この場合、文字推測部103は、文字認識部102が文字認識できなかった未知の文字の前において文字「q」「u」が認識され、後において文字「c」「k」が文字認識部102により認識されているとすると、文法的規則に則って、先頭2文字が「q」「u」であり、末尾2文字が「c」「k」である英単語「quick」及び「quack」を、文字パターン群mj1が示す文字として抽出し、上記未知の文字としての候補が「i」又は「a」であると判定する。
また、文字推測部103は、文字認識部102により認識できない文字パターンが2つ以上連続する場合には、当該各文字パターンについて母音及び子音のいずれであるかを判定し、母音及び子音にそれぞれ異なる記号を用いて、認識できない文字パターンを表す。図3Bは、この場合における不鮮明な文字パターンの文字認識及び文字推測の例を説明する図である。例えば、ある原稿をスキャンして得られた画像データにおいて、ある文字パターン群mj2が不鮮明であったとする。そして、文字認識部102は、これら不鮮明な文字パターンから「q」「u」「k」については文字認識でき、他の文字パターンについては文字認識できなかったとする(文字パターンの存在は認識したが、文字までは認識できない)。この場合、文字推測部103は、文字認識部102が文字認識できなかった未知の2文字の前において文字「q」が文字認識部102により認識され、後において文字「c」「k」が認識されていることから、文法的規則に則って、文字認識できなかった未知の2文字の前に文字「q」があり、後ろにおいて文字「c」「k」があるという条件を満たす単語として「quick」及び「quack」を抽出し、ここから、文字認識できなかった未知の2文字の候補として「ic」及び「ac」を更に抽出する。そして、文字推測部103は、当該「ic」については「i」が母音、「c」が子音であると判定し、当該「ac」については、「a」が母音、「c」が子音であると判定する。そして、文字推測部103は、母音を「*」で、子音を「#」でそれぞれ表す。このため、画像データ再構成部104により、文字パターン群mj2は「qu*#k」として表される。なお、文字推測部103による母音及び子音の上記判定は一例である。
画像データ再構成部104は、文字認識部102により認識された各文字、及び文字推測部103により推測された各文字を、画像読取部10により取得された画像データ中の各文字パターンの配置順と同じ順に配置して再構成画像データを生成する。画像データ再構成部104は、例えば、当該再構成画像データを、キャラクターコードとjpeg等の画像データの両方により生成する。
図4Aは、画像読取部10により取得された画像データ及びその全体から生成された再構成画像データの例を示す図である。画像読取部10により取得された画像データ中の各文字パターンが図4Aに文字パターン群mj3として示すように不鮮明であったとしても、文字認識部102及び文字推測部103により各文字パターンを表す文字が認識及び推測されると、図4Aに再構成画像データmj4として示すように、画像データ再構成部104により、不鮮明な画像データが鮮明な再構成画像データに作り替えられる。制御部101は、生成された再構成画像データを記憶部50に保存させ、必要に応じて記憶部50から読み出して画像形成部20に印刷させる。
領域指定受付部105は、表示部70に画像読取部10により取得された画像データが表示されているときに、ユーザーから、上記認識、推測、及び、再構成画像データの生成の処理の対象とする画像データの領域指定指示を受け付ける。領域指定受付部105が領域指定を受け付けた場合、画像データにおいて当該指定された領域に対して、文字認識部102及び文字推測部103が認識及び推測を行い、この認識及び推測に基づいて、画像データ再構成部104が再構成画像データを生成する。例えば、表示部70には、タッチパネル(操作部80として機能)が備えられ、ユーザーが表示部70の表示画面上における、画像読取部10により取得された画像データ表示部分で、表示画面に指をタッチさせたままスライドさせて直線TSに沿ってスライド操作を行うと、タッチパネルが当該スライド操作による軌跡を示す情報を領域指定受付部105に送り、当該直線TSを対角線とする領域Rが、領域指定受付部105により、上記認識、推測、及び、再構成画像データの生成の処理対象となる領域として受け付けられる。
図4Bは、画像読取部10により取得された画像データ及びその一部から生成された再構成画像データの例を示す図である。画像読取部10により取得された画像データにおいて、上記のようにしてユーザーにより領域が指定されると、文字認識部102及び文字推測部103は、当該指定された領域内に存在する各文字パターンについて文字認識及び文字推測を行い、画像データ再構成部104は、文字認識部102及び文字推測部103により認識及び推測された文字を並べて、当該指定された領域に存在する各文字パターンにより構成される再構成画像データを生成する。
編集指示受付部106は、表示部70に画像データ再構成部104により生成された再構成画像データが表示されているときに、ユーザーから再構成画像データに対する編集指示を受け付ける。
文字認識部102により認識された文字及び/又は文字推測部103により推測された文字が誤っている場合、あるいは文字認識部102により認識できなかった文字パターンが2つ以上連続して文字推測部103により推測された文字が記号で表されている場合、ユーザーは再構成画像データを修正したい場合がある。編集指示受付部106は、ユーザーから再構成画像データに対する編集指示を受け付ける。具体的には、制御部101が、編集対象とする再構成画像データ及びソフトキーボードを表示部70に表示させ、編集指示受付部106は、再構成画像データにおける編集対象とする文字パターン部分へのユーザーによるタッチ操作に基づいて、上記タッチパネルにより、編集対象とする文字パターンを指定する編集対象指定指示を編集指示として受け付ける。更に、編集指示受付部106は、ユーザーによるソフトキーボードへのタッチ操作に基づいて、編集対象とする文字パターンに代えて用いる文字を指定する入替文字指定指示を、更なる編集指示として、上記タッチパネルにより受け付ける。
画像データ編集部107は、編集指示受付部106が受け付けた上記各編集指示に従って再構成画像データを編集する。例えば、画像データ編集部107は、上記編集対象指定指示により示される文字パターンに対応する上記キャラクターコードを、上記入替文字指定指示により示される文字を示すキャラクターコードに入れ替える編集処理を行う。画像データ再構成部104は、画像データ編集部107による当該編集処理後の内容で、再構成画像データを生成する。画像データ再構成部104は、当該編集処理後の内容で、jpeg等の画像データを再度生成する。
次に、画像読取部10により取得された画像データから文字を鮮明にした再構成画像データを生成する処理について説明する。図5A及び図5Bは、画像形成装置1による画像データの文字鮮明化処理の流れを示すフローチャートである。
まず、画像読取部10が、原稿を光学的に読み取って画像データを取得する(S1)。原稿の画像データが取得されると、制御部101が、表示部70に、画像データの文字鮮明化範囲の選択を受け付けるための選択メニュー画面D1を表示させる(S2)。
図6は、画像データの文字鮮明化範囲を選択するための選択メニュー画面の例を示す図である。例えば、図6に例を示すように、制御部101は、選択メニュー画面D1において、文字鮮明化範囲として画像データの全体を選択する指示を受け付けるためのドキュメント単位ボタン71と、画像データの一部領域を選択する指示を受け付けるための領域単位ボタン72とを表示させる。ユーザーがドキュメント単位ボタン71をタッチ操作すると、上記タッチパネルにより、文字鮮明化範囲として画像データの全体を選択する指示が領域指定受付部105に受け付けられる。ユーザーが領域単位ボタン72をタッチ操作すると、上記タッチパネルにより、文字鮮明化範囲として画像データの一部領域を選択する指示が領域指定受付部105に受け付けられる。
ここで、領域指定受付部105に、文字鮮明化範囲として画像データの全体を選択する指示が受け付けられると(S3でYES)、画像データの全体が文字鮮明化(上記認識、推測、及び、再構成画像データの生成の処理)の対象とされる。
一方、領域指定受付部105に、文字鮮明化範囲として画像データの一部領域を選択する指示が受け付けられた場合(S3でNO)、制御部101は、表示部70に、S1で取得された画像データを示す表示画面D2を表示させる(S5)。この状態で、領域指定受付部105が、ユーザーによる表示部70の表示画面上における上記スライド操作に基づいて、タッチパネルを介して、上記認識、推測、及び画像データ再構成の処理対象とする領域を受け付ける(S6)。
図7は、画像データの領域指定指示中の画面表示例を示す図である。例えば、図7に示すように、制御部101が、表示部70に、S1で取得された画像データを表示させている状態で、ユーザーが表示部70の表示画面上で指をタッチさせたままスライドさせて直線TSに沿ってスライド操作を行うと、タッチパネルが当該スライド操作による軌跡を示す情報を領域指定受付部105に送り、当該直線TSを対角線とする領域Rが、文字鮮明化範囲73として、領域指定受付部105により受け付けられる。
このようにして、S1で取得された画像データにおける文字鮮明化範囲がS3又はS6で受け付けられると、当該受け付けられた範囲において、文字認識部102が、画像データ中の文字パターンを文字として認識し、文字推測部103が、文字認識部102により認識できなかった文字パターンが表す文字を推測する(S8)。そして、画像データ再構成部104が、文字認識部102により認識された各文字及び文字推測部103により推測された各文字を、画像読取部10により取得された画像データ中の各文字パターンの配置順と同じ順に配置して再構成画像データを生成する(S9)。
上記のように再構成画像データが生成されると、制御部101は、表示部70に、再構成画像データの処理メニューを示す処理メニュー画面D3(図8)を表示させる(S10)。図8は、再構成画像データの処理メニュー画面D3の例を示す図である。例えば、図8に示すように、制御部101は、表示部70に、再構成画像データをプレビューさせるプレビュー指示を受け付けるためのプレビューボタン74と、再構成画像データを印刷する印刷指示を受け付けるための印刷ボタン75が表示される。ユーザーは、プレビューボタン74又は印刷ボタン75をタッチ操作することで、再構成画像データのプレビュー又は印刷を行うことができる。
ユーザーによる印刷ボタン75の操作で、タッチパネルを介して、制御部101に印刷指示が受け付けられると(S11でYES)、制御部101は、画像形成部20に、S9で生成された再構成画像データの印刷を行わせる(S12)。一方、ユーザーによるプレビューボタン74の操作で、タッチパネルを介して、制御部101にプレビュー指示が受け付けられると(S11でNO、S13でYES)、制御部101は、表示部70に、S9で生成された再構成画像データを表示させる(S14)。
図9は、再構成画像データのプレビュー画面D5の例を示す図である。例えば、制御部101は、図9に示すように、再構成画像データのプレビュー画面D5において、再構成画像データを編集する編集指示を受け付けるための編集指示ボタン76を表示させる。ユーザーが編集指示ボタン76をタッチ操作すると、タッチパネルを介して、編集指示受付部106に、編集開始指示が受け付けられる。
このように再構成画像データの編集開始指示が受け付けられると(S15でYES)、図10に例を示すように、編集指示受付部106が、表示部70に、ソフトキーボード78を有する編集指示受付画面D6を表示させ、再構成画像データの編集指示を受け付け可能な状態とする。画像データ編集部107は、この状態において編集指示受付部106が受け付けた編集指示に従って、再構成画像データを編集する(S16)。
以上のように、本実施形態によれば、不鮮明な文字を含む原稿をスキャンし、読み取った文字の画像に生じたかすれを修復できない場合であっても、上述した上記認識、推測、及び、再構成画像データの生成の処理により、当該読取で得た原稿画像に含まれる文字を鮮明にすることができる。また、本実施形態によれば、文字を鮮明化する範囲をユーザーが自由に選択することができる。さらに、ユーザーは、文字を鮮明化して得られた再構成画像データを自由に編集することも可能である。
<その他の変形例>
上記の実施の形態では、画像処理装置の一例として画像形成装置を示したが,本発明は必ずしもこの場合に限定されない。本発明の一実施形態に係る画像処理装置は、画像形成装置の他、例えば、スキャナー装置又はファクシミリ機であってもよい。
また、上記の実施の形態で説明した原稿読取処理プログラムをコンピューター読み取り可能な非一時的な記録媒体、例えば、ハードディスク、CD-ROM、DVD-ROM、半導体メモリー等に記録されたものとしてもよい。この場合、当該原稿読取処理プログラムを記録したコンピューター読み取り可能な非一時的な記録媒体が、本発明の一実施形態となる。

Claims (6)

  1. 原稿を光学的に読み取って画像データを取得する画像読取部と、
    前記画像データ中の文字パターンを文字として認識する文字認識部と、
    前記文字認識部が認識できなかった文字パターンについて、前記文字認識部により認識されたその前後の文字から文法的規則に則って当該文字パターンが表す文字を推測する文字推測部と、
    前記文字認識部により認識された各文字、及び前記文字推測部により推測された各文字を、前記画像データ中の各文字パターンの配置順と同じ順に配置して再構成画像データを生成する画像データ再構成部と、を備えた画像処理装置。
  2. 前記文字推測部は、前記文字認識部が認識できなかった文字パターンが2つ以上連続する場合、当該各文字パターンについて母音及び子音のいずれであるかを判定し、母音及び子音とで異なる記号を用いて当該各文字パターンを表す請求項1に記載の画像処理装置。
  3. 表示部と、
    前記表示部に前記再構成画像データを表示させる制御部と、
    前記表示部に前記再構成画像データが表示されているときに、ユーザーから前記再構成画像データに対する編集指示を受け付ける編集指示受付部と、
    前記編集指示受付部が受け付けた編集指示に従って前記再構成画像データを編集する画像データ編集部と、を備えた請求項1に記載の画像処理装置。
  4. 前記制御部は、前記表示部に前記画像データ又は前記再構成画像データを択一的に表示させ、
    前記表示部に前記画像データが表示されているときに、ユーザーから前記再構成画像データの生成対象となる前記画像データの領域指定指示を受け付ける領域指定受付部を更に備え、
    前記画像データ再構成部は、前記領域指定受付部が受け付けた領域指定指示が示す前記画像データの一部領域について、前記再構成画像データを生成する請求項3に記載の画像処理装置。
  5. 前記制御部は、前記画像読取部によって前記画像データが取得されると、前記表示部に、前記画像データの文字鮮明化範囲の選択を受け付けるための画面を表示させ、
    前記制御部は、前記領域指定受付部によって、前記文字鮮明化範囲として前記画像データの一部領域を選択する指示が受け付けられた場合、前記表示部に、前記領域指定指示を受け付けるために前記画像データを表示させる、請求項4に記載の画像処理装置。
  6. 前記制御部は、前記領域指定受付部によって、前記文字鮮明化範囲として前記画像データの全体領域を選択する指示が受け付けられた場合、前記表示部に、前記領域指定指示を受け付けるために前記画像データを表示させない、請求項5に記載の画像処理装置。
JP2019532399A 2017-07-24 2018-05-21 画像処理装置 Active JP6816828B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017142989 2017-07-24
JP2017142989 2017-07-24
PCT/JP2018/019495 WO2019021600A1 (ja) 2017-07-24 2018-05-21 画像処理装置

Publications (2)

Publication Number Publication Date
JPWO2019021600A1 true JPWO2019021600A1 (ja) 2020-03-26
JP6816828B2 JP6816828B2 (ja) 2021-01-20

Family

ID=65039612

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019532399A Active JP6816828B2 (ja) 2017-07-24 2018-05-21 画像処理装置

Country Status (3)

Country Link
US (1) US10887487B2 (ja)
JP (1) JP6816828B2 (ja)
WO (1) WO2019021600A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102226843B1 (ko) * 2019-02-26 2021-03-12 주식회사 핀그램 오브젝트 검출 시스템 및 그 방법
JP7408313B2 (ja) * 2019-08-13 2024-01-05 キヤノン株式会社 画像処理装置、その制御方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0795337A (ja) * 1993-09-21 1995-04-07 Kyocera Corp ファクシミリ装置
JPH1198292A (ja) * 1997-09-22 1999-04-09 Ricoh Co Ltd ファクシミリ装置
JP2015170129A (ja) * 2014-03-06 2015-09-28 株式会社東芝 認識装置、認識方法およびプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3272776B2 (ja) 1992-07-28 2002-04-08 株式会社日立製作所 文字パターン認識方法
JP3689455B2 (ja) * 1995-07-03 2005-08-31 キヤノン株式会社 情報処理方法及び装置
JP3411472B2 (ja) * 1997-05-30 2003-06-03 富士通株式会社 パターン抽出装置
JP4364107B2 (ja) * 2004-11-11 2009-11-11 株式会社日立製作所 ネットワーク機器の構成情報管理方法、管理装置及び管理システム
TW201407385A (zh) * 2012-08-15 2014-02-16 Arphic Technology Co Ltd 於嵌入式設備處理字串的方法
JP2014131257A (ja) * 2012-11-27 2014-07-10 Ricoh Co Ltd 画像補正システム、画像補正方法及びプログラム
JP6627746B2 (ja) * 2016-12-28 2020-01-08 京セラドキュメントソリューションズ株式会社 画像形成装置及び画像形成システム
JP6880763B2 (ja) * 2017-01-19 2021-06-02 株式会社リコー 情報解析システム、情報解析方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0795337A (ja) * 1993-09-21 1995-04-07 Kyocera Corp ファクシミリ装置
JPH1198292A (ja) * 1997-09-22 1999-04-09 Ricoh Co Ltd ファクシミリ装置
JP2015170129A (ja) * 2014-03-06 2015-09-28 株式会社東芝 認識装置、認識方法およびプログラム

Also Published As

Publication number Publication date
US10887487B2 (en) 2021-01-05
WO2019021600A1 (ja) 2019-01-31
JP6816828B2 (ja) 2021-01-20
US20200177762A1 (en) 2020-06-04

Similar Documents

Publication Publication Date Title
JP5699623B2 (ja) 画像処理装置、画像処理システム、画像処理方法、および、プログラム
US8508795B2 (en) Information processing apparatus, information processing method, and computer program product for inserting information into in image data
JP4757131B2 (ja) 画像合成装置、画像合成方法、およびプログラム
JP5672953B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP2015103113A (ja) 画像形成装置、テキストデータの埋め込み方法及び埋め込みプログラム
JP5066977B2 (ja) 画像処理装置、画像形成装置、及びプログラム
US20220319215A1 (en) Image processing method, device, electronic apparatus, and storage medium
JP6816828B2 (ja) 画像処理装置
JP2003209643A (ja) 画像処理装置
JP4419893B2 (ja) 画像処理装置及び画像処理方法
JP6593303B2 (ja) 問題作成装置、問題作成方法、及び画像形成装置
JP7379876B2 (ja) 文字認識装置、文書ファイル生成方法、文書ファイル生成プログラム
JP7268389B2 (ja) 情報処理装置及びプログラム
JP2006093917A (ja) 画像読取装置および画像処理装置、画像形成装置
JP2001052110A (ja) 文書処理方法、文書処理プログラムを記録した記録媒体及び文書処理装置
JP4941157B2 (ja) ぬりえ製造装置、ぬりえ製造方法及びそのプログラム
JP6394579B2 (ja) 画像読取装置及び画像形成装置
JP4152927B2 (ja) 画像処理装置、画像形成装置、処理原稿検索方法、処理原稿検索プログラム、記録媒体
JP2018077794A (ja) 画像処理装置、及び画像形成装置
JP7409102B2 (ja) 情報処理装置及び画像形成装置
JP2019153230A (ja) 情報処理装置及び情報処理プログラム
US20240062567A1 (en) Learning Image Generation Apparatus, Learning Image Generation Method, And Non-Transitory Computer-Readable Recording Medium
JP7497620B2 (ja) 文書データ生成装置、画像形成装置、及び文書データ生成プログラム
JP2022124209A (ja) 画像処理装置
JP2021117609A (ja) 画像処理装置、及びプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191127

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201124

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201207

R150 Certificate of patent or registration of utility model

Ref document number: 6816828

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150