JP5262869B2 - 画像処理システム、画像処理サーバ、mfp及び画像処理方法 - Google Patents

画像処理システム、画像処理サーバ、mfp及び画像処理方法 Download PDF

Info

Publication number
JP5262869B2
JP5262869B2 JP2009059832A JP2009059832A JP5262869B2 JP 5262869 B2 JP5262869 B2 JP 5262869B2 JP 2009059832 A JP2009059832 A JP 2009059832A JP 2009059832 A JP2009059832 A JP 2009059832A JP 5262869 B2 JP5262869 B2 JP 5262869B2
Authority
JP
Japan
Prior art keywords
image processing
image
barcode
retry
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009059832A
Other languages
English (en)
Other versions
JP2010211738A (ja
Inventor
敏雄 穐山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2009059832A priority Critical patent/JP5262869B2/ja
Priority to US12/659,157 priority patent/US8333327B2/en
Publication of JP2010211738A publication Critical patent/JP2010211738A/ja
Application granted granted Critical
Publication of JP5262869B2 publication Critical patent/JP5262869B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00334Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus processing barcodes or the like

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Facsimiles In General (AREA)

Description

本発明は、スキャナ、デジタルカメラ、ファクシミリなどの画像入力装置から入力された画像の中の任意の位置に配置された任意の種類のバーコードの位置、座標の検出及び検出されたバーコードの認識方法に関する。
バーコードや2次元コードは今や、様々な商品にも表示されているほど一般的な存在となっており、スーパーマーケットやコンビニエンスストアのレジスタや携帯電話端末などにその読み取り装置が設けられている。なお、以下の説明においては、1次元及び2次元のコードの両方を含めて単に「バーコード」と表記する。
一方、オフィスにおけるバーコードと言えば、運送業などの一部の業種では、業務管理、在庫管理、電子データとの紐付け・検索・管理などのために利用されている。
そのような動向を受けて、事務用紙にもバーコードを付け、専用のバーコードリーダではなくコンピュータ用のスキャナで読み取って電子管理と連携させるというニーズも増えている。
コンピュータ用のスキャナでバーコードの位置を検出・認識することに関する技術として、特許文献1に開示される「バーコード認識装置」がある。
また、バーコードの認識ミスを減らす方法に関する技術として、特許文献2に開示される「移動体通信端末、その撮像制御方法およびプログラム」には、バーコード認識に失敗した場合に、1サイズ大きく変倍してバーコードを認識する方法が開示されている。
特許文献2に記載の発明は、バーコード認識率の向上を試みるものであるが、単純に拡大変倍することでバーコード認識率が向上することはまれであり、バーコード認識率を向上させる効果は小さい。又は、限定された用途でなければ効果が無い。また、画像サイズが大きくなると処理に時間がかかってしまう。
バーコードはその内容自体が規格化されており、画像内容もシンプルであるため、OCR(活字・手書き文字認識)に比べれば確実に認識できる要素は大きい。
しかし、実際には次のような要因で理想的な状態で運用できないことも多い。
・例えば運送業などで紙を持ち運び中の汚れ、折れ曲がりなど。
・プリンタの特性(トナー盛り、インク滲みなど)で黒バーが太くなり、白黒の比率が変わる。
・スキャナの読み取り精度(機械的、光学的)による揺らぎ、濃度による黒の太り・痩せなどが発生する。
・濃い目にスキャンすることにより黒バーの太りやノイズが発生する。
・プリンタやスキャナなどの機器の経年劣化や、汚れなどによりバーコード画像に汚れや歪みが発生する。
・ハーフトーン処理を行うことによりエッジがぼやけ、ノイズが載りやすくなる。
・バーコード認識エンジンが要求するグレースケール画像の容量が大きいため、画像容量の低減のために白黒画像でのスキャンを要望するユーザ側の要求と相反する。
・バーコード規格では白黒の境界が明確であることが求められるが、グレースケールでスキャンすることによってエッジがぼける。
・1回のスキャンでバーコードを認識しなければならないため、専用のバーコードリーダと比較して認識率が低い。
・バーコード認識エンジンの特性によって認識できない画像が稀に存在する。
本発明は係る問題に鑑みてなされたものであり、バーコード認識エラーの原因によらずバーコード認識率を向上させるバーコード認識システム、画像処理サーバ、MFP及び画像処理方法を提供することを目的とする。
上記目的を達成するため、本発明は、第1の態様として、原稿を読み取って画像データを生成する機能を備えたスキャナ装置と、該スキャナ装置が生成した画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する画像処理サーバとを有する画像処理システムであって、画像処理サーバは、スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、検出したバーコードを認識して情報を取得する手段とを有し、検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理システムを提供するものである。
また、上記目的を達成するため、本発明は、第2の態様として、スキャナ装置から入力された画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する画像処理サーバであって、スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、検出したバーコードを認識して情報を取得する手段とを有し、検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理サーバを提供するものである。
また、上記目的を達成するため、本発明は、第3の態様として、原稿を読み取って画像データを生成する画像読取手段と、該画像読取手段が生成した画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する情報配信手段とを有するMFPであって、スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、検出したバーコードを認識して情報を取得する手段とを有し、検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とするMFPを提供するものである。
また、上記目的を達成するため、本発明は、第4の態様として、スキャナ装置で原稿を読み取って画像データを生成し、該画像データに対して画像処理サーバが画像処理を施した上でネットワークを介して他の情報処理装置へ配信する画像処理方法であって、画像処理サーバが、スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する処理と、検出したバーコードを認識して情報を取得する処理とを行い、検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理方法を提供するものである。
本発明によれば、バーコード認識エラーの原因によらずバーコード認識率を向上させる画像処理システム、画像処理サーバ、MFP及び画像処理方法を提供できる。
本発明の好適な実施の形態に係る画像処理システムの構成を示す図である。 画像処理サーバの構成を示す図である。 認識エラーとなるバーコードの一例を示す図である。 白抜けの一例を示す図である。 周辺ノイズの一例を示す図である。 バーコード認識エラーとなった画像に対して各種画像処理を行った後に、再度バーコード認識をさせた場合の成功数を示す図である。 複数の画像処理を実行可能とし、各画像処理+バーコード認識を行った場合の成功数を示す図である。 各種画像処理後の認識結果を示す図である。 各種画像処理の処理時間を示す図である。 認識ヒット数が0の画像を対象外とした対象画像リストを示す図である。 認識ヒット数が1の画像を除いた画像リストを示す図である。 認識ヒット数が1の画像を認識するために必要な画像処理後に認識可能な画像を除いた対象画像リストを示す図である。 画像処理サーバの動作の動作の一例を示すフローチャートである。 認識ヒット数が0又は1の画像を対象外とした対象画像リストを示す図である。 認識ヒット数が2の画像を除いた画像リストを示す図である。 同一位置・座標のバーコード認識に2回成功した場合にバーコード認識結果を出力する処理の流れを示す図である。 チェックデジットの有無による誤認識率の違いを示す図である。 バーコード認識に成功した段階でバーコードの種類を確認し、誤読の可能性が低いQRコードの場合には1回の認識成功でバーコード認識結果を出力して処理を終了する動作の流れを示す図である。 画像処理とバーコード位置検出+認識の処理とに要する時間及び画像処理での画像加工の度合いを示す図である。 各画像処理の処理時間の違いを示す図である。 各画像処理の1ページあたりの平均処理時間を示す図である。 画像処理ごとのQRコード認識成功数を示す図である。 成功数が多い順でリトライを行った場合の結果の一例を示す図である。 処理時間が速い順でリトライを行った場合の結果の一例を示す図である。 同じ系統の画像処理が連続しないようにリトライを行った場合の結果の一例を示す図である。 成功数が多い順でバーコードの認識に2回成功するまでリトライを続行した場合の結果の一例を示す図である。 処理時間が速い順でバーコードの認識に2回成功するまでリトライを続行した場合の結果の一例を示す図である。 同じ系統の画像処理が連続しない順でバーコードの認識に2回成功するまでリトライを続行した場合の結果の一例を示す図である。 バーコード認識処理全体の処理時間の実測値及び誤認識率を示す図である。 バーコード認識処理での誤認識率を示す図である。 一次抽出及び二次抽出の一例を示す図である。
本発明の好適な実施の形態について説明する。
図1に、本実施形態に係る画像処理システムの構成を示す。
この画像処理システムは、MFP10、画像処理サーバ20及び管理ツール40がネットワーク50を介して接続された構成であり、MFP10が原稿をスキャンして生成した画像データに対して画像処理サーバ20において所定の画像処理を施し、ネットワーク50に接続されている不図示の情報処理装置へ配信するシステムである。なお、ここではMFP10と画像処理サーバ20とが別体の構成を示しているが、これらが一体の構成であっても良い。
画像処理サーバ20は、画像データに対して画像処理を施す画像処理装置としての機能と、情報処理装置へ情報を配信するサーバとの機能を兼ね備えている。画像処理サーバ20は、情報処理装置への配信の手法として、電子メールによる配信、FAXによる配信、情報処理装置がアクセス可能なフォルダへのデータ転送による配信などの機能を備えている。
管理ツール40は、画像データに対して行う画像処理の設定や、画像データの配信先の設定などを行うためのユーザインタフェースであり、コンピュータ端末やPDAなどの情報処理装置である。なお、画像処理サーバ20をMFP10と一体に構成する場合には、MFP10の操作パネルを管理ツール40として用いることも可能である。
図2に、画像処理サーバ20の構成を示す。
画像処理サーバ20は、メイン制御部21、バーコード認識モジュール22、バーコード認識制御部23、バーコード認識結果処理部24、認識結果出力部25、画像処理実行部26、画像処理ストック部27、リトライ・繰り返し処理制御部28、リトライ・繰り返しパターン制御部29、リトライ・繰り返し結果集計部30、集計結果保存部31、学習制御部32、定期集計判断部33、アラート通知処理部34を備える。
画像処理サーバ20上の各機能部のうち、画像処理ストック部27及び集計結果保存部31を除く各部は、ソフトウェア処理によってコンピュータ上に実現される。すなわち、画像処理サーバ20を構成するコンピュータのCPUがソフトウェアを実行することにより、コンピュータのCPUやそのワークエリアであるメモリ上に各機能部が形成される。
メイン制御部21は、各機能部の動作を制御する。バーコード認識モジュール22は、バーコード位置・角度検出部22aとバーコード認識部22bとを有し、バーコード位置・座標、バーコード画像の傾き(360度任意方向)の検出、1次元コードか2次元コードかの推測、バーコード種類の決定及びバーコード認識機能を有する。バーコード位置・角度検出部22aは、入力された画像データに含まれるバーコードを検出し、それが画像上のどの位置にあるか(座標値)やその向き(基準となる方向に対してどの程度傾いた状態であるか)を検出するとともに、バーコードの種類を推定する。バーコード認識部22bは、バーコード位置・角度検出部22aが検出したバーコードの位置及び向きに基づいてバーコードを認識する。バーコード認識制御部23は、バーコード認識モジュール22を制御してバーコード認識を行い、認識結果をバーコード認識結果処理部24に出力する。バーコード認識結果処理部24は、バーコード認識結果に対してマージや座標変換などの処理を行う。認識結果出力部25は、バーコード検出モジュール22のバーコード認識結果が所定回数同じ結果となった場合に読み込んだ画像や、バーコード認識結果をネットワーク50上の不図示の情報処理装置へ出力する。なお、バーコード認識結果を基に各種書誌情報(格納先ファイルやファイル名の設定)を行ったり、文書の分割(バーコード用紙を基点に二つ以上の文書に分割して配信、出力する)も可能である。画像処理実行部26は、バーコード認識でエラーとなった場合に画像に対してバーコードの認識が可能となるような画像処理を施す。画像処理ストック部27は、画像処理実行部26が画像に対して施す画像処理の手順が格納されている。画像処理の手順は、画像処理サーバ20に標準搭載されているものの他、任意の画像処理をプラグインモジュールとして登録することも可能である。画像処理をプラグイン化することで、画像処理内容の追加や変更に対応することが容易となる。リトライ・繰り返し処理制御部28は、バーコード認識エラーとなった画像に対して画像処理+バーコード認識をどのような順番で繰り返すのかを制御する。リトライ・繰り返しパターン制御部29は、バーコード認識エラーとなった画像に対する画像処理+バーコード認識の実行の順番が複数定義されている。換言すると、任意回数のリトライをどの画像処理をどのような順序で行うかが複数定義されている。なお、(画像処理+バーコード位置検出・認識)×n通りのリトライを“リトライパターン(RP)”と表記している。なお、図2でのRP1及びRP3の“弱”は、リトライ回数が少なく、高速な画像処理だけを行うリトライパターンを意味しており、RP2及びRP4の“強”は、リトライ回数が多く、時間がかかる画像処理も実施するリトライパターンであることを示している。リトライ・繰り返し結果集計部30は、リトライを行った場合のバーコード認識の結果を集計し、集計結果保存部31に格納する。学習制御部32は、繰り返し結果保存部31に格納されている情報に基づいて、短時間で精度良くバーコード認識を行える効率の良いリトライパターンを学習する。定期集計判断部33は、集計結果保存部31に格納されているバーコード認識の集計結果に基づいて、ユーザへの通知が必要あるか否かを判断する。アラート通知処理部34は、ユーザに対するアラートの通知処理を行う。
図3に、認識エラーとなるバーコードの一例としての2次元コードを示す。図示するようにセルの中にスジが入っていたり、コードを構成するセルが歪んでいると認識エラーが生じる。画像処理サーバ20は、図示するような異常画像がMFP10から入力された場合には、画像処理実行部26において画像処理を施すことにより、バーコード読み取りモジュール22によるバーコード認識可能を可能とする。
画像処理実行部26がバーコードを認識可能にするために実行する画像処理としては、
●90度単位での回転(90度、180度、270度)
・90度単位に回転した画像の作成
●ごま塩ノイズ除去(黒又は白ドットの除去)
・X・Yドットサイズ指定又は自動サイズ判定方式のごま塩ノイズ除去
●モノクロ平滑化
・コピーキャプチャー画像用平滑化処理
・白抜け穴埋め処理
●グレー化
・2値DIBをグレースケール化した画像の作成
●平滑化、スムージング、シャープ
・マスク処理による矩形空間フィルタ処理
・ソフト/シャープ変換した画像の作成
●変倍
・拡大/縮小した画像の作成
●グレー化縮小ズーム
・2値画像をグレースケールに変換した画像の作成
●色変換
・明るさ変換した画像の作成
・コントラスト変換した画像の作成
・ガンマ変換した画像の作成
・色調変換した画像の作成
など挙げられる。これらはあくまでも一例であることは言うまでもない。
以下に、これらのうちの一部の処理について具体的な手順を説明するが、これと異なる手順での処理の適用を妨げるものではない。
<モノクロ2値平滑化処理>
3×3平均値フィルタ相当の平滑化を施した画像を作成し、brightの値によって濃さを調整した画像を作成する。brightとして結果画像の濃さを0〜10で指定する。ここでは、値が大きいほど結果画像が濃くなるものとする。
具体的には、入力画像の各点について、当該点を中心とした3×3画素領域に存在する白画素数がbright個未満の場合はその点を黒とし、bright以上の場合はその点を白とする。
brightの値を変えて、濃い目の画像を作ることで太め処理、薄目の画像を作ることで細め処理と同様の効果も得られる。brightが1〜9の時は、処理領域の境界画素には入力画像の画素値がコピーされる。また、brightに0を指定すると、境界を含む処理領域全面が白となる。また、bright=10を指定すると、処理領域前面全面が黒となる。このモノクロ2値平滑化処理は、コードのセルに図4に示すような白ドット抜けや、図5に示すような周辺ノイズが発生している場合に有効である。
<白ドット埋め処理>
連続した黒画素で囲まれた白孤立点画素を黒で塗りつぶす処理であり、孤立点ノイズ除去処理の白黒を反転したような動作となる。白ドット埋め処理は、図4に示すような白ドット抜けが発生している場合に有効である。
<グレースケール化縮小>
例えば、1/2に縮小する場合、n×n(nは任意の整数)ピクセルの範囲内の黒画素の数により0〜2nの(2n+1)階調に変調できることを応用してグレースケール化する。具体例を挙げると、2×2ピクセル範囲内は、黒画素の数により0〜4の5階調に変調できることを応用してグレースケール化する。4×4ピクセルの範囲内をカウントすれば、0〜16の17階調を表現できる。黒画素をカウントする範囲は、縮小倍率によって変化させても良いし、倍率に関わらず固定でも良い。
<縮小画像の高画質化>
縮小画像の1画素の範囲に含まれる元画像の画素の平均値をもってその画素値を決めるという一般的な方法である。具体例としては、面積平均法(Area-Average)が挙げられる。1bit画像の場合には、0-255の中間値として得られた平均値を閾値に基づいて2値化する。
次に、画像処理実行部26がバーコード認識率の向上のために行う画像処理の選定に関して説明する。
図6に、バーコード認識エラーとなった画像に対して画像処理実行部26で各種画像処理を行った後に、バーコード認識モジュール22に再度バーコード認識をさせた場合の成功数を示す。元画像の認識成功数(0個)に対して、各種画像処理を行うことによってそれなりにバーコード認識が成功するようになることが分かる。しかし、どの画像処理に関しても、単体では認識できるのはせいぜい半数程度である。
これに対し、図7に示すように、画像処理実行部26で複数の画像処理を実行可能とし、各画像処理+バーコード認識を行うことにより認識成功数が大幅に向上する。
なお、図6、図7は、QRコード用の画像処理を行った例を示しているため、QRコードに関しては元画像よりも各画像処理後の方が認識成功数が増加している。これに対し、CODE39に関しては画像処理を行ってもバーコード認識結果が改良されておらず、効果が無いことが分かる。従って、認識対象のバーコードの種類に応じて画像処理を変えることが好ましいことが分かる。
図8の列タイトルは、画像処理実行部26が画像データに対して施す画像処理方法の種類を示している。画像処理名と画像名とが交差するセルで“1”と表示されているものは、その画像処理でその画像のバーコード認識に成功したことを示している。バーコード認識モジュール22は、それぞれの画像処理ごとにバーコード認識のリトライを行うため、合計13回バーコード認識を実施している。一番右の列“認識ヒット数”は、横方向の合計を算出した値である。すなわち、いくつの画像処理+バーコード認識で認識できたかを示している。“認識ヒット数”は、数値が大きいほど、どのような画像処理でも認識しやすいことを表し、数値が小さいと特定の画像処理でなければ認識が困難であることを示す。“認識ヒット数”=0は、バーコードを認識できなかったことを意味している。換言すると、図8において認識ヒット数が0のバーコードを認識するためには、図8には示されていない画像処理を行う必要がある。
図9に、画像処理実行部26が実行する各種画像処理の処理時間を示す。ここでは、42ページ分の画像を処理した結果を示している。速いものでは42ページを5秒で処理しており、平均処理時間は約0.1秒/ページとなる。バーコード認識モジュール22によるバーコード位置検出及び認識処理にはおおよそ0.3秒/ページを要するため、全体では0.4秒/ページとなる。よって、5回のリトライを行ったとしても、約2秒で処理が完了する。実際にはエラーとなる画像は多くとも全体の0.5%程度であるため、リトライを行っても実用上差し支えない。
一方、処理が遅いものは、約1.0秒/ページを要するため、このような画像処理を含める場合には、バーコード認識に要する時間が若干長くなる。したがって、遅い画像処理と速い画像処理との両方を実行する方式(例えば、全ての画像処理を総ざらいするような方式)の場合には、リトライ回数を変更可能とし、処理速度重視か認識率重視かを選択できるようにすると良い。
また、図8から明らかなように、同じ画像であっても画像処理の種類によって、画像処理後を行った後で認識できる場合とできない場合とがある。従って、複数の画像処理を組み合わせることで互いの弱点を補い、バーコードの認識率を向上させることができる。
図8には一部の結果しか載せていないが、認識エラーとなる原因が異なる99個のサンプル画像に対して、複数の画像処理を組み合わせても認識できないものは3個であった。すなわち、認識エラーを3/99=1/33まで減らすことができたことになる。なお、バーコード専用画像処理を行うことで、認識エラーをより低減し、認識エラー=0件とすることも可能である。
最適な画像処理の組み合わせを見つけ出す手順の一例を説明する。
図10に対象の画像リストを示す。ここでは表1図8において認識ヒット数が0の画像は対象外としている。図10において認識ヒット数が1である画像が四つ存在するが、これらの認識を成功させた画像処理(180度回転、グレー化ズーム70%、ns180(ノイズ除去/2値平滑化/180度回転)、ns270(ノイズ除去/2値平滑化/270度回転))は必ず採用する。
図11に、図10から認識ヒット数が1の画像を除いた画像リストを示す。図11に含まれる画像のうち、先に採用が決定した画像処理で認識可能なものについては、認識可能とするための画像処理について考慮する必要はない。
図12に、先に採用した四つの画像処理で認識可能な画像を除いた画像リストを示す。図12に含まれる三つの画像を認識可能とするには、画像処理実行部26で次のいずれかの画像処理を行った上でバーコード認識モジュール22によってバーコード認識を行えば良いことが分かる。
・グレー平滑化
・グレー高画質変倍200%+ns90(ノイズ除去/2値平滑化/90度回転)
これらの二つのうち、処理時間が短い方を先に実行すれば良い。
なお、上記のように認識ヒット数が1の画像処理を優先して採用するのは、ほとんど全ての失敗画像のサンプルを入手できる場合とすることが好ましい。
図13に、画像処理サーバの動作の一例を示す。まず、元画像に対してバーコード認識モジュール22によるバーコード認識を試みる(ステップS101)。バーコード認識に成功すれば(ステップS102/Yes)、バーコード認識結果を出力して終了する(ステップS103)。認識に失敗した場合は(ステップS102/No)、実行する画像処理を選択する(ステップS104)。なお、画像処理を実行する順番については後段で説明する。そして、画像処理実行部26により、元画像に対して画像処理を実行する(ステップS105)。その後、再びバーコード認識モジュール22によるバーコード認識を行い(ステップS106)、失敗した場合には(ステップS102/No)次の画像処理を選択し(ステップS104元画像に対して実行する(ステップS105)。これをバーコード認識に成功するまで繰り返し、バーコード認識に成功した段階で認識結果を出力して処理を終了する。
ところで、元画像に対して強い加工を伴う画像処理を施すと、誤読の可能性が生じる。図8に示した実験においても、過度な画像補整を行うとCODE39のバーコードをInt2to5として誤読するケースがあった。従って、強い加工を施した後のバーコード処理結果については、複数種類(例えば2種類)の画像処理による認識結果が一致した場合に採用することで、加工の影響による誤読を低減可能である。
すなわち、画像加工したバーコード画像を認識すると誤読の可能性があるため、1回の成功では正しいか否かを特定できない場合には、最低2回の読み取り成功が必要となる。このような条件で画像処理の種類を決定するには、表1において認識ヒット数が2の画像が重要となる。
図14に対象画像のリストを示す。ここでは図8における認識ヒット数が0又は1の画像は対象外としている。
図15に、図14から認識ヒット数が2の画像を除いた画像リストを示す。図15の画像リストに含まれる各画像は、認識ヒット数が2の画像に適用する画像処理(90度、180度、270度、ns90、ns180、gray平滑化、grayzoom70%、及びgray高画質200%)を用いて全て2回以上認識可能である。従って、これらの画像処理を行えば全ての画像のバーコード認識が成功する。
図16に、同一位置・座標のバーコード認識に2回成功した場合にバーコード認識結果を出力する処理の流れを示す。ただし、単純な回転(90度、180度、270度等)は、単に元画像の向きを変えるだけの画像処理であり、画像に対する実質的な加工は行わない。従って、このような画像処理を行った場合のバーコード認識結果については加工の影響による誤読の可能性を考慮する必要はないため、1回の認識成功でバーコード認識結果を出力する。
まず、元画像に対してバーコード認識モジュール22によるバーコード認識を試みる(ステップS201)。バーコード認識に成功すれば(ステップS202/Yes)、同一位置・座標でバーコード認識結果が得られているか否かを確認する(ステップS203)。認識結果が既に存在している場合は(ステップS204/Yes)、過去に認識結果が成功であったか否かを確認する(ステップS205)。今回のバーコード認識成功がその位置・座標における2回目の成功であるならば(ステップS206/Yes)、バーコード認識結果を出力して終了する(ステップS207)。
認識に失敗した場合は(ステップS202/No)、実行する画像処理を選択する(ステップS208)。そして、画像処理実行部26により、元画像に対して画像処理を実行する(ステップS209)。その後、再びバーコード認識モジュール22によるバーコード認識を行い、失敗した場合には次の画像処理を元画像に対して実行する。これをバーコード認識に成功するまで繰り返す。
成功したバーコード認識がその位置・座標における1回目の成功であった場合には(ステップS202/No)、画像処理実行部26が実行すべき次に画像処理を選択し、バーコード認識モジュール22が2回目のバーコード認識に成功するまで繰り返す。
なお、ある位置・座標でバーコード認識に成功した場合に(ステップS202/Yes)、その位置・座標での認識結果が存在していないとしても(ステップS204/No)、バーコード認識に成功した画像処理の種類を確認した結果(ステップS210)、画像に対する加工を伴わないタイプのものであれば(ステップS211/No)、バーコード認識結果を出力して処理を終了する。
ところで、QRコードは、エラー訂正処理が充実しているため、誤読の可能性は低いが、CODE39のようにチェックデジット程度の確認方法しかない場合、又はチェックデジットを使用しない場合は、画像処理によって間違った値を読む可能性が高くなる。
図17に示した通り、チェックデジットありであっても誤読の可能性が0になる訳ではない。従って、図18に示すように、バーコード認識に成功した段階でバーコードの種類を確認し、誤読の可能性が低いQRコードの場合には1回の認識成功でバーコード認識結果を出力して処理を終了するようにしても良い。なお、ここで説明したステップ以外の各ステップでの処理は図16と同様であるため重複する説明は割愛する。
次に、画像処理をどのような順番で実行するかについて説明する。
画像処理+バーコード位置検出・認識を、全ての画像処理について実行する場合は、各画像処理の実行順序は任意である。一方、リトライしてバーコード認識に成功した時点で終了する場合には、なるべく少ないリトライ回数で高速に処理できる方が好ましいため、効果が高く高速な画像処理から順に“画像処理+バーコード位置検出・認識”を実行するようにすると好ましい。
さらに、誤読の可能性について考慮することもできる。従って、画像処理の採用・実行順序の優先度としては、
・効果が高いもの
・処理が速い(処理時間が短い)もの
・画像加工の度合いが小さい(誤読の可能性が低い)もの
が考えられる。
図19に、画像処理実行部26での画像処理とバーコード検出モジュール22によるバーコード位置検出+認識の処理とに要する時間及び画像処理実行部26による画像処理での画像加工の度合いを示す。なお、ns180(ノイズ除去/2値平滑化/180度回転)、n+s(ノイズ除去/2値平滑化)、ns90(ノイズ除去/2値平滑化/90度回転)、及びns270(ノイズ除去/2値平滑化/270度回転)は同じ系統の画像処理である。また、gray平滑化とgray加重平均とは同じ系統の画像処理である。
図20に示すように、図19に示した各画像処理では、90度、180度、270度、n+s、ns90、ns180、ns270及びgzoom70%は高速に実行可能な処理であり、gray高画質化200%は時間を要する処理であることが分かる。
図21は1ページ当たりの平均処理時間を示す。1ページ当たりの処理時間は画像処理の種類ではなくバーコード認識の対象となる画像の大きさに依存することがわかる。すなわち、元画像よりも小さくなるgzoom70%は元画像よりも高速に処理でき、元画像よりも大きくなるgray高画質200%及びmono300%では元画像よりも処理が低速になり、元画像と大きさが変わらないこの他の画像処理は元画像と同程度の速度である。
図22に、画像処理ごとのQRコード認識成功数を示す。同じ画像処理であってもバーコード認識の失敗原因(ノイズ、スジ)の違いにより効果に差があることが分かる。
図23〜図25は、図19に示した各画像処理を、それぞれ“成功数が多い順”、“処理速度が速い順”、“最適化”した順番でリトライした結果を示している。なお、表5〜表7では、1度認識に成功したらリトライを終了している。“最適化”は、成功数や処理速度を重視しつつ、なるべく少ないリトライ回数でバーコードを認識できるように画像処理の順番を決定したものである。
図23を例として読み方を説明すると、画像noの左端のNo.1の画像に対して画像処理無し(最上端の“なし”に相当)でバーコード認識を行って失敗したため2番目のns180の画像処理を行ってからバーコード認識を行い、認識に成功したため画像no左から2番目のNo.2の画像に対する処理に移るという流れとなる。
図26〜図28は、バーコードの認識に2回成功するまでリトライを続行した場合の結果を示している。ただし、単純な回転(90度、180度、270度)に関しては、画像に対して実質的な加工を施さないため、バーコードの認識が1回成功した時点でリトライを終了している。すなわち、図26〜図28は図16に示した動作を行った場合の結果を示している。
なお、成功の確からしさが高い場合は特に問題とはならないが、同じ系統の画像処理を連続して実行すると、続けて認識に失敗する可能性が高くなるため、同じ系統の画像処理が続かないように実行順序を決定することが好ましい。具体的には、図27に示すように、画像処理の順番を処理速度順とすると、画像処理実行部26で同じ系統の画像処理が続けて実行され、バーコード認識モジュール22が続けてバーコードの認識に失敗する可能性が高くなるため好ましくない。図26や図28に示すように、成功数の多い順や最適化した順番であれば、画像処理実行部26で同じ系統の画像処理が続けて実行されることがないため、このような画像処理の実行順でリトライを行うことが好ましい。
図29及び図30に、バーコード認識処理全体の処理時間の実測値及び誤認識率を示す。ここでは8000ページを処理し、そのうちの42ページがバーコード認識エラーとなったため、約0.5%の誤認識率となっている。
全てのパターンを実行してバーコード認識結果処理部23で結果をマージする処理を行うと、誤認識率が約0.04%と約10倍に向上する。ただし、処理時間の増分は2317.9%であり、約23倍の時間がかかるため実用上の問題から適用が難しい場合がある。これに対し、効果的な画像処理だけを抽出してそれらを全て実行するようにすると、誤認識率は変わらず、処理時間の増分は823.3又は1330.9%であり、約10倍の時間で処理できる。
認識すべきバーコードの種類、個数が特定されず、全てのバーコードを読み取りたい場合やスキャン画像にバーコードが一つも無いページが連続するような場合には、上述の処理時間となる。
認識すべきバーコードの種類、個数が特定できる場合は、1回/2回でリトライ終了方式が採用できるため、後段で説明するように誤認識率の効果はそのままで処理時間への影響を最小限にできる。
また、これまでのバーコード認識システムでは、バーコードの位置を厳密に指定しないと認識できないものが多かった。これは、ユーザの設定や運用を制限することになる。また、スキャン時のADFスキューやずれによってバーコードを誤認識することもある。これを回避するには、タイミングマークやスキュー補正、天地識別など、バーコード認識以外の技術を借りることとなり、全体としてバーコード認識率を低下させる要因となりかねなかった。
しかし、本実施形態に係る画像処理システムでは、上記の通り、任意の種類の任意個数のバーコード位置検出及び認識が可能なバーコード認識モジュール22を用いているため、これを利用すれば、ユーザに負担をかけず、簡単にバーコード運用が可能となる。
例えば、原稿上に複数種のバーコードが存在しているとして、規格Aのバーコードを使いたい場合には、規格Aを指定するだけで、位置指定や原稿スキャン方向を気にせずともバーコード認識モジュール22が自動的に規格Aのバーコードの位置と認証結果とを返してくれる。
なお、規格Aのバーコードが2個以上存在する場合に、全ての読み込みを完了する前にリトライを終了することを避けるため、原稿上のバーコードの種類及び最大数をユーザが特定できるのであれば、その最大数を管理ツール30を介して画像処理サーバ20に登録し、メイン制御部21はユーザから指定された数のバーコードを読み取るまでリトライを繰り返すようにすると良い。
原稿上のバーコードの数をユーザが特定できない場合には、バーコードを認識できた時点で処理を終了するのではなく、所定回数又は各画像処理の全ての組み合わせの処理を実施し、それらの複数個の結果(バーコード位置、座標情報、バーコードの種類、認識結果など)をマージし、同じ位置のバーコードに関して異なる結果が得られた場合には、多数決によって最終的な結果を得るようにすると誤認識を低減できる。
上記のような複数の画像処理による認識結果をマージする手法は、処理時間が多少かかったとしても確実な結果を得たい場合や、画像処理後のバーコード認識の精度に不安がある場合に有効である。
これに対し、1回認識に成功したらリトライを終了する場合は、複数の画像処理による認識結果をマージする手法と比較すると、誤認識率は0.04%と同じであるが、処理時間の増分は+1.5%〜+2.8%であり、処理時間を大きく増やすことなくバーコード認識率を向上させることができている。
画像加工がある場合にバーコード認識に2回成功したらリトライを終了する場合は、誤認識率は約0.09%であり、複数の画像処理による認識結果をマージする手法と比較すると若干低くなっているが、何もしないとき(0.53%)と比べれば認識の精度は約5.8倍に向上しており、十分な効果が得られている。また、処理時間の増分も+4.4%〜+4.6%であり、処理時間が大きく増えることはない。
2回の認識成功でリトライを終了するケースにおいて、処理時間順でリトライすると最も高速であるが、上記のように同じ系統の画像処理が連続して実行されるため、この順序ではリトライを行わないことが好ましい。
図30に示すように、全ての画像処理を実行する場合には、全体としての処理時間が長くなってしまうが、1回又は2回の成功でリトライを終了させる場合には、処理時間にはほとんど影響を及ぼさない。
また、バーコードの認識性能は、機器の経時劣化により低下すると予想される。さらに、何らかの事情で原稿や用紙が変わってバーコード画像の特性が変化した場合にユーザの目視でそれを判断することは困難である。このため、複数の画像処理での認識結果にばらつきが大きくなった場合にはそれをユーザに通知することが好ましい。
本実施形態に係る画像処理システムは、任意の画像処理を行った後の認識結果について、認識に成功したか否かを画像処理サーバ20がリトライ・繰り返し結果集計部30で集計し、集計結果を集計結果保存部31に格納する。このため、定期的に全パターンを実行して認識結果を集計すれば、定期集計判断部33は集計結果保存部31に格納されている情報に基づいてリトライ画像処理設定がユーザの思惑通りに作動しているか否かを判断することができ、思惑と異なる場合にはアラート通知処理部34に指示を送って管理ツール40にアラートを発することができる。
なお、バーコード認識に成功するまでの平均的なリトライ処理の実行回数が増大したり平均リトライ処理時間が増大した場合にアラートを発するようにしても良い。
これにより、MFP10が経時劣化するなどしてスキャナ機能の特性が変化したとしても、それを検知してユーザに通知できる。
また、集計結果保存部31に格納されている情報に基づいて、画像処理実行部26が実行する画像処理を選択したり、リトライの順序を決定することで、バーコード認識結果を学習し、その時点でのスキャナ機能の特性に応じてリトライ処理を行うことが可能となる。
また、上記のように、バーコード認識モジュール22は、バーコード位置・傾き検出及びバーコード種類の推測機能を司るバーコード位置・角度検出部22aと、バーコード認識機能(種類を特定してデータを読み取る機能)を司るバーコード認識部22bとを備えている。
バーコード位置・角度検出部22aは、バーコード周辺部を切り出してバーコード位置検出処理を行うが、この際に、まず画像の中からバーコードらしき部分を抽出し(一次抽出)、その中から実際にバーコード認識すべき領域を抽出(二次抽出)するようにしても良い。
バーコード位置の検出及び種類の推測は、認識に比べて比較的処理に時間を要するため、リトライ処理時に画像全体に毎回実行すると時間がかかってしまうが、一次抽出は画像全体に対して一度だけ実行し、リトライ時には一次抽出で切り出した画像に対して二次抽出を行うようにすることで高速に処理できる。
このような二段階の抽出を行うことにより、処理対象の画像が小さくなる分バーコード認識部22bによるバーコード認識処理が高速になる。特にリトライ処理をする際には、バーコード認識部22bがバーコード認識処理を繰り返すため、高速化の効果が顕著に現れる。
また、バーコード位置検出の処理は、バーコード周辺のみならず、原稿全体の画像状態に大きく左右される。したがって、バーコード位置・角度検出部22aがバーコード周辺部を二段階に切り出してバーコード位置検出処理を行うことで、外乱を最小限に抑え、不安要素を減らすことができる。
ただし、一次抽出が一回だけだと、バーコードを検出できない(一次抽出の際に抽出漏れする)場合もある。このような場合には、90度、180度、270度回転した画像に対しても一次抽出を実行し、その結果をマージするようにすればよい。マージした領域を対象として二次抽出を行い、画像処理及びバーコード認識処理を行うことで、バーコードの抽出漏れを低減できる。
一次抽出及び二次抽出の一例を図31に示す。一次抽出後の画像は元画像と比較して小さいため、これを処理対象として二次抽出を行うことで処理を高速化できることが理解できる。
なお、ユーザが画像上のバーコードの位置やサイズを特定できる場合には、ユーザによって指定された領域の周辺を一次抽出領域として抽出しても良い。バーコードの大きさが不明であっても、種類、最大文字数、最小セルサイズなどが指定されている場合は、これらの値からおおよそのバーコードの大きさを推定し、一次抽出領域として抽出すると良い。
一次抽出した領域でバーコード認識ができなかった場合には、一次抽出する領域を広げるか狭めるかして再び一次抽出を行い、バーコード認識を試みる。
なお、ユーザがバーコード位置を指定しない場合には、画像を複数の領域に分割し、その領域ごとにバーコードの検出及び認識を行っても良い。
なお、上記実施形態は本発明の好適な実施の一例であり、本発明はこれに限定されることはない。
例えば、上記実施形態では、画像処理の例として90度単位で回転させる処理を挙げたが、必ずしも90度単位である必要はなく、30度単位や45度単位などの任意の角度を単位として回転させる処理を適用することも可能である。
このように、本発明は様々な変形が可能である。
10 MFP
20 画像処理サーバ
21 メイン制御部
22 バーコード認識モジュール
22a バーコード位置・角度検出部
22b バーコード認識部
23 バーコード認識制御部
24 バーコード認識結果処理部
25 認識結果出力部
26 画像処理実行部
27 画像処理ストック部
28 リトライ・繰り返し処理制御部
29 リトライ・繰り返しパターン制御部
30 リトライ・繰り返し結果集計部
31 集計結果記憶部
32 学習制御部
33 定期集計判断部
34 アラート通知処理部
特許第3376175号公報 特開2006−209449号公報

Claims (43)

  1. 原稿を読み取って画像データを生成する機能を備えたスキャナ装置と、該スキャナ装置が生成した画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する画像処理サーバとを有する画像処理システムであって、
    前記画像処理サーバは、
    前記スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、
    検出したバーコードを認識して情報を取得する手段とを有し、
    検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理システム。
  2. 前記画像処理サーバは、前記画像上のバーコードの位置及び種類を特定する手段を有することを特徴とする請求項1記載の画像処理システム。
  3. 前記画像処理サーバは、前記バーコードの認識結果を基に書誌情報の設定を行う手段と、
    前記画像を二つ以上に分割して配信する手段とを有することを特徴とする請求項2記載の画像処理システム。
  4. 前記リトライ処理において、同じ系統の前記画像処理が続かないように前記各画像処理を実行し、
    同一の認識結果が所定数以上得られた時点で、該認識結果を採用することを特徴とする請求項1から3のいずれか1項記載の画像処理システム。
  5. 実質的な画像の加工を伴わない画像処理後にバーコードの認識に成功した場合には、その時点で該認識結果を採用することを特徴とする請求項4記載の画像処理システム。
  6. 前記画像処理サーバは、前記リトライ処理の実行回数を設定可能であることを特徴とする請求項1から5のいずれか1項記載の画像処理システム。
  7. 前記画像処理サーバは、検出及び認識対象のバーコードの種類を設定可能であり、設定されたバーコードの種類に応じて前記リトライ処理に用いる画像処理を選択することを特徴とする請求項1から6のいずれか1項記載の画像処理システム。
  8. 前記リトライ処理に用いる画像処理の一つとして、所定角度を単位として画像を回転させる処理を行うことを特徴とする請求項1から7のいずれか1項記載の画像処理システム。
  9. 前記リトライ処理に用いる画像処理の一つとして、前記スキャナ装置の読み取り光学系の前記原稿上の任意の線を太線化又は細線化する特性を打ち消す処理を行うことを特徴とする請求項1から8のいずれか1項記載の画像処理システム。
  10. 前記リトライ処理に用いる画像処理の一つとして、スムージング拡大/縮小変倍を行うことを特徴とする請求項1から9のいずれか1項記載の画像処理システム。
  11. 前記リトライ処理の用いる画像処理の一つとして、前記画像をシャープ化する処理を行うことを特徴とする請求項1から10のいずれか1項記載の画像処理システム。
  12. 前記リトライ処理の回数、処理時間、及び認識結果の少なくともいずれかを集計する手段と、該集計結果に基づいてユーザにアラートを報知する手段とを有することを特徴とする請求項1から11のいずれか1項記載の画像処理システム。
  13. 前記リトライ処理時の画像処理の実行順序を、以前のバーコード検出・認識結果に基づいて決定する手段を有することを特徴とする請求項1から11の画像処理システム。
  14. 前記画像から前記バーコードが存在する可能性のある領域を抽出し、該抽出した領域を対象として前記リトライ処理を行うことを特徴とする請求項1から13のいずれか1項記載の画像処理システム。
  15. スキャナ装置から入力された画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する画像処理サーバであって、
    前記スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、
    検出したバーコードを認識して情報を取得する手段とを有し、
    検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理サーバ。
  16. 前記画像上のバーコードの位置及び種類を特定する手段を有することを特徴とする請求項15記載の画像処理サーバ。
  17. 前記バーコードの認識結果を基に書誌情報の設定を行う手段と、
    前記画像を二つ以上に分割して配信する手段とを有することを特徴とする請求項16記載の画像処理サーバ。
  18. 前記リトライ処理において、同じ系統の前記画像処理が続かないように前記各画像処理を実行し、
    同一の認識結果が所定数以上得られた時点で、該認識結果を採用することを特徴とする請求項15から17のいずれか1項記載の画像処理サーバ。
  19. 実質的な画像の加工を伴わない画像処理後にバーコードの認識に成功した場合には、その時点で該認識結果を採用することを特徴とする請求項18記載の画像処理サーバ。
  20. 前記リトライ処理の実行回数を設定可能であることを特徴とする請求項15から19のいずれか1項記載の画像処理サーバ。
  21. 検出及び認識対象のバーコードの種類を設定可能であり、設定されたバーコードの種類に応じて前記リトライ処理に用いる画像処理を選択することを特徴とする請求項15から20のいずれか1項記載の画像処理サーバ。
  22. 前記リトライ処理に用いる画像処理の一つとして、所定角度を単位として画像を回転させる処理を行うことを特徴とする請求項15から21のいずれか1項記載の画像処理サーバ。
  23. 前記リトライ処理に用いる画像処理の一つとして、前記スキャナ装置の読み取り光学系の前記原稿上の任意の線を太線化又は細線化する特性を打ち消す処理を行うことを特徴とする請求項15から22のいずれか1項記載の画像処理サーバ。
  24. 前記リトライ処理に用いる画像処理の一つとして、スムージング拡大/縮小変倍を行うことを特徴とする請求項15から23のいずれか1項記載の画像処理サーバ。
  25. 前記リトライ処理の用いる画像処理の一つとして、前記画像をシャープ化する処理を行うことを特徴とする請求項15から24のいずれか1項記載の画像処理サーバ。
  26. 前記リトライ処理の回数、処理時間、及び認識結果の少なくともいずれかを集計する手段と、該集計結果に基づいてユーザにアラートを報知する手段とを有することを特徴とする請求項15から25のいずれか1項記載の画像処理サーバ。
  27. 前記リトライ処理時の画像処理の実行順序を、以前のバーコード検出・認識結果に基づいて決定する手段を有することを特徴とする請求項15から26のいずれか1項記載の画像処理サーバ。
  28. 前記画像から前記バーコードが存在する可能性のある領域を抽出し、該抽出した領域を対象として前記リトライ処理を行うことを特徴とする請求項15から27のいずれか1項記載の画像処理サーバ。
  29. 原稿を読み取って画像データを生成する画像読取手段と、該画像読取手段が生成した画像データに対して画像処理を施しネットワークを介して他の情報処理装置へ配信する情報配信手段とを有するMFPであって、
    前記スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する手段と、
    検出したバーコードを認識して情報を取得する手段とを有し、
    検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とするMFP。
  30. 前記画像上のバーコードの位置及び種類を特定する手段を有することを特徴とする請求項29記載のMFP。
  31. 前記バーコードの認識結果を基に書誌情報の設定を行う手段と、
    前記画像を二つ以上に分割して配信する手段とを有することを特徴とする請求項30記載のMFP。
  32. 前記リトライ処理において、同じ系統の前記画像処理が続かないように前記各画像処理を実行し、
    同一の認識結果が所定数以上得られた時点で、該認識結果を採用することを特徴とする請求項29から31のいずれか1項記載のMFP。
  33. 実質的な画像の加工を伴わない画像処理後にバーコードの認識に成功した場合には、その時点で該認識結果を採用することを特徴とする請求項32記載のMFP。
  34. 前記リトライ処理の実行回数を設定可能であることを特徴とする請求項29から33のいずれか1項記載のMFP。
  35. 検出及び認識対象のバーコードの種類を設定可能であり、設定されたバーコードの種類に応じて前記リトライ処理に用いる画像処理を選択することを特徴とする請求項29から34のいずれか1項記載のMFP。
  36. 前記リトライ処理に用いる画像処理の一つとして、所定角度を単位として画像を回転させる処理を行うことを特徴とする請求項29から35のいずれか1項記載のMFP。
  37. 前記リトライ処理に用いる画像処理の一つとして、前記画像読取手段の読み取り光学系の前記原稿上の任意の線を太線化又は細線化する特性を打ち消す処理を行うことを特徴とする請求項29から36のいずれか1項記載のMFP。
  38. 前記リトライ処理に用いる画像処理の一つとして、スムージング拡大/縮小変倍を行うことを特徴とする請求項29から37のいずれか1項記載のMFP。
  39. 前記リトライ処理の用いる画像処理の一つとして、前記画像をシャープ化する処理を行うことを特徴とする請求項29から38のいずれか1項記載のMFP。
  40. 前記リトライ処理の回数、処理時間、及び認識結果の少なくともいずれかを集計する手段と、該集計結果に基づいてユーザにアラートを報知する手段とを有することを特徴とする請求項29から39のいずれか1項記載のMFP。
  41. 前記リトライ処理時の画像処理の実行順序を、以前のバーコード検出・認識結果に基づいて決定する手段を有することを特徴とする請求項29から40のいずれか1項記載のMFP。
  42. 前記画像から前記バーコードが存在する可能性のある領域を抽出し、該抽出した領域を対象として前記リトライ処理を行うことを特徴とする請求項29から41のいずれか1項記載のMFP。
  43. スキャナ装置で原稿を読み取って画像データを生成し、該画像データに対して画像処理サーバが画像処理を施した上でネットワークを介して他の情報処理装置へ配信する画像処理方法であって、
    前記画像処理サーバが、
    前記スキャナ装置から入力された画像データが表す画像に含まれるバーコードを検出する処理と、
    検出したバーコードを認識して情報を取得する処理とを行い、
    検出又は認識に失敗したバーコードを含む画像の画像データに対しては、画像処理並びにバーコードの検出及び認識を1組の動作とするリトライ処理を、画像処理の内容を順次変更して繰り返し実行することを特徴とする画像処理方法。
JP2009059832A 2009-03-12 2009-03-12 画像処理システム、画像処理サーバ、mfp及び画像処理方法 Active JP5262869B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2009059832A JP5262869B2 (ja) 2009-03-12 2009-03-12 画像処理システム、画像処理サーバ、mfp及び画像処理方法
US12/659,157 US8333327B2 (en) 2009-03-12 2010-02-26 Apparatus, system, and method of image processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009059832A JP5262869B2 (ja) 2009-03-12 2009-03-12 画像処理システム、画像処理サーバ、mfp及び画像処理方法

Publications (2)

Publication Number Publication Date
JP2010211738A JP2010211738A (ja) 2010-09-24
JP5262869B2 true JP5262869B2 (ja) 2013-08-14

Family

ID=42729888

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009059832A Active JP5262869B2 (ja) 2009-03-12 2009-03-12 画像処理システム、画像処理サーバ、mfp及び画像処理方法

Country Status (2)

Country Link
US (1) US8333327B2 (ja)
JP (1) JP5262869B2 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110284625A1 (en) * 2005-12-16 2011-11-24 Taylor Smith Digital image capture and processing system supporting multiple third party code plug-ins with configuration files having conditional programming logic controlling the chaining of multiple third-party plug-ins
US8948513B2 (en) * 2009-01-27 2015-02-03 Apple Inc. Blurring based content recognizer
JP4940270B2 (ja) * 2009-07-06 2012-05-30 シャープ株式会社 画像形成装置
KR20110040108A (ko) * 2009-10-13 2011-04-20 삼성전자주식회사 화상형성장치 및 화상형성장치의 문서 관리방법
WO2012029238A1 (ja) * 2010-08-31 2012-03-08 日本電気株式会社 画像処理システム、画像処理方法および画像処理プログラム
US8905314B2 (en) 2010-09-30 2014-12-09 Apple Inc. Barcode recognition using data-driven classifier
JP5743589B2 (ja) * 2011-02-18 2015-07-01 キヤノン株式会社 Webサービスシステム、サーバ管理装置およびWebサービス提供方法
JP5490058B2 (ja) * 2011-06-08 2014-05-14 キヤノン株式会社 複写禁止情報を含む2次元コードを抽出可能な画像形成装置、その画像形成方法、プログラム
US20130082100A1 (en) * 2011-08-08 2013-04-04 Research In Motion Limited System and Method for Processing Barcodes in Electronic Data Communications
JP5871116B2 (ja) * 2011-09-05 2016-03-01 日本電気株式会社 画像処理装置、方法、およびプログラム
US20130238747A1 (en) 2012-03-06 2013-09-12 Apple Inc. Image beaming for a media editing application
US9041727B2 (en) 2012-03-06 2015-05-26 Apple Inc. User interface tools for selectively applying effects to image
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
US9202433B2 (en) 2012-03-06 2015-12-01 Apple Inc. Multi operation slider
US8971617B2 (en) 2012-03-06 2015-03-03 Apple Inc. Method and interface for converting images to grayscale
JP6057540B2 (ja) * 2012-05-07 2017-01-11 キヤノン株式会社 画像形成装置
WO2013179436A1 (ja) * 2012-05-31 2013-12-05 株式会社オプトエレクトロニクス 読取装置、読取結果出力方法及びプログラム
US9594286B2 (en) * 2012-12-31 2017-03-14 Lg Display Co., Ltd. Transparent display apparatus with adjustable transmissive area and a method for controlling the same
JP6269699B2 (ja) 2016-02-19 2018-01-31 株式会社リコー 画像処理装置、プログラム、画像処理方法
JP6786857B2 (ja) * 2016-04-15 2020-11-18 オムロン株式会社 画像処理装置、光学コード読取装置、画像処理方法、情報処理プログラムおよび記録媒体
JP6484603B2 (ja) * 2016-12-26 2019-03-13 新日鉄住金ソリューションズ株式会社 情報処理装置、システム、情報処理方法、及び、プログラム
CN107016363B (zh) * 2017-03-30 2020-06-05 理光图像技术(上海)有限公司 票据图像管理装置、票据图像管理系统以及方法
EP3428834B1 (de) * 2017-07-12 2019-06-12 Sick AG Optoelektronischer codeleser und verfahren zum lesen von optischen codes
JP6874606B2 (ja) * 2017-08-31 2021-05-19 ブラザー工業株式会社 制御プログラム、情報処理装置、及びスキャンシステム
JP7202520B2 (ja) 2018-10-15 2023-01-12 京セラドキュメントソリューションズ株式会社 画像処理装置
JP2020181599A (ja) * 2020-07-21 2020-11-05 オムロン株式会社 画像処理装置、光学コード読取装置、画像処理方法、情報処理プログラムおよび記録媒体
US11361528B2 (en) * 2020-08-11 2022-06-14 Nationstar Mortgage LLC Systems and methods for stamp detection and classification

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62120585A (ja) 1985-11-20 1987-06-01 Ricoh Co Ltd イメ−ジスキヤナによるバ−コ−ド認識装置
US5329105A (en) * 1992-08-10 1994-07-12 United Parcel Service Of America, Inc. Method and apparatus for determining the width of elements of bar code symbols
JP3906660B2 (ja) * 2001-09-14 2007-04-18 松下電器産業株式会社 光学的情報読取装置、光学的情報読取システム、及び、工程管理システム
JP4278918B2 (ja) * 2002-04-19 2009-06-17 富士通株式会社 画像データ処理装置とその方法
JP3960181B2 (ja) * 2002-09-20 2007-08-15 株式会社デンソーウェーブ 光学的情報読取装置
JP4259462B2 (ja) * 2004-12-15 2009-04-30 沖電気工業株式会社 画像処理装置,画像処理方法
JP4306619B2 (ja) 2005-01-27 2009-08-05 日本電気株式会社 移動体通信端末、その撮像制御方法およびプログラム
JP2007089136A (ja) * 2005-08-23 2007-04-05 Ricoh Co Ltd 画像処理方法、画像処理プログラム、記録媒体及び複合装置
JP4103909B2 (ja) * 2005-08-31 2008-06-18 株式会社デンソーウェーブ 携帯情報端末及び画像処理方法
JP2008040557A (ja) 2006-08-01 2008-02-21 Ricoh Co Ltd 画像表示装置、画像表示方法及び画像表示プログラム
JP2009032105A (ja) * 2007-07-27 2009-02-12 Kyocera Corp 画像復元装置およびその方法、並びに情報コード読取装置

Also Published As

Publication number Publication date
JP2010211738A (ja) 2010-09-24
US8333327B2 (en) 2012-12-18
US20100230493A1 (en) 2010-09-16

Similar Documents

Publication Publication Date Title
JP5262869B2 (ja) 画像処理システム、画像処理サーバ、mfp及び画像処理方法
JP4911340B2 (ja) 二次元コード検出システムおよび二次元コード検出プログラム
US9324073B2 (en) Systems for mobile image capture and remittance processing
US7636483B2 (en) Code type determining method and code boundary detecting method
JP5334042B2 (ja) 文字列認識方法及び文字列認識装置
US10650204B2 (en) Barcode detection method and barcode detection system for increasing detection efficiency by using gray level flip counts
KR20070032919A (ko) 이차원 코드의 검출 방법, 검출 장치, 및 검출 프로그램을기억한 기억 매체
JP2013131208A (ja) 機械可読シンボルの位置特定および解読を行う方法および装置
CN103400099A (zh) 终端和二维码识别方法
JP4574503B2 (ja) 画像処理装置、画像処理方法およびプログラム
Munoz-Mejias et al. A low-complexity pre-processing system for restoring low-quality QR code images
JP4465723B2 (ja) コード検出プログラム及びコード検出方法並びに画像形成装置
JP5011508B2 (ja) 文字列認識方法及び文字列認識装置
US9215344B2 (en) Image forming apparatus, image processing apparatus, image forming method, image processing method, and non-transitory computer readable medium
US10706337B2 (en) Character recognition device, character recognition method, and recording medium
JP2011096095A (ja) 画像処理システム、画像処理サーバ、画像形成装置及び画像認識処理方法
US11657632B2 (en) Image processing device, image reading device, image processing method, and non-transitory computer readable medium, using two pieces of image data
US11288536B2 (en) Image processing apparatus, image processing method, and non-transitory computer-readable storage medium
JP2013191078A (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP4905767B2 (ja) 二次元コード検出システムおよび二次元コード検出プログラム
JP2007334478A (ja) 画像処理装置及び画像処理方法
JP7532124B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2013061839A (ja) 画像処理装置、画像処理方法、画像形成装置、画像処理プログラム
JP7452060B2 (ja) 情報処理装置及びプログラム
JP2009088655A (ja) 制御プログラム、画像処理装置及び出力制御システム並びに出力制御方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120130

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120621

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130402

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130415

R151 Written notification of patent or utility model registration

Ref document number: 5262869

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151