JPWO2020183628A1 - 画像処理装置、画像読取装置、画像処理方法、及びプログラム - Google Patents

画像処理装置、画像読取装置、画像処理方法、及びプログラム Download PDF

Info

Publication number
JPWO2020183628A1
JPWO2020183628A1 JP2021504693A JP2021504693A JPWO2020183628A1 JP WO2020183628 A1 JPWO2020183628 A1 JP WO2020183628A1 JP 2021504693 A JP2021504693 A JP 2021504693A JP 2021504693 A JP2021504693 A JP 2021504693A JP WO2020183628 A1 JPWO2020183628 A1 JP WO2020183628A1
Authority
JP
Japan
Prior art keywords
image data
image
determination unit
image processing
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021504693A
Other languages
English (en)
Inventor
小原桂二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
PFU Ltd
Original Assignee
PFU Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PFU Ltd filed Critical PFU Ltd
Publication of JPWO2020183628A1 publication Critical patent/JPWO2020183628A1/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • G06V30/41Analysis of document content
    • G06V30/413Classification of content, e.g. text, photographs or tables
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00331Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus performing optical character recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00336Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus performing pattern recognition, e.g. of a face or a geographic feature
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00681Detecting the presence, position or size of a sheet or correcting its position before scanning
    • H04N1/00684Object of the detection
    • H04N1/00721Orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00681Detecting the presence, position or size of a sheet or correcting its position before scanning
    • H04N1/00729Detection means
    • H04N1/00734Optical detectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3877Image rotation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/12Detection or correction of errors, e.g. by rescanning the pattern
    • G06V30/133Evaluation of quality of the acquired characters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Abstract

画像処理装置は、少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定部と、判定部による判定結果に基づいて、複数の画像データに関する関係性を決定する決定部とを有する。また、関係性は、画像表示媒体の表裏、又は、ページ順序であり、決定部は、顔写真が含まれる画像データを、画像表示媒体の表面、又は、顔写真が含まれていない画像データよりも前のページであると決定する。
【選択図】図4

Description

本発明は、画像処理装置、画像読取装置、画像処理方法、及びプログラムに関する。
例えば、特許文献1には、所定書式に従って規格文字で個人の文字情報が記載されると共に、個人を識別するための画像情報が記載された身分証明書から、前記文字情報及び画像情 報からなる個人情報を読み取って記憶する個人情報読取り記憶装置であって、前記身分証明書の全記載内容を画像情報として光電的に読み取る読取り手段と、該読取り手段により読み取られた画像情報に基づいて前記身分証明書の読取り方向を判別する読取り方向判別手段と、該読取り方向判別手段により判別された読取り方向と前記読取り手段により読み取られた画像情報とに基づいて、読み取った身分証明書の有効性を判別する有効性判別手段と、前記読取り手段で読み取られた身分証明書が前記有効性判別手段で有効であると判別されたときに、前記読取り方向判別手段による判別結果に基づいて読取り領域を文字領域と画像領域とに分割する領域分割手段と、前記読取り手段で読み取られた画像情報に基づき前記領域分割手段で分割された文字領域の文字情報を認識して文字コードに変換する文字認識手段と、前記文字認識手段で変換された文字コード及び前記分割された画像領域内の画像情報を記憶する個人情報記憶手段と、を含んで構成された個人情報読取り記憶装置が開示されている。
また、特許文献2には、撮影によって得られた文書の表面画像と裏面画像とに対して、それぞれの形状を前記文書に対応する形状に補正する撮影画像補正部と、前記撮影画像補正部によって補正された表面画像と裏面画像とを合成する画像合成部と、を備えた、ことを特徴とする画像処理装置が開示されている。
特開平5−120356 特開2007−180872
読み取った面、又は画像表示媒体に応じた処理を行うことができる画像処理装置を提供することを目的とする。
本発明に係る画像処理装置は、少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定部と、前記判定部による判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定部とを有する。
好適には、前記関係性は、画像表示媒体の表裏、又は、ページ順序であり、前記決定部は、顔写真が含まれる画像データを、画像表示媒体の表面、又は、顔写真が含まれていない画像データよりも前のページであると決定する。
好適には、前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、前記決定部は、顔写真が含まれる画像データを、画像表示媒体の表面であると決定する。
好適には、決定した前記画像データの関係性に応じて、画像データに対する画像処理を変更する画像処理部をさらに有する。
好適には、前記決定部により決定された関係性に基づいて、文字認識処理を行うための定義情報を選択する定義選択部をさらに有する。
好適には、前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、前記決定部は、前記判定部により、2つの画像データの一方のみに顔写真が含まれる場合に、これらの画像データの関係性を決定し、前記決定部により決定された関係性に応じて、画像データの出力順序を入れ替える出力順序制御部をさらに有する。
好適には、前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、前記判定部によって、2つの画像データ双方に顔写真が含まれていると判定された場合、又は、2つの画像データ双方に顔写真が含まれていないと判定された場合に、ユーザに操作を促す表示を行う表示制御部をさらに有する。
好適には、入力された画像データそれぞれについて、画像の回転処理を行う回転部をさらに有し、前記判定部は、前記回転部により回転処理が行われた画像データについて、顔写真の有無を判定する。
本発明に係る画像読取装置は、画像表示媒体の両面から、画像データを読み取る読取部と、前記読取部により読み取られた複数の画像データについて、顔写真の有無を判定する判定部と、前記判定部による判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定部とを有する。
本発明に係る画像処理方法は、少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定ステップと、前記判定ステップによる判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定ステップとを有する。
本発明に係るプログラムは、少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定ステップと、前記判定ステップによる判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定ステップとをコンピュータに実行させる。
読み取った面、又は画像表示媒体に応じた処理を行うことができる。
画像処理システム1の全体構成を例示する図である。 画像処理装置5により表裏を正しくスキャンした場合の出力画像と表裏を誤ってスキャンした場合の出力画像を例示する図である。 画像処理装置5のハードウェア構成を例示する図である。 画像処理装置5の機能構成を例示する図である。 画像処理装置5による表裏判別処理(S10)を説明するフローチャートである。 顔写真判別結果に基づく表裏入れ替え要否を例示する表である。 表裏入れ替え要否に基づいたOCRテンプレートを例示する表である。
以下、本発明の実施形態を、図面を参照して説明する。
図1は、画像処理システム1の全体構成を例示する図である。
図1に例示するように、画像処理システム1は、複数のスキャナ3a、スキャナ3b、スキャナ3c及び画像処理装置5を含み、ネットワーク7を介して互いに接続している。スキャナ3a、スキャナ3b、スキャナ3cを合わせてスキャナ3と称する。
スキャナ3は、光学式の読取装置で取得した画像データを画像処理装置5に送信する。本例において、スキャナ3は、免許証又は名刺等の顔写真を有するIDカードの表面及び裏面をスキャンするものとする。なお、スキャナ3は、本発明に係る画像読取装置の一例であり、IDカードは、本発明に係る画像表示媒体の一例である。
画像処理装置5は、コンピュータ端末であり、スキャナ3から受信した表面及び裏面の画像データの表と裏を判別し、表面及び裏面に応じた処理を行う。具体的には、画像処理装置5は、画像データの顔写真の有無に基づいて、画像データの表裏を判別し、判別した結果に基づいて、各画像データに対してOCR処理(Optical Character Recognition)処理を行う。
ここで、画像処理装置5による処理内容を説明する。
両面を同時に読み取ることが可能なスキャナは、IDカードを読み取った場合、表面にはOCR処理を行い、裏面にはOCR処理を行わないことで、表面と裏面に対する処理を分けることができるが、スキャナの操作者がIDカードの表面と裏面とを誤って設置した場合、意図しない裏面に対してOCR処理が行われ、本来OCR処理すべき表面がOCR処理されず、再度のスキャン、又は手入力による修正が必要となるという課題があった。
しかし、図2に例示するように、画像処理装置5によれば、スキャナ3により表裏を誤ってスキャンした場合でも、顔写真の有無に基づいて表裏を判別し、表面として読み取られた画像データと裏面として読み取られた画像データとを入れ替え、顔写真を有する画像データを表面、顔写真の無い画像データを裏面として出力する。このように、表と裏とを判別して出力するため、表裏を誤ってスキャンした場合でも、再度のスキャン、又は手入力による修正は必要ない。
図2は、画像処理装置5のハードウェア構成を例示する図である。
図2に例示するように、画像処理装置5は、CPU200、メモリ202、HDD204、ネットワークインタフェース206(ネットワークIF206)、表示装置208、及び、入力装置210を有し、これらの構成はバス212を介して互いに接続している。
CPU200は、例えば、中央演算装置である。本例のCPU200は、マルチコアである。
メモリ202は、例えば、揮発性メモリであり、主記憶装置として機能する。
HDD204は、例えば、ハードディスクドライブ装置であり、不揮発性の記録装置としてコンピュータプログラム(例えば、図4の画像処理プログラム50)やその他のデータファイル(例えば、図4の書式定義データベース600)を格納する。
ネットワークIF206は、有線又は無線で通信するためのインタフェースであり、例えば、内部ネットワーク7における通信を実現する。
表示装置208は、例えば、液晶ディスプレイである。
入力装置210は、例えば、キーボード及びマウスである。
図4は、画像処理装置5の機能構成を例示する図である。
図4に例示するように、本例の画像処理装置5には、画像処理プログラム50がインストールされると共に、書式定義データベース600(書式定義DB600)が構成される。
画像処理プログラム50は、取得部500、変換部502、OCR処理部504、回転角度決定部506、回転部508、判定部510、決定部512、画像処理部514、出力順序制御部516、表示制御部518、及び定義選択部520を有する。
なお、画像処理プログラム50の一部又は全部は、ASICなどのハードウェアにより実現されてもよく、また、OS(Operating System)の機能を一部借用して実現されてもよい。
画像処理プログラム50において、取得部500は、スキャナ3により読み取られたIDカードの両面の画像データを取得する。
変換部502は、画像データの二値化を行う。具体的には、変換部502は、二値画像の中の黒色のドットの固まり具合に基づいて文字列と推測される領域を抽出する。
OCR処理部504は、画像データに対して文字認識処理を行う。
回転角度決定部506は、文字認識の精度が高くなる画像データの回転角度を決定する。具体的には、判定部510(後述)による顔検出において、正立した顔写真が必要であるため、回転角度決定部506は、顔写真が正立する画像データの回転角度を決定する。正立した顔写真とは、判定部510(後述)が顔写真であると認識できる、頭が上に、顎が下に位置する顔写真をいう。
回転部508は、入力された画像データそれぞれについて、画像の回転処理を行う。具体的には、回転部508は、回転角度決定部506により決定された回転角度で画像データを回転させる。
判定部510は、少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する。具体的には、判定部510は、1つのIDカードからから読み取られた2つの画像データについて、顔写真の有無を判定する。より具体的には、判定部510は、回転部508により回転処理が行われた画像データについて、顔写真の有無を判定する。
決定部512は、判定部510による判定結果に基づいて、複数の画像データに関する関係性を決定する。ここで、関係性とは、IDカードの表裏、又は、ページ順序をいう。具体的には、決定部512は、判定部510により、2つの画像データの一方のみに顔写真が含まれる場合に、これらの画像データの関係性を決定する。さらに具体的には、決定部512は、顔写真が含まれる画像データを、IDカードの表面、又は、顔写真が含まれていない画像データよりも前のページであると決定する。
また、決定部512は、判定部510により、2つの画像データの一方のみに顔写真が含まれる場合に、これらの画像データの関係性を決定する。
画像処理部514は、決定部512により決定された画像データの関係性に応じて、画像データに対する画像処理を変更する。具体的には、画像処理部514は、画像データの表裏、又はページ順序に応じて、画像データの表裏の入れ替え、画像データのページ番号の変更、又は、画像データに対する二値化処理を行うことを決定する。
出力順序制御部516は、決定部512により決定された関係性に応じて、画像データの出力順序を入れ替える。具体的には、出力順序制御部516は、決定部512により決定されたIDカードの表裏に応じて、画像データの表裏を入れ替え、画像の出力順序を入れ替える。また、出力順序制御部516は、決定部512により決定されたページ順序に応じて、画像データに関連付けられたページ番号を変更する。
表示制御部518は、判定部510によって、2つの画像データ双方に顔写真が含まれていると判定された場合、又は、2つの画像データ双方に顔写真が含まれていないと判定された場合に、ユーザに操作を促す表示を行う。具体的には、表示制御部518は、ユーザに顔写真検出結果の確認を促す表示を行う、又は、ユーザに画像データが表面であるか裏面であるかの選択を促す表示を行う。
定義選択部520は、決定部512により決定された関係性に基づいて、文字認識処理を行うための定義情報を選択する。具体的には、定義選択部520は、決定部512に決定された画像データの表裏、又はページ順序に基づいて、OCR処理部504が使用する書式定義(OCRテンプレート)を書式定義DB600から選択する。
図5は、画像処理装置5による表裏判別処理(S10)を説明するフローチャートである。
画像処理装置5は、マルチコアCPUを搭載し、マルチスレッドで動作する。なお、処理状態として、「Wait」は、処理待ち、「Proc」は、処理を実行中、「Done」は処理を完了した状態を示す。
図5に例示するように、ステップ100(S100)において、取得部500は、スキャナ3より取得したIDカードの表面及び裏面の画像データを取得する。具体的には、取得部500は、スキャナ3により、表面及び裏面の画像データと画像データに関連付けられたページ番号とを取得する。例えば、画像データとページ番号は、1枚目表をページ番号「1」、2枚目裏をページ番号「2」のように関連付けられている。取得部500は、各画像データを、画像処理待ち(Wait状態)キューに追加する。画像処理スレッドが画像処理を開始する際には、状態が「Wait」から「Proc」へと更新される。
ステップ105(S105)において、変換部502は、取得した画像データの二値化を行い、二値画像の中の黒色のドットの固まり具合に基づいて、文字列と推測される領域を抽出する。OCR処理部504は、抽出された文字列と推測される領域を、0度、90度、−90度、180度で回転させながら文字認識する。回転角度決定部506は、各回転角度における文字認識結果のうち、最も文字認識の精度が高い回転角度を決定する。
ステップ110(S110)において、回転部508は、画像データを、回転角度決定部506により決定された角度で回転させる。回転により、画像データ中に顔写真が含まれる場合は、顔写真が正立した状態となる。
ステップ115(S115)において、判定部510は、ページ番号「1」の画像データ及びページ番号「2」の画像データそれぞれについて画像データ中に顔写真が含まれるか否かを判別する。具体的には、判定部510は、オープンソースソフトウェアであるOpenCVに含まれるHaar Cascadesを用いて、画像データ中の顔検出を行う。判定部510は、Haar Cascades以外でも、顔を検出できればよく、例えば、固有顔を利用した顔検出を行ってもよい。
判定部510によりページ番号「1」の画像データに顔写真を検出せず、ページ番号「2」の画像データに顔写真を検出した場合に、表裏判別処理(S10)は、S120へ移行し、それ以外の場合にS140へ移行する。ここで、判定部510は、ページ番号「1」及びページ番号「2」の画像データが共に顔検出処理が終了するのを待ち合わせる。
ステップ120(S120)において、決定部512は、ページ番号「1」及びページ番号「2」の画像データの顔写真の有無に基づいて、図6に例示するように、表裏の入れ替えを通知する表裏入れ替え要否を、「要入れ替え」と決定し、結果を保存する。判定部510は、待ち合わが必要な処理が終了したため、待ち合わせを解除する。画像処理部514は、決定部512により決定された関係性に応じて、画像データに対する画像処理を決定する。
ステップ125(S125)において、変換部502は、各画像データに対する残りの画像処理、例えば二値化を行う。全ての画像処理が終了した場合に、画像処理スレッドは、画像処理待ちキューの各画像データの状態を「Proc」から「Done」に変更する。さらに、画像処理スレッドは、最もページ番号が小さく、状態が「Done」であるページを画像処理待ちキューから削除し、画像処理済みキューへ登録する。
ステップ130(S130)において、出力順序制御部516は、画像処理部514により表裏の入れ替えが必要と判定される場合に、S135へ移行し、必要でない場合に表裏判別処理(S10)は終了する。
ステップ135(S135)において、定義選択部520は、決定部512により決定された表裏の入れ替え要否に基づいて、OCR処理に使用する書式定義であるOCRテンプレートを切り替え、OCR処理部504は、定義選択部520により選択されたOCRテンプレート使用して各画像データに対してOCR処理を実施する。
S135では、表裏の入れ替え要否に基づいてOCRテンプレートを切り替えているが、出力順序制御部516が、決定部512により決定された表裏の入れ替え要否に基づいて、表面として取得したページ番号「1」の画像データと裏面として取得したページ番号「2」の画像データとの表裏を入れ替え、画像の出力順序を入れ替えてもよい。
ステップ140(S140)において、判定部510によりページ番号「1」の画像データ及びページ番号「2」の画像データの両方に顔写真を検出した場合、又は、ページ番号「1」の画像データ及びページ番号「2」の画像データの両方に顔写真を検出しなかった場合に表裏判別処理(S10)は、表裏入れ替え要否を「入れ替え候補」と決定し、S145へ移行し、それ以外の場合に、表裏入れ替え要否を「入れ替えしない」と決定し、S125へ移行する。
ステップ145(S145)において、表示制御部518は、ユーザに操作を促す表示を行う。具体的には、表示制御部518は、ユーザに顔写真検出結果の確認を促す表示を行う、又は、ユーザに画像データが表面であるか裏面であるかの選択を促す表示を行う。
画像処理装置5は、マルチコアCPUを搭載しているため、表面として取得した画像データ、及び裏面として取得した画像データに対し、並列で画像処理を行う。画像処理装置5は、表面として取得した画像データ、及び裏面として取得した画像データが必要である場合は、処理を待ち合わせることにより、画像処理全体の処理時間を縮めることを可能にする。
次に、OCR処理部504が文字認識に使用するOCRテンプレートについて説明する。
図7は、表裏入れ替え要否に基づいたOCRテンプレートを例示する表である。
表裏の入れ替え要否が決定した後に画像データの文字認識を行う際、OCR処理部504は、表裏の入れ替え要否の結果に応じたOCRテンプレートを使用して文字認識を行う。
具体的には、図7に例示するように、定義選択部520は、表裏入れ替え要否の結果が「要入れ替え」である画像データに対して、給紙面と逆の面用のOCRテンプレートを選択する。例えば、表面として取得した画像データが、裏面の画像データであった場合に、OCR処理部504は、定義選択部520により選択された裏面用のOCRテンプレートを使用する。
また、定義選択部520は、裏入れ替え要否の結果が「入れ替え候補」である画像データに対して、給紙面用のOCRテンプレートと、給紙面と逆のOCRテンプレートとの両方を選択する。例えば、表面として取得した画像データが、表面の画像データであるか、裏面の画像データであるか判別できない場合に、OCR処理部504は、定義選択部520により選択された給紙面用のOCRテンプレートと給紙面と逆のOCRテンプレートとの両方を使用する。
さらに、定義選択部520は、裏入れ替え要否の結果が「入れ替えしない」である画像データに対して、給紙面用のOCRテンプレートを選択する。例えば、表面として取得した画像データが、表面の画像データであった場合に、OCR処理部504は、定義選択部520により選択された給紙面用のOCRテンプレートを使用する。
以上説明したように、画像処理装置5によれば、スキャナ3によりIDカードの表裏を逆に読み取ってしまった場合でも、表面として読み取った画像データ、及び裏面として読み取った画像データを顔写真の有無に基づいて、表面であるか、又は裏面であるかを判別し、判別した結果に応じて画像データに対する処理内容を変更することができる。つまり、画像処理装置5によれば、スキャナ操作者のIDカードの設置の正誤に関わらず、IDカードの表面及び裏面に対して適切な文字認識を可能にする。
上記実施形態では、文字列と推測される領域の文字認識の精度に基づいて回転角度を決定しているが、これに限定されず、例えば、画像データを、0度、90度、−90度、180度で回転させながら、各回転角度において、判定部510が顔写真を検出できるか否かに基づいて、回転角度を決定してもよい。
また、上記実施形態では、画像処理装置5がスキャナ3により読み取られた画像データの表裏を判別しているが、これに限定されず、スキャナ3が、画像データを読み取り、読み取った画像データについて、顔写真の有無を判定する判定部510、及び判定部510による判定結果に基づいて、複数の画像データの関係性を決定する決定部512を有してもよい。
1…画像処理システム
3…スキャナ
5…画像処理装置
50…画像処理プログラム
500…取得部
502…変換部
504…OCR処理部
506…回転角度決定部
508…回転部
510…判別部
512…決定部
514…画像処理部
516…出力順序制御部
518…表示制御部
520…定義選択部
600…書式定義データベース

Claims (11)

  1. 少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定部と、
    前記判定部による判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定部と
    を有する画像処理装置。
  2. 前記関係性は、画像表示媒体の表裏、又は、ページ順序であり、
    前記決定部は、顔写真が含まれる画像データを、画像表示媒体の表面、又は、顔写真が含まれていない画像データよりも前のページであると決定する
    請求項1に記載の画像処理装置。
  3. 前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、
    前記決定部は、顔写真が含まれる画像データを、画像表示媒体の表面であると決定する
    請求項2に記載の画像処理装置。
  4. 決定した前記画像データの関係性に応じて、画像データに対する画像処理を変更する画像処理部
    をさらに有する
    請求項1に記載の画像処理装置。
  5. 前記決定部により決定された関係性に基づいて、文字認識処理を行うための定義情報を選択する定義選択部
    をさらに有する請求項1に記載の画像処理装置。
  6. 前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、
    前記決定部は、前記判定部により、2つの画像データの一方のみに顔写真が含まれる場合に、これらの画像データの関係性を決定し、
    前記決定部により決定された関係性に応じて、画像データの出力順序を入れ替える出力順序制御部
    をさらに有する請求項1に記載の画像処理装置。
  7. 前記判定部は、1つの画像表示媒体から読み取られた2つの画像データについて、顔写真の有無を判定し、
    前記判定部によって、2つの画像データ双方に顔写真が含まれていると判定された場合、又は、2つの画像データ双方に顔写真が含まれていないと判定された場合に、ユーザに操作を促す表示を行う表示制御部
    をさらに有する請求項1に記載の画像処理装置。
  8. 入力された画像データそれぞれについて、画像の回転処理を行う回転部
    をさらに有し、
    前記判定部は、前記回転部により回転処理が行われた画像データについて、顔写真の有無を判定する
    請求項1に記載の画像処理装置。
  9. 画像表示媒体の両面から、画像データを読み取る読取部と、
    前記読取部により読み取られた複数の画像データについて、顔写真の有無を判定する判定部と、
    前記判定部による判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定部と
    を有する画像読取装置。
  10. 少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定ステップと、
    前記判定ステップによる判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定ステップと
    を有する画像処理方法。
  11. 少なくとも1つの画像表示媒体から読み取られた複数の画像データについて、顔写真の有無を判定する判定ステップと、
    前記判定ステップによる判定結果に基づいて、複数の前記画像データに関する関係性を決定する決定ステップと
    をコンピュータに実行させるプログラム。
JP2021504693A 2019-03-13 2019-03-13 画像処理装置、画像読取装置、画像処理方法、及びプログラム Pending JPWO2020183628A1 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/010155 WO2020183628A1 (ja) 2019-03-13 2019-03-13 画像処理装置、画像読取装置、画像処理方法、及びプログラム

Publications (1)

Publication Number Publication Date
JPWO2020183628A1 true JPWO2020183628A1 (ja) 2021-10-14

Family

ID=72427370

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021504693A Pending JPWO2020183628A1 (ja) 2019-03-13 2019-03-13 画像処理装置、画像読取装置、画像処理方法、及びプログラム

Country Status (4)

Country Link
US (1) US11657632B2 (ja)
EP (1) EP3940628A4 (ja)
JP (1) JPWO2020183628A1 (ja)
WO (1) WO2020183628A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021097353A (ja) * 2019-12-18 2021-06-24 キヤノン株式会社 データ送信装置、データ送信装置の制御方法、及びプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05120356A (ja) * 1991-10-29 1993-05-18 Konica Corp 個人情報読取り記憶装置
JP2018093310A (ja) * 2016-11-30 2018-06-14 株式会社リコー 画像処理システム、画像処理方法、画像処理装置、プログラム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4591343B2 (ja) 2005-12-27 2010-12-01 カシオ計算機株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
JP5354465B2 (ja) * 2009-08-10 2013-11-27 株式会社リコー 画像形成装置、画像処理パラメータ設定方法、及びプログラム
IL202028A (en) * 2009-11-10 2016-06-30 Icts Holding Company Ltd Product, devices and methods for computerized authentication of electronic documents
FR2963314B1 (fr) * 2010-07-27 2013-06-14 Airbus Operations Sas Procede et dispositif d'amenagement d'une soute avionique en pointe-avant d'un aeronef
JP6074968B2 (ja) * 2012-09-20 2017-02-08 コニカミノルタ株式会社 画像処理装置及び制御プログラム
US10320807B2 (en) * 2014-02-25 2019-06-11 Sal Khan Systems and methods relating to the authenticity and verification of photographic identity documents
JP6518072B2 (ja) * 2015-01-28 2019-05-22 キヤノン株式会社 個人番号管理システムとその制御方法、及び画像処理装置とその制御方法、及びプログラム
JPWO2017146161A1 (ja) * 2016-02-26 2018-12-27 日本電気株式会社 顔照合システム、顔照合装置、顔照合方法、及び記録媒体
JP2017182194A (ja) 2016-03-28 2017-10-05 セイコーエプソン株式会社 認証装置の制御方法、及び印刷装置の制御方法
JP6756242B2 (ja) * 2016-11-10 2020-09-16 ブラザー工業株式会社 画像処理装置、および、プログラム
JP6921522B2 (ja) * 2016-12-15 2021-08-18 キヤノン株式会社 画像処理装置及びその制御方法並びにプログラム
JP6886090B2 (ja) * 2017-04-07 2021-06-16 富士フイルムビジネスイノベーション株式会社 画像形成装置
JP2020021222A (ja) * 2018-07-31 2020-02-06 株式会社メルカリ プログラム、情報処理方法、情報処理装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05120356A (ja) * 1991-10-29 1993-05-18 Konica Corp 個人情報読取り記憶装置
JP2018093310A (ja) * 2016-11-30 2018-06-14 株式会社リコー 画像処理システム、画像処理方法、画像処理装置、プログラム

Also Published As

Publication number Publication date
EP3940628A4 (en) 2022-11-09
US11657632B2 (en) 2023-05-23
WO2020183628A1 (ja) 2020-09-17
EP3940628A1 (en) 2022-01-19
US20220150374A1 (en) 2022-05-12

Similar Documents

Publication Publication Date Title
US8131081B2 (en) Image processing apparatus, and computer program product
US20070188793A1 (en) Information processing apparatus and method and program of controlling an information processing apparatus
US8248651B2 (en) Image processing apparatus, image processing method, and program therefor
JP2004265384A (ja) 画像処理システム及び情報処理装置、並びに制御方法及びコンピュータプログラム及びコンピュータ可読記憶媒体
JP4945372B2 (ja) 多機能入出力装置及びその制御方法、並びに多機能入出力装置制御プログラム及び記録媒体
JP7017060B2 (ja) 画像処理装置及び画像処理プログラム
KR20110040108A (ko) 화상형성장치 및 화상형성장치의 문서 관리방법
JP6665498B2 (ja) 情報処理装置、画像処理システム及びプログラム
US10084940B2 (en) Image forming apparatus, and method for image processing thereof
US11025792B2 (en) Image processing apparatus and non-transitory computer readable medium for document processing
JP2018128825A (ja) 画像処理装置及び画像処理プログラム
WO2020183628A1 (ja) 画像処理装置、画像読取装置、画像処理方法、及びプログラム
JP2010061471A (ja) 文字認識装置およびプログラム
US11836233B2 (en) Image processing apparatus and authentication method using biometric information
US10706337B2 (en) Character recognition device, character recognition method, and recording medium
US20180174324A1 (en) Image processing apparatus for clipping and sorting images from read image according to cards and control method therefor
JP7192441B2 (ja) 情報処理装置、情報処理装置の画像回転方法、およびプログラム
US20210097271A1 (en) Character recognition using previous recognition result of similar character
US11722615B2 (en) Image processing including adjusting image orientation
US8280271B2 (en) Printing system and order-sheet-based batch printing method
JP2019018528A (ja) 画像処理装置及び画像処理プログラム
US20230244889A1 (en) Information processing apparatus, non-transitory computer readable medium storing information processing program, and information processing method
US11620840B2 (en) Image processing apparatus for extracting a desired character string from a scanned image
US20230273952A1 (en) Image processing apparatus, image processing method, and storage medium
JP2008017271A (ja) 画像形成装置及びその方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210401

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220527

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220722

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20221118

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221213