JP2020052916A - 画像処理装置、イメージスキャナ、及び画像処理方法 - Google Patents
画像処理装置、イメージスキャナ、及び画像処理方法 Download PDFInfo
- Publication number
- JP2020052916A JP2020052916A JP2018184080A JP2018184080A JP2020052916A JP 2020052916 A JP2020052916 A JP 2020052916A JP 2018184080 A JP2018184080 A JP 2018184080A JP 2018184080 A JP2018184080 A JP 2018184080A JP 2020052916 A JP2020052916 A JP 2020052916A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- recording medium
- information recording
- image
- angle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 123
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000012937 correction Methods 0.000 claims abstract description 114
- 238000004364 calculation method Methods 0.000 claims abstract description 87
- 238000003384 imaging method Methods 0.000 claims description 23
- 238000000034 method Methods 0.000 description 47
- 238000006243 chemical reaction Methods 0.000 description 20
- 238000003702 image correction Methods 0.000 description 16
- 238000005286 illumination Methods 0.000 description 12
- 230000001678 irradiating effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000009466 transformation Effects 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007717 exclusion Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000002932 luster Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
- H04N1/3877—Image rotation
- H04N1/3878—Skew detection or correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
- G06T3/608—Rotation of whole images or parts thereof by skew deformation, e.g. two-pass or three-pass rotation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00681—Detecting the presence, position or size of a sheet or correcting its position before scanning
- H04N1/00684—Object of the detection
- H04N1/00718—Skew
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
- H04N1/3872—Repositioning or masking
- H04N1/3873—Repositioning or masking defined only by a limited number of coordinate points or parameters, e.g. corners, centre; for trimming
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Character Input (AREA)
Abstract
【課題】輪郭のコントラストが低い画像データの角度補正を行うことが可能な画像処理装置を提供する。【解決手段】第一画像取得部100は、第一波長域の光の照射下で撮像された情報記録媒体2を含む第一画像データ200を取得する。角度算出部110は、第一画像データ200から、情報記録媒体2の傾き角度を算出する。第二画像取得部130は、第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い情報記録媒体2を含む第二画像データ220を取得する。角度補正部140は、第二画像データ220について、角度算出部110により算出された傾き角度により情報記録媒体2の傾きを補正した補正画像データ230を作成する。【選択図】図2
Description
本発明は、画像処理装置、イメージスキャナ、及び画像処理方法に係り、特に情報記録媒体が撮像された画像データの角度補正等を行う画像処理装置、イメージスキャナ、及び画像処理方法に関する。
従来から、運転免許証やパスポート等の情報記録媒体を撮像する「マルチドキュメントスキャナ」と呼ばれるイメージスキャナが存在する。このようなイメージスキャナでは、スキャンされた画像データにおいて、情報記録媒体の傾きの補正(以下、「角度補正」という。)を行う必要がある。
たとえば、従来の技術として、特許文献1には、走査方向に対する傾き角度を認識対象行毎に複数箇所で求め、この傾き角度を記憶しておき、文字を認識する対象行毎に、記憶していた傾き角度に応じてデータ取り出し範囲を可変にする技術が記載されている。
ここで、情報記録媒体を撮像するためのイメージスキャナでは、通常の可視光線の他に、偽造防止用マークを紫外線や赤外線等の不可視波長域で撮像することがある。この場合、特に紫外線等で撮像された画像データは、輪郭のコントラストが低くなっていた。
しかしながら、特許文献1に記載された技術では、そもそも輪郭のコントラストが低い画像データの傾きを算出することができないため、角度補正することが難しかった。
しかしながら、特許文献1に記載された技術では、そもそも輪郭のコントラストが低い画像データの傾きを算出することができないため、角度補正することが難しかった。
本発明は、このような状況に鑑みてなされたものであり、輪郭のコントラストが低い画像データの角度補正を行うことが可能な画像処理装置、イメージスキャナ、及び画像処理方法を提供することを目的とする。
本発明の画像処理装置は、第一波長域の光の照射下で撮像された情報記録媒体を含む第一画像データを取得する第一画像取得部と、前記第一画像取得部により取得された前記第一画像データから、前記情報記録媒体の傾き角度を算出する角度算出部と、前記第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い前記情報記録媒体を含む第二画像データを取得する第二画像取得部と、前記第二画像取得部により取得された前記第二画像データについて、前記角度算出部により算出された前記傾き角度により前記情報記録媒体を角度補正した補正画像データを作成する角度補正部とを備えることを特徴とする。
このように構成することで、第二波長域の光の照射下で撮像された第二画像データにおいても、情報記録媒体の輪郭のコントラストによらず角度補正することができる。
このように構成することで、第二波長域の光の照射下で撮像された第二画像データにおいても、情報記録媒体の輪郭のコントラストによらず角度補正することができる。
本発明の画像処理装置は、前記角度算出部は、前記第一画像データのいずれかの軸について、前記情報記録媒体を通過するように引かれた平行な二本の直線について、前記情報記録媒体のエッジとの各交点を算出し、算出された各交点の間の水平方向の距離及び垂直方向の距離により、前記情報記録媒体の傾き角度を算出することを特徴とする。
このように構成することで、容易な計算により、傾き角度を算出することができる。
このように構成することで、容易な計算により、傾き角度を算出することができる。
本発明の画像処理装置は、前記角度算出部は、各軸方向への各ラインにおける輝度値から四つの端点を検出し、検出された四つの端点から前記情報記録媒体の外接四角形を算出し、前記第一画像データから、前記外接四角形の外側のデータを除去することを特徴とする。
このように構成することで、不要なデータを事前に除去して、その後の画像処理の速度を向上させることができる。
このように構成することで、不要なデータを事前に除去して、その後の画像処理の速度を向上させることができる。
本発明の画像処理装置は、前記角度補正部は、前記情報記録媒体の中心座標を回転の中心として前記情報記録媒体を角度補正することを特徴とする。
このように構成することで、補正後の情報記録媒体が補正後の画像データの中心に位置しやすくなり、その後の処理が容易になる。
このように構成することで、補正後の情報記録媒体が補正後の画像データの中心に位置しやすくなり、その後の処理が容易になる。
本発明の画像処理装置は、前記第一波長域の光は、可視光及び赤外光のいずれかであり、前記第二波長域の光は、紫外光であることを特徴とする。
このように構成することで、紫外光を用いて撮像した第二画像データを、可視光及び/又は赤外光の第一画像データを用いて角度補正できる。
このように構成することで、紫外光を用いて撮像した第二画像データを、可視光及び/又は赤外光の第一画像データを用いて角度補正できる。
本発明のイメージスキャナは、前記画像処理装置と、前記情報記録媒体が載置される載置部と、前記載置部に載置された前記情報記録媒体に前記第一波長域の光を照射する第一照射部と、前記載置部に載置された前記情報記録媒体に前記第二波長域の光を照射する第二照射部と、前記第一画像データ及び前記第二画像データを撮像する撮像部とを備えることを特徴とする。
このように構成することで、マルチドキュメントスキャナ等のイメージスキャナにおいて、画像処理装置による画像補正処理を容易に実現することができる。
このように構成することで、マルチドキュメントスキャナ等のイメージスキャナにおいて、画像処理装置による画像補正処理を容易に実現することができる。
本発明の画像処理方法は、画像処理装置により実行される画像処理方法であって、第一波長域の光の照射下で撮像された情報記録媒体を含む第一画像データを取得し、取得された前記第一画像データから、前記情報記録媒体の傾き角度を算出し、前記第一波長域と波長の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い前記情報記録媒体を含む第二画像データを取得し、前記第二画像データについて、算出された前記傾き角度により前記情報記録媒体を角度補正することを特徴とする。
このように構成することで、第二波長域の光の照射下で撮像された第二画像データにおいても、情報記録媒体の輪郭のコントラストによらず角度補正することができる。
このように構成することで、第二波長域の光の照射下で撮像された第二画像データにおいても、情報記録媒体の輪郭のコントラストによらず角度補正することができる。
本発明によれば、第一波長域の光の照射下で撮像された第一画像データから情報記録媒体の傾き角度を算出し、第二波長域の光の照射下で撮像された、輪郭のコントラストが低い情報記録媒体を含む第二画像データについて、第一画像データで算出された傾き角度により角度補正して補正画像データを作成することで、輪郭のコントラストが低い第二画像データにおいても角度補正可能な画像処理装置、イメージスキャナ、及び画像処理方法を提供することができる。
<実施の形態>
以下、発明を実施するための形態(以下、「実施形態」という。)を、図面を参照しつつ説明する。
以下、発明を実施するための形態(以下、「実施形態」という。)を、図面を参照しつつ説明する。
〔イメージスキャナ1の全体構成〕
まず、図1を参照して、本発明の実施の形態に係るイメージスキャナ1の構成について説明する。
イメージスキャナ1は、情報記録媒体2を撮像し、各種処理を行うための装置である。本実施形態においては、イメージスキャナ1は、例えば、空港や公的機関等で、情報記録媒体2に記録された情報の読み取りを、光学センサと画像処理を用いて実現するマルチドキュメントスキャナである。
まず、図1を参照して、本発明の実施の形態に係るイメージスキャナ1の構成について説明する。
イメージスキャナ1は、情報記録媒体2を撮像し、各種処理を行うための装置である。本実施形態においては、イメージスキャナ1は、例えば、空港や公的機関等で、情報記録媒体2に記録された情報の読み取りを、光学センサと画像処理を用いて実現するマルチドキュメントスキャナである。
情報記録媒体2は、例えば、JISに準拠している一般的なカード媒体(以下、単に「カード」という。)、パスポート、証明書類、その他の帳票や印刷物等、形状仕様の異なる媒体である。
本実施形態においては、情報記録媒体2が、例えば、運転免許証、ID(Identification)カード、保険証、その他のカード等である例について説明する。これらのカードは、例えば、矩形(長辺と短辺とを有する四角形、長方形)で、例えば、幅86mm、高さ54mm、厚み0.76mmというサイズのプラスチックカードである。
ここで、情報記録媒体2の表面には、可視光で視認可能な文字や写真やマーク等が印刷、刻印等されている。さらに、本実施形態では、偽造防止等のため、紫外光や赤外光でのみ視認可能な文字やマーク等が印刷されている。
本実施形態においては、情報記録媒体2が、例えば、運転免許証、ID(Identification)カード、保険証、その他のカード等である例について説明する。これらのカードは、例えば、矩形(長辺と短辺とを有する四角形、長方形)で、例えば、幅86mm、高さ54mm、厚み0.76mmというサイズのプラスチックカードである。
ここで、情報記録媒体2の表面には、可視光で視認可能な文字や写真やマーク等が印刷、刻印等されている。さらに、本実施形態では、偽造防止等のため、紫外光や赤外光でのみ視認可能な文字やマーク等が印刷されている。
次に、本実施形態のイメージスキャナ1の構成について説明する。
イメージスキャナ1は、主要な構成要素として、画像処理装置10、載置部20、及び撮像部40を備えている。
イメージスキャナ1は、主要な構成要素として、画像処理装置10、載置部20、及び撮像部40を備えている。
画像処理装置10は、画像データを処理するPC(Personal Computer)や専用装置等である。
画像処理装置10は、撮像部40から取得した画像データ上で情報記録媒体2を認識して、画像上での回転角度(以下、「傾き」という。)を検出し、角度補正するような画像補正処理を実行する。つまり、角度補正として、画像空間上の座標軸に対する情報記録媒体2の傾きをゼロにする。以下、本実施形態においては、この角度補正に関する画像処理装置10の構成について主に説明する。
なお、画像処理装置10は、補正された画像データから、情報記録媒体2上に記録されている文字又はバーコード等を認識、復号することも可能である。
画像処理装置10は、撮像部40から取得した画像データ上で情報記録媒体2を認識して、画像上での回転角度(以下、「傾き」という。)を検出し、角度補正するような画像補正処理を実行する。つまり、角度補正として、画像空間上の座標軸に対する情報記録媒体2の傾きをゼロにする。以下、本実施形態においては、この角度補正に関する画像処理装置10の構成について主に説明する。
なお、画像処理装置10は、補正された画像データから、情報記録媒体2上に記録されている文字又はバーコード等を認識、復号することも可能である。
載置部20は、情報記録媒体2が載置されるテーブル等である。本実施形態においては、載置部20は、黒色等で光沢がなく、光を反射しにくいように構成されている。
第一照射部31は、載置部20に載置された情報記録媒体2に、第一波長域の光を照射する照光ユニットである。この照光ユニットは、例えば、LED(Light Emitting Diode)、導光板、ディフューザー等を含んで構成される。このLEDは、第一波長域の光を照射可能であり、例えば、波長域380nm〜780nm程度の白色LED、波長域780nm〜1mm程度の赤外線LED等のいずれかを含む。
第二照射部32は、載置部20に載置された情報記録媒体2に第二波長域の光を照射する照光ユニットである。第二照射部32は、第二波長域の光を照射可能な、例えば、波長域300〜400nmの紫外LEDを含んでいる。
本実施形態においては、第一照射部31と第二照射部32とは、一体的に構成され、点灯されるLED群が画像処理装置10に制御されることで区別される。
本実施形態においては、第一照射部31と第二照射部32とは、一体的に構成され、点灯されるLED群が画像処理装置10に制御されることで区別される。
撮像部40は、光を検出して電荷を発生させる光電変換素子を用いたイメージセンサ、イメージセンサの画素領域に入射光を導く(被写体像を結像する)光学系(レンズ等)、イメージセンサの画素が読み出された電気信号をデジタルデータに変換するA/D変換部(Analog to Digital Converter)、デジタルデータのフォーマット等を変換して画像データとして画像処理装置10に送信する回路等を含む。このうち、イメージセンサは、CCD(Charge Coupled Device)イメージセンサ、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等である。
本実施形態においては、撮像部40は、載置部20上に載置され、第一照射部31又は第2照射部で照明される情報記録媒体2の全体を含む特定の領域を撮像し、第一画像データ200又は第二画像データ220(図2)を画像処理装置10に出力する。
本実施形態においては、撮像部40は、載置部20上に載置され、第一照射部31又は第2照射部で照明される情報記録媒体2の全体を含む特定の領域を撮像し、第一画像データ200又は第二画像データ220(図2)を画像処理装置10に出力する。
次に、図2により、主に、画像処理装置10により角度補正を行う際の制御及び機能の構成について説明する。
本実施形態において、画像形成装置は、制御部11及び記憶部12を含んでいる。記憶部12は、専用のバスや接続線等で制御部11に接続される。
本実施形態において、画像形成装置は、制御部11及び記憶部12を含んでいる。記憶部12は、専用のバスや接続線等で制御部11に接続される。
制御部11は、イメージスキャナ1の各部を統合的に制御し、画像補正処理を含む各種処理を実行する。制御部11は、例えば、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、DSP(Digital Signal Processor)、専用回路等の制御演算手段、各部を制御するための周辺回路等から構成される。
記憶部12は、制御部11により実行される制御プログラム及びデータが格納される一時的でない記録媒体である。記憶部12は、主記憶部と、補助記憶部とを含む。
このうち、主記憶部は、各種DRAM(Dynamic RAM)、SRAM(Static RAM)等のRAM(Random Access Memory)を含む。主記憶部は、補助記憶部に格納された制御プログラムが展開され、撮像部40により撮像された画像データ、補正された画像データ等が格納されるワーキングエリア等となる。
補助記憶部は、EEPROMやフラッシュメモリ等のROM(Read Only Memory)、HDD(Hard Disk Drive)、SSD(Solid State Drive)等を含む。
補助記憶部には、制御プログラム及びデータが格納される。この制御プログラムは、ファームウェア(Firmware)、OS(Operating System)、イメージスキャナ1の装置制御を行うデバイスドライバー(Device Driver)、画像補正処理、文字又はバーコードの認識及び復号を行う認識用アプリケーションプログラム(Application Program、以下単に「アプリ」という。)、これらを制御するアプリ等を含んでいる。
このうち、主記憶部は、各種DRAM(Dynamic RAM)、SRAM(Static RAM)等のRAM(Random Access Memory)を含む。主記憶部は、補助記憶部に格納された制御プログラムが展開され、撮像部40により撮像された画像データ、補正された画像データ等が格納されるワーキングエリア等となる。
補助記憶部は、EEPROMやフラッシュメモリ等のROM(Read Only Memory)、HDD(Hard Disk Drive)、SSD(Solid State Drive)等を含む。
補助記憶部には、制御プログラム及びデータが格納される。この制御プログラムは、ファームウェア(Firmware)、OS(Operating System)、イメージスキャナ1の装置制御を行うデバイスドライバー(Device Driver)、画像補正処理、文字又はバーコードの認識及び復号を行う認識用アプリケーションプログラム(Application Program、以下単に「アプリ」という。)、これらを制御するアプリ等を含んでいる。
この他にも、画像処理装置10は、撮像部40と接続して制御し、図示しない上位装置やネットワークへ接続するためのインターフェイス(interface)、撮像された画像データ等を表示するディスプレイ等の表示部、操作指示用のボタンやポインティングデバイスやキーボード等の入力部を備えている。このうち、インターフェイスは、例えば、USB(Universal Serial Bus)、RS−232C、LAN(Local Area Network)インターフェイス等を含んでいる。
さらに、これらに加えて、イメージスキャナ1は、外部光を遮断する筐体、電源装置、表示装置、操作パネル等も備えている。さらに、イメージスキャナ1は、監視用PCやサーバー等の上位装置に接続されていてもよい。
〔画像処理装置10の機能構成〕
次に、図2により、本実施形態の画像処理装置10の機能的な構成について説明する。
本実施形態において、制御部11は、第一画像取得部100、角度算出部110、頂点算出部120、第二画像取得部130、及び角度補正部140を備えている。
記憶部12は、第一画像データ200、補正用データ210、第二画像データ220、及び補正画像データ230を格納している。
次に、図2により、本実施形態の画像処理装置10の機能的な構成について説明する。
本実施形態において、制御部11は、第一画像取得部100、角度算出部110、頂点算出部120、第二画像取得部130、及び角度補正部140を備えている。
記憶部12は、第一画像データ200、補正用データ210、第二画像データ220、及び補正画像データ230を格納している。
第一画像取得部100は、第一画像データ200を取得する画像取得部である。具体的には、第一画像取得部100は、第一照明部の照明下で、情報記録媒体2を撮像部40に撮像させ、これを第一画像データ200として取得する。
角度算出部110は、第一画像データ200から、情報記録媒体2の傾き角度を算出し、補正用データ210に設定する。
具体的には、角度算出部110は、第一画像データ200のいずれかの軸について、情報記録媒体2を通過するように引かれた平行な二本の直線について、情報記録媒体2のエッジとの各交点を算出し、算出された各交点の間の水平方向の距離及び垂直方向の距離により、情報記録媒体2の傾き角度を算出する。
具体的には、角度算出部110は、第一画像データ200のいずれかの軸について、情報記録媒体2を通過するように引かれた平行な二本の直線について、情報記録媒体2のエッジとの各交点を算出し、算出された各交点の間の水平方向の距離及び垂直方向の距離により、情報記録媒体2の傾き角度を算出する。
この際、角度算出部110は、各軸方向への各ラインにおける輝度値から四つの端点を検出し、検出された四つの端点から情報記録媒体2の画像を含む四角形(以下、「外接四角形」という。)に対応した各頂点の座標を算出し、補正用データ210に設定する。この上で、角度算出部110は、第一画像データ200から、外接四角形の外側のデータを除去する。
頂点算出部120は、第一画像取得部100により取得された第一画像データ200から、情報記録媒体2の四角形(以下、「媒体四角形」という。)に対応した各頂点の座標を算出し、補正用データ210に設定する。
第二画像取得部130は、第二画像データ220を取得する画像取得部である。具体的には、第二画像取得部130は、第二照明部の照明下で、情報記録媒体2を撮像部40に撮像させ、これを第二画像データ220として取得する。
角度補正部140は、第一画像データ200及び第二画像データ220について、情報記録媒体2の傾きが補正された補正画像データ230を作成する。この際、角度補正部140は、角度算出部110により算出された傾き角度により情報記録媒体2を回転させることで、補正画像データ230を作成する。
角度補正部140は、例えば、頂点算出部120により算出された各頂点の座標を、角度算出部110により算出された傾き角度により補正する。そして、角度補正部140は、傾きを補正された各頂点による四角形内の各画素について、当該画素の座標を傾き角度により逆変換した座標にある第一画像データ200又は第二画像データ220の画素の画素値を取得して、補正画像データ230を作成する。
この際、角度補正部140は、例えば、情報記録媒体2の中心座標を回転の中心として情報記録媒体2の傾きを補正する。
加えて、第二画像データ220についてのこれらの処理の際、角度補正部140は、第二画像データ220から外接四角形の外側のデータを除去する。
加えて、第二画像データ220についてのこれらの処理の際、角度補正部140は、第二画像データ220から外接四角形の外側のデータを除去する。
第一画像データ200は、白色光又は赤外光である第一波長域の光の照射下で撮像部40により撮像された、情報記録媒体2の画像を含む画像データである。
第一画像データ200は、例えば、複数の画素がマトリクス状に配列されて形成されたグレースケールのビットマップデータとして構成される。このビットマップデータは、図示していないものの、撮像部40で撮像された初期状態では、X軸方向にM行、Y軸方向にN列の画素が配置されている。
第一画像データ200は、例えば、複数の画素がマトリクス状に配列されて形成されたグレースケールのビットマップデータとして構成される。このビットマップデータは、図示していないものの、撮像部40で撮像された初期状態では、X軸方向にM行、Y軸方向にN列の画素が配置されている。
補正用データ210は、角度補正用のデータである。本実施形態において、補正用データ210は、傾き角度、外接四角形の各頂点の座標データ、媒体四角形の各頂点の座標データ等を含む。さらに、補正用データ210は、情報記録媒体2の各頂点及び回転の中心の座標データ等、角度補正用の各種座標データも含んでいる。これらのデータは、処理対象として第一画像データ200について算出されたものが保持される。
第二画像データ220は、第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、情報記録媒体2の画像を含む画像データである。第二画像データ220も、グレースケールのビットマップデータである。
上述のように、この第二波長域の光は、本実施形態では紫外光である。このため、第二画像データ220では、紫外線で蛍光するマーク等の明度値は高くなるものの、情報記録媒体2の輪郭のコントラストは低くなる。
上述のように、この第二波長域の光は、本実施形態では紫外光である。このため、第二画像データ220では、紫外線で蛍光するマーク等の明度値は高くなるものの、情報記録媒体2の輪郭のコントラストは低くなる。
補正画像データ230は、第一画像データ200について角度補正が行われた補正後の画像データ、及び、第二画像データ220について角度補正が行われた補正後の画像データを含む。補正画像データ230は、第一画像データ200における情報記録媒体2の画像と、ほぼ同じ大きさのグレースケールのビットマップデータ群として作成される。
これに加え、補正画像データ230は、OCR(Optical Character Recognition)により認識された文字列、バーコード等のデータも含む。
これに加え、補正画像データ230は、OCR(Optical Character Recognition)により認識された文字列、バーコード等のデータも含む。
上述の各画像データにおいて、各画素は、それぞれ画素値(輝度値)を有する。本実施形態では、例えば8ビットのグレースケールの場合、各画素値は0〜255の間のいずれかの値をとる。この画素値は、例えば、黒に近いほど小さく、白に近いほど大きな値となる。
加えて、本実施形態において、各ビットマップデータは、横軸をX軸、このX軸方向に直交する縦軸をY軸とする例について説明する。
加えて、本実施形態において、各ビットマップデータは、横軸をX軸、このX軸方向に直交する縦軸をY軸とする例について説明する。
ここで、制御部11は、記憶部12のROMに格納された制御プログラムを実行することで、第一画像取得部100、角度算出部110、頂点算出部120、第二画像取得部130、及び角度補正部140として機能させることが可能である。加えて、これらの機能構成の一部又は任意の組み合わせを、FPGA(Field-Programmable Gate Array)等により回路的に構成することも可能である。
なお、SOC(System On Chip)等のように、制御部11及び記憶部12が一体的に構成されていてもよい。
なお、SOC(System On Chip)等のように、制御部11及び記憶部12が一体的に構成されていてもよい。
〔画像補正処理〕
次に、図3〜図9により、本発明の実施の形態に係る画像補正処理の説明を行う。
本実施形態の画像補正処理では、第一波長域の光の照射下で撮像された情報記録媒体2を含む第一画像データ200を取得する。そして、取得された第一画像データ200から、情報記録媒体の傾き角度を算出する。次に、第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い情報記録媒体を含む第二画像データ220を取得する。そして、第二画像データ220について、算出された傾き角度により情報記録媒体を角度補正する。
本実施形態の回転位置データ送信処理は、主に制御部11が、記憶部12に記憶された制御プログラムを、各部と協働し、ハードウェア資源を用いて実行する。
以下で、図3のフローチャートにより、画像補正処理について、ステップ毎に説明する。
次に、図3〜図9により、本発明の実施の形態に係る画像補正処理の説明を行う。
本実施形態の画像補正処理では、第一波長域の光の照射下で撮像された情報記録媒体2を含む第一画像データ200を取得する。そして、取得された第一画像データ200から、情報記録媒体の傾き角度を算出する。次に、第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い情報記録媒体を含む第二画像データ220を取得する。そして、第二画像データ220について、算出された傾き角度により情報記録媒体を角度補正する。
本実施形態の回転位置データ送信処理は、主に制御部11が、記憶部12に記憶された制御プログラムを、各部と協働し、ハードウェア資源を用いて実行する。
以下で、図3のフローチャートにより、画像補正処理について、ステップ毎に説明する。
(ステップS100)
まず、第一画像取得部100及び第二画像取得部130が、画像データ取得処理を行う。
第一画像取得部100及び第二画像取得部130は、撮像部40によって撮像された情報記録媒体2を含む画像を画像データに変換し、記憶部12に格納する。
具体的には、第一画像取得部100は、第一照射部31により白色光又は赤外光である第一波長域の光を照射させる。そして、第一画像取得部100は、載置部20に載置された情報記録媒体2を撮像部40で撮像させる。これにより得られた画像データが、第一画像データ200として、記憶部12に格納される。
まず、第一画像取得部100及び第二画像取得部130が、画像データ取得処理を行う。
第一画像取得部100及び第二画像取得部130は、撮像部40によって撮像された情報記録媒体2を含む画像を画像データに変換し、記憶部12に格納する。
具体的には、第一画像取得部100は、第一照射部31により白色光又は赤外光である第一波長域の光を照射させる。そして、第一画像取得部100は、載置部20に載置された情報記録媒体2を撮像部40で撮像させる。これにより得られた画像データが、第一画像データ200として、記憶部12に格納される。
次に、第二画像取得部130は、第二照射部32により紫外光である第二波長域の光を照射させ、載置部20に載置された情報記録媒体2を撮像部40で撮像させる。これにより得られた画像データが、第二画像データ220として、記憶部12に格納される。
このように、第一画像取得部100及び第二画像取得部130により、第一画像データ200及び第二画像データ220が一度で取得されることで、情報記録媒体2は載置部20上で移動等されないため、確実に同一位置の状態で撮像される。
その後、各画像データについて、角度補正が下記のように実行される。
このように、第一画像取得部100及び第二画像取得部130により、第一画像データ200及び第二画像データ220が一度で取得されることで、情報記録媒体2は載置部20上で移動等されないため、確実に同一位置の状態で撮像される。
その後、各画像データについて、角度補正が下記のように実行される。
(ステップS101)
次に、角度算出部110が、第一画像データ200について処理を行うか否かを判断する。角度算出部110は、角度補正を行う処理対象の画像データが第一画像データ200である場合に、Yesと判断する。角度算出部110は、処理対象の画像データが第二画像データ220である場合には、Noと判断する。
Yesの場合、角度算出部110は、処理をステップS102に進める。
Noの場合、角度算出部110は、処理をステップS104に進める。
次に、角度算出部110が、第一画像データ200について処理を行うか否かを判断する。角度算出部110は、角度補正を行う処理対象の画像データが第一画像データ200である場合に、Yesと判断する。角度算出部110は、処理対象の画像データが第二画像データ220である場合には、Noと判断する。
Yesの場合、角度算出部110は、処理をステップS102に進める。
Noの場合、角度算出部110は、処理をステップS104に進める。
(ステップS102)
処理対象が第一画像データ200の場合、角度算出部110が、角度算出処理を行う。
角度算出部110は、第一画像データ200から、情報記録媒体2の傾き角度を算出する。
この処理の詳細については後述する。
処理対象が第一画像データ200の場合、角度算出部110が、角度算出処理を行う。
角度算出部110は、第一画像データ200から、情報記録媒体2の傾き角度を算出する。
この処理の詳細については後述する。
(ステップS103)
次に、角度算出部110が、補正用データ記憶処理を行う。
角度算出部110は、第一画像データ200について、上述の角度算出処理で算出された傾き角度を補正用データ210に格納し、記憶部12に保持する。
その後、角度算出部110は、処理をステップS105に進める。
次に、角度算出部110が、補正用データ記憶処理を行う。
角度算出部110は、第一画像データ200について、上述の角度算出処理で算出された傾き角度を補正用データ210に格納し、記憶部12に保持する。
その後、角度算出部110は、処理をステップS105に進める。
(ステップS104)
処理対象が第二画像データ220の場合、角度補正部140が、補正用データ読み出し設定処理を行う。
角度補正部140は、記憶部12に保持された補正用データ210を読み出して使用する。すなわち、角度補正部140は、第一画像データ200について角度算出部110により算出された傾き角度等を補正用データ210から取得する。さらに、角度補正部140は、第二画像データ220から、外接四角形の外側のデータを除去する。
処理対象が第二画像データ220の場合、角度補正部140が、補正用データ読み出し設定処理を行う。
角度補正部140は、記憶部12に保持された補正用データ210を読み出して使用する。すなわち、角度補正部140は、第一画像データ200について角度算出部110により算出された傾き角度等を補正用データ210から取得する。さらに、角度補正部140は、第二画像データ220から、外接四角形の外側のデータを除去する。
(ステップS105)
ここで、頂点算出部120及び角度補正部140が、角度補正処理を行う。
頂点算出部120は、補正用データ210を読み出して、媒体四角形の各頂点の座標データ等を算出する。
これを用いて、角度補正部140は、第一画像データ200又は第二画像データ220の角度補正を行う。角度補正部140は、情報記録媒体2の傾き角度がゼロとなるように画素位置の変換を行った補正画像データ230を作成する。
これらの処理の詳細についても後述する。
ここで、頂点算出部120及び角度補正部140が、角度補正処理を行う。
頂点算出部120は、補正用データ210を読み出して、媒体四角形の各頂点の座標データ等を算出する。
これを用いて、角度補正部140は、第一画像データ200又は第二画像データ220の角度補正を行う。角度補正部140は、情報記録媒体2の傾き角度がゼロとなるように画素位置の変換を行った補正画像データ230を作成する。
これらの処理の詳細についても後述する。
(ステップS106)
次に、角度補正部140が、全ての画像データの処理を完了したか否か判断する。
角度補正部140は、第一画像データ200及び第二画像データ220についての角度補正が完了した場合には、Yesと判定する。角度補正部140は、まだ第二画像データ220についての角度補正を行っていない場合には、Noと判断する。
Yesの場合、角度補正部140は、画像補正処理を終了する。
Noの場合、角度補正部140は、処理をステップS101に戻す。
以上により、本発明の実施の形態に係る画像補正処理を終了する。
次に、角度補正部140が、全ての画像データの処理を完了したか否か判断する。
角度補正部140は、第一画像データ200及び第二画像データ220についての角度補正が完了した場合には、Yesと判定する。角度補正部140は、まだ第二画像データ220についての角度補正を行っていない場合には、Noと判断する。
Yesの場合、角度補正部140は、画像補正処理を終了する。
Noの場合、角度補正部140は、処理をステップS101に戻す。
以上により、本発明の実施の形態に係る画像補正処理を終了する。
〔角度算出処理の詳細〕
次に、図4(a)のフローチャートにより、図3のステップS102の角度算出処理の詳細について、ステップ毎に説明する。
次に、図4(a)のフローチャートにより、図3のステップS102の角度算出処理の詳細について、ステップ毎に説明する。
(ステップS200)
まず、角度算出部110が、射影計算処理を行う。
処理対象の画像が白色光又は赤外光を照明として撮像された第一画像データ200である場合、角度算出部110は、処理対象となる第一画像データ200の水平軸(X軸)及び垂直軸(Y軸)のそれぞれに対して輝度投影(以下、「射影」という。)を行ってX射影、Y射影を作成する。
まず、角度算出部110が、射影計算処理を行う。
処理対象の画像が白色光又は赤外光を照明として撮像された第一画像データ200である場合、角度算出部110は、処理対象となる第一画像データ200の水平軸(X軸)及び垂直軸(Y軸)のそれぞれに対して輝度投影(以下、「射影」という。)を行ってX射影、Y射影を作成する。
図5を参照して説明すると、角度算出部110は、まず水平軸(X軸)に対して射影を行ってX射影prjXを形成する。X射影prjXは、X軸に垂直な方向の垂直ライン毎に輝度値の平均又は総和(出力値)を算出したものである。図5においては、下側のグラフがprjXを示している。
角度算出部110は、同様に、垂直軸(Y軸)に関してY射影prjYを形成する。これは、Y軸に垂直な方向にライン毎の輝度値の平均又は総和(出力値)を算出したものである。図5においては、右側のグラフがprjYを示している。
角度算出部110は、同様に、垂直軸(Y軸)に関してY射影prjYを形成する。これは、Y軸に垂直な方向にライン毎の輝度値の平均又は総和(出力値)を算出したものである。図5においては、右側のグラフがprjYを示している。
(ステップS201)
次に、角度算出部110が、外接四角形検出処理を行う。
角度算出部110は、X射影及びY射影のそれぞれについて、グラフの波形を走査して、情報記録媒体2の画像の両端点を決定する。
次に、角度算出部110が、外接四角形検出処理を行う。
角度算出部110は、X射影及びY射影のそれぞれについて、グラフの波形を走査して、情報記録媒体2の画像の両端点を決定する。
具体的には、角度算出部110は、X射影の出力値を両端から中央に向かって走査し、設定された閾値を超えたら、その点を媒体の左右の端点と決定する。prjXにおいては、角度算出部110は、決定された左端部及び右端部の端点を、それぞれXL、XRとして補正用データ210に設定する。
角度算出部110は、同様にY射影の値を両端から中央に向かって走査し、設定された閾値を超えたら、その点を媒体の上下の端点と決定する。prjYにおいては、角度算出部110は、決定された上端部及び下端部の出力値の端点を、それぞれYU、YLとして補正用データ210に設定する。
(ステップS202)
次に、角度算出部110が、対象四角形除外処理を行う。
角度算出部110は、情報記録媒体2の外接四角形の各頂点座標を算出し、第一画像データ200から、外接四角形の外側のデータを除去する。
次に、角度算出部110が、対象四角形除外処理を行う。
角度算出部110は、情報記録媒体2の外接四角形の各頂点座標を算出し、第一画像データ200から、外接四角形の外側のデータを除去する。
図5の例では、角度算出部110は、外接四角形の各頂点座標として、A(XL,YU)、B(XL,YL)、C(XR,YL)、D(XR,YU)を算出する。すなわち、これら上述のX軸(水平軸)に関する両端点の位置、及び、Y軸(垂直軸)に関する両端点の位置を端点とする長方形ABCDで囲まれる四角形が外接四角形となる。
この上で、角度算出部110は、第一画像データ200から、外接四角形の外側のデータを除去する。具体的には、角度算出部110は、長方形ABCDで囲まれる領域を、処理対象領域として切り出し、それ以外の領域を除去する。この際、角度算出部110は、例えば、数画素〜数百画素程度のマージンを設定することが可能である。
(ステップS203)
次に、角度算出部110が、媒体エッジ点偏差算出処理を行う。
上述の第一画像データ200から切り出された処理対象領域について、その四角形を通過する位置に二本の平行線を引き、各平行線上における情報記録媒体2のエッジの座標(以下、「媒体エッジ位置」という。)を算出し、その水平方向エッジの位置間の距離を算出する。
次に、角度算出部110が、媒体エッジ点偏差算出処理を行う。
上述の第一画像データ200から切り出された処理対象領域について、その四角形を通過する位置に二本の平行線を引き、各平行線上における情報記録媒体2のエッジの座標(以下、「媒体エッジ位置」という。)を算出し、その水平方向エッジの位置間の距離を算出する。
図6(a)は、二本の平行線が情報記録媒体2の左側のエッジと交差するエッジ点X1、X2を算出する際の概念図である。具体的には、処理対象領域の画像内に二本の水平線を引く。第一の水平線と媒体左側エッジとの交点をエッジ点X1、第二の水平線と媒体左側エッジとの交点をエッジ点X2となる。
図6(b)の二本の曲線はそれぞれ、左エッジ近傍における水平ラインY=Y1及びY=Y2上の画素値を示したものである。画像の左端を起点としてそれぞれ水平ラインに沿って画素値を右方向に調べていき、設定された閾値「Thresh」を超えたら、これをエッジ点X1及びX2と決定する。
この例は、比較的媒体と背景とのコントラストが良好な場合について示したものであり、エッジ点X1、X2は比較的容易に決定することが可能である。第一照明部の照射する白色光源又は赤外光源を照明に用いて撮像した第一画像データ200がこれに該当する。
次に、決定されたエッジ点X1、X2の座標により、X軸の距離Wを下記の式(1)で、算出する:
W = X2 − X1 …… 式(1)
W = X2 − X1 …… 式(1)
また、二本の水平線の垂直位置をY1、Y2とすると、そのY軸の距離Hを、以下の式(2)で算出する。
H = Y2 − Y1 …… 式(2)
H = Y2 − Y1 …… 式(2)
同様に、2本の垂直線が媒体の上エッジと交差する座標YY1,YY2を求めることも可能である。この処理については、図示しないものの、垂直ライン上の画素値を画像の上端を起点として、垂直ラインX=XX1及びX=XX2に沿って画素値を下方向に調べていく。そして、設定された閾値「Thresh」を超えたら、これらをエッジ点YY1及びYY2として決定し、距離を算出可能である。
(ステップS204)
次に、角度算出部110が、傾き角度計算処理を行う。
角度算出部110は、上述のX軸の距離W及びY軸の距離Hから、情報記録媒体2の傾き角度θを、下記の式(3)によって算出する。
θ = atan(W/H) …… 式(3)
ここで、atan()は、アークタンジェント(arctangent)を示す。
次に、角度算出部110が、傾き角度計算処理を行う。
角度算出部110は、上述のX軸の距離W及びY軸の距離Hから、情報記録媒体2の傾き角度θを、下記の式(3)によって算出する。
θ = atan(W/H) …… 式(3)
ここで、atan()は、アークタンジェント(arctangent)を示す。
ここで、式(3)のθを、そのまま傾き角度としてもよい。さらに精度をあげるために、同様の操作を媒体の右端側について行って、左端側での結果と合わせて角度を算出してもよい。この場合、例えば、平均値を最終の傾き角度とする。
さらに精度を上げるためには、上述のように、画像内に二本の垂直線を引き、第一の垂直線と媒体上側エッジとの交点をYY1、第二の垂直線と媒体上側エッジとの交点をYY2として、その差を距離HHを、以下の式(4)で算出する。
HH = YY2 − YY1 …… 式(4)
HH = YY2 − YY1 …… 式(4)
また、二本の垂直線の位置をXX1,XX2とすると、その水平の距離WWは、以下の式(5)で算出する。
WW = XX2 − XX1 …… 式(5)
WW = XX2 − XX1 …… 式(5)
これらを用いて、傾き角度θθを、下記式(6)によって算出可能である:
θθ = atan(HH/WW) …… 式(6)
ここで、WW≠0である。
θθ = atan(HH/WW) …… 式(6)
ここで、WW≠0である。
同様の演算を媒体の下端側について行って、上端側での結果と合わせて角度を算出してもよい。この場合、例えば、上端側と下端側の角度の平均値を最終の傾き角度とする。
さらに、左右上下、合計四か所での傾き角度を算出してその全体の平均値を算出し、これを傾き角度としてもよい。
以上により、本発明の実施の形態に係る角度算出処理を終了する。
さらに、左右上下、合計四か所での傾き角度を算出してその全体の平均値を算出し、これを傾き角度としてもよい。
以上により、本発明の実施の形態に係る角度算出処理を終了する。
〔角度補正処理の詳細〕
次に、図4(b)のフローチャートを参照して、図3のステップS105の角度補正処理の詳細についてステップ毎に説明する。
次に、図4(b)のフローチャートを参照して、図3のステップS105の角度補正処理の詳細についてステップ毎に説明する。
(ステップS300)
まず、頂点算出部120が、媒体四角形頂点計算処理を行う。
頂点算出部120は、第一画像データ200から切り出された処理対象領域について、媒体四角形に対応した各頂点の座標を算出する。
まず、頂点算出部120が、媒体四角形頂点計算処理を行う。
頂点算出部120は、第一画像データ200から切り出された処理対象領域について、媒体四角形に対応した各頂点の座標を算出する。
図7を参照して説明すると、まず、頂点算出部120は図4(a)のステップS203の媒体エッジ点偏差算出処理と同様にして媒体四角形の各辺上の二つのエッジ点を算出し、媒体四角形の各頂点の座標算出を行う。
たとえば、媒体四角形の頂点AAは、図7に示すように、エッジ点P1(X1,Y1)及びP2(X2,Y2)を結ぶ直線P1P2と、エッジ点Q1(XX1,YY1)及びQ2(XX2,YY2)を結ぶ直線Q1Q2の交点として算出することが可能である。他の三つの頂点BB、CC、DDについても同様にして算出可能である。
頂点算出部120は、算出された媒体四角形の各頂点の座標を、補正用データ210に格納する。
たとえば、媒体四角形の頂点AAは、図7に示すように、エッジ点P1(X1,Y1)及びP2(X2,Y2)を結ぶ直線P1P2と、エッジ点Q1(XX1,YY1)及びQ2(XX2,YY2)を結ぶ直線Q1Q2の交点として算出することが可能である。他の三つの頂点BB、CC、DDについても同様にして算出可能である。
頂点算出部120は、算出された媒体四角形の各頂点の座標を、補正用データ210に格納する。
(ステップS301)
次に、角度補正部140が、媒体四角形頂点座標変換処理を行う。
図8を参照して、この処理について説明する。角度補正部140は、角度算出処理により算出された傾き角度を補正用データ210から読み出す。この上で、上述の媒体四角形頂点計算処理で算出された四つの頂点AA、BB、CC、DDについて、下記式(7)を用いて座標変換する。
x'= cosθ×(x−Cx)+sinθ×(Py−Cy)+Cx'
y'=−sinθ×(x−Cx)+cosθ×(Py−Cy)+Cy' ……式(7)
ここで、θは傾き角度、(x,y)は各頂点AA、BB、CC、DDに対する処理対象領域上の座標、(Cx,Cy)は処理対象領域上の中心Nの座標、(x',y')は変換先の補正画像データ230上の座標、(Cx',Cy')は補正画像データ230上の中心N’の座標を示す。
次に、角度補正部140が、媒体四角形頂点座標変換処理を行う。
図8を参照して、この処理について説明する。角度補正部140は、角度算出処理により算出された傾き角度を補正用データ210から読み出す。この上で、上述の媒体四角形頂点計算処理で算出された四つの頂点AA、BB、CC、DDについて、下記式(7)を用いて座標変換する。
x'= cosθ×(x−Cx)+sinθ×(Py−Cy)+Cx'
y'=−sinθ×(x−Cx)+cosθ×(Py−Cy)+Cy' ……式(7)
ここで、θは傾き角度、(x,y)は各頂点AA、BB、CC、DDに対する処理対象領域上の座標、(Cx,Cy)は処理対象領域上の中心Nの座標、(x',y')は変換先の補正画像データ230上の座標、(Cx',Cy')は補正画像データ230上の中心N’の座標を示す。
なお、(Cx,Cy)は、頂点AA、BB、CC、DDの座標をX軸及びY軸について平均化することで、容易に算出可能である。
図8(a)は変換前、図8(b)は変換後の各頂点の状態を示す。図8(b)に示すように、媒体四角形の輪郭が、媒体四角形AA'、BB'、CC'、DD'に写像される。すなわち、媒体四角形の四頂点について、角度算出部110により算出された傾き角度だけ反対方向に回転させる座標変換を行うと、媒体四角形の傾き角度は変換後にゼロとなる。
角度補正部140は、この媒体四角形AA'、BB'、CC'、DD'の座標を基にした四角形領域(以下、「補正四角形領域」という。)に対応した補正画像データ230の記憶領域を、記憶部12に確保する。
角度補正部140は、この媒体四角形AA'、BB'、CC'、DD'の座標を基にした四角形領域(以下、「補正四角形領域」という。)に対応した補正画像データ230の記憶領域を、記憶部12に確保する。
(ステップS302)
次に、角度補正部140が、座標逆変換補正処理を行う。
角度補正部140は、変換後の補正画像上の媒体四角形の四頂点からなる補正四角形領域内の全画素について、各画素に対応する補正前の画素位置から画素値を取得する。
図8(b)の例では、最後に、写像された媒体四角形AA'BB'CC'DD'、すなわち補正四角形領域の全画素について、下記の式(8)を用いて、逆座標変換を行う:
Px=cosθ*(Px'−Cx')−sinθ*(Py'−Cy')+Cx
Py=sinθ*(Px'−Cx')+cosθ*(Py'−Cy')+Cy ……式(8)
ここで、θは傾き角度、(Px',Py')は補正四角形領域内の任意の画素P’の座標、(Cx',Cy')は補正画像データ230上の中心N’の座標、(Px,Py)は処理対象領域内において対応する変換元の画素Pの座標、(Cx,Cy)は処理対象領域上の中心Nの座標である。
次に、角度補正部140が、座標逆変換補正処理を行う。
角度補正部140は、変換後の補正画像上の媒体四角形の四頂点からなる補正四角形領域内の全画素について、各画素に対応する補正前の画素位置から画素値を取得する。
図8(b)の例では、最後に、写像された媒体四角形AA'BB'CC'DD'、すなわち補正四角形領域の全画素について、下記の式(8)を用いて、逆座標変換を行う:
Px=cosθ*(Px'−Cx')−sinθ*(Py'−Cy')+Cx
Py=sinθ*(Px'−Cx')+cosθ*(Py'−Cy')+Cy ……式(8)
ここで、θは傾き角度、(Px',Py')は補正四角形領域内の任意の画素P’の座標、(Cx',Cy')は補正画像データ230上の中心N’の座標、(Px,Py)は処理対象領域内において対応する変換元の画素Pの座標、(Cx,Cy)は処理対象領域上の中心Nの座標である。
これらの処理において、角度補正部140は、例えば、X軸方向及びY軸方向にPx’及びPy’を二重ループ等でX軸方向、Y軸方向でそれぞれ一画素分ずつ変化させながら、対応する画素P’(Px',Py')の画素値を、処理対象領域上の画素P(Px,Py)の画素値で置き換える。
図9は、上述の処理により角度補正した補正四角形領域の補正画像データ230を示す写真である。変換後の画像上における画素の欠落はみられないことがわかる。すなわち、本実施形態の角度補正処理によれば、変換後の補正画像データ230上の画素の脱落を完全になくすことができる。これは、本実施形態の座標逆変換補正処理では、補正画像データ230の補正四角形領域の画素P’の座標を基準にして、処理対象領域の画素Pの座標を算出するためである。つまり、補正四角形領域内において、画素値を取得されなかった画素がなくなる。
さらに、媒体四角形の各頂点を座標変換して、この座標系に基づいて対応する画素の画素値を取得するため、エッジの歪み等も抑えてより高品質な補正画像データ230を作成することが可能となる。
以上により、本発明の実施の形態に係る角度補正処理を終了する。
以上により、本発明の実施の形態に係る角度補正処理を終了する。
〔本実施形態の主な効果〕
以上のように構成することで、以下のような効果を得ることができる。
従来、情報記録媒体のエッジを検出して角度補正する角度補正技術は、白色光や赤外光を光源としてスキャンされた画像については効果的である。
ここで、従来のマルチドキュメントスキャナのようなイメージスキャナでは、主たる記録情報である文字情報及び写真等の情報と、真贋性判定のためのマーク等の情報とを同時にスキャンする必要があった。この真贋性判定のための情報は、不可視の紫外線の照明下等でのみ識別できるように記録されていることが多い。
以上のように構成することで、以下のような効果を得ることができる。
従来、情報記録媒体のエッジを検出して角度補正する角度補正技術は、白色光や赤外光を光源としてスキャンされた画像については効果的である。
ここで、従来のマルチドキュメントスキャナのようなイメージスキャナでは、主たる記録情報である文字情報及び写真等の情報と、真贋性判定のためのマーク等の情報とを同時にスキャンする必要があった。この真贋性判定のための情報は、不可視の紫外線の照明下等でのみ識別できるように記録されていることが多い。
しかしながら、紫外光等を光源としてスキャンされた画像に対しては、媒体領域と背景領域とのコントラストが不鮮明となることが多かった。この場合、交点座標の検出精度が著しく低下してしまうことがある。このため、従来の方式では、マルチドキュメントスキャナのようなイメージスキャナでは、紫外光等を光源としてスキャンされた情報記録媒体の角度補正を正確に実行することができなかった。
参考として、図10(a)(b)は、第二画像データ220について、エッジ点を算出しようとした例を示す。
図10(a)は、第二画像データ220の写真である。このように、第二画像データ220は、輪郭のコントラストが低くなる。
図10(b)は、図6(b)と同様に左エッジ近傍における二本の水平ラインの画素値を示したものである。すなわち、図6に示した第一画像データ200と比較して、第二画像データ220は、相対的に画素値が小さく、情報記録媒体2と背景との境界位置の検出が不正確になりやすくなる。
図10(a)は、第二画像データ220の写真である。このように、第二画像データ220は、輪郭のコントラストが低くなる。
図10(b)は、図6(b)と同様に左エッジ近傍における二本の水平ラインの画素値を示したものである。すなわち、図6に示した第一画像データ200と比較して、第二画像データ220は、相対的に画素値が小さく、情報記録媒体2と背景との境界位置の検出が不正確になりやすくなる。
このように、照明光源として紫外光を用いた場合は、情報記録媒体2と背景とのコントラストが良好でないため、輪郭のコントラストが低くなり、エッジ点を算出することが難しくなっていた。
これに対して、本発明の実施の形態に係る画像処理装置10は、第一波長域の光の照射下で撮像された情報記録媒体2を含む第一画像データ200を取得する第一画像取得部100と、第一画像取得部100により取得された第一画像データ200から、情報記録媒体2の傾き角度を算出する角度算出部110と、第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い情報記録媒体2を含む第二画像データ220を取得する第二画像取得部130と、第二画像取得部130により取得された第二画像データ220について、角度算出部110により算出された傾き角度により情報記録媒体2を角度補正した補正画像データ230を作成する角度補正部140とを備えることを特徴とする。
このように構成し、紫外線光等の第二波長の第二画像データ220のように、情報記録媒体2の輪郭のコントラストが低い第二画像データ220においても、白色光や赤外光等の第一波長の第一画像データ200の補正用データ210を用いて補正することができる。つまり、紫外光等を光源として撮像された第二画像データ220に対して、補正用データ210及び外接四角形の各頂点の座標データをそのまま使用することが可能となる。これにより、第二波長の第二画像データ220においても、情報記録媒体2の輪郭のコントラストによらず角度補正することができる。
一方、従来の角度補正処理では、検出された情報記録媒体の回転角度に関して、これと反対方向に処理対象領域の画像データを回転させる座標変換処理を行っていた。これにより、傾きゼロの情報記録媒体の画像を作成することができていた。
参考として、図11を参照して、従来の角度補正処理を、第一画像データ200に適用した例について説明する。
図11(a)は、第一画像データ200の処理対象領域の概念図である。図中に破線で示したのが、傾いた状態の情報記録媒体2である。この従来の角度補正処理では、頂点A2、B2、C2、D2で囲まれた処理対象領域内の全画素について、下記の式(9)を用いて変換先の座標を計算し、図11(b)の図に示す位置に画素を写す。
Px'= cosθ×(Px−Cx)+sinθ×(Py−Cy)+Cx'
Py'=−sinθ×(Px−Cx)+cosθ×(Py−Cy)+Cy' ……式(9)
ここで、θは傾き角度、(Px,Py)は画素P2の処理対象領域上の座標、(Cx,Cy)は処理対象領域の中心N2の座標、(Px',Py')は変換先の補正画像データ231上の画素P2’の座標、(Cx',Cy')は補正画像データ231の中心座標を示す。
図11(a)は、第一画像データ200の処理対象領域の概念図である。図中に破線で示したのが、傾いた状態の情報記録媒体2である。この従来の角度補正処理では、頂点A2、B2、C2、D2で囲まれた処理対象領域内の全画素について、下記の式(9)を用いて変換先の座標を計算し、図11(b)の図に示す位置に画素を写す。
Px'= cosθ×(Px−Cx)+sinθ×(Py−Cy)+Cx'
Py'=−sinθ×(Px−Cx)+cosθ×(Py−Cy)+Cy' ……式(9)
ここで、θは傾き角度、(Px,Py)は画素P2の処理対象領域上の座標、(Cx,Cy)は処理対象領域の中心N2の座標、(Px',Py')は変換先の補正画像データ231上の画素P2’の座標、(Cx',Cy')は補正画像データ231の中心座標を示す。
この従来の画像補正処理では、図11(a)の第一画像データ200の処理対象領域の頂点A2、B2、C2、D2で囲まれた四角形の全画素について座標変換を実行する。すなわち、媒体四辺形を含む外接四角形内の全画素について、長方形A2'B2'C2'D2'で囲まれる領域内に写像される。この操作により、図中破線で示す媒体の傾斜角はゼロとなる。すなわち、従来の角度補正処理では、処理対象領域の画素P2の座標を基準にし、補正画像データ230の補正四角形領域の画素P2’の座標を算出する。
しかし、このように、元の画像を座標変換の対象とし、その座標値から変換式に基づいて、変換先の座標値を算出すると、計算誤差により歪みが生じる。
実際に、第一画像データ200をこの方式に従って角度補正をした例を図12に示す。この写真のように、計算誤差による歪みで、変換先の画像上に画素の抜け落ちが生じていることがわかる。図12の補正画像データ231中では、黒い点が抜け落ち画素に該当する。
実際に、第一画像データ200をこの方式に従って角度補正をした例を図12に示す。この写真のように、計算誤差による歪みで、変換先の画像上に画素の抜け落ちが生じていることがわかる。図12の補正画像データ231中では、黒い点が抜け落ち画素に該当する。
このような変換後の画像上の画素の欠落は、オーバーサンプリング等により防止できるものの、歪み自体を解消できないため、周辺の画素の画素値等で平均化する必要がある。このため、画像が「ぼけ」てしまう。このように品質が低下した補正画像データ231では、その後の文字やバーコードの認識処理に支障をきたす場合があった。
さらに、オーバーサンプリング等を行うと、そのための処理時間が必要となり、処理コストが必要となっていた。
さらに、オーバーサンプリング等を行うと、そのための処理時間が必要となり、処理コストが必要となっていた。
これに対して、本発明の実施の形態に係る画像処理装置10は、光の照射下で撮像された情報記録媒体2を含む画像データを取得する画像取得部と、画像取得部により取得された画像データから、情報記録媒体2の傾き角度を算出する角度算出部110と、画像取得部により取得された画像データから、情報記録媒体2の四角形に対応した各頂点の座標を算出する頂点算出部120と、頂点算出部120により算出された各頂点の座標を、角度算出部110により算出された傾き角度により補正し、傾きを補正された各頂点による四角形内の各画素について、当該画素の座標を傾き角度により逆変換した座標にある画像データの画素の画素値を取得して補正画像データ230を作成する角度補正部140とを備えることを特徴とする。
このように構成し、情報記録媒体2の頂点の座標の傾きを補正し、補正後の頂点座標の内側の各座標に対し、逆座標変換により媒体の傾きを補正する。この際、変換後の画像上の媒体四角形の四頂点からなる補正四角形領域内の全画素について、各画素に対応する補正前の画素位置から画素値を取得してくる。これにより、補正後の補正画像データ230において、計算誤差等による画素抜け等の欠陥を防止して、高品質にすることができる。
さらに、補正画像データ230の各画素について、第一画像データ200の処理対象領域において、従来より適切な座標の画素が選択される。
このため、補正画像データ230の品質が従来より高くなる。結果として、角度補正後の補正画像データ230に対するその後の処理において、より正確な情報を得られやすい。また、比較的簡単な計算で角度補正ができるため専用の補正回路、ソフトウェア等を必要とせず、安価な画像処理装置10を提供できる。
このため、補正画像データ230の品質が従来より高くなる。結果として、角度補正後の補正画像データ230に対するその後の処理において、より正確な情報を得られやすい。また、比較的簡単な計算で角度補正ができるため専用の補正回路、ソフトウェア等を必要とせず、安価な画像処理装置10を提供できる。
さらに、従来の角度補正処理では、情報記録媒体2の傾き角度を算出する過程で算出された外接四角形の四頂点の座標を基に、外接四角形全体を回転させていた。このため、計算の誤差が大きくなっていた。
これに対して、本実施形態の画像処理装置10では、情報記録媒体2の傾き角度を算出する過程で算出された媒体四角形の四頂点について、これを傾き角度だけ反対方向に回転させる座標変換を行う。
このように、情報記録媒体2の領域である媒体四角形の各頂点を基に回転させた四頂点の座標を基に回転させるため、媒体四角形の外側にある外接四角形の四頂点の座標を回転させるのに比べて、計算誤差が小さくなる。結果として、情報記録媒体2の領域についてより回転誤差による歪みの少ない補正後画像データを取得することができる。
実際に、図12に示す従来方式による補正画像データ231の参考例に比べると、図9に示す本実施形態の方式による補正画像データ230の方が、エッジの歪み等も少なくなっている。
実際に、図12に示す従来方式による補正画像データ231の参考例に比べると、図9に示す本実施形態の方式による補正画像データ230の方が、エッジの歪み等も少なくなっている。
本発明の実施の形態に係る画像処理装置10は、角度算出部110は、第一画像データ200のいずれかの軸について、情報記録媒体2を通過するように引かれた平行な二本の直線について、情報記録媒体2のエッジとの各交点を算出し、算出された各交点の間の水平方向の距離及び垂直方向の距離により、情報記録媒体2の傾き角度を算出することを特徴とする。
このように構成することで、容易な計算により、傾き角度を算出することができる。すなわち、atan()等の標準の三角関数等で、角度を容易に算出可能となる。
このように構成することで、容易な計算により、傾き角度を算出することができる。すなわち、atan()等の標準の三角関数等で、角度を容易に算出可能となる。
本発明の実施の形態に係る画像処理装置10は、角度算出部110は、各軸方向への各ラインにおける輝度値から四つの端点を検出し、検出された四つの端点から情報記録媒体2の外接四角形を算出し、第一画像データ200から、外接四角形の外側のデータを除去することを特徴とする。
このように構成することで、不要なデータを事前に除去することにより、角度補正処理等のその後の処理速度を向上させることができる。また、記憶部12において、必要なワーキングメモリー等の領域、補正画像データ230の領域等も削減することが可能となる。
加えて、四つの端点は、各軸方向への各ラインにおける輝度値の平均又は総和(出力値)の射影から算出することで、確実に外接四角形の座標を算出可能となる。
このように構成することで、不要なデータを事前に除去することにより、角度補正処理等のその後の処理速度を向上させることができる。また、記憶部12において、必要なワーキングメモリー等の領域、補正画像データ230の領域等も削減することが可能となる。
加えて、四つの端点は、各軸方向への各ラインにおける輝度値の平均又は総和(出力値)の射影から算出することで、確実に外接四角形の座標を算出可能となる。
本発明の実施の形態に係る画像処理装置10は、角度補正部140は、情報記録媒体2の中心座標を回転の中心として情報記録媒体2を角度補正することを特徴とする。
このように構成することで、補正後の情報記録媒体2が補正画像データ230の中心に位置しやすくなる。このため、その後の文字やバーコードの認識処理の負担等を抑え、認識エラーを削減することが可能となる。
このように構成することで、補正後の情報記録媒体2が補正画像データ230の中心に位置しやすくなる。このため、その後の文字やバーコードの認識処理の負担等を抑え、認識エラーを削減することが可能となる。
本発明の実施の形態に係る画像処理装置10は、第一波長域の光は、可視光及び赤外光のいずれかであり、第二波長域の光は、紫外光であることを特徴とする。
このように構成することで、紫外光を用いて撮像した画像を、可視光及び/又は赤外光の画像のデータを用いて角度補正できる。すなわち、画像データが取得された際に、照明光が可視光及び赤外光のいずれかである第一波長域の光の場合、補正用データ210及び外接四角形の各頂点の座標データを算出し、紫外光である第二波長域の場合は、保持された情報をそのまま使用する(維持)することが可能となる。
このように構成することで、紫外光を用いて撮像した画像を、可視光及び/又は赤外光の画像のデータを用いて角度補正できる。すなわち、画像データが取得された際に、照明光が可視光及び赤外光のいずれかである第一波長域の光の場合、補正用データ210及び外接四角形の各頂点の座標データを算出し、紫外光である第二波長域の場合は、保持された情報をそのまま使用する(維持)することが可能となる。
結果として、このようにすることで、コントラストが低いUV画像について白色画像又は赤外線画像の場合と同等の精度で角度補正することが可能になる。すなわち、媒体領域と背景領域とのコントラストが不鮮明であっても、白色光及び赤外光で取得された画像と同等の角度補正を行うことができる。
本発明の実施の形態に係るイメージスキャナ1は、画像処理装置10と、情報記録媒体2が載置される載置部20と、載置部20に載置された情報記録媒体2に第一波長域の光を照射する第一照射部31と、載置部20に載置された情報記録媒体2に第二波長域の光を照射する第二照射部32と、第一画像データ200及び第二画像データ220を撮像する撮像部40とを備えることを特徴とする。
このように構成することで、マルチドキュメントスキャナ等のイメージスキャナ1において、本実施形態の画像処理装置10による画像補正処理を容易に実現することが可能となる。
このように構成することで、マルチドキュメントスキャナ等のイメージスキャナ1において、本実施形態の画像処理装置10による画像補正処理を容易に実現することが可能となる。
〔他の実施の形態〕
なお、上述の実施形態では、補正用データ210を用いて、第二画像データ220について、媒体四角形の傾きをゼロにする角度補正の画像補正処理を行う例について説明した。
しかしながら、傾きの有無とは無関係に、情報記録媒体2の背景部分の画像を除去するクロッピング処理等を実行するように構成することも可能である。すなわち、第一画像データ200について算出した外接四角形の各頂点の座標データ、媒体四角形の各頂点の座標データ等を用いて、第二画像データ220におけるこれら以外の箇所の画像データを削除してもよい。
なお、上述の実施形態では、補正用データ210を用いて、第二画像データ220について、媒体四角形の傾きをゼロにする角度補正の画像補正処理を行う例について説明した。
しかしながら、傾きの有無とは無関係に、情報記録媒体2の背景部分の画像を除去するクロッピング処理等を実行するように構成することも可能である。すなわち、第一画像データ200について算出した外接四角形の各頂点の座標データ、媒体四角形の各頂点の座標データ等を用いて、第二画像データ220におけるこれら以外の箇所の画像データを削除してもよい。
また、これに限られず、例えば、第一画像データ200から、背景箇所の画素の座標を画像認識で算出して補正用データ210に設定し、これを基に、第二画像データ220のクロッピングを行うような処理も可能である。さらに、クロッピング以外にも、第二画像データ220に第一画像データ200で算出した媒体四角形の線等を合成して表示するような合成処理に用いたり、その後の不可視マーク等の認識処理でのマッチング等に用いたりするような構成も可能である。
このように構成することで、各種処理に容易に適用可能となる。
このように構成することで、各種処理に容易に適用可能となる。
さらに、上述の実施形態では、第一画像データ200内の媒体四角形の傾き角度を検出して、媒体四角形の傾きをゼロにする画像補正を行う処理について説明した。
しかしながら、情報記録媒体2として、長方形のような四角形であるならば、カード媒体でなくパスポートのような冊子態様のものでも適用可能である。さらに、情報記録媒体2の載置部20への押しつけ時の歪み等により矩形にならなくても、各辺の傾き角度を基に、角度補正を行うように構成してもよい。
しかしながら、情報記録媒体2として、長方形のような四角形であるならば、カード媒体でなくパスポートのような冊子態様のものでも適用可能である。さらに、情報記録媒体2の載置部20への押しつけ時の歪み等により矩形にならなくても、各辺の傾き角度を基に、角度補正を行うように構成してもよい。
また、上述の実施の形態では、画像データとして、第一画像データ200と第二画像データ220を取得してから、各処理対象の処理を行うように記載した。
しかしながら、第一画像データ200についての処理を行って補正用データ210を設定した後、その第一画像データ200自体は消去又は第二画像データ220取得時に上書きするようにしてもよい。加えて、補正画像データ230は、第一画像データ200を角度補正後の画像データを上位装置等へ出力後、第二画像データ220を対象とした処理時に消去又は上書きしてもよい。
このように構成することで、記憶部12の記憶容量を節約することができる。
しかしながら、第一画像データ200についての処理を行って補正用データ210を設定した後、その第一画像データ200自体は消去又は第二画像データ220取得時に上書きするようにしてもよい。加えて、補正画像データ230は、第一画像データ200を角度補正後の画像データを上位装置等へ出力後、第二画像データ220を対象とした処理時に消去又は上書きしてもよい。
このように構成することで、記憶部12の記憶容量を節約することができる。
加えて、上述の実施の形態では、第一画像データ200と第二画像データ220とについて画像補正処理を行う例について説明した。
しかしながら、第一画像データ200だけについて画像補正処理を行ってもよい。加えて、第一画像データ200はモノクロのビットマップデータではなく、カラーの画像データであってもよい。この場合、カラーとしては、RGBカラー、色差のカラー等のビットマップ画像を用いることも可能である。さらに、jpg等のフォーマットのデータを画素単位のビットマップデータに変換して用いることも可能である。
また、第一波長域及び第二波長域の光としては、X線等のより波長の短い光、テラヘルツ波等の波長の長い電磁波を照射することも可能である。さらに、第一波長域及び第二波長域の光として、半導体レーザーやファイバーレーザー、固体レーザー、気体レーザー、液体レーザー等の各種レーザー光源の光を用いることも可能である。この場合、第一波長域及び第二波長域の光として、それぞれ単一波長の光を用いても、蛍光体等を含む光学系を介した複数波長の光を用いてもよい。
しかしながら、第一画像データ200だけについて画像補正処理を行ってもよい。加えて、第一画像データ200はモノクロのビットマップデータではなく、カラーの画像データであってもよい。この場合、カラーとしては、RGBカラー、色差のカラー等のビットマップ画像を用いることも可能である。さらに、jpg等のフォーマットのデータを画素単位のビットマップデータに変換して用いることも可能である。
また、第一波長域及び第二波長域の光としては、X線等のより波長の短い光、テラヘルツ波等の波長の長い電磁波を照射することも可能である。さらに、第一波長域及び第二波長域の光として、半導体レーザーやファイバーレーザー、固体レーザー、気体レーザー、液体レーザー等の各種レーザー光源の光を用いることも可能である。この場合、第一波長域及び第二波長域の光として、それぞれ単一波長の光を用いても、蛍光体等を含む光学系を介した複数波長の光を用いてもよい。
さらに、載置部20として、透明なフラットベッドを備えて、情報記録媒体2が載置された表側及び裏側の画像データを、二つの撮像部40にて同時に撮像するような構成も可能である。この場合、表裏の画像データの位置関係を事前にキャリブレーション等しておくことで、一方の画像データを反転等して、上述の実施の形態と同様の傾き補正をすることができる。すなわち、表裏の一方の画像データにより、他方の画像データの傾き補正をすることができる。さらに、この場合、表裏の一方で第一波長域の光を照射し、他方で第二波長域の光を照射して撮像することで、第一波長域の光を照射した側の画像データを基に、他方の側の画像データを補正することができる。
このように構成することで、撮像時間を短縮し、処理負担を抑えることができる。
このように構成することで、撮像時間を短縮し、処理負担を抑えることができる。
なお、上記実施の形態の構成及び動作は例であって、本発明の趣旨を逸脱しない範囲で適宜変更して実行することができることは言うまでもない。
1 イメージスキャナ
2 情報記録媒体
10 画像処理装置
11 制御部
12 記憶部
20 載置部
31 第一照射部
32 第二照射部
40 撮像部
100 第一画像取得部
110 角度算出部
120 頂点算出部
130 第二画像取得部
140 角度補正部
200 第一画像データ
210 補正用データ
220 第二画像データ
230、231 補正画像データ
2 情報記録媒体
10 画像処理装置
11 制御部
12 記憶部
20 載置部
31 第一照射部
32 第二照射部
40 撮像部
100 第一画像取得部
110 角度算出部
120 頂点算出部
130 第二画像取得部
140 角度補正部
200 第一画像データ
210 補正用データ
220 第二画像データ
230、231 補正画像データ
Claims (7)
- 第一波長域の光の照射下で撮像された情報記録媒体を含む第一画像データを取得する第一画像取得部と、
前記第一画像取得部により取得された前記第一画像データから、前記情報記録媒体の傾き角度を算出する角度算出部と、
前記第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い前記情報記録媒体を含む第二画像データを取得する第二画像取得部と、
前記第二画像取得部により取得された前記第二画像データについて、前記角度算出部により算出された前記傾き角度により前記情報記録媒体を角度補正した補正画像データを作成する角度補正部とを備える
画像処理装置。 - 前記角度算出部は、
前記第一画像データのいずれかの軸について、前記情報記録媒体を通過するように引かれた平行な二本の直線について、前記情報記録媒体のエッジとの各交点を算出し、算出された各交点の間の水平方向の距離及び垂直方向の距離により、前記情報記録媒体の傾き角度を算出する
請求項1に記載の画像処理装置。 - 前記角度算出部は、
各軸方向への各ラインにおける輝度値から四つの端点を検出し、検出された四つの端点から前記情報記録媒体の外接四角形を算出し、前記第一画像データから、前記外接四角形の外側のデータを除去する
請求項1又は2に記載の画像処理装置。 - 前記角度補正部は、
前記情報記録媒体の中心座標を回転の中心として前記情報記録媒体を角度補正する
請求項1乃至3のいずれか1項に記載の画像処理装置。 - 前記第一波長域の光は、可視光及び赤外光のいずれかであり、
前記第二波長域の光は、紫外光である
請求項1乃至4のいずれか1項に記載の画像処理装置。 - 請求項1乃至5のいずれか1項に記載の画像処理装置と、
前記情報記録媒体が載置される載置部と、
前記載置部に載置された前記情報記録媒体に前記第一波長域の光を照射する第一照射部と、
前記載置部に載置された前記情報記録媒体に前記第二波長域の光を照射する第二照射部と、
前記第一画像データ及び前記第二画像データを撮像する撮像部とを備える
イメージスキャナ。 - 画像処理装置により実行される画像処理方法であって、
第一波長域の光の照射下で撮像された情報記録媒体を含む第一画像データを取得し、
取得された前記第一画像データから、前記情報記録媒体の傾き角度を算出し、
前記第一波長域と波長域の異なる第二波長域の光の照射下で、同一位置で撮像された、輪郭のコントラストが低い前記情報記録媒体を含む第二画像データを取得し、
前記第二画像データについて、算出された前記傾き角度により前記情報記録媒体を角度補正する
画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018184080A JP2020052916A (ja) | 2018-09-28 | 2018-09-28 | 画像処理装置、イメージスキャナ、及び画像処理方法 |
US16/582,200 US20200106919A1 (en) | 2018-09-28 | 2019-09-25 | Image processing device, image scanner and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018184080A JP2020052916A (ja) | 2018-09-28 | 2018-09-28 | 画像処理装置、イメージスキャナ、及び画像処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020052916A true JP2020052916A (ja) | 2020-04-02 |
Family
ID=69946269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018184080A Pending JP2020052916A (ja) | 2018-09-28 | 2018-09-28 | 画像処理装置、イメージスキャナ、及び画像処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20200106919A1 (ja) |
JP (1) | JP2020052916A (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022059534A (ja) * | 2020-10-01 | 2022-04-13 | 株式会社リコー | 読取装置、画像形成装置および補正方法 |
JP2023042893A (ja) * | 2021-09-15 | 2023-03-28 | 株式会社リコー | 画像処理装置、読取装置、画像形成装置、および特徴量検出方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08249422A (ja) * | 1995-03-08 | 1996-09-27 | Canon Inc | 文字処理装置及び方法 |
WO2017033275A1 (ja) * | 2015-08-25 | 2017-03-02 | 株式会社日立情報通信エンジニアリング | 画像読取装置および画像読取方法ならびに画像読取プログラム |
JP2017046086A (ja) * | 2015-08-25 | 2017-03-02 | 沖電気工業株式会社 | スキャナ装置、及びプログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004129022A (ja) * | 2002-10-04 | 2004-04-22 | Pfu Ltd | 画像読取装置 |
US7932692B2 (en) * | 2006-11-13 | 2011-04-26 | Denso Corporation | Control system for rotary electric machine with salient structure |
JP4803274B2 (ja) * | 2009-03-19 | 2011-10-26 | コニカミノルタビジネステクノロジーズ株式会社 | 画像処理方法およびコンピュータプログラム |
JP5480798B2 (ja) * | 2010-01-05 | 2014-04-23 | パナソニック株式会社 | 撮像装置 |
FR2974722B1 (fr) * | 2011-05-06 | 2014-10-10 | Essilor Int | Procede de determination de la distance de lecture |
WO2014132680A1 (ja) * | 2013-02-28 | 2014-09-04 | アイシン精機株式会社 | 車両の制御装置、及びプログラム |
JP5598576B1 (ja) * | 2013-06-24 | 2014-10-01 | 富士ゼロックス株式会社 | 複合機および読取装置 |
JP6541502B2 (ja) * | 2015-08-10 | 2019-07-10 | キヤノン株式会社 | 画像読取装置、画像読取方法 |
JP6976907B2 (ja) * | 2018-06-22 | 2021-12-08 | 任天堂株式会社 | プログラム、情報処理装置、情報処理システム及び情報処理方法 |
-
2018
- 2018-09-28 JP JP2018184080A patent/JP2020052916A/ja active Pending
-
2019
- 2019-09-25 US US16/582,200 patent/US20200106919A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08249422A (ja) * | 1995-03-08 | 1996-09-27 | Canon Inc | 文字処理装置及び方法 |
WO2017033275A1 (ja) * | 2015-08-25 | 2017-03-02 | 株式会社日立情報通信エンジニアリング | 画像読取装置および画像読取方法ならびに画像読取プログラム |
JP2017046086A (ja) * | 2015-08-25 | 2017-03-02 | 沖電気工業株式会社 | スキャナ装置、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20200106919A1 (en) | 2020-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9451132B2 (en) | System for capturing a document in an image signal | |
US9521284B2 (en) | Interactive user interface for capturing a document in an image signal | |
US8295599B2 (en) | Image output apparatus, captured image processing system, and recording medium | |
JP2020053931A (ja) | 画像処理装置、イメージスキャナ、及び画像処理方法 | |
JP4777178B2 (ja) | 画像処理方法 | |
JP2020052916A (ja) | 画像処理装置、イメージスキャナ、及び画像処理方法 | |
CN114173105A (zh) | 信息生成方法、信息生成系统以及记录介质 | |
JP6564136B2 (ja) | 画像処理装置、画像処理方法、および、プログラム | |
JP5645519B2 (ja) | 画像処理方法、画像処理装置、およびプログラム | |
JP2004362053A (ja) | 二次元コード読取装置 | |
JP5618664B2 (ja) | 画像処理方法、プログラム、画像読取装置、及び情報機器 | |
JP2005316550A (ja) | 画像処理装置、画像読取装置、画像検査装置、およびプログラム | |
JP2019016843A (ja) | 原稿読取装置、原稿読取装置の制御方法、及びプログラム | |
JP2005063142A (ja) | コード読取装置 | |
JP2002077578A (ja) | 歪み補正装置およびその方法ならびに歪み補正プログラムを記録したコンピュータ読み取り可能な記録媒体 | |
TW416214B (en) | Scanning device and recognition method capable of automatically identifying the range of object scanned | |
JP2008242829A (ja) | バーコード読取装置及びプログラム | |
KR101158677B1 (ko) | 카메라를 이용한 전자 도서 스캐닝 장치 및 시스템 | |
JP5453193B2 (ja) | 傾き検出装置、撮像装置および方法 | |
JP2023076350A (ja) | 読取装置 | |
JP6041011B2 (ja) | 携帯処理装置及びプログラム | |
JP2013251779A (ja) | 画像処理装置及び画像処理方法 | |
JP2006058160A (ja) | 線状光データ処理装置、表面形状測定システム、線状光データ処理方法、線状光データ処理装置の制御プログラム、および、コンピュータ読み取り可能な記録媒体 | |
JP6070429B2 (ja) | 二次元コードの表示方法および表示媒体 | |
JP6162584B2 (ja) | 光学的情報読取装置の画像処理方法及び光学的情報読取装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210818 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230328 |