JP6250793B2 - カラー画像における文字背景除去方法及び装置 - Google Patents

カラー画像における文字背景除去方法及び装置 Download PDF

Info

Publication number
JP6250793B2
JP6250793B2 JP2016513825A JP2016513825A JP6250793B2 JP 6250793 B2 JP6250793 B2 JP 6250793B2 JP 2016513825 A JP2016513825 A JP 2016513825A JP 2016513825 A JP2016513825 A JP 2016513825A JP 6250793 B2 JP6250793 B2 JP 6250793B2
Authority
JP
Japan
Prior art keywords
character
image
background
color
input image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016513825A
Other languages
English (en)
Other versions
JPWO2015159941A1 (ja
Inventor
さゆり 柳内
さゆり 柳内
大西 弘之
弘之 大西
隆三 谷川
隆三 谷川
和隆 安達
和隆 安達
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Glory Ltd
Original Assignee
Glory Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Glory Ltd filed Critical Glory Ltd
Publication of JPWO2015159941A1 publication Critical patent/JPWO2015159941A1/ja
Application granted granted Critical
Publication of JP6250793B2 publication Critical patent/JP6250793B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B41PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41FPRINTING MACHINES OR PRESSES
    • B41F33/00Indicating, counting, warning, control or safety devices
    • B41F33/0036Devices for scanning or checking the printed matter for quality control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B41PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41JTYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J29/00Details of, or accessories for, typewriters or selective printing mechanisms not otherwise provided for
    • B41J29/38Drives, motors, controls or automatic cut-off devices for the entire printing mechanism
    • B41J29/393Devices for controlling or analysing the entire machine ; Controlling or analysing mechanical parameters involving printing of test patterns
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B41PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41JTYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J29/00Details of, or accessories for, typewriters or selective printing mechanisms not otherwise provided for
    • B41J29/46Applications of alarms, e.g. responsive to approach of end of line
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/89Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
    • G01N21/8901Optical details; Scanning details
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/89Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
    • G01N21/892Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles characterised by the flaw, defect or object feature examined
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/89Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
    • G01N21/892Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles characterised by the flaw, defect or object feature examined
    • G01N21/898Irregularities in textured or patterned surfaces, e.g. textiles, wood
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/93Detection standards; Calibrating baseline adjustment, drift correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/245Aligning, centring, orientation detection or correction of the image by locating a pattern; Special marks for positioning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/273Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion removing elements interfering with the pattern to be recognised
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/224Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/10Scanning
    • G01N2201/101Scanning measuring head
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30144Printing quality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30176Document

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Textile Engineering (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Analytical Chemistry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Wood Science & Technology (AREA)
  • Image Processing (AREA)
  • Character Input (AREA)
  • Image Input (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Analysis (AREA)

Description

この発明は、文字を含むカラーの印刷物を撮像したカラー画像から文字の背景にある模様を除去して印刷評価用の文字画像を取得するためのカラー画像における文字背景除去方法及び装置関する。
大量の印刷物を印刷する方法として、原画となる一つの印刷物を一枚ずつ印刷するのではなく、同一の印刷物を縦横に規則的に並べた大判原画を大判用紙に印刷して得られた大判印刷物から各印刷物(以下「小切れ」と記載する)を裁断して作成する方法が知られている。大判印刷物では、裁断する前に各小切れの印刷品質を確認するための印刷検査が行われる。印刷検査は、検査胴と呼ばれる大型の胴上に固定された大判印刷物を撮像した画像を利用して行われる。検査胴は大判印刷物を印刷する印刷機内に設けられており、検査胴が印刷後の大判印刷物を連続して次の工程へと搬送する間に、検査胴上の大判印刷物がラインカメラによって撮像される。
カラーの印刷物に含まれる文字の印刷検査は、文字を撮像したカラー画像から文字の背景にある模様を除去してから行われる。背景模様を除去することにより、背景模様による影響を受けることなく文字の印刷品質を正確に評価することができる。
印刷物のカラー画像から文字の背景模様を除去する方法として、例えば、フォームに記入された文字の文字認識処理を行うために、予めフォームに印刷されている罫線や背景等、文字とは異なる色の画素を、フォームを撮像したカラー画像から除去するカラードロップアウト処理が知られている。例えば、特許文献1には、このカラードロップアウト処理を正確に行うための方法が開示されている。カラー画像上の処理対象及び処理対象背景の色に基づくグレースケール値と処理対象を含まない領域の色に基づくグレースケール値とを利用することにより処理対象と背景とを分離して背景をドロップアウトさせるものである。また、特許文献2には、予め設定された固有ベクトルとカラー画像を形成する各画素の明度とを線形結合した値に基づいて、文字を形成する画素とそれ以外の画素とを分離する方法が開示されている。
印刷検査を行うためには、印刷検査に利用する画像を高精度に取得する必要があるが、高速回転する検査胴によって連続して搬送される大判印刷物のそれぞれの画像をラインカメラによって高精度に取得するためには、検査胴に対して設定された正規の設置位置にラインカメラを設置する必要がある。ここで、設置位置とは検査胴に対するラインカメラの位置及び角度である。
カメラの設置位置を調整する方法として、特許文献3には、撮像位置に配置した参照パターンを撮像した画像を確認しながら複数のカメラの設置位置を調整する方法が開示されている。各カメラで撮像した画像上の参照パターンが所定の位置関係となるように各カメラの位置を調整するものである。また、特許文献4には、黒と白のストライプ模様のラインペアチャートをCCDセンサによって撮像して、得られた正弦波の振幅が最大となるようにCCDセンサの設置位置等を調整する方法が開示されている。白と黒のコントラストが最大となるようにMTF曲線に基づいて光学系の調整やCCDセンサの設置位置の調整を行うものである。
特開2002−358482号公報 特開2010−225013号公報 特許第5334902号公報 特許第4878570号公報
しかしながら、上記特許文献1及び2に記載された従来技術によれば、カラー画像で文字の背景模様を除去できない場合がある。例えば、ホログラムやセキュリティスレッド等、文字の背景に光を反射する領域がある場合には、カラー画像上でのこの領域の色が安定しないため、カラードロップアウト処理では背景を除去できない場合がある。また、印刷物の中には、文字と背景模様とが同系色であるものの他にも、文字列を形成する各文字を異なる色で印刷したものや、背景模様を複数の色で印刷したものも存在し、従来のカラードロップアウト処理では背景を除去できない場合がある。
また、文字認識を目的とする場合には、残った文字により文字認識結果を得ることができれば、背景を除去する際に文字を形成する画素の一部が除去されても問題ないが、印刷検査を目的とする場合には文字を形成する画素が除去されないことが好ましい。また、印刷時に文字を印刷したインクが背景に飛んで汚れが付いたような場合には、この汚れを文字印刷の一部として検出して印刷品質を評価する必要があるが、従来技術ではこれに対応することができない。
また、上記特許文献3及び4に記載された従来技術によれば、複数のカメラが所定の位置関係となるように設置位置を調整したり、画像の焦点が合うように撮像位置からCCD等の撮像素子までの距離を調整したりすることはできるが、ラインカメラの傾き等の調整が困難であるという問題があった。
特許文献3に記載の方法によれば、隣り合う2台のカメラで参照パターンを撮像し、各カメラで得られた画像が所定の位置関係となるように2台のカメラ間の相対的な位置関係を調整することはできるが、例えば、参照パターンに対して2台のカメラが両方とも傾いて設置されている可能性がある。同様に、特許文献4に記載の方法によれば、被写体に貼り付けたストライプ模様に基づいて焦点距離を調整することはできるが、被写体に対してカメラが傾いていたり被写体からカメラまでの距離が正規の距離と異なっていたりする可能性がある。
カメラが傾いている場合でもそのまま撮像して、画像処理により画像の傾きを補正することは可能であるが、例えば数千画素以上の画素数を有するラインカメラによって大判印刷物を1ラインずつ走査しながらラインデータを取得する場合に、各ラインデータの傾きを補正しようとすると画像処理に時間がかかる。検査胴により高速搬送される大判印刷物を連続して検査するためには、このような傾き補正等の画像処理を行うことなく、ラインカメラから出力された傾きのないラインデータから画像データを生成できることが好ましい。このため、大判印刷を搬送する検査胴に対して位置ずれや傾きのない正規の設置位置となるように、ラインカメラの設置状況を確認しながら設置位置を容易に調整することができるラインカメラの設置調整方法の実現が望まれていた。
本発明は、上述した従来技術による問題点を解消するためになされたもので、印刷物の印刷品質を正確に評価することを目的とする。具体的には、文字を含むカラーの印刷物を撮像したカラー画像から文字の背景模様を除去して印刷評価用の文字画像を取得するためのカラー画像における文字背景除去方法及び装置を提供することを1つの目的とする
上述した課題を解決し、目的を達成するため、本発明は、文字が印刷された印刷物のカラー画像から文字の背景模様を除去して印刷評価用の画像を取得するカラー画像における文字背景除去方法であって、カラーの入力画像を文字部と背景部とに分離する分離工程と、前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求める関数算出工程と、前記識別関数により前記入力画像から前記背景部を除去した背景除去画像を生成する背景除去画像生成工程とを含み、前記分離工程では、前記入力画像に含まれる文字のフォント画像と前記入力画像に含まれる文字とが重なる位置を特定して、前記入力画像を形成する画素のうち、前記フォント画像と重なる位置にある画素を前記文字部、重なる位置にない画素を前記背景部とすることを特徴とする。
また、本発明は、上記発明において、前記関数算出工程では、前記識別関数を線形判別処理によって求めることを特徴とする。
また、本発明は、上記発明において、前記識別関数を算出する文字範囲を指定する指定工程をさらに含み、前記分離工程では、前記指定工程で指定した文字範囲に基づいて前記入力画像を前記文字部と前記背景部とに分離して、前記関数算出工程では、前記指定工程で指定した文字範囲に基づいて、前記識別関数を求めることを特徴とする。
また、本発明は、上記発明において、前記入力画像に複数の文字が含まれる場合には1文字毎に前記各工程を実行することを特徴とする。
また、本発明は、上記発明において、前記文字と同系色の背景模様を除去するために前記背景除去画像を2値化する2値化処理工程をさらに含んだことを特徴とする。
また、本発明は、上記発明において、印刷後の大判印刷物を撮像したカラー画像から前記入力画像を取得する画像取得工程をさらに含んだことを特徴とする。
また、本発明は、文字が印刷された印刷物のカラー画像から文字の背景模様を除去して印刷評価用の画像を取得するカラー画像における文字背景除去装置であって、カラーの入力画像を文字部と背景部とに分離して、前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求め、該識別関数により前記入力画像から前記背景部を除去した背景除去画像を生成する文字背景除去部とを備え、前記文字背景除去部は、前記入力画像に含まれる文字のフォント画像と前記入力画像に含まれる文字とが重なる位置を特定して、前記入力画像を形成する画素のうち、前記フォント画像と重なる位置にある画素を前記文字部、重なる位置にない画素を前記背景部とすることを特徴とする。
また、本発明は、上記発明において、前記入力画像上で文字の位置を指定するための操作部をさらに備え、前記文字背景除去部は、前記操作部による文字位置の指定に基づいて前記入力画像を前記文字部と前記背景部とに分離して、前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求め、該識別関数により背景模様を除去することにより前記背景除去画像を生成することを特徴とする。
本発明によれば、文字を含むカラー画像の文字認識結果に基づいてカラーの入力画像を文字部と背景部とに分離して、文字部と背景部とを画素値に基づいて分離するための識別関数を求めてから、該識別関数により入力画像の背景部を除去するので、文字の印刷に用いたインクによる汚れがある場合や印刷された文字の一部が欠けて背景が見えているような場合に、これらの汚れや欠けを検出することができる。これにより、文字の印刷評価を行うことが可能となる。
また、本発明によれば、入力画像に含まれている文字のフォント画像により入力画像内の文字の位置を特定してから文字部と背景部とを分離するので、文字部と背景部とを正確に分離することができる。
また、本発明によれば、文字を含むカラー画像から背景を除去する処理を1文字毎に実行することにより、各文字が異なる色で印刷されている場合、各文字が異なるフォントで印刷されている場合、各文字の背景の色や模様が異なる場合等でも、各文字の背景部を除去することができる。
また、本発明によれば、識別関数によって入力画像から背景を除去した画像に、文字と同系色の模様によるノイズが残っている場合でも、文字を形成する画素の画素値に基づく2値化処理を行うことによりノイズを除去して文字のみの画像を取得することができる。
図1は、大判印刷物のカラー画像を取得する方法を示す模式図である。 図2は、実施例1に係る文字背景除去装置の構成概略を示すブロック図である。 図3は、大判印刷物から取得されるカラー画像の例を示す模式図である。 図4は、大判印刷物のカラー画像から切り出された入力画像の例を示す模式図である。 図5は、入力画像の取得から文字の印刷評価を行うまでの処理の流れを示すフローチャートである。 図6は、辞書データに登録されたフォント画像の例を示す図である。 図7は、入力画像から分離された文字部の画像と背景部の画像を示す模式図である。 図8は、識別関数により入力画像から生成された背景除去画像と2値化処理により背景除去画像から生成された文字画像とを示す図である。 図9は、文字画像とフォント画像の差分により生成された差分画像を示す図である。 図10は、入力画像の文字部と背景部とを分離する処理を手動で行う際に表示される操作画面の例を示す図である。 図11は、入力画像の文字部と背景部とを分離する処理を手動で行う際に表示される操作画面の別の例を示す図である。 図12は、線形識別関数を登録する処理の流れを示すフローチャートである。 図13は、予め準備された線形識別関数を利用する文字認識処理の流れを示すフローチャートである。 図14は、実施例2に係るラインカメラと検査胴との位置関係を示す模式図である。 図15は、ラインカメラを含む印刷機のシステム構成概略を示すブロック図である。 図16は、光源の設置位置を示す模式図である。 図17は、大判印刷物を照らす光源の照明変動の補正方法及び印刷評価に係るしきい値設定について説明するための模式図である。 図18は、大判印刷物に係る並列処理を説明するための模式図である。 図19は、設置調整用チャートを示す図である。 図20は、正規の設置位置に設置されたラインカメラによって取得される基準信号波形と設置調整用チャートとの関係を示す図である。 図21は、ラインカメラが傾いている場合に得られる信号波形と設置調整用チャートとの関係を示す図である。 図22は、ラインカメラが傾いている場合に得られる信号波形と設置調整用チャートとの関係の別の例を示す図である。 図23は、ラインカメラの設置位置から観察される設置調整用チャートの例を示す図である。 図24は、図23に示すラインカメラの各設置位置で観察される設置調整用チャートと撮像信号の信号波形との関係を示す図である。
以下に添付図面を参照して、この発明に係るカラー画像における文字背景除去方法及び装置、並びにラインカメラの設置調整方法及び設置調整用チャートについて説明する。
まず、カラー画像における文字背景除去方法及び装置について説明する。本実施例に係る文字背景除去方法は、例えば、大判印刷物をラインカメラによって撮像したカラー画像を対象として行われる。大判印刷物に含まれる各小切れの印刷検査の一つとして、各小切れに印刷された文字の印刷品質が評価される。文字の印刷品質を正確に評価するために、本実施例に係る文字背景除去方法により文字の背景模様を除去した文字画像を取得して、この文字画像を対象とする印刷検査が行われる。
図1は、大判印刷物200のカラー画像を取得する方法を示す模式図である。大型の印刷機内で、複数の小切れ201を含む大判印刷物200が検査胴20によって回転搬送される間に、ラインカメラ10によって大判印刷物200のカラー画像が取得される。なお、図1では、X軸方向が水平方向、Y軸方向が垂直方向を示しており、ラインカメラ10は光軸方向がZ軸方向となるように設置されている。検査胴20は、X軸に平行な回転軸によって回転可能に軸支されており、図示しない検査胴駆動部により駆動されて回転する。検査胴20が回転することにより、検査胴20の外周面に固定された大判印刷物200は、ラインカメラ10による撮像領域21(図中破線領域)を、例えば4m/秒の速度で通過する。
ラインカメラ10は、RGB各色の受光素子を一方向に配列して成る撮像素子を有し、大判印刷物を1ラインずつ撮像したR(赤)のラインデータ、G(緑)のラインデータ及びB(青)のラインデータからR画像、G画像、B画像を取得すると共にフルカラー画像を生成する機能を有している。ラインカメラ10は、例えば、1ライン8192画素の撮像素子を有する。
次に、文字背景除去装置の構成について説明する。図2は、文字背景除去装置の構成概略を示すブロック図である。文字背景除去装置は、図1に示すラインカメラ10の他に、光源30と、検査胴駆動部40と、操作表示部50と、記憶部60と、制御部70とを有している。
光源30は、ラインカメラ10による検査胴20上の撮像領域21に光を照射する機能を有する。大判印刷物200に含まれる小切れ201に、ホログラムやセキュリティスレッド等、照射された光を反射する部分領域が含まれている場合に、この部分領域で反射された光がラインカメラ10に直接入射すると、小切れ201上の他の領域との輝度差が大きくなって所謂白とびや黒つぶれが生ずる。このため、光源30は、大判印刷物200で反射された光がラインカメラ10に直接入射することがないように位置を調整して設置されている。
検査胴駆動部40は、モータ等を利用して検査胴20を回転駆動する機能を有する。また、検査胴駆動部40は、ロータリーエンコーダ等を利用して、検査胴20の回転角度及び回転位置を検出する機能を有している。
操作表示部50は、タッチパネル式の液晶ディスプレイ装置等から成り、ラインカメラ10によって撮像された画像や背景除去に係る設定情報等、各種情報を表示する機能と、背景除去処理に係る設定操作等、各種情報の入力を受け付ける機能とを有する。
記憶部60はハードディスクや半導体メモリ等の不揮発性の記憶装置であり、背景除去処理の処理対象とする画像や処理に係る設定情報等、背景除去処理に必要な各種データを保存するために利用される。また、記憶部60には、文字認識処理に必要な辞書データが保存されている。
制御部70は、カラー画像取得部71、光源制御部72、検査胴駆動制御部73、文字認識部74、文字背景除去部75及び印刷検査部76を有している。
カラー画像取得部71は、ラインカメラ10によって大判印刷物200を撮像してカラー画像を取得すると共に、取得したカラー画像から文字背景除去の処理対象とする部分領域画像を切り出す機能を有する。図3は、カラー画像取得部71によって大判印刷物200から取得されるカラー画像の例を示す模式図である。図3は模式的に示しているが、大判印刷物200の画像210、小切れ201の画像211、文字列を含む画像220は全てカラー画像である。
具体的には、カラー画像取得部71は、検査胴20によって回転搬送される大判印刷物200をラインカメラ10によって1ラインずつ走査したラインデータから、図3(a)に示す大判印刷物全体のカラー画像210を取得する。ラインカメラ10によるラインデータの取得は、光源制御部72により大判印刷物200の表面に白色光を照射した状態で行われる。
例えば、大判印刷物のカラー画像210には、全面に背景模様を有する小切れの画像211が含まれており、図3(b)に示すように、小切れの画像211には、各小切れを識別するための識別番号である文字列212が含まれている。大判印刷物200の印刷後に、各小切れ201に印刷された文字列212の印刷品質を評価するために、カラー画像取得部71は、図3(a)に示すカラー画像210から、同図(c)に示すように、文字列212を含む部分領域のカラー画像220を切り出す。具体的には、予め大判印刷物200について設定されている情報に基づいて、カラー画像取得部71が、大判印刷物200のカラー画像210上で各小切れ201の文字列212の位置及びサイズを認識して、文字列212を含む部分領域のカラー画像220を切り出すものである。そして、カラー画像取得部71は、切り出したカラー画像220を、文字認識部74及び文字背景除去部75に入力する入力画像として記憶部60に保存する。
光源制御部72は、温度変化や光源30の劣化状態に応じて、光源30から照射する光の照度を調整する機能を有する。検査胴駆動制御部73は、検査胴駆動部40を制御して、検査胴20の回転を制御する機能を有する。また、検査胴駆動制御部73は検査胴20の回転位置を認識する機能を有している。光源制御部72により光源30から白色光を照射した状態で、カラー画像取得部71が、検査胴駆動制御部73によって認識された検査胴20の回転位置に合わせてラインカメラ10による撮像タイミングを制御することにより、検査胴20上の大判印刷物200を1ラインずつ走査したラインデータを取得するようになっている。
文字認識部74は、カラー画像取得部71によって取得された入力画像に含まれる文字列を文字認識する機能を有する。文字背景除去部75は、入力画像から文字の背景にある模様を除去した背景除去画像を生成する機能を有する。そして、印刷検査部76は、背景の模様を除去して文字のみとなった画像により文字の印刷品質を評価する機能を有する。
次に、文字認識処理、背景除去処理及び印刷評価処理について説明する。なお、以下では説明を簡単にするため、1文字だけが含まれるカラー画像を入力画像301として各処理を説明する。入力画像が複数の文字から成る文字列を含む場合には、以下に示す処理を、文字列を形成する各文字の画像に適用すればよい。
図4は、カラー画像取得部71によって大判印刷物200のカラー画像から切り出された入力画像301の例を示す模式図である。図4は模式的に示しているが、入力画像301は、白地に青、緑及び赤の直線が複数含まれるライン模様の背景の上に、赤のインクによって印刷された文字(数字の「1」)を撮像したカラー画像である。この入力画像301は、汚れ401と欠け402を含む印刷品質が良くない場合の例を示している。汚れ401は、文字の印刷に利用するインクが文字以外の領域に付着したもので、欠け402は、文字を形成する一部の領域にインクが無く文字が欠けて背景の模様が見えているものである。
図5は、入力画像301の取得から文字の印刷評価を行うまでの処理の流れを示すフローチャートである。カラー画像取得部71によって図4に示す入力画像301が取得されると(ステップS10)、文字認識部74が、入力画像301の文字認識処理を行う(ステップS11)。記憶部60には、予め、文字認識処理によって得られる可能性がある全ての文字の文字フォント画像が辞書データに登録されている。例えば、文字認識部74が、入力画像301と辞書データに登録されたそれぞれの文字フォント画像との間で画像マッチング処理を行って、入力画像301に含まれる文字を特定することにより、文字が認識される。なお、入力画像301に含まれる文字と文字フォント画像に含まれる文字とが一致するように予め画像倍率が調整されている。
図6は、辞書データに登録されている文字「1」のフォント画像500である。図4に示す入力画像301と図6に示すフォント画像500との画像マッチング処理の結果から、文字認識部74により、入力画像301に含まれる文字が「1」であるとの文字認識結果が得られると、同時に、文字背景除去部75により、入力画像301内の文字位置が認識される(ステップS12)。具体的には、画像マッチング処理により、入力画像301に含まれる文字がフォント画像500と一致すると判定された際の入力画像301上でのフォント画像500の位置が、入力画像301内の文字の位置であると認識される。
次に、文字背景除去部75によって、入力画像301上で認識された文字位置に基づいて、入力画像301が文字部と背景部とに分離される(ステップS13)。具体的には、図4に示す入力画像301を形成する画素のうち、入力画像301の文字位置に図6に示すフォント画像500を重ねたときに、フォント画像500を形成する画素と重なる位置にある画素が文字部とされ、フォント画像500を形成する画素と重ならない位置にある画素は背景部とされる。
図7は、同図(a)が図4の入力画像301から得られた文字部の画素から成る文字部画像311、同図(b)が入力画像301の背景部の画素から成る背景部画像312を示す模式図である。図7は模式的に示しているが、同図(a)の文字部画像311は赤のインクによって印刷された文字のカラー画像であり、同図(b)の背景部画像312は白地に青、緑及び赤の直線が複数含まれる背景のカラー画像である。
図7に示すように、フォント画像500を利用して文字の位置及び形状に基づいて文字部と背景部とを分離すると、フォント画像500と重ならない位置にある汚れ401が背景部画像312に含まれることになる。すなわち、汚れ401が背景とみなされるため、印刷検査を適切に行うことができない。
こうして、入力画像301が、文字部画像311と背景部画像312とに分離されると、続いて、文字背景除去部75は、文字部画像311を形成する全ての画素のR、G、Bの画素値と、背景部画像312を形成する全ての画素のR、G、Bの画素値とに基づいて、文字部の画素と背景部の画素とを画素値に基づいて分離するための識別関数を求める(ステップS14)。識別関数として、例えば線形識別関数や非線形な識別関数を適用できるが、ここでは線形識別関数を用いた例を示す。具体的には、線形識別関数V=W1×R+W2×G+W3×B+W4によって、入力画像301を形成する各画素のR、G、Bの画素値を変換することにより、文字の背景を除去した画像が得られるように、線形識別関数の重みW1〜W4が算出される。この処理は、従来の線形判別処理(LDA:Linear Discriminant Analysis)により行うことができるため詳細な説明は省略する。
線形識別関数が求められると、文字背景除去部75は、図4に示す入力画像301を形成する各画素の画素値にこれを適用して、入力画像301から背景部の略全ての画素が除去された背景除去画像を生成する(ステップS15)。図8(a)は、図4に示す入力画像301から生成された背景除去画像321である。背景除去画像321は、R、G、Bの画素値を線形識別関数によって変換して得られたグレー画像である。このように、線形識別関数を利用して背景を除去することにより、汚れ401を、文字を形成するインクの一部として背景除去画像321に残すことが可能となる。
図8(a)に示すように、背景除去画像321には、入力画像301に含まれる背景模様のうち文字「1」と同系色の画素の一部がノイズ403a〜403dとして残る場合があるが、これらは背景除去画像321上で文字を形成する画素とは異なる画素値を示す。このため、文字を形成する画素のみを残すように設定したしきい値により2値化処理を行ってノイズ403a〜403dを除去することができる。
文字背景除去部75は、ノイズ403a〜403dを除去するための2値化処理を行って背景除去画像321から2値画像を生成する(ステップS16)。これにより背景除去画像321に僅かに残っていたノイズ403a〜403dも除去されて、文字のみを含む文字画像を取得することができる。図8(b)は、同図(a)の背景除去画像321から2値化処理により生成された文字画像322である。文字画像322は、背景を形成する画素を白画素、文字を形成する画素を黒画素とする2値画像である。このように、文字画像322では、汚れ401や欠け402の存在が明確になるので、印刷検査を適切に行うことが可能となる。
印刷検査部76は、文字背景除去部75によって得られた文字画像322により文字の印刷品質を評価する(ステップS17)。大判印刷物200を撮像して得られたカラーの入力画像301から背景模様を除去して得られた文字画像322は、図8(b)に示すように、汚れ401や欠け402の存在を判定可能な画像となる。印刷検査部76は、図8(b)に示す文字画像322と、図6に示すフォント画像500とを比較することにより、文字の印刷品質を判定する。印刷品質として、汚れ401や欠け402の存在の他、文字の印刷位置のずれ、かすれ、文字の太さ等を評価する。
例えば、印刷検査部76は、汚れ401や欠け402が含まれるか否かを判定するために、文字画像322とフォント画像500との差分画像を生成する。図9は、文字画像322とフォント画像500の差分画像330を示している。このように、差分画像330では、文字を形成する画素が消去されると共に、図4に示す入力画像301の汚れ401及び欠け402に対応して、汚れ411と欠け412とが区別可能に異なる画素値で表れる。このため、差分画像330に基づいて、汚れ401や欠け402が含まれるか否かを判定して印刷品質を評価することができる。
入力画像301を形成する画素を文字部と背景部とに分離して識別関数を求める工程は、上述したように、文字認識結果を得た後に自動的に行われる。ただし、本実施例がこれに限定されるものではなく、識別関数を求めるための工程を、文字認識結果を得る前又は得た後に手動で行うことも可能である。具体的には、文字認識結果を得た後、識別関数を求めるために文字部と背景部とを分離する工程のみを手動で行うことができる。また、背景模様の影響等により文字認識結果を得ることが困難である場合には、文字認識結果を得る前に、手動操作により、文字部と背景部とを分離して識別関数を予め求めておいて、この識別関数を適用して文字認識結果を得た後、上述したように、自動的に識別関数を求めて背景を除去する態様であっても構わない。文字認識結果を得ることが困難である場合に、1つの文字を対象に、予め識別関数を設定しておけば、他の文字を含む全ての文字について文字認識結果を得て、その後の工程を実行することが可能となる。なお、いずれの場合も識別関数を求めるために行う操作方法は同じである。以下、この操作方法について説明する。
図10は、入力画像の文字部と背景部とを分離する処理を手動で行う際に操作表示部50に表示される操作画面の例を示す図である。図10に示すように、画面600上に、入力画像601及び背景画像602を表示する。画面表示される入力画像601は印刷検査の対象とする文字を含む小切れ全面の画像であり、背景画像602は印刷検査の対象とする文字を含まない小切れ全面の画像である。なお、入力画像601及び背景画像602は予め記憶部60に保存されている。
画面600に表示された入力画像601を確認しながら、印刷検査の対象とする文字、すなわち文字部と背景部とを分離する処理の処理対象とする文字を選択する。操作表示部50を操作して文字列番号及び文字番号を指定すると、入力画像601及び背景画像602の下に、入力文字画像と、文字背景画像とが表示される。入力文字画像は、文字列番号及び文字番号によって指定された文字を含む部分領域を入力画像601から切り出した画像である。文字背景画像は、入力文字画像に対応する部分領域の画像を背景画像602から切り出した画像である。すなわち、文字が印刷される前の背景模様のみの状態が文字背景画像であり、指定した文字を背景模様の上に印刷した状態が入力文字画像である。なお、図10の入力文字画像は上述した入力画像である。
図10の例では、文字列番号を「1」としたことにより入力画像601に含まれる複数の文字列の中から文字列「A123456」が選択され、文字番号を「1」としたことにより文字列の最初の文字「A」が選択されて、文字「A」の入力文字画像と、これに対応する文字背景画像が表示されている。
また、画面600の背景画像602の下にあるように、文字「A」を指定して、辞書フォルダを指定することにより、辞書フォルダに保存されている辞書フォント画像の中から指定した文字「A」に対応する辞書フォント画像が表示される。なお、図10の辞書フォント画像は上述したフォント画像である。
こうして、入力文字画像及び辞書フォント画像を指定すると、画面600左下には、入力文字画像上に辞書フォント画像をオーバーラップ表示した画像が表示される。この画像上で、入力文字画像に含まれる文字611と辞書フォント画像による文字612との位置が一致して、2つの文字611、612が重なるように、方向ボタン610を操作する。
方向ボタン610を操作して辞書フォント画像による文字612を移動させ、2つの文字611、612が重なるように文字位置を一致させた後、画面600の重み演算ボタンを押す。これにより、辞書フォント画像による文字612を形成する画素と重なる位置にある入力文字画像の画素が文字部の画素、これ以外の画素が背景部の画素とされ、画素値に基づいて文字部と背景部の画素を分離するための線形識別関数を求める線形判別処理が開始され、線形識別関数の重みW1〜W4が算出される。
線形識別関数の重みが算出されると、これを利用して入力文字画像から背景模様を除去した画像が、画面600上に、重み適用背景除去画像620として表示される。この画像で背景が除去されていることを確認した後、重み登録ボタンを押すと、算出した重みW1〜W4に関する情報が記憶部60に保存される。そして、完了ボタンを押すと、保存された重みW1〜W4を利用して、次の工程、すなわち文字認識部74による文字認識又は印刷検査部76による印刷検査が開始される。重みW1〜W4に関する情報は、色辞書データとして、小切れの種類、小切れ上での文字の位置情報等と関連付けて記憶部60で管理される。色辞書データは、指定した色辞書フォルダに保存できるようになっている。
文字列を形成する複数の文字が異なる色で印刷されている場合に、印刷状態によって、文字部の色が変化することがある。具体的には、例えば、紙幣の記番号の中には、一端側の桁の文字は赤色で印刷され、他端側の桁の文字は緑色で印刷され、これらの間にある中間位置の桁の文字は赤色と緑色が混ざった色で印刷されているものが存在する。このような印刷方法は、一般的にレインボー印刷と呼ばれている。レインボー印刷では、中間位置の桁の文字の色が、赤色のインクと緑色のインクの混ざり具合によって変化する場合がある。
本実施例に係る文字背景除去装置では、このような場合に対応できるようになっている。以下では、図10に例示した7桁の文字列のうち中央にある左から4桁目の文字の色が変化する場合があるものとして具体的に説明する。
図11は、入力画像の文字部と背景部とを分離する処理を手動で行う際に操作表示部50に表示される操作画面の例を示す図である。図11に示すように、画面700上に、入力画像701及び背景画像702を表示する。画面表示される入力画像701は印刷検査の対象とする文字を含む小切れ全面の画像であり、背景画像702は印刷検査の対象とする文字を含まない小切れ全面の画像である。なお、入力画像701及び背景画像702は予め記憶部60に保存されている。
画面700に表示された入力画像701を確認しながら、印刷検査の対象とする文字、すなわち文字部と背景部とを分離する処理の処理対象とする文字を選択する。図11の例では、文字列番号を「1」としたことにより入力画像701に含まれる複数の文字列の中から文字列「A123456」が選択され、文字番号を「4」としたことにより文字列の左端から4桁目の文字「3」が選択される。そして、追加エリアを「1」としたことにより、4桁目の文字「3」を中心として、左右両側の1文字が選択される。この結果、画面700上には、図11に示すように、「234」の入力文字画像と、これに対応する文字背景画像が表示される。
追加エリアは、処理対象とする4桁目の文字を中心として左右両側の何文字を処理対象とするかを示しており、図11に示す画面700で追加エリアを「2」とすれば入力画像は「12345」となる。追加エリアとして、文字列の文字範囲を超えない範囲で、任意の数字nを指定することができる。図11の例では、4桁目の文字を中心としてn=1〜3を指定することができる。追加エリアの数字は、色が変化する領域を考慮して指定する。
図11に示す背景画像702の下にあるように、文字「2」、「3」、「4」を指定して、辞書フォルダを指定することにより、辞書フォルダに保存されている辞書フォント画像の中から指定した文字列「234」に対応する辞書フォント画像が表示される。
こうして、入力文字画像及び辞書フォント画像を指定すると、画面700左下には、入力文字画像上に辞書フォント画像をオーバーラップ表示した画像が表示される。この画像上で、入力文字画像に含まれる「234」の文字列711の位置と辞書フォント画像による「234」の文字列712の位置とが一致して、2つの文字列711、712が重なるように、方向ボタン710を操作する。
方向ボタン710を操作して辞書フォント画像による文字列712を移動させ、2つの文字列711、712が重なるように文字位置を一致させた後、画面700の重み演算ボタンを押す。これにより、辞書フォント画像による文字列712を形成する画素と重なる位置にある入力文字画像の画素が文字部の画素、これ以外の画素が背景部の画素とされ、画素値に基づいて文字部と背景部の画素を分離するための線形識別関数を求める線形判別処理が開始され、線形識別関数の重みW1〜W4が算出される。なお、本実施例では、画面上のボタンを押すと記載しているが、これは、タッチパネル式の液晶ディスプレイで画面上のボタンにタッチすることを意味している。
線形識別関数の重みが算出されると、これを利用して入力文字画像から背景模様を除去した画像が、画面700上に、重み適用背景除去画像720として表示される。この画像で背景が除去されていることを確認した後、重み登録ボタンを押すと、算出した重みW1〜W4に関する情報が記憶部60に保存される。そして、完了ボタンを押すと、保存された重みW1〜W4を利用して、次の工程、すなわち文字認識部74による文字認識又は印刷検査部76による印刷検査が開始される。重みW1〜W4に関する情報は、色辞書データとして、小切れの種類、小切れ上での文字の位置情報等と関連付けて記憶部60で管理される。色辞書データは、指定した色辞書フォルダに保存できるようになっている。
なお、文字列「234」を指定した後、文字列を形成する各文字を同等に扱う他、各文字に異なる重みを適用することも可能となっている。例えば、処理対象とする文字「3」に対して、この文字の側にある文字「2」及び側にある文字「4」 より大きい重みを適用することにより、文字「3」を形成する画素の画素値を重視した線形識別関数とすることができる。
このように、文字認識を行う前に、予め、図11に示す画面700上で、文字部と背景部を分離する線形識別関数を作成する処理を行うことができる。図12は、線形識別関数を登録する処理の流れを示すフローチャートである。図11に示したように、まず、入力画像701として文字部画像を入力して(ステップS21)、背景画像702として背景部画像を入力する(ステップS22)。
そして、画面700に表示された入力画像701を確認しながら、文字部と背景部の分離処理の処理対象とする文字を指定するために、文字列番号及び文字番号を選択すると共に(ステップS23)、文字の色が変化する桁位置の範囲を指定するため、追加エリアの数字を入力する(ステップS24)。 こうして、入力画像701を利用して処理対象とする文字列を選択した後、この文字列を形成する各文字及びフォントを指定するため、画面700上で文字列を形成する各文字を入力して辞書フォルダを選択する(ステップS25)。
そして、文字部と背景部とを設定するために、画面700上で、入力画像701から選択した入力文字画像に含まれる文字列と、ステップS23〜S25で設定した文字列の辞書フォント画像とが重なる位置を指定する(ステップS26)。こうして、文字列を含む入力文字画像上で、辞書フォント画像の位置を調整して文字部を指定することにより、文字部と背景部とを設定した後、重み演算ボタンを押して線形識別関数の重みW1〜W4を算出する(ステップS27)。
線形識別関数の重みが算出されると、入力文字画像から背景模様を除去した画像が、重み適用背景除去画像720として表示されるので、この画像で背景が除去されていることを確認した後、重み登録ボタンを押して、算出した重みW1〜W4に関する情報を記憶部60に保存する(ステップS28)。
なお、図12では、文字列を形成する文字の色が変化する場合に追加エリアを指定する例を示したが、この他、例えば、文字の印刷位置又は背景模様の印刷位置がずれる場合等、背景と文字との位置関係がずれる印刷ずれがある場合にも、追加エリアを指定して線形識別関数を取得することにより印刷ずれによる影響を低減することができる。
こうして線形識別関数に関する情報を記憶部60に保存しておくことにより、これを呼び出して文字認識処理を行うことができる。図13は、予め記憶部60に準備されている線形識別関数を利用する文字認識処理の流れを示すフローチャートである。文字部画像を入力して(ステップS31)、予め準備されている線形識別関数を呼び出し(ステップS32)、この線形識別関数を利用して文字部画像から背景除去画像を作成することにより(ステップS33)、背景除去画像による文字認識処理を行うことができる(ステップS34)。
なお、本実施例に係る文字背景除去方法は、この方法を単独で利用する態様に限定されるものではない。例えば、文字単位、文字列単位、小切れ単位、大判印刷物単位で、従来のカラードロップアウト処理によって文字の背景を除去できるものは従来法による処理を行って、従来法では文字の背景を適切に除去できないものだけを本実施例に係る文字背景除去方法で処理する態様であっても構わない。印刷評価時には、印刷評価の対象とする文字や背景の詳細が予め分かっているので、文字や背景によっていずれの方法により文字の背景を除去するかを設定すればよい。
また、本実施例では数字や英字の背景にある背景模様を除去する例を示したが、本実施例に係る文字が、これらに限定されるものではない。例えば、平仮名、カタカナ、漢字等の文字であってもよいし記号であっても構わない。
上述したように、本実施例によれば、文字が背景模様と同色の色で印刷されている印刷物、文字列を形成する各文字が異なる色で印刷されている印刷物、文字の背景模様が複数の色を含む印刷物等であっても、カラーの入力画像から文字の背景にある模様等を除去した文字画像を取得することができる。背景を除去する際に、文字を形成する画素情報を残すだけではなく、文字の欠けや文字を印刷したインクによる汚れ等の情報も残すことができるので、印刷品質の検査に利用可能な文字画像を取得することができる。
次に、ラインカメラの設置調整方法及び設置調整用チャートについて説明する。本実施例に係るラインカメラの設置調整方法及び設置調整用チャートは、例えば、大型の印刷機で印刷した大判印刷物の印刷品質を検査するために印刷機内の検査胴によって搬送される大判印刷物を撮像するラインカメラの設置位置を調整するためのものである。ここで、設置位置とは、検査胴に対するラインカメラの位置及び角度を言う。大判印刷物は円筒形状の検査胴の回転に伴ってラインカメラによる撮像範囲内を回転搬送されるようになっており、回転搬送される大判印刷物をラインカメラによって1ラインずつ走査して撮像したラインデータから大判印刷物全体の画像を取得する。
図14は、ラインカメラ1010と検査胴1020との位置関係を示す模式図である。X軸方向が水平方向、Y軸方向が垂直方向を示しており、ラインカメラ1010を正規の設置位置に設置した状態でZ軸方向がラインカメラ1010の光軸方向となる。円筒形状の検査胴1020は、X軸に平行な回転軸によって回転可能に軸支されており、図示しない検査胴駆動部により駆動されて回転する。検査胴1020が回転することにより、検査胴1020の外周面に固定された大判印刷物は、図14に破線で示したラインカメラ1010による撮像領域1021を、例えば4m/秒の速度で通過する。
ラインカメラ1010は、通常、RGBの受光素子を水平方向に一列又は数列にわたって配列して成る撮像素子を有し、大判印刷物を1ラインずつ撮像したR(赤)のラインデータ、G(緑)のラインデータ及びB(青)のラインデータを取得する機能を有している。ラインカメラ1010は、例えば、1ライン8192画素の撮像素子を有している。
ラインカメラ1010は、図示しないカメラホルダによって設置位置を調整できるように支持されている。具体的には、カメラホルダの機能により、X軸、Y軸及びZ軸に平行にラインカメラ1010を移動できるようになっておりかつX軸周り、Y軸周り及びZ軸周りにラインカメラ1010を回転できるようになっている。カメラホルダの調整機構により、ラインカメラ1010の設置位置を調整して、正規の設置位置でラインカメラ1010を固定することができる。なお、3軸方向の移動及び3軸周りの回転によりラインカメラ1010の設置位置を調整するためのカメラホルダについては従来装置を利用することができるので詳細な説明は省略する。ラインカメラ1010の設置位置の調整は、カメラホルダの調整機構を手動で操作して行う態様であってもよいし、調整機構を駆動するモータ等を制御して行う態様であっても構わない。
検査胴1020の回転に伴って搬送される大判印刷物を高精度に撮像するため、ラインカメラ1010の光軸方向がZ軸と一致するようにラインカメラ1010の設置位置を調整する。また、ラインカメラ1010に含まれる受光素子の配列方向、すなわちラインデータのライン方向(走査ライン方向)がX軸と一致するように、ラインカメラ1010の設置位置を調整する。この他にも、各方向へのラインカメラ1010の位置ずれや傾きを調整して修正する。設置位置の調整は、検査胴1020に固定した設置調整用チャートをラインカメラ1010によって撮像して得られる信号波形を確認しながら行うが、まず、ラインカメラ1010の設置位置を調整するためのシステム構成について説明する。
図15は、ラインカメラ1010を含む印刷機のシステム構成概略を示すブロック図である。印刷機システムは、図14に示すラインカメラ1010の他に、光源1030と、検査胴駆動部1040と、表示部1050と、制御部1060とを有している。
光源1030は、ラインカメラ1010による検査胴1020上の撮像領域1021に光を照射する機能を有する。大判印刷物に含まれる小切れに、ホログラムやセキュリティスレッド等、照射された光を反射する部分領域が含まれている場合に、この部分領域で反射された光がラインカメラ1010に直接入射すると、小切れ上の他の領域との輝度差が大きくなって所謂白とびや黒つぶれが生じ、大判印刷物全体を高精度に撮像することができない。このため、光源1030は、大判印刷物で反射された光がラインカメラ1010に直接入射することがないように設置されている。
図16は、光源1030の設置位置を示す模式図である。図16(a)に示すように、検査胴1020の回転軸がX軸と平行かつラインカメラ1010の光軸がZ軸と平行で、検査胴1020の回転軸とラインカメラ1010の光軸とがXZ平面と平行な同一の計測面上に存在する位置関係にある場合には、計測面との間で所定角度を成すように光源1030が設置される。具体的には図16(a)に示すように、光源1030からの入射光及び検査胴1020による反射光R1のそれぞれと計測面との間の角度、すなわち検査胴1020上の反射面P1への光の入射角及び反射角が、ともに30度となるように光源1030を設置する。図16(b)は、同図(a)に示す位置関係からラインカメラ1010をY軸負方向に平行移動した場合を示している。このように、検査胴1020の回転軸に対してラインカメラ1010の光軸を含む計測面がずれている場合にも、検査胴1020からの反射光R2と計測面との間の角度が所定角度を成すように光源1030が設置される。図16(b)の例では、XZ平面に対して20度の角度を成す検査胴1020の外周面を含むように反射面P2が形成されている。例えば、反射面P2への光の入射角が50度となるように光源1030を設置することにより、ラインカメラ1010による計測面と反射光R2との間の角度を30度とすることができる。このように、検査胴1020の外周面上の反射面P1、P2と計測面との位置に応じて光源1030の位置を設定して、反射光R1、R2と計測面との間の角度を30度程度とすることにより、反射光R1、R2による影響を受けることなくラインカメラ1010によって検査胴1020上の大判印刷物を撮像することが可能となる。
図15に示す検査胴駆動部1040は、モータ等を利用して検査胴1020を回転駆動する機能を有する。また、検査胴駆動部1040は、ロータリーエンコーダ等を利用して、検査胴1020の回転角度及び回転位置を検出する機能を有している。図14に示すように検査胴1020の外周面には、設置調整用チャートを固定する位置を示すマーカ1022が設けられている。ラインカメラ1010の設置調整を開始する際には、設置調整用チャートの上端を検査胴1020のマーカ1022に合わせると共に、設置調整用チャートの左右両端を検査胴1020の左右両端に合わせて、設置調整用チャート1070を検査胴1020に固定する。その後、検査胴駆動部1040を制御して、設置調整用チャートとラインカメラ1010とが正対する所定の位置関係となるように検査胴1020を所定の回転位置へ回転させて静止させ、この回転位置で検査胴1020を固定できるようになっている。
表示部1050は、検査胴1020に固定された設置調整用チャートをラインカメラ1010によって撮像して得られた信号、該信号に関する情報等、各種情報を表示するための液晶ディスプレイ等の表示装置である。
制御部1060は、カメラ信号処理部1061、カメラ位置判定部1062、光源制御部1063、検査胴駆動制御部1064及び印刷検査部1065を有している。カメラ信号処理部1061は、ラインカメラ1010から撮像信号を取得する機能を有する。カメラ位置判定部1062は、カメラ信号処理部1061で取得された撮像信号に基づいてラインカメラ1010の設置状況を判定して、判定結果を表示部1050に表示する機能を有する。光源制御部1063は、温度変化や光源1030の劣化状態に応じて、光源1030から照射する光の照度を調整する機能を有する。検査胴駆動制御部1064は、検査胴駆動部1040を制御して、検査胴1020の回転制御、検査胴1020を静止させる回転位置の制御、検査胴1020の固定等を行う機能を有する。また、検査胴駆動制御部1064は検査胴1020の回転位置を認識する機能を有している。検査胴駆動制御部1064によって認識された検査胴1020の回転位置に合わせて、カメラ信号処理部1061が大判印刷物を1ラインずつ走査したラインデータを取得するようになっている。
印刷検査部1065は、ラインカメラ1010の設置調整を完了した後、ラインカメラ1010によって撮像された大判印刷物の画像に基づいて、大判印刷物に含まれる各小切れの印刷品質を検査する機能を有する。また、印刷検査部1065は、印刷検査時に、光源1030による照明変動を補正する機能を有している。図17は、大判印刷物を照らす光源1030の照明変動の補正方法及び印刷評価に係るしきい値設定について説明するための模式図である。
例えば、印刷検査により図17(a)に示す印刷物の文字濃度を評価する場合に、光源1030の照明変動による影響を受けないように、照明に応じて文字濃度を補正してから評価する。具体的には、印刷検査部1065は、印刷物に対応する各小切れの画像上で所定の部分領域1201の輝度を取得して、取得した輝度に応じて小切れ画像から得られた文字濃度を補正してから文字濃度を評価する。図17(b)に示す大判印刷物1200の印刷検査を行う際に、大判印刷物1200に含まれる各小切れの部分領域1201を検出して、この部分領域1201の輝度に応じて各小切れの画像を補正することにより、各小切れの印刷品質を高精度に評価することができる。なお、補正に利用する部分領域1201は、各小切れの位置を検出するために各小切れに含まれているマーカ、背景が白い部分領域等、印刷が安定している部分が、小切れの模様や図柄に応じて予め設定されている。
また、印刷検査部1065は、各小切れの印刷品質を評価する際に、評価の基準とするしきい値を各小切れ毎に変更する機能を有している。例えば、図17(a)に示す印刷物上での文字の位置ずれを評価する場合に、印刷検査部1065は、大判印刷物1200上での小切れの位置に応じて文字の位置ずれの許容値を変更しながら文字の位置ずれを評価する。印刷機内で印刷や搬送を繰り返す間に大判用紙の一部が伸縮して、一枚の大判印刷物の中央付近と外周付近とで小切れの形状や印刷状態が変化する場合がある。このような場合には、予め、大判印刷物上での位置に応じてしきい値を設定しておくことにより、大判印刷物上での位置に応じて各小切れの印刷品質を評価することが可能となる。なお、位置ずれの許容値の他、欠け、汚れ、色ずれ、インク濃度等に係る印刷評価を行う際に利用する各許容値についても、小切れの位置に応じて変更できるようになっている。
また、印刷機システムでは、印刷検査部1065による印刷検査を短時間で完了できるように、ラインカメラ1010により大判印刷物1200をスキャンして各小切れの画像を取得するスキャン処理と、必要に応じて各小切れ画像の濃度補正等の画像処理を行った上で印刷品質を評価する印刷評価処理とを並列して実行するようになっている。図18は、大判印刷物1200に係る並列処理について説明する図である。図18では、列 分の複数の小切れを含む大判印刷物1200を左側に示し、この大判印刷物1200の各列のスキャン処理に必要な時間S1〜Snと、各列の印刷評価処理に必要な時間T1〜Tnと、大判印刷物1200全体の印刷検査に必要な検査時間との関係を右側に示している。図18右側の処理時間は、下方向へ行くほど時間が経過することを示しており、例えばスキャン処理を開始してから時間S1が経過した所で1列目のスキャン処理を完了し、2列目のスキャン処理を開始すると共に、1列目の印刷評価処理を開始することを示している。
カメラ信号処理部1061は、検査胴1020の回転に伴って、ラインカメラ1010による撮像領域1021を通過する大判印刷物1200を、上端から1ラインずつスキャンしてラインデータを取得する。スキャンを開始してから時間S1の間に1列目のスキャン処理を完了すると、続いて2列目の小切れのスキャンを開始する。こうして大判印刷物1200に含まれるn列全ての小切れをスキャンするまでに、時間S1〜Snを合計した時間が必要となる。
印刷検査部1065は、カメラ信号処理部1061による1列目の小切れのスキャンを完了した後、印刷評価処理を開始する。そして、時間T1の間に1列目の小切れ全ての印刷評価処理を完了する。また、印刷検査部1065は、カメラ信号処理部1061による2列目の小切れのスキャンが完了した所で、印刷評価処理を開始して時間T2の間に2列目の小切れ全ての印刷評価処理を完了する。これにより、カメラ信号処理部1061によるn列目のスキャンが完了してから時間Tnが経過した所で、大判印刷物1200に含まれるn列全ての小切れの印刷評価処理を完了することができる。すなわち、大判印刷物1200全体のスキャンに必要な時間(S1〜Snの合計時間)の経過後、最終列の1列分の小切れの印刷評価処理に必要な時間(Tn)が経過した所で、大判印刷物1200全体の印刷検査を完了することができる。なお、印刷評価処理は、印刷検査部1065の処理能力に応じて並列で実行されるようになっている。例えば、1列に5枚の小切れが含まれる場合に、各小切れの印刷評価処理を並列して実行することにより、1枚分の小切れの処理時間で5枚全ての小切れの印刷評価処理を完了する。
次に、ラインカメラ1010の設置位置を調整するために利用する設置調整用チャートについて説明する。図19は、設置調整用チャート1070を示す図である。図19(a)は、設置調整用チャート1070の構成を模式的に示した図であり、同図(b)は実際の構成を示した図であり、同図(c)は同図(b)の部分領域1072を拡大した図である。
図19(a)に示すように、設置調整用チャート1070は、両端にある垂直なライン1073a、1073bと、両端のライン1073a、1073bに対して中心位置にある垂直なライン1071と、破線矩形で示した上側のパターン1080a〜1080d及び下側のパターン1081a〜1081eと、斜線で示した矩形領域1082とを有している。
上側のパターン1080a〜1080d及び下側のパターン1081b〜1081dは同一パターンをY軸方向に交互にずらして配置したものであるが、下側の両外側のパターン1081a、1081eは他のパターン1080a〜1080d、1081b〜1081dよりX軸方向の幅が狭くなっている。下側中央にあるパターン1081cのX軸方向中心位置はライン1071の位置と一致している。
上側のパターン1080a〜1080dと下側のパターン1081a〜1081eは、上側のパターン1080a〜1080dの下側一部の水平領域と、下側パターン1081a〜1081eの上側一部の水平領域とがY軸方向に重複する位置関係で配置されている。
この重複領域によってY軸方向の幅がL3の矩形領域1082が形成されている。すなわち、上側のパターン1080a〜1080dの下側一部の水平領域と、下側パターン1081a〜1081eの上側一部の水平領域とがX軸方向に連続して、矩形領域1082を形成している。
各パターン1080a〜1080d、1081a〜1081eは、白と黒の垂直線が連続するラインペアパターンである。具体的には、図19(b)に示すように、白い背景に、Y軸に平行な所定長の複数の黒いライン(垂直線)をX軸方向に所定間隔で配置することにより、各パターン1080a〜1080d、1081a〜1081eが形成されている。
例えば、パターン1080aは、図19(c)に示すように、X軸方向の長さがL2=100mmで、白い背景に1mmピッチで描かれた100本の黒いラインで形成され、両端の黒いラインのみが他のラインに比べて太いラインで描かれている。例えば、両端の太いラインが幅1mmで描かれ、他の細いラインが幅0.5mmで描かれる。パターン1080aのY軸方向の幅、すなわちパターン1080aを形成する各ラインのY軸方向の長さは、例えば20mm程度あればよい。なお、設置調整用チャート1070の両端のライン1073a、1073bと、中心位置にあるライン1071も、パターンの両端と同様に、太いラインで描かれている。
図19(c)に示すように、Y軸方向にずらして配置された隣り合うパターンの間でも、各パターンを形成するラインのピッチが保たれている。具体的には、各パターンのラインが1mmピッチで描かれている場合には、下側のパターンの右端のラインと上側のパターンの左端のラインとの間はX軸方向に1mmの間隔であり、上側のパターンの右端のラインと下側のパターンの左端のラインとの間もX軸方向に1mmの間隔となっている。これにより、図19(a)に斜線で示した幅L3の矩形領域1082は、白い背景に、Y軸に平行な長さL3の黒いラインが水平方向に1mmピッチで連続した領域となる。また、矩形領域1082では、各パターンの両端のラインと、設置調整用チャート1070の中心のライン1071及び両端のライン1073a、1073bとが太く描かれており、他のラインと区別可能となっている。
設置調整用チャート1070では、矩形領域1082内のみで黒いラインが所定間隔で水平方向に連続しており、矩形領域1082より上側ではパターン1080a〜1080d内にのみ黒いラインが存在し、矩形領域1082より下側ではパターン1081a〜1081e内にのみ黒いラインが存在する。
矩形領域1082の幅L3は、ラインカメラ1010の設置位置に係る許容誤差に合わせて設定される。例えば、ラインカメラ1010が1画素0.1mmの解像度を有し、設置位置に係る許容誤差が12画素分に相当する1.2mmである場合には、L3=1.2mmに設定される。また、図19(a)に示す長さL1は、例えば、8192画素のラインカメラ1010に対応して、819.2mmに設定される。このように、幅L3の矩形領域1082で水平方向に連続する白の背景と黒のラインとが、ラインカメラ1010の画素と1対1で対応するようにすることでラインカメラの受光素子の異常を画素単位で発見することができる。
なお、ここに示した数値は一例であって、L1、L2、L3の長さ、ラインのピッチ、ラインの太さ等は、大判印刷物のX軸方向の幅、ラインカメラ1010の性能、印刷検査時に求められる検査性能等によって適宜決定されるものである。また、L1〜L3については、長さによって規定する態様の他、画素数によって規定する態様であっても構わない。例えば、ラインカメラ1010の解像度に応じて、L1を全画素分の長さ、L2を1000画素分の長さ、L3を10画素分の長さというように設定してもよい。
図14に示すように、検査胴1020の外周面には設置調整用チャート1070の固定に利用するマーカ1022が設けられている。ラインカメラ1010の設置調整を開始する前に、設置調整用チャートの上端を検査胴1020のマーカ1022に合わせると共に、設置調整用チャートの左右両端を検査胴1020の左右両端に合わせて、設置調整用チャート1070を検査胴1020に固定する。そして、検査胴1020を所定の回転位置に回転して固定する。具体的には、検査胴駆動制御部1064により検査胴駆動部1040を制御して、図16に示すように、検査胴1020上の設置調整用チャート1070が検査胴1020上の反射面P1、P2でラインカメラ1010と正対するように検査胴1020の回転位置を調整してから検査胴1020を固定する。そして、ラインカメラ1010の設置調整作業を開始する。
ラインカメラ1010による設置調整用チャート1070の撮像を開始すると、カメラ信号処理部1061によって取得された撮像信号が表示部1050に表示される。図20は、ラインカメラ1010が正規の設置位置に設置された場合に取得される基準信号波形と設置調整用チャート1070との関係を示す図である。図20(a)は、ラインカメラ1010によって撮像される設置調整用チャート1070上での撮像ライン1011を示している。図20(b)は、同図(a)に示す撮像ライン1011で設置調整用チャート1070を撮像して得られたRGB各色の撮像信号を示す図であり、横軸が同図(a)に示すX軸方向の位置を示し、縦軸が撮像信号による輝度を示している。このように、RGB各色の撮像信号を得ることにより、ラインカメラ1010の各色に対応する受光素子の異常を発見することができる。なお、撮像信号による輝度は、被写体となる設置調整用チャート1070の黒いラインで低い値となり、ラインの間の白い背景領域で高い値となる。
ラインカメラ1010の設置位置を調整して、印刷検査を実行可能な正規の設置位置に設置した場合には、図20(a)に示す撮像ライン1011が、図19に示す幅L3の矩形領域1082内を通ることになる。この矩形領域1082内では、X軸方向全域に渡って、Y軸に平行な黒いラインと背景の白い領域とが所定間隔で連続しているため、これを撮像して得られた信号は所定間隔で輝度の高低を繰り返す波形となる。
図21は、ラインカメラ1010が図14に示すZ軸周りに左側を下げるように傾いている場合に得られる信号波形と設置調整用チャート1070との関係の例を示す図である。ラインカメラ1010が左右方向に傾いている場合には、図21(a)に示すように、ラインカメラ1010による撮像ライン1011が、中心のライン1071を挟んだ両外側で図19に示す幅L3の矩形領域1082から外れることになる。そして、パターン1080b〜1080d、1081a〜1081cを撮像した信号のみが輝度の高低を繰り返し、パターン1080a、1081d、1081eを外れて白い背景領域を撮像した信号は高い輝度のみを示す。この結果、図21(b)に示す信号波形となる。すなわち、ラインカメラ1010が左右方向に傾いている場合には、設置調整用チャート1070の中心より左側にある一部のパターンと、中心より右側にある一部のパターンとが撮像されない信号波形となる。また、信号波形から傾きの方向を認識することができる。図21の例では、一番左側のパターン1081aが撮像され、一番右側のパターン1081eが撮像されていない信号波形を示していることから、ラインカメラ1010が左側を下げるように傾いていることを認識することができる。
図22は、ラインカメラ1010が図14に示すX軸周りに前方を下げるように傾いている場合に得られる信号波形と設置調整用チャート1070との関係の例を示す図である。ラインカメラ1010が前方向に傾いている場合には、図22(a)に示すように、ラインカメラ1010による撮像ライン1011が、全域で、図19に示す幅L3の矩形領域から外れることになる。そして、パターン1081a〜1081eを撮像した信号のみが輝度の高低を繰り返し、パターン1080a〜1080dを外れて白い背景領域を撮像した信号は高い輝度のみを示す。この結果、図22(b)に示す信号波形となる。すなわち、ラインカメラ1010が前後方向に傾いている場合には、設置調整用チャート1070で上側に配置された全てのパターンのみ又は下側に配置された全てのパターンのみを撮像した信号波形となる。また、信号波形から傾きの方向を認識することができる。図22の例では、中心位置のパターン1081cが撮像された信号波形を示していることから、ラインカメラ1010が前方を下げるように傾いていることを認識することができる。
このように、ラインカメラ1010によって設置調整用チャート1070を撮像して得られる信号波形はラインカメラ1010の傾きによって変化するので、信号波形を確認しながら、図20(b)に示す基準信号波形が得られるようにラインカメラ1010の傾きを修正することにより、ラインカメラ1010を正規の設置位置に設置することができる。
各パターンの両端のラインと、中心位置のライン1071と、設置調整用チャート1070両端のライン1073a、1073bとは太いラインであるために、設置調整用チャート1070を撮像した信号波形は、これらのラインの位置で他に比べて低い輝度を示す。図20(b)、図21(b)、図22(b)に示す信号波形で下方向に突出した突出信号の位置は、これらの太いラインの位置に対応している。設置調整用チャート1070を撮像した信号波形では中心位置でのみ突出信号の間隔が狭くなるため、突出信号の表れた位置から設置調整用チャート1070と信号波形との対応を認識することができる。
次に、設置調整用チャート1070を撮像して得られた信号波形の突出信号に基づいて行うラインカメラ1010の設置調整について説明する。図23は、ラインカメラ1010の設置位置から観察される設置調整用チャート1070の例を示す図である。図23(a)は、ラインカメラ1010を正規の設置位置に設置した状態で観察される設置調整用チャート1070の状態を示している。
図23(b)は、ラインカメラ1010が正規の設置位置よりも検査胴1020から離れた位置にある場合に観察される設置調整用チャート1070の状態を示している。正規の設置位置に比べて設置調整用チャート1070からラインカメラ1010までの距離が離れているために、図23(b)の両端のライン1073a、1073bの間の距離が、同図(a)の両端のライン1073a、1073bの間の距離よりも短くなっている。すなわち、正規の設置位置よりも遠い設置位置では、設置調整用チャート1070が縮小された状態で観察される。これとは逆に、正規の設置位置よりも近い設置位置では、設置調整用チャート1070は拡大された状態で観察される。
図23(c)は、正規の設置位置からラインカメラ1010の前方がY軸周りに右方向へ回転した位置にある場合に観察される設置調整用チャート1070の状態を示している。ラインカメラ1010が正規の設置位置よりも右を向いた状態で設置されているために、図23(c)では、中心位置にあるライン1071、両端のライン1073a、1073bを含む設置調整用チャート1070の全体が、同図(a)に比べて左方向へ移動した状態で観察される。これとは逆に、正規の設置位置からY軸周りに左方向へ回転した設置位置では、設置調整用チャート1070の全体が、同図(a)に比べて右方向へ移動した状態で観察される。
図24は、図23に示すラインカメラ1010の各設置位置で観察される設置調整用チャート1070と撮像信号の信号波形との関係を示す図である。図24(a)〜(c)では、上側に図23(a)〜(c)に示した各位置で観察される設置調整用チャート1070の状態を示し、その下側にラインカメラ1010によって設置調整用チャート1070を撮像して得られる信号波形を表示した表示部1050の画面1140を示している。図24に示す画面1140は、横軸が設置調整用チャート1070のX軸方向の位置を示し、縦軸が撮像信号による輝度を示している。なお、図24は、X軸周り及びZ軸周りのラインカメラ1010の傾きはない状態で得られる撮像信号の信号波形を示している。
正規の設置位置に設置されたラインカメラ1010によって設置調整用チャート1070を撮像して得られる基準信号波形では、上下にずらして配置された各パターンの両端のラインと、中心位置のライン1071と、設置調整用チャート1070両端のライン1073a、1073bとに対応する位置で、下方向に突出した突出信号が表れる。図24(a)に示すように、表示部1050の画面1140上には、これらの突出信号の位置を示す基準線1141a〜1141iが表示される。このように、画面1140全域に渡って輝度の高低を繰り返す信号波形が表示され、この信号波形の突出信号の位置が基準線1141a〜1141iの位置と一致している場合には、ラインカメラ1010が正規の設置位置に設置されていることを示す。すなわち、ラインカメラ1010で設置調整用チャート1070を撮像して得られる信号波形が表示部1050の画面1140上で、図24(a)の基準信号波形を示す状態となるようにラインカメラ1010の設置位置を調整すれば、ラインカメラ1010を正規の設置位置に設置することができる。
図24(b)に示すように、ラインカメラ1010が正規の設置位置よりも検査胴1020から離れた位置にある場合は、設置調整用チャート1070を撮像した信号波形で、中心より左側の突出信号1150a〜1150cが画面1140上の基準線1141a〜1141cより右側にずれた位置に表れて、中心より右側の突出信号1150g〜1150iが基準線1141g〜1141iより左側にずれた位置に表れる。このように、表示部1050の画面1140に、両外側の突出信号が対応する基準線より中心側へ向かって移動した信号波形が得られた場合には、ラインカメラ1010が正規の設置位置よりも検査胴1020から離れた位置にあることを認識することができる。また、これとは逆に、両外側の突出信号1150a〜1150c、1150g〜1150iが、対応する基準線1141a〜1141c 、1141g〜1141i より外側にずれた位置にある信号波形が得られた場合には、ラインカメラ1010が正規の設置位置よりも検査胴1020に近い位置にあることを認識することができる。
また、図24(c)に示すように、ラインカメラ1010が正規の設置位置からY軸周りに前方を右方向へ回転した位置にある場合は、設置調整用チャート1070を撮像した信号波形で、全ての突出信号1150a〜1150iが、対応する基準線1141a〜1141iよりも左側にずれた位置に表れる。このような信号波形が得られた場合には、ラインカメラ1010が正規の設置位置よりY軸周りに前方を右方向へ回転した位置にあることを認識することができる。また、これとは逆に、全ての突出信号1150a〜1150iが、対応する基準線1141a〜1141i より右側にずれた位置にある信号波形が得られた場合には、ラインカメラ1010が正規の設置位置よりもY軸周りに前方を左方向へ回転した設置位置にあることを認識することができる。
ラインカメラ1010によって設置調整用チャート1070を撮像して得られた信号波形に表れる突出信号の位置と、表示部1050の画面1140に表示される基準線1141a〜1141iの位置との関係から、ラインカメラ1010の設置状況を認識することができるので、設置状況に応じて、突出信号の位置と画面1140上の基準線とが一致するようにラインカメラ1010の設置位置を修正することにより、ラインカメラ1010を正規の設置位置に設置することができる。
ラインカメラ1010の設置位置を修正する他の方法について、図19を用いて説明する。ラインカメラ1010が正規の設置位置に設置されている場合には、図19のパターン1080a、1080dのX軸方向の幅(図19で示すL2)及びこの幅に対応する信号波形の幅が所定幅になる。これを利用してラインカメラ1010の設置位置を修正する。具体的には、ラインカメラ1010を正規の設定位置に設置した場合に比べて、ラインカメラ1010から検査胴1020迄の距離が遠い場合は、パターン1080a、1080dのX軸方向の幅に対応する信号波形の幅が所定幅より小さくなるので、ラインカメラ1010を正規の設置位置とするためには、ラインカメラ1010を検査胴1020に近付ければよいことが分かる。また、これとは逆にラインカメラ1010から検査胴1020迄の距離が近い場合は、パターン1080a、1080dのX軸方向の幅に対応する信号波形の幅が所定幅より大きくなるので、ラインカメラ1010を正規の設置位置とするためには、ラインカメラ1010を検査胴1020から遠ざければよいことが分かる。さらに、ラインカメラ1010が検査胴1020に対して傾いている場合は、パターン1080aについて得られた信号波形の幅と、パターン1080dについて得られた信号波形の幅とが異なることになる。例えば、パターン1080aを示す信号波形の幅が、パターン1080dを示す信号波形の幅よりも短い場合には、短く検出された方が長く検出された方よりも検査胴1020からの距離が遠くなるようにラインカメラ1010が傾いているので、これを修正するようにラインカメラ1010の設置位置を修正すればよい。
図15に示すカメラ位置判定部1062は、設置調整用チャート1070を撮像したラインカメラ1010から得られた信号波形に基づいてラインカメラ1010の設置状況を判定して、この設置状況及び修正方針に関する情報を報知する機能を有する。報知は、設置調整に関する情報の表示部1050への表示、所定のアラーム音の再生、所定の音声再生等によって行われる。
例えば、図21(b)に示す信号波形が得られた場合には、カメラ位置判定部1062は、ラインカメラ1010が左に傾いていることを認識して、ラインカメラ1010が左に傾いていることを示す情報と、ラインカメラ1010を右方向へ回転して傾きを修正するよう促す情報とを報知する。また、図22(b)に示す信号波形が得られた場合には、カメラ位置判定部1062は、ラインカメラ1010の前方が下がっていることを認識して、これを示す情報と、ラインカメラ1010の前方を上げるように傾きを修正するよう促す情報とを報知する。
同様に、図24(b)に示す信号波形が得られた場合には、カメラ位置判定部1062は、ラインカメラ1010が、正規の設置位置よりも検査胴1020から離れた後方にあることを認識して、これを示す情報と、ラインカメラ1010を前方へ移動させるよう促す情報とを報知する。また、図24(c)に示す信号波形が得られた場合には、カメラ位置判定部1062は、ラインカメラ1010が正規の設置位置よりもY軸周りに右方向を向いていることを認識して、これを示す情報と、ラインカメラ1010をY軸周りに左方向へ回転するよう促す情報とを報知する。
カメラ位置判定部1062により報知された情報に基づいてラインカメラ1010のカメラホルダの調整機構を操作して、ラインカメラ1010の設置位置を徐々に修正してゆくと、ラインカメラ1010の設置位置が修正されて正規の設置位置となった所で図20(b)及び図24(a)に示す基準信号波形が得られるようになる。カメラ位置判定部1062は、ラインカメラ1010の設置位置が修正されて正規の設置位置となり図20(b)及び図24(a)に示す基準信号波形が得られたことを認識すると、これを報知する。この報知を受けてカメラホルダの調整機構の操作を停止することにより、ラインカメラ1010を正規の設置位置へ設置することができる。また、カメラ位置判定部1062は、ラインカメラ1010の設置位置を調整する操作が、設置位置のずれや傾きを拡大する方向へ誤って行われている場合には、調整方向が誤っていることを報知するので、この報知を受けて調整方向を修正することができる。カメラ位置判定部1062は、正規の設置位置となったときの基準信号波形を記憶して、調整中のラインカメラ1010の信号波形と基準信号波形とを表示部1050に比較可能に表示すると共に、設置調整に係る判定を行う。
なお、本実施例に係る設置調整用チャート1070が図19に示した態様に限定されるものではない。例えば、図19に示す幅L3の矩形領域1082については、ラインカメラ1010による撮像ラインがこの矩形領域1082内にあることを認識することができれば、白の背景と黒のラインとが所定間隔で連続する態様に限定されるものではなく、例えば、矩形領域1082内の一部領域にのみ白の背景と黒のラインとが設けられる態様であっても構わない。また、垂直方向に交互にずらして配置されるパターン1080a〜1080d、1081a〜1081eについても、例えば図21に示すようにラインカメラ1010の傾きや位置ずれによって撮像ライン1011が幅L3の矩形領域1082から外れたことを認識することができれば、矩形形状を有するパターンに限定されるものではなく凹型や凸型等であっても構わない。同様に、パターン1080a〜1080d、1081a〜1081eの配置についても、ラインカメラ1010の傾きや位置ずれによって撮像ライン1011が幅L3の矩形領域1082から外れたことを認識することができれば、パターンを垂直方向に交互にずらして連続して配置する態様に限定されるものではなく、例えば、図19に示す中心位置のライン1071を含むパターン1081cと両外側の一部のパターンのみによって設置調整用チャート1070を形成する態様であっても構わない。また、各ラインの太さや配置についても、例えば図24(b)及び(c)に示すように信号波形からラインカメラ1010の傾きや位置ずれを認識することができれば、本実施例で示した以外の所定位置のラインが太く描かれていてもよいし、ラインの配置が所定間隔ではなく所定の規則性をもって不等間隔に配置されていても構わない。
上述したように、本実施例によれば、ラインカメラ1010の傾きや位置ずれを検出できるように作成した所定パターンから成る設置調整用チャート1070をラインカメラ1010によって撮像し、得られた信号波形に基づいてラインカメラ1010の傾きや位置ずれを認識して、ラインカメラ1010設置位置を修正することができる。
また、ラインカメラ1010によって設置調整用チャート1070を撮像して得られた信号波形からラインカメラ1010の傾きや位置ずれの方向を認識することができるので、ラインカメラ1010の傾きや位置ずれを修正するために行うべき設置調整作業の内容を認識することができる。
また、ラインカメラ1010の傾きや位置ずれが認識されたこと、傾きや位置ずれを修正する方向、傾きや位置ずれが修正され正規の設置位置となったこと、設置位置の調整方向が誤っていること等が報知されるので、報知された情報に基づいて、ラインカメラ1010の傾きや位置ずれを修正する設置調整作業を容易に行うことができる。
以上のように、本発明に係るカラー画像における文字背景除去方法及び装置は、文字を含むカラーの印刷物を撮像したカラー画像から文字の背景模様を除去して文字画像を取得し、文字の印刷品質を評価するために有用な技術である。また、本発明に係るラインカメラの設置調整方法及び設置調整用チャートは、大判印刷物の画像を取得するラインカメラの設置位置を容易に調整するために有用な技術である。
10、1010 ラインカメラ
20、1020 検査胴
30、1030 光源
40、1040 検査胴駆動部
50 操作表示部
60 記憶部
70、1060 制御部
71 カラー画像取得部
72、1063 光源制御部
73、1064 検査胴駆動制御部
74 文字認識部
75 文字背景除去部
76、1065 印刷検査部
200、1200 大判印刷物
1050 表示部
1061 カメラ信号処理部
1062 カメラ位置判定部
1070 設置調整用チャート

Claims (8)

  1. 文字が印刷された印刷物のカラー画像から文字の背景模様を除去して印刷評価用の画像を取得するカラー画像における文字背景除去方法であって、
    カラーの入力画像を文字部と背景部とに分離する分離工程と、
    前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求める関数算出工程と、
    前記識別関数により前記入力画像から前記背景部を除去した背景除去画像を生成する背景除去画像生成工程と
    を含み、
    前記分離工程では、前記入力画像に含まれる文字のフォント画像と前記入力画像に含まれる文字とが重なる位置を特定して、前記入力画像を形成する画素のうち、前記フォント画像と重なる位置にある画素を前記文字部、重なる位置にない画素を前記背景部とする
    ことを特徴とするカラー画像における文字背景除去方法。
  2. 前記関数算出工程では、前記識別関数を線形判別処理によって求めることを特徴とする請求項に記載のカラー画像における文字背景除去方法。
  3. 前記識別関数を算出する文字範囲を指定する指定工程
    をさらに含み、
    前記分離工程では、前記指定工程で指定した文字範囲に基づいて前記入力画像を前記文字部と前記背景部とに分離して、
    前記関数算出工程では、前記指定工程で指定した文字範囲に基づいて、前記識別関数を求める
    ことを特徴とする請求項1又は2に記載のカラー画像における文字背景除去方法。
  4. 前記入力画像に複数の文字が含まれる場合には1文字毎に前記各工程を実行することを特徴とする請求項1〜のいずれか1項に記載のカラー画像における文字背景除去方法。
  5. 前記文字と同系色の背景模様を除去するために前記背景除去画像を2値化する2値化処理工程をさらに含んだことを特徴とする請求項1〜のいずれか1項に記載のカラー画像における文字背景除去方法。
  6. 印刷後の大判印刷物を撮像したカラー画像から前記入力画像を取得する画像取得工程をさらに含んだことを特徴とする請求項1〜のいずれか1項に記載のカラー画像における文字背景除去方法。
  7. 文字が印刷された印刷物のカラー画像から文字の背景模様を除去して印刷評価用の画像を取得するカラー画像における文字背景除去装置であって、
    カラーの入力画像を文字部と背景部とに分離して、前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求め、該識別関数により前記入力画像から前記背景部を除去した背景除去画像を生成する文字背景除去部と
    を備え
    前記文字背景除去部は、前記入力画像に含まれる文字のフォント画像と前記入力画像に含まれる文字とが重なる位置を特定して、前記入力画像を形成する画素のうち、前記フォント画像と重なる位置にある画素を前記文字部、重なる位置にない画素を前記背景部とする
    ことを特徴とするカラー画像における文字背景除去装置。
  8. 前記入力画像上で文字の位置を指定するための操作部
    をさらに備え、
    前記文字背景除去部は、
    前記操作部による文字位置の指定に基づいて前記入力画像を前記文字部と前記背景部とに分離して、前記文字部の画素と前記背景部の画素とを画素値に基づいて分離するための識別関数を求め、該識別関数により背景模様を除去することにより前記背景除去画像を生成する
    ことを特徴とする請求項に記載のカラー画像における文字背景除去装置。
JP2016513825A 2014-04-16 2015-04-16 カラー画像における文字背景除去方法及び装置 Active JP6250793B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2014085035 2014-04-16
JP2014085034 2014-04-16
JP2014085034 2014-04-16
JP2014085035 2014-04-16
PCT/JP2015/061668 WO2015159941A1 (ja) 2014-04-16 2015-04-16 カラー画像における文字背景除去方法及び装置、並びにラインカメラの設置調整方法及び設置調整用チャート

Publications (2)

Publication Number Publication Date
JPWO2015159941A1 JPWO2015159941A1 (ja) 2017-04-13
JP6250793B2 true JP6250793B2 (ja) 2017-12-20

Family

ID=54324143

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016513825A Active JP6250793B2 (ja) 2014-04-16 2015-04-16 カラー画像における文字背景除去方法及び装置

Country Status (4)

Country Link
US (1) US10083364B2 (ja)
EP (1) EP3133387B1 (ja)
JP (1) JP6250793B2 (ja)
WO (1) WO2015159941A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6934707B2 (ja) * 2016-07-13 2021-09-15 グローリー株式会社 有価証券の文字/番号検査装置及び文字/番号検査方法
JP6831991B2 (ja) * 2016-08-29 2021-02-24 株式会社フタミ企画 印刷物検査装置、印刷物検査方法、およびプログラム
JP6452657B2 (ja) * 2016-09-07 2019-01-16 キヤノン株式会社 画像処理装置、その制御方法、及びプログラム
US11365128B2 (en) * 2017-06-15 2022-06-21 Energysource Minerals Llc Process for selective adsorption and recovery of lithium from natural and synthetic brines
JP2019128602A (ja) * 2018-01-19 2019-08-01 富士通フロンテック株式会社 光学的文字認識装置、プログラム
JP7092563B2 (ja) * 2018-06-08 2022-06-28 マクセルフロンティア株式会社 印字検査機
US11677893B2 (en) 2019-02-08 2023-06-13 Komori Corporation Lighting device and inspection device with light irradiation port configured to discharge cooling air
JP7379876B2 (ja) 2019-06-17 2023-11-15 株式会社リコー 文字認識装置、文書ファイル生成方法、文書ファイル生成プログラム
JP6809567B2 (ja) * 2019-06-21 2021-01-06 大日本印刷株式会社 判定装置、判定装置の制御方法、判定システム、判定システムの制御方法、及び、プログラム
EP4127684A1 (en) * 2020-03-30 2023-02-08 Smartex Europe, Unipessoal Lda. Systems and methods for calibration
JP7500513B2 (ja) 2021-08-31 2024-06-17 キヤノン株式会社 印刷物の検査装置および方法
US11754503B1 (en) * 2022-10-28 2023-09-12 Ncs Testing Technology Co., Ltd Measurement deviation correction method and system for spark discharge analysis of large-size metal material

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2865697B2 (ja) * 1989-03-20 1999-03-08 株式会社日立製作所 エクスチャ分離方法
JPH02264561A (ja) * 1989-04-03 1990-10-29 Sharp Corp 撮像素子光学ユニットの調整方法
JPH08219999A (ja) * 1995-02-13 1996-08-30 Fuji Xerox Co Ltd 表面欠陥検査光学系の校正方法、及び装置
JP4189777B2 (ja) 1997-06-06 2008-12-03 株式会社小森コーポレーション 赤外線反射吸収インキを用いた印刷物の検査装置
US6987879B1 (en) 1999-05-26 2006-01-17 Ricoh Co., Ltd. Method and system for extracting information from images in similar surrounding color
JP2001043312A (ja) * 1999-05-26 2001-02-16 Ricoh Co Ltd 文書画像処理装置
JP3591401B2 (ja) 1999-12-20 2004-11-17 Jfeスチール株式会社 表面検査装置の調整方法及び表面検査装置用調整装置
US6823081B2 (en) 2001-04-30 2004-11-23 Eastman Kodak Company Generation of a color dropout function for use in electronic color dropout
JP4584771B2 (ja) * 2005-05-27 2010-11-24 株式会社リコー 画像処理装置
US7648071B2 (en) 2006-04-07 2010-01-19 Kabushiki Kaisha Toshiba Apparatus for image reading and method for setting the image reading
JP4857173B2 (ja) * 2007-04-25 2012-01-18 日立オムロンターミナルソリューションズ株式会社 画像処理装置、画像処理方法及び画像処理プログラム
JP5036430B2 (ja) 2007-07-10 2012-09-26 キヤノン株式会社 画像処理装置及びその制御方法
JP2010225013A (ja) 2009-03-25 2010-10-07 Hitachi Omron Terminal Solutions Corp 記番号認識装置、紙葉類処理装置、自動取引処理装置、及び記番号認識方法
JP5334902B2 (ja) 2010-03-30 2013-11-06 大日本スクリーン製造株式会社 印刷装置およびカメラ位置調整方法
JP6025475B2 (ja) * 2012-09-21 2016-11-16 キヤノン株式会社 像域判定装置、像域判定方法、及び画像処理装置

Also Published As

Publication number Publication date
WO2015159941A1 (ja) 2015-10-22
JPWO2015159941A1 (ja) 2017-04-13
EP3133387B1 (en) 2020-05-20
EP3133387A4 (en) 2017-12-27
US20170039724A1 (en) 2017-02-09
US10083364B2 (en) 2018-09-25
EP3133387A1 (en) 2017-02-22

Similar Documents

Publication Publication Date Title
JP6250793B2 (ja) カラー画像における文字背景除去方法及び装置
CN110596134B (zh) 一种基于图像采集的片状玻璃边缘瑕疵检测方法
EP3531114B1 (en) Visual inspection device and illumination condition setting method of visual inspection device
US8180156B2 (en) Method and device for machine-cutting a plate-shaped workpiece
JP4389982B2 (ja) 基板外観検査装置
US9773187B2 (en) Method and apparatus for OCR detection of valuable documents by means of a matrix camera
JP6241052B2 (ja) 画像処理システムおよび画像処理プログラム
GB2459675A (en) Double sided substrate scanning
JP2010078485A (ja) 印刷物の検査方法
JP5195096B2 (ja) 画像処理検査方法及び画像処理検査システム
JP7468150B2 (ja) 画像読取装置、画像形成装置及び異物検知方法
JPH0915168A (ja) 印刷物検査装置
JP3784762B2 (ja) パターン欠陥検査装置およびパターン欠陥検査方法
JP2014052875A (ja) 計数装置、計数方法、および、計数装置用のプログラム
JP5635946B2 (ja) 印刷物検査方法及び印刷物検査装置
KR101542070B1 (ko) 스캐닝된 이미지의 뒷 비침 제거 방법 및 장치
JP7297354B1 (ja) 画像処理システム及び画像処理方法
KR102279074B1 (ko) 레이저 용접의 품질 평가 시스템 및 그 방법
JP3400859B2 (ja) 欠陥パターンの検出方法及びその装置
JP2007309760A (ja) 欠陥検出方法および装置
JP2015121676A (ja) デフォーカス制御装置およびデフォーカス制御方法
JP2009085677A (ja) 表示異常検出装置、および表示異常検出方法
JP2020144076A (ja) 検査装置及び検査方法
JP2009122003A (ja) パターン欠陥検査装置
JPH05108861A (ja) 回転タイミング信号発生方法及びその装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170912

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171108

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171122

R150 Certificate of patent or registration of utility model

Ref document number: 6250793

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150