JP2016060083A - Incorrect collating inspection device - Google Patents
Incorrect collating inspection device Download PDFInfo
- Publication number
- JP2016060083A JP2016060083A JP2014189020A JP2014189020A JP2016060083A JP 2016060083 A JP2016060083 A JP 2016060083A JP 2014189020 A JP2014189020 A JP 2014189020A JP 2014189020 A JP2014189020 A JP 2014189020A JP 2016060083 A JP2016060083 A JP 2016060083A
- Authority
- JP
- Japan
- Prior art keywords
- image
- signature
- inspection
- reference image
- collating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007689 inspection Methods 0.000 title claims abstract description 146
- 238000003384 imaging method Methods 0.000 description 24
- 238000000034 method Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000002093 peripheral effect Effects 0.000 description 5
- 210000000078 claw Anatomy 0.000 description 4
- 238000003825 pressing Methods 0.000 description 4
- 230000000052 comparative effect Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 239000007858 starting material Substances 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Landscapes
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Abstract
Description
この発明は，帳票等の折丁を丁合する際に乱丁を検査する乱丁検査装置に関する。 The present invention relates to a typographical inspection device that inspects typographical characters when collating a signature such as a form.
製本中での乱丁、落丁等（本明細書においては乱丁と総称する）の検査装置として、従来から、ＣＣＤカメラを用いた乱丁検査装置が知られている。
例えば、中綴じ機械においては、丁合駒ごとのストッカにストックされた帳票（折丁）は、各丁合駒の帳票取出機構によって１枚ずつ取り出され、搬送装置（ギャザリングチェーン）に配置された鞍上に順に載置され、丁合束として形成されて下流の中綴じ機に搬送される。
2. Description of the Related Art Conventionally, as an inspection apparatus for booklets, missing pages, etc. (collectively referred to as "random pages" in this specification), a booklet inspection device using a CCD camera has been known.
For example, in a saddle stitching machine, a form (folder) stocked in a stocker for each collating piece is taken out one by one by a form taking-out mechanism for each collating piece and placed on a bag placed in a conveying device (gathering chain). They are placed in order, formed as a collated bundle, and conveyed to a downstream saddle stitcher.
ここで、当該折丁の特徴部分を選択し、それを基準画像として予めメモリに登録しておき、帳票取出機構によって取り出された折丁をＣＣＤカメラで撮影した検査画像と、予め登録されている基準画像とを比較して、検査画像中の基準画像の有無を検出することにより、乱丁が発生したかを検知することが行われている。（特許文献１参照） Here, a characteristic portion of the signature is selected, registered in advance as a reference image in a memory, and an inspection image obtained by photographing a signature taken out by the form extraction mechanism with a CCD camera is registered in advance. It has been performed to detect whether or not a disorder has occurred by comparing the reference image and detecting the presence or absence of the reference image in the inspection image. (See Patent Document 1)
ところが、折丁の載せ台へ作業者が誤って裏返しで載荷してしまい、しかも、予め登録した基準画像と裏返しで載荷した折丁の該基準画像位置の画像とが同一となる場合には、裏返しでの折丁を正規のものと判断してしまうため誤載荷を検出することができず、誤った作業のまま丁合してしまうこととなる。
また、作業者が製本の過程でエラーが出ると、そのエラー折丁を回収して正規の丁合駒に戻し、再利用することが行われる。ところが、正規の丁合駒に戻す際に、誤って違う丁合駒に戻したり、裏返して戻したりしてしまうことがある。このような場合も、同様に、その折丁を正規のものと判断してしまうことがある。
However, when the operator erroneously loads the signature on the signature platform and the reference image registered in advance and the image at the reference image position of the signature loaded in the reverse are the same, Since the signature on the inside out is judged to be a genuine one, an erroneous load cannot be detected, and the collation is performed in the wrong operation.
Further, when an error occurs in the bookbinding process, the error signature is collected, returned to a regular collating piece, and reused. However, when returning to a regular collating piece, it may be accidentally returned to a different collating piece or turned over. In such a case as well, the signature may be judged as a regular one.
このため、本発明は、
複数の丁合駒を有する丁合装置に設けられ、前記丁合駒から１枚ずつ取り出された折丁
の印刷面の一部を検査画像として撮像し、前記検査画像と予め記憶された基準画像とを比
較して乱丁を検査する乱丁検査装置であって、
前記折丁の印刷面の一部を検査画像として撮像する手段と、
当該丁合駒における正規の折丁の前記検査画像と、前記正規の折丁を裏返しにした折丁
の前記検査画像と同一の画像位置での検査画像とが一致しているかどうかを判定する比較
判定手段と、
前記比較判定手段による判定結果に応じて前記基準画像を設定する基準画像設定手段と、
を有することを特徴とした乱丁検査装置、とした。
このように構成したことにより、当該丁合駒に丁合を載置する際に、表裏をまちがって載置したとしても、その間違いを確実に検知することができる。
ここで、画像が一致とは、比較した画像が同じものであると区別できるほどに一致率が高い場合を含むものである。
For this reason, the present invention
A part of the printing surface of the signature that is provided in the collating apparatus having a plurality of collating pieces and is taken out one by one from the collating piece is picked up as an inspection image, and the inspection image is compared with a pre-stored reference image. An inspection device for inspecting random characters,
Means for capturing a part of the printed surface of the signature as an inspection image;
Comparison determination means for determining whether or not the inspection image of the regular signature in the collating piece matches the inspection image at the same image position as the inspection image of the signature with the regular signature turned upside down When,
Reference image setting means for setting the reference image according to a determination result by the comparison determination means;
It was set as the random inspection apparatus characterized by having.
With this configuration, even when the collation is placed on the collation piece, even if it is placed with the front and back being wrong, the mistake can be reliably detected.
Here, “matching images” includes a case where the matching rate is high enough to distinguish that the compared images are the same.
また、前記基準画像設定手段は、前記検査画像として他の丁合駒の、前記正規の折丁を裏返しにした折丁における前記検査画像を含み、これら検査画像と当該丁合駒における正規の折丁の前記検査画像とが一致しないように、前記検査画像から前記基準画像を設定することを特徴とする乱丁検査装置とすることもできる。
これにより、折丁を再利用する際に間違って違う丁合駒に戻したり、裏返して戻したりしたとしても、乱丁を検知することができる。
ここで、画像が一致しないとは、比較した画像が同じものでないと区別できるほどに一致率が低い場合を含むものである。
Further, the reference image setting means includes the inspection image of a signature of another collating piece as the inspection image, with the regular signature turned upside down, and the inspection image and the regular signature of the collating piece The reference image may be set from the inspection image so that the inspection image does not coincide with the inspection image.
As a result, even when the signature is reused, even if it is mistakenly returned to a different collating piece or turned over, it can be detected.
Here, “the images do not match” includes a case where the matching rate is low enough to distinguish that the compared images are not the same.
本発明は、当該丁合駒に折丁を載置する際に、折丁の表裏をまちがって載置したとしても、その間違いを検知することができる。 In the present invention, when placing a signature on the collating piece, even if the front and back of the signature are placed wrongly, the mistake can be detected.
本件発明の第１の実施の形態例を、丁合装置に応用した例を用いて、以下に説明する。
なお、以下の説明における「撮像画像」、「検査画像」、「裏検査画像」、「基準画像」、「仮基準画像」および「比較検査画像」を定義付けると、「撮像画像」は、折丁の一部を撮像手段が撮像した画像をいう。同様に、「基準画像」は、折丁の撮像画像の一部であって、前記撮像画像から当該折丁の特徴部を抽出した画像をいう。「検査画像」は、被検査折丁の撮像画像の一部であって、基準画像位置によって規定される所定の画像領域の画像をいう。「裏検査画像」は、被検査折丁を裏返しにした撮像画像の一部であって、基準画像位置によって規定される所定の画像領域の画像をいう。「仮基準画像」は、各丁合駒における表折丁の撮像画像から特徴点を抽出した基準画像設定前の画像であって、他の丁合駒との同一を判断して、同一のものがなければ基準画像となる。「比較基準画像」は裏折丁の「裏検査画像」によって設定された、表折丁の仮基準画像と対比するための画像である。
The first embodiment of the present invention will be described below using an example in which the first embodiment is applied to a collation apparatus.
In addition, when “captured image”, “inspection image”, “back inspection image”, “reference image”, “temporary reference image”, and “comparison inspection image” in the following description are defined, “captured image” Is an image obtained by imaging means. Similarly, the “reference image” is a part of a captured image of a signature, and is an image obtained by extracting a characteristic portion of the signature from the captured image. The “inspection image” is a part of a captured image of the signature to be inspected and refers to an image in a predetermined image area defined by a reference image position. The “back inspection image” is a part of a captured image with the inspected signature turned upside down, and refers to an image of a predetermined image area defined by a reference image position. The “temporary reference image” is an image before setting a reference image obtained by extracting feature points from the captured image of the front signature in each collating piece. It becomes an image. The “comparison reference image” is an image for comparison with the temporary reference image of the front signature set by the “back inspection image” of the back signature.
これらの画像を用いた乱丁検査の手順の概略は、先ず被検査折丁の撮像画像から、当該折丁の特徴部を含む一部を基準画像として設定し、予め登録する。次に、被検査折丁の撮像画像から基準画像位置を含む検査画像を抽出し、該検査画像と予め登録しておいた基準画像とを対比判断する。対比判断の結果、該検査画像中に基準画像が所定の一致率以上で存在すると判断された場合、該被検査折丁を正規折丁とみなす。
ここで、被検査折丁の撮像画像から、当該折丁の特徴部を含む一部を基準画像として設定する際に、当該丁合駒における正規の折丁の前記検査画像と、正規の折丁を裏返しにした裏折丁の検査画像（裏検査画像）をも基準画像の対比対象とするものである。したがって、このように設定した基準画像を用いると、裏折丁であることを確実に判別することができる。
As for the outline of the procedure for checking the random order using these images, first, a part including the characteristic part of the signature is set as a reference image from the captured image of the signature to be inspected and registered in advance. Next, an inspection image including a reference image position is extracted from the captured image of the signature to be inspected, and the inspection image is compared with a reference image registered in advance. As a result of the comparison determination, when it is determined that the reference image exists in the inspection image with a predetermined coincidence ratio or more, the inspected signature is regarded as a regular signature.
Here, when setting a part including the characteristic portion of the signature as a reference image from the captured image of the signature to be inspected, the inspection image of the regular signature in the collating piece and the regular signature are turned over. The inspection image of the back signature (back inspection image) is also used as a comparison target of the reference image. Therefore, when the reference image set in this way is used, it is possible to reliably determine that it is a back signature.
本発明の乱丁検査装置の全体構成を図６に、各丁合駒の構成を図１に示す。
それぞれに折丁収納手段１１―１〜１１―ｎを有した複数の丁合駒1０-1〜ｎを有しており、また、水平方向に延びた回転軸１３、当該回転軸１３を回転駆動する駆動部１６、折丁収納手段１１―１〜１１―ｎを支持する折丁載台１２、各折丁収納手段１１―１〜１１―ｎに対応して当該回転軸１３に配設された複数のドラム１４―１〜１４−ｎ、各丁合駒1０-1〜ｎからの折丁５を搬送する搬送ライン（ギャザリングチェーン）１７を有している。該折丁収納手段１１−ｎには、折丁５が積載される。
折丁載置台１２の下方には、回転軸１３の回転に同期して揺動する吸着ヘッド１９、折丁５をドラム１４の周面に押圧するための押し付けローラ１８が、それぞれのドラム１４に対応して設けられ、また、該ドラム１４の周面には、折丁５の端部を把持するための把持爪１４ａが設けられている。
また、各丁合駒１０のドラム１４の周面を撮像するための撮像手段２１が、該ドラム１４に対向して設けられている。
FIG. 6 shows the overall configuration of the random inspection apparatus of the present invention, and FIG. 1 shows the configuration of each collating piece.
It has a plurality of collating pieces 10-1 to n each having signature storing means 11-1 to 11-n, a rotating shaft 13 extending in the horizontal direction, and a drive for rotating the rotating shaft 13 Section 16, signature holder 12 that supports signature storage means 11-1 to 11-n, and a plurality of signature storage means 11-1 to 11-n corresponding to each of the signature storage means 11-1 to 11-n. A drum 14-1 to 14-n and a conveying line (gathering chain) 17 for conveying the signature 5 from each collating piece 10-1 to n. The signatures 5 are stacked on the signature storage means 11-n.
Below the signature placing table 12, a suction head 19 that swings in synchronization with the rotation of the rotary shaft 13 and a pressing roller 18 for pressing the signature 5 against the peripheral surface of the drum 14 are provided on each drum 14. A gripping claw 14 a for gripping the end of the signature 5 is provided on the peripheral surface of the drum 14.
Further, an imaging means 21 for imaging the peripheral surface of the drum 14 of each collating piece 10 is provided to face the drum 14.
回転軸１３が回転駆動されると、該回転軸１３の回転に同期して揺動する吸着ヘッド１９が、折丁５の端部を押し付けローラ１８に抗して引き出し、引き出された該端部は把持爪１４ａに引き渡される。
これにより、該折丁５は、折丁載置台１２から引き出されてドラム１４の周面に巻きつけられ、所定の検査領域を撮像手段２１により撮像される。
撮像後の折丁は、把持爪１４ａの開放により、搬送ライン１７上に落下する。落下した折丁５は、搬送ライン１７上を搬送されるに従い、各丁合駒から順に上積みされて、丁合装置１０終端において当該複数の折丁全てがページ順に積層された丁合束が形成される。
When the rotary shaft 13 is driven to rotate, the suction head 19 that swings in synchronization with the rotation of the rotary shaft 13 pulls out the end portion of the signature 5 against the pressing roller 18, and the drawn out end portion. Is handed over to the gripping claw 14a.
Thereby, the signature 5 is pulled out from the signature placing table 12 and wound around the peripheral surface of the drum 14, and a predetermined inspection area is imaged by the imaging means 21.
The signature after imaging falls onto the transport line 17 by opening the gripping claws 14a. The dropped signatures 5 are stacked in order from each collating piece as they are conveyed on the conveyance line 17, and a collation bundle is formed in which all the plural signatures are stacked in page order at the end of the collating apparatus 10. .
乱丁検査装置２０は、図５に示すように、各丁合駒1０-1〜ｎに１つずつ配置される乱丁検査部２０-１〜ｎと、ネットワーク（Ｉ／Ｏ）を介して接続される集中管理装置３０から構成されている。
各乱丁検査部２０-１〜ｎは、いずれも同一の構成を有しており、それぞれ、折丁５を撮像する撮像手段２１、駒制御手段２２、および丁合駒1０-1〜ｎ側に必要に応じて設けられる入力手段、表示手段（いずれも図示せず）を有している。
撮像手段２１は、丁合駒１０-1〜ｎから引き出された折丁５の印刷面を撮像するＣＣＤカメラ等からなる撮像装置部２１ｂと、前記撮像装置部２１ｂで撮像された撮像画像の画像処理を行う丁合画像処理部２１ａとを有している。
As shown in FIG. 5, the random inspection device 20 is connected to the random inspection units 20-1 to 20-n arranged one by one on each collating piece 10-1 to n through a network (I / O). The management device 30 is configured.
Each of the random order inspection units 20-1 to 20-n has the same configuration, and is required on the image pickup means 21, the piece control means 22, and the collation pieces 10-1 to n side of the signature 5, respectively. It has input means and display means (both not shown) provided accordingly.
The imaging means 21 performs image processing of the imaging device unit 21b including a CCD camera or the like that images the printing surface of the signature 5 drawn from the collating pieces 10-1 to 10-n, and the captured image captured by the imaging device unit 21b. And a collating image processing unit 21a.
また、駒制御手段２２は、スタータ１５からのスタート信号１５ａを受けてドラム１４の回転数をカウントするカウンタ２２ａと、丁合画像処理部２１ａで画像処理した複数の撮像画像情報を記憶する共有画像ファイル２２ｂと、各集中管理装置３０に記憶された基準画像情報と撮像手段２１からの検査画像情報とを比較して乱丁を判断する乱丁判定手段２２ｄとを有し、該乱丁判定手段２２ｄからの検査情報と集中管理装置３０側からの設定情報とに基づいて、ネットワーク（Ｉ／Ｏ）を介して、丁合装置１０を停止する等の制御を行ったり集中管理装置３０へ検査情報等を出力したりする。
また、該駒制御手段２２は、折丁５の撮像画像領域の中から検査画像領域を設定する検査領域設定手段２２ｆと、裏折丁５ｂの比較基準画像領域を所定位置で撮像して設定する裏折丁比較基準画像設定手段２２ｊと、この撮像画像を記憶する比較基準画像記憶手段２２ｈと、集中管理装置３０（あるいは、共有画像ファイル２２ｂ）に記憶してある表折丁の仮基準画像と裏折丁の該比較基準画像とを比較して一致するか否かを判定する比較判定手段２２ｋと、一致しない場合に該仮基準画像を検査折丁（表折丁）の正規の基準画像として設定する基準画像設定手段２２ｇとを有している。
The frame control means 22 receives a start signal 15a from the starter 15 and counts the number of rotations of the drum 14, and a shared image that stores a plurality of pieces of captured image information processed by the collation image processing unit 21a. The file 22b has a tampering determination unit 22d that compares the reference image information stored in each centralized management device 30 and the inspection image information from the imaging unit 21 to determine a tampering. The tampering determination unit 22d Based on the inspection information and the setting information from the central management apparatus 30 side, control such as stopping the collation apparatus 10 is performed via the network (I / O), and inspection information and the like are output to the central management apparatus 30 To do.
Further, the frame control means 22 captures and sets the inspection area setting means 22f for setting the inspection image area from the captured image area of the signature 5 and the comparison reference image area of the back signature 5b at a predetermined position. Back signature comparison reference image setting means 22j, comparison reference image storage means 22h for storing the captured image, and temporary reference image of the front signature stored in the centralized management device 30 (or shared image file 22b) Comparison judgment means 22k that compares the comparison reference image of the back signature with the comparison reference image to determine whether or not they match, and if not, sets the temporary reference image as the normal reference image of the inspection signature (front signature). Reference image setting means 22g for setting.
そして、各乱丁検査部２０-１〜ｎは、撮像装置部２１ｂを除きそれぞれ筐体に収納され、オペレーターによって操作され易いように各丁合駒１０-１〜ｎの近傍にそれぞれ配置されている。撮像装置部２１ｂは、各丁合駒１０-1〜ｎから引き出された折丁５の印刷面を撮像するに都合の良い位置に配置されている。 Each of the random order inspection units 20-1 to 20-n is housed in a casing except for the imaging device unit 21b, and is arranged in the vicinity of each collating piece 10-1 to 10-n so as to be easily operated by an operator. The imaging device unit 21b is arranged at a position convenient for capturing an image of the printing surface of the signature 5 drawn from each collating piece 10-1 to n.
集中管理装置３０は、ネットワーク（Ｉ／Ｏ）を介して複数の駒乱丁検査部２０-1〜ｎを制御するために、各駒制御手段２２とは別個に設けられているものであり、１台で、あるいは最小限の台数で、丁合装置１０および乱丁検査装置２０を含むシステム全体の制御をするように構成されている。
該集中制御手段３０は、図５に示すように、表示手段３０ａ、入力操作手段３０ｂ、撮像画像処理手段３０ｃ、エラー集計分析手段３０ｄ、およびメイン制御手段３０ｅを有している。
The centralized management device 30 is provided separately from each piece control means 22 in order to control the plurality of piece disorder checking units 20-1 to 20-n via a network (I / O). The entire system including the collation apparatus 10 and the random collation inspection apparatus 20 is controlled by a table or a minimum number of units.
As shown in FIG. 5, the central control unit 30 includes a display unit 30a, an input operation unit 30b, a captured image processing unit 30c, an error total analysis unit 30d, and a main control unit 30e.
メイン制御手段３０ｅは、スタータ１５から入力されるスタート信号１５ａ、およびエンコーダ１８から入力されるタイミング信号１８ａとともに、タイムサーバ（図示せず）から供給される標準時刻を各丁合駒1０-1〜ｎに供給している。これにより、丁合装置１０全体に共通した時刻での時刻管理や位置管理が行われる。 The main control means 30e supplies a standard time supplied from a time server (not shown) to each collating piece 10-1 to n together with a start signal 15a inputted from the starter 15 and a timing signal 18a inputted from the encoder 18. Supply. Thereby, time management and position management at a time common to the entire collating apparatus 10 are performed.
表示手段３０ａは、集中制御装置３０を収納する筐体側面に設けられた液晶表示部（モニター）に画像を表示する手段であって、入力操作手段３０ｂによって入力される各種設定情報、エラー集計分析手段３０ｃに蓄積される検査情報、駒乱丁検査部２０−１〜ｎからの乱丁発生情報、等を表示するものである。
各乱丁検査部２０−１〜ｎに表示手段が設けられていない場合には、各乱丁検査部２０−１〜ｎに対応した各種情報の表示機能も備えている。
The display unit 30a is a unit that displays an image on a liquid crystal display unit (monitor) provided on the side of the casing that houses the centralized control device 30, and includes various setting information input by the input operation unit 30b, and error total analysis. The inspection information stored in the means 30c, the information on occurrence of irregularity from the piece irregularity inspection units 20-1 to 20-n, and the like are displayed.
In the case where no display means is provided in each of the random order inspection units 20-1 to 20-n, a display function for various information corresponding to each of the random order inspection units 20-1 to 20-n is also provided.
また、この表示手段３０ａは、パノラマ画像表示手段３０ａ−１、基準画像表示手段３０ａ−２、表示モード切替手段３０ａ−３、および表示変更手段３０ａ−４を有している。 The display unit 30a includes a panoramic image display unit 30a-1, a reference image display unit 30a-2, a display mode switching unit 30a-3, and a display change unit 30a-4.
パノラマ画像表示手段３０ａ−１はパノラマ画像作成手段２２ｍ（このパノラマ画像については、後述する。）によって作成されたパノラマ画像を表示するものである。
基準画像表示手段３０ａ−２は、基準画像設定手段２２ｇによって設定された基準画像および基準画像位置を表示するものであり、基準画像が設定された撮像画像上に基準画像の位置（および検査画像領域）を表示する検査画像モードと、パノラマ画像上に基準画像の位置（および検査画像領域）を表示するパノラマ画像モードという、２つの表示モードを有している。
表示モード切替手段３０ａ−３は、これら２つの表示モードを切り替える手段である。
The panorama image display means 30a-1 displays the panorama image created by the panorama image creation means 22m (this panorama image will be described later).
The reference image display unit 30a-2 displays the reference image and the reference image position set by the reference image setting unit 22g, and the position of the reference image (and the inspection image region) on the captured image in which the reference image is set. ) And a panoramic image mode in which the position of the reference image (and the inspection image area) is displayed on the panoramic image.
The display mode switching unit 30a-3 is a unit that switches between these two display modes.
表示変更手段３０ａ−４は、乱丁判定手段２２ｄによって乱丁（エラー）が検出された場合に、基準画像の位置表示を、当該基準画像に基づく乱丁検査によって乱丁が検出されたことが判別可能な表示（例えば、基準画像位置を示す境界線を点滅表示にしたり、あるいは該境界線の色彩を変更したり、する。）に変更するとともに、検査画像モード表示をパノラマ画像モード表示に切り替えるものである。
したがって、乱丁が検出された際には、表示モード切替手段３０ａ−３によってパノラマ画像モード表示に切り替えられ、該パノラマ画像上に、乱丁発生した情報が基準画像位置情報とともに表示されることとなる。
The display changing unit 30a-4 displays the position display of the reference image when the disorder determination unit 22d detects the disorder (error), and can display that the disorder has been detected by the disorder inspection based on the reference image. (For example, the boundary line indicating the reference image position is displayed blinking or the color of the boundary line is changed), and the inspection image mode display is switched to the panoramic image mode display.
Therefore, when an irregularity is detected, the display mode switching means 30a-3 switches to the panoramic image mode display, and the information on the occurrence of the irregularity is displayed on the panoramic image together with the reference image position information.
入力操作手段３０ｂは、メイン制御手段３０ｅに対し各種情報を入力するスイッチ手段である。液晶表示部上に構成されるポインタ入力装置に換えて、この入力操作手段３０ｂにおけるマウスやキーボードによる入力手段を用いることもできる。
また、メイン制御手段３０ｅからネットワークを通じて、各丁合駒1０-1〜ｎへ各種操作情報（例えば、各駒乱丁検査部２０−１〜ｎにおいて、乱丁の連続発生を許容する回数の設定、あるいは検査画像と基準画像との許容する一致率の設定等。）を入力する手段ともなっている。もちろん、各駒乱丁検査部２０−１〜ｎに入力手段を設けて、そこに直接入力することもできる。
The input operation means 30b is switch means for inputting various information to the main control means 30e. In place of the pointer input device configured on the liquid crystal display unit, an input unit using a mouse or a keyboard in the input operation unit 30b may be used.
Further, various operation information (for example, setting of the number of times that random occurrence is allowed in each piece random inspection unit 20-1 to 20n or inspection image from the main control means 30e to each collating piece 10-1 to n through the network, or an inspection image. For example, setting of an acceptable matching rate between the reference image and the reference image). Of course, it is also possible to provide input means in each piece random inspection unit 20-1 to 20-n and input directly there.
エラー集計・分析手段３０ｃは、各駒乱丁検査部２０-1〜ｎからの検査情報を記憶、集計し、丁合毎１０−１〜ｎ毎の検査エラーの傾向や原因等を分析するものである。
例えば、検査領域設定手段２２ｆにより設定した検査画像領域の設定履歴を記憶する手段を設け、パノラマ画像上の検査画像の位置を記憶させておき、製本出荷後に見つけられた乱丁を、その履歴を追跡させて原因追究できるように構成することができる。
これにより、適切な基準画像を設定したにもかかわらず、不良が生じて正規製本として出版されたときは、その丁合駒における撮像画像処理手段（パノラマ画像記憶手段）から基準画像の撮像領域を履歴追跡することができるので、不良に対する的確な措置をすることが容易となる。
The error totaling / analyzing means 30c stores and counts the inspection information from each piece random collation inspection unit 20-1 to 20-n, and analyzes the tendency and cause of the inspection error for each collation 10-1 to n. is there.
For example, there is provided means for storing the setting history of the inspection image area set by the inspection area setting means 22f, the position of the inspection image on the panoramic image is stored, and the history of the mess found after the bookbinding is shipped is tracked. It can be configured so that the cause can be investigated.
As a result, even if an appropriate reference image is set, if a defect occurs and the book is published as a regular bookbinding, the imaging area of the reference image is tracked from the captured image processing means (panoramic image storage means) in the collating frame. This makes it easy to take appropriate measures against defects.
基準画像設定手段２２ｇは、作成されたパノラマ画像から、当該折丁の特徴部分を切り取って基準画像として作成し、その基準画像情報を基準画像位置情報と共に基準画像記憶手段（集中管理装置３０あるいは共有画像ファイル２２ｂ）に予め記憶させるものである。
この基準画像情報および基準画像位置情報は、乱丁判定手段２２ｄによる乱丁検査の際に、基準画像記憶手段から呼び出されて検査画像情報と対比され、乱丁の発生が検出される。
またこの基準画像位置情報は、検査画像モード表示における撮像画像あるいはパノラマ画像モード表示におけるパノラマ画像上に基準画像の位置を表示するために用いられる。
また、基準画像の位置が設定されると、検査領域設定手段２２ｆにより、その基準画像位置を含む所定領域が検査画像領域として設定される。
The reference image setting means 22g cuts out the characteristic portion of the signature from the created panoramic image to create a reference image, and the reference image information together with the reference image position information is a reference image storage means (the centralized management device 30 or shared). The image file 22b) is stored in advance.
The reference image information and the reference image position information are called from the reference image storage unit and compared with the inspection image information at the time of the disorder check by the disorder determination unit 22d, and the occurrence of the disorder is detected.
The reference image position information is used to display the position of the reference image on the captured image in the inspection image mode display or the panoramic image in the panoramic image mode display.
When the position of the reference image is set, the inspection area setting unit 22f sets a predetermined area including the reference image position as the inspection image area.
次に、パノラマ画像の作成について、説明する。
パノラマ画像とは、図７に示すように、撮像領域が連続する複数個（ｎ個）のパノラマ画像要素４１ａ〜４１ｎからなる画像であって、折丁５の広い領域をパノラマ状（短冊状）に連続してカバーした画像をいう。
４枚の撮像画像４からパノラマ画像４１を作成する実施例を、図７を用いて説明する。
図７左図に示すように、折丁５に対し４つの撮像画像４（４ａ〜４ｄ）を、折丁５の引き出し方向に沿うように、かつ隣接する撮像画像間で重合部４ｅが生ずるように、分割撮像し、取得する。重合部４ｅを設けるのは、カメラによる撮像画像４は一般的に画像端部で焦点が甘くなり、画像が不鮮明になることがあるので、鮮明な中央部分のみをパノラマ画像として使用するためと、パノラマ画像を帯状に連続した画像として形成することを担保するためである。
Next, creation of a panoramic image will be described.
As shown in FIG. 7, the panoramic image is an image composed of a plurality (n) of panoramic image elements 41a to 41n in which imaging regions are continuous, and a wide area of the signature 5 is panoramic (strip-shaped). An image that is continuously covered.
An embodiment for creating a panoramic image 41 from four captured images 4 will be described with reference to FIG.
As shown in the left diagram of FIG. 7, the four captured images 4 (4 a to 4 d) with respect to the signature 5 are arranged along the direction in which the signature 5 is pulled out, and the overlapping portion 4 e is formed between the adjacent captured images. Then, the divided images are taken and acquired. The overlapped portion 4e is provided because the image captured by the camera 4 is generally unfocused at the edge of the image and the image may become unclear, so that only the clear center portion is used as a panoramic image. This is to ensure that the panoramic image is formed as a continuous image in a strip shape.
パノラマ画像作成手段２０ｍは、この４つの撮像画像４ａ〜４ｄから隣接する撮像画像の重合部４ｅを電子的に画像処理して取り除いて、それぞれパノラマ画像要素４１ａ〜４１ｄを作成し、図７右図に示すように、これらパノラマ画像要素４１ａ〜４１ｄを連続した帯状の連続画像（パノラマ画像）４１として合成するものであり、これにより、折丁５の搬送方向に沿った短冊状のパノラマ画像４１が形成される。
そして、作成されたパノラマ画像４１は、パノラマ画像４１上の隣接するパノラマ画像要素の区画線４４の位置情報とともに、共有画像ファイル２２ｂに記憶される。また、このパノラマ画像４１は、パノラマ画像表示手段３０ａ−１によって表示されるが、その際、この区画線４４を表示することもできる。
なお、図７右図に示すパノラマ画像４１は概念的なものであり、撮像画像４の大きさや、合成前の撮像画像数によって、折丁５上における実際の大きさ（長さや幅）は異なる。
The panoramic image creation means 20m electronically removes the overlapping portion 4e of the adjacent captured images from the four captured images 4a to 4d to create the panoramic image elements 41a to 41d, respectively, and the right side of FIG. As shown in FIG. 4, the panoramic image elements 41a to 41d are combined as a continuous belt-like continuous image (panoramic image) 41, whereby a strip-like panoramic image 41 along the conveying direction of the signature 5 is obtained. It is formed.
The created panorama image 41 is stored in the shared image file 22b together with the positional information of the partition lines 44 of the adjacent panorama image elements on the panorama image 41. In addition, the panoramic image 41 is displayed by the panoramic image display means 30a-1, and at this time, the partition line 44 can also be displayed.
Note that the panoramic image 41 shown in the right side of FIG. 7 is conceptual, and the actual size (length and width) on the signature 5 varies depending on the size of the captured image 4 and the number of captured images before synthesis. .
なお、撮像装置部２１ｂとして通常のＣＣＤカメラを用いて複数の撮像画像を取得するには、折丁５の引き出し速度（あるいは、ＣＣＤカメラが搬送経路上にある場合には、折丁の搬送速度）、ＣＣＤカメラの画像処理速度などの撮像性能、ＣＣＤカメラの折丁５からの距離、などの条件によっては、１枚の折丁から得られる撮像枚数に制限がある場合が生ずる。
例えば、引き出し速度が撮像性能に比べて非常に早い場合には、１枚の折丁あるいは裏折丁に対し１枚の撮像画像しか撮像できない場合がある。そのような場合は、連続する撮像画像を得るために、折丁あるいは裏折丁を２枚目、３枚目、４枚目と引き出し、それぞれの折丁で撮影場所を連続的に変えながら撮像する。そして、その別々の折丁を撮像した４枚の撮像画像を用いて、上記したと同様の処理により、パノラマ画像を合成する。
一方、撮像手段による撮像可能な領域が小さな場合には、１枚の折丁あるいは裏折丁に対する撮像回数を増やして多数の撮像画像を得た上で、それらを上記と同様な処理によって合成することにより、画質の良いパノラマ画像４１を得ることができる。
Note that in order to acquire a plurality of captured images using a normal CCD camera as the imaging device unit 21b, the signature 5 pull-out speed (or the signature conveyance speed when the CCD camera is on the conveyance path). ) Depending on conditions such as the imaging performance such as the image processing speed of the CCD camera and the distance from the signature 5 of the CCD camera, there are cases where the number of images obtained from one signature is limited.
For example, when the drawing speed is very fast compared to the imaging performance, there may be a case where only one captured image can be captured with respect to one signature or back signature. In such a case, in order to obtain continuous captured images, the signature or back signature is pulled out to the second, third, and fourth, and images are taken while continuously changing the shooting location with each signature. To do. Then, using the four captured images obtained by capturing the separate signatures, a panoramic image is synthesized by the same processing as described above.
On the other hand, if the area that can be imaged by the imaging means is small, the number of times of imaging for one signature or back signature is increased to obtain a large number of captured images, which are then synthesized by the same processing as described above. As a result, a panoramic image 41 with good image quality can be obtained.
次に、このように作成されたパノラマ画像４１を用いた基準画像４３の設定について説明する。
本発明は、折丁の裏側（裏折丁）の画像を、基準画像を設定する際の比較基準画像として、折丁の表側（表折丁）の画像を、該比較基準画像と対比する仮基準画像としている。
そこで、１枚の折丁５を裏返して裏折丁５ｂとし、それを折丁載置台１２にセットし、丁合装置１０を動作させる。あるいは、図１に示すように、折丁収納手段１１の折丁束の最下部に折丁５を１枚、裏返して載置し、動作させても良い。
いずれにしても、折丁５は、ドラム１４の周面に、その裏面を表になる様に巻きつけられて搬送される。
この状態で撮像手段２１により、その折丁５の裏面つまり裏折丁５ｂをパノラマ撮影し、その撮影情報からパノラマ画像作成手段２２ｂにより、裏折丁５ｂのパノラマ画像（裏折丁パノラマ画像）を作成する。
次に、正規の表折丁５ａをドラム１４の表面に巻きつけられるように搬送させ、同様にパノラマ画像作成手段２２ｂにより、表折丁５ａのパノラマ画像（表折丁パノラマ画像）を作成する。
このように、本実施の形態例では、まず表折丁を載せ台に裏返して裏折丁としてセットする。吸着ヘッド、裏折丁を押付けローラ１８で回転ドラム上に導き、把持爪で掴んで、回転ドラムをa方向に回転させ、所定位置で停止させる。カメラで比較基準領域を撮像し記憶する。
次に、載せ台に表折丁束を載せて、回転ドラムをa方向に回転させ、1枚目をドラム上に引き込む。カメラで仮基準画像領域を撮像し記憶する。
上記以外の折丁の載せ方、撮像方法として、次の方法がある。
予め折丁束の最下位を裏折丁にし、2枚目以降は表折丁にしておく。回転ドラムを2回転して、裏折丁、表折丁の順で撮像され、基準画像領域の画像データとして記憶する。
Next, setting of the reference image 43 using the panoramic image 41 created in this way will be described.
According to the present invention, an image on the back side (back signature) of a signature is used as a comparison reference image when setting the reference image, and an image on the front side (front signature) of the signature is compared with the comparison reference image. The reference image is used.
Therefore, one signature 5 is turned upside down to be a reverse signature 5b, which is set on the signature placing table 12, and the collating apparatus 10 is operated. Alternatively, as shown in FIG. 1, one signature 5 may be placed upside down at the bottom of the signature bundle of the signature storing means 11 and operated.
In any case, the signature 5 is transported by being wound around the peripheral surface of the drum 14 so that the back surface thereof is turned upside down.
In this state, the imaging means 21 takes a panoramic image of the back side of the signature 5, that is, the back signature 5b, and a panoramic image creation means 22b generates a panoramic image (back signature panoramic image) of the back signature 5b from the photographing information. create.
Next, the regular front signature 5a is conveyed so as to be wound around the surface of the drum 14, and similarly, the panorama image creation means 22b creates a panoramic image (front signature panorama image) of the front signature 5a.
As described above, in this embodiment, first, the front signature is turned over on the platform and set as a reverse signature. The suction head and the back signature are guided onto the rotating drum by the pressing roller 18 and are gripped by the gripping claws, and the rotating drum is rotated in the direction a and stopped at a predetermined position. The comparison reference area is imaged and stored by the camera.
Next, put the front folded bundle on the platform, rotate the rotating drum in direction a, and pull the first sheet onto the drum. The temporary reference image area is imaged and stored by the camera.
There are the following methods for placing signatures and imaging methods other than those described above.
Make the bottom of the signature bundle the back signature in advance, and the second and subsequent sheets as front signatures. The rotating drum is rotated twice and images are taken in the order of the back signature and the front signature, and stored as image data in the reference image area.
次に、このように作成されたパノラマ画像（表折丁パノラマ画像および裏折丁パノラマ画像）から基準画像を作成する。
図５に示すように、前記乱丁検査部２０−１〜ｎは、複数の撮像画像を記憶する共有画像ファイル２２ｂと、撮像手段２１により撮像された撮像画像（パノラマ画像）中に、所定位置の検査画像領域４２を設定する検査領域設定手段２２ｆと、該検査領域設定手段２２ｆで設定したと同一位置の画像領域を裏折丁の比較基準画像領域とし、該画像領域画像を裏折丁の比較基準画像として設定する比較基準画像設定手段２２ｊと、該比較基準画像を記憶する比較基準画像記憶手段２２ｈと、集中管理装置３０に記憶された表折丁の仮基準画像と比較基準画像記憶手段２２ｈに記憶された裏折丁の該比較基準画像とを比較して一致するか否かを判定する比較判定手段２２ｋと、該比較判定手段２２ｋで一致しないと判定された仮基準画像を検査折丁（表折丁）の正規の「基準画像」として設定する基準画像設定手段２２ｇと、を有している。
Next, a reference image is created from the panorama images created in this way (front signature panorama image and back signature panorama image).
As shown in FIG. 5, the disorderly checking units 20-1 to 20-n have a predetermined position in a shared image file 22 b that stores a plurality of captured images and a captured image (panoramic image) captured by the imaging unit 21. The inspection area setting means 22f for setting the inspection image area 42, and the image area at the same position as set by the inspection area setting means 22f is used as a comparison reference image area for the back signature, and the image area image is compared with the back signature. Comparison reference image setting means 22j for setting as a reference image, comparison reference image storage means 22h for storing the comparison reference image, temporary reference image of the table signature stored in the centralized management device 30, and comparison reference image storage means 22h The comparison reference means 22k for determining whether or not the comparison reference image of the back signature stored in the comparison matches, and the temporary reference image determined not to match by the comparison determination means 22k Has a reference image setting unit 22g for setting a "reference image" of the regular (Omoteorihinoto), the.
前記基準画像の作成・登録は、まず一枚目の検査画像（表画像）を裏返して折丁束を載せ台にセットする。全駒の載せ台にも裏折丁をセットし、丁合機を回転して所定位置に検査画像領域を撮像する。
次に、検査領域設定手段２２ｆおよび比較基準画像設定手段２２ｊにより、その検査画像領域の所定位置に比較基準画像を設定する。
次に、各駒に所定枚数の表折丁をセットし、裏折丁と同座標位置の検査画像領域を撮像して仮基準画像を設定し、集中管理装置３０に記憶する。
比較判定手段２２ｋが、表折丁の仮基準画像と裏折丁の比較基準画像とを比較して、表折丁の仮基準画像が正規の基準画像に適しているかどうかを判定する。
仮基準画像と比較基準画像との一致率が高ければ、当該仮基準画像が正規の基準画像としてふさわしくないとして、検査領域設定手段２２ｆにより検査領域が順次シフト（変更）されて、一致率が低くなるまで以下同様な処理が行われ、基準画像が設定される。
このように設定された基準画像は、集中管理装置３０あるいは、乱丁検査部２０−ｎの共有画像ファイルに記憶（登録）される。
In creating and registering the reference image, first, the first inspection image (front image) is turned over, and the signature bundle is set on the platform. The back signature is also set on the platform for all frames, and the collating machine is rotated to capture the inspection image area at a predetermined position.
Next, a comparison reference image is set at a predetermined position in the inspection image region by the inspection region setting means 22f and the comparison reference image setting means 22j.
Next, a predetermined number of front signatures are set in each frame, an inspection image area at the same coordinate position as the back signature is imaged, a temporary reference image is set, and stored in the centralized management device 30.
The comparison determination means 22k compares the temporary reference image of the front signature with the comparison reference image of the back signature, and determines whether or not the temporary reference image of the front signature is suitable for the regular reference image.
If the coincidence ratio between the temporary reference image and the comparison reference image is high, the inspection area is sequentially shifted (changed) by the inspection area setting unit 22f because the temporary reference image is not suitable as a normal reference image, and the coincidence ratio is low. Until then, the same processing is performed, and a reference image is set.
The reference image set in this way is stored (registered) in the centralized management device 30 or the shared image file of the randomness inspection unit 20-n.
前記表折丁の「仮基準画像」と裏折丁の「比較基準画像」との比較検査は、基本的に同じ丁合駒毎に行うが、当該丁合駒の仮基準画像と他の丁合駒の仮基準画像との比較検査を行い、その一致率が低くなるように当該駒の仮基準画像を設定する。また、併せて、該仮基準画像と隣接駒装置を含む全丁合駒の比較基準画像との比較検査を行い、一致率が低くなるよう、基準画像を設定することもできる。
このように設定すると、全丁合駒の折丁の表裏に関係なく区別することができるので、折丁を供給する丁合駒の位置を間違えたり、折丁を再利用する際に間違って別の丁合駒に戻したり、その際に裏返しに戻したりしたとしても、いずれの場合も、それを確実に検知することができる。
The comparative inspection of the “tentative reference image” of the front signature and the “comparison reference image” of the back signature is basically performed for each same collating piece. A comparative inspection with a reference image is performed, and a temporary reference image of the frame is set so that the matching rate is low. At the same time, the reference image can be set so that the coincidence rate is lowered by performing a comparative inspection between the temporary reference image and the comparison reference image of all the collated frames including the adjacent frame device.
With this setting, it is possible to distinguish regardless of the front and back of the signatures of all the collation pieces. Even in the case of returning to the inside or the inside out in that case, it can be reliably detected in any case.
なお、この実施の形態例では、検査領域の設定を検査領域設定手段２２ｆにより行い、比較判定手段２２ｋによって判定された一致率が高い場合には、自動的に順次検査領域がシフトするように構成されているが、別途、図７右図に示すように、パノラマ画像４１を構成するパノラマ画像要素４１ａ〜４１ｄのうちのどの画像領域から選択するかを、機器のオペレーターが、パノラマ画像４１全体を観察した上で、パノラマ画像上の該当位置をスクロールしたり、拡大表示したりしながら、当該折丁の他の折丁（特に、隣接する折丁）に無い特徴部を把握し、その特徴部に基準画像位置を設定するように構成することもできる。 In this embodiment, the inspection area is set by the inspection area setting means 22f, and when the coincidence rate determined by the comparison determination means 22k is high, the inspection area is automatically and sequentially shifted. However, separately, as shown in the right diagram of FIG. 7, the operator of the device selects which image region from among the panoramic image elements 41 a to 41 d constituting the panoramic image 41 to select the entire panoramic image 41. While observing and scrolling or zooming in on the corresponding position on the panoramic image, grasp the feature that is not found in the other signatures (especially adjacent signatures) of the signature, and the feature It is also possible to configure so as to set the reference image position.
図７右図によれば、オペレーターは、パノラマ画像４１の内のパノラマ画像要素４１ａ内に特徴部分を見いだして座標位置ｐを選定しており、この座標位置ｐに基づいて基準画像４３が設定される。この際、区画線４４が表示されていると、隣接するパノラマ画像要素４１ｂに跨らないように基準画像が設定できるので、基準画像４３の設定が容易となるし、そのための画像処理も簡単となる。
パノラマ画像４１を表示するパノラマ画像表示手段３０ａ―１はタッチパネル式のポインタ入力装置としても構成されており、オペレーターが特徴部となる所定位置を該ポインタ入力装置で入力すると、基準画像設定手段２２ｇは、その入力された座標位置pを基点とした所定範囲を基準画像４３として設定する。この設定された基準画像４３は、その位置情報とともに共有画像ファイル２２ｂ等に記憶され、乱丁検査時等、必要に応じて読み出されて使用される。
According to the right side of FIG. 7, the operator finds the characteristic portion in the panoramic image element 41a in the panoramic image 41 and selects the coordinate position p, and the reference image 43 is set based on the coordinate position p. The At this time, if the division line 44 is displayed, the reference image can be set so as not to straddle the adjacent panoramic image elements 41b, so that the reference image 43 can be easily set, and the image processing for that is also easy. Become.
The panoramic image display means 30a-1 for displaying the panoramic image 41 is also configured as a touch panel type pointer input device. When the operator inputs a predetermined position as a characteristic portion with the pointer input device, the reference image setting means 22g is A predetermined range with the input coordinate position p as a base point is set as the reference image 43. The set reference image 43 is stored in the shared image file 22b and the like together with the position information, and is read out and used as necessary, for example, at the time of check of disorder.
なお、パノラマ画像４１を構成するパノラマ画像要素４１ａ〜４１ｎのうちのどの画像領域から基準画像４３を選択するかは、機器のオペレーターが、裏折丁５ｂ、表折丁５ａのそれぞれのパノラマ画像４１全体を観察した上で、同一位置における画像情報が一致しないように、裏折丁５ｂにない特徴部を見いだし、その特徴部位をポインタ入力装置で入力すると、基準画像設定手段２２ｇは、そのポインタ入力位置を基点に所定範囲を基準画像として設定するように構成しても良い。 It should be noted that which image region of the panoramic image elements 41a to 41n constituting the panoramic image 41 is selected from which of the panoramic image 41 is selected by the operator of the device. After observing the entire image, if a feature portion not found in the back signature 5b is found so that the image information at the same position does not match, and the feature portion is input by the pointer input device, the reference image setting means 22g inputs the pointer. A predetermined range based on the position may be set as a reference image.
次に、以上の構成に基づいて乱丁検査が行われる手順を、図２ないし図４に記載のフロー図を用いて説明する。
基準画像の設定は、図２に示すように、まず、検査折丁の所定位置の検査画像領域をカメラで撮像し画像データ記憶する。（n2，n3）
次に、該画像データの検査画像領域を所定値（1/9、1/16、1/25）で細分化し、相関計測する。（n4，n5）
次に、該相関計測の判定結果が許容値のとき、該画像データを仮基準画像として設定する。（n6，n7）
次に、表折丁の該仮基準画像を、別途設定された裏折丁の比較基準画像と比較し、一致しない場合（あるいは一致率が許容範囲より低い場合）ｎ10（Ｙ）は、該仮基準画像を正規の「基準画像」として設定、登録する。（n10〜n12）
一致する場合（あるいは一致率が許容範囲より高い場合）ｎ10（Ｎ）は、不適な仮基準画像となり、次の検査領域にシフトする。ｎ13
Next, a procedure for performing a random inspection based on the above configuration will be described with reference to the flowcharts shown in FIGS.
As shown in FIG. 2, the reference image is set by first capturing an inspection image area at a predetermined position of the inspection signature with a camera and storing the image data. (N2, n3)
Next, the inspection image area of the image data is subdivided by a predetermined value (1/9, 1/16, 1/25), and correlation measurement is performed. (N4, n5)
Next, when the determination result of the correlation measurement is an allowable value, the image data is set as a temporary reference image. (N6, n7)
Next, the temporary reference image of the front signature is compared with a separately set comparison reference image of the back signature, and if it does not match (or if the matching rate is lower than the allowable range), n10 (Y) Set and register the reference image as a regular “reference image”. (N10-n12)
When they match (or when the matching rate is higher than the allowable range), n10 (N) becomes an inappropriate temporary reference image and shifts to the next inspection area. n13
裏折丁の比較基準画像の設定登録は、図３に示す手順で行われる。
裏折丁の比較基準画像領域を、検査折丁（表折丁）の「仮基準画像」と同じ検査領域で撮像し、データ記憶する。例えば、折丁の紙端部をセンサーで検出し、取込み位置をエンコーダパルスで制御し、所定位置になると、そのタイミングで撮像する。（u2，u3）
裏折丁に、検査折丁（表折丁）の基準画像と同じ座標位置に比較基準画像を設定する。（u4，u5）
Setting registration of the comparison reference image of the back signature is performed according to the procedure shown in FIG.
The comparison reference image area of the back signature is imaged in the same inspection area as the “temporary reference image” of the inspection signature (front signature), and the data is stored. For example, the paper edge portion of the signature is detected by a sensor, the take-in position is controlled by an encoder pulse, and when a predetermined position is reached, an image is taken at that timing. (U2, u3)
A comparison reference image is set at the same coordinate position as the reference image of the inspection signature (front signature) on the back signature. (U4, u5)
パノラマ画像における仮基準画像の設定・登録及び全駒との比較は、図４に示す手順により行われる。これは、裏折丁の比較基準画像との比較を、パノラマ画像に使用した場合である。
まず、撮像手段２１で折丁（表折丁および裏折丁）をあらかじめ設定した撮像回数（例えば、４回）で撮像し、その撮像画像からパノラマ画像を作成し、登録。K1〜K4
該パノラマ画像の任意の位置に仮基準画像である「候補基準画像」を設定する。K5
裏折丁の該候補基準画像と同一座標の画像情報を比較基準画像として設定する。K6
表折丁の該「候補基準画像」（仮基準画像）と裏折丁の該比較基準画像とを比較判定手段２２ｋにより比較し（Ｋ７）、一致するか否かを判定する。K11
一致しないと判断される場合は、該「候補基準画像」（仮基準画像）を正規の基準画像として設定し、登録する。K12
一致すると判断した場合には、パノラマ画像の他の検査領域の画像を候補基準画像（仮基準画像）とし、以下同様に作業する。K10
また、各駒において、当該駒の表折丁の検査画像と裏折丁の検査画像とを比較判定手段２２ｋにより比較して、夫々が同一ではない旨（あるいは一致率が低い）の判定により当該駒の仮基準画像を決めた後、他駒の比較基準画像との比較検査を行い、その結果により表折丁の基準画像を設定してもよい。
The setting / registration of the temporary reference image in the panorama image and the comparison with all the frames are performed by the procedure shown in FIG. This is a case where the comparison with the comparison reference image of the back signature is used for the panoramic image.
First, the imaging means 21 captures a signature (front signature and back signature) at a preset number of times (for example, four times), creates a panoramic image from the captured image, and registers it. K1 ~ K4
A “candidate reference image” that is a temporary reference image is set at an arbitrary position of the panoramic image. K5
Image information having the same coordinates as the candidate reference image of the back signature is set as a comparison reference image. K6
The “candidate reference image” (temporary reference image) of the front signature and the comparison reference image of the back signature are compared by the comparison determination means 22k (K7), and it is determined whether or not they match. K11
If it is determined that they do not match, the “candidate reference image” (temporary reference image) is set as a regular reference image and registered. K12
If it is determined that they match, the image of the other inspection area of the panorama image is set as a candidate reference image (temporary reference image), and the same operation is performed thereafter. K10
In addition, in each frame, the inspection image of the front signature and the inspection image of the back signature of the corresponding frame are compared by the comparison / determination means 22k, and it is determined that they are not the same (or the matching rate is low). After determining the temporary reference image, a comparison inspection with a comparison reference image of another frame may be performed, and a reference image of the front signature may be set based on the result.
本発明による丁合作業および乱丁検査は、次の手順で行われる。
スタータ１５が起動されると、丁合装置１０の丁合作業がスタートする。
基準画像４３および検査画像領域４２は、先ず、図６右図に示すように、撮像画像４ａから作成されたパノラマ画像要素４１ａ内に設定されているものとする。
丁合作業が開始されると、乱丁判定手段２２ｄは、引き出された折丁５の撮像画像４ａにおける検査画像領域４２内の画像情報と、予め集中管理装置３０、あるいは共有画像ファイル２２ｂに記憶されている基準画像４３の画像情報とを比較し、その一致率を求め、求めた一致率が、乱丁として判定される所定値以下の数値である場合、乱丁が発生したものとして判定し、乱丁発生情報（エラー情報）を出力する。
乱丁発生情報が出力されると、表示変更手段３０ｃ−４によって、モニター上の表示が検査画像モード表示からパノラマ画像モード表示に切り替えられ、パノラマ画像４１が表示される。
このパノラマ画像４１上には、基準画像４３の位置、あるいは検査画像領域４２の位置が表示され、オペレーターは、その基準画像４３位置にある撮像画像を見て、エラー発生の原因が基準画像４３の設定（つまり、検査画像領域４２の設定）によるものであるのかどうかを判断する。
The collation operation and the collation inspection according to the present invention are performed in the following procedure.
When the starter 15 is activated, the collating operation of the collating apparatus 10 starts.
It is assumed that the reference image 43 and the inspection image region 42 are first set in a panoramic image element 41a created from the captured image 4a as shown in the right diagram of FIG.
When the collation operation is started, the disorder determination unit 22d stores the image information in the inspection image area 42 in the picked-up image 4a of the drawn signature 5 and the central management device 30 or the shared image file 22b in advance. Is compared with the image information of the reference image 43, and the coincidence rate is obtained. If the obtained coincidence rate is a numerical value equal to or less than a predetermined value determined as a disorder, it is determined that disorder has occurred, and the occurrence of disorder Output information (error information).
When the disorder occurrence information is output, the display changing unit 30c-4 switches the display on the monitor from the inspection image mode display to the panoramic image mode display, and the panoramic image 41 is displayed.
On the panoramic image 41, the position of the reference image 43 or the position of the inspection image area 42 is displayed. The operator looks at the captured image at the position of the reference image 43, and the cause of the error is that of the reference image 43. It is determined whether or not it is due to setting (that is, setting of the inspection image area 42).
エラー発生原因が基準画像４３の設定でないと判断される場合は、エラー解除処理を行う。
一方、基準画像４３の設定がエラー検出の要因であると判断された場合には、パノラマ画像４１の全体を観察しつつ、その画像領域内の画像をスクロール、ピンチイン、ピンチアウトして画質、内容を確認しながら移動し、該折丁に特徴的な画像領域を新たに選択し、基準画像４３の設定変更を行う。図６右図に示す例では、パノラマ画像４１の全体を観察しつつ、新たな特徴的な画像領域を、当初のｐ位置とは異なるｐ’位置に見いだし、そこに新たな基準画像４３ａを設定する。この際、区画線４４が表示されていると、ｐ’位置に隣接するパノラマ画像要素４１ｂおよび４１ｄに跨らないように基準画像が設定できるので、基準画像の設定が容易となる。この設定変更作業により、検査画像領域も検査画像領域４２ａに変更される。
このように設定変更された基準画像は、その画像位置情報とともに、基準画像設定手段２２ｇに上書きされる。
以降の乱丁検査は、この新たに設定された基準画像４３ａおよび検査画像領域４２ａを用いて行われる。
If it is determined that the cause of the error is not the setting of the reference image 43, an error cancellation process is performed.
On the other hand, if it is determined that the setting of the reference image 43 is an error detection factor, the image in the image area is scrolled, pinched in, and pinched out while observing the entire panoramic image 41, and the image quality and contents The image is moved while confirming, an image region characteristic of the signature is newly selected, and the setting of the reference image 43 is changed. In the example shown on the right side of FIG. 6, while observing the entire panoramic image 41, a new characteristic image area is found at a position p ′ different from the original p position, and a new reference image 43a is set there. To do. At this time, if the lane marking 44 is displayed, the reference image can be set so as not to straddle the panoramic image elements 41b and 41d adjacent to the p ′ position, so that the reference image can be easily set. By this setting change operation, the inspection image area is also changed to the inspection image area 42a.
The reference image whose setting has been changed in this way is overwritten on the reference image setting means 22g together with the image position information.
The subsequent random inspection is performed using the newly set reference image 43a and inspection image area 42a.
本発明の別の実施の形態では、上記のようなパノラマ画像を用いることなく、撮像手段によって折丁の一部のみを撮像した撮像画像を検査画像とし、その検査画像内で適宜、基準画像を設定しても良い。 In another embodiment of the present invention, without using a panoramic image as described above, a captured image obtained by capturing only a part of a signature by an imaging unit is used as an inspection image, and a reference image is appropriately included in the inspection image. May be set.
以上のように構成されることで、本発明は次のような作用効果を奏する。
（１）検査折丁（表折丁）の基準画像は、裏折丁の基準画像（比較基準画像）と比較検査を行う。よってエラー折丁が除外されて当該駒装置に戻される際に、誤って裏返しされても、その裏折丁の「比較基準画像」が表折丁の「基準画像」と一致して、適性であるとの誤判断により丁合されることはない。
By being configured as described above, the present invention has the following effects.
(1) The reference image of the inspection signature (front signature) is compared with the reference image of the back signature (comparison reference image). Therefore, even if the error signature is removed and returned to the piece unit, even if it is turned upside down, the “reference image” of the reverse signature matches the “reference image” of the front signature, It will not be collated by misjudgment that there is.
（２）隣接駒を含む複数の丁合駒における裏検査画像を対象に基準画像を設定することにより、折丁を再利用する際に載置する丁合駒を間違って戻したりしたとしても、乱丁を確実に検知することができる。 (2) By setting a reference image for the back inspection images of multiple collation pieces including adjacent pieces, even if the collation piece placed when reusing a signature is returned by mistake, it is possible to make sure that the typo is correct. Can be detected.
（３）前記表折丁の「基準画像」と裏折丁の「比較基準画像」との比較検査は、基本的に同じ駒装置ごとに行えばすむが、隣接駒装置を含む全駒の「比較基準画像」との比較検査を行い、検査折丁（表折丁）の基準画像を設定することができる。このように一の駒折丁に設定された基準画像と他の駒折丁の比較基準画像とを比較することよって、隣接や全駒の基準画像との比較判定が不要になる. (3) The comparison inspection of the “reference image” of the front signature and the “comparison reference image” of the back signature is basically performed for each same piece device, but “comparison” of all the pieces including the adjacent piece device. A comparison inspection with the “reference image” is performed, and a reference image of the inspection signature (front signature) can be set. In this way, by comparing the reference image set for one piece signature with the comparison reference image for the other piece signature, it is not necessary to make a comparison with the reference image for adjacent or all pieces.
（４）折丁５全体をカバーできるようなパノラマ画像４１（連続画像）を作成し、折丁の広い領域をカバーする該パノラマ画像４１上において基準画像の設定をすることができるので、他の丁合駒における折丁と類似する基準画像を避けたり、あるいは適切な明度（平均濃度）やコントラストを有する基準画像を選択したりするなど、基準画像の設定の自由度を格段に向上することが可能である。
また、検査精度の高い基準画像が設定でき、設定のまずさ、例えば基準画像に類似する検査画像が他の折丁（特に、隣接する折丁）に存在することでそれとの混同が生じる虞が生じたり、あるいは基準画像の明度（平均濃度）やコントラストが適切な範囲でないことによって検査画像との対比判定精度が低下したりすることから生じる検査エラーを、極力避けることができる。
(4) A panoramic image 41 (continuous image) that can cover the entire signature 5 is created, and a reference image can be set on the panoramic image 41 that covers a wide area of the signature. It is possible to dramatically improve the degree of freedom in setting the reference image, such as avoiding a reference image similar to a signature on the collating piece, or selecting a reference image having appropriate brightness (average density) and contrast. is there.
In addition, a reference image with high inspection accuracy can be set, and there is a possibility that confusion may occur due to poor setting, for example, an inspection image similar to the reference image exists in other signatures (especially adjacent signatures). It is possible to avoid as much as possible an inspection error that occurs or results from a decrease in the accuracy of comparison with the inspection image due to the lightness (average density) and contrast of the reference image not being in an appropriate range.
（５）適切な基準画像を設定したにもかかわらず、不良が生じて正規製本として出版されたときは、その丁合駒における撮像画像処理手段（パノラマ画像記憶手段）から基準画像の撮像領域を履歴追跡することができるので、丁合装置の丁合不良等に対する的確な措置をすることができる。 (5) When an appropriate reference image is set and a defect occurs and the book is published as a regular bookbinding, the tracking area of the reference image is tracked from the captured image processing means (panoramic image storage means) in the collating frame. Therefore, it is possible to take an appropriate measure against a collation failure of the collation apparatus.
４ 撮像画像
５ 折丁
１０ 丁合装置
２０ 乱丁検査装置
２１ 撮像手段
２２ａ 共有画像ファイル
２２ｂ パノラマ画像作成手段
２２ｍ パノラマ画像作成手段
２２ｆ 検査領域設定手段
２２ｇ 基準画像設定手段
２２ｈ 裏折丁比較基準画像記憶手段
２２ｋ 比較判定手段
２２ｄ 乱丁判定手段
３０ 集中管理装置
４１ パノラマ画像（連続画像）
４２、４２ａ 検査画像領域
４３、４３ａ 基準画像
4 Captured image 5 Signature 10 Collating device 20 Random inspection device 21 Imaging device 22a Shared image file 22b Panoramic image creating device 22m Panoramic image creating device 22f Inspection area setting device 22g Reference image setting device 22h Back signature comparison reference image storage device 22k comparison determination means 22d disorder determination means 30 centralized management device 41 panoramic image (continuous image)
42, 42a Inspection image area 43, 43a Reference image
Claims (2)
前記折丁の印刷面の一部を検査画像として撮像する手段と、
当該丁合駒における正規の折丁の前記検査画像と、前記正規の折丁を裏返しにした折丁の前記検査画像と同一の画像位置での検査画像とが一致しているかどうかを判定する比較判定手段と、
前記比較判定手段による判定結果に応じて前記基準画像を設定する基準画像設定手段と、
を有することを特徴とした乱丁検査装置。 A part of the printing surface of the signature that is provided in the collating apparatus having a plurality of collating pieces and is taken out one by one from the collating piece is picked up as an inspection image, and the inspection image is compared with a pre-stored reference image. An inspection device for inspecting random characters,
Means for capturing a part of the printed surface of the signature as an inspection image;
Comparison determination means for determining whether or not the inspection image of the regular signature in the collating piece matches the inspection image at the same image position as the inspection image of the signature with the regular signature turned upside down When,
Reference image setting means for setting the reference image according to a determination result by the comparison determination means;
An irregularity inspection apparatus characterized by comprising:
2. The reference image setting means according to claim 1, wherein the inspection image includes the inspection image of a signature of another collating piece as the inspection image with the regular signature turned upside down, and the normal folding of the inspection image and the collating piece. An irregularity inspection apparatus, wherein the reference image is set from the inspection image so that the inspection image does not coincide with the inspection image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014189020A JP6447860B2 (en) | 2014-09-17 | 2014-09-17 | Random inspection device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014189020A JP6447860B2 (en) | 2014-09-17 | 2014-09-17 | Random inspection device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016060083A true JP2016060083A (en) | 2016-04-25 |
| JP6447860B2 JP6447860B2 (en) | 2019-01-09 |
Family
ID=55796665
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014189020A Active JP6447860B2 (en) | 2014-09-17 | 2014-09-17 | Random inspection device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6447860B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113960071A (en) * | 2021-10-23 | 2022-01-21 | 朗升柯式印刷(深圳)有限公司 | Quality detection process and detection system for color printing products |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005208717A (en) * | 2004-01-20 | 2005-08-04 | Yamatake Corp | Reference image selection device |
| JP2009292088A (en) * | 2008-06-06 | 2009-12-17 | Duplo Corp | Erratic collating sensor |
| JP2013056479A (en) * | 2011-09-08 | 2013-03-28 | Kita Denshi Corp | Erratic pagination inspection device |
| US20130322701A1 (en) * | 2012-05-30 | 2013-12-05 | Ricoh Company, Ltd. | Printer consistency measurement, evaluation and correction |
-
2014
- 2014-09-17 JP JP2014189020A patent/JP6447860B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005208717A (en) * | 2004-01-20 | 2005-08-04 | Yamatake Corp | Reference image selection device |
| JP2009292088A (en) * | 2008-06-06 | 2009-12-17 | Duplo Corp | Erratic collating sensor |
| JP2013056479A (en) * | 2011-09-08 | 2013-03-28 | Kita Denshi Corp | Erratic pagination inspection device |
| US20130322701A1 (en) * | 2012-05-30 | 2013-12-05 | Ricoh Company, Ltd. | Printer consistency measurement, evaluation and correction |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113960071A (en) * | 2021-10-23 | 2022-01-21 | 朗升柯式印刷(深圳)有限公司 | Quality detection process and detection system for color printing products |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6447860B2 (en) | 2019-01-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2782324B1 (en) | Image inspection system and image inspection apparatus | |
| US10126695B2 (en) | Image forming apparatus that is improved in jam processing efficiency | |
| AU2013254951B2 (en) | Image inspecting system and recording material processing device | |
| EP3919982B1 (en) | Printing system, inspection method, and program | |
| US9350888B2 (en) | Image-reading apparatus | |
| JP4249649B2 (en) | Vertical collating machine | |
| JP6447860B2 (en) | Random inspection device | |
| JP4690179B2 (en) | Random inspection device | |
| JP5879584B2 (en) | Random inspection device | |
| JP5577529B2 (en) | Cover slip inspection device in bookbinding process | |
| JP7309549B2 (en) | Paper sheet processing device and paper sheet processing system | |
| JP7402498B2 (en) | Label inspection method and label inspection system | |
| JP6303104B2 (en) | Random inspection device | |
| JP4690178B2 (en) | Image inspection device | |
| JP5003462B2 (en) | Random inspection apparatus with maintenance notification means for bookbinding apparatus | |
| JP5555861B2 (en) | Random inspection system | |
| JP2010188653A (en) | Erratic pagination inspection system | |
| JP2009066979A (en) | Imperfect collating inspection system | |
| JP2009066980A (en) | Imperfect collating inspection device | |
| JP4314086B2 (en) | Randomness detection method and apparatus | |
| JP5577533B2 (en) | Random inspection device | |
| JP6167517B2 (en) | Wire stitching defect inspection device | |
| JP2013111815A (en) | Book binding inspection system | |
| JP2008242600A (en) | Booklet counting method and its device | |
| JP2019093656A (en) | Spoiled paper tester and printing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170711 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180522 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180518 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180712 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180904 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181113 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181121 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6447860 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |