JP3682587B2 - X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus - Google Patents

X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus Download PDF

Info

Publication number
JP3682587B2
JP3682587B2 JP2003332205A JP2003332205A JP3682587B2 JP 3682587 B2 JP3682587 B2 JP 3682587B2 JP 2003332205 A JP2003332205 A JP 2003332205A JP 2003332205 A JP2003332205 A JP 2003332205A JP 3682587 B2 JP3682587 B2 JP 3682587B2
Authority
JP
Japan
Prior art keywords
ray
image
foreign
foreign matter
inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003332205A
Other languages
Japanese (ja)
Other versions
JP2005098810A (en
Inventor
俊道 政木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimadzu Corp
Original Assignee
Shimadzu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimadzu Corp filed Critical Shimadzu Corp
Priority to JP2003332205A priority Critical patent/JP3682587B2/en
Publication of JP2005098810A publication Critical patent/JP2005098810A/en
Application granted granted Critical
Publication of JP3682587B2 publication Critical patent/JP3682587B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は、例えば食品等などの検査対象物のX線透視像の画像処理により、その内部に異物が存在しているか否かを判定するX線異物検査装置と、この種のX線異物検査装置のための判定用パラメータを任意に場所で設定することのできる判定用パラメータ設定装置に関する。   The present invention relates to an X-ray foreign substance inspection apparatus for determining whether or not a foreign substance is present in an X-ray fluoroscopic image of an inspection object such as food, and this type of X-ray foreign substance inspection. The present invention relates to a determination parameter setting device capable of arbitrarily setting a determination parameter for a device at a place.

検査対象物の内部に異物が混入しているかいなかを検査する装置として、X線を用いて検査対象物の内部を透視し、その透視画像を画像処理することにより、検査対象物内の異物の存在の有無を検査する装置が知られている(例えば特許文献1参照)。   As a device for inspecting whether or not foreign matter is mixed in the inspection object, the inside of the inspection object is seen through using X-rays, and the fluoroscopic image is image-processed to thereby detect the foreign matter in the inspection object. An apparatus for inspecting presence / absence of existence is known (for example, see Patent Document 1).

この種のX線異物検査装置は、図6にその構成例を模式的に示す。この図6において、(A)は検査対象物Wの搬送方向側方から見た機械的構成を表す模式図と電気的構成を表すブロック図とを併記して示す図であり、(B)はその右側面から見た機械的構成を表す模式図である。X線源61とX線検出器62を対向配置するとともに、これらの間に検査対象物Wを搬送する搬送装置63を配置した構成をとる。   This type of X-ray foreign substance inspection apparatus is schematically shown in FIG. In FIG. 6, (A) is a diagram showing a schematic diagram showing a mechanical configuration viewed from the side of the conveyance direction of the inspection object W and a block diagram showing an electrical configuration, and (B) is a diagram. It is a schematic diagram showing the mechanical structure seen from the right side surface. The X-ray source 61 and the X-ray detector 62 are arranged to face each other, and a transport device 63 for transporting the inspection object W is disposed between them.

X線源61はファンビーム状のX線を出力し、X線検出器62はそのファンビーム状のX線の広がり方向に複数の素子を並べてなる1次元検出器であり、検査対象物Wはそのファンビーム状のX線に対して垂直な方向に搬送される。そして、検査対象物WがX線源61とX線検出器62の配設位置に到来したことを光電センサ64aと反射板64bの対によって検出し、検査対象物WがX線源61とX線検出器62の間を通過し終えるまでの間に、X線検出器62の出力を刻々と画像処理装置65に取り込むことにより、画像処理装置65には検査対象物WのX線透視像が取り込まれることになる。   The X-ray source 61 outputs fan beam-shaped X-rays, and the X-ray detector 62 is a one-dimensional detector in which a plurality of elements are arranged in the fan beam-shaped X-ray spreading direction. The fan beam is conveyed in a direction perpendicular to the X-ray. The inspection object W is detected by the pair of the photoelectric sensor 64a and the reflection plate 64b to arrive at the position where the X-ray source 61 and the X-ray detector 62 are arranged. The X-ray fluoroscopic image of the inspection object W is stored in the image processing device 65 by taking the output of the X-ray detector 62 into the image processing device 65 every moment until the passage between the line detectors 62 is completed. Will be captured.

画像処理装置65では、検査対象物WのX線透視像を画像処理することによって異物Sが混入しているか否かを判別し、その判別結果(OK/NG)は、搬送装置63の下流側に設けた排除装置(図示せず)等に供給され、NGの場合にはその検査対象物Wを排除する。   The image processing device 65 determines whether or not the foreign matter S is mixed by image processing the X-ray fluoroscopic image of the inspection object W, and the determination result (OK / NG) is the downstream side of the transport device 63. In the case of NG, the inspection object W is excluded.

画像処理装置65には、検査対象物WのX線透視像の表示手段と、異物有無の判定用のパラメータ等を設定するための入力手段が接続されており、この例では、これらの機能を併せ持ったモニタ付きタッチパネル65aが接続されている。   The image processing device 65 is connected to a display unit for displaying an X-ray fluoroscopic image of the inspection object W and an input unit for setting parameters for determining the presence or absence of foreign matter. In this example, these functions are provided. A touch panel 65a with a monitor is also connected.

ここで、検査対象物Wを透過したX線の線量分布は、検査対象物Wの厚さや内容物等によって一定ではなく、画像処理装置65による異物の有無の判定は、通常、1つのしきい値を用いて、X線線量がある一定レベル以下の部位があるから異物有りと判定するような単純な方法を採用することができない。   Here, the dose distribution of X-rays transmitted through the inspection object W is not constant depending on the thickness of the inspection object W, the contents, and the like, and the determination of the presence or absence of foreign matter by the image processing apparatus 65 is usually one threshold. Using a value, it is not possible to adopt a simple method for determining that there is a foreign substance because there is a site where the X-ray dose is below a certain level.

よって、画像処理装置65による異物有無の判定には、一般に複数の判定用パラメータが設定される。例えば、図7に1次元X線検出器の各素子(位置)とその出力(X線の線量)との関係の例を示すグラフを用いて説明すると、2つのしきい値Th1とTh2と比較距離Lcを判定用パラメータとして用いる。このうち、しきい値Th1は、このレベルより下の部分が存在すれば異物有りと判定するためのものであり、しきい値Th2は、各素子出力に対して比較距離Lc内の素子出力との比較とを比較し、その差が当該しきい値Th2よりも大きい場合に異物有りと判定するためのパラメータである。   Therefore, a plurality of determination parameters are generally set for the determination of the presence / absence of a foreign object by the image processing apparatus 65. For example, FIG. 7 will be described using a graph showing an example of the relationship between each element (position) of a one-dimensional X-ray detector and its output (X-ray dose). Compared with two threshold values Th1 and Th2. The distance Lc is used as a determination parameter. Of these, the threshold value Th1 is used to determine that there is a foreign object if there is a portion below this level, and the threshold value Th2 is the element output within the comparison distance Lc with respect to each element output. Is a parameter for determining the presence of foreign matter when the difference is greater than the threshold value Th2.

以上のような各判定用パラメータTh1,Th2およびLc等の値を設定するには、従来、検査対象物と検出したい異物を用意し、異物を混入した検査対象物である異物混入サンプルを作成して、そのX線透過情報を用いて最適なパラメータの組み合わせを設定していた。このとき、検出したい異物の種類は、一般に複数種に及び、従って、複数種の異物を用意し、それぞれの異物について1つずつ検査対象物に混入させた異物混入サンプルを作成して、全ての異物混入サンプルについて異物有りと判定するようなパラメータ群を設定する必要がある。
特開2001−281173号公報
In order to set the values of the determination parameters Th1, Th2, Lc and the like as described above, conventionally, an inspection object and a foreign object to be detected are prepared, and a foreign object mixed sample which is an inspection object mixed with the foreign object is prepared. Thus, an optimal combination of parameters has been set using the X-ray transmission information. At this time, there are generally a plurality of types of foreign substances to be detected. Therefore, a plurality of types of foreign substances are prepared, and a foreign substance mixed sample is prepared by mixing each foreign substance into the inspection object one by one. It is necessary to set a parameter group for determining the presence of foreign matter for a foreign matter mixed sample.
JP 2001-281173 A

ところで、上記したような従来の判定用パラメータの設定に際しての異物混入サンプルの作成においては、実際には、正常な、つまり異物の混入していない検査対象物の入手は容易であるものの、検査すべき複数種の異物を直ちに入手することは困難である場合が多く、そのため、異物混入サンプルの作成とパラメータ設定には比較的長い時間を要し、その間、生産現場において装置の稼働を停止させなければならないという問題があった。   By the way, in the preparation of a foreign substance-contaminated sample when setting the conventional determination parameters as described above, although it is actually easy to obtain an inspection object that is normal, that is, without foreign substances, the inspection is performed. It is often difficult to obtain multiple types of foreign matter immediately, so it takes a relatively long time to create a foreign-contaminated sample and set parameters, during which time the operation of the equipment must be stopped at the production site. There was a problem that had to be done.

また、時間が経過することにより物性等が変化する物品、例えばアイスクリーム等、については、事前に上記のような異物混入サンプルを作成してパラメータ設定を行うことが実質的に不可能であるため、このような物品の異物を検査するための装置については、実ラインへの導入後に調整・検証さぜるを得ない場合が多く、そのため、検証不足での稼働による導入後のトラブルが発生することもあった。   In addition, for articles whose properties change over time, such as ice cream, it is practically impossible to set parameters by preparing a sample containing foreign matter in advance as described above. In many cases, such an apparatus for inspecting foreign matter in an article must be adjusted and verified after being introduced into the actual line, which causes trouble after introduction due to operation under insufficient verification. There was also.

本発明はこのような実情に鑑みてなされたもので、実際に異物混入サンプルを作成することなく、判定用パラメータを最適に設定することができ、また、経時的に物性等が変化する物品についても事前の調整・検証を容易に行うことのできるX線異物検査装置と、実際のX線異物検査装置を用いることなく、任意の場所においてX線異物検査装置のための判定用パラメータを最適に設定することのできるシミュレーション装置の提供をその課題としている。   The present invention has been made in view of such circumstances, and it is possible to optimally set determination parameters without actually creating a foreign matter mixed sample, and for articles whose physical properties change over time. In addition, the X-ray foreign substance inspection device that can be easily adjusted and verified in advance and the determination parameters for the X-ray foreign substance inspection device are optimized at any place without using the actual X-ray foreign substance inspection device. The problem is to provide a simulation device that can be set.

上記の目的を達成するため、本発明のX線異物検査装置は、互いに対向配置されたX線源とX線検出器の間に、搬送手段により検査対象物を搬送しつつX線を照射して得られる当該検査対象物のX線透視像を用いた画像処理により、検査対象物中の異物の有無を、設定手段によりあらかじめ設定されている判定用パラメータを用いて判定する画像処理手段を備えたX線異物検査装置において、複数種の異物パターンを記憶する記憶手段と、上記X線検出器により撮像した異物の存在しない検査対象物のX線透視像に、上記記憶手段に記憶されている複数種の異物パターンの任意のものを選択的に合成する画像合成手段を備え、その合成された画像を用いて、上記設定手段により判定用パラメータを設定し得るように構成されていることによって特徴づけられる(請求項1)。   In order to achieve the above object, the X-ray foreign matter inspection apparatus of the present invention irradiates X-rays while conveying an inspection object by a conveying means between an X-ray source and an X-ray detector arranged to face each other. Image processing means for determining the presence / absence of a foreign substance in the inspection object by using image processing using an X-ray fluoroscopic image of the inspection object obtained by using a determination parameter set in advance by a setting means In the X-ray foreign substance inspection apparatus, the storage means for storing a plurality of types of foreign substance patterns and the X-ray fluoroscopic image of the inspection object free of foreign substances imaged by the X-ray detector are stored in the storage means. An image composition means for selectively composing any of a plurality of types of foreign matter patterns is provided, and the determination parameter can be set by the setting means using the synthesized image. Characterized (claim 1).

また、本発明のX線異物検査装置のための判定用パラメータ設定装置は、検査対象物のX線透視像を用いた画像処理により、検査対象物中の異物の有無を、あらかじめ設定されている判定用パラメータを用いて判定するX線異物検査装置における画像処理手段で用いる異物判定用パラメータを設定するための装置であって、上記X線異物検査装置に用いられているものと同じ機能を有する画像処理手段と、複数の異物パターンを記憶する記憶手段と、X線異物検査装置により撮像した異物の存在しない検査対象物のX線透視像をロードするデータ取り込み手段と、その取り込んだ検査対象物のX線透視像と上記記憶手段に記憶されている複数種の異物パターンのうちの任意のものを選択的に合成する画像合成手段と、その合成された画像を用いて、上記画像処理手段で用いる判定用パラメータを設定する設定手段を備えていることによって特徴づけられる(請求項2)。   In the determination parameter setting apparatus for the X-ray foreign substance inspection apparatus of the present invention, the presence or absence of foreign substances in the inspection object is set in advance by image processing using an X-ray fluoroscopic image of the inspection object. An apparatus for setting a foreign matter determination parameter used in image processing means in an X-ray foreign matter inspection apparatus to be determined using a determination parameter, and has the same function as that used in the X-ray foreign matter inspection apparatus Image processing means, storage means for storing a plurality of foreign object patterns, data capturing means for loading an X-ray fluoroscopic image of an inspection object without foreign objects imaged by an X-ray foreign object inspection apparatus, and the acquired inspection object Image synthesizing means for selectively synthesizing an X-ray fluoroscopic image and an arbitrary one of a plurality of types of foreign substance patterns stored in the storage means, and using the synthesized image Te, characterized by that it comprises a setting means for setting a determination parameters used by the image processing means (claim 2).

本発明のX線異物検査装置によれば、複数種の異物パターンを記憶手段に記憶し、そのうちの任意の異物パターンを、X線検出器により撮像した異物の存在しない検査対象物のX線透視像に対して合成して、その合成画像を用いて画像処理手段による判定のためのパラメータを設定することができるので、実際の検査対象物はX線検出器による撮像時にのみ必要であり、かつ、実際の異物のサンプルを用意することなく、判定用パラメータの設定を行うことができる。その結果、判定用パラメータの設定に要する一連の時間を従来に比して大幅に短縮化することができると同時に、異物混入サンプルを作成する作業も不要となる。   According to the X-ray foreign substance inspection apparatus of the present invention, a plurality of types of foreign substance patterns are stored in the storage means, and an X-ray fluoroscope of an inspection object in which any foreign substance pattern is imaged by an X-ray detector is absent. Since it is possible to set a parameter for determination by the image processing means using the synthesized image after being synthesized with the image, the actual inspection object is necessary only when imaging with the X-ray detector, and The determination parameter can be set without preparing an actual foreign material sample. As a result, a series of time required for setting the determination parameters can be greatly shortened as compared with the prior art, and at the same time, an operation for creating a foreign matter mixed sample is not required.

また、経時的に物性等が変化する物品についても、その物品が必要なのはX線透視像を撮像するだけであるが故に、通常の物品と全く同様にパラメータ設定を行うことができ、事前の調整・検証を容易に行うことができ、このような物品にもこの種のX線異物検査装置を導入しやすくなる。   In addition, for articles whose physical properties change over time, all that is needed is to take a fluoroscopic image, so parameters can be set just like normal articles, and prior adjustments can be made. -Verification can be performed easily and it becomes easy to introduce this kind of X-ray foreign material inspection apparatus also to such articles.

一方、本発明のX線異物検査装置のための判定用パラメータ設定装置によると、例えば実際のX線異物検査装置のX線検出器により撮像した異物の存在しない検査対象物を撮像したX線透視像をロードすることにより、X線異物検査装置と離れた任意に場所において、上記と同様に、実際の異物のサンプルを用意することなく、異物パターンを検査対象物のX線透視像と合成した画像を用いて、画像処理手段のための判定用パラメータを設定することができ、実際のX線異物検査装置が組み込まれている生産ラインを停止させることなく、例えば次の検査対象物のための判定用パラメータを設定することが可能となり、生産効率を向上させることができる。   On the other hand, according to the determination parameter setting apparatus for the X-ray foreign substance inspection apparatus of the present invention, for example, an X-ray fluoroscope imaged of an inspection object without foreign objects imaged by an X-ray detector of an actual X-ray foreign substance inspection apparatus By loading the image, the foreign matter pattern was synthesized with the X-ray fluoroscopic image of the object to be inspected at any location away from the X-ray foreign matter inspection apparatus without preparing an actual foreign matter sample in the same manner as described above. Using the image, it is possible to set determination parameters for the image processing means. For example, for the next inspection object without stopping the production line in which the actual X-ray foreign substance inspection apparatus is incorporated. Determination parameters can be set, and production efficiency can be improved.

以下、図面を参照しつつ本発明の好適な実施の形態について説明する。
図1は本発明の実施の形態の構成図であり、機械的構成を表す模式図と電気的構成を表すブロック図とを併記して示す図である。
Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a configuration diagram of an embodiment of the present invention, and is a diagram illustrating a schematic diagram representing a mechanical configuration and a block diagram representing an electrical configuration.

互いに対向配置されたX線源1とX線検出器2、およびこれらの間で検査対象物Wを搬送する搬送装置3、その搬送装置3により搬送されてくる検査対象物WがX線源1とX線検出器2の配設位置に到来したことを検知する光電センサ4等を主体とする機械的構成は、前記図6に示した従来の装置と同じであり、1次元状に複数の素子を並べてなるX線検出器2からの出力は刻々と画像処理装置5に取り込まれる。この実施の形態の特徴は、以下に示す画像処理装置5の機能にある。   The X-ray source 1 and the X-ray detector 2 that are arranged to face each other, the transfer device 3 that transfers the inspection object W between them, and the inspection object W that is transferred by the transfer device 3 are the X-ray source 1. The mechanical configuration mainly including the photoelectric sensor 4 that detects arrival at the position where the X-ray detector 2 is disposed is the same as the conventional apparatus shown in FIG. The output from the X-ray detector 2 in which the elements are arranged is taken into the image processing apparatus 5 every moment. The feature of this embodiment is the function of the image processing apparatus 5 shown below.

画像処理装置5は、X線検出器2からの出力をデジタル化するA−D変換器51、光電センサ4による検査対象物Wの検出信号を取り込み、当該光電センサ4により検査対象物Wの検知と同時にON,通りすぎた時点でOFFの信号を発生する制御部52、その制御部52からの信号がONとなっている状態においてA−D変換器51からの出力を取り込むことにより、検査対象物Wの2次元状のX線透視像を記憶する画像メモリ53、A−D変換器51からの出力並びに画像メモリ53に記憶した検査対象物WのX線透視像を、前記した図7に例示した複数の判定用パラメータを用いて、その検査対象物W内に異物が存在しているか否かを自動的に判定してOK/NGの判定結果を排除装置(図示せず)に対して供給する自動判定部54、タッチパネル5aを接続するためのタッチパネルインターフェース55、画像メモリ53に格納されている画像をビデオ信号としてタッチパネル5aに出力して表示するための表示制御部56、後述する手法によって異物サンプル像を記憶する不揮発性メモリ57、画像メモリ53内の画像や後述するように合成された画像等を記憶するローカルメモリ58、および全体を制御するCPU59を主体として構成されている。   The image processing apparatus 5 takes in the detection signal of the inspection object W by the A / D converter 51 and the photoelectric sensor 4 that digitizes the output from the X-ray detector 2, and detects the inspection object W by the photoelectric sensor 4. At the same time, the control unit 52 generates an OFF signal when it passes, and when the signal from the control unit 52 is ON, the output from the A / D converter 51 is taken in, and the inspection object The X-ray fluoroscopic image of the inspection object W stored in the image memory 53 storing the two-dimensional X-ray fluoroscopic image of the object W, the output from the AD converter 51, and the image memory 53 is shown in FIG. Using the plurality of exemplified determination parameters, it is automatically determined whether or not a foreign object is present in the inspection object W, and an OK / NG determination result is sent to an exclusion device (not shown). Automatic determination unit 54 to supply, A touch panel interface 55 for connecting the touch panel 5a, a display control unit 56 for outputting and displaying an image stored in the image memory 53 as a video signal to the touch panel 5a, and a nonvolatile memory for storing a foreign substance sample image by a method described later. Main memory 57, local memory 58 for storing images in image memory 53, images synthesized as described later, and CPU 59 for controlling the whole.

次に、以上の構成からなる本発明の実施の形態の作用を、その使用方法とともに説明する。
まず、異物パターンを作成して記憶させる手順について述べる。この異物パターンの作成は、例えば装置の工場出荷時や据え付け時、あるいは据え付け後に随時に行うことができる。
Next, the operation of the embodiment of the present invention having the above configuration will be described together with its usage.
First, a procedure for creating and storing a foreign matter pattern will be described. This foreign matter pattern can be created, for example, at the time of factory shipment or installation of the apparatus, or at any time after installation.

この異物パターンの作成に際しては、例えば図2(A)に示すように、異物として各種物品に混入する可能性のある材質・形状の物体を用意する。すなわち、ステンレス球S0、ステンレス線S1、樹脂(小)S2、樹脂(大)S3、ゴム(中)S4、ゴム(大)S5、ガラス球(中)S6、ガラス球(大)S7などである。また、これらとは別に、異物の背景が飽和しないように、背景用部材として所定の厚みを持つアクリル板等を用意し、図2(B)に示すように、そのアクリル板等からなる背景部材Aの上に、用意した異物S0〜S7のうちの一つ、例えば異物S0等を載せ、それを搬送装置3で搬送してそのX線透視像を読み込ませる。これにより、画像メモリ53にはその透視画像が記憶され、同時にタッチパネル5aのモニタには図2(C)に示すような透視画像が表示される。   When creating the foreign matter pattern, for example, as shown in FIG. 2A, an object of a material / shape that can be mixed into various articles as a foreign matter is prepared. That is, stainless steel ball S0, stainless steel wire S1, resin (small) S2, resin (large) S3, rubber (medium) S4, rubber (large) S5, glass ball (medium) S6, glass ball (large) S7, and the like. . In addition to these, an acrylic plate having a predetermined thickness is prepared as a background member so that the background of the foreign matter is not saturated, and a background member made of the acrylic plate or the like as shown in FIG. One of the prepared foreign objects S0 to S7, for example, the foreign object S0 is placed on A, and it is transported by the transport device 3 to read the X-ray fluoroscopic image. Thereby, the fluoroscopic image is stored in the image memory 53, and at the same time, the fluoroscopic image as shown in FIG. 2C is displayed on the monitor of the touch panel 5a.

この表示から、オペレータはタッチパネル5a上のモニタ画像から異物像をタッチする。これにより、CPU59はタッチパネルインターフェース55を介して画像上の位置情報を認識し、この位置に対応する画像メモリ53のアドレスをアクセスし、周囲の画像とレベル(線量データ)が異なる部分を抜き出し、異物パターンib0(u,v)として不揮発性メモリ57に記憶する。なお、(u,v)は異物パターン内のモニタ画面上でのx,y軸上への位置であり、ib0はその各位置(u,v)における異物S0のX線の吸収量に係るデータであって、背景部材Aの各位置におけるX線透過線量(X線検出データ)の平均値をAとし、異物S0の各位置でのX線透過線量(X線検出データ)をb(u,v)とすれば、X線検出器2がログ特性を有しているとすれば、
ib0(u,v)=A−b(u,v) ・・・・(1)
で表される。
From this display, the operator touches the foreign object image from the monitor image on the touch panel 5a. As a result, the CPU 59 recognizes the position information on the image via the touch panel interface 55, accesses the address of the image memory 53 corresponding to this position, extracts a portion whose level (dose data) is different from that of the surrounding image, and detects the foreign matter. The data is stored in the nonvolatile memory 57 as the pattern ib0 (u, v). Note that (u, v) is a position on the x and y axes on the monitor screen in the foreign substance pattern, and ib0 is data relating to the X-ray absorption amount of the foreign substance S0 at each position (u, v). The average value of the X-ray transmission dose (X-ray detection data) at each position of the background member A is A, and the X-ray transmission dose (X-ray detection data) at each position of the foreign object S0 is b (u, v), if the X-ray detector 2 has log characteristics,
ib0 (u, v) = A−b (u, v) (1)
It is represented by

以上の操作を、異物Sk(k=0〜7)について行うことにより、不揮発性メモリ57にibk(k=0〜7)の合計7個の異物パターンが格納される。この異物パターンの作成・記憶操作は、前記したようにあらかじめ実行しておくものであって、各異物パターンは不揮発性メモリ57に格納されるが故に、一旦作成しておくことによって、装置電源を切っても何度でも使用することができる。   By performing the above operation for the foreign substance Sk (k = 0 to 7), a total of seven foreign substance patterns of ibk (k = 0 to 7) are stored in the nonvolatile memory 57. This foreign matter pattern creation / storage operation is executed in advance as described above, and each foreign matter pattern is stored in the nonvolatile memory 57. Can be used as many times as you want.

さて、以上のような複数の異物パターンibk(u,v)を登録しておくことにより、実際の装置駆動に際しての異物有無の判定用のパラメータ設定は、以下の手順によって行うことができる。   By registering the plurality of foreign matter patterns ibk (u, v) as described above, parameter setting for determining the presence or absence of foreign matter when actually driving the apparatus can be performed by the following procedure.

最初に、正常な検査対象物W、つまり異物が混入していない良品の検査対象物Wを用意し、その検査対象物Wを搬送装置3によって搬送し、そのX線透視像を読み込ませる。画像処理装置5では、その正常な検査対象物WのX線透視像img(x,y)を画像メモリ53に記憶した後、そのデータをローカルメモリ58に転送する。なお、x,yはモニタ画面上の互いに直交する2軸方向への座標であり、imgはその各座標におけるX線透過データを表している。そして、この正常な検査対象物WのX線透視像と、不揮発性メモリ57に記憶している各異物パターンibkとを合成する。この合成方法の例について述べると、図3に示すように、ローカルメモリ58に記憶している正常な検査対象物WのX線透視像img(x,y)と、不揮発性メモリ57に記憶している各異物パターンibkのそれぞれを合成して、以下に示すような合成像Gn(x,y)を作成する。
Gn(x,y)=img(x,y)−igk(xp+u,yp+v) ・・・・(2)
First, a normal inspection object W, that is, a non-defective inspection object W in which foreign matter is not mixed, is prepared, the inspection object W is transported by the transport device 3, and the X-ray fluoroscopic image is read. In the image processing apparatus 5, the X-ray fluoroscopic image img (x, y) of the normal inspection object W is stored in the image memory 53, and then the data is transferred to the local memory 58. Note that x and y are coordinates in two axial directions orthogonal to each other on the monitor screen, and img represents X-ray transmission data at each coordinate. Then, the X-ray fluoroscopic image of the normal inspection object W and each foreign matter pattern ibk stored in the nonvolatile memory 57 are synthesized. An example of this synthesis method will be described. As shown in FIG. 3, the X-ray fluoroscopic image img (x, y) of the normal inspection object W stored in the local memory 58 and the non-volatile memory 57 are stored. The respective foreign matter patterns ibk are combined to create a composite image Gn (x, y) as shown below.
Gn (x, y) = img (x, y) -igk (xp + u, yp + v) (2)

この(2)式においてxp,ypは異物パターンigk(u,v)の検査対象物像img(x,y)内への組み込み位置を表す座標であって、検査対象物像img(x,y)内の領域をランダムに選択するものとし、例えばCPU59がランダム関数などを用いて発生し、その位置がimg(x,y)内であることは、img(xp,yp)の値(X線透過データ)がある一定値以下であることを確認すればよい。また、nは合成像の種類であり(n=1,2,・・・・)、各異物パターンibk(k=0〜7)について1つずつ合成像を作る場合には、n=1〜7となる。なお、合成像は、各異物パターンの検査対象物像に対する組み込み位置(xp,yp)を変更するなどして、1つの異物パターンに対して複数の合成像を作成する場合もある。このようにして作成された各異物存在検査対象物像Gn(x,y)は、それぞれローカルメモリ58に格納される。   In this equation (2), xp and yp are coordinates representing the position where the foreign object pattern igk (u, v) is incorporated into the inspection object image img (x, y), and the inspection object image img (x, y ) Is selected at random. For example, the CPU 59 generates a random function or the like, and that the position is within img (x, y), the value of img (xp, yp) (X-ray What is necessary is just to confirm that (transmission data) is below a certain value. In addition, n is the type of composite image (n = 1, 2,...), And when creating one composite image for each foreign matter pattern ibk (k = 0 to 7), n = 1 to 1. 7 Note that the composite image may create a plurality of composite images for one foreign matter pattern, for example, by changing the position (xp, yp) where each foreign matter pattern is incorporated into the inspection target image. Each foreign object presence inspection object image Gn (x, y) created in this way is stored in the local memory 58.

以上の手順により各異物存在検査対象物像Gn(x,y)の作成を完了した後、これらを用いて自動判定部54における判定用パラメータを設定する。
この設定に際しては、CPU59はモニタ付きタッチパネル5aに図4に例示するような設定画面を表示させる。この図4において、Mは画像の表示部を示し、B1はその画像表示部Mに表示すべき画像(正常な検査対象物の像、もしくは異物パターンを合成した合成像Gn)の種類を選択するための入力ボックス、B2〜4はそれぞれしきい値Th1,Th2,および比較距離Lcを設定するための入力ボックスである。
After completing the creation of each foreign object presence inspection object image Gn (x, y) by the above procedure, the determination parameters in the automatic determination unit 54 are set using these.
In this setting, the CPU 59 displays a setting screen as illustrated in FIG. 4 on the touch panel with monitor 5a. In FIG. 4, M indicates an image display unit, and B1 selects the type of image to be displayed on the image display unit M (a normal inspection object image or a composite image Gn obtained by synthesizing a foreign object pattern). Input boxes B2 to B4 are input boxes for setting threshold values Th1, Th2, and comparison distance Lc, respectively.

オペレータは、この表示において、画像種類を指定するための入力ボックスB1を介して、正常な検査対象物Wの画像と、異物S0〜S7のいずれかを選択する。これにより、該当する画像データがローカルメモリ58から画像メモリ53にロードされ、モニタ付きタッチパネル5aの画像表示部Mにその画像が表示される。図4の例では、異物0を選択した状態を示している。同時に、自動判定部54はその画像データを処理して異物の有無を判定する。その際、入力ボックスB2〜B4を介してしきい値Th1,Th2および比較距離Lcを適宜に設定する。自動判定部54では、これらの判定用パラメータにより前記した図7において説明した異物検出処理を行い、異物と判定した部位に画像表示部M上で例えば赤マークを付し、NGメッセージを表示するとともに出力する。   In this display, the operator selects one of the image of the normal inspection object W and the foreign objects S0 to S7 via the input box B1 for designating the image type. Accordingly, the corresponding image data is loaded from the local memory 58 to the image memory 53, and the image is displayed on the image display unit M of the monitor-equipped touch panel 5a. In the example of FIG. 4, the foreign object 0 is selected. At the same time, the automatic determination unit 54 processes the image data to determine the presence or absence of foreign matter. At that time, the threshold values Th1 and Th2 and the comparison distance Lc are appropriately set via the input boxes B2 to B4. The automatic determination unit 54 performs the foreign object detection processing described with reference to FIG. 7 using these determination parameters, adds a red mark on the image display unit M to a region determined to be a foreign object, and displays an NG message. Output.

オペレータは、異物S0〜S7が合成されてなる各合成像を選択した状態で全てNGメッセージが表示され、かつ、正常な検査対象物像を選択した状態でOKメッセージが表示されるように、入力ボックスB2〜B4を介して各判定用パラメータであるしきい値Th1,Th2および比較距離Lcの各値を調整して、設定操作を終了する。これにより、ラインで実際の検査を行ったとき、異物の存在しない正常な検査対象物Wが通過したときにOK、異物S0〜S7のいずれかに類似した異物が混入している検査対象物Wが通過したときにはNGのメッセージが出力されることになる。   The operator inputs so that all the NG messages are displayed in a state where each composite image composed of the foreign objects S0 to S7 is selected, and the OK message is displayed in a state where a normal inspection object image is selected. Each value of threshold values Th1 and Th2 and comparison distance Lc, which are parameters for determination, is adjusted via boxes B2 to B4, and the setting operation is terminated. As a result, when a normal inspection object W that does not have foreign matter passes through when an actual inspection is performed on the line, OK and the inspection target object W that contains foreign matters similar to any of the foreign matters S0 to S7 are mixed. When NG passes, an NG message is output.

以上のように、この実施の形態によると、実物の検査対象物WはそのX線透視像を得るべく1回だけ搬送装置3によりX線源1とX線検出器2の間を通過させるだけで、後は不要となるため、経時的に物性が変化してしまうアイスクリームのような食品に対するパラメータ設定も通常の物品と全く同等に行うことができ、また、異物パターンが不揮発性メモリ57に格納されているため、異物の実物のサンプルが不要となって、判定用パラメータの設定の手間を大幅に省略することができる。   As described above, according to this embodiment, the actual inspection object W is only allowed to pass between the X-ray source 1 and the X-ray detector 2 by the transport device 3 once to obtain the X-ray fluoroscopic image. Since it becomes unnecessary later, the parameter setting for foods such as ice cream whose physical properties change over time can be set exactly the same as that of ordinary articles, and the foreign matter pattern is stored in the nonvolatile memory 57. Since it is stored, an actual sample of the foreign matter is not necessary, and the labor for setting the determination parameter can be greatly reduced.

ところで、以上の実施の形態では、X線異物検査装置により判定用パラメータの設定を行った例を示したが、実際にライン内で稼働するX線異物検査装置とは別のシミュレーション装置を用いて、任意の場所で上記した操作と同等の操作によって、ライン内で稼働するX線異物検査装置のための判定用パラメータを設定することもできる。   By the way, in the above-mentioned embodiment, although the example which set the parameter for determination by X-ray foreign material inspection apparatus was shown, it uses a simulation apparatus different from the X-ray foreign material inspection apparatus actually operated in a line. The determination parameters for the X-ray foreign substance inspection apparatus operating in the line can be set by an operation equivalent to the operation described above at an arbitrary place.

図5にそのシミュレーション装置の構成例を表すブロック図を示す。
この例において、画像メモリ53、自動判定部54、タッチパネルインターフェース55、表示制御部56、不揮発性メモリ57、ローカルメモリ58、およびCPU59は図1に示した画像処理装置5に用いているものと全く同等のものであり、タッチパネルインターフェース55を介してモニタ付きタッチパネル5aが接続されている点も同じであって、このモニタ付きタッチパネル5aの表示内容も先の例と同じである。
FIG. 5 is a block diagram showing a configuration example of the simulation apparatus.
In this example, the image memory 53, the automatic determination unit 54, the touch panel interface 55, the display control unit 56, the non-volatile memory 57, the local memory 58, and the CPU 59 are exactly the same as those used in the image processing apparatus 5 shown in FIG. The same is true, and the touch-sensitive touch panel 5a is connected via the touch-panel interface 55, and the display content of the touch-sensitive touch panel 5a is the same as the previous example.

このシミュレーション装置と先の例における画像処理装置5との相違点は、A−D変換器51と制御部52に相当する機能を有していない点と、画像メモリ53に対してメモリカードインターフェース151を介してメモリカードの内容が読み込まれるようになっている点である。先の実施例における異物パターンibkは前もって不揮発性メモリ57に記憶されており、異物の存在しない正常な検査対象物WのX線透視像は、先の例と同じ手順によりX線異物検査装置のX線検出器によって読み取り、これをメモリカードに格納して、このシミュレーション装置の画像メモリ53に読み込む。そして、その検査対象物WのX線透視像img(x,y)と、不揮発性メモリ57内の異物パターンibk(u,v)とを合成してローカルメモリ58に記憶する手順以下は、先の例と全く同等の手順によって、判定用パラメータの調整を行うことができる。このようにして調整した判定用パラメータは、実際のX線異物検査装置に対して、手動により、あるいは適当な記憶媒体を通じて、更にはLAN等を通じて随時に設定することができる。   The difference between this simulation apparatus and the image processing apparatus 5 in the previous example is that it does not have a function corresponding to the A-D converter 51 and the control unit 52, and the memory card interface 151 with respect to the image memory 53. The content of the memory card is read through the. The foreign object pattern ibk in the previous embodiment is stored in advance in the nonvolatile memory 57, and an X-ray fluoroscopic image of a normal inspection object W in which no foreign object exists can be obtained by the same procedure as in the previous example. This is read by the X-ray detector, stored in a memory card, and read into the image memory 53 of the simulation apparatus. Then, the X-ray fluoroscopic image img (x, y) of the inspection object W and the foreign object pattern ibk (u, v) in the nonvolatile memory 57 are combined and stored in the local memory 58. The determination parameter can be adjusted by the same procedure as in the above example. The determination parameters adjusted in this way can be set at any time for an actual X-ray foreign substance inspection apparatus manually, through an appropriate storage medium, and further through a LAN or the like.

従って、このシミュレーション装置を用いることにより、例えばライン内で稼働しているX線異物検査装置の検査対象物の種類を変更する場合等において、X線異物検査装置自体は稼働を続けたまま、次の検査対象物のための判定用パラメータを未然に決定しておき、ラインにおいて検査対象物を変更すると同時にX線異物検査装置に設定することが可能となり、判定用パラメータ設定のためにラインを止める時間を可及的に少なくすることができる。   Therefore, by using this simulation apparatus, for example, when changing the type of inspection object of the X-ray foreign substance inspection apparatus operating in the line, the X-ray foreign substance inspection apparatus itself continues to operate and continues to operate. The determination parameters for the inspection object can be determined in advance, and the inspection object can be changed in the line and set in the X-ray foreign substance inspection apparatus at the same time, and the line is stopped for setting the determination parameter. Time can be reduced as much as possible.

なお、以上の実施の形態においては、正常な検査対象物のX線透視像データをメモリカードを介してシミュレーション装置の画像メモリに格納する例を示したが、インターネットやLANなどを介してX線透視像データをシミュレーション装置に送信するように構成し得ることは勿論である。   In the above embodiment, an example in which X-ray fluoroscopic image data of a normal inspection object is stored in the image memory of the simulation apparatus via a memory card has been described. However, X-rays are transmitted via the Internet, LAN, or the like. Of course, it can be configured to transmit the fluoroscopic image data to the simulation apparatus.

本発明の実施の形態の構成図であり、機械的構成を表す模式図と電気的構成を表すブロック図とを併記して示す図である。It is a block diagram of embodiment of this invention, and is the figure which writes together and shows the schematic diagram showing a mechanical structure, and the block diagram showing an electric structure. 本発明の実施の形態による異物パターンの作成方法の説明図であり、(A)は用意すべき異物の例の説明図で、(B)はその異物のX線透視情報をX線検出器で読み取る際の説明図、(C)は(B)の状態で読み取ったときのX線透視像の例の説明図である。It is explanatory drawing of the creation method of the foreign material pattern by embodiment of this invention, (A) is explanatory drawing of the example of the foreign material which should be prepared, (B) is X-ray fluoroscopy information of the foreign material with an X-ray detector. Explanatory drawing at the time of reading, (C) is an explanatory diagram of an example of an X-ray fluoroscopic image when read in the state of (B). 本発明の実施の形態における検査対象物のX線透視像の異物パターンとの合成手法の説明図である。It is explanatory drawing of the synthetic | combination method with the foreign material pattern of the X-ray fluoroscopic image of the test object in embodiment of this invention. 本発明の実施の形態により判定用パラメータを設定する際にモニタ付きタッチパネル5aに表示される画面の例の説明図である。It is explanatory drawing of the example of the screen displayed on the touchscreen with a monitor when setting the parameter for determination by embodiment of this invention. 本発明に係るシミュレーション装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the simulation apparatus which concerns on this invention. 従来のX線異物検査装置の構成例を示す図であり、(A)は検査対象物Wの搬送方向側方から見た機械的構成を表す模式図と電気的構成を表すブロック図とを併記して示す図であり、(B)はその右側面から見た機械的構成を表す模式図である。It is a figure which shows the structural example of the conventional X-ray foreign material inspection apparatus, (A) writes together the schematic diagram showing the mechanical structure seen from the conveyance direction side of the test target object W, and the block diagram showing an electric structure (B) is a schematic diagram showing the mechanical structure seen from the right side surface. この種のX線異物検査装置で用いられる判定用パラメータの例を説明するためのグラフである。It is a graph for demonstrating the example of the parameter for determination used with this kind of X-ray foreign material inspection apparatus.

符号の説明Explanation of symbols

1 X線源
2 X線検出器
3 搬送装置
4 光電センサ
5 画像処理装置
51 A−D変換器
52 制御部
53 画像メモリ
54 自動判定部
55 タッチパネルインターフェース
56 表示制御部
57 不揮発性メモリ
58 ローカルメモリ
59 CPU
151 メモリカードインターフェース
W 検査対象物
S 異物
DESCRIPTION OF SYMBOLS 1 X-ray source 2 X-ray detector 3 Conveyance apparatus 4 Photoelectric sensor 5 Image processing apparatus 51 AD converter 52 Control part 53 Image memory 54 Automatic determination part 55 Touch-panel interface 56 Display control part 57 Non-volatile memory 58 Local memory 59 CPU
151 Memory card interface W Inspection object S Foreign object

Claims (2)

互いに対向配置されたX線源とX線検出器の間に、搬送手段により検査対象物を搬送しつつX線を照射して得られる当該検査対象物のX線透視像を用いた画像処理により、検査対象物中の異物の有無を、設定手段によりあらかじめ設定されている判定用パラメータを用いて判定する画像処理手段を備えたX線異物検査装置において、
複数種の異物パターン像を記憶する記憶手段と、上記X線検出器により撮像した異物の存在しない検査対象物のX線透視像に、上記記憶手段に記憶されている複数種の異物パターン像の任意のものを選択的に合成する画像合成手段を備え、その合成された画像を用いて、上記設定手段により判定用パラメータを設定し得るように構成されていることを特徴とするX線異物検査装置。
Image processing using an X-ray fluoroscopic image of the inspection object obtained by irradiating X-rays while conveying the inspection object by the conveying means between the X-ray source and the X-ray detector arranged opposite to each other In the X-ray foreign matter inspection apparatus provided with the image processing means for determining the presence or absence of foreign matters in the inspection object using the determination parameters set in advance by the setting means,
A storage means for storing a plurality of types of foreign matter pattern images, and an X-ray fluoroscopic image of the inspection object without foreign matter imaged by the X-ray detector include a plurality of types of foreign matter pattern images stored in the storage means. An X-ray foreign substance inspection characterized in that it comprises an image synthesis means for selectively synthesizing arbitrary objects, and the judgment parameter can be set by the setting means using the synthesized image apparatus.
検査対象物のX線透視像を用いた画像処理により、検査対象物中の異物の有無を、あらかじめ設定されている判定用パラメータを用いて判定するX線異物検査装置における画像処理手段で用いる異物判定用パラメータを設定するための装置であって、
上記X線異物検査装置に用いられているものと同じ機能を有する画像処理手段と、複数の異物パターンを記憶する記憶手段と、X線異物検査装置により撮像した異物の存在しない検査対象物のX線透視像をロードするデータ取り込み手段と、その取り込んだ検査対象物のX線透視像と上記記憶手段に記憶されている複数種の異物パターン像のうちの任意のものを選択的に合成する画像合成手段と、その合成された画像を用いて、上記画像処理手段で用いる判定用パラメータを設定する設定手段を備えていることを特徴とするX線異物検査装置のための判定用パラメータ設定装置。
Foreign matter used by image processing means in an X-ray foreign matter inspection apparatus that determines the presence or absence of foreign matter in an inspection target by using image processing using an X-ray fluoroscopic image of the inspection target using preset determination parameters An apparatus for setting a determination parameter,
An image processing means having the same function as that used in the X-ray foreign substance inspection apparatus, a storage means for storing a plurality of foreign substance patterns, and an X of the inspection object without foreign substances imaged by the X-ray foreign substance inspection apparatus Data capturing means for loading a fluoroscopic image, and an image that selectively synthesizes an X-ray fluoroscopic image of the captured inspection object and any one of a plurality of types of foreign matter pattern images stored in the storage means A determination parameter setting apparatus for an X-ray foreign substance inspection apparatus, comprising: a combining unit; and a setting unit that sets a determination parameter used in the image processing unit using the combined image.
JP2003332205A 2003-09-24 2003-09-24 X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus Expired - Fee Related JP3682587B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003332205A JP3682587B2 (en) 2003-09-24 2003-09-24 X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003332205A JP3682587B2 (en) 2003-09-24 2003-09-24 X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2004316815A Division JP4052301B2 (en) 2004-10-29 2004-10-29 X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus

Publications (2)

Publication Number Publication Date
JP2005098810A JP2005098810A (en) 2005-04-14
JP3682587B2 true JP3682587B2 (en) 2005-08-10

Family

ID=34460624

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003332205A Expired - Fee Related JP3682587B2 (en) 2003-09-24 2003-09-24 X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus

Country Status (1)

Country Link
JP (1) JP3682587B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1767927B1 (en) 2004-06-24 2016-03-16 ISHIDA CO., Ltd. X-ray inspection apparatus, and method for creating an image processing procedure of the x-ray inspection apparatus
JP4230473B2 (en) * 2005-04-26 2009-02-25 アンリツ産機システム株式会社 X-ray foreign object detection device
JP5289780B2 (en) * 2008-01-18 2013-09-11 アンリツ産機システム株式会社 X-ray foreign object detection device
JP4471032B1 (en) * 2009-03-27 2010-06-02 システム・プロダクト株式会社 X-ray image composition apparatus, method and program
WO2018034057A1 (en) * 2016-08-18 2018-02-22 富士フイルム株式会社 Defect inspection apparatus, defect inspection method, and program

Also Published As

Publication number Publication date
JP2005098810A (en) 2005-04-14

Similar Documents

Publication Publication Date Title
JP4317566B2 (en) X-ray inspection apparatus and method for generating image processing procedure of X-ray inspection apparatus
JP6422573B2 (en) Image processing apparatus, image processing method and program
JP2007232586A (en) X-ray inspection device
EP2784746A1 (en) Setting up an area sensing imaging system to capture single line images
JP4849805B2 (en) Inspection device and PTP packaging machine
JP4052301B2 (en) X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus
JP3682587B2 (en) X-ray foreign substance inspection apparatus and determination parameter setting apparatus for X-ray foreign substance inspection apparatus
JP5243008B2 (en) X-ray foreign object detection device
JP2016156647A (en) Inspection device using electromagnetic wave
JP4737427B2 (en) Inline X-ray fluoroscope
JP3756751B2 (en) X-ray foreign object detection device
JP7295568B2 (en) Inspection device and program
JP2007303851A5 (en)
JP4460139B2 (en) X-ray foreign object detection device
JP2009168590A (en) X-ray inspection device
JP6480171B2 (en) X-ray inspection device
JPH1123494A (en) X-ray foreign matter inspecting apparatus
JP4984832B2 (en) X-ray inspection equipment
JP2011085424A (en) X-ray inspection method and x-ray inspection device using the same
JP4460140B2 (en) X-ray foreign object detection device
JP2007303848A (en) X-ray fluoroscopic apparatus
JP2009276133A (en) X-ray radiographic apparatus
JP2008116376A5 (en)
JP7059137B2 (en) Article inspection equipment and article inspection system
JP4005117B2 (en) X-ray inspection equipment

Legal Events

Date Code Title Description
A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20050404

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20050414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050426

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050509

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080603

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090603

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100603

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100603

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110603

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110603

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120603

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130603

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130603

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140603

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees