JP6772384B2 - フィルタリングされた画像データを使った超音波品質管理 - Google Patents

フィルタリングされた画像データを使った超音波品質管理 Download PDF

Info

Publication number
JP6772384B2
JP6772384B2 JP2019530546A JP2019530546A JP6772384B2 JP 6772384 B2 JP6772384 B2 JP 6772384B2 JP 2019530546 A JP2019530546 A JP 2019530546A JP 2019530546 A JP2019530546 A JP 2019530546A JP 6772384 B2 JP6772384 B2 JP 6772384B2
Authority
JP
Japan
Prior art keywords
image
symptom
piece
classification
stage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019530546A
Other languages
English (en)
Other versions
JP2019526814A (ja
Inventor
ハッカライネン，トニ
Original Assignee
ワルトシラ フィンランド オサケユキチュア
ワルトシラ フィンランド オサケユキチュア
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ワルトシラ フィンランド オサケユキチュア, ワルトシラ フィンランド オサケユキチュア filed Critical ワルトシラ フィンランド オサケユキチュア
Publication of JP2019526814A publication Critical patent/JP2019526814A/ja
Application granted granted Critical
Publication of JP6772384B2 publication Critical patent/JP6772384B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/04—Analysing solids
    • G01N29/06—Visualisation of the interior, e.g. acoustic microscopy
    • G01N29/0609—Display arrangements, e.g. colour displays
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/04—Analysing solids
    • G01N29/06—Visualisation of the interior, e.g. acoustic microscopy
    • G01N29/0654—Imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/04—Analysing solids
    • G01N29/06—Visualisation of the interior, e.g. acoustic microscopy
    • G01N29/0654—Imaging
    • G01N29/069—Defect imaging, localisation and sizing using, e.g. time of flight diffraction [TOFD], synthetic aperture focusing technique [SAFT], Amplituden-Laufzeit-Ortskurven [ALOK] technique
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/22—Details, e.g. general constructional or apparatus details
    • G01N29/30—Arrangements for calibrating or comparing, e.g. with standard objects
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/44—Processing the detected response signal, e.g. electronic circuits specially adapted therefor
    • G01N29/4409—Processing the detected response signal, e.g. electronic circuits specially adapted therefor by comparison
    • G01N29/4436—Processing the detected response signal, e.g. electronic circuits specially adapted therefor by comparison with a reference signal
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/44—Processing the detected response signal, e.g. electronic circuits specially adapted therefor
    • G01N29/4445—Classification of defects
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00—Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/44—Processing the detected response signal, e.g. electronic circuits specially adapted therefor
    • G01N29/449—Statistical methods not provided for in G01N29/4409, e.g. averaging, smoothing and interpolation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G01S15/89—Sonar systems specially adapted for specific applications for mapping or imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52023—Details of receivers
    • G01S7/52036—Details of receivers using analysis of echo signal for target characterisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/243—Classification techniques relating to the number of classes
    • G06F18/2431—Multiple classes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/776—Validation; Performance evaluation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2291/00—Indexing codes associated with group G01N29/00
    • G01N2291/02—Indexing codes associated with the analysed material
    • G01N2291/028—Material parameters
    • G01N2291/0289—Internal structure, e.g. defects, grain size, texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10132—Ultrasound image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30136—Metal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30164—Workpiece; Machine component
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06—Recognition of objects for industrial automation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Biochemistry (AREA)
  • Analytical Chemistry (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Acoustics & Sound (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Investigating Or Analyzing Materials By The Use Of Ultrasonic Waves (AREA)

Description

本発明はピースの超音波品質管理に関する。超音波プローブ（単数または複数）によって検査されるピースは、金属鋳造片のような金属ピースであることができる。超音波試験は比較方法であり、材料内部または試験されるオブジェクトの表面上の欠陥の徴候および正常な幾何学的形状の反射を検出する。よって、異なる音響インピーダンスの界面によって引き起こされる超音波信号の反射は徴候と称される。徴候は、受け容れ可能または拒否可能であることができる。手前壁面エコーおよび後方壁面エコーのようなオブジェクト幾何形状によって引き起こされる徴候は、受け容れ可能な幾何学的徴候と称される。
超音波は、金属の鋳造または鍛造された加工品のようなピースを、何らかの欠陥があるかどうか検査する既知の手段である。ピースを貫通する高周波数音波を利用するために、超音波プローブが、手動でまたは自動化された装置を用いてピースのまわりで動かされる。音波はピース内を伝搬し、音波の一部はピースの表面およびピースの欠陥から反射する。反射された音波は検出されることができ、よって欠陥を検出するために使われることができる。欠陥の位置、サイズおよび形状は反射波から推定できる。検査のために二つ以上の超音波プローブを利用することも知られている。
反射波は、検査のために使われる装置／システムのディスプレイ上に呈示される。検査者が、ディスプレイ上で、欠陥によって引き起こされた徴候をチェックする。そうするために、検査者は、適正な分析を行なうために多大な専門技能および経験をもつ必要がある。徴候が軽微であれば、検査者はピースを受け容れられるものとして分類できる。ピースが受け容れられない欠陥または多すぎる欠陥をもつ場合には、検査者は、規定されている基準により、そのピースを拒否されるものとして分類するべきである。
超音波スキャンは多くの金属と一緒に使うために好適であるが、粒径の大きなオーステナイト鋼のように、いくつかの金属材料は、超音波スキャンによって検査されるためには限界があることがある。
よって、結果的には、検査者の技量が、検査結果の適正さに影響する。これは、検査者がまだあまり多くの経験をもたない場合には特に、正常な実行または挙動における身体的および心理的混乱のため、問題になりうる。
本発明の目的は、上記の問題要因を軽減、あるいはさらには解消することである。この目的は、独立請求項に記載するようにして達成される。従属請求項は本発明の種々の実施形態を例示する。
本発明に基づくピースの品質を管理する超音波品質管理方法は、少なくとも一つの超音波プローブを利用してピースをスキャンする段階１０１と；前記スキャンから少なくとも一つの画像を形成する段階１０２と；少なくとも一つの超音波プローブを利用して参照ピースをスキャンする段階１０３と；参照ピースの前記スキャンから少なくとも一つの参照画像を形成する段階１０４とを含む。さらに、本方法は、前記少なくとも一つの参照画像の少なくとも一つの陰画像を形成する段階１０５と；前記少なくとも一つの画像および前記陰画像を利用することによって少なくとも一つの徴候画像を生成する段階１０６と；いくつかの画像フィルタを利用することによって少なくとも一つの徴候画像をフィルタリングする段階であって、各画像フィルタは、画像フィルタ固有の徴候レベル・データのほかは前記徴候画像のすべてのデータをフィルタリングする、段階１０７とをもつ。本方法はさらに、前記画像フィルタ固有の徴候レベル・データからいくつかの徴候レベル・データを提供する段階１０８と；前記いくつかの徴候レベル・データを利用して、前記ピースを受け容れられるまたは拒否されるものとして分類する段階１０９とをもつ。
本発明を利用することによって、検査されるべきピースの分類が、自動的に実行されるよう構成されることができる。さらに、この分類は、既知の分類方法を使うよりもずっと高速である。
下記では、付属の図面を参照することによって本発明がより詳細に記載される。
超音波デスキャンされるべきものと同様の参照ピースの例を示す図である。 参照ピースからの参照画像の例を示す図である。 参照画像からの陰画像の例を示す図である。 超音波によってスキャンされるべきピースの例を示す図である。 ピースからの画像の例を示す図である。 徴候画像の例を示す図である。 徴候を含む徴候画像のフィルタリングおよびいくつかの徴候レベル・データの適用の例を示す図である。 例示的なピースの徴候の分類を示す表の例を示す図である。 異なる分類基準が使われる二つのエリアをもつピースの例を示す図である。 本発明の方法を示すフローチャートの例を示す図である。 本発明に基づく装置の例を示す図である。
上記ですでに述べたように、超音波プローブまたはいくつかの超音波プローブによって検査されるべきピースはそれ自身としては既知である。図４は、検査されるべきピース９の例を示している。図４のピースは、より複雑なピースを使うよりもこの呈示を一層明確にするために、概略的なピースとなっていることを注意しておく。いずれにせよ、本発明は、超音波スキャンによって検査されることのできる任意のピースと一緒に使用できる。
図４のピースは、前方表面９４、後方表面９５、長方形穴９６、楕円穴９７およびL字形をもつ突起９８を有する。このピースは、穴および割れ目のようないくつかの内部欠陥１０をもつ。ピース９のスキャン後、超音波スキャンの反射を示す画像９Rが形成され、図５に示されるように呈示されることができる。図５は、前方表面からの反射９４R、後方表面からの反射９５R、楕円穴からの反射９７R、長方形穴からの反射９６R、突起からの反射９８Rおよび欠陥からの反射１０Rを示している。
図４および図５に示されるこのスキャン例において、超音波プローブは前方表面９４の上方において位置するまたは動かされる。見て取れるように、図５の反射画像は、それが意味するものを理解するためにはあまり明瞭でないことがある。よって、上述したように、図５から正しい情報を見出すためには、検査者の経験および技量が良好なレベルである必要がある。検査者に経験がある場合でも、反射画像の検査はかなり長期間続くことがあり、人的要因が解釈結果に影響することがありうる。
図１は、図４に示されるピースの参照ピース１を示している。参照ピース１も前方表面４、後方表面５、長方形穴６、楕円穴７およびL字形をもつ突起８を有する。だが参照ピースは欠陥をもたない、あるいは参照ピースの欠陥は受け容れられることのできる軽微な欠陥のみである。換言すれば、参照ピースは、欠陥のないまたは軽微な欠陥しかない、検査されるべきピースと同様のピースである。参照ピース１も、検査されるべきピースのようにスキャンされる。よって、参照ピースのためのスキャン装置は、検査されるべきピースのために使われた超音波装置と同じまたは同様である。結果として、超音波反射の参照画像２は、前方表面からの反射４R、後方表面からの反射５R、楕円穴からの反射７R、長方形穴からの反射６Rおよび突起からの反射８Rを示す。
参照画像２から陰画像が形成される。図３は、陰画像３を示している。この段階では、実際の反射画像を単純な仕方で示すために、図２、図３および図５に示される反射が単純なグレースケール・フォーマットで呈示されていることに注意しておくべきである。見て取れるように、陰画像３のグレースケール・レベルは図２のグレースケール・レベルに対して反対である。よって、陰画像３も、前方表面からの反射４N、後方表面からの反射５N、楕円穴からの反射７N、長方形穴からの反射６Nおよび突起からの反射８Nを示すが、参照画像２に関してネガになっている。
陰画像３は、検査されるピースの反射画像９Rと一緒に使用されて、図６に示される徴候画像を生成することができる。検査されるべきピースからの陰画像および反射画像は重ねられる。重なり合う画像の順序はどちらでもよい。結果として、徴候画像９Fが生成される。重なり合う陰画像および反射画像はピースの幾何学的な反射、すなわち前方表面からの反射９４、後方表面からの反射９５、長方形穴からの反射９６、楕円穴からの反射９７および突起からの反射９８を除去する。欠陥からの反射１０Rは徴候画像９Fに残る。
よって、この段階では、ピース９の徴候情報のみを含む画像またはデータが提供される。どのような欠陥が問題になっているのかをより正確に判別するために、いくつかのフィルタが使用されることができる。図７は、フィルタF1、F2、F3、F4およびF5の使用を示している。各フィルタは、画像フィルタ固有の徴候レベル・データのほかは、徴候画像９Fのすべてのデータをフィルタリングする。たとえば、フィルタは、サイズが直径5mm以上の平底穴を通過させることができる。他のフィルタは、サイズが直径4mmであるまたは5mm未満である平底穴を通過させてもよい。さらに他のフィルタは、サイズが直径3mmであるまたは4mm未満である平底穴を通過させてもよい。さらに他の基準が、平底穴の前記サイズとともに、あるいはその代わりに使われることができる。徴候画像のフィルタリングは、エコー応答強さ／パワー／エネルギー（装置画面および／または収集されたデータにおけるエコー高さ）に基づく。少量のパワー／エネルギー反射はF1のようなより低位のフィルタを通過する一方、より高いパワー／エネルギーはF4またはF5のようなより高位のフィルタを通過する。よって、成分受け容れ可能性のための基準は、各フィルタによって提供される情報に基づく。さらに、各フィルタは、そのフィルタを通過する反射を扱う特定の仕方をもつことがある。たとえば、フィルタは、通過する複数の反射が互いに近ければ一つのものとして組み合わせてもよい。よって、F4およびF5のような高位のフィルタは、F1のような低位のフィルタよりも大きなエリアからの反射データを組み合わせてもよい。この種の扱いは、それらのフィルタ後の徴候の扱いを明確にすることができる。
よって、ピースの受け容れ可能性は、徴候の量、徴候の寸法（サイズ）、徴候の組み合わされたエリア・サイズとしての徴候の量、あるいは受け容れ可能な組み合わせ規則をもって互いに近接している徴候の検出に基づくことができる／基づく。これらの徴候は少なくとも一つのフィルタを通過したものであり、ディスプレイ上に示される場合、該フィルタ（単数または複数）後にも見えるものである。組み合わせ規則は、フィルタ後の一つの徴候が徴候またはエリアとして検出される場合、ある寸法、たとえば0.20mm以内の近傍に別の徴候／徴候エリアが存在することは許されないよう、定義されることができる。画像データは画像フォーマットまたは別のデータ・フォーマットであることができる。このコンテキストにおいて、画像はデータとして理解されるべきである。データは、画像として表現されることができるが、他のいかなる好適なフォーマットで表現されてもよい。同じことはフィルタにも当てはまる。
図７の例は、画像９F1、９F2、９F3、９F4および９F5として示されているいくつかの徴候レベル・データをも示している。各徴候レベル・データは、その特定のフィルタを通過した徴候を示す。たとえば、フィルタF1は直径1mmあるまたは2mm未満のサイズをもつ平底穴を通過させるよう構成されている。さらに、穴の数は最大でたとえば16であり、全部で45mm2のような分類画像の、ある面積のみをカバーしているべきであり、二つの徴候の離間はたとえば互いから10mmより大きくなければならない。通過した穴は徴候１０R1として表現される。フィルタF2は直径2mmあるまたは3mm未満のサイズをもつ平底穴を通過させるよう構成されていてもよい。さらに、穴の数は最大でたとえば8であるべきであり、エリア・サイズおよび離間距離について、フィルタ１０Fについて定義されたのと同様のまたは変更された規則をもつ。通過した穴は徴候１０R2として表現される。フィルタF3は直径3mmあるまたは4mm未満のサイズをもつ平底穴を通過させるよう構成されていてもよい。さらに、穴の数は最大でたとえば4であるべきであり、エリア・サイズおよび離間距離について、フィルタ１０Fについて定義されたのと同様のまたは変更された規則をもつ。通過した穴は徴候１０R3として表現される。フィルタF4は直径4mmあるまたは5mm未満である平底穴を通過させるよう構成されていてもよい。さらに、穴の数は最大でたとえば2であるべきであり、エリア・サイズおよび離間距離について、フィルタ１０Fについて定義されたのと同様のまたは変更された規則をもつ。通過した穴は徴候１０R4として表現される。フィルタF5は直径5mm以上の平底穴を通過させるよう構成されていてもよい。ここで、サイズであれ、量であれ、カバーされる面積であれ、このフィルタ・レベルを通過する徴候は、受け容れられないと定義される。通過した穴は、徴候１０R5として表現される。この型の諸フィルタは、徴候反射率サイズについて異なる規則をもつことができ、検査されるエリアの重要性に依存して、いくつかの受け容れ不能なフィルタ・レベルがありうる。
見て取れるように、画像として示される徴候データは、人間の検査者のための明瞭なビューを与えるが、それは実は、まだ本発明のゴールではない。このレベルでは、やはりたとえば画像フォーマットで調べられることのできるいくつかの徴候レベルが達成される。前記のように、それぞれの徴候レベルは、穴および割れ目のサイズおよび徴候および徴候の近傍によってカバーされる徴候エリアの数のような徴候の深刻さを示す。よって、徴候レベル・データは、徴候のある種の型の情報、可能性としてはそれらの徴候の数および該徴候を記述する他のパラメータである。徴候の型は長さ、深さ、形状および／またはサイズなどに依存することができる。ある種の型の徴候は、ピースの品質に対して、ある影響をもつ。
さらに、本発明は、前記徴候レベル・データを利用して、検査されたピースを、受け容れられるまたは拒否されるものとして分類をもする。図７の例を参照するに、ピースは、フィルタF1を通過した徴候１０R1のみを有する場合に、受け容れられることができる。ピースは、フィルタF2を通過した、より大きな徴候１０R2を有する場合にも、受け容れられてもよい。
ピース９は、受け容れられるピースと拒否されるピースの間の境界ピースとして分類されることもできる。境界ピースは、それほど高い品質を要求しない、何らかのより低レベルの実装で使用できることがありうる。この例では、ピースは、フィルタF3を通過した徴候１０R3を有し、かつ、より大きな、または量、面積および／または徴候近接性において、より深刻な徴候を有さない場合に、境界ピースとして分類されることができる。
ピース９は、フィルタ５を通過する徴候（単数または複数）１０R5を有する場合に、拒否されることができる。ピースは、フィルタ４を通過した徴候１０R4のような、フィルタ５を通過したものよりも軽微な徴候を有する場合にも拒否されることができる。
図８および図９は、前記分類がどのようにも構成されることができるかの可能な例を示している。図９は、二つのエリアA1およびA2をもつ検査されるピース９を示している。図９における破線は、両エリアの間の境界を記述する。この例では、エリアA1は低応力エリアであり、エリアA2は高応力エリアである。品質要求は高応力のほうが高く、よって、エリアA1よりもエリアA2のほうが許容できる徴候は少ない。図８におけるテーブル８０は、エリアA2およびエリアA1についての受け容れ基準を示している。ピースのエリアA1は、フィルタF1を通過した徴候のみを有する場合、受け容れられることができる。ピースは、エリアA1においてフィルタF2を通過した、より大きな徴候を有する場合にも受け容れられてもよい。ピース９のエリアA1は、フィルタF3を通過した徴候を有し、より大きなまたはより深刻な徴候を有さない場合、境界ピースとして分類される。ピース９のエリアA1は、フィルタ５を通過する徴候（単数または複数）を有する場合、拒否される。ピースのエリアA1は、フィルタ４を通過した徴候のような、フィルタ５を通過したものよりも軽微な徴候を有する場合にも拒否されることができる。
ピース９の高応力エリアA2は、フィルタ３を通過する徴候（単数または複数）を有する場合に拒否される。ピースは、フィルタ２を通過した徴候のような、フィルタ３を通過したものよりも軽微な徴候を有する場合にも拒否されることができる。ピース９のエリアA2は、フィルタF1を通過した徴候を有し、より大きなまたはより深刻な徴候を有さない場合、境界ピースとして分類される。
ピース９の全体は、拒否されるエリアを一つでも有する場合には、拒否される。換言すれば、ピースは、拒否されるエリアを、あるいは可能性としては境界ケースも全く有さない場合に受け容れられる。ピースが、高応力エリアであると決定される二つ以上のエリアおよび／または低応力エリアであると決定される二つ以上のエリアを有していてもよいことも留意できる。高応力および低応力エリアに加えて、ピースは、通常応力エリアのような他の型のエリア（単数または複数）をさらに（あるいは代わりに）有していてもよい。
見て取れるように、ピースは異なる応力要求のいくつかのエリアに分割されることができる。この分割情報は、スキャンされた画像から徴候画像へ、最後にはピースの分類へと続く。
図１０は、本発明に基づく方法を示すフローチャートの例を示している。ピース９の品質を管理する超音波品質管理方法は、少なくとも一つの超音波プローブを利用してピースをスキャンする段階１０１と；前記スキャンから少なくとも一つの画像を形成する段階１０２とを含む。すでに述べたように、スキャン・プローブ（単数または複数）およびスキャン装置ならびに検査データ呈示フォーマットが使用されることができる。さらに、本方法は、少なくとも一つの超音波プローブを利用して参照ピースをスキャンする段階１０３と；参照ピースの前記スキャンから少なくとも一つの参照画像を形成する段階１０４とを含む。参照ピース９のスキャンおよび参照画像の形成は、ピースのスキャン１０１および画像の形成１０２の段階と同様になされる。さらに、本方法は、前記少なくとも一つの参照画像の少なくとも一つの陰画像を形成する段階１０５をもつ。この段階は、上記ですでに論じたようにできる。
段階１０３、１０４および１０５は、段階１０１および１０２より後に、あるいは図１０において破線１１０によって示されるように段階１０１および１０２より前に、実行できる。いくつかの解決策では、二つの同様の超音波プローブおよび装置が使用できるのであれば、段階１０１および１０２を段階１０３、１０４および１０５と同時にまたは部分的に同時に実行することが可能であることがありうる。
さらに、本方法は、前記少なくとも一つの画像および前記陰画像を利用することによって少なくとも一つの徴候画像を生成する段階１０６をもつ。上記のように、陰画像および検査されるべきピースの画像は、徴候情報のみをもつ画像を有するために、互いに重ねられる。
本方法はまた、いくつかの画像フィルタを利用することによって少なくとも一つの徴候画像をフィルタリングする段階であって、各画像フィルタは、画像フィルタ固有の徴候レベル・データのほかは前記徴候画像のすべてのデータをフィルタリングする、段階１０７をももつ。よって、このようにして、本方法は、前記画像フィルタ固有の徴候レベル・データからいくつかの徴候レベル・データを提供する段階１０８をももつ。
最後に、本方法は、前記いくつかのまたは一つの徴候レベル・データを利用して、前記ピースを受け容れられるまたは拒否されるものとして分類する段階１０９をもつ。分類段階はたとえば、徴候レベル・データが分類レベルに対応するよう配列されているテーブルを利用することができる。分類レベルは、最低限では、受け容れられるレベルおよび拒否されるレベルであるが、必要であれば、より多くの分類レベルが形成されることもできる。よって、分類段階１０９はさらに、いくつかの受け容れレベルおよびいくつかの拒否レベルを利用して前記ピースを分類するよう構成されることができ、および／または分類段階１０９はさらに、前記ピースを、受け容れおよび拒否の前記分類の間では、代わりに境界ピースであると分類するよう構成されることができる。
さらに、分類段階１０９は、徴候画像エリア固有の仕方で徴候画像からフィルタリングされた前記いくつかの徴候レベル・データを利用するサブ段階を有していてもよい。それにより、徴候画像は少なくとも二つのエリアをもち、分類はエリア固有の仕方で前記いくつかの徴候レベル・データを利用する。図９参照。
ピースの分類を人間にとって、より可視にするために、本方法はさらに、前記分類を、前記徴候画像（単数または複数）に対応する画像フォーマット（単数または複数）において分類固有色で示し、前記画像フォーマットを表示する段階を含んでいてもよい。たとえば、図７の徴候レベル画像９F1、９F2、９F3、９F4、９F5は異なる色または色の組み合わせで表現されることができる。画像９F1は淡青、画像９F2は青、画像９F3は緑、画像９F4は黄色、画像９F5は赤であることができる。よって、それぞれの色がある徴候レベル・データ（たとえばあるサイズ／反射率の徴候）を表わしうる。さらに、それぞれの色はある分類レベルをも示しうる。たとえば、図８の場合、拒否レベルは、低応力エリアおよび低応力エリアの両方について赤であってもよい。より小さな徴候拒否レベルについては、色は黄色であることができ、境界ピース・レベルについては、両方のエリア・カテゴリーにおいて緑であることができる。さらに、受け容れられるレベルおよびより大きな徴候受け容れレベルは、ピースの低応力エリアにおいて青および淡青として示されることができる。
前記のように、画像は、たとえばディスプレイにおいて示されることのできるデータである。画像データは別のフォーマットで扱われることもできることを理解しておくべきである。これは、画像データをプロセッサ、コンピュータおよび他の好適な装置において処理することを可能にする。前記フィルタも、もとのデータからのデータをフィルタリングして、ある型の徴候に関係するデータのようなある型のデータのみを通過させることができる。
図１１は、本発明に基づく超音波検査装置の例を概略的に示している。
本発明に基づく超音波検査装置は、少なくとも一つのプローブ１１１と、該プローブを動かすためのロボット装置１１２とを有することができる。プローブは、少なくとも一つの超音波源装置１１３に接続される。超音波源装置は、検査装置のいかなる好適な位置に位置されることもできる。プローブからの受領された超音波情報から検査データを提供するため、ある種のソフトウェアもしくは回路基板（単数または複数）１１５を有するコンピュータのようなプロセッサ装置１１４もある。検査データは画像（単数または複数）として表現できる。本検査装置は、上記および請求項１において記載された方法の段階１０３〜１０９を実行するためのソフトウェアもしくは回路基板（単数または複数）１１６をも有しており、該ソフトウェアまたは回路基板も、請求項２〜５に記載され散る段階／タスクを実行するよう構成されることができる。前記回路基板はたとえば集積回路（IC）であることができる。前記ソフトウェアまたは回路基板１１５、１１６が一つのエンティティーとして統合できることも可能である。
さらに、超音波検査装置は、検査されるべきピース（単数または複数）が位置されるプールを有していてもよく、プールは液体で満たされる。さらに、検査装置は、ピースのためのラック、ラックのためのレール、ピースを識別するためのコンピュータ・ビジョン装置、ピースのシリアル番号を読み取るためのリーダー装置、ピースをプールに入れる前に洗うための洗浄機、プール後にピースを乾かすための乾燥機およびピースを検査済みとしてマークするためのマーク機のような他の要素（単数または複数）をも有していてもよい。
本発明に基づく超音波品質管理は、多くの異なる実施形態において使用できる。本発明は、使用される超音波スキャン技法に依存しない。本発明が使用できるいくつかの異なるスキャン技法がある。たとえば、Aスキャン、Bスキャン、Cスキャン、フェーズドアレイ線形スキャンおよびフェーズドアレイ・セクター・スキャンである。一つの画像、一つの参照画像、一つの陰画像および一つの徴候画像が、ピースを分類するためには十分でありうるが、必要であればいくつかの画像を撮ることも可能である。対応する画像、すなわち前記画像、参照画像、陰画像および徴候画像は実際にはピースからの同じビューであるが異なる情報を含んでいるということを理解しておくべきである。よって、たとえば、いくつかの参照画像からいくつかの陰画像を形成するとき、形成されるそれぞれの陰画像は、ピースからのあるビューをもつ参照画像に固有である。陰画像は、いくつかの参照ピース・スキャン画像から構成されることができる。つまり、それぞれのスキャン・ネガ情報が一つの陰画像に組み合わされる。この場合、陰画像が使われる画像は、同様にいくつかのスキャン画像で構成されることができる。
本発明の方法は、超音波スキャンについて使用される好適な装置で実行されることができる。装置は、本発明の方法の段階を実行するようプログラムされることのできるプログラム可能なユニット（単数または複数）を有していてもよい。もう一つの可能な解決策は、装置が本発明の方法を実行することに専用のプリント回路基板（単数または複数）を有するというものである。
上記から、本発明が本稿に記載される実施形態に限定されず、独立請求項の範囲内で他の多くの異なる実施形態で実装されることができることが明白である。
いくつかの態様を記載しておく。
〔態様１〕
ピースの品質を管理する超音波品質管理方法であって、
少なくとも一つの超音波プローブを利用して前記ピースをスキャンする段階（１０１）と、
前記スキャンから少なくとも一つの画像を形成する段階（１０２）とを含み、
当該方法がさらに、
少なくとも一つの超音波プローブを利用して参照ピースをスキャンする段階（１０３）と、
前記参照ピースの前記スキャンから少なくとも一つの参照画像を形成する段階（１０４）と、
前記少なくとも一つの参照画像の少なくとも一つの陰画像を形成する段階（１０５）と、
前記少なくとも一つの画像および前記陰画像を利用することによって少なくとも一つの徴候画像を生成する段階（１０６）と、
いくつかの画像フィルタを利用することによって少なくとも一つの徴候画像をフィルタリングする段階であって、各画像フィルタは、画像フィルタ固有の徴候レベル・データのほかは前記徴候画像のすべてのデータをフィルタリングする、段階（１０７）と、
前記画像フィルタからいくつかの徴候レベル・データを提供する段階（１０８）と、
前記いくつかの徴候レベル・データを利用して、前記ピースを受け容れられるまたは拒否されるものとして分類する段階（１０９）とを含むことを特徴とする、
方法。
〔態様２〕
前記分類する段階（１０９）がさらに、いくつかの受け容れレベルおよびいくつかの拒否レベルを利用して前記ピースを分類するよう構成されることを特徴とする、態様１記載の方法。
〔態様３〕
前記分類する段階（１０９）がさらに、前記ピースを、受け容れおよび拒否の前記分類の間では、代替的に、境界ピースであると分類するよう構成されることを特徴とする、態様１または２記載の方法。
〔態様４〕
前記分類する段階（１０９）が、
徴候画像エリア固有の仕方で前記徴候画像からフィルタリングされた前記いくつかの徴候レベル・データを利用するサブ段階を含み、それにより、前記徴候画像は少なくとも二つのエリアをもち、前記分類はエリア固有の仕方で前記いくつかの徴候レベル・データを利用することを特徴とする、態様１ないし３のうちいずれか一項記載の方法。
〔態様５〕
当該方法がさらに、
前記分類を、前記徴候画像（単数または複数）に対応する画像フォーマット（単数または複数）において分類固有色で示す段階と、
前記画像フォーマットを表示する段階とを含む、
態様１ないし４のうちいずれか一項記載の方法。
〔態様６〕
プロセッサ装置（１１４）を有する超音波検査装置であって、前記プロセッサ装置が、態様１記載の方法の段階を実行するよう構成されたソフトウェアまたは回路基板（単数または複数）を有することを特徴とする、超音波検査装置。
〔態様７〕
前記ソフトウェアまたは回路基板（単数または複数）が、態様２ないし５のうちいずれか一項記載の方法の段階を実行するようにも構成されていることを特徴とする、態様６記載の超音波検査装置。

Claims (6)

  1. ピースの品質を管理する超音波品質管理方法であって、
    少なくとも一つの超音波プローブを利用して前記ピースをスキャンする段階（１０１）と、
    前記スキャンから少なくとも一つの画像を形成する段階（１０２）とを含み、
    当該方法がさらに、
    少なくとも一つの超音波プローブを利用して参照ピースをスキャンする段階（１０３）と、
    前記参照ピースの前記スキャンから少なくとも一つの参照画像を形成する段階（１０４）と、
    前記少なくとも一つの参照画像の少なくとも一つの陰画像を形成する段階（１０５）と、
    前記少なくとも一つの画像および前記陰画像を利用することによって少なくとも一つの徴候画像を生成する段階（１０６）と、
    いくつかの画像フィルタを利用することによって少なくとも一つの徴候画像をフィルタリングする段階であって、各画像フィルタは、画像フィルタ固有の徴候レベル・データのほかは前記徴候画像のすべてのデータをフィルタリングする、段階（１０７）と、
    前記画像フィルタからいくつかの徴候レベル・データを提供する段階（１０８）と、
    前記いくつかの徴候レベル・データを利用して、前記ピースを受け容れられるまたは拒否されるものとして分類する段階（１０９）とを含み、
    前記分類する段階（１０９）は、
    徴候画像エリア固有の仕方で前記徴候画像からフィルタリングされた前記いくつかの徴候レベル・データを利用するサブ段階を含み、それにより、前記徴候画像は少なくとも二つのエリアをもち、前記分類はエリア固有の仕方で前記いくつかの徴候レベル・データを利用し、
    前記徴候画像エリアは応力要求に基づいて定義される、
    方法。
  2. 前記分類する段階（１０９）がさらに、いくつかの受け容れレベルおよびいくつかの拒否レベルを利用して前記ピースを分類するよう構成されることを特徴とする、請求項１記載の方法。
  3. 前記分類する段階（１０９）がさらに、前記ピースを、受け容れおよび拒否の前記分類の間では、代替的に、境界ピースであると分類するよう構成されることを特徴とする、請求項１または２記載の方法。
  4. 当該方法がさらに、
    前記分類を、前記徴候画像（単数または複数）に対応する画像フォーマット（単数または複数）において分類固有色で示す段階と、
    前記画像フォーマットを表示する段階とを含む、
    請求項１ないし３のうちいずれか一項記載の方法。
  5. プロセッサ装置（１１４）および超音波プローブを有する超音波検査装置であって、前記超音波プローブが、請求項１記載の方法のスキャンする諸段階を実行するよう構成されたソフトウェアまたは回路基板を有し、前記プロセッサ装置が、請求項１記載の方法の他の段階を実行するよう構成されたソフトウェアまたは回路基板（単数または複数）を有することを特徴とする、超音波検査装置。
  6. 前記ソフトウェアまたは回路基板（単数または複数）が、請求項２ないし４のうちいずれか一項記載の方法の段階を実行するようにも構成されていることを特徴とする、請求項５記載の超音波検査装置。
JP2019530546A 2016-11-29 2016-11-29 フィルタリングされた画像データを使った超音波品質管理 Active JP6772384B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/FI2016/050838 WO2018100225A1 (en) 2016-11-29 2016-11-29 An ultrasonic quality control using filtered image data

Publications (2)

Publication Number Publication Date
JP2019526814A JP2019526814A (ja) 2019-09-19
JP6772384B2 true JP6772384B2 (ja) 2020-10-21

Family

ID=57629594

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019530546A Active JP6772384B2 (ja) 2016-11-29 2016-11-29 フィルタリングされた画像データを使った超音波品質管理

Country Status (7)

Country Link
US (1) US11506635B2 (ja)
EP (1) EP3548883B1 (ja)
JP (1) JP6772384B2 (ja)
KR (1) KR102048664B1 (ja)
CN (1) CN109313163B (ja)
CA (1) CA3038607C (ja)
WO (1) WO2018100225A1 (ja)

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61128162A (ja) * 1984-11-28 1986-06-16 Canon Inc 超音波探傷信号処理装置
JPS62261955A (ja) * 1986-05-09 1987-11-14 Toshiba Corp 超音波探傷装置
JPH0580034A (ja) * 1991-09-19 1993-03-30 Tokimec Inc 超音波探傷装置
EP1148332B1 (en) * 2000-04-18 2005-11-30 The University of Hong Kong Method of inspecting images to detect defects
JP4061289B2 (ja) * 2004-04-27 2008-03-12 独立行政法人科学技術振興機構 画像検査方法及び装置
JP2006300615A (ja) * 2005-04-18 2006-11-02 Umc Japan 外観検査装置及び外観検査方法
US7570794B2 (en) * 2005-09-02 2009-08-04 Gm Global Technology Operations, Inc. System and method for evaluating a machined surface of a cast metal component
US7676077B2 (en) 2005-11-18 2010-03-09 Kla-Tencor Technologies Corp. Methods and systems for utilizing design data in combination with inspection data
FR2903187B1 (fr) 2006-06-30 2008-09-26 Setval Sarl Controle non destructif, en particulier pour des tubes en cours de fabrication ou a l'etat fini
US7995829B2 (en) * 2007-08-01 2011-08-09 General Electric Company Method and apparatus for inspecting components
CN101403702B (zh) * 2008-11-17 2011-06-08 天津理工大学 一种飞机地面强度试验中疲劳裂纹智能监测方法及装置
US8175373B2 (en) 2009-02-16 2012-05-08 Kla-Tencor Corporation Use of design information and defect image information in defect classification
CN101799914A (zh) * 2009-12-17 2010-08-11 北京交通大学 基于二维递归滤波的超声波脂肪肝散射粒子提取方法及系统
CN102262093A (zh) * 2010-05-24 2011-11-30 张爱明 基于机器视觉的印花机在线检测方法
CN103329167B (zh) * 2010-07-30 2016-08-17 克拉-坦科股份有限公司 基于区域的虚拟傅里叶滤波器
CN101984346A (zh) * 2010-10-19 2011-03-09 浙江大学 基于低通滤波的水果表面缺陷检测方法
CN102183525A (zh) * 2011-01-20 2011-09-14 单宝华 基于ccd阵列摄像技术的桥梁表观状态自动检测装置及其方法
DE102013001808A1 (de) * 2013-02-04 2014-08-07 Ge Sensing & Inspection Technologies Gmbh Verfahren zur zerstörungsfreien Prüfung des Volumens eines Prüflings sowie zur Ausführung eines solchen Verfahrens eingerichtete Prüfvorrichtung
JP2014163805A (ja) * 2013-02-26 2014-09-08 Hitachi Ltd 超音波検査方法および装置

Also Published As

Publication number Publication date
CN109313163A (zh) 2019-02-05
KR102048664B1 (ko) 2019-11-25
US20190265198A1 (en) 2019-08-29
WO2018100225A1 (en) 2018-06-07
US11506635B2 (en) 2022-11-22
EP3548883B1 (en) 2020-09-30
CA3038607C (en) 2021-02-16
CN109313163B (zh) 2021-04-13
KR20190017892A (ko) 2019-02-20
EP3548883A1 (en) 2019-10-09
CA3038607A1 (en) 2018-06-07
JP2019526814A (ja) 2019-09-19

Similar Documents

Publication Publication Date Title
US11010890B2 (en) Method for the non-destructive testing of the volume of a test object and testing device configured for carrying out such a method
EP2487487B1 (en) Determination support device for ultrasonic inspection, determination support method, determination support program, and computer-readable recording medium having said determination support program recorded thereon
WO2021251064A1 (ja) 情報処理装置、判定方法、および情報処理プログラム
JP6754155B1 (ja) 教師データ生成装置、検査装置およびコンピュータプログラム
WO2021250986A1 (ja) 検査装置、検査方法、および検査プログラム
Rathod et al. Comparative analysis of NDE techniques with image processing
JP6772384B2 (ja) フィルタリングされた画像データを使った超音波品質管理
JPH11118775A (ja) 超音波検査装置
JPH04320958A (ja) 製品の音響による検査方法
JPH08110326A (ja) ニューラルネットワークシステムにおけるパターン生成方法
JP2020135203A (ja) 検査システム、検査方法および検査画像解析方法
CN110702791B (zh) 一种超声成像检测零件边缘的方法
Tohmyoh et al. Extraction of the outer edge of spot welds from the acoustic image with the aid of image processing
JP2010169508A (ja) Ｘ線検査装置
WO2023111600A1 (en) Automated inspection system
JP2024021726A (ja) 欠陥解析装置、欠陥解析方法、プログラムおよび学習装置
JP2022158647A (ja) 情報処理装置、判定方法、および判定プログラム
JP3780184B2 (ja) 被検査物の目視検査前検査方法および目視検査前検査装置
JPH02162254A (ja) 多層樹脂成形品の非破壊検査方法
Stultz et al. RAM Flaws Out of Products
JPH0424551A (ja) 超音波探傷装置

Legal Events

Date Code Title Description
A529 Written submission of copy of amendment under article 34 pct

Free format text: JAPANESE INTERMEDIATE CODE: A529

Effective date: 20190220

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200923

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200930

R150 Certificate of patent or registration of utility model

Ref document number: 6772384

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250