JP7022520B2 - ハイパースペクトルボアスコープシステム - Google Patents

ハイパースペクトルボアスコープシステム Download PDF

Info

Publication number
JP7022520B2
JP7022520B2 JP2017110742A JP2017110742A JP7022520B2 JP 7022520 B2 JP7022520 B2 JP 7022520B2 JP 2017110742 A JP2017110742 A JP 2017110742A JP 2017110742 A JP2017110742 A JP 2017110742A JP 7022520 B2 JP7022520 B2 JP 7022520B2
Authority
JP
Japan
Prior art keywords
electromagnetic radiation
group
borescope
wavelengths
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017110742A
Other languages
English (en)
Other versions
JP2018025541A (ja
Inventor
ウィリアム ピー. モッツァー,
ギャリー アーネスト ジョージソン,
モルテザ サファイ,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Boeing Co
Original Assignee
Boeing Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Boeing Co filed Critical Boeing Co
Publication of JP2018025541A publication Critical patent/JP2018025541A/ja
Application granted granted Critical
Publication of JP7022520B2 publication Critical patent/JP7022520B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/25Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/954Inspecting the inner surface of hollow bodies, e.g. bores
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476Non-optical details, e.g. housings, mountings, supports
    • G02B23/2484Arrangements in relation to a camera or imaging device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/51Housings
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N2021/8472Investigation of composite materials
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/94Investigating contamination, e.g. dust
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B5/00Optical elements other than lenses
    • G02B5/20Filters
    • G02B5/28Interference filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30156Vehicle coating
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Astronomy & Astrophysics (AREA)
  • Health & Medical Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Pathology (AREA)
  • Immunology (AREA)
  • Signal Processing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biochemistry (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Spectrometry And Color Measurement (AREA)

Description

本開示は、広くは、航空機に関し、特に、航空機の検査システムに関する。更により具体的には、本開示は、ボアスコープシステムを使用して航空機を検査するための方法及び装置に関する。
航空機の設計及び製造において複合材料の割合はより高くなっている。航空機の重量を減らすために、複合材料が航空機で使用される。この軽量化により、ペイロード能力及び燃費効率などの性能特性が改善される。更に、複合材料により、航空機の様々な構成要素の寿命が延びている。
複合材料は、2つ以上の機能的な構成要素を組み合わせることにより作成される、頑丈かつ軽量な材料である。例えば、複合材料は、ポリマー樹脂マトリクスにおいて結合した強化繊維を含み得る。繊維は単方向であり得るか、或いは、織布又はファブリックの形態を採り得る。繊維及び樹脂が、複合材料を形成するために配置及び硬化される。
更に、航空宇宙複合材料構造物を作成するために複合材料を使用することは、潜在的に、航空機の部分がより大きなピース又はセクションにおいて製造されることを可能にする。例えば、航空機の胴体が、航空機の胴体を形成する複数の円筒形セクションで作成され得る。その他の例としては、限定しないが、複数の翼セクションが接合されて翼が形成されるか、或いは、複数の安定板セクションが接合されて安定板が形成されることが含まれる。
複合材料構造物の製造において、複合材料の層は、通常、ツール上にレイアップされる。層はシート状の繊維からなり得る。上記のシートは、ファブリック、テープ、トウ、又は他の好適な形態を採り得る。場合によっては、樹脂がシートの中に注入されてもよく、又は予め含浸されてもよい。これらの種類のシートは、一般的に、プリプレグと呼ばれる。
プリプレグの異なる層は、異なる向きにレイアップすることができ、製造されている複合材料構造物の厚さに応じて、異なる数の層が使用され得る。異なる層がレイアップされた後に、それらの層は、温度及び圧力に晒されて強化及び硬化され、それによって、最終的な複合材料構造物を形成する。
複合材料構造物の検査は、プリプレグの層のレイアウトの間、複合材料構造物を硬化させる前に複合材料構造物が形成された後、及び複合材料構造物を硬化させた後などの、異なる時において行われ得る。検査は、x線検査システム、超音波検査システム、及び他の種類の非破壊検査システムを使用して実行され得る。
他の種類の検査システムに加えて、オペレータが複合材料構造物を視覚的に検査する、視覚的な検査も行われ得る。視覚的な検査は、異物デブリ(FOD)、層間剥離、又は他の不具合などの不具合の位置を特定するために行われ得る。これらの種類の検査は、内装又は他の位置にアクセスすることが制限されるので、一部の複合材料構造物では望まれるよりも困難であり得る。例えば、複合材料の翼では、スパー、リブ、及び外板パネルが、個別に形成され、複合材料の翼を共硬化させる前に、複合材料の翼を形成するように配置され得る。硬化の前に及び硬化の後に複合材料の翼の内装を視覚的に検査することは、望まれるよりも困難であり得る。
したがって、上述の問題点のうちの少なくとも1つに加え、起こり得る他の問題点も考慮した方法及び装置を有することが望ましいだろう。例えば、制限されたアクセス位置において複合材料構造物を検査することに伴う技術的な問題を克服する、方法及び装置を有することが望ましいだろう。
本開示の一実施形態は、ボアスコープ検査ハウジング、ボアスコープ検査ハウジングに関連付けられた電磁放射線放出システム、フィルタ、及びセンサアレイを備えた装置を提供する。電磁放射線放出システムは、電磁放射線を放出するように構成されている。フィルタは、ボアスコープ検査ハウジングの内側に配置されている。フィルタは、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成されている。応答は、ボアスコープ検査ハウジングの開口部を通して受信される。センサアレイは、ボアスコープ検査ハウジングの内側のフィルタの後ろに配置されている。センサアレイは、フィルタを通過した幾つかの波長からデータを生成するように構成されたセンサを備え、構造物の表面のハイパースペクトル解析を可能にする。
本開示の別の一実施形態は、ハイパースペクトルボアスコープシステムを提供する。ハイパースペクトルボアスコープシステムは、ボアスコープのためのボアスコープ検査ハウジング、ボアスコープのためのボアスコープ検査ハウジングに関連付けられたチューブ、ボアスコープ検査ハウジングに関連付けられた電磁放射線放出システム、ボアスコープ検査ハウジングの内側に配置されたフィルタ、ボアスコープ検査ハウジングの内側のフィルタの後ろに配置されたセンサアレイ、及びセンサアレイと通信する解析器を備えている。電磁放射線放出システムは、電磁放射線を放出するように構成されている。フィルタは、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成されている。応答は、ボアスコープ検査ハウジングの開口部を通して受信される。センサアレイは、フィルタを通過した幾つかの波長からデータを生成するように構成されたセンサを備えている。解析器は、センサアレイに構造物の表面に向けられた電磁放射線から受信した応答からデータを生成させ、肉眼では視認できない一群の不具合を示す一群のグラフィカルインジケータを有する、構造物の表面の2次元画像を生成するように構成されている。
更に別の本開示の一実施形態は、構造物を検査するための方法を提供する。電磁放射線は、電磁放射線放出システムから構造物の表面に送信される。ボアスコープ検査ハウジングの内側に配置されたフィルタを使用して、電磁放射線に対する応答がフィルタリングされる。フィルタは、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成されている。センサアレイを使用して、フィルタを通過した幾つかの波長からデータが生成される。肉眼では視認できない一群の不具合を示す一群のグラフィカルインジケータを有する、構造物の表面の2次元画像が生成される。2次元画像は、センサアレイからのデータを使用して生成される。
これらの特徴及び機能は、本開示の様々な実施形態で単独で実現してもよいし、更に別の実施形態で組み合わせてもよい。以下の説明及び図面を参照して、これらの実施形態の更なる詳細を理解することができる。
例示的な実施形態の特徴と考えられる新規の特性は、添付した特許請求の範囲で明記される。しかし、例示的な実施形態と、好ましい使用モードと、更にはその目的及び特徴とは、添付図面を参照して本開示の例示的な実施形態の後述の詳細な説明を読むことにより最もよく理解されるであろう。
例示的な一実施形態による、航空機の検査環境の図である。 例示的な一実施形態による、検査環境のブロック図である。 例示的な一実施形態による、ボアスコープシステムの波長ウィンドウィング(wavelength windowing)のブロック図である。 例示的な一実施形態による、ボアスコープシステムの背景閾値化(background thresholding)のブロック図である。 例示的な一実施形態による、ボアスコープ検査システムのボアスコープヘッドの図である。 例示的な一実施形態による、構造物を検査するためのプロセスのフローチャートである。 例示的な一実施形態による、センサアレイのセンサを制御するためのプロセスのフローチャートである。 例示的な一実施形態による、電磁放射線放出システムの電磁放射線源を制御するためのプロセスのフローチャートである。 例示的な一実施形態による、データ処理システムのブロック図である。 例示的な一実施形態よる、航空機の製造及び保守方法のブロック図である。 例示的な一実施形態が実装され得る、航空機のブロック図である。
例示的な実施形態は、1以上の種々の検討事項を認識し考慮する。例えば、例示的な実施形態は、複合材料構造物が制限されたアクセスを有する位置を有するときに、視覚的な検査が望まれるよりも困難であるということを認識し考慮する。例示的な実施形態は、ボアスコープが視覚的な検査を実行するために使用され得ることも認識し考慮する。
例えば、例示的な実施形態は、オペレータが複合材料構造物の表面上の不具合を探すためにボアスコープを使用し得ることを認識し考慮する。しかし、例示的な実施形態は、現在使用されているボアスコープが複合材料構造物の表面を検査する限られた能力を提供するのみであることを認識し考慮する。例示的な実施形態は、現在使用されているボアスコープが、オペレータが肉眼で視認できる不具合を視認することを可能にするのみであることも認識し考慮する。
したがって、例示的な実施形態は、複合材料構造物を含む航空機の構造物の不具合を検査するための方法及び装置を提供する。例示的な一実施例では、装置が、ボアスコープ検査ハウジング、電磁放射線放出システム、フィルタ、及びセンサアレイを備えている。電磁放射線放出システムは、検査ハウジングに関連付けられ、その検査ハウジング内で、電磁放射線源が、電磁放射線を放出するように構成されている。フィルタは、検査ハウジングの内側に配置され、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成されている。応答は、検査ハウジングの開口部を通して受信される。センサアレイは、検査ハウジングの内側のフィルタの後ろに配置され、センサアレイは、フィルタを通過した幾つかの波長からデータを生成するように構成されたセンサを備え、それによって、構造物の表面のハイパースペクトル解析を可能にする。
一構成要素が別の一構成要素に「関連」付けられているときに、その関連は物理的な関連である。例えば、電磁放射線放出システムなどの第1の構成要素は、第2の構成要素に固定されること、第2の構成要素に接合されること、第2の構成要素に取り付けられること、第2の構成要素に溶接されること、第2の構成要素に締結されること、又は何らかの他の適切なやり方で第2の構成要素に連結されること、のうちの少なくとも1つにより、ボアスコープ検査ハウジングなどの第2の構成要素に関連付けられ得る。第1の構成要素は、第3の構成要素を使用して第2の構成要素に連結されてもよい。第1の構成要素は、第2の構成要素の一部分として、第2の構成要素の延長部として、又はその両方として形成されることにより、第2の構成要素に物理的に関連付けられていると考えることもできる。
次に、図面、特に図1を参照すると、例示的な一実施形態による航空機の検査環境の図が描かれている。この描かれている実施例では、航空機の検査環境100が、複合材料の翼102を含む。複合材料の翼102は、硬化されていない形態にあり、露出された図として示されている。複合材料の翼102を航空機で使用されるための硬化された形態で配置するために、複合材料の翼102を形成する種々の部品は共硬化され得る。
この例示的な実施例では、オペレータ104が、複合材料の翼102の検査を実行する人間のオペレータである。オペレータ104は、複合材料の翼102を検査するためにボアスコープシステム106を使用する。描かれているように、ボアスコープシステム106は、ボアスコープ検査ヘッド108、ケーブル110、コンピュータ112、及びディスプレイ装置114を含む。
描かれているように、オペレータ104は、ケーブル110を使用して、ボアスコープ検査ヘッド108を複合材料の翼102の内装116の中へ移動させる。複合材料の翼102のこの露出された図で見られるように、ケーブル110は、複合材料の翼102の内装116にボアスコープ検査ヘッド108を配置するために使用されることに加えて、検査ヘッド108とコンピュータ112との間の接続を提供する。
この例示的な実施例では、ボアスコープ検査ヘッド108が、複合材料の翼102の内装116の表面についての情報を生成し、その情報をコンピュータ112に送信する。この情報は、内装116の表面のハイパースペクトル解析を実行するために使用され得る。画像が、生成されて、ハイパースペクトル解析を可視化することにおいて使用されるためのディスプレイ装置114で表示され得る。
このやり方では、肉眼では視認できない不具合が、ボアスコープシステム106を使用して特定され得る。更に、ボアスコープシステム106は、ハイパースペクトル解析なしに、複合材料の翼102の内装116の表面の画像を表示するためにも使用され得る。
図1の航空機の検査環境100の図は、例示的な一実施形態として提供されており、他の例示的な実施形態が実装され得るやり方に対する限定を企図するものではない。例えば、ボアスコープシステム106は、制限されたアクセスを有する表面に加えて、より容易にアクセス可能な表面を検査するためにも使用され得る。別の一実施例として、ボアスコープシステム106は、複合材料の翼102以外の他の構造物を検査するためにも使用され得る。例えば、ボアスコープシステム106は、複合材料、金属、プラスチック、若しくは何らかの他の適切な材料のうちの少なくとも1つから成り得る、外板パネル、胴体、主翼ボックス、スパー、又は何らかの他の適切な構造物を検査するためにも使用され得る。
本書で使用される場合、列挙された項目と共に使用される「~のうちの少なくとも1つ」という表現は、列挙された項目のうちの1つ以上のものによる種々の組み合わせが使用されてもよく、列挙された各項目のうちの1つだけが必要とされてもよいということを意味する。換言すると、「~のうちの少なくとも1つ」とは、項目の任意の組み合わせ、及びいくつかの項目が、列挙された中から使用され得ることを意味するが、列挙された項目の全てが必要とされる訳ではないことを意味する。項目とは、特定の対象物、物品、またはカテゴリであり得る。
例えば、「項目A、項目B、又は項目Cのうちの少なくとも1つ」は、項目A、項目A及び項目B、又は項目Bを含み得るが、それらに限定されるものではない。この例は、項目A、項目B、及び項目C、又は項目B及び項目Cをも含み得る。無論、これらの項目の任意の組み合わせが存在し得る。ある例示的な実施例では、「少なくとも1つ」が、例えば、2つの項目A、1つの項目B、及び10個の項目C、4つの項目B及び7つの項目C、又は他の適切な組み合わせであり得るが、それらに限定されるものではない。
次に、図2を参照すると、例示的な一実施形態による、検査環境のブロック図が描かれている。図1の航空機の検査環境100は、この図面でブロック形態で示されている検査環境200の例示的な一実施態様である。
描かれているように、オペレータ202は、ボアスコープシステム204を使用してプラットフォーム208の構造物206を検査する人間のオペレータである。この例示的な実施例では、プラットフォーム208が航空機210の形態を採る。
この例示的な実施例では、オペレータ202が、ボアスコープシステム204を使用して、一群の不具合212が構造物206の一群の表面214上に存在するか否かを判定し得る。構造物206は、幾つかの異なる形態を採り得る。例えば、構造物206は、硬化されていない複合材料構造物、硬化された複合材料構造物、部品、アセンブリ、翼、複合材料外板、水平安定板、スパー、リブ、プリプレグの層、エンジンのハウジング、主翼ボックス、パイプ、チューブ、又は何らかの他の適切な種類の構造物のうちの1つから選択され得る。構造物206の一群の表面は、ボアスコープシステム204なしにアクセスすることが困難な一群の位置216を含み得る。
この例示的な実施例では、一群の不具合212が、幾つかの異なる形態を採り得る。例えば、一群の不具合212は、異物デブリ(FOD)、層間剥離、汚れ、又は何らかの他の望ましくない状態のうちの少なくとも1つから選択され得る。望ましくない状態は、構造物206の仕様を満たさない状態であり得る。
更に、一群の不具合212は、検査されている構造物にとって有害ではないかもしれない。代わりに、一群の不具合212は、課題又は問題の存在を示し得る。例えば、一群の不具合212は、通常において燃料残留物が見つかるべきではない第1の構造物の表面上の位置における燃料残留物の存在であり得る。この燃料残留物は、第2の構造物の漏れの存在を示し得る一群の不具合212のうちの1つの不具合である。
例示的な実施例では、一群の不具合212が、汚染物質213を含み得る。汚染物質213は、構造物206が望ましいように性能を発揮しないことをもたらす、任意の物理的、化学的、生物学的、又は放射性物質である。例えば、性能における低減は、強度、耐食性、滑らかさ、審美性、又は何らかの他の種類の性能における低減であり得る。
この例示的な実施例では、ボアスコープシステム204が、幾つかの異なる構成要素を有する。描かれているように、ボアスコープシステム204は、ボアスコープ検査ハウジング218、細長部材220、解析器222、及びディスプレイシステム224を備える。
細長部材220は、ボアスコープ検査ハウジング218と解析器222とを互いに連結させる。特定の実施態様に応じて、細長部材220は、柔軟であり又は堅い場合もある。例えば、細長部材220は、堅い細長部材、柔軟な細長部材、ケーブル、チューブ、パイプ、又は何らかの他の種類の細長部材のうちの1つから選択され得る。細長部材220は、ボアスコープ検査ハウジング218を、一群の表面214上の一群の位置216へ移動させるために、オペレータ202によって使用され得る。
この例示的な実施例では、ボアスコープ検査ハウジング218が、幾つかの異なる構成要素のためのプラットフォームとして働く。描かれているように、これらの構成要素は、電磁放射線放出システム226、フィルタ228、及びセンサアレイ230を含む。これらの構成要素とボアスコープ検査ハウジング218は、ボアスコープ検査ヘッド231を形成する。
ボアスコープ検査ハウジング218は、任意の数の材料から成り得る。例えば、ボアスコープ検査ハウジング218は、アルミニウム、スチール、プラスチック、複合材料、チタニウム、ポリカーボネート、又は何らかの他の適切な材料から選択された1以上の材料から成り得る。選択される材料は、ボアスコープ検査ハウジング218が使用される環境又は他の要因に基づいて選択される。
電磁放射線放出システム226は、ボアスコープ検査ハウジング218に関連付けられている。描かれているように、電磁放射線放出システム226は、電磁放射線232を放出するように構成されている。この例示的な実施例では、電磁放射線放出システム226が、電磁放射線232を放出する一群の電磁放射線源234を備えている。
描かれているように、フィルタ228は、ボアスコープ検査ハウジング218の内側に配置されている。フィルタ228は、構造物206の表面214のうちの表面240に向けられた電磁放射線放出システム226に対する応答238の幾つかの波長236を通過させるように構成されている。フィルタ228は、この例示的な実施例では干渉フィルタである。応答238は、ボアスコープ検査ハウジング218の開口部242を通して受信される。
例示的な実施例では、センサアレイ230が、ボアスコープ検査ハウジング218の内側のフィルタ228の後ろに配置されている。センサアレイ230は、フィルタ228を通過した幾つかの波長236からデータ246を生成するように構成された、センサ244を備える。センサ244は、幾つかの異なる形態を採り得る。例えば、センサ244は、電荷結合素子、相補型金属酸化膜半導体素子、アンチモン化インジウム(InSb)半導体素子、水銀カドミウムテルル(HgCdTe)半導体素子、又は電磁放射線を検出する何らかの他の適切な種類の素子のうちの少なくとも1つから選択され得る。
本明細書で使用される際に、項目に関連して使用されるときの「幾つかの」は、1以上の項目を意味する。例えば、「幾つかの波長236」は、1以上の波長236である。
データ246の生成は、解析器222による構造物206の表面240のハイパースペクトル解析248を可能にする。例示的な一実施例では、ハイパースペクトル解析248が、波長236のスペクトルにおける情報を解析することを含む。
解析の対象となり得る一群の波長236を得るために、応答238の波長236がフィルタリングされる。波長236のスペクトルは、可視、近赤外、紫外、マイクロ波、又は他の適切な波長のうちの少なくとも1つを含み得る。
例えば、解析器222は、センサアレイ230と通信し、それによって、解析器222が、センサアレイ230の動作を制御し、センサアレイ230によって生成されたデータ246を受信することができる。解析器222は、電線、光ファイバー、又は無線接続のうちの少なくとも1つを使用して、センサアレイ230と通信する。通信が、電線又は光ファイバーなどの物理的な通信リンクを用いて実施されるときに、その通信リンクは、細長部材220を通って延在し得る。
描かれているように、解析器222は、センサアレイ230に、構造物206の表面240に向けられた電磁放射線232から受信した応答238からデータ246を生成させるように構成されている。解析器222は、肉眼では視認できない一群の不具合212を示す一群のグラフィカルインジケータ254を有する、構造物206の表面240の2次元画像250を生成するようにも構成されている。この実施例では、2次元画像252が、構造物206を含み得る。2次元画像250の一群のグラフィカルインジケータ254の位置は、一群の不具合212が特定された構造物206上の位置216であり得る。更に、一群のグラフィカルインジケータ254は、不具合が存在しなかったときの表示も含み得る。
一群のグラフィカルインジケータ254は、幾つかの異なる形態を採り得る。例えば、一群のグラフィカルインジケータ254は、不具合の存在若しくは不存在を示す、色、強調、テキスト、アイコン、点滅するグラフィック、又は何らかの他の適切なグラフィカルインジケータのうちの少なくとも1つから選択され得る。
解析器222は、ソフトウェア、ハードウェア、ファームウェア、又はこれらの組み合わせで実装され得る。ソフトウェアが使用されるときに、解析器222によって実行される動作は、プロセッサユニットなどのハードウェア上で動作するよう構成されたプログラムコードとして実装されてもよい。ファームウェアが使用されるときに、解析器222によって実行される動作は、プログラムコード及びデータに実装され且つ永続メモリに保存されて、プロセッサユニット上で実行され得る。ハードウェアが採用されるときに、ハードウェアは、解析器222の動作を実行するために動作する回路を含み得る。
例示的な実施例では、ハードウェアが、回路システム、集積回路、特定用途向け集積回路(ASIC)、プログラマブル論理デバイス、又は幾つかの動作を実施するよう構成された何らかの他の適切な種類のハードウェアのうちの少なくとも1つから選択された形態を採り得る。プログラマブル論理装置を用いる場合、装置は、幾つかの動作を実行するように構成されてよい。装置は、幾つかの動作を実行するよう、後で再構成されてもよく、又は恒久的に構成されてもよい。例えば、プログラム可能論理装置は、プログラム可能論理アレイ、プログラム可能アレイ論理、フィールドプログラム可能論理アレイ、フィールドプログラム可能ゲートアレイ、及び他の適切なハードウェア装置を含む。加えて、これらのプロセスは、無機構成要素と統合された有機構成要素に実装され、且つ、全体が人間以外の有機構成要素で構成され得る。例えば、プロセスは、有機半導体の回路として実装され得る。
この実施例では、解析器222が、コンピュータシステム256に実装され得る。コンピュータシステム256は、物理的なハードウェアシステムであり、1以上のデータ処理システムを含む。2つ以上のデータ処理システムが存在するときに、それらのデータ処理システムは、通信媒体を使用して互いに通信する。通信媒体は、ネットワークであり得る。データ処理システムは、コンピュータ、サーバコンピュータ、タブレット、又は何らかの他の適切なデータ処理システムのうちの少なくとも1つから選択され得る。
描かれているように、解析器222は、データ246と署名データベース258を使用して、ハイパースペクトル解析248を実行し、不具合212を特定する。描かれているように、データ246は、センサアレイ230によって検出された応答238に基づく一群の署名260を含む。例えば、データ246は、一群の位置216の各々に対する応答238から分離された一群の波長236から生成されたデータを含む。これらの例示的な実施例では、データ246が、一群の位置216の特定の位置に対する一群の波長236のうちの各波長の強度を含む。一群の位置216の特定の位置に対するデータ246の一部分は、これらの実施例において署名を形成する。
データ246の一群の署名260は、署名データベース258の一群の署名262と比較され、不具合212が存在するか否かが判定される。署名データベース258は、既知の不具合に対する波長のデータベースである。署名262の各々は、特定の不具合に対するものである。署名262の各々は、特定の不具合が存在するときに存在する、波長及びそれらの波長の強度を含む。波長と強度は、例示的な実施例における材料に対して特有のものであるように選択されている。
更に、署名262は、不具合が存在しないときの状態に対する署名も含み得る。例えば、署名262は、不具合212が無いときに存在し得る、複合材料、金属、又は他の適切な材料の署名を含み得る。したがって、解析器222は、不具合が存在するか否かに加えて、応答238において、構造物のために存在する材料を特定し得る。
したがって、ボアスコープシステム204は、ハイパースペクトルボアスコープシステムである。このやり方では、検査が実行されて、肉眼では視認できない不具合212が特定され得る。例示的な一実施例では、制限されたアクセス位置を有する複合材料構造物を検査する際の技術的な問題を克服する、1以上の技術的な解決策が存在する。1以上の技術的な解決策は、ハイパースペクトル解析248を可能にする、ボアスコープシステム204を採用する。
結果として、1以上の技術的な解決策は、構造物206の表面240が制限されたアクセスを有するところでさえも、構造物206の表面240上の一群の不具合212を特定する能力を有効にする技術的な効果を提供し得る。更に、オペレータ202の肉眼では視認できないときでさえも、一群の不具合212が特定され得る技術的な効果が存在する。
次に、図3を参照すると、例示的な一実施形態による、ボアスコープシステムの波長ウィンドウィングのブロック図が描かれている。この実施例では、解析器222が、センサアレイ230のセンサ244の動作を制御して、図2のボアスコープシステム204内で波長ウィンドウィング300を実行する。
描かれているように、解析器222は、センサアレイ230と通信する。この例示的な実施例では、解析器222が、センサアレイ230の一群のセンサ244を選択的に起動させるように構成され、幾つかの波長236の一群の波長304を受信する、波長ウィンドウ302を形成する。幾つかの波長236は、センサ244によって検出され、幾つかの波長236のうちの一部は、幾つかの波長236の他の波長よりもセンサ244のより多くに到達し得る。
例えば、通常の応答の部分として知られる波長306は、センサ244の多くに到達し得るので、この波長の検出は、センサ244の飽和状態をもたらす。波長ウィンドウ302は、波長306を検出したセンサ244のうちの第1のセンサ308をオフするように選択され得る。結果として、第1のセンサ308は、波長306に対する信号又はデータを生成しない。
第2のセンサ310が、第2のセンサ310に到達する一群の波長304を検出するようにオンされる。この実施例では、第2のセンサ310が、波長ウィンドウ302を形成する。第1のセンサ308は、マスク312と考えられ得る。このやり方では、波長306による飽和が低減され又は避けられ得る。
波長ウィンドウ302は、種々の形状を採り、センサ244の不連続な領域を含み得る。例えば、波長ウィンドウ302は、行、列、四角形、又は何らかの他の形状で、センサ244を含むように選択され得る。この例示的な実施例では、一群の波長304が、図2の構造物206の表面240上の肉眼では視認できない潜在的な汚染物質などの、不具合に対する波長に基づいて選択される。
次に、図4を参照すると、例示的な一実施形態による、ボアスコープシステムの背景閾値化のブロック図が描かれている。この実施例では、解析器222が、電磁放射線放出システム226の電磁放射線源234の動作を制御して、図2のボアスコープシステム204内で背景閾値化400を実行する。電磁放射線源234は、発光ダイオード、ハロゲン電球、白熱電球、又は何らかの他の適切な種類の電磁放射線源のうちの少なくとも1つから選択され得る。
波長236は、図2の幾つかの波長236を通過させるフィルタ228によってフィルタリングされる前に、応答238に存在している。波長236の組成は、図2の電磁放射線232の一群の所望の波長402に基づいて制御され得る。
例示的な実施例では、解析器222が、電磁放射線放出システム226と通信する。解析器222は、電磁放射線放出システム226及び、特に、電磁放射線放出システム226の電磁放射線源234の動作を制御するように構成されている。描かれているように、解析器222は、電磁放射線放出システム226の電磁放射線源234を選択的に起動させ、電磁放射線放出システム226に、一群の所望の波長402を有する電磁放射線232を放出させる。
一群の所望の波長402の波長の選択は、特定の不具合が図2の応答238の検出に対して散乱し又は反射する波長に基づき得る。例えば、一群の所望の波長402は、図2の構造物206の表面240上の肉眼では視認できない潜在的な汚染物質に対する波長に基づいて選択され得る。更に、解析器222は、一群の所望の波長402を選択し、図2の一群の不具合212のうちの特定の種類の不具合に対して構造物206の表面240を検査し得る。例えば、一群の所望の波長402は、構造物206の表面240上に存在するときに汚染物質であると考えられる、湿気、油、又は何らかの他の物質を検出するために選択され得る。
図2~図5における検査環境200及び検査環境200の種々の構成要素の図解は、例示的な一実施形態が実装され得るやり方に対する、物理的又は構造的な制限を示唆することを意図していない。図示した構成要素に加えて又は代えて、他の構成要素が使用されてもよい。幾つかの構成要素は不要になることがある。更に、幾つかの機能構成要素を示すためにブロックが提示されている。例示的な一実施形態において実装されるときに、これらのブロックのうちの1以上を、異なるブロックと統合し、異なるブロックに分割し、或いは、統合して分割し得る。
例えば、例示的な実施例は、図2の航空機210の形態を採るプラットフォーム208に関して説明されているが、例示的な一実施例は、他の種類のプラットフォームに対しても適用され得る。例えば、プラットフォーム208は、移動式プラットフォーム、固定式プラットフォーム、陸上構造物、水上構造物、又は宇宙構造物であってもよい。より具体的には、プラットフォーム208は、水上艦、戦車、人員運搬機、列車、宇宙船、宇宙ステーション、衛星、潜水艦、自動車、発電所、橋、ダム、家屋、製造施設、建造物、及び他の適切なプラットフォームであり得る。
次に、図5を参照すると、例示的な一実施形態による、ボアスコープ検査システムのためのボアスコープヘッドの図が描かれている。この例示的な実施例では、ボアスコープ検査ヘッド108の断面図が示されている。描かれているように、ボアスコープ検査ヘッド108は、ボアスコープ検査ハウジング500を含み、相補型金属酸化膜半導体(CMOS)センサアレイ502、干渉フィルタ504、照明ダイオード506、照明ダイオード508、及びレンズ510のためのプラットフォームである。
ボアスコープ検査ハウジング500は、図2のブロック形態で示されたボアスコープ検査ハウジング218の例示的な一実施態様である。描かれているように、ボアスコープ検査ハウジング500は、アルミニウムでできている。
CMOSセンサアレイ502と干渉フィルタ504は、両方とも、ボアスコープ検査ハウジング500の内側に配置されている。CMOSセンサアレイ502は、干渉フィルタ504の後ろに配置されている。照明ダイオード506と照明ダイオード508は、ボアスコープ検査ハウジング500に関連付けられている。
レンズ510は、ボアスコープ検査ハウジング500の開口部512に配置されている。描かれているように、レンズ510は、ボアスコープ検査ハウジング500の開口部512を密封し、応答がレンズ510を通過して干渉フィルタ504に到達する。
この例示的な実施例では、レンズ510が様々な形態を採り得る。例えば、レンズ510は、応答を変化させることなしに応答が通過することを可能にし得る。他の例示的な実施例では、レンズ510が、バイナリ―レンズ、フレネルレンズ、偏向レンズ、又は何らかの他の適切な種類のレンズのうちの1つから選択され得る。
密封が存在するときに、密封は、ボアスコープ検査ハウジング500のための気密シールであり得る。更に、ボアスコープ検査ハウジング500は、ボアスコープ検査ハウジング500内に正圧を提供するやり方で、窒素、ヘリウム、又は何らかの他の不活性ガスで満たされ得る。別の例示的な一実施例では、真空がボアスコープ検査ハウジング500に適用されて、負圧を生成し得る。
描かれているように、CMOSセンサアレイ502は、図2のブロック形態で示されているセンサアレイ230の例示的な一実施態様である。CMOSセンサアレイ502の前に配置されている干渉フィルタ504は、図2のブロック形態で示されているフィルタ228の一実施例である。この例示的な実施例では、応答516がボアスコープ検査ハウジング500の開口部512のレンズ510を通して受信されたときに、異なる波長が、矢印514の方向において干渉フィルタ504の異なるセクションにわたり通過するように、干渉フィルタ504が、楔形状を有し多層化されている。
照明ダイオード506と照明ダイオード508は、ボアスコープ検査ハウジング500に関連付けられており、光の形態を採る電磁放射線を放出する。例えば、照明ダイオード506は光518を放出し、照明ダイオード508は光520を放出する。これらの照明ダイオードからの光は、周波数の範囲を有し得る。
例えば、照明ダイオード506と照明ダイオード508は、各々、異なる波長の光を放出し得る。例えば、照明ダイオード506が可視光を放出し得る一方で、照明ダイオード508は近赤外(IR)光を放出し得る。
例えば、照明ダイオード506及び照明ダイオード508と同じ波長、若しくは紫外光、中赤外光、遠赤外光などの他の波長を有する光、又は他の波長を有する光を放出する、他の照明ダイオードが存在し得る。
次に、図6を参照すると、例示的な一実施形態による、構造物を検査するためのプロセスのフローチャートが描かれている。図6で示されているプロセスは、図2のボアスコープシステム204を使用して実装され得る。これらの動作の1以上は、図2の解析器222に実装され得る。
該プロセスは、電磁放射線放出システムから構造物の表面に電磁放射線を送信することによって開始する(動作600)。該プロセスは、ボアスコープ検査ハウジングの内側に配置されたフィルタを使用して、電磁放射線に対する応答をフィルタリングする(動作602)。フィルタは、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成されている。
該プロセスは、センサアレイを使用して、フィルタを通過した幾つかの波長からデータを生成する(動作604)。該プロセスは、肉眼では視認できない一組の汚染物質を示す、一群のグラフィカルインジケータを有する、構造物の表面の2次元画像を生成し(動作606)、その後、プロセスは終了する。2次元画像は、センサアレイからのデータを使用して生成される。
図6のプロセスで実行された検査を伴って、構造物の再作業又は交換が実行され得る。図6のプロセスでの図2のボアスコープシステム240の使用によって、検査が、肉眼では視認できない不具合の特定を可能にし、容易にアクセスできない表面上の位置において検査を行う能力を可能にする。
次に、図7を参照すると、例示的な一実施形態による、センサアレイのセンサを制御するためのプロセスのフローチャートが描かれている。この実施例で示されているプロセスは、波長ウィンドウィングの部分として検出される波長を選択するために使用され得る。
該プロセスは、センサアレイによる検出のために一群の所望の波長を選択することによって開始する(動作700)。一群の波長の選択は、構造物の表面上の肉眼では視認できない潜在的な不具合に対する波長に基づき得る。言い換えると、それらの波長は、構造物の表面上に潜在的な不具合が存在するときに受信されるものである。該プロセスは、一群のセンサを選択的に起動させ、幾つかの波長の一群の波長を受信する波長ウィンドウを形成し(動作702)、その後、プロセスは終了する。
次に、図8を参照すると、例示的な一実施形態による、電磁放射線放出システムの電磁放射線源を制御するためのプロセスのフローチャートが描かれている。この実施例で示されているプロセスは、構造物の表面に向けて送信される電磁放射線の波長を選択するために使用され得る。
該プロセスは、一群の所望の波長を選択することによって開始する(動作800)。一群の所望の波長は、構造物の表面上の肉眼では視認できない潜在的な不具合に対する波長に基づいて選択される。
該プロセスは、電磁放射線放出システムの電磁放射線源を選択的に起動させ、電磁放射線放出システムに、一群の所望の波長を有する電磁放射線を放出させる(動作802)。その後、該プロセスは終了する。
図示した種々の実施形態におけるフローチャート及びブロック図は、例示的な一実施形態における、装置及び方法の幾つかの可能な実装態様の構造、機能、及び動作を示している。これに関し、フローチャート又はブロック図の各ブロックは、モジュール、セグメント、機能、又は動作若しくはステップの一部分のうちの、少なくとも1つを表わし得る。例えば、1以上のブロックは、プログラムコードとしてハードウェア内で、又はプログラムコードとハードウェアの組み合わせとして実行可能である。ハードウェア内で実行された場合、ハードウェアは、例えば、フロー図又はブロック図の1以上の工程を実施するように製造又は構成された集積回路の形態を採り得る。プログラムコードとハードウェアの組み合わせとして実装されたときに、この実装はファームウェアの形態を採り得る。フローチャート又はブロック図の各ブロックは、種々の動作を実行するための特別な目的のハードウェアシステム、又は特別な目的のハードウェアと特別な目的のハードウェアによって実行されるプログラムコードの組み合わせを使用して実装され得る。
例示的な一実施形態の幾つかの代替的な実装態様においては、ブロックに記載された1以上の機能は、図中に記載の順序を逸脱して起こり得る。例えば、場合によっては、連続して示されている2つのブロックが実質的に同時に実行されること、又は時には含まれる機能によってはブロックが逆順に実施されることもあり得る。また、フローチャート又はブロック図で示されるブロックに加えて、他のブロックが追加され得る。
次に、図9を参照すると、例示的な一実施形態による、データ処理システムのブロック図が描かれている。データ処理システム900を使用して、図2のコンピュータシステム256を実行することができる。この例示的な実施例では、データ処理システム900が通信フレームワーク902を含み、これによりプロセッサユニット904、メモリ906、固定記憶域908、通信ユニット910、入/出力(I/O)ユニット912、及びディスプレイ914間の通信が行われる。この例では、通信フレームワーク902はバスシステムの形態を採り得る。
プロセッサユニット904は、メモリ906に読み込まれ得るソフトウェアの命令を実行する役割を果たす。プロセッサユニット904は、特定の実施態様に応じて、幾つかのプロセッサ、マルチプロセッサコア、又は他の何らかのタイプのプロセッサであり得る。
メモリ906及び固定記憶域908は、記憶デバイス916の例である。記憶デバイスは、例えば、限定するものではないが、データ、機能的な形態のプログラムコード、若しくは一時的であるか永続的であるかの何れかである他の適切な情報、又は一時的に及び永続的にの両方である他の適切な情報のうちの少なくとも1つなどの、情報を記憶することができるハードウェアの任意のピースである。記憶デバイス916は、これらの実施例では、コンピュータ可読記憶デバイスとも称され得る。これらの実施例では、メモリ906が、例えば、ランダムアクセスメモリ、又は他の任意の好適な揮発性又は不揮発性の記憶デバイスであり得る。固定記憶域908は、特定の実行形態に応じて様々な形式をとり得る。
例えば、固定記憶域908は、1以上の構成要素又はデバイスを含むことがある。例えば、固定記憶域908は、ハードドライブ、半導体ハードライブ、フラッシュメモリ、書換え型光ディスク、書換え可能磁気テープ、又はそれらの何らかの組み合わせであり得る。固定記憶装置908によって使用される媒体は、取り外し可能なものでもあり得る。例えば、取外し可能なハードドライブが、固定記憶装置908の目的で使用され得る。
これらの実施例では、通信ユニット910は、他のデータ処理システム又はデバイスとの通信を提供する。これらの例示的な実施例では、通信ユニット910はネットワークインタフェースカードである。
入/出力ユニット912は、データ処理システム900に接続され得る他のデバイスとのデータの入出力を可能にする。例えば、入/出力ユニット912は、キーボード、マウス、又は何らかの他の適切な入力デバイスのうちの少なくとも1つを介した、ユーザ入力のための接続を提供することができる。更に、入/出力ユニット912は、プリンタに出力を送信することができる。ディスプレイ914は、ユーザに対して情報を表示するための機構を提供する。
オペレーティングシステム、アプリケーション、又はプログラムのうちの少なくとも1つに関する指示命令は、通信フレームワーク902を通じてプロセッサユニット904と通信する、記憶デバイス916内に配置され得る。種々の実施形態のプロセスは、メモリ906などのメモリに配置され得る、コンピュータ実装された指示命令を使用して、プロセッサユニット904によって実行することができる。
これらの指示命令は、プロセッサユニット904のプロセッサによって読み取られ実行され得る、プログラムコード、コンピュータ使用可能プログラムコード、又はコンピュータ可読プログラムコードと呼ばれる。種々の実施形態のプログラムコードは、メモリ906は固定記憶域908といった、種々の物理的記憶媒体又はコンピュータ可読記憶媒体上で具現化され得る。
プログラムコード918は、選択的に着脱可能であるコンピュータ可読媒体920上に機能的な形態で置かれ、プロセッサユニット904によって実行するためにデータ処理システム900に読み込ませたり、転送したりしてもよい。プログラムコード918とコンピュータ可読媒体920は、これらの実施例では、コンピュータプログラム製品922を形成する。一実施例では、コンピュータ可読媒体920が、コンピュータ可読記憶媒体924又はコンピュータ可読信号媒体926であり得る。これらの実施例では、コンピュータ可読記憶媒体924は、プログラムコード918を伝搬させるか又は送信する媒体というよりはむしろ、プログラムコード918を記憶するために使用される物理的な又は有形の記憶デバイスである。
代替的に、プログラムコード918は、コンピュータ可読信号媒体926を使用してデータ処理システム900に転送可能である。コンピュータ可読信号媒体926は、例えば、プログラムコード918を包含する被伝播データ信号であり得る。例えば、コンピュータ可読信号媒体926は、電磁信号、光信号、又は任意の他の適切なタイプの信号のうちの少なくとも1つであってもよい。これらの信号は、無線通信リンク、光ファイバケーブル、同軸ケーブル、電線、又は他の任意の好適な種類の通信リンクといった通信リンクのうちの少なくとも1つを介して伝送され得る。
データ処理システム900に関して例示されている種々の構成要素は、種々の実施形態が実装され得るやり方に構造的な制限を設けることを意図していない。異なる例示的な実施形態は、データ処理システム900に関して図示されている構成要素に対する追加的又は代替的な構成要素を含むデータ処理システムで実施され得る。図9に示した他の構成要素は、図示されている例示的な実施例と異なることがあり得る。種々の実施形態は、プログラムコード918を実行可能な任意のハードウェアデバイス又はシステムを使用して実装され得る。
本開示の例示的な実施形態は、図10に示す航空機の製造及び保守方法1000と、図11に示す航空機1100とに関連して記述され得る。先ず、図10を参照すると、例示的な一実施形態による、航空機の製造及び保守方法のブロック図が示されている。製造前の段階で、航空機の製造及び保守方法1000は、図11の航空機1100の仕様及び設計1002、並びに材料の調達1004を含み得る。
製造段階では、航空機1100の構成要素及びサブアセンブリの製造1006と、システムインテグレーション1008とが行われる。その後、航空機1100は認可及び納品1010を経て運航1012に供される。顧客による運航1012中に、航空機1100は、定期的な整備および保守1014(改造、再構成、改修、およびその他の整備または保守を含み得る)がスケジューリングされる。
航空機の製造及び保守方法1000の各プロセスは、システムインテグレータ、第三者、オペレータ、又はこれらの組み合わせによって、実施又は実行され得る。上記の例では、オペレータは顧客であり得る。本明細書の目的では、システムインテグレータは、限定されないが、任意の数の航空機製造業者、及び主要システムの下請業者を含み得、第三者は、限定されないが、任意の数のベンダー、下請業者、及び供給業者を含み、作業員は、航空会社、リース会社、軍事団体、サービス機関などであり得る。
ここで図11を参照すると、例示的な一実施形態が実装され得る航空機のブロック図が示されている。この例では、航空機1100は、図10の航空機の製造及び保守方法1000によって製造され、且つ、複数のシステム1104と内装1106とを有する機体1102を含み得る。システム1104の例には、推進システム1108、電気システム1110、油圧システム1112、及び環境システム1114のうちの1以上が含まれる。任意の数の他のシステムが含まれることもある。航空宇宙産業の例を示しているが、種々の例示的な実施形態は、自動車産業などの他の産業にも応用され得る。
本明細書で具現化されている装置及び方法は、図10の航空機の製造及び保守方法1000のうちの少なくとも1つの段階において採用され得る。例示的な一実施例では、図10の構成要素及びサブアセンブリの製造1006で製造される構成要素又はサブアセンブリが、図10で航空機1100の運航1012中に製造される構成要素又はサブアセンブリと同様のやり方で、作製又は製造される。更にまた別の一実施例では、1以上の装置の実施形態、方法の実施形態、又はこれらの組み合わせを、図10の構成要素及びサブアセンブリの製造1006並びにシステムインテグレーション1008などの製造段階で、利用することができる。例えば、図2のボアスコープシステム204は、複合材料構造物などの構造物がレイアップ及び硬化されるときに、任意の構成要素又はサブアセンブリが構成要素及びサブアセンブリの製造1006において製造される間に使用され得る。
1以上の装置の実施形態、方法の実施形態、又はこれらの組み合わせを、航空機1100が図10における運航1012、整備及び保守1014の間、又はその両方の間に利用することができる。例えば、図2のボアスコープシステム204は、図10の整備及び保守1014の間に航空機の検査を実行して、整備が必要な不具合が存在するか否かを判定するために使用され得る。
幾つかの異なる例示的な実施形態の使用により、航空機1100の組み立てを大幅に効率化すること、航空機1100のコストを削減すること、又は航空機1100の組み立てを大幅に効率化することと航空機1100のコストを削減することの両方が可能になり得る。図2のボアスコープシステム204の使用は、現在使用されている検査システムではアクセスすることが困難であり得る構造物の位置の検査を実行し、ハイパースペクトル解析を実行して、構造物の表面上に不具合が存在するか否かを判定するために必要な時間を削減する。
したがって、提供される例示的な実施例の1以上は、位置への制限されたアクセスを有する複合材料構造物を検査することに伴う技術的な問題を克服する技術的な解決策を有する。例えば、図2では、ボアスコープシステム204が、現在の検査システムでは現在利用できないやり方で、構造物206の表面214上でハイパースペクトル解析248を実行する能力を提供する。様々な異なる位置においてハイパースペクトル解析248を実行するこの能力を用いれば、構造物を検査して不具合が存在するか否かを判定するために必要な時間と労力が低減され得る。
種々の例示的な実施形態の説明は、例示及び説明を目的として提示されており、網羅的であること、又は開示された形態の実施形態に限定することは意図されていない。動作及び工程を実行する構成要素が、種々の実施例によって説明される。例示的な一実施形態では、ある構成要素は、説明している動作又は工程を実行するよう構成され得る。例えば、この構成要素は、具体例において構成要素によって実施されると説明されている動作又は工程を実行する能力をこの構成要素に提供する、構造物に適した構成又は設計を有し得る。
更に、本開示は、下記の条項に係る実施形態を含む。
条項1
ボアスコープ検査ハウジング、
前記ボアスコープ検査ハウジングに関連付けられ、電磁放射線を放出するように構成された、電磁放射線放出システム、
前記ボアスコープ検査ハウジングの内側に配置されたフィルタであって、構造物の表面に向けられた前記電磁放射線に対する応答の幾つかの波長を通過させるように構成され、前記応答が前記ボアスコープ検査ハウジングの開口部を通して受信される、フィルタ、及び
前記ボアスコープ検査ハウジングの内側の前記フィルタの後ろに配置されたセンサアレイであって、前記フィルタを通過した前記幾つかの波長からデータを生成するように構成されたセンサを備え、前記構造物の前記表面のハイパースペクトル解析を可能にする、センサアレイを備える、装置。
条項2
前記センサアレイと通信する解析器であって、前記センサアレイの一群のセンサを選択的に起動させ、前記幾つかの波長の一群の波長を受信する波長ウィンドウを形成する、解析器を更に備える、条項1に記載の装置。
条項3
前記一群の波長が、前記構造物の前記表面上の肉眼では視認できない一群の不具合に対する波長に基づいて選択される、条項2に記載の装置。
条項4
前記電磁放射線放出システムと通信する解析器であって、前記電磁放射線放出システムの電磁放射線源を選択的に起動させ、前記電磁放射線放出システムに一群の所望の波長を有する前記電磁放射線を放出させる、解析器を更に備える、条項1に記載の装置。
条項5
前記一群の所望の波長が、前記構造物の前記表面上の肉眼では視認できない一群の不具合に対する波長に基づいて選択される、条項4に記載の装置。
条項6
前記応答が、前記表面上の位置からのものであり、
前記センサアレイと通信する解析器であって、前記センサアレイに前記構造物の前記表面に向けられた前記電磁放射線から受信した前記応答から前記データを生成させ、前記位置における肉眼では視認できない一群の不具合を示す一群のグラフィカルインジケータを有する、前記構造物の前記表面の2次元画像を生成するように構成された、解析器を更に備える、条項1に記載の装置。
条項7
前記解析器が、電線、光ファイバー、又は無線接続のうちの少なくとも1つを使用して、前記センサアレイと通信する、条項6に記載の装置。
条項8
前記ボアスコープ検査ハウジングに関連付けられ、ボアスコープシステムを形成する、細長部材であって、堅い細長部材、柔軟な細長部材、ケーブル、チューブ、及びパイプのうちの1つから選択される、細長部材を更に備える、条項1に記載の装置。
条項9
前記フィルタが干渉フィルタである、条項1に記載の装置。
条項10
前記ボアスコープ検査ハウジングの前記開口部を密封するレンズであって、前記応答が前記レンズを通過して前記フィルタに到達する、レンズを更に備える、条項1の装置。
条項11
前記センサが、電荷結合素子、相補型金属酸化膜半導体素子、アンチモン化インジウム(InSb)半導体素子、又は水銀カドミウムテルル(HgCdTe)半導体素子のうちの少なくとも1つから選択された一群のセンサから選択される、条項1に記載の装置。
条項12
前記電磁放射線放出システムが、発光ダイオード、ハロゲン電球、又は白熱電球のうちの少なくとも1つから選択された一群の電磁放射線源を備える、条項1に記載の装置。
条項13
前記構造物が、硬化されていない複合材料構造物、硬化された複合材料構造物、部品、アセンブリ、翼、複合材料外板、水平安定板、スパー、リブ、プリプレグの層、エンジンのハウジング、主翼ボックス、パイプ、及びチューブのうちの1つから選択される、条項1に記載の装置。
条項14
ボアスコープのためのボアスコープ検査ハウジング、
前記ボアスコープのための前記ボアスコープ検査ハウジングに関連付けられたチューブ、
前記ボアスコープ検査ハウジングに関連付けられた電磁放射線放出システムであって、電磁放射線を放出するように構成された、電磁放射線放出システム、
前記ボアスコープ検査ハウジングの内側に配置されたフィルタであって、構造物の表面に向けられた電磁放射線に対する応答の幾つかの波長を通過させるように構成され、前記応答が前記ボアスコープ検査ハウジングの開口部を通して受信される、フィルタ、
前記ボアスコープ検査ハウジングの内側の前記フィルタの後ろに配置されたセンサアレイであって、前記フィルタを通過した前記幾つかの波長からデータを生成するように構成された、センサアレイ、及び
前記センサアレイと通信する解析器であって、前記センサアレイに前記構造物の前記表面に向けられた前記電磁放射線から受信した前記応答から前記データを生成させ、肉眼では視認できない一群の不具合を示す一群のグラフィカルインジケータを有する、前記構造物の前記表面の2次元画像を生成するように構成された、解析器を備える、ハイパースペクトルボアスコープシステム。
条項15
前記解析器が、一群のセンサを選択的に起動させ、前記幾つかの波長の一群の波長を受信する波長ウィンドウを形成するように構成され、前記一群の波長が、前記構造物の前記表面上の肉眼では視認できない前記一群の不具合に対する波長に基づいて選択される、条項14に記載のハイパースペクトルボアスコープシステム。
条項16
前記解析器が、電磁放射線源を選択的に起動させ、前記電磁放射線放出システムに一群の所望の波長を有する前記電磁放射線を放出させるように構成され、前記一群の所望の波長が、前記構造物の前記表面上の肉眼では視認できない前記一群の不具合に対する波長に基づいて選択される、条項14に記載のハイパースペクトルボアスコープシステム。
条項17
構造物を検査するための方法であって、
電磁放射線放出システムから前記構造物の表面へ電磁放射線を送信すること、
ボアスコープ検査ハウジングの内側に配置されたフィルタを使用して、前記電磁放射線に対する応答をフィルタリングすることであって、前記フィルタが、前記構造物の前記表面に向けられた前記電磁放射線に対する前記応答の幾つかの波長を通過させるように構成されている、フィルタリングすること、
センサアレイを使用して、前記フィルタを通過した前記幾つかの波長からデータを生成すること、及び
肉眼では視認できない一群の不具合を示す一群のグラフィカルインジケータを有する、前記構造物の前記表面の2次元画像を、前記センサアレイからのデータを使用して生成することを含む、方法。
条項18
一群のセンサを選択的に起動させ、前記幾つかの波長の一群の波長を受信する波長ウィンドウを形成することを更に含み、前記一群の波長が、前記構造物の前記表面上の肉眼では視認できない前記一群の不具合に対する波長に基づいて選択される、条項17に記載の方法。
条項19
前記電磁放射線放出システムの電磁放射線源を選択的に起動させ、前記電磁放射線放出システムに一群の所望の波長を有する前記電磁放射線を放出させることを更に含み、前記一群の所望の波長が、前記構造物の前記表面上の肉眼では視認できない前記一群の不具合に対する波長に基づいて選択される、条項17に記載の方法。
条項20
前記フィルタが干渉フィルタである、条項17に記載の方法。
条項21
前記構造物が、硬化されていない複合材料構造物、硬化された複合材料構造物、部品、アセンブリ、翼、複合材料外板、水平安定板、スパー、リブ、プリプレグの層、エンジンのハウジング、主翼ボックス、パイプ、及びチューブのうちの1つから選択される、条項17に記載の方法。
当業者には、多くの修正例及び変形例が自明となろう。更に、種々の例示的な実施形態によって、他の好ましい実施形態に比較して異なる特徴が提供され得る。選択された1以上の実施形態は、実施形態の原理と実際の用途を最もよく説明するため、及び、考慮される具体的な用途に適した様々な変更例を伴う様々な実施形態に関して、開示の理解を当業者に促すために、選択され記述されている。

Claims (10)

  1. ボアスコープ検査ハウジング(218)、
    前記ボアスコープ検査ハウジング(218)に関連付けられ、電磁放射線(232)を放出するように構成された、電磁放射線放出システム(226)、
    前記ボアスコープ検査ハウジング(218)の内側に配置されたフィルタ(228)であって、構造物(206)の表面(240)に向けられた前記電磁放射線(232)に対する応答(238)の幾つかの波長(236)を通過させるように構成され、前記応答(238)が前記ボアスコープ検査ハウジング(218)の開口部(242)を通して受信される、フィルタ(228)、及び
    前記ボアスコープ検査ハウジング(218)の内側の前記フィルタ(228)の後ろに配置されたセンサアレイ(230)であって、前記センサアレイ(230)は前記フィルタ(228)を通過した前記幾つかの波長(236)からデータ(246)を生成するための複数のセンサを備え、前記構造物(206)の前記表面(240)のハイパースペクトル解析(248)を可能にする、センサアレイ(230)を備える、ボアスコープシステム(204)。
  2. 前記センサアレイ(230)と通信する解析器(222)であって、前記センサアレイ(230)の一群のセンサ(244)のみを選択して起動させ、前記幾つかの波長(236)の一群の波長(304)を受信する波長ウィンドウ(302)を形成し、前記一群の波長(304)が、前記構造物(206)の前記表面(240)上の肉眼では視認できない一群の不具合(212)に対する波長に基づいて選択される、解析器(222)を更に備える、請求項1に記載のボアスコープシステム(204)。
  3. 前記電磁放射線放出システム(226)と通信する解析器(222)であって、前記電磁放射線放出システム(226)の電磁放射線(232)源の一部のみを選択して起動させ、前記電磁放射線放出システム(226)に一群の所望の波長(402)を有する前記電磁放射線(232)を放出させ、前記一群の所望の波長(402)が、前記構造物(206)の前記表面(240)上の肉眼では視認できない一群の不具合(212)に対する波長に基づいて選択される、解析器(222)を更に備える、請求項1又は2に記載のボアスコープシステム(204)。
  4. 前記応答(238)が、前記表面(240)上の位置からのものであり、
    前記センサアレイ(230)と通信する解析器(222)であって、前記センサアレイ(230)に前記構造物(206)の前記表面(240)に向けられた前記電磁放射線(232)から受信した前記応答(238)から前記データ(246)を生成させ、前記位置における肉眼では視認できない一群の不具合(212)を示す一群のグラフィカルインジケータ(254)を有する、前記構造物(206)の前記表面(240)の2次元画像(250)を生成するように構成され、電線、光ファイバー、又は無線接続のうちの少なくとも1つを使用して、前記センサアレイ(230)と通信する、解析器(222)を更に備える、請求項1から3のいずれか一項に記載のボアスコープシステム(204)。
  5. 前記フィルタ(228)が干渉フィルタ(228)である、請求項1から4のいずれか一項に記載のボアスコープシステム(204)。
  6. 前記ボアスコープ検査ハウジング(218)の前記開口部(242)を密封するレンズ(510)であって、前記応答(238)が前記レンズ(510)を通過して前記フィルタ(228)に到達する、レンズ(510)を更に備える、請求項1から5のいずれか一項に記載のボアスコープシステム(204)。
  7. 前記センサが、電荷結合素子、相補型金属酸化膜半導体素子、アンチモン化インジウム(InSb)半導体素子、又は水銀カドミウムテルル(HgCdTe)半導体素子のうちの少なくとも1つから選択された一群のセンサ(244)から選択され、前記電磁放射線放出システム(226)が、発光ダイオード、ハロゲン電球、又は白熱電球のうちの少なくとも1つから選択された一群の電磁放射線(232)源を備える、請求項1から6のいずれか一項に記載のボアスコープシステム(204)。
  8. 構造物(206)を検査するための方法であって、
    電磁放射線放出システム(226)から前記構造物(206)の表面(240)へ電磁放射線(232)を送信すること、
    ボアスコープ検査ハウジング(218)の内側に配置されたフィルタ(228)を使用して、前記電磁放射線(232)に対する応答(238)をフィルタリングすることであって、前記フィルタ(228)が、前記構造物(206)の前記表面(240)に向けられた前記電磁放射線(232)に対する前記応答(238)の幾つかの波長(236)を通過させるように構成されている、フィルタリングすること、
    複数のセンサを備えるセンサアレイ(230)を使用して、前記フィルタ(228)を通過した前記幾つかの波長(236)からデータ(246)を生成すること
    肉眼では視認できない一群の不具合(212)を示す一群のグラフィカルインジケータ(254)を有する、前記構造物(206)の前記表面(240)の2次元画像(250)を、前記センサアレイ(230)からのデータ(246)を使用して生成することを含む、方法。
  9. 一群のセンサ(244)のみを選択して起動させ、前記幾つかの波長(236)の一群の波長(304)を受信する波長ウィンドウ(302)を形成することを更に含み、前記一群の波長(304)が、前記構造物(206)の前記表面(240)上の肉眼では視認できない前記一群の不具合(212)に対する波長に基づいて選択される、請求項8に記載の方法。
  10. 前記電磁放射線放出システム(226)の電磁放射線(232)源の一部のみを選択して起動させ、前記電磁放射線放出システム(226)に一群の所望の波長(402)を有する前記電磁放射線(232)を放出させることを更に含み、前記一群の所望の波長(402)が、前記構造物(206)の前記表面(240)上の肉眼では視認できない前記一群の不具合(212)に対する波長に基づいて選択される、請求項8又は9に記載の方法。
JP2017110742A 2016-06-10 2017-06-05 ハイパースペクトルボアスコープシステム Active JP7022520B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/178,617 2016-06-10
US15/178,617 US9955088B2 (en) 2016-06-10 2016-06-10 Hyperspectral borescope system

Publications (2)

Publication Number Publication Date
JP2018025541A JP2018025541A (ja) 2018-02-15
JP7022520B2 true JP7022520B2 (ja) 2022-02-18

Family

ID=58266369

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017110742A Active JP7022520B2 (ja) 2016-06-10 2017-06-05 ハイパースペクトルボアスコープシステム

Country Status (4)

Country Link
US (1) US9955088B2 (ja)
EP (1) EP3255417B1 (ja)
JP (1) JP7022520B2 (ja)
CN (1) CN107490549A (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111213053A (zh) * 2018-07-27 2020-05-29 合刃科技(深圳)有限公司 基于相干光的微细管内壁检测装置及方法
DE102019100821A1 (de) 2019-01-14 2020-07-16 Lufthansa Technik Aktiengesellschaft Boroskop zur optischen Inspektion von Gasturbinen
FR3127042B1 (fr) * 2021-09-15 2024-05-24 Safran Aircraft Engines Procédé de contrôle de pièces tissées de turbomachine
GB2621567A (en) * 2022-08-12 2024-02-21 Ev Offshore Ltd Multi-spectral imaging system and method for conduits

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007297947A (ja) 2006-04-28 2007-11-15 Kawasaki Heavy Ind Ltd 蛍光分光式内部応力検査装置
JP2009142415A (ja) 2007-12-13 2009-07-02 Fujinon Corp 内視鏡システム
JP2014073149A (ja) 2012-10-02 2014-04-24 Konica Minolta Inc 内視鏡装置
WO2014200007A1 (ja) 2013-06-12 2014-12-18 株式会社 島津製作所 両親媒性ブロックポリマーを用いた分子集合体、及びそれを用いた物質搬送用キャリア
JP2015039503A (ja) 2013-08-21 2015-03-02 富士フイルム株式会社 内視鏡システム及び作動方法
WO2016012980A1 (en) 2014-07-24 2016-01-28 Ecole Polytechnique Federale De Lausanne (Epfl) Compact multifunctional system for imaging spectroscopy
JP2016504563A (ja) 2012-10-19 2016-02-12 ハイパーメツド・イメージング・インコーポレイテツド 単一センサのハイパースペクトル撮像デバイス

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4551829A (en) * 1982-03-10 1985-11-05 Harris Corporation Wavelength division multiplexed fiber-optic cable system with non-unique terminal types
WO2007071072A1 (en) * 2005-12-22 2007-06-28 Corporation De L'ecole Polytechnique De Montreal High-rate perfusion bioreactor
US7962038B2 (en) * 2007-12-14 2011-06-14 Verizon Patent And Licensing Inc. High performance gigabit passive optical network
CN101493410B (zh) * 2009-03-04 2010-08-25 天津大学 基于波分复用技术的多通道光微流体传感器及传感装置
US20110292258A1 (en) 2010-05-28 2011-12-01 C2Cure, Inc. Two sensor imaging systems
US9046419B2 (en) * 2010-07-28 2015-06-02 Technion Research & Development Foundation Limited Systems and methods for spectrally encoded imaging
EP2796085A4 (en) 2012-02-17 2015-10-07 Olympus Medical Systems Corp ENDOSCOPIC DEVICE
US8853634B2 (en) * 2012-03-12 2014-10-07 The Boeing Company Resin detection system
US8836934B1 (en) 2012-05-15 2014-09-16 The Boeing Company Contamination identification system
US9234740B1 (en) * 2012-08-23 2016-01-12 The Boeing Company Shearographic inspection system using a laser matrix
CN105282463B (zh) * 2015-10-22 2018-08-31 天津大学 能够抵抗单粒子效应的数字像素图像传感器

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007297947A (ja) 2006-04-28 2007-11-15 Kawasaki Heavy Ind Ltd 蛍光分光式内部応力検査装置
JP2009142415A (ja) 2007-12-13 2009-07-02 Fujinon Corp 内視鏡システム
JP2014073149A (ja) 2012-10-02 2014-04-24 Konica Minolta Inc 内視鏡装置
JP2016504563A (ja) 2012-10-19 2016-02-12 ハイパーメツド・イメージング・インコーポレイテツド 単一センサのハイパースペクトル撮像デバイス
WO2014200007A1 (ja) 2013-06-12 2014-12-18 株式会社 島津製作所 両親媒性ブロックポリマーを用いた分子集合体、及びそれを用いた物質搬送用キャリア
JP2015039503A (ja) 2013-08-21 2015-03-02 富士フイルム株式会社 内視鏡システム及び作動方法
WO2016012980A1 (en) 2014-07-24 2016-01-28 Ecole Polytechnique Federale De Lausanne (Epfl) Compact multifunctional system for imaging spectroscopy

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
ANTONY, M. M. et al.,High resolution probe for corrosion monitoring using hyper spectral imaging,AIP Conference Proceedings,Vol. 2317 No. 030016,米国,2021年02月05日,pp. 1-7

Also Published As

Publication number Publication date
JP2018025541A (ja) 2018-02-15
CN107490549A (zh) 2017-12-19
US20170359529A1 (en) 2017-12-14
EP3255417B1 (en) 2021-08-18
US9955088B2 (en) 2018-04-24
EP3255417A1 (en) 2017-12-13

Similar Documents

Publication Publication Date Title
JP7022520B2 (ja) ハイパースペクトルボアスコープシステム
JP5873500B2 (ja) 自動目視検査システム
US7902524B2 (en) Portable corrosion detection apparatus
Hu et al. LSTM-RNN-based defect classification in honeycomb structures using infrared thermography
US7925452B2 (en) Method and apparatus for nondestructive corrosion detection using quantum dots
JP7080006B2 (ja) 複合材検査
JP2017203781A (ja) 汚染特定システム
US8185326B2 (en) Corrosion detection and monitoring system
Yasuda et al. Aircraft visual inspection: A systematic literature review
EP2857818B1 (en) Leak detection in composite structures
JP6931528B2 (ja) 複合材検査
US11017491B2 (en) Nonconformance detection system
US9234740B1 (en) Shearographic inspection system using a laser matrix
US9038470B1 (en) Porosity inspection system for composite structures
JP7255993B2 (ja) 水分検出のための同期されたフェーズドアレイ及び赤外線検出器システム
US9406489B2 (en) Investigating chemical-based events that occur in vehicles
CN109682774B (zh) 水分检测系统
JP7444611B2 (ja) 再構成可能な後方散乱検出器
Yasuda et al. Automated visual inspection of aircraft exterior using deep learning
US10876922B2 (en) Methods and systems for determining optical properties for light transmitted mediums
WANG based solely on examination of the thesis
US10282896B1 (en) Model based analysis of a three-dimensional zone in an aircraft

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200601

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210427

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210525

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210819

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220207

R150 Certificate of patent or registration of utility model

Ref document number: 7022520

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150