JP7053889B2 - Necking determination method for press-molded products, necking determination device for press-molded products, and programs - Google Patents

Necking determination method for press-molded products, necking determination device for press-molded products, and programs Download PDF

Info

Publication number
JP7053889B2
JP7053889B2 JP2020559816A JP2020559816A JP7053889B2 JP 7053889 B2 JP7053889 B2 JP 7053889B2 JP 2020559816 A JP2020559816 A JP 2020559816A JP 2020559816 A JP2020559816 A JP 2020559816A JP 7053889 B2 JP7053889 B2 JP 7053889B2
Authority
JP
Japan
Prior art keywords
necking
waveform
press
molded product
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020559816A
Other languages
Japanese (ja)
Other versions
JPWO2020116075A1 (en
Inventor
實 杉山
宏紀 望月
風人 川村
英樹 明元
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Unipres Corp
Original Assignee
Unipres Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Unipres Corp filed Critical Unipres Corp
Publication of JPWO2020116075A1 publication Critical patent/JPWO2020116075A1/en
Application granted granted Critical
Publication of JP7053889B2 publication Critical patent/JP7053889B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/30Measuring arrangements characterised by the use of optical techniques for measuring roughness or irregularity of surfaces

Description

本発明は、プレス成形品のネッキング判定方法、及びネッキング判定装置に関する。 The present invention relates to a necking determination method for a press-molded product and a necking determination device.

特許文献1には、レーザ超音波深傷装置により被検査体の表面に依存するプレス不良の存在する位置を特定し、パルス式赤外線検査装置により取得されたプレス不良の赤外線撮影画像を解析することで、プレス不良のサイズを特定することが開示されている。特許文献2には、対向配置された2基のレーザ変位計で計測された測定物までの距離と、2基のレーザ変位計の距離との差分に基づいて測定物の厚さを測定することが記載されている。 Patent Document 1 identifies the location of a press defect depending on the surface of the object to be inspected by a laser ultrasonic deep scratch device, and analyzes an infrared photographed image of the press defect acquired by the pulse type infrared inspection device. Discloses specifying the size of a press defect. In Patent Document 2, the thickness of a measured object is measured based on the difference between the distance to the measured object measured by two laser displacement meters arranged opposite to each other and the distance between the two laser displacement meters. Is described.

特許文献1 特開2006-170684号公報 Patent Document 1 Japanese Patent Application Laid-Open No. 2006-170684

特許文献2 特開2010-44027号公報 Patent Document 2 Japanese Unexamined Patent Publication No. 2010-44027

解決しようとする課題The problem to be solved

自動車骨格部品などに利用されるプレス成形品には、局所的な伸び変形により板厚が局所的に減少するなどのネッキングが発生することがある。このようなネッキングの有無を特許文献1のように画像により判別することが困難な場合がある。また、特許文献2のように、複数のレーザ変位計を利用する場合、設置スペースを確保することが困難な場合がある。 Press-molded products used for automobile skeleton parts and the like may have necking such as a local decrease in plate thickness due to local elongation deformation. It may be difficult to determine the presence or absence of such necking from an image as in Patent Document 1. Further, when a plurality of laser displacement meters are used as in Patent Document 2, it may be difficult to secure an installation space.

一般的開示General disclosure

本発明の一態様に係るプレス成形品のネッキング判定方法は、プレス成形品の予め定められた部位の第1位置を含む2次元表面形状を示す第1波形を取得する段階を備えてよい。プレス成形品のネッキング判定方法は、第1波形の変化量を導出する段階を備えてよい。プレス成形品のネッキング判定方法は、第1波形の変化量に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定する段階を備えてよい。 The method for determining necking of a press-molded product according to one aspect of the present invention may include a step of acquiring a first waveform indicating a two-dimensional surface shape including a first position of a predetermined portion of the press-molded product. The necking determination method of the press-molded product may include a step of deriving a change amount of the first waveform. The method for determining necking of a press-molded product may include a step of determining whether or not necking occurs at a predetermined portion based on the amount of change in the first waveform.

判定する段階は、変化量が予め定められた変化パターンを満たす場合、ネッキングが予め定められた部位に発生していると判定してよい。判定する段階は、第1波形の単位距離当たりの差分が、予め定められた変化パターンを満たすか否かに基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。判定する段階は、第1波形の1階微分波形の単位距離当たりの差分が、予め定められた変化パターンを満たすか否かに基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。 At the determination stage, if the amount of change satisfies a predetermined change pattern, it may be determined that necking has occurred at a predetermined portion. In the determination step, it may be determined whether or not necking occurs at a predetermined portion based on whether or not the difference per unit distance of the first waveform satisfies a predetermined change pattern. .. In the determination stage, whether or not necking occurs at a predetermined portion based on whether or not the difference per unit distance of the first derivative waveform of the first waveform satisfies a predetermined change pattern. May be determined.

導出する段階は、第1波形を微分処理することで前記変化量を導出してよい。 At the derivation stage, the change amount may be derived by differentiating the first waveform.

導出する段階は、第1波形を2階微分することで第1波形の2階微分波形を変化量として導出してよい。判定する段階は、第1波形の2階微分波形に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。 At the derivation stage, the second-order differential waveform of the first waveform may be derived as a change amount by second-order differentiation of the first waveform. In the determination step, it may be determined whether or not necking occurs at a predetermined portion based on the second-order differential waveform of the first waveform.

判定する段階は、第1波形の2階微分波形上の極大点と極小点とに基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。 In the determination step, it may be determined whether or not necking occurs at a predetermined portion based on the maximum point and the minimum point on the second-order differential waveform of the first waveform.

判定する段階は、第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。 At the determination stage, is necking occurring at a predetermined site based on the difference between the maximum point and the minimum point that are adjacent to each other on the second derivative waveform of the first waveform and include a zero point in between? It may be determined whether or not.

取得する段階は、プレス成形品の予め定められた部位にレーザ光を照射して、予め定められた部位からの反射光を受光するレーザ変位計で計測された予め定められた部位の第1位置を含む2次元表面形状を示す第1波形を取得してよい。 The acquisition stage is the first position of the predetermined part measured by the laser displacement meter that irradiates the predetermined part of the press-molded product with the laser light and receives the reflected light from the predetermined part. The first waveform showing the two-dimensional surface shape including the above may be acquired.

レーザ変位計は、予め定められた部位の長手方向とは異なる短手方向に延びるラインレーザ光を長手方向に沿って走査してよい。取得する段階は、レーザ変位計で計測された予め定められた部位の長手方向に沿って第1位置とは異なる第2位置を含む2次元表面形状を示す第2波形を取得してよい。導出する段階は、第2波形を2階微分することで第2波形の2階微分波形を導出してよい。判定する段階は、第1波形の2階微分波形及び第2波形の2階微分波形に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。 The laser displacement meter may scan a line laser beam extending in a lateral direction different from the longitudinal direction of a predetermined portion along the longitudinal direction. In the acquisition step, a second waveform indicating a two-dimensional surface shape including a second position different from the first position along the longitudinal direction of a predetermined portion measured by a laser displacement meter may be acquired. At the derivation stage, the second-order differential waveform of the second waveform may be derived by second-order differentiation of the second waveform. In the determination step, it may be determined whether or not necking occurs at a predetermined portion based on the second-order differential waveform of the first waveform and the second-order differential waveform of the second waveform.

判定する段階は、第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差、及び第2波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上である場合、予め定められた部位にネッキングが発生していると判定する段階を含んでよい。取得する段階は、白色光源を利用する白色干渉計の計測結果から第1波形を取得する段階を含んでよい。判定する段階は、第1波形の2階微分波形がネッキングの発生が高いことを示す予め定められた波形パターンを満たすか否かに基づいて、ネッキングが予め定められた部位に発生しているか否かを判定してよい。予め定められた波形パターンは、実際にネッキングの発生した波形パターンを機械学習することで、順次更新されてよい。 The determination stage is adjacent to each other on the second-order differential waveform of the first waveform, and the difference between the maximum point and the minimum point including the zero point in between, and adjacent to each other on the second-order differential waveform of the second waveform. Moreover, when the difference between the maximum point including the zero point and the minimum point is equal to or larger than a predetermined threshold value, a step of determining that necking has occurred in the predetermined portion may be included. The acquisition step may include the step of acquiring the first waveform from the measurement result of the white interferometer using the white light source. The determination step is whether or not the second-order differential waveform of the first waveform satisfies a predetermined waveform pattern indicating that the occurrence of necking is high, and whether or not necking occurs at a predetermined portion. May be determined. The predetermined waveform pattern may be sequentially updated by machine learning the waveform pattern in which necking actually occurs.

本発明の一態様に係るプレス成形品のネッキング判定装置は、プレス成形品の予め定められた部位の第1位置を含む2次元表面形状を示す第1波形を取得する取得部を備えてよい。プレス成形品のネッキング判定装置は、第1波形の変化量を導出する導出部を備えてよい。プレス成形品のネッキング判定装置は、第1波形の変化量に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定する判定部を備えてよい。 The necking determination device for a press-molded product according to one aspect of the present invention may include an acquisition unit that acquires a first waveform indicating a two-dimensional surface shape including a first position of a predetermined portion of the press-molded product. The necking determination device for the press-molded product may include a derivation unit for deriving the amount of change in the first waveform. The necking determination device for the press-molded product may include a determination unit for determining whether or not necking has occurred in a predetermined portion based on the amount of change in the first waveform.

本発明の一態様に係るプログラムは、上記プレス成形品のネッキング判定方法をコンピュータに実行させるためのプログラムであってよい。 The program according to one aspect of the present invention may be a program for causing a computer to execute the necking determination method of the press-molded article.

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。 The outline of the above invention does not list all the necessary features of the present invention. A subcombination of these feature groups can also be an invention.

プレス成形品の検査システムの概略的な構成を示す図である。It is a figure which shows the schematic structure of the inspection system of a press-molded article. プレス成形品のネッキング検査の対象となる部位を測定する手法を説明するための一例を示す図である。It is a figure which shows an example for demonstrating the method of measuring the part to be the target of the necking inspection of a press-molded article. 一実施形態に係るネッキング判定装置の機能ブロックの一例を示す図である。It is a figure which shows an example of the functional block of the necking determination apparatus which concerns on one Embodiment. ネッキング検査の対象となる部位の任意の位置において計測した波形、計測した波形を1階微分した1階微分波形、及び2階微分した2階微分波形の一例を示す図である。It is a figure which shows an example of the waveform measured at an arbitrary position of the part to be the necking inspection, the 1st derivative waveform which differentiated the measured waveform 1st order, and the 2nd derivative waveform which differentiated 2nd order. ネッキング検査の対象となる部位の任意の位置において計測した波形、計測した波形を1階微分した1階微分波形、及び2階微分した2階微分波形の一例を示す図である。It is a figure which shows an example of the waveform measured at an arbitrary position of the part to be the necking inspection, the 1st derivative waveform which differentiated the measured waveform 1st order, and the 2nd derivative waveform which differentiated 2nd order. プレス成形品のネッキング判定するための手順の一例を示すフローチャートである。It is a flowchart which shows an example of the procedure for determining the necking of a press-molded article. ハードウェア構成の一例を示す図である。It is a figure which shows an example of a hardware configuration.

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は請求の範囲に係る発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。 Hereinafter, the present invention will be described through embodiments of the invention, but the following embodiments do not limit the invention according to the claims. Also, not all combinations of features described in the embodiments are essential to the means of solving the invention.

本発明の様々な実施形態は、フローチャート及びブロック図を参照して記載されてよく、ここにおいてブロックは、(1)操作が実行されるプロセスの段階または(2)操作を実行する役割を持つ装置の「部」を表わしてよい。特定の段階及び「部」が、プログラマブル回路、及び/またはプロセッサによって実装されてよい。専用回路は、デジタル及び/またはアナログハードウェア回路を含んでよい。集積回路(IC)及び/またはディスクリート回路を含んでよい。プログラマブル回路は、再構成可能なハードウェア回路を含んでよい。再構成可能なハードウェア回路は、論理AND、論理OR、論理XOR、論理NAND、論理NOR、及び他の論理操作、フリップフロップ、レジスタ、フィールドプログラマブルゲートアレイ(FPGA)、プログラマブルロジックアレイ(PLA)等のようなメモリ要素等を含んでよい。 Various embodiments of the present invention may be described with reference to flowcharts and block diagrams, wherein the block is (1) a stage of the process in which the operation is performed or (2) a device having a role of performing the operation. May represent a "part" of. Specific steps and "parts" may be implemented by programmable circuits and / or processors. Dedicated circuits may include digital and / or analog hardware circuits. It may include integrated circuits (ICs) and / or discrete circuits. The programmable circuit may include a reconfigurable hardware circuit. Reconfigurable hardware circuits include logical AND, logical OR, logical XOR, logical NAND, logical NOR, and other logical operations, flip-flops, registers, field programmable gate arrays (FPGA), programmable logic arrays (PLA), etc. It may include a memory element such as.

コンピュータ可読媒体は、適切なデバイスによって実行される命令を格納可能な任意の有形なデバイスを含んでよい。その結果、そこに格納される命令を有するコンピュータ可読媒体は、フローチャートまたはブロック図で指定された操作を実行するための手段を作成すべく実行され得る命令を含む、製品を備えることになる。コンピュータ可読媒体の例としては、電子記憶媒体、磁気記憶媒体、光記憶媒体、電磁記憶媒体、半導体記憶媒体等が含まれてよい。コンピュータ可読媒体のより具体的な例としては、フロッピー(登録商標)ディスク、ディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリメモリ(ROM)、消去可能プログラマブルリードオンリメモリ(EPROMまたはフラッシュメモリ)、電気的消去可能プログラマブルリードオンリメモリ(EEPROM)、静的ランダムアクセスメモリ(SRAM)、コンパクトディスクリードオンリメモリ(CD-ROM)、デジタル多用途ディスク(DVD)、ブルーレイ(RTM)ディスク、メモリスティック、集積回路カード等が含まれてよい。 The computer readable medium may include any tangible device capable of storing instructions executed by the appropriate device. As a result, the computer-readable medium having the instructions stored therein will include the product, including instructions that can be executed to create means for performing the operation specified in the flowchart or block diagram. Examples of computer-readable media may include electronic storage media, magnetic storage media, optical storage media, electromagnetic storage media, semiconductor storage media, and the like. More specific examples of computer-readable media include floppy (registered trademark) disks, diskettes, hard disks, random access memory (RAM), read-only memory (ROM), erasable programmable read-only memory (EPROM or flash memory), Electrically erasable programmable read-only memory (EEPROM), static random access memory (SRAM), compact disc read-only memory (CD-ROM), digital versatile disc (DVD), Blu-ray (RTM) disc, memory stick, integrated A circuit card or the like may be included.

コンピュータ可読命令は、1または複数のプログラミング言語の任意の組み合わせで記述されたソースコードまたはオブジェクトコードの何れかを含んでよい。ソースコードまたはオブジェクトコードは、従来の手続型プログラミング言語を含む。従来の手続型プログラミング言語は、アセンブラ命令、命令セットアーキテクチャ(ISA)命令、マシン命令、マシン依存命令、マイクロコード、ファームウェア命令、状態設定データ、またはSmalltalk、JAVA(登録商標)、C++等のようなオブジェクト指向プログラミング言語、及び「C」プログラミング言語または同様のプログラミング言語でよい。コンピュータ可読命令は、汎用コンピュータ、特殊目的のコンピュータ、若しくは他のプログラム可能なデータ処理装置のプロセッサまたはプログラマブル回路に対し、ローカルにまたはローカルエリアネットワーク(LAN)、インターネット等のようなワイドエリアネットワーク(WAN)を介して提供されてよい。プロセッサまたはプログラマブル回路は、フローチャートまたはブロック図で指定された操作を実行するための手段を作成すべく、コンピュータ可読命令を実行してよい。プロセッサの例としては、コンピュータプロセッサ、処理ユニット、マイクロプロセッサ、デジタル信号プロセッサ、コントローラ、マイクロコントローラ等を含む。 Computer-readable instructions may include either source code or object code written in any combination of one or more programming languages. Source code or object code includes traditional procedural programming languages. Traditional procedural programming languages are assembler instructions, instruction set architecture (ISA) instructions, machine instructions, machine-dependent instructions, microcodes, firmware instructions, state setting data, or Smalltalk, JAVA®, C ++, etc. It may be an object-oriented programming language, and a "C" programming language or a similar programming language. Computer-readable instructions are used locally or to a local area network (LAN), wide area network (WAN), etc., to the processor or programmable circuit of a general purpose computer, special purpose computer, or other programmable data processing device. ) May be provided. The processor or programmable circuit may execute computer-readable instructions to create means for performing the operations specified in the flowchart or block diagram. Examples of processors include computer processors, processing units, microprocessors, digital signal processors, controllers, microcontrollers, and the like.

図1は、プレス成形品800の検査システム1の概略的な構成を示す図である。検査システム1は、制御装置100、トラッキング撮像部200、ネッキング測定部300、外観撮像部400、整列処理部500、ベルトコンベア700、良品用容器900及び不良品用容器902を備える。制御装置100は、ネッキング判定装置の一例である。 FIG. 1 is a diagram showing a schematic configuration of an inspection system 1 of a press-molded product 800. The inspection system 1 includes a control device 100, a tracking image pickup unit 200, a necking measurement unit 300, an appearance image pickup unit 400, an alignment processing unit 500, a belt conveyor 700, a good product container 900, and a defective product container 902. The control device 100 is an example of a necking determination device.

トラッキング撮像部200、ネッキング測定部300、外観撮像部400、整列処理部500、及びベルトコンベア700は、ネットワーク600を介して制御装置100に接続されてよい。ベルトコンベア700は、プレス加工が施されたプレス成形品800をトラッキング撮像部200、ネッキング測定部300、外観撮像部400、及び整列処理部500による処理が行われる位置に搬送する。プレス成形品800は、硬鋼、軟鋼、アルミニウム、チタンまたは銅などの金属材料からなる板材を、プレス成形装置によりプレス成形することで製造される。プレス成形品800は、例えば、自動車骨格部品などである。 The tracking image pickup unit 200, the necking measurement unit 300, the appearance image pickup unit 400, the alignment processing unit 500, and the belt conveyor 700 may be connected to the control device 100 via the network 600. The belt conveyor 700 conveys the press-formed product 800 to a position where processing by the tracking image pickup unit 200, the necking measurement unit 300, the appearance image pickup unit 400, and the alignment processing unit 500 is performed. The press-molded product 800 is manufactured by press-molding a plate material made of a metal material such as hard steel, mild steel, aluminum, titanium or copper by a press molding apparatus. The press-molded product 800 is, for example, an automobile skeleton part or the like.

検査システム1は、トラッキング撮像部200により撮像されたプレス成形品800の画像に基づいて、プレス成形品800の予め定められた部位の位置情報を特定する工程を実行する。制御装置100は、特定したネッキング検査の対象となる部位の位置情報をネッキング測定部300に提供する。ベルトコンベア700は、ネッキング測定部300による処理が行われる位置にプレス成形品800を搬送する。 The inspection system 1 executes a step of specifying the position information of a predetermined portion of the press-molded product 800 based on the image of the press-molded product 800 captured by the tracking image pickup unit 200. The control device 100 provides the necking measurement unit 300 with position information of the specified site to be inspected for necking. The belt conveyor 700 conveys the press-molded product 800 to a position where processing by the necking measuring unit 300 is performed.

次に、検査システム1は、ネッキング測定部300を用いて、プレス成形品800の予め定められた部位にネッキングが発生しているか否かを判定する工程を実行する。ネッキング測定部300は、パラレルリンク部310及び変位計測部320を有する。パラレルリンク部310は、リンク機構を有する。リンク機構は、3対のリンクにより構成されてよい。各対のリンクは、互いに並列に配置されてよい。 Next, the inspection system 1 uses the necking measurement unit 300 to execute a step of determining whether or not necking has occurred in a predetermined portion of the press-molded product 800. The necking measurement unit 300 has a parallel link unit 310 and a displacement measurement unit 320. The parallel link unit 310 has a link mechanism. The link mechanism may be composed of three pairs of links. Each pair of links may be placed in parallel with each other.

変位計測部320は、リンク機構に連結されたレーザ変位計を有する。レーザ変位計は、2次元レーザ変位計でよい。ネッキング測定部300は、制御装置100から提供された位置情報に基づいて、3対のリンクを動作させ、ネッキング検査の対象となる部位の計測位置にレーザ変位計を位置合わせする。レーザ変位計は、プレス成形品800のネッキング検査の対象となる部位を厚み方向でみた片側のみに配置されてよい。レーザ変位計は、プレス成形品800のネッキング検査の対象となる部位にレーザ光を照射し、その部位からの反射光を受光する。レーザ変位計は、その反射光からネッキング検査の対象となる部位の計測位置を含む2次元表面形状を測定する。 The displacement measuring unit 320 has a laser displacement meter connected to a link mechanism. The laser displacement meter may be a two-dimensional laser displacement meter. The necking measurement unit 300 operates three pairs of links based on the position information provided by the control device 100, and aligns the laser displacement meter with the measurement position of the portion to be the target of the necking inspection. The laser displacement meter may be arranged only on one side of the press-molded product 800 to be inspected for necking in the thickness direction. The laser displacement meter irradiates a portion of the press-molded product 800 to be inspected for necking with laser light, and receives the reflected light from that portion. The laser displacement meter measures the two-dimensional surface shape including the measurement position of the part to be the necking inspection from the reflected light.

制御装置100は、レーザ変位計により計測されたネッキング検査の対象となる部位の計測位置を含む2次元表面形状を示す波形を取得する。制御装置100は、取得した波形に基づいて、局所的な伸び変形により板厚が局所的に減少したり、局所的に亀裂が発生したりするネッキングがネッキング検査の対象となる部位に発生しているか否かを判定する。ベルトコンベア700は、外観撮像部400による処理が行われる位置にプレス成形品800を搬送する。 The control device 100 acquires a waveform indicating a two-dimensional surface shape including a measurement position of a portion to be inspected for necking, which is measured by a laser displacement meter. In the control device 100, based on the acquired waveform, necking such that the plate thickness is locally reduced or cracks are locally generated due to local elongation deformation occurs at the site to be the target of the necking inspection. Determine if it is. The belt conveyor 700 conveys the press-molded product 800 to a position where processing by the appearance imaging unit 400 is performed.

次に、検査システム1は、外観撮像部400により撮像されたプレス成形品800の画像に基づいて、プレス成形品800の傷、凹み、歪み、亀裂、汚れなどの不良個所の有無を判定する工程を実行する。制御装置100は、外観撮像部400により送信されたプレス成形品800の画像を受信する。制御装置100は、受信したプレス成形品800の画像に基づいて、例えば、傷や、凹み、歪み、亀裂、汚れなどの不良個所がプレス成形品800に存在するか否かを判定してよい。制御装置100は、判定結果に基づいて、整列処理部500に、プレス成形品800を良品用容器900または不良品用容器902へ移動させる旨の指示情報を整列処理部500に送信する。ベルトコンベア700は、整列処理部500により処理が行われる位置にプレス成形品800を搬送する。 Next, the inspection system 1 is a step of determining the presence or absence of defective parts such as scratches, dents, distortions, cracks, and stains on the press-molded product 800 based on the image of the press-molded product 800 imaged by the appearance imaging unit 400. To execute. The control device 100 receives the image of the press-molded product 800 transmitted by the appearance imaging unit 400. Based on the received image of the press-molded product 800, the control device 100 may determine whether or not defective portions such as scratches, dents, distortions, cracks, and stains are present in the press-molded product 800. Based on the determination result, the control device 100 transmits to the alignment processing unit 500 instruction information to move the press-molded product 800 to the non-defective product container 900 or the defective product container 902. The belt conveyor 700 conveys the press-molded product 800 to a position where processing is performed by the alignment processing unit 500.

最後に、検査システム1は、整列処理部500を用いてプレス成形品800を良品用容器900及び不良品用容器902に振り分ける工程を実行する。整列処理部500は、パラレルリンク部510及びグリッパー部520を有する。パラレルリンク部510は、リンク機構を有し、リンク機構は、3対のリンクにより構成されてよい。各対のリンクは、互いに並列に配置されてよい。グリッパー部520は、マグネット吸着によってプレス成形品800を保持するグリッパーを有する。整列処理部500は、制御装置100から受信した指示情報に従って、不良個所が存在しない、すなわち良品と判定されたプレス成形品800を良品用容器900に収容する。一方、整列処理部500は、不良個所が存在する、すなわち不良品と判定されたプレス成形品800を不良品用容器902に収容する。 Finally, the inspection system 1 executes a step of distributing the press-molded product 800 into the non-defective product container 900 and the defective product container 902 using the alignment processing unit 500. The alignment processing unit 500 has a parallel link unit 510 and a gripper unit 520. The parallel link unit 510 has a link mechanism, and the link mechanism may be composed of three pairs of links. Each pair of links may be placed in parallel with each other. The gripper portion 520 has a gripper that holds the press-molded product 800 by magnetic attraction. According to the instruction information received from the control device 100, the alignment processing unit 500 accommodates the press-molded product 800 determined to have no defective portion, that is, a non-defective product, in the non-defective container 900. On the other hand, the alignment processing unit 500 accommodates the press-molded product 800, which has a defective portion, that is, is determined to be a defective product, in the defective product container 902.

図2は、プレス成形品800のネッキング検査の対象となる部位を測定する手法を説明するための一例を示す図である。ネッキング検査の対象となる部位は、予め定められた部位である。図2に示すネッキング検査の対象となる部位810は、一例として、プレス成形品800の端部において絞り加工が施された箇所である。図2では、絞り加工が施された箇所を含む2本の点線の内側の領域をネッキング検査の対象となる範囲として示す。一実施形態において、プレス成形品800の端部において絞り加工が施された部位の絞り方向に面上で垂直な方向を長手方向812として定義する。 FIG. 2 is a diagram showing an example for explaining a method for measuring a portion of a press-molded product 800 to be inspected for necking. The part to be the target of the necking inspection is a predetermined part. The portion 810 that is the target of the necking inspection shown in FIG. 2 is, for example, a portion of the end portion of the press-molded product 800 that has been drawn. In FIG. 2, the area inside the two dotted lines including the drawn portion is shown as the range to be the target of the necking inspection. In one embodiment, the direction perpendicular to the drawing direction of the portion of the press-molded product 800 that has been drawn is defined as the longitudinal direction 812.

ネッキング検査の対象となる部位は、プレス成形品の金型の形状に基づいて定められてよい。ネッキング検査の対象となる部位は、プレス加工において成形される部品の形状の変化を、破断予測などを演算するシミュレーション装置を用いてシミュレーションすることにより、局所的な伸び変形により板厚が局所的に減少したり、局所的に亀裂が発生したりするネッキングが生じやすい部位であると判定された部位であってよい。ネッキング検査の対象となる部位は、プレス成形の対象となる部品に類似するプレス成形品において、ネッキングが生じやすい部位であると作業者が特定した部位であってよい。 The portion to be inspected for necking may be determined based on the shape of the die of the press-molded product. For the part to be inspected for necking, the plate thickness is locally increased by local elongation deformation by simulating changes in the shape of parts formed in press working using a simulation device that calculates fracture prediction. It may be a site determined to be a site where necking is likely to occur, such as a decrease or a local crack. The portion to be inspected for necking may be a portion specified by the operator as a portion in which necking is likely to occur in a press-molded product similar to a part to be press-molded.

レーザ変位計324は、帯状のラインレーザ光325を部位810に照射し、反射光326を受光する。ネッキングは、例えば、絞り加工された部位810の長手方向812に沿って発生する可能性がある。レーザ変位計324は、長手方向812に沿って移動して、順次、ラインレーザ光325を部位810に照射して、部位810内の複数の箇所の2次元表面形状を計測してよい。レーザ変位計324は、帯状のラインレーザ光325の幅方向327が部位810の長手方向812と異なる方向になるように、ラインレーザ光325を部位810に照射する。レーザ変位計324は、帯状のラインレーザ光325の幅方向327が部位810の長手方向812に対して交差するように、ラインレーザ光325を部位810に照射してよい。レーザ変位計324は、帯状のラインレーザ光325の幅方向が部位810の長手方向812に対して垂直になるように、ラインレーザ光325を部位810に照射してよい。部位810が曲線状に延びる場合には、レーザ変位計324は、帯状のラインレーザ光325の幅方向327の直線が部位810の長手方向812の曲線と交わる点の接線に対して、帯状のラインレーザ光325の幅方向327の直線が垂直になるように、ラインレーザ光325を部位810に照射してよい。なお、本実施形態では、レーザ変位計324を、プレス成形品800の部位810まで移動させて、ラインレーザ光325を部位810に照射する例について説明する。しかし、プレス成形品800を移動することで、予め定められた位置に設置されたレーザ変位計324のラインレーザ光325を部位810に照射してもよい。また、レーザ変位計324及びプレス成形品800を互いに移動させることで、レーザ変位計324のラインレーザ光325を部位810に照射してもよい。 The laser displacement meter 324 irradiates the site 810 with a band-shaped line laser beam 325 and receives the reflected light 326. Necking can occur, for example, along the longitudinal direction 812 of the drawn portion 810. The laser displacement meter 324 may move along the longitudinal direction 812 and sequentially irradiate the site 810 with line laser light 325 to measure the two-dimensional surface shape of a plurality of points in the site 810. The laser displacement meter 324 irradiates the site 810 with the line laser beam 325 so that the width direction 327 of the band-shaped line laser beam 325 is different from the longitudinal direction 812 of the site 810. The laser displacement meter 324 may irradiate the site 810 with the line laser beam 325 so that the widthwise 327 of the strip-shaped line laser beam 325 intersects the longitudinal direction 812 of the site 810. The laser displacement meter 324 may irradiate the site 810 with the line laser beam 325 so that the width direction of the band-shaped line laser beam 325 is perpendicular to the longitudinal direction 812 of the site 810. When the site 810 extends in a curved line, the laser displacement meter 324 has a band-shaped line with respect to the tangent of the point where the straight line in the width direction 327 of the band-shaped line laser beam 325 intersects the curve in the longitudinal direction 812 of the site 810. The site 810 may be irradiated with the line laser beam 325 so that the straight line in the width direction 327 of the laser beam 325 is vertical. In this embodiment, an example in which the laser displacement meter 324 is moved to the portion 810 of the press-molded product 800 and the line laser beam 325 is irradiated to the portion 810 will be described. However, by moving the press-molded product 800, the site 810 may be irradiated with the line laser beam 325 of the laser displacement meter 324 installed at a predetermined position. Further, by moving the laser displacement meter 324 and the press-molded product 800 to each other, the line laser beam 325 of the laser displacement meter 324 may be applied to the portion 810.

パラレルリンク部310は、制御装置100から提供された位置情報に基づいて、3対のリンクを動作させ、ネッキング検査の対象となる部位の長手方向の端部に変位計測部320のレーザ変位計324を位置合わせする。レーザ変位計324は、プレス成形品800のネッキング検査の対象となる部位を厚み方向でみた片側のみに配置されてよい。レーザ変位計324は、ネッキング検査の対象となる部位の長手方向とは異なる短手方向に延びるラインレーザ光を長手方向に沿って照射する。パラレルリンク部310は、レーザ変位計324を長手方向に沿って移動させる。レーザ変位計324で計測された波形は、ネッキング検査の対象となる部位の任意の位置における短手方向の2次元表面形状を示す。 The parallel link unit 310 operates three pairs of links based on the position information provided by the control device 100, and the laser displacement meter 324 of the displacement measurement unit 320 is located at the longitudinal end of the site to be inspected for necking. Align. The laser displacement meter 324 may be arranged only on one side of the press-molded product 800 to be inspected for necking in the thickness direction. The laser displacement meter 324 irradiates a line laser beam extending in the lateral direction different from the longitudinal direction of the portion to be inspected for necking along the longitudinal direction. The parallel link unit 310 moves the laser displacement meter 324 along the longitudinal direction. The waveform measured by the laser displacement meter 324 shows the two-dimensional surface shape in the lateral direction at an arbitrary position of the part to be inspected for necking.

図3は、一実施形態に係るネッキング判定装置の機能ブロックの一例を示す図である。制御装置100は、主制御部110、ネッキング検査部120、トラッキング部130、及び外観検査部140を備える。ネッキング検査部120は、変位取得部122、導出部124、及びネッキング判定部126を有する。外観検査部140は、画像取得部142及び外観判定部144を有する。主制御部110は、バスを介して、ネッキング検査部120、トラッキング部130、及び外観検査部140に接続されてよい。一実施形態において、制御装置100は、ネッキング判定装置またはコンピュータの一例である。ネッキング検査部120及び変位取得部122はそれぞれ、検査部及び取得部の一例である。主制御部110、ネッキング検査部120、トラッキング部130、及び外観検査部140のそれぞれは、別々のコンピュータで構成されてもよい。 FIG. 3 is a diagram showing an example of a functional block of the necking determination device according to the embodiment. The control device 100 includes a main control unit 110, a necking inspection unit 120, a tracking unit 130, and an appearance inspection unit 140. The necking inspection unit 120 includes a displacement acquisition unit 122, a lead-out unit 124, and a necking determination unit 126. The appearance inspection unit 140 has an image acquisition unit 142 and an appearance determination unit 144. The main control unit 110 may be connected to the necking inspection unit 120, the tracking unit 130, and the visual inspection unit 140 via a bus. In one embodiment, the control device 100 is an example of a necking determination device or a computer. The necking inspection unit 120 and the displacement acquisition unit 122 are examples of the inspection unit and the acquisition unit, respectively. Each of the main control unit 110, the necking inspection unit 120, the tracking unit 130, and the visual inspection unit 140 may be configured by separate computers.

主制御部110は、ネットワーク600を介して、トラッキング撮像部200、パラレルリンク部310、変位計測部320、外観撮像部400、パラレルリンク部510、及びグリッパー部520に接続されてよい。パラレルリンク部310は、制御部312及びリンク部314を有する。変位計測部320は、制御部322及びレーザ変位計324を有する。パラレルリンク部510は、制御部512及びリンク部514を有する。グリッパー部520は、制御部522及びハンド部524を有する。ハンド部524は、マグネット吸着によってプレス成形品800を保持するグリッパーであってよい。 The main control unit 110 may be connected to the tracking image pickup unit 200, the parallel link unit 310, the displacement measurement unit 320, the appearance image pickup unit 400, the parallel link unit 510, and the gripper unit 520 via the network 600. The parallel link unit 310 has a control unit 312 and a link unit 314. The displacement measuring unit 320 has a control unit 322 and a laser displacement meter 324. The parallel link unit 510 has a control unit 512 and a link unit 514. The gripper unit 520 has a control unit 522 and a hand unit 524. The hand portion 524 may be a gripper that holds the press-molded product 800 by magnetic attraction.

トラッキング撮像部200は、ベルトコンベア700の予め定められたトラッキング領域を予め定められた間隔で撮像する。トラッキング領域の幅は、ベルトコンベア700のベルトの幅(搬送方向に直交する方向)と同等でよい。トラッキング領域の長さ(搬送方向)は、撮像間隔、及びベルトコンベア700のベルトの移動速度に基づいて、ベルトコンベア700上を搬送される全てのプレス成形品800が撮像できるように、適宜設定されてよい。 The tracking image pickup unit 200 images a predetermined tracking area of the belt conveyor 700 at predetermined intervals. The width of the tracking region may be the same as the width of the belt of the belt conveyor 700 (direction orthogonal to the transport direction). The length (conveyance direction) of the tracking region is appropriately set so that all the press-molded products 800 transported on the belt conveyor 700 can be imaged based on the imaging interval and the moving speed of the belt of the belt conveyor 700. It's okay.

トラッキング撮像部200は、撮像用の照明により照らされたプレス成形品800を撮像してよい。トラッキング撮像部200は、撮像用の照明によりプレス成形品800を照らすことで、プレス成形品800の表面に影のない画像を撮像できる。トラッキング撮像部200により撮像されたプレス成形品800の画像は、主制御部110を介してトラッキング部130に送信される。トラッキング部130は、トラッキング撮像部200がプレス成形品800を撮像したときのプレス成形品800の位置を特定する。トラッキング部130は、トラッキング領域内の予め定められた位置に対するプレス成形品800の相対的な位置を検出する。例えば、トラッキング部130は、画像をエッジ処理することによりプレス成形品800の輪郭を抽出し、抽出された輪郭に基づいて、トラッキング領域内の予め定められた位置を基準とした、プレス成形品800の各軸(x軸、y軸、及びz軸)の座標値、及び各軸の回転方向の座標値をプレス成形品800の位置を示す座標情報として特定する。トラッキング部130は、プレス成形品800の位置を示す座標情報と、ベルトコンベア700の移動量を計測するエンコーダによるトラッキング撮像部200の撮影時の計測値とを主制御部110を介してパラレルリンク部310に送信する。 The tracking image pickup unit 200 may take an image of the press-molded product 800 illuminated by the illumination for imaging. The tracking image pickup unit 200 can capture an image without a shadow on the surface of the press-molded product 800 by illuminating the press-molded product 800 with the illumination for imaging. The image of the press-molded product 800 captured by the tracking image pickup unit 200 is transmitted to the tracking unit 130 via the main control unit 110. The tracking unit 130 specifies the position of the press-molded product 800 when the tracking image pickup unit 200 images the press-molded product 800. The tracking unit 130 detects the relative position of the press-molded article 800 with respect to a predetermined position in the tracking area. For example, the tracking unit 130 extracts the contour of the press-molded product 800 by edge processing the image, and based on the extracted contour, the press-molded product 800 is based on a predetermined position in the tracking region. The coordinate values of each axis (x-axis, y-axis, and z-axis) and the coordinate values in the rotation direction of each axis are specified as coordinate information indicating the position of the press-molded product 800. The tracking unit 130 transmits coordinate information indicating the position of the press-molded product 800 and the measured value at the time of shooting of the tracking imaging unit 200 by the encoder that measures the movement amount of the belt conveyor 700 via the main control unit 110. Send to 310.

パラレルリンク部310の制御部312は、座標情報及び計測値と、ベルトコンベア700によるプレス成形品800の移動量とに基づいて、変位計測部320が計測する計測領域でのプレス成形品800の位置を示す座標情報を特定する。制御部312は、計測領域内の予め定められた位置を基準とした、プレス成形品800の各軸の座標値、及び各軸の回転方向の座標値を座標情報として特定してよい。 The control unit 312 of the parallel link unit 310 determines the position of the press-molded product 800 in the measurement region measured by the displacement measurement unit 320 based on the coordinate information and the measured value and the amount of movement of the press-molded product 800 by the belt conveyor 700. Specify the coordinate information indicating. The control unit 312 may specify the coordinate value of each axis of the press-molded product 800 and the coordinate value in the rotation direction of each axis as the coordinate information with reference to a predetermined position in the measurement area.

さらに、制御部312は、計測領域内のプレス成形品800の座標情報と、プレス成形品800の基準点に対するネッキング検査の対象となる部位の相対的な位置を示す予め定められた位置情報とに基づいて、計測領域内の予め定められた位置を基準とした、プレス成形品800のネッキング検査の対象となる部位の各軸の座標値、及び各軸の回転方向の座標値を、ネッキング検査の対象となる部位の座標情報として特定する。制御部312は、計測領域内の予め定められた位置を基準とした、プレス成形品800のネッキング検査の対象となる部位の座標情報に基づいて、リンク部314を動作させ、ネッキング検査の対象となる部位の計測位置にレーザ変位計324を位置合わせしてよい。 Further, the control unit 312 obtains the coordinate information of the press-molded product 800 in the measurement region and the predetermined position information indicating the relative position of the portion to be the necking inspection with respect to the reference point of the press-molded product 800. Based on this, the coordinate values of each axis of the part to be the target of the necking inspection of the press-molded product 800 and the coordinate values in the rotation direction of each axis based on the predetermined position in the measurement area are obtained by the necking inspection. Specify as the coordinate information of the target part. The control unit 312 operates the link unit 314 based on the coordinate information of the part to be the target of the necking inspection of the press-molded product 800 based on the predetermined position in the measurement area, and sets the link unit 314 as the target of the necking inspection. The laser displacement meter 324 may be aligned with the measurement position of the portion.

レーザ変位計324は、プレス成形品800のネッキング検査の対象となる部位を厚み方向でみた片側のみに配置されてよい。制御部322は、レーザ変位計324に、プレス成形品800のネッキング検査の対象となる部位の計測位置にレーザ光を照射させる。制御部312は、リンク部314を動作させて、レーザ変位計324をネッキング検査の対象となる部位の長手方向に移動させる。レーザ変位計324は、ネッキング検査の対象となる部位の長手方向とは異なる短手方向に延びるラインレーザ光を長手方向に沿って走査してよい。レーザ変位計324は、ネッキング検査の対象となる部位の複数の計測位置からの反射光を受光する。制御部322は、レーザ変位計324で計測された複数の計測位置を含む2次元表面波形を示す複数の波形データを主制御部110に送信する。 The laser displacement meter 324 may be arranged only on one side of the press-molded product 800 to be inspected for necking in the thickness direction. The control unit 322 causes the laser displacement meter 324 to irradiate the measurement position of the portion to be inspected for the necking inspection of the press-molded product 800 with the laser beam. The control unit 312 operates the link unit 314 to move the laser displacement meter 324 in the longitudinal direction of the portion to be inspected for necking. The laser displacement meter 324 may scan the line laser beam extending in the lateral direction different from the longitudinal direction of the portion to be inspected for necking along the longitudinal direction. The laser displacement meter 324 receives the reflected light from a plurality of measurement positions of the portion to be inspected for necking. The control unit 322 transmits a plurality of waveform data showing a two-dimensional surface waveform including a plurality of measurement positions measured by the laser displacement meter 324 to the main control unit 110.

主制御部110は受信した波形データをネッキング検査部120に送信する。ネッキング検査部120の変位取得部122は、複数の計測位置を含む2次元表面形状を示す複数の波形を取得する。導出部124は、取得した複数の波形のそれぞれを2階微分することで各波形の2階微分波形を導出する。ネッキング判定部126は、各波形の2階微分波形に基づいて、局所的な伸び変形により板厚が局所的に減少したり、局所的に亀裂が発生したりするネッキングがネッキング検査の対象となる部位に発生しているか否かを判定する。 The main control unit 110 transmits the received waveform data to the necking inspection unit 120. The displacement acquisition unit 122 of the necking inspection unit 120 acquires a plurality of waveforms indicating a two-dimensional surface shape including a plurality of measurement positions. The derivation unit 124 derives the second-order differential waveform of each waveform by second-order differentiation of each of the acquired plurality of waveforms. The necking determination unit 126 is subject to the necking inspection for necking in which the plate thickness is locally reduced or cracks are locally generated due to local elongation deformation based on the second-order differential waveform of each waveform. Determine if it occurs at the site.

ネッキング判定部126は、取得した各波形の2階微分波形がネッキングの発生が高いことを示す予め定められたネッキング発生条件を満たすか否かに基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、取得した各波形の2階微分波形がネッキングの発生が高いことを示す予め定められた波形パターンを満たすか否かに基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。予め定められた波形パターンは、実際にネッキングの発生した波形パターンを機械学習することで、順次更新されてよい。ネッキング判定部126は、取得した各波形の2階微分波形の振幅がネッキングの発生が高いことを示す予め定められた振幅以上か否かに基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、取得した各波形の2階微分波形上の極大点と極小点とに基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、取得した各波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差に基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差が予め定められた閾値以上である場合、その2階微分波形が予め定められたネッキング発生条件を満たすと判定してよい。ネッキング判定部126は、複数の波形のうち第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差、及び複数の波形のうち第2波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上である場合、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい。ネッキング判定部126は、複数の計測位置の複数の2階微分波形のうち、予め定められた数以上の2階微分波形が連続的に予め定められたネッキング発生条件を満たす場合に、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい。 The necking determination unit 126 determines that the necking is the target of the necking inspection based on whether or not the second-order differential waveform of each acquired waveform satisfies a predetermined necking occurrence condition indicating that the occurrence of necking is high. It may be determined whether or not it has occurred. The necking determination unit 126 generates necking at a portion to be inspected for necking based on whether or not the second-order differential waveform of each acquired waveform satisfies a predetermined waveform pattern indicating that the occurrence of necking is high. It may be determined whether or not it is done. The predetermined waveform pattern may be sequentially updated by machine learning the waveform pattern in which necking actually occurs. The necking determination unit 126 generates necking at a portion to be inspected for necking based on whether or not the amplitude of the second-order differential waveform of each acquired waveform is equal to or higher than a predetermined amplitude indicating that the occurrence of necking is high. It may be determined whether or not it is done. The necking determination unit 126 may determine whether or not necking occurs at a portion to be inspected for necking based on the maximum point and the minimum point on the second-order differential waveform of each acquired waveform. The necking determination unit 126 determines that the necking is the target of the necking inspection based on the difference between the maximum point and the minimum point that are adjacent to each other on the second-order differential waveform of each acquired waveform and include a zero point in between. It may be determined whether or not it has occurred. When the necking determination unit 126 is adjacent to each other on the second-order differential waveform and the difference between the maximum point including the zero point and the minimum point is equal to or more than a predetermined threshold value, the second-order differential waveform is predetermined. It may be determined that the specified necking occurrence condition is satisfied. The necking determination unit 126 is adjacent to each other on the second derivative waveform of the first waveform among the plurality of waveforms, and the difference between the maximum point and the minimum point including the zero point between them, and the second waveform among the plurality of waveforms. If the difference between the maximum point including the zero point and the minimum point on the second-order differential waveform is equal to or greater than a predetermined threshold, necking occurs at the site to be inspected for necking. It may be determined that it is. The necking determination unit 126 performs a necking inspection when, among a plurality of second-order differential waveforms at a plurality of measurement positions, a predetermined number or more of the second-order differential waveforms continuously satisfy a predetermined necking occurrence condition. It may be determined that necking has occurred in the target portion.

外観撮像部400は、プレス成形品800を撮像し、撮像したプレス成形品800の画像データを主制御部110へ送信する。主制御部110は、受信した画像データを外観検査部140の画像取得部142へ送信する。外観判定部144は、受信したプレス成形品800の画像データに基づいて、例えば、傷や、凹み、歪み、汚れなどの不良個所がプレス成形品800に存在するか否かを判定してよい。外観判定部144は、予め定められた良品のプレス成形品800の画像と、受信したプレス成形品800の画像とのマッチングを行い、互いの画像内のプレス成形品の類似度が予め定められた閾値以下である場合、画像内のプレス成形品800に不良個所があると判定してよい。外観判定部144は、予め定められた不良個所の形状及び色(例えば、白及び黒)のパターンと、受信したプレス成形品800の画像とのマッチングを行うことより、画像内のプレス成形品800に不良個所があるか否かを判定してよい。外観判定部144は、判定結果を主制御部110に送信する。主制御部110は、判定結果に基づいて、整列処理部500に、プレス成形品800を良品用容器900または不良品用容器902へ移動させる旨の指示情報を整列処理部500に送信する。 The appearance image pickup unit 400 takes an image of the press-molded product 800 and transmits the image data of the imaged press-molded product 800 to the main control unit 110. The main control unit 110 transmits the received image data to the image acquisition unit 142 of the visual inspection unit 140. The appearance determination unit 144 may determine whether or not defective parts such as scratches, dents, distortions, and stains are present in the press-molded product 800 based on the received image data of the press-molded product 800. The appearance determination unit 144 matches the predetermined good image of the press-molded product 800 with the received image of the press-molded product 800, and the similarity of the press-molded products in each image is predetermined. If it is equal to or less than the threshold value, it may be determined that the press-molded product 800 in the image has a defective portion. The appearance determination unit 144 matches the predetermined shape and color (for example, white and black) pattern of the defective portion with the received image of the press-molded product 800, so that the press-molded product 800 in the image is matched. It may be determined whether or not there is a defective part in. The appearance determination unit 144 transmits the determination result to the main control unit 110. Based on the determination result, the main control unit 110 transmits to the alignment processing unit 500 instruction information to move the press-molded product 800 to the non-defective product container 900 or the defective product container 902.

整列処理部500の制御部512は、主制御部110から受信した指示情報に従って、リンク部514を動作させて、ハンド部524をプレス成形品800に接触させる。グリッパー部520の制御部522は、ハンド部524を動作させて、プレス成形品800を吸着させる。制御部512は、リンク部514を動作させて、不良個所が存在しない、すなわち良品と判定されたプレス成形品800を良品用容器900に収容する。制御部512は、リンク部514を動作させて、不良個所が存在する、すなわち不良品と判定されたプレス成形品800を不良品用容器902に収容する。 The control unit 512 of the alignment processing unit 500 operates the link unit 514 according to the instruction information received from the main control unit 110 to bring the hand unit 524 into contact with the press-molded product 800. The control unit 522 of the gripper unit 520 operates the hand unit 524 to adsorb the press-molded product 800. The control unit 512 operates the link unit 514 to house the press-molded product 800, which is determined to have no defective portion, that is, a non-defective product, in the non-defective container 900. The control unit 512 operates the link unit 514 to accommodate the press-molded product 800, which has a defective portion, that is, is determined to be a defective product, in the defective product container 902.

図4Aは、ネッキング検査の対象となる部位の任意の位置において計測した波形、計測した波形を1階微分した1階微分波形、及び2階微分した2階微分波形の一例を示す図である。図4Aに示す測定データのグラフは、ネッキング検査の対象となる部位の任意の位置の断面形状、すなわち2次元表面形状を表す。レーザ変位計324をネッキング検査の対象となる部位の長手方向に移動させることで、ネッキング検査の対象となる部位の連続的な位置における2次元表面形状が次々と得られる。 FIG. 4A is a diagram showing an example of a waveform measured at an arbitrary position of a portion to be inspected for necking, a first-order differential waveform obtained by first-order differentiating the measured waveform, and a second-order differential waveform obtained by second-order differentiation. The graph of the measurement data shown in FIG. 4A represents a cross-sectional shape at an arbitrary position of a portion to be inspected for necking, that is, a two-dimensional surface shape. By moving the laser displacement meter 324 in the longitudinal direction of the portion to be inspected for necking, two-dimensional surface shapes at continuous positions of the portion to be inspected for necking can be obtained one after another.

ネッキング判定部126は、取得した波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差が予め定められた閾値以上である場合、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい。図4Aに示す2階微分したグラフには、0点を交差する変曲点が存在しない。したがって、図4Aに示す2階微分したグラフには、波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差が予め定められた閾値以上であることを示す波形は存在しない。この場合、ネッキング判定部126は、ネッキング検査の対象となる部位にネッキングが発生していないと判定してよい。 When the necking determination unit 126 is adjacent to each other on the second-order differential waveform of the acquired waveform and the difference between the maximum point including the zero point and the minimum point is equal to or more than a predetermined threshold value, the necking determination unit 126 is subject to the necking inspection. It may be determined that necking has occurred in the portion to be. In the second-order differentiated graph shown in FIG. 4A, there is no inflection point that intersects the 0 point. Therefore, in the second-order differentiated graph shown in FIG. 4A, the difference between the maximum point and the minimum point, which are adjacent to each other on the second-order differential waveform of the waveform and include a zero point in between, is equal to or more than a predetermined threshold value. There is no waveform to indicate that. In this case, the necking determination unit 126 may determine that necking has not occurred at the portion to be inspected for necking.

図4Bは、ネッキング検査の対象となる部位の任意の位置において計測した波形、計測した波形を1階微分した1階微分波形、及び2階微分した2階微分波形の一例を示す図である。図4Bに示す2階微分したグラフにおいて、0点と交差する前後で一度大きく下がった後に大きく上がる変曲点がネッキング部1000で囲われる範囲に存在する。ネッキング部1000で囲われる範囲に存在する波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差が予め定められた閾値以上を表している場合、ネッキング判定部126は、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい。 FIG. 4B is a diagram showing an example of a waveform measured at an arbitrary position of a portion to be inspected for necking, a first-order differential waveform obtained by first-order differentiating the measured waveform, and a second-order differential waveform obtained by second-order differentiation. In the second-order differentiated graph shown in FIG. 4B, there is an inflection point surrounded by the necking portion 1000, which is once greatly lowered before and after crossing the 0 point and then greatly increased. When the difference between the maximum point and the minimum point including the zero point is equal to or more than a predetermined threshold value on the waveform existing in the range surrounded by the necking unit 1000, the necking determination unit 126 is adjacent to each other. , It may be determined that necking has occurred at the site to be inspected for necking.

ネッキング検査の手法として他の手法が挙げられる。この手法では、まず、測定したデータの波形を拡大する。次に、波形のカーブしている箇所の曲率半径を算出する。そして、算出した曲率半径が閾値より大きいか否かを判定することで、ネッキングが発生しているか否かを判定する。この手法によれば、プレス加工の対象となる部品の形状に応じて曲率半径の閾値を定めなければならない。プレス加工の対象となる部品の形状ごとに、その都度、曲率半径の閾値を定めなければならず、手間がかかる。一実施形態におけるネッキングを判定する手法によれば、2階微分を行って変曲率をグラフ化することで、局所的な変化、すなわち、ネッキングを見つけることができる。一実施形態におけるネッキングを判定する手法によれば、2基のレーザ変位計324を用いなくても、ネッキング検査の対象となる部位の2次元表面形状からネッキングの有無を判定することができる。 Other methods can be mentioned as a method of necking inspection. In this method, first, the waveform of the measured data is enlarged. Next, the radius of curvature of the curved part of the waveform is calculated. Then, by determining whether or not the calculated radius of curvature is larger than the threshold value, it is determined whether or not necking has occurred. According to this method, the threshold value of the radius of curvature must be set according to the shape of the part to be pressed. It is troublesome to set a threshold value of the radius of curvature for each shape of the part to be pressed. According to the method for determining necking in one embodiment, a local change, that is, necking can be found by performing a second derivative and graphing the variable curvature. According to the method for determining necking in one embodiment, the presence or absence of necking can be determined from the two-dimensional surface shape of the portion to be inspected for necking without using two laser displacement meters 324.

図5は、プレス成形品800のネッキングを判定するための手順の一例を示すフローチャートである。トラッキング部130は、トラッキング処理によりプレス成形品800の位置を特定する(S100)。トラッキング部130は、トラッキング撮像部200により撮像されたプレス成形品800の画像を解析して、プレス成形品800の位置を特定してよい。トラッキング部130は、画像認識処理により、トラッキング領域内の予め定められた位置を基準とした、プレス成形品800の各軸の座標値、及び各軸の回転方向の座標値を示す座標情報を、プレス成形品800の位置として特定してよい。 FIG. 5 is a flowchart showing an example of a procedure for determining the necking of the press-molded product 800. The tracking unit 130 specifies the position of the press-molded product 800 by the tracking process (S100). The tracking unit 130 may analyze the image of the press-molded product 800 imaged by the tracking image pickup unit 200 to specify the position of the press-molded product 800. The tracking unit 130 uses image recognition processing to obtain coordinate values indicating the coordinate values of each axis of the press-molded product 800 and the coordinate values in the rotational direction of each axis based on a predetermined position in the tracking area. It may be specified as the position of the press-molded product 800.

パラレルリンク部310の制御部312は、ネッキング検査の対象となる部位を特定する(S102)。制御部312は、プレス成形品800の座標情報、及びトラッキング撮像部200のトラッキング領域から変位計測部320の計測領域までのプレス成形品800の移動量に基づいて、計測領域でのプレス成形品800の位置を示す座標情報を特定してよい。制御部312は、計測領域内の予め定められた位置を基準とした、プレス成形品800の各軸の座標値、及び各軸の回転方向の座標値を座標情報として特定してよい。さらに、制御部312は、計測領域内のプレス成形品800の座標情報と、プレス成形品800の基準点に対するネッキング検査の対象となる部位の相対的な位置を示す予め定められた位置情報とに基づいて、計測領域内の予め定められた位置を基準とした、プレス成形品800のネッキング検査の対象となる部位の各軸の座標値、及び各軸の回転方向の座標値を、ネッキング検査の対象となる部位の座標情報として特定してよい。 The control unit 312 of the parallel link unit 310 specifies a portion to be inspected for necking (S102). The control unit 312 determines the press-molded product 800 in the measurement area based on the coordinate information of the press-molded product 800 and the amount of movement of the press-molded product 800 from the tracking area of the tracking image pickup unit 200 to the measurement area of the displacement measurement unit 320. Coordinate information indicating the position of may be specified. The control unit 312 may specify the coordinate value of each axis of the press-molded product 800 and the coordinate value in the rotation direction of each axis as the coordinate information with reference to a predetermined position in the measurement area. Further, the control unit 312 obtains the coordinate information of the press-molded product 800 in the measurement region and the predetermined position information indicating the relative position of the portion to be the necking inspection with respect to the reference point of the press-molded product 800. Based on this, the coordinate values of each axis of the part to be the target of the necking inspection of the press-molded product 800 and the coordinate values in the rotation direction of each axis based on the predetermined position in the measurement area are obtained by the necking inspection. It may be specified as the coordinate information of the target part.

変位取得部122が、レーザ変位計324で計測されたネッキング検査の対象となる部位内の複数の位置のそれぞれを含む2次元表面形状を示す複数の波形を取得する(S104)。導出部124は、複数の波形のそれぞれを2階微分することで複数の波形の2階微分波形を導出する(S106)。 The displacement acquisition unit 122 acquires a plurality of waveforms indicating a two-dimensional surface shape including each of the plurality of positions in the site to be inspected for necking, which is measured by the laser displacement meter 324 (S104). The derivation unit 124 derives the second-order differential waveforms of the plurality of waveforms by second-order differentiation of each of the plurality of waveforms (S106).

ネッキング判定部126は、複数の2階微分波形のそれぞれがネッキング発生条件を満たすか否かを判定する(S108)。ネッキング判定部126は、各波形の2階微分波形に基づいて、局所的な伸び変形により板厚が局所的に減少したり、局所的に亀裂が発生したりするネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、取得した各波形の2階微分波形上の極大点と極小点とに基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。ネッキング判定部126は、取得した各波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差に基づいて、ネッキングがネッキング検査の対象となる部位に発生しているか否かを判定してよい。 The necking determination unit 126 determines whether or not each of the plurality of second-order differential waveforms satisfies the necking occurrence condition (S108). The necking determination unit 126 is subject to the necking inspection for necking in which the plate thickness is locally reduced or cracks are locally generated due to local elongation deformation based on the second-order differential waveform of each waveform. It may be determined whether or not it occurs at the site. The necking determination unit 126 may determine whether or not necking occurs at a portion to be inspected for necking based on the maximum point and the minimum point on the second-order differential waveform of each acquired waveform. The necking determination unit 126 determines that the necking is the target of the necking inspection based on the difference between the maximum point and the minimum point that are adjacent to each other on the second-order differential waveform of each acquired waveform and include a zero point in between. It may be determined whether or not it has occurred.

ネッキング判定部126は、複数の波形のうち第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差、及び複数の波形のうち第2波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上である場合、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい(S110)。ネッキング判定部126は、複数の2階微分波形のうち、予め定められた数以上の連続する2階微分波形が、互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上となるネッキング発生条件を満たす場合に、ネッキング検査の対象となる部位にネッキングが発生していると判定してよい。ネッキング判定部126は、複数の波形のうち第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差、及び複数の波形のうち第2波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上でない場合、ネッキング検査の対象となる部位にネッキングが発生していないと判定してよい(S112)。ネッキング判定部126は、複数の2階微分波形のうち、予め定められた数以上の連続する2階微分波形が、互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上となるネッキング発生条件を満たさない場合に、ネッキング検査の対象となる部位にネッキングが発生していないと判定してよい。 The necking determination unit 126 is adjacent to each other on the second derivative waveform of the first waveform among the plurality of waveforms, and the difference between the maximum point and the minimum point including the zero point between them, and the second waveform among the plurality of waveforms. If the difference between the maximum point including the zero point and the minimum point on the second-order differential waveform is equal to or greater than a predetermined threshold, necking occurs at the site to be inspected for necking. It may be determined that it is (S110). In the necking determination unit 126, among a plurality of second-order differential waveforms, a predetermined number or more of continuous second-order differential waveforms are adjacent to each other, and the difference between the maximum point including the zero point and the minimum point is different. When the conditions for generating necking, which are equal to or higher than a predetermined threshold value, are satisfied, it may be determined that necking has occurred in the portion to be inspected for necking. The necking determination unit 126 is adjacent to each other on the second derivative waveform of the first waveform among the plurality of waveforms, and the difference between the maximum point and the minimum point including the zero point between them, and the second waveform among the plurality of waveforms. If the difference between the maximum point including the zero point and the minimum point on the second-order differential waveform is not equal to or greater than a predetermined threshold, necking has occurred at the site to be inspected for necking. It may be determined that there is no such thing (S112). In the necking determination unit 126, among a plurality of second-order differential waveforms, a predetermined number or more of continuous second-order differential waveforms are adjacent to each other, and the difference between the maximum point including the zero point and the minimum point is different. If the conditions for generating necking that are equal to or higher than the predetermined thresholds are not satisfied, it may be determined that necking has not occurred at the site to be inspected for necking.

外観検査部140は、カメラで撮像されたプレス成形品800の外観検査を行う(S114)。画像取得部142は、外観撮像部400により撮像されたプレス成形品800の画像を取得してよい。外観判定部144は、画像取得部142で取得したプレス成形品800の画像データに基づいて、例えば、傷や、凹み、歪み、汚れなどの不良個所がプレス成形品800に存在するか否かを判定してよい。 The visual inspection unit 140 inspects the appearance of the press-molded product 800 imaged by the camera (S114). The image acquisition unit 142 may acquire an image of the press-molded product 800 imaged by the appearance image pickup unit 400. Based on the image data of the press-molded product 800 acquired by the image acquisition unit 142, the appearance determination unit 144 determines whether or not the press-molded product 800 has defective parts such as scratches, dents, distortions, and stains. You may judge.

主制御部110は、ネッキング発生条件及び外観検査の条件の両方の条件を満たすか否か判定してよい(S116)。プレス成形品800にネッキングが発生しておらず、かつ、不良個所が存在していない場合、主制御部110は、プレス成形品800を良品と判定する(S118)。プレス成形品800にネッキングが発生している、または、不良個所が存在している場合、主制御部110は、プレス成形品800を不良品と判定する(S120)。主制御部110は、判定結果に従って、整列処理部500にプレス成形品800を良品用容器900または不良品用容器902へ移動させ、良品を梱包し、処理を終了する。 The main control unit 110 may determine whether or not both the conditions for generating necking and the conditions for visual inspection are satisfied (S116). When the press-molded product 800 has no necking and no defective portion exists, the main control unit 110 determines that the press-molded product 800 is a non-defective product (S118). When the press-molded product 800 has necking or a defective portion exists, the main control unit 110 determines that the press-molded product 800 is a defective product (S120). The main control unit 110 moves the press-molded product 800 to the alignment processing unit 500 to the non-defective product container 900 or the defective product container 902 according to the determination result, packs the non-defective product, and ends the processing.

一実施形態におけるネッキングを判定する手法によれば、ネッキングが発生しているか否かをプレス成形品の片側から検査することができるので、ネッキング検査用の設備をコンパクトにでき、かつ、設備のコストを低減できる。2基のレーザ変位計324を用いなくても、ネッキング検査の対象となる部位の2次元表面形状からネッキングの有無を判定することができ、レーザ変位計324の設置スペースが確保しやすくなる。 According to the method for determining necking in one embodiment, it is possible to inspect whether or not necking has occurred from one side of the press-molded product, so that the equipment for necking inspection can be made compact and the cost of the equipment can be increased. Can be reduced. Even without using two laser displacement meters 324, it is possible to determine the presence or absence of necking from the two-dimensional surface shape of the portion to be inspected for necking, and it becomes easy to secure the installation space for the laser displacement meter 324.

一実施形態におけるネッキングを判定する手法によれば、2次元表面形状の曲率半径に基づいてネッキングを判定する手法のように、検査対象のプレス成形品の形状ごとに判定基準のパラメータを調整する必要がない。したがって、プレス成形品のネッキングの判定の負担を低減できる。 According to the method for determining necking in one embodiment, it is necessary to adjust the parameters of the determination criteria for each shape of the press-molded product to be inspected, as in the method for determining necking based on the radius of curvature of the two-dimensional surface shape. There is no. Therefore, it is possible to reduce the burden of determining the necking of the press-molded product.

なお、上記の実施形態では、変位取得部122が、レーザ変位計324で計測されたネッキング検査の対象となる部位の2次元表面形状を示す波形を取得する例について説明した。しかし、変位取得部122は、ネッキング検査の対象となる部位の2次元表面形状を示す波形を取得できるのであれば、レーザ変位計以外の計測器からの計測結果から2次元表面形状を示す波形を取得してよい。変位取得部122は、白色光源を利用する白色干渉計または光コム干渉を利用する光コム距離計の計測結果から2次元表面形状を示す波形を取得してもよい。 In the above embodiment, an example in which the displacement acquisition unit 122 acquires a waveform showing the two-dimensional surface shape of the portion to be the necking inspection measured by the laser displacement meter 324 has been described. However, if the displacement acquisition unit 122 can acquire a waveform indicating the two-dimensional surface shape of the portion to be inspected by the necking inspection, the displacement acquisition unit 122 obtains a waveform indicating the two-dimensional surface shape from the measurement results from a measuring instrument other than the laser displacement meter. You may get it. The displacement acquisition unit 122 may acquire a waveform showing a two-dimensional surface shape from the measurement results of a white interferometer using a white light source or an optical comb distance meter using optical comb interference.

また、ネッキング判定部126は、2階微分波形が予め定められたネッキング発生条件を満たすか否かに基づいて、プレス成形品800のネッキングを判定する例について説明した。しかし、ネッキング判定部126は、2次元表面形状を示す波形の変化量に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定できればよい。ネッキング判定部126は、2次元表面形状を示す波形の単位距離当たりの変化量に基づいて、ネッキングが予め定められた部位に発生しているか否かを判定できればよい。ネッキング判定部126は、例えば、2次元表面形状を示す波形の単位距離当たりの差分、または2次元表面形状を示す波形の1階微分波形の単位距離当たりの差分が、予め定められた変化パターンを満たすか否かに基づいて、プレス成形品800のネッキングを判定してもよい。例えば、亀裂によるネッキングが生じている場合、2次元表面形状を示す波形の1階微分波形でも、振幅が大きくなる。したがって、ネッキング判定部126は、2次元表面形状を示す波形の1階微分波形に基づいて、亀裂によるネッキングの有無を容易に判定できる。 Further, the necking determination unit 126 has described an example of determining the necking of the press-molded product 800 based on whether or not the second-order differential waveform satisfies a predetermined necking generation condition. However, the necking determination unit 126 may determine whether or not necking has occurred in a predetermined portion based on the amount of change in the waveform indicating the two-dimensional surface shape. The necking determination unit 126 may determine whether or not necking has occurred at a predetermined portion based on the amount of change per unit distance of the waveform showing the two-dimensional surface shape. The necking determination unit 126 determines, for example, a predetermined change pattern in which the difference per unit distance of the waveform showing the two-dimensional surface shape or the difference per unit distance of the first-order differential waveform of the waveform showing the two-dimensional surface shape. The necking of the press-molded product 800 may be determined based on whether or not it is satisfied. For example, when necking occurs due to a crack, the amplitude becomes large even in the first derivative waveform of the waveform showing the two-dimensional surface shape. Therefore, the necking determination unit 126 can easily determine the presence or absence of necking due to a crack based on the first-order differential waveform of the waveform showing the two-dimensional surface shape.

図6は、本発明の複数の態様が全体的または部分的に具現化されてよいコンピュータ1200の一例を示す。コンピュータ1200にインストールされたプログラムは、コンピュータ1200に、本発明の実施形態に係る装置に関連付けられるオペレーションまたは当該装置の1または複数の「部」として機能させることができる。または、当該プログラムは、コンピュータ1200に当該オペレーションまたは当該1または複数の「部」を実行させることができる。当該プログラムは、コンピュータ1200に、本発明の実施形態に係るプロセスまたは当該プロセスの段階を実行させることができる。そのようなプログラムは、コンピュータ1200に、本明細書に記載のフローチャート及びブロック図のブロックのうちのいくつかまたは全てに関連付けられた特定のオペレーションを実行させるべく、CPU1212によって実行されてよい。 FIG. 6 shows an example of a computer 1200 in which a plurality of aspects of the present invention may be embodied in whole or in part. The program installed on the computer 1200 can cause the computer 1200 to function as an operation associated with the device according to an embodiment of the present invention or as one or more "parts" of the device. Alternatively, the program may cause the computer 1200 to perform the operation or the one or more "parts". The program may cause the computer 1200 to perform a process according to an embodiment of the present invention or a step of the process. Such a program may be run by the CPU 1212 to cause the computer 1200 to perform certain operations associated with some or all of the blocks of the flowcharts and block diagrams described herein.

本実施形態によるコンピュータ1200は、CPU1212、及びRAM1214を含み、それらはホストコントローラ1210によって相互に接続されている。コンピュータ1200はまた、通信インタフェース1222、入力/出力ユニットを含み、それらは入力/出力コントローラ1220を介してホストコントローラ1210に接続されている。コンピュータ1200はまた、ROM1230を含む。CPU1212は、ROM1230及びRAM1214内に格納されたプログラムに従い動作し、それにより各ユニットを制御する。 The computer 1200 according to this embodiment includes a CPU 1212 and a RAM 1214, which are connected to each other by a host controller 1210. The computer 1200 also includes a communication interface 1222, an input / output unit, which are connected to the host controller 1210 via an input / output controller 1220. The computer 1200 also includes a ROM 1230. The CPU 1212 operates according to a program stored in the ROM 1230 and the RAM 1214, thereby controlling each unit.

通信インタフェース1222は、ネットワークを介して他の電子デバイスと通信する。ハードディスクドライブが、コンピュータ1200内のCPU1212によって使用されるプログラム及びデータを格納してよい。ROM1230はその中に、アクティブ化時にコンピュータ1200によって実行されるブートプログラム等、及び/またはコンピュータ1200のハードウェアに依存するプログラムを格納する。プログラムが、CR-ROM、USBメモリまたはICカードのようなコンピュータ可読記録媒体またはネットワークを介して提供される。プログラムは、コンピュータ可読記録媒体の例でもあるRAM1214、またはROM1230にインストールされ、CPU1212によって実行される。これらのプログラム内に記述される情報処理は、コンピュータ1200に読み取られ、プログラムと、上記様々なタイプのハードウェアリソースとの間の連携をもたらす。装置または方法が、コンピュータ1200の使用に従い情報のオペレーションまたは処理を実現することによって構成されてよい。 The communication interface 1222 communicates with other electronic devices via the network. A hard disk drive may store programs and data used by the CPU 1212 in the computer 1200. The ROM 1230 stores in it a boot program or the like executed by the computer 1200 at the time of activation and / or a program depending on the hardware of the computer 1200. The program is provided via a computer-readable recording medium such as a CR-ROM, USB memory or IC card or a network. The program is installed in RAM 1214, which is also an example of a computer-readable recording medium, or ROM 1230, and is executed by the CPU 1212. The information processing described in these programs is read by the computer 1200 and provides a link between the program and the various types of hardware resources described above. The device or method may be configured to implement the operation or processing of information in accordance with the use of the computer 1200.

例えば、通信がコンピュータ1200及び外部デバイス間で実行される場合、CPU1212は、RAM1214にロードされた通信プログラムを実行し、通信プログラムに記述された処理に基づいて、通信インタフェース1222に対し、通信処理を命令してよい。通信インタフェース1222は、CPU1212の制御の下、RAM1214、またはUSBメモリのような記録媒体内に提供される送信バッファ領域に格納された送信データを読み取り、読み取られた送信データをネットワークに送信し、またはネットワークから受信した受信データを記録媒体上に提供される受信バッファ領域等に書き込む。 For example, when communication is executed between the computer 1200 and an external device, the CPU 1212 executes a communication program loaded in the RAM 1214, and performs communication processing with respect to the communication interface 1222 based on the processing described in the communication program. You may order. Under the control of the CPU 1212, the communication interface 1222 reads the transmission data stored in the transmission buffer area provided in the RAM 1214 or a recording medium such as a USB memory, and transmits the read transmission data to the network, or The received data received from the network is written to the reception buffer area or the like provided on the recording medium.

また、CPU1212は、USBメモリ等のような外部記録媒体に格納されたファイルまたはデータベースの全部または必要な部分がRAM1214に読み取られるようにし、RAM1214上のデータに対し様々なタイプの処理を実行してよい。CPU1212は次に、処理されたデータを外部記録媒体にライトバックしてよい。 Further, the CPU 1212 makes the RAM 1214 read all or necessary parts of a file or a database stored in an external recording medium such as a USB memory, and executes various types of processing on the data on the RAM 1214. good. The CPU 1212 may then write back the processed data to an external recording medium.

様々なタイプのプログラム、データ、テーブル、及びデータベースのような様々なタイプの情報が記録媒体に格納され、情報処理を受けてよい。CPU1212は、RAM1214から読み取られたデータに対し、本開示の随所に記載され、プログラムの命令シーケンスによって指定される様々なタイプのオペレーション、情報処理、条件判断、条件分岐、無条件分岐、情報の検索/置換等を含む、様々なタイプの処理を実行してよく、結果をRAM1214に対しライトバックする。また、CPU1212は、記録媒体内のファイル、データベース等における情報を検索してよい。例えば、各々が第2の属性の属性値に関連付けられた第1の属性の属性値を有する複数のエントリが記録媒体内に格納される場合、CPU1212は、第1の属性の属性値が指定される、条件に一致するエントリを当該複数のエントリの中から検索し、当該エントリ内に格納された第2の属性の属性値を読み取り、それにより予め定められた条件を満たす第1の属性に関連付けられた第2の属性の属性値を取得してよい。 Various types of information such as various types of programs, data, tables, and databases may be stored in recording media and processed. The CPU 1212 describes various types of operations, information processing, conditional judgment, conditional branching, unconditional branching, and information retrieval described in various parts of the present disclosure with respect to the data read from the RAM 1214. Various types of processing may be performed, including / replacement, etc., and the results are written back to the RAM 1214. Further, the CPU 1212 may search for information in a file, database, or the like in the recording medium. For example, when a plurality of entries each having an attribute value of the first attribute associated with the attribute value of the second attribute are stored in the recording medium, the CPU 1212 specifies the attribute value of the first attribute. Search for an entry that matches the condition from the plurality of entries, read the attribute value of the second attribute stored in the entry, and associate it with the first attribute that satisfies the predetermined condition. The attribute value of the second attribute obtained may be acquired.

上で説明したプログラムまたはソフトウェアモジュールは、コンピュータ1200上またはコンピュータ1200近傍のコンピュータ可読記憶媒体に格納されてよい。また、専用通信ネットワークまたはインターネットに接続されたサーバーシステム内に提供されるハードディスクまたはRAMのような記録媒体が、コンピュータ可読記憶媒体として使用可能であり、それによりプログラムを、ネットワークを介してコンピュータ1200に提供する。 The program or software module described above may be stored on a computer 1200 or in a computer readable storage medium near the computer 1200. Also, a recording medium such as a hard disk or RAM provided in a dedicated communication network or a server system connected to the Internet can be used as a computer readable storage medium, thereby allowing the program to be transferred to the computer 1200 over the network. offer.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。そのような変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、請求の範囲の記載から明らかである。
請求の範囲、明細書、及び図面中において示した装置、システム、プログラム、及び方法における動作、手順、ステップ、及び段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。請求の範囲、明細書、及び図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments. It will be apparent to those skilled in the art that various changes or improvements can be made to the above embodiments. It is clear from the claims that embodiments with such modifications or improvements may also be included in the technical scope of the invention.
The execution order of each process such as operation, procedure, step, and step in the device, system, program, and method shown in the claims, the specification, and the drawing is particularly "before" and "prior to". It should be noted that it can be realized in any order unless the output of the previous process is used in the subsequent process. Even if the claims, the description, and the operation flow in the drawings are explained using "first", "next", etc. for convenience, it means that it is essential to carry out in this order. is not.

1 検査システム
100 制御装置
110 主制御部
120 ネッキング検査部
122 変位取得部
124 導出部
126 ネッキング判定部
130 トラッキング部
140 外観検査部
142 画像取得部
144 外観判定部
200 トラッキング撮像部
300 ネッキング測定部
310 パラレルリンク部
312 制御部
314 リンク部
320 変位計測部
322 制御部
324 レーザ変位計
325 ラインレーザ光
400 外観撮像部
500 整列処理部
510 パラレルリンク部
512 制御部
514 リンク部
520 グリッパー部
522 制御部
524 ハンド部
600 ネットワーク
700 ベルトコンベア
800 プレス成形品
810 部位
900 良品用容器
902 不良品用容器
1000 ネッキング部
1200 コンピュータ
1210 ホストコントローラ
1212 CPU
1214 RAM
1220 入力/出力コントローラ
1222 通信インタフェース
1230 ROM
1 Inspection system 100 Control device 110 Main control unit 120 Necking inspection unit 122 Displacement acquisition unit 124 Derivation unit 126 Necking judgment unit 130 Tracking unit 140 Appearance inspection unit 142 Image acquisition unit 144 Appearance judgment unit 200 Tracking image unit 300 Necking measurement unit 310 Parallel Link unit 312 Control unit 314 Link unit 320 Displacement measurement unit 322 Control unit 324 Laser displacement meter 325 Line laser light 400 Appearance imaging unit 500 Alignment processing unit 510 Parallel link unit 512 Control unit 514 Link unit 520 Gripper unit 522 Control unit 524 Hand unit 600 Network 700 Belt conveyor 800 Press molded product 810 Displacement 900 Good product container 902 Defective product container 1000 Necking part 1200 Computer 1210 Host controller 1212 CPU
1214 RAM
1220 Input / Output Controller 1222 Communication Interface 1230 ROM

Claims (15)

プレス成形品の予め定められた部位の第1位置を含む2次元表面形状を示す第1波形を取得する段階と、
前記第1波形の変化量を導出する段階と、
前記第1波形の変化量に基づいて、ネッキングが前記予め定められた部位に発生しているか否かを判定する段階と
を備えるプレス成形品のネッキング判定方法。
The stage of acquiring the first waveform showing the two-dimensional surface shape including the first position of the predetermined portion of the press-molded product, and
The stage of deriving the amount of change in the first waveform and
A method for determining necking of a press-molded product, comprising a step of determining whether or not necking occurs in the predetermined portion based on the amount of change in the first waveform.
前記判定する段階は、前記変化量が予め定められた変化パターンを満たす場合、ネッキングが前記予め定められた部位に発生していると判定する、請求項1に記載のプレス成形品のネッキング判定方法。 The method for determining necking of a press-molded product according to claim 1, wherein in the determination step, when the amount of change satisfies a predetermined change pattern, it is determined that necking occurs at the predetermined portion. .. 前記判定する段階は、前記第1波形の単位距離当たりの差分が、前記予め定められた変化パターンを満たすか否かに基づいて、前記ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項2に記載のプレス成形品のネッキング判定方法。 In the determination step, whether or not the necking occurs in the predetermined portion based on whether or not the difference per unit distance of the first waveform satisfies the predetermined change pattern. The necking determination method for a press-molded product according to claim 2, which comprises a step of determining. 前記判定する段階は、前記第1波形の1階微分波形の単位距離当たりの差分が、予め定められた変化パターンを満たすか否かに基づいて、前記ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項2に記載のプレス成形品のネッキング判定方法。 In the determination step, the necking occurs at the predetermined portion based on whether or not the difference per unit distance of the first-order differential waveform of the first waveform satisfies a predetermined change pattern. The necking determination method for a press-molded product according to claim 2, which comprises a step of determining whether or not the product is. 前記導出する段階は、前記第1波形を微分処理することで前記変化量を導出する段階を含む、請求項1または2に記載のプレス成形品のネッキング判定方法。 The necking determination method for a press-molded product according to claim 1 or 2, wherein the derivation step includes a step of deriving the change amount by differentiating the first waveform. 前記導出する段階は、前記第1波形を2階微分することで第1波形の2階微分波形を前記変化量として導出する段階を含み、
前記判定する段階は、前記第1波形の2階微分波形に基づいて、ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項5に記載のプレス成形品のネッキング判定方法。
The derivation step includes a step of deriving the second-order differential waveform of the first waveform as the change amount by second-order differentiation of the first waveform.
The press-molded product according to claim 5, wherein the determination step includes a step of determining whether or not necking occurs in the predetermined portion based on the second-order differential waveform of the first waveform. Necking judgment method.
前記判定する段階は、前記第1波形の2階微分波形上の極大点と極小点とに基づいて、前記ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項6に記載のプレス成形品のネッキング判定方法。 The determination step includes a step of determining whether or not the necking occurs at the predetermined portion based on the maximum point and the minimum point on the second-order differential waveform of the first waveform. The method for determining necking of a press-molded product according to claim 6. 前記判定する段階は、前記第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差に基づいて、前記ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項7に記載のプレス成形品のネッキング判定方法。 The determination step is based on the difference between the maximum point and the minimum point that are adjacent to each other on the second-order differential waveform of the first waveform and include a zero point in between, and the necking is performed at the predetermined portion. The necking determination method for a press-molded product according to claim 7, which comprises a step of determining whether or not the occurrence has occurred. 前記取得する段階は、前記プレス成形品の予め定められた部位にレーザ光を照射して、前記予め定められた部位からの反射光を受光するレーザ変位計で計測された前記予め定められた部位の前記第1位置を含む2次元表面形状を示す前記第1波形を取得する段階を含む、請求項1から8の何れか1つに記載のプレス成形品のネッキング判定方法。 The acquisition step is the predetermined portion measured by a laser displacement meter that irradiates a predetermined portion of the press-molded product with a laser beam and receives the reflected light from the predetermined portion. The method for determining necking of a press-molded product according to any one of claims 1 to 8, further comprising the step of acquiring the first waveform showing the two-dimensional surface shape including the first position. 前記レーザ変位計は、前記予め定められた部位の長手方向とは異なる短手方向に延びるラインレーザ光を前記長手方向に沿って走査し、
前記取得する段階は、前記レーザ変位計で計測された前記予め定められた部位の長手方向に沿って前記第1位置とは異なる第2位置を含む2次元表面形状を示す第2波形を取得する段階を含み、
前記導出する段階は、前記第2波形を2階微分することで第2波形の2階微分波形を導出する段階を含み、
前記判定する段階は、前記第1波形の2階微分波形及び前記第2波形の2階微分波形に基づいて、前記ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含む、請求項9に記載のプレス成形品のネッキング判定方法。
The laser displacement meter scans a line laser beam extending in a short direction different from the longitudinal direction of the predetermined portion along the longitudinal direction.
The acquisition step acquires a second waveform indicating a two-dimensional surface shape including a second position different from the first position along the longitudinal direction of the predetermined portion measured by the laser displacement meter. Including stages
The derivation step includes a step of deriving the second derivative waveform of the second waveform by second-order differentiating the second waveform.
The determination step is a step of determining whether or not the necking occurs in the predetermined portion based on the second-order differential waveform of the first waveform and the second-order differential waveform of the second waveform. The method for determining necking of a press-molded product according to claim 9, which includes.
前記判定する段階は、前記第1波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差、及び前記第2波形の2階微分波形上の互いに隣接し、かつ間にゼロ点を含む極大点と極小点との差がそれぞれ予め定められた閾値以上である場合、前記予め定められた部位に前記ネッキングが発生していると判定する段階を含む、請求項10に記載のプレス成形品のネッキング判定方法。 The determination step is adjacent to each other on the second-order differential waveform of the first waveform, the difference between the maximum point and the minimum point including a zero point in between, and each other on the second-order differential waveform of the second waveform. When the difference between the maximum point and the minimum point, which are adjacent to each other and include a zero point, is equal to or larger than a predetermined threshold value, the step of determining that the necking has occurred in the predetermined portion is included. The method for determining necking of a press-molded product according to claim 10. 前記取得する段階は、白色光源を利用する白色干渉計または光コム干渉を利用する光コム距離計の計測結果から前記第1波形を取得する段階を含む、請求項1から8の何れか一項に記載のプレス成形品のネッキング判定方法。 The acquisition step is any one of claims 1 to 8, including a step of acquiring the first waveform from the measurement result of a white interferometer using a white light source or an optical comb distance meter using optical comb interference. The method for determining necking of a press-molded product according to. 前記判定する段階は、前記第1波形の2階微分波形がネッキングの発生が高いことを示す予め定められた波形パターンを満たすか否かに基づいて、ネッキングが前記予め定められた部位に発生しているか否かを判定する段階を含み、
前記予め定められた波形パターンは、実際にネッキングの発生した波形パターンを機械学習することで、順次更新される、請求項1から12の何れか一項に記載のプレス成形品のネッキング判定方法。
In the determination step, necking occurs at the predetermined portion based on whether or not the second-order differential waveform of the first waveform satisfies a predetermined waveform pattern indicating that the occurrence of necking is high. Including the step of determining whether or not
The necking determination method for a press-molded product according to any one of claims 1 to 12, wherein the predetermined waveform pattern is sequentially updated by machine learning the waveform pattern in which necking actually occurs.
プレス成形品の予め定められた部位の第1位置を含む2次元表面形状を示す第1波形を取得する取得部と、
前記第1波形の変化量を導出する導出部と、
前記第1波形の変化量に基づいて、ネッキングが前記予め定められた部位に発生しているか否かを判定する判定部と
を備えるプレス成形品のネッキング判定装置。
An acquisition unit that acquires a first waveform indicating a two-dimensional surface shape including a first position of a predetermined portion of a press-molded product, and an acquisition unit.
A derivation unit that derives the amount of change in the first waveform, and
A necking determination device for a press-molded product, comprising a determination unit for determining whether or not necking has occurred in the predetermined portion based on the amount of change in the first waveform.
請求項1から13の何れか1つに記載のプレス成形品のネッキング判定方法をコンピュータに実行させるためのプログラム。 A program for causing a computer to execute the necking determination method for a press-molded article according to any one of claims 1 to 13.
JP2020559816A 2018-12-04 2019-11-06 Necking determination method for press-molded products, necking determination device for press-molded products, and programs Active JP7053889B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018227714 2018-12-04
JP2018227714 2018-12-04
PCT/JP2019/043448 WO2020116075A1 (en) 2018-12-04 2019-11-06 Press-molded article necking determination method, press-molded article necking determination apparatus, and program

Publications (2)

Publication Number Publication Date
JPWO2020116075A1 JPWO2020116075A1 (en) 2021-11-25
JP7053889B2 true JP7053889B2 (en) 2022-04-12

Family

ID=70973612

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020559816A Active JP7053889B2 (en) 2018-12-04 2019-11-06 Necking determination method for press-molded products, necking determination device for press-molded products, and programs

Country Status (3)

Country Link
JP (1) JP7053889B2 (en)
CN (1) CN113167572A (en)
WO (1) WO2020116075A1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001255275A (en) 2000-03-13 2001-09-21 Kawasaki Steel Corp Surface defect inspection method and device

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5435110B2 (en) * 1972-04-14 1979-10-31
JPH0571948A (en) * 1991-09-10 1993-03-23 Kawasaki Steel Corp Method for measuring shape of band plate
JP3015615B2 (en) * 1993-02-24 2000-03-06 トヨタ自動車株式会社 Surface strain quantitative evaluation device
JPH10132754A (en) * 1996-11-01 1998-05-22 Dainippon Printing Co Ltd Device for inspecting appearance of lead frame
JPH11248638A (en) * 1998-03-05 1999-09-17 Komatsu Ltd Automatic detection method for surface of press-molded product
JP4670180B2 (en) * 2000-06-30 2011-04-13 日産自動車株式会社 Surface defect inspection method and surface defect inspection apparatus
JP4678312B2 (en) * 2005-11-08 2011-04-27 トヨタ自動車株式会社 Press failure determination method, press failure determination device, and press forming apparatus
JP2011033392A (en) * 2009-07-30 2011-02-17 Kobe Steel Ltd Image processing method and image processing apparatus for extracting unevenness pattern
US20110272096A1 (en) * 2010-05-10 2011-11-10 Hitachi High-Technologies Corporation Pattern shape inspection instrument and pattern shape inspection method, instrument for inspecting stamper for patterned media and method of inspecting stamper for patterned media, and patterned media disk manufacturing line
EP2839896B1 (en) * 2012-04-16 2017-11-22 JFE Steel Corporation Method for preparing forming limit diagram in press forming, method for predicting crack and method of producing press parts
CN203054272U (en) * 2013-02-05 2013-07-10 青岛海信宽带多媒体技术有限公司 Round-square tube body capable of bonding isolator
JP6064871B2 (en) * 2013-11-15 2017-01-25 Jfeスチール株式会社 Thickness measurement method
JP6150014B2 (en) * 2015-02-10 2017-06-21 中国電力株式会社 Strain measuring method and strain measuring system
JP6012091B1 (en) * 2016-02-29 2016-10-25 株式会社今井産業 Corrugated board manufacturing system and corrugated board manufacturing method
CN107449359A (en) * 2017-06-27 2017-12-08 无锡贺邦汽车配件有限公司 A kind of measuring system applied to stamping parts of automobile

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001255275A (en) 2000-03-13 2001-09-21 Kawasaki Steel Corp Surface defect inspection method and device

Also Published As

Publication number Publication date
JPWO2020116075A1 (en) 2021-11-25
WO2020116075A1 (en) 2020-06-11
CN113167572A (en) 2021-07-23

Similar Documents

Publication Publication Date Title
US11035802B2 (en) Surface defect detection system and method thereof
CN110659660B (en) Automatic optical detection classification equipment using deep learning system and training equipment thereof
KR101088952B1 (en) Shape evaluation method, shape evaluation device, and 3d inspection device
Sun et al. Surface defects detection based on adaptive multiscale image collection and convolutional neural networks
US6266138B1 (en) System and method for detecting defects in a surface of a workpiece
EP3388781B1 (en) System and method for detecting defects in specular or semi-specular surfaces by means of photogrammetric projection
JP2001338304A (en) Device and method for pattern inspection, and recording medium
RU2764644C1 (en) Method for detecting surface defects, device for detecting surface defects, method for producing steel materials, method for steel material quality control, steel materials production plant, method for generating models for determining surface defects and a model for determining surface defects
Eshkevari et al. Automatic dimensional defect detection for glass vials based on machine vision: A heuristic segmentation method
Sulaiman et al. DEFECT INSPECTION SYSTEM FOR SHAPE-BASED MATCHING USING TWO CAMERAS.
KR101889833B1 (en) Pattern-measuring device and computer program
JP2020037356A (en) Overhead wire abrasion inspection device
JP7053889B2 (en) Necking determination method for press-molded products, necking determination device for press-molded products, and programs
CN111833350A (en) Machine vision detection method and system
TW201601119A (en) Method for recognizing and locating object
Molleda et al. A profile measurement system for rail manufacturing using multiple laser range finders
Zhao et al. High resolution and real-time measurement of 2D fatigue crack propagation using an advanced digital image correlation
CN109632815A (en) Surface defect on-line detecting system and method
Peng et al. A high performance real-time vision system for curved surface inspection
Evstafev et al. Surface Defect Detection and Recognition Based on CNN
Cavaliere et al. Development of a System for the Analysis of Surface Defects in Die-Cast Components Using Machine Vision
Lafiosca et al. Automatic Segmentation of Aircraft Dents in Point Clouds
Wang et al. An accurate method for the extraction of line structured light stripe
Liang et al. Weld seam track identification for industrial robot based on illumination correction and center point extraction
Chen et al. Inspection of tire tread defects using image processing and pattern recognition techniques

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210402

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220331

R150 Certificate of patent or registration of utility model

Ref document number: 7053889

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150