JP7432427B2 - 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法 - Google Patents

塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法 Download PDF

Info

Publication number
JP7432427B2
JP7432427B2 JP2020066209A JP2020066209A JP7432427B2 JP 7432427 B2 JP7432427 B2 JP 7432427B2 JP 2020066209 A JP2020066209 A JP 2020066209A JP 2020066209 A JP2020066209 A JP 2020066209A JP 7432427 B2 JP7432427 B2 JP 7432427B2
Authority
JP
Japan
Prior art keywords
footwear component
application
application trajectory
outline image
trajectory information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020066209A
Other languages
English (en)
Other versions
JP2021159513A (ja
Inventor
剛史 小川
慶子 平中
コランタン リセラン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Asics Corp
Cross Compass Ltd
Original Assignee
Asics Corp
Cross Compass Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Asics Corp, Cross Compass Ltd filed Critical Asics Corp
Priority to JP2020066209A priority Critical patent/JP7432427B2/ja
Publication of JP2021159513A publication Critical patent/JP2021159513A/ja
Application granted granted Critical
Publication of JP7432427B2 publication Critical patent/JP7432427B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Footwear And Its Accessory, Manufacturing Method And Apparatuses (AREA)

Description

この発明は、塗布軌跡を予測する技術および塗布軌跡を学習する技術に関する。
製品の生産コストを低減させ、品質を安定させるために製造工程に各種の産業用ロボットが用いられている。ロボットによる自動生産では、ロボットの動作プログラムを作成すること(「ティーチング」と呼ばれる)が必要である。
たとえば、靴のアッパとソールを貼り合わせるために、アッパとソールの貼り合わせ領域にロボットアームを移動させて接着剤を塗布する。マスタサイズの靴のアッパとソールに対してロボットアームの塗布軌跡を指定する動作プログラムをあらかじめ作成しておき、実際の靴のサイズに合わせてマスタの軌跡をスケーリングして用いる自動グレーディングシステムがある。
例として、靴のソールの上面だけでなく、靴のアッパ等の靴構成部品の底面に接着剤を塗布する場合において、アッパ等の靴構成部品の底面に接着剤を塗布する際の手間を削減するために、認識した靴の底面の外郭に基づいて、靴の底面に接着剤を塗布する際の塗布軌跡を設定し、接着剤の塗布を行う接着剤塗布部を設定された塗布軌跡に沿って移動機構を移動させるように制御することにより、靴のアッパ等の靴構成部品の底面に接着剤を塗布する際の手間を軽減することが可能な、靴用接着剤塗布システム、 塗布軌跡生成装置、及び靴製造方法に関する技術が知られている(特許文献1)。
また、レーザスキャナを備えたスキャンユニットにより靴ソールを撮像して3次元スキャン画像を生成し、3次元スキャンの結果を記憶された設計データと比較し、靴ソールが不良品であるかどうかのチェックをするために、靴ソールの品質についての判定を提供することにより、靴ソールを自動的に製造するための方法及び装置に関する技術が知られている(特許文献2)。
国際公開第2017/037932号 特表2019―516593号公報
一般にロボットのティーチングには時間と手間がかかり、ロボット生産の拡大の障壁となっている。特にアッパとソールとを有する靴、ブーツ、サンダル及びスリッパ等の履物の構成部品への接着剤塗布を、ロボットアームを用いて実行するためには、履物のサイズ毎に左右それぞれのティーチングが必要となり、作業時間が増大する。それに加えて、履物のサイズ毎に動作プログラムを作成したとしても、同サイズの履物であっても実際の構成部品には成型誤差や経時的な変形などが生じるため、1つの動作プログラムだけでは局所的に寸法が異なる履物の構成部品に対応することができない。
上記の自動グレーディングシステムでは、履物の構成をアッパとソールに限定した場合、ある1つのサイズのアッパとソールの片足の動作プログラムをマスタとして手動作成すれば、マスタのスケールを履物のパーツの寸法に合わせて拡大/縮小し、その他のサイズ用のプログラムを自動作成し、各サイズの動作プログラムを反転することにより、両足の動作プログラムを完成させることができる。これによりティーチング時間を短縮することができる。しかしながら、自動グレーディングシステムは、履物の構成部品の寸法ばらつきに対応することができない。また、マスタ作成が作業者のスキルに依存するため、品質の安定化が難しい。さらに、マスタのスケールの拡大/縮小により動作精度が変化するという問題がある。
上記の3Dスキャニングシステムでは、履物のパーツの三次元形状にレーザ光を照射することによって計測し特徴点を抽出し、抽出された特徴点を基準に一定条件下でのロボットの動作プログラムを自動作成する。三次元計測から動作プログラム作成までの一連のプロセスは塗布対象パーツ毎に実行されるため、マスタという概念が無く、個々の履物のパーツに対して個別にティーチングが可能である。しかしながら、3Dスキャニングシステムでは、塗布精度と三次元計測時間に正の相関があり、塗布精度を高めるためにはかなりの計測時間をかける必要がある。また、3Dスキャニング装置は比較的高価である。さらに、履物のアッパなど不定形で特徴点がないパーツには対応することができない。
本発明はこうした課題に鑑みてなされたものであり、その目的は、塗布軌跡を予測する技術および塗布軌跡を学習する技術を提供することにある。
上記課題を解決するために、本発明のある態様の塗布軌跡予測装置は、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して生成された予測モデルを記憶する学習済みモデル記憶部と、前記予測モデルにもとづいて、入力された履物構成部品の外郭画像から塗布軌跡情報を予測して出力する予測部とを含む。
本発明の別の態様は、塗布軌跡学習装置である。この装置は、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して予測モデルを生成する学習部と、前記予測モデルを記憶する学習済みモデル記憶部とを含む。
本発明のさらに別の態様は、塗布軌跡予測方法である。この方法は、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して生成された予測モデルにもとづいて、入力された履物構成部品の外郭画像から塗布軌跡情報を予測して出力する。
本発明のさらに別の態様は、塗布軌跡学習方法である。この方法は、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して予測モデルを生成する。
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、コンピュータプログラム、データ構造、記録媒体などの間で変換したものもまた、本発明の態様として有効である。
本発明によれば、塗布軌跡を学習し、予測することができる。
本実施の形態に係る塗布軌跡学習装置の構成図である。 本実施の形態に係る塗布軌跡予測装置の構成図である。 図3(a)は、履物の斜視図であり、図3(b)は、図3(a)の履物を、アッパの塗布面に対向する方向から見た場合の底面図である。 図4(a)は、教師データとして用いられる外郭画像を示す図であり、図4(b)は、図3(b)の塗布領域における塗布軌跡を示す図である。 図1の学習部および図2の予測部が予測モデルとして用いるニューラルネットワークを説明する図である。
本実施例においては、実施形態として履物の一種であるスポーツシューズ等の靴を例として説明したが、履物は例えば、靴、ブーツ、サンダル又はスリッパ等、少なくともアッパとソールを含むものであればよく、靴のみに限定されるものではない。
図1は、本実施の形態に係る塗布軌跡学習装置100の構成図である。塗布軌跡学習装置100は、学習部10、教師データ記憶部20、および学習済みモデル記憶部30を含む。同図は機能に着目したブロック図を描いており、これらの機能ブロックはハードウェア、ソフトウェア、またはそれらの組合せによっていろいろな形で実現することができる。
教師データ記憶部20は、靴構成部品の外郭画像22と靴構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報24の対を教師データとして記憶する。
ここで、例えば、塗布軌跡情報24は、塗り斑がなく、靴構成部品からのはみだしがなく、また、塗布される領域を最低限網羅するような効率の良い軌跡であることが望ましい。
具体的には、塗布軌跡情報24として、一筆描きによる塗布軌跡情報とすることが考えられる。
学習部10は、一定の相関関係が存在する外郭画像22と塗布軌跡情報24と教師データとして機械学習して予測モデルを生成する。機械学習の一例として、多層ニューラルネットワークモデルを用いて、入力データに外郭画像22を与え、出力データと塗布軌跡情報24の誤差が最小になるように深層学習により、各層のニューラルネットワークを結合する重みを学習する。
学習済みモデル記憶部30は、学習部10により生成された学習済みの予測モデルを記憶する。学習済みモデル記憶部30に記憶された予測モデルは、後述の塗布軌跡予測装置200において未知の外郭画像から塗布軌跡情報を推定する予測モデルとして利用される。
図2は、本実施の形態に係る塗布軌跡予測装置200の構成図である。塗布軌跡予測装置200は、学習済みモデル記憶部30、入力部40、予測部50、出力部60、変換部70、および動作プログラムデータ記憶部80を含む。同図は機能に着目したブロック図を描いており、これらの機能ブロックはハードウェア、ソフトウェア、またはそれらの組合せによっていろいろな形で実現することができる。
学習済みモデル記憶部30は、塗布軌跡学習装置100により生成された予測モデルを記憶する。この予測モデルは、靴構成部品の外郭画像22と靴構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報24の対を教師データとして用いて外郭画像22と塗布軌跡情報24の間の相関関係を機械学習して生成されたものであり、一例として、学習済みの多層ニューラルネットワークモデルである。
入力部40は、未知の靴の構成部品の外郭画像42を取得して、予測部50に入力データとして与える。
予測部50は、学習済みモデル記憶部30に記憶された予測モデルにもとづいて、入力された靴構成部品の外郭画像42から塗布軌跡情報62を予測して出力部60に与える。具体的には、学習済みの多層ニューラルネットワークモデルの入力データに外郭画像42を与え、出力データとして塗布軌跡情報62を取得する。
ここで、例えば、塗布軌跡情報62は、塗布軌跡情報24と同様、塗り斑がなく、靴構成部品からのはみだしがなく、また、塗布される領域を最低限網羅するような効率の良い軌跡であることが望ましい。
具体的には、塗布軌跡情報62として、塗布軌跡情報24と同様、一筆描きによる塗布軌跡情報とすることが考えられる。
出力部60は、予測部50により予測された塗布軌跡情報62を変換部70に与える。
変換部70は、予測された塗布軌跡情報を2次元座標系における塗布軌跡上の各点を示す2次元座標データに変換し、塗布軌跡上の各点における靴構成部品の塗布面の高さデータを付加して、塗布軌跡上の各点の3次元座標データを生成する。塗布軌跡の3次元座標データをロボットの動作プログラムデータとして動作プログラムデータ記憶部80に記憶する。
靴構成部品の一例は、靴のアッパであり、外郭画像はアッパの塗布面に対向する方向、すなわち靴の裏側からアッパを撮影して得られるエッジ画像である。一般に、アッパにおいて接着剤の塗布領域は、靴の裏側からアッパを撮影して得られるエッジ画像の内部領域である。塗布軌跡は、塗布領域に接着剤を塗布するためのロボットアームの移動軌跡であり、一般に、ロボットアームを塗布領域の輪郭と内部を移動させながら接着剤を塗布する。ここで、外郭画像は、少なくともエッジを表すものであればよく、エッジとその内部の領域とを表すものであってもよい。
図3(a)、図3(b)、図4(a)、図4(b)を参照しながら、靴のアッパの外郭画像、塗布領域、および塗布軌跡について説明する。
図3(a)は、靴の斜視図である。靴は構成部品としてアッパ300とソール310を含む。アッパ300は一般に丸みを帯びて湾曲しており、製造誤差や個体差が現れやすい。ソールはほぼ定形であるのに対して、アッパは成形誤差や変形によって不定形であり、特異点を特定することができない。
図3(b)は、図3(a)の靴を、矢印320に示すようにアッパの塗布面に対向する方向、すなわち靴の裏側から見た場合の底面図である。符号400はアッパの外郭画像である。符号410で示される斜線を付した領域は、アッパの底面であり、接着剤を塗布するべき塗布領域である。アッパ300は丸みを帯びているため、外郭画像400は、塗布領域410から外側にはみ出ている部分があることに留意する。また、塗布領域410は平面ではなく、足の形状に合わせてアーチの部分が湾曲していることにも留意する。すなわちロボットアームが移動すべき塗布領域410は2次元座標だけでなく、高さも含めた3次元座標で規定される。
図4(a)は、教師データとして用いられる外郭画像400を示す図である。図3(a)では、色情報をもつ一般的な画像として示したが、教師データとして用いる外郭画像400は、撮影画像の色情報は無視して、図4(a)に示すようにアッパを裏側から撮影して得られるエッジとその内部を一色で塗りつぶした画像である。
図4(b)は、図3(b)の塗布領域410における塗布軌跡420を示す図である。塗布軌跡420は、塗布領域410に接着剤を塗布するためにロボットアームを移動させる軌跡を2次元平面に表したものである。ここでは、塗布軌跡420として、塗布領域410の輪郭を一周した後、塗布領域410の内部を直線的に移動する軌跡を例として挙げているが、塗布軌跡は任意である。たとえば、塗布領域410をジグザクに移動する軌跡にしてもよい。
塗布軌跡情報は、靴構成部品の設計者等が、所定の靴構成部品の外郭画像のそれぞれに対して設計情報をもとに作成して与えてもよい。また、靴構成部品の熟練加工者等が、所定の靴構成部品の外郭画像のそれぞれに対して経験やノウハウをもとに作成して与えてもよい。
塗布軌跡情報は、靴構成部品の外郭画像に対して設定された2次元座標系において塗布領域を表す画素の集合体であるラスタ形式、2次元座標系において塗布軌跡を表す線の集合体であるベクタ形式、または2次元座標系において塗布領域を表す点群の集合であるポイントクラウド形式で与えることができ。
図5は、学習部10および予測部50が予測モデルとして用いるニューラルネットワークを説明する図である。
ニューラルネットワークは、入力層にあるl個のニューロン、第1中間層にあるm個のニューロン、第2中間層にあるn個のニューロン、出力層にあるo個のニューロンから構成される。
第1中間層及び第2中間層は、隠れ層とも呼ばれており、ニューラルネットワークとしては、第1中間層及び第2中間層の他に、さらに1以上の隠れ層を有してもよい。
また、入力層と第1中間層との間、第1中間層と第2中間層との間、第2中間層と出力層との間には、層間のニューロンを接続するノードが張られており、それぞれのノードには、重みWijが対応づけられている。
ニューラルネットワークは、学習用データセットを用いて、靴構成部品の接着面側の外郭画像と、当該靴構成部品の塗布軌跡情報との相関関係を学習する。
学習の方法をより具体的に説明する。学習用データセットのうち、靴構成部品の1つの外郭画像の説明変数である、当該外郭画像の全ての画素のそれぞれについて順番を一意に定めたものと入力層のニューロンのそれぞれとを対応づける。
出力層にあるニューロンの値を、一般的なニューラルネットワークの出力値の算出方法で算出する。すなわち、出力側のニューロンの値を、当該ニューロンに接続される入力側のニューロンの値と、出力側のニューロンと入力側のニューロンとを接続するノードに対応づけられた重みWijとの乗算値の数列の和として算出することを、入力層にあるニューロン以外のニューロンに対して行う。
算出された出力層にあるニューロンの値のそれぞれと、学習用データセットのうち、靴構成部品の塗布軌跡情報の目的変数である、例えば、前記靴構成部品の外郭画像に座標の原点を対応付けて塗布軌跡を表した画像のそれぞれについて順番を一意に定めたものとを対応させる。
算出された出力層にあるニューロンの値のそれぞれを、前記塗布軌跡情報の目的変数の値における正解データとして評価できる教師データとそれぞれ比較して誤差を求め、求められた誤差が小さくなるように、各ノードに対応づけられた重みWijを調整することを反復する。
所定の反復回数を行うことや、誤差が許容値より小さくなること等の所定の条件が満たされた場合に、学習を終了して、そのニューラルネットワークモデルのノードのそれぞれに対応づけられた全ての重みWijを学習済みモデルとして記憶する。
なお、ここでは一般的なニューラルネットワークを例示して機械学習を行うことを示したが、これに限らず、畳み込みニューラルネットワーク(CNN(Convolutional Neural Network))等のその他の機械学習技術を用いることもできる。
学習部10は、異なる構造を有するモデルや異なる初期値を有するニューロン等の異なる条件を複数用意して、それぞれに対して上述の学習を複数回繰り返し行うことで、複数の学習済みモデル候補を生成する。
その後、学習部10は、複数の学習済みモデル候補に対して、学習用データセットと同じ状態変数のデータである、検証用のデータセットを入力し、その出力結果から、検証結果の優れた学習済みモデルを選定する。学習部10は、選定した学習済みモデルを実行ファイル形式のプログラムや前述の重みWijのパラメータセットとして外部に出力することで、実システムへ適用するための学習済みモデルとして学習済みモデル記憶部30に記憶する。
なお、上述の検証用のデータセットは、学習に用いた学習用データセットと同じ説明変数と目的変数を有し、靴製造システム等に設けられたデータ取得システム等から入力されたものでもよく、あるいは、他のデータベースやコンピュータ装置等から入力されたものでもよい。
また、学習部10が、上述の学習を複数回繰り返すことを行わずに、1つの学習済みモデル候補を生成する構成としてもよく、この場合には、学習済みモデル記憶部30は、この1つの学習済みモデル候補を、そのまま学習済みモデルとして記憶する。
学習済みモデル記憶部30は、記憶した1つあるいは複数の学習済みモデルを、靴構成部品の塗布軌跡情報を推定する塗布軌跡予測装置200に出力してもよい。塗布軌跡学習装置100と塗布軌跡予測装置200とを一つのシステムとして構成し、学習済みモデル記憶部30を共有する場合、塗布軌跡学習装置100から塗布軌跡予測装置200への学習済みモデルの伝送は不要である。
以上述べたように、本実施の形態の塗布軌跡学習装置100および塗布軌跡予測装置200によれば、靴構成部品の外郭画像から塗布軌跡を学習して予測することができる。ソールのような定形かつ特徴点のある靴のパーツだけでなく、アッパのような不定形かつ特徴点のない靴のパーツの寸法ばらつきにも適応して塗布軌跡を学習し、予測することができる。予測される塗布軌跡からロボットの動作プログラムデータを自動生成するため、ティーチングレスでロボット生産システムを構築することができ、生産にかかる時間を短縮し、品質を向上させることができる。
また、本実施の形態の塗布軌跡学習装置100には、同種の靴構成部品の様々なサイズ(寸法)のものの外郭画像が教師データとして入力されることにより、不定形かつ特徴点のない靴のパーツの寸法ばらつきにも適応して塗布軌跡を学習することが可能となる。
本実施例においては、実施形態として履物の一種であるスポーツシューズ等の靴を例として説明したが、履物は例えば、靴、ブーツ、サンダル又はスリッパ等、少なくともアッパとソールを含むものであればよく、靴のみに限定されるものではない。
また、靴の構成部品としては、さらに、ソールを細分化したものとしてアウターソールとミッドソールとを備えるものであっても良く、本願発明はこの様なアウターソールとミッドソールとを備える場合において、当該アウターソールとミッドソールとの接着に関しても適用することが可能である。
また、本実施例では、商品の一例として靴等の履物を取り上げたが、履物以外の商品にも本実施の形態を適用することができる。たとえば食品サンプルに対して本実施の形態の塗布軌跡学習装置100および塗布軌跡予測装置200を適用して、食品サンプルの構成部品の外郭画像から食品サンプルの構成部品に接着剤を塗布する軌跡を表す塗布軌跡情報を学習し、予測してもよい。
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
10 学習部
20 教師データ記憶部
30 学習済みモデル記憶部
40 入力部
50 予測部
60 出力部
70 変換部
80 動作プログラムデータ記憶部
100 塗布軌跡学習装置
200 塗布軌跡予測装置

Claims (9)

  1. 履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して生成された予測モデルを記憶する学習済みモデル記憶部と、
    前記予測モデルにもとづいて、入力された履物構成部品の外郭画像から塗布軌跡情報を予測して出力する予測部とを有し、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡予測装置。
  2. 前記塗布軌跡情報は、前記履物構成部品の外郭画像に対して設定された2次元座標系において塗布領域を表す画素の集合体であるラスタ形式、前記2次元座標系において塗布軌跡を表す線の集合体であるベクタ形式、および前記2次元座標系において塗布領域を表す点群の集合であるポイントクラウド形式のいずれかで与えられる請求項1に記載の塗布軌跡予測装置。
  3. 前記塗布軌跡情報を前記履物構成部品の外郭画像に対して設定された2次元座標系における塗布軌跡上の各点を示す2次元座標データに変換し、塗布軌跡上の各点における前記履物構成部品の塗布面の高さデータを付加して、塗布軌跡上の各点の3次元座標データを生成する変換部をさらに含む請求項1または2に記載の塗布軌跡予測装置。
  4. 履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して予測モデルを生成する学習部と、
    前記予測モデルを記憶する学習済みモデル記憶部とを含み、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡学習装置。
  5. 前記塗布軌跡情報は、前記履物構成部品の外郭画像に対して設定された2次元座標系において塗布領域を表す画素の集合体であるラスタ形式、前記2次元座標系において塗布軌跡を表す線の集合体であるベクタ形式、および前記2次元座標系において塗布領域を表す点群の集合であるポイントクラウド形式のいずれかで与えられる請求項4に記載の塗布軌跡学習装置。
  6. コンピュータが、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して生成された予測モデルにもとづいて、入力された履物構成部品の外郭画像から塗布軌跡情報を予測して出力し、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡予測方法。
  7. コンピュータが、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して予測モデルを生成し、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡学習方法。
  8. コンピュータに、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して生成された予測モデルにもとづいて、入力された履物構成部品の外郭画像から塗布軌跡情報を予測して出力させ、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡予測プログラム。
  9. コンピュータに、履物構成部品の外郭画像と前記履物構成部品における接着剤を塗布するべき一つまたは複数の軌跡を表す塗布軌跡情報とを教師データとして用いて前記外郭画像と前記塗布軌跡情報の間の相関関係を機械学習して予測モデルを生成させ、
    前記外郭画像は前記履物構成部品の塗布面に対向する方向から履物構成部品を撮影して得られるエッジ画像であり、
    前記エッジ画像は、前記塗布面から外側にはみ出ている部分を有する塗布軌跡学習プログラム。
JP2020066209A 2020-04-01 2020-04-01 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法 Active JP7432427B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020066209A JP7432427B2 (ja) 2020-04-01 2020-04-01 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020066209A JP7432427B2 (ja) 2020-04-01 2020-04-01 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法

Publications (2)

Publication Number Publication Date
JP2021159513A JP2021159513A (ja) 2021-10-11
JP7432427B2 true JP7432427B2 (ja) 2024-02-16

Family

ID=78004027

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020066209A Active JP7432427B2 (ja) 2020-04-01 2020-04-01 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法

Country Status (1)

Country Link
JP (1) JP7432427B2 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115969144A (zh) * 2023-01-09 2023-04-18 东莞市智睿智能科技有限公司 一种鞋底喷胶轨迹生成方法、系统、设备及存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017037932A1 (ja) 2015-09-03 2017-03-09 株式会社安川電機 靴用接着剤塗布システム、塗布軌跡生成装置、及び靴製造方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017037932A1 (ja) 2015-09-03 2017-03-09 株式会社安川電機 靴用接着剤塗布システム、塗布軌跡生成装置、及び靴製造方法

Also Published As

Publication number Publication date
JP2021159513A (ja) 2021-10-11

Similar Documents

Publication Publication Date Title
Park et al. Pix2pose: Pixel-wise coordinate regression of objects for 6d pose estimation
US10372228B2 (en) Method and system for 3D hand skeleton tracking
Magana et al. Fast and continuous foothold adaptation for dynamic locomotion through cnns
CN110458957B (zh) 一种基于神经网络的图像三维模型构建方法及装置
US10586371B2 (en) Motion retargeting method for character animation and apparatus thererof
JP7410499B2 (ja) 組立ロボットの遠隔操作環境のデジタルツインモデリング方法及びシステム
JP2022519194A (ja) 奥行き推定
US11185980B2 (en) Machine learning-based systems and methods for controlling robotic object picking and placement in training and run time environments
JP2022547288A (ja) 画像処理を使用したシーン表示
JP2007066094A (ja) 姿勢推定装置および姿勢推定方法
JP7432427B2 (ja) 塗布軌跡予測装置および塗布軌跡予測方法、ならびに塗布軌跡学習装置および塗布軌跡学習方法
JP2022518783A (ja) ロボットデバイスの状態を使用した環境のマッピング
Stork et al. Ensemble of sparse Gaussian process experts for implicit surface mapping with streaming data
CN111222266A (zh) 基于体积预测运动物品的物理性能
Daneshmand et al. Real-time, automatic shape-changing robot adjustment and gender classification
Sengupta et al. Tracking of non-rigid objects using rgb-d camera
CN114794665A (zh) 鞋面涂胶方法、装置、系统以及计算机可读存储介质
KR102449765B1 (ko) 로봇 매니퓰레이터의 기구학적 정보를 구성하기 위한 장치 및 이를 위한 방법
CN116018599A (zh) 用于训练机器学习模型以从对象的图像中识别对象的对象拓扑的设备和方法
Blomqvist et al. Semi-automatic 3D object keypoint annotation and detection for the masses
CN113034691A (zh) 人体模型的骨骼绑定方法、装置及电子设备
Lovi et al. Predictive display for mobile manipulators in unknown environments using online vision-based monocular modeling and localization
Giraud et al. Optimal shape servoing with task-focused convergence constraints
WO2022091212A1 (ja) 塗布領域学習装置および塗布領域学習方法、ならびに塗布領域予測装置および塗布領域予測方法
Omar et al. Fast convex visual foothold adaptation for quadrupedal locomotion

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220624

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230606

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240123

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240205

R150 Certificate of patent or registration of utility model

Ref document number: 7432427

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150