JP2023088197A - 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 - Google Patents
推定装置、推定方法、推定プログラム、及び学習モデル生成装置 Download PDFInfo
- Publication number
- JP2023088197A JP2023088197A JP2021202896A JP2021202896A JP2023088197A JP 2023088197 A JP2023088197 A JP 2023088197A JP 2021202896 A JP2021202896 A JP 2021202896A JP 2021202896 A JP2021202896 A JP 2021202896A JP 2023088197 A JP2023088197 A JP 2023088197A
- Authority
- JP
- Japan
- Prior art keywords
- flexible material
- state
- gripping
- electrical characteristics
- state information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 45
- 239000000463 material Substances 0.000 claims abstract description 72
- 238000001514 detection method Methods 0.000 claims abstract description 56
- 230000008859 change Effects 0.000 claims abstract description 25
- JOYRKODLDBILNP-UHFFFAOYSA-N Ethyl urethane Chemical compound CCOC(N)=O JOYRKODLDBILNP-UHFFFAOYSA-N 0.000 claims description 140
- 230000008569 process Effects 0.000 claims description 32
- 230000004044 response Effects 0.000 claims description 7
- 229920001971 elastomer Polymers 0.000 claims description 4
- 239000005060 rubber Substances 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 42
- 238000004891 communication Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 12
- 238000013528 artificial neural network Methods 0.000 description 8
- 238000005259 measurement Methods 0.000 description 8
- 238000013480 data collection Methods 0.000 description 6
- 230000000638 stimulation Effects 0.000 description 6
- 230000004075 alteration Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000005470 impregnation Methods 0.000 description 4
- 238000002156 mixing Methods 0.000 description 4
- 238000010248 power generation Methods 0.000 description 4
- 239000004020 conductor Substances 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 238000005452 bending Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000008595 infiltration Effects 0.000 description 2
- 238000001764 infiltration Methods 0.000 description 2
- 210000002569 neuron Anatomy 0.000 description 2
- 238000002791 soaking Methods 0.000 description 2
- 229920000742 Cotton Polymers 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 229920001821 foam rubber Polymers 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000002861 polymer material Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Manipulator (AREA)
- Force Measurement Appropriate To Specific Purposes (AREA)
- Professional, Industrial, Or Sporting Protective Garments (AREA)
- Gloves (AREA)
Abstract
【課題】特殊な検出装置を用いることなく、導電性を有する柔軟材料を備えた装着物の電気特性を利用して、把持部材が把持対象物を把持した際の滑り状態を推定する。【解決手段】推定装置は、導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の柔軟材料に予め定められた複数の検出点の間の電気特性を検出する検出部と、柔軟材料に刺激を与えた際の時系列の電気特性と、柔軟材料に刺激を与える把持部材が把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、滑り状態情報を出力するように学習された学習モデルに対して、検出部で検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する把持部材が把持対象物を把持した際の滑り状態を示す滑り状態情報を推定する推定部と、滑り状態情報を出力する出力部と、を含む。【選択図】図1
Description
本開示は、推定装置、推定方法、推定プログラム、及び学習モデル生成装置に関する。
従来より、物体に生じる形状変化を検出し、当該検出結果を用いて物体に変形を与える人や物の状態を推定することが行われている。物体に生じる形状変化を検出する側面では、物体の変形を阻害せずに変形を検出することは困難である。また、金属変形等の剛体の検出に用いられる歪センサは物品に利用困難なため、物体の変形を検出するためには、特殊な検出装置が要求される。例えば、カメラによる物体の変位と振動を測定して、変形画像を取得し、変形量を抽出する技術が知られている(例えば、特許文献1参照)。また、光の透過量から変形量を推定する柔軟触覚センサに関する技術も知られている(例えば、特許文献2参照)。
しかしながら、物体等の対象物に生じる形状変化を検出する側面では、カメラ及び画像解析手法を用いて対象物の変位等の変形量を検出する場合、カメラ及び画像解析等を含むシステムは、大規模なものとなり、装置の大型化を招くので好ましくはない。また、カメラを用いた光学手法ではカメラに撮像されない隠れた部分の計測は出来ない。従って、物体の変形を検出するのには改善の余地がある。
特に、例えば手に装着するグローブ及びロボットのハンド等のような把持部材が把持対象物を把持した際に生じる形状変化から把持対象物の滑り状態を検出する場合、把持部材に専用の検出器を設けて把持部材の形状変化から滑り状態を検出する他なかった。また、把持対象物を把持した際に生じる滑り状態を検出するのは、複雑かつ大掛かりな装置が要求されるため、実用的ではなかった。
本開示は、特殊な検出装置を用いることなく、導電性を有する柔軟材料を備えた把持部材の電気特性を利用して、把持部材が把持対象物を把持した際の滑り状態を推定可能な推定装置、推定方法、推定プログラム、及び学習モデル生成装置を提供することを目的とする。
上記目的を達成するために、第1態様は、導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出する検出部と、前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、前記検出部で検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定する推定部と、前記滑り状態情報を出力する出力部と、を含む推定装置である。
第2態様は、第1態様の推定装置において、前記滑り状態は、前記把持部材と前記把持対象物との摩擦力分布に関する状態を含む。
第3態様は、第1態様又は第2態様の推定装置において、前記把持部材は、手に装着するグローブ及びロボットのハンドの何れかである。
第4態様は、第1~第3態様の何れかの態様の推定装置において、前記把持部材は、前記把持対象物を把持する際の把持状態を調整可能であり、前記滑り状態情報に基づいて、前記把持状態を制御する制御部を更に備える。
第5態様は、第1~第4態様の何れかの態様の推定装置において、前記把持部材は、繊維状及び網目状の少なくとも一方の骨格を有する構造、又は内部に微小な空気泡が複数散在する構造のウレタン材、若しくはゴムの少なくとも一部に導電性が付与された材料を含む。
第6態様は、第1~第5態様の何れかの態様の推定装置において、前記学習モデルは、前記柔軟材料をリザーバとして当該リザーバを用いたリザーバコンピューティングによるネットワークを用いて学習させることで生成されたモデルを含む。
第7態様は、コンピュータが、導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出し、前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定し、前記滑り状態情報を出力する推定方法である。
第8態様は、コンピュータに、導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出し、前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定し、前記滑り状態情報を出力する処理を実行させる推定プログラムである。
第9態様は、導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出する検出部からの前記電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報と、を取得する取得部と、前記取得部の取得結果に基づいて、前記柔軟材料に圧力を与えた際の時系列の電気特性を入力とし、前記柔軟材料に刺激を与える前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を出力する学習モデルを生成する学習モデル生成部と、を含む学習モデル生成装置である。
本開示によれば、特殊な検出装置を用いることなく、導電性を有する柔軟材料を備えた把持部材の電気特性を利用して、把持部材が把持対象物を把持した際の滑り状態を推定することができる、という効果を有する。
以下、図面を参照して本開示の技術を実現する実施形態を詳細に説明する。なお、作用、機能が同じ働きを担う構成要素及び処理には、全図面を通して同じ符合を付与し、重複する説明を適宜省略する場合がある。また、本開示は、以下の実施形態に何ら限定されるものではなく、本開示の目的の範囲内において適宜変更を加えて実施することができる。
なお、本開示において人物とは、対象物に対して物理量により刺激を与えることが可能な人体及び物体の少なくとも一方を含む概念である。以下の説明では、人体及び物体の少なくとも一方を区別することなく、ヒトとモノとを含む概念として人物と総称して説明する。すなわち、人体及び物体のそれぞれの単体、及び人体と物体の組み合わせた組合せ体を総称して人物と称する。
まず、図1から図7を参照して、本開示の技術を適用する導電性が付与された柔軟材料、及び当該柔軟材料を用いて、柔軟材料に対する付与側の状態を推定する状態推定処理を説明する。
<柔軟材料>
本開示において「柔軟材料」とは、少なくとも一部が撓み等のように変形可能な材料を含む概念であり、ゴム材料等の柔らかい弾性体、繊維状及び網目状の少なくとも一方の骨格を有する構造体、及び内部に微小な空気泡が複数散在する構造体を含む。これらの構造体の一例には、ウレタン材及びゴム(発泡体)などの高分子材料が挙げられる。また、本開示では、導電性が付与された柔軟材料を用いる。「導電性が付与された柔軟材料」とは、導電性を有する材料を含む概念であり、導電性を付与するために導電材を柔軟材料に付与した材料、及び柔軟材料が導電性を有する材料を含む。導電性を付与する柔軟材料はウレタン材及びゴムなどの高分子材料が好適である。以下の説明では、導電性が付与された柔軟材料の一例として、ウレタン材の全部または一部に導電材料を配合及び浸潤(含浸ともいう)等により形成させた部材を、「導電性ウレタン」と称して説明する。導電性ウレタンは、導電材料を配合と浸潤(含浸)との何れかの方法で形成可能であり、導電材料の配合又は浸潤(含浸)で形成可能で、また導電材料の配合と浸潤(含浸)とを組み合わせて形成可能である。例えば、浸潤(含浸)による導電性ウレタンが、配合による導電性ウレタン22より導電性が高い場合には、浸潤(含浸)により導電性ウレタンを形成することが好ましい。
導電性ウレタンは、与えられた物理量に応じて電気特性が変化する機能を有する。電気特性が変化する機能を生じさせる物理量の一例には、撓み等のように構造を変形させる圧力による刺激(以下、圧力刺激という。)を示す圧力値による刺激値が挙げられる。なお、圧力刺激は、所定部位への圧力及び所定範囲の圧力の分布による圧力付与を含む。また、当該物理量の他例には、含水率及び水分付与等によって素材の性質を変化(変質)させる刺激(以下、素材刺激という。)を示す水分量等の刺激値が挙げられる。導電性ウレタンは、与えられた物理量に応じて電気特性が変化する。この電気特性を表す物理量の一例には、電気抵抗値が挙げられる。また、他例には、電圧値、又は電流値が挙げられる。
導電性ウレタンは、所定の体積を有する柔軟材料に導電性を与えることで、与えられた物理量に応じた電気特性(すなわち電気抵抗値の変化)が現れ、その電気抵抗値は、導電性ウレタンの体積抵抗値と捉えることが可能である。導電性ウレタンは、電気経路が複雑に連携し、例えば、変形に応じて電気経路が伸縮したり膨縮したりする。また、電気経路が一時的に切断される挙動、及び以前と異なる接続が生じる挙動を示す場合もある。従って、導電性ウレタンは、所定距離を隔てた位置(例えば電極が配置された検出点の位置)の間では、与えられた物理量による刺激(圧力刺激及び素材刺激)の大きさや分布に応じた変形や変質で異なる電気特性を有する挙動を示す。このため、導電性ウレタンに与えられた物理量による刺激の大きさや分布に応じて電気特性が変化する。
なお、導電性ウレタンを用いることで、変形及び変質についての対象箇所に電極等の検出点を設ける必要はない。導電性ウレタンに物理量による刺激が与えられる箇所を挟む任意の少なくとも2箇所に電極等の検出点を設ければよい(例えば図1)。
また、導電性ウレタンの電気特性の検出精度を向上するため、2個の検出点より多くの検出点を用いてもよい。また、本開示の導電性ウレタンは、図1に示す導電性ウレタン22を1導電性ウレタン片とし、複数の導電性ウレタン片を配列してなる導電性ウレタン群で形成してもよい。この場合、複数の導電性ウレタン片毎に電気特性を検出してもよいし、複数の導電性ウレタン片の電気特性を合成して検出してもよい。複数の導電性ウレタン片毎に電気特性を検出する場合、配置部位毎(例えば検出セット#1~#n)に電気抵抗値等の電気特性を検出できる。また、他例としては、導電性ウレタン22上における検出範囲を分割して分割した検出範囲毎に検出点を設けて検出範囲毎に電気特性を検出してもよい。
<推定装置>
次に、導電性ウレタンを用いて、当該導電性ウレタンに対する付与側の状態を推定する推定装置の一例を説明する。
図1に、付与側の状態を推定する推定処理を実行可能な推定装置1の構成の一例を示す。推定装置1は、推定部5を備え、導電性ウレタン22における電気特性が入力されるように対象物2に接続されている。推定装置1では、対象物2に含まれる導電性ウレタン22に対する付与側の状態が推定される。推定装置1は、後述する処理を実行する実行装置としてのCPUを備えたコンピュータによって実現可能である。
上述した導電性ウレタンの変形及び変質は、導電性ウレタンに対して時系列に与えられた物理量で生じる。この時系列に与えられる物理量は、付与側の状態に依存する。従って、時系列に変化する導電性ウレタンの電気特性は、導電性ウレタンに与えられた物理量の付与側の状態に対応する。例えば、導電性ウレタンを変形させる圧力刺激または導電性ウレタンを変質させる素材刺激が与えられる場合、時系列に変化する導電性ウレタンの電気特性は、圧力刺激の位置及び分布、並びに大きさを示す付与側の状態に対応する。よって、時系列に変化する導電性ウレタンの電気特性から導電性ウレタンに対する付与側の状態を推定することが可能である。
推定装置1では、後述する推定処理によって、学習済みの学習モデル51を用いて、未知の付与側の状態を推定し、出力する。これにより、特殊な装置や大型の装置を用いたり対象物に含まれる導電性ウレタン22の変形及び変質を直接計測することなく、対象物2に対する付与側の状態を同定することが可能となる。学習モデル51は、対象物2に対する付与側の状態と、対象物2の電気特性(すなわち、対象物2に配置された導電性ウレタン22の電気抵抗値等の電気特性)とを入力として学習される。学習モデル51の学習については後述する。
なお、導電性ウレタン22は、柔軟性を有する部材21に配置して対象物2を構成することが可能である(図2)。導電性ウレタン22が配置された部材21により構成される対象物2は、電気特性検出部76を含む。導電性ウレタン22は、部材21の少なくとも一部に配置すればよく、内部に配置してもよいし外部に配置してもよい。また、導電性ウレタンは、導電性ウレタンへの付与側の状態を推定可能に配置すればよく、例えば、人物に直接的又は間接的、或いはその両方で接触可能に配置すればよい。
図2に、対象物2における導電性ウレタン22の配置例を示す。対象物2のA-A断面を対象物断面2-1として示すように、導電性ウレタン22は、部材21の内部を全て満たすように形成しても良い。また、対象物断面2-2に示すように、導電性ウレタン22は、部材21の内部における一方側(表面側)に形成しても良く、対象物断面2-3に示すように、部材21の内部における他方側(裏面側)に導電性ウレタン22を形成しても良い。さらに、対象物断面2-4に示すように、部材21の内部の一部に導電性ウレタン22を形成しても良い。また、対象物断面2-5に示すように、導電性ウレタン22は、部材21の表面側の外側に分離して配置しても良く、対象物断面2-6に示すように、他方側(裏面側)の外部に配置しても良い。導電性ウレタン22を部材21の外部に配置する場合、導電性ウレタン22と部材21とを積層するのみでもよく、導電性ウレタン22と部材21とを接着等により一体化してもよい。なお、導電性ウレタン22を部材21の外部に配置する場合であっても、導電性ウレタン22が導電性を有するウレタン材であるため、部材21の柔軟性は阻害されない。
図1に示すように、導電性ウレタン22は、距離を隔てて配置された少なくとも2個の検出点75からの信号によって、導電性ウレタン22の電気特性(すなわち、電気抵抗値である体積抵抗値)を検出する。図1の例では、導電性ウレタン22上で対角位置に配置された2個の検出点75からの信号により電気特性(時系列の電気抵抗値)を検出する検出セット#1が示されている。なお、検出点75の個数及び配置は、図1に示す位置に限定されるものではなく、導電性ウレタン22の電気特性を検出可能な位置であれば3個以上の個数でもよく何れの位置でもよい。なお、導電性ウレタン22の電気特性は、電気特性(例えば、電気抵抗値である体積抵抗値)を検出する電気特性検出部76を検出点75に接続し、その出力を用いればよい。
本実施形態では、センサとして導電性ウレタン22を用いるため、例えば、人物が介在する場合に従来のセンサに比べて人物に与える違和感が極めて少ない。このため、計測中に人物に関する付与側の状態を害することが無く、計測と付与側の状態推定を同時に行うことが可能となる。これは計測と付与側の状態推定を別個に行っていた従来のセンサに比べて利点となり、とりわけ時系列変化を追う長時間の計測評価による推定においては、そのメリットは大きい。
推定部5は、対象物2に接続され、導電性ウレタン22の変形及び変質の少なくとも一方に応じて変化する電気特性に基づき、学習モデル51を用いて、付与側の状態を推定する機能部である。具体的には、推定部5には、導電性ウレタン22における電気抵抗の大きさ(電気抵抗値等)を表す時系列の入力データ4が入力される。入力データ4は、対象物2に対する付与側の状態、例えば対象物2に接触した人物の姿勢や動き等の人物の挙動に関する状態を示す状態データ3に対応する。例えば、人物が対象物2に接触する際、姿勢等の所定の状態で接触し、当該状態に対応して、対象物2を構成する導電性ウレタン22には刺激(圧力刺激及び素材刺激の少なくとも一方)が物理量として与えられ、導電性ウレタン22の電気特性が変化する。従って、入力データ4により示される時系列に変化する導電性ウレタン22の電気特性は、対象物2、すなわち、導電性ウレタン22に対する付与側の状態に対応するものとなる。また、推定部5は、学習済みの学習モデル51を用いた推定結果として、時系列に変化する導電性ウレタン22の電気特性に対応する付与側の状態を表す出力データ6を出力する。
学習モデル51は、物理量として与えられる刺激(圧力刺激及び素材刺激)により変化する導電性ウレタン22の電気抵抗(入力データ4)から、付与側の状態を表す出力データ6を導出する学習を済ませたモデルである。学習モデル51は、例えば、学習済みのニューラルネットワークを規定するモデルであり、ニューラルネットワークを構成するノード(ニューロン)同士の間の結合の重み(強度)の情報の集合として表現される。
<学習処理>
次に、学習モデル51を生成する学習処理について説明する。
図3に、学習モデル51を生成する学習モデル生成装置の概念構成を示す。学習モデル生成装置は、学習処理部52を備えている。学習モデル生成装置は、図示しないCPUを備えたコンピュータを含んで構成可能であり、CPUにより実行される学習データ収集処理及び学習モデル生成処理によって学習処理部52として実行されて学習モデル51を生成する。
<学習データ収集処理>
学習処理部52は、学習データ収集処理において、付与側の状態を表す状態データ3をラベルとして導電性ウレタン22における電気特性(例えば電気抵抗値)を時系列に測定した大量の入力データ4を学習データとして収集する。従って、学習データは、電気特性を示す入力データ4と、その入力データ4に対応する付与側の状態を示す状態データ3と、のセットを大量に含む。
具体的には、学習データ収集処理では、対象物2における状態(すなわち、導電性ウレタン22に対する付与側の状態)が形成された際の付与側の状態に応じた刺激(圧力刺激及び素材刺激)により変化する電気特性(例えば電気抵抗値)を時系列に取得する。次に、取得した時系列の電気特性(入力データ4)に状態データ3をラベルとして付与し、状態データ3と入力データ4とのセットが予め定めた所定数、又は予め定めた所定時間に達するまで処理を繰り返す。これらの付与側の状態を示す状態データ3と、付与側の状態毎に取得した時系列の導電性ウレタン22の電気特性(入力データ4)とのセットが学習データとなる。なお、学習データにおける状態データ3は、後述する学習処理において推定結果が正解である付与側の状態を示す出力データ6として扱われるように図示しないメモリに記憶される。
なお、学習データは、導電性ウレタン22の電気抵抗値(入力データ4)の各々に測定時刻を示す情報を付与することで時系列情報を対応付けてもよい。この場合、付与側の状態として定まる期間について、導電性ウレタン22における時系列な電気抵抗値のセットに測定時刻を示す情報を付与して時系列情報を対応付けてもよい。
上述した学習データの一例を次に表で示す。表1は、導電性ウレタン22に対する付与側の状態に関する学習データとして、時系列の電気抵抗値データ(r)と付与側の状態を示す状態データ(R)とを対応付けたデータセットの一例である。
なお、導電性ウレタン22で検出される電気特性(時系列の電気抵抗値データによる時間特性)は、導電性ウレタン22に対する付与側の状態に関する特徴パターンとして捉えることが可能である。すなわち、導電性ウレタン22に対する付与側の状態によって、導電性ウレタン22に対して異なる刺激が時系列に与えられる。従って、所定の時間内における時系列の電気特性は、付与側の状態に対して特徴的な電気特性として表れると考えられる。よって、導電性ウレタン22で検出される電気特性(時系列の電気抵抗値データによる時間特性)に示されるパターン(例えば電気特性における時系列の電気抵抗値の分布形状)は、付与側の状態に対応し、後述する学習処理において有効に機能する。
<学習モデル生成処理>
次に、学習モデル生成処理について説明する。図3に示す学習モデル生成装置は、学習処理部52における学習モデル生成処理によって、上述した学習データを用いて学習モデル51を生成する。
図4は、学習処理部52の機能構成、すなわち学習処理部52で実行される学習モデル生成処理に関して、図示しないCPUの機能構成を示す図である。学習処理部52の図示しないCPUは、生成器54及び演算器56の機能部として動作する。生成器54は、入力である時系列に取得された電気抵抗値の前後関係を考慮して出力を生成する機能を有する。
学習処理部52は、学習用データとして、上述した入力データ4(例えば、電気抵抗値)と、導電性ウレタン22に刺激を与えた付与側の状態を示す状態データ3である出力データ6とのセットを図示しないメモリに多数保持している。
生成器54は、入力層540、中間層542、および出力層544を含んで、公知のニューラルネットワーク(NN:Neural Network)を構成する。ニューラルネットワーク自体は公知の技術であるため詳細な説明は省略するが、中間層542は、ノード間結合およびフィードバック結合を有するノード群(ニューロン群)を多数含む。その中間層542には、入力層540からのデータが入力され、中間層542の演算結果のデータは、出力層544へ出力される。
生成器54は、入力された入力データ4(例えば、電気抵抗値)から付与側の状態を表すデータ又は付与側の状態に近いデータとしての生成出力データ6Aを生成するニューラルネットワークである。生成出力データ6Aは、入力データ4から導電性ウレタン22に刺激が与えられた付与側の状態を推定したデータである。生成器54は、時系列に入力された入力データ4から、付与側の状態に近い状態を示す生成出力データを生成する。生成器54は、多数の入力データ4を用いて学習することで、対象物2すなわち導電性ウレタン22に刺激が与えられた人物等の付与側の状態に近い生成出力データ6Aを生成できるようになる。他の側面では、時系列に入力された入力データ4である電気特性をパターンとして捉え、当該パターンを学習することで、対象物2すなわち導電性ウレタン22に刺激が与えられた人物等の付与側の状態に近い生成出力データ6Aを生成できるようになる。
演算器56は、生成出力データ6Aと、学習データの出力データ6とを比較し、その比較結果の誤差を演算する演算器である。学習処理部52は、生成出力データ6A、および学習データの出力データ6を演算器56に入力する。これに応じて、演算器56は、生成出力データ6Aと、学習データの出力データ6との誤差を演算し、その演算結果を示す信号を出力する。
学習処理部52は、演算器56で演算された誤差に基づいて、ノード間の結合の重みパラメータをチューニングする、生成器54の学習を行う。具体的には、生成器54における入力層540と中間層542とのノード間の結合の重みパラメータ、中間層542内のノード間の結合の重みパラメータ、および中間層542と出力層544とのノード間の結合の重みパラメータの各々を例えば勾配降下法や誤差逆伝搬法等の手法を用いて、生成器54にフィードバックする。すなわち、学習データの出力データ6を目標として、生成出力データ6Aと学習データの出力データ6との誤差を最小化するように全てのノード間の結合を最適化する。
なお、生成器54は、時系列入力の前後関係を考慮して出力を生成する機能を有する再帰型ニューラルネットワークを用いてもよく、他の手法を用いてもよい。
学習処理部52は、学習モデル生成処理によって、上述した学習データを用いて学習モデル51を生成する。学習モデル51は、学習結果のノード間の結合の重みパラメータ(重み又は強度)の情報の集合として表現され、図示しないメモリに記憶される。
具体的には、学習処理部52は、次の手順により学習モデル生成処理を実行する。第1学習処理では、時系列に測定した結果の学習データである、付与側の状態を示す情報をラベルとした入力データ4(電気特性)を取得する。第2学習処理では、時系列に測定した結果の学習データを用いて学習モデル51を生成する。すなわち、上記のようにして多数の学習データを用いて学習した学習結果のノード間の結合の重みパラメータ(重み又は強度)の情報の集合を得る。そして、第3学習処理では、学習結果のノード間の結合の重みパラメータ(重み又は強度)の情報の集合として表現されるデータを学習モデル51として記憶する。
そして、上記推定装置1では、学習済みの生成器54(すなわち、学習結果のノード間の結合の重みパラメータの情報の集合として表現されるデータ)を学習モデル51として用いる。十分に学習した学習モデル51を用いれば、対象物2、すなわち導電性ウレタン22の時系列の電気特性(例えば、時系列に変化する電気抵抗値の特性)から付与側の状態を同定することも不可能ではない。
<PRC>
ところで、導電性ウレタン22は、上述したように電気経路が複雑に連携し、電気経路の伸縮、膨縮、一時的な切断、及び新たな接続等の変化(変形)、並びに素材の性質の変化(変質)に応じた挙動を示す。結果的に、導電性ウレタン22は、与えられた刺激(例えば圧力刺激)に応じて異なる電気特性を有する挙動を示す。このことは、導電性ウレタン22を、導電性ウレタン22の変形に関するデータを貯留するリザーバとして扱うことが可能である。すなわち、推定装置1は、物理的なリザーバコンピューティング(PRC:Physical Reservoir Computing)と呼ばれるネットワークモデル(以下、PRCNという。)に、導電性ウレタン22を適用することが可能である。PRCおよびPRCN自体は公知の技術であるため、詳細な説明を省略するが、PRC、及びPRCNは、導電性ウレタン22の変形や変質に関する情報の推定に好適である。
図5に、PRCNを適用した学習処理部52の機能構成の一例を示す。PRCNを適用した学習処理部52は、入力リザーバ層541と、推定層545とを含む。入力リザーバ層541は、対象物2に含まれる導電性ウレタン22が対応する。すなわち、PRCNを適用した学習処理部52では、導電性ウレタン22を含む対象物2を、導電性ウレタン22を含む対象物2の変形及び変質に関するデータを貯留するリザーバとして扱って学習する。導電性ウレタン22は、多様な刺激の各々に応じた電気特性(電気抵抗値)となり、電気抵抗値を入力する入力層として機能し、また、導電性ウレタン22の変形及び変質に関するデータを貯留するリザーバ層として機能する。導電性ウレタン22は、人物等の付与側の状態により与えられた刺激に応じて異なる電気特性(入力データ4)を出力するので、推定層545で、与えられた導電性ウレタン22の電気抵抗値から未知の付与側の状態を推定することが可能である。従って、PRCNを適用した学習処理部52における学習処理では、推定層545を学習すればよい。
<推定装置の構成>
次に、上述した推定装置1の具体的な構成の一例についてさらに説明する。図6に、推定装置1の電気的な構成の一例を示す。図6に示す推定装置1は、上述した各種機能を実現する処理を実行する実行装置としてのコンピュータを含んで構成したものである。上述の推定装置1は、コンピュータに上述の各機能を表すプログラムを実行させることにより実現可能である。
推定装置1として機能するコンピュータは、コンピュータ本体100を備えている。コンピュータ本体100は、CPU102、揮発性メモリ等のRAM104、ROM106、ハードディスク装置(HDD)等の補助記憶装置108、及び入出力インターフェース(I/O)110を備えている。これらのCPU102、RAM104、ROM106、補助記憶装置108、及び入出力I/O110は、相互にデータ及びコマンドを授受可能にバス112を介して接続された構成である。また、入出力I/O110には、外部装置と通信するための通信部114、ディスプレイやキーボード等の操作表示部116、及び検出部118が接続されている。検出部118は、導電性ウレタン22を含む対象物2から、入力データ4(時系列の電気抵抗値等の電気特性)を取得する。すなわち、検出部118は、導電性ウレタン22が配置された対象物2を含み、かつ導電性ウレタン22における検出点75に接続された電気特性検出部76から入力データ4を取得することが可能である。なお検出部118は通信部114を介して接続してもよい。
補助記憶装置108には、コンピュータ本体100を本開示の推定装置の一例として推定装置1として機能させるための制御プログラム108Pが記憶される。CPU102は、制御プログラム108Pを補助記憶装置108から読み出してRAM104に展開して処理を実行する。これにより、制御プログラム108Pを実行したコンピュータ本体100は、推定装置1として動作する。
なお、補助記憶装置108には、学習モデル51を含む学習モデル108M、及び各種データを含むデータ108Dが記憶される。制御プログラム108Pは、CD-ROM等の記録媒体により提供するようにしても良い。
<推定処理>
次に、コンピュータにより実現された推定装置1における推定処理についてさらに説明する。図7に、コンピュータ本体100で実行される制御プログラム108Pによる推定処理の流れの一例を示す。図7に示す推定処理は、コンピュータ本体100に電源投入されると、CPU102により実行される。CPU102は、制御プログラム108Pを補助記憶装置108から読み出し、RAM104に展開して処理を実行する。
まず、CPU102は、補助記憶装置108の学習モデル108Mから学習モデル51を読み出し、RAM104に展開することで、学習モデル51を取得する(ステップS200)。具体的には、学習モデル51として表現された重みパラメータによるノード間の結合となるネットワークモデル(図4、図5参照)を、RAM104に展開することによって、重みパラメータによるノード間の結合が実現された学習モデル51が構築される。
次に、CPU102は、導電性ウレタン22に与えられた刺激による付与側の状態を推定する対象となる未知の入力データ4(電気特性)を、検出部118を介して時系列に取得する(ステップS202)。次に、CPU102は、学習モデル51を用いて、取得済みの入力データ4に対応する出力データ6(未知の付与側の状態)を推定する(ステップS204)。そして、CPU102は、推定結果の出力データ6(付与側の状態)を、通信部114を介して出力し(ステップS206)、本処理ルーチンを終了する。
このように、推定装置1によれば、導電性ウレタン22の電気抵抗値から未知の付与側の状態を推定可能である。具体的には、推定装置1では、付与側の状態により導電性ウレタン22に与えられた刺激に応じて変化する入力データ4(電気特性)から、人物等の付与側の状態を推定することが可能となる。すなわち、特殊な装置や大型の装置を用いたり柔軟部材の変形を直接計測することなく、人物等の付与側の状態を推定することが可能となる。
<滑り状態の推定>
このような導電性ウレタン22を手袋に適用する場合について説明する。導電性ウレタン22を手袋に適用した場合、手袋を装着した手による把持対象物を把持する動きに応じて手袋の部分的な圧縮といった圧力刺激が生じる。また、手が把持対象物を把持する把持力、把持対象物の把持の仕方、手袋の素材、把持対象物の重さ、及び把持対象物の素材等によって、把持対象物の滑りやすさを示す滑り状態は異なる。滑り状態は、導電性ウレタン22に加わる圧力の時系列変化に基づいて推定することが可能である。そのため、推定装置1によって、導電性ウレタン22の時系列の電気抵抗値から手袋を装着した手により把持対象物を把持した際の滑り状態が推定可能となる。説明の便宜上、以降では、手袋Gをはめる人物を、単に「人物」ということにする。
ここで、滑り状態は、例えば把持部材の一例としての手袋を装着した手と把持対象物との摩擦力分布に関する状態を含む。導電性ウレタン22を含む手袋と把持対象物との摩擦力の分布が分かれば把持対象物が手袋を装着した手から滑り落ちるか否かを推定することができる。従って、滑り状態は、把持対象物が滑り落ちる度合いを含む。なお、滑り状態は、把持部材と把持対象物との滑りの度合いを示すものであれば、これらに限られるものではない。
図8は、導電性ウレタン22を対象物2としての手袋Gに適用した一例を示す図である。すなわち、圧力刺激が与えられる対象物2は手袋Gということになる。ここで、手袋Gは、手の全てを覆うものに限定されず、例えば、指先の部分を覆わないようなものであってもよいし、又、各指に分かれている五本指型の手袋Gではなく、各指に分かれていないミトン型の手袋Gであってもよい。
図9に示すように、人物は導電性ウレタン22を含む手袋Gを装着した手Hで把持対象物Bを把持する。なお、手袋Gに導電性ウレタン22が含まれるとは、導電性ウレタン22と手袋Gを構成する部材21(この場合、綿や化学繊維)との配置例が、図2に示したような導電性ウレタン22と部材21の配置例の何れかを満たすことをいう。
図8に示すように、導電性ウレタン22は、手袋Gと略同一の形状であり、例えば手袋Gの内側全体に設けられる。また、手袋Gは、検出ユニット78を備える。
図10に示すように、検出ユニット78は、導電性ウレタン22に設けられた複数の検出点75が接続された電気特性検出部76、通信部80、蓄電部82、及び発電部84を備えている。なお、検出点75の位置及び数は、圧力刺激による電気特性の変化が手袋Gの全体で検出可能なように、手袋Gのサイズ及び形状に応じて適宜設定される。
電気特性検出部76は、検出点75から入力される電気特性を検出し、検出結果を通信部80に出力する。
通信部80は、スマートフォン等の携帯端末装置30と通信を行い、電気特性検出部76の検出点75から得られる電気特性を表す物理量の検出結果を携帯端末装置30に送信する。通信部80は、例えば、Wi-Fi(登録商標)やBluetooth(登録商標)等の近距離無線通信により、携帯端末装置30と通信を行う。
蓄電部82は、電気特性検出部76が電気特性を検出するための電力、及び通信部80が携帯端末装置30と通信するための電力を供給する。蓄電部82は、例えば、各種充電電池や、キャパシタ等が適用され、発電部84による発電電力により充電される。
発電部84は、種々の周知の方法で発電し、発電電力を蓄電部82に供給することにより、蓄電部82を充電する。例えば、コイルと磁石を用いて、手袋Gの揺動に応じて磁石がコイル中を相対移動することにより発電してもよい。或いは、光、熱、圧力、振動などのエネルギーを電力に変換する発電素子等を用いて発電してもよい。
一方、携帯端末装置30は、上述のコンピュータ本体100、通信部114、及び操作表示部116の構成を備える。
携帯端末装置30は、推定装置1として機能し、コンピュータ本体100が、学習済みの学習モデル51を用いて、手袋Gに設けた導電性ウレタン22における電気特性から手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定する。
通信部114は、手袋Gの通信部80と通信を行い、電気特性検出部76の検出点75から得られる電気特性を表す物理量の検出結果を手袋Gから取得する。通信部114は、例えば、Wi-Fi(登録商標)やBluetooth(登録商標)等の近距離無線通信により、携帯端末装置30と通信を行う。
操作表示部116は、出力部の一例に対応し、コンピュータ本体100によって推定した、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態、例えば摩擦力分布等を表示する。これにより、把持対象物Bが滑り落ちそうか否かを把握することができる。
携帯端末装置30における推定処理は、学習済みの学習モデル51を用いて、手袋Gを装着した手Hで把持対象物Bを把持した際の未知の滑り状態として、例えば摩擦力分布等を推定し、出力する。これにより、特殊な装置や大型の装置を用いたり手袋Gに含まれる導電性ウレタン22の変形を直接計測したりすることなく、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を同定することが可能となる。従って、導電性ウレタン22における電気特性から手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定するために、携帯端末装置30には、導電性ウレタン22における電気特性から手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定する学習モデル51が補助記憶装置108に記憶される。
次に、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態情報を推定するための学習モデル51を生成する学習処理について説明する。
図3に示した学習モデル生成装置の学習処理部52は、学習データ収集処理において、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を表す状態データ3をラベルとする導電性ウレタン22における電気抵抗値を時系列に測定した大量の入力データ4を学習データとして収集する。
具体的には、学習データ収集処理では、手袋Gを装着した手Hで把持対象物Bを把持することにより圧力刺激が与えられた手袋Gに含まれる導電性ウレタン22の電気特性(例えば、電気抵抗値)を手袋Gに取り付けられた電気特性検出部76から時系列に取得する。次に、取得した時系列の電気特性である入力データ4に状態データ3を、滑り状態を示すラベルとして付与し、状態データ3と入力データ4とを組み合わせた複数の学習データを準備する。
以降では、手袋Gに含まれる導電性ウレタン22の電気特性の一例として電気抵抗値を用いた説明を行うが、導電性ウレタン22の電気特性として電流値又は電圧値を用いてもよいことは前述した通りである。
手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態情報の推定に用いる学習データとしては、例えば前述した表1に示すデータセットが用いられる。導電性ウレタン22を手袋Gに適用した場合における表1のデータセットは、手袋Gから得られた時系列の電気抵抗値データ(r)と、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を示す状態データ(R)とを対応付けたデータセットである。
この場合、表1における状態R1~Rk・・・は、手袋Gを装着した手Hに対する滑り状態R1~Rk・・・である。滑り状態の例としては、前述したように、摩擦力分布及び把持対象物Bが滑り落ちる度合い等が挙げられる。
学習処理部52は、このような時系列の電気抵抗値データ(r)と、手袋Gを装着した手Hに対する滑り状態を示す状態データ(R)と、が対応付けられた学習データを用いて、前述した学習モデル生成処理により学習モデル51を生成する。
推定装置1は、導電性ウレタン22の時系列の電気抵抗値データによって表される特徴パターンと、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態との関連性を機械学習した滑り状態に関する学習モデル51を用いて図7に示した推定処理を実行することによって、導電性ウレタン22における時系列の未知の電気抵抗値データから、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定する。
具体的には、図7のステップS200において、推定装置1のCPU102は、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態に関する学習モデル51を取得し、ステップS202において、CPU102は、滑り状態の推定対象となる手袋Gに設けられた電気特性検出部76から送信された時系列の電気抵抗値データを入力データ4として取得する。
なお、ステップS202で取得する入力データ4は、推定処理の実行期間中に手袋Gからリアルタイムに得られた入力データ4であっても、推定処理を実行する前に予め得られていた入力データ4であってもよい。
ステップS204において、CPU102は、ステップS200で取得した学習モデル51に、ステップS202で取得した入力データ4を入力し、学習モデル51から出力された出力データ6を取得する。CPU102は、表2に示した状態データ3のうち、出力データ6に最も近い状態データ3と対応付けられている滑り状態を、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態として推定する。
ステップS206において、CPU102は、ステップS204で推定した手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を示す滑り状態情報を出力する。例えば、摩擦力分布を操作表示部116に表示させたり、把持対象物Bが滑り落ちる度合いを操作表示部116に表示させたりする。
このように、本実施形態に係る推定装置1によれば、導電性ウレタン22を手袋Gに適用し、手袋Gを装着した手Hで把持対象物Bを把持することにより発生する圧力刺激によって変化する導電性ウレタン22の時系列の電気特性と、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を示す滑り状態情報との関連性を予め機械学習した学習モデル51に、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態に対応した時系列の未知の電気特性を入力することで得られる出力データ6により、手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定する。
したがって、推定装置1によって、例えば、上記で説明した手袋Gを装着した手Hで把持対象物Bを把持した際の滑り状態を推定することが可能となり、推定した滑り状態を操作表示部116に表示することが可能となる。これにより、把持対象物Bを適切な把持状態で把持するよう促すことができる。
ところで、手袋Gを、自動で把持状態を調整可能な構成とし、推定した滑り状態情報に基づいて、把持状態を自動で制御するようにしてもよい。ここで、把持状態とは、把持力及び把持の仕方の少なくとも1つを含む。把持の仕方とは、どのように把持対象物を把持するかを表し、例えば把持対象物を把持する際の手袋Gの形状を含む。この場合、図11に示すように、手袋Gは、手袋Gの把持状態を調整するための駆動部79を備えた構成とする。駆動部79は、図12に示すように、通信部80を介して携帯端末装置30と通信可能である。
携帯端末装置30のコンピュータ本体100は制御部として機能し、推定した滑り状態情報に基づいて、把持状態を制御するための制御信号を、通信部114を介して手袋Gに送信する。これにより、手袋Gでは、通信部80を介して携帯端末装置30からの制御信号を受信し、受信した制御信号に基づいて駆動部79が手袋Gの把持状態を制御する。
図13には、手袋Gの把持状態を制御する場合の制御処理のフローチャートを示す。図12の制御処理は、図7の推定処理にステップS208が追加されたものであり、ステップS200~S206の処理は図7と同一であるので説明は省略する。
ステップS208では、ステップS204で推定された滑り状態に基づいて、手袋Gの把持状態を制御する。例えば、推定された滑り状態が、把持対象物Bが滑り落ちる状態を示している場合は、把持対象物が滑り落ちないよう把持状態の変更を指示する制御信号を送信する。これにより、手袋Gの駆動部79は、把持対象物が滑り落ちないように手袋Gの把持状態を変更する。すなわち、例えば把持力を強くしたり、把持対象物の把持の仕方を変更したりする。一方、推定された滑り状態が、把持対象物Bが滑り落ちない状態を示している場合は、把持状態を維持することを指示する制御信号を送信する。これにより、手袋Gの把持対象物Bの把持状態を自動で制御することができる。このため、例えば手の力が弱くなっている人物が把持対象物Bを把持する動作を支援することが可能となる。
なお、本実施形態では、把持部材が手袋Gである場合について説明したが、ロボットのハンドでもよい。例えば図14に示すように、ロボットRBのハンドHDに導電性ウレタン22を設けた構成とする。この場合、ハンドHDが把持対象物Bを把持した際の滑り状態が、把持対象物Bが滑り落ちる状態を示している場合は、把持対象物Bが滑り落ちないようにハンドHDの把持状態を変更する。一方、ハンドHDが把持対象物Bを把持した際の滑り状態が、把持対象物Bが滑り落ちない状態を示している場合は、把持対象物Bの把持状態を維持する。このように、把持対象物Bが滑り落ちないように把持状態が自動で制御されるため、把持対象物Bが滑り落ちてしまうのを防ぐことができる。
上述したように、本開示では、柔軟部材の一例として導電性ウレタン22を適用した場合を説明したが、柔軟部材は導電性ウレタン22に限定されないことは勿論である。
また、本開示の技術的範囲は上記実施形態に記載の範囲には限定されない。要旨を逸脱しない範囲で上記実施形態に多様な変更または改良を加えることができ、当該変更または改良を加えた形態も本開示の技術的範囲に含まれる。
また、上記実施形態では、推定処理及び学習処理を、フローチャートを用いた処理によるソフトウエア構成によって実現した場合について説明したが、これに限定されるものではなく、例えば、各処理をハードウェア構成により実現する形態としてもよい。
また、推定装置1の一部、例えば、学習モデル51等のニューラルネットワークを、ハードウェア回路として構成してもよい。
1 推定装置
2 対象物
3 状態データ
4 入力データ
5 推定部
6 出力データ
6A 生成出力データ
22 導電性ウレタン
51 学習モデル
52 学習処理部
54 生成器
56 演算器
75 検出点
76 電気特性検出部
2 対象物
3 状態データ
4 入力データ
5 推定部
6 出力データ
6A 生成出力データ
22 導電性ウレタン
51 学習モデル
52 学習処理部
54 生成器
56 演算器
75 検出点
76 電気特性検出部
Claims (9)
- 導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出する検出部と、
前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、前記検出部で検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定する推定部と、
前記滑り状態情報を出力する出力部と、
を含む推定装置。 - 前記滑り状態は、前記把持部材と前記把持対象物との摩擦力分布に関する状態を含む
請求項1記載の推定装置。 - 前記把持部材は、手に装着するグローブ及びロボットのハンドの何れかである
請求項1又は請求項2記載の推定装置。 - 前記把持部材は、前記把持対象物を把持する際の把持状態を調整可能であり、
前記滑り状態情報に基づいて、前記把持状態を制御する制御部
を更に備えた請求項1~3の何れか1項に記載の推定装置。 - 前記把持部材は、繊維状及び網目状の少なくとも一方の骨格を有する構造、又は内部に微小な空気泡が複数散在する構造のウレタン材、若しくはゴムの少なくとも一部に導電性が付与された材料を含む
請求項1~4の何れか1項に記載の推定装置。 - 前記学習モデルは、前記柔軟材料をリザーバとして当該リザーバを用いたリザーバコンピューティングによるネットワークを用いて学習させることで生成されたモデルを含む
請求項1~5の何れか1項に記載の推定装置。 - コンピュータが、
導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出し、
前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定し、
前記滑り状態情報を出力する
推定方法。 - コンピュータに、
導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出し、
前記柔軟材料に刺激を与えた際の時系列の電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報とを学習用データとして用いて、前記時系列の電気特性を入力とし、前記滑り状態情報を出力するように学習された学習モデルに対して、検出された時系列の電気特性を入力し、入力した時系列の電気特性に対応する前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を推定し、
前記滑り状態情報を出力する
処理を実行させるための推定プログラム。 - 導電性を有し、かつ与えられた刺激の変化に応じて電気特性が変化する柔軟材料を備えた把持部材の前記柔軟材料に予め定められた複数の検出点の間の電気特性を検出する検出部からの前記電気特性と、前記柔軟材料に刺激を与える前記把持部材により把持対象物を把持した際の滑り状態を示す滑り状態情報と、を取得する取得部と、
前記取得部の取得結果に基づいて、前記柔軟材料に圧力を与えた際の時系列の電気特性を入力とし、前記柔軟材料に刺激を与える前記把持部材により前記把持対象物を把持した際の滑り状態を示す滑り状態情報を出力する学習モデルを生成する学習モデル生成部と、
を含む学習モデル生成装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021202896A JP2023088197A (ja) | 2021-12-14 | 2021-12-14 | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 |
CN202280047155.3A CN117597218A (zh) | 2021-07-26 | 2022-07-12 | 估计装置、估计方法以及估计程序 |
US18/570,640 US20240286278A1 (en) | 2021-07-26 | 2022-07-12 | Estimating device, estimating method, and estimating program |
EP22849254.2A EP4378639A1 (en) | 2021-07-26 | 2022-07-12 | Estimation device, estimation method, and estimation program |
PCT/JP2022/027486 WO2023008190A1 (ja) | 2021-07-26 | 2022-07-12 | 推定装置、推定方法、及び推定プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021202896A JP2023088197A (ja) | 2021-12-14 | 2021-12-14 | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023088197A true JP2023088197A (ja) | 2023-06-26 |
Family
ID=86899603
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021202896A Pending JP2023088197A (ja) | 2021-07-26 | 2021-12-14 | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2023088197A (ja) |
CN (1) | CN117597218A (ja) |
-
2021
- 2021-12-14 JP JP2021202896A patent/JP2023088197A/ja active Pending
-
2022
- 2022-07-12 CN CN202280047155.3A patent/CN117597218A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
CN117597218A (zh) | 2024-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9914212B2 (en) | Systems and methods for sensing objects | |
CN110337269B (zh) | 基于神经肌肉信号推断用户意图的方法和装置 | |
US9392954B2 (en) | Classification estimating system and classification estimating program | |
JP6680750B2 (ja) | 制御装置及び機械学習装置 | |
TW201203009A (en) | Haptic apparatus and techniques for quantifying capability thereof | |
CN111742282A (zh) | 用于虚拟现实的触觉反馈 | |
Kang et al. | Learning-based fingertip force estimation for soft wearable hand robot with tendon-sheath mechanism | |
JP2015114169A (ja) | 指先接触状態測定装置 | |
JP2023088197A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
Kim et al. | Joint torque estimation using semg and deep neural network | |
WO2023074209A1 (ja) | 把持力推定装置、把持力推定方法及び把持力推定プログラム | |
JP2023088191A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
WO2023008190A1 (ja) | 推定装置、推定方法、及び推定プログラム | |
JP2023088173A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088174A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088176A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088186A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088196A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
Shih et al. | Classification of components of affective touch using rapidly-manufacturable soft sensor skins | |
WO2022131138A1 (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088195A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088189A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023088188A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023017592A (ja) | 推定装置、推定方法、推定プログラム、及び学習モデル生成装置 | |
JP2023017636A (ja) | 推定装置、推定方法、推定プログラム、ロボットシステム及び学習モデル生成装置 |