JP7237316B2 - 職業訓練装置 - Google Patents
職業訓練装置 Download PDFInfo
- Publication number
- JP7237316B2 JP7237316B2 JP2020153409A JP2020153409A JP7237316B2 JP 7237316 B2 JP7237316 B2 JP 7237316B2 JP 2020153409 A JP2020153409 A JP 2020153409A JP 2020153409 A JP2020153409 A JP 2020153409A JP 7237316 B2 JP7237316 B2 JP 7237316B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- evaluation
- virtual space
- display
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012549 training Methods 0.000 title claims description 54
- 230000001755 vocal effect Effects 0.000 title claims description 38
- 238000011156 evaluation Methods 0.000 claims description 98
- 230000009471 action Effects 0.000 claims description 51
- 230000001133 acceleration Effects 0.000 claims description 36
- 241001122315 Polites Species 0.000 claims description 32
- 230000033001 locomotion Effects 0.000 claims description 21
- 235000013305 food Nutrition 0.000 description 54
- 238000000034 method Methods 0.000 description 38
- 230000008569 process Effects 0.000 description 20
- 238000004891 communication Methods 0.000 description 13
- 235000009508 confectionery Nutrition 0.000 description 11
- 238000010411 cooking Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000006399 behavior Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 239000004615 ingredient Substances 0.000 description 7
- 235000015243 ice cream Nutrition 0.000 description 5
- 238000012360 testing method Methods 0.000 description 5
- 241000209094 Oryza Species 0.000 description 4
- 235000007164 Oryza sativa Nutrition 0.000 description 4
- 235000009566 rice Nutrition 0.000 description 4
- 235000015067 sauces Nutrition 0.000 description 4
- 101100202463 Schizophyllum commune SC14 gene Proteins 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 235000016213 coffee Nutrition 0.000 description 2
- 235000013353 coffee beverage Nutrition 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 235000008429 bread Nutrition 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000006071 cream Substances 0.000 description 1
- 235000021438 curry Nutrition 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 235000013410 fast food Nutrition 0.000 description 1
- 235000011389 fruit/vegetable juice Nutrition 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000007115 recruitment Effects 0.000 description 1
- 235000019992 sake Nutrition 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 235000013547 stew Nutrition 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
第1評価部22aは、飲食店で食品を調理器具で掴んで運ぶピッキング動作と、飲食物を盛り付ける盛り付け動作と、調理器具を扱う動作の3種類の動作にて丁寧さを評価する。尚、飲食物、容器、道具等は、全て仮想空間に立体的に表示される仮想的なものであり、利用者Aが視認可能なオブジェクトと呼ぶこともできる。また、オブジェクトには、電子レンジやオーブン、コンロのような加熱用調理器具が含まれていてもよい。加熱用調理器具を取り扱うときの利用者の手の加速度、位置、速度、角速度等に基づいて、利用者の丁寧さを評価することができる。例えば、電子レンジやオーブンの扉の開け閉め時にゆっくりと操作する場合には丁寧であると評価し、扉の開け閉めの速度が所定以上に速いと丁寧でないと評価する。
1.ピッキング動作時における丁寧さの評価
飲食物を入れる食器を取り扱うときの取り扱い方によって利用者Aの丁寧さを評価する。飲食物を入れる前の空の食器を取り扱う時には、その容器の受け渡し先(場所または人)、コントローラ3、4の加速度、角度、速度、角速度、コントローラ3、4の位置情報等を用いて丁寧さを評価する。飲食物が入った食器を取り扱う時には、その容器の受け渡し先、コントローラ3、4の加速度、角度、速度、角速度、コントローラ3、4の位置情報に加えて、容器の角度を用いて判定する。容器の角度は、コントローラ3、4の角度から求めることができる。尚、容器を仮想空間で利用者Aが把持する操作は、コントローラ3、4のボタン操作で行うことができる。例えば、コントローラ3、4のボタンが押されると、その動作が把持動作であるとして、仮想空間上で仮想の利用者Aが仮想の容器を把持する。また、把持した容器を利用者Aが放す動作も、コントローラ3、4のボタン操作で行うことができる。例えば、コントローラ3、4のボタンから指が放されると、その動作が放す動作であるとして、仮想空間上で仮想の利用者Aが仮想の容器を放す。
2.盛り付け動作
容器に食品を盛り付ける動作によっても丁寧さを評価する。すなわち、利用者Aに飲食物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部20が生成し、HMD2に表示させ、第1評価部22aは、利用者Aが飲食物を取り扱うときに取得部5により取得された動作に関する情報に基づいて利用者Aの丁寧さを評価する。
3.調理器具を扱う動作
調理器具としては、例えばトング、箸、スプーン、おたま、しゃもじ、フォーク等を挙げることができる。調理器具は、飲食物を作るための道具であり、この場合、利用者Aに、飲食物を作るための道具を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を表示制御部20が生成し、HMD2に表示させることができる。
表示制御部20は、荷物を取り扱う職業の現場を再現し、利用者Aに荷物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をHMD2に表示させることができる。この場合、第2評価部22bは、利用者Aが荷物を取り扱うときに取得部5により取得された動作に関する情報に基づいて利用者Aの丁寧さを評価する。
表示制御部20は、あるゲーム内の職業の現場を再現し、利用者Aに品物(商品)を取り扱わせる作業を仮想的に実行可能にする仮想空間画像をHMD2に表示させることができる。この場合、第3評価部22cは、利用者Aが商品を取り扱うときに取得部5により取得された動作に関する情報に基づいて利用者Aの丁寧さを評価する。
総合評価部22dは、第1評価部22a、第2評価部22b及び第3評価部22cの評価結果をまとめて利用者Aの丁寧さを最終的に評価する部分である。例えば、第1評価部22aによる評価結果が良くても、第2評価部22b及び第3評価部22cの評価結果が悪ければ、総合評価としては悪いと評価する。また、第1評価部22a、第2評価部22b及び第3評価部22cの評価結果のうち、任意の評価結果に重み付けをし、その評価結果を重視した総合評価結果を生成することもできる。例えば、第1評価部22aによる評価結果に重み付けした場合、第2評価部22b及び第3評価部22cの評価結果が悪くても、総合評価としては良いと評価する。上述した総合評価結果を生成することなく、第1評価部22a、第2評価部22b及び第3評価部22cの評価結果をそのまま提示してもよい。また、第1評価部22a、第2評価部22b及び第3評価部22cの評価結果のうち、任意の1つのみまたは2つのみを提示してもよい。
結果表示画像生成部23は、利用者Aの識別情報(例えば名前)、第1評価部22a、第2評価部22b及び第3評価部22cの評価結果、総合評価結果等を一覧形式で表示するユーザーインターフェース画面を生成する部分である。結果表示画像生成部23で生成された画面は、ディスプレイ12に表示される。
次に、上記のように構成された職業訓練装置1を利用して利用者Aの丁寧さを評価する手順の具体例を説明する。図3は、丁寧さの評価手順を示すフローチャートである。このフローチャートは、職業訓練装置1のアプリケーションを立ち上げるか、所定の開始操作を行うことによってスタートする。
図10は、結果表示用ユーザーインターフェース画面90の一例を示す図である。結果表示用ユーザーインターフェース画面90は、結果表示画像生成部23が生成し、ディスプレイ12に表示させる。例えば職業訓練装置1の利用者Aや管理者が結果表示操作を実行すると、結果表示画像生成部23が結果表示用ユーザーインターフェース画面90を生成してディスプレイ12に表示させることができる。
以上説明したように、この実施形態によれば、利用者Aは、物を取り扱う職業の現場が再現された仮想空間画像を見ることができ、この仮想空間画像により、物を取り扱う作業を仮想的に実行することができ、これにより、職業訓練を実行することができる。職業訓練中、利用者Aが物を取り扱うときには、利用者Aの動作に関する情報が取得部5により取得される。取得された動作に関する情報に基づいて評価部22が利用者Aの丁寧さを評価する。この評価結果は、ディスプレイ12に表示されるので、利用者Aはもちろん、利用者A以外の者も利用者Aの丁寧さの評価結果を把握できる。
2 HMD(仮想空間表示部)
5 取得部
12 ディスプレイ(結果表示部)
20 表示制御部
22 評価部
Claims (2)
- 仮想空間で職業の訓練を可能にする職業訓練装置において、
職業訓練を行うための仮想空間画像を表示する仮想空間表示部と、
物を取り扱う職業の現場を再現し、前記職業訓練装置の利用者に物を取り扱わせる作業を仮想的に実行可能にする仮想空間画像を前記仮想空間表示部に表示させる表示制御部と、
前記作業時における前記利用者の動作に関する情報として前記利用者の手の加速度、位置、角度及び目標位置に対する相対的な距離を取得する取得部と、
前記利用者が前記物を取り扱うときに前記取得部により取得された前記動作に関する情報を利用し、前記仮想空間における前記物と前記物の受け渡し先との位置関係に基づいて、前記物と前記物の受け渡し先との相対的な距離が近いほど丁寧な動作であると判定するとともに、前記物が前記物の受け渡し先に近くなるほど前記物の移動速度を低下させた場合には丁寧な動作であると判定する評価部と、
前記評価部で評価された評価結果を表示する結果表示部とを備えていることを特徴とする職業訓練装置。 - 請求項1に記載の職業訓練装置において、
前記評価部は、所定の判定基準に基づいて丁寧さを判定し、前記利用者が取り扱う物に応じて前記判定基準を変更することを特徴とする職業訓練装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020153409A JP7237316B2 (ja) | 2020-09-14 | 2020-09-14 | 職業訓練装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020153409A JP7237316B2 (ja) | 2020-09-14 | 2020-09-14 | 職業訓練装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022047565A JP2022047565A (ja) | 2022-03-25 |
JP7237316B2 true JP7237316B2 (ja) | 2023-03-13 |
Family
ID=80781117
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020153409A Active JP7237316B2 (ja) | 2020-09-14 | 2020-09-14 | 職業訓練装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7237316B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019191348A (ja) | 2018-04-24 | 2019-10-31 | 株式会社日立産機システム | シミュレーション装置およびシミュレーション方法 |
JP2019197165A (ja) | 2018-05-10 | 2019-11-14 | 日本電気株式会社 | 作業訓練装置、作業訓練方法、およびプログラム |
WO2020148919A1 (ja) | 2019-01-17 | 2020-07-23 | オムロン株式会社 | 情報処理装置、提示システム、及び情報処理プログラム |
JP2020129018A (ja) | 2019-02-07 | 2020-08-27 | 株式会社日立製作所 | 動作評価システムおよび方法 |
-
2020
- 2020-09-14 JP JP2020153409A patent/JP7237316B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019191348A (ja) | 2018-04-24 | 2019-10-31 | 株式会社日立産機システム | シミュレーション装置およびシミュレーション方法 |
JP2019197165A (ja) | 2018-05-10 | 2019-11-14 | 日本電気株式会社 | 作業訓練装置、作業訓練方法、およびプログラム |
WO2020148919A1 (ja) | 2019-01-17 | 2020-07-23 | オムロン株式会社 | 情報処理装置、提示システム、及び情報処理プログラム |
JP2020129018A (ja) | 2019-02-07 | 2020-08-27 | 株式会社日立製作所 | 動作評価システムおよび方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2022047565A (ja) | 2022-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11117253B2 (en) | Methods and systems for food preparation in a robotic cooking kitchen | |
US20170348854A1 (en) | Robotic manipulation methods and systems for executing a domain-specific application in an instrumented environment with containers and electronic minimanipulation libraries | |
JP7358352B2 (ja) | 選択されたレシピに従って食品を自動的に調理するためのシステム及びその作動方法 | |
JP2017536247A (ja) | 電子小規模操作ライブラリを用いて計装環境内でドメイン特定アプリケーションを実行するためのロボット操作方法及びシステム | |
CN110047338A (zh) | 基于虚拟现实的模拟学习方法、装置和计算机介质 | |
CN106390416A (zh) | 诊断服务器、诊断系统、诊断方法、诊断程序、记录介质 | |
WO2013106087A1 (en) | System and method for displaying recipes visually | |
JP7237316B2 (ja) | 職業訓練装置 | |
JP6535714B2 (ja) | ゲームプログラム、方法、及び情報処理装置 | |
Weissker et al. | Holding hands for short-term group navigation in social virtual reality | |
US20220314091A1 (en) | Information processing device, information processing method, and program | |
JP7078221B2 (ja) | 投影システム | |
CN107007993A (zh) | 电子设备、系统、提示方法以及记录介质 | |
WO2020171087A1 (ja) | 食品調理装置及び制御プログラム | |
Achberger et al. | Propellerhand: A hand-mounted, propeller-based force feedback device | |
Balcomb et al. | The Effects of Hand Representation on Experience and Performance for 3D Interactions in Virtual Reality Games | |
US20210394365A1 (en) | Information processing apparatus, information processing method, and information processing program | |
JP2019051419A (ja) | ゲームプログラム、方法、及び情報処理装置 | |
WO2018069984A1 (ja) | 生成プログラム、生成方法および生成装置 | |
WO2024157961A1 (ja) | 仮想環境提供装置、方法、およびプログラム | |
CN106975212A (zh) | 电子设备、系统、分析方法以及记录介质 | |
Arunkumar et al. | Low-cost virtual reality game for upper limb rehabilitation using kinect and p5 glove | |
JP2016214605A (ja) | 茶道技術支援システム | |
CN115885239A (zh) | 信息处理装置、触感提供系统和程序 | |
KR101536617B1 (ko) | 요리 강습용 패키지 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20201006 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20201006 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220706 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221216 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230207 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230220 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7237316 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |