JP2011152333A - Body skill learning support device and body skill learning support method - Google Patents

Body skill learning support device and body skill learning support method Download PDF

Info

Publication number
JP2011152333A
JP2011152333A JP2010016739A JP2010016739A JP2011152333A JP 2011152333 A JP2011152333 A JP 2011152333A JP 2010016739 A JP2010016739 A JP 2010016739A JP 2010016739 A JP2010016739 A JP 2010016739A JP 2011152333 A JP2011152333 A JP 2011152333A
Authority
JP
Japan
Prior art keywords
information
physical
normative
practitioner
support device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010016739A
Other languages
Japanese (ja)
Other versions
JP5761730B2 (en
Inventor
Kazuo Henmi
一男 辺見
Akinori Matsuzaki
陽典 松崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nagasaki Prefectural University Corp
Original Assignee
Nagasaki Prefectural University Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nagasaki Prefectural University Corp filed Critical Nagasaki Prefectural University Corp
Priority to JP2010016739A priority Critical patent/JP5761730B2/en
Publication of JP2011152333A publication Critical patent/JP2011152333A/en
Application granted granted Critical
Publication of JP5761730B2 publication Critical patent/JP5761730B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a body skill learning support device which enables a learning person himself or herself to easily decide whether the learning person can properly follow the movements of an instructor or a skilled person (model technician) and which improves the learning effect of skills comparatively easily. <P>SOLUTION: The body skill learning support device 1 which is used when the learning person P learns a skill accompanied with body movements includes: imaging means 20 for obtaining body movement information on the learning person P; storage means 13 which stores model information based on at least the still image or moving image of the model technician about the skill; and image display means 40 which can be mounted on the head of the learning person. The image display means 40 can simultaneously display the body movement information obtained by the imaging means 20 and the model information within the storage means 13. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、身体動作を伴う技能(スポーツ、舞踊、各種作業等)を習得する際に用いられる、身体技能習得支援装置および身体技能習得支援方法に関するものである。   The present invention relates to a physical skill acquisition support device and a physical skill acquisition support method that are used when acquiring skills (sports, dance, various tasks, etc.) involving physical movements.

身体動作を伴う何等かの技能(スポーツ、ダンス、舞踊、各種作業等)を習得しようとする場合、指導者あるいは上級者等(以下「規範技能者」ともいう。)の「動きを真似る」ということは、非常に重要であると共に、その技能習得のための有効な方法の一つである。   If you want to learn any skill that involves physical movement (sports, dance, dance, various tasks, etc.), it is called “mocking the movement” of a leader or an advanced person (hereinafter also referred to as “normative technician”) This is very important and is one of the effective ways to acquire the skill.

しかしながら、規範技能者の動きを的確に再現できているかどうかを、自分自身で確認することは困難である。すなわち、自分で自分の動きを見ることは難しいため、自分の身体がどのように動いているのか(すなわち、どの程度技能の習得ができているのか)を、自分自身で判断することは非常に困難である。   However, it is difficult to confirm by yourself whether or not the movements of normative technicians can be accurately reproduced. In other words, because it is difficult to see your own movements yourself, it is very difficult to judge for yourself how your body is moving (ie, how much skill you have acquired). Have difficulty.

身体動作を伴う何等かの技能の習得具合を自分自身で確認する場合、その方法としては、例えば、壁面に鏡を埋め込み、その鏡を用いて自分の姿勢や動きを確認する方法がある。このような方法は、例えば、ダンス等の習得を行う場合に用いられる。   When confirming the degree of acquisition of any skill that involves body movement by itself, for example, there is a method of embedding a mirror on a wall surface and confirming the posture and movement of the person using the mirror. Such a method is used, for example, when learning dance.

また、その他の方法としては、規範技能者による指導(例えば、口頭による指導)を直接的に受け、その規範技能者の経験および目視に基づく種々の具体的な指導内容によって、自分自身の姿勢や動き等を確認・修正等する方法がある。このような方法(直接的指導)の一例としては、例えば、溶接作業等の工業的な種々の作業に関する習得を目指す場合があげられる。   Other methods include direct instruction from the normative engineer (for example, verbal instruction), and depending on various specific instructional contents based on the experience and visual observation of the normative engineer, There are methods to check and correct movements. As an example of such a method (direct guidance), for example, a case of aiming to acquire various industrial works such as welding work can be mentioned.

さらに、その他の方法としては、ビデオカメラ等で自分自身の姿を撮影し、その後、撮影された映像をディスプレイ等にて再生して、自分自身でその姿勢や動き等を確認する方法がある。このような方法は、例えば、ゴルフ、テニス、弓道等のスポーツに関する身体動作を伴う技能の習得を目指す際に用いられる。   Furthermore, as another method, there is a method of photographing the appearance of himself / herself with a video camera or the like, and then reproducing the photographed image on a display or the like and confirming his / her posture or movement by himself / herself. Such a method is used, for example, when learning skills with physical movements related to sports such as golf, tennis, and archery.

上述した状況の中、従来技術としては、例えば、特許文献1に示す技術が知られている。(特許文献1参照)   In the situation described above, as a conventional technique, for example, a technique disclosed in Patent Document 1 is known. (See Patent Document 1)

特開2001−138094JP 2001-138094 A

さて、身体動作を伴う技能(スポーツ、舞踊、各種作業等)を習得するためには、上述した種々の技術があげられるが、これらには、以下のような問題がある。   Now, in order to acquire skills (sports, dance, various work, etc.) accompanied by body movements, there are various techniques described above, but these have the following problems.

例えば、ダンス等の習得を目指すために、壁面に埋め込んだ鏡を用いる場合には、鏡の方向を向いた時点で、実施者(技能の習得を目指す者)の姿勢が崩れてしまうため、このような従来技術にかかる鏡を上手く活用することは難しい。   For example, when a mirror embedded in a wall is used to aim at learning dance, the attitude of the practitioner (person who aims to acquire skills) will collapse when facing the direction of the mirror. It is difficult to make good use of such conventional mirrors.

また、規範技能者による直接的な指導を受ける場合には、規範技能者の存在が必須であるため、実施者が自主的に練習等を行うことができず、技能習得までに多くの時間を要する。加えて、自分自身での判断が困難である。   In addition, in order to receive direct guidance from normative technicians, the existence of normative technicians is indispensable, so the implementer cannot practice voluntarily and takes a lot of time to acquire skills. Cost. In addition, it is difficult to make judgments on your own.

さらに、ビデオカメラ等にて撮影された映像(実施者自身の映像)を、練習後あるいは練習中に実施者が確認しても、自分の動きが適切であるか否かの判断を行うことは困難である。すなわち、自分自身の映像を見るだけでは、指導者や上級者等の「動きを真似る」ことができているか否かの判断を行うことが難しい。   Furthermore, even if the practitioner confirms the video (practitioner's own video) taken with a video camera or the like after practice or during practice, it is not possible to judge whether or not his / her movement is appropriate. Have difficulty. That is, it is difficult to determine whether or not a leader or an advanced person can “mock a movement” only by viewing his / her own video.

そこで、本発明は、上記従来技術の問題を解決するためになされたものであって、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを実施者が自分自身で容易に判断することが可能であって、比較的容易に技能の習得効果を高めることができる、身体技能習得支援装置および身体技能習得支援方法を提供することを課題とする。   Therefore, the present invention has been made to solve the above-described problems of the prior art, and whether or not the movements of leaders and seniors (normative technicians) can be appropriately imitated. It is an object of the present invention to provide a physical skill acquisition support device and a physical skill acquisition support method that can be easily determined by themselves and that can increase the skill acquisition effect relatively easily.

本発明の第一態様は、上記課題を解決するためになされたものであり、実施者が身体動作を伴う技能を習得する際に用いられる身体技能習得支援装置であって、前記実施者の身体動作情報を取得する撮影手段と、前記技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報を記憶している記憶手段と、前記実施者の頭部に装着可能な画像表示手段とを備え、前記画像表示手段が、前記撮影手段にて得られた前記身体動作情報と、前記記憶手段内の前記規範情報とを同時に表示可能であることを特徴としている。
ここで、「規範情報」とは、前記実施者が習得を目指す前記技能に関する規範となる静止画像情報および動画像情報の少なくとも一方である。つまり、前記実施者が「動きを真似る」に値する(手本となる)、画像情報である。この「規範情報」は、規範技能者の身体動作に基づく実際の画像情報であっても、また、規範技能者の身体動作に基づくアニメーション等の画像情報であっても、さらには、習得を目指す前記技能について理論的に構成された画像情報等であってもよい。
A first aspect of the present invention is made to solve the above-described problem, and is a physical skill acquisition support device used when an implementer learns a skill involving physical motion, the body of the implementer Image capturing means for acquiring operation information, storage means for storing normative information based on at least one of a still image and a moving image of a normative technician regarding the skill, and image display means that can be worn on the head of the practitioner The image display means can simultaneously display the body movement information obtained by the imaging means and the norm information in the storage means.
Here, the “normative information” is at least one of still image information and moving image information serving as a norm regarding the skill that the implementer aims to acquire. That is, it is image information that the practitioner deserves (behaves as a model) for “simulating movement”. This “normative information” may be actual image information based on the physical motion of the normative technician, or image information such as animation based on the physical motion of the normative technician, and further aim to acquire it. It may be image information or the like theoretically configured for the skill.

このような構成(第一態様にかかる身体技能習得支援装置)によれば、前記実施者は、前記画像表示手段を頭部に装着し、その画像表示手段では自分自身の画像と前記規範情報(規範画像)とが同時に表示されるため、前記実施者が前記技能に関する身体動作を行いながら、自分の動きと規範技能者の動きとを比較検討し、前記規範技能者の動きを的確に再現できているかどうかを、自分自身で確認することができる。
また、このような構成によれば、前記画像表示手段が頭部に装着可能であるため、身体動作を行いながら、前記身体動作情報および前記規範情報を確認することができる。したがって、従来の鏡を使用した場合のように、自分自身の身体動作を確認するために姿勢を崩すことがない。
さらに、このような構成によれば、前記実施者は自分一人でも適切な練習を実施することが可能であるため、規範技能者を必要とせず、効率的に技能の習得を行うことができる。
また、このような構成によれば、従来技術のように、ビデオカメラ等にて撮影された映像を、練習後(身体動作終了後)に確認するのではなく、実際の身体動作を行いながら(身体動作中に)、自分自身の動きと規範画像とを比較検討することが可能であるため、容易に、自分の動きが適切であるか否かの判断を行うことができる。すなわち、自分自身の映像(身体動作情報)に規範技能者等の映像(規範情報)を重ねて見ることができるため、指導者や上級者等の「動きを真似る」ことができているか否かの判断を実施者自身で適切に行うことができる。
According to such a configuration (physical skill acquisition support device according to the first aspect), the practitioner wears the image display means on the head, and the image display means has its own image and the normative information ( The normative image) is displayed at the same time, so that the practitioner can compare the movements of the normative technician with the movements of the normative technician while performing the body movements related to the skill, and accurately reproduce the movement of the normative technician You can check for yourself.
Further, according to such a configuration, the image display means can be mounted on the head, so that the body motion information and the norm information can be confirmed while performing body motion. Therefore, as in the case where a conventional mirror is used, the posture is not lost in order to confirm the body movement of itself.
Furthermore, according to such a configuration, the practitioner can perform appropriate practice by himself or herself, so that it is possible to efficiently acquire skills without requiring normative technicians.
In addition, according to such a configuration, as in the prior art, an image taken by a video camera or the like is not confirmed after practice (after the end of physical movement), but while performing actual physical movement ( Since it is possible to compare and examine the own movement and the reference image (during physical movement), it is possible to easily determine whether or not the movement is appropriate. In other words, since it is possible to see the images (normative information) of normative technicians etc. on their own images (physical movement information), whether or not they can “imitate the movement” of instructors and seniors This can be done appropriately by the implementer himself.

本発明の第二態様は、前記第一態様にかかる身体技能習得支援装置において、前記実施者から発せられる音声信号をトリガーとして、前記画像表示手段における表示状態の制御を行うことができる構成であることを特徴としている。この第二態様にかかる身体技能習得支援装置は、例えば、マイク部を有しており、このマイク部にて取得された「音声信号」に基づいて、前記画像表示手段で表示される規範画像(規範情報)の動きを制御可能に構成されている。より具体的には、マイク部にて取得された「音声信号」に基づいて、規範画像のスタート、ストップ、一時停止、あるいはチャプタの頭出し等が制御可能に構成されている。   According to a second aspect of the present invention, in the physical skill acquisition support device according to the first aspect, a display state of the image display unit can be controlled using a voice signal emitted from the practitioner as a trigger. It is characterized by that. The physical skill acquisition support device according to the second aspect includes, for example, a microphone unit, and a reference image (displayed by the image display unit) based on an “audio signal” acquired by the microphone unit. The movement of the normative information) is controllable. More specifically, the reference image start, stop, pause, chapter search, etc. can be controlled based on the “voice signal” acquired by the microphone unit.

このような構成によれば、上述した前記第一態様にかかる身体技能習得支援装置と同様の作用効果に加えて、次のような作用効果を得ることができる。
この第二態様にかかる身体技能習得支援装置によれば、前記マイク部等にて取得される「音声信号(実施者の声等)」に基づいて前記画像表示手段の制御が可能であるため、実施者は、その身体動作を妨げられることなく、身体動作を伴う技能の習得に集中することができる。すなわち、このような構成によれば、実施者自身のタイミングで所定の声等を発することによって、画像表示手段上に前記規範画像を表示等させることが可能であるため、実施者は、より効果的に画像表示手段上における自身の画像と規範画像とを見比べながら、身体動作を伴う技能の習得を行うことができる。
According to such a configuration, the following operational effects can be obtained in addition to the operational effects similar to those of the physical skill acquisition support device according to the first aspect described above.
According to the physical skill acquisition support device according to the second aspect, since the image display means can be controlled based on the “voice signal (such as the voice of the person performing the operation)” acquired by the microphone unit or the like, The practitioner can concentrate on acquiring skills with physical movements without being obstructed. That is, according to such a configuration, it is possible to display the normative image on the image display means by uttering a predetermined voice or the like at the implementer's own timing, and thus the implementer is more effective. In particular, it is possible to acquire skills accompanied by body movements while comparing the own image with the reference image on the image display means.

本発明の第三態様は、前記第一態様または前記第二態様にかかる身体技能習得支援装置において、前記身体動作情報と前記規範情報とを比較検討する比較検討手段と、前記比較検討手段にて、前記身体動作情報と前記規範情報との間に生じているずれを検出し、前記ずれの大きさに応じて、前記実施者の視覚、聴覚および触覚のいずれかを刺激することにより、前記ずれを前記実施者に伝達するずれ伝達手段とが設けられていることを特徴としている。
この「ずれ伝達手段」としては、例えば、画像表示手段(上述した画像表示手段を用いて「ずれ伝達手段」を構成してもよい)、ヘッドフォン部、あるいは振動発生手段等があげられる。
According to a third aspect of the present invention, in the physical skill acquisition support device according to the first aspect or the second aspect, the comparison examination means for comparing and examining the body movement information and the norm information, and the comparison examination means Detecting the deviation occurring between the body movement information and the normative information, and stimulating any one of the visual, auditory, and tactile sensations of the practitioner according to the magnitude of the deviation. Is provided with a displacement transmitting means for transmitting the above to the implementer.
Examples of the “deviation transmission means” include image display means (the “image transmission means may be used to constitute the“ deviation transmission means ”), a headphone unit, vibration generation means, and the like.

このような構成によれば、上述した前記第一態様または前記第二態様にかかる身体技能習得支援装置と同様の作用効果に加えて、次のような作用効果を得ることができる。
この第三態様にかかる身体技能習得支援装置によれば、前記比較検討手段にて得られる「ずれ検知信号」に基づいて前記ずれ伝達手段を作動させることによって、実施者に対して規範画像(規範情報)との「ずれ」を伝達するように構成されているため、実施者はより客観的に身体動作を伴う技能の習得状態を認識することができる。この際、例えば、ヘッドフォン部を用いてずれ伝達手段が構成されている場合には、実施者の動きが早すぎたとき、遅すぎたとき、上にずれたとき、下にずれたとき、右にずれたとき、左にずれたとき等、それぞれの「ずれ状態」に応じて、それぞれ異なる信号音が、ヘッドフォン部を介して実施者に伝達されるように構成されてもよい。また、このような構成によれば、「ずれ」が所定範囲内にある場合(すなわち、「ずれ」が無い場合(あるいは容認できる程小さい場合))、前記ずれ伝達手段を作動させて、前記規範技能者の動きを的確に再現できている旨を前記実施者に知らせることもできる。この場合には、「ずれが生じている場合」と「ずれが生じていない場合」とを異なる信号音等にて前記実施者に知らせればよい。さらに、このような構成によれば、「ずれ」の大きさに応じて、異なる信号音等を前記実施者に知らせることによって、前記実施者が、身体動作を伴う技能の習得段階を把握することもできる。
According to such a configuration, the following operational effects can be obtained in addition to the operational effects similar to those of the physical skill acquisition support device according to the first aspect or the second aspect described above.
According to the physical skill acquisition support device according to the third aspect, by operating the deviation transmission means based on the “deviation detection signal” obtained by the comparison and examination means, Since it is configured to transmit a “deviation” with respect to (information), the practitioner can more objectively recognize the skill acquisition state involving physical movement. At this time, for example, when the displacement transmission means is configured using the headphone unit, when the practitioner's movement is too early, too late, shifted up, shifted down, Different signal sounds may be transmitted to the practitioner via the headphone unit in accordance with each “shift state”, such as when it is shifted to the left or when it is shifted to the left. In addition, according to such a configuration, when the “deviation” is within a predetermined range (that is, when there is no “deviation” (or when it is small enough), the deviation transmitting means is operated, and The practitioner can be informed that the movement of the technician can be accurately reproduced. In this case, it is only necessary to notify the practitioner of “when there is a deviation” and “when there is no deviation” with different signal sounds or the like. Further, according to such a configuration, the practitioner grasps the skill acquisition stage involving physical movements by notifying the practitioner of different signal sounds or the like according to the magnitude of “deviation”. You can also.

本発明の第四態様は、前記第一態様から前記第三態様のいずれかにかかる身体技能習得支援装置において、前記画像表示手段が、装着部と画像表示部とを有し、前記装着部が、眼鏡状に構成され、前記画像表示部が、眼鏡状に構成された前記装着部における右目あるいは左目のいずれか一方の近傍に設けられていることを特徴としている。   According to a fourth aspect of the present invention, in the physical skill acquisition support device according to any one of the first aspect to the third aspect, the image display means includes a mounting part and an image display part, and the mounting part is The image display unit is configured in the shape of glasses, and is provided in the vicinity of either the right eye or the left eye in the wearing unit configured in the shape of glasses.

このような構成によれば、上述した前記第一態様から前記第三態様のいずれかにかかる身体技能習得支援装置と同様の作用効果に加えて、次のような作用効果を得ることができる。
この第四態様にかかる身体技能習得支援装置によれば、前記画像表示手段を構成する前記装着部が眼鏡状に構成され、この眼鏡状に構成された前記装着部の右目側あるいは左目側のいずれか一方の近傍に前記画像表示部(小型のディスプレイ等)が設けられているため、比較的簡単に、前記身体技能習得支援装置を得ることができる。
According to such a configuration, the following operational effects can be obtained in addition to the operational effects similar to those of the physical skill acquisition support device according to any one of the first aspect to the third aspect described above.
According to the physical skill acquisition support device according to the fourth aspect, the mounting portion constituting the image display means is configured in a shape of glasses, and either the right eye side or the left eye side of the mounting portion configured in the shape of glasses. Since the image display unit (small display or the like) is provided in the vicinity of either of them, the physical skill acquisition support device can be obtained relatively easily.

本発明の第五態様は、前記第一態様から前記第四態様のいずれかにかかる身体技能習得支援装置において、前記規範情報が、輪郭線にて構成された静止画像および輪郭線にて構成された動画像の少なくとも一方であることを特徴としている。   According to a fifth aspect of the present invention, in the physical skill acquisition support device according to any one of the first aspect to the fourth aspect, the normative information is configured by a still image and a contour line configured by a contour line. It is characterized by being at least one of the moving images.

このような構成によれば、上述した前記第一態様から前記第四態様のいずれかにかかる身体技能習得支援装置と同様の作用効果に加えて、次のような作用効果を得ることができる。
この第五態様にかかる身体技能習得支援装置によれば、前記規範情報が輪郭線にて構成されているため、前記実施者が、前記身体動作情報と前記規範情報とを前記画像表示手段にて重ねた状態で見る際に、前記身体動作情報と前記規範情報とを容易に認識可能となる。したがって、このような構成によれば、より適切に、自分自身で指導者や上級者等の「動きを真似る」ことができているか否かの判断を行うことができる。
According to such a configuration, the following operational effects can be obtained in addition to the operational effects similar to those of the physical skill acquisition support device according to any one of the first aspect to the fourth aspect described above.
According to the physical skill acquisition support device according to the fifth aspect, since the normative information is composed of contour lines, the practitioner uses the image display means to display the body movement information and the normative information. When viewed in a superimposed state, the body movement information and the norm information can be easily recognized. Therefore, according to such a configuration, it is possible to more appropriately determine whether or not the instructor or the advanced person can “simulate the movement” by himself / herself.

本発明の第六態様は、上記課題を解決するためになされたものであり、実施者が身体動作を伴う技能を習得する際に用いられる身体技能習得支援方法であって、前記実施者の身体動作中における身体動作情報を取得する身体動作情報取得工程と、前記身体動作中に、前記実施者が、前記身体動作情報と、前記技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報とを、視覚的に同時に認識可能である同時画像認識工程とを備えたことを特徴としている。   A sixth aspect of the present invention is made to solve the above-mentioned problem, and is a physical skill acquisition support method used when the practitioner acquires a skill involving physical motion, and the body of the practitioner A body motion information acquisition step for acquiring body motion information during motion, and during the body motion, the practitioner is based on at least one of the body motion information and a still image and a moving image of a normative technician regarding the skill It is characterized by comprising a simultaneous image recognition process capable of visually recognizing normative information simultaneously.

このような構成(第六態様にかかる身体技能習得支援方法)によれば、前記実施者が前記身体動作を行っている最中に前記同時画像認識工程が行われるため、前記実施者が前記技能に関する身体動作を行っている最中に、自分の動き(実施者自身の画像)と規範技能者の動き(前記規範情報(規範画像))とを比較検討し、前記規範技能者の動きを的確に再現できているかどうかを、自分自身で確認することができる。   According to such a configuration (the physical skill acquisition support method according to the sixth aspect), since the simultaneous image recognition step is performed while the practitioner is performing the physical movement, the practitioner While performing body movements, the movement of the normative technician (comparative image (normative image)) and the movement of the normative technician (comparison of the normative information (normative image)) are compared and examined. You can check for yourself whether it can be reproduced.

本発明によれば、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを実施者が自分自身で容易に判断することが可能であって、比較的容易に技能の習得効果を高めることができる、身体技能習得支援装置および身体技能習得支援方法を得ることができる。   According to the present invention, it is possible for the implementer to easily judge himself / herself whether or not the movement of the instructor or the advanced person (normative skill person) can be appropriately imitated, It is possible to obtain a physical skill acquisition support device and a physical skill acquisition support method that can easily increase the skill acquisition effect.

本発明の第一実施形態にかかる身体技能習得支援装置の概略構成図を示したものである。BRIEF DESCRIPTION OF THE DRAWINGS The schematic block diagram of the physical skill acquisition assistance apparatus concerning 1st embodiment of this invention is shown. 本発明の第一実施形態にかかる規範原図と規範図とを示したものであり、図2(a)は規範原図を示し、図2(b)は規範図を示している。FIG. 2A shows a reference original drawing and a reference drawing according to the first embodiment of the present invention. FIG. 2A shows a reference original drawing, and FIG. 2B shows a reference drawing. 本発明の第二実施形態にかかる身体技能習得支援装置の概略構成図を示したものである。The schematic block diagram of the physical skill acquisition assistance apparatus concerning 2nd embodiment of this invention is shown. 本発明の第二実施形態にかかる身体技能習得支援装置の具体的構成の一例を概略斜視図にて示したものである。An example of the specific structure of the physical skill acquisition assistance apparatus concerning 2nd embodiment of this invention is shown with the schematic perspective view. 本発明の第二実施形態にかかる身体技能習得支援装置を構成する映像マッチング部の第一実施例のフローチャートを示したものである。The flowchart of the 1st Example of the image | video matching part which comprises the physical skill acquisition assistance apparatus concerning 2nd embodiment of this invention is shown. 本発明の第二実施形態にかかる身体技能習得支援装置を構成する映像マッチング部の第二実施例の概略図を示したものである。The schematic of the 2nd Example of the image | video matching part which comprises the physical skill acquisition assistance apparatus concerning 2nd embodiment of this invention is shown. 本発明の他の実施形態にかかる身体技能習得支援装置を構成する画像表示部の表示例の概略図を示したものである。The schematic of the example of a display of the image display part which comprises the physical skill acquisition assistance apparatus concerning other embodiment of this invention is shown.

以下、図面に基づき、本発明の実施形態について説明する。本実施形態にかかる身体技能習得支援装置は、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを実施者Pが自分自身で容易に判断することが可能であって、比較的容易に技能の習得効果を高めることができる、身体技能習得支援装置である。
以下、具体的に説明する。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the physical skill acquisition support device according to the present embodiment, the implementer P can easily determine by himself whether or not the movement of a leader or an advanced person (normative skill person) can be appropriately imitated. This is a physical skill acquisition support device that is capable of improving the skill acquisition effect relatively easily.
This will be specifically described below.

<第一実施形態>
図1は、本発明の第一実施形態にかかる身体技能習得支援装置の概略構成図を示したものである。また、図2は、本発明の第一実施形態にかかる規範原図と規範図とを示したものであり、図2(a)は規範原図を示し、図2(b)は規範図を示している。
<First embodiment>
FIG. 1 is a schematic configuration diagram of a physical skill acquisition support device according to a first embodiment of the present invention. FIG. 2 shows a normative drawing and a normative diagram according to the first embodiment of the present invention. FIG. 2 (a) shows a normative original diagram, and FIG. 2 (b) shows a normative diagram. Yes.

この図1に示すように、本実施形態にかかる身体技能習得支援装置1は、本発明の種々の構成要素(後述する。)を備えたパーソナルコンピュータ10(以下、「PC」ともいう。)と、ビデオカメラ20(本発明の「撮影手段」に相当)と、合成処理部30と、画像表示手段40とを用いて構成されている。   As shown in FIG. 1, a physical skill acquisition support device 1 according to the present embodiment is a personal computer 10 (hereinafter also referred to as “PC”) provided with various components of the present invention (described later). The video camera 20 (corresponding to the “photographing means” of the present invention), the composition processing unit 30, and the image display means 40 are used.

本実施形態にかかる身体技能習得支援装置1を構成するPC10は、PC本体部10A、キーボード11、およびディスプレイ(図示省略)等を用いて構成されている。本実施形態を構成するPC本体部10Aは、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、画像メモリ、A/D変換器等を用いて構成され、PC本体部10Aには、必要とされるアプリケーションがインストールされている。そして、本実施形態においては、これらの構成要素およびアプリケーションが、適宜、図1に示した入力部12、記憶手段13、および規範図生成部14として機能する。   The PC 10 constituting the physical skill acquisition support device 1 according to the present embodiment is configured using a PC main body 10A, a keyboard 11, a display (not shown), and the like. The PC main unit 10A constituting this embodiment is configured using a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), an image memory, an A / D converter, and the like. The required application is installed in the unit 10A. In the present embodiment, these components and applications appropriately function as the input unit 12, the storage unit 13, and the reference diagram generation unit 14 illustrated in FIG.

身体技能習得支援装置1を構成する入力部12は、PC本体部10A中のCPUおよびアプリケーション等を用いて構成されている。この入力部12は、キーボード11にて入力された種々の情報を、適宜(例えば、内蔵されているアプリケーション等に基づいて)所定の処理をすべく構成されている。また、記憶手段13は、ROMおよびRAMの少なくとも一方を用いて構成されており、この記憶手段13中には、規範原画が記憶されている。さらに、規範図生成部14は、PC本体部10A中のCPUおよびアプリケーション等を用いて構成されている。本実施形態にかかる規範図生成部14は、記憶手段13中に記憶されている規範原画と、キーボード11等を介して入力部12に入力された実施者Pに関する身体的データ(例えば、身長、体重、胸囲、座高等)とに基づいて、「規範図」を生成すべく構成されている。   The input unit 12 constituting the physical skill acquisition support device 1 is configured using a CPU, an application, and the like in the PC main body unit 10A. The input unit 12 is configured to appropriately process various information input from the keyboard 11 (for example, based on a built-in application or the like). The storage unit 13 is configured using at least one of a ROM and a RAM, and the normative original image is stored in the storage unit 13. Furthermore, the normative diagram generation unit 14 is configured using a CPU, an application, and the like in the PC main body unit 10A. The reference diagram generation unit 14 according to the present embodiment includes a reference original picture stored in the storage means 13 and physical data (for example, height, Based on weight, chest circumference, sitting height, etc.).

本実施形態にかかる身体技能習得支援装置1を構成するビデオカメラ20は、実施者Pを撮像可能な位置に設けられており、このビデオカメラ20にて撮像された身体動作情報は、後述する合成処理部30に送られる。このビデオカメラ20にて撮像される身体動作情報は、必要に応じて、静止画および動画の少なくとも一方でよいが、動画であることが好ましい。   The video camera 20 constituting the physical skill acquisition support device 1 according to the present embodiment is provided at a position where the person P can be imaged, and the body motion information captured by the video camera 20 is synthesized as described later. It is sent to the processing unit 30. The body motion information imaged by the video camera 20 may be at least one of a still image and a moving image as necessary, but is preferably a moving image.

本実施形態にかかる身体技能習得支援装置1を構成する合成処理部30には、PC本体部10Aの規範図生成部14から送られる「規範情報」(規範図)と、ビデオカメラ20から送られる「身体動作情報」とを合成可能に構成されている。合成処理部30としては、例えば、Tempest SX PC VIDEO OVERLAY(ADTECHNO社製)が用いられる。この合成処理部30にて合成された画像(規範情報と身体動作情報とが合成された画像)は、後述する画像表示手段40(を成す画像表示部42)に送られる。   “Synthesis information” (normative diagram) sent from the normative diagram generating unit 14 of the PC main body 10A and the video camera 20 are sent to the composition processing unit 30 constituting the physical skill acquisition support device 1 according to the present embodiment. “Body motion information” can be synthesized. As the synthesis processing unit 30, for example, Tempest SX PC VIDEO OVERLAY (manufactured by ADTECHNO) is used. The image synthesized by the synthesis processing unit 30 (an image obtained by synthesizing the norm information and the body movement information) is sent to an image display unit 40 (an image display unit 42).

本実施形態にかかる身体技能習得支援装置1を構成する画像表示手段40は、頭部に装着可能なように眼鏡状に構成された装着部41(以下、単に「装着部」ともいう。)と、この装着部41に設けられた画像表示部42(例えば、Teleglass(SCALAR社製))とを用いて構成されている。本実施形態にかかる画像表示部42は、ヘッドマウントディスプレイと呼ばれる頭部に装着可能な小型ディスプレイであり、眼鏡状に構成された装着部41に装着可能である。   The image display means 40 constituting the physical skill acquisition support device 1 according to the present embodiment is an attachment portion 41 (hereinafter also simply referred to as “attachment portion”) configured in a glasses shape so as to be attachable to the head. The image display unit 42 (for example, Teleglass (manufactured by SCALAR)) provided in the mounting unit 41 is used. The image display unit 42 according to the present embodiment is a small display that can be mounted on the head, called a head-mounted display, and can be mounted on the mounting unit 41 configured in the shape of glasses.

本実施形態においては、眼鏡状に構成された装着部41の右目あるいは左目のいずれか一方の近傍に画像表示部42が設けられており、このような構成とすることによって、静止画および動画の少なくとも一方を、片目(一方の目)に認識させることができる。一方の目だけに画像認識をさせる構成としたのは、技能実施時には、もう一方の目(他方の目)では実際に目標物(ボール、標的、溶接箇所等)の認識を行う必要があるからである。   In the present embodiment, the image display unit 42 is provided in the vicinity of either the right eye or the left eye of the wearing unit 41 configured in the shape of glasses. With such a configuration, still images and moving images can be displayed. At least one can be recognized by one eye (one eye). The reason that the image recognition is performed only for one eye is that when the skill is implemented, the other eye (the other eye) needs to actually recognize the target (ball, target, welded part, etc.). It is.

先述したように、図2は、本実施形態にかかる規範原図と規範図とを示したものであり、図2(a)は規範原図G0を示し、図2(b)は規範図G1を示している。本実施形態においては、この図2に示すように、習得を望む技能が「ゴルフ」(のスイング)である場合について示している。   As described above, FIG. 2 shows a normative drawing and a normative diagram according to the present embodiment, FIG. 2 (a) shows a normative drawing G0, and FIG. 2 (b) shows a normative diagram G1. ing. In the present embodiment, as shown in FIG. 2, a case where the skill desired to be acquired is “golf” (swing) is shown.

本実施形態においては、この図2(a)に示すような規範原図G0(静止画および動画の少なくとも一方)が、記憶手段13に格納されている。この規範原図G0は、例えば、スポーツに関するテキスト(教本)、実際のビデオ画像等から選択して用意される。そして、この規範原図G0に基づいて、図2(b)に示すような規範図G1(実施者Pの映像等と重ね合わせる規範となる図)が生成される。   In the present embodiment, a reference original drawing G0 (at least one of a still image and a moving image) as shown in FIG. This reference original drawing G0 is prepared, for example, by selecting from sports texts (textbooks), actual video images, and the like. Then, based on the normative original G0, a normative chart G1 (a figure serving as a norm to be superimposed on the video of the person P, etc.) as shown in FIG. 2B is generated.

規範原図G0には、人間の細かい描写や衣服等が描かれているが、本実施形態にて用いられる規範図G1には不要である。そこで、本実施形態においては、規範原図G0の輪郭、中心線(図示省略)、使用する道具、動作のポイントとなる箇所の表記等を重要な構成要素として、規範図G1を生成した。つまり、規範原図G0に基づいて規範図G1を生成する場合には、余分な箇所の省略処理や、より必要と思われる箇所の強調処理や、技能習得をより容易化するために必要と思われるライン等(中心線や目印点等)の追加処理等が行われる。ここで、図2(b)に示す規範図G1は一例であり、必要に応じて、中心線や体重移動ポイント等を加えた規範図としてもよい。   The reference original drawing G0 shows fine depictions of humans, clothes, etc., but is unnecessary for the reference drawing G1 used in this embodiment. Therefore, in the present embodiment, the reference diagram G1 is generated using the outline of the reference original drawing G0, the center line (not shown), the tools to be used, the notation of the location that is the point of operation, and the like as important components. That is, when generating the normative chart G1 based on the normative original G0, it is necessary to omit unnecessary parts, emphasize parts that seem to be more necessary, and facilitate skill acquisition. Additional processing such as a line (center line, mark point, etc.) is performed. Here, the normative diagram G1 shown in FIG. 2B is an example, and may be a normative diagram to which a center line, a weight shift point, and the like are added as necessary.

また、本実施形態においては、規範図G1を生成する場合には、実施者Pの身体にフィットさせるために、適宜、その形状・大きさ等の修正処理が行われている。より具体的には、規範原図G0から規範図G1を生成する際に、キーボード11等を介して入力部12に入力された実施者Pに関する身体的データを用いて、規範図G1の拡大処理あるいは縮小処理等が行われている。当然のことながら、あらかじめ準備した規範原図G0の大きさがそのまま適用可能な場合には、拡大処理および縮小処理は行われない。   Further, in the present embodiment, when the reference diagram G1 is generated, in order to fit the body of the practitioner P, correction processing such as its shape and size is appropriately performed. More specifically, when generating the normative diagram G1 from the normative source map G0, using the physical data regarding the performer P input to the input unit 12 via the keyboard 11 or the like, the enlargement process of the normative diagram G1 or Reduction processing or the like is performed. As a matter of course, when the size of the reference original drawing G0 prepared in advance is applicable as it is, the enlargement process and the reduction process are not performed.

さて、本実施形態にかかる身体技能習得支援装置1は、上述したように構成されており、実習者Pがこの身体技能習得支援装置1を適切に使用すれば、その結果として、実施者Pは、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを自分自身で容易に判断することが可能となる。
以下、本実施形態にかかる身体技能習得支援装置1の使用方法および作用効果等について説明する。
Now, the physical skill acquisition support apparatus 1 concerning this embodiment is comprised as mentioned above, and if the practitioner P uses this physical skill acquisition support apparatus 1 appropriately, as a result, the implementer P will be It is possible to easily determine whether or not the movements of leaders and seniors (normative technicians) can be imitated appropriately.
Hereinafter, a method of using the physical skill acquisition support device 1 according to the present embodiment, an operation effect, and the like will be described.

本実施形態にかかる身体技能習得支援方法は、実施者Pの身体動作中における身体動作情報を取得する身体動作情報取得工程と、この実施者Pの身体動作中に、実施者P自身が、身体動作情報と、技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報とを、視覚的に同時に認識可能である同時画像認識工程とを備えたことを特徴としている。   The physical skill acquisition support method according to the present embodiment includes a body movement information acquisition step of acquiring body movement information during the body movement of the person P, and the person P himself / herself during the body movement of the person P It is characterized by comprising a simultaneous image recognition step capable of visually recognizing motion information and normative information based on at least one of a still image and a moving image of a normative technician regarding skills.

より具体的には、本実施形態にかかる身体技能習得支援装置1を用いて実施される身体技能習得支援方法は、実施者Pに関する身体的データ(身体情報)をキーボード11を介してPC10に入力する身体情報入力工程と、実施者Pが画像表示手段40を装着する画像表示手段装着工程と、画像表示手段40を装着した実施者Pがビデオカメラ20の撮像範囲内にて実施(習得を望む技能の実施)を行う実施工程とを備え、この実施工程の際に、上述した身体動作情報取得工程と同時画像認識工程とが行われている。   More specifically, the physical skill acquisition support method implemented using the physical skill acquisition support device 1 according to the present embodiment inputs physical data (physical information) related to the performer P to the PC 10 via the keyboard 11. The body information input step, the image display means mounting step in which the operator P wears the image display means 40, and the operator P wearing the image display means 40 within the imaging range of the video camera 20 (want to learn) An implementation process for performing the skill), and the body movement information acquisition process and the simultaneous image recognition process described above are performed during the implementation process.

本実施形態にかかる身体技能習得支援装置1を使用する場合、実施者Pは、まずはじめに、キーボード11を用いて、実施者P自身の身体情報をPC10に入力する。ここで入力される実施者Pの身体情報は、記憶手段13内に格納されている規範原図に基づき、実施者P自身の体格にフィットした規範図を生成するために用いられる情報である。実施者Pの身体情報としては、例えば、身長、体重、胸囲、座高等が入力される。ただし、これらの身体情報の全てが必要なのではなく、必要に応じて、これらの情報の中から、その習得を目指す技能の特徴等に応じた身体情報のみを入力してもよい。本実施形態においては、実施者Pの身体情報として「身長」を入力した。   When using the physical skill acquisition support device 1 according to the present embodiment, the practitioner P first inputs the physical information of the practitioner P himself into the PC 10 using the keyboard 11. The physical information of the practitioner P input here is information used to generate a normative map that fits the physique of the practitioner P based on the normative original map stored in the storage unit 13. As the body information of the practitioner P, for example, height, weight, chest circumference, sitting height, and the like are input. However, not all of these physical information is necessary. If necessary, only physical information according to the characteristics of the skill to be acquired may be input from these pieces of information. In the present embodiment, “height” is input as the physical information of the operator P.

本実施形態にかかる身体技能習得支援方法においては、身体情報入力工程の後、PC10の規範図生成部14にて、身体情報(例えば、身長に関する情報)と記憶手段13中の規範原図とを用いた「規範図」(本発明の「規範情報」に相当)の生成処理(規範図(規範情報)生成工程)が行われる。ここでは、実施者Pの身体情報(身長情報)に基づき、規範原図の拡大処理あるいは縮小処理を行い、実施者Pの体格にフィットした規範図(規範情報)の作成が行われる。規範原図から規範図を生成する場合には、この拡大・縮小処理と共に、先にも説明した通り、省略処理、強調処理、および追加処理等が行われる。   In the physical skill acquisition support method according to the present embodiment, after the physical information input step, the reference information generating unit 14 of the PC 10 uses the physical information (for example, information about the height) and the reference original map in the storage unit 13. The “reference diagram” (corresponding to the “normative information” of the present invention) is generated (reference diagram (normative information) generation step). Here, based on the body information (height information) of the practitioner P, the normative drawing is enlarged or reduced to create a normative figure (normative information) that fits the physique of the practitioner P. When generating a reference diagram from a reference original drawing, along with the enlargement / reduction processing, as described above, an omission process, an emphasis process, an addition process, and the like are performed.

上述した身体情報入力工程を行った後、本実施形態においては、実施者Pが画像表示手段40を装着する画像表示手段装着工程が行われる。つまり、実施者Pは、技能実施可能な状態で(必要な道具等の準備を完了した状態で)、画像表示手段40を装着する。そして、画像表示手段40を装着した実施者Pは、次いで、ビデオカメラ20の撮像範囲内にて習得を望む技能の実施を行う(実施工程)。   After performing the physical information input process described above, in the present embodiment, an image display means mounting process in which the operator P wears the image display means 40 is performed. That is, the practitioner P wears the image display means 40 in a state where the skill can be performed (when necessary tools and the like have been prepared). Then, the practitioner P wearing the image display means 40 performs the skill desired to be acquired within the imaging range of the video camera 20 (implementation step).

本実施形態にかかる実施工程時においては、ビデオカメラ20にて撮影された画像情報(本発明の「実施者の身体動作情報」に相当)と、規範図生成部14にて生成された規範図とが、合成処理部30にて合成処理される(合成図が作成される)。ここで合成処理された合成図は、合成処理部30から画像表示部42に送信される。実施者Pは、装着した画像表示手段40を構成する画像表示部42を介して、この合成図を確認することによって(あるいは確認しながら、さらに実施を重ねることによって)、自分自身の動きと規範図とのずれを認識することが可能となる。したがって、実施者Pは、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを、自分自身で容易に判断することができる。   At the time of the implementation process according to the present embodiment, image information (corresponding to “physical movement information of the practitioner” of the present invention) captured by the video camera 20 and a reference diagram generated by the reference diagram generation unit 14. Are synthesized by the synthesis processing unit 30 (a composite diagram is created). The composite diagram subjected to the composite processing is transmitted from the composite processing unit 30 to the image display unit 42. The practitioner P confirms this composite drawing via the image display unit 42 constituting the attached image display means 40 (or repeats further implementation while confirming) to determine his own movement and norm. It is possible to recognize a deviation from the figure. Therefore, the implementer P can easily determine by himself whether or not the movements of the instructor, the senior, and the like (normative technicians) can be appropriately imitated.

以下、本実施形態の作用効果をより具体的に説明する。   Hereinafter, the effect of this embodiment is demonstrated more concretely.

本実施形態は、実施者Pが身体動作を伴う技能を習得する際に用いられる身体技能習得支援装置1であって、実施者Pの身体動作情報を取得するビデオカメラ20と、技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報(規範原画あるいは規範図等)を記憶している記憶手段13と、実施者Pの頭部に装着可能な画像表示手段40とを備え、画像表示手段40(を成す画像表示部42)が、ビデオカメラ20にて得られた実施者Pの身体動作情報と、記憶手段13内の規範情報とを同時に表示可能であることを特徴としている。   The present embodiment is a physical skill acquisition support device 1 used when an implementer P acquires a skill involving physical motion, and includes a video camera 20 that acquires the physical motion information of the performer P, and a normative skill related to the skill. Storage means 13 for storing normative information (normative original picture or normative map or the like) based on at least one of the still image and moving image of the person, and image display means 40 that can be worn on the head of the person P, The image display unit 40 (the image display unit 42) can display the body movement information of the person P obtained by the video camera 20 and the norm information in the storage unit 13 at the same time. .

このような構成にかかる身体技能習得支援装置1によれば、実施者Pは、画像表示手段40を頭部に装着し、その画像表示手段40を成す画像表示部42では自分自身の画像と規範情報(規範図)とが同時に表示されるため、実施者Pが技能に関する身体動作を行いながら、自分(実施者P)の動きと規範技能者の動きとを比較検討し、規範技能者の動きを的確に再現できているかどうかを、自分自身で確認することができる。   According to the physical skill acquisition support device 1 according to such a configuration, the practitioner P wears the image display means 40 on the head, and the image display unit 42 that forms the image display means 40 has its own image and norm. Since the information (normative diagram) is displayed at the same time, the practitioner P compares the movements of the practitioner (P) and the normative technician while performing physical movements related to the skill. It is possible to confirm by yourself whether or not it is accurately reproduced.

また、このような構成によれば、画像表示手段40が頭部に装着可能であるため、実施者Pは、身体動作を行いながら、身体動作情報および規範情報を確認することができる。したがって、従来の鏡を使用した場合のように、自分自身の身体動作を確認するために姿勢を崩すことがない。さらに、このような構成によれば、実施者Pは自分一人でも適切な練習を実施することが可能であるため、規範技能者を必要とせず、効率的に技能の習得を行うことができる。また、このような構成によれば、従来技術のように、ビデオカメラ等にて撮影された映像を、練習後(身体動作終了後)に確認するのではなく、実際の身体動作を行いながら(身体動作中に)、自分自身の動きと規範画像とを比較検討することが可能であるため、容易に、自分の動きが適切であるか否かの判断を行うことができる。すなわち、自分自身の映像(身体動作情報)に規範技能者等の映像(規範情報)を重ねて見ることができるため、指導者や上級者等の「動きを真似る」ことができているか否かの判断を実施者自身で適切に行うことができる。   Moreover, according to such a structure, since the image display means 40 can be mounted | worn to a head, the practitioner P can confirm body motion information and norm information, performing a body motion. Therefore, as in the case where a conventional mirror is used, the posture is not lost in order to confirm the body movement of itself. Further, according to such a configuration, the practitioner P can carry out appropriate practice by himself / herself, so that it is possible to efficiently acquire skills without requiring normative technicians. In addition, according to such a configuration, as in the prior art, an image taken by a video camera or the like is not confirmed after practice (after the end of physical movement), but while performing actual physical movement ( Since it is possible to compare and examine the own movement and the reference image (during physical movement), it is possible to easily determine whether or not the movement is appropriate. In other words, since it is possible to see the images (normative information) of normative technicians etc. on their own images (physical movement information), whether or not they can “imitate the movement” of instructors and seniors This can be done appropriately by the implementer himself.

また、本実施形態にかかる身体技能習得支援装置1は、画像表示手段40が、装着部41と画像表示部42とを有し、装着部41が、眼鏡状に構成され、画像表示部42が、眼鏡状に構成された装着部41における左目の近傍に設けられていることを特徴としている。   Further, in the physical skill acquisition support device 1 according to the present embodiment, the image display means 40 includes the mounting unit 41 and the image display unit 42, the mounting unit 41 is configured in the shape of glasses, and the image display unit 42 includes It is characterized by being provided in the vicinity of the left eye in the mounting portion 41 configured in the shape of glasses.

このような構成によれば、上述した作用効果に加えて、次のような作用効果を得ることができる。すなわち、本実施形態にかかる身体技能習得支援装置1によれば、画像表示手段40を構成する装着部41が眼鏡状に構成され、この眼鏡状に構成された装着部41の左目側の近傍に画像表示部42(小型のディスプレイ)が設けられているため、比較的簡単に、身体技能習得支援装置1を得ることができる。   According to such a configuration, in addition to the above-described operational effects, the following operational effects can be obtained. That is, according to the physical skill acquisition support device 1 according to the present embodiment, the mounting portion 41 constituting the image display means 40 is configured in the shape of glasses, and in the vicinity of the left eye side of the mounting portion 41 configured in the shape of glasses. Since the image display unit 42 (small display) is provided, the physical skill acquisition support device 1 can be obtained relatively easily.

さらに、本実施形態にかかる身体技能習得支援装置1は、規範情報が、輪郭線にて構成された静止画像および輪郭線にて構成された動画像の少なくとも一方であることを特徴としている。   Furthermore, the physical skill acquisition support device 1 according to the present embodiment is characterized in that the normative information is at least one of a still image composed of contour lines and a moving image composed of contour lines.

このような構成によれば、上述した作用効果に加えて、次のような作用効果を得ることができる。すなわち、本実施形態にかかる身体技能習得支援装置1によれば、規範情報が輪郭線にて構成されているため、実施者Pが、身体動作情報と規範情報とを画像表示手段40にて重ねた状態で見る際に、身体動作情報と前記規範情報とを容易に認識可能となる。したがって、このような構成によれば(輪郭線にて表現された規範情報を用いれば)、より適切に、自分自身で指導者や上級者等の「動きを真似る」ことができているか否かの判断を行うことができる。   According to such a configuration, in addition to the above-described operational effects, the following operational effects can be obtained. That is, according to the physical skill acquisition support device 1 according to the present embodiment, since the normative information is composed of contour lines, the practitioner P superimposes the body motion information and the normative information on the image display unit 40. It is possible to easily recognize the body movement information and the normative information when viewed in a state of being in a state. Therefore, according to such a configuration (using normative information expressed by contour lines), whether or not it is possible to “simulate the movement” of a leader or an advanced person by himself / herself more appropriately. Judgment can be made.

<第二実施形態>
次に、本発明の第二実施形態について説明する。
<Second embodiment>
Next, a second embodiment of the present invention will be described.

図3は、本発明の第二実施形態にかかる身体技能習得支援装置の概略構成図を示したものである。また、図4は、本発明の第二実施形態に係る身体技能習得支援装置の具体的構成の一例を概略斜視図にて示したものである。   FIG. 3 shows a schematic configuration diagram of a physical skill acquisition support device according to the second embodiment of the present invention. FIG. 4 is a schematic perspective view showing an example of a specific configuration of the physical skill acquisition support device according to the second embodiment of the present invention.

この図3および図4に示すように、本実施形態にかかる身体技能習得支援装置100は、本発明の種々の構成要素(後述する。)を備えたパーソナルコンピュータ(PC)110と、ビデオカメラ120(本発明の「撮影手段」に相当)と、PC110内に設けられた合成処理部130と、画像表示手段140と、マイク150(音声入力手段)と、ヘッドフォン160(本発明の「ずれ伝達手段」に相当)とを用いて構成されている。   As shown in FIGS. 3 and 4, the physical skill acquisition support device 100 according to the present embodiment includes a personal computer (PC) 110 including various components (described later) of the present invention, and a video camera 120. (Corresponding to “photographing means” of the present invention), a composition processing unit 130 provided in the PC 110, an image display means 140, a microphone 150 (voice input means), and a headphone 160 (“deviation transmission means of the present invention”). For example).

本実施形態にかかる身体技能習得支援装置100を構成するPC110は、PC本体部110A、キーボード111、およびディスプレイ(図示省略)等を用いて構成されている。本実施形態を構成するPC本体部110Aは、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、画像メモリ、A/D変換器等を用いて構成され、PC本体部10Aには、必要とされるアプリケーションがインストールされている。そして、本実施形態においては、これらの構成要素およびアプリケーションが、適宜、図3に示したパラメーター入力部112、記憶手段113、規範図生成部114、ユーザー映像処理部115、音声処理部116、映像制御信号生成部117、映像マッチング部118、指示音発生部119として機能する。   The PC 110 constituting the physical skill acquisition support device 100 according to the present embodiment is configured using a PC main body 110A, a keyboard 111, a display (not shown), and the like. The PC main body 110A constituting this embodiment is configured using a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), an image memory, an A / D converter, and the like. The required application is installed in the unit 10A. In the present embodiment, these components and applications are appropriately selected from the parameter input unit 112, the storage unit 113, the normative diagram generation unit 114, the user video processing unit 115, the audio processing unit 116, and the video shown in FIG. It functions as a control signal generation unit 117, a video matching unit 118, and an instruction sound generation unit 119.

本実施形態にかかる身体技能習得支援装置100を構成するビデオカメラ120は、先述した第一実施形態の場合と同様、実施者Pを撮像可能な位置に設けられており、このビデオカメラ120にて撮像された身体動作情報は、後述するユーザー映像処理部115を経て、映像制御信号生成部117、映像マッチング部118、および合成処理部130に送られる。このビデオカメラ120にて撮像される身体動作情報は、必要に応じて、静止画および動画の少なくとも一方でよいが、動画であることが好ましい。   As in the case of the first embodiment described above, the video camera 120 that constitutes the physical skill acquisition support device 100 according to the present embodiment is provided at a position where the person P can be imaged. The captured body movement information is sent to a video control signal generation unit 117, a video matching unit 118, and a synthesis processing unit 130 via a user video processing unit 115 described later. The body motion information imaged by the video camera 120 may be at least one of a still image and a moving image as necessary, but is preferably a moving image.

本実施形態にかかる身体技能習得支援装置100を構成する合成処理部130は、PC本体部110Aの規範図生成部114から送られる「規範情報」(規範図)と、ビデオカメラ120から送られる「身体動作情報」とを合成すべく構成されている。合成処理部130は、PC本体部110Aを成すCPUおよびPC本体部110Aにインストールされた所定のアプリケーション等を用いて構成されている。この合成処理部130にて合成された画像(規範情報と身体動作情報とが合成された画像)は、後述する画像表示手段140(を成す画像表示部142)に送られる。なお、本実施形態においては、PC本体部110A内部にて合成処理部130を構成する場合について説明しているが、本発明はこの構成に限定されず、必要に応じて、第一実施形態と同様の合成処理部30を用いるような構成としてもよい。   The composition processing unit 130 constituting the physical skill acquisition support device 100 according to the present embodiment includes “normative information” (normative diagram) sent from the normative diagram generating unit 114 of the PC main body 110A, and “sent from the video camera 120”. It is configured to synthesize "body movement information". The composition processing unit 130 is configured using a CPU constituting the PC main body 110A and a predetermined application installed in the PC main body 110A. The image synthesized by the synthesis processing unit 130 (an image obtained by synthesizing the norm information and the body motion information) is sent to an image display unit 140 (an image display unit 142). In the present embodiment, the case where the compositing processing unit 130 is configured inside the PC main body 110A has been described. However, the present invention is not limited to this configuration, and the first embodiment and the first embodiment can be used as necessary. The same composition processing unit 30 may be used.

本実施形態にかかる身体技能習得支援装置100を構成する画像表示手段140は、図4に示すように、頭部に装着可能なように眼鏡状に構成された装着部141(以下、単に「装着部」ともいう。)と、この装着部141に設けられた画像表示部142(例えば、Teleglass(SCALAR社製))とを用いて構成されている。本実施形態にかかる画像表示部142は、ヘッドマウントディスプレイと呼ばれる頭部に装着可能な小型ディスプレイであり、眼鏡状に構成された装着部141に装着可能である。   As shown in FIG. 4, the image display means 140 constituting the physical skill acquisition support device 100 according to the present embodiment has a wearing part 141 (hereinafter simply referred to as “wearing”) configured in a glasses shape so that it can be worn on the head. And an image display unit 142 (for example, Teleglass (manufactured by SCALAR)) provided in the mounting unit 141. The image display unit 142 according to the present embodiment is a small display that can be mounted on a head called a head-mounted display, and can be mounted on a mounting unit 141 configured in the shape of glasses.

本実施形態においては、図4に示すように、眼鏡状に構成された装着部141の左目の近傍に画像表示部142が設けられている。本実施形態にかかる身体技能習得支援装置100は、このような構成とすることによって、静止画および動画の少なくとも一方を、片目(左目)に認識させることができる。一方の目(左目)だけに画像認識をさせる構成としたのは、第一実施形態と同様に、技能実施時には、もう一方の目(他方の目)では実際に目標物(ボール、標的、溶接箇所等)の認識を行う必要があるからである。   In the present embodiment, as shown in FIG. 4, an image display unit 142 is provided in the vicinity of the left eye of the mounting unit 141 configured in the shape of glasses. With this configuration, the physical skill acquisition support device 100 according to the present embodiment can recognize at least one of a still image and a moving image with one eye (left eye). The configuration in which only one eye (left eye) recognizes the image is the same as in the first embodiment. When the skill is executed, the other eye (the other eye) actually targets (ball, target, welding). This is because it is necessary to recognize the location).

また、本実施形態にかかる身体技能習得支援装置100においては、図4に示すように、画像表示手段140を構成する装着部141に付属する形態で、マイク150およびヘッドフォン160(本発明の「ずれ伝達手段」に相当)が設けられている。   Further, in the physical skill acquisition support device 100 according to the present embodiment, as shown in FIG. 4, the microphone 150 and the headphone 160 (the “displacement” of the present invention) are attached to the mounting portion 141 constituting the image display means 140. Corresponding to “transmission means”).

身体技能習得支援装置100を構成するパラメーター入力部112は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。このパラメーター入力部112は、キーボード111にて入力された種々の情報を、適宜(例えば、内蔵されているアプリケーション等に基づいて)所定の処理をすべく構成されている。また、記憶手段113は、ROMおよびRAMの少なくとも一方を用いて構成されており、この記憶手段113中においては、規範原画データベースが構築されている。さらに、規範図生成部114は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。本実施形態にかかる規範図生成部114は、記憶手段113中に構築されている規範原図データベースと、キーボード111等を介してパラメーター入力部112に入力された実施者Pに関する身体的データ(例えば、身長、体重、胸囲、座高等)とに基づいて、「規範図」を生成すべく構成されている。   The parameter input unit 112 configuring the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body unit 110A. The parameter input unit 112 is configured to appropriately process various information input from the keyboard 111 (for example, based on a built-in application or the like). The storage means 113 is configured using at least one of a ROM and a RAM, and a normative original database is constructed in the storage means 113. Furthermore, the normative diagram generation unit 114 is configured using a CPU, an application, and the like in the PC main body 110A. The normative chart generation unit 114 according to the present embodiment includes a normative original database constructed in the storage unit 113 and physical data (for example, the operator P input to the parameter input unit 112 via the keyboard 111 or the like). Based on height, weight, chest circumference, sitting height, etc.).

身体技能習得支援装置100を構成するユーザー映像処理部115は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。このユーザー映像処理部115は、ビデオカメラ120にて撮像された実施者Pの身体動作情報を取得し、その身体動作情報に所定の処理を施し(例えば、二値化処理等を施し)、その身体動作情報に関する画像信号(静止画像および動画像の少なくとも一方の信号)を、映像制御信号生成部117、映像マッチング部118、および合成処理部130に送信すべく構成されている。   The user video processing unit 115 constituting the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body 110A. The user video processing unit 115 acquires the body motion information of the person P taken by the video camera 120, performs predetermined processing (for example, binarization processing) on the body motion information, An image signal related to the body motion information (at least one of a still image and a moving image) is configured to be transmitted to the video control signal generation unit 117, the video matching unit 118, and the synthesis processing unit 130.

身体技能習得支援装置100を構成する音声処理部116は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。この音声処理部116は、マイク150からの音声(実施者Pの声等)に基づき所定の信号を生成し、その所定の信号を映像制御信号生成部117に送信すべく構成されている。   The voice processing unit 116 configuring the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body 110A. The audio processing unit 116 is configured to generate a predetermined signal based on the sound from the microphone 150 (such as the voice of the person P), and to transmit the predetermined signal to the video control signal generation unit 117.

身体技能習得支援装置100を構成する映像制御信号生成部117は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。この映像制御信号生成部117は、音声処理部116からの音声信号(マイク150を介して入力される音声信号)に基づき、映像制御信号を規範図生成部114に送信すべく構成されている。すなわち、本実施形態においては、この映像制御信号生成部117にて生成される映像制御信号に基づいて、規範画像のスタート、ストップ、一時停止、あるいはチャプタの頭出し等が制御可能であるように構成されている。   The video control signal generation unit 117 configuring the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body unit 110A. The video control signal generation unit 117 is configured to transmit a video control signal to the reference diagram generation unit 114 based on an audio signal from the audio processing unit 116 (an audio signal input via the microphone 150). That is, in this embodiment, based on the video control signal generated by the video control signal generation unit 117, the start, stop, pause, chapter search, etc. of the reference image can be controlled. It is configured.

身体技能習得支援装置100を構成する映像マッチング部118(本発明の「比較検討手段」に相当)は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。この映像マッチング部118は、規範図生成部114から送られる「規範情報」(規範図)と、ユーザー映像処理部115から「身体動作情報」とを比較検討して、規範情報と身体動作情報との間に生じている「ずれ具合」を検出すべく構成されている。   The video matching unit 118 (corresponding to the “comparison study unit” of the present invention) constituting the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body 110A. The video matching unit 118 compares the “normative information” (normative diagram) sent from the normative diagram generating unit 114 with “physical motion information” from the user video processing unit 115, and compares the normative information with the body motion information. It is configured to detect “the degree of deviation” occurring between the two.

本実施形態にかかる映像マッチング部118は、例えば、ずれ具合が所定の範囲内(規範情報と身体動作情報とのずれが殆どない場合)であれば「良好」、ずれ具合が所定の範囲を超えるが許容可能な範囲内(規範情報と身体動作情報とのずれが小さい場合)であれば「普通」、ずれ具合が許容可能な範囲を超える場合(規範情報と身体動作情報とのずれが大きい場合)であれば「要改善」というように、「ずれ具合」を複数の段階に分けて判断すべく構成されている。また、このように構成された映像マッチング部118は、「ずれ具合」に応じて、所定の信号を指示音発生部119に送信すべく構成されている。   For example, the video matching unit 118 according to the present embodiment is “good” if the deviation is within a predetermined range (when there is almost no deviation between the norm information and the body movement information), and the deviation exceeds the predetermined range. Is within the allowable range (when the difference between the norm information and the body movement information is small), and when the deviation exceeds the allowable range (when the difference between the norm information and the body movement information is large) ), “Improvement required” is determined so that “the degree of deviation” is determined in a plurality of stages. In addition, the video matching unit 118 configured in this way is configured to transmit a predetermined signal to the instruction sound generating unit 119 in accordance with the “shift state”.

なお、本発明はこの構成に限定されず、必要に応じて、二段階あるいは四段階以上に分けて、「ずれ具合」を判断すべく構成してもよい。さらに、必要に応じて、例えば、実施者Pの身体動作情報を上下の二つの要素、左右の二つの要素、あるいは左右上下の四つの構成要素等の複数の要素として認識し、それぞれの要素についての「ずれ」を適宜判断すべく構成してもよい。   Note that the present invention is not limited to this configuration, and may be configured to determine “the degree of deviation” in two stages or four or more stages as necessary. Furthermore, if necessary, for example, the body movement information of the practitioner P is recognized as a plurality of elements such as two upper and lower elements, two left and right elements, and four right and left upper and lower elements. The “shift” may be determined as appropriate.

身体技能習得支援装置100を構成する指示音発生部119は、PC本体部110A中のCPUおよびアプリケーション等を用いて構成されている。この指示音発生部119は、映像マッチング部118からの信号(ずれ具合に応じた信号)に基づき、そのずれに対応した音声をヘッドフォン160(ずれ伝達手段)を介して実施者Pに伝達すべく、所定の信号をヘッドフォン160に送信すべく構成されている。   The instruction sound generator 119 constituting the physical skill acquisition support device 100 is configured using a CPU, an application, and the like in the PC main body 110A. Based on the signal from the video matching unit 118 (a signal corresponding to the degree of deviation), the instruction sound generation unit 119 is to transmit the sound corresponding to the deviation to the practitioner P via the headphones 160 (deviation transmission means). The predetermined signal is transmitted to the headphones 160.

また、図3にて説明したように、本実施形態においても、第一実施形態と同様に、規範原図に基づいて規範図が生成される。その生成方法等は、第一実施形態と同様であり、その説明については、図2を用いてすでに行っている。したがって、本実施形態においては、規範図の生成方法に関する詳細な説明は割愛する。   In addition, as described with reference to FIG. 3, in this embodiment as well, as in the first embodiment, a reference diagram is generated based on a reference original drawing. The generation method and the like are the same as those in the first embodiment, and the description thereof has already been performed with reference to FIG. Therefore, in the present embodiment, a detailed description regarding the method for generating the reference diagram is omitted.

さて、本実施形態にかかる身体技能習得支援装置100は、上述したように構成されており、実習者Pがこの身体技能習得支援装置100を適切に使用すれば、その結果として、実施者Pは、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを自分自身で容易に判断することが可能となる。
以下、本実施形態にかかる身体技能習得支援装置100の使用方法および作用効果等について説明する。
Now, the physical skill acquisition support device 100 according to the present embodiment is configured as described above. If the practitioner P appropriately uses the physical skill acquisition support device 100, as a result, the implementer P It is possible to easily determine whether or not the movements of leaders and seniors (normative technicians) can be imitated appropriately.
Hereinafter, the usage method, effects, and the like of the physical skill acquisition support device 100 according to the present embodiment will be described.

本実施形態にかかる身体技能習得支援方法は、第一実施形態と同様に、実施者Pの身体動作中における身体動作情報を取得する身体動作情報取得工程と、この実施者Pの身体動作中に、実施者P自身が、身体動作情報と、技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報とを、視覚的に同時に認識可能である同時画像認識工程とを備えたことを特徴としている。   As in the first embodiment, the physical skill acquisition support method according to this embodiment includes a body motion information acquisition step of acquiring body motion information during the body motion of the operator P, and during the body motion of the operator P. The practitioner P itself has a simultaneous image recognition process capable of visually recognizing body motion information and normative information based on at least one of a still image and a moving image of a normative technician regarding skills. It is characterized by.

より具体的には、本実施形態にかかる身体技能習得支援装置100を用いて実施される身体技能習得支援方法は、実施者Pに関する身体的データ(身体情報)をキーボード111を介してPC110に入力する身体情報入力工程と、実施者Pが画像表示手段140を装着する画像表示手段装着工程と、画像表示手段140を装着した実施者Pがビデオカメラ120の撮像範囲内にて実施(習得を望む技能の実施)を行う実施工程とを備え、この実施工程の際に、上述した身体動作情報取得工程と同時画像認識工程とが行われている。加えて、本実施形態においては、同時画像認識工程の際に、映像マッチング118における比較検討結果に基づいて、規範情報と身体動作情報との間に生じている「ずれ具合」をヘッドフォン160(ずれ伝達手段)を用いて実施者Pに伝達すべく構成されている。   More specifically, the physical skill acquisition support method implemented using the physical skill acquisition support device 100 according to the present embodiment inputs physical data (physical information) related to the performer P to the PC 110 via the keyboard 111. The body information input step, the image display means mounting step in which the operator P wears the image display means 140, and the operator P wearing the image display means 140 within the imaging range of the video camera 120. An implementation process for performing the skill), and the body movement information acquisition process and the simultaneous image recognition process described above are performed during the implementation process. In addition, in this embodiment, during the simultaneous image recognition process, based on the comparison examination result in the video matching 118, the “deviation state” generated between the norm information and the body movement information is changed to the headphones 160 (deviation). It is configured to transmit to the implementer P using the transmission means.

本実施形態にかかる身体技能習得支援装置100を使用する場合、実施者Pは、まずはじめに、キーボード111を用いて、実施者P自身の身体情報をPC110に入力する。ここで入力される実施者Pの身体情報は、記憶手段113内に格納されている規範原図データベースに基づき、実施者P自身の体格にフィットした規範図を生成するために用いられる情報である。実施者Pの身体情報としては、例えば、身長、体重、胸囲、座高等が入力される。ただし、これらの身体情報の全てが必要なのではなく、必要に応じて、これらの情報の中から、その習得を目指す技能の特徴等に応じた身体情報のみを入力してもよい。本実施形態においては、実施者Pの身体情報として「身長」を入力した。   When using the physical skill acquisition support device 100 according to the present embodiment, the practitioner P first inputs the physical information of the practitioner P himself into the PC 110 using the keyboard 111. The physical information of the practitioner P input here is information used to generate a normative figure that fits the physique of the practitioner P based on the normative original database stored in the storage unit 113. As the body information of the practitioner P, for example, height, weight, chest circumference, sitting height, and the like are input. However, not all of these physical information is necessary. If necessary, only physical information according to the characteristics of the skill to be acquired may be input from these pieces of information. In the present embodiment, “height” is input as the physical information of the operator P.

本実施形態にかかる身体技能習得支援方法においては、身体情報入力工程の後、PC110の規範図生成部114にて、身体情報(例えば、身長に関する情報)と記憶手段113中(規範原図データベース中)の所定の規範原図とを用いた「規範図」(本発明の「規範情報」に相当)の生成処理(規範図(規範情報)生成工程)が行われる。ここでは、実施者Pの身体情報(身長情報)に基づき、規範原図の拡大処理あるいは縮小処理を行い、実施者Pの体格にフィットした規範図(規範情報)の作成が行われる。規範原図から規範図を生成する場合には、この拡大・縮小処理と共に、先にも説明した通り(第一実施形態にて説明した通り)、省略処理、強調処理、および追加処理等が行われる。   In the physical skill acquisition support method according to the present embodiment, after the physical information input step, in the normative diagram generation unit 114 of the PC 110, the physical information (for example, information about the height) and the storage means 113 (in the normative original database) A “normative diagram” (corresponding to “normative information” of the present invention) is generated (a normative diagram (normative information) generating step) using the predetermined normative original. Here, based on the body information (height information) of the practitioner P, the normative drawing is enlarged or reduced to create a normative figure (normative information) that fits the physique of the practitioner P. When generating a reference diagram from a reference original drawing, along with the enlargement / reduction processing, as described above (as described in the first embodiment), an omission process, an emphasis process, an addition process, and the like are performed. .

上述した身体情報入力工程を行った後、本実施形態においては、実施者Pが画像表示手段140を装着する画像表示手段装着工程が行われる。具体的には、画像表示手段140を構成する装着部141を両耳と鼻に係止させて、マイク150を実施者Pの口の近傍に配置し、ヘッドフォン160を左耳に挿入する。また、実施者Pは、技能実施可能な状態で(必要な道具等の準備を完了した状態で)、画像表示手段140を装着する。そして、画像表示手段140を装着した実施者Pは、次いで、ビデオカメラ120の撮像範囲内にて習得を望む技能の実施を行う(実施工程)。   After performing the physical information input process described above, in the present embodiment, the image display means mounting process in which the practitioner P wears the image display means 140 is performed. Specifically, the mounting portion 141 constituting the image display means 140 is locked to both ears and the nose, the microphone 150 is placed near the mouth of the practitioner P, and the headphones 160 are inserted into the left ear. In addition, the practitioner P wears the image display unit 140 in a state where the skill can be performed (when necessary tools and the like have been prepared). Then, the practitioner P wearing the image display means 140 performs the skill desired to be acquired within the imaging range of the video camera 120 (implementation process).

本実施形態にかかる実施工程時においては、ビデオカメラ120にて撮影された画像情報(本発明の「実施者の身体動作情報」に相当)と、規範図生成部114にて生成された規範図とが、合成処理部130にて合成処理される(合成図が作成される)。ここで合成処理された合成図は、合成処理部130から画像表示部142に送信される。本実施形態においては、この画像表示部142における画像の表示状態(表示のスタート、表示のストップ、表示の一時停止、チャプタの頭出し等)は、上述したように、マイク150から入力される音声信号(実施者Pの音声等)に基づいて制御される(音声制御工程)。   At the time of the implementation process according to the present embodiment, image information (corresponding to “physical movement information of the practitioner” of the present invention) captured by the video camera 120 and a standard diagram generated by the standard diagram generation unit 114. Are synthesized by the synthesis processing unit 130 (a composite diagram is created). The composite diagram subjected to the composite processing is transmitted from the composite processing unit 130 to the image display unit 142. In the present embodiment, the image display state (display start, display stop, display pause, chapter cueing, etc.) on the image display unit 142 is the sound input from the microphone 150 as described above. Control is performed based on a signal (such as the voice of the person P) (voice control step).

次いで、本実施形態にかかる実施工程時において、実施者Pは、装着した画像表示手段140を構成する画像表示部142を介して、この合成図を確認することによって(あるいは確認しながら、さらに実施を重ねることによって)、自分自身の動きと規範図とのずれを認識することが可能となる。より具体的には、本実施形態においては、ずれ伝達手段として機能するヘッドフォン160からの音声信号に基づき、実施者Pは、自分自身の動きと規範図とのずれを容易に認識することができる(ずれ認識工程)。したがって、実施者Pは、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを、自分自身で容易に判断することができる。   Next, at the time of the execution process according to the present embodiment, the practitioner P confirms (or confirms) this composite drawing via the image display unit 142 that constitutes the attached image display means 140. It is possible to recognize the difference between your own movement and the normative diagram. More specifically, in the present embodiment, the implementer P can easily recognize the deviation between his own movement and the reference diagram based on the audio signal from the headphone 160 functioning as the deviation transmission means. (Deviation recognition process). Therefore, the implementer P can easily determine by himself whether or not the movements of the instructor, the senior, and the like (normative technicians) can be appropriately imitated.

以下、本実施形態の作用効果をより具体的に説明する。本実施形態にかかる身体技能習得支援装置100は、第一実施形態にて説明した身体技能習得支援装置1をさらに改良させた構成であるため、第一実施形態と同様の作用効果を得ることができると共に、以下のような新たな作用効果を得ることができる。   Hereinafter, the effect of this embodiment is demonstrated more concretely. The physical skill acquisition support device 100 according to the present embodiment has a configuration obtained by further improving the physical skill acquisition support device 1 described in the first embodiment, and thus can obtain the same effects as the first embodiment. In addition, the following new effects can be obtained.

本実施形態は、実施者Pが身体動作を伴う技能を習得する際に用いられる身体技能習得支援装置100であって、実施者Pの身体動作情報を取得するビデオカメラ120と、技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報を記憶している記憶手段113と、実施者Pの頭部に装着可能な画像表示手段140とを備え、画像表示手段140(を成す画像表示部142)が、ビデオカメラ120にて得られた実施者Pの身体動作情報と、記憶手段113内の規範情報とを同時に表示可能であることを特徴としている。加えて、本実施形態にかかる身体技能習得支援装置100においては、実施者Pから発せられる音声信号をトリガーとして、画像表示手段140における表示状態の制御を行うことができる構成であることを特徴としている。   The present embodiment is a physical skill acquisition support device 100 used when the practitioner P acquires a skill involving physical motion, and includes a video camera 120 that acquires the physical motion information of the practitioner P, and a normative skill related to the skill A storage means 113 for storing normative information based on at least one of a still image and a moving image of the person, and an image display means 140 that can be worn on the head of the person P. The display unit 142) is capable of simultaneously displaying the body movement information of the practitioner P obtained by the video camera 120 and the norm information in the storage unit 113. In addition, the physical skill acquisition support device 100 according to the present embodiment is characterized in that the display state of the image display means 140 can be controlled using an audio signal emitted from the operator P as a trigger. Yes.

より具体的には、本実施形態にかかる身体技能習得支援装置100は、マイク150を有しており、このマイク150にて取得された「音声信号」に基づいて、画像表示手段140(を成す画像表示部142)で表示される規範画像(規範情報)の動きを制御可能に構成されている。つまり、本実施形態にかかる身体技能習得支援装置100は、マイク150にて取得された「音声信号」に基づいて、規範画像のスタート、ストップ、一時停止、あるいはチャプタの頭出し等が制御可能に構成されている。   More specifically, the physical skill acquisition support device 100 according to the present embodiment includes a microphone 150, and forms an image display unit 140 (based on an “audio signal” acquired by the microphone 150. The movement of the reference image (reference information) displayed on the image display unit 142) can be controlled. That is, the physical skill acquisition support device 100 according to the present embodiment can control the start, stop, pause, or chapter cueing of the reference image based on the “voice signal” acquired by the microphone 150. It is configured.

このような構成によれば、先に説明した第一実施形態にかかる身体技能習得支援装置1と同様の作用効果に加えて、次のような作用効果を得ることができる。
この第二実施形態にかかる身体技能習得支援装置100によれば、マイク150にて取得される「音声信号(実施者Pの声等)」に基づいて画像表示手段140の制御が可能であるため、実施者Pは、その身体動作を妨げられることなく、身体動作を伴う技能の習得に集中することができる。すなわち、このような構成によれば、実施者P自身のタイミングで所定の声等を発することによって、画像表示手段140(を成す画像表示部142)上に規範画像を表示等させることが可能であるため、実施者Pは、より効果的に画像表示手段140上における自身(実施者P)の画像と規範画像とを見比べながら、身体動作を伴う技能の習得を行うことができる。
According to such a configuration, in addition to the same functions and effects as those of the physical skill acquisition support device 1 according to the first embodiment described above, the following functions and effects can be obtained.
According to the physical skill acquisition support device 100 according to the second embodiment, the image display means 140 can be controlled based on the “voice signal (such as the voice of the person P)” acquired by the microphone 150. The practitioner P can concentrate on acquiring skills with physical movements without being obstructed. That is, according to such a configuration, it is possible to display the reference image on the image display means 140 (the image display unit 142 constituting the image display unit 140) by uttering a predetermined voice or the like at the timing of the operator P himself / herself. Therefore, the practitioner P can learn the skills associated with the body movement while comparing the image of the user (practitioner P) with the reference image on the image display unit 140 more effectively.

また、本実施形態にかかる身体技能習得支援装置100は、身体動作情報と規範情報とを比較検討する映像マッチング部118(比較検討手段)と、この映像マッチング部118にて、身体動作情報と規範情報との間に生じているずれを検出し、このずれの大きさに応じて、実施者Pの聴覚を刺激することにより、ずれを実施者Pに伝達するヘッドフォン160(ずれ伝達手段)とが設けられていることを特徴としている。   In addition, the physical skill acquisition support device 100 according to the present embodiment includes a video matching unit 118 (comparison study unit) for comparing and examining the body motion information and the norm information, and the body matching information and the norm in the video matching unit 118. A headphone 160 (displacement transmission means) that transmits the deviation to the practitioner P by detecting the deviation occurring between the information and stimulating the auditory sense of the practitioner P according to the magnitude of the deviation. It is characterized by being provided.

このような構成によれば、先に説明した作用効果に加えて、次のような作用効果を得ることができる。
この身体技能習得支援装置100によれば、映像マッチング部118(比較検討手段)にて得られる「ずれ検知信号」に基づいてヘッドフォン160(ずれ伝達手段)を作動させることによって、実施者Pに対して規範画像(規範情報)との「ずれ」を伝達するように構成されているため、実施者Pはより客観的に身体動作を伴う技能の習得状態を認識することができる。
本実施形態においては、ヘッドフォン160を用いてずれ伝達手段が構成されており、例えば、実施者Pの動きが早すぎたとき、遅すぎたとき、上にずれたとき、下にずれたとき、右にずれたとき、左にずれたとき等、それぞれの「ずれ状態」に応じて、それぞれ異なる信号音が、ヘッドフォン160を介して実施者Pに伝達されるように構成されてもよい。このような構成によれば、「ずれ」が所定範囲内にある場合(すなわち、「ずれ」が無い場合(あるいは容認できる程小さい場合))、ヘッドフォン160を作動させて、規範技能者の動きを的確に再現できている旨を実施者Pに知らせることができる。この場合には、「ずれが生じている場合」と「ずれが生じていない場合」とを異なる信号音等にて実施者Pに知らせればよい。さらに、このような構成によれば、「ずれ」の大きさに応じて、異なる信号音等を実施者Pに知らせることによって、実施者Pが、身体動作を伴う技能の習得段階を把握することもできる。
According to such a configuration, in addition to the functions and effects described above, the following functions and effects can be obtained.
According to the physical skill acquisition support device 100, the headphone 160 (deviation transmission means) is operated on the basis of the “deviation detection signal” obtained by the video matching unit 118 (comparison study means). Therefore, the practitioner P can more objectively recognize the skill acquisition state involving physical movements because it is configured to transmit the “deviation” from the reference image (reference information).
In the present embodiment, the displacement transmission means is configured using the headphones 160. For example, when the operator P moves too early, too late, when shifted upward, when shifted downward, Different signal sounds may be transmitted to the practitioner P via the headphones 160 according to the respective “shift states”, such as when shifted to the right or when shifted to the left. According to such a configuration, when the “deviation” is within a predetermined range (that is, when there is no “deviation” (or when it is small enough), the headphones 160 are operated to control the movement of the reference technician. The practitioner P can be notified that the reproduction has been accurately performed. In this case, it is only necessary to notify the practitioner P of “when there is a deviation” and “when there is no deviation” with different signal sounds or the like. Furthermore, according to such a configuration, the practitioner P grasps the skill acquisition stage involving physical movements by notifying the practitioner P of different signal sounds or the like according to the magnitude of “deviation”. You can also.

ところで、本実施形態にかかる身体技能習得支援装置100を構成する映像マッチング部118(比較検討手段)は、特に何等かの構成に限定されず、ビデオカメラ120にて取得された実施者Pの身体動作情報と規範情報との比較検討処理を適切に実施可能であればよい。例えば、図5あるいは図6に示すような構成があげられる。   By the way, the video matching unit 118 (comparison study means) that constitutes the physical skill acquisition support device 100 according to the present embodiment is not particularly limited to any configuration, and the body of the performer P acquired by the video camera 120. It suffices if the comparative examination process between the operation information and the norm information can be appropriately performed. For example, a configuration as shown in FIG.

図5は、本実施形態にかかる身体技能習得支援装置100を構成する映像マッチング部118(比較検討手段)の第一実施例を示すフローチャートである。本実施形態にかかる映像マッチング部118においては、例えば、この図5に示すようなフローチャートに基づいて、規範情報と身体動作情報との比較検討が行われる。以下、具体的に説明する。   FIG. 5 is a flowchart showing a first example of the video matching unit 118 (comparison study means) constituting the physical skill acquisition support device 100 according to the present embodiment. In the video matching unit 118 according to the present embodiment, for example, based on a flowchart as shown in FIG. This will be specifically described below.

本実施形態(の第一実施例)においては、まず、ステップS501に示すように、ビデオカメラ120にて取得されたユーザー映像(実施者Pの身体動作情報)の二値化処理が行われる(二値化処理工程)。次いで、その二値化処理された身体動作情報の各部(上辺、下辺、左辺、右辺)についてソーベルフィルタ処理が行われる(ソーベルフィルタ処理工程)(ステップS511,ステップS521,ステップS531,ステップS541)。ここで、本実施形態においては、身体動作情報の各部に関するソーベルフィルタ処理(S511,S521,S531,S541)が、同時に行われる。   In the present embodiment (first example thereof), first, as shown in step S501, binarization processing of a user video (physical motion information of the person P performed by the user P) acquired by the video camera 120 is performed ( Binarization process). Next, the Sobel filter processing is performed for each part (upper side, lower side, left side, right side) of the binarized body movement information (Sobel filter processing step) (Step S511, Step S521, Step S531, Step S541) ). Here, in this embodiment, the Sobel filter process (S511, S521, S531, S541) regarding each part of body movement information is performed simultaneously.

次いで、本実施形態においては、身体動作情報の各部(上辺、下辺、左辺、右辺)が、規範映像(規範情報)とマッチングしているかどうかの判断が行われる(マッチング判断処理工程)(ステップS512,ステップS522,ステップS532,ステップS542)。このマッチング判断処理工程(S512,S522,S532,S542)においては、身体動作情報の各部が規範情報とマッチングしていない場合(ずれが生じている場合、すなわち各ステップにて「No」の場合)には、それぞれ、「上にずれた」(ステップS513)、「下にずれた」(ステップS523)、「左にずれた」(ステップS533)、「右にずれた」(ステップS543)との信号が実施者Pに伝達される(ずれ信号伝達工程)。   Next, in the present embodiment, it is determined whether or not each part (upper side, lower side, left side, right side) of the body motion information matches the reference video (normative information) (matching determination processing step) (step S512). , Step S522, Step S532, Step S542). In this matching determination processing step (S512, S522, S532, S542), when each part of the body movement information is not matched with the norm information (when there is a deviation, that is, when “No” at each step). Are “shifted upward” (step S513), “shifted downward” (step S523), “shifted left” (step S533), and “shifted right” (step S543). The signal is transmitted to the practitioner P (shift signal transmission step).

本実施形態において、実施者Pに対するずれ信号伝達工程は、先に説明したヘッドフォン160(ずれ伝達手段)を用いて行われる。本実施形態においては、ヘッドフォン160から異なる複数の音声を聴取可能な状態とし、ずれの箇所に応じて、異なる音声を実施者Pに伝達すべく構成することが好ましい。   In the present embodiment, the deviation signal transmission process for the practitioner P is performed using the headphone 160 (deviation transmission means) described above. In the present embodiment, it is preferable that a plurality of different sounds can be heard from the headphones 160, and different sounds are transmitted to the practitioner P depending on the location of the shift.

図6は、本実施形態にかかる身体技能習得支援装置100を構成する映像マッチング部118(比較検討手段)の第二実施例を示す概略図である。本実施形態にかかる映像マッチング部118においては、例えば、この図6に示すような構成に基づいて、規範情報と身体動作情報との比較検討が行われる。以下、具体的に説明する。   FIG. 6 is a schematic diagram showing a second example of the video matching unit 118 (comparison study means) constituting the physical skill acquisition support device 100 according to the present embodiment. In the video matching unit 118 according to the present embodiment, for example, based on the configuration shown in FIG. 6, comparative examination between normative information and body movement information is performed. This will be specifically described below.

本実施形態(の第二実施例)においては、ビデオカメラ120にて取得されたユーザー映像(実施者Pの身体動作情報)と、規範映像(規範情報)とのパターンマッチングが行われる(パターンマッチング処理工程)。   In this embodiment (second example), pattern matching is performed between the user image (physical movement information of the person P performed by the user P) acquired by the video camera 120 and the normative image (normative information) (pattern matching). Processing step).

このパターンマッチング処理工程においては、予め時系列に並べられた状態で用意された規範映像(規範情報)と、取得されたユーザー映像(身体動作情報)とが比較検討される。より具体的には、習得を目指す技能開始時からの時間が測定され、ある時間(t)に取得されたユーザー映像(身体動作情報)と、その時間(t)およびその前後の時間(t−3,t−2,t−1,t+1,t+2,t+3)と間におけるパターンマッチングが行われる(図6参照)。   In this pattern matching processing step, the reference video (reference information) prepared in a state arranged in time series in advance is compared with the acquired user video (physical motion information). More specifically, the time from the start of the skill to be acquired is measured, and the user image (physical motion information) acquired at a certain time (t), the time (t), and the time before and after (t−) 3, t-2, t-1, t + 1, t + 2, t + 3) (see FIG. 6).

本実施形態においては、このような処理(比較検討処理)を行うことによって、実施者Pの動作のずれを検知することが可能であり、この際、「動きが早すぎる場合」あるいは「動きが遅すぎる場合」のずれ信号が実施者Pに伝達される(ずれ信号伝達工程)。   In this embodiment, by performing such processing (comparison study processing), it is possible to detect a shift in the action of the person P. At this time, “when the movement is too fast” or “the movement is The deviation signal “when too late” is transmitted to the person P (deviation signal transmission step).

本実施形態において、実施者Pに対するずれ信号伝達工程は、先に説明したヘッドフォン160(ずれ伝達手段)を用いて行われる。本実施形態においては、ヘッドフォン160から異なる複数の音声を聴取可能な状態とし、ずれの状態に応じて、異なる音声を実施者Pに伝達すべく構成することが好ましい。   In the present embodiment, the deviation signal transmission process for the practitioner P is performed using the headphone 160 (deviation transmission means) described above. In the present embodiment, it is preferable that a plurality of different sounds can be heard from the headphones 160, and different sounds are transmitted to the person P according to the state of deviation.

<その他の実施形態>
なお、本発明は、上記実施形態に限定されるものではなく、本発明の趣旨に適合し得る範囲で必要に応じて種々の変更を加えて実施することも可能であり、それらはいずれも本発明の技術的範囲に含まれる。
<Other embodiments>
It should be noted that the present invention is not limited to the above-described embodiment, and can be implemented with various modifications as necessary within the scope that can meet the spirit of the present invention. It is included in the technical scope of the invention.

上記実施形態においては、「ずれ伝達手段」がヘッドフォン部等を用いて構成される場合について説明したが、本発明はこの構成に限定されず、実施者の視覚、聴覚および触覚のいずれかを刺激することにより、身体動作のずれ状態(あるいは適合状態)を自分自身で認識可能であれば、その構成要素は特に限定されない。したがって、例えば、頭部装着型ディスプレイ(視覚)、触覚提示装置(触覚)、あるいは匂い発生装置(嗅覚)等を用いて、「ずれ伝達手段」を構成してもよい。   In the above-described embodiment, the case where the “displacement transmission means” is configured using a headphone unit or the like has been described, but the present invention is not limited to this configuration, and stimulates any one of the visual, auditory, and tactile senses of the practitioner. By doing so, the constituent elements are not particularly limited as long as they can recognize the shift state (or conformity state) of the body motion by themselves. Therefore, for example, the “deviation transmission means” may be configured using a head-mounted display (sight), a tactile sense presentation device (tactile sense), an odor generating device (olfactory sense), or the like.

例えば、本実施形態にかかる身体技能習得支援装置100を構成する画像表示手段140を用いて、「ずれ伝達手段」を構成することも可能である。すなわち、画像表示手段140を用いて、技能習得時における身体動作のずれ状態を、実施者Pに伝達するような構成としてもよい。その具体的な構成としては、例えば、ずれを判断する領域を複数段階に分割し、その判断領域に応じて、画像表示手段140を構成する画像表示部142の画面を複数に分割(二分割、四分割、八分割等)する構成があげられる。この際、分割されたそれぞれの領域については、第二実施形態(の第一実施例)にて説明した「ソーベルフィルタ処理工程」等が行われる。そして、実際に実施者Pの身体動作にずれが生じた場合には、その部位(ずれが生じた部位)が属する画面の色等の表示状態を変化させることによって、実施者Pに対し、ずれが生じたことが伝達される構成としてもよい。   For example, it is possible to configure the “deviation transmission unit” using the image display unit 140 that configures the physical skill acquisition support device 100 according to the present embodiment. That is, it is good also as a structure which transmits the deviation state of the body motion at the time of skill acquisition to the implementer P using the image display means 140. FIG. As a specific configuration thereof, for example, an area for determining a deviation is divided into a plurality of stages, and the screen of the image display unit 142 constituting the image display unit 140 is divided into a plurality of (two-divided, (4 divisions, 8 divisions, etc.). At this time, for each of the divided areas, the “Sobel filter processing step” described in the second embodiment (first example) is performed. When the body movement of the practitioner P is actually shifted, the shift of the display state such as the color of the screen to which the portion (the portion where the shift has occurred) is changed. It is good also as a structure which is transmitted that this has occurred.

ここで、図7は、本発明の他の実施形態にかかる身体技能習得支援装置を構成する画像表示部の表示例の概略図を示したものである。ここで、画像表示部の基本的な構成は第二実施形態と略同様であるため、この図7においても、画像表示部に対しては第二実施形態と同様の符号141が付されている。   Here, FIG. 7 shows a schematic diagram of a display example of an image display unit constituting a physical skill acquisition support device according to another embodiment of the present invention. Here, since the basic configuration of the image display unit is substantially the same as that of the second embodiment, also in FIG. 7, the same reference numeral 141 as that of the second embodiment is attached to the image display unit. .

この図7に示すように、本実施形態においては、例えば、画像表示部142が八つの領域(左第一分割領域L1〜左第四分割領域L4,右第一分割領域R1〜右第四分割領域R4)に分割される。本実施形態によれば、このような構成に基づき、分割されたそれぞれの領域については、第二実施形態(の第一実施例)にて説明した「ソーベルフィルタ処理工程」等が行われ、実施者Pの身体動作にずれが生じた場合には、その部位(ずれが生じた部位)が属する分割領域の色等の表示状態を変化させることによって、実施者Pに対し、ずれが生じたことが伝達される。   As shown in FIG. 7, in this embodiment, for example, the image display unit 142 has eight regions (left first divided region L1 to left fourth divided region L4, right first divided region R1 to right fourth divided region). Divided into regions R4). According to the present embodiment, based on such a configuration, for each of the divided areas, the “Sobel filter processing step” described in the second embodiment (first example thereof) is performed, When a deviation occurs in the body movement of the practitioner P, the deviation occurs with respect to the practitioner P by changing the display state of the color or the like of the divided area to which the part (the part where the deviation occurs) belongs. That is communicated.

また、本実施形態にかかる身体技能習得支援装置1,100の構成要素である画像表示手段40,140を「ずれ伝達手段」として用いる場合、例えば、「ずれ」が許容範囲内であれば画面全体が「通常の色」(通常の画像のまま)で、「ずれ」が許容範囲を超えて発生した場合には画面全体が「赤色」に変化し、「ずれ」が殆どなく非常に良好な状態であれば画面全体が「青色」に変化するような構成としてもよい。   Further, when the image display means 40 and 140 that are constituent elements of the physical skill acquisition support devices 1 and 100 according to the present embodiment are used as “deviation transmitting means”, for example, if the “deviation” is within an allowable range, the entire screen is displayed. Is “normal color” (normal image), and if “deviation” occurs beyond the allowable range, the entire screen changes to “red”, and there is almost no “deviation” and it is very good. If so, the entire screen may be changed to “blue”.

さらに、上記実施形態においては、記憶手段13,113に規範原図が格納されている場合について説明したが、本発明はこの構成に限定されない。つまり、記憶手段13,113に格納されている情報は、実施者P自身の身体動作情報との対比が可能な「画像情報」であれば、その構成は特に限定されない。したがって、例えば、記憶手段13,113に格納されている情報は、はじめから輪郭線等が強調された「画像情報」(規範情報)や、単に輪郭線と中心線のみからなる「画像情報」(規範情報)等であってもよい。   Furthermore, in the above-described embodiment, the case where the reference original drawing is stored in the storage units 13 and 113 has been described, but the present invention is not limited to this configuration. That is, the information stored in the storage means 13 and 113 is not particularly limited as long as it is “image information” that can be compared with the physical motion information of the person P. Therefore, for example, the information stored in the storage means 13 and 113 includes “image information” (normative information) in which outlines and the like are emphasized from the beginning, and “image information” (only image lines and center lines) ( Normative information).

また、上記実施形態においては、「習得を望む技能」が「ゴルフ」である場合について説明したが、本発明はこの構成に限定されない。つまり、実施者Pが画像表示手段40を装着した状態で実施可能な技能(スポーツ、舞踊、各種作業等)であれば、その種類は特に限定されない。したがって、例えば、弓道等の他のスポーツの技術習得(あるいは技術向上)のために、上記実施形態に係る身体技能習得支援装置1を用いてもよい。   In the above-described embodiment, the case where the “skill to be acquired” is “golf” has been described, but the present invention is not limited to this configuration. That is, the type is not particularly limited as long as it is a skill (sports, dance, various work, etc.) that can be performed with the person P wearing the image display means 40. Therefore, for example, the physical skill acquisition support device 1 according to the above-described embodiment may be used for acquiring techniques (or improving techniques) for other sports such as archery.

これまで、身体動作を伴う何等かの技能(スポーツ、ダンス、舞踊、各種作業等)を習得しようとする場合、指導者あるいは上級者等の「動きを真似る」ための有効な装置および方法は開示されていなかった。
しかしながら、本発明によれば、上述した実施形態等に示した具体的な構成を有することによって、指導者や上級者等(規範技能者)の動きを適切に真似ることができているか否かを実施者が自分自身で容易に判断することが可能であって、比較的容易に技能の習得効果を高めることができる、身体技能習得支援装置および身体技能習得支援方法を得ることができる。すなわち、本発明にかかる身体技能習得支援装置および身体技能習得支援方法によれば、比較的容易且つ効果的に、身体動作を伴う技能を習得することができる。
より具体的には、スポーツや伝統舞踊は勿論のこと、溶接などの産業分野での技術習得、看護士や理学療法士が患者へのサポートを行うときの動作、日常の立ち居振る舞い(歩行姿勢や礼節の動き等)、茶道のお点前、語学の発話(口の動き)等の種々の身体動作を伴う技能を習得することができる。
So far, effective devices and methods for "simulating movement" of a leader or an advanced person are disclosed when trying to acquire any skill (sports, dance, dance, various work, etc.) that involves physical movement. Was not.
However, according to the present invention, it is determined whether or not the movements of leaders and advanced persons (normative technicians) can be appropriately imitated by having the specific configurations shown in the above-described embodiments and the like. It is possible to obtain a physical skill acquisition support device and a physical skill acquisition support method that can be easily determined by the practitioner and that can increase the skill acquisition effect relatively easily. That is, according to the physical skill acquisition support device and the physical skill acquisition support method according to the present invention, it is possible to acquire a skill involving physical movement relatively easily and effectively.
More specifically, not only sports and traditional dance, but also technical acquisition in industrial fields such as welding, behavior when nurses and physical therapists provide support to patients, daily standing behavior (walking posture and You can learn skills with various body movements such as ceremonial movements, tea ceremony, language utterances (mouth movements).

1…身体技能習得支援装置
10…パーソナルコンピュータ(PC)
10A…PC本体部
11…キーボード
12…入力部
13…記憶手段
14…規範図生成部
20…ビデオカメラ(撮影手段)
30…合成処理部
40…画像表示手段
41…装着部(眼鏡状に構成された装着部)
42…画像表示部(ヘッドマウントディスプレイ)
100…身体技能習得支援装置
110…パーソナルコンピュータ(PC)
110A…PC本体部
111…キーボード
112…パラメーター入力部(入力部)
113…記憶手段
114…規範図生成部
115…ユーザー映像処理部
116…音声処理部
117…映像制御信号生成部
118…映像マッチング部
119…指示音発生部
120…ビデオカメラ(撮影手段)
130…合成処理部
140…画像表示手段
141…装着部(眼鏡状に構成された装着部)
142…画像表示部(ヘッドマウントディスプレイ)
150…マイク(音声入力部)
160…ヘッドフォン
G0…規範原図
G1…規範図
1 ... Physical skill acquisition support device 10 ... Personal computer (PC)
DESCRIPTION OF SYMBOLS 10A ... PC main-body part 11 ... Keyboard 12 ... Input part 13 ... Memory | storage means 14 ... Reference | standard figure production | generation part 20 ... Video camera (photographing means)
DESCRIPTION OF SYMBOLS 30 ... Composition process part 40 ... Image display means 41 ... Wearing part (wearing part comprised by spectacles shape)
42 ... Image display (head mounted display)
100 ... Physical skill acquisition support device 110 ... Personal computer (PC)
110A ... PC body 111 ... Keyboard 112 ... Parameter input part (input part)
DESCRIPTION OF SYMBOLS 113 ... Memory | storage means 114 ... Reference | standard figure production | generation part 115 ... User video processing part 116 ... Audio | voice processing part 117 ... Video control signal generation part 118 ... Video | video matching part 119 ... Instruction sound generation part 120 ... Video camera (shooting means)
130 ... Composition processing unit 140 ... Image display means 141 ... Mounting part (wearing part configured in glasses)
142 ... Image display unit (head mounted display)
150 ... Microphone (voice input unit)
160 ... Headphones G0 ... Original figure G1 ... Normal figure

Claims (6)

実施者が身体動作を伴う技能を習得する際に用いられる身体技能習得支援装置であって、
前記実施者の身体動作情報を取得する撮影手段と、
前記技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報を記憶している記憶手段と、
前記実施者の頭部に装着可能な画像表示手段とを備え、
前記画像表示手段が、前記撮影手段にて得られた前記身体動作情報と、前記記憶手段内の前記規範情報とを同時に表示可能である
ことを特徴とする身体技能習得支援装置。
A physical skill acquisition support device used when an implementer acquires a skill involving physical movement,
Photographing means for obtaining the body movement information of the practitioner;
Storage means for storing normative information based on at least one of a still image and a moving image of a normative technician regarding the skill;
Image display means that can be mounted on the head of the practitioner,
The physical skill acquisition support device characterized in that the image display means can simultaneously display the body movement information obtained by the photographing means and the normative information in the storage means.
前記実施者から発せられる音声信号をトリガーとして、前記画像表示手段における表示状態の制御を行うことができる
請求項1または2に記載の身体技能習得支援装置。
The physical skill acquisition support device according to claim 1, wherein the display state of the image display unit can be controlled using a voice signal emitted from the practitioner as a trigger.
前記身体動作情報と前記規範情報とを比較検討する比較検討手段と、
前記比較検討手段にて、前記身体動作情報と前記規範情報との間に生じているずれを検出し、前記ずれの大きさに応じて、前記実施者の視覚、聴覚および触覚のいずれかを刺激することにより、前記ずれの状態を前記実施者に伝達するずれ伝達手段とが設けられている
請求項1または2に記載の身体技能習得支援装置。
Comparative examination means for comparing and examining the body movement information and the norm information;
The comparison and examination means detects a deviation occurring between the body movement information and the normative information, and stimulates one of the visual, auditory, and tactile senses of the practitioner according to the magnitude of the deviation. 3. The physical skill acquisition support device according to claim 1, further comprising a displacement transmission unit configured to transmit the state of the displacement to the practitioner.
前記画像表示手段が、装着部と画像表示部とを有し、
前記装着部が、眼鏡状に構成され、
前記画像表示部が、眼鏡状に構成された前記装着部における右目あるいは左目のいずれか一方の近傍に設けられている
請求項1から3のいずれか1項に記載の身体技能習得支援装置。
The image display means has a mounting portion and an image display portion,
The mounting portion is configured in a glasses shape,
The physical skill acquisition support device according to any one of claims 1 to 3, wherein the image display unit is provided in the vicinity of one of a right eye and a left eye in the wearing unit configured in glasses.
前記規範情報が、輪郭線にて構成された静止画像および輪郭線にて構成された動画像の少なくとも一方である
請求項1から4のいずれか1項に記載の身体技能習得支援装置。
The physical skill acquisition support device according to any one of claims 1 to 4, wherein the normative information is at least one of a still image composed of contour lines and a moving image composed of contour lines.
実施者が身体動作を伴う技能を習得する際に用いられる身体技能習得支援方法であって、
前記実施者の身体動作中における身体動作情報を取得する身体動作情報取得工程と、
前記身体動作中に、前記実施者が、前記身体動作情報と、前記技能に関する規範技能者の静止画像および動画像の少なくとも一方に基づく規範情報とを、視覚的に同時に認識可能である同時画像認識工程とを備えた
ことを特徴とする身体技能習得支援方法。
A physical skill acquisition support method used when an implementer acquires a skill involving physical movement,
A body motion information acquisition step of acquiring body motion information during the body motion of the practitioner;
Simultaneous image recognition that allows the practitioner to visually recognize simultaneously the body motion information and normative information based on at least one of a still image and a moving image of the normative technician regarding the skill during the body motion A physical skill acquisition support method characterized by comprising a process.
JP2010016739A 2010-01-28 2010-01-28 Physical skill acquisition support device Expired - Fee Related JP5761730B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010016739A JP5761730B2 (en) 2010-01-28 2010-01-28 Physical skill acquisition support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010016739A JP5761730B2 (en) 2010-01-28 2010-01-28 Physical skill acquisition support device

Publications (2)

Publication Number Publication Date
JP2011152333A true JP2011152333A (en) 2011-08-11
JP5761730B2 JP5761730B2 (en) 2015-08-12

Family

ID=44538725

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010016739A Expired - Fee Related JP5761730B2 (en) 2010-01-28 2010-01-28 Physical skill acquisition support device

Country Status (1)

Country Link
JP (1) JP5761730B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015039238A (en) * 2014-11-10 2015-02-26 カシオ計算機株式会社 Image processing apparatus, image processing method and program
JP2015229052A (en) * 2014-06-06 2015-12-21 セイコーエプソン株式会社 Head mounted display device, control method for the same, and computer program
JP2016120297A (en) * 2010-11-05 2016-07-07 ナイキ イノベイト セー. フェー. Method and system for automated personal training
US9466110B2 (en) 2012-03-21 2016-10-11 Casio Computer Co., Ltd. Image processing device that analyzes motion of object
JP2017196099A (en) * 2016-04-26 2017-11-02 公立大学法人埼玉県立大学 Superior limb exercise learning apparatus
JP2018149315A (en) * 2018-04-24 2018-09-27 株式会社ユピテル Sway detector and sway detection program
CN109919404A (en) * 2017-12-12 2019-06-21 富士施乐株式会社 Information processing unit
JP2019166238A (en) * 2018-03-26 2019-10-03 株式会社エヌ・ティ・ティ・データ Operation simulation support system and device

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08215177A (en) * 1995-02-08 1996-08-27 Fujitsu Ltd Exercise support system and exercise support method
JPH1043349A (en) * 1996-08-08 1998-02-17 Tokico Ltd Swing diagnostic equipment
JP2005034195A (en) * 2003-07-15 2005-02-10 Canon Inc Lesson support system and method
JP2005198818A (en) * 2004-01-15 2005-07-28 Ritsumeikan Learning supporting system for bodily motion and learning supporting method
JP2005237494A (en) * 2004-02-24 2005-09-08 Nihon Knowledge Kk Actual action analysis system and program
JP2006302122A (en) * 2005-04-22 2006-11-02 Nippon Telegr & Teleph Corp <Ntt> Exercise support system, user terminal therefor and exercise support program
JP2007236557A (en) * 2006-03-07 2007-09-20 Konami Sports & Life Co Ltd Training apparatus
JP2008086638A (en) * 2006-10-04 2008-04-17 Konami Sports & Life Co Ltd Exercise motion evaluation system, exercise motion evaluation method, and program thereof
JP2009225869A (en) * 2008-03-19 2009-10-08 Hitachi Ltd Training support system and method
JP2009247529A (en) * 2008-04-04 2009-10-29 Yamaha Corp Exercise evaluation apparatus and program

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08215177A (en) * 1995-02-08 1996-08-27 Fujitsu Ltd Exercise support system and exercise support method
JPH1043349A (en) * 1996-08-08 1998-02-17 Tokico Ltd Swing diagnostic equipment
JP2005034195A (en) * 2003-07-15 2005-02-10 Canon Inc Lesson support system and method
JP2005198818A (en) * 2004-01-15 2005-07-28 Ritsumeikan Learning supporting system for bodily motion and learning supporting method
JP2005237494A (en) * 2004-02-24 2005-09-08 Nihon Knowledge Kk Actual action analysis system and program
JP2006302122A (en) * 2005-04-22 2006-11-02 Nippon Telegr & Teleph Corp <Ntt> Exercise support system, user terminal therefor and exercise support program
JP2007236557A (en) * 2006-03-07 2007-09-20 Konami Sports & Life Co Ltd Training apparatus
JP2008086638A (en) * 2006-10-04 2008-04-17 Konami Sports & Life Co Ltd Exercise motion evaluation system, exercise motion evaluation method, and program thereof
JP2009225869A (en) * 2008-03-19 2009-10-08 Hitachi Ltd Training support system and method
JP2009247529A (en) * 2008-04-04 2009-10-29 Yamaha Corp Exercise evaluation apparatus and program

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016120297A (en) * 2010-11-05 2016-07-07 ナイキ イノベイト セー. フェー. Method and system for automated personal training
US11915814B2 (en) 2010-11-05 2024-02-27 Nike, Inc. Method and system for automated personal training
US9466110B2 (en) 2012-03-21 2016-10-11 Casio Computer Co., Ltd. Image processing device that analyzes motion of object
JP2015229052A (en) * 2014-06-06 2015-12-21 セイコーエプソン株式会社 Head mounted display device, control method for the same, and computer program
JP2015039238A (en) * 2014-11-10 2015-02-26 カシオ計算機株式会社 Image processing apparatus, image processing method and program
JP2017196099A (en) * 2016-04-26 2017-11-02 公立大学法人埼玉県立大学 Superior limb exercise learning apparatus
CN109919404A (en) * 2017-12-12 2019-06-21 富士施乐株式会社 Information processing unit
US11295459B2 (en) * 2017-12-12 2022-04-05 Fujifilm Business Innovation Corp. Information processing apparatus
JP2019166238A (en) * 2018-03-26 2019-10-03 株式会社エヌ・ティ・ティ・データ Operation simulation support system and device
JP2018149315A (en) * 2018-04-24 2018-09-27 株式会社ユピテル Sway detector and sway detection program

Also Published As

Publication number Publication date
JP5761730B2 (en) 2015-08-12

Similar Documents

Publication Publication Date Title
JP5761730B2 (en) Physical skill acquisition support device
CN105301771B (en) Head-mounted display device, detection device, control method, and computer program
US11861062B2 (en) Blink-based calibration of an optical see-through head-mounted display
EP2368168B1 (en) Hands-free pointer system
US20170221379A1 (en) Information terminal, motion evaluating system, motion evaluating method, and recording medium
US8094090B2 (en) Real-time self-visualization system
CN108519676A (en) A kind of wear-type helps view apparatus
US10175935B2 (en) Method of virtual reality system and implementing such method
US20150004581A1 (en) Interactive physical therapy
US20040152058A1 (en) Video instructional system and method for teaching motor skills
US20090046140A1 (en) Mobile Virtual Reality Projector
US20030044757A1 (en) Video instructional system and method for teaching motor skills
JP7066115B2 (en) Public speaking support device and program
JP5575652B2 (en) Method and system for selecting display settings for rendered images
JP2006320424A (en) Action teaching apparatus and method
KR101961844B1 (en) Augment reality based occupational therapy table device for cognitive training and occupational therapy method
WO2017094356A1 (en) Video producing device, method for controlling video producing device, display system, video production control program, and computer-readable recording medium
JP2005198818A (en) Learning supporting system for bodily motion and learning supporting method
JP2016131782A (en) Head wearable display device, detection device, control method for head wearable display device, and computer program
JP2022182673A (en) Learning system and learning method
JP2012073299A (en) Language training device
JP3661173B2 (en) Binocular training device
EP2482935B1 (en) System for supporting a user to do exercises
JP6664778B1 (en) Information processing apparatus, information processing method, and program
JP2008079917A (en) Training system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130124

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131008

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131206

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140930

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141226

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20150217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150512

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150604

R150 Certificate of patent or registration of utility model

Ref document number: 5761730

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees