JP2016080752A - Medical activity training appropriateness evaluation device - Google Patents

Medical activity training appropriateness evaluation device Download PDF

Info

Publication number
JP2016080752A
JP2016080752A JP2014208846A JP2014208846A JP2016080752A JP 2016080752 A JP2016080752 A JP 2016080752A JP 2014208846 A JP2014208846 A JP 2014208846A JP 2014208846 A JP2014208846 A JP 2014208846A JP 2016080752 A JP2016080752 A JP 2016080752A
Authority
JP
Japan
Prior art keywords
gaze
target
appropriateness
gaze target
estimated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014208846A
Other languages
Japanese (ja)
Inventor
高西 淳夫
Atsuo Takanishi
淳夫 高西
石井 裕之
Hiroyuki Ishii
裕之 石井
照永 千原
Terunaga Chihara
照永 千原
保 片山
Tamotsu Katayama
保 片山
健一 布施
Kenichi Fuse
健一 布施
良太 渋沢
Ryota Shibusawa
良太 渋沢
仁田 壮一
Soichi Nitta
壮一 仁田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KYOTO KAGAKU KK
Waseda University
Original Assignee
KYOTO KAGAKU KK
Waseda University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KYOTO KAGAKU KK, Waseda University filed Critical KYOTO KAGAKU KK
Priority to JP2014208846A priority Critical patent/JP2016080752A/en
Publication of JP2016080752A publication Critical patent/JP2016080752A/en
Pending legal-status Critical Current

Links

Landscapes

  • Instructional Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a medical activity training appropriateness evaluation device capable of quantitatively evaluating whether or not the consciousness of a trainee in a medical training is concentrated on an appropriate object at an appropriate timing or whether or not his or her consciousness is lost due to habituation or the like during training.SOLUTION: A medical activity training appropriateness evaluation device includes: a gaze object estimation mechanism 2 for estimating the position of an estimated gaze object gazed by a trainee PR in a medical activity training by a medical simulator S simulating a part or the whole of a human body; a reference gaze object position storage part 3 for storing the positions of a plurality of reference gaze objects set as objects to be gazed by the trainee PR during the medical activity training; and an appropriateness evaluation part 4 for evaluating the appropriateness of the gaze object of the trainee PR on the basis of a degree of matching between the position of the estimated gaze object and the positions of the plurality of reference gaze objects.SELECTED DRAWING: Figure 2

Description

本発明は、医療教育における、医療用シミュレータを利用した医療行為訓練の適切さを評価する装置に関するものである。   The present invention relates to an apparatus for evaluating the appropriateness of medical practice training using a medical simulator in medical education.

医療従事者は、患者に対して何らかの医療行為を行う際、診断や手技の種類や患者の状態に応じて、適切に自身の意識する対象部位を選択する必要がある。例えば、医療従事者は問診を行う際は患者の表情に意識を集中させる必要があり、注射等の侵襲的な手技を行う際は患者の腕等の対象部位に意識を集中させる必要がある。   When a medical worker performs some medical action on a patient, it is necessary to appropriately select a target site that he / she is conscious of according to the type of diagnosis or procedure and the patient's condition. For example, a medical staff needs to concentrate consciousness on the patient's facial expression when conducting an inquiry, and needs to concentrate consciousness on a target site such as the patient's arm when performing an invasive procedure such as injection.

例えば、特許文献1では医師や救急救命士等により行われる気管挿管の手技自体を客観的に評価することができる医療用シミュレータの一種である気管挿管訓練装置が開示されている。このような医療用シミュレータを用いることにより、医療行為が行われる患者の対象部位に意識を集中させるための医療行為訓練を行うことができる。   For example, Patent Document 1 discloses a tracheal intubation training apparatus that is a type of medical simulator that can objectively evaluate a tracheal intubation technique itself performed by a doctor, a paramedic, or the like. By using such a medical simulator, medical practice training for concentrating consciousness on a target site of a patient on whom medical practice is performed can be performed.

さらに、このような医療教育における医療用シミュレータを利用した医療行為訓練は、省力化や自己学習、生体では繰り返し訓練できない手技の習得、統一的で公正な評価が繰り返し可能である点など、さまざまなメリットもあるため、OSCE(Objective Structured Clinical Examination:客観的臨床能力試験)での利用など、医療教育の現場で広く行われるようになってきている。   Furthermore, medical practice training using medical simulators in such medical education includes various tasks such as labor saving, self-learning, acquisition of techniques that cannot be repeated repeatedly in the living body, and the ability to repeat uniform and fair evaluations. Due to its merit, it is becoming widely used in medical education such as OSCE (Objective Structured Clinical Examination).

ところで、医療用シミュレータを用いた医療訓練と実際の生体による臨床現場とを比較した場合、医療用シミュレータを用いた医療行為訓練にはリアリティの欠如や生体としての反応がないと言った欠点も存在している。これらの欠点が表れた具体的な例として、実習者が医療用シミュレータに慣れてきた場合、操作が雑になりがちな点が挙げられる。これは、実習者の意識が集中すべき時に対象に集中していない状態と言える。   By the way, when comparing medical training using a medical simulator and clinical practice using an actual living body, medical practice training using a medical simulator also has drawbacks such as lack of reality and lack of response as a living body. doing. As a specific example in which these drawbacks appear, there is a point that the operation tends to be complicated when the trainee gets used to the medical simulator. This can be said to be a situation where the consciousness of the practitioner is not concentrated on the subject when it should be concentrated.

このようなリアリティの欠如に起因して施術者が対象部位に集中できなくなる問題を解決するために、例えば特許文献2では、診療器具を備えた器具ホルダと、診療を受ける患者を模した擬似患者体と、その擬似患者体が配置される診療台とを備えた医療用実習装置において、診療台や診療器具に関する検出信号を取り込み、前記検出信号に基づいて擬似患者体の表情や動作などを変化させるように構成したものが開示されている。さらに、この医療用実習装置は疑似患者体の表情や動作の変化を撮像してあり、実習後に実習者が閲覧できるように構成されている。すなわち、この医療用実習装置では、実習中又は実習後において実習者の行為に応じた疑似患者体の変化を施術者に知覚させることができる。   In order to solve the problem that the practitioner cannot concentrate on the target site due to such lack of reality, in Patent Document 2, for example, an instrument holder provided with a medical instrument and a pseudo patient imitating a patient receiving medical care In a medical training device comprising a body and a clinical table on which the simulated patient body is placed, a detection signal relating to the clinical table and a medical instrument is captured, and the facial expression and operation of the simulated patient body are changed based on the detection signal What is comprised so that it may be made to disclose is disclosed. Furthermore, this medical training device is configured to image changes in facial expression and motion of the pseudo-patient body, and can be viewed by the trainee after the training. That is, in this medical training apparatus, the practitioner can be made to perceive the change of the pseudo patient body according to the practitioner's action during the training or after the training.

一方で、医療従事者は患者のある対象部位にのみ過度に集中するのを避けつつ、適当な周期で周囲の状況にも意識を振り向ける事も求められる。このような意識の選択的切り替えは、医療従事者における重要な能力のひとつとされており、医療用シミュレータ等を用いた擬似臨床場面においてこの能力を評価することが求められている。   On the other hand, medical staff are also required to turn their consciousness to the surrounding situation at an appropriate cycle while avoiding excessive concentration only on a target site of a patient. Such selective switching of consciousness is regarded as one of the important abilities of medical staff, and it is required to evaluate this ability in a pseudo clinical scene using a medical simulator or the like.

しかしながら、特許文献1のような医療用シミュレータを用いた医療訓練は患者のある部位について意識を集中させることのみが意図されているため、医療用シミュレータで医療訓練を行っている実習者の意識の選択的切り替え能力を定量的に評価するための技術や方法は現状存在しない。   However, since the medical training using the medical simulator as in Patent Document 1 is intended only to concentrate the consciousness on a certain part of the patient, the consciousness of the practitioner who performs the medical training with the medical simulator There are currently no techniques or methods for quantitatively evaluating selective switching ability.

さらに、医療教育における、医療用シミュレータを利用した医療行為訓練の目的は、単なる手技の習得にあるのではなく、患者に対して真摯に向きあう医療従事者を育成することにある。   Furthermore, the purpose of medical practice training using a medical simulator in medical education is not just to acquire a technique, but to nurture medical personnel who face the patient seriously.

しかしながら、特許文献2の医療用実習装置は疑似患者体の表情や動作の変化が動画として撮像されているが、実習者自身は撮像されていないことから、どのような行為を行っているときに実習者の集中が途切れているのか、あるいは集中しているべき箇所に集中できていないのか、等を定量的に評価したり、実習者自身が確認したりするのは難しい。   However, in the medical training device of Patent Document 2, changes in facial expression and motion of the pseudo patient body are captured as a moving image, but since the trainee himself is not captured, what kind of action is being performed It is difficult to quantitatively evaluate whether the concentration of the practitioner is interrupted or whether it is not concentrated at the point where it should be concentrated, or to confirm by the practitioner himself.

特許第4993971号公報Japanese Patent No. 4993971 WO2008/023464号公報WO2008 / 023464 Publication

本発明は上述したような問題を一挙に解決できるようになされたものであり、医療訓練を行っている実習者が、適切なタイミングで適切な対象に意識が集中できているかどうかや、実習中に慣れ等によって集中が途切れていないかどうか等を定量的に評価することができる医療行為訓練適切度評価装置を提供する事を目的とする。   The present invention is designed to solve the above-described problems all at once, and whether a practitioner who is performing medical training can concentrate on an appropriate subject at an appropriate timing, It is an object of the present invention to provide a medical practice training appropriateness evaluation device capable of quantitatively evaluating whether or not concentration is interrupted due to familiarity.

すなわち、本発明の医療行為訓練適切度評価装置は、人体の一部又は全部を模した医療用シミュレータにより医療行為訓練を行っている実習者が注視している対象である推定注視対象の位置を推定する注視対象推定機構と、前記医療行為訓練中に実習者が注視するべき対象として設定された複数の基準注視対象の位置を記憶する基準注視対象位置記憶部と、前記推定注視対象の位置と、複数の前記基準注視対象の位置との一致度に基づいて実習者の注視対象の適切度を評価する適切度評価部とを備えたことを特徴とする。   In other words, the medical practice training appropriateness evaluation device of the present invention determines the position of an estimated gaze target, which is a target that a practitioner conducting medical practice training with a medical simulator simulating part or all of the human body. Gaze target estimation mechanism for estimation, a reference gaze target position storage unit that stores a plurality of reference gaze target positions set as targets to be watched by an apprentice during the medical practice training, and a position of the estimated gaze target And an appropriateness evaluation unit that evaluates the appropriateness of the gaze target of the trainee based on the degree of coincidence with the positions of the plurality of reference gaze targets.

このようなものであれば、前記推定注視対象が実習者の注視対象を推定して、前記適切度評価部が前記推定注視対象の位置と、実習者が注視するべき対象である複数の前記基準注視対象の位置との一致度に基づいて実習者の注視対象の適切度を評価するように構成されているので、医療用シミュレータを用いた医療行為訓練中の実習者が、注視すべき基準注視対象に対して適切に注視できているかどうかを定量的に評価することができる。   In such a case, the estimated gaze target estimates the gaze target of the apprentice, and the appropriateness evaluation unit includes the position of the estimated gaze target and a plurality of the criteria that are the targets that the practitioner should gaze at Since it is configured to evaluate the appropriateness of the practitioner's gaze target based on the degree of coincidence with the position of the gaze target, the practitioner who is practicing medical practice using the medical simulator should pay attention to the reference gaze It is possible to quantitatively evaluate whether or not the subject can be watched appropriately.

より具体的には、前記推定注視対象の位置と複数の前記基準注視対象の位置との一致度が低い場合には、実習者は医療行為訓練中に注視すべき対象に意識が適切に向けられていない、あるいは、医療用シミュレータによる医療行為訓練が慣れによっておろそかになっていると考えられるので、このような場合には適切度を低く評価するように構成すればよい。逆に一致度が高い場合には、複数の注視すべき対象に対して実習者は意識を向けることができていると考えられるので前記適切度評価部が適切度は高いと評価するように構成すればよい。   More specifically, when the degree of coincidence between the position of the estimated gaze target and the positions of the plurality of reference gaze targets is low, the practitioner is appropriately focused on the target to be watched during medical practice training. In such a case, the degree of appropriateness may be evaluated as low. On the contrary, when the degree of coincidence is high, it is considered that the apprentice is able to turn the consciousness toward a plurality of objects to be watched, so the appropriateness evaluation unit evaluates that the appropriateness is high do it.

このように実習者の意識の振り分け方や集中度等の従来定量的に評価する事が難しかった対象についても評価することができ、実習者に客観的な評価を与えて、医療用シミュレータを用いた医療行為訓練の訓練効果を高めることができる。   In this way, it is possible to evaluate subjects that have been difficult to evaluate quantitatively in the past, such as how to divide the consciousness of the trainee and the degree of concentration, etc., and give the trainee an objective assessment and use the medical simulator. It was possible to enhance the training effect of medical practice training.

例えば、手術等で患者の意識が無い場合は、患者だけに集中するのではなく一定の頻度でバイタルサイン表示装置を注視する事が重要である。このように患者と周囲のそれぞれに意識を適切に振り分けるための能力をより正確に評価できるようにするには、前記基準注視対象が、前記医療用シミュレータ上に設定された患者注視対象と、前記医療用シミュレータ以外の別の対象に設定された周囲注視対象とからなり、前記適切度評価部が、前記注視対象推定機構により推定された複数の前記推定注視対象の位置と、前記患者注視対象及び前記周囲注視対象のそれぞれの位置との一致度に基づいて前記適切度を評価するように構成されているものであればよい。   For example, when the patient is not conscious of surgery or the like, it is important not to concentrate only on the patient but to watch the vital sign display device at a certain frequency. Thus, in order to be able to more accurately evaluate the ability to appropriately distribute consciousness between the patient and each of the surroundings, the reference gaze object is a patient gaze object set on the medical simulator, A surrounding gaze target set as another target other than the medical simulator, and the appropriateness evaluation unit includes a plurality of estimated gaze target positions estimated by the gaze target estimation mechanism, the patient gaze target, and What is necessary is just to be comprised so that the said appropriateness may be evaluated based on a coincidence with each position of the said surrounding gaze target.

何らかの処置を行う場合は、医療従事者は処置を行う直前に患者を注視し、処置の開始に先立ち患部を注視する等、注視する順番やタイミングも重要である。このような観点についても定量的に評価できるようにするには、前記医療行為訓練が複数の行為が実習者によって順番に行われるものであり、前記基準注視対象位置記憶部が、各行為に対応させてそれぞれ設定された前記基準注視対象を記憶しており、前記適切度評価部が、各行為における前記推定注視対象の位置と前記基準注視対象の位置との一致度に基づいて前記適切度を評価するように構成されていればよい。   When some kind of treatment is performed, the medical staff pays attention to the patient immediately before performing the treatment, and attention is given to the affected area prior to the start of the treatment. In order to be able to quantitatively evaluate such a viewpoint, the medical practice training is performed by a practitioner in order, and the reference gaze target position storage unit corresponds to each act. And storing the reference gaze target set respectively, and the appropriateness evaluation unit determines the appropriateness based on the degree of coincidence between the position of the estimated gaze target and the position of the reference gaze target in each action. What is necessary is just to be comprised so that it may evaluate.

例えば、問診を行う場合は、実習者は患者に問いかけを行う期間および患者が応答する期間の間は患者を注視していることが好ましい。そこで、実習者がある対象を注視している時間が適切な長さであるかどうかについても評価できるようにするには、実習者が前記推定注視対象を注視している時間の長さである推定注視時間を推定する注視時間推定部と、前記基準注視対象を実習者が注視するべき時間の長さである基準注視時間を記憶している基準注視時間記憶部とをさらに備え、前記適切度評価部が、前記推定注視時間と、前記基準注視時間との一致度に基づいて前記適切度を評価するように構成されていればよい。   For example, when conducting an inquiry, it is preferable that the apprentice is watching the patient during the period when the patient is asked and when the patient responds. Therefore, in order to be able to evaluate whether an apprentice is gazing at a target with an appropriate length, it is the length of time that the apprentice is gazing at the estimated gaze target. A gaze time estimation unit that estimates an estimated gaze time; and a reference gaze time storage unit that stores a reference gaze time that is a length of time that an apprentice should gaze at the reference gaze target. The evaluation unit may be configured to evaluate the appropriateness based on the degree of coincidence between the estimated gaze time and the reference gaze time.

意識を患者だけでなく、周囲にも振り分けることは重要であるが、その配分が適切でないと患者の重大な変化を見落としてしまうことがあり得る。このような観点から実習者が注している対象の時間配分についても適切度の考慮に入れ、より現場に近い評価を実現できるようにするには、前記患者注視対象を実習者が見ている時間の長さである推定部位注視時間と、前記周囲注視対象を実習者が見ている時間の長さである推定周囲注視時間との比である推定注視割合を推定する注視割合推定部と、前記患者注視対象を実習者が見ているべき時間の長さである基準部位注視時間と、前記周囲注視対象を実習者が見ているべき時間の長さである基準周囲注視時間との比である基準注視割合を記憶する基準注視割合記憶部とをさらに備え、前記適切度評価部が、前記推定注視割合と前記基準注視割合との一致度に基づいて前記適切度を評価するように構成されていればよい。   Although it is important to distribute consciousness not only to the patient but also to the surroundings, if the distribution is not appropriate, significant changes in the patient can be overlooked. From this point of view, the apprentice is looking at the patient gaze target in order to take into account the appropriateness of the time distribution of the subject that the apprentice is pouring and to achieve an evaluation closer to the field. A gaze ratio estimation unit that estimates an estimated gaze ratio that is a ratio of an estimated site gaze time that is a length of time and an estimated ambient gaze time that is a length of time that an apprentice is watching the surrounding gaze target; The ratio of the reference part gaze time that is the length of time that the apprentice should watch the patient gaze target and the reference peripheral gaze time that is the length of time that the apprentice should watch the surrounding gaze target A reference gaze ratio storage unit that stores a certain reference gaze ratio, and the appropriateness evaluation unit is configured to evaluate the appropriateness based on a degree of coincidence between the estimated gaze ratio and the reference gaze ratio. It only has to be.

例えば医療行為訓練を行っている施設に予め設けられているカメラ等の装置を用いて、実習者に何も装着してもらうことなく推定注視対象を推定できるようにするには、前記注視対象推定機構が、所定の基準位置から実習者が注視可能な各対象までの位置ベクトルである注視対象位置ベクトルをそれぞれ記憶している注視対象位置ベクトル記憶部と、実習者を含むように撮像された画像データに基づいて、前記基準位置から実習者までの位置ベクトルである実習者位置ベクトルと実習者の注視している方向を示す視線単位ベクトルを算出する視線算出部と、前記注視対象位置ベクトルと、前記実習者位置ベクトルと、前記視線単位ベクトルとに基づいて実習者の前記推定注視対象を推定する視点推定部と、を備えたものであればよい。   For example, in order to be able to estimate an estimated gaze target without having a practitioner wear anything using a device such as a camera provided in advance in a facility performing medical practice training, the gaze target estimation An image captured so that the mechanism includes a gaze target position vector storage unit that stores a gaze target position vector that is a position vector from a predetermined reference position to each target that the practitioner can gaze at, and a practitioner Based on the data, a trainee position vector that is a position vector from the reference position to the trainee and a line-of-sight calculation unit that calculates a line-of-sight unit vector indicating a direction in which the trainee is gazing, and the gaze target position vector, What is necessary is just to be provided with the viewpoint estimation part which estimates the said estimation gaze target of a training person based on the said training person position vector and the said gaze unit vector.

実習者の推定注視対象を推定するための具体的な実施の態様としては、前記注視対象推定機構が、前記基準位置以外の場所に設けられ、実習者を撮像して画像データを生成する第1のカメラと、前記基準位置に設けられ、実習者を撮像して画像データを生成するとともに前記基準位置から実習者までの向き及び離間距離を検出する実習者位置検出器と、をさらに備え、前記視線算出部が、前記第1のカメラ又は実習者位置検出器の各画像データと、前記実習者位置検出器で検出された前記基準位置から実習者までの離間距離と、に基づいて前記実習者位置ベクトルと前記視線単位ベクトルを算出するように構成されているものが挙げられる。   As a specific embodiment for estimating the estimated gaze target of the trainee, the gaze target estimation mechanism is provided in a place other than the reference position, and images the trainee and generates image data. And a practitioner position detector that is provided at the reference position, images the practitioner to generate image data, and detects a direction and a separation distance from the reference position to the practitioner, and The line-of-sight calculation unit is based on the image data of the first camera or the practitioner position detector, and the distance from the reference position detected by the practitioner position detector to the practitioner. There are those configured to calculate the position vector and the line-of-sight unit vector.

実習者の推定注視対象を推定することができる具体的な実施の態様としては、前記注視対象推定機構が、実習者を撮像して画像データを生成する第1のカメラと、前記第1のカメラとは別の場所に設けられ、実習者を撮像して画像データを生成する第2のカメラと、をさらに備え、前記視線算出部が、前記第1のカメラ及び第2のカメラの各画像データと、前記第1のカメラと前記第2のカメラの離間距離と、に基づいて前記実習者位置ベクトルと前記視線単位ベクトルを算出するように構成されているものが挙げられる。このようなものであれば、2つのカメラを用意するだけで実習者の推定注視対象を推定して、実習者の注視対象の適切度を評価できる。   As a specific embodiment capable of estimating the estimated gaze target of the practitioner, the gaze target estimation mechanism captures the practitioner and generates image data, and the first camera And a second camera that captures an instructor and generates image data, and the line-of-sight calculation unit includes each image data of the first camera and the second camera. And the apprentice position vector and the line-of-sight unit vector are calculated based on the distance between the first camera and the second camera. If it is such, it will be possible to estimate the appropriate gaze target of the trainee and evaluate the appropriateness of the watch target of the trainer simply by preparing two cameras.

基準注視対象を熟練者が見ている位置に設定し、実習者が熟練者にどれほど近づけているかを評価できるようにするには、前記適切度評価部による適切度の評価が行われる評価モードと、前記基準注視対象位置記憶部に前記基準注視対象の位置を記憶させる記憶モードと、を切り替えるモード切替部をさらに備え、前記記憶部モードにおいて、前記基準注視対象位置記憶部は、前記注視対象推定機構により推定された推定注視対象の位置を前記基準注視対象の位置として記憶するように構成されていればよい。   In order to set the reference gaze target at a position where the expert is viewing and to be able to evaluate how close the practitioner is to the expert, an evaluation mode in which the appropriateness is evaluated by the appropriateness evaluation unit and , Further comprising a mode switching unit for switching between a storage mode for storing the position of the reference gaze target in the reference gaze target position storage unit, and in the storage unit mode, the reference gaze target position storage unit is configured to estimate the gaze target The position of the estimated gaze target estimated by the mechanism may be configured to be stored as the position of the reference gaze target.

本発明によれば、実習者の注視対象を推定し、その注視対象が複数の基準注視対象に振り向けられているかどうかを定量的に評価することができるので、医療用シミュレータを用いた医療行為訓練の適切さを精度よく推定することができる。   According to the present invention, it is possible to estimate a practitioner's gaze target and quantitatively evaluate whether or not the gaze target is directed to a plurality of reference gaze targets, so medical practice training using a medical simulator Can be accurately estimated.

本発明の一実施形態に係る医療行為訓練適切度評価装置の全体的な構成を示す斜視図である。1 is a perspective view showing an overall configuration of a medical practice training appropriateness evaluation device according to an embodiment of the present invention. 同実施形態における医療行為訓練適切度評価装置の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the medical practice training appropriateness evaluation apparatus in the embodiment. 同実施形態における推定注視対象の検出原理について示す模式図である。It is a schematic diagram shown about the detection principle of the estimation gaze target in the embodiment. 同実施形態における医療行為訓練適切度評価処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the medical practice training appropriateness evaluation process in the embodiment. 同実施形態における医療行為訓練適切度評価処理における空間的な一致度による適切度判定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the appropriateness determination process by the spatial coincidence in the medical practice training appropriateness evaluation process in the embodiment. 同実施形態における医療行為訓練適切度評価処理における時間的な一致度による適切度判定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the appropriateness determination process by the time coincidence in the medical practice training appropriateness evaluation process in the embodiment. 同実施形態における医療行為訓練適切度評価処理における注視対象の時間配分の一致度による適切度判定処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the appropriateness determination process by the coincidence degree of the time allocation of the gaze object in the medical practice training appropriateness evaluation process in the embodiment.

以下、本発明の一実施形態に係る医療行為訓練適切度評価装置100を、各図を参照しながら説明する。   Hereinafter, a medical practice training appropriateness evaluation apparatus 100 according to an embodiment of the present invention will be described with reference to the drawings.

本実施形態の医療行為訓練適切度評価装置100は、人体の一部又は全部を模した医療用シミュレータSを用いた医療行為訓練中の実習者PR(施術者、乃至、被教育者)の注視対象を推定し、実習者PRが患者を模した医療用シミュレータSとその周囲に対してそれぞれ適切に意識の振り分けを行えているかどうかをについて定量的に評価するものである。より具体的には、この医療行為訓練適切度評価装置100は、実習者PRの注視対象が適切な対象に適切なタイミングで向けられているかや、その注視しているタイミング、時間の長さや時間配分が適切であるかを評価し、医療行為訓練の適切度を評価するように構成してある。ここで、医療行為訓練中に実習者PRにより行われる行為は問診、触診、視診、聴診、打診、医療画像診断(超音波エコー、X線、MRI、CT、PET、その他の方法により撮像される画像に基づく診断)、各種手技等が含まれる。   The medical practice training appropriateness evaluation device 100 according to the present embodiment pays attention to a practitioner PR (practitioner or educated person) during medical practice training using a medical simulator S that imitates part or all of a human body. The target is estimated and quantitatively evaluated whether or not the apprentice PR can appropriately distribute the consciousness to the medical simulator S imitating the patient and its surroundings. More specifically, the medical practice training appropriateness evaluation device 100 determines whether or not the target of the trainee PR is directed to an appropriate target at an appropriate timing, the timing at which the user is watching, the length of time, and the time. It is configured to evaluate whether the allocation is appropriate and to evaluate the appropriateness of medical practice training. Here, the action performed by the trainee PR during the medical practice training is imaged by interrogation, palpation, visual inspection, auscultation, percussion, medical image diagnosis (ultrasonic echo, X-ray, MRI, CT, PET, other methods) Diagnosis based on images), various procedures, and the like.

図1は、医療用シミュレータSを用いた医療行為訓練が行われる医療用シミュレータ利用環境1について示している。医療用シミュレータ利用環境1は、図1に示すように人体を模した医療用シミュレータSと、医療用シミュレータSが載置される診察用ベッド1c、点滴用具一式1d、生体情報モニタ1e、各機器の制御や各種操作を行うためのコンピュータとしてタブレット端末1f等を備えており、実際の医療現場にあり、実習者PRの注視対象となり得るものが複数配置してある。なお、各機器において通信が必要なものについては無線LAN、有線LAN、その他方式は問わない近距離無線で接続してある。また、本実施形態では、医療行為訓練中の実習者PRを撮像する第1のカメラ1aが天井に設けてあり、また、医療用シミュレータSの頭部には実習者PRを撮像するとともにその距離を測定する実習者位置検出器1bが内蔵してある。   FIG. 1 shows a medical simulator utilization environment 1 in which medical practice training using the medical simulator S is performed. As shown in FIG. 1, a medical simulator utilization environment 1 includes a medical simulator S imitating a human body, a diagnostic bed 1c on which the medical simulator S is placed, an infusion device set 1d, a biological information monitor 1e, and various devices. A tablet terminal 1f and the like are provided as computers for performing control and various operations, and a plurality of devices that are in an actual medical field and can be a gaze target of the trainee PR are arranged. It should be noted that each device that requires communication is connected by a short-distance wireless connection, regardless of wireless LAN, wired LAN, or any other method. Moreover, in this embodiment, the 1st camera 1a which images the training person PR during medical practice training is provided on the ceiling, and the training person PR is imaged on the head of the medical simulator S and its distance The practitioner position detector 1b for measuring is incorporated.

そして、本実施形態の医療行為訓練適切度評価装置100は、前記第1のカメラ1aと、前記実習者位置検出器1bと、例えば前記タブレット端末1fの演算能力を利用して構成された演算機構と、から構成してある。   And the medical practice training appropriateness evaluation apparatus 100 of this embodiment is the calculation mechanism comprised using the calculation capability of the said 1st camera 1a, the said apprentice position detector 1b, and the said tablet terminal 1f, for example. It is composed of.

すなわち、図2の機能ブロック図に示すように前記第1のカメラ1a及び前記実習者位置検出器1bを具備し、実習者PRの注視対象の位置を推定する注視対象推定機構2と、前記演算機構の演算能力によって少なくとも適切度評価部4、基準注視対象位置記憶部3、注視時間推定部5、基準注視時間記憶部6、注視割合推定部7、基準注視割合記憶部8、モード切替部9としての機能を発揮するように構成してある。ここで、前記注視対象推定機構2の一部及びその他各部については、前記タブレット端末1fのメモリに格納されたプログラムが実行され、各種機器と協業することによりその機能が実現されるものである。   That is, as shown in the functional block diagram of FIG. 2, the gaze target estimation mechanism 2 that includes the first camera 1a and the trainee position detector 1b and estimates the position of the gaze target of the trainee PR, and the calculation At least the appropriateness evaluation unit 4, the reference gaze target position storage unit 3, the gaze time estimation unit 5, the reference gaze time storage unit 6, the gaze rate estimation unit 7, the reference gaze rate storage unit 8, and the mode switching unit 9 depending on the calculation capability of the mechanism. It is comprised so that the function as may be demonstrated. Here, with respect to a part of the gaze target estimation mechanism 2 and other parts, a program stored in the memory of the tablet terminal 1f is executed, and its function is realized by cooperating with various devices.

各部について詳述する。   Each part will be described in detail.

前記注視対象推定機構2は、人体の一部又は全部を模した医療用シミュレータSにより医療行為訓練を行っている実習者PRが注視している対象である推定注視対象の位置を推定するように構成してある。本実施形態では、図3の模式図に示すように第1のカメラ1a及び実習者位置検出器1bの出力に基づいて実習者PRの視線を三次元空間内の仮想視線直線として検出し、その方向にある医療用シミュレータ利用環境1中で仮想視線直線上に存在する対象物を推定するように構成してある。   The gaze target estimation mechanism 2 estimates the position of the estimated gaze target that is the target that the practitioner PR performing medical practice training with the medical simulator S imitating a part or all of the human body. It is configured. In the present embodiment, as shown in the schematic diagram of FIG. 3, the line of sight of the trainer PR is detected as a virtual line of sight in a three-dimensional space based on the outputs of the first camera 1a and the trainee position detector 1b. The object existing on the virtual line of sight in the medical simulator utilization environment 1 in the direction is estimated.

より具体的には、前記注視対象推定機構2は、図2に示すように注視対象位置ベクトル記憶部22と、前記第1のカメラ1aと、前記実習者位置検出器1bと、視線算出部21と、視点推定部23とから構成してあるハードウェアとソフトウェアからなるものである。   More specifically, the gaze target estimation mechanism 2 includes a gaze target position vector storage unit 22, the first camera 1a, the apprentice position detector 1b, and a gaze calculation unit 21 as shown in FIG. And the viewpoint estimation unit 23 and hardware and software.

前記注視対象位置ベクトル記憶部22は、所定の基準位置から実習者PRが注視可能な医療用シミュレータ利用環境1中の各対象までの位置ベクトルである注視対象位置ベクトルをそれぞれ記憶しているものである。本実施形態では図3に示すように基準位置(原点)は前記医療用シミュレータSに設けられた実習者位置検出器1bの設置場所に設定してある。したがって、本実施形態の前記注視対象位置ベクトルは、例えば前記実習者位置検出器1bから医療用シミュレータSの腕部や脚部等の各部までを結ぶベクトル、あるいは、前記実習者位置検出器1bから診察用ベッド1c、点滴用具一式1d、生体情報モニタ1eまでのそれぞれを結ぶベクトルである。この注視対象位置ベクトルは予め行った測定等に基づいて設定してある。   The gaze target position vector storage unit 22 stores gaze target position vectors, which are position vectors from a predetermined reference position to each target in the medical simulator usage environment 1 where the trainee PR can gaze. is there. In the present embodiment, as shown in FIG. 3, the reference position (origin) is set at the place where the apprentice position detector 1b provided in the medical simulator S is installed. Therefore, the gaze target position vector of the present embodiment is, for example, a vector connecting from the apprentice position detector 1b to each part such as an arm or a leg of the medical simulator S, or from the apprentice position detector 1b. It is a vector that connects each of the examination bed 1c, the infusion device set 1d, and the biological information monitor 1e. This gaze target position vector is set based on measurements performed in advance.

前記第1のカメラ1aは、所定の基準位置に配置された前記実習者位置検出器1bとは別の場所に設けてあり、実習者PRを撮像して画像データを生成するものである。この画像データから、前記第1のカメラ1aから実習者PRへの方向を示す単位ベクトルV1eを算出することができる。   The first camera 1a is provided at a place different from the trainee position detector 1b arranged at a predetermined reference position, and captures the trainee PR to generate image data. From this image data, a unit vector V1e indicating the direction from the first camera 1a to the trainee PR can be calculated.

前記実習者位置検出器1bは、所定の基準位置である前記医療用シミュレータSの頭部に設けてあり、実習者PRを撮像して画像データを生成するとともに、その画像データに基づいて当該実習者位置検出器1bが設けてある位置から実習者PRまでの向きと離間距離を計測するものである。すなわち、前記実習者位置検出器1bによって前記医療用シミュレータSの頭部から実習者PRまでを結ぶベクトルV2eを取得することができる。   The apprentice position detector 1b is provided on the head of the medical simulator S, which is a predetermined reference position. The trainee position detector 1b images the trainee PR to generate image data, and based on the image data, The direction and the distance from the position where the person position detector 1b is provided to the trainee PR are measured. That is, the trainee position detector 1b can obtain a vector V2e that connects the head of the medical simulator S to the trainee PR.

前記視線算出部21は、実習者PRの目の位置を通り、実習者PRの視線方向に延びる三次元空間上の直線である仮想視線直線VLを前記第1のカメラ1a及び前記実習者位置検出器1bの出力に基づいて算出するように構成してある。すなわち、前記視線算出部21は、実習者PRを含むように撮像された画像データに基づいて、実習者PRの注視している方向を示す視線単位ベクトルVetを算出する。例えば画像データ中における実習者PRの動向の向きや顔の向きを画像処理により検出し、視線単位ベクトルVetを算出する。そして、前記視線算出部21は、前記実習者位置検出器1bで計測される前記基準位置から実習者PRまでの位置ベクトルである実習者位置ベクトルV2eで示される点を起点とし、その起点から前記視線単位ベクトルVetの方向へ延びる直線を仮想視線直線VLとして算出する。   The line-of-sight calculation unit 21 detects a virtual line-of-sight straight line VL that is a straight line in a three-dimensional space that passes through the eye position of the trainee PR and extends in the line-of-sight direction of the trainee PR. It is configured to calculate based on the output of the device 1b. That is, the line-of-sight calculation unit 21 calculates the line-of-sight unit vector Vet indicating the direction in which the trainee PR is gazing based on the image data captured so as to include the trainee PR. For example, the direction of the trend of the trainee PR and the direction of the face in the image data are detected by image processing, and the line-of-sight unit vector Vet is calculated. The line-of-sight calculation unit 21 starts from a point indicated by an instructor position vector V2e that is a position vector from the reference position to the instructor PR measured by the instructor position detector 1b. A straight line extending in the direction of the visual line unit vector Vet is calculated as a virtual visual line VL.

前記視点推定部23は、前記注視対象位置ベクトルV(target)と、前記実習者位置ベクトルV2e、及び、前記視線単位ベクトルVetから算出される仮想視線直線VLとに基づいて実習者PRの前記推定注視対象を推定するように構成してある。   The viewpoint estimator 23 estimates the apprentice PR based on the gaze target position vector V (target), the trainee position vector V2e, and the virtual line of sight straight line VL calculated from the line-of-sight unit vector Vet. The gaze target is estimated.

より具体的には図3に示すように前記視点推定部23は、実習者位置ベクトルV2eの示す点を通るとともに、前記視線単位ベクトルVetに沿って延びる仮想視線直線VL上に前記注視対象位置ベクトルV(target)の示す点が乗っている、あるいは、近接している場合に、前記推定注視対象が対応する注視対象位置ベクトルV(target)の示す対象に向けられていると推定する。つまり各対象の位置を示す前記注視対象位置ベクトルV(target)のうち、前記視線単位ベクトルVetに沿って延びる仮想視線直線VLと略交わったものが推定注視対象であると前記視点推定部23は推定することになる。   More specifically, as shown in FIG. 3, the viewpoint estimation unit 23 passes the point indicated by the trainee position vector V2e, and the gaze target position vector on a virtual line of sight straight line VL extending along the line-of-sight unit vector Vet. When the point indicated by V (target) is on or close, it is estimated that the estimated gaze target is directed to the target indicated by the corresponding gaze target position vector V (target). That is, when the gaze target position vector V (target) indicating the position of each target is an estimated gaze target that substantially intersects with the virtual gaze line VL extending along the gaze unit vector Vet, the viewpoint estimation unit 23 Will be estimated.

前記適切度評価部4は、実習者PRが注視している対象が適切な対象であるとともに、その注視時間が適切であるかや、意識の振り分けが十分に行われているかについて評価するものである。より具体的には、図4のフローチャートに示すように前記注視対象推定機構2が、実習者PRの注視対象である推定注視対象を推定すると(ステップS1)、前記適切度評価部4は、前記注視対象推定機構2で推定される推定注視対象と熟練者が見ている理想的な注視対象である基準注視対象との一致度を算出し(ステップS2)、算出された一致度に基づいて適切度を評価するように構成してある(ステップS3)。ここで、推定注視対象と基準注視対象の一致度とは、空間的及び時間的な一致、時間配分に関する一致を含むものであり、複数の一致度の評価項目に基づいて前記適切度は総合的に評価されるようにしてある。   The appropriateness evaluation unit 4 evaluates whether the subject being watched by the trainee PR is an appropriate target and whether the watch time is appropriate or whether the consciousness is sufficiently distributed. is there. More specifically, as shown in the flowchart of FIG. 4, when the gaze target estimation mechanism 2 estimates an estimated gaze target that is a gaze target of the trainee PR (step S1), the appropriateness evaluation unit 4 The degree of coincidence between the estimated gaze target estimated by the gaze target estimation mechanism 2 and the reference gaze target that is an ideal gaze target viewed by an expert is calculated (step S2), and appropriate based on the calculated degree of coincidence The degree is configured to be evaluated (step S3). Here, the degree of coincidence between the estimated gaze target and the reference gaze object includes spatial and temporal coincidence and coincidence regarding time distribution, and the appropriateness is comprehensive based on evaluation items of a plurality of coincidence degrees. It is supposed to be evaluated.

以下では一致度及び適切度の評価について関連する各部とともに説明する。   Hereinafter, the evaluation of the degree of matching and the degree of appropriateness will be described together with related parts.

図2に示す前記基準注視対象位置記憶部3は、前記医療行為訓練中に実習者PRが注視するべき対象として設定された複数の基準注視対象の位置(位置ベクトル、座標)を記憶するものである。本実施形態では熟練者が前記医療用シミュレータSを用いた医療行為訓練を行う際に医療用シミュレータ利用環境1内で見ている対象に基づいて基準注視対象が設定してある。   The reference gaze target position storage unit 3 shown in FIG. 2 stores a plurality of reference gaze target positions (position vectors, coordinates) set as targets to be watched by the trainee PR during the medical practice training. is there. In the present embodiment, the reference gaze target is set based on the target viewed by the expert in the medical simulator utilization environment 1 when performing medical practice training using the medical simulator S.

前記基準注視対象は、前記医療行為訓練中に実習者PRによって順番に行われる複数の行為ごとにそれぞれ対応させて例えば時系列に沿って設定してある。また、実習者PRの意識の振り分けが適切にできているかを評価できるようにするために、前記基準注視対象は、前記医療用シミュレータS上に設定された患者注視対象と、前記医療用シミュレータS以外の別の対象に設定された周囲注視対象の2種類がある。   The reference gaze target is set along a time series, for example, corresponding to each of a plurality of actions performed in order by the trainee PR during the medical practice training. In addition, in order to be able to evaluate whether the consciousness distribution of the trainee PR is appropriately performed, the reference gaze target includes a patient gaze target set on the medical simulator S, and the medical simulator S There are two types of surrounding gaze targets set as other targets.

例えば、医療行為訓練が前記医療用シミュレータSを用いた問診や触診時において圧痛の有無の確認に関する訓練の場合には、実習者PRが患者の表情に注視しているかどうかを評価できるように前記基準注視対象(患者注視対象)は前記医療用シミュレータSの頭部(表情)に設定される。また、医療行為訓練が、入院患者への回診時の訓練の場合には、患者だけでなく、ベッド回り、点滴などの周囲の対象にも実習者PRが注視できているかを評価できるようにするために、患者注視対象として医療用シミュレータSの頭部が設定され、周囲注視対象としてベッドの周囲、点滴に設定される。   For example, in the case where the medical practice training is a training related to confirmation of the presence or absence of tenderness at the time of an inquiry or palpation using the medical simulator S, the training PR can evaluate whether the patient PR is gazing at the facial expression of the patient. The reference gaze target (patient gaze target) is set to the head (facial expression) of the medical simulator S. In addition, when medical practice training is a training at the time of a round visit to an inpatient, it is possible to evaluate whether the practitioner PR can watch not only the patient but also surrounding objects such as around the bed and infusion. Therefore, the head of the medical simulator S is set as a patient gaze target, and is set around the bed and drip as the gaze target.

また、アセスメント時に実習者PRが患者の左右差の確認ができているかを評価するために、基準注視対象が医療用シミュレータSの顔、腕、脚などに設定される。また、車いすとベッド間の移動動作時、褥瘡予防のための体位変換時、入浴時等の訓練時には、患者を移動させる前と後のそれぞれの時点等で、移動先と患者の状態を確認できているかを評価できるように、時刻ごとに前記医療用シミュレータS上と移動先のベッド等に前記基準注視対象が設定されてもよい。加えて、手術時等の医療行為訓練において実習者PRの意識の振り分け能力が発揮されて、患者の全身と、生体情報モニタ1eのそれぞれにおいて患者の状態を把握できているかを評価するために、前記患者注視対象として医療用シミュレータSが設定され、周囲注視対象が生体情報モニタ1eに設定されることもある。   In addition, the reference gaze target is set to the face, arm, leg, etc. of the medical simulator S in order to evaluate whether the apprentice PR can confirm the left-right difference of the patient during the assessment. In addition, when moving between a wheelchair and a bed, when changing postures to prevent pressure ulcers, or during training such as bathing, the destination and patient status can be confirmed before and after moving the patient. The reference gaze target may be set on the medical simulator S and the moving destination bed or the like at every time so that it can be evaluated. In addition, in order to evaluate whether the ability to distribute the consciousness of the practitioner PR is demonstrated in medical practice training at the time of surgery, etc., and the patient's state can be grasped in each of the patient's whole body and the biological information monitor 1e, The medical simulator S may be set as the patient gaze target, and the surrounding gaze target may be set in the biological information monitor 1e.

ここで、図4のフローチャートにおけるステップS2及びS3についてより具体的な手順を示した図5のフローチャートを参照しながら、空間的な一致度に基づく適切度評価について説明する。医療用シミュレータ操作部1fにおいて、問診、触診、視診、聴診、打診、医療画像診断(超音波エコー、X線、MRI、CT、PET、その他の方法により撮像される画像に基づく診断)、各種手技(ないし、シーン)が選択されると、前記適切度評価部4は前記基準注視対象位置記憶部3にシーン毎に記憶されている基準注視対象(患者注視対象、周囲注視対象)の位置を読み出し(ステップS4)、推定注視対象の位置と基準注視対象の位置との距離に基づいて一致度を判定する(ステップS5)。ここで、推定注視対象の位置と基準注視対象の位置との距離が所定値以内の場合には前記適切度評価部4は適切度が高くなるように評価する(ステップS6)。一方、推定注視対象の位置と基準注視対象の位置との距離が所定値よりも大きい場合には前記適切度評価部4は適切度が低くなるように評価する(ステップS7)。   Here, the appropriateness evaluation based on the spatial coincidence will be described with reference to the flowchart of FIG. 5 showing a more specific procedure for steps S2 and S3 in the flowchart of FIG. Interrogation, palpation, visual examination, auscultation, percussion, medical image diagnosis (diagnosis based on images picked up by ultrasonic echo, X-ray, MRI, CT, PET, and other methods), various procedures in the medical simulator operation unit 1f When (or scene) is selected, the appropriateness evaluation unit 4 reads the position of the reference gaze target (patient gaze target, surrounding gaze target) stored for each scene in the reference gaze target position storage unit 3. (Step S4), the degree of coincidence is determined based on the distance between the position of the estimated gaze target and the position of the reference gaze target (Step S5). Here, when the distance between the position of the estimated gaze target and the position of the reference gaze target is within a predetermined value, the appropriateness evaluation unit 4 performs evaluation so that the appropriateness becomes high (step S6). On the other hand, when the distance between the position of the estimated gaze target and the position of the reference gaze target is greater than a predetermined value, the appropriateness evaluation unit 4 evaluates the appropriateness to be low (step S7).

次に推定注視対象と基準注視対象の時間的な一致度の算出及びその時間的な一致度に基づく適切度の評価に関わる構成及びその動作について説明する。   Next, the configuration and operation related to the calculation of the temporal coincidence between the estimated gaze object and the reference gaze object and the evaluation of the appropriateness based on the temporal coincidence will be described.

前記注視時間推定部5は、前記視点推定部23から出力される各推定注視対象の位置に基づいて、実習者PRがそれぞれの前記推定注視対象を注視している時間の長さである推定注視時間を推定するものである。本実施形態では、医療行為訓練が終了するまでの間において実習者PRが見ていると推定された推定注視対象のうち、当該推定注視対象の位置と前記基準注視対象の位置との距離が所定値以内の場合のものについて、注視時間をカウントし、基準注視対象ごとに前記推定注視時間を推定するように構成してある。   Based on the position of each estimated gaze target output from the viewpoint estimation unit 23, the gaze time estimation unit 5 is an estimated gaze that is the length of time that the apprentice PR is gazing at each estimated gaze target. Estimate time. In the present embodiment, among the estimated gaze targets estimated to be viewed by the trainee PR until the medical practice training is completed, the distance between the estimated gaze target position and the reference gaze target position is predetermined. For those within the range, the gaze time is counted, and the estimated gaze time is estimated for each reference gaze target.

前記基準注視時間記憶部6は、各基準注視対象を実習者PRが注視するべき時間の長さである基準注視時間を記憶しているものである。この基準注視時間も熟練者が実際に医療用シミュレータSを用いて医療行為訓練を行った際の値に設定してある。   The reference gaze time storage unit 6 stores a reference gaze time that is the length of time that the trainee PR should gaze at each reference gaze target. This reference gaze time is also set to a value when an expert actually performs medical practice training using the medical simulator S.

そして、前記適切度評価部4は、各基準注視対象について前記推定注視時間と前記基準注視時間とを比較し、その一致度に基づいて前記適切度を評価する。例えば前記推定注視時間と前記基準注視時間との差が所定値以内の場合には完全に一致していると判定され、適切度が高く評価されるように構成してある。   Then, the appropriateness evaluation unit 4 compares the estimated gaze time and the reference gaze time for each reference gaze object, and evaluates the appropriateness based on the degree of coincidence. For example, when the difference between the estimated gaze time and the reference gaze time is within a predetermined value, it is determined that they are completely matched, and the appropriateness is highly evaluated.

より具体的には、図6のフローチャートに示すように前記適切度評価部4は基準注視対象を見ているべき時間である基準注視時間を前記基準注視時間記憶部6から読み出し(ステップS8)、推定注視時間と基準注視時間の差に基づいて時間的な一致度を判定する(ステップS9)。ここで、推定注視時間と基準注視時間との差が所定値以内の場合には前記適切度評価部4は適切度が高くなるように評価する(ステップS10)。一方、推定注視時間と基準注視時間との差が所定値よりも大きい場合には前記適切度評価部4は適切度が低くなるように評価する(ステップS11)。
More specifically, as shown in the flowchart of FIG. 6, the appropriateness evaluation unit 4 reads out a reference gaze time, which is a time when the reference gaze target should be viewed, from the reference gaze time storage unit 6 (step S <b> 8). The temporal coincidence is determined based on the difference between the estimated gaze time and the reference gaze time (step S9). Here, if the difference between the estimated gaze time and the reference gaze time is within a predetermined value, the appropriateness evaluation unit 4 evaluates the appropriateness to be high (step S10). On the other hand, if the difference between the estimated gaze time and the reference gaze time is greater than a predetermined value, the appropriateness evaluation unit 4 evaluates the appropriateness to be low (step S11).

次に推定注視対象と基準注視対象の時間配分に関する一致度の算出及びその時間的な一致度に基づく適切度の評価に関わる構成及びその動作について説明する。   Next, the configuration and operation related to the calculation of the degree of coincidence regarding the time distribution of the estimated gaze object and the reference gaze object and the evaluation of the appropriateness based on the temporal degree of coincidence will be described.

前記注視割合推定部7は、前記注視時間推定部5の出力に基づいて前記患者注視対象を実習者PRが見ている時間の長さである推定部位注視時間と、前記周囲注視対象を実習者PRが見ている時間の長さである推定周囲注視時間との比である推定注視割合を推定するものである。   The gaze ratio estimation unit 7 is based on the output of the gaze time estimation unit 5 and is an estimated part gaze time that is the length of time that an apprentice PR is looking at the patient gaze target, and the gaze target is a practitioner. The estimated gaze ratio, which is the ratio of the estimated ambient gaze time, which is the length of time that the PR is watching, is estimated.

前記基準注視割合記憶部8は、前記患者注視対象を実習者PRが見ているべき時間の長さである基準部位注視時間と、前記周囲注視対象を実習者PRが見ているべき時間の長さである基準周囲注視時間との比である基準注視割合を記憶するものである。   The reference gaze ratio storage unit 8 includes a reference part gaze time that is a length of time that the instructor PR should watch the patient gaze target, and a length of time that the instructor PR should see the surrounding gaze target. The reference gaze ratio that is the ratio to the reference ambient gaze time is stored.

ここで、注視時間の時間配分に関する評価について図7のフローチャートを参照しながら説明する。前記適切度評価部4は各基準注視対象を注視する時間配分を示す基準注視割合を前記基準注視割合記憶部7から読み出し(ステップS12)、推定注視割合と基準注視割合の差に基づいて時間配分の一致度を判定する(ステップS13)。ここで、推定注視割合と基準注視割合との差が所定値以内の場合には前記適切度評価部4は適切度が高くなるように評価する(ステップS14)。一方、推定注視割合と基準注視割合との差が所定値よりも大きい場合には前記適切度評価部4は適切度が低くなるように評価する(ステップS15)。   Here, the evaluation regarding the time distribution of the gaze time will be described with reference to the flowchart of FIG. The appropriateness evaluation unit 4 reads out a reference gaze rate indicating a time allocation for gazing at each reference gaze target from the reference gaze rate storage unit 7 (step S12), and allocates time based on the difference between the estimated gaze rate and the reference gaze rate. Is determined (step S13). Here, when the difference between the estimated gaze ratio and the reference gaze ratio is within a predetermined value, the appropriateness evaluation unit 4 evaluates the appropriateness to be high (step S14). On the other hand, if the difference between the estimated gaze ratio and the reference gaze ratio is greater than a predetermined value, the appropriateness evaluation unit 4 evaluates the appropriateness to be low (step S15).

最後に前記基準注視対象の設定に関する構成について説明する。   Finally, a configuration related to the setting of the reference gaze target will be described.

図2に示す前記モード切替部9は、前記適切度評価部4による適切度の評価が行われる評価モードと、前記基準注視対象位置記憶部3に前記基準注視対象の位置を記憶させる記憶モードと、を切り替えるものである。図2の機能ブロック図は評価モードが実施されている状態を示すものであり、前記モード切替部9により記憶モードに切り替えられると図2の機能ブロック図において示されている各スイッチが全て逆転し、前記視点推定部23の出力が前記基準注視対象位置記憶部3へのみ入力される。この記憶モードにおいて熟練者が前記医療用シミュレータ利用環境1内で医療行為訓練を実際に行うことにより、熟練者が注視している対象が基準注視対象の位置として前記基準注視対象位置記憶部3に記憶される。ここで、熟練者が記憶している注視対象の注視時間や時間配分に基づいて基準注視時間や基準注視割合についても記憶させるようにしている。つまり、記憶モードにおいては熟練者のお手本となる基準が各記憶部に対して記憶されることになる。   The mode switching unit 9 shown in FIG. 2 includes an evaluation mode in which the appropriateness evaluation unit 4 evaluates the appropriateness, and a storage mode in which the reference gaze target position storage unit 3 stores the position of the reference gaze target. , To switch. The functional block diagram of FIG. 2 shows a state in which the evaluation mode is implemented. When the mode switching unit 9 switches to the storage mode, all the switches shown in the functional block diagram of FIG. The output of the viewpoint estimation unit 23 is input only to the reference gaze target position storage unit 3. In this storage mode, when the skilled person actually performs medical practice training in the medical simulator utilization environment 1, the target being watched by the skilled person is stored in the reference gaze target position storage unit 3 as the reference gaze target position. Remembered. Here, the reference gaze time and the reference gaze ratio are also memorized based on the gaze time and time distribution of the gaze object memorized by the skilled person. That is, in the storage mode, a reference that serves as an example for an expert is stored in each storage unit.

このように構成された医療行為訓練適切度評価装置100であれば、複数の基準注視対象に対して前記注視対象推定機構2により推定される実習者PRの推定注視対象が空間的、時間的、時間配分の観点で一致しているかどうかに基づいて、実習者PRの医療行為訓練の適切度を定量的に評価することができる。   With the medical practice training appropriateness evaluation device 100 configured as described above, the estimated gaze target of the apprentice PR estimated by the gaze target estimation mechanism 2 with respect to a plurality of reference gaze targets is spatial, temporal, The appropriateness of the medical practice training of the trainee PR can be quantitatively evaluated based on whether or not they match in terms of time allocation.

したがって、複数の基準注視対象に対して適切に意識を振り分けられているかや、医療用シミュレータSに対して集中できておらず、いい加減な訓練を行っていないか等について適切度から定量的に判断することができるようになる。このため、医療行為訓練が医療用シミュレータSを用いたものであっても、実習者PRは適切度が低く評価されないように訓練に真剣に打ち込みやすくなくなる。さらに、複数の基準注視対象に対して実習者RPが注視できているかについても定量的に評価できるので、1つの対象にのみ集中し過ぎておらず、周囲にも十分に意識を配分できているかについても評価することができる。つまり、従来評価する事が難しかった実習者PRが医療従事者に求められる意識の選択的切り替え能力を発揮できているかどうかについても定量的な評価を与えることができ、このような能力を好適に訓練できるようになる。   Therefore, it is determined quantitatively from the appropriateness whether the consciousness is appropriately distributed to a plurality of reference gazing targets, whether the patient is not focused on the medical simulator S, and is carrying out moderate training. Will be able to. For this reason, even if the medical practice training uses the medical simulator S, it becomes difficult for the trainee PR to seriously enter the training so that the appropriateness is not evaluated low. Furthermore, since it is possible to quantitatively evaluate whether or not the trainee RP is gazing at multiple reference gazing targets, is it not concentrating too much on one target and is sufficient to allocate consciousness to the surroundings? Can also be evaluated. In other words, it is possible to give a quantitative evaluation as to whether or not the trainee PR, which has been difficult to evaluate in the past, can demonstrate the ability to selectively switch the consciousness required of medical professionals. You will be able to train.

加えて、実習者PRからすると自分の注視している対象が熟練者と比較して適切かどうかを客観的に把握して次の医療行為訓練時に反映させやすくなり、医療用シミュレータSを用いた医療行為訓練の効果をさらに高めることができる。また、評価者も実習者PRの意識の振り分けに関する能力を客観的に把握することができ、実習者PRの意識の振り分け能力を正確に把握しやすく、より適切なアドバイスを行うことができるようになる。   In addition, from the PR, it becomes easier to objectively grasp whether or not the subject being watched is appropriate compared to the skilled person, and to reflect it in the next medical practice training, and the medical simulator S was used. The effect of medical practice training can be further enhanced. In addition, the evaluator can objectively understand the ability of the PR of the trainee PR, so that the ability of the PR of the trainee PR can be accurately understood and can provide more appropriate advice. Become.

さらに、本実施形態では実習者PRは何も装着することがないので、医療行為訓練の邪魔をすることなく、意識している対象の適切さを評価することができる。   Furthermore, in this embodiment, since the trainee PR does not wear anything, it is possible to evaluate the appropriateness of the conscious subject without interfering with medical practice training.

次に本発明の別の実施形態について説明する。   Next, another embodiment of the present invention will be described.

前記注視対象推定機構は、第1のカメラと実習者位置検出器からの出力に基づいて実習者の推定注視対象を推定していたが、これ以外の構成により推定を行っても構わない。例えば、前記医療用シミュレータS利用環境に第2のカメラを設けておき、各カメラで撮像される画像データに基づいて推定注視対象を推定するようにしても構わない。   Although the gaze target estimation mechanism estimates the estimated gaze target of the practitioner based on the output from the first camera and the practitioner position detector, the gaze target estimation mechanism may perform estimation using a configuration other than this. For example, a second camera may be provided in the environment for using the medical simulator S, and an estimated gaze target may be estimated based on image data captured by each camera.

より具体的には、前記視線算出部が、前記第1のカメラ及び実習者位置検出器の各画像データと、前記第1のカメラと前記第2のカメラの離間距離と、に基づいて前記実習者位置ベクトルと前記視線単位ベクトルを算出するように構成してあればよい。   More specifically, the line-of-sight calculation unit is configured to perform the training based on the image data of the first camera and the trainee position detector and the distance between the first camera and the second camera. The person position vector and the line-of-sight unit vector may be calculated.

また、前記注視対象推定機構としては、カメラの画像データに基づいて実習者位置を取得し、実習者に接触型視線センサ(メガネ型)を装着してもらって視線単位ベクトルを取得するようにして、推定注視対象を推定するようにしても構わない。すなわち、実習者位置や視線単位ベクトルを取得する方法は実施形態に示したものに限られず、既存の様々な方法を用いても構わない。   Further, as the gaze target estimation mechanism, the trainee position is obtained based on the image data of the camera, and the trainee is equipped with a contact-type gaze sensor (glasses type) to obtain the gaze unit vector. The estimated gaze target may be estimated. That is, the method of acquiring the trainee position and the line-of-sight unit vector is not limited to the one shown in the embodiment, and various existing methods may be used.

加えて、前記実施形態では所定の基準位置を医療用シミュレータSの頭部に設けられた実習者位置検出器に設定していたが、その他の点を基準位置として各位置ベクトルを算出しても構わない。また、基準位置が移動するような医療行為訓練の場合にはその移動量を考慮して各ベクトルについてリアルタイムで補正演算が行われるようにすればよい。   In addition, in the above-described embodiment, the predetermined reference position is set in the apprentice position detector provided on the head of the medical simulator S. However, each position vector may be calculated using other points as reference positions. I do not care. Further, in the case of medical practice training in which the reference position moves, the correction calculation may be performed in real time for each vector in consideration of the movement amount.

前記実施形態では医療用シミュレータSは人体の全身を模したものであったが、腰部等や顔だけ等の一部を模したものであっても構わない。   In the above-described embodiment, the medical simulator S simulates the whole body of the human body, but may also simulate a part of the waist, the face, or the like.

前記実施形態では、実習者の注視対象の適切さを評価することを記載していたが、前記実施形態の実習者位置検出器の画像データを用いることにより、患者から見た実習者の動きの適切さを評価するようにしても構わない。   In the above embodiment, it is described that the applicability of the gaze target of the practitioner is evaluated, but by using the image data of the practitioner position detector of the above embodiment, the movement of the practitioner viewed from the patient is described. You may make it evaluate appropriateness.

また、前記第1のカメラや実習者位置検出器で撮像される動画を含む画像データに基づいて、実習者の体の傾きや姿勢等を検出し、正確な運針の相関関係を評価する等にしても構わない。   In addition, based on image data including a moving image captured by the first camera or the apprentice position detector, the inclination or posture of the apprentice's body is detected, and an accurate correlation of hand movement is evaluated. It doesn't matter.

さらに、推定注視対象ごとの注視タイミングと時間、位置、あるいは注視時間の合計は、記憶されている基準の値と比較表示されることで、実習者又は評価者に対して評価結果をわかりやすく表示してもよい。また、前記実施形態では、適切度は推定注視対象と基準注視対象との空間的、時間的な一致度に基づいて総合的に評価していたが、例えば空間的な一致度のみ、あるいは、時間的な一致度のみで適切度を評価するようにしても構わない。   In addition, the total gaze timing and time, position, or gaze time for each estimated gaze target is displayed in comparison with the stored reference value, so that the evaluation result is easily displayed to the practitioner or evaluator. May be. In the embodiment, the appropriateness is comprehensively evaluated based on the spatial and temporal coincidence between the estimated gaze object and the reference gaze object. For example, only the spatial coincidence degree or the time The appropriateness may be evaluated based only on the degree of coincidence.

前記適切度評価部における一致度の評価方法については実施形態に示したものに限られない。例えば基準となる値との差が小さいほど一致度が高く評価され、引いては適切度が高く評価されるように構成しても構わない。   The matching degree evaluation method in the appropriateness evaluation unit is not limited to that shown in the embodiment. For example, the degree of coincidence may be evaluated higher as the difference from the reference value is smaller, and the degree of appropriateness may be evaluated higher.

前記実施形態では、前記注視対象位置ベクトル記憶部22に記憶されている注視対象位置ベクトルについては、予め測定を行って設定するだけでなく、その他の方法で設定してもよい。例えば、基準位置から各対象までの向きと距離に基づき演算により注視対象位置ベクトルを算出し、その値を前記注視対象位置ベクトル記憶部22に記憶させてもよい。要するに注視対象位置ベクトルの設定方法については実施形態に記載したものに限定されず、様々な設定方法を用いても構わない。また、実習者位置ベクトル、視線単位ベクトル、仮想視線直線等の算出方法についても前記実施形態に記載したものに限られず既知の様々な方法を用いればよい。   In the embodiment, the gaze target position vector stored in the gaze target position vector storage unit 22 may be set not only by measuring in advance but also by other methods. For example, the gaze target position vector may be calculated by calculation based on the direction and distance from the reference position to each target, and the value may be stored in the gaze target position vector storage unit 22. In short, the setting method of the gaze target position vector is not limited to that described in the embodiment, and various setting methods may be used. Further, the calculation method of the trainee position vector, the line-of-sight unit vector, the virtual line-of-sight line, etc. is not limited to the one described in the above embodiment, and various known methods may be used.

また、医療行為訓練の適切さを推定する方法として、視線ベクトル以外を利用してもよい。例えば、姿勢、手順、器具の持ち方、医療用シミュレータS(ないし、患者)に触れる位置、声のかけかた、などが考えられる。それぞれ、動画データから切り出したり、器具や医療用シミュレータS、医療用シミュレータ利用環境1内に組み込んだセンサ(圧力検出センサ、歪みセンサ、位置検出センサ、剪断力センサ、音センサ等)で計測したり、医療用シミュレータSに組み込んだマイクを通して音声認識を行ったりすることで、データを取得することができる。   In addition, as a method for estimating the appropriateness of medical practice training, a method other than a line-of-sight vector may be used. For example, the posture, procedure, how to hold the instrument, the position touching the medical simulator S (or patient), how to speak, etc. are conceivable. Each is cut out from the video data, or measured by a device (such as a pressure detection sensor, a strain sensor, a position detection sensor, a shear force sensor, a sound sensor) incorporated in the instrument, the medical simulator S, or the medical simulator usage environment 1 Data can be acquired by performing voice recognition through a microphone incorporated in the medical simulator S.

前記実施形態では、医療行為訓練適切度評価装置100は、タブレット端末1fの演算能力を利用し、プログラムが実行されることでその機能が実現されていたが、例えば医療用シミュレータS内に演算機能を内蔵し、この演算機能を利用して医療行為訓練適切度評価装置100を構成しても構わない。また、医療用シミュレータ利用環境1の内又は外に設けられたサーバで各種プログラムが実行され、その演算結果や表示出力のみがタブレット端末1fで行われるようにしてもよい。   In the above-described embodiment, the medical practice training appropriateness evaluation device 100 uses the computing capability of the tablet terminal 1f, and the function is realized by executing the program. However, for example, the computing function is provided in the medical simulator S. May be used, and the medical practice training appropriateness evaluation apparatus 100 may be configured using this calculation function. Further, various programs may be executed by a server provided inside or outside the medical simulator use environment 1, and only the calculation result or display output may be performed by the tablet terminal 1f.

その他、本発明の趣旨に反しない限りにおいて様々な実施形態の変形や組み合わせを行っても構わない。   In addition, various modifications and combinations of the embodiments may be made without departing from the spirit of the present invention.

100・・・医療行為訓練適切度評価装置
1a ・・・第1のカメラ
1b ・・・実習者位置検出器
2 ・・・注視対象推定機構
21 ・・・視線算出部
22 ・・・注視対象位置ベクトル記憶部
23 ・・・視点推定部
3 ・・・基準注視対象位置記憶部
4 ・・・適切度評価部
5 ・・・注視時間推定部
6 ・・・基準注視時間記憶部
7 ・・・注視割合推定部
8 ・・・基準注視割合記憶部
9 ・・・モード切替部
S ・・・医療用シミュレータ
PR ・・・実習者
DESCRIPTION OF SYMBOLS 100 ... Medical practice training appropriateness evaluation apparatus 1a ... 1st camera 1b ... Trainee position detector 2 ... Gaze target estimation mechanism 21 ... Gaze calculation part 22 ... Gaze target position Vector storage unit 23 ... viewpoint estimation unit 3 ... reference gaze target position storage unit 4 ... appropriateness evaluation unit 5 ... gaze time estimation unit 6 ... reference gaze time storage unit 7 ... gaze Ratio estimation unit 8 ・ ・ ・ Standard gaze ratio storage unit 9 ・ ・ ・ Mode switching unit S ・ ・ ・ Medical simulator PR ・ ・ ・ Practitioner

Claims (9)

人体の一部又は全部を模した医療用シミュレータにより医療行為訓練を行っている実習者が注視している対象である推定注視対象の位置を推定する注視対象推定機構と、
前記医療行為訓練中に実習者が注視するべき対象として設定された複数の基準注視対象の位置を記憶する基準注視対象位置記憶部と、
前記推定注視対象の位置と、複数の前記基準注視対象の位置との一致度に基づいて実習者の注視対象の適切度を評価する適切度評価部とを備えたことを特徴とする医療行為訓練適切度評価装置。
A gaze target estimation mechanism that estimates a position of an estimated gaze target that is a target that a practitioner performing medical practice training with a medical simulator simulating part or all of the human body, and
A reference gaze target position storage unit that stores a plurality of reference gaze target positions set as targets to be watched by an apprentice during the medical practice training;
A medical practice training comprising: an appropriateness evaluation unit that evaluates the appropriateness of an apprentice's gaze target based on the degree of coincidence between the position of the estimated gaze target and a plurality of positions of the reference gaze target Appropriateness evaluation device.
前記基準注視対象が、前記医療用シミュレータ上に設定された患者注視対象と、前記医療用シミュレータ以外の別の対象に設定された周囲注視対象とからなり、
前記適切度評価部が、前記注視対象推定機構により推定された複数の前記推定注視対象の位置と、前記患者注視対象及び前記周囲注視対象のそれぞれの位置との一致度に基づいて前記適切度を評価するように構成されている請求項1記載の医療行為訓練適切度評価装置。
The reference gaze target is composed of a patient gaze target set on the medical simulator and a surrounding gaze target set to another target other than the medical simulator,
The appropriateness evaluation unit calculates the appropriateness based on the degree of coincidence between the positions of the plurality of estimated gaze targets estimated by the gaze target estimation mechanism and the positions of the patient gaze target and the surrounding gaze targets. The medical practice training appropriateness evaluation device according to claim 1, which is configured to evaluate.
前記医療行為訓練が複数の行為が実習者によって順番に行われるものであり、
前記基準注視対象位置記憶部が、各行為に対応させてそれぞれ設定された前記基準注視対象を記憶しており、
前記適切度評価部が、各行為における前記推定注視対象の位置と前記基準注視対象の位置との一致度に基づいて前記適切度を評価するように構成されている請求項1又は2記載の医療行為訓練適切度評価装置。
In the medical practice training, a plurality of acts are sequentially performed by a practitioner,
The reference gaze target position storage unit stores the reference gaze target set in correspondence with each action,
The medical care according to claim 1 or 2, wherein the appropriateness evaluation unit is configured to evaluate the appropriateness based on a degree of coincidence between the position of the estimated gaze target and the position of the reference gaze target in each action. Action training appropriateness evaluation device.
実習者が前記推定注視対象を注視している時間の長さである推定注視時間を推定する注視時間推定部と、
前記基準注視対象を実習者が注視するべき時間の長さである基準注視時間を記憶している基準注視時間記憶部とをさらに備え、
前記適切度評価部が、前記推定注視時間と、前記基準注視時間との一致度に基づいて前記適切度を評価するように構成されている請求項1乃至3いずれかに記載の医療行為訓練適切度評価装置。
A gaze time estimation unit that estimates an estimated gaze time that is a length of time that an apprentice is gazes at the estimated gaze target;
A reference gaze time storage unit that stores a reference gaze time that is a length of time that an apprentice should gaze at the reference gaze target;
The medical practice training appropriate according to any one of claims 1 to 3, wherein the appropriateness evaluation unit is configured to evaluate the appropriateness based on a degree of coincidence between the estimated gaze time and the reference gaze time. Degree evaluation device.
前記患者注視対象を実習者が見ている時間の長さである推定部位注視時間と、前記周囲注視対象を実習者が見ている時間の長さである推定周囲注視時間との比である推定注視割合を推定する注視割合推定部と、
前記患者注視対象を実習者が見ているべき時間の長さである基準部位注視時間と、前記周囲注視対象を実習者が見ているべき時間の長さである基準周囲注視時間との比である基準注視割合を記憶する基準注視割合記憶部とをさらに備え、
前記適切度評価部が、前記推定注視割合と前記基準注視割合との一致度に基づいて前記適切度を評価するように構成されている請求項1乃至4いずれかに記載の医療行為訓練適切度評価装置。
Estimate that is a ratio of an estimated part gaze time that is the length of time that the apprentice is watching the patient gaze target and an estimated ambient gaze time that is the length of time that the apprentice is watching the surrounding gaze target A gaze ratio estimation unit for estimating a gaze ratio;
The ratio of the reference part gaze time that is the length of time that the apprentice should watch the patient gaze target and the reference peripheral gaze time that is the length of time that the apprentice should watch the surrounding gaze target A reference gaze ratio storage unit for storing a certain reference gaze ratio;
The medical practice training appropriateness according to any one of claims 1 to 4, wherein the appropriateness evaluation unit is configured to evaluate the appropriateness based on a degree of coincidence between the estimated gaze ratio and the reference gaze ratio. Evaluation device.
前記注視対象推定機構が、
所定の基準位置から実習者が注視可能な各対象までの位置ベクトルである注視対象位置ベクトルをそれぞれ記憶している注視対象位置ベクトル記憶部と、
実習者を含むように撮像された画像データに基づいて、前記基準位置から実習者までの位置ベクトルである実習者位置ベクトルと実習者の注視している方向を示す視線単位ベクトルを算出する視線算出部と、
前記注視対象位置ベクトルと、前記実習者位置ベクトルと、前記視線単位ベクトルとに基づいて実習者の前記推定注視対象を推定する視点推定部と、を備えた請求項1乃至5いずれかに記載の医療行為訓練適切度評価装置。
The gaze target estimation mechanism is
A gaze target position vector storage unit that stores a gaze target position vector that is a position vector from a predetermined reference position to each target that can be watched by the apprentice;
Line-of-sight calculation for calculating an apprentice position vector, which is a position vector from the reference position to the trainee, and a line-of-sight unit vector indicating the direction in which the trainee is gazing based on image data captured to include the trainee And
The viewpoint estimation part which estimates the said estimated gaze target of a practitioner based on the said gaze target position vector, the said practitioner position vector, and the said gaze unit vector. Medical practice training appropriateness evaluation device.
前記注視対象推定機構が、
前記基準位置以外の場所に設けられ、実習者を撮像して画像データを生成する第1のカメラと、
前記基準位置に設けられ、実習者を撮像して画像データを生成するとともに前記基準位置から実習者までの向き及び離間距離を検出する実習者位置検出器と、をさらに備え、
前記視線算出部が、前記第1のカメラ又は実習者位置検出器の各画像データと、前記実習者位置検出器で検出された前記基準位置から実習者までの向き及び離間距離と、に基づいて前記実習者位置ベクトルと前記視線単位ベクトルを算出するように構成されている請求項6記載の医療行為訓練適切度評価装置。
The gaze target estimation mechanism is
A first camera that is provided at a location other than the reference position and that captures an apprentice and generates image data;
A practitioner position detector that is provided at the reference position and generates an image data by capturing the practitioner and detects a direction and a separation distance from the reference position to the practitioner; and
The line-of-sight calculation unit is based on the image data of the first camera or the trainee position detector, and the orientation and separation distance from the reference position detected by the trainee position detector to the trainee. The medical practice training appropriateness evaluation apparatus according to claim 6, configured to calculate the trainee position vector and the line-of-sight unit vector.
前記注視対象推定機構が、
実習者を撮像して画像データを生成する第1のカメラと、
前記第1のカメラとは別の場所に設けられ、実習者を撮像して画像データを生成する第2のカメラと、をさらに備え、
前記視線算出部が、前記第1のカメラ及び前記第2のカメラの各画像データと、前記第1のカメラと前記第2のカメラの離間距離と、に基づいて前記実習者位置ベクトルと前記視線単位ベクトルを算出するように構成されている請求項6記載の医療行為訓練適切度評価装置。
The gaze target estimation mechanism is
A first camera that captures an apprentice and generates image data;
A second camera that is provided at a different location from the first camera and that captures the trainee and generates image data;
The line-of-sight calculation unit, based on the image data of the first camera and the second camera, and the separation distance between the first camera and the second camera, the trainee position vector and the line of sight The medical practice training appropriateness evaluation device according to claim 6, configured to calculate a unit vector.
前記適切度評価部による適切度の評価が行われる評価モードと、前記基準注視対象位置記憶部に前記基準注視対象の位置を記憶させる記憶モードと、を切り替えるモード切替部をさらに備え、
前記記憶部モードにおいて、前記基準注視対象位置記憶部は、前記注視対象推定機構により推定された推定注視対象の位置を前記基準注視対象の位置として記憶するように構成されている請求項1乃至8いずれかに記載の医療行為訓練適切度評価装置。
A mode switching unit that switches between an evaluation mode in which the appropriateness evaluation is performed by the appropriateness evaluation unit and a storage mode in which the reference gaze target position storage unit stores the position of the reference gaze target;
The said reference | standard gaze object position memory | storage part in the said memory | storage part mode is comprised so that the position of the presumed gaze object estimated by the said gaze object estimation mechanism may be memorize | stored as a position of the said reference gaze object. The medical practice training appropriateness evaluation apparatus according to any one of the above.
JP2014208846A 2014-10-10 2014-10-10 Medical activity training appropriateness evaluation device Pending JP2016080752A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014208846A JP2016080752A (en) 2014-10-10 2014-10-10 Medical activity training appropriateness evaluation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014208846A JP2016080752A (en) 2014-10-10 2014-10-10 Medical activity training appropriateness evaluation device

Publications (1)

Publication Number Publication Date
JP2016080752A true JP2016080752A (en) 2016-05-16

Family

ID=55956197

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014208846A Pending JP2016080752A (en) 2014-10-10 2014-10-10 Medical activity training appropriateness evaluation device

Country Status (1)

Country Link
JP (1) JP2016080752A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018225326A1 (en) * 2017-06-06 2018-12-13 オリンパス株式会社 Medical information processing system
JP2019204012A (en) * 2018-05-24 2019-11-28 東邦瓦斯株式会社 Skill level determination system and skill level determination program
WO2020031949A1 (en) * 2018-08-07 2020-02-13 国立大学法人名古屋大学 Information processing device, information processing system, information processing method, and computer program
JP2020052290A (en) * 2018-09-27 2020-04-02 セコム株式会社 Training system and program
JP2021512441A (en) * 2018-01-29 2021-05-13 シーサッツ・インコーポレイテッドCSATS, Inc. Automatic operator performance assessment
EP3905225A1 (en) * 2020-04-28 2021-11-03 Université de Strasbourg System and method for evaluating simulation-based medical training
KR20220089005A (en) * 2020-12-21 2022-06-28 한림대학교 산학협력단 System for endotracheal intubation training, and control method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05108002A (en) * 1991-10-14 1993-04-30 Nissan Motor Co Ltd Sensitiveness evaluating device
JPH0755941A (en) * 1993-08-11 1995-03-03 Nissan Motor Co Ltd Vehicle-to-vehicle distance measuring system
JP2008139553A (en) * 2006-12-01 2008-06-19 National Agency For Automotive Safety & Victim's Aid Driving aptitude diagnosing method, evaluation standard determining method for driving aptitude diagnosis, and driving aptitude diagnostic program
JP2009543611A (en) * 2006-07-12 2009-12-10 メディカル サイバーワールド、インコーポレイテッド Computerized medical training system
US20100248200A1 (en) * 2008-09-26 2010-09-30 Ladak Hanif M System, Method and Computer Program for Virtual Reality Simulation for Medical Procedure Skills Training
JP2014032268A (en) * 2012-08-02 2014-02-20 J Morita Corp Medical treatment simulation apparatus

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05108002A (en) * 1991-10-14 1993-04-30 Nissan Motor Co Ltd Sensitiveness evaluating device
JPH0755941A (en) * 1993-08-11 1995-03-03 Nissan Motor Co Ltd Vehicle-to-vehicle distance measuring system
JP2009543611A (en) * 2006-07-12 2009-12-10 メディカル サイバーワールド、インコーポレイテッド Computerized medical training system
JP2008139553A (en) * 2006-12-01 2008-06-19 National Agency For Automotive Safety & Victim's Aid Driving aptitude diagnosing method, evaluation standard determining method for driving aptitude diagnosis, and driving aptitude diagnostic program
US20100248200A1 (en) * 2008-09-26 2010-09-30 Ladak Hanif M System, Method and Computer Program for Virtual Reality Simulation for Medical Procedure Skills Training
JP2014032268A (en) * 2012-08-02 2014-02-20 J Morita Corp Medical treatment simulation apparatus

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018225326A1 (en) * 2017-06-06 2018-12-13 オリンパス株式会社 Medical information processing system
JP2021512441A (en) * 2018-01-29 2021-05-13 シーサッツ・インコーポレイテッドCSATS, Inc. Automatic operator performance assessment
JP7326337B2 (en) 2018-01-29 2023-08-15 シーサッツ・インコーポレイテッド Automated assessment of operator performance
JP2019204012A (en) * 2018-05-24 2019-11-28 東邦瓦斯株式会社 Skill level determination system and skill level determination program
JP7062516B2 (en) 2018-05-24 2022-05-06 東邦瓦斯株式会社 Proficiency Judgment System and Proficiency Judgment Program
WO2020031949A1 (en) * 2018-08-07 2020-02-13 国立大学法人名古屋大学 Information processing device, information processing system, information processing method, and computer program
JP2020024278A (en) * 2018-08-07 2020-02-13 国立大学法人名古屋大学 Information processing device, information processing system, information processing method, and computer program
JP7261370B2 (en) 2018-08-07 2023-04-20 国立大学法人東海国立大学機構 Information processing device, information processing system, information processing method, and computer program
JP7220043B2 (en) 2018-09-27 2023-02-09 セコム株式会社 training system and program
JP2020052290A (en) * 2018-09-27 2020-04-02 セコム株式会社 Training system and program
EP3905225A1 (en) * 2020-04-28 2021-11-03 Université de Strasbourg System and method for evaluating simulation-based medical training
WO2021219662A1 (en) * 2020-04-28 2021-11-04 Universite De Strasbourg System and method for evaluating simulation-based medical training
KR102457342B1 (en) * 2020-12-21 2022-10-20 한림대학교 산학협력단 System for endotracheal intubation training, and control method
KR20220089005A (en) * 2020-12-21 2022-06-28 한림대학교 산학협력단 System for endotracheal intubation training, and control method

Similar Documents

Publication Publication Date Title
JP2016080752A (en) Medical activity training appropriateness evaluation device
KR101811888B1 (en) Visualization testing and/or training
US8029411B2 (en) Systems and methods of monitoring exercises and ranges of motion
Alahakone et al. A real-time system with assistive feedback for postural control in rehabilitation
CN105031908A (en) Balancing and correcting type training device
JP2015519596A (en) Automatic intelligent teaching system (AIMS)
CN101784230A (en) System and method for displaying anonymously annotated physical exercise data
KR20140054197A (en) Systems, apparatus and methods for non-invasive motion tracking to augment patient administered physical rehabilitation
JP7373788B2 (en) Rehabilitation support device, rehabilitation support system, and rehabilitation support method
US10271776B2 (en) Computer aided analysis and monitoring of mobility abnormalities in human patients
US20200401214A1 (en) Systems for monitoring and assessing performance in virtual or augmented reality
US20150130841A1 (en) Methods and computing devices to measure musculoskeletal movement deficiencies
Barandas et al. A real time biofeedback system using visual user interface for physical rehabilitation
US20230240594A1 (en) Posture assessment program, posture assessment apparatus, posture assessment method, and posture assessment system
RU2011122733A (en) DEVICE AND METHOD FOR REMOTE EVALUATION OF CHARACTERISTICS OF HUMAN VISION ANALYZER AND CARRYING OUT OF TRAINING EXERCISES FOR DEVELOPMENT OF BINOCULAR AND HIGHER VISION FUNCTIONS
Sucar et al. Clinical evaluation of a low-cost alternative for stroke rehabilitation
US20230169880A1 (en) System and method for evaluating simulation-based medical training
Chiensriwimol et al. Frozen shoulder rehabilitation: exercise simulation and usability study
Sprint et al. Designing wearable sensor-based analytics for quantitative mobility assessment
Chiensriwimol et al. Monitoring frozen shoulder exercises to support clinical decision on treatment process using smartphone
Santos-Paz et al. A novel virtual reality application for autonomous assessment of cervical range of motion: development and reliability study
Kodera et al. Analyzing behavior in nursing training toward grasping trainee’s situation remotely
Brodbeck et al. Augmented feedback system to support physical therapy of non-specific low back pain
US20180315335A1 (en) Engine for driving a system for assessing and developing the mental acuity and behavior of a person
US20240215922A1 (en) Patient positioning adaptive guidance system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171124

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180605