KR101534196B1 - Apparatus providing training scenario generated on the basis of participant reaction and method thereof - Google Patents

Apparatus providing training scenario generated on the basis of participant reaction and method thereof Download PDF

Info

Publication number
KR101534196B1
KR101534196B1 KR1020130141994A KR20130141994A KR101534196B1 KR 101534196 B1 KR101534196 B1 KR 101534196B1 KR 1020130141994 A KR1020130141994 A KR 1020130141994A KR 20130141994 A KR20130141994 A KR 20130141994A KR 101534196 B1 KR101534196 B1 KR 101534196B1
Authority
KR
South Korea
Prior art keywords
subject
training scenario
response
action
behavior
Prior art date
Application number
KR1020130141994A
Other languages
Korean (ko)
Other versions
KR20150059195A (en
Inventor
최종석
윤상석
박성기
Original Assignee
한국과학기술연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술연구원 filed Critical 한국과학기술연구원
Priority to KR1020130141994A priority Critical patent/KR101534196B1/en
Publication of KR20150059195A publication Critical patent/KR20150059195A/en
Application granted granted Critical
Publication of KR101534196B1 publication Critical patent/KR101534196B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/389Electromyography [EMG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H1/00Apparatus for passive exercising; Vibrating apparatus; Chiropractic devices, e.g. body impacting devices, external devices for briefly extending or aligning unbroken bones

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Hematology (AREA)
  • Physiology (AREA)
  • Psychology (AREA)
  • Anesthesiology (AREA)
  • Acoustics & Sound (AREA)
  • Epidemiology (AREA)
  • Pain & Pain Management (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Rehabilitation Therapy (AREA)
  • Cardiology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

본 발명의 일 실시예에 따르면, 피실험자에게 소정의 행동을 요구하는 행동 자극원들이 저장된 데이터베이스, 상기 데이터베이스에 저장된 행동 자극원 중 적어도 하나의 행동 자극원을 피실험자에게 제공하는 행동 자극원 제공부, 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 센서부, 센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 반응특징정보 생성부 및 생성된 기준 반응특징정보를 기초로, 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성하는 훈련 시나리오 생성부를 포함하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치가 설명된다.According to an embodiment of the present invention, there is provided a computer program product comprising: a database storing behavior stimulus sources requiring a subject to perform a predetermined action; behavior stimulus source providing at least one behavior stimulus source among the behavior stimulus sources stored in the database, A sensor section for sensing the behavioral response of the subject to the action stimulus source, a response feature information generating section for generating the reference response feature information by analyzing the behavioral response of the sensed subject, and the one or more behaviors An apparatus for providing a training scenario generated based on a response of a subject including a training scenario generating unit for generating a first training scenario in which stimulus sources are arranged in a predetermined order is described.

Description

피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치 및 그 방법{APPARATUS PROVIDING TRAINING SCENARIO GENERATED ON THE BASIS OF PARTICIPANT REACTION AND METHOD THEREOF}[0001] APPARATUS PROVIDING TRAINING SCENARIO GENERATED ON THE BASIS OF PARTICIPANT REACTION AND METHOD THEREOF [0002]

본 발명은 피실험자에게 사회적 상호작용 기능향상을 위한 훈련 시나리오를 제공하는 장치에 관련된 것으로, 더욱 구체적으로는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에 관련된다.The present invention relates to a device for providing a training scenario to a subject for improving social interaction function, and more particularly to a device for providing a training scenario generated based on a subject's reaction.

발달장애(자폐증)를 치료하기 위해서 눈맞춤, 호명반응등과 같은 다양한 행동 자극원을 환자에게 제공함으로써 환자가 타인과의 교감을 형성하는 것이 중요하다. 일반적으로 발달장애아를 치료하기 위해서는 치료사가 환자에게 다양한 행동 자극원을 제공하고, 그 결과를 분석하여 다른 행동 자극원 또는 다른 치료행위를 수행해 나간다. 그러나 이러한 방식은 치료사 개개인의 전문 능력의 차이가 있는 문제점이 있다.In order to treat the developmental disorder (autism), it is important for the patient to form an emotional connection with others by providing the patient with various action stimulation sources such as eye contact, callus response, and the like. In general, to treat a child with developmental disabilities, the therapist provides the patient with a variety of behavioral stimuli and analyzes the results to perform other behavioral stimuli or other therapeutic actions. However, this method has a problem that there is a difference in the professional ability of each therapist.

또한 발달장애 환자에게 행동 자극원을 제공하는 장치가 개발되었다. 장치는 미리 정해진 순서로 행동 자극원을 제공하고, 각 행동 자극원에 대한 반응을 수치화한다. 그리고 치료사는 이 수치를 보고 발달장애 환자의 상태를 판단하고 적절한 치료를 수행하게 된다.In addition, devices have been developed to provide behavioral stimuli to patients with developmental disabilities. The device provides a behavior stimulus source in a predetermined order and quantifies the response to each behavior stimulus source. The therapist will then look at these figures to determine the condition of the developmental disorder and perform appropriate treatment.

그러나 이러한 장치는 발달장애 환자의 성격이나 선호도, 호감도 등을 고려하지 않고, 일률적으로 행동 자극원이 제공되며, 결국에는 치료사의 임상적 판단을 요구하게 된다. 즉, 이러한 장치만으로 치료사를 대체할 수는 없는 문제점이 있다. However, these devices do not consider the personality, preference, and likeness of patients with developmental disabilities, but they are provided with behavioral stimuli uniformly and eventually require the clinical judgment of the therapist. That is, there is a problem that the therapist can not be replaced only by such a device.

한국공개특허 10-2013-0058173Korean Patent Publication No. 10-2013-0058173

이와 같은 문제점을 해결하기 위해 치료사의 임상적 판단 정보를 축적하여 이를 이용함과 아울러, 발달장애 환자의 개인적인 상태 및 자극원에 대한 반응을 고려하여 치료를 수행할 수 있는 장치가 요구된다.In order to solve such problems, there is a need for an apparatus capable of accumulating clinical judgment information of a therapist, using the information, and performing treatment in consideration of a personal condition of a developmental disorder patient and a response to a stimulus source.

일 실시예에 따른 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치는 피실험자에게 소정의 행동을 요구하는 행동 자극원들이 저장된 데이터베이스, 상기 데이터베이스에 저장된 행동 자극원 중 적어도 하나의 행동 자극원을 피실험자에게 제공하는 행동 자극원 제공부, 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 센서부, 센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 반응특징정보 생성부 및 생성된 기준 반응특징정보를 기초로, 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성하는 훈련 시나리오 생성부를 포함한다.An apparatus for providing a training scenario generated based on a subject's reaction according to an embodiment includes a database storing behavioral stimulus sources that require a subject to perform an action, at least one behavior stimulus source among the behavioral stimulus sources stored in the database A sensor unit for sensing a behavior response of the subject to the provided behavior stimulus source, a reaction feature information generation unit for generating reference response feature information by analyzing the behavioral response of the sensed subject, And a training scenario generating unit for generating a first training scenario in which one or more action stimulation sources are arranged in a predetermined order based on the reference reaction characteristic information.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 소정의 행동은, 인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정 자세 취하기를 포함하는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a reaction of the subject, the predetermined action includes a greeting, an eye contact, a naming reaction, a touch game, a specific point gaze, can do.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 행동 자극원 제공부는, 디스플레이, 스피커, 관절을 가진 암(arm) 또는 다리 중 적어도 하나를 포함하는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a response of the subject, the action stimulus source providing unit may include at least one of a display, a speaker, and an arm or leg having a joint have.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 센서부는, 카메라, 마이크로폰, 모션인식 센서, 터치감지 센서 중 적어도 하나를 포함하는 비부착식 센서부를 포함하는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a reaction of the subject, the sensor unit includes a non-detachable sensor unit including at least one of a camera, a microphone, a motion recognition sensor, and a touch sensing sensor can do.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 센서부는, EEG(Electroencephalogram) 센서, EDA(Electro dermal activity) 센서, HRV(Heart rate variability) 센서 중 적어도 하나를 포함하는 부착식 센서부를 더 포함하는 것을 특징으로 할 수 있다.In the apparatus for providing a training scenario based on a response of the subject, the sensor unit may include at least one of an EEG (Electroencephalogram) sensor, an EDA (Electrodermal activity) sensor, and a HRV (Heart rate variability) And an attachment type sensor unit.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 행동 자극원 제공부는, 생성된 제1훈련 시나리오를 기초로 상기 제1훈련 시나리오에 포함되는 행동 자극원을 피실험자에게 제공하는 것을 특징으로 할 수 있다.In addition, in an apparatus for providing a training scenario generated based on a response of the subject, the action stimulus source providing unit may provide a behavior stimulus source included in the first training scenario to a subject based on the generated first training scenario .

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 반응특징정보 생성부는, 상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1 반응특징정보를 생성하고, 상기 훈련 시나리오 생성부는,In an apparatus for providing a training scenario generated based on a reaction of the subject, the reaction characteristic information generation unit analyzes the subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario, Wherein the training scenario generating unit generates reaction characteristic information,

생성된 제1 반응특징정보를 기초로 제2훈련 시나리오를 생성하되, 상기 제2 훈련 시나리오는 하나 이상의 행동 자극원이 소정의 순서로 구성된 것을 특징으로 할 수 있다.And generating a second training scenario based on the generated first reaction feature information, wherein the second training scenario includes at least one action stimulus source in a predetermined order.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 반응특징정보 생성부는, 피실험자의 반응 개시시간, 반응 빈도수, 반응 지속시간, 반응 강도, 반응 정확도 중 적어도 하나를 이용하여 상기 기준 반응특징정보 또는 제1 반응특징정보를 생성하는 특징으로 할 수 있다.In an apparatus for providing a training scenario generated based on a reaction of the subject, the reaction characteristic information generation unit may use at least one of a reaction start time, a reaction frequency, a reaction duration, a reaction intensity, and a reaction accuracy of a subject The reference reaction characteristic information or the first reaction characteristic information may be generated.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 기준 반응특징정보 및 제1 반응특징정보는, 피실험자의 감정상태, 행동 자극원에 대한 친밀도 및 선호도 중 적어도 하나에 관련된 것을 특징으로 할 수 있다.
In the apparatus for providing a training scenario generated based on a reaction of the subject, the reference reaction characteristic information and the first reaction characteristic information are associated with at least one of an emotional state of the subject, an intimacy degree and a preference degree with respect to a behavior stimulus source . ≪ / RTI >

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 데이터베이스는, 상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응에 대한 보상 행동 자극원을 더 포함하되, 상기 보상 행동 자극원은, 피실험자, 피실험자와 관련된 구성원 또는 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함하고, 상기 행동 자극원 제공부는 상기 보상 행동 자극원을 피실험자에게 제공하는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a response of the subject, the database may further include a compensation action stimulus source for a subject's behavior response to each of the behavior stimulus sources provided on the basis of the first training scenario Wherein the action stimulus source includes at least one of an image of a subject, a member or a character related to a subject, an exaggerated praise voice, a melody, and specific motion information, and the action stimulus source providing unit To the subject.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 행동 자극원 제공부는, 상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응의 크기 및 종류에 따라서 보상 행동 자극원의 크기 및 종류를 변화시켜 제공하는 것을 특징으로 할 수 있다.Also, in an apparatus for providing a training scenario generated based on a response of the subject, the action stimulus source providing unit may be configured to classify the size and type of the subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario Therefore, it is possible to provide the compensation action stimulus source by changing the size and type of the compensation action stimulus source.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 데이터베이스는, 상기 기준 반응특징정보 및 제1 반응특징정보를 저장하고, 상기 훈련 시나리오 생성부는, 상기 데이터베이스에 저장된 상기 기준 반응특징정보 및 제1 반응특징정보를 기초로 상기 제2훈련 시나리오를 생성하는 것을 특징으로 할 수 있다.Also, in an apparatus for providing a training scenario generated based on a response of the subject, the database stores the criterion reaction characteristic information and the first reaction characteristic information, and the training scenario generating unit generates a training scenario based on the criterion And generating the second training scenario based on the reaction characteristic information and the first reaction characteristic information.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 훈련 시나리오 생성부는, 소정 횟수 반복되는 행동 자극원을 상기 제1훈련 시나리오 또는 제2훈련 시나리오에 포함시키는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a response of the subject, the training scenario generating unit may include a behavior stimulus source repeated a predetermined number of times in the first training scenario or the second training scenario .

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 실험자 입력을 수신하는 실험자 입력부를 더 포함하고, 상기 제1훈련 시나리오 또는 제2훈련 시나리오에 포함되는 행동 자극원 및 순서는 실험자 입력에 의해 변경 가능한 것을 특징으로 할 수 있다.In an apparatus for providing a training scenario generated based on a response of the subject, the apparatus further includes an experimenter input for receiving an experimenter input, wherein the behavior stimulus source and the order included in the first or second training scenario And can be changed by an experimenter input.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 피실험자의 상태에 대한 실험자 입력을 수신하는 실험자 입력부를 더 포함하고, 상기 훈련 시나리오 생성부는, 상기 실험자 입력, 기준 반응특징정보 및 제1 반응특징정보를 기초로 제2훈련 시나리오를 생성하는 것을 특징으로 할 수 있다.The training scenario generating unit may further include an experimenter input unit for receiving an experimenter input on the state of the subject in the apparatus for providing the training scenario based on the response of the subject, And generating a second training scenario based on the first reaction characteristic information.

또한, 상기 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치에서, 상기 장치가 이동하기 위한 이동수단을 더 포함하고, 상기 센서부는, 피실험자 식별을 위한 카메라부를 더 포함하되, 상기 장치는 식별된 피실험자에게 이동하여 상기 행동 자극원을 제공하는 것을 특징으로 할 수 있다.Further, in an apparatus for providing a training scenario generated based on a reaction of the subject, the apparatus further includes moving means for moving the apparatus, and the sensor unit further includes a camera unit for subject identification, To the subject, and provides the action stimulus source.

본 발명의 일 실시예에 따른 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은 피실험자에게 소정의 행동을 요구하는 행동 자극원을 피실험자에게 제공하는 단계, 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 단계, 센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 단계 및 생성된 기준 반응특징정보를 기초로, 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성하는 단계를 포함한다.A method of providing a training scenario generated based on a subject's reaction according to an embodiment of the present invention includes providing a subject with a behavior stimulus requesting a predetermined behavior to a subject, Sensing a reaction, analyzing a behavioral response of the sensed subject to generate reference response feature information, and generating a first training scenario in which one or more action stimulus sources are configured in a predetermined order based on the generated reference response feature information .

또한 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법에서, 상기 소정의 행동은, 인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정 자세 취하기를 포함하는 것을 특징으로 할 수 있다.In the method for providing a training scenario generated based on a reaction of a subject, the predetermined action may include greeting, eye contact, a friendly response, a touch game, a specific point-of- have.

또한 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은 상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1 반응특징정보를 생성하는 단계 및 제1 반응특징정보를 기초로, 제2 훈련 시나리오는 하나 이상의 행동 자극원이 소정의 순서로 구성된 제2훈련 시나리오를 생성하는 단계를 더 포함할 수 있다. A method for providing a training scenario generated based on a reaction of a subject includes analyzing a subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario to generate first reaction characteristic information, Based on the response feature information, the second training scenario may further comprise generating a second training scenario in which one or more action stimulus sources are arranged in a predetermined order.

또한 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은 상기 제2훈련 시나리오를 피실험자에게 제공하고 피실험자의 행동반응을 센싱하는 단계 및 상기 행동 반응을 기초로, 피실험자와 관련된 구성원 또는 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함하는 보상 행동 자극원을 피실험자에게 제공하는 단계를 더 포함할 수 있다.The method for providing the training scenario based on the subject's reaction may include providing the subject with the second training scenario and sensing the behavioral response of the subject, and analyzing the behavioral response of the subject or character associated with the subject based on the behavioral response The method may further include providing a subject with a compensation action stimulus source including at least one of a video, an exaggerated praise voice, a melody, and specific motion information.

본 발명의 일 실시예에 따르면, 피실험자의 개인적인 상태 및 행동 자극원에 대한 반응을 고려하여 피실험자의 치료에 적절한 훈련 시나리오를 제공할 수 있다.According to an embodiment of the present invention, it is possible to provide an appropriate training scenario for the subject's treatment taking into account the subject's personal condition and reaction to the action stimulus source.

도1은 본 발명의 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치에 대한 블록도이다.
도2는 본 발명의 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치의 일 예를 나타내는 개략도이다.
도3은 기준 피실험자의 성격을 구분하기 위한 기준을 제공하는 그래프이다.
도4는 본 발 명의 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치의 동작 메커니즘을 설명하기 위한 흐름도이다.
1 is a block diagram of an apparatus for providing training scenarios constructed based on a subject's behavioral response in accordance with an embodiment of the present invention.
2 is a schematic diagram showing an example of an apparatus for providing a training scenario configured based on a subject's behavioral response according to an embodiment of the present invention.
FIG. 3 is a graph that provides a criterion for distinguishing the characteristics of a reference subject.
4 is a flow chart for explaining an operation mechanism of a device providing a training scenario constructed based on a subject's behavioral response according to an embodiment of the present invention.

본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설치된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terminology used herein is for the purpose of describing particular embodiments only and is not intended to be limiting of the invention. The singular expressions include plural expressions unless the context clearly dictates otherwise. In this specification, the terms "comprises" or "having ", and the like, are used to specify that an installed feature, number, step, operation, But do not preclude the presence or addition of steps, operations, elements, parts, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미이다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미인 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다. 다만, 실시형태를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다. 또한, 도면에서의 각 구성요소들의 크기는 설명을 위하여 과장될 수 있으며, 실제로 적용되는 크기를 의미하는 것은 아니다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries should be construed as meaning consistent with meaning in the context of the relevant art and are not to be construed as ideal or overly formal in meaning unless expressly defined herein . Like reference numerals in the drawings denote like elements. In the following description, well-known functions or constructions are not described in detail to avoid unnecessarily obscuring the subject matter of the present invention. In addition, the size of each component in the drawings may be exaggerated for the sake of explanation and does not mean a size actually applied.

본 명세서에 기술된 실시예는 전적으로 하드웨어이거나, 부분적으로 하드웨어이고 부분적으로 소프트웨어이거나, 또는 전적으로 소프트웨어인 측면을 가질 수 있다. 본 명세서에서 "부(unit)", "모듈(module)", "장치" 또는 "시스템" 등은 하드웨어, 하드웨어와 소프트웨어의 조합, 또는 소프트웨어 등 컴퓨터 관련 엔티티(entity)를 지칭한다. 예를 들어, 본 명세서에서 부, 모듈, 장치 또는 시스템 등은 실행중인 프로세스, 프로세서, 객체(object), 실행 파일(executable), 실행 스레드(thread of execution), 프로그램(program), 및/또는 컴퓨터(computer)일 수 있으나, 이에 제한되는 것은 아니다. 예를 들어, 컴퓨터에서 실행중인 애플리케이션(application) 및 컴퓨터의 양쪽이 모두 본 명세서의 부, 모듈, 장치 또는 시스템 등에 해당할 수 있다. Embodiments described herein may be wholly hardware, partially hardware, partially software, or entirely software. A "unit," "module," "device," or "system" or the like in this specification refers to a computer-related entity such as a hardware, a combination of hardware and software, or software. A processor, an object, an executable, a thread of execution, a program, and / or a computer, for example, a computer, but is not limited to, a computer. For example, both an application running on a computer and a computer may correspond to a part, module, device or system of the present specification.

실시예들이 도면에 제시된 순서도를 참조로 하여 설명되었다. 간단히 설명하기 위하여 상기 방법은 일련의 블록들로 도시되고 설명되었으나, 본 발명은 상기 블록들의 순서에 한정되지 않고, 몇몇 블록들은 다른 블록들과 본 명세서에서 도시되고 기술된 것과 상이한 순서로 또는 동시에 일어날 수도 있으며, 동일한 또는 유사한 결과를 달성하는 다양한 다른 분기, 흐름 경로, 및 블록의 순서들이 구현될 수 있다. 또한, 본 명세서에서 기술되는 방법의 구현을 위하여 도시된 모든 블록들이 요구되지 않을 수도 있다. 나아가, 본 발명의 일 실시예에 따른 방법은 일련의 과정들을 수행하기 위한 컴퓨터 프로그램의 형태로 구현될 수도 있으며, 상기 컴퓨터 프로그램은 컴퓨터로 판독 가능한 기록 매체에 기록될 수도 있다.Embodiments have been described with reference to the flowcharts shown in the drawings. While the above method has been shown and described as a series of blocks for purposes of simplicity, it is to be understood that the invention is not limited to the order of the blocks, and that some blocks may be present in different orders and in different orders from that shown and described herein And various other branches, flow paths, and sequences of blocks that achieve the same or similar results may be implemented. Also, not all illustrated blocks may be required for implementation of the methods described herein. Further, the method according to an embodiment of the present invention may be implemented in the form of a computer program for performing a series of processes, and the computer program may be recorded in a computer-readable recording medium.

또한 본 설명에 있어서, 피실험자는 발달장애 아동일 수 있고, 실험자는 의사 등 치료사일 수 있으나 이에 한정되는 것은 아니다.
Also, in the present description, the subject may be a child with developmental disabilities, and the experimenter may be a physician, such as a physician, but is not limited thereto.

이하에서, 도면을 참조하여 본 발명의 실시예들에 대하여 상세히 살펴본다.Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

도1은 본 발명의 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치에 대한 블록도이고, 도2는 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치의 일 예를 나타내는 개략도이다.FIG. 1 is a block diagram of an apparatus for providing a training scenario based on a subject's behavioral response according to an embodiment of the present invention. FIG. 2 is a block diagram of a device for providing a training scenario configured based on the subject's behavioral response. Fig.

도1을 참조하면, 일 실시예에서 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치(1000)는 데이터베이스(DB; 100), 행동 자극원 제공부(200), 센서부(300), 반응특징정보 생성부(400) 및 훈련 시나리오 생성부(500)를 포함한다.Referring to FIG. 1, an apparatus 1000 for providing a training scenario configured based on a subject's behavioral response includes a database (DB) 100, a behavior stimulus source providing unit 200, a sensor unit 300, A response feature information generating unit 400 and a training scenario generating unit 500. [

데이터베이스(100)는 일시적 또는 비 일시적 기록매체일 수 있다. 데이터베이스(100)는 피실험자에게 소정의 행동을 요구하는 행동 자극원들을 저장할 수 있다. 상기 소정의 행동은 인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정자세 취하기 등을 포함할 수 있다. 즉, 행동 자극원은 피실험자의 심리적 상태 및 개인별 행동 특성을 분석하기 위한 다양한 행동 자극원이다.The database 100 may be a temporary or non-transitory recording medium. The database 100 may store action stimulus sources that require a subject to perform certain actions. The predetermined action may include greeting, eye contact, a friendly response, a touch game, taking a specific spot, taking a specific posture, and the like. In other words, the behavior stimulus source is a variety of action stimulus sources for analyzing the psychological state and individual behavior characteristics of the subject.

일 실시예에서 행동 자극원 제공부(200)는 데이터베이스(100)에 저장된 행동 자극원 중에서 적어도 하나의 행동 자극원을 피실험자에게 제공할 수 있다.In one embodiment, the behavior stimulus source preparation unit 200 may provide at least one behavior stimulus source among the behavior stimulus sources stored in the database 100 to the subject.

도2를 참조하면, 일 실시예에서, 행동 자극원 제공부(200)는 시각정보를 전달하기 위한 디스플레이(210), 청각정보를 전달하기 위한 스피커(220) 또는 관절을 가진 암(arm; 230) 또는 다리(미도시)를 포함할 수 있다. 일 실시예에서, 상기 디스플레이(210)는 복수의 디스플레이 장치를 포함할 수 있다. 복수의 디스플레이 장치는 장치의 다양한 부분에 배치되어 서로 다른 영상을 제공할 수도 있다. 예컨대, 복수의 디스플레이 장치 각각에서 서로 다른 신체부위 또는 과일을 표현할 수 있다.2, in one embodiment, the behavior stimulus source providing apparatus 200 includes a display 210 for transmitting visual information, a speaker 220 for conveying auditory information, or an arm 230 ) Or a leg (not shown). In one embodiment, the display 210 may include a plurality of display devices. The plurality of display devices may be disposed in various portions of the apparatus to provide different images. For example, each of the plurality of display devices can represent different body parts or fruits.

일 실시예에서, 행동 자극원 제공부(200)는 디스플레이를 통해 "안녕"이라는 문자를 표시하거나, 이 문자와 함께 "안녕"이라는 소리를 출력할 수도 있다. 또 다른 예로서 장치(1000)가 관절을 가진 암을 흔들면서 인사하는 제스쳐를 취하게 할 수도 있다. 즉, 행동 자극원 제공부(200)는 디스플레이, 스피커, 및 장치 자체적인 모션 중 적어도 하나를 통해 피실험자에게 행동 자극원을 전달할 수 있다.In one embodiment, the behavior stimulus source preparation unit 200 may display the character "Good bye " through the display, or may output a sound of" Good bye " As another example, device 1000 may have a gesture to greet and greet a cancer with joints. That is, the behavior stimulus source preparation unit 200 can transmit a behavior stimulus circle to the subject through at least one of the display, the speaker, and the device's own motion.

피실험자는 행동 자극원 제공부(200)로부터 제공받은 행동 자극원을 기초로 특정 반응을 한다. 예컨대, 행동 자극원 제공부(200)가 인사하기 및 터치게임을 순차적으로 제공하면, 피실험자는 장치(1000)에게 인사하고, 장치(1000)가 제공하는 터치게임을 수행한다.The subject performs a specific reaction based on the action stimulus source provided from the action stimulus source providing unit 200. For example, if the behavior stimulus source providing unit 200 provides a greeting and a touch game sequentially, the subject greets the device 1000 and performs a touch game provided by the device 1000. [

이때, 센서부(300)는 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱할 수 있다. 일 실시예에서 센서부(1000)는 피실험자의 신체에 부착되지 않는 센서로서, 카메라, 마이크로폰, 모션인식 센서, 터치감지 센서 중 적어도 하나를 포함할 수 있다. 카메라는 적외선 카메라, 단안 카메라 또는 이안 카메라(310)일 수 있으며, 모션인식 센서는 카메라로부터 획득한 영상을 처리하여 피실험자의 모션정보를 얻을 수 있다.At this time, the sensor unit 300 can sense the subject's behavioral response to the provided action stimulus source. In one embodiment, the sensor unit 1000 may include at least one of a camera, a microphone, a motion recognition sensor, and a touch sensing sensor, which is not attached to the subject's body. The camera may be an infrared camera, a monocular camera or an eye camera 310, and the motion recognition sensor may process the image acquired from the camera to obtain motion information of the subject.

터치감지 센서는 터치스크린(330) 또는 장치(1000)의 표면 일부분에 부착된 터치감지 영역(320)일 수 있다. 따라서 피실험자가 터치스크린으로 구성된 디스플레이를 터치하거나 장치(1000)의 터치감지 영역을 터치하는 동작을 감지할 수 있다.The touch sensitive sensor may be the touch screen 330 or the touch sensitive area 320 attached to a portion of the surface of the device 1000. Accordingly, the subject can sense an operation of touching the display configured by the touch screen or touching the touch detection area of the device 1000. [

다른 일 실시예에서, 센서부(1000)는 피실험자의 신체에 부착되는 센서로서 EEG(Electroencephalogram) 센서, EDA(Electro dermal activity) 센서, HRV(Heart rate variability) 센서 중 적어도 하나를 더 포함할 수 있다. 즉, 피실험자의 머리에 씌우거나, 흉부에 센서를 부착하여, 심전도, 뇌파등을 센싱함으로써 행동 자극원에 응답하는 피실험자의 상태를 더욱 구체적으로 분석할 수 있다.In another embodiment, the sensor unit 1000 may further include at least one of an Electroencephalogram (EEG) sensor, an Electrodermal activity (EDA) sensor, and a Heart rate variability (HRV) sensor attached to the subject's body . In other words, the condition of the subject responding to the action stimulus source can be more specifically analyzed by sensing the ECG, EEG, etc., by putting it on the head of the subject, attaching the sensor to the chest, and the like.

일 실시예에서, 반응특징정보 생성부(400)는 센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성한다. 상기 기준 반응특징정보는 피실험자의 감정상태, 행동 자극원에 대한 친밀도 및 선호도, 적응도를 포함할 수 있다. 상기 감정상태는 피실험자의 즐거움, 놀람, 화가남에 관련되고, 친밀도는 행동 자극원에 대하여 호의적인지 비 호의적인지에 관련된다. 또한 행동 자극원에 대한 선호도는 행동 자극원에 대한 행동반응이 적극적인지 아니면 소극적인지에 관련되고, 적응도는 행동 자극원에 대응이 적절한지 여부에 관련된다. 적응도는 터치게임에서 특히 적용될 수 있다.In one embodiment, the response feature information generation unit 400 analyzes the behavioral response of the sensed subject to generate reference response feature information. The reference response feature information may include an emotional state of the subject, an intimacy and preference for the action stimulus source, and an adaptability. The emotional state is related to the pleasure of the subject, the surprise, the angry person, and the intimacy is related to the benevolent or non-favorable response to the action stimulus source. Also, preference for behavioral stimuli is related to whether the behavioral response to the behavioral stimuli is active or passive, and the degree of adaptability is related to whether the response to behavioral stimuli is appropriate. Adaptability can be especially applied in touch games.

도3은 기준 피실험자의 성격을 구분하기 위한 기준을 제공하는 그래프이다. 또 다른 실시예에서 도3을 참조하면, 기준 반응특징정보는 피실험자의 성격을 외향적/내향적, 감정적 안정/불안정을 기준으로 피실험자가 신경질적인지, 우울한지, 침착한지, 낙관적인지 4분류로 구분할 수도 있다.FIG. 3 is a graph that provides a criterion for distinguishing the characteristics of a reference subject. In another embodiment, referring to FIG. 3, the reference response feature information may be grouped into four categories: subject extrovert / inward, emotional stability / unstable, nervous, depressed, have.

일 실시예에서, 훈련 시나리오 생성부(500)는 반응특징정보 생성부(400)에서 생성된 기준 반응특징정보를 기초로, 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성할 수 있다. 본 명세서에서 훈련 시나리오는 복수의 행동 자극원이 소정의 순서로 배열된 행동 자극원 세트이다.In one embodiment, the training scenario generating unit 500 generates a first training scenario in which at least one action stimulus source is configured in a predetermined order, based on the reference reaction feature information generated in the reaction feature information generating unit 400 . In this specification, the training scenario is a set of behavior stimulus sources in which a plurality of behavior stimulus sources are arranged in a predetermined order.

훈련 시나리오 생성부(500)는 기준 반응특징정보를 기초로 제1훈련 시나리오에 구성된 행동 자극원을 데이터베이스로부터 선택하고, 이를 배열할 수 있다. 예컨대 기준 반응특징정보에서 피실험자가 신경질적인 성격으로 결정된 경우, 신경질적인 성격의 치료에 적합한 행동 자극원들을 선별하고, 배열한다. 또한, 피실험자가 신경질적이면서 특정 행동 자극원에 대한 적응도가 현저히 떨어지는 경우 해당 행동 자극원을 우선적으로 배치하거나 반복하여 배치할 수도 있다. 따라서 기준 반응특징정보를 기초로 생성된 제1훈련 시나리오는 피실험자의 치료에 더욱 필요한 행동 자극원들로 구성될 수 있다. 즉, 훈련 시나리오 생성부(500)는 피실험자가 치료에 적극적인지 소극적인지를 구분하여 서로 다른 치료방법(행동 자극원 제공)을 수행하게 된다.The training scenario generating unit 500 can select the behavior stimulus source configured in the first training scenario based on the reference reaction feature information from the database and arrange it. For example, if the subject is determined to be nervous in the reference response feature information, select and arrange action stimulus sources suitable for treatment of nervous nature. In addition, if the subject is nervous and the adaptability to a particular action stimulus source is significantly low, the action stimulus source may be preferentially placed or repeatedly placed. Thus, the first training scenario, which is generated based on the reference response feature information, may consist of action stimulus sources that are more necessary for the treatment of the subject. That is, the training scenario generating unit 500 classifies whether the subject is active or passive in the treatment and performs different treatment methods (providing action stimulus source).

또 다른 예를 들면, 같은 그림 맞추기 터치게임이 행동 자극원으로서 제공되고, 사용자가 같은 그림을 거의 맞추지 못한 경우, 기준 반응특징정보는 피실험자가 그림 맞추기 터치게임에 대한 적응도가 낮음을 나타낸다. 훈련 시나리오 생성부(500)는 같은 그림 맞추기 터치게임에 대한 낮은 적응도를 참조하여 제1훈련 시나리오는 같은 그림 맞추기 터치게임을 초기에 배치하거나 반복 배치할 수 있다. 또한, 소극적이거나 적극적인 피실험자의 행동 반응 상태에 따라 훈련 시나리오의 배치를 달리할 수 있다.As another example, when the same picture-fit-touch game is provided as a behavioral stimulus source and the user hardly matches the same picture, the reference-response feature information indicates that the subject is less adaptive to the picture-fit-touch game. The training scenario generating unit 500 may initially place or repeatedly arrange the same picture matching touch game in the first training scenario by referring to the lower adaptation degree of the same picture matching touch game. In addition, the placement of the training scenarios may be different depending on the behavioral state of the passive or active subject.

상술한 설명에 따르면, 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치(1000)는 피실험자에게 소정의 행동 자극원을 제공하고, 행동 자극원에 대한 행동반응을 분석하여 피실험자의 성격 및 인지능력을 평가한다. 평가된 피실험자의 성격 및 인지능력은 반응특징정보라고 언급되며, 이 반응특징정보를 기초로 피실험자에게 제공할 행동 자극원들을 선택하고 배열한다. 즉, 최초 제공된 행동 자극원에 대한 응답을 기초로 피실험자의 상태를 판단하고, 피실험자에게 필요한 행동 자극원으로 구성된 훈련 시나리오를 생성한다. According to the above description, an apparatus 1000 for providing a training scenario configured based on an action response of a subject according to an embodiment provides a predetermined action stimulus source to a subject, analyzes an action response to the action stimulus source Evaluate the personality and cognitive abilities of the subjects. The personality and cognitive abilities of the assessed subjects are referred to as response feature information, and the action stimulus sources to be provided to the subject are selected and arranged based on the response feature information. That is, the state of the subject is determined based on the response to the initially provided action stimulus source, and a training scenario composed of the action stimulus source necessary for the subject is generated.

하기에서는 생성된 훈련 시나리오를 더 이용하여 더욱 피실험자에게 최적화된 다른 훈련 시나리오를 생성하는 기능에 대하여 설명한다.Hereinafter, the function of generating another training scenario optimized for the subject further using the generated training scenario will be described.

다른 일 실시예에서 반응특징정보 생성부(400)는 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1 반응특징정보를 생성한다. 제1 반응특징정보도 기준 반응특징정보와 유사하게 피실험자의 감정상태, 행동 자극원에 대한 친밀도 및 선호도, 적응도를 포함할 수 있다. 또한 반응특징정보 생성부(400)는 제1훈련 시나리오에 따라 제공된 행동 자극원에 대한 피실험자의 반응 개시시간, 반응 빈도수, 반응 지속시간, 반응 강도, 반응 정확도 중 적어도 하나를 이용하여 제1 반응특징정보를 생성할 수 있다. 또는 피실험자의 성격을 외향적/내향적, 감정적 안정/불안을 기준으로 신경질적인지, 우울한지, 침착한지, 낙관적인지 4분류로 구분할 수도 있다.In another embodiment, the reaction characteristic information generation unit 400 generates the first reaction characteristic information by analyzing the subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario. Similar to the reference response feature information, the first response feature information may include the emotional state of the subject, the familiarity and preference for the action stimulus source, and the fitness. Also, the reaction characteristic information generation unit 400 may generate the reaction characteristic information by using at least one of the reaction start time, the reaction frequency, the reaction duration, the reaction intensity, and the reaction accuracy of the reaction stimulus source provided by the first training scenario, Information can be generated. Or 4) whether the personality of the subject is nervous, depressed, calm, or optimistic on the basis of outward / inward, emotional stability / anxiety.

최초 행동 자극원이 제공된 경우와 마찬가지로 피실험자는 제1훈련 시나리오에 따라 제공되는 행동 자극원들에 대하여 행동반응을 보이고, 센서부(300)는 피실험자의 행동반응을 센싱하고, 센싱값을 반응특징정보 생성부(400)에 제공할 수 있다.As in the case where the first action stimulus source is provided, the subject exhibits behavioral responses to the action stimuli provided according to the first training scenario, the sensor unit 300 senses the behavioral response of the subject, To the generating unit 400.

반응특징정보 생성부(400)는 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1반응특징정보를 생성할 수 있다. 즉, 제1반응 정보는 제1훈련 시나리오에 포함되는 행동 자극원에 대한 피실험자의 행동반응에 대한 분석결과이다.The reaction characteristic information generation unit 400 may generate the first reaction characteristic information by analyzing the subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario. That is, the first reaction information is the analysis result of the subject's behavioral response to the action stimulus source included in the first training scenario.

훈련 시나리오 생성부(500)는 위와 같이 생성된 제1반응특징정보를 기초로 제2훈련 시나리오를 생성할 수 있다. 제2훈련 시나리오는 제1훈련 시나리오와 유사하게 복수의 행동 자극원이 소정의 순서로 배열된 행동 자극원의 세트이다.The training scenario generating unit 500 may generate the second training scenario based on the first reaction feature information generated as described above. The second training scenario is a set of action stimulus sources in which a plurality of action stimulus sources are arranged in a predetermined order similar to the first training scenario.

즉, 제1훈련 시나리오는 각각의 훈련 시나리오에 포함되는 행동 자극원을 선택함에 있어서 피실험자의 반응에 무관한 행동 자극원에 대한 기준 반응특징정보를 기초로 하지만, 제2훈련 시나리오는 피실험자의 반응결과를 기초로 생성된 행동 자극원에 대한 제1반응특징정보를 기초로 생성되므로, 더욱 피실험자에게 최적화될 수 있다.That is, the first training scenario is based on the reference response characteristic information for the action stimulus source which is independent of the subject's reaction in selecting the action stimulus source included in each training scenario, while the second training scenario is based on the subject's reaction result Is generated on the basis of the first response feature information for the action stimulus source generated on the basis of the second reaction feature information.

다른 일 실시예에서, 데이터베이스(100)는 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응에 대한 보상 행동 자극원을 더 포함할 수 있다. 상기 보상 행동 자극원은, 피실험자, 피실험자와 관련된 구성원 또는 행동 반응을 가질만한 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함할 수 있다. In another embodiment, the database 100 may further comprise a compensating action stimulus source for the subject's behavioral response to each of the behavioral stimuli provided based on the first training scenario. The compensation behavior stimulus source may include at least one of an image of a subject, a member related to a subject, or a character having an action response, an exaggerated praise voice, a melody, and specific motion information.

행동 자극원 제공부(200)는 디스플레이, 마이크, 발광부, 관절을 가진 암(arm)을 이용하여 보상 행동 자극원을 피실험자에게 제공할 수 있다.The action stimulus source providing unit 200 may provide a compensating action stimulus source to a subject using an arm having a display, a microphone, a light emitting unit, and a joint.

상기 보상 행동 자극원은 피실험자가 좋아하거나 흥미를 가질만한 컨텐츠를 제공하여 피실험자의 적극성을 유도할 수 있다. 또한 보상 행동 자극원으로서, 과장된 칭찬과 멜로디는 피실험자의 행동반응의 동기부여 및 적극성을 향상시키는 효과가 있다.The compensation action stimulus source can induce the aggressiveness of the subject by providing content that the subject likes or may be interested in. Also, as a compensatory behavior stimulus source, exaggerated praise and melody have the effect of enhancing the motivation and aggressiveness of the subject 's behavioral response.

일 실시예에서 행동 자극원 제공부(200)는 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응의 크기 및 종류에 따라서 보상 자극의 크기 및 종류를 변화시켜 제공할 수도 있다. 예컨대, 인사하기, 눈맞추기, 호명하기 등 행동 자극원에 대한 피실험자의 반응이 연속적으로 높게(정상인에 가깝게) 나타난다면, 그에 대한 보상의 강도를 점진적으로 높이도록 멜로디의 크기를 크게 하거나 종류를 달리하여 피실험자의 의욕을 고취시킬 수 있다.In one embodiment, the behavior stimulus source preparation unit 200 may vary the magnitude and type of the stimulation stimulus according to the magnitude and type of the subject's behavioral response to each of the behavior stimulus sources provided on the basis of the first training scenario . For example, if a subject's response to a behavioral stimulus source such as greeting, eye-pairing, or calling is continuously high (close to a normal person), increase the size of the melody or increase the size of the melody This can be done in the following manner.

다른 일 실시예에서, 데이터베이스(100)는 기준 반응특징정보 및 제1 반응특징정보를 저장하고, 훈련 시나리오 생성부(500)는 데이터베이스(100)에 저장된 기준 반응특징정보 및 제1 반응특징정보를 기초로 상기 제2훈련 시나리오를 생성할 수도 있다. 즉, 기준 반응특징정보를 데이터베이스에 저장하여 두었다가, 제1반응특징정보와 함께 기준 반응특징정보를 고려하여 제2훈련 시나리오를 생성할 수도 있다. 이 경우, 피실험자에 대한 반응결과 데이터량이 증가하므로, 피실험자에게 조금 더 최적화된 훈련 시나리오가 생성될 수 있다.In another embodiment, the database 100 stores reference response feature information and first response feature information, and the training scenario generating unit 500 generates reference response feature information and first response feature information stored in the database 100 The second training scenario may be generated based on the second training scenario. That is, the reference response feature information may be stored in the database, and the second training scenario may be generated by considering the reference response feature information together with the first response feature information. In this case, since the amount of data resulting from the reaction to the subject increases, a more optimized training scenario may be generated for the subject.

또한 제2훈련 시나리오도 제1훈련 시나리오와 마찬가지로 소정횟수 반복되는 행동 자극원을 포함하여, 피실험자에게 필요한 행동 자극원을 충분히 제공하며 부족한 부분을 집중적으로 치료할 수 있도록 할 수 있다.In addition, the second training scenario may include a behavior stimulus source repeated a predetermined number of times in a manner similar to the first training scenario, thereby sufficiently providing the action stimulus source necessary for the subject, and intensively treating the deficient portion.

다른 일 실시예에서 훈련 시나리오는 반응특징정보 외에 실험자의 입력을 더 이용하여 생성될 수 있다. 즉, 실험자는 훈련 시나리오 생성부가 생성한 훈련 시나리오를 검토하고, 훈련 시나리오에 특정 행동 자극원을 더하거나 뺄 수 있으며, 그 순서를 변경할 수 있다. 즉, 제1훈련 시나리오 또는 제2훈련 시나리오에 포함되는 행동 자극원 및 그 순서는 실험자 입력에 의해 변경될 수 있다.In another embodiment, the training scenario may be generated using more of the experimenter's input besides the response feature information. That is, the experimenter can review the training scenarios generated by the training scenario creator, add or subtract specific action stimulus sources to the training scenarios, and change the order. That is, the action stimulus source included in the first training scenario or the second training scenario and the order thereof can be changed by the experimenter input.

이와 같은 사용자 입력을 위해, 장치(1000)는 실험자 입력을 수신하는 실험자 입력부를 더 포함할 수 있다. 이러한 실험자 입력부는 장치(1000)에 부탁된 터치 스크린(330)에 통합되거나, 장치(1000)과 무선 통신할 수 있는 임의의 외부장치(미도시)일 수 있다. 장치(1000)는 외부장치와의 무선통신을 위해 통신모듈을 더 포함할 수 있다. For such user input, the apparatus 1000 may further include an experimenter input for receiving an experimenter input. Such an experimenter input may be any external device (not shown) that may be incorporated into the touch screen 330, or wirelessly communicating with the device 1000, The apparatus 1000 may further include a communication module for wireless communication with an external device.

또 다른 일 실시예에서, 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치(1000)는 이동하기 위한 이동수단(600)을 더 포함할 수 있다. 초기에 피실험자의 관심을 끌기 위해서 장치(1000)는 자동으로 피실험자에게 다가와서 행동 자극원을 제공할 수 있다.In yet another embodiment, an apparatus 1000 for providing training scenarios based on a subject's behavioral response may further comprise a moving means 600 for moving. To initially attract the subject's interest, the device 1000 can automatically approach the subject and provide a behavioral stimulus source.

이를 위해서, 장치(1000)의 센서부(300)는 피실험자를 식별하기 위한 카메라부를 더 포함할 수 있으며, 센서부(300)는 촬영된 영상에서 피실험자를 식별하고 식별된 피실험자에게 이동할 수 있다. To this end, the sensor unit 300 of the apparatus 1000 may further include a camera unit for identifying the subject, and the sensor unit 300 may identify the subject in the photographed image and move to the identified subject.

도4는 본 발 명의 일 실시예에 따른 피실험자의 행동반응을 기초로 구성된 훈련 시나리오를 제공하는 장치의 동작 메커니즘을 설명하기 위한 흐름도이다.4 is a flow chart for explaining an operation mechanism of a device providing a training scenario constructed based on a subject's behavioral response according to an embodiment of the present invention.

도4를 참조하면, 단계(S1)에서, 장치(1000)는 피실험자에게 소정의 행동을 요구하는 행동 자극원a 와 행동 자극원b를 순차적으로 제공한다. 상기 행동 자극원a 와 행동 자극원b는 데이터베이스(1000)에 저장되어 있는 복수의 행동 자극원 중에서 피실험자의 행동반응 특징 또는 성격을 기초로 선택될 수 있다. 또는 실험자의 입력에 의해 선택될 수 있다.Referring to FIG. 4, in step S1, the apparatus 1000 sequentially provides a behavior stimulus circle a and a behavior stimulus circle b that require a subject to perform a predetermined action. The behavior stimulus source a and the behavior stimulus source b can be selected based on the behavior response characteristic or personality of the subject among a plurality of behavior stimulus sources stored in the database 1000. Or by the experimenter's input.

단계(S1)에서 행동 자극원a가 제공되면 피실험자는 행동 자극원a에 대한 행동반응a를 보인다. 그 후 행동 자극원b가 제공되고 피실험자는 행동반응b를 보인다. 센서부(300)는 다양한 센서를 이용하여 이러한 행동반응a 및 행동반응b를 센싱한다.When the action stimulus circle a is provided in step S1, the subject exhibits the behavior response a to the action stimulus circle a. Then a behavioral stimulus circle b is provided and the subject exhibits behavioral response b. The sensor unit 300 senses the behavior response a and the behavior response b using various sensors.

단계(S2)에서, 반응특징정보 생성부(400)는 행동반응a 및 행동반응b를 분석하여 기준 반응특징정보를 생성한다. 도4를 참조하면, 반응특징정보 생성부(400)는 행동반응a에 대한 분석결과 A10과 행동반응b에 대한 분석결과 B3을 산출할 수 있다. 도4의 예에서 기준 반응특징정보는 분석결과 A10과 B3을 포함하게 된다. 상기 A10 또는 B3은 설명의 단순화를 위해 3또는 10과 같은 하나의 숫자로(일차원적으로) 표현한 것이고 행동반응에 대한 분석결과는 더욱 복수의 요소로 표현(고차원 결과)을 가질 수도 있다.In step S2, the reaction feature information generation unit 400 analyzes the behavior reaction " a " and the behavior reaction " b " to generate reference response feature information. Referring to FIG. 4, the reaction characteristic information generation unit 400 may calculate the analysis result A10 for the behavior reaction a and the analysis result B3 for the behavior reaction b. In the example of FIG. 4, the reference response feature information includes analysis results A10 and B3. The A10 or B3 may be expressed as a single number (one dimension) such as 3 or 10 for the sake of simplicity of explanation, and the result of the analysis of the behavioral response may be represented by a plurality of elements (higher dimensional results).

단계(S3)에서, 훈련 시나리오 생성부(500)는 기준 반응특징정보(예컨대 A10, B3)를 기초로 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성할 수 있다. 도4를 참조하면, 훈련 시나리오 생성부(500)는 행동 자극원들(b-b-c-a)로 구성된 제1훈련 시나리오를 생성할 수 있다. 상기 제1훈련 시나리오는 피실험자의 기준 반응특징정보에서 행동 자극원b에 대한 피실험자의 기능을 향상시키기 위해 행동 자극원b를 훈련 초기에 반복하여 배치한 것이다. 이러한 순서 및 반복횟수는 훈련 시나리오를 생성하는 알고리즘에 따라서 상이할 수 있다. In step S3, the training scenario generating unit 500 may generate a first training scenario in which one or more action stimulus sources are arranged in a predetermined order based on the reference reaction feature information (e.g., A10, B3). Referring to FIG. 4, the training scenario generating unit 500 may generate a first training scenario composed of action stimulus sources (b-b-c-a). In the first training scenario, the action stimulus circle b is repeatedly arranged at the beginning of the training in order to improve the function of the subject to the behavior stimulus circle b in the reference response characteristic information of the subject. This order and the number of iterations may differ depending on the algorithm generating the training scenario.

단계(S4)에서 행동 자극원 제공부(200)는 제1훈련 시나리오를 기초로 행동 자극원(b-b-c-a)를 순차적으로 피실험자에게 제공할 수 있다. 이와 함께 센서부(300)행동 자극원(b-b-c-a) 각각에 대한 행동반응을 센싱한다.In step S4, the behavior stimulus source preparation unit 200 can sequentially provide the behavior stimulus source (b-b-c-a) to the subject based on the first training scenario. At the same time, the sensor unit 300 senses a behavioral reaction to each of the action stimulus sources (b-b-c-a).

단계(S5)에서 반응특징정보 생성부(400)는 행동반응b, 행동반응b', 행동반응c 및 행동반응a를 분석하여 기준 반응특징정보를 생성한다. 예컨대, 제1훈련 시나리오에 반응한 피실험자의 행동반응의 제1 반응특징정보는(B4, B6, C5, A15)일 수 있다. In step S5, the reaction feature information generation unit 400 analyzes the behavior reaction b, the behavior reaction b ', the behavior reaction c, and the behavior reaction a to generate reference response feature information. For example, the first response feature information of the subject's behavioral response in response to the first training scenario may be (B4, B6, C5, A15).

단계(S6)에서 훈련 시나리오 생성부(500)은 상기 제1 반응특징정보를 기초로 제2훈련 시나리오를 생성할 수 있다. 도4의 예에서 생성된 제2훈련 시나리오는 행동 자극원(c-a-d-f)로 구성된다.In step S6, the training scenario generating unit 500 may generate a second training scenario based on the first reaction feature information. The second training scenario generated in the example of Fig. 4 consists of a behavior stimulus source (c-a-d-f).

상술한 단계(S1) 내지 단계(S6)은 본 발명의 일 실시예에 불과하며, 장치(1000)는 피실험자로부터 떨어진 원격지에서 피실험자를 식별하고, 피실험자에게 이동한 뒤 행동 자극원을 제공할 수 있다. 또는 상기 훈련 시나리오는 기준 반응특징정보 및 제1 반응특징정보 중 하나 또는 두 개 모두를 이용하여 생성할 수 있으며, 실험자 입력을 더 이용하여 생성할 수도 있다.Steps S1 to S6 described above are only one embodiment of the present invention and the apparatus 1000 can identify a subject at a remote location away from the subject and provide a behavior stimulus circle after moving to the subject . Alternatively, the training scenario may be generated using one or both of the reference response feature information and the first response feature information, or may be generated by further using an experimenter input.

도5는 본 발명의 일 실시예에 따른 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법을 나타내는 순서도이다. 도5를 참조하면, 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은, 피실험자에게 소정의 행동을 요구하는 행동 자극원을 피실험자에게 제공하는 단계(S10), 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 단계(S20), 센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 단계(S30) 및 생성된 기준 반응특징정보를 기초로, 하나 이상의 행동 자극원이 소정의 순서로 구성된 제1훈련 시나리오를 생성하는 단계(S40)를 포함한다. 여기서 상기 소정의 행동은, 인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정 자세 취하기를 포함할 수 있다. 5 is a flow diagram illustrating a method for providing a training scenario generated based on a subject's response in accordance with an embodiment of the present invention. Referring to FIG. 5, a method of providing a training scenario based on a subject's reaction includes providing a subject with a behavior stimulus requesting a predetermined behavior to a subject (S10) (S30) of analyzing the behavioral response of the sensed subject to generate reference response feature information, and a step of, based on the generated reference response feature information, And a step (S40) of generating a first training scenario composed in sequence. Here, the predetermined action may include greeting, eye contact, a call reaction, a touch game, a specific point gaze, and a specific posture.

도6은 본 발명의 다른 일 실시예에 따른 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법을 나타내는 순서도이다. 도6을 참조하면, 다른 일 실시예에서 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은 상기 단계(S10-S40)에 더하여, 상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1 반응특징정보를 생성하는 단계(S50) 및 제1 반응특징정보를 기초로, 제2 훈련 시나리오는 하나 이상의 행동 자극원이 소정의 순서로 구성된 제2훈련 시나리오를 생성하는 단계(S60)을 더 포함할 수 있다.6 is a flowchart showing a method of providing a training scenario generated based on a subject's reaction according to another embodiment of the present invention. Referring to FIG. 6, in another embodiment, a method of providing a training scenario generated based on a subject's reaction includes, in addition to the steps S10-S40, (S50) of analyzing the behavioral response of the subject and analyzing the behavioral response of the subject, and generating the second response characteristic information based on the first response characteristic information. The second training scenario includes a second training scenario (S60). ≪ RTI ID = 0.0 >

또 다른 실시예에서, 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은, 도6에 도시된 실시예에 더하여, 상기 제2훈련 시나리오를 피실험자에게 제공하고 피실험자의 행동반응을 센싱하는 단계 및 상기 행동 반응을 기초로, 피실험자와 관련된 구성원 또는 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함하는 보상 행동 자극원을 피실험자에게 제공하는 단계를 더 포함할 수 있다. In another embodiment, a method of providing a training scenario generated based on a subject's reaction comprises, in addition to the embodiment shown in FIG. 6, providing the subject with the second training scenario and sensing the behavioral response of the subject And providing a subject with a compensation action stimulus source including at least one of a video, an exaggerated praise voice, a melody, and specific motion information on a member or a character related to the subject based on the behavior reaction.

상기 도5 및 도6을 통하여 설명된 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법은 상기 도1의 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치의 적어도 일부를 이용하여 실행될 수 있다.The method for providing the generated training scenario based on the response of the subject described above with reference to FIGS. 5 and 6 is executed using at least a part of the device providing the generated training scenario based on the reaction of the subject in FIG. 1 .

이상에서 살펴본 본 발명은 도면에 도시된 실시예들을 참고로 하여 설명하였으나 이는 예시적인 것에 불과하며 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 실시예의 변형이 가능하다는 점을 이해할 것이다. 그러나, 이와 같은 변형은 본 발명의 기술적 보호범위 내에 있다고 보아야 한다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해서 정해져야 할 것이다.While the invention has been shown and described with reference to certain embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. However, it should be understood that such modifications are within the technical scope of the present invention. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

Claims (20)

피실험자에게 소정의 행동을 요구하는 행동 자극원들이 저장된 데이터베이스;
상기 데이터베이스에 저장된 행동 자극원 중 적어도 하나의 행동 자극원을 피실험자에게 제공하는 행동 자극원 제공부;
제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 센서부;
센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 반응특징정보 생성부; 및
생성된 기준 반응특징정보를 기초로, 복수의 행동 자극원이 소정의 순서로 배열된 제1훈련 시나리오를 생성하는 훈련 시나리오 생성부를 포함하되,
상기 기준 반응특징정보는 피실험자의 성격, 피실험자의 감정상태, 행동 자극원에 대한 친밀도, 행동 자극원에 대한 선호도 및 행동 자극원에 대한 적응도 중 적어도 하나에 관련되는 것을 특징으로 하는, 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
A database storing behavioral stimulus sources that require a subject to perform an action;
A behavior stimulus source providing at least one behavior stimulus source among the behavior stimulus sources stored in the database to the subject;
A sensor unit for sensing an action response of the subject to the provided action stimulus source;
A reaction feature information generation unit for generating reference reaction feature information by analyzing behavioral responses of the sensed subject; And
And a training scenario generator for generating a first training scenario in which a plurality of behavior stimulus sources are arranged in a predetermined order based on the generated reference reaction characteristic information,
Wherein the reference response feature information is related to at least one of a personality of the subject, an emotional state of the subject, an intimacy to the behavior stimulus source, a preference for the behavior stimulus source, and an adaptability to the behavior stimulus source The training scenario being generated based on the training scenario.
제1항에 있어서,
상기 소정의 행동은,
인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정 자세 취하기를 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
The method according to claim 1,
The predetermined action may include:
Wherein the training scenario is generated based on a response of a subject characterized by: greeting, eye contact, a friendly response, a touch game, a specific point of gaze, and a specific posture.
제1항에 있어서,
상기 행동 자극원 제공부는,
디스플레이, 스피커, 관절을 가진 암(arm) 또는 다리 중 적어도 하나를 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
The method according to claim 1,
Wherein the action stimulus source providing unit comprises:
A display, a speaker, and an arm or leg having a joint. The apparatus of claim 1,
제1항에 있어서,
상기 센서부는,
카메라, 마이크로폰, 모션인식 센서, 터치감지 센서 중 적어도 하나를 포함하는 비부착식 센서부를 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
The method according to claim 1,
The sensor unit includes:
And a non-detachable sensor section including at least one of a camera, a microphone, a motion recognition sensor, and a touch detection sensor, based on a response of the subject.
제4항에 있어서,
상기 센서부는,
EEG(Electroencephalogram) 센서, EDA(Electro dermal activity) 센서, HRV(Heart rate variability) 센서 중 적어도 하나를 포함하는 부착식 센서부를 더 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
5. The method of claim 4,
The sensor unit includes:
The apparatus further comprises an attachment type sensor unit including at least one of an electroencephalogram (EEG) sensor, an electrodermal activity (EDA) sensor, and a heart rate variability (HRV) sensor. .
제1항에 있어서,
상기 행동 자극원 제공부는,
생성된 제1훈련 시나리오를 기초로 상기 제1훈련 시나리오에 포함되는 행동 자극원을 피실험자에게 제공하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
The method according to claim 1,
Wherein the action stimulus source providing unit comprises:
And provides the subject with a behavior stimulus source included in the first training scenario based on the generated first training scenario.
피실험자에게 소정의 행동을 요구하는 행동 자극원들이 저장된 데이터베이스;
상기 데이터베이스에 저장된 행동 자극원 중 적어도 하나의 행동 자극원을 피실험자에게 제공하는 행동 자극원 제공부;
제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱하는 센서부;
센싱된 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 반응특징정보 생성부; 및
생성된 기준 반응특징정보를 기초로, 복수의 행동 자극원이 소정의 순서로 배열된 제1훈련 시나리오를 생성하는 훈련 시나리오 생성부를 포함하되,
상기 행동 자극원 제공부는,
생성된 제1훈련 시나리오를 기초로 상기 제1훈련 시나리오에 포함되는 행동 자극원을 피실험자에게 제공하고,
상기 반응특징정보 생성부는,
상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 분석하여 제1 반응특징정보를 생성하고,
상기 훈련 시나리오 생성부는,
생성된 제1 반응특징정보를 기초로 제2훈련 시나리오를 생성하되,
상기 제2 훈련 시나리오는 하나 이상의 행동 자극원이 소정의 순서로 구성된 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
A database storing behavioral stimulus sources that require a subject to perform an action;
A behavior stimulus source providing at least one behavior stimulus source among the behavior stimulus sources stored in the database to the subject;
A sensor unit for sensing an action response of the subject to the provided action stimulus source;
A reaction feature information generation unit for generating reference reaction feature information by analyzing behavioral responses of the sensed subject; And
And a training scenario generator for generating a first training scenario in which a plurality of behavior stimulus sources are arranged in a predetermined order based on the generated reference reaction characteristic information,
Wherein the action stimulus source providing unit comprises:
Providing a subject with a behavior stimulus source included in the first training scenario based on the generated first training scenario,
Wherein the reaction characteristic information generation unit comprises:
Analyzing a subject's behavioral response to each of the behavior stimulus sources provided on the basis of the first training scenario to generate first response feature information,
Wherein the training scenario generating unit comprises:
Generating a second training scenario based on the generated first reaction feature information,
Wherein the second training scenario is generated based on a response of the subject characterized in that one or more action stimulus sources are arranged in a predetermined order.
제7항에 있어서,
상기 반응특징정보 생성부는,
피실험자의 반응 개시시간, 반응 빈도수, 반응 지속시간, 반응 강도, 반응 정확도 중 적어도 하나를 이용하여 상기 기준 반응특징정보 또는 제1 반응특징정보를 생성하는 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
Wherein the reaction characteristic information generation unit comprises:
A training generated based on a response of a subject having the characteristic of generating the reference reaction characteristic information or the first reaction characteristic information by using at least one of a reaction start time, a reaction frequency, a reaction duration, a reaction intensity, A device that provides a scenario.
제8항에 있어서,
상기 기준 반응특징정보 및 제1 반응특징정보는,
피실험자의 감정상태, 행동 자극원에 대한 친밀도 및 선호도 중 적어도 하나에 관련된 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
9. The method of claim 8,
The reference reaction characteristic information and the first reaction characteristic information may include,
Wherein the training scenario is based on a response of the subject characterized by at least one of an emotional state of the subject, an intimacy of the stimulus source, and a preference.
제7항에 있어서,
상기 데이터베이스는,
상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응에 대한 보상 행동 자극원을 더 포함하되,
상기 보상 행동 자극원은, 피실험자, 피실험자와 관련된 구성원 또는 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함하고,
상기 행동 자극원 제공부는 상기 보상 행동 자극원을 피실험자에게 제공하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
The database includes:
And a compensation action stimulus source for a subject's behavioral response to each of the behavioral stimulus sources provided on the basis of the first training scenario,
Wherein the compensation action stimulus source includes at least one of an image of a subject, a member or a character associated with a subject, an exaggerated praise voice, a melody, and specific motion information,
Wherein the action stimulus source providing unit provides the subject with the compensation action stimulus source.
제10항에 있어서,
상기 행동 자극원 제공부는,
상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응의 크기 및 종류에 따라서 보상 행동 자극원의 크기 및 종류를 변화시켜 제공하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
11. The method of claim 10,
Wherein the action stimulus source providing unit comprises:
And the size and type of the compensation action stimulus source are varied according to the magnitude and type of the subject's behavioral response to each of the behavior stimulus sources provided on the basis of the first training scenario. A device that provides training scenarios.
제7항에 있어서,
상기 데이터베이스는,
상기 기준 반응특징정보 및 제1 반응특징정보를 저장하고,
상기 훈련 시나리오 생성부는,
상기 데이터베이스에 저장된 상기 기준 반응특징정보 및 제1 반응특징정보를 기초로 상기 제2훈련 시나리오를 생성하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
The database includes:
Storing the reference reaction characteristic information and the first reaction characteristic information,
Wherein the training scenario generating unit comprises:
And generates the second training scenario based on the reference reaction feature information and the first reaction feature information stored in the database.
제7항에 있어서,
상기 훈련 시나리오 생성부는,
소정 횟수 반복되는 행동 자극원을 상기 제1훈련 시나리오 또는 제2훈련 시나리오에 포함시키는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
Wherein the training scenario generating unit comprises:
And wherein the action stimulus source is repeatedly included in the first training scenario or the second training scenario in a predetermined number of times.
제7항에 있어서,
실험자 입력을 수신하는 실험자 입력부를 더 포함하고,
상기 제1훈련 시나리오 또는 제2훈련 시나리오에 포함되는 행동 자극원 및 순서는 실험자 입력에 의해 변경 가능한 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
Further comprising an experimenter input for receiving an experimenter input,
Wherein the behavior stimulus source and sequence included in the first training scenario or the second training scenario are changeable by an experimenter input.
제7항에 있어서,
피실험자의 상태에 대한 실험자 입력을 수신하는 실험자 입력부를 더 포함하고,
상기 훈련 시나리오 생성부는,
상기 실험자 입력, 기준 반응특징정보 및 제1 반응특징정보를 기초로 제2훈련 시나리오를 생성하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
8. The method of claim 7,
Further comprising an experimenter input for receiving an experimenter input for a state of the subject,
Wherein the training scenario generating unit comprises:
And generating a second training scenario based on the experimenter input, the reference response feature information, and the first response feature information.
제1항에 있어서,
상기 장치가 이동하기 위한 이동수단을 더 포함하고,
상기 센서부는, 피실험자 식별을 위한 카메라부를 더 포함하되,
상기 장치는 식별된 피실험자에게 이동하여 상기 행동 자극원을 제공하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 장치.
The method according to claim 1,
Further comprising moving means for moving said device,
The sensor unit may further include a camera unit for identifying a subject,
Wherein the device is moved to an identified subject to provide the behavior stimulus source. ≪ Desc / Clms Page number 13 >
피실험자에게 제공된 행동 자극원에 대한 피실험자의 행동반응을 센싱한 제1 센싱 데이터를 수신하는 단계;
상기 제1 센싱 데이터에 기초하여 상기 피실험자의 행동반응을 분석하여 기준 반응특징정보를 생성하는 단계; 및
생성된 기준 반응특징정보를 기초로, 복수의 행동 자극원이 소정의 순서로 배열된 제1훈련 시나리오를 생성하는 단계를 포함하되,
상기 기준 반응특징정보는 피실험자의 성격, 피실험자의 감정상태, 행동 자극원에 대한 친밀도, 행동 자극원에 대한 선호도 및 행동 자극원에 대한 적응도 중 적어도 하나에 관련되는 것을 특징으로 하는, 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법.
The method comprising: receiving first sensing data that senses a subject's behavioral response to a behavior stimulus source provided to a subject;
Analyzing a behavioral response of the subject based on the first sensing data to generate reference response characteristic information; And
Generating a first training scenario in which a plurality of action stimulus sources are arranged in a predetermined order based on the generated reference reaction characteristic information,
Wherein the reference response feature information is related to at least one of a personality of the subject, an emotional state of the subject, an intimacy to the behavior stimulus source, a preference for the behavior stimulus source, and an adaptability to the behavior stimulus source The method comprising the steps < RTI ID = 0.0 > of: < / RTI >
제17항에 있어서,
상기 소정의 행동은,
인사하기, 눈맞춤, 호명반응, 터치게임, 특정지점 응시하기, 특정 자세 취하기를 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법.
18. The method of claim 17,
The predetermined action may include:
A method of providing a training scenario generated based on a subject's reaction, characterized by comprising greeting, eye contact, a friendly response, a touch game, a specific point of gazing, and taking a specific posture.
제18항에 있어서,
상기 제1훈련 시나리오를 기초로 제공된 행동 자극원 각각에 대한 피실험자의 행동반응을 센싱한 제2 센싱 데이터를 분석하여 제1 반응특징정보를 생성하는 단계; 및
제1 반응특징정보를 기초로, 제2 훈련 시나리오는 하나 이상의 행동 자극원이 소정의 순서로 구성된 제2훈련 시나리오를 생성하는 단계를 더 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법.
19. The method of claim 18,
Generating first response feature information by analyzing second sensing data that senses a subject's behavioral response to each of the action stimulus sources provided on the basis of the first training scenario; And
Based on the first response feature information, the second training scenario further comprises generating a second training scenario in which one or more action stimulus sources are arranged in a predetermined order. How to provide scenarios.
제19항에 있어서,
피실험자에게 제공된 상기 제2훈련 시나리오에 대한 피실험자의 행동반응을 센싱한 제3 센싱 데이터를 수신하는 단계; 및
상기 제3 센싱 데이터에 기초하여 상기 피실험자의 행동반응을 분석하고 분석 결과를 기초로, 피실험자와 관련된 구성원 또는 캐릭터에 대한 영상, 과장된 칭찬 음성, 멜로디, 특정 모션 정보 중 적어도 하나를 포함하는 보상 행동 자극원을 생성하는 단계를 더 포함하는 것을 특징으로 하는 피실험자의 반응을 기초로 생성된 훈련 시나리오를 제공하는 방법.
20. The method of claim 19,
Receiving third sensing data that senses a subject's behavioral response to the second training scenario provided to the subject; And
And the second sensing data is analyzed based on the third sensing data, and based on the analysis result, a compensation action stimulus including at least one of a video, an exaggerated praise voice, a melody, and specific motion information about a member or a character related to the subject And generating a circle based on the response of the subject.
KR1020130141994A 2013-11-21 2013-11-21 Apparatus providing training scenario generated on the basis of participant reaction and method thereof KR101534196B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130141994A KR101534196B1 (en) 2013-11-21 2013-11-21 Apparatus providing training scenario generated on the basis of participant reaction and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130141994A KR101534196B1 (en) 2013-11-21 2013-11-21 Apparatus providing training scenario generated on the basis of participant reaction and method thereof

Publications (2)

Publication Number Publication Date
KR20150059195A KR20150059195A (en) 2015-06-01
KR101534196B1 true KR101534196B1 (en) 2015-07-09

Family

ID=53490329

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130141994A KR101534196B1 (en) 2013-11-21 2013-11-21 Apparatus providing training scenario generated on the basis of participant reaction and method thereof

Country Status (1)

Country Link
KR (1) KR101534196B1 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102080586B1 (en) * 2017-01-26 2020-02-24 (주)로보케어 Method and system for screening of attention deficit hyperactivity disorder by robot
CN109172994A (en) * 2018-07-24 2019-01-11 杭州行开科技有限公司 A kind of naked eye 3D filming image display system
CN111408010B (en) * 2020-03-05 2021-11-16 西安理工大学 Training device and training method for spatial perception capability of autistic children
CN112043937B (en) * 2020-08-24 2021-06-01 深圳市艾利特医疗科技有限公司 Training device and training method for spatial perception capability of autistic children

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101008541B1 (en) * 2008-04-22 2011-02-15 (주) 싱크업 A intensifying power enhancement device providing auditory and visual stimulus
KR101133822B1 (en) * 2010-11-09 2012-04-06 김병일 Method for developmental disorders therapy using radio comunication terminal and system implementing the method
KR101276097B1 (en) * 2012-11-16 2013-06-18 (주) 피디케이리미티드 Simulator and simulation method for treating adhd
KR101307783B1 (en) * 2011-10-27 2013-09-12 한국과학기술연구원 sociability training apparatus and method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101008541B1 (en) * 2008-04-22 2011-02-15 (주) 싱크업 A intensifying power enhancement device providing auditory and visual stimulus
KR101133822B1 (en) * 2010-11-09 2012-04-06 김병일 Method for developmental disorders therapy using radio comunication terminal and system implementing the method
KR101307783B1 (en) * 2011-10-27 2013-09-12 한국과학기술연구원 sociability training apparatus and method thereof
KR101276097B1 (en) * 2012-11-16 2013-06-18 (주) 피디케이리미티드 Simulator and simulation method for treating adhd

Also Published As

Publication number Publication date
KR20150059195A (en) 2015-06-01

Similar Documents

Publication Publication Date Title
US11045102B2 (en) Low noise sensing circuit with cascaded reference
US20210000374A1 (en) System and method for instructing a behavior change in a user
KR102450362B1 (en) Augmented Reality Systems and Methods for User Health Analysis
Schmidt et al. Wearable affect and stress recognition: A review
Elor et al. On shooting stars: Comparing cave and hmd immersive virtual reality exergaming for adults with mixed ability
JP2019513516A (en) Methods and systems for acquiring, aggregating and analyzing visual data to assess human visual performance
US9814423B2 (en) Method and system for monitoring pain of users immersed in virtual reality environment
JP2015533559A (en) Systems and methods for perceptual and cognitive profiling
Yannakakis et al. Psychophysiology in games
US20170344713A1 (en) Device, system and method for assessing information needs of a person
Choi et al. PPGface: Like what you are watching? Earphones can" feel" your facial expressions
Hassani et al. Physiological signal-based emotion recognition system
KR101534196B1 (en) Apparatus providing training scenario generated on the basis of participant reaction and method thereof
Kosunen et al. Neuroadaptive meditation in the real world
CN111297379A (en) Brain-computer combination system and method based on sensory transmission
Bandara et al. A noninvasive brain–computer interface approach for predicting motion intention of activities of daily living tasks for an upper-limb wearable robot
EP4314998A1 (en) Stress detection
US11051707B2 (en) Low noise subsurface spectrogram with cascaded reference circuit
Ruotsalo et al. Affective Relevance
JP6842657B2 (en) Psychogenic disease determination device
Jin et al. Brain-Metaverse Interaction for Anxiety Regulation
Ahuja et al. Wearable technology for monitoring behavioral and physiological responses in children with autism spectrum disorder: A literature review
da Silveira et al. Physiological Data for User Experience and Quality of Experience: A Systematic Review (2018–2022)
Sripian et al. Emotion-sensitive voice-casting care robot in rehabilitation using real-time sensing and analysis of biometric information
Barreto Non-intrusive physiological monitoring for affective sensing of computer users

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20180409

Year of fee payment: 4