KR101448722B1 - Simulator system for inducing and detection of emotional variation based on visual contents - Google Patents

Simulator system for inducing and detection of emotional variation based on visual contents Download PDF

Info

Publication number
KR101448722B1
KR101448722B1 KR1020120041149A KR20120041149A KR101448722B1 KR 101448722 B1 KR101448722 B1 KR 101448722B1 KR 1020120041149 A KR1020120041149 A KR 1020120041149A KR 20120041149 A KR20120041149 A KR 20120041149A KR 101448722 B1 KR101448722 B1 KR 101448722B1
Authority
KR
South Korea
Prior art keywords
scenario
stimulation
bio
scenarios
database
Prior art date
Application number
KR1020120041149A
Other languages
Korean (ko)
Other versions
KR20130118169A (en
Inventor
황성택
황민철
박상인
원명주
Original Assignee
상명대학교서울산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 상명대학교서울산학협력단 filed Critical 상명대학교서울산학협력단
Priority to KR1020120041149A priority Critical patent/KR101448722B1/en
Publication of KR20130118169A publication Critical patent/KR20130118169A/en
Application granted granted Critical
Publication of KR101448722B1 publication Critical patent/KR101448722B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Psychiatry (AREA)
  • Engineering & Computer Science (AREA)
  • Educational Technology (AREA)
  • Biomedical Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Physics & Mathematics (AREA)
  • Child & Adolescent Psychology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Developmental Disabilities (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

영상기반 감성 유발 및 측정 장치 및 방법에 대해 기술한다. 장치는: 피험자에 대한 감성 자극을 위한 하나 이상의 시나리오를 저장하는 시나리오 저장부; 상기 시스템의 시나리오에 따라 시각적으로 감성 자극을 수행하는 자극부; 상기 시나리오에 따라 수행된 감성 자극의 결과를 저장하는 생체 신호 저장부; 그리고 상기 시나리오를 수행하고, 상기 자극 장치를 제어하는 중앙처리시스템; 을 구비한다.An image-based emotional induction and measurement device and method are described. The apparatus comprises: a scenario storage unit for storing one or more scenarios for emotional stimulation of a subject; A stimulus unit that visually senses stimulation according to a scenario of the system; A bio-signal storage unit for storing a result of emotional stimulation performed according to the scenario; A central processing system for performing the scenario and controlling the stimulation apparatus; Respectively.

Description

영상 기반 감성 유발 및 측정 시뮬레이터 시스템{Simulator system for inducing and detection of emotional variation based on visual contents}[0001] The present invention relates to an image-based emotional induction and measurement simulator system,

영상 콘텐츠를 기반으로 감성 변화를 유발하고 이를 측정하는 시뮬레이터 시스템에 관해 기술 된다.A simulator system for generating emotional changes based on image contents and measuring the emotional changes is described.

주위 환경은 감성 변화에 매우 지배적이며, 이를 응용하는 다방면에서의 연구 시도가 이어지고 있다.Ambient environment is very dominant in emotional change, and various attempts to apply it are continuing.

연구실 내에서 실험 목적에 맞게 실험을 설계하고 그것에 맞게 감성을 유발하여 뇌파, 생리신호, 영상 등을 측정하여 분석하는 형태로 연구실험을 진행 하고 있다. 감성을 유발하는데 있어서 주로 영상(이미지/소리)를 사용하는 프로그램이 적용된다. 이러한 프로그램은 새로운 과제 마다 새로 구성(제작)되거나 해당 연구 실험에 맞추어 수정된다.Experiments are designed in accordance with the purpose of the experiment in the laboratory, and emotions are generated in accordance with the experiments, and brain waves, physiological signals, and images are measured and analyzed. A program that mainly uses images (images / sounds) is applied to induce emotion. These programs can be newly constructed (modified) for each new task or modified according to the study experiment.

이러한 번거로움을 감소하기 위해서는 표준화된 프로그램 또는 시스템이 필요하다.To reduce this hassle, a standardized program or system is needed.

본 발명은 다양한 과제 수행이나 연구 목적에 적응하여 사용할 수 있는 통합형 영상 기반 감성 유발 및 측정 시뮬레이터 시스템을 제공한다.The present invention provides an integrated image-based emotional induction and measurement simulator system that can be used in various tasks or research purposes.

본 발명에 따른 시스템: 은The system according to the invention:

감성 자극을 위한 하나 이상의 시나리오를 저장하는 시나리오 저장부;A scenario storage unit for storing one or more scenarios for emotional stimulation;

상기 시스템의 시나리오에 따라 감성 자극을 행하는 자극부;A stimulation unit for performing emotional stimulation according to the scenario of the system;

상기 시나리오에 따라 수행된 감성 자극의 결과를 저장하는 생체 신호 저장부;A bio-signal storage unit for storing a result of emotional stimulation performed according to the scenario;

상기 시나리오를 수행하고, 상기 자극 장치를 제어하는 중앙처리시스템;을 구비한다.And a central processing system for performing the above-described scenario and controlling the stimulation apparatus.

본 발명에 따른 시스템은 험 설계 내용을 바탕으로 자극 시나리오를 작성하여 시나리오 저장부인 DB(database)에 스케줄로 등록하고, 등록된 시나리오를 기반으로 가상의 시뮬레이션하고, 그 결과를 생리 신호 저장부인 DB에 시뮬레이션 결과로서 저장한다. 이러한 본 발명에 따른 시스템은 시나리오의 추가가 가능하다.The system according to the present invention generates stimulus scenarios based on the humudesign contents, registers them as schedules in a database (database) which is a scenario storage unit, simulates the simulations based on the registered scenarios, and outputs the results to a database And stores it as a simulation result. Such a system according to the present invention allows the addition of scenarios.

연구실 내에서 실험 목적에 맞게 실험을 설계하고 그것에 맞게 감성을 유발하여 뇌파, 생리신호, 영상 등을 측정하여 분석하는 형태로 연구실험을 진행 하고 있다. 주로 감성을 유발하는데 있어서 영상(이미지/소리)를 많이 사용하여 실험을 많이들 하고 있고 이것을 매번 과제나 연구 실험을 할 때마다 새로운 프로그램을 제작하거나 실험 설계에 맞추어 실험을 하는 번거로움을 줄일 수 있다.Experiments are designed in accordance with the purpose of the experiment in the laboratory, and emotions are generated in accordance with the experiments, and brain waves, physiological signals, and images are measured and analyzed. We mainly use a lot of images (images / sounds) to induce emotion, and we can reduce the hassle of experimenting with new programs or designing experiments every time we perform tasks or research experiments .

도 1은 본 발명에 따른 시스템의 개략적 구성도이다.
도 2는 본 발명에 따른 시스템을 이용한 시뮬레이션 흐름도이다.
도 3은 본 발명에 따른 시스템에서 소프트웨어의 모듈 구성을 보이는 블록다이어그램이다.
도 4는 본 발명에 따른 시스템에서 소프트웨어의 메인 프로세스의 구성도이다.
도 5는 본 발명에 따른 시스템의 센서, 디스플레이 등 주변 장치의 제어 흐름도 이다.
도 6은 본 발명에 따른 시스템에서 새로운 시나리오 등록을 설명하는 흐름도이다.
도 7은 본 발명에 따른 시스템을 이용한 시뮬레이션에서 자극에 대응하는 피험자의 반응 로그를 저장하는 것을 보이는 흐름도이다.
도 8은 본 발명에 따른 시스템을 이용한 시뮬레이션의 전 과정을 개략적으로 보이는 흐름도이다.
1 is a schematic block diagram of a system according to the present invention.
2 is a flowchart of a simulation using a system according to the present invention.
3 is a block diagram showing a module configuration of software in a system according to the present invention.
4 is a block diagram of a main process of software in a system according to the present invention.
5 is a control flowchart of a peripheral device such as a sensor and a display of the system according to the present invention.
6 is a flowchart illustrating a new scenario registration in the system according to the present invention.
Figure 7 is a flow chart showing storing a subject's response log corresponding to a stimulus in a simulation using the system according to the present invention.
FIG. 8 is a flowchart schematically illustrating the entire process of the simulation using the system according to the present invention.

이하, 첨부된 도면을 참조하면서 본 발명에 따른 영상 기반 감성 유발 및 측정 시뮬레이터 시스템의 일 실시 예를 설명한다.Hereinafter, an embodiment of an image-based emotion inducing and measuring simulator system according to the present invention will be described with reference to the accompanying drawings.

도 1을 참조하면, 본 발명에 따른 시스템은 컴퓨터 기반의 중앙처리시스템(10)을 중심으로 압력 측정부(11), 생체 신호 측정부(12), 데이터베이스(13), 그리고 디스플레이(14) 등의 주변장치가 배치되며, 이들은 유선 또는 무선 통신을 적용하는 인터페이스(I/F)에 의해 상기 중앙처리시스템(10)과 연결된다. 상기 데이터베이스(13)는 후술하는 시나리오를 저장하는 시나리오 저장부 및 감성 자극의 결과를 저장하는 생체 신호 저장부를 포함한다. 1, a system according to the present invention includes a pressure measurement unit 11, a bio-signal measurement unit 12, a database 13, and a display 14 And they are connected to the central processing system 10 by an interface (I / F) for applying wired or wireless communication. The database 13 includes a scenario storage unit for storing scenarios to be described later and a bio-signal storage unit for storing the results of emotional stimulation.

상기 중앙처리시스템(10)은 다양한 감성 자극을 수행할 수 있는 장치로서, 하나 또는 복수의 장치의 집합구조체일 수 있다. 이러한 중앙 처리시스템(2)은 자극부의 일종인 디스플레이(14)를 제어하여 피험자에게 자극을 유발하고, 그 반응 결과를 생체 반응 신호 측정부의 일종인 압력 측정부(11) 및 생체 신호 측정부(12)로 측정한다. 상기 압력 측정부(11)는 예를 들어, 상용제품인 NXT 센서를 적용할 수 있으며, 이 경우 블루투스 통신을 이용하여 중앙처리시스탬(10)로 센서 정보 등의 데이터가 전송된다. 상기 생체 신호 측정부(12)는 소위 바이오팩(Biopak) 시스템을 적용할 수 있다. 이 경우, 생리신호인 PPG, GSR, SKT의 생리신호 정보를 예를 들어, 라이브러리 프로그램(Library program), 예를 들어 잘 알려진 랩뷰(Labview)를 통하여 읽어 드릴 수 있다. 한편, 상기 디스플레이(14)는 피험자에 대한 감성자극을 위한 시각적 콘텐츠를 표시하는 것으로 중앙처리시스템(10)에 연결되는 모니터일 수 있으며, 다른 실시 예에 따르면, 원격 디스플레이 장치일 수 있다. 원결 디스플레이 장치로서는 독립적인 운영체계(OS)를 가지는 컴퓨터, 또는 이러한 유형의 소형 단말기, 예를 들어 일명 스마트 폰이라 불리는 것으로 외부 어플리케이션의 실행이 가능한 운영체계(OS) 기반 휴대용 단말기일 수 있다. 이러한 독립적인 장치는 TCP 통신을 통하여 표시 콘텐츠를 수신한다. 데이터 베이스(13)는 감성 자극을 위한 시나리오(Scenario) 정보를 저장하고, 또한 그 결과로서 로그(LOG) 데이터와 생체 신호 데이터를 저장한다. 본 발명에서의 시퀀스는 감성 유발 시 설계방법을 통해 1개의 실험 방법이 정해지는 것을 의미하며 때에 따라 조금씩 변경 될 수 있으나 1번의 실험 전체를 1개의 시퀀스로 이해 할 수 있다. 그리고, 시나리오는 1개의 시퀀스 안에서 수행되는 과정으로 상황이나 변수에 따라 각각의 감성유발 자극 요소들이 들어있으며 그 요소들을 동작 되게 하여 시뮬레이션이 구동된다. 한편, 시뮬레이션은 시스템이 가상으로 동작 되는 것을 뜻하며 데이터베이스에서 관리되는 내용 중 1개의 시퀀스 안데 들어있는 시나리오들을 불러와 가상으로 동작시켜 감성을 유발 할 수 있도록 시스템이 동작되는 것을 말한다.The central processing system 10 is an apparatus capable of performing various emotional stimuli, and may be an aggregate structure of one or a plurality of apparatuses. The central processing system 2 controls the display 14, which is a type of the stimulating part, to induce a stimulation to the subject and outputs the result of the reaction to the pressure measuring part 11 and the living body signal measuring part 12 ). For example, a commercially available NXT sensor may be used as the pressure measuring unit 11. In this case, data such as sensor information is transmitted to the central processing system 10 using Bluetooth communication. The bio-signal measuring unit 12 may be a so-called Biopak system. In this case, physiological signal information of physiological signals PPG, GSR and SKT can be read through, for example, a library program, for example, a well-known Labview. On the other hand, the display 14 may be a monitor connected to the central processing system 10 for displaying visual contents for emotional stimulation of a subject, and according to another embodiment, may be a remote display device. The final display device may be a computer having an independent operating system (OS), or an operating system (OS) based portable terminal capable of executing an external application such as a small terminal of this type, for example a so-called smart phone. These independent devices receive the displayed content via TCP communication. The database 13 stores scenario information for emotional stimulation and also stores log data and biological signal data as a result. The sequence in the present invention means that one experimental method is determined through the designing method in emotion inducing, and it can be changed little by little, but the entire one experiment can be understood as one sequence. And, the scenario is a process that is performed in one sequence, and each emotion inducing stimulus element is contained according to the situation or a variable, and the simulation is driven by operating the elements. Simulation, on the other hand, means that the system is operated in a virtual way. It means that the system is operated so as to activate scenarios by invoking scenarios in one sequence among the contents managed in the database and operating them virtually.

도 2는 본 발명에 따른 시스템을 이용한 시뮬레이션 흐름도이다.2 is a flowchart of a simulation using a system according to the present invention.

시스템이 시작되면(21), 피험자의 정보, 설정, 시나리오를 적용하여 설정을 로드하고(22), 각 외부 장치의 인터페이스를 테스트한다(23). 이러한 과정을 거쳐 시뮬레이션 준비 상태가 되면(24), 시뮬레이션에 적용하고자 하는 시퀀스를 데이터베이스로부터 선택한 후(25), 시뮬레이션 스텝(26)으로 이행한다. 시뮬레이션 스텝(26)의 시작은 시스템 오퍼레이터에 의해 결정되며, 동작 개시는 인터페이스 상의 개시 버튼에 의해 일어난다. 이와 같이 시뮬레이션 스텝(26)이 시작되며, 선택된 해당 시나리오에 따라 피험자에게 자극을 주고(27), 이와 동시에 실시간으로 피험자의 반응을 모니터링(28)하고, 그 결과를 데이터베이스에 저장하고 (29), 다음 시나리오 선택(30)하여 시뮬레이션을 반복하는 형태를 유지하며 1개의 시퀀스 시나리오가 전부 시뮬레이션 완료되면(31) 시뮬레이션 프로그램이 종료한다(31). 여기에서, 시퀀스는 각 시나리오 별(상황 별) 타입을 정의하는 것으로 데이터 베이스에 테이블로 등록되는 것으로서, 각 시나리오가 설정 될 수 있도록 데이터를 관리한다. 한편, 시나리오는 상황, 자극, 옵션, 시나리오 영상경로, 영상 대기 시간, 영상 전체 시간, 영상 자극 시간, 영상 측정 시간 등을 저장한다. 상기 로그 데이터에는 커맨드(명령어), 응답에 대한 데이터를 저장된다. 커맨드 로그는, 각 시나리오 별 타입에 따라 동작되는 시뮬레이션의 명령에 따른 자극 제시 및 반응 시간에 대한 정보를 포함하는 것으로, 피험자 이름, 피험일자, 시퀀스, 상황, 자극, 진행 시간, 대기 시간, 자극 시간, 측정 시간, 반응 시간, 오차 시간 등을 저장한다. 그리고, 응답 로그에는 각 시나리오 별(상황 별) 타입에 따라 동작되는 시뮬레이션의 명령에 따른 생리신호의 데이터를 저장한다.When the system is started (21), the settings are loaded (22) by applying subject's information, settings and scenarios, and the interface of each external device is tested (23). When the simulation preparation state is reached through this process (24), the sequence to be applied to the simulation is selected from the database (25), and the process proceeds to the simulation step (26). The start of the simulation step 26 is determined by the system operator, and the start of operation is triggered by a start button on the interface. Simulation step 26 begins, stimulating the subject according to the selected scenario, monitoring the subject's reaction in real time at the same time, and storing the result in the database (29) The next scenario is selected (30) and the simulation is repeated. When one sequence scenario is completely simulated (31), the simulation program ends (31). Here, the sequence defines the type of each scenario (situation) and is registered as a table in the database, and manages data so that each scenario can be set. On the other hand, the scenario stores a situation, a stimulus, an option, a scenario image path, a video waiting time, an entire video time, a video stimulation time, The log data stores command data and response data. The command log includes information on stimulus presentation and reaction time according to a command of a simulation operated according to each scenario type, and includes a subject name, an experiment date, a sequence, a situation, a stimulus, a progress time, a waiting time, , Measurement time, reaction time, and error time. The response log stores physiological signal data according to a simulation command operated according to each scenario (per situation).

도 3은 본 발명에 따른 시스템에서 소프트웨어의 모듈 구성을 보이는 블록 다이어그램이다. 도 3에 도시된 바와 같이, 소프트웨어의 모듈을 기본적으로 3가지로 콘트롤(Control), 모듈(Module), 뷰(View) 로 분류하여 각각 해당에 맞는 라이브러리(Library)와 함수(Function) 등으로 구분된다.3 is a block diagram showing a module configuration of software in a system according to the present invention. As shown in FIG. 3, software modules are basically classified into three types: control, module, and view, and are classified into a library and a function corresponding to the respective modules. do.

도 4는 본 발명에 따른 시스템에서 소프트웨어의 메인 프로세스의 구성도이다. 시뮬레이션 소프트웨어의 프로세스 구성은 메인 프로세스(40)에서 4 개의 스레드(Thread)로 나뉘어지며 시뮬레이션 스레드(41)는 선택된 시퀀스의 시나리오를 기준으로 영상제어, 자극(LED, 디스플레이 등), 전반적인 시뮬레이션 상황을 전담하는 역할을 한다. 외부 인터페이스 스레드(42)는, 예를 들어 NXT와 같은 센서 장치에 장착된 센서를 통하여 데이터를 읽는 역할을 전담한다. 인터페이스 테스트 스레드(43)는 외부로 연결된 장치들간의 연결 상태(Connection)을 확인하고 명령을 순차적으로 제어하면서 장치가 잘 동작 하는지 확인하는 역할을 한다. 소켓 스레드(44)는 TCP 통신을 통해 외부 디스플레이, 예를 들어 스마트폰의 디스플레이를 제어하는 역할을 담당 한다4 is a block diagram of a main process of software in a system according to the present invention. The process configuration of the simulation software is divided into four threads in the main process 40 and the simulation thread 41 is dedicated to image control, stimulation (LED, display, etc.), overall simulation situation on the basis of the scenario of the selected sequence . The external interface thread 42 is dedicated to reading data via a sensor mounted on a sensor device such as, for example, NXT. The interface test thread 43 confirms the connection state between the devices connected to the outside and sequentially checks the command to check whether the device operates well. The socket thread 44 is responsible for controlling the display of an external display, e.g., a smart phone, via TCP communication

도 5는 본 발명에 따른 시스템의 센서, 디스플레이 등 주변 장치의 제어 흐름도 이다. 피험자에게 경고를 주기 위해 구현 되는 것으로 외부의 장치 LED, 디스플레이 경고, 음성, 진동 등과 같은 외부 장치들은 소프트웨어적으로 제어 하고자 하는 기능이다. 시뮬레이션이 진행 시 한 시퀀스에 해당되는 시나리오를 진행하면서 시나리오의 데이터를 보고 판단하여 각 하단부에 명령을 내린다.5 is a control flowchart of a peripheral device such as a sensor and a display of the system according to the present invention. It is implemented as a warning to the subject, and external devices such as external device LED, display warning, voice, and vibration are functions to be controlled by software. As the simulation progresses, it proceeds to the scenario corresponding to one sequence, judges the data of the scenario, and commands the lower part of each scenario.

도 6은 본 발명에 따른 시스템에서 새로운 시나리오 등록을 설명하는 흐름도이다. 시뮬레이션을 하기 위해서 각 상황 별 변수들을 기본으로 하여 실험의 시나리오가 나오게 되는데 시나리오 별로 시뮬레이터를 구동하기 위한 스케줄 관리 기능이다. 이때 등록되는 것으로 시퀀스 테이블과 시나리오 테이블이 있다. 도 6에 도시된 바와 같은 순서로 새로운 시퀀스/시나리오의 테이블 등록 관리 함으로 인해서 각 실험 별로 구분 혹은 실험 설계 방법에 따라 다양하게 적용하여 사용 할 수 있다. 시퀀스 추가(61)가 결정되면 시퀀스를 데이터 베이스에 등록(62) 후, 시뮬레이션(64)을 이행하고, 그리고 시퀀스 선택(63) 후, 시나리오의 추가(65)가 필요한 경우, 해당 시나리오를 데이터 베이스에 등록(66)하고, 추가 시나리오가 복수인 경우 등록 과정을 반복은 시나리오 등록(67)을 완료한다.6 is a flowchart illustrating a new scenario registration in the system according to the present invention. In order to perform the simulation, the experiment scenario is presented based on the variables of each situation. It is a schedule management function for driving the simulator according to the scenarios. At this time, there are a sequence table and a scenario table which are registered. And the table registration management of a new sequence / scenario in the order as shown in FIG. 6, it can be applied variously according to classification or experiment designing method for each experiment. When the sequence addition 61 is determined, the sequence is registered in the database 62 and then the simulation 64 is performed. If the scenario addition 63 is required after the sequence selection 63, (66). If there are a plurality of additional scenarios, the scenario registration (67) is completed by repeating the registration process.

도 7은 본 발명에 따른 시스템을 이용한 시뮬레이션에서 자극에 대응하는 피험자의 반응 로그를 저장하는 것을 보이는 흐름도이다.Figure 7 is a flow chart showing storing a subject's response log corresponding to a stimulus in a simulation using the system according to the present invention.

시뮬레이션이 시작되면(71), 피험자의 반응에 대한 사항을 모니터링 하기 위한 것으로 각 시나리오 별 자극(72) 과 이 에 대응하는 반응을 모니터링(73)하며, 자극 시간, 반응시간, 생체 신호 형태로 데이터 로그(LOG)로 남긴다. 각 시나리오 진행 시 진행 단계별로 해당하는 데이터들이 데이터베이스에 저장하며, 이 과정은 시나리오에 따라 반복 수행한 후 종료(75)한다.When the simulation starts (71), the stimulus (72) for each scenario and the corresponding reaction are monitored (73) for monitoring the subject's reaction, and the stimulus time, reaction time, Log (LOG) is left. In each scenario, corresponding data is stored in the database according to the progress stage, and this process is repeated according to the scenario and then terminated (75).

도 8은 본 발명에 따른 시스템을 이용한 시뮬레이션의 과정을 개략적으로 보이는 흐름도이다.8 is a flowchart schematically illustrating a process of a simulation using the system according to the present invention.

시뮬레이션이 시작되면(81), 시나리오의 선택(82)이 수행되고, 이에 이어 시나리오별 시뮬레이션이 시작된다(83). 시나리오의 스케줄 데이터를 기반으로 하여 각 자극 장치, 예를 들어 영상이나 발광 램프, LED, 디스플레이 등을 제어하고 피험자에게 자극을 제공하고(84), 이와 동시에 자극에 대한 반응을 모니터링(85)하며 반응에 나온 결과를 시나리오로 데이터데이터 베이스에 저장(88) 하고, 다음 시나리오 설정(89) 후, 다시 새로운 시뮬레이션을 반복하고, 모든 시나리오의 수행이 완료되면 시뮬레이션을 종료(87) 한다.When the simulation is started (81), the scenario selection (82) is performed, followed by the scenario-specific simulation (83). Based on the schedule data of the scenario, it is possible to control each stimulating device, for example, image, luminescent lamp, LED, display, etc., and provide stimulation to the subject (84) (88), the new simulation is repeated again after the next scenario setting (89), and the simulation is terminated (87) when the execution of all the scenarios is completed.

위와 같은 본 발명은 다양한 형태의 시나리오를 데이터베이스화하고, 이를 시퀀스 내에서 수행한다. 시나리오 및 시퀀스는 추가 및 수정가능하며 또한 언제든지 데이터베이스에서 호출하여 사용할 수 있다.The present invention as described above forms databases of various types of scenarios and performs them in a sequence. Scenarios and sequences can be added and modified, and they can be called from the database at any time.

본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능함을 이해할 수 있을 것이다. 따라서 본 발명의 진정한 보호범위는 첨부된 특허청구범위에 의해서만 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made without departing from the scope of the present invention. Therefore, the true scope of protection of the present invention should be defined only by the appended claims.

10: 중앙처리 시스템
11: 입력 측정부
12: 생체 신호 측정부
13: 데이터 베이스
14: 디스플레이
10: Central processing system
11: input measuring unit
12: biological signal measurement unit
13: Database
14: Display

Claims (7)

피험자에 대한 시각적 자극을 위한 상황, 자극, 영상경로, 영상 시간이 포함하는 것으로 피험자에 대한 감성유발 자극 요소들을 포함하는 하나 이상의 시나리오;
상기 하나 이상의 시나리오를 저장함과 아울러 새로운 시나리오의 저장이 가능한 시나리오 저장부;
상기 하나 이상의 시나리오 별 타입을 정의하는 것으로 데이터 베이스에 등록되는 시퀀스;
상기 하나 이상의 시나리오에 따라 상기 피험자에게 상기 감성유발 자극 요소들을 제시하여 시각적 자극을 수행하는 것으로 시각적 자극을 위한 디스플레이, 발광장치 중의 어느 하나를 포함하는 자극 장치;
상기 자극 요소들을 포함하는 하나 이상의 시나리오에 따라 수행된 시각적 자극에 따른 생체 반응 신호를 검출하는 것으로 압력 측정부와 생체 신호 측정부를 포함하는 생체 반응신호 측정부;
상기 생체 반응신호 측정부를 통해 얻어진 생체 반응 신호를 저장하는 생체 신호 저장부; 그리고
상기 시퀀스에 따라 하나 이상의 시나리오를 수행하고, 상기 자극 장치를 제어하는 중앙처리시스템; 을 구비하는 영상 기반 감성 유발 및 측정 시뮬레이터 시스템.
One or more scenarios including emotional stimulus elements for the subject including situations, stimuli, visual pathways, and visual time for visual stimulation of the subject;
A scenario storage unit storing the one or more scenarios and storing new scenarios;
A sequence registered in the database by defining the at least one scenario-specific type;
A stimulation device including any one of a display for visual stimulation and a light emitting device to perform visual stimulation by presenting the emotion inducing stimulation elements to the subject according to the one or more scenarios;
A bio-reaction signal measuring unit including a pressure measuring unit and a bio-signal measuring unit for detecting a bio-reaction signal according to a visual stimulation performed according to at least one scenario including the stimulation elements;
A bio-signal storage unit for storing a bio-reaction signal obtained through the bio-reaction signal measurement unit; And
A central processing system that performs one or more scenarios according to the sequence and controls the stimulation apparatus; Based emotion induction and measurement simulator system.
제 1 항에 있어서,
상기 중앙 처리 시스템에 연결되는 것으로 진동 센서를 더 포함하는 것을 특징으로 하는 영상 기반 감성 유발 및 측정 시뮬레이터 시스템.
The method according to claim 1,
Further comprising a vibration sensor coupled to the central processing system. ≪ RTI ID = 0.0 > 21. < / RTI >
삭제delete 제 1 항에 있어서,
상기 디스플레이는 상기 중앙처리시스템에 무선으로 연결되는 것을 특징으로 하는 영상 기반 감성 유발 및 측정 시뮬레이터 시스템.
The method according to claim 1,
Wherein the display is wirelessly coupled to the central processing system.
삭제delete 제1항, 제2항, 또는 제4항 중 어느 한 항에 기재된 영상 기반 감성 유발 및 측정 시뮬레이터시스템을 이용하는 것으로서,
상기 하나 이상의 시나리오를 데이터베이스에 저장하는 단계;
상기 하나 이상의 시나리오 별 타입을 정의하는 시퀀스를 상기 데이터 베이스에 등록하는 단계;
상기 하나 이상의 시나리오 별 타입을 정의하는 시퀀스에 따라 데이터베이스부터 선택된 시나리오를 이용해 피험자에게 감성유발 자극요소들을 제시하여 피험자에 대한 시각적 자극을 수행하는 단계;
압력 측정부와 생체 신호 측정부를 포함하는 생체 반응신호 측정부를 이용하여, 상기 선택된 시나리오에 따라 수행된 시각적 자극에 따른 생체 반응 신호를 측정하는 단계;
상기 생체 반응 신호를 데이터베이스에 저장하는 단계; 그리고
새로운 시나리오의 추가가 필요한 경우, 상기 데이터 베이스에 새로운 시나리오를 등록하고, 이를 이용해 감성 자극을 수행하는 단계; 를 포함하는 영상 기반 감성 유발 및 측정 방법.
Based emotion inducing and measuring simulator system as set forth in any one of claims 1, 2, and 4,
Storing the one or more scenarios in a database;
Registering a sequence defining the at least one scenario-specific type in the database;
Performing visual stimulation on a subject by presenting emotion inducing stimulation elements to a subject using a scenario selected from a database according to the sequence defining the one or more scenario-specific types;
Measuring a biological response signal according to a visual stimulus performed according to the selected scenario using a biological response signal measurement unit including a pressure measurement unit and a bio-signal measurement unit;
Storing the bio-reaction signal in a database; And
Registering a new scenario in the database and performing emotional stimulation using the registered new scenario if a new scenario needs to be added; Based emotion inducing and measuring method.
제 6 항에 있어서,
상기 시각적 자극의 결과는 커맨드로그 및 생체 반응 결과를 포함하는 것을 특징으로 하는 영상 기반 감성 유발 및 측정 방법.
The method according to claim 6,
Wherein the result of the visual stimulus includes a command log and a biometric response result.
KR1020120041149A 2012-04-19 2012-04-19 Simulator system for inducing and detection of emotional variation based on visual contents KR101448722B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120041149A KR101448722B1 (en) 2012-04-19 2012-04-19 Simulator system for inducing and detection of emotional variation based on visual contents

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120041149A KR101448722B1 (en) 2012-04-19 2012-04-19 Simulator system for inducing and detection of emotional variation based on visual contents

Publications (2)

Publication Number Publication Date
KR20130118169A KR20130118169A (en) 2013-10-29
KR101448722B1 true KR101448722B1 (en) 2014-10-17

Family

ID=49636631

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120041149A KR101448722B1 (en) 2012-04-19 2012-04-19 Simulator system for inducing and detection of emotional variation based on visual contents

Country Status (1)

Country Link
KR (1) KR101448722B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040054774A (en) * 2001-11-13 2004-06-25 코닌클리케 필립스 일렉트로닉스 엔.브이. Affective television monitoring and control
KR20060133607A (en) * 2005-06-21 2006-12-27 주식회사 팬택 Mobile communication terminal for self-checking user's health, system and method for offering multimedia contents using mobile communication terminal for self-checking user's health

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040054774A (en) * 2001-11-13 2004-06-25 코닌클리케 필립스 일렉트로닉스 엔.브이. Affective television monitoring and control
KR20060133607A (en) * 2005-06-21 2006-12-27 주식회사 팬택 Mobile communication terminal for self-checking user's health, system and method for offering multimedia contents using mobile communication terminal for self-checking user's health

Also Published As

Publication number Publication date
KR20130118169A (en) 2013-10-29

Similar Documents

Publication Publication Date Title
Polevaya et al. Event-related telemetry of heart rate for personalized remote monitoring of cognitive functions and stress under conditions of everyday activity
CN107249441A (en) Electronic installation and method for measuring biological information
CN108463832A (en) Electronic equipment and process execution method based on hardware diagnostic result
KR102241804B1 (en) Method of assessing the psychological state through the drawing process of the subject and computer program
JP2022506651A (en) Facial expression detection for screening and treatment of emotional disorders
JP2015534119A (en) System and method for providing bleeding control training
KR101646720B1 (en) Human factors analysis and evaluation system for nuclear power plant
KR20170110919A (en) Intelligent electronic device and operating method thereof
TW200600809A (en) Method for analyzing measurement data of device under test, program, measurement data analyzing system
CN106999748B (en) Systems, devices and methods relating to athletic data
KR20160126802A (en) Measuring method of human body information and electronic device thereof
CN110827597A (en) Acupuncture teaching method, system, platform and storage medium based on anthropomorphic dummy
JP7442596B2 (en) Platform for Biomarker Identification Using Navigation Tasks and Treatment Using Navigation Tasks
US20150179079A1 (en) Mobile devices as neural sensors for improved health outcomes and efficacy of care
US20220148738A1 (en) Generating brain network impact scores
US20230284596A1 (en) Behavioral and biometric testing system for animals
CN112231199A (en) Test method and device for object to be tested and test system
JP2022502789A (en) A cognitive platform for deriving effort metrics to optimize cognitive treatment
KR102100418B1 (en) Method and apparatus for improving mental condition
CN110442525A (en) The method, apparatus and computer readable storage medium of pressure test
KR101448722B1 (en) Simulator system for inducing and detection of emotional variation based on visual contents
CN104382584B (en) A kind of wearable electrocardiosignal monitoring and evaluating system and implementation method
KR20210042077A (en) Method of assessing the psychological state through the drawing process of the subject and computer program
JP2010191712A5 (en)
CN205862320U (en) Computer software testing device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
N231 Notification of change of applicant
E601 Decision to refuse application
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170928

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180719

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190926

Year of fee payment: 6