KR102218713B1

KR102218713B1 - Mental stress cognitive and feedback apparatus of presenter

Info

Publication number: KR102218713B1
Application number: KR1020190017302A
Authority: KR
Inventors: 이경우; 문준형; 이준일; 천동미; 이문희
Original assignee: 연세대학교 산학협력단
Priority date: 2019-02-14
Filing date: 2019-02-14
Publication date: 2021-02-22
Also published as: WO2020166756A1; KR20200099379A

Abstract

본 발명은 발표자의 정신적 스트레스 인식 및 피드백 제공 장치에 관한 것으로, 발표자 도구에 장착되고 상기 발표자 도구를 사용하는 발표자에 생체정보를 측정하는 생체정보 측정부, 측정된 상기 발표자의 생체정보를 분석하고 인식 모델을 기반으로 하여 상기 발표자의 정신적 스트레스(Mental Stress) 상태를 인식하는 스트레스 인식부, 및 인식된 상기 발표자의 정신적 스트레스 상태를 상기 발표자에게 피드백을 제공하는 피드백 제공부를 포함한다. 따라서, 본 발명은 발표자가 발표하는 상황에서 스마트워치나 상체 밴드 등 추가적인 장비들을 착용하지 않고 생체정보를 수집할 수 있으며 수집된 생체정보를 활용하여 스트레스 상태 인식 및 피드백 제공하여 발표자의 정신적 스트레스 상태 개선을 할 수 있다.The present invention relates to a device for recognizing a speaker's mental stress and providing feedback, a biometric information measuring unit mounted on a speaker tool and measuring biometric information to a speaker using the speaker tool, and analyzing and recognizing the measured biometric information of the speaker And a stress recognition unit for recognizing a mental stress state of the speaker based on the model, and a feedback providing unit for providing feedback to the speaker on the recognized mental stress state of the speaker. Therefore, the present invention can collect biometric information without wearing additional equipment such as a smart watch or upper body band in a situation where the speaker announces, and improves the mental stress status of the speaker by providing a stress status recognition and feedback using the collected biometric information. can do.

Description

A device for recognizing and providing feedback to the presenter's mental stress {MENTAL STRESS COGNITIVE AND FEEDBACK APPARATUS OF PRESENTER}

본 발명은 발표자의 정신적 스트레스 인식 및 피드백 제공 기술에 관한 것으로, 보다 상세하게는 복수의 생체정보 센서로부터 수집된 생체정보를 이용하여 발표자의 정신적 스트레스 상태를 인식하고 이를 발표자에게 피드백으로 제공할 수 있는 발표자의 정신적 스트레스 인식 및 피드백 제공 장치에 관한 것이다.The present invention relates to a technology for recognizing a speaker's mental stress and providing feedback, and in more detail, it is possible to recognize a speaker's mental stress state using biometric information collected from a plurality of biometric information sensors and provide it as a feedback to the speaker. It relates to a speaker's mental stress recognition and feedback providing device.

스트레스는 인간의 모든 삶의 영역에 존재하기에 누구도 스트레스를 피할 수 없다. 스트레스는 인간이 적응해야 할 어떤 변화를 의미하기도 한다. 우리가 스트레스 상황에 처하면 스트레스에 대한 신체 반응으로 자율신경계의 교감부가 활성화되고, 응급상황에 반응하도록 신체의 자원들이 동원된다.Stress exists in all areas of human life, so no one can avoid it. Stress can also mean some change that humans need to adapt. When we are in a stressful situation, the sympathetic part of the autonomic nervous system is activated by the body's response to the stress, and the body's resources are mobilized to respond to emergency situations.

정신적 스트레스는 급성과 만성으로 나뉘는데, 급성 스트레스가 반복되거나 만성 스트레스가 지속되면 사람에게 부정적인 영향을 미친다.Mental stress is divided into acute and chronic. Repeated acute stress or chronic stress has a negative effect on people.

많은 관중 앞에서 중요한 프레젠테이션을 앞두고 있는 사람의 경우를 보면, 발표를 하려고 강단에 나와 사람들 얼굴을 쳐다보는 순간 발표자는 매우 큰 스트레스를 경험할 것이다. 많은 사람 앞에서 프레젠테이션을 하는 것 자체가 신체적인 해를 입히는 일은 아니지만 심리적으로 위협이 된다고 생각하기에 인간의 몸은 자동적으로 긴장한다. 사람이 스트레스를 지각하면 생리학적 반응이 일어난다. In the case of a person with an important presentation ahead of a large audience, the presenter will experience a great deal of stress when he comes to the podium to make a presentation and looks at people's faces. Presenting a presentation in front of many people does not cause physical harm, but the human body is automatically tense because it is considered a psychological threat. When a person perceives stress, a physiological reaction occurs.

특히, 중요한 발표 상황에서의 정신적 스트레스는 당장 그 발표에 영향을 미침으로써 많은 부정적인 결과를 초래할 수 있다. 일예로, 중요한 계약, 제품 출시, 선거, 학업 과정 마무리 등을 앞두고 성공적인 발표를 해내지 못할 경우 원하는 결과를 달성하기 어렵다.In particular, mental stress in an important presentation situation can lead to many negative consequences by influencing the presentation immediately. For example, if you don't make a successful presentation ahead of important contracts, product launches, elections, or the completion of your academic process, it is difficult to achieve the desired results.

한국등록특허 제10-0418434(2004.01.31)호는 스트레스 자동인식 컴퓨터 주변장치 및 이를 이용한 스트레스 측정 시스템에 관한 것으로, 컴퓨터 사용자의 생체정보를 측정하는 생체정보 측정부와, 상기 측정된 생체정보를 신호처리하는 수단과, 상기 신호처리된 생체정보신호를 컴퓨터 본체로 전송하는 수단을 포함하는 컴퓨터 주변장치; 및 상기 전송된 생체정보신호로부터 생체정보 변화계수들을 산출하고 이들 각각에 가중치를 부여하여 연산하여 스트레스 지수를 산출하는 스트레스 인식 프로그램을 구비하는 컴퓨터 본체를 포함함으로써, 각종 인체정보들을 주변장치가 자동으로 측정하여 스트레스나 피로의 정도를 체크해 줌으로써, 컴퓨터 사용자가 작업 도중에 받는 스트레스를 완화 내지 해소할 수 있는 자료를 제공하는 것이 가능하다.Korean Patent Registration No. 10-0418434 (2004.01.31) relates to an automatic stress recognition computer peripheral device and a stress measurement system using the same, a biometric information measuring unit measuring biometric information of a computer user, and the measured biometric information. A computer peripheral device including means for processing a signal and means for transmitting the signal-processed biometric information signal to a computer body; And a computer main body having a stress recognition program that calculates the biometric information change coefficients from the transmitted biometric information signal and calculates a stress index by assigning a weight to each of them, so that various human body information is automatically By measuring and checking the level of stress or fatigue, it is possible to provide data that can relieve or relieve stress that a computer user receives during work.

한국등록특허 제10-0231473(1999.08.30)호는 자동 스트레스 측정장치에 관한 것으로, 사람의 특정 부위로부터 자가 진단을 위한 생체 신호 입력 수단인 계측부, 상기 계측부로부터 계측된 신호를 신호 해석을 위한 소정의 신호로 변환하기 위한 계측신호변환부, 상기 계측신호변환부를 통한 신호를 해석하기 위한 신호해석부, 상기 신호해석부에 의해 분석된 결과를 사용자로 하여금 인지할 수 있도록 하기 위한 결과출력부, 그리고 상기 각 계측부, 계측신호변환부, 신호해석부 그리고 결과 출력부의 구동에 필요로 하는 해당 전원을 공급하기 위한 전원공급부를 포함하여 구성함으로써, 자동적으로 사람에게 휴식을 권장하거나 어드바이스를 제공하는 자가진단을 특징으로 한다.Korean Patent Registration No. 10-0231473 (1999.08.30) relates to an automatic stress measurement device, a measurement unit that is a bio-signal input means for self-diagnosis from a specific part of a person, and a predetermined signal for signal analysis from the measurement unit. A measurement signal conversion unit for converting into a signal of, a signal analysis unit for analyzing a signal through the measurement signal conversion unit, a result output unit for allowing a user to recognize the result analyzed by the signal analysis unit, and By including the measurement unit, measurement signal conversion unit, signal analysis unit, and a power supply unit for supplying the corresponding power required for driving the result output unit, a self-diagnosis that automatically recommends a person to rest or provides advice is provided. It is characterized.

한국등록특허 제10-0418434(2004.01.31)호Korean Patent Registration No. 10-0418434 (2004.01.31) 한국등록특허 제10-0231473(1999.08.30)호Korean Patent Registration No. 10-0231473 (1999.08.30)

본 발명의 일 실시예는 복수의 생체정보 센서로부터 수집된 생체정보를 이용하여 발표자의 정신적 스트레스 상태를 인식하고 이를 발표자에게 피드백으로 제공할 수 있는 발표자의 정신적 스트레스 인식 및 피드백 제공 장치를 제공하고자 한다.An embodiment of the present invention is to provide an apparatus for recognizing a speaker's mental stress and providing feedback that can recognize a speaker's mental stress state using biometric information collected from a plurality of biometric information sensors and provide the feedback to the speaker. .

본 발명의 일 실시예는 발표자 도구를 활용하여 발표자의 동작 인식 및 생체 정보를 측정하여 발표자의 정신적 스트레스 상태를 인식하고 발표자에게 피드백을 제공할 수 있는 발표자의 정신적 스트레스 인식 및 피드백 제공 장치를 제공하고자 한다.An embodiment of the present invention is to provide a device for recognizing a speaker's mental stress and providing feedback that can recognize a speaker's mental stress state by measuring a speaker's motion recognition and biometric information using a speaker tool and provide feedback to the speaker. do.

본 발명의 일 실시예는 인식된 발표자의 정신적 스트레스 상태를 진동과 발열 형태로 발표자에게 피드백으로 제공할 수 있는 발표자의 정신적 스트레스 인식 및 피드백 제공 장치를 제공하고자 한다.An embodiment of the present invention is to provide an apparatus for recognizing and providing feedback on mental stress of a speaker that can provide feedback to the speaker in the form of vibration and heat of the recognized mental stress state of the speaker.

실시예들 중에서, 발표자의 정신적 스트레스 인식 및 피드백 제공 장치는 발표자 도구에 장착되고 상기 발표자 도구를 사용하는 발표자에 생체정보를 측정하는 생체정보 측정부, 측정된 상기 발표자의 생체정보를 분석하고 인식 모델을 기반으로 하여 상기 발표자의 정신적 스트레스(Mental Stress) 상태를 인식하는 스트레스 인식부, 및 인식된 상기 발표자의 정신적 스트레스 상태를 상기 발표자에게 피드백으로 제공하는 피드백 제공부를 포함한다.Among the embodiments, a device for recognizing a speaker's mental stress and providing feedback is mounted on a speaker tool and a biometric information measuring unit that measures biometric information to a speaker using the speaker tool, and a recognition model that analyzes the measured biometric information of the speaker. And a stress recognition unit for recognizing a mental stress state of the speaker, and a feedback providing unit for providing the recognized mental stress state of the speaker as feedback to the speaker.

상기 생체정보 측정부는 프리젠터 또는 포인터에 해당하는 상기 발표자 도구를 사용하는 상기 발표자 손의 움직임을 측정하고 움직임 정보를 생성하는 제1 측정부재, 상기 발표자의 체온을 측정하고 체온 변화 정보를 생성하는 제2 측정부재, 및 상기 발표자의 피부전도도(GSR)를 측정하고 교감신경계의 활성화 정보를 생성하는 제3 측정부재를 포함할 수 있다.The biometric information measuring unit measures the movement of the presenter's hand using the presenter tool corresponding to a presenter or a pointer and generates movement information, and a second measuring body temperature of the presenter and generating body temperature change information It may include a measuring member, and a third measuring member that measures the skin conductivity (GSR) of the speaker and generates activation information of the sympathetic nervous system.

상기 스트레스 인식부는 측정된 상기 발표자의 생체정보를 기초로 스트레스가 있을 경우에 겪게 되는 생리적 반응 유무 및 정도를 분석하고 그 결과를 토대로 스트레스 점수를 산출하여 상기 발표자의 정신적 스트레스 상태를 인식할 수 있다.The stress recognition unit may recognize the mental stress state of the speaker by analyzing the presence and degree of a physiological reaction experienced when there is stress based on the measured biometric information of the speaker, and calculating a stress score based on the result.

상기 피드백 제공부는 인식된 상기 발표자의 정신적 스트레스 상태를 기초로 하여 상기 발표자에게 진동 발생 및 발열 중 적어도 하나의 형태로 피드백할 수 있다.The feedback providing unit may provide feedback to the speaker in at least one of vibration generation and heat generation based on the recognized mental stress state of the speaker.

개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.The disclosed technology can have the following effects. However, since it does not mean that a specific embodiment should include all of the following effects or only the following effects, it should not be understood that the scope of the rights of the disclosed technology is limited thereby.

본 발명의 일 실시예에 따른 발표자의 정신적 스트레스 인식 및 피드백 제공 장치는 복수의 생체정보 센서로부터 수집된 생체정보를 기초로 발표자의 정신적 스트레스 상태를 인식하고 인식된 발표자의 스트레스 상태를 진동 혹은 발열 형태로 발표자에게 피드백으로 제공할 수 있다.The apparatus for recognizing mental stress of the speaker and providing feedback according to an embodiment of the present invention recognizes the mental stress state of the speaker based on biometric information collected from a plurality of biometric information sensors, and vibrates or heats the recognized stress state of the speaker Can be provided as feedback to the presenter.

본 발명의 일 실시예에 따른 발표자의 정신적 스트레스 인식 및 피드백 제공 장치는 발표자가 발표하는 상황에서 스마트워치나 상체 밴드 등 추가적인 장비들을 착용하지 않고 생체정보를 수집할 수 있으며 수집된 생체정보를 활용하여 스트레스 상태 인식 및 피드백 제공하여 발표자의 정신적 스트레스 상태 개선을 할 수 있다.The apparatus for recognizing mental stress and providing feedback of a speaker according to an embodiment of the present invention can collect biometric information without wearing additional equipment such as a smart watch or an upper body band in a situation where the speaker announces, and uses the collected biometric information. It is possible to improve the mental stress state of the presenter by recognizing the stress state and providing feedback.

도 1은 본 발명의 일 실시예에 따른 발표자의 정신적 스트레스 인식 및 피드백 제공 시스템을 설명하는 도면이다.
도 2는 도 1에 있는 정신적 스트레스 인식 및 피드백 제공 장치를 설명하는 블록도이다.
도 3은 도 2에 있는 정신적 스트레스 인식 및 피드백 제공 장치를 설명하는 상세 블록도이다.
도 4는 도 2에 있는 정신적 스트레스 인식 및 피드백 제공 장치에서 수행되는 정신적 스트레스 인식 및 피드백 제공 과정을 설명하는 순서도이다.1 is a diagram illustrating a system for recognizing a speaker's mental stress and providing feedback according to an embodiment of the present invention.
FIG. 2 is a block diagram illustrating the apparatus for recognizing mental stress and providing feedback in FIG. 1.
FIG. 3 is a detailed block diagram illustrating the apparatus for recognizing mental stress and providing feedback in FIG. 2.
FIG. 4 is a flowchart illustrating a process of recognizing mental stress and providing feedback performed by the apparatus for recognizing mental stress and providing feedback in FIG. 2.

본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.Since the description of the present invention is merely an embodiment for structural or functional description, the scope of the present invention should not be construed as being limited by the embodiments described in the text. That is, since the embodiments can be variously changed and have various forms, the scope of the present invention should be understood to include equivalents capable of realizing the technical idea. In addition, since the object or effect presented in the present invention does not mean that a specific embodiment should include all of them or only those effects, the scope of the present invention should not be understood as being limited thereto.

한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.Meanwhile, the meaning of terms described in the present application should be understood as follows.

"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.Terms such as "first" and "second" are used to distinguish one component from other components, and the scope of rights is not limited by these terms. For example, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When a component is referred to as being "connected" to another component, it should be understood that although it may be directly connected to the other component, another component may exist in the middle. On the other hand, when it is mentioned that a component is "directly connected" to another component, it should be understood that there is no other component in the middle. On the other hand, other expressions describing the relationship between the constituent elements, that is, "between" and "just between" or "neighboring to" and "directly neighboring to" should be interpreted as well.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Singular expressions are to be understood as including plural expressions unless the context clearly indicates otherwise, and terms such as “comprise” or “have” refer to implemented features, numbers, steps, actions, components, parts, or It is to be understood that it is intended to designate that a combination exists and does not preclude the presence or addition of one or more other features or numbers, steps, actions, components, parts, or combinations thereof.

각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In each step, the identification code (for example, a, b, c, etc.) is used for convenience of explanation, and the identification code does not describe the order of each step, and each step has a specific sequence clearly in context. Unless otherwise stated, it may occur differently from the stated order. That is, each of the steps may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.

본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can be embodied as computer-readable codes on a computer-readable recording medium, and the computer-readable recording medium includes all types of recording devices storing data that can be read by a computer system. . Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage devices. Further, the computer-readable recording medium is distributed over a computer system connected by a network, so that the computer-readable code can be stored and executed in a distributed manner.

여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.All terms used herein have the same meaning as commonly understood by one of ordinary skill in the field to which the present invention belongs, unless otherwise defined. Terms defined in commonly used dictionaries should be construed as having meanings in the context of related technologies, and cannot be construed as having an ideal or excessive formal meaning unless explicitly defined in the present application.

도 1은 본 발명의 일 실시예에 따른 발표자의 정신적 스트레스 인식 및 피드백 제공 시스템을 설명하는 도면이다.1 is a diagram illustrating a system for recognizing mental stress and providing feedback of a speaker according to an embodiment of the present invention.

도 1을 참조하면, 발표자의 정신적 스트레스 인식 및 피드백 제공 시스템(100)은 발표자 단말(110), 정신적 스트레스 인식 및 피드백 제공 장치(130) 및 데이터베이스(150)를 포함할 수 있다.Referring to FIG. 1, a system 100 for recognizing and providing feedback on mental stress of a speaker may include a speaker terminal 110, a device for recognizing and providing feedback on mental stress 130, and a database 150.

발표자 단말(110)은 적어도 하나의 웨어러블 센서를 포함할 수 있고 웨어러블 센서로부터 센싱한 생체신호를 정신적 스트레스 인식 및 피드백 제공 장치(130)에 전송할 수 있는 컴퓨팅 장치에 해당할 수 있고, 스마트폰, 노트북 또는 컴퓨터로 구현될 수 있으며, 반드시 이에 한정되지 않고, 태블릿 PC 등 다양한 디바이스로도 구현될 수 있다.The presenter terminal 110 may include at least one wearable sensor and may correspond to a computing device capable of transmitting a biosignal sensed from the wearable sensor to the mental stress recognition and feedback providing device 130, and may correspond to a smartphone or a laptop computer. Alternatively, it may be implemented as a computer, not necessarily limited thereto, and may be implemented as various devices such as a tablet PC.

일 실시예에서, 발표자 단말(110)은 발표자가 발표할 때 손에 들고 사용하는 프리젠터, 포인터 등의 발표자 도구로 구현될 수 있다. 이 경우에, 발표자가 추가적인 장비를 착용하지 않고도 발표자에 생체정보를 측정할 수 있다. In one embodiment, the presenter terminal 110 may be implemented as a presenter tool such as a presenter or a pointer that the presenter holds and uses when presenting. In this case, the presenter can measure biometric information to the presenter without wearing additional equipment.

발표자 단말(110)은 정신적 스트레스 인식 및 피드백 제공 장치(130)와 네트워크를 통해 연결될 수 있다.The presenter terminal 110 may be connected to the apparatus 130 for recognizing mental stress and providing feedback through a network.

정신적 스트레스 인식 및 피드백 제공 장치(130)는 발표자 단말(110)로부터 수신한 복수의 센싱 정보를 기초로 현재 시점의 발표자 정신적 스트레스 상태를 인식할 수 있고 인식한 발표자의 스트레스 상태를 발표자에게 피드백으로 제공할 수 있는 컴퓨터 또는 프로그램에 해당하는 서버로 구현될 수 있다. 정신적 스트레스 인식 및 피드백 제공 장치(130)는 발표자 단말(110)과 블루투스, WiFi 등을 통해 무선으로 연결될 수 있고, 네트워크를 통해 발표자 단말(110)과 데이터를 주고받을 수 있다.The mental stress recognition and feedback providing device 130 can recognize the presenter's mental stress state at the present time based on a plurality of sensing information received from the presenter terminal 110 and provide the recognized presenter's stress state as feedback to the presenter. It can be implemented as a server that corresponds to a computer or program that can be used. The apparatus 130 for recognizing mental stress and providing feedback may be wirelessly connected to the speaker terminal 110 through Bluetooth, WiFi, and the like, and may exchange data with the speaker terminal 110 through a network.

일 실시예에서, 정신적 스트레스 인식 및 피드백 제공 장치(130)는 현재 시점에서 인식된 발표자의 정신적 스트레스 상태를 발표자 단말(110)에 제공할 수 있고, 이를 기초로 현재 발표자의 정신적 스트레스에 맞는 다양한 서비스를 제공할 수도 있다. 발표자는 발표자 단말(110)을 통해 현재 자신의 정신적 스트레스를 확인할 수 있고 스트레스 개선을 위해 정신적 스트레스 인식 및 피드백 제공 장치(130)로부터 자동으로 추천된 서비스를 선택하거나 또는 이용할 수 있다. In one embodiment, the mental stress recognition and feedback providing apparatus 130 may provide the presenter's mental stress state recognized at the present time to the presenter terminal 110, and based on this, various services suitable for the presenter's mental stress. You can also provide The presenter can check his current mental stress through the presenter terminal 110 and can select or use a service automatically recommended from the mental stress recognition and feedback providing device 130 to improve stress.

또한, 발표자는 발표자 단말(110)을 통해 정신적 스트레스 인식 및 피드백 제공 장치(130)로부터 제공받은 정보 및 서비스에 대한 평가를 통해 정신적 스트레스 인식 및 피드백 제공 장치(130)가 인식하거나 또는 추천한 정보들의 정확성을 피드백할 수 있다.In addition, the speaker recognizes mental stress through the presenter terminal 110 and evaluates information and services provided from the feedback providing device 130 to recognize or recommend information that is recognized or recommended by the mental stress recognition and feedback providing device 130. You can feed back accuracy.

정신적 스트레스 인식 및 피드백 제공 장치(130)는 데이터베이스(150)를 포함하여 구현될 수 있고, 데이터베이스(150)와 독립적으로 구현될 수 있다. 데이터베이스(150)와 독립적으로 구현된 경우 정신적 스트레스 인식 및 피드백 제공 장치(130)는 데이터베이스(150)와 유선 또는 무선으로 연결되어 데이터를 주고받을 수 있다.The apparatus 130 for recognizing mental stress and providing feedback may be implemented including the database 150, and may be implemented independently of the database 150. When implemented independently of the database 150, the apparatus 130 for recognizing mental stress and providing feedback may be connected to the database 150 by wire or wirelessly to exchange data.

데이터베이스(150)는 정신적 스트레스 인식을 위해 필요한 다양한 정보들을 저장할 수 있는 저장장치이다. 데이터베이스(150)는 발표자 단말(110)로부터 수신한 생체정보들을 저장할 수 있고, 반드시 이에 한정되지 않고, 복수의 생체정보들을 기초로 발표자의 정신적 스트레스를 인식하는 과정에서 다양한 형태로 수집 또는 가공된 정보들을 저장할 수 있다.The database 150 is a storage device capable of storing various pieces of information necessary for mental stress recognition. The database 150 may store biometric information received from the speaker terminal 110, and is not necessarily limited thereto, and information collected or processed in various forms in the process of recognizing the mental stress of the speaker based on a plurality of biometric information Can save them.

데이터베이스(150)는 특정 범위에 속하는 정보들을 저장하는 적어도 하나의 독립된 서브-데이터베이스들로 구성될 수 있고, 적어도 하나의 독립된 서브-데이터베이스들이 하나로 통합된 통합 데이터베이스로 구성될 수 있다. 적어도 하나의 독립된 서브-데이터베이스들로 구성되는 경우에는 각각의 서브-데이터베이스들은 블루투스, WiFi 등을 통해 무선으로 연결될 수 있고, 네트워크를 통해 상호 간의 데이터를 주고 받을 수 있다. The database 150 may be composed of at least one independent sub-database storing information belonging to a specific range, and may be composed of an integrated database in which at least one independent sub-database is integrated into one. When composed of at least one independent sub-database, each of the sub-databases may be wirelessly connected through Bluetooth, WiFi, or the like, and data may be exchanged with each other through a network.

데이터베이스(150)는 통합 데이터베이스로 구성되는 경우 각각의 서브-데이터베이스들을 하나로 통합하고 상호 간의 데이터 교환 및 제어 흐름을 관리하는 제어부를 포함할 수 있다.When configured as an integrated database, the database 150 may include a control unit for integrating each of the sub-databases into one and managing data exchange and control flow therebetween.

도 2 및 도 3은 도 1에 있는 정신적 스트레스 인식 및 피드백 제공 장치를 설명하는 블록도 및 상세 블록도이다.2 and 3 are block diagrams and detailed block diagrams illustrating the apparatus for recognizing mental stress and providing feedback in FIG. 1.

도 2 및 도 3을 참조하면, 정신적 스트레스 인식 및 피드백 제공 장치(130)는 생체정보 측정부(210), 스트레스 인식부(230), 피드백 제공부(250) 및 제어부(270)를 포함할 수 있다.2 and 3, the apparatus 130 for recognizing mental stress and providing feedback may include a biometric information measuring unit 210, a stress recognizing unit 230, a feedback providing unit 250, and a control unit 270. have.

생체정보 측정부(210)는 정신적 스트레스 인식 및 피드백 제공 장치(130)에 포함되어 구현될 수 있고, 정신적 스트레스 인식 및 피드백 제공 장치(130)와 독립적으로 구현될 수 있다. 정신적 스트레스 인식 및 피드백 제공 장치(130)와 독립적으로 구현된 경우 생체정보 측정부(210)는 정신적 스트레스 인식 및 피드백 제공 장치(130)와 유선 또는 무선으로 연결되어 데이터를 주고받을 수 있다.The biometric information measuring unit 210 may be implemented by being included in the mental stress recognition and feedback providing device 130, and may be implemented independently of the mental stress recognition and feedback providing device 130. When implemented independently of the mental stress recognition and feedback providing device 130, the biometric information measuring unit 210 may be connected to the mental stress recognition and feedback providing device 130 by wire or wirelessly to exchange data.

일 실시예에서, 생체정보 측정부(210)는 발표자 단말(110)에 포함되어 구현될 수 있고, 발표자 단말(110)을 통해서 정신적 스트레스 인식 및 피드백 제공 장치(130)와 데이터를 주고받을 수 있다.In one embodiment, the biometric information measuring unit 210 may be included in the speaker terminal 110 and implemented, and may exchange data with the mental stress recognition and feedback providing device 130 through the speaker terminal 110. .

일 실시예에서, 생체정보 측정부(210)는 발표자 도구에 장착되고 발표자 도구를 사용하는 발표자에 생체정보를 측정할 수 있다. 여기에서, 발표자 도구는 프리젠터 또는 포인터 등의 발표자가 손에 잡고 발표시 사용할 수 있는 범위에 속하는 도구들에 해당할 수 있다. 생체정보 측정부(210)를 발표자 도구에 장착함으로써, 생체정보를 수집하기 위해 발표자가 센서들을 포함하는 스마트워치, 상체 밴드 등 별도의 웨어러블 기기를 착용하지 않아도 되게 된다.In an embodiment, the biometric information measuring unit 210 may be mounted on a speaker tool and measure biometric information on a speaker who uses the speaker tool. Here, the presenter tool may correspond to tools belonging to a range that a presenter, such as a presenter or a pointer, can hold and use at the time of presentation. By attaching the biometric information measuring unit 210 to the presenter tool, the presenter does not need to wear a separate wearable device such as a smart watch including sensors and an upper body band to collect biometric information.

일 실시예에서, 생체정보 측정부(210)는 생체정보의 특성을 반영하여 미리 설정된 측정 주기 및 측정 시간에 따라 생체정보를 측정할 수 있다. 예를 들어, 발표자의 체온을 측정하는 체온 센서의 경우 분 단위의 측정 주기를 가질 수 있고, 적어도 60초 이상의 측정 시간을 가질 수 있다.In an embodiment, the biometric information measuring unit 210 may measure biometric information according to a preset measurement period and measurement time by reflecting characteristics of the biometric information. For example, in the case of a body temperature sensor that measures a speaker's body temperature, it may have a measurement period in minutes, and may have a measurement time of at least 60 seconds or more.

생체정보 측정부(210)는 복수의 측정부재들을 포함할 수 있다.The biometric information measuring unit 210 may include a plurality of measuring members.

복수의 측정부재들 중 제1 측정부재(211)는 발표자 도구를 사용하는 발표자의 손의 움직임을 측정하고 움직임 정보를 생성할 수 있다. 일 실시예에서, 제1 측정부재(211)는 가속도계 및 각속도계로 구현될 수 있다. 제1 측정부재(211)는 발표자 도구의 상하좌우 혹은 회전하는 움직임의 빈도, 세기, 범위 등을 측정하여 움직임 정보를 생성할 수 있다.Among the plurality of measuring members, the first measuring member 211 may measure a movement of a speaker's hand using a speaker tool and generate movement information. In one embodiment, the first measuring member 211 may be implemented as an accelerometer and an angular velocity meter. The first measuring member 211 may generate motion information by measuring the frequency, intensity, and range of the vertical or horizontal or rotating movement of the speaker tool.

복수의 측정부재들 중 제2 측정부재(213)는 발표자의 체온을 측정하고 체온 변화 정보를 생성할 수 있다. 일 실시예에서, 제2 측정부재(213)는 체온 센서로 구현될 수 있다. 제2 측정부재(213)는 발표자의 체온을 측정하고 측정된 전체 체온을 분 단위의 측정 시간으로 나눔으로써 분당 체온 변화 정보를 생성할 수 있다.Among the plurality of measuring members, the second measuring member 213 may measure a speaker's body temperature and generate body temperature change information. In one embodiment, the second measuring member 213 may be implemented as a body temperature sensor. The second measuring member 213 measures the body temperature of the speaker and divides the measured total body temperature by the measurement time in minutes, thereby generating body temperature change information per minute.

복수의 측정부재들 중 제3 측정부재(215)는 발표자의 피부전도도(GSR)를 측정하고 교감신경계의 활성화 정보를 생성할 수 있다. 일 실시예에서, 제3 측정부재(215)는 피부 전도도 센서로 구현될 수 있다. 제3 측정부재(215)는 발표자의 피부에 땀이 발생할 때 증가되는 피부의 전도성을 측정하고 측정된 피부전도도를 기초로 발표자의 교감 신경계의 활성화 정보를 생성할 수 있다. 피부전도도의 진폭은 각성 또는 부정 감성일 때 커지며, 반응의 속도는 민감한 자극일 때 커진다. 반응의 민감도는 갑작스럽거나 민감한 자극일 때 커진다. 그러므로, 피부전도도는 부정적인 감성 즉, 스트레스에 대해 유용한 지표로 사용될 수 있다.Among the plurality of measuring members, the third measuring member 215 may measure skin conductivity (GSR) of the speaker and generate activation information of the sympathetic nervous system. In one embodiment, the third measuring member 215 may be implemented as a skin conductivity sensor. The third measuring member 215 may measure a skin conductivity that is increased when sweat occurs in the speaker's skin and generate activation information of the speaker's sympathetic nervous system based on the measured skin conductivity. The amplitude of skin conductivity increases when aroused or negatively sensitized, and the speed of reaction increases when it is a sensitive stimulation. The sensitivity of the response increases with sudden or sensitive stimuli. Therefore, skin conductivity can be used as a useful index for negative sensibility, that is, stress.

일 실시예에서, 생체정보 측정부(210)는 생체정보의 특성을 반영하여 미리 설정된 각각의 측정 임계값과의 비교를 통해 각 측정부재들의 오작동으로 인해 잘못된 측정값들을 사전에 필터링함으로써 정신적 스트레스 인식 및 필터링 제공 장치(130)에서 수행되는 정신적 스트레스 인식의 정확성을 높일 수 있다.In one embodiment, the biometric information measurement unit 210 recognizes mental stress by pre-filtering incorrect measurement values due to malfunction of each measurement member through comparison with each preset measurement threshold value by reflecting the characteristics of the biometric information. And it is possible to increase the accuracy of the mental stress recognition performed by the filtering providing device 130.

스트레스 인식부(230)는 측정된 발표자의 생체정보를 분석하고 인식 모델을 기반으로 하여 발표자의 정신적 스트레스(Metal Stress) 상태를 인식할 수 있다. 여기에서, 인식 모델은 기계학습이나 인공지능(AI)을 활용하여 발표자들의 스트레스 상태 인식에 유용한 지표들을 찾아 저장해놓은 데이터베이스라 할 수 있다. 스트레스 인식부(230)는 측정된 발표자의 생체정보를 기초로 스트레스가 있을 경우에 겪게 되는 생리적 반응 유무 및 정도를 분석하고 그 결과를 토대로 스트레스 점수를 산출하여 발표자의 정신적 스트레스 상태를 인식할 수 있다.The stress recognition unit 230 may analyze the measured biometric information of the presenter and recognize the presenter's mental stress state based on the recognition model. Here, the recognition model can be said to be a database that finds and stores useful indicators for recognizing the stress state of speakers using machine learning or artificial intelligence (AI). The stress recognition unit 230 may recognize the presenter's mental stress state by analyzing the presence and degree of a physiological reaction experienced when there is stress based on the measured biometric information of the speaker, and calculating a stress score based on the result. .

일 실시예에서, 스트레스 인식부(230)는 스트레스 분석부재(231) 및 스트레스 인식부재(233)를 포함할 수 있다.In an embodiment, the stress recognition unit 230 may include a stress analysis member 231 and a stress recognition member 233.

스트레스 분석부재(231)는 복수의 측정부재들(211,213,215) 각각의 측정 정보를 수집하고 수집된 측정 정보를 스트레스가 있을 경우에 겪게 되는 생리적 반응에 해당하는 스트레스 측정지표들로 분류할 수 있다. 여기에서, 스트레스 측정지표들에는 발표자가 발표시 정신적 스트레스로 인해 심장이 빨리 뛰고 땀이 나며 체온 변화 등의 신체적 변화를 겪게 되는 것으로부터 맥박(심박), 혈압, 피부전도도, 체온 등이 포함될 수 있다. The stress analysis member 231 may collect measurement information of each of the plurality of measurement members 211, 213, and 215, and classify the collected measurement information into stress measurement indicators corresponding to physiological responses experienced when there is stress. Here, the stress measurement indicators may include pulse (heart rate), blood pressure, skin conductance, body temperature, etc. from the fact that the heart beats quickly, sweats, and undergoes physical changes such as changes in body temperature due to mental stress upon presentation by the presenter. .

일실시예에서, 스트레스 분석분재(231)는 스트레스 측정지표들 각각에 대해 측정된 생체정보의 특징을 분류하고 생체정보의 특징 및 개별 발표자 특성 분류를 기초로 현재 시점에서의 발표자의 각 스트레스 측정지표별 개별 등급을 분류할 수 있다.In one embodiment, the stress analysis bonsai 231 classifies the characteristics of the measured biometric information for each of the stress measurement indicators, and based on the characteristics of the biometric information and the individual speaker characteristics, each stress measurement index of the presenter at the present time. Individual ratings of stars can be classified.

여기에서, 개별 발표자 특성 분류는 발표자 개인마다 개인적인 성향이나 체질 차이를 반영하여 발표자 개인별로 수집되어 축적된 생체정보와 발표자 동작 또는 발표자 감정 간의 매칭 정보에 해당할 수 있다. 개별 발표자 특성 분류는 동일한 생체정보라고 하더라도 발표자가 행동하는 동작이 다를 수 있고, 발표자가 해당 동작에 대해 느끼는 감정 역시 다를 수 있다는 사실을 고려하여 발표자 개인별로 수집된 정보들을 학습하여 생성한 스트레스 인식 모델에 해당할 수 있다. 개별 발표자 특성 분류는 발표자의 생체정보를 입력으로 하고 해당 생체정보를 측정한 시점에서의 해당 발표자가 행동했던 동작 또는 해당 발표자가 느꼈던 감정을 출력으로 하여 구성된 학습데이터를 학습하여 생성될 수 있다.Here, the classification of individual speaker characteristics may correspond to matching information between biometric information collected and accumulated for each speaker by reflecting personal disposition or constitution difference for each speaker and speaker motion or speaker emotion. Individual speaker characteristic classification is a stress recognition model created by learning the information collected for each speaker in consideration of the fact that the speaker's behavior may be different even though it is the same biometric information, and the speaker's feelings about the movement may also be different. May correspond to. Classification of individual speaker characteristics may be generated by learning learning data configured by inputting the speaker's biometric information and outputting the actions the speaker has acted at the time the biometric information is measured or the emotion felt by the speaker.

일 실시예에서, 스트레스 분석부재(231)는 수집된 생체정보를 기초로 발표자 동작을 판단하고 발표자 동작을 기초로 미리 정의된 스트레스 측정지표별 등급표에 의거 해당 발표자의 각 지표별 개별 등급을 결정할 수 있다. 예를 들면, 현재 시점에서 측정된 체온이 이전 시점에서 측정된 체온에 비해 2℃ 이상 상승하였으면 체온 변화 지표에서 스트레스 2등급에 속한다고 결정할 수 있다. 보다 구체적으로, 스트레스 분석부재(231)는 생체정보 측정부(210) 각각에 대해 생체정보에 기초하여 발표자의 동작을 판단할 수 있고 발표자 동작 및 해당 동작과 연관된 발표자의 생체정보를 기초로 현재 발표자의 정신적 스트레스를 각 지표별로 등급을 결정할 수 있다. In one embodiment, the stress analysis member 231 determines the speaker's motion based on the collected biometric information, and determines an individual rating for each indicator of the corresponding speaker based on the predefined stress measurement indicator rating table based on the speaker's motion. I can. For example, if the body temperature measured at the current time point has risen by 2℃ or more compared to the body temperature measured at the previous time point, it can be determined that it belongs to the stress level 2 in the body temperature change index. More specifically, the stress analysis member 231 may determine the speaker's motion based on the biometric information for each of the biometric information measuring units 210, and the current speaker based on the speaker's motion and the biometric information of the speaker associated with the motion. Mental stress can be rated for each indicator.

일 실시예에서, 스트레스 분석부재(231)는 특정 기간 동안의 생체정보를 입력으로 하고 생체정보를 측정한 시점에서의 실제 발표자 동작을 출력으로 하는 학습데이터를 학습하여 발표자 동작을 판단할 수 있다. 스트레스 분석부재(231)는 과거 특정 기간 동안의 생체정보 및 실제 발표자 동작 정보로 구성된 학습데이터를 학습함으로써 생체정보를 입력하면 해당 생체정보에 대응되는 발표자 동작이 출력되는 학습 모델을 생성할 수 있다. In an embodiment, the stress analysis member 231 may determine the speaker's motion by learning learning data that inputs biometric information for a specific period of time and outputs an actual speaker's motion at a time when the biometric information is measured. The stress analysis member 231 may generate a learning model in which, when biometric information is input by learning learning data composed of biometric information and actual speaker motion information for a specific period in the past, a speaker motion corresponding to the biometric information is output.

스트레스 분석부재(231)는 사전에 수집된 발표자별 학습데이터를 이용하여 학습 모델을 생성할 수 있고, 학습 결과를 데이터베이스(150)에 저장할 수 있다. 스트레스 분석부재(231)는 실시간으로 수집된 생체정보 및 해당 생체정보를 기초로 추론된 발표자 동작 또는 발표자 정신적 스트레스에 대한 발표자의 피드백을 반영하여 학습 모델을 갱신할 수 있다.The stress analysis member 231 may generate a learning model using previously collected learning data for each speaker, and may store the learning result in the database 150. The stress analysis member 231 may update the learning model by reflecting the biometric information collected in real time and the speaker's motion inferred based on the biometric information or the speaker's feedback on the speaker's mental stress.

일 실시예에서, 스트레스 분석부재(231)는 각 생체지표들의 심각성 수준에 따라 각 스트레스 측정지표별 등급을 분류할 수 있다.In an embodiment, the stress analysis member 231 may classify a grade for each stress measurement index according to the severity level of each biomarker.

발표자 동작 및 발표자 동작에 대한 생체정보를 입력으로 하고 발표자 동작에 대한 발표자의 감정정보를 출력으로 하는 학습데이터를 학습하여 발표자의 정신적 스트레스 상태를 인식할 수 있다.The mental stress state of the speaker can be recognized by learning learning data that inputs the speaker's motion and biometric information about the speaker's motion and outputs the speaker's emotion information about the speaker's motion.

스트레스 분석부재(231)는 발표자 개인별로 각각 발표자 동작 및 해당 발표자 동작에 대한 생체정보를 입력으로 하고 이에 대응하는 해당 발표자의 감정정보를 출력으로 하는 학습데이터를 학습함으로써 발표자 동작 및 생체정보를 입력하면 해당 발표자 동작 및 생체정보에 대응되는 발표자 감정정보가 출력되는 학습 모델을 생성할 수 있다. When the stress analysis member 231 learns learning data that inputs the presenter's motion and the biometric information of the respective speaker's motion for each speaker and outputs the corresponding speaker's emotion information, the speaker motion and the biometric information are input. A learning model in which speaker emotion information corresponding to a corresponding speaker motion and biometric information is output may be generated.

스트레스 인식부재(233)는 스트레스 분석부재(231)에 의해 스트레스 지표들에 대해 개별 등급이 결정되면 전체 스트레스 점수 및 등급으로 산출하여 스트레스 정도를 인식할 수 있다. 스트레스 인식부재(233)는 스트레스 지표들 중 어느 하나에 의존하여 스트레스 정도를 최종 판단하기 힘들기 때문에 여러가지 스트레스 지표들을 복합적으로 활용하여 스트레스 인식의 정확도를 높일 수 있게 한다.The stress recognition member 233 may recognize the level of stress by calculating an overall stress score and a rating when individual ratings for the stress indicators are determined by the stress analysis member 231. Since it is difficult for the stress recognition member 233 to finally determine the level of stress depending on one of the stress indicators, it is possible to increase the accuracy of stress recognition by using various stress indicators in combination.

일 실시예에서, 스트레스 인식부재(233)는 여러가지 스트레스 지표들로부터 얻은 결과를 토대로, 각 등급에 속한 스트레스 지수들의 개수를 기반으로 하여 전체 스트레스 점수 및 등급을 구할 수 있다. 즉, 각 지표들 중 1등급에 속한 지표의 개수(β₁), 2등급에 속한 지표의 개수(β₂), 3등급에 속한 지표의 개수(β₃)를 구하고, 이때 1등급에 속한 지표의 개수를 기준으로, 2등급에 속한 지표의 개수와 3등급에 속한 지표의 개수에는 각각 2와 3이라는 가중치를 둠으로써, 각 등급에 속한 지표들의 개수가 같은 상황에서는 높은 등급에 속한 지표의 개수를 더 중요하게 간주하도록 한다.In an embodiment, the stress recognition member 233 may calculate the total stress score and grade based on the number of stress indices belonging to each grade based on results obtained from various stress indices. In other words, the number of indicators belonging to the first grade (β ₁ ), the number of indicators belonging to the second grade (β ₂ ), and the number of indicators belonging to the third grade (β ₃ ) are obtained, and at this time, the index belonging to the first grade. Based on the number of, the number of indicators belonging to the 2nd grade and the number of indicators belonging to the 3rd grade are weighted 2 and 3, respectively, so that the number of indicators belonging to the higher grade in a situation where the number of indicators belonging to each grade is the same. Should be considered more important.

일 실시예에서, 스트레스 인식부재(233)는 스트레스 분석부재(231)에 의해 분석된 여러가지 스트레스 지표들에 대해 해당 사용자의 성향 및 현재 시점 중 적어도 하나를 기초로 결정된 가중치를 적용하여 가중화된 사용자의 정신적 스트레스들을 도출할 수 있다. 스트레스 인식부재(233)는 발표자별 또는 시점별 인식된 정신적 스트레스에 대한 해당 발표자의 피드백 정보를 학습하여 발표자별 또는 시점별 생체정보 측정부(210)들 간의 가중치 정보를 미리 생성하여 데이터베이스(150)에 저장할 수 있다.In one embodiment, the stress recognition member 233 is a weighted user by applying a weight determined based on at least one of the user's propensity and the current time point to various stress indices analyzed by the stress analysis member 231 Mental stress can be elicited. The stress recognition member 233 learns feedback information of the presenter on the perceived mental stress for each speaker or point of view, and generates weight information between the biometric information measuring units 210 for each speaker or point of time in advance, and the database 150 Can be saved on.

예를 들어, 스트레스 인식부재(233)는 복수의 측정부재들(211,213,215) 중에서 체온 변화를 측정하는 제2 측정부재(213)로부터 도출된 정신적 스트레스가 다른 생체정보 측정부재들로부터 도출된 정신적 스트레스보다 높은 정확도를 보였던 발표자에 대해서는 다른 생체정보 측정부재들보다 체온 변화를 측정하는 제2 측정부재(213)로부터 도출된 정신적 스트레스에 대해 상대적으로 높은 가중치를 부여함으로써 발표자의 성향에 따른 가중화된 정신적 스트레스 정보를 도출할 수 있다.For example, the stress recognition member 233 has a mental stress derived from the second measuring member 213 measuring body temperature change among the plurality of measuring members 211, 213, 215 than the mental stress derived from other biometric information measuring members. For the presenter with high accuracy, a relatively high weight is given to the mental stress derived from the second measuring member 213, which measures body temperature change, compared to other biometric information measuring members. Information can be derived.

또한, 스트레스 인식부재(233)는 발표 시작 시점으로부터 경과 10분 사이의 구간에서 피부전도도(교감신경계 활성화)를 측정하는 제3 측정부재(215)로부터 도출된 정신적 스트레스가 상대적으로 높은 정확도를 보인 발표자에 대해서는 발표 시작 시점으로부터 경과 10분 사이에 해당 발표자의 정신적 스트레스를 인식함에 있어서 다른 생체정보 측정부재들보다 피부전도도(교감신경계 활성화)를 측정하는 제3 측정부재(215)로부터 도출된 정신적 스트레스에 대해 상대적으로 높은 가중치를 부여함으로써 현재 시점에 따른 가중화된 정신적 스트레스 정보를 도출할 수 있다.In addition, the stress recognition member 233 is a presenter whose mental stress derived from the third measuring member 215 that measures skin conductance (sympathetic nervous system activation) in the interval between the start of the presentation and 10 minutes elapsed is relatively high accuracy. In regard to the mental stress derived from the third measuring member 215 that measures skin conductance (sympathetic nervous system activation) than other biometric information measuring members in recognizing the mental stress of the presenter between the start of the presentation and the elapsed 10 minutes, By assigning a relatively high weight to each other, it is possible to derive weighted mental stress information according to the current point in time.

일 실시예에서, 스트레스 인식부재(233)는 가중화된 발표자의 각 등급에 속한 지표들의 개수를 기반으로 합산 처리를 통해 최종 발표자의 정신적 스트레스 상태가 어느 정도인지를 나타내는 스트레스 점수를 구할 수 있다.In an embodiment, the stress recognition member 233 may obtain a stress score indicating a level of mental stress of the final speaker through a summation process based on the weighted number of indicators belonging to each level of the speaker.

피드백 제공부(250)는 스트레스 인식부(230)에서 인식된 발표자의 정신적 스트레스 상태를 발표자에게 피드백을 제공할 수 있다. 일 실시예에서, 피드백 제공부(250)는 발표자의 스트레스 점수를 기초로 진동부재(251)의 진동 세기를 조절하거나 발열부재(253)의 발열 온도를 조절하여 발표자에게 진동 또는 발열 형태로 피드백을 할 수 있다.The feedback providing unit 250 may provide feedback to the presenter on the mental stress state of the presenter recognized by the stress recognition unit 230. In one embodiment, the feedback providing unit 250 provides feedback to the speaker in the form of vibration or heat by adjusting the vibration intensity of the vibration member 251 or the heating temperature of the heating member 253 based on the speaker's stress score. can do.

일 실시예에서, 피드백 제공부(250)는 발표자 도구에 장착되어 발표자의 정신적 스트레스 정도에 따라 실시간으로 진동세기나 발열온도를 달리 하여 발표자에게 피드백으로 제공할 수 있다. In an embodiment, the feedback providing unit 250 may be mounted on a speaker tool to provide feedback to the speaker by varying the vibration intensity or heating temperature in real time according to the level of mental stress of the speaker.

이때, 발표자는 진동 또는 발열 정도에 따라 자신이 받고 있는 스트레스를 인지할 수 있고 이를 해소하기 위해 노력할 수 있다. At this time, the presenter can recognize the stress he is receiving according to the degree of vibration or heat generation, and can make an effort to relieve it.

제어부(270)는 정신적 스트레스 인식 및 피드백 제공 장치(130)의 전체적인 동작을 제어하고, 생체정보 측정부(210), 스트레스 인식부(230) 및 피드백 제공부(250) 간의 제어 흐름 또는 데이터 흐름을 관리할 수 있다.The controller 270 controls the overall operation of the apparatus 130 for recognizing mental stress and providing feedback, and controls the flow of control or data between the biometric information measurement unit 210, the stress recognition unit 230, and the feedback providing unit 250. Can be managed.

도 4는 도 1에 있는 정신적 스트레스 인식 및 피드백 제공 장치에서 수행되는 정신적 스트레스 인식 및 피드백 제공 과정을 설명하는 순서도이다.4 is a flowchart illustrating a process of recognizing mental stress and providing feedback performed by the apparatus for recognizing and providing feedback on mental stress in FIG. 1.

도 4를 참조하면, 정신적 스트레스 인식 및 피드백 제공 장치(130)는 생체정보 측정부(210)를 통해 발표자의 움직임, 체온 변화, 교감신경계 활성화를 포함하는 생체정보를 측정할 수 있다(단계 S410). 정신적 스트레스 인식 및 피드백 제공 장치(130)는 측정된 발표자의 생체정보를 기초로 생리적 반응 유무 및 정도를 분석하고 스트레스 점수를 산출하여 발표자의 정신적 스트레스 상태를 인식할 수 있다(단계 S430). 정신적 스트레스 인식 및 피드백 제공 장치(130)는 스트레스 인식부(250)를 통해 인식된 발표자의 스트레스 상태를 진동 또는 발열 형태로 발표자에게 피드백을 제공할 수 있다(단계 S450).Referring to FIG. 4, the apparatus 130 for recognizing mental stress and providing feedback may measure biometric information including a speaker's movement, body temperature change, and sympathetic nervous system activation through the biometric information measuring unit 210 (step S410). . The apparatus 130 for recognizing mental stress and providing feedback may recognize the presenter's mental stress state by analyzing the presence and degree of a physiological reaction based on the measured biometric information of the presenter and calculating a stress score (step S430). The apparatus 130 for recognizing mental stress and providing feedback may provide feedback to the presenter in the form of vibration or heat on the stress state of the presenter recognized through the stress recognizing unit 250 (step S450).

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art will variously modify and change the present invention within the scope not departing from the spirit and scope of the present invention described in the following claims. You will understand that you can do it.

100: 발표자의 정신적 스트레스 인식 및 피드백 제공 시스템
110: 발표자 단말
130: 정신적 스트레스 인식 및 피드백 제공 장치
150: 데이터베이스
210: 생체정보 측정부 211,213,215: 측정부재
230: 스트레스 인식부
231: 스트레스 분석부재 233: 스트레스 인식부재
250: 피드백 제공부
251: 진동부재 253: 발열부재
270: 제어부100: Presenter's mental stress recognition and feedback provision system
110: presenter terminal
130: mental stress recognition and feedback providing device
150: database
210: biometric information measuring unit 211,213,215: measuring member
230: stress recognition unit
231: stress analysis member 233: stress recognition member
250: feedback providing unit
251: vibration member 253: heating member
270: control unit

Claims

A biometric information measuring unit mounted on a presenter tool and measuring biometric information to a presenter using the presenter tool, and pre-filtering an erroneous measurement value through comparison with a preset measurement threshold by reflecting characteristics of the biometric information;
A stress recognition unit that analyzes the measured biometric information of the speaker and recognizes a mental stress state of the speaker based on a recognition model; And
And a feedback providing unit providing feedback to the presenter on the recognized mental stress state of the presenter,
The stress recognition unit
Based on the measured biometric information of the speaker, the presence and extent of a physiological reaction experienced when there is stress are analyzed, and a stress score is calculated based on the result to recognize the mental stress state of the speaker,
Based on the measured biometric information, the speaker's motion is determined, and the level of each indicator is determined based on the speaker's motion and the speaker's biometric information related to the motion, based on a predefined rating table for each indicator, and each grade A device for recognizing and providing feedback on mental stress of a speaker, characterized in that the total stress score is calculated based on the number of stress indices belonging to.

The method of claim 1, wherein the biometric information measuring unit
A first measuring member for measuring movement of the presenter's hand using the presenter tool corresponding to a presenter or a pointer and generating movement information;
A second measuring member that measures the body temperature of the speaker and generates body temperature change information; And
And a third measuring member that measures the skin conductivity (GSR) of the speaker and generates activation information of the sympathetic nervous system.

delete

The method of claim 1, wherein the feedback providing unit
A device for recognizing and providing feedback on mental stress of a speaker, characterized in that feedback is provided to the speaker in at least one of vibration generation and heat generation based on the recognized mental stress state of the speaker.