KR20220047157A

KR20220047157A - Server and method for testing cognitive function

Info

Publication number: KR20220047157A
Application number: KR1020210106731A
Authority: KR
Inventors: 채용욱; 이보희; 장재선; 이태헌; 이송섭; 김기범; 전형신; 황정환
Original assignee: 주식회사 룩시드랩스
Priority date: 2020-10-08
Filing date: 2021-08-12
Publication date: 2022-04-15
Also published as: KR20220047187A

Abstract

The present invention relates to a cognitive function test server and comprises a communication interface, a memory, and a processor operably connected with the communication interface and the memory. The processor is configured to provide a first sequence for obtaining EEG data of a user in a resting state through an HMD device, obtain reference EEG data of the user based on the first sequence, provide at least one second sequence related to a cognitive function through the HMD device, obtain input data based on the second sequence from the HMD device and an input device connected thereto and activated EEG data, and generate a user's cognitive evaluation result based on at least one of the user's reference EEG data, the activated EEG data, and the input data. Accordingly, a sudden decline in cognitive function can be prevented.

Description

SERVER AND METHOD FOR TESTING COGNITIVE FUNCTION

본 발명은 인지 기능 검사 서버 및 방법에 관한 것이다.The present invention relates to a cognitive function test server and method.

최근 노령 사회로 접어들면서 노인 인구의 비율은 지속적으로 증가함에 따라 노년기로 접어들수록 발병할 확률이 높은 치매 등과 같은 노인 질병에 대한 관심도가 높아지고 있다.As the proportion of the elderly population continues to increase as the elderly population enters into an aging society, interest in geriatric diseases such as dementia, which is more likely to occur in old age, is increasing.

치매는 다양한 원인에 의해 후천적으로 기억을 하고, 사고를 할 수 있는 인지 능력이 점차 감퇴하여 일상적인 생활에 상당한 지장이 나타나게 되는 뇌 질환을 의미한다.Dementia refers to a brain disease in which the cognitive ability to remember and think gradually declines due to various causes, which significantly interferes with daily life.

치매는 증상 및 원인이 다양하고 복잡하여, 명확하게 밝혀진 치료법이 없으나, 조기 진단 시 발병을 늦추거나, 상태를 완화시킬 수 있다. 이에, 치매를 조기에 진단하기 위해 노인들을 대상으로 하는 치매 진단 테스트 등이 활발하게 이루어지고 있다.Dementia has various and complex symptoms and causes, and there is no clear treatment, but early diagnosis can delay the onset or alleviate the condition. Accordingly, in order to diagnose dementia at an early stage, dementia diagnosis tests for the elderly are being actively performed.

발명의 배경이 되는 기술은 본 발명에 대한 이해를 보다 용이하게 하기 위해 작성되었다. 발명의 배경이 되는 기술에 기재된 사항들이 선행기술로 존재한다고 인정하는 것으로 이해되어서는 안 된다.The description underlying the invention has been prepared to facilitate understanding of the invention. It should not be construed as an admission that the matters described in the background technology of the invention exist as prior art.

종래 시스템은 HMD 장치를 통해 언제, 어디에서나 인지 기능을 측정하고 훈련할 수 있다는 장점이 있으나, 대부분 자극에 대한 반응 속도 및 반응 시간을 기준으로 인지 기능을 평가하기 때문에, 평가 결과의 정확도가 떨어진다. The conventional system has the advantage of being able to measure and train a cognitive function anytime and anywhere through the HMD device, but since most of the cognitive functions are evaluated based on the reaction speed and reaction time to stimuli, the accuracy of the evaluation results is poor.

또한, 종래 시스템의 대부분은 HMD 장치를 이용한 초기 연구들로, HMD 장치와 인지 능력 테스트 장치 연결 구성에 대해서만 서술하고 있을 뿐, HMD 장치에 다양한 종류의 VR 컨텐츠를 어떠한 방식으로 제공하고, 이를 기초로 인지 능력을 어떻게 진단하는 지에 대한 연구는 개시된 바 없다. In addition, most of the conventional systems are early studies using HMD devices, and only describe the connection configuration between the HMD device and the cognitive ability test device. Studies on how to diagnose cognitive ability have not been disclosed.

이에, 인지 능력 테스트를 위한 다양한 VR 기반의 컨텐츠를 제공함으로써, 사용자의 인지 능력을 정확하게 진단하기 위한 방법이 요구되고 있다. Accordingly, there is a need for a method for accurately diagnosing a user's cognitive ability by providing various VR-based contents for a cognitive ability test.

그 결과, 본 발명의 발명자들은, 인지 능력을 테스트하기 위한 컨텐츠 시퀀스를 제공하며, 뇌파 데이터를 기반으로 사용자의 인지 능력을 진단하기 위한 인지 기능 검사 방법 및 이를 수행하는 서버를 개발하고자 하였다. As a result, the inventors of the present invention intend to develop a cognitive function test method for diagnosing a user's cognitive ability based on EEG data, providing a content sequence for testing cognitive ability, and a server for performing the same.

이때, 본 발명의 발명자들은, HMD 장치를 통해 획득되는 입력 데이터와 테스트를 수행하는 사용자에게서 획득되는 뇌파 데이터 또는 시선 데이터의 조합을 통해 사용자의 인지 평가 결과를 결정할 수 있는 방법을 구성하였다. At this time, the inventors of the present invention have configured a method for determining the user's cognitive evaluation result through a combination of input data obtained through the HMD device and EEG data or gaze data obtained from a user performing a test.

본 발명의 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the problems mentioned above, and other problems not mentioned will be clearly understood by those skilled in the art from the following description.

전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시 예에 따른 인지 기능 검사 서버가 제공된다. 상기 서버는, 통신 인터페이스, 메모리 및 상기 통신 인터페이스, 상기 메모리와 동작 가능하게 연결된 프로세서를 포함하고, 상기 프로세서는, HMD 장치를 통해 휴식 상태의 사용자 뇌파 데이터를 획득하기 위한 제1 시퀀스를 제공하고, 상기 제1 시퀀스를 기초로 하는 사용자의 기준 뇌파 데이터(baseline)를 획득하고, 상기 HMD 장치를 통해 인지 기능과 관련된 적어도 하나의 제2 시퀀스를 제공하고, 상기 HMD 장치 및 이와 연결된 입력 장치로부터 상기 제2 시퀀스를 기초로 하는 입력 데이터 및 활성화된 뇌파 데이터를 획득하고, 상기 사용자의 기준 뇌파 데이터, 상기 활성화된 뇌파 데이터 및 입력 데이터 중 적어도 하나를 기초로 사용자의 인지 평가 결과를 생성하도록 구성된다. In order to solve the above-described problems, a cognitive function test server according to an embodiment of the present invention is provided. The server includes a communication interface, a memory, and a processor operatively coupled to the communication interface and the memory, the processor to provide a first sequence for acquiring resting state user brainwave data via an HMD device; Obtaining a user's baseline EEG data based on the first sequence, providing at least one second sequence related to a cognitive function through the HMD device, and providing the second sequence from the HMD device and an input device connected thereto 2 to obtain input data and activated EEG data based on the sequence, and generate a cognitive evaluation result of the user based on at least one of the user's reference EEG data, the activated EEG data, and the input data.

본 발명의 특징에 따르면, 상기 프로세서는, 사용자에게 눈과 관련된 행동을 안내하도록 구성된 가이드 텍스트 및 지정된 시간을 안내하는 효과음 중 적어도 하나를 포함하는 제1 시퀀스를 제공하도록 구성될 수 있다.According to a feature of the present invention, the processor may be configured to provide the user with a first sequence comprising at least one of a guide text configured to guide an eye-related action and a sound effect to guide a specified time.

본 발명의 다른 특징에 따르면, 상기 프로세서는, 상기 휴식 상태를 유도하기 위한 영상을 제공하도록 구성될 수 있다.According to another feature of the present invention, the processor may be configured to provide an image for inducing the resting state.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 상기 입력 데이터를 기초로 사용자의 인지 기능 별 평가 점수를 계산하고, 상기 계산된 평가 점수에 따라 장애 여부를 결정하고, 상기 기준 뇌파 데이터와 상기 활성화된 뇌파 데이터의 비교 결과를 기초로 상기 결정된 인지 장애 여부의 유효성을 결정하도록 구성될 수 있다. According to another feature of the present invention, the processor calculates an evaluation score for each cognitive function of the user based on the input data, determines whether a disability is based on the calculated evaluation score, and determines whether the user has a disability, the reference EEG data and the activation It may be configured to determine the validity of the determined cognitive impairment based on a comparison result of the obtained EEG data.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 상기 입력 데이터를 기초로 사용자의 인지 평가 점수를 계산하고, 상기 계산된 평가 점수에 상기 기준 뇌파 데이터와 상기 활성화된 뇌파 데이터의 비교 결과를 반영하여, 사용자의 인지 장애 여부를 결정하도록 구성될 수 있다.According to another feature of the present invention, the processor calculates the user's cognitive evaluation score based on the input data, and reflects the comparison result of the reference EEG data and the activated EEG data in the calculated evaluation score. , may be configured to determine whether the user has a cognitive impairment.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 상기 기준 뇌파 데이터와 상기 반응형 뇌파 데이터의 비교 결과를 토대로 인지 장애 여부를 결정하고, 상기 입력 데이터를 기초로 계산된 인지 평가 점수를 참조 데이터로 제공하도록 구성될 수 있다.According to another feature of the present invention, the processor determines whether there is a cognitive impairment based on a comparison result of the reference EEG data and the reactive EEG data, and uses the cognitive evaluation score calculated based on the input data as reference data. can be configured to provide.

본 발명의 또 다른 특징에 따르면, 상기 비교 결과는, 주파수 대역 별 PSD(Power Spectral Density) 비교 결과일 수 있다. According to another feature of the present invention, the comparison result may be a PSD (Power Spectral Density) comparison result for each frequency band.

본 발명의 또 다른 특징에 따르면, 상기 인지 장애 여부는, 사용자의 인지 기능 별로 결정될 수 있다.According to another feature of the present invention, the cognitive impairment may be determined for each cognitive function of the user.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 상기 HMD 장치의 탈착 신호를 획득하는 경우, 상기 HMD 장치를 통해 사용자의 기준 뇌파 데이터를 다시 획득하도록 구성될 수 있다.According to another feature of the present invention, the processor may be configured to acquire the user's reference EEG data again through the HMD device when acquiring the detachment signal of the HMD device.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 상기 사용자의 동공 움직임을 측정하여, 사용자의 동공 중심 또는 동공 중심 간 거리 보정을 수행하도록 구성될 수 있다. According to another feature of the present invention, the processor may be configured to measure the user's pupil movement and correct the user's pupil center or distance between pupil centers.

본 발명의 또 다른 특징에 따르면, 상기 프로세서는, 사용자의 단기 기억, 장기 기억, 집중력, 깊이 지각력, 순발력, 시지각력, 공간 지각력, 작업 기억력, 순간 주의력, 지속 주의력, 독해 능력 및 선택 주의력 중 적어도 하나 이상의 인지 기능을 테스트하도록 구성된 제2 시퀀스를 제공하도록 구성될 수 있다. According to another feature of the present invention, the processor is configured to include at least one of short-term memory, long-term memory, concentration, depth perception, agility, visual perception, spatial perception, working memory, instantaneous attention, sustained attention, reading comprehension, and selective attention. and provide a second sequence configured to test one or more cognitive functions.

본 발명의 또 다른 특징에 따르면, 상기 단기 기억 또는 장기 기억을 테스트하도록 구성된 제2 시퀀스는, 3차원 공간을 배경으로, 3차원 공간에 위치한 복수의 그래픽 객체, 3차원 공간에서 이동하는 그래픽 객체, 지정된 시간 이후에 상기 복수의 그래픽 객체와 동일하거나, 동일하지 않은 객체를 선택하도록 안내하는 가이드 컨텐츠 중 적어도 하나를 포함할 수 있다. According to another feature of the present invention, the second sequence configured to test short-term memory or long-term memory comprises: a plurality of graphic objects located in a three-dimensional space, a graphic object moving in a three-dimensional space, with a three-dimensional space as a background; It may include at least one of guide contents for guiding to select an object that is the same as or not the same as the plurality of graphic objects after a specified time.

본 발명의 또 다른 특징에 따르면, 상기 집중력을 테스트하도록 구성된 제2 시퀀스는, 3차원 공간을 배경으로, 동일한 모양을 가지는 복수의 그래픽 객체, 상기 복수의 그래픽 객체 중 지정된 시간 이후에 다른 방식으로 노출되는 적어도 하나의 그래픽 객체, 상기 3차원 공간 내에서 복수의 그래픽 객체의 모션 및 상기 다른 방식으로 노출되는 적어도 하나의 그래픽 객체를 선택하도록 안내하는 가이드 컨텐츠 중 적어도 하나를 포함할 수 있다. According to another feature of the present invention, the second sequence configured to test the concentration is exposed in a different way after a specified time from among a plurality of graphic objects having the same shape and the plurality of graphic objects as a background in a three-dimensional space. It may include at least one of at least one graphic object to be a graphic object, motion of a plurality of graphic objects in the three-dimensional space, and guide content for guiding to select at least one graphic object exposed in the other way.

본 발명의 또 다른 특징에 따르면, 상기 깊이 지각력을 테스트하도록 구성된 제2 시퀀스는, 3차원 공간을 배경으로, 3차원 공간 내에서 동일한 모양을 가지되, 사용자의 시점을 기준으로 원거리 또는 근거리에 위치한 복수의 그래픽 객체, 상기 복수의 그래픽 객체 중 원거리 또는 근거리에 위치한 그래픽 객체를 순차적으로 선택하도록 안내하는 가이드 컨텐츠 중 적어도 하나를 포함할 수 있다.According to another feature of the present invention, the second sequence configured to test the depth perception ability has the same shape in the three-dimensional space as the background in the three-dimensional space, and is located far or near from the user's viewpoint. It may include at least one of a plurality of graphic objects and guide contents for guiding to sequentially select a graphic object located far or near from among the plurality of graphic objects.

전술한 바와 같은 과제를 해결하기 위하여 본 발명의 다른 실시예에 따른 인지 기능 검사 방법이 제공된다. 상기 방법은, HMD 장치를 통해 휴식 상태의 사용자 뇌파 데이터를 획득하도록 구성된 제1 시퀀스를 제공하는 단계, 상기 제1 시퀀스를 기초로 하는 사용자의 기준 뇌파 데이터(baseline)를 획득하는 단계, 상기 HMD 장치를 통해 휴식 상태인 사용자에게 인지 기능과 관련된 적어도 하나의 제2 시퀀스를 제공하는 단계, 상기 HMD 장치 및 이와 연결된 입력 장치로부터 상기 제2 시퀀스를 기초로 하는 입력 데이터를 획득하는 단계 및 상기 사용자의 기준 뇌파 데이터와 입력 데이터를 기초로 사용자의 인지 기능 별 평가 결과를 생성 단계를 포함하도록 구성된다. In order to solve the above problems, there is provided a cognitive function test method according to another embodiment of the present invention. The method comprises the steps of: providing a first sequence configured to acquire resting state user EEG data through an HMD device, obtaining a baseline EEG data of a user based on the first sequence, the HMD device providing at least one second sequence related to a cognitive function to a user in a resting state through It is configured to include the step of generating an evaluation result for each cognitive function of the user based on the EEG data and the input data.

기타 실시 예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Specific details of other embodiments are included in the detailed description and drawings.

본 발명은 HMD 장치를 통해 의료 전문가의 진행 없이도 일련의 시퀀스에 대한 사용자의 뇌 상태를 측정하고, 이를 기초로 사용자의 인지 능력을 평가할 수 있다. The present invention can measure the user's brain state for a series of sequences without a medical professional through the HMD device, and evaluate the user's cognitive ability based on this.

또한, 본 발명은 HMD 장치에 장착된 EEG 센서에서 획득되는 뇌파 데이터를 통해 정상군과 인지 기능이 저하된 환자군 사이의 유의미한 차이를 검출함으로써, 인지 기능이 저하된 초기 시점을 진단할 수 있다. 특히, 인지 기능 장애 여부를 초기 시점에 진단하여, 인지 기능의 급격한 저하를 예방할 수 있다.In addition, the present invention detects a significant difference between a normal group and a patient group with reduced cognitive function through EEG data acquired from the EEG sensor mounted on the HMD device, thereby diagnosing the initial time point when the cognitive function is deteriorated. In particular, by diagnosing whether or not cognitive function is impaired at an early stage, it is possible to prevent a sudden decline in cognitive function.

또한, 본 발명은 HMD 장치의 탈착 여부에 따라 기준 뇌파 데이터를 다시 측정하여, 검사 결과의 신뢰성을 높일 수 있다. In addition, the present invention can increase the reliability of the test result by measuring the reference EEG data again according to whether the HMD device is detached or not.

본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 발명 내에 포함되어 있다.The effect according to the present invention is not limited by the contents exemplified above, and more various effects are included in the present invention.

도 1은 본 발명의 일 실시예에 따른 인지 기능 테스트를 지원하기 위한 인지 기능 검사 시스템의 개략도이다.
도 2는 본 발명의 일 실시예에 따른 인지 기능 검사 서버의 블록도이다.
도 3은 본 발명의 일 실시예에 따른 인지 기능 검사 방법에 대한 순서도이다.
도 4 내지 도 15는 본 발명의 일 실시예에 따른 인지 기능 테스트를 위해 제공되는 시퀀스 인터페이스를 설명하기 위한 개략도이다. 1 is a schematic diagram of a cognitive function test system for supporting a cognitive function test according to an embodiment of the present invention.
2 is a block diagram of a cognitive function test server according to an embodiment of the present invention.
3 is a flowchart of a cognitive function test method according to an embodiment of the present invention.
4 to 15 are schematic diagrams for explaining a sequence interface provided for a cognitive function test according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조부호가 사용될 수 있다.Advantages and features of the present invention, and a method for achieving them will become apparent with reference to the embodiments described below in detail in conjunction with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but will be implemented in a variety of different forms, only these embodiments allow the disclosure of the present invention to be complete, and common knowledge in the technical field to which the present invention pertains It is provided to fully inform the possessor of the scope of the invention, and the present invention is only defined by the scope of the claims. In connection with the description of the drawings, like reference numerals may be used for like components.

본 문서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.In this document, expressions such as "have," "may have," "includes," or "may include" refer to the presence of a corresponding characteristic (eg, a numerical value, function, operation, or component such as a part). and does not exclude the presence of additional features.

본 문서에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는(3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.In this document, expressions such as “A or B,” “at least one of A or/and B,” or “one or more of A or/and B” may include all possible combinations of the items listed together. . For example, "A or B," "at least one of A and B," or "at least one of A or B" means (1) includes at least one A, (2) includes at least one B; Or (3) it may refer to all cases including both at least one A and at least one B.

본 문서에서 사용된 "제1," "제2," "첫째," 또는 "둘째," 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.As used herein, expressions such as "first," "second," "first," or "second," may modify various elements, regardless of order and/or importance, and refer to one element. It is used only to distinguish it from other components, and does not limit the components. For example, the first user equipment and the second user equipment may represent different user equipment regardless of order or importance. For example, without departing from the scope of rights described in this document, the first component may be named as the second component, and similarly, the second component may also be renamed as the first component.

어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.A component (eg, a first component) is "coupled with/to (operatively or communicatively)" to another component (eg, a second component); When referring to "connected to", it will be understood that the certain element may be directly connected to the other element or may be connected through another element (eg, a third element). On the other hand, when it is said that a component (eg, a first component) is "directly connected" or "directly connected" to another component (eg, a second component), the component and the It may be understood that other components (eg, a third component) do not exist between other components.

본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~ 를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된)프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.The expression "configured to (or configured to)" as used in this document, depending on the context, for example, "suitable for," "having the capacity to ," "designed to," "adapted to," "made to," or "capable of." The term “configured (or configured to)” may not necessarily mean only “specifically designed to” in hardware. Instead, in some circumstances, the expression “a device configured to” may mean that the device is “capable of” with other devices or parts. For example, the phrase "a processor configured (or configured to perform) A, B, and C" refers to a dedicated processor (eg, an embedded processor) for performing the corresponding operations, or by executing one or more software programs stored in a memory device. , may mean a generic-purpose processor (eg, a CPU or an application processor) capable of performing corresponding operations.

본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.Terms used in this document are only used to describe specific embodiments, and may not be intended to limit the scope of other embodiments. The singular expression may include the plural expression unless the context clearly dictates otherwise. Terms used herein, including technical or scientific terms, may have the same meanings as commonly understood by one of ordinary skill in the art described in this document. Among terms used in this document, terms defined in a general dictionary may be interpreted with the same or similar meaning as the meaning in the context of the related art, and unless explicitly defined in this document, ideal or excessively formal meanings is not interpreted as In some cases, even terms defined in this document cannot be construed to exclude embodiments of this document.

본 발명의 여러 실시 예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 당업자가 충분히 이해할 수 있듯이 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시 예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.Each feature of the various embodiments of the present invention may be partially or wholly combined or combined with each other, and as those skilled in the art will fully understand, technically various interlocking and driving are possible, and each embodiment may be implemented independently of each other, It may be possible to implement together in a related relationship.

도 1은 본 발명의 일 실시예에 따른 인지 기능 테스트를 지원하기 위한 인지 기능 검사 시스템의 개략도이다. 1 is a schematic diagram of a cognitive function test system for supporting a cognitive function test according to an embodiment of the present invention.

도 1을 참조하면, 인지 기능 검사 시스템(1000)은 인지 기능을 테스트하고, 사용자의 인지 장애 여부를 판단할 수 있는 검사 시스템일 수 있다. 인지 기능 검사 시스템(1000)은 사용자가 장착하는 HMD 장치(100) 및 사용자의 인지 기능을 검사하고, 인지 기능 장애를 결정하는 인지 기능 검사 서버(200)를 포함할 수 있다. 여기서, 인지 기능 장애는 경도인지장애, 알츠하이머, 파킨슨병 등과 같은 치매와, 우울증과 같은 가성 치매 등을 포함할 수 있다. Referring to FIG. 1 , the cognitive function test system 1000 may be a test system capable of testing a cognitive function and determining whether a user has a cognitive impairment. The cognitive function test system 1000 may include the HMD device 100 mounted by the user and the cognitive function test server 200 that tests the user's cognitive function and determines a cognitive function impairment. Here, the cognitive impairment may include dementia such as mild cognitive impairment, Alzheimer's disease, Parkinson's disease, and the like, and pseudo-dementia such as depression.

HMD 장치(100)는 사용자의 머리에 장착될 수 있으며, 사용자에게 실제와 유사한 공간적 및 시간적 체험을 제공할 수 있다. HMD 장치(100)는 가상 체험을 진행중인 사용자의 신체적, 인지적, 감정적 변화를 감지할 수 있는 복합 가상 체험 장치일 수 있다. The HMD device 100 may be mounted on a user's head, and may provide a spatial and temporal experience similar to reality to the user. The HMD device 100 may be a complex virtual experience device capable of detecting physical, cognitive, and emotional changes of a user who is undergoing a virtual experience.

HMD 장치(100)는 인지 기능을 테스트하기 위한 시퀀스를 제공받아 출력함과 동시에, 사용자의 시선, 뇌파 등의 생체 데이터를 획득할 수 있다. 이를 위해, HMD 장치(100)에는 입력 장치(110)와 적어도 하나의 센서(120)가 연결될 수 있다.The HMD device 100 may receive and output a sequence for testing a cognitive function, and at the same time acquire biometric data such as a user's gaze and brain waves. To this end, the input device 110 and at least one sensor 120 may be connected to the HMD device 100 .

한편, 여기서의 시퀀스는 이미지, 오디오, 영상, 진동, 모션 등, HMD 장치(100) 및 이와 연결된 출력 장치를 통해 출력 가능하며, 사용자가 인지할 수 있는 다양한 종류의 컨텐츠인 것으로 이해될 수 있다. Meanwhile, the sequence here may be understood as various types of content that can be output through the HMD device 100 and an output device connected thereto, such as images, audio, video, vibration, motion, and the like, and can be recognized by a user.

입력 장치(110)는 사용자의 왼손과 오른손에 의한 입력 데이터를 획득할 수 있다. 구체적으로, 입력 장치(110)는 HMD 장치(100)에서 보여지는 자극에 대해 반응으로, 입력 데이터를 획득할 수 있다. The input device 110 may acquire input data by the user's left and right hands. Specifically, the input device 110 may acquire input data in response to a stimulus displayed by the HMD device 100 .

센서(120)는 사용자의 시선을 측정하는 시선 센서 및 뇌파를 측정하는 뇌파 센서 중 적어도 하나를 포함할 수 있다. 예를 들어, 시선 센서는 동공을 포함하는 영상을 촬영하는 카메라 모듈일 수 있고, 뇌파 센서는 EEG(Electroencephalogram) 센서일 수 있다. 한편, 인지 기능 검사를 위해 사용되는 뇌파 센서는, 사용자의 머리 전체에 배치되지 않고, 사용자의 전두엽 영역 일부 배치될 수 있다. 그러나, 이에 제한되지 않고, 뇌파 센서는 fMRI(Functional Magnetic Resonance Imaging), fNIRS(Near Infrared Spectroscopy) 등을 포함할 수 있다.The sensor 120 may include at least one of a gaze sensor measuring the user's gaze and an EEG sensor measuring an EEG. For example, the gaze sensor may be a camera module that captures an image including a pupil, and the EEG sensor may be an Electroencephalogram (EEG) sensor. Meanwhile, the EEG sensor used for the cognitive function test may not be disposed on the entire head of the user, but may be disposed on a portion of the user's frontal lobe region. However, the present invention is not limited thereto, and the EEG sensor may include Functional Magnetic Resonance Imaging (fMRI), Near Infrared Spectroscopy (fNIRS), and the like.

HMD 장치(100)는 가상, 증강 및 혼합(VR, AR, MR) 영상을 장치 내부에서 처리할 수 있는 형태로 구현되거나, HMD 장치(100) 일부에 상술한 영상을 제공하는 별도의 디스플레이 장치(미도시)가 장착되고, 이를 통해 영상을 처리할 수도 있다. 예를 들어, HMD 장치(100)는 인지 기능 테스트를 위한 시퀀스를 제공받아 출력하고, 출력된 시퀀스와 관련하여 획득된 다양한 데이터를 관리자 장치(130) 또는 인지 기능 검사 서버(200)로 송신할 수 있다. The HMD device 100 is implemented in a form that can process virtual, augmented, and mixed (VR, AR, MR) images inside the device, or a separate display device ( not shown) is mounted, and an image may be processed through it. For example, the HMD device 100 may receive and output a sequence for the cognitive function test, and transmit various data acquired in relation to the output sequence to the manager device 130 or the cognitive function test server 200 . there is.

실시예에 따라, HMD 장치(100)는 사용자의 단기 기억, 장기 기억, 읽기 능력, 집중력, 깊이 지각력 및 순발력과 같은 사용자의 인지 기능을 테스트하기 위한 시퀀스를 제공할 수 있다. HMD 장치(100)는 시퀀스를 기초로 하는 입력 데이터, 생체 데이터(예. 시선 데이터, 뇌파 데이터)를 획득하고, 인지 기능 검사 서버(200)로부터 입력 데이터 및 생체 데이터를 기초로 결정된 인지 기능 평가 결과를 출력할 수 있다. According to an embodiment, the HMD device 100 may provide a sequence for testing the user's cognitive functions such as short-term memory, long-term memory, reading ability, concentration, depth perception, and reflexes of the user. The HMD device 100 acquires input data and biometric data (eg, gaze data, EEG data) based on a sequence, and a cognitive function evaluation result determined based on the input data and biometric data from the cognitive function test server 200 . can be printed out.

한편, HMD 장치(100)는 사용자가 장치를 탈착하는 경우, 인지 기능 검사 서버(200)로 사용자의 HMD 장치(100)의 탈착 신호를 송신할 수 있다. 만약, 탈착 신호 이후에 동일한 사용자가 인지 기능 테스트를 진행하고자 하는 경우, HMD 장치(100)는 인지 기능 검사 서버(200)로부터 휴식 상태의 사용자 생체 데이터를 획득하기 위한 시퀀스를 제공받아 출력할 수 있다. Meanwhile, when the user detaches the device, the HMD device 100 may transmit the user's detachment signal of the HMD device 100 to the cognitive function test server 200 . If the same user wants to perform a cognitive function test after the detachment signal, the HMD device 100 may receive and output a sequence for acquiring the user's biometric data in a resting state from the cognitive function test server 200 . .

관리자 장치(130)는 사용자의 인지 기능 테스트를 지원하기 위한 사용자 인터페이스를 제공할 수 있다. 관리자 장치(130)는 인터페이스 화면이 출력 가능한 스마트폰, 태블릿 PC, PC 등으로 구현될 수 있다. The manager device 130 may provide a user interface for supporting the user's cognitive function test. The manager device 130 may be implemented as a smart phone, a tablet PC, a PC, etc. capable of outputting an interface screen.

관리자 장치(130)는 HMD 장치(100)와 연결되어, 인지 기능 테스트를 위한 다양한 데이터를 주고받을 수 있다. 관리자 장치(130)는 사용자가 착용한 HMD 장치(100)의 화면을 공유하면서, 장치 연결, 통신 연결, 튜토리얼 진행, 인지 기능 테스트 및 분석 결과 등을 HMD 장치(100)로 지원할 수 있다. The manager device 130 may be connected to the HMD device 100 to exchange various data for a cognitive function test. The manager device 130 may support device connection, communication connection, tutorial progress, cognitive function test and analysis result, etc. with the HMD device 100 while sharing the screen of the HMD device 100 worn by the user.

인지 기능 검사 서버(200)는 인지 기능 테스트를 수행하고, 인지 평가 결과를 생성할 수 있다. 인지 기능 검사 서버(200)는 범용 컴퓨터, 랩탑 및 클라우드 서버 등으로 구현될 수 있다.The cognitive function test server 200 may perform a cognitive function test and generate a cognitive evaluation result. The cognitive function test server 200 may be implemented as a general-purpose computer, a laptop, a cloud server, or the like.

실시예에 따라, 인지 기능 검사 서버(200)는 HMD 장치(100) 또는 관리자 장치(130)로부터 입력 데이터 및 생체 데이터를 수신하고, 수신된 입력 데이터 및 생체 데이터에 기반하여 인지 기능 테스트에 대한 평가 결과를 생성할 수 있다. 이 후, 인지 기능 검사 서버(200)는 생성된 평가 결과 데이터를 HMD 장치(100) 또는 관리자 장치(130)로 제공할 수 있다. According to an embodiment, the cognitive function test server 200 receives input data and biometric data from the HMD device 100 or the manager device 130, and evaluates the cognitive function test based on the received input data and biometric data. results can be generated. Thereafter, the cognitive function test server 200 may provide the generated evaluation result data to the HMD device 100 or the manager device 130 .

이하에서는 도 2를 참조하여, 인지 기능을 검사하는 인지 기능 검사 서버(200)에 대해서 보다 구체적으로 설명하도록 한다. Hereinafter, the cognitive function test server 200 that tests the cognitive function will be described in more detail with reference to FIG. 2 .

도 2는 본 발명의 일 실시예에 따른 인지 기능 검사 서버의 블록도이다. 2 is a block diagram of a cognitive function test server according to an embodiment of the present invention.

도 2를 참조하면, 인지 기능 검사 서버(200)는 통신 인터페이스(210), 메모리(220), I/O 인터페이스(230) 및 프로세서(240)를 포함할 수 있으며, 각 구성은 하나 이상의 통신 버스 또는 신호 라인을 통해 서로 통신할 수 있다.Referring to FIG. 2 , the cognitive function test server 200 may include a communication interface 210 , a memory 220 , an I/O interface 230 and a processor 240 , and each configuration includes one or more communication buses Alternatively, they may communicate with each other via signal lines.

통신 인터페이스(210)는 유/무선 통신 네트워크를 통해 HMD 장치(100) 및 관리자 장치(130)와 연결되어 데이터를 주고받을 수 있다. 예를 들어, 통신 인터페이스(210)는 HMD 장치(100)로 시퀀스를 제공하고, HMD 장치(100)로부터 시퀀스를 기초로 하는 입력 데이터 및 생체 데이터(시선 데이터, 뇌파 데이터)를 수신할 수 있다. 다른 예를 들어, 통신 인터페이스(210)는 관리자 장치(130)로부터 인지 기능 테스트를 수행하는 사용자 데이터를 수신하고, 관리자 장치(130)로 해당 사용자의 인지 기능 검사 이력, 회복 이력, 진단 결과 등을 송신할 수 있다. The communication interface 210 may be connected to the HMD device 100 and the manager device 130 through a wired/wireless communication network to exchange data. For example, the communication interface 210 may provide a sequence to the HMD device 100 , and receive input data and biometric data (eg, gaze data, EEG data) based on the sequence from the HMD device 100 . For another example, the communication interface 210 receives user data for performing a cognitive function test from the manager device 130 , and transmits the cognitive function test history, recovery history, diagnosis result, etc. of the corresponding user to the manager device 130 . can send

한편, 이러한 데이터의 송수신을 가능하게 하는 통신 인터페이스(210)는 통신 포드(211) 및 무선 회로(212)를 포함할 수 있다. 여기 유선 통신 포트(211)는 하나 이상의 유선 인터페이스, 예를 들어, 이더넷, 범용 직렬 버스(USB), 파이어와이어 등을 포함할 수 있다. 또한, 무선 회로(212)는 RF 신호 또는 광학 신호를 통해 외부 디바이스와 데이터를 송수신할 수 있다. 아울러, 무선 통신은 복수의 통신 표준, 프로토콜 및 기술, 예컨대 GSM, EDGE, CDMA, TDMA, 블루투스, Wi-Fi, VoIP, Wi-MAX, 또는 임의의 기타 적합한 통신 프로토콜 중 적어도 하나를 사용할 수 있다. Meanwhile, the communication interface 210 that enables transmission and reception of such data may include a communication pod 211 and a wireless circuit 212 . Here, the wired communication port 211 may include one or more wired interfaces, for example, Ethernet, Universal Serial Bus (USB), FireWire, and the like. Also, the wireless circuit 212 may transmit/receive data to and from an external device through an RF signal or an optical signal. In addition, the wireless communication may use at least one of a plurality of communication standards, protocols and technologies, such as GSM, EDGE, CDMA, TDMA, Bluetooth, Wi-Fi, VoIP, Wi-MAX, or any other suitable communication protocol.

메모리(220)는 인지 기능 검사 서버(200)에서 사용되는 다양한 데이터를 저장할 수 있다. 예를 들어, 메모리(220)는 사용자로 하여금 명상을 진행하도록 구성된 시퀀스, 사용자의 단기 기억, 장기 기억, 집중력, 깊이 지각력, 순발력, 시지각력, 공간 지각력, 작업 기억력, 순간 주의력, 지속 주의력, 독해 능력 및 선택 주의력을 테스트하도록 구성된 시퀀스를 저장할 수 있다. 다른 예를 들어, 메모리(220)는 종합적인 인지 장애 여부, 인지 기능 별 인지 장애를 진단하기 위한 인지 평가 점수 기준 값, 정상군과 인지 기능이 저하된 환자군 사이의 뇌파 데이터(예. EEG 신호) 차이, 패턴 등을 저장할 수 있다.The memory 220 may store various data used in the cognitive function test server 200 . For example, the memory 220 may include a sequence configured to cause the user to meditate, the user's short-term memory, long-term memory, concentration, depth perception, agility, visual perception, spatial perception, working memory, instantaneous attention, sustained attention, reading comprehension Sequences configured to test ability and selective attention may be stored. For another example, the memory 220 may include a comprehensive cognitive impairment, a cognitive evaluation score reference value for diagnosing a cognitive impairment for each cognitive function, and EEG data (eg, EEG signal) between a normal group and a patient group with reduced cognitive function. You can store differences, patterns, etc.

다양한 실시예에서, 메모리(220)는 각종 데이터, 명령 및 정보를 저장할 수 있는 휘발성 또는 비휘발성 기록 매체를 포함할 수 있다. 예를 들어, 메모리(220)는 플래시 메모리 타입, 하드디스크 타입, 멀티미디어 카드 마이크로 타입, 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, SRAM, 롬, EEPROM, PROM, 네트워크 저장 스토리지, 클라우드, 블록체인 데이터베이스 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.In various embodiments, the memory 220 may include a volatile or non-volatile recording medium capable of storing various data, commands, and information. For example, the memory 220 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (eg, SD or XD memory, etc.), RAM, SRAM, ROM, EEPROM, PROM, network storage storage. , cloud, and may include at least one type of storage medium of a blockchain database.

다양한 실시예에서, 메모리(220)는 운영 체제(221), 통신 모듈(222), 사용자 인터페이스 모듈(223) 및 하나 이상의 애플리케이션(224) 중 적어도 하나의 구성을 저장할 수 있다. In various embodiments, the memory 220 may store a configuration of at least one of the operating system 221 , the communication module 222 , the user interface module 223 , and one or more applications 224 .

운영 체제(221)(예. LINUX, UNIX, MAC OS, WINDOWS, VxWorks 등의 내장형 운영 체제)는 일반적인 시스템 작업(예. 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어하고 관리하기 위한 다양한 소프트웨어 컴포넌트 및 드라이버를 포함할 수 있으며, 다양한 하드웨어, 펌웨어, 및 소프트웨어 컴포넌트 간의 통신을 지원할 수 있다.Operating system 221 (eg embedded operating systems such as LINUX, UNIX, MAC OS, WINDOWS, VxWorks, etc.) controls and manages various software for general system operations (eg memory management, storage device control, power management, etc.) It may include components and drivers, and may support communication between various hardware, firmware, and software components.

통신 모듈(223)은 통신 인터페이스(210)를 통해 다른 디바이스와 통신을 지원할 수 있다. 통신 모듈(220)은 통신 인터페이스(210)의 유선 통신 포트(211) 또는 무선 회로(212)에 의해 수신되는 데이터를 처리하기 위한 다양한 소프트웨어 구성 요소들을 포함할 수 있다.The communication module 223 may support communication with other devices through the communication interface 210 . The communication module 220 may include various software components for processing data received by the wired communication port 211 or the wireless circuit 212 of the communication interface 210 .

사용자 인터페이스 모듈(223)은 I/O 인터페이스(230)를 통해 키보드, 터치 스크린, 마이크 등으로부터 사용자의 요청 또는 입력을 수신하고, 디스플레이 상에 사용자 인터페이스를 제공할 수 있다.The user interface module 223 may receive a user's request or input from a keyboard, a touch screen, a microphone, etc. through the I/O interface 230 , and may provide a user interface on a display.

애플리케이션(224)은 하나 이상의 프로세서(240)에 의해 실행되도록 구성되는 프로그램 또는 모듈을 포함할 수 있다. 여기서, 인지 평가 결과를 생성하기 위한 애플리케이션은 서버 팜(server farm) 상에서 구현될 수 있다.Applications 224 may include programs or modules configured to be executed by one or more processors 240 . Here, an application for generating a cognitive evaluation result may be implemented on a server farm.

I/O 인터페이스(230)는 인지 기능 검사 서버(200)의 입출력 디바이스(미도시), 예컨대 디스플레이, 키보드, 터치 스크린 및 마이크 중 적어도 하나를 사용자 인터페이스 모듈(223)과 연결할 수 있다. I/O 인터페이스(230)는 사용자 인터페이스 모듈(223)과 함께 사용자 입력(예. 음성 입력, 키보드 입력, 터치 입력 등)을 수신하고, 수신된 입력에 따른 명령을 처리할 수 있다. The I/O interface 230 may connect an input/output device (not shown) of the cognitive function test server 200 , for example, at least one of a display, a keyboard, a touch screen, and a microphone, with the user interface module 223 . The I/O interface 230 may receive a user input (eg, a voice input, a keyboard input, a touch input, etc.) together with the user interface module 223 and process a command according to the received input.

프로세서(240)는 통신 인터페이스(210), 메모리(220) 및 I/O 인터페이스(230)와 연결되어 인지 기능 검사 서버(200)의 전반적인 동작을 제어할 수 있으며, 메모리(220)에 저장된 애플리케이션 또는 프로그램을 통해 사용자의 인지 장애 여부를 결정하기 위한 다양한 명령들을 수행할 수 있다. The processor 240 is connected to the communication interface 210 , the memory 220 , and the I/O interface 230 to control the overall operation of the cognitive function test server 200 , and an application stored in the memory 220 or Various commands for determining whether the user has a cognitive impairment may be executed through the program.

프로세서(240)는 CPU(Central Processing Unit)나 AP(Application Processor)와 같은 연산 장치에 해당할 수 있다. 또한, 프로세서(240)는 다양한 연산 장치가 통합된 SoC(System on Chip)와 같은 통합 칩(Integrated Chip (IC))의 형태로 구현될 수 있다. 또는 프로세서(240)는 NPU(Neural Processing Unit)과 같이 인공 신경망 모델을 계산하기 위한 모듈을 포함할 수 있다.The processor 240 may correspond to a computing device such as a central processing unit (CPU) or an application processor (AP). In addition, the processor 240 may be implemented in the form of an integrated chip (IC), such as a system on chip (SoC) in which various computing devices are integrated. Alternatively, the processor 240 may include a module for calculating an artificial neural network model, such as a Neural Processing Unit (NPU).

이하에서는, 도 3 내지 도 15를 참조하여, 인지 기능 검사 서버(200)의 프로세서(240)가 인지 기능을 검사를 진행하는 방법에 대하여 설명하도록 한다. Hereinafter, a method in which the processor 240 of the cognitive function test server 200 performs a cognitive function test will be described with reference to FIGS. 3 to 15 .

도 3은 본 발명의 일 실시예에 따른 인지 기능 검사 방법에 대한 순서도이고, 도 4 내지 도 15는 본 발명의 일 실시예에 따른 인지 기능 테스트를 위해 제공되는 시퀀스 인터페이스를 설명하기 위한 개략도이다. 3 is a flowchart of a cognitive function test method according to an embodiment of the present invention, and FIGS. 4 to 15 are schematic diagrams for explaining a sequence interface provided for a cognitive function test according to an embodiment of the present invention.

도 3을 참조하면, 프로세서(240)는 HMD 장치(100)를 통해 휴식 상태의 사용자 뇌파 데이터를 획득하기 위한 제1 시퀀스를 제공할 수 있다(S110). 여기서, 제1 시퀀스는 사용자를 휴식 상태로 만들기 위한 것으로, 사용자가 명상을 할 수 있도록 도움을 줄 수 있다. 구체적으로, 제1 시퀀스는 사용자에게 눈과 관련된 행동을 안내하도록 구성된 가이드 텍스트 및 지정된 시간을 안내하는 효과음 중 적어도 하나를 포함할 수 있다. 이때, 지정된 시간을 안내하는 효과음이란 사용자의 생체 데이터 기본 값 획득이 완료된 이후, 즉, 명상의 종료 시점을 안내하는 효과음일 수 있다.Referring to FIG. 3 , the processor 240 may provide a first sequence for acquiring EEG data of a user in a resting state through the HMD device 100 ( S110 ). Here, the first sequence is to put the user into a resting state, and may help the user to meditate. Specifically, the first sequence may include at least one of a guide text configured to guide the user to an eye-related action and a sound effect for guiding a specified time. In this case, the sound effect guiding the specified time may be a sound effect guiding the end point of the meditation after the user's basic biometric data acquisition is completed.

도 4를 참조하면, 프로세서(240)는 HMD 장치(100)에 다음과 같은 제1 시퀀스를 제공할 수 있다. 구체적으로, 제1 시퀀스에는 눈과 연관된 그래픽 객체(11) 또는 "눈을 감아주세요"와 같은 가이드 텍스트(12)가 포함될 수 있다. 아울러, 제1 시퀀스에는 사용자의 명상을 돕는 오디오 형태의 가이드 텍스트가 포함될 수 있다. 예를 들어, 오디오 형태의 가이드 텍스트는, "편안한 자세로 몸에 있는 긴장들을 풀어봅니다", "숨을 천천히 들이마시고", "천천히 내쉬어 봅니다", "들이마시고, 내쉬고", "호흡과 호흡 사이의 고요함에 집중하며 마음을 편안하게 해보세요" 등의 대본을 포함하며, 주어진 문장들이 일정한 시간 간격으로 사용자에게 제공될 수 있다. Referring to FIG. 4 , the processor 240 may provide the following first sequence to the HMD device 100 . Specifically, the first sequence may include a graphic object 11 associated with an eye or a guide text 12 such as “Please close your eyes”. In addition, the first sequence may include an audio guide text to help the user meditate. For example, the guide text in audio format could be: “Relieve tension in your body in a comfortable position”, “Inhale slowly”, “Exhale slowly”, “Inhale, exhale”, “Breathe and exhale” Concentrate on the silence in between and put your mind at ease." and the like, and given sentences may be provided to the user at regular time intervals.

실시예에 따라, 프로세서(240)는 사용자를 휴식 상태로 유도하기 위한 영상을 HMD 장치(100)로 제공할 수 있다. 일 예로, 영상은 숲, 바다 등 자연 경관이 담긴 영상일 수 있다. According to an embodiment, the processor 240 may provide an image for inducing the user to a resting state to the HMD device 100 . For example, the image may be an image containing a natural landscape such as a forest or the sea.

S110 단계 이후, 프로세서(240)는 제1 시퀀스를 기초로 하는 사용자의 기준 뇌파 데이터(baseline)를 획득할 수 있다(S120). 여기서, 기준 뇌파 데이터는 HMD 장치(100)에 포함된 센서(120)를 통해 획득될 수 있다. 프로세서(240)는 현재 획득된 기준 뇌파 데이터를 바로 직후 획득되는 활성화된 뇌파 데이터와의 비교 데이터로 활용할 수 있다. After step S110, the processor 240 may acquire the user's baseline EEG data based on the first sequence (S120). Here, the reference EEG data may be acquired through the sensor 120 included in the HMD device 100 . The processor 240 may utilize the currently acquired reference EEG data as comparison data with the activated EEG data obtained immediately afterward.

다양한 실시예에서, 제1 시퀀스는 휴식 상태를 만들기 위한 것이면 족하고, 게임 내에서의 휴식을 유도할 수 있는 인터페이스 등을 포함할 수 있다. 다시 말하면, 기준 뇌파 데이터를 획득할 수 있는 시퀀스는 모두 제1 시퀀스로 통칭될 수 있으며, 특정 시퀀스에 제한되지 않도록 의도된다. In various embodiments, the first sequence suffices for creating a rest state, and may include an interface or the like capable of inducing a rest in the game. In other words, all sequences from which reference EEG data can be obtained may be collectively referred to as a first sequence, and are not intended to be limited to a specific sequence.

관리자가 직접 사용자의 상태를 관찰하고, 검사를 중단 또는 진행할 수 있는 오프라인 검사와 다르게 HMD 장치(100)를 통한 인지 기능 검사의 경우, 인지 기능 검사가 진행되는 동안 사용자가 HMD 장치(100)를 벗는 상황이 발생할 수 있다. 이 후, 동일한 사용자가 동일한 상태에서 인지 기능 검사를 재개한다면 문제가 발생하지 않지만, 다른 사용자가 HMD 장치(100)를 장착하거나, 동일하지 않은 상태에서 인지 기능 검사를 수행할 경우, 해당 사용자의 정확한 인지 기능 검사 결과를 얻을 수 없다. Unlike an offline test in which an administrator can directly observe the user's status and stop or proceed with the test, in the case of the cognitive function test through the HMD device 100, the user takes off the HMD device 100 while the cognitive function test is in progress. Things can happen. Thereafter, if the same user resumes the cognitive function test in the same state, no problem occurs. However, if another user mounts the HMD device 100 or performs the cognitive function test in a different state, the correct Cognitive function test results are not available.

그에 따라, 프로세서(240)는 HMD 장치(100)의 탈착 신호를 획득하는 경우, HMD 장치(100)를 통해 사용자의 기준 뇌파 데이터를 다시 획득할 수 있다. 구체적으로, 프로세서(240)는 HMD 장치(100)로 기준 뇌파 데이터 재획득 신호를 송신할 수 있다. Accordingly, when acquiring the detachment signal of the HMD device 100 , the processor 240 may acquire the user's reference EEG data again through the HMD device 100 . Specifically, the processor 240 may transmit a reference EEG data reacquisition signal to the HMD device 100 .

실시예에 따라, 프로세서(240)는 사용자의 동공 움직임을 측정하여, 사용자의 동공 중심 또는 동공 중심 간 거리 보정을 수행할 수 있다. 즉, 프로세서(240)는 아이 트래킹(eye tracking)을 통해 사용자의 시선 중심을 맞출 수 있으며, HMD 장치(100)를 통해 이를 위한 시퀀스를 제공할 수 있다. 예를 들어, 프로세서(240)는 사용자의 동공 중심 보정을 수행하기 위해 HMD 장치(100)를 통해 "화면 가운데 점을 바라보세요"와 같은 가이드 텍스트를 제공하고, 흰색, 회색, 검은색 배경 중앙에 깜빡이는 빨간색 점을 제공할 수 있다. 다른 예를 들어, 프로세서(240)는 동공 중심 간 거리 보정을 수행하기 위해 HMD 장치(100)를 통해 "고개는 움직이지 마시고, 눈으로만 점을 따라 봐주세요"와 같은 가이드 텍스트를 제공하고, 중심점 기준 45° 간격으로 상하 방향(↑↓), 대각선 방향(↖↗↘↙), 좌우 방향(←→)을 따라 이동하는 회색 점 또는 화살표 등의 그래픽 객체를 제공할 수 있다. According to an embodiment, the processor 240 may measure the user's pupil movement and correct the user's pupil center or the distance between pupil centers. That is, the processor 240 may align the user's gaze center through eye tracking, and may provide a sequence for this through the HMD device 100 . For example, the processor 240 provides a guide text such as “look at the center point of the screen” through the HMD device 100 in order to perform the user's pupil center correction, and is located in the center of the white, gray, and black backgrounds. It can provide a blinking red dot. As another example, the processor 240 provides a guide text such as "Do not move your head, please follow the points only with your eyes" through the HMD device 100 in order to perform center-to-pupillary distance correction, and the center point Graphic objects such as gray dots or arrows that move along the vertical (↑↓), diagonal (↖↗↘↙), and left and right directions (←→) at standard 45° intervals can be provided.

S120 단계 이후, 프로세서(240)는 HMD 장치(100)를 통해 인지 기능과 관련된 적어도 하나의 제2 시퀀스를 제공할 수 있다(S130). 구체적으로, 프로세서(240)는 사용자의 단기 기억, 장기 기억, 집중력, 깊이 지각력, 순발력, 시지각력, 공간 지각력, 작업 기억력, 순간 주의력, 지속 주의력, 독해 능력 및 선택 주의력 중 적어도 하나 이상의 인지 기능을 테스트하도록 구성된 제2 시퀀스를 제공할 수 있다. After step S120 , the processor 240 may provide at least one second sequence related to a cognitive function through the HMD device 100 ( S130 ). Specifically, the processor 240 performs at least one of the user's short-term memory, long-term memory, concentration, depth perception, agility, visual perception, spatial perception, working memory, instantaneous attention, sustained attention, reading comprehension, and selective attention. A second sequence configured to test may be provided.

도 5 및 도 6을 참조하면, 프로세서(240)는 HMD 장치(100)에 다음과 같은 단기 또는 장기 기억을 테스트하도록 구성된 제2 시퀀스를 제공할 수 있다. 구체적으로, 제2 시퀀스에는 3차원 공간을 배경으로, 3차원 공간에 위치한 복수의 그래픽 객체(13), 3차원 공간에서 이동하는 그래픽 객체(14), 지정된 시간 이후에 복수의 그래픽 객체(13)와 동일하거나, 동일하지 않은 객체를 선택하도록 안내하는 가이드 컨텐츠(15) 중 적어도 하나가 포함될 수 있다. 5 and 6 , the processor 240 may provide the HMD device 100 with a second sequence configured to test short-term or long-term memory as follows. Specifically, in the second sequence, a plurality of graphic objects 13 located in a three-dimensional space with a background in a three-dimensional space, a graphic object 14 moving in a three-dimensional space, and a plurality of graphic objects 13 after a specified time At least one of the guide contents 15 for guiding to select an object that is the same as or not identical to may be included.

여기서, 단기 기억을 테스트하도록 구성된 제2 시퀀스의 경우, 프로세서(240)는 예를 들어, "해변가에 있는 물건들의 위치를 잘 기억해주세요!"와 같은 가이드 텍스트를 HMD 장치(100)로 제공하고, 3차원 공간에 위치한 복수의 그래픽 객체(13)를 제공할 수 있다. 그리고, 프로세서(240)는 일정한 시간(예. 10초)이 지난 이후 HMD 장치(100)로 "상자 안에서 방금 전까지 있었던 물건을 골라 제자리에 놓아주세요"와 같은 가이드 텍스트를 제공할 수 있다.Here, in the case of the second sequence configured to test short-term memory, the processor 240 provides, for example, a guide text such as "Remember the location of the objects on the beach!" to the HMD device 100, A plurality of graphic objects 13 located in a three-dimensional space may be provided. In addition, the processor 240 may provide a guide text such as "Please select an object that has just been in the box and put it in its place" to the HMD device 100 after a predetermined time (eg, 10 seconds) has elapsed.

이와 다르게, 장기 기억을 테스트하도록 구성된 제2 시퀀스의 경우, 가이드 텍스트의 제공 시점을 변경할 수 있다. 예를 들어, 3차원 공간에 위치한 복수의 그래픽 객체(13)를 제공한 이후에, 프로세서(240)는 적어도 하나의 다른 제2 시퀀스를 진행 완료한 시점 또는 적어도 1분이 지난 시점에 "아까 보았던 해변가에서 없었던 물건이 있습니다. 보지 못했던 물건 3개를 선택해주세요"와 같은 가이드 텍스트를 HMD 장치(100)로 제공할 수 있다. Alternatively, in the case of the second sequence configured to test long-term memory, the timing of providing the guide text may be changed. For example, after providing the plurality of graphic objects 13 located in the three-dimensional space, the processor 240 displays "the beach you saw before" at the time when at least one second sequence is completed or at least one minute has elapsed. Guide text such as "There is an object that was not found in the . Please select 3 objects that you have not seen" may be provided to the HMD device 100 .

도 7 내지 도 9를 참조하면, 프로세서(240)는 HMD 장치(100)에 다음과 같은 집중력을 테스트하도록 구성된 제2 시퀀스를 제공할 수 있다. 여기서, 도 7 및 도 8의 배경이 흰색으로 도시되었으나, 이는 설명의 편의를 위한 것으로, 집중력을 테스트하도록 구성된 제2 시퀀스의 배경은 검은 색으로 구현됨으로써, 사용자의 주의 집중력을 보다 높일 수 있다. 7 to 9 , the processor 240 may provide the HMD device 100 with a second sequence configured to test concentration as follows. Here, although the backgrounds of FIGS. 7 and 8 are shown in white, this is for convenience of explanation, and the background of the second sequence configured to test the concentration is implemented in black, so that the user's attention and concentration can be further increased.

제2 시퀀스에는 3차원 공간을 배경으로, 동일한 모양을 가지는 복수의 그래픽 객체(16), 3차원 공간 내에서 복수의 그래픽 객체(16)의 모션 및 복수의 그래픽 객체(16) 중 다른 방식으로 노출되는 적어도 하나의 그래픽 객체(17)를 선택하도록 안내하는 가이드 컨텐츠 중 적어도 하나가 포함될 수 있다. In the second sequence, a plurality of graphic objects 16 having the same shape as a background in a three-dimensional space, motion of a plurality of graphic objects 16 in a three-dimensional space, and a different method among the plurality of graphic objects 16 are exposed At least one of guide contents for guiding to select at least one graphic object 17 to be used may be included.

프로세서(240)는 HMD 장치(100)를 통해 복수의 그래픽 객체(16)를 제공하는 동안, 제2 시퀀스의 진행 방법에 대한 가이드 텍스트를 제공할 수 있다. 예를 들어, 프로세서(240)는 HMD 장치(100)를 통해 "깜빡였던 공을 기억하는 게임입니다", "깜빡이는 공을 잘 기억해주세요"와 같은 가이드 텍스트를 제공할 수 있다. 이 후, 프로세서(240)는 다시 동일한 모양의 복수의 그래픽 객체(16)를 제공하고, 복수의 그래픽 객체(16)가 HMD 장치(100)의 화면 내에서 서로 반발하되, 겹치지 않도록 하는 모션을 제공할 수 있다. 예를 들어, 프로세서(240)는 두 그래픽 객체(16) 사이의 거리가 일정한 값보다 작아지면 무작위 방향으로 반발하도록 하는 모션을 제공할 수 있다. 복수의 그래픽 객체(16)의 모션이 제공된 후, 프로세서(240)는 예를 들어, "공들이 멈췄습니다. 처음에 깜빡였던 공을 찾아볼까요?"와 같은 가이드 텍스트를 제공할 수 있다. While providing the plurality of graphic objects 16 through the HMD device 100 , the processor 240 may provide a guide text for a method of proceeding with the second sequence. For example, the processor 240 may provide guide texts such as “This is a game to remember the blinking ball” and “Please remember the blinking ball well” through the HMD device 100 . After that, the processor 240 provides a plurality of graphic objects 16 of the same shape again, and provides a motion in which the plurality of graphic objects 16 repel each other in the screen of the HMD device 100 but do not overlap. can do. For example, when the distance between the two graphic objects 16 is less than a predetermined value, the processor 240 may provide a motion to repel in a random direction. After the motion of the plurality of graphic objects 16 is provided, the processor 240 may provide a guide text such as, for example, "The balls have stopped. Shall we find the first flashing ball?"

실시예에 따라, 프로세서(240)는 집중력을 테스트하도록 구성된 제2 시퀀스에서, 복수의 그래픽 객체(16)를 2차원 평면에 두지 않고, 도 9와 같이, 3차원 공간에 둘 수 있다. 이러한 경우, 복수의 그래픽 객체(18)는 사용자의 시선을 기준으로 먼 곳에 위치한 그래픽 객체는 작게, 가까운 곳에 위치한 그래픽 객체는 크게 출력될 수 있다. 프로세서(240)는 예를 들어, "이번에는 조금 더 넓은 공간에서 해볼게요"와 같은 가이드 텍스트를 제공하고, 복수의 그래픽 객체(18)가 HMD 장치(100)의 화면 내에서 서로 반발하되, 겹치지 않도록 하는 모션을 제공할 수 있다. 예를 들어, 프로세서(240)는 두 그래픽 객체(18) 사이의 거리가 일정한 값보다 작아지면 무작위 방향으로 반발하되, 방향에 따라 그 크기가 크거나 작아지도록 하는 모션 및 그래픽 효과를 제공할 수 있다. According to an embodiment, in the second sequence configured to test concentration, the processor 240 may not place the plurality of graphic objects 16 on a two-dimensional plane, but may put them on a three-dimensional space, as shown in FIG. 9 . In this case, as for the plurality of graphic objects 18 , a graphic object located farther away from the user's gaze may be output small, and a graphic object located close to the user's gaze may be output large. The processor 240 provides a guide text such as, for example, "I'll do it in a slightly larger space this time", and a plurality of graphic objects 18 repel each other in the screen of the HMD device 100, but do not overlap. You can provide a motion that prevents it. For example, the processor 240 may provide motion and graphic effects that repel in a random direction when the distance between the two graphic objects 18 becomes smaller than a certain value, but increase or decrease in size depending on the direction. .

다른 실시예에 따라, 프로세서(240)는 집중력을 테스트하도록 구성된 제2 시퀀스를 복수 회 제공할 수 있으며, 회차 별로 테스트의 난이도를 높일 수 있다. 예를 들어, 집중력을 테스트하도록 구성된 제2 시퀀스가 9회 제공될 경우, 1회~3회차에서는, 복수의 그래픽 객체(16) 중 다른 방식으로 노출되는 그래픽 객체가 1개일 수 있으며, 4회~6회차에서는 2개일 수 있고, 7회~9회차에서는 3개일 수 있다. According to another embodiment, the processor 240 may provide the second sequence configured to test the concentration a plurality of times, and may increase the difficulty of the test for each cycle. For example, if the second sequence configured to test concentration is provided 9 times, in the 1st to 3rd times, one graphic object exposed in a different way among the plurality of graphic objects 16 may be one, and 4 to 3 times In the 6th round, it may be two, and in the 7th to the ninth time, it may be three.

또한, 프로세서(240)는 HMD 장치(100) 또는 관리자 장치(130)를 인지 기능을 테스트하도록 구성된 제2 시퀀스의 난이도를 선택받아 제공할 수도 있다. In addition, the processor 240 may provide the HMD device 100 or the manager device 130 by selecting the difficulty level of the second sequence configured to test the cognitive function.

도 10을 참조하면, HMD 장치(100)에 다음과 같이 깊이 지각력을 테스트하도록 구성된 제2 시퀀스가 제공될 수 있다. 구체적으로, 제2 시퀀스에는 3차원 공간을 배경으로, 3차원 공간 내에서 동일한 모양을 가지되, 사용자의 시점을 기준으로 원거리 또는 근거리에 위치한 복수의 그래픽 객체(19), 복수의 그래픽 객체(19) 중 원거리 또는 근거리에 위치한 그래픽 객체(20)를 순차적으로 선택하도록 안내하는 가이드 컨텐츠 중 적어도 하나가 포함될 수 있다. Referring to FIG. 10 , the HMD device 100 may be provided with a second sequence configured to test depth perception as follows. Specifically, in the second sequence, a plurality of graphic objects 19 and a plurality of graphic objects 19 having the same shape in the three-dimensional space as the background in the three-dimensional space, located far or near from the user's point of view, are ), at least one of guide contents for guiding to sequentially select the graphic object 20 located in the far or near may be included.

프로세서(240)는 HMD 장치(100)를 통해 서로 다른 깊이에 위치한 복수의 그래픽 객체(20)를 제공하는 동안, 제2 시퀀스의 진행 방법에 대한 가이드 텍스트를 제공할 수 있다. 예를 들어, 프로세서(240)는 HMD 장치(100)를 통해 "가까운 공부터 먼 공까지 순서대로 선택하는 게임입니다", "이번에는 먼 공부터 가까운 공까지 순서대로 선택해주세요"와 같은 가이드 텍스트를 제공할 수 있다. While providing the plurality of graphic objects 20 positioned at different depths through the HMD device 100 , the processor 240 may provide a guide text for a method of performing the second sequence. For example, the processor 240 transmits guide text such as "This is a game in which you select a game from the nearest to the farthest ball in order" and "This time, please select from the farthest to the nearest ball in order" through the HMD device 100 . can provide

도 11 내지 도 13을 참조하면, 프로세서(240)는 순간 주의력, 시지각력 및 작업 기억력 중 적어도 하나를 테스트하도록 구성된 제2 시퀀스를 제공할 수 있다. 구체적으로, 제2 시퀀스에는 동일한 모양, 색상을 가지는 그래픽 객체(21) 또는 제2 시퀀스 진행 시간, 시행 횟수 및 점수 중 적어도 하나를 포함하는 진행 정보 텍스트(22)가 포함될 수 있다. 예를 들어, 프로세서(240)는 HMD 장치(100)를 통해 "순서를 기억하는 게임입니다", "몇 개의 상자에서 순서대로 빛이 날 거예요. 빛이 나는 순서와 위치를 기억해주세요."와 같은 가이드 텍스트를 제공할 수 있다. 이 후, 프로세서(240)는 HMD 장치(100)를 통해 동일한 모양, 색상을 가지는 그래픽 객체 중 시각적으로 다른 색상을 가지는 하나 이상의 그래픽 객체(23)를 순차적으로 제공할 수 있다. 또한, 프로세서(240)는 난이도에 따라, 그래픽 객체 상에 숫자(24)를 표시하여 제공할 수 있다. 프로세서(240)는 HMD 장치(100)를 통해 "빛이 났던 상자들이 다 꺼졌네요. 방금까지 빛이 났던 상자들을 앞에 보신 순서대로 선택해주세요."와 같은 가이드 텍스트를 제공할 수 있다. 11 to 13 , the processor 240 may provide a second sequence configured to test at least one of instantaneous attention, visual perception, and working memory. Specifically, the second sequence may include a graphic object 21 having the same shape and color or a progress information text 22 including at least one of a running time of the second sequence, the number of trials, and a score. For example, the processor 240 through the HMD device 100, such as "a game that remembers the order", "a few boxes will light up in order. Please remember the order and position of the lights." You can provide guide text. Thereafter, the processor 240 may sequentially provide one or more graphic objects 23 having visually different colors among graphic objects having the same shape and color through the HMD device 100 . In addition, the processor 240 may display and provide the number 24 on the graphic object according to the degree of difficulty. The processor 240 may provide a guide text such as "All the boxes that have been lit up are turned off. Please select the boxes that have been lit up in the order you saw them." through the HMD device 100 .

아울러, 도 14를 참조하면, 프로세서(240)는 HMD 장치(100)를 통해 제2 시퀀스가 제공되는 동안, 사용자가 쥐고 있는 입력 장치(110)에 대한 그래픽 객체(25)를 제공할 수 있다. In addition, referring to FIG. 14 , the processor 240 may provide the graphic object 25 for the input device 110 held by the user while the second sequence is provided through the HMD device 100 .

도 15를 참조하면, 프로세서(240)는 읽기 능력 또는 지속 주의력을 테스트하도록 구성된 제2 시퀀스를 제공할 수 있다. 구체적으로, 제2 시퀀스에는 분야를 불문하고, 메모리(220)에 저장된 지문이 포함될 수 있다. 예를 들어, 프로세서(240)는 HMD 장치(100)를 통해 "지문을 자유롭게 읽으신 후, 완료 버튼을 눌러주세요."와 같은 가이드 텍스트를 제공하고, 메모리(220)에 저장된 지문 중 프로세서(240)에 의해 임의로 선택된 지문(26)을 제공할 수 있다. Referring to FIG. 15 , the processor 240 may provide a second sequence configured to test a reading ability or sustained attention. Specifically, the second sequence may include a fingerprint stored in the memory 220 regardless of field. For example, the processor 240 provides a guide text such as "Please press the Done button after freely reading the fingerprint" through the HMD device 100, and among the fingerprints stored in the memory 220, the processor 240 It is possible to provide a fingerprint 26 arbitrarily selected by .

다시 도 3을 참조하면, 상술한 다양한 종류의 제2 시퀀스가 제공된 이후, 프로세서(240)는 HMD 장치(100) 및 이와 연결된 입력 장치로부터 제2 시퀀스를 기초로 하는 입력 데이터 및 활성화된 뇌파 데이터를 획득할 수 있다(S140). 구체적으로, 프로세서(240)는 HMD 장치(100)로부터 제2 시퀀스에 따른 사용자의 시선 데이터, 사용자의 반응 속도 및 반응 시간 중 적어도 하나의 입력 데이터를 획득할 수 있으며, HMD 장치(100)에 연결된 센서(120)를 통해 EEG 신호, EEG 패턴 및 주파수 대역 별 파워(밀도) 중 적어도 하나의 뇌파 데이터를 획득할 수 있다. Referring back to FIG. 3 , after the various types of second sequences described above are provided, the processor 240 receives input data based on the second sequence and activated EEG data from the HMD device 100 and an input device connected thereto. can be obtained (S140). Specifically, the processor 240 may obtain input data of at least one of the user's gaze data, the user's reaction speed, and the reaction time according to the second sequence from the HMD device 100 , and is connected to the HMD device 100 . EEG data of at least one of an EEG signal, an EEG pattern, and power (density) for each frequency band may be acquired through the sensor 120 .

S140 단계 이후, 프로세서(240)는 사용자의 기준 뇌파 데이터, 활성화된 뇌파 데이터 및 입력 데이터 중 적어도 하나를 기초로 사용자의 인지 평가 결과를 생성할 수 있다(S150). 구체적으로, 프로세서(240)는 입력 데이터를 기초로 제2 시퀀스에 대한 사용자의 인지 평가 점수를 계산할 수 있으며, 계산된 인지 평가 점수와 뇌파 데이터의 조합으로 사용자의 인지 평가 결과를 생성할 수 있다. 아울러, 프로세서(240)는 통신 인터페이스(210)를 통해 사용자의 인지 평가 결과를 HMD 장치(100) 또는 관리자 장치(130)로 송신할 수 있다. After step S140 , the processor 240 may generate the user's cognitive evaluation result based on at least one of the user's reference EEG data, activated EEG data, and input data ( S150 ). Specifically, the processor 240 may calculate the user's cognitive evaluation score for the second sequence based on the input data, and may generate the user's cognitive evaluation result by combining the calculated cognitive evaluation score and EEG data. In addition, the processor 240 may transmit the user's cognitive evaluation result to the HMD device 100 or the manager device 130 through the communication interface 210 .

실시예에 따라, 프로세서(240)는 제2 시퀀스에 대한 사용자의 반응 속도, 반응 시간 및 점수 중 적어도 하나를 기초로 하여 사용자의 인지 평가 점수를 계산하고, 계산된 평가 점수에 따라 장애 여부를 1차로 결정할 수 있다. 아울러, 프로세서(240)는 앞서 S120 단계에서 획득한 기준 뇌파 데이터와 S140 단계에서 획득한 활성화된 뇌파 데이터를 비교하여, 사용자의 인지 장애 여부의 유효성을 결정할 수 있다. According to an embodiment, the processor 240 calculates the user's cognitive evaluation score based on at least one of the user's reaction speed, reaction time, and score to the second sequence, and determines whether or not a disability is 1 according to the calculated evaluation score. You can decide by car. In addition, the processor 240 may compare the reference EEG data obtained in step S120 with the activated EEG data obtained in step S140 to determine the validity of whether the user has a cognitive impairment.

프로세서(240)는 주파수 대역 별 PSD(Power Spectral Density) 비교를 통해 뇌파 데이터의 비교 결과를 얻을 수 있다. 구체적으로, 프로세서(240)는 1~3Hz 델타 밴드, 4~7 Hz 세타 밴드, 8~14 Hz 알파 밴드, 15~30 Hz 베타 밴드 각각에서의 기준 뇌파 데이터의 PSD 값과 활성화된 뇌파 데이터의 PSD 값의 차이를 얻을 수 있다. 즉, 프로세서(240)는 사용자의 PSD 값의 차이와 정상군에서 얻게 되는 PSD 값의 차이를 비교하여, 사용자의 인지 장애 여부를 결정할 수 있다. 예를 들어, 깊이 지각력의 경우, 인지 기능 장애가 있는 환자의 경우, 알파 밴드에서의 PSD 차이 값이 정상군의 PSD 차이 값 보다 작을 수 있다. The processor 240 may obtain a comparison result of the EEG data through a PSD (Power Spectral Density) comparison for each frequency band. Specifically, the processor 240 determines the PSD value of the reference EEG data and the PSD of the activated EEG data in each of the 1-3 Hz delta band, 4-7 Hz theta band, 8-14 Hz alpha band, and 15-30 Hz beta band. difference in values can be obtained. That is, the processor 240 may determine whether the user has cognitive impairment by comparing the difference between the PSD value of the user and the PSD value obtained from the normal group. For example, in the case of depth perception, in patients with cognitive impairment, the PSD difference value in the alpha band may be smaller than the PSD difference value in the normal group.

이 외에도, 프로세서(240)는 주파수 대역 별 PSD 값을 구하고, 대역 별 비율을 비교 결과로 활용할 수 있다. 구체적으로, 프로세서(240)는 델타/알파 비율(Delta/alpha ration, DAR) 또는 세타/알파 비율(theta/alpha ratio, TAR)을 계산한 뒤, 정상군의 비율 값과 현재 사용자를 통해 계산된 비율 값을 비교할 수 있다. In addition, the processor 240 may obtain a PSD value for each frequency band and use the ratio for each band as a comparison result. Specifically, the processor 240 calculates a delta/alpha ratio (DAR) or theta/alpha ratio (TAR), and then calculates the ratio value of the normal group and the calculated value of the current user. You can compare the ratio values.

즉, 프로세서(240)는 입력 데이터를 이용하여 결정된 1차 인지 장애 결과가 뇌파 데이터의 비교 결과와 일치하는 경우, 1차로 결정된 인지 장애 여부가 유효한 것으로 결정할 수 있다. 만약, 1차 인지 장애 결과와 뇌파 데이터의 비교 결과가 일치하지 않는 경우, 프로세서(240)는 1차로 결정된 인지 장애 여부를 정정하거나, 상반된 인지 장애 여부 모두를 인지 평가 결과로서 생성할 수 있다. 아울러, 프로세서(240)는 인지 평가 점수 및 뇌파 데이터의 비교 결과에 따른 코멘트를 제공할 수 있다. 프로세서(240)는 인지 평가 점수 구간 별로, 뇌파 데이터의 차이 값 구간 별로 코멘트를 제공할 수 있으며, 이러한 코멘트는 관리자 또는 의료진에 의해 입력되어 메모리(220)에 저장된 코멘트일 수 있다. That is, when the result of the primary cognitive impairment determined using the input data matches the comparison result of the EEG data, the processor 240 may determine whether the primary cognitive impairment is valid. If the primary cognitive impairment result and the comparison result of the EEG data do not match, the processor 240 may correct whether the primary cognitive impairment has been determined or generate both of the opposite cognitive impairments as the cognitive evaluation result. In addition, the processor 240 may provide a comment according to the comparison result of the cognitive evaluation score and the EEG data. The processor 240 may provide a comment for each section of the cognitive evaluation score and for each section of the difference value of the EEG data, and this comment may be a comment inputted by an administrator or a medical team and stored in the memory 220 .

다른 실시예에 따라, 프로세서(240)는 제2 시퀀스에 대한 사용자의 반응 속도, 반응 시간 및 점수 중 적어도 하나를 기초로 하여 사용자의 인지 평가 점수를 계산할 수 있다. 그리고, 프로세서(240)는 계산된 평가 점수에 기준 뇌파 데이터와 활성화된 뇌파 데이터의 비교 결과를 반영하여, 사용자의 인지 장애 여부를 결정할 수 있다. 즉, 1차로 인지 장애 여부를 결정하고, 그에 대한 타당성을 검증하였던 앞선 실시예와 다르게, 프로세서(240)는 두 종류의 데이터에서 얻은 결과를 상호 보완하여 하나의 진단 결과를 생성할 수 있다.According to another embodiment, the processor 240 may calculate the user's cognitive evaluation score based on at least one of the user's reaction speed, reaction time, and score to the second sequence. In addition, the processor 240 may determine whether the user has cognitive impairment by reflecting the comparison result of the reference EEG data and the activated EEG data in the calculated evaluation score. That is, unlike the previous embodiment in which the first determination of whether a cognitive impairment is present and the validity thereof was verified, the processor 240 may generate one diagnosis result by complementing the results obtained from the two types of data.

또 다른 실시예에 따라, 프로세서(240)는 기준 뇌파 데이터와 반응형 뇌파 데이터의 비교 결과를 토대로 사용자의 인지 장애 여부를 결정하고, HMD 장치(100) 또는 관리자 장치(130)로 입력 데이터를 기초로 계산된 인지 평가 점수를 참조 데이터로 제공할 수 있다. 즉, 해당 실시예에서는 인지 평가 결과를 생성하기 위해 인지 뇌파 데이터를 우선적으로 고려할 수 있다. According to another embodiment, the processor 240 determines whether the user has a cognitive impairment based on a comparison result of the reference EEG data and the reactive EEG data, and based on the input data to the HMD device 100 or the manager device 130 . The cognitive evaluation score calculated as . may be provided as reference data. That is, in the embodiment, cognitive EEG data may be preferentially considered in order to generate a cognitive evaluation result.

한편, 앞선 두 가지의 실시예의 경우에도, 뇌파 데이터의 비교 결과는 주파수 대역 별 PSD 비교 결과일 수 있다. Meanwhile, even in the case of the previous two embodiments, the comparison result of the brain wave data may be a PSD comparison result for each frequency band.

이와 같이, 프로세서(240)는 다양한 방법을 통해 인지 평가 결과를 생성할 수 있다. 앞선 인지 평가 결과는 여러 종류의 인지 기능을 통합한 결과이며, 필요에 따라, 프로세서(240)는 인지 기능 별로 인지 평가 결과를 생성할 수 있다. 구체적으로, 인지 기능 별이란 사용자의 단기 기억, 장기 기억, 집중력, 깊이 지각력, 순발력, 시지각력, 공간 지각력, 작업 기억력, 순간 주의력, 지속 주의력, 독해 능력 및 선택 주의력을 포함할 수 있다. As such, the processor 240 may generate a cognitive evaluation result through various methods. The previous cognitive evaluation result is a result of integrating various types of cognitive functions, and if necessary, the processor 240 may generate a cognitive evaluation result for each cognitive function. Specifically, the cognitive function stars may include short-term memory, long-term memory, concentration, depth perception, agility, visual perception, spatial perception, working memory, instantaneous attention, sustained attention, reading comprehension, and selective attention.

지금까지 본 발명의 일 실시예에 따른 인지 기능 검사 서버(200)에 대하여 설명하였다. 본 발명에 따르면, 인지 기능 검사 서버(200)는 HMD 장치(100)를 통해 인지 능력을 대략적으로 진단하였던 종래와는 다르게, 뇌파 데이터를 반영한 진단을 수행함으로써, 사용자 스스로 전문적인 진단이 가능할 수 있으며, HMD 장치(100)를 통해서도 초기 인지 장애를 진단할 수 있다. 뿐만 아니라, 인지 기능 검사 서버(200)는 HMD 장치(100)의 탈착 여부에 따라 기준 뇌파 데이터를 다시 측정하여, 검사 결과의 신뢰성을 높일 수 있다. So far, the cognitive function test server 200 according to an embodiment of the present invention has been described. According to the present invention, the cognitive function test server 200 performs a diagnosis reflecting EEG data, unlike the prior art in which the cognitive ability is roughly diagnosed through the HMD device 100, so that the user can make a professional diagnosis by himself/herself. , the initial cognitive impairment may be diagnosed through the HMD device 100 . In addition, the cognitive function test server 200 may increase the reliability of the test result by measuring the reference EEG data again according to whether the HMD device 100 is detached or not.

한편, 인지 기능 검사 서버(200)에서 수행한 일련의 시퀀스 제공 및 인지 기능 검사 방법은 HMD 장치(100)에서 수행될 수도 있다. 이러한 경우, HMD 장치(100)에는 사용로 하여금 명상을 진행하도록 구성된 시퀀스, 사용자의 단기 기억, 장기 기억, 집중력, 깊이 지각력, 순발력, 시지각력, 공간 지각력, 작업 기억력, 순간 주의력, 지속 주의력, 독해 능력 및 선택 주의력을 테스트하도록 구성된 시퀀스를 저장할 수 있다. 다른 예를 들어, 메모리(220)는 종합적인 인지 장애 여부, 인지 기능 별 인지 장애를 진단하기 위한 인지 평가 점수 기준 값, 정상군과 인지 기능이 저하된 환자군 사이의 뇌파 데이터(예. EEG 신호) 차이, 패턴 등을 저장할 수 있으며, 이를 기초로 사용자의 인지 평가 점수를 계산하고, 계산된 점수와 뇌파 데이터와의 비교를 통해 사용자의 인지 장애 여부의 유효성을 결정할 수 있다. 또한, HMD 장치(100)가 수행한 모든 결과는 HMD 장치(100)의 디스플레이 화면 또는 별도의 디스플레이 장치에 표시될 수 있다. Meanwhile, the method for providing a series of sequences and performing a cognitive function test performed by the cognitive function test server 200 may be performed by the HMD device 100 . In this case, the HMD device 100 includes a sequence configured to cause the user to meditate, the user's short-term memory, long-term memory, concentration, depth perception, reflexes, visual perception, spatial perception, working memory, instantaneous attention, sustained attention, reading comprehension Sequences configured to test ability and selective attention may be stored. For another example, the memory 220 may include a comprehensive cognitive impairment, a cognitive evaluation score reference value for diagnosing a cognitive impairment for each cognitive function, and EEG data (eg, EEG signal) between a normal group and a patient group with reduced cognitive function. Differences, patterns, etc. can be stored, and based on this, the user's cognitive evaluation score is calculated, and the validity of the user's cognitive impairment can be determined by comparing the calculated score with EEG data. Also, all results performed by the HMD device 100 may be displayed on the display screen of the HMD device 100 or on a separate display device.

이상 첨부된 도면을 참조하여 본 발명의 일 실시 예들을 더욱 상세하게 설명하였으나, 본 발명은 반드시 이러한 실시 예로 국한되는 것은 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형 실시될 수 있다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 그러므로, 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.Although one embodiment of the present invention has been described in more detail with reference to the accompanying drawings, the present invention is not necessarily limited to these embodiments, and various modifications may be made within the scope without departing from the technical spirit of the present invention. . Therefore, the embodiments disclosed in the present invention are not intended to limit the technical spirit of the present invention, but to explain, and the scope of the technical spirit of the present invention is not limited by these embodiments. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. The protection scope of the present invention should be construed by the following claims, and all technical ideas within the scope equivalent thereto should be construed as being included in the scope of the present invention.

1000: 인지 기능 검사 시스템
100: HMD 장치
110: 입력 장치 120: 센서
130: 관리자 장치
200: 인지 기능 검사 서버
210: 통신 인터페이스
211: 유선 통신 포트 212: 무선 회로
220: 메모리
221: 운영 체제 222: 통신 모듈
223: 사용자 인터페이스 모듈 224: 애플리케이션
230: I/O 인터페이스 240: 프로세서1000: cognitive function test system
100: HMD device
110: input device 120: sensor
130: manager device
200: cognitive function test server
210: communication interface
211: wired communication port 212: wireless circuit
220: memory
221: operating system 222: communication module
223: user interface module 224: application
230: I/O interface 240: processor

Claims

communication interface;
Memory; and
a processor operatively coupled to the communication interface and the memory; including,
The processor is
providing a first sequence for acquiring the user's brain wave data in a resting state through the HMD device;
Obtaining the user's reference EEG data (baseline) based on the first sequence,
providing at least one second sequence related to a cognitive function through the HMD device;
obtaining input data and activated brain wave data based on the second sequence from the HMD device and an input device connected thereto;
and generate a cognitive evaluation result of the user based on at least one of the user's reference brain wave data, the activated brain wave data, and input data.

According to claim 1,
The processor is
A cognitive function testing server, configured to provide a first sequence comprising at least one of a guide text configured to guide the user to an eye-related action and a sound effect to guide the user at a specified time.

According to claim 1,
The processor is
a cognitive function test server, configured to provide an image for inducing the resting state.

According to claim 1,
The processor is
Calculate the user's cognitive evaluation score based on the input data,
Determination of disability according to the calculated evaluation score,
Cognitive function test server, configured to determine the validity of the determined cognitive impairment based on a comparison result of the reference EEG data and the activated EEG data.

According to claim 1,
The processor is
Calculate the user's cognitive evaluation score based on the input data,
Cognitive function test server, configured to determine whether the user has a cognitive impairment by reflecting a comparison result of the reference EEG data and the activated EEG data in the calculated evaluation score.

According to claim 1,
The processor is
Determine whether there is a cognitive impairment based on the comparison result of the reference EEG data and the reactive EEG data,
Cognitive function test server, configured to provide a cognitive evaluation score calculated based on the input data as reference data.

7. The method according to any one of claims 4 to 6,
The comparison result is
Cognitive function test server that compares PSD (Power Spectral Density) for each frequency band.

7. The method according to any one of claims 4 to 6,
Whether the cognitive impairment is,
A cognitive function test server that is determined by the user's cognitive function.

7. The method according to any one of claims 4 to 6,
The processor is
When acquiring the detachment signal of the HMD device, the cognitive function test server is configured to acquire the reference EEG data of the user again through the HMD device.

According to claim 1,
The processor is
Cognitive function test server, configured to measure the user's pupil movement and correct the user's pupil center or distance between pupil centers.

According to claim 1,
The processor is
providing a second sequence configured to test the user's cognitive functions of at least one of short-term memory, long-term memory, concentration, depth perception, agility, visual perception, spatial perception, working memory, momentary attention, sustained attention, reading comprehension, and selective attention A cognitive function testing server, configured to:

12. The method of claim 11,
A second sequence configured to test short-term memory or long-term memory comprises:
Guide content that guides selection of a plurality of graphic objects located in a three-dimensional space, a graphic object moving in a three-dimensional space, and an object identical to or different from the plurality of graphic objects after a specified time in the three-dimensional space as a background A cognitive function test server comprising at least one of.

12. The method of claim 11,
a second sequence configured to test the concentration,
A plurality of graphic objects having the same shape as a background in a three-dimensional space, at least one graphic object exposed in a different way after a specified time among the plurality of graphic objects, motion of the plurality of graphic objects in the three-dimensional space, and Cognitive function test server comprising at least one of guide contents for guiding to select at least one graphic object exposed in the other manner.

12. The method of claim 11,
a second sequence configured to test the depth perception,
A plurality of graphic objects having the same shape in a three-dimensional space as a background in a three-dimensional space, and located far or near based on the user's viewpoint, and a graphic object located at a far or near among the plurality of graphic objects are sequentially displayed A cognitive function test server, comprising at least one of guide content for guiding a selection.

providing, via the HMD device, a first sequence configured to acquire resting state user EEG data;
obtaining a user's baseline EEG data based on the first sequence;
providing at least one second sequence related to a cognitive function to a user in a resting state through the HMD device;
obtaining input data based on the second sequence from the HMD device and an input device connected thereto; and
generating an evaluation result for each user's cognitive function based on the user's reference EEG data and input data; A cognitive function test method comprising a.