KR102359061B1 - 사용자의 주의집중여부판단에 기반한 인지재활시스템 - Google Patents

사용자의 주의집중여부판단에 기반한 인지재활시스템 Download PDF

Info

Publication number
KR102359061B1
KR102359061B1 KR1020200064352A KR20200064352A KR102359061B1 KR 102359061 B1 KR102359061 B1 KR 102359061B1 KR 1020200064352 A KR1020200064352 A KR 1020200064352A KR 20200064352 A KR20200064352 A KR 20200064352A KR 102359061 B1 KR102359061 B1 KR 102359061B1
Authority
KR
South Korea
Prior art keywords
user
content
motivation
touch
attention
Prior art date
Application number
KR1020200064352A
Other languages
English (en)
Other versions
KR20210147317A (ko
Inventor
김병일
이현숙
노근필
정희태
김선칠
Original Assignee
주식회사 우리소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 우리소프트 filed Critical 주식회사 우리소프트
Priority to KR1020200064352A priority Critical patent/KR102359061B1/ko
Publication of KR20210147317A publication Critical patent/KR20210147317A/ko
Application granted granted Critical
Publication of KR102359061B1 publication Critical patent/KR102359061B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/162—Testing reaction times
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168—Evaluating attention deficit, hyperactivity
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/40—Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076—Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088—Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3576—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/50—General characteristics of the apparatus with microprocessors or computers
    • A61M2205/502—User interfaces, e.g. screens or keyboards
    • A61M2205/505—Touch-screens; Virtual keyboard or keypads; Virtual buttons; Soft keys; Mouse touches

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Psychology (AREA)
  • Theoretical Computer Science (AREA)
  • Developmental Disabilities (AREA)
  • Animal Behavior & Ethology (AREA)
  • Psychiatry (AREA)
  • Hospice & Palliative Care (AREA)
  • General Engineering & Computer Science (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Child & Adolescent Psychology (AREA)
  • Biophysics (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Neurology (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Social Psychology (AREA)
  • Primary Health Care (AREA)
  • Educational Technology (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • Acoustics & Sound (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Hematology (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Physiology (AREA)
  • Neurosurgery (AREA)
  • Economics (AREA)
  • Anesthesiology (AREA)

Abstract

사용자의 주의집중여부판단에 기반한 인지재활시스템에 관한 기술이 개시된다. 상기 사용자의 주의집중여부판단에 기반한 인지재활시스템은 사용자의 인지능력을 분석하기 위한 컨텐츠가 실행되는 환경에서 상기 컨텐츠에 대한 상기 사용자의 반응정보를 획득하는 인터페이스부, 획득된 상기 반응정보로부터 상기 사용자에게 동기부여가 필요한지 여부를 판단하는 동기부여판단부 및 상기 컨텐츠를 실행하며 상기 동기부여판단부의 판단결과에 따라 상기 컨텐츠를 계속 실행하거나 상기 컨텐츠를 변경하여 실행할지를 결정하는 컨텐츠실행부를 포함한다.
본 명세서에서 개시하는 기술은 컨텐츠를 통한 지속적, 반복적인 인지재활 훈련에 따른 사용자의 의욕상실을 감지하고 사용자에게 동기를 부여하여 사용자가 훈련에 적극적으로 참여하도록 함으로써 인지재활훈련의 효과를 높일 수 있는 효과를 제공해 줄 수 있다.

Description

사용자의 주의집중여부판단에 기반한 인지재활시스템{cognitive rehabilitation system based on judgment of user’s attention}
본 명세서에 개시하는 기술은 대체로 인지재활시스템에 관한 것으로, 보다 구체적으로는 사용자의 주의집중여부판단에 기반한 인지재활시스템에 관한 것이다.
최근 IT 기술의 발전으로 인하여 대부분 사람들은 스마트 폰 앱과 게임과 같이 재미와 사용자 친화적 환경에 익숙해져 있지만, 기존 인지 재활을 목적으로 사용하는 훈련 도구 및 방법은 다른 분야에 비해서 여전히 전통적인 방법을 사용하고 있으며, 사용자 친화적이지 못하여 환자는 적극적 참여가 부족하거나 훈련 중에 거부감을 표시하여 원하는 훈련 효과를 얻지 못하는 경우가 많아지고 있다.
현재 인지 재활을 목적으로 하는 여러 가지 훈련 도구가 있지만, 제한된 도구 종류와 훈련 방식으로 반복적 훈련으로 환자들이 훈련 참여에 적극적이지 않다. 이와 관련하여 다양한 훈련 프로그램을 개발하고 싶지만, 훈련 효과에 대한 판단이 어려운 문제가 있다.
또한, 인지 장애를 가진 환자가 사용하는 훈련 도구는 재활을 목적으로 하기 때문에 정해진 규칙과 방법에 의해 사용해야 하므로, 환자는 재미와 흥미를 느끼지 못해서 중간에 포기하는 경우가 있다. 치료사의 중재와 동기 부여를 통해서 참여의지를 높이기 위해 노력하고 있지만, 여전히 지속적, 반복적 훈련이라는 틀에 의해서 그 한계가 존재한다.
인지재활시스템과 관련한 종래기술로는 대한민국공개특허 제10-2019-0112962호 “인지재활훈련 시스템” 등이 있다.
본 명세서에서 개시하는 기술은 상기한 종래기술의 문제점을 해결하기 위하여 도출된 것으로서, 컨텐츠를 통한 지속적, 반복적인 인지재활 훈련에 따른 사용자의 의욕상실을 감지하고 사용자에게 동기를 부여하여 사용자가 훈련에 적극적으로 참여하도록 함으로써 인지재활 훈련효과를 높이는 기술을 제공하는 것이다.
일 실시 예에 있어서, 사용자의 주의집중여부판단에 기반한 인지재활시스템에 관한 기술이 개시(disclosure)된다. 상기 사용자의 주의집중여부판단에 기반한 인지재활시스템은 사용자의 인지능력을 분석하기 위한 컨텐츠가 실행되는 환경에서 상기 컨텐츠에 대한 상기 사용자의 반응정보를 획득하는 인터페이스부, 획득된 상기 반응정보로부터 상기 사용자에게 동기부여가 필요한지 여부를 판단하는 동기부여판단부 및 상기 컨텐츠를 실행하며 상기 동기부여판단부의 판단결과에 따라 상기 컨텐츠를 계속 실행하거나 상기 컨텐츠를 변경하여 실행할지를 결정하는 컨텐츠실행부를 포함한다.
상기 동기부여판단부는 획득된 상기 반응정보로부터 상기 사용자의 정상반응 및 비정상반응을 분석하는 반응정보분석부 및 분석된 상기 정상반응 및 상기 비정상반응 정보로부터 상기 사용자의 주의집중여부를 판단하여 상기 동기부여가 필요한지 판단하는 주의집중여부판단부를 포함할 수 있다.
상기 컨텐츠의 실행과정에서 사용자선택대상객체가 제시될 수 있다. 상기 인터페이스부는 상기 사용자가 상기 사용자선택대상객체를 터치하는 터치위치정보를 포함하는 상기 반응정보를 획득할 수 있다. 상기 반응정보분석부는 획득된 상기 터치위치정보로부터 상기 정상반응 및 상기 비정상반응을 분석할 수 있다.
상기 컨텐츠는 영상으로 제시될 수 있다. 제시되는 상기 영상은 상기 사용자선택대상객체를 감싸는 제1영역과 상기 제1영역 이외의 영역인 제2영역으로 구획될 수 있다. 상기 반응정보분석부는 상기 터치위치정보 중 상기 제1영역에 포함되는 터치위치정보 및 상기 터치위치정보 중 상기 제2영역에 포함되는 터치위치정보를 각각 정상터치 및 비정상터치로 판단하고, 상기 정상터치 및 상기 비정상터치로부터 각각 상기 정상반응 및 상기 비정상반응을 분석할 수 있다.
일례로, 상기 주의집중여부판단부는 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)에 미달하면 상기 주의집중여부를 의욕상실로 판단할 수 있다.
다른 예로, 상기 주의집중여부판단부는 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)을 넘더라도 상기 사용자선택대상객체가 제시된 후 정답에 해당하는 상기 사용자선택대상객체를 최초로 터치하는 최초터치시간이 제2문턱값을 넘어서면 상기 주의집중여부를 의욕상실로 판단할 수 있다.
상기 컨텐츠실행부는 상기 주의집중여부가 상기 의욕상실로 판단되면, 상기 사용자에게 상기 동기부여가 필요한 것으로 판단하여 상기 컨텐츠를 변경하여 실행할 수 있다. 이 경우, 상기 컨텐츠의 변경은 컨텐츠 배경 변경, 동기 부여 컨텐츠 제공, 컨텐츠 객체 변경, 컨텐츠 난이도 변경 및 이들의 조합 중에서 선택되는 적어도 어느 하나를 포함할 수 있다.
본 명세서에서 개시하는 기술은 컨텐츠를 통한 지속적, 반복적인 인지재활 훈련에 따른 사용자의 의욕상실을 감지하고 사용자에게 동기를 부여하여 사용자가 훈련에 적극적으로 참여하도록 함으로써 인지재활훈련의 효과를 높일 수 있는 효과를 제공해 줄 수 있다.
또한, 본 명세서에서 개시하는 기술은 컨텐츠를 통한 지속적, 반복적인 인지재활 훈련에 따른 사용자의 의욕상실을 감지하고 컨텐츠를 변경하여 실행함으로써 인지재활훈련의 효과를 높일 수 있을 뿐만 아니라 사용자의 인지 수준에 적합한 컨텐츠를 제공할 수 있는 효과를 제공해 줄 수 있다.
전술한 내용은 이후 보다 자세하게 기술되는 사항에 대해 간략화된 형태로 선택적인 개념만을 제공한다. 본 내용은 특허 청구 범위의 주요 특징 또는 필수적 특징을 한정하거나, 특허청구범위의 범위를 제한할 의도로 제공되는 것은 아니다.
도 1은 일 실시 예에 따른 본 명세서에서 개시하는 사용자의 주의집중여부판단에 기반한 인지재활시스템의 개념도이다.
도 2는 본 명세서에서 개시하는 의욕상실을 감지하여 동기부여를 하는 과정을 예로서 보여주는 도면이다.
이하, 본 명세서에 개시된 실시 예들을 도면을 참조하여 상세하게 설명하고자 한다. 본문에서 달리 명시하지 않는 한, 도면의 유사한 참조번호들은 유사한 구성요소들을 나타낸다. 상세한 설명, 도면들 및 청구항들에서 상술하는 예시적인 실시 예들은 한정을 위한 것이 아니며, 다른 실시 예들이 이용될 수 있으며, 여기서 개시되는 기술의 사상이나 범주를 벗어나지 않는 한 다른 변경들도 가능하다. 본 기술분야의 통상의 기술자는 본 개시의 구성요소들, 즉 여기서 일반적으로 기술되고, 도면에 기재되는 구성요소들을 다양하게 다른 구성으로 배열, 구성, 결합, 도안할 수 있으며, 이것들의 모두는 명백하게 고안되며, 본 개시의 일부를 형성하고 있음을 용이하게 이해할 수 있을 것이다. 도면에서 여러 층(또는 막), 영역 및 형상을 명확하게 표현하기 위하여 구성요소의 폭, 길이, 두께 또는 형상 등은 과장되어 표현될 수도 있다.
개시된 기술에 관한 설명은 구조적 내지 기능적 설명을 위한 실시 예에 불과하므로, 개시된 기술의 권리범위는 본문에 설명된 실시 예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시 예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 개시된 기술의 권리범위는 기술적 사상을 실현할 수 있는 균등물을 포함하는 것으로 이해되어야 한다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, “포함하다” 또는 “가지다” 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
여기서 사용된 모든 용어들은 다르게 정의되지 않는 한, 개시된 기술이 속하는 분야에서 통상의 기술자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
도 1은 일 실시 예에 따른 본 명세서에서 개시하는 사용자의 주의집중여부판단에 기반한 인지재활시스템의 개념도이다.
도 2는 본 명세서에서 개시하는 의욕상실을 감지하여 동기부여를 하는 과정을 예로서 보여주는 도면이다.
이하 도면을 참조하여 본 명세서에서 개시하는 사용자의 주의집중여부판단에 기반한 인지재활시스템에 대하여 설명하기로 한다.
도면을 참조하면, 사용자의 주의집중여부판단에 기반한 인지재활시스템(100)은 인터페이스부(110), 동기부여판단부(120) 및 컨텐츠실행부(130)를 포함한다.
인터페이스부(110)는 사용자의 인지능력을 분석하기 위한 컨텐츠가 실행되는 환경에서 상기 컨텐츠에 대한 상기 사용자의 반응정보를 획득한다.
실행되는 상기 컨텐츠는 예로서 노인을 대상으로 하는 MMSE(Mini-Mental State Examination, 간이신경검사) 등과 유사한 역할을 하는 인지선별검사 또는 훈련도구일 수 있다. 노인을 대상으로 하는 MMSE와 같은 기존 선별 검사 도구는 질문과 답변으로 구성된 1회 대면 검사와 답변의 성공여부에 따른 점수로 대상자의 인지 능력을 판별하는 방식을 취한다. 하지만, 검사자의 개인 역량, 검사 장소 및 대상자의 건강 상태 등에 따라 대상자의 인지 능력이 정확하게 반영되지 못하거나 검사 대상자에 따른 편차와 반복 검사에 따라 결과의 오차가 발생할 수 있다.
온라인 게임은 3D, 실사 렌더링과 같은 디지털 콘텐츠 기술 성숙되어 있고, 원격에서도 콘텐츠의 조작과 제어가 용이한 인터넷 기반의 서버 시스템 기술들이 이미 검증되어 있어 인지 재활 훈련 콘텐츠로 가장 적합하다. 또한, 대부분의 일반인이 사용하고 있는 스마트폰 및 태블릿 PC에 최적화된 개발 및 사용환경을 제공하고 있어서 가장 적합한 조건을 갖추고 있다.
기존의 훈련 도구를 사용하여 반복적으로 문제를 해결하는 방식에서 훈련 대상자의 취향에 맞는 게임 배경과 친근한 3D캐릭터를 사용하여 훈련의 집중도를 높일 수 있다. 훈련 도구마다 일률적이고, 치료사의 경험에 의해 결정하는 ‘난이도 결정 방식’에서 벗어나 선별 검사 결과와 그에 따른 베이스라인에 의한 훈련 대상자 ‘인지 능력 맞춤형 난이도 결정방식’을 사용하여 훈련 대상자의 훈련 집중도와 훈련 효과를 높일 수 있다.
본 명세서에서 개시하는 상기 컨텐츠는 사용자가 활용하는 단말기(10)에 구동되는 문답형의 컨텐츠, 게임형태로 진행되는 컨텐츠 등일 수 있으나 이에 한정되지 아니하고 사용자의 인지능력을 분석하는데 활용하는 모든 컨텐츠를 망라한다 할 것이다. 훈련 대상자인 사용자의 훈련 집중도를 높일 수 있다는 측면에서 상기 컨텐츠는 게임형태의 컨텐츠가 바람직할 수 있다.
인터페이스부(110)는 예로서 키보드, 마우스, 시선추적장치 등을 통하여 상기 컨텐츠에 대하여 상기 사용자의 상기 반응정보를 획득할 수 있으며, 상기의 예시는 이해를 위한 예시로서 사용자의 반응정보를 입력받을 수 있는 모든 입력수단이 활용될 수 있다.
동기부여판단부(120)는 획득된 상기 반응정보로부터 상기 사용자에게 동기부여가 필요한지 여부를 판단한다.
동기부여판단부(120)는 획득된 상기 반응정보로부터 상기 사용자의 정상반응 및 비정상반응을 분석하는 반응정보분석부(122) 및 분석된 상기 정상반응 및 상기 비정상반응 정보로부터 상기 사용자의 주의집중여부를 판단하여 상기 동기부여가 필요한지 판단하는 주의집중여부판단부(124)를 포함할 수 있다.
컨텐츠실행부(130)는 상기 컨텐츠를 실행하며, 동기부여판단부(120)의 판단결과에 따라 상기 컨텐츠를 계속 실행하거나 상기 컨텐츠를 변경하여 실행할지를 결정한다.
일 실시 예에 있어서, 상기 컨텐츠의 실행과정에서 사용자선택대상객체(12)가 제시될 수 있다. 인터페이스부(110)는 상기 사용자가 사용자선택대상객체(12)를 터치하는 터치위치정보를 포함하는 상기 반응정보를 획득할 수 있다. 반응정보분석부(122)는 획득된 상기 터치위치정보로부터 상기 정상반응 및 상기 비정상반응을 분석할 수 있다.
상기 컨텐츠는 예로서 영상(14)으로 제시될 수 있다. 본 명세서에서 사용하는 영상이라는 용어는 사진, 동영상 등을 아우르는 용어로 이해되어야 한다. 제시되는 영상(14)은 사용자선택대상객체(12)를 감싸는 제1영역(14a)과 제1영역(14a) 이외의 영역인 제2영역(14b)으로 구획될 수 있다. 반응정보분석부(122)는 상기 터치위치정보 중 제1영역(14a)에 포함되는 터치위치정보 및 상기 터치위치정보 중 제2영역(14b)에 포함되는 터치위치정보를 각각 정상터치 및 비정상터치로 판단할 수 있다. 반응정보분석부(122)는 상기 정상터치 및 상기 비정상터치로부터 각각 상기 정상반응 및 상기 비정상반응을 분석할 수 있다.
일례로, 주의집중여부판단부(124)는 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)에 미달하면 상기 주의집중여부를 의욕상실로 판단할 수 있다. 상기 제1문턱값은 예로서 실행중인 상기 컨텐츠에 대하여 인지재활치료사가 설정한 값일 수 있다. 즉, 정상터치가 비정상터치에 비하여 상기 제1문턱값에 미달한다는 의미는 사용자가 현재 실행중인 컨텐츠에 집중하지 못한다는 의미를 가진다. 본 명세서에서는 이를 현재 실행중인 컨텐츠에 대한 사용자의 주의집중저하, 의욕상실 등으로 규정하여 동기부여가 필요한 상황으로 판단한다.
다른 예로, 주의집중여부판단부(124)는 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)을 넘더라도 사용자선택대상객체(12)가 제시된 후 정답에 해당하는 사용자선택대상객체(12)를 최초로 터치하는 최초터치시간이 제2문턱값을 넘어서면 상기 주의집중여부를 의욕상실로 판단할 수 있다. 상기 제2문턱값은 예로서 실행중인 상기 컨텐츠에 대하여 인지재활치료사가 설정한 값일 수 있다.
다시 말하면, 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)을 넘어서더라도 최초터치시간이 제2문턱값을 넘어서면 사용자선택대상객체(12)에 대한 관심이 낮은 상황으로 볼 수 있으며, 이에 본 명세서에서 개시하는 기술은 최초터치시간을 의욕상실 판단의 기준으로 추가하여 사용자의 주의집중여부를 판단하는 기술을 아울러 제시하고 있다.
한편, 컨텐츠실행부(130)는 상기 주의집중여부가 상기 의욕상실로 판단되면, 상기 사용자에게 상기 동기부여가 필요한 것으로 판단하여 상기 컨텐츠를 변경하여 실행할 수 있다. 컨텐츠실행부(130)에 의한 상기 컨텐츠의 변경은 컨텐츠 배경 변경, 동기 부여 컨텐츠 제공, 컨텐츠 객체 변경, 컨텐츠 난이도 변경 및 이들의 조합 중에서 선택되는 적어도 어느 하나를 포함할 수 있다.
보다 구체적으로 설명하면, 컨텐츠 중 특히 게임형태의 컨텐츠는 사용자의 적극적인 참여를 촉진하고, 문제 해결을 위하여 보상, 경쟁, 도전과 같은 요소를 활용하며, 사용자 간의 도전, 경쟁 등의 요소로 흥미와 재미를 유발하여 사용자의 지속적 참여(engagement)와 충성도(loyalty)를 유발할 수 있다. 기존의 인지 훈련은 치료사가 환자의 훈련 참여를 독려하기 위하여 제한된 수준에서 보상이나 도전의식을 높이고 있지만, 과학적 근거에 의해서 정해진 방법으로 훈련을 해야 하고, 훈련 대상이 인지 장애가 있는 환자인 것을 고려하면 보상과 도전으로 지속적 참여를 유도하기에는 어려움이 있다.
컨텐츠를 이용한 본 명세서에서 개시하는 기술은 위와 같은 문제점을 고려하여 환자가 훈련에 대한 관심이 떨어지거나 실증을 내는 의욕 상실을 감지하여 훈련 게임의 배경을 변경하거나 문제의 난이도와 등장하는 콘텐츠를 변경하여 동기부여를 통해 훈련을 끝까지 할 수 있도록 촉진할 수 있는 효과를 제공해 줄 수 있다.
사용자의 의욕상실 감지하기 위해서는 카메라, 레이저 등 여러 가지 센서를 사용할 수 있으나, 추가적인 장치가 필요해 비용 상승과 사용자가 착용 거부감을 느낄 수도 있다. 이에 본 명세서에서 개시하는 기술은 사용자의 인지능력을 분석하기 위한 훈련 게임 등과 같은 컨텐츠의 실행 환경에서 사용자의 모든 터치 데이터를 저장하고 분석한 결과를 사용하여 사용자의 의욕상실을 감지하는 기술을 제안하고 있다.
정상과 비정상 터치는 도 1에서 보듯이 터치를 해야 하는 대상객체인 사용자선택대상객체(12) 주변에 예로서 사각형의 범위를 정하고, 그 범위안을 터치하면 ‘정상 터치’로 간주하고, 그 밖은 ‘비정상 터치’로 판단한다. 이를 위하여 컨텐츠에서 사용하는 모든 터치대상객체인 사용자선택대상객체(12)는 ‘폭’과 ‘높이’ 값을 속성으로 추가하고, 사용자가 컨텐츠 실행과정에서 예로서 태블릿PC, 스마트폰 등의 사용자단말기(10)를 통하여 제시되는 사용자선택대상객체(12)를 터치할 때마다 컨텐츠인 훈련 게임은 정상 터치인지를 확인하고, 그 결과를 메모리(미도시, 예로서 사용자단말기(10)의 저장소)에 기록한다.
이렇게 수집한 정상 및 비정상 터치에 대한 데이터를 통하여 각 개인별 정상/비정상 터치 표준 값을 개발할 수 있다. 또한, 가장 최근 실시한 인지재활훈련의 정상 및 비정상 터치 값의 차이가 치료사가 설정한 문턱 값(threshold)인 제1문턱값에 미달하면 사용자의 상태인 주의집중여부 상태를 ‘의욕상실’로 정의할 수 있다. ‘의욕상실’이 감지되면 사용자에게 ‘동기부여’가 필요하다고 판단할 수 있으며, 컨텐츠실행부(130)는 컨텐츠의 한 예인 훈련 게임을 미리 치료사 또는 사용자의 선호도에 의해서 설정된 방법에 따라 변경실행할 수 있다. ‘동기 부여’를 위한 컨텐츠의 변경은 ‘게임의 배경 변경’, ‘동기 부여 게임’, “객체 변경”, “난이도 변경” 등이 선택할 수 있으며, 컨텐츠실행부(130)는 사용자의 기본 정보에 근거하여 가장 적합한 컨텐츠를 제시할 수 있다.
도 2는 본 명세서에서 개시하는 의욕상실을 감지하여 동기부여를 하는 과정을 예로서 보여주는 도면이다.
치료사 등 전문가에 의해 선별검사기준으로 인지 점수 베이스라인이 초기에 설정된다. 초기 설정에 따라 사용자의 인지능력을 분석하기 위한 컨텐츠가 동적 훈련 컨텐츠로부터 선택되고, 초기 설정에 따라 설정된 동적 훈련 컨텐츠의 난이도 제어에 따라 선택된 컨텐츠가 인지능력 분석을 위한 컨텐츠(도면에는 인지 훈련 게임이 예시되어 있음)로서 실행된다. 컨텐츠를 통한 인지 훈련 과정에서 본 명세서에서 개시하는 인터페이스부(110)는 사용자의 반응정보를 획득한다. 인터페이스부(110)가 획득한 사용자의 반응정보는 훈련종료 후 동기부여판단부(120)에 제공되며, 동기부여판단부(120)는 상기 반응정보로부터 정상반응 및 비정상반응 즉, 예로서 정상터치 및 비정상터치를 분석하고 상술한 제1문턱값, 제2문턱값 등을 감지문턱값으로 하여 사용자의 주의집중여부가 의욕상실인지 여부를 판단한다.
사용자의 주의집중여부가 의욕상실로 판단될 경우, 컨텐츠실행부(130)는 자동화된 난이도 제어를 제어하여 인지능력 분석을 위해 실행되는 컨텐츠(도면에는 인지 훈련 게임이 예시되어 있음)의 컨텐츠 배경 변경, 동기 부여 컨텐츠 제공, 컨텐츠 객체 변경, 컨텐츠 난이도 변경 등을 수행하여 사용자에게 동기부여를 제공하게 된다.
현재의 인지 훈련 방법은 아동발달센터 등의 오프라인 대면 훈련에 적합하며, IT 장치와 디지털 콘텐츠를 사용하거나 원격에서 인지 훈련을 하는 환자에게는 적합하지 않다. 인지 재활 센터에서 치료사의 통제아래 온라인 게임으로 인지 훈련을 하면, 환자에 대한 모든 훈련 정보가 태블릿 PC에 저장되어 가정에서도 센터에서 치료사와 유사한 수준의 훈련을 실시할 수 있어 훈련 효과를 높일 수 있다.
인지 재활을 위해서는 인지 기능에 관한 세부적인 규정과 훈련 과정으로 구성되어 있으며, 치료 효과를 위해서는 미리 정해진 규정에 따라 종료 시까지 지속하는 것이 중요하므로, 치료사의 부재시 인지 재활 훈련 대상자인 사용자가 훈련에 실증을 내거나 하기 싫어 지는 것을 자동으로 인식하고 ‘동기 부여’를 통해서 훈련을 끝까지 완료할 수 있도록 촉진할 필요가 있다.
본 명세서에서 개시하는 기술은 컨텐츠(예로서, 게임)를 사용한 인지 재활 훈련과정에서 사용자의 반응정보를 수집할 수 있으며, 이를 기존 훈련 도구를 사용한 치료사의 대면 훈련과 훈련 과정에서 인지에 관련하여 수집된 데이터와의 비교 분석을 통해서 현재의 훈련 방법 즉, 현재 인지재활훈련으로 제공되는 컨텐츠가 적절한지를 판단할 수 있어 인지재활훈련 대상자인 사용자에게 가장 적합한 재활 훈련 컨텐츠를 제시하고 이를 통하여 효과적인 재활훈련을 가능하게 해 주는 효과를 제공해 줄 수 있다.
상기로부터, 본 개시의 다양한 실시 예들이 예시를 위해 기술되었으며, 아울러 본 개시의 범주 및 사상으로부터 벗어나지 않고 가능한 다양한 변형 예들이 존재함을 이해할 수 있을 것이다. 그리고 개시되고 있는 상기 다양한 실시 예들은 본 개시된 사상을 한정하기 위한 것이 아니며, 진정한 사상 및 범주는 하기의 청구항으로부터 제시될 것이다.
10: 사용자단말기
12: 사용자선택대상객체
14: 컨텐츠 영상
14a: 제1영역
14b: 제2영역
100: 사용자의 주의집중여부판단에 기반한 인지재활시스템
110: 인터페이스부
120: 동기부여판단부
122: 반응정보분석부
124: 주의집중여부판단부
130: 컨텐츠실행부

Claims (8)

  1. 사용자의 인지능력을 분석하기 위한 컨텐츠가 실행되는 환경에서 상기 컨텐츠에 대한 상기 사용자의 반응정보를 획득하는 인터페이스부;
    획득된 상기 반응정보로부터 상기 사용자에게 동기부여가 필요한지 여부를 판단하는 동기부여판단부; 및
    상기 컨텐츠를 실행하며, 상기 동기부여판단부의 판단결과에 따라 상기 컨텐츠를 계속 실행하거나 상기 컨텐츠를 변경하여 실행할지를 결정하는 컨텐츠실행부를 포함하며,
    상기 동기부여판단부는
    획득된 상기 반응정보로부터 상기 사용자의 정상반응 및 비정상반응을 분석하는 반응정보분석부; 및
    분석된 상기 정상반응 및 상기 비정상반응 정보로부터 상기 사용자의 주의집중여부를 판단하여 상기 동기부여가 필요한지 판단하는 주의집중여부판단부를 포함하며,
    상기 컨텐츠의 실행과정에서 사용자선택대상객체가 제시되며,
    상기 인터페이스부는 상기 사용자가 상기 사용자선택대상객체를 터치하는 터치위치정보를 포함하는 상기 반응정보를 획득하며,
    상기 반응정보분석부는 획득된 상기 터치위치정보로부터 상기 정상반응 및 상기 비정상반응을 분석하며,
    상기 컨텐츠는 영상으로 제시되며,
    제시되는 상기 영상은 상기 사용자선택대상객체를 감싸는 제1영역과 상기 제1영역 이외의 영역인 제2영역으로 구획되며,
    상기 반응정보분석부는 상기 터치위치정보 중 상기 제1영역에 포함되는 터치위치정보 및 상기 터치위치정보 중 상기 제2영역에 포함되는 터치위치정보를 각각 정상터치 및 비정상터치로 판단하고, 상기 정상터치 및 상기 비정상터치로부터 각각 상기 정상반응 및 상기 비정상반응을 분석하며, 상기 주의집중여부판단부는 상기 정상터치와 상기 비정상터치의 값의 차이가 제1문턱값(threshold)을 넘더라도 상기 사용자선택대상객체가 제시된 후 정답에 해당하는 상기 사용자선택대상객체를 최초로 터치하는 최초터치시간이 제2문턱값을 넘어서면 상기 주의집중여부를 의욕상실로 판단하는 사용자의 주의집중여부판단에 기반한 인지재활시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 제1항에 있어서,
    상기 컨텐츠실행부는 상기 주의집중여부가 상기 의욕상실로 판단되면, 상기 사용자에게 상기 동기부여가 필요한 것으로 판단하여 상기 컨텐츠를 변경하여 실행하는 사용자의 주의집중여부판단에 기반한 인지재활시스템.
  8. 제7항에 있어서,
    상기 컨텐츠의 변경은 컨텐츠 배경 변경, 동기 부여 컨텐츠 제공, 컨텐츠 객체 변경, 컨텐츠 난이도 변경 및 이들의 조합 중에서 선택되는 적어도 어느 하나를 포함하는 사용자의 주의집중여부판단에 기반한 인지재활시스템.
KR1020200064352A 2020-05-28 2020-05-28 사용자의 주의집중여부판단에 기반한 인지재활시스템 KR102359061B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200064352A KR102359061B1 (ko) 2020-05-28 2020-05-28 사용자의 주의집중여부판단에 기반한 인지재활시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200064352A KR102359061B1 (ko) 2020-05-28 2020-05-28 사용자의 주의집중여부판단에 기반한 인지재활시스템

Publications (2)

Publication Number Publication Date
KR20210147317A KR20210147317A (ko) 2021-12-07
KR102359061B1 true KR102359061B1 (ko) 2022-02-07

Family

ID=78868403

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200064352A KR102359061B1 (ko) 2020-05-28 2020-05-28 사용자의 주의집중여부판단에 기반한 인지재활시스템

Country Status (1)

Country Link
KR (1) KR102359061B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4874332B2 (ja) * 2006-05-18 2012-02-15 株式会社Ｖｉｓ総研 コンテンツに対する利用者応答を評価する制御装置
JP2013097311A (ja) * 2011-11-04 2013-05-20 Zenrin Datacom Co Ltd 学習支援装置、学習支援方法および学習支援プログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101918631B1 (ko) * 2016-12-13 2018-11-15 (주)인더텍 혼합현실 기반 인지 및 학습 집중력 평가 및 훈련 피드백 시스템
KR101955583B1 (ko) * 2016-12-28 2019-07-31 (주)뮤테이션 뇌전도 신호와 가상현실을 이용한 학습 보조 장치 및 그 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4874332B2 (ja) * 2006-05-18 2012-02-15 株式会社Ｖｉｓ総研 コンテンツに対する利用者応答を評価する制御装置
JP2013097311A (ja) * 2011-11-04 2013-05-20 Zenrin Datacom Co Ltd 学習支援装置、学習支援方法および学習支援プログラム

Also Published As

Publication number Publication date
KR20210147317A (ko) 2021-12-07

Similar Documents

Publication Publication Date Title
US11227505B2 (en) Systems and methods for customizing a learning experience of a user
Mandryk et al. The potential of game-based digital biomarkers for modeling mental health
Tsekleves et al. Development and preliminary evaluation of a novel low cost VR-based upper limb stroke rehabilitation platform using Wii technology
Vi et al. Detecting error-related negativity for interaction design
Laut et al. Increasing patient engagement in rehabilitation exercises using computer-based citizen science
Tyack et al. Restorative play: Videogames improve player wellbeing after a need-frustrating event
Khaleghi et al. A gamification framework for cognitive assessment and cognitive training: qualitative study
CN111125657B (zh) 学生使用电子设备的控制方法、装置及电子设备
van de Laar et al. How much control is enough? Influence of unreliable input on user experience
Esmaeilzadeh The influence of gamification and information technology identity on postadoption behaviors of health and fitness app users: empirical study in the united states
Drey et al. Towards progress assessment for adaptive hints in educational virtual reality games
Hsiao et al. Data modeling mobile augmented reality: integrated mind and body rehabilitation
Oliveira et al. Towards automatic flow experience identification in educational systems: A theory-driven approach
Alankus et al. Reducing compensatory motions in motion-based video games for stroke rehabilitation
Tabbaa et al. A reflection on virtual reality design for psychological, cognitive and behavioral interventions: design needs, opportunities and challenges
Deponti et al. Smartphone's physiatric serious game
WO2014071251A1 (en) Individual task refocus device
Tikadar et al. Detection of affective states of the students in a blended learning environment comprising of smartphones
KR20110092538A (ko) 사용자 단말기를 이용한 자기 관리 방법 및 상기 방법을 수행하는 시스템
KR102359061B1 (ko) 사용자의 주의집중여부판단에 기반한 인지재활시스템
Osman et al. Monitoring player attention: A non-invasive measurement method applied to serious games
US20220160227A1 (en) Autism treatment assistant system, autism treatment assistant device, and program
KR100993592B1 (ko) 주의 능력 측정 및 증진 게임 제공 장치 및 방법
KR102348692B1 (ko) 가상중재 인지재활시스템
KR101177077B1 (ko) 단어 기억 능력 측정 및 증진 게임 제공 서버 및 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant