WO2023048548A1 - 학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템 - Google Patents

학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템 Download PDF

Info

Publication number
WO2023048548A1
WO2023048548A1 PCT/KR2022/014483 KR2022014483W WO2023048548A1 WO 2023048548 A1 WO2023048548 A1 WO 2023048548A1 KR 2022014483 W KR2022014483 W KR 2022014483W WO 2023048548 A1 WO2023048548 A1 WO 2023048548A1
Authority
WO
WIPO (PCT)
Prior art keywords
cognitive
model
user
task
evaluation
Prior art date
Application number
PCT/KR2022/014483
Other languages
English (en)
French (fr)
Inventor
민정상
김가영
김성진
정민영
지민정
Original Assignee
(주)이모티브
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)이모티브 filed Critical (주)이모티브
Publication of WO2023048548A1 publication Critical patent/WO2023048548A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4088Diagnosing of monitoring cognitive diseases, e.g. Alzheimer, prion diseases or dementia
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/30ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Definitions

  • the present invention relates to a cognitive state evaluation device and an operation method thereof. More specifically, the present invention relates to a cognitive state evaluation system based on a cognitive model that substitutes a cognitive test task using a learning-based user-customized cognitive model.
  • parents visit specialized diagnostic institutions with their children to determine the developmental status of their children, and their children receive medical examinations, standardized tests (e.g., social maturity test, KEDI-WISC, portage cognitive development test, etc.), Perform formal examination, observation, questionnaire, interview, etc.
  • medical examinations e.g., social maturity test, KEDI-WISC, portage cognitive development test, etc.
  • standardized tests e.g., social maturity test, KEDI-WISC, portage cognitive development test, etc.
  • the present invention has been made to solve the above problems, and extracts game data from input information of a user terminal for a cognitive game provided for a short period of time to construct a learning-based user-customized cognitive model for diagnosing a cognitive state, , Based on a user-customized cognitive model, tasks necessary for diagnosing cognitive states are processed so that they are automatically performed in a user-customized cognitive model, thereby dramatically reducing the time and fatigue required for diagnosing cognitive states, and enabling various diagnoses and evaluations. Its purpose is to provide a cognitive state evaluation system.
  • An apparatus for solving the above problem is a cognitive state evaluation device, which extracts first game data for cognitive evaluation from response input information for a user's cognitive game application.
  • data processing unit A customized cognitive task performance model corresponding to the user by applying the extracted first game data to a user-customized cognitive model based on artificial intelligence learning in which a cognitive architecture-based cognitive model has been previously associatively trained in response to game data for each cognitive task.
  • a customized task performance model configuration unit that generates a; and a cognitive ability evaluation unit that obtains an alternative performance result of the cognitive task selected for each cognitive evaluation item by using the customized cognitive task performance model, and evaluates the cognitive ability of the user for each cognitive item based on the alternative performance result. do.
  • a method for solving the above problems is, in the method of operating a cognitive state evaluation device, a first game for cognitive evaluation from response input information for a user's cognitive game application extracting data; A customized cognitive task performance model corresponding to the user by applying the extracted first game data to a user-customized cognitive model based on artificial intelligence learning in which a cognitive architecture-based cognitive model has been previously associatively trained in response to game data for each cognitive task.
  • the method according to the embodiment of the present invention for solving the above problems may be implemented as a computer readable recording medium and a computer program for executing the method on a computer.
  • a learning-based user-customized cognitive model for diagnosing a cognitive state is constructed by extracting game data from input information of a user terminal for a cognitive game provided for a short time, and based on the user-customized cognitive model Cognitive state evaluation device and its operation that drastically reduce the time and fatigue required for cognitive state diagnosis and enable various diagnosis and evaluation by processing tasks necessary for cognitive state diagnosis to be automatically performed in a user-customized cognitive model method can be provided.
  • the present invention can be used for education, medical care, etc. through personalized diagnosis and evaluation through cognitive modeling, and various medical examinations such as ADHD examination, which previously took about 2 hours, can be performed through simple and short game-based tests. It can be done in casual form.
  • FIG. 1 is a conceptual diagram schematically showing the entire system of the present invention.
  • FIG. 2 is a block diagram illustrating a cognitive state evaluation apparatus according to an embodiment of the present invention in more detail.
  • FIG. 3 is a diagram illustrating variable modeling data for constructing a cognitive architecture according to an embodiment of the present invention.
  • FIG. 4 is diagrams for explaining operations for each game application for calculating task model variables according to an embodiment of the present invention.
  • 5 is a ladder diagram for explaining the entire system operation of the present invention in detail.
  • 6 to 7 are diagrams for exemplarily explaining a report interface output from a guardian terminal according to an embodiment of the present invention.
  • block diagrams herein are to be understood as representing conceptual views of exemplary circuits embodying the principles of the present invention.
  • all flowcharts, state transition diagrams, pseudo code, etc. are meant to be tangibly represented on computer readable media and represent various processes performed by a computer or processor, whether or not the computer or processor is explicitly depicted. It should be.
  • processors may be provided using dedicated hardware as well as hardware capable of executing software in conjunction with appropriate software.
  • the functionality may be provided by a single dedicated processor, a single shared processor, or a plurality of separate processors, some of which may be shared.
  • DSP digital signal processor
  • ROM read-only memory
  • RAM random access memory
  • non-volatile memory Other hardware for the governor's use may also be included.
  • components expressed as means for performing the functions described in the detailed description include, for example, a combination of circuit elements performing the functions or all types of software including firmware/microcode, etc. It is intended to include any method that performs the function of performing the function, combined with suitable circuitry for executing the software to perform the function. Since the invention defined by these claims combines the functions provided by the various enumerated means and is combined in the manner required by the claims, any means capable of providing such functions is equivalent to that discerned from this disclosure. should be understood as
  • FIG. 1 is a conceptual diagram schematically illustrating an entire system according to an embodiment of the present invention.
  • the entire system includes a cognitive state evaluation device 100, a user terminal 200, a guardian terminal 400, and a learning-based user-customized cognitive model 300.
  • the cognitive state evaluation device 100 is similar to each user terminal 200, the guardian terminal 400, and the learning-based user-customized cognitive model 300 to provide cognitive state diagnosis and evaluation services according to an embodiment of the present invention. / Can be connected through a wireless network and can communicate with each other.
  • each network is a Local Area Network (LAN), a Wide Area Network (WAN), a Value Added Network (VAN), a Personal Area Network (PAN), a mobile communication network ( It can be implemented in all types of wired/wireless networks, such as a mobile radiocommunication network) or a satellite communication network.
  • LAN Local Area Network
  • WAN Wide Area Network
  • VAN Value Added Network
  • PAN Personal Area Network
  • mobile communication network It can be implemented in all types of wired/wireless networks, such as a mobile radiocommunication network) or a satellite communication network.
  • the user terminal 200 and the guardian terminal 400 include a computer, a mobile phone, a smart phone, a smart pad, a laptop computer, a personal digital assistant (PDA), and a portable media (PMP). Player), or at least one multi-device among common devices such as a kiosk or a stationary display device installed in a specific place.
  • PDA personal digital assistant
  • PMP portable media
  • the user terminal 200 is a terminal pre-registered in the cognitive state evaluation apparatus 100 together with the guardian terminal 400, and may be a terminal device of a cognitive evaluation subject.
  • the user terminal 200 may output the cognitive game provided from the cognitive state evaluation device 100 according to the cognitive evaluation items, receive user response data corresponding to the cognitive game, and transmit the received user reaction data to the cognitive state evaluation device 100. there is.
  • the cognitive state evaluation apparatus 100 may pre-construct a learning-based user-customized cognitive model 300 .
  • the learning-based user-customized cognitive model 300 compares cognitive game data extracted from user response data corresponding to a cognitive game with past cognitive state data diagnosed corresponding to learning subjects.
  • a learning-based user-customized cognitive model 300 can be built.
  • various deep learning methods such as CNN, DNN, RNN, and LSTM may be exemplified, and an analysis method such as regression analysis or a statistical relationship analysis method may also be used.
  • the cognitive state evaluation apparatus 100 may pre-construct a user-customized cognitive model based on artificial intelligence learning in which a cognitive architecture-based cognitive model is pre-associated learning in response to game data for each cognitive task.
  • the cognitive architecture-based cognitive model may include a known Adaptive Control of Thought Rational (ACT-R) architecture-based cognitive model, and the cognitive evaluation item corresponds to the hyperactivity disorder (ADHD, attention deficit hyperactivity disorder) evaluation items, enabling evaluation of cognitive items corresponding to ADHD based on game data.
  • ACT-R Adaptive Control of Thought Rational
  • the cognitive state evaluation apparatus 100 first extracts first game data for cognitive evaluation from response input information for the user's cognitive game application, and uses the extracted first game data as the learning-based user
  • a customized cognitive task performance model corresponding to the user is generated, and an alternative performance result of the cognitive task selected for each cognitive evaluation item is obtained using the customized cognitive task performance model.
  • the user's cognitive ability for each of the cognitive items may be evaluated based on a result of performing the substitution.
  • the task performance model is an automatic task performance model generated by predicting the user's cognitive state using a learning-based user-customized cognitive model 300 from game data input, and for diagnosing the existing cognitive state such as ADHD 2 It may be a model that automatically substitutes a series of various paperwork and tasks that take about an hour without a separate user input.
  • the task performance model is a model that outputs predicted result data when a user-customized cognitive model built with the game data performs a task for cognitive evaluation, which can be predicted by predetermined evaluation criteria for each task.
  • the response rate variable of the user-customized cognitive model is 0.5
  • the task performance model outputs the predicted result when the cognitive evaluation task is performed in the state where the response rate variable is 0.5, as the alternative performance result will be.
  • the cognitive game application may be configured to collect response variables for generating a task performance model.
  • the cognitive state evaluation apparatus 100 may extract these response variables by type from the game data, and for this purpose, cognitive game applications configured step by step in advance may be provided to the user terminal 200 .
  • These cognitive game applications may include cognitive games that can be performed in a short period of time, and may include cognitive games in which various tasks for extracting cognitive variables used for diagnosing and evaluating cognitive states are sequentially or concurrently performed. .
  • the cognitive game application configured as described above may be output from the user terminal 200 , and the target person inputs a user reaction input to the user terminal 200 to play the game.
  • the user terminal 200 may process the input user reaction input information and transmit it to the cognitive state evaluation device 100 .
  • the cognitive state evaluation apparatus 100 generates a user-customized cognitive model by applying the cognitive game data extracted from the user response input information to the learning-based user-customized cognitive model 300, and uses the cognitive game data extracted from the user-customized cognitive model.
  • a corresponding customized task performance model can be created.
  • the cognitive state evaluation apparatus 100 digitizes and inputs existing tasks configured for cognitive state evaluation by a person to the customized task performance model, thereby replacing the cognitive state of each user according to the alternative driving of the customized task performance model.
  • Diagnosis result data may be obtained, and appropriate diagnosis and evaluation information based on the obtained result data may be quickly processed and provided to the user terminal 200 and the guardian terminal 400 or a separate institution.
  • FIG. 2 is a block diagram illustrating a cognitive state evaluation apparatus according to an embodiment of the present invention in more detail.
  • the cognitive state evaluation apparatus 100 may include a cognitive model generator 110, a cognitive ability evaluation unit 120, and a customized task performance model configuration unit 130, and may include a learning-based
  • the user-customized cognitive model 300 may be connected to the cognitive state evaluation device 100, included in the cognitive state evaluation device 100, or pre-built in an external server or the like.
  • the cognitive model generation unit 110 includes a cognitive architecture configuration unit 111, a game data processing unit 112, a user terminal input information processing unit 113, and a cognitive model learning modeling unit 114.
  • the cognitive architecture construction unit 111 stores and manages pre-constructed architecture data of cognitive variables in order to extract variables for cognitive state evaluation and diagnosis from game data of a game application.
  • the user's input information input to the user terminal input information processing unit 113 is processed as a cognitive variable in the game data processing unit 112 and applied to the cognitive model learning modeling unit 114 .
  • the cognitive model learning modeling unit 114 inputs the cognitive variables of the game data processing unit into the learning-based user-customized cognitive model 300 to build a customized task performance model.
  • the cognitive architecture construction unit uses a known Adaptive Control of Thought Rational (ACT-R) architecture-based cognitive model to logically configure human cognition/behavioral processes, using preset modules and buffers.
  • ACT-R Adaptive Control of Thought Rational
  • a cognitive model architecture based on condition-execution statements may be configured, and the game data processing unit 112 may perform a process of mapping each condition-execution statement of the cognitive model architecture to preset game data.
  • the cognitive model learning modeling unit from the architecture mapping data of the game data processing unit 112 and the input information of the user terminal input information processing unit 113, obtained from the result data of the user playing N games, working memory, Cognitive model variables related to attention, cognitive flexibility, inhibition, processing speed, etc. are extracted, and the extracted cognitive model variables are applied to the learning-based user-customized cognitive model 300 to construct a personalized cognitive model tailored to the user. .
  • the customized task performance model constructing unit 130 may configure a task-customized cognitive task performance model capable of alternatively performing cognitive tasks selected for each cognitive evaluation item by using the personalized cognitive model.
  • the customized task performance model configuration unit 130 configures the above-described ACT-R-based basic task performance model architecture, but applies variables for each personalized cognitive model to determine the execution time of each user when a task is input,
  • a virtual task performance model configured to repeatedly measure an error rate, a mission success rate, a correct answer rate, and a continuous success rate may be created.
  • the customized task performance model configurator 130 may individually generate these task performance models and further receive from the user terminal 200 game data from the N+1th game that has not been used in modeling to verify the accuracy. there is.
  • the game data after the N+1th may be transmitted to the accuracy verification unit 127 of the cognitive ability evaluation unit 120 .
  • the accuracy verification unit 127 compares and detects an error in model prediction information according to comparative evaluation based on execution time, error rate, latency, and the like, and if the error is greater than or equal to a threshold value, determines to perform an additional game so that the user terminal 200 ) to provide notifications.
  • the customized task performance model constructing unit 130 may more accurately generate a user duplication cognitive model for automatically replacing the customized task.
  • the cognitive ability evaluation unit 120 includes a cognitive model-based task substitution performer 121 that automatically performs a cognitive model-based task using a customized task performance model.
  • the tasks may include diagnosis or questionnaire tasks that can be alternatively configured according to each diagnosis purpose or subject, and in the cognitive state evaluation apparatus 100, the task is selected according to each purpose such as ADHD status evaluation or user classification.
  • a constituting task selection unit 122 may be further included.
  • the cognitive state evaluation apparatus 100 includes a result data processing unit for processing result data, and the result data is provided to the guardian or user terminal 200 through a cloud connection unit or through the interface output unit 125 to the guardian terminal. It may be output on the screen of step 400 or provided to the cognitive enhancement track recommendation unit 126 so that the cognitive enhancement process corresponding to the cognitive state diagnosis result may be provided to the guardian terminal 400 and outputted.
  • the cognitive ability evaluation unit 120 uses the cognitive model-based task replacement performer 121 to perform various tasks that the actual user has to perform based on the replacement of the customized task performance model, , It is possible to perform various TASKs more than M times based on user-customized learned and replicated performance (how many missions have been performed, how many errors have occurred, which targets have been missed, etc.).
  • the result data processing unit 124 may perform quantification according to a preset standard or a predefined algorithm to construct performance result data.
  • the interface output unit 125 may configure an analysis result interface using the quantified performance result data, and report data including the configured analysis result interface may be provided to the guardian terminal 400 .
  • the guardian terminal 400 may provide the user's cognitive state evaluation information through various types of interfaces.
  • an analysis result interface may be reported in the form of a pentagonal spider map, and additionally analyzed information may be output as qualitative data.
  • the resultant data processing unit 124 may predict data within the next two weeks using statistical analysis based on information performed up to now, and may provide the predicted data to the user terminal 200 . To this end, the result data processing unit 124 may calculate a cognitive model and a growth regression equation by learning, and perform analysis processing to generate prediction data within two weeks.
  • the cognitive reinforcement track recommendation unit 126 configures a reinforcement track composed of reinforcement tasks capable of reinforcing the ability of an item below the threshold as a recommendation track, when the preset cognitive status item is below the threshold, and configures the configured recommendation track as a guardian.
  • a recommendation process provided to the terminal 400 or the user terminal 200 may be performed.
  • the recommended track information may be provided to the user terminal 200 or the guardian terminal 400, and the recommended track information may include one or more game information configured in stages.
  • each recommended game may include tasks that comprehensively improve cognitive abilities, and in particular, tasks that more strongly intensively reinforce items that are below the threshold predicted to be deficient.
  • all RAW data may be processed after primary storage in the user terminal 200 and provided to the cognitive state evaluation device 100, and the aggregated data may be sent to the cloud server through the cloud connection unit 123.
  • Stored, and final comprehensive data may be provided to the user terminal 200 or the guardian terminal 400 .
  • the present cognitive state evaluation device 100 it is possible to easily visit the hospital after a simple self-diagnosis, which can have an effect that not only diagnoses children but also autism. It has the advantage of being used for general cognitive diagnosis such as depression, dementia, etc.
  • FIG. 3 is a diagram illustrating variable modeling data for constructing a cognitive architecture according to an embodiment of the present invention.
  • the cognitive model learning modeling unit 114 includes a task variable modeling unit 1141, a cognitive model variable modeling unit 1143, and feature variables for performing each task based on the cognitive learning model.
  • a modeling unit 1145 and a scoring variable modeling unit 1147 are included.
  • the task variable modeling unit 1141 may perform a process of modeling a user input result for each task extracted from each game data into a model variable for performing a cognitive task for evaluating cognitive ability.
  • the cognitive model variable modeling unit 1143 may perform modeling to set learning variables obtained according to the cognitive architecture in order to construct a cognitive model.
  • the cognitive architecture can be exemplified by the ACT-R model.
  • the various roles of the human brain are divided into eight modules, respectively, and each module and the central processing unit role
  • the production system is configured to exchange information about the cognitive process, i.e., chunks, through a buffer.
  • the buffer can sequentially store and process only one chunk at a time
  • each module can retrieve or store multiple pieces of information simultaneously, and in a production system, tasks according to multiple production rules can be executed in parallel at the same time. It can be configured to process comparatively.
  • the cognitive model variable modeling unit 1143 converts the buffer and system structure preset by the cognitive architecture into data, and selects and adjusts learning variables for constructing a personalized cognitive model.
  • the feature variable modeling unit 1145 may process modeling for extracting feature variables useful for performing task replacement based on game data, among variables modeled by the cognitive model variable modeling unit 1143 .
  • the feature information may be a variable extracted through a known SVM method, etc., and as primary feature information, for example, an activation function for learning, a base level activation value, recognition accuracy, recognition delay time, etc. may be exemplified,
  • the secondary feature information may include a minimum value, a maximum value, an average, a standard deviation, and a variance of the primary feature information.
  • the scoring variable modeling unit 1147 may model an algorithm and scoring variables capable of calculating cognitive screening and cognitive evaluation scores corresponding to an individual, which are previously set task variables, cognitive model variables, and feature variables. It may be processed by adjusting variables corresponding to evaluation functions for each of one or more cognitive evaluation items, which are calculated using
  • FIG. 4 is diagrams for explaining operations for each game application for calculating task model variables according to an embodiment of the present invention.
  • task model variables calculated from game data may be largely exemplified by a working memory variable model, an inhibitory force variable model, a divided attention variable model, a flexibility variable model, and a processing speed variable model.
  • a working memory variable model an inhibitory force variable model
  • a divided attention variable model a divided attention variable model
  • a flexibility variable model a variable a variable arithmetic model
  • the working memory variable model represents the ability to store information coming from other sensory organs in the head and retrieve the information again within a certain short time. Accordingly, a game application can sequentially display a series of numbers. And the user can input response data that inputs a series of sequentially displayed numbers in reverse order. Also, as model variables, correct answer scores, time required for correct answers, and the like may be used as variables, and as a result, working memory variables may be reflected in a customized cognitive assessment task performance model.
  • the inhibitory variable model indicates a selective/intensive activity and state ability to clearly recognize only a specific one among many stimuli from the external environment or inside the object, or to respond only to a specific one
  • the game application according to this is a known stroop ( STROOP) test and the like may be exemplified.
  • the Stroop test lists words or objects in which the display color of a word or object and the meaning of the word or object are different from each other, and selects only a specific color or object to check selective/intensive activity ability.
  • a user may input response data to select an object corresponding to the test query.
  • congruent stimulus information, incongruent stimulus information, synthetic stimulus information, etc. may be used as model variables, and as a result, they may be reflected in a customized cognitive assessment task performance model as inhibitory variables.
  • the split attention variable model indicates the ability to respond to various demands of the surrounding environment while responding to two different stimuli at the same time, and indicates whether two tasks can be performed simultaneously.
  • the game application is an application that displays sequential numbers having different colors, and the user can select sequential numbers having different colors and input them as response data.
  • the model variables the correct answer score and the time required for the correct answer may be used as the variables, and as a result, they may be reflected in the customized cognitive evaluation task performance model as the divided attention variables.
  • the flexible variable model represents the mental ability to appropriately convert thoughts and actions according to changes in the external environment and rules, and represents the ability to perform a change in thinking in accordance with required changes.
  • the game application is an application that selects a card suitable for a card classification criterion suggestion word, and the user can select an appropriate card according to the standard suggestion word and input it as response data.
  • model variables correct answer scores, continuous correct score, correct answer time, etc. may be used as variables, and as a result, they may be reflected in a customized cognitive assessment task performance model as flexible variables.
  • the processing speed variable model represents the time to respond to a stimulus and the speed at which a user can understand and respond to whether the recognition information is visual, auditory, or motor.
  • the game application is an application that selects a figure or object according to a query, and the user may select a figure of a different shape or a figure of a presented shape and input the result as response data.
  • the model variables the correct answer score and the time required for correct answers may be used as the variables, and as a result, they may be reflected in the customized cognitive assessment task performance model as processing speed variables.
  • 5 is a ladder diagram for explaining the entire system operation of the present invention in detail.
  • the cognitive state evaluation apparatus 100 first configures cognitive architecture data and an initial cognitive model based on tasks for each cognitive evaluation item (S1001).
  • the cognitive state evaluation apparatus 100 registers user information of the user terminal 200 and the guardian terminal 400 (S1003).
  • the user information may include terminal identification information, user account information, phone number information, family relationship information, and the like.
  • the user terminal 200 receives cognitive evaluation item information from the cognitive state evaluation device 100 (S1004), and performs one or more games corresponding to preset cognitive diagnosis tasks for each cognitive evaluation item (S1005).
  • step S1007 may also be performed by the cognitive state evaluation device 100 .
  • the cognitive state evaluation apparatus 100 performs learning-based personalized cognitive model modeling (S1011), configures a customized task performance model using the personalized cognitive model (S1013), and uses the customized task performance model , Substitute performance results of the selected task for each cognitive evaluation item are obtained (S1015).
  • the cognitive state evaluation apparatus 100 configures an analysis result interface for each cognitive evaluation item using the alternative performance result data (S1017), and provides the analysis result interface for each cognitive evaluation item to the guardian terminal 400. (S1019).
  • an analysis result report may be output from the guardian terminal 400 (S1021), and the cognitive state diagnosis apparatus 100 may provide cognitive enhancement track recommendation information based on the analysis result to the guardian terminal 400 (S1023). ).
  • 6 to 7 are diagrams for exemplarily explaining a report interface output from a guardian terminal according to an embodiment of the present invention.
  • the cognitive state based on the user's result data can be digitized and output, and as additional information, strengthening games for reinforcing insufficient elements and information on nearby hospitals are output. It can be.
  • the user's result data can be processed and output as a pentagonal graph based on reference variables, and changes over a period of time (two weeks) can be tracked, predicted, and output.
  • a function allowing the user to easily monitor and supplement his or her cognitive state can be provided.
  • the method according to the present invention described above may be produced as a program to be executed on a computer and stored in a computer-readable recording medium.
  • Examples of the computer-readable recording medium include ROM, RAM, CD-ROM, and magnetic tape. , floppy disks, and optical data storage devices.
  • the computer-readable recording medium is distributed to computer systems connected through a network, so that computer-readable codes can be stored and executed in a distributed manner.
  • functional programs, codes, and code segments for implementing the method can be easily inferred by programmers in the technical field to which the present invention belongs.

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Data Mining & Analysis (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Neurology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Child & Adolescent Psychology (AREA)
  • Neurosurgery (AREA)
  • Developmental Disabilities (AREA)
  • Physiology (AREA)
  • Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

본 발명의 실시 예에 따른 인지 상태 평가 장치의 동작 방법은, 사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 단계; 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하는 맞춤형 태스크 수행 모델 구성 단계; 및 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 인지 능력 평가 단계를 포함한다.

Description

학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템
본 발명은 인지 상태 평가 장치 및 그 동작 방법에 관한 것이다. 보다 구체적으로, 본 발명은 학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템에 관한 것이다.
부모가 인지 발달 상태에 대해 잘 알고 있으면 자녀에게 적절히 대응할 수 있는 능력이 강화되므로, 부모에게 아동에 대한 정보를 제공하는 것은 문제 해결을 더 쉽게 하며, 부모 결정에 확신을 줄 수 있으며, 아이가 자라면서 필요한 요구 사항에 대해 더욱 민감하게 반응할 수 있게 한다.
이에 부모들은 자녀의 발달 상태를 파악하기 위해 자녀와 함께 전문 진단 기관에 방문하여, 자녀가 의학적검사, 표준화 검사(예를 들어, 사회성숙도 검사, KEDI-WISC, 포테이지 인지 발달 검사 등), 비형식적 검사, 관찰, 문진표 작성, 면담 등을 수행하도록 한다.
또한, 치매 노인이나 우울증 등이 예상되는 경우에도, 이러한 전문 진단 기관에 방문하여 다양한 인지 검사를 수행하고 있다.
그러나 종래의 진단 방법들은 수많은 문진검사와 태스크(task)들을 수행함에 따라 적어도 2시간 이상의 시간이 소요되고 있으며, 아동이나 노인 등의 진단 대상이 진단 자체를 거부하거나, 피로함을 느껴 정상적으로 문진이나 태스크를 수행하지 못하는 문제들이 발생할 수 있다.
본 발명은 상기한 바와 같은 과제를 해결하고자 안출된 것으로, 짧은 시간 동안 제공되는 인지 게임에 대한 사용자 단말의 입력 정보로부터, 게임 데이터를 추출하여 인지 상태 진단을 위한 학습 기반 사용자 맞춤형 인지 모델을 구축하고, 사용자 맞춤형 인지 모델에 기초하여 인지 상태 진단에 필요한 태스크들이 사용자 맞춤형 인지 모델에서 자동적으로 수행되도록 처리함으로써, 인지 상태 진단에 소요되는 시간 및 피로도를 획기적으로 감축하고, 다양한 진단 및 평가가 가능하게 되는 인지 상태 평가 시스템을 제공하는데 그 목적이 있다.
상기한 바와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 장치는, 인지 상태 평가 장치에 있어서, 사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 게임 데이터 처리부; 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하는 맞춤형 태스크 수행 모델 구성부; 및 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 인지 능력 평가부를 포함한다.
또한, 상기한 바와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 인지 상태 평가 장치의 동작 방법에 있어서, 사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 단계; 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하는 맞춤형 태스크 수행 모델 구성 단계; 및 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 인지 능력 평가 단계를 포함한다.
또한, 상기한 바와 같은 과제를 해결하기 위한 본 발명의 실시 예에 따른 방법은, 상기 방법을 컴퓨터에서 실행시키기 위한 컴퓨터 판독가능한 기록매체 및 컴퓨터 프로그램으로 구현될 수 있다.
본 발명의 실시 예에 따르면, 짧은 시간 동안 제공되는 인지 게임에 대한 사용자 단말의 입력 정보로부터, 게임 데이터를 추출하여 인지 상태 진단을 위한 학습 기반 사용자 맞춤형 인지 모델을 구축하고, 사용자 맞춤형 인지 모델에 기초하여 인지 상태 진단에 필요한 태스크들이 사용자 맞춤형 인지 모델에서 자동적으로 수행되도록 처리함으로써, 인지 상태 진단에 소요되는 시간 및 피로도를 획기적으로 감축하고, 다양한 진단 및 평가가 가능하게 되는 인지 상태 평가 장치 및 그 동작 방법을 제공할 수 있다.
이에 따라, 본 발명의 실시 예예 따르면 인지 모델링을 통한 개인 맞춤형 진단 및 평가를 통해 교육, 의료 등으로 활용 가능하며, 기존의 2시간 가량 소요되던 ADHD 검사 등의 다양한 문진검사들을 간단하고 짧은 게임 기반의 캐주얼한 형태로 진행할 수 있다.
또한, 본 발명의 실시 예에 따르면 인지 상태에 대한 자가진단도 가능하게 되어, 인지 건강상태 모니터링 및 신속한 병원 내방 및 치료로 이어질 수 있는 인지 건강증진의 효과도 도모할 수 있다.
도 1은 본 발명의 전체 시스템을 개략적으로 도시한 개념도이다.
도 2는 본 발명의 실시 예에 따른 인지 상태 평가 장치를 보다 구체적으로 도시한 블록도이다.
도 3은 본 발명의 실시 예에 따른 인지 아키텍쳐 구성을 위한 변수 모델링 데이터를 도식화한 도면이다.
도 4는 본 발명의 실시 예에 따른 태스크 모델 변수 산출을 위한 게임 어플리케이션별 동작을 설명하기 위한 도면들이다.
도 5는 본 발명의 전체 시스템 동작을 구체적으로 설명하기 위한 래더 다이어그램이다.
도 6 내지 도 7은 본 발명의 실시 예에 따라, 보호자 단말에서 출력되는 리포트 인터페이스를 예시적으로 설명하기 위한 도면들이다.
이하의 내용은 단지 본 발명의 원리를 예시한다. 그러므로 당업자는 비록 본 명세서에 명확히 설명되거나 도시되지 않았지만 본 발명의 원리를 구현하고 본 발명의 개념과 범위에 포함된 다양한 장치를 발명할 수 있는 것이다. 또한, 본 명세서에 열거된 모든 조건부 용어 및 실시예들은 원칙적으로, 본 발명의 개념이 이해되도록 하기 위한 목적으로만 명백히 의도되고, 이와 같이 특별히 열거된 실시예들 및 상태들에 제한적이지 않는 것으로 이해되어야 한다.
또한, 본 발명의 원리, 관점 및 실시예들 뿐만 아니라 특정 실시예를 열거하는 모든 상세한 설명은 이러한 사항의 구조적 및 기능적 균등물을 포함하도록 의도되는 것으로 이해되어야 한다. 또한 이러한 균등물들은 현재 공지된 균등물뿐만 아니라 장래에 개발될 균등물 즉 구조와 무관하게 동일한 기능을 수행하도록 발명된 모든 소자를 포함하는 것으로 이해되어야 한다.
따라서, 예를 들어, 본 명세서의 블럭도는 본 발명의 원리를 구체화하는 예시적인 회로의 개념적인 관점을 나타내는 것으로 이해되어야 한다. 이와 유사하게, 모든 흐름도, 상태 변환도, 의사 코드 등은 컴퓨터가 판독 가능한 매체에 실질적으로 나타낼 수 있고 컴퓨터 또는 프로세서가 명백히 도시되었는지 여부를 불문하고 컴퓨터 또는 프로세서에 의해 수행되는 다양한 프로세스를 나타내는 것으로 이해되어야 한다.
프로세서 또는 이와 유사한 개념으로 표시된 기능 블럭을 포함하는 도면에 도시된 다양한 소자의 기능은 전용 하드웨어뿐만 아니라 적절한 소프트웨어와 관련하여 소프트웨어를 실행할 능력을 가진 하드웨어의 사용으로 제공될 수 있다. 프로세서에 의해 제공될 때, 상기 기능은 단일 전용 프로세서, 단일 공유 프로세서 또는 복수의 개별적 프로세서에 의해 제공될 수 있고, 이들 중 일부는 공유될 수 있다.
또한 프로세서, 제어 또는 이와 유사한 개념으로 제시되는 용어의 명확한 사용은 소프트웨어를 실행할 능력을 가진 하드웨어를 배타적으로 인용하여 해석되어서는 아니되고, 제한 없이 디지털 신호 프로세서(DSP) 하드웨어, 소프트웨어를 저장하기 위한 롬(ROM), 램(RAM) 및 비 휘발성 메모리를 암시적으로 포함하는 것으로 이해되어야 한다. 주지관용의 다른 하드웨어도 포함될 수 있다.
본 명세서의 청구범위에서, 상세한 설명에 기재된 기능을 수행하기 위한 수단으로 표현된 구성요소는 예를 들어 상기 기능을 수행하는 회로 소자의 조합 또는 펌웨어/마이크로 코드 등을 포함하는 모든 형식의 소프트웨어를 포함하는 기능을 수행하는 모든 방법을 포함하는 것으로 의도되었으며, 상기 기능을 수행하도록 상기 소프트웨어를 실행하기 위한 적절한 회로와 결합된다. 이러한 청구범위에 의해 정의되는 본 발명은 다양하게 열거된 수단에 의해 제공되는 기능들이 결합되고 청구항이 요구하는 방식과 결합되기 때문에 상기 기능을 제공할 수 있는 어떠한 수단도 본 명세서로부터 파악되는 것과 균등한 것으로 이해되어야 한다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 실시 예에 따른 전체 시스템을 개략적으로 도시한 개념도이다.
본 발명의 일 실시 예에 따른 전체 시스템은 인지 상태 평가 장치(100), 사용자 단말(200), 보호자 단말(400) 및 학습 기반 사용자 맞춤형 인지 모델(300)을 포함한다.
인지 상태 평가 장치(100)는, 본 발명의 실시 예에 따른 인지 상태 진단 및 평가 서비스 제공을 위해, 각 사용자 단말(200), 보호자 단말(400), 학습 기반 사용자 맞춤형 인지 모델(300)과 유/무선 네트워크를 통해 연결될 수 있으며, 상호간 통신을 수행할 수 있다.
여기서 상기 각 네트워크는 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN), 부가가치 통신망(Value Added Network; VAN), 개인 근거리 무선통신(Personal Area Network; PAN), 이동 통신망(mobile radiocommunication network) 또는 위성 통신망 등과 같은 모든 종류의 유/무선 네트워크로 구현될 수 있다.
그리고, 사용자 단말(200) 및 보호자 단말(400)은 컴퓨터, 휴대폰, 스마트 폰(smart phone), 스마트 패드(smart pad), 노트북 컴퓨터(laptop computer), PDA(Personal Digital Assistants), PMP(Portable Media Player) 중 어느 하나의 개별적 기기, 또는 특정 장소에 설치되는 키오스크 또는 거치형 디스플레이 장치와 같은 공용화된 디바이스 중 적어도 하나의 멀티 디바이스일 수 있다.
먼저, 사용자 단말(200)은, 보호자 단말(400)과 함께 인지 상태 평가 장치(100)에 사전 등록된 단말로서, 인지 평가 대상자의 단말 장치일 수 있다. 그리고, 사용자 단말(200)은 인지 평가 항목에 따라, 인지 상태 평가 장치(100)로부터 제공된 인지 게임을 출력하고, 인지 게임에 대응하는 사용자 반응 데이터를 입력받아 인지 상태 평가 장치(100)로 전달할 수 있다.
이와 같은 시스템 구성에 있어서, 인지 상태 평가 장치(100)는, 학습 기반 사용자 맞춤형 인지 모델(300)을 사전 구축할 수 있다. 인지 상태 평가 장치(100)는, 학습 기반 사용자 맞춤형 인지 모델(300)은, 인지 게임에 대응하는 사용자 반응 데이터에서 추출되는 인지 게임 데이터와, 학습 대상자들에 대응하여 진단되었던 과거 인지 상태 데이터를 비교 학습하여, 학습 기반 사용자 맞춤형 인지 모델(300)을 구축할 수 있다. 학습에는 예를 들어 CNN, DNN, RNN, LSTM 등의 다양한 딥러닝 학습이 예시될 수 있으며, 회귀분석 등의 분석방식이나 통계적인 관계 분석 방식도 이용될 수 있다.
보다 구체적으로, 인지 상태 평가 장치(100)는, 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델을 사전 구축할 수 있다.
여기서, 이러한 인지 아키텍처 기반의 인지 모델은 알려진 ACT-R(Adaptive Control of Thought Rational) 아키텍처 기반 인지 모델을 포함할 수 있으며, 상기 인지 평가 항목은 상기 ACT-R 모델에 대응하는 과잉행동장애(ADHD, attention deficit hyperactivity disorder) 평가 항목을 포함할 수 있는 바, 게임 데이터 기반의 ADHD에 대응하는 인지 항목 평가를 가능하게 한다.
이를 위해, 인지 상태 평가 장치(100)는, 먼저 사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하며, 상기 추출된 제1 게임 데이터를, 상기 학습 기반 사용자 맞춤형 인지 모델(300)에 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하고, 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가할 수 있다.
여기서, 상기 태스크 수행 모델은, 게임 데이터 입력으로부터, 학습 기반 사용자 맞춤형 인지 모델(300)을 이용해 사용자의 인지 상태를 예측하여 생성된 태스크 자동 수행 모델로서, 기존의 ADHD 등의 인지 상태 진단을 위해 2시간 정도 소요되는 일련의 다양한 문진 및 태스크를, 별도의 사용자 입력 없이도 자동적으로 대체 수행하게 하는 모델일 수 있다.
즉, 태스크 수행 모델은 인지 평가를 위한 태스크를, 상기 게임 데이터로 구축된 사용자 맞춤형 인지 모델이 수행하였을 때 예측되는 결과 데이터를 출력하는 모델로서, 이는 각 태스크별 사전 설정된 평가 기준 등에 의해 예측될 수 있다. 예를 들어, 사용자 맞춤형 인지 모델의 반응 속도 변수가 0.5인 경우, 태스크 수행 모델은 반응 속도 변수 0.5인 상태에서 인지 평가 태스크를 수행하였을 경우의 예측되는 결과를, 상기 대체 수행 결과로서 출력할 수 있는 것이다.
따라서, 본 발명의 실시 예에 따른 인지 게임 어플리케이션은, 이러한 태스크 수행 모델 생성을 위한 반응 변수를 수집할 수 있도록 구성될 수 있다. 그리고, 인지 상태 평가 장치(100)는, 이러한 반응 변수를 종류별로 각각 게임 데이터로부터 추출할 수 있으며, 이를 위해 미리 단계적으로 구성된 인지 게임 어플리케이션들을 사용자 단말(200)로 제공할 수 있다.
이러한 인지 게임 어플리케이션에는 짧은 시간 동안 수행 가능한 인지 게임이 포함될 수 있으며, 인지 상태 진단 및 평가에 이용되는 인지 변수 등을 추출하기 위한 다양한 태스크들이 순차 또는 동시에 병렬적으로 수행되는 인지 게임들을 포함할 수 있다.
한편, 사용자 단말(200)에서는 이와 같이 구성된 인지 게임 어플리케이션이 출력될 수 있으며, 대상자는 게임을 수행하기 위한 사용자 반응 입력을 사용자 단말(200)로 입력한다. 사용자 단말(200)은 입력된 사용자 반응 입력 정보를 가공하여, 인지 상태 평가 장치(100)로 전달할 수 있다.
그리고, 인지 상태 평가 장치(100)는 사용자 반응 입력 정보로부터 추출되는 인지 게임 데이터를 이용하여, 학습 기반 사용자 맞춤형 인지 모델(300)에 적용함으로써, 사용자 맞춤형 인지 모델을 생성하고, 사용자 맞춤형 인지 모델에 대응하는 맞춤형 태스크 수행 모델을 생성할 수 있다.
이에 따라, 인지 상태 평가 장치(100)는 맞춤형 태스크 수행 모델에, 사람이 직접 인지 상태 평가하기 위해 구성되었떤 기존의 태스크들을 디지털화하여 입력함으로써, 맞춤형 태스크 수행 모델의 대체 구동에 따른 사용자별 인지 상태 진단 결과 데이터를 획득할 수 있으며, 획득된 결과 데이터 기반의 적절한 진단 및 평가 정보가 신속하게 처리되어 사용자 단말(200) 및 보호자 단말(400)이나, 또는 별도의 기관으로 제공될 수 있다.
도 2는 본 발명의 실시 예에 따른 인지 상태 평가 장치를 보다 구체적으로 설명하기 위한 블록도이다.
본 발명의 실시 예에 따른, 인지 상태 평가 장치(100)는, 인지 모델 생성부(110), 인지 능력 평가부(120) 및 맞춤형 태스크 수행 모델 구성부(130)를 포함할 수 있고, 학습 기반 사용자 맞춤형 인지 모델(300)은 상기 인지 상태 평가 장치(100)에 연결되거나, 인지 상태 평가 장치(100)에 포함되어 있거나, 외부 서버 등에 사전 구축되어 있을 수 있다.
먼저, 인지 모델 생성부(110)는 인지 아키텍처 구성부(111), 게임 데이터 처리부(112), 사용자 단말 입력 정보 처리부(113), 인지 모델 학습 모델링부(114)를 포함한다.
먼저, 인지 아키텍처 구성부(111)는, 게임 어플리케이션의 게임 데이터로부터 인지 상태 평가 및 진단을 위한 변수를 추출하기 위하여, 사전 구축된 인지 변수의 아키텍처 데이터를 저장 및 관리한다.
그리고, 사용자 단말 입력 정보 처리부(113)로 입력된 사용자의 입력 정보는, 게임 데이터 처리부(112)에서 인지 변수로서 처리되어, 인지모델 학습 모델링부(114)로 인가된다.
그리고, 인지 모델 학습 모델링부(114)는, 게임 데이터 처리부의 인지 변수를 학습 기반 사용자 맞춤형 인지 모델(300)에 입력하여, 맞춤형 태스크 수행 모델을 구축한다.
보다 구체적으로, 예를 들어, 인지 아키텍처 구성부는, 인간의 인지/행동 과정을 논리적으로 구성하기 위해, 알려진 ACT-R(Adaptive Control of Thought Rational) 아키텍처 기반 인지 모델을 이용하여, 미리 설정된 모듈과 버퍼에 맞게 구성된 조건-실행문 기반의 인지 모델 아키텍처를 구성할 수 있으며, 게임 데이터 처리부(112)는, 인지 모델 아키텍처의 각 조건-실행문들을 사전 설정된 게임 데이터에 매핑하는 처리를 수행할 수 있다.
그리고, 인지모델 학습 모델링부는, 게임 데이터 처리부(112)의 아키텍처 매핑 데이터와, 사용자 단말 입력 정보 처리부(113)의 입력 정보로부터, 사용자가 N개의 게임을 수행한 결과 데이터에서 획득되는, 작업기억력, 주의력, 인지적 유연성, 억제력, 처리속도 등에 관련된 인지 모델 변수들을 추출하고, 추출된 인지 모델 변수들을 학습 기반 사용자 맞춤형 인지 모델(300)에 적용하여, 사용자 맞춤형으로 개인화된 인지 모델을 구성할 수 있다.
그리고, 맞춤형 태스크 수행 모델 구성부(130)는, 이러한 개인화된 인지 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크들을 대체 수행할 수 있는 태스크 맞춤형 인지 태스크 수행 모델을 구성할 수 있다.
이를 위해, 맞춤형 태스크 수행 모델 구성부(130)는, 전술한 ACT-R 기반의 기본적인 태스크 수행 모델 아키텍처를 구성하되 상기 개인화된 인지 모델별 변수를 적용하여, 태스크가 입력되면 각 사용자의 수행시간, 오류율, 미션 성공율, 정답률, 연속 성공률 등을 반복적으로 측정할 수 있도록 구성된 가상의 태스크 수행 모델을 생성할 수 있다.
맞춤형 태스크 수행 모델 구성부(130)는, 이러한 태스크 수행 모델을 개별적으로 생성하고, 그 정확도 검증을 위해 모델링에 활용되지 않았던 N+1번째 이후의 게임 데이터를 사용자 단말(200)로부터 더 수신할 수 있다.
이러한 N+1번째 이후의 게임 데이터는 인지 능력 평가부(120)의 정확도 검증부(127)로 전달될 수 있다. 정확도 검증부(127)는, 수행시간, 에러율, Latency 등을 기준으로하는 비교 평가에 따라, 모델 예측 정보의 오차를 비교 검출하고, 오차가 임계치 이상인 경우, 추가 게임 수행을 결정하여 사용자 단말(200)로 알림을 제공할 수도 있다. 이러한 모델의 자가 학습을 통해, 맞춤형 태스크 수행 모델 구성부(130)는 맞춤형 태스크 자동 대체 수행을 위한 사용자 복제 인지 모델을 보다 정확하게 생성할 수 있다.
그리고, 인지 능력 평가부(120)에서는, 맞춤형 태스크 수행 모델을 이용하여, 인지 모델 기반 태스크를 자동적으로 수행시키는 인지 모델 기반 태스크 대체 수행부(121)를 포함한다.
여기서, 태스크들은 각각의 진단 목적이나 대상에 따라 대체 구성이 가능한 진단이나 문진 태스크들을 포함할 수 있으며, 인지 상태 평가 장치(100)에는 태스크를 ADHD 상태 평가 등의 각각의 목적이나 사용자 분류에 따라 선택 구성하는 태스크 선택부(122)가 더 포함될 수 있다.
그리고, 인지 상태 평가 장치(100)는 결과 데이터를 처리하는 결과 데이터 처리부를 포함하며, 결과 데이터는 클라우드 연결부를 통해 보호자나 사용자 단말(200)로 제공되거나, 인터페이스 출력부(125)를 통해 보호자 단말(400)의 화면상에 출력하거나, 인지 강화 트랙 추천부(126)로 제공되어, 인지 상태 진단 결과에 대응하는 인지 강화 프로세스가 보호자 단말(400)로 제공되어 출력되도록 처리될 수 있다.
보다 구체적으로, 인지 능력 평가부(120)는 인지 모델 기반 태스크 대체 수행부(121)를 이용하여, 맞춤형 태스크 수행 모델의 대체 수행을 기반으로 실제 사용자가 진행해야 하는 다양한 과제들을 대신해서 수행하게 하며, 사용자 맞춤형으로 학습되고 복제된 수행능력(미션을 얼마나 수행하는지, 에러는 얼마나 일어났는지, 어떤 타겟을 자주 놓쳤는지 등)을 기준으로 하는 M 번 이상의 다양한 TASK를 수행하게 할 수 있다.
결과 데이터 처리부(124)는, 수행결과 데이터를 구성하기 위해 사전 설정된 기준 또는 사전 정의된 알고리즘에 따라, 정량화를 수행할 수 있다.
그리고, 인터페이스 출력부(125)는 정량화된 수행결과 데이터를 이용하여, 분석 결과 인터페이스를 구성하고, 구성된 분석 결과 인터페이스를 포함하는 리포팅 데이터가 보호자 단말(400)로 제공될 수 있다.
이에 따라, 보호자 단말(400)에서는, 다양한 형태의 인터페이스를 통해 사용자의 인지 상태 평가 정보를 제공할 수 있다. 예를 들어 분석 결과 인터페이스는 오각형의 스파이더맵 형태로 리포팅될 수 있고, 추가적으로 분석된 정보는 정성적 데이터로 출력될 수도 있다.
나아가, 결과 데이터 처리부(124)는, 기존까지 수행한 정보를 바탕으로 향 후 2주간 내의 데이터를 통계적 분석을 이용하여 예측하고, 예측된 데이터를 사용자 단말(200)로 제공할 수도 있다. 이를 위해, 결과 데이터 처리부(124)는, 인지 모델과 학습에 의한 성장 회귀 방정식을 산출하고, 2주 내 예측 데이터를 생성하는 분석 처리를 수행할 수 있다.
또한, 인지 강화 트랙 추천부(126)는, 사전 설정된 인지 상태 항목이 임계치 이하인 경우에, 임계치 이하인 항목의 능력을 강화할 수 있는 강화 태스크로 구성된 강화 트랙을 추천 트랙으로 구성하고, 구성된 추천 트랙을 보호자 단말(400) 또는 사용자 단말(200)로 제공하는 추천 프로세스를 수행할 수 있다.
여기서, 상기 추천 트랙 정보는 사용자 단말(200) 또는 보호자 단말(400)로 제공될 수 있으며, 추천 트랙 정보는 단계적으로 구성된 하나 이상의 게임 정보를 포함할 수 있다. 여기서, 추천되는 각 게임은 인지 능력을 종합적으로 향상시켜주는 태스크를 포함할 수 있으며, 특히 부족하다고 예측되는 상기 임계치 이하인 항목들을 더 강하게 집중 강화하는 태스크들을 포함할 수 있다.
이러한 일련의 프로세스를 위해, 모든 RAW 데이터는 사용자 단말(200)에서 1차 저장 후 가공되어 인지 상태 평가 장치(100)로 제공될 수 있으며, 종합된 데이터는 클라우드 연결부(123)를 통해 클라우드 서버에 저장되고, 최종적 종합 데이터는 사용자 단말(200) 또는 보호자 단말(400)로 제공될 수 있다.
이러한 시스템 구축을 통해 인지 모델링을 통한 개인 맞춤형 진단/평가가 신속하고 쉽게 진행될 수 있으며, 이는 교육, 의료(치료) 등으로 활용 가능하고, 특히 기존 2시간 가까이 진행해야했던 아동ADHD 검사 등을 좀 더 캐쥬얼하면서도 신속하게 처리할 수 있다.
또한, 국내 잠재적 아동ADHD의 90%가 병원을 가지 않는데, 본 인지 상태 평가 장치(100)를 이용하게 되면 간단한 자가진단 후 병원 내방도 쉬워질 수 있는 효과를 가질 수 있으며, 이는 아동 진단 뿐만 아니라 자폐, 우울증, 치매 등의 일반 인지 진단에도 활용될 수 있는 장점이 있다.
도 3은 본 발명의 실시 예에 따른 인지 아키텍쳐 구성을 위한 변수 모델링 데이터를 도식화한 도면이다.
도 3을 참조하면, 인지 모델 학습 모델링부(114)는, 인지 학습 모델에 기반하여, 각 태스크를 수행할 수 있도록 하는 태스크 변수 모델링부(1141), 인지 모델 변수 모델링부(1143), 특징 변수 모델링부(1145) 및 스코어링 변수 모델링부(1147)를 포함한다.
태스크 변수 모델링부(1141)는, 각 게임 데이터로부터 추출되는 태스크별 사용자 입력 결과를, 인지 능력을 평가하기 위한 인지 태스크 수행용 모델 변수로 모델링하는 처리를 수행할 수 있다.
그리고, 인지 모델 변수 모델링부는(1143), 인지 모델을 구성을 위해, 인지 아키텍처에 따라 획득되는 학습 변수들을 설정하는 모델링을 수행할 수 있다.
여기서, 인지 아키텍처는 ACT-R 모델이 예시될 수 있는 바, ACT-R의 경우 인간 두뇌의 여러 가지 역할을 8 개의 모듈(modules)에서 각각 나누어 담당하도록 구성되며, 각 모듈과 중앙처리장치 역할을 하는 생산 시스템(production system) 은 버퍼(buffer)를 통해 인지과정에 대한 정보 즉 청크를 서로 교환하도록 구성된다. 이 때 비록 버퍼에서는 한번에 한 개의 청크만 순차적으로 저장하고 처리할 수 있지만, 각 모듈은 여러 개의 정보를 동시에 검색하거나 저장할 수 있으며, 생산 시스템(production system) 에서는 여러 개의 생산 규칙에 따른 태스크들을 동시에 병렬적으로 비교 처리하도록 구성될 수 있다.
따라서, 인지 모델 변수 모델링부는(1143) 이러한 인지 아키텍처에 의해 사전 설정된 버퍼 및 시스템 구조를 데이터화하며, 개인화된 인지 모델 구성을 위한 학습 변수들을 선택 조정할 수 있다.
그리고, 특징 변수 모델링부(1145)는, 인지 모델 변수 모델링부(1143)에서 모델링된 변수들 중, 게임 데이터 기반 태스크 대체 수행에 유용한 특징 변수를 추출하는 모델링을 처리할 수 있다. 여기서, 특징 정보는 알려진 SVM 방식 등을 통해 추출되는 변수일 수 있으며, 1차 특징 정보로서 예를 들어 학습을 위한 활성화 함수, 베이스 레벨 활성 값, 인지 정확도, 인지 지연 시간 등이 예시될 수 있으며, 2차 특징 정보는 1차 특징 정보의 최소값, 최대값, 평균, 표준편차, 분산 등이 예시될 수 있다.
또한, 스코어링 변수 모델링부(1147)는, 개인에 대응하는 인지 스크리닝 및 인지 평가 점수를 산출할 수 있는 알고리즘 및 스코어링 변수를 모델링할 수 있는 바, 이는 앞서 설정된 태스크 변수, 인지 모델 변수, 특징 변수를 이용하여 산출되는, 하나 이상의 인지 평가 항목별 평가 함수에 대응되는 변수 조정으로 처리될 수 있다.
도 4는 본 발명의 실시 예에 따른 태스크 모델 변수 산출을 위한 게임 어플리케이션별 동작을 설명하기 위한 도면들이다.
도 4를 참조하면, 본 발명의 실시 예에 따른 게임 데이터로부터 산출되는 태스크 모델 변수는, 크게는 작업 기억력 변수 모델, 억제력 변수 모델, 분할 주의력 변수 모델, 유연성 변수 모델, 처리 속도 변수 모델로 예시될 수 있다. 다만, 이는 예시이므로 추가적인 변수 모델들이 더 포함될 수 있음은 물론이다.
먼저, 작업 기억력 변수 모델은, 다른 감각 기관들로부터 들어오는 정보를 머리 속에 저장하고, 일정한 짧은 시간 안에 정보를 다시 인출할 수 있는 능력을 나타내는 것으로, 이에 따른 게임 어플리케이션은 일련의 숫자를 순차적으로 표시할 수 있으며, 사용자는 순차 표시된 일련의 숫자를 역순으로 입력하는 반응 데이터를 입력할 수 있다. 그리고, 모델 변수에서는 정답 스코어, 정답 소요 시간 등이 그 변수로 활용될 수 있으며, 결과적으로 작업 기억력 변수로서 맞춤형 인지 평가 태스크 수행 모델에 반영될 수 있다.
또한, 억제력 변수 모델은, 외부 환경이나 개체 내부로부터의 많은 자극 중 특정한 것만을 분명하게 인지하거나, 특정한 것에만 반응하는 선택적/집중적 활동 및 상태 능력을 나타내는 것으로, 이에 따른 게임 어플리케이션은 알려진 스트룹(STROOP) 테스트 등이 예시될 수 있다. 스트룹 테스트는 단어 또는 객체의 표시 색상과, 그 단어 또는 객체가 나타내는 의미가 서로 상이한 단어 또는 객체들을 나열하고, 특정한 색상 또는 객체만을 선택하도록 표시하여, 선택적/집중적 활동 능력을 체크할 수 있다. 사용자는 테스트 질의에 대응하는 객체를 선택하는 반응 데이터를 입력할 수 있다. 그리고, 모델 변수에서는 일치 자극 정보, 불일치 자극 정보, 종합 자극 정보 등이 그 변수로 활용될 수 있으며, 결과적으로 억제력 변수로서 맞춤형 인지 평가 태스크 수행 모델에 반영될 수 있다.
그리고, 분할 주의력 변수 모델은, 동시에 두 가지 다른 자극에 반응하면서 주변 환경의 다양한 요구에 반응할 수 있는 능력을 나타내며, 태스크 두가지를 동시에 진행할 수 있는 지를 나타낸다. 이에 따른 게임 어플리케이션은 서로 다른 색을 갖는 순차적 숫자를 표시하는 어플리케이션으로서, 사용자는 서로 다른 색을 갖는 순차적 숫자를 선택하여, 반응 데이터로서 입력할 수 있다. 그리고, 모델 변수에서는 정답 스코어 및 정답 소요 시간 등이 그 변수로 활용될 수 있으며, 결과적으로 분할 주의력 변수로서 맞춤형 인지 평가 태스크 수행 모델에 반영될 수 있다.
그리고, 유연성 변수 모델은, 외부 환경 및 규칙의 변화에 따라 적절하게 사고와 행동을 전환하는 정신적 능력을 나타내며, 요구되는 변화에 맞게 사고 전환을 수행하는 능력을 나타낸다. 이에 따른 게임 어플리케이션은 카드 분류 기준 제시어에 적합한 카드를 선택하는 어플리케이션으로서, 사용자는 기준 제시어에 따른 적절한 카드를 선택하여, 반응 데이터로서 입력할 수 있다. 그리고, 모델 변수에서는 정답 스코어, 연속 정답 스코어 및 정답 소요 시간 등이 그 변수로 활용될 수 있으며, 결과적으로 유연성 변수로서 맞춤형 인지 평가 태스크 수행 모델에 반영될 수 있다.
또한, 처리 속도 변수 모델은, 자극을 받아 반응하는 시간 및 인식 정보가 시각적인지, 청각적인지, 운동적인지 등을 이해하고 반응할 수 있는 속도를 나타낸다. 이에 따른 게임 어플리케이션은 질의에 따른 도형 또는 객체를 선택하는 어플리케이션으로서, 사용자는 모양이 다른 도형이나 제시된 모양의 도형을 선택하여, 반응 데이터로서 입력할 수 있다. 그리고, 모델 변수에서는 정답 스코어 및 정답 소요 시간 등이 그 변수로 활용될 수 있으며, 결과적으로 처리 속도 변수로서 맞춤형 인지 평가 태스크 수행 모델에 반영될 수 있다.
도 5는 본 발명의 전체 시스템 동작을 구체적으로 설명하기 위한 래더 다이어그램이다.
도 5를 참조하면, 본 발명의 실시 예에 따른 인지 상태 평가 장치(100)는, 먼저 인지 평가 항목별 태스크를 기반으로 하는 인지 아키텍처 데이터 및 초기 인지 모델을 구성한다(S1001).
그리고, 인지 상태 평가 장치(100)는, 사용자 단말(200) 및 보호자 단말(400)의 사용자 정보를 등록한다(S1003). 여기서, 사용자 정보는 단말 식별 정보, 사용자 계정 정보, 전화번호 정보, 가족 관계 정보 등이 예시될 수 있다.
이후, 사용자 단말(200)은 인지 상태 평가 장치(100)로부터 인지 평가 항목 정보를 제공받아(S1004), 인지 평가 항목별 사전 설정된 인지 진단 태스크에 대응하는 하나 이상의 게임을 수행한다(S1005).
그리고, 사용자 단말(200)은, 사용자 입력 데이터 기반의 모델 변수를 구성하며(S1007), 구성된 게임 데이터 및 모델 변수 정보는 인지 상태 평가 장치(100)로 전달된다(S1009). 여기서, 상기 S1007 단계는 인지 상태 평가 장치(100)에서도 수행될 수 있다.
이후, 인지 상태 평가 장치(100)는, 학습 기반의 개인화된 인지 모델 모델링을 수행하고(S1011), 개인화된 인지 모델을 이용한 맞춤형 태스크 수행 모델을 구성하며(S1013), 맞춤형 태스크 수행 모델을 이용하여, 인지 평가 항목별 선택된 태스크의 대체 수행 결과를 획득한다(S1015).
그리고, 인지 상태 평가 장치(100)는, 상기 대체 수행 결과 데이터를 이용하여, 인지 평가 항목별 분석 결과 인터페이스를 구성하고(S1017), 인지 평가 항목별 분석 결과 인터페이스를 보호자 단말(400)로 제공한다(S1019).
이후, 보호자 단말(400)에서는 분석 결과 리포트가 출력될 수 있으며(S1021), 인지 상태 진단 장치(100)는 분석 결과에 기초한 인지 강화 트랙 추천 정보를 보호자 단말(400)로 제공할 수 있다(S1023).
도 6 내지 도 7은 본 발명의 실시 예에 따라, 보호자 단말에서 출력되는 리포트 인터페이스를 예시적으로 설명하기 위한 도면들이다.
먼저, 도 6을 참조하면, 분석 결과 인터페이스에서는 사용자의 결과 데이터를 기준으로 하는 인지 상태를 수치화하여 출력할 수 있으며, 부가 정보로서 부족한 요소를 보강하기 위한 강화 게임들과, 주변 병원 정보 등이 출력될 수 있다.
또한, 도 7을 참조하면, 평가 인터페이스에서는 사용자의 결과 데이터를 기준 변수 기반의 오각형 그래프로 가공하여 출력할 수 있으며, 일정 기간(2주)동안의 변화를 추적 및 예측하여 출력할 수 있다. 또한, 강화 게임에 의해 변화된 수치 등을 확인할 수 있으므로, 사용자가 자신의 인지 상태를 쉽게 모니터링하고 보완할 수 있도록 하는 기능을 제공할 수 있다.
상술한 본 발명에 따른 방법은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있다.
컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 상기 방법을 구현하기 위한 기능적인(function) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형 실시가 가능한 것은 물론이고, 이러한 변형 실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.

Claims (18)

  1. 인지 상태 평가 장치의 동작 방법에 있어서,
    사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 단계;
    인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하는 맞춤형 태스크 수행 모델 구성 단계; 및
    상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 인지 능력 평가 단계를 포함하는
    인지 상태 평가 장치의 동작 방법.
  2. 제1항에 있어서,
    상기 맞춤형 인지 태스크 수행 모델은,
    상기 선택된 인지 태스크에 대응하는 상기 사용자의 수행시간, 오류율, 정답율 중 적어도 하나를 예측하여, 상기 대체 수행 결과를 출력하는 가상의 태스크 수행 모델을 포함하는
    인지 상태 평가 장치의 동작 방법.
  3. 제1항에 있어서,
    상기 인지 아키텍처 기반의 인지 모델은, ACT-R(Adaptive Control of Thought Rational) 아키텍처 기반 인지 모델을 포함하고,
    상기 인지 평가 항목은 상기 ACT-R 모델에 대응하는 과잉행동장애(ADHD, attention deficit hyperactivity disorder) 평가 항목을 포함하는
    인지 상태 평가 장치의 동작 방법.
  4. 제3항에 있어서,
    상기 인공지능 학습 기반 사용자 맞춤형 인지 모델은,
    인지 태스크별 게임 학습 데이터를 SVM(Support Vector Macnine)로 변환하여 획득된 특징 정보를, ADHD 대상자 그룹 및 일반 대상자 그룹으로 분류하는 그룹 분류 연관 학습을 수행하여 구성되며,
    상기 인지 능력 평가 단계는, 상기 그룹 분류 연관 학습에 의해 구성된 분류 모델에 기초하여, 상기 사용자의 ADHD 항목 평가 스코어를 산출하는 단계를 포함하는
    인지 상태 평가 장치의 동작 방법.
  5. 제1항에 있어서,
    상기 사용자 단말로부터, 상기 제1 게임 데이터와는 상이한 추가 게임 데이터를 상기 사용자 단말로부터 더 수신하여, 상기 맞춤형 인지 태스크 수행 모델의 정확도 검증을 수행하는 정확도 검증 단계를 더 포함하는
    인지 상태 평가 장치의 동작 방법.
  6. 제1항에 있어서,
    상기 인지 능력 평가 단계는,
    상기 인지 능력 평가에 따른 결과 데이터를 분석 인터페이스로 구성하여 상기 사용자에 대응하여 사전 등록된 보호자 단말로 출력하는 결과 데이터 처리단계를 포함하는
    인지 상태 평가 장치의 동작 방법.
  7. 제1항에 있어서,
    상기 인지 능력 평가 단계는,
    상기 결과 데이터에 기초하여, 사전 설정된 임계치 이하로 평가된 인지 능력 항목에 대응하는 강화 태스크를 추천하는 인지 강화 트랙 추천 단계를 더 포함하는
    인지 상태 평가 장치.
  8. 제1항에 있어서,
    상기 인지 게임 어플리케이션은, 사전 설정된 인지 평가 항목별 태스크 변수 모델에 대응하여, 단계적으로 구성된 복수의 게임 인터페이스 어플리케이션을 포함하고,
    상기 인지 평가 항목별 태스크 변수 모델은, 작업 기억력 변수 모델, 억제력 변수 모델, 분할 주의력 변수 모델, 유연성 변수 모델, 처리 속도 변수 모델, 선택적 주의력 변수 모델 중 적어도 하나를 포함하는
    인지 상태 평가 장치의 동작 방법.
  9. 인지 상태 평가 장치에 있어서,
    사용자의 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 게임 데이터 처리부;
    인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하는 맞춤형 태스크 수행 모델 구성부; 및
    상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 인지 능력 평가부를 포함하는
    인지 상태 평가 장치.
  10. 사용자 단말 장치의 동작 방법에 있어서,
    인지 평가 항목별 사전 설정된 인지 진단 태스크에 대응하는 인지 게임 어플리케이션을 수행하는 단계;
    상기 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터를 추출하는 단계; 및
    상기 제1 게임 데이터를 인지 상태 평가 장치로 전송하는 단계를 포함하고,
    상기 인지 상태 평가 장치는, 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하며, 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하는 장치인
    사용자 단말 장치의 동작 방법.
  11. 제10항에 있어서,
    상기 인지 게임 어플리케이션은, 사전 설정된 인지 평가 항목별 태스크 변수 모델에 대응하여, 단계적으로 구성된 복수의 게임 인터페이스 어플리케이션을 포함하고,
    상기 인지 평가 항목별 태스크 변수 모델은, 작업 기억력 변수 모델, 억제력 변수 모델, 분할 주의력 변수 모델, 유연성 변수 모델, 처리 속도 변수 모델, 선택적 주의력 변수 모델 중 적어도 하나를 포함하는
    사용자 단말 장치의 동작 방법.
  12. 제11항에 있어서,
    상기 작업 기억력 변수 모델에 대응하는 상기 사용자의 반응 입력 정보는, 순차 표시된 일련의 숫자를 역순으로 입력하는 정보이며,
    상기 억제력 변수 모델에 대응하는 상기 사용자의 반응 입력 정보는, 스트룹(stroop) 테스트 질의에 대응하는 객체 선택 정보이며,
    상기 분할 주의력 변수 모델에 대응하는 상기 사용자의 반응 입력 정보는, 서로 다른 색을 갖는 순차적 숫자 입력 선택 정보이며,
    상기 유연성 변수 모델에 대응하는 상기 사용자의 반응 입력 정보는, 카드 분류 기준 제시어에 적합한 카드 선택 정보이며,
    상기 처리 속도 변수 모델에 상기 사용자의 반응 입력 정보는, 모양이 다른 도형 또는 제시된 객체를 선택하는 객체 선택 정보인
    사용자 단말 장치.
    사용자 단말 장치의 동작 방법.
  13. 제12항에 있어서,
    상기 인지 평가 항목별 태스크 변수 모델은, 상기 사용자의 반응 입력 정보로부터 산출되는 정답 스코어 및 정답 소요 시간 정보에 따라 결정되는
    사용자 단말 장치의 동작 방법.
  14. 인지 상태 평가 리포팅 제공 장치에 있어서,
    사용자 단말에서 인지 평가 항목별 사전 설정된 인지 진단 태스크에 대응하는 인지 게임 어플리케이션이 수행되고, 상기 인지 게임 어플리케이션에 대한 반응 입력 정보로부터, 인지 평가를 위한 제1 게임 데이터가 추출되면, 상기 제1 게임 데이터에 대응하여, 인지 상태 평가 장치로부터 분석 결과 인터페이스 정보를 수신하는 통신부; 및
    상기 분석 결과 인터페이스 정보에 기초한 인지 상태 평가 리포팅을 출력하는 출력부;를 포함하고,
    상기 인지 상태 평가 장치는, 인지 태스크별 게임 데이터에 대응하여 인지 아키텍처 기반의 인지 모델이 사전 연관 학습된 인공지능 학습 기반 사용자 맞춤형 인지 모델에, 상기 추출된 제1 게임 데이터를 적용하여, 상기 사용자에 대응하는 맞춤형 인지 태스크 수행 모델을 생성하며, 상기 맞춤형 인지 태스크 수행 모델을 이용하여, 인지 평가 항목별로 선택된 인지 태스크의 대체 수행 결과를 획득하고, 상기 대체 수행 결과에 기초하여 상기 사용자의 상기 인지 항목별 인지 능력을 평가하고, 상기 평가 결과에 따라 상기 분석 결과 인터페이스 정보를 생성하는 장치인
    인지 상태 평가 리포팅 제공 장치.
  15. 제14항에 있어서,
    상기 출력부는, 상기 분석 결과 인터페이스 정보를 다각형의 스파이더맵 형태로 구성한 상기 리포팅을 출력하는
    인지 상태 평가 리포팅 제공 장치.
  16. 제14항에 있어서,
    상기 출력부는,
    학습 기반으로 산출된 성장 회귀 방정식에 기초하여, 상기 사용자 맞춤형 인지 모델에 대응하는 일정 기간 이내의 인지 항목별 인지 능력 성장 예측 데이터를 출력하는
    인지 상태 평가 리포팅 제공 장치.
  17. 제14항에 있어서,
    상기 출력부는,
    상기 분석 결과 인터페이스 중 사전 설정된 인지 상태 항목이 임계치 이하인 경우, 임계치 이하인 상기 인지 상태 항목의 능력을 강화할 수 있는 강화 태스크로 구성된 강화 추천 트랙 정보를 상기 인지 상태 평가 장치로부터 수신하여 출력하는
    인지 상태 평가 리포팅 제공 장치.
  18. 제17항에 있어서,
    상기 강화 추천 트랙 정보는, 상기 강화 태스크에 대응하여 단계적으로 구성된 하나 이상의 게임 정보를 포함하는
    인지 상태 평가 리포팅 제공 장치.
PCT/KR2022/014483 2021-09-27 2022-09-27 학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템 WO2023048548A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2021-0126845 2021-09-27
KR20210126845 2021-09-27

Publications (1)

Publication Number Publication Date
WO2023048548A1 true WO2023048548A1 (ko) 2023-03-30

Family

ID=85720964

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/014483 WO2023048548A1 (ko) 2021-09-27 2022-09-27 학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템

Country Status (2)

Country Link
KR (3) KR20230044976A (ko)
WO (1) WO2023048548A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116898402A (zh) * 2023-07-21 2023-10-20 宁波脑智数字科技有限公司 一种认知能力评估方法、装置、电子设备和存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102578849B1 (ko) * 2023-06-19 2023-09-15 주식회사 메디마인드 사용자의 사회인지능력을 평가하기 위한 특정 컨텐츠를 제공하는 방법 및 이를 이용한 컴퓨팅 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150143212A (ko) * 2014-06-13 2015-12-23 (주) 미디어인터랙티브 인지능력 훈련 장치 및 방법, 그리고 그 방법이 기록된 컴퓨터-판독가능한 저장매체
KR101848630B1 (ko) * 2017-09-06 2018-04-13 주식회사 유비플러스 전통카드 게임 기반의 인지장애 진단 및 관리 시스템
KR20180041089A (ko) * 2015-03-12 2018-04-23 아킬리 인터랙티브 랩스 인크. 인지 능력 측정을 위한 프로세서 구현 시스템 및 방법
JP2020500360A (ja) * 2016-10-24 2020-01-09 アキリ・インタラクティヴ・ラブズ・インコーポレイテッド バイオマーカーまたは他のタイプのマーカーとして構成される認知プラットフォーム
US20210133509A1 (en) * 2019-03-22 2021-05-06 Cognoa, Inc. Model optimization and data analysis using machine learning techniques

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150143212A (ko) * 2014-06-13 2015-12-23 (주) 미디어인터랙티브 인지능력 훈련 장치 및 방법, 그리고 그 방법이 기록된 컴퓨터-판독가능한 저장매체
KR20180041089A (ko) * 2015-03-12 2018-04-23 아킬리 인터랙티브 랩스 인크. 인지 능력 측정을 위한 프로세서 구현 시스템 및 방법
JP2020500360A (ja) * 2016-10-24 2020-01-09 アキリ・インタラクティヴ・ラブズ・インコーポレイテッド バイオマーカーまたは他のタイプのマーカーとして構成される認知プラットフォーム
KR101848630B1 (ko) * 2017-09-06 2018-04-13 주식회사 유비플러스 전통카드 게임 기반의 인지장애 진단 및 관리 시스템
US20210133509A1 (en) * 2019-03-22 2021-05-06 Cognoa, Inc. Model optimization and data analysis using machine learning techniques

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116898402A (zh) * 2023-07-21 2023-10-20 宁波脑智数字科技有限公司 一种认知能力评估方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
KR20230044975A (ko) 2023-04-04
KR20230044976A (ko) 2023-04-04
KR20230044977A (ko) 2023-04-04

Similar Documents

Publication Publication Date Title
WO2023048548A1 (ko) 학습 기반 사용자 맞춤형 인지 모델을 이용하여, 인지검사 태스크를 대체 수행하는 인지모델 기반의 인지 상태 평가 시스템
Anagnostopoulou et al. Artificial intelligence in autism assessment
US10854335B2 (en) Computer aided medical method and medical system for medical prediction
JP7307926B2 (ja) 被検体の致命的症状の発生を早期に予測するための予測結果を生成する方法、及びそれを利用する装置
US11670421B2 (en) Method and system enabling digital biomarker data integration and analysis for clinical treatment impact
Dong et al. Modeling infection with multi-agent dynamics
Rowe et al. How to replace a physiotherapist: artificial intelligence and the redistribution of expertise
JP2020184185A (ja) 児童相談所などにおける情報処理方法及び装置
Curiac et al. Bayesian network model for diagnosis of psychiatric diseases
Lelis et al. Non-invasive meningitis diagnosis using decision trees
Lin et al. AI-driven decision making for auxiliary diagnosis of epidemic diseases
CN112397195B (zh) 用于生成体格检查模型的方法、装置、电子设备和介质
Heinze et al. A hybrid artificial intelligence system for assistance in remote monitoring of heart patients
TWI823277B (zh) 醫療系統、控制方法以及非暫態電腦可讀取儲存媒體
Badar et al. Applications of AI and ML in IoT
Voronenko et al. Using bayesian methods for predicting the development of children Autism
KR20230045628A (ko) 인지 진단 게임을 이용한 인지 진단 평가를 위한 컴퓨터 프로그램 기록매체
JP2022082408A (ja) 精神疾患診断プロトコルを自動探索するためのコンピュータシステムおよびその方法
KR20230045626A (ko) 학습 기반 사용자 맞춤형 인지 모델 기반의 인지 상태 진단 방법
KR20230045622A (ko) 인지 상태 진단 프로그램 기록매체
KR20230045627A (ko) 태스크 수행 모델 기반의 인지 상태 진단을 위한 컴퓨터 프로그램
KR20230044581A (ko) 인지 상태 진단 장치의 동작 프로그램
KR20230045625A (ko) 학습 기반 사용자 맞춤형 인지 모델 기반의 인지 상태 진단 프로그램
KR20230045623A (ko) 사용자 맞춤형 인지 모델 기반의 인지 상태 진단 시스템
KR20230045624A (ko) 학습 기반 사용자 맞춤형 인지 모델 기반의 인지 상태 진단 프로그램

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22873250

Country of ref document: EP

Kind code of ref document: A1