KR101899405B1 - A method for implementing eyesight strengthen software based on computer and smartphone - Google Patents

A method for implementing eyesight strengthen software based on computer and smartphone Download PDF

Info

Publication number
KR101899405B1
KR101899405B1 KR1020160150014A KR20160150014A KR101899405B1 KR 101899405 B1 KR101899405 B1 KR 101899405B1 KR 1020160150014 A KR1020160150014 A KR 1020160150014A KR 20160150014 A KR20160150014 A KR 20160150014A KR 101899405 B1 KR101899405 B1 KR 101899405B1
Authority
KR
South Korea
Prior art keywords
enhancement
user
visual
visual acuity
exercise
Prior art date
Application number
KR1020160150014A
Other languages
Korean (ko)
Other versions
KR20180052892A (en
Inventor
장태규
Original Assignee
주식회사 3디나라
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 3디나라 filed Critical 주식회사 3디나라
Priority to KR1020160150014A priority Critical patent/KR101899405B1/en
Publication of KR20180052892A publication Critical patent/KR20180052892A/en
Application granted granted Critical
Publication of KR101899405B1 publication Critical patent/KR101899405B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06QDATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTING PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTING PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06KRECOGNITION OF DATA; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K9/00Methods or arrangements for reading or recognising printed or written characters or for recognising patterns, e.g. fingerprints
    • G06K9/00597Acquiring or recognising eyes, e.g. iris verification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, TV cameras, video cameras, camcorders, webcams, camera modules for embedding in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/225Television cameras ; Cameras comprising an electronic image sensor, e.g. digital cameras, video cameras, camcorders, webcams, camera modules specially adapted for being embedded in other devices, e.g. mobile phones, computers or vehicles
    • H04N5/2257Mechanical and electrical details of cameras or camera modules for embedding in other devices

Abstract

본 발명은 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법으로서 개인별로 선호하는 컬러, 테마별 화면을 선택하고 표적물의 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함한 시력강화운동모델을 다양하게 설정하고, 지속적으로 수집되는 각 사용자별 눈의 크기나 모양, 안경착용여부, 시력 또는 이들의 조합을 포함한 스타일 정보를 기계학습(machine learning)을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 카메라로 촬영하여 분석한 특정 사용자의 스타일 정보에 따른 최적의 시력강화운동모델을 추출하여 제공함으로써, 각 사용자들이 자신에게 적합한 인공지능(AI) 기반 맞춤형 시력강화운동모델을 통해 시력을 강화시키기 위한 훈련을 수행할 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법에 관한 것이다.The present invention relates to a method of implementing vision enhancing software based on a computer and a smart phone, and is a method of selecting a screen for each color or theme that is preferred by an individual, and various kinds of visual enhancing exercise models including a target moving pattern, a perspective moving pattern, And the style information including the size, shape, eyeglass wearing, sight, or a combination of the eyes of each user collected continuously is analyzed through machine learning to generate a proper visual strengthening motion model for each group Based on the visual augmentation movement model generated for each group, the optimal visual augmentation exercise model is extracted and provided according to the style information of the specific user captured and analyzed by the camera, Customized vision-enhancing exercises allow you to perform training to enhance your vision It relates to a visual enhancement software implementation based on computers and smartphones.

Description

컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법{A METHOD FOR IMPLEMENTING EYESIGHT STRENGTHEN SOFTWARE BASED ON COMPUTER AND SMARTPHONE}FIELD OF THE INVENTION [0001] The present invention relates to a method and an apparatus for implementing a vision-enhancing software based on a computer and a smartphone,
본 발명은 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법으로서 개인별로 선호하는 컬러, 테마별 화면을 선택하고 표적물의 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함한 시력강화운동모델을 다양하게 설정하고, 지속적으로 수집되는 각 사용자별 눈의 크기나 모양, 안경착용여부, 시력 또는 이들의 조합을 포함한 스타일 정보를 기계학습(machine learning)을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 카메라로 촬영하여 분석한 특정 사용자의 스타일 정보에 따른 최적의 시력강화운동모델을 추출하여 제공함으로써, 각 사용자들이 자신에게 적합한 인공지능(AI) 기반 맞춤형 시력강화운동모델을 통해 시력을 강화시키기 위한 훈련을 수행할 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법에 관한 것이다.The present invention relates to a method of implementing vision enhancing software based on a computer and a smart phone, and is a method of selecting a screen for each color or theme that is preferred by an individual, and various kinds of visual enhancing exercise models including a target moving pattern, a perspective moving pattern, And the style information including the size, shape, eyeglass wearing, sight, or a combination of the eyes of each user collected continuously is analyzed through machine learning to generate a proper visual strengthening motion model for each group Based on the visual augmentation movement model generated for each group, the optimal visual augmentation exercise model is extracted and provided according to the style information of the specific user captured and analyzed by the camera, Customized vision-enhancing exercises allow you to perform training to enhance your vision It relates to a visual enhancement software implementation based on computers and smartphones.
일반적으로 인체의 눈은 시각정보를 수집하여 뇌로 전달하는 기능을 갖고 있어 카메라와 같다고 말하지만 실제로 카메라하고는 비교도 안 될 만큼 정교하고 복잡한 과정을 통하여 일을 수행하고 있다.In general, the human eye collects visual information and transmits it to the brain, which is said to be the same as a camera.
눈이 올바른 정보를 수집하여 시기능이라고 하는 통로를 통해 뇌로 전달하기 위해서는 모든 기능이 올바르게 수행되어야 한다.All functions must be performed correctly in order for the eye to collect the correct information and transmit it to the brain through the path of visual activity.
즉 상이 정확히 망막에 맺히도록 하는 조절(수정체가 두꺼워지고 얇아지는 것)이 이루어져 먼 곳을 볼 때와 가까운 곳을 볼 때 조절에 의하여 정확히 상이 맺히도록 하는 역할을 해야 하고, 빛이 적당한 정도로 눈에 들어가도록 동공의 수축과 확대가 적절히 이루어져야 하며, 시선이 정확히 물체에 맞도록 안구가 움직여야 한다. 이러한 기능들은 대부분 자동적으로 매우 짧은 순간에 이루어진다.In other words, it is necessary to control the image so that the image is accurately formed on the retina (thickening and thinning of the lens) Contraction and enlargement of the pupil should be done properly, and the eyeball should move so that the line of sight is exactly aligned with the object. Most of these functions are done automatically in very short moments.
한편, 현대 사회에서는 대부분의 사람들이 컴퓨터, 스마트폰, 태블릿 등의 각종 통신기기를 사용하고 있으며, 이로 인해 통신기기에 눈의 초점이 맞춰져 있어 안 근육이 굳어 시력이 점차 떨어지게 되었다. 이와 같은 이유로 조기 노안이 많이 오게 되어 신체적으로는 건강하나 노안으로 인한 삶의 질 저하와 국가적으로도 많은 노동력 생산성 저하를 가져오는 결과를 빚고 있다.On the other hand, in the modern society, most people use various communication devices such as a computer, a smart phone, and a tablet, and as a result, the eyes are focused on the communication device, and the visual acuity of the eye muscles is getting harder. For this reason, early presbyopia has come to a great extent, resulting in a decrease in the quality of life due to health, but also in the national economy.
이에 따라 최근에는 안 근육에 대하여 약간의 회복 훈련을 시행함으로써 눈의 기능을 정상으로 되찾을 수 있다는 이론을 토대로, 컴퓨터와 같은 별도의 제어장치와 연결된 디스플레이로 점을 점멸하거나 위치를 가변시켜 출력하는 시력강화장치가 개발되었다.Therefore, based on the theory that the eye function can be restored to normal by performing a little recovery training on the eye muscles, a point connected to a separate control device such as a computer is blinked or the position is changed and output A visual enhancement device was developed.
그러나, 상술한 바와 같은 종래의 시력강화장치는, 장시간 사용할 경우 훈련효율 및 사용 신뢰도가 저하되고, 장비의 크고 무거웠기 때문에 사용자가 간편하게 휴대할 수 없었다. 또한, 고가의 비용을 들여 구입하여 사용하여야 하며, 고글과 같은 장비를 착용하고 사용하여야 하기 때문에 사용이 불편하여 꾸준하게 사용하기 불편한 문제점이 있었다.However, in the conventional visual acuity enhancing apparatus as described above, the training efficiency and reliability of use are reduced when the apparatus is used for a long period of time, and since the apparatus is large and heavy, the user can not carry it easily. In addition, it is necessary to purchase and use at high cost, and it is inconvenient to use because it is inconvenient to use because it is required to wear equipment such as goggles and use it.
따라서 본 발명은 이러한 문제점을 해결하기 위한 것으로, 지속적으로 수집되는 각 사용자별 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함한 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 카메라로 촬영하여 분석한 특정 사용자의 안구 근육의 상태 정보에 따른 최적의 시력강화운동모델을 추출하여 제공함으로써, 각 사용자들이 자신에게 적합한 시력강화운동모델을 통해 시력을 강화시키기 위한 훈련을 수행할 수 있는 방안을 제시하고자 한다.Accordingly, the present invention has been made to solve the above-mentioned problems, and it is an object of the present invention to provide an apparatus and a method for acquiring style information including a size, a shape, an eye wear, a visual acuity, Based on the visual acuity enhancement model generated for each group, the optimal visual acuity enhancement model is extracted according to the state information of the eye muscles of the specific user, This paper proposes a method for each user to perform the training to enhance his / her eyesight through the sight enhancement model suitable for him / herself.
또한, 본 발명은 각 사용자들이 시력강화운동을 수행할 때, 카메라로 촬영하여 분석한 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시킴으로써, 각 사용자별 맞춤형 프로그램을 제공하여 최적의 시력강화운동의 효율을 높일 수 있는 방안을 제시하고자 한다.Further, according to the present invention, when each user performs a visual acuity strengthening exercise, the speed of the target movement or the perspective movement is changed based on the reaction speed according to the eye movement of the user captured and analyzed by the camera, To improve the efficiency of the optimal visual acuity exercise.
다음으로 본 발명의 기술 분야에 존재하는 선행기술에 대하여 간단하게 설명하고, 이어서 본 발명이 상기 선행기술에 비해서 차별적으로 이루고자 하는 기술적 사항에 대해서 기술하고자 한다.Next, a brief description will be given of the prior arts that exist in the technical field of the present invention, and technical matters which the present invention intends to differentiate from the prior arts will be described.
먼저 한국등록특허 제1501546호(2015.03.12.공고)는 시력 강화 운동 서비스 제공 방법에 관한 것으로서, 보다 구체적으로는 시력 강화 운동 서비스를 제공하는 서비스 제공 서버가, (1) 자연물을 촬영한 복수 개의 사진을 순차적으로 사용자 단말기에 전송하는 단계; (2) 숫자가 기재된 도형이 위치를 바꿔가며 이동하고, 상기 숫자는 상기 사용자 단말기에 표시되는 순서에 대응하여 변하는 영상을 상기 사용자 단말기에 전송하는 단계; (3) 미리 정해진 단위별로 글자의 크기가 다른 복수의 구절 또는 문장이 표시되되, 상기 복수의 구절 또는 문장은 미리 정해진 범위에서는 상하가 바른 글자로 표시되고, 다른 미리 정해진 범위에서는 상하가 뒤집힌 글자로 표시된 영상을 상기 사용자 단말기에 전송하는 단계; 및 (4) 고리가 잘린 부분이 상이한 복수의 란돌트 고리가 하나씩 순차 표시되는 영상을 전송하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.More specifically, a service providing server for providing a sight enhancement exercise service is provided with (1) a plurality of (e.g., a plurality of Sequentially transmitting photographs to a user terminal; (2) transmitting a figure in which figures are moved in different positions, the number of which changes according to the order displayed on the user terminal, to the user terminal; (3) A plurality of phrases or sentences having different letter sizes are displayed in predetermined units, and the plurality of phrases or sentences are displayed in a predetermined range and the upper and lower letters are displayed in a correct letter. In another predetermined range, Transmitting a displayed image to the user terminal; And (4) transmitting an image in which a plurality of random rings with different ring-cut portions are sequentially displayed one by one.
상기 선행기술은 사진 및 영상 전송을 통해 시력 강화 운동 서비스를 제공함으로써, 사용자가 스크린이 구비되고 네트워크가 가능한 전자 장치만 있으면 시간과 장소에 구애받지 않고 간편하게 시력 강화 운동 서비스를 제공받을 수 있는 것으로서, 숫자나 도형이 포함된 움직이는 영상을 토대로 시력 강화 운동 서비스를 제공하는 점에서 본 발명의 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함한 시력강화운동모델을 사용자에게 제공하는 구성과 일부 유사성이 있다.The prior art provides a sight enhancement exercise service through photo and video transmission so that a user can easily receive a sight enhancement exercise service regardless of time and place if the user has an electronic device equipped with a screen and a network, The present invention provides a vision enhancing exercise service based on a moving image including a figure or a figure. The present invention provides a vision enhancing exercise service for improving visual acuity including a color, a theme screen, a target position movement pattern, a perspective movement pattern, There is some similarity with the configuration that provides the user with an enhanced motion model.
하지만, 본 발명은 지속적으로 수집되는 각 사용자별 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 특정 사용자의 안구 움직임, 근원거리 포착시간 등의 정보에 따른 최적의 시력강화운동모델을 추출하여 제공하는 기술적 구성을 제시하고 있기 때문에, 상기 선행기술의 숫자나 도형이 포함된 움직이는 영상을 토대로 시력 강화 운동 서비스를 제공하는 구성과 비교해 볼 때 기술적 특징의 차이점이 분명하다. 또한, 본 발명의 시력강화운동을 수행하는 각 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시켜 시력강화운동의 효율을 높일 수 있는 기술적 구성은 상기 선행기술에서 제시하지 못하는 특징적 구성이다.However, according to the present invention, the style information of each user collected continuously is analyzed through machine learning to generate an appropriate visual strengthening exercise model for each group, and based on the visual strengthening exercise model generated for each group, The present invention provides a technique of extracting and providing an optimal visual acuity enhancement exercise model based on information such as a distance between a subject and a source distance and providing a visual enhancement exercise service based on moving images including figures and figures of the prior art The difference in technical characteristics is obvious. In addition, the technical structure that can improve the efficiency of the visual enhancement movement by changing the speed of the target movement or the perspective movement based on the reaction speed according to the eye movement of each user performing the visual acuity enhancement exercise of the present invention is disclosed in the prior art It is a characteristic composition that can not be done.
또한, 한국공개특허 제2015-0017535호(2015.02.17.공개)는 안구 훈련 장치 및 방법에 관한 것으로, 특히 안구 훈련에 대한 이미지를 디스플레이하고, 안구 훈련의 성과를 스마트폰이나 컴퓨터 또는 노트북에 장착된 카메라로 안구의 움직임을 촬영하여 인식하도록 함으로써 정확한 안구 훈련이 되었는지를 판단하도록 한 스마트폰을 이용한 안구 훈련 장치 및 방법에 관한 것이다.Korean Laid-open Patent Application No. 2015-0017535 (published on Feb. 17, 2015) discloses an apparatus and method for training an eyeball, particularly displaying an image of the training of the eyeball and mounting the result of the eyeball training on a smartphone or a computer or a notebook The present invention relates to an eyeball training apparatus and method using a smartphone, which can determine whether an eyeball training has been performed by capturing and recognizing movement of an eyeball with a camera.
상기 선행기술은 안구 훈련 수행 중에 안구의 움직임을 인식하여 디스플레이되는 이미지를 추종하는가를 판단함으로써 안구 훈련 상태와 그 성과를 확인할 수 있는 것으로서, 카메라를 통해 사용자의 안구 움직임을 인식하는 점에서 본 발명의 카메라로 촬영한 사용자의 안구 움직임을 분석하여 스타일 정보를 확인하는 구성과 일부 유사성이 있다.The prior art is capable of recognizing the movement of the eyeball during the training of the eyeball and determining whether it follows the displayed image, thereby recognizing the eyeball training state and its performance. In view of recognizing the movement of the user's eyeball through the camera, There is some similarity with the structure of analyzing the eye movement of a user photographed by a camera to check the style information.
하지만, 상기 선행기술은 본 발명에서 제시하고 있는 지속적으로 수집되는 각 사용자별 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 특정 사용자의 스타일 정보에 따른 최적의 시력강화운동모델을 추출하여 제공하는 기술적 구성은 물론, 시력강화운동을 수행하는 각 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시켜 시력강화운동의 효율을 높일 수 있는 기술적 구성을 전혀 제시하고 있지 못하고 있으므로 기술적 구성의 차이점이 명확함을 확인할 수 있다.However, according to the prior art, the continuously-collected style information of each user collected in the present invention is analyzed through machine learning to generate an appropriate visual enhancement exercise model for each group, and a visual enhancement exercise model generated for each group Based on the user's eye movements, the speed of target movement or perspective movement is calculated based on the speed of each user's eye movements. It is clear that the difference in technical composition is clear because it does not suggest any technical structure that can enhance the efficiency of the visual enhancement exercise.
또한, 한국공개특허 제2007-0113696호(2007.11.29.공개)는 TV, 컴퓨터, PDA, PMP. 휴대폰, MP3, 전광판, 네비게이션, 게임기 등의 화면 표시부에 통상적인 화면 표시물과 함께 시각훈련 또는 안구근력강화훈련 또는 시력강화훈련 등을 위한 것으로서 연속적으로 배열된 시각 이미지 요소를 이동시켜 시각 인식토록 하는 화면 표시물을 동시에 표시한 것을 특징으로 하는 화면 표시 방법 및 장치에 관한 것이다.Korean Patent Publication No. 2007-0113696 (published on November 29, 2007) discloses a TV, a computer, a PDA, and a PMP. A visual display element such as a mobile phone, an MP3 display board, a navigation system, a game machine, etc., for visual training, eye muscle strength training, or visual acuity training, And a screen display object are displayed at the same time.
상기 선행기술은 주기적이며 지속적으로 시각훈련 또는 안구근력강화훈련 또는 시력강화훈련을 알차게 수행할 수 있는 효과를 제공하는 것으로서, 본 발명의 시력강화운동모델을 주기적으로 추적, 관리하는 구성과 일부 유사성이 있다.The prior art provides a periodical and continuous effect of performing visual training, eye muscle strengthening training, or visual acuity enhancement training. The prior art technique has some similarities with the configuration for periodically tracking and managing the visual enhancement exercise model of the present invention have.
하지만, 상기 선행기술은 본 발명에서 제시하고 있는 지속적으로 수집되는 각 사용자별 안구의 움직임, 원근 조절시간 등에 대한 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 특정 사용자의 안구 정보에 따른 최적의 시력강화운동모델을 추출하여 제공하는 기술적 구성, 시력강화운동을 수행하는 각 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시켜 시력강화운동의 효율을 높일 수 있는 기술적 구성을 전혀 제시하고 있지 못하므로 구성상 차이점이 분명하다.However, in the above-described prior art, information on eye movement, perspective adjustment time, and the like of each user collected continuously is analyzed through machine learning to generate a visual enhancement exercise model suitable for each group, Based on the generated visual acuity enhancement model, a technical configuration for extracting and providing an optimum visual acuity enhancement model according to the eye information of a specific user, a target configuration based on the reaction speed according to each eye movement of each user performing the visual acuity enhancement Or the speed of perspective movement to improve the efficiency of the visual enhancement movement, it does not provide any technical structure.
즉 상기 언급한 각각의 선행기술들은 대부분 시력강화를 위한 훈련을 제공하는 점에서는 일부 유사한 구성을 제시하고 있으나, 각 사용자의 안구 및 시력 정보를 확인하여 최적의 시력강화운동모델을 선정하여 제공하며, 각 사용자의 안구 움직임에 의한 반응속도를 토대로 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시킬 수 있는 본 발명의 구성과는 기술적 차이점이 분명한 것이다.That is, although each of the above-described prior arts provides some similar structures in that most training for enhancing visual acuity is provided, an optimal visual acuity enhancement exercise model is selected and provided by confirming the eye and sight information of each user, There is a technical difference from the configuration of the present invention in which the speed of the target movement or the perspective movement of the visual enhancement exercise model can be changed based on the reaction speed of each user's eye movement.
본 발명은 상기와 같은 문제점을 해결하기 위해 창작된 것으로서, 지속적으로 수집되는 각 사용자별 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함한 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 각 그룹별로 생성된 시력강화운동모델을 토대로 카메라로 촬영하여 분석한 특정 사용자의 안구 근육의 상태 정보에 따른 최적의 시력강화운동모델을 추출하여 제공함으로써, 각 사용자들이 자신에게 적합한 인공지능 기반의 개인 맞춤형 시력강화운동모델을 통해 시력을 강화시키기 위한 훈련을 수행할 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법을 제공하는 것을 목적으로 한다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and it is an object of the present invention to provide an information processing apparatus and a method thereof, in which style information including a size, a shape, a wear state of eyeglasses, a visual acuity, And the optimal visual acuity training model according to the state information of the eye muscles of the specific user, which is captured and analyzed by a camera based on the visual acuity enhancement motion model generated for each group, To provide a visualization software implementation method based on a computer and a smart phone capable of performing training for enhancing visual acuity through a personalized visual acuity training model based on artificial intelligence suitable for each user .
또한, 본 발명은 각 사용자들이 자신에게 적합한 최적의 시력강화운동모델을 통해 시력강화운동을 수행할 때, 카메라로 촬영하여 분석한 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시킴으로써, 각 사용자별 시력강화운동의 효율을 높일 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법을 제공하는 것을 다른 목적으로 한다.The present invention also provides a method for enhancing the visual acuity of a user, which is performed by a user using an optimal visual acuity strengthening exercise model suitable for his or her own use, Another object of the present invention is to provide a method of implementing a vision-enhancing software based on a computer and a smart phone, which can improve the efficiency of the visual enhancement exercise for each user by changing the speed.
또한, 본 발명은 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 각 사용자별로 지속적으로 추적, 관리함으로써, 각 사용자들이 통계 정보를 토대로 시력강화운동의 훈련성과나 시력향상여부를 손쉽게 확인할 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법을 제공하는 것을 또 다른 목적으로 한다.Further, according to the present invention, each user continuously tracks and manages the pupil response speed, training time, comparison data with other persons, or a combination thereof by up-down and left-right movement, zigzag movement and perspective movement, It is another object of the present invention to provide a method of implementing visual enhancement software based on a computer and a smart phone, which can easily confirm the improvement of visual acuity and the training result of the visual enhancement exercise.
또한, 본 발명은 시력강화운동을 수행하는 사용자의 눈동자가 카메라 인식범위를 벗어나면 경고신호를 표시하거나 경고음을 출력함으로써, 시력강화운동에 집중하도록 하여 훈련효과를 높일 수 있는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법을 제공하는 것을 또 다른 목적으로 한다.Further, the present invention is based on a computer and a smart phone capable of enhancing a training effect by allowing a user to concentrate on a visual acuity strengthening exercise by displaying a warning signal or outputting a warning sound when a pupil of a user performing a visual acuity strengthening exercise moves out of a camera recognition range Another object of the present invention is to provide a method of implementing a visual enhancement software.
또한, 본 발명은 친구, 가족, 지인들 간에 그룹을 형성하고, 서로의 시력강화운동에 따른 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 훈련데이터를 그래프나 수치로 구분하여 표시해 줌으로써, 그룹 내 구성원들이 상호간에 훈련에 관련된 데이터 공유를 통해 발전정보를 확인하고 경쟁을 유도하여 시력향상을 수행하도록 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법을 제공하는 것을 또 다른 목적으로 한다.In addition, the present invention forms groups among friends, families, and acquaintances, and displays training data such as a pupil movement speed and a perspective control speed of a lens in a graph or a numerical value, The present invention also provides a method of implementing a vision-enhancing software based on a computer and a smart phone, which enables a user to confirm development information through mutual sharing of data related to training,
본 발명의 일 실시 예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치는, 시력강화운동을 수행하는 사용자들의 눈에 대한 정보를 수집하고, 각각의 시력, 안구 조절근육의 운동 정도 별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑하고, 그룹핑된 각각의 클러스터별 시력강화운동모델을 생성하는 시력강화운동모델 생성부; 및 사용자 단말기에서 촬영한 특정 사용자의 스타일 정보를 분석하여 상기 시력강화운동모델 생성부를 통해 그룹핑된 복수 개의 클러스터 중 어느 클러스터에 해당하는지를 확인하고, 확인된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자가 수행할 시력강화운동모델로 추출하는 시력강화운동모델 추출부;를 포함하는 것을 특징으로 한다.According to an embodiment of the present invention, an apparatus for realizing a visual enhancement software based on a computer and a smartphone collects information on eyes of users performing a visual acuity exercise, A visual enhancement motion model generation unit for performing clustering to group into a plurality of clusters, and generating a clustered visual acuity enhancement motion model for each group; And analyzing style information of a specific user photographed by the user terminal to check which cluster among a plurality of clusters grouped through the visual enhancement motion model generation unit, And a visual enhancement motion model extracting unit that extracts a visual enhancement motion model to be performed.
그리고 상기 스타일 정보는, 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함하는 것을 특징으로 한다.The style information may include eye size, shape, wear of glasses, visual acuity, degree of motion of the eye regulating muscles, or a combination thereof.
그리고 상기 시력강화운동모델은, 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함하며, 적어도 하나 이상 설정되어 있는 것을 특징으로 한다.The visual acuity enhancement movement model includes at least one of a color for eliminating eye fatigue, a theme screen, a target position movement pattern, a perspective movement pattern, or a combination thereof.
그리고 상기 시력강화 소프트웨어 구현 장치는, 상기 시력강화운동모델 추출부에서 추출된 시력강화운동모델을 상기 사용자 단말기로 제공하는 시력강화운동 수행부;를 더 포함하며, 상기 시력강화운동 수행부는, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 상기 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공할 수 있는 것을 특징으로 한다.And a visual acuity enhancement exercise performing unit that provides the visual acuity enhancement exercise model extracted by the visual acuity enhancement exercise model extracting unit to the user terminal, And the speed of the target movement or perspective movement of the visual enhancement exercise model is calculated based on the analyzed reaction speed. Can be changed and provided.
그리고 상기 시력강화운동 수행부는, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하고, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하며, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 것을 특징으로 한다.Further, the visual acuity strengthening exercise performing unit automatically adjusts the target speed according to the eye muscular agility for each user performing the visual acuity strengthening exercise based on the analysis of the pupil information of the user photographed by the camera, and analyzes the pupil information of the user photographed by the camera , The user adjusts the target's perspective velocity according to the ability of the user to adjust the perspective of the eye muscles according to the ability of the user to perform the visual acuity strengthening exercise based on the user's visual acuity information, The size and the sharpness of the target are automatically adjusted according to the size of the target.
그리고 상기 시력강화 소프트웨어 구현 장치는, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 데이터베이스에 각 사용자별로 누적, 저장하는 추적 관리부;를 더 포함하며, 상기 추적 관리부는, 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기로 제공하는 것을 특징으로 한다.The apparatus for realizing the visual acuity enhancing software may further include a visual acuity enhancing unit for performing visual acuity enhancement through the visual enhancement exercise model, And a tracking manager for accumulating and storing time, comparison data with other persons, or a combination thereof on a database for each user, wherein the tracking manager is configured to, when the users performing the eyesight enhancing exercise form a group, And provides training data according to the visual acuity enhancement exercises performed by the members to the respective user terminals belonging to the group.
그리고 상기 시력강화 소프트웨어 구현 장치는, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 눈동자가 기 설정되어 있는 카메라 인식범위를 벗어나면 경고신호를 표시하거나 경고음을 출력하는 경고 발생부;를 더 포함하는 것을 특징으로 한다.The visual acuity enhancing software implementing apparatus displays a warning signal or outputs a warning sound when the pupil of the user photographed by the user terminal performing the visual acuity enhancement movement is out of the camera recognition range through the visual acuity enhancement exercise model And an alarm generating unit for generating a warning signal.
그리고 상기 시력강화운동모델 생성부는, 상기 사용자 단말기를 통해 시력강화운동을 수행하는 모든 사용자들의 스타일 정보를 수집하는 데이터 수집부; 상기 데이터 수집부에서 수집한 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 클러스터 생성부; 및 상기 클러스터 생성부를 통해 생성된 각각의 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 시력강화운동모델을 생성하는 모델 생성부;를 포함하는 것을 특징으로 한다.The visual enhancement movement model generation unit may include: a data collection unit for collecting style information of all users performing the visual enhancement exercise through the user terminal; A cluster generating unit for generating a plurality of clusters by performing machine learning based on each user's style information collected by the data collecting unit and grouping them by similar patterns; And a model generating unit that learns a plurality of pre-set visual acuity enhancement motion models for each of the clusters generated through the clustering unit and generates a cluster-specific visual acuity enhancement motion model.
그리고 상기 시력강화운동모델 추출부는, 상기 사용자 단말기로부터 입력되는 카메라 촬영 데이터를 토대로 특정 사용자의 스타일 정보를 분석하는 스타일 분석부; 상기 스타일 분석부를 통해 분석된 특정 사용자의 스타일 정보와 상기 시력강화운동모델 생성부에서 생성된 복수의 클러스터를 매칭하고, 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하는 클러스터 선택부; 및 상기 클러스터 선택부에서 선택된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자 단말기에 제공할 시력강화운동모델로 선택하는 모델 선택부;를 포함하는 것을 특징으로 한다.The visual enhancement motion model extracting unit may include a style analyzer for analyzing style information of a specific user based on camera shot data input from the user terminal; A cluster selector for matching the style information of a specific user analyzed through the style analyzer with a plurality of clusters generated by the visual enhancement motion model generation unit and selecting a cluster corresponding to style information of the user based on the matching result; And a model selection unit that selects a visual acuity enhancement motion model belonging to a specific cluster selected by the cluster selection unit as a visual acuity enhancement motion model to be provided to the user terminal.
또한, 본 발명의 일 실시예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법은, 시력강화운동 제공 서버에서, 시력강화운동을 수행하는 사용자들의 스타일 정보를 수집하고, 각각의 스타일별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑하고, 그룹핑된 각각의 클러스터별 시력강화운동모델을 생성하는 시력강화운동모델 생성 단계; 및 상기 시력강화운동 제공 서버에서, 사용자 단말기에서 촬영한 특정 사용자의 스타일 정보를 분석하여 상기 시력강화운동모델 생성 단계에서 생성한 복수 개의 클러스터 중 어느 클러스터에 해당하는지를 확인하고, 확인된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자가 수행할 시력강화운동모델로 추출하는 시력강화운동모델 추출 단계;를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method for enhancing visual acuity software based on a computer and a smart phone, the method comprising the steps of: collecting style information of users performing a visual acuity strengthening exercise; Clustering to group into a plurality of clusters, and generating a visual acuity strengthening motion model for each of the clusters; And the server for providing visual acuity enhancement analyzes the style information of a specific user photographed by the user terminal to check which cluster among the plurality of clusters generated in the visual acuity enhancement movement model generation step, And a visual enhancement motion model extraction step of extracting the visual enhancement motion model as a visual enhancement motion model to be performed by the user.
그리고 상기 시력강화 소프트웨어 구현 방법은, 상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델 추출 단계를 통해 추출한 시력강화운동모델을 상기 사용자 단말기로 제공하는 시력강화운동 수행 단계;를 더 포함하며, 상기 시력강화운동 수행 단계는, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 상기 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공할 수 있는 것을 특징으로 한다.The visual enhancement software implementation method may further include a visual enhancement exercise step of providing the visual enhancement exercise model extracted through the visual enhancement exercise model extraction step to the user terminal in the visual enhancement exercise providing server, The step of performing the visual acuity strengthening exercise may include analyzing a reaction speed according to eye movement of a user photographed by the user terminal performing the visual acuity enhancement exercise through the visual acuity enhancement exercise model, And the speed of the target movement or the perspective movement can be changed.
그리고 상기 시력강화운동 수행 단계는, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하고, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하며, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 것을 특징으로 한다.In the step of performing the visual acuity strengthening exercise, the target speed is automatically adjusted according to the eye muscle agility according to the user performing the visual acuity strengthening exercise based on the analysis of the pupil information of the user photographed by the camera, and the pupil information Based on the analysis, it is possible to automatically adjust the target's perspective velocity according to the ability of the user to adjust the perspective of the eye muscles to perform the visual acuity strengthening exercise, and to perform the visual enhancement exercise based on the user's pupil information analysis And automatically adjusts the target size and sharpness according to agility.
그리고 상기 시력강화 소프트웨어 구현 방법은, 상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 데이터베이스에 각 사용자별로 누적, 저장하는 추적 관리 단계;를 더 포함하며, 상기 추적 관리 단계는, 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기로 제공하는 것을 특징으로 한다.In the visual accequence enhancement software providing server, the visual accepter enhancement software providing method may further include a step of performing visual acuity enhancement through the visual accequity enhancement exercise model, And a tracking management step of accumulating and storing the pupil reaction rate, the training time, the comparison data with other persons, or a combination thereof in the database for each user, and the tracking management step includes: And provides the training data according to the visual acuity enhancement exercises performed by the respective members in the group to the respective user terminals belonging to the group when the users form a group.
그리고 상기 시력강화 소프트웨어 구현 방법은, 상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 눈동자가 기 설정되어 있는 카메라 인식범위를 벗어나면 경고신호를 표시하거나 경고음을 출력하는 경고 발생 단계;를 더 포함하는 것을 특징으로 한다.The method for realizing the visual enhancement software may further include a step of, when the pupil of the user photographed by the user terminal performing the visual acuity enhancement movement through the visual acuity enhancement motion model is out of the camera recognition range And an alarm generating step of displaying a warning signal or outputting a warning sound.
그리고 상기 시력강화운동모델 생성 단계는, 상기 시력강화운동 제공 서버에서, 상기 사용자 단말기를 통해 시력강화운동을 수행하는 모든 사용자들의 스타일 정보를 수집하는 데이터 수집 단계; 상기 데이터 수집 단계에서 수집한 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 클러스터 생성 단계; 및 상기 클러스터 생성 단계를 통해 생성된 각각의 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 시력강화운동모델을 생성하는 모델 생성 단계;를 포함하는 것을 특징으로 한다.And the step of generating the visual acuity-enhancing motion model comprises: a data collecting step of collecting, at the visual acuity enhancement providing server, style information of all users performing the visual acuity enhancement through the user terminal; A cluster generating step of generating a plurality of clusters by performing machine learning based on each user's style information collected in the data collecting step and grouping them by similar patterns; And a model generation step of learning a plurality of pre-set visual acuity enhancement motion models for respective clusters generated through the cluster generation step to generate visual acuity enhancement motion models for respective clusters.
그리고 상기 시력강화운동모델 추출 단계는, 상기 시력강화운동 제공 서버에서, 상기 사용자 단말기로부터 입력되는 카메라 촬영 데이터를 토대로 특정 사용자의 스타일 정보를 분석하는 스타일 분석 단계; 상기 스타일 분석 단계를 통해 분석된 특정 사용자의 스타일 정보와 상기 시력강화운동모델 생성 단계에서 생성된 복수의 클러스터를 매칭하고, 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하는 클러스터 선택 단계; 및 상기 클러스터 선택 단계에서 선택된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자 단말기에 제공할 시력강화운동모델로 선택하는 모델 선택 단계;를 포함하는 것을 특징으로 한다.The style enhancing exercise model extracting step may include a style analyzing step of analyzing style information of a specific user on the basis of the camera shooting data input from the user terminal, A cluster selection step of matching the style information of the specific user analyzed through the style analysis step with a plurality of clusters generated in the step of generating the visual acuity-enhanced motion model, and selecting clusters corresponding to the style information of the user based on the matching result; And a model selection step of selecting a visual augmentation motion model belonging to a specific cluster selected in the cluster selection step as a visual augmentation motion model to be provided to the user terminal.
이상에서와 같이 본 발명의 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법에 따르면, 시력강화운동 제공 서버 측에서 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함한 각 사용자별 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 적합한 시력강화운동모델을 생성하고, 이를 토대로 특정 사용자의 스타일 정보에 따른 최적의 시력강화운동모델을 추출하여 제공하기 때문에 각 사용자들이 자신에게 적합한 인공지능 기반의 개인 맞춤형 시력강화운동을 수행하여 눈의 근육을 강화시킴은 물론, 원근감을 달리하여 수정체 두께 조절근의 민첩성을 높이는 등 시력 향상에 도움을 줄 수 있으며, 노안 발생을 최대한 억제할 수 있다.As described above, according to the method of implementing the vision-enhancing software based on the computer and the smartphone of the present invention, the size and shape of eye, wearing of glasses, visual acuity, The user is able to analyze the style information of each user through machine learning to generate appropriate visual acuity model for each group and to extract and provide the optimal visual acuity model according to the style information of the specific user It is possible to improve visual acuity by enhancing the agility of the lens thickness control muscles by changing the perspective, as well as strengthening the eye muscles by performing personalized visual acuity exercises based on artificial intelligence suitable for the users, Can be suppressed as much as possible.
또한, 각 사용자들에게 개인 맞춤형 시력 개선 운동을 제공할 수 있으며, 언제 어디서나 본인이 보유하고 있는 카메라가 포함된 사용자 단말기를 사용하여 각 사용자들이 자신에게 적합한 최적의 시력강화운동모델을 통해 시력강화운동을 간편하게 수행할 수 있는 효과가 있다.In addition, it is possible to provide personalized vision improvement exercise to each user, and it is possible to provide a personalized vision improvement exercise to each user by using a user terminal including a camera which is possessed by the user anytime and anywhere, Can be easily performed.
또한, 시력강화운동을 수행할 때 자신의 안구 움직임에 따른 반응속도에 따라 사용자 단말기 상에 표시되는 표적물 이동이나 원근 이동의 속도가 변화되기 때문에 맞춤형 시력강화운동을 제공받을 수 있으며, 이를 통해 시력강화운동의 효율을 극대화시킬 수 있다.In addition, when the visual acuity strengthening exercise is performed, the speed of the target movement or perspective movement displayed on the user terminal changes according to the reaction speed according to the movement of the eyeball, so that a customized visual enhancement exercise can be provided. The efficiency of the strengthening motion can be maximized.
또한, 시력강화운동 제공 서버 측에서 각 사용자들의 시력강화운동을 지속적으로 추적, 관리하고, 날짜별 통계정보를 제공하기 때문에 각 사용자들이 통계정보를 토대로 자신이 수행하는 시력강화운동의 훈련성과나 시력향상여부를 손쉽게 확인할 수 있다.In addition, since the server for providing visual acuity enhancement continuously monitors and manages each user's visual acuity enhancement exercise and provides statistical information by date, each user can perform the visual acuity enhancement exercise performed by his / her own based on the statistical information, You can easily check whether it is improved.
또한, 카메라 촬영을 통해 사용자의 눈동자가 소정 범위를 벗어나는 경우 경고신호가 표시되거나 경고음이 출력되기 때문에 사용자가 시력강화운동에 집중할 수 있으며, 이에 따라 훈련효과를 높일 수 있다.In addition, when the user's eyes are out of a predetermined range through camera shooting, a warning signal is displayed or a warning sound is output, so that the user can concentrate on the visual acuity enhancement, thereby enhancing the training effect.
또한, 친구, 가족, 지인들 간에 그룹을 형성하여 서로의 시력강화운동에 따른 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 훈련데이터를 그래프나 수치로 구분하여 제공함으로써, 그룹 내 구성원들이 훈련데이터의 공유를 통해 발전정보를 상호간에 확인하고 경쟁유도를 통해 시력강화 훈련을 효율적으로 수행할 수 있다.In addition, groups of friends, family members, and acquaintances can be grouped to provide training data such as pupil movement speed and perspective distance control speed according to each other's visual acuity enhancement, classified by graph or numerical value, Through the sharing, it is possible to confirm the development information mutually and to induce competition and to perform the sight enhancement training efficiently.
도 1은 본 발명이 적용된 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 과정을 상세하게 설명하기 위한 개념도이다.
도 2는 본 발명의 일 실시예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치의 구성을 개략적으로 나타낸 도면이다.
도 3은 상기 도 2의 시력강화운동 제공 서버의 구성을 보다 상세하게 나타낸 도면이다.
도 4는 상기 도 3의 시력강화운동모델 생성부의 구성을 보다 상세하게 나타낸 도면이다.
도 5는 상기 도 3의 시력강화운동모델 추출부의 구성을 보다 상세하게 나타낸 도면이다.
도 6 내지 도 10은 본 발명이 적용된 시력강화운동모델의 표적물 이동, 원근 이동, 눈동자 추적에 의한 게임의 예를 각각 설명하기 위한 도면이다.
도 11은 본 발명의 일 실시예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법의 동작과정을 상세하게 나타낸 순서도이다.
도 12는 상기 도 11의 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하는 과정을 상세하게 나타낸 순서도이다.
도 13은 상기 도 11의 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하는 과정을 상세하게 나타낸 순서도이다.
도 14는 상기 도 11의 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 과정을 상세하게 나타낸 순서도이다.
FIG. 1 is a conceptual diagram for explaining details of a process of implementing a visual enhancement software based on a computer and a smartphone to which the present invention is applied.
FIG. 2 is a diagram schematically illustrating the configuration of a device for implementing a visual enhancement software based on a computer and a smartphone according to an embodiment of the present invention. Referring to FIG.
FIG. 3 is a diagram illustrating a detailed configuration of the server for enhancing the visual acuity shown in FIG. 2. Referring to FIG.
FIG. 4 is a diagram illustrating a detailed structure of the visual enhancement motion model generating unit of FIG. 3. Referring to FIG.
FIG. 5 is a diagram showing the structure of the visual enhancement motion model extracting unit of FIG. 3 in more detail.
FIGS. 6 to 10 are views for explaining respective examples of a game based on target movement, perspective movement, and pupil tracking of a vision-enhanced motion model to which the present invention is applied.
11 is a flowchart illustrating an operation procedure of a method of implementing a visual enhancement software based on a computer and a smartphone according to an embodiment of the present invention in detail.
FIG. 12 is a flowchart illustrating a process of automatically controlling the target speed according to the eye muscle agility for each user performing the visual acuity enhancement exercise of FIG.
FIG. 13 is a flowchart illustrating a process of automatically controlling the target far-field velocity according to the ability of the user to adjust the perspective of the eye muscles in the eye-strengthening exercise of FIG.
FIG. 14 is a flowchart illustrating a process of automatically controlling the size and sharpness of a target according to a user's eye muscular acupuncture agility according to the user performing the visual acuity enhancement exercise of FIG.
이하, 첨부한 도면을 참조하여 본 발명의 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법에 대한 바람직한 실시 예를 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다. 또한 본 발명의 실시 예들에 대해서 특정한 구조적 내지 기능적 설명들은 단지 본 발명에 따른 실시 예를 설명하기 위한 목적으로 예시된 것으로, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는 것이 바람직하다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a preferred embodiment of a method for implementing a visual enhancement software based on a computer and a smart phone of the present invention will be described in detail with reference to the accompanying drawings. Like reference symbols in the drawings denote like elements. Furthermore, specific structural and functional descriptions for embodiments of the present invention are presented for the purpose of describing an embodiment of the present invention only, and, unless otherwise defined, all terms used herein, including technical or scientific terms Have the same meaning as commonly understood by those of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as ideal or overly formal in the sense of the art unless explicitly defined herein .
도 1은 본 발명이 적용된 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 과정을 상세하게 설명하기 위한 개념도이다.FIG. 1 is a conceptual diagram for explaining details of a process of implementing a visual enhancement software based on a computer and a smartphone to which the present invention is applied.
도 1에 도시된 바와 같이, 시력강화운동 제공 서버 측에서는 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함한 시력강화운동모델을 다양하게 생성하고 있으며, 시력강화운동 서비스를 위한 애플리케이션이나 실행프로그램을 개발하여 네트워크를 통해 원하는 사용자 단말기로 제공한다.As shown in FIG. 1, on the side of the server providing the eyesight enhancing exercise, a variety of eyesight strengthening exercise models including a color for eliminating eye fatigue, a theme screen, a target position movement pattern, a perspective movement pattern, And develops an application or execution program for the sight enhancement service, and provides the desired user terminal through the network.
PC, 스마트폰, 태블릿 PC, 노트 PC 등을 포함한 사용자 단말기는 카메라가 필수적으로 구비되어 있으며, 시력강화운동 제공 서버 측에서 개발한 애플리케이션이나 실행프로그램을 네트워크를 통해 다운로드받아 설치한다. 그리고 애플리케이션이나 실행프로그램을 구동하는 사용자의 조작에 따라 시력강화운동 제공 서버와 통신 접속을 진행한 후, 시력강화운동 제공 서버로부터 시력강화운동모델을 제공받아 시력강화운동을 수행한다.A user terminal including a PC, a smart phone, a tablet PC, a notebook PC, and the like is provided with a camera, and an application program or an execution program developed by the server for enhancing the visual acuity is downloaded and installed through a network. Then, the user performs communication connection with the server for providing a visual acuity according to an operation of a user who runs an application or an execution program, and receives a visual acuity-enhancing motion model from the acuity-enhancing motion-providing server.
이때 사용자 단말기는 자신의 스타일에 적합한 특정 시력강화운동모델을 시력강화운동 제공 서버로부터 제공받아 시력강화운동을 수행할 수 있다. 상기 스타일은 눈의 크기나 모양, 안경착용여부, 시력 또는 이들의 조합을 포함한 정보로서, 카메라 촬영 데이터를 토대로 시력강화운동 제공 서버 측에서 사용자의 스타일을 분석하는데 사용될 수 있으며, 시력강화운동 제공 서버에서는 카메라 촬영 데이터의 분석정보와 함께 사용자가 직접 입력하는 데이터를 토대로 스타일 분석을 수행할 수 있다.At this time, the user terminal can receive a specific visual acuity enhancement exercise model suitable for his / her style from the visual acuity enhancement exercise server and perform the visual acuity enhancement exercise. The style can be used for analyzing the style of the user on the server for enhancing the visual acuity based on the camera photographic data as information including the size and shape of the eyes, the wearing of glasses, sight or a combination thereof, The style analysis can be performed on the basis of the data directly input by the user together with the analysis information of the camera shooting data.
또한, 상기 사용자 단말기는 카메라로 촬영하여 분석한 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도가 변화되는 시력강화운동모델을 시력강화운동 제공 서버로부터 제공받아 시력강화운동을 수행할 수 있다.Also, the user terminal may be provided with a sight enhancement exercise model in which the speed of the target movement or the perspective movement is changed based on the reaction speed of the user's eye movement, which is captured and analyzed by the camera, Can be performed.
또한, 상기 사용자 단말기는 친구, 가족, 지인들 간에 그룹을 형성하는 경우(예를 들어, 카카오톡 그룹처럼 그룹을 묶는 경우), 시력강화운동 제공 서버로부터 그룹 내에 속한 구성원들의 시력강화운동에 따른 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 훈련데이터를 그래프나 수치로 제공받아 확인할 수 있다. 이에 따라 각 사용자들은 그룹 내 구성원들의 훈련데이터 공유를 통해 발전정보를 상호간에 확인하고 경쟁을 통해 시력강화 훈련을 보다 효율적으로 수행할 수 있다.In addition, when the user terminal forms a group between friends, family members, and acquaintances (for example, when a group is grouped like a cacao talk group), the eyesight You can check the training data such as the speed of movement and the distance control speed of the lens by using graphs or numerical values. Accordingly, each user can mutually confirm the development information through sharing the training data of the members in the group, and perform the sight enhancement training more efficiently through competition.
이러한 시력강화운동 서비스를 이용하기 위한 과정을 상세하게 설명하면 다음과 같다.Hereinafter, a process for using such a visual enhancement service will be described in detail.
먼저, 시력강화운동 제공 서버에서는 카메라가 구비된 사용자 단말기를 통해 시력강화운동을 수행하는 각각의 사용자별 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함한 스타일 정보를 지속적으로 수집한다(①).First, in the server for providing a visual acuity strengthening motion, the size, the shape, the wearing of glasses, the visual acuity, the degree of motion of the eye regulating muscles, or a combination of the eyes are determined for each user performing the visual acuity enhancement through the user terminal equipped with the camera Continuously collect style information (①).
각 사용자별 스타일 정보가 수집되면, 시력강화운동 제공 서버에서는 각각의 사용자별 스타일 정보를 기반으로 기계학습을 통해 클러스터링을 수행한다(②). 즉 각각의 스타일별로 기계학습을 수행하여 클러스터링함으로써, 각각의 사용자별 스타일 정보를 복수 개의 클러스터로 그룹핑하는 것이다. 상기 기계학습은 비지도 학습(unsupervised learning)을 수행하는 것으로, 유사한 패턴끼리 사용자별 스타일 정보를 그룹핑하는 역할을 수행한다.Once the style information for each user is collected, the server for enhancing the visual acuity performs clustering through machine learning based on the style information of each user (2). That is, machine learning is performed for each style and clustering is performed to group each user style information into a plurality of clusters. The machine learning performs unsupervised learning, and plays a role of grouping style information of each user in similar patterns.
그리고 각각의 스타일 정보별로 그룹핑이 수행되면, 시력강화운동 제공 서버에서는 기계학습을 통해 각 그룹별로 적합한 시력강화운동모델을 생성한다(③). 즉 복수 개로 그룹핑된 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 최적의 시력강화운동모델을 생성하는 것이다. 상기 기계학습은 지도 학습(supervised learning)을 수행하는 것으로, 유사한 스타일 정보별로 그룹핑된 각각의 클러스터에 적합한 시력강화운동모델을 생성하는 역할을 수행한다.Then, when grouping is performed according to each style information, the server for providing a visual acuity motion generates a visual acuity model suitable for each group through machine learning (③). That is, a plurality of visual acuity strengthening exercise models preliminarily grouped into a plurality of groups are learned and an optimal visual acuity enhancement exercise model is generated for each cluster. The machine learning performs supervised learning, and plays a role of generating a vision enhanced motion model suitable for each cluster grouped by similar style information.
이처럼, 각각의 사용자별 스타일 정보를 기계학습을 통해 분석하여 각 그룹별로 최적의 시력강화운동모델을 구축한 이후, 시력강화운동 제공 서버에서는 사용자 단말기에 설치된 애플리케이션이나 실행프로그램이 구동되는지를 확인하고, 애플리케이션이나 실행프로그램이 구동되면 사용자 단말기로 카메라 촬영을 수행하도록 제어한다.After the style information of each user is analyzed through machine learning to build an optimal visual acuity enhancement exercise model for each group, the server for providing sight enhancement exercise checks whether an application installed in the user terminal or an execution program is driven, When an application or an execution program runs, the control unit controls the user terminal to perform camera shooting.
상기 사용자 단말기에서는 카메라를 통해 사용자의 눈 주변을 촬영하고, 촬영 데이터를 네트워크를 통해 시력강화운동 제공 서버로 제공한다(④).The user terminal photographs the user's eyes around the camera through the camera, and provides the photographic data to the server for enhancing the visual acuity through the network (4).
그러면 시력강화운동 제공 서버에서는 사용자의 촬영 데이터를 분석하여 스타일 정보(예를 들어, 사용자의 시력, 안구 정보 등)를 확인한다(⑤). 즉 촬영 데이터를 토대로 사용자의 눈의 모양이나 크기, 안경착용여부 등을 확인하는 것이다. 이때 시력강화운동 제공 서버에서는 사용자의 스타일 정보를 분석할 때 카메라로 촬영한 눈 주변 데이터 이외에 사용자가 직접 입력하는 시력, 원하는 테마 및 화면, 원하는 운동시간 등의 데이터를 포함하여 스타일 정보를 분석할 수 있다.Then, the server for enhancing the visual acuity analyzes the user's photographic data to check the style information (for example, the user's eyesight, eyeball information, etc.) (5). That is, based on the shooting data, the user is to check the shape and size of the user's eyes and whether or not the user wears glasses. At this time, when analyzing the style information of the user, the server for enhancing the visual acuity may analyze the style information including the data about the eyes taken by the camera, the data inputted by the user directly, the desired theme and screen, have.
시력강화운동을 수행하고자 하는 사용자의 스타일 정보가 분석되면, 시력강화운동 제공 서버에서는 분석된 사용자의 스타일 정보에 해당하는 클러스터를 선택하고, 선택한 클러스터에 속하는 특정 시력강화운동모델을 추출한다(⑥).After analyzing the style information of the user who intends to perform the visual enhancement exercise, a server corresponding to the style information of the analyzed user is selected in the server for providing visual acuity enhancement, and a specific visual acuity enhancement motion model belonging to the selected cluster is extracted (6) .
사용자의 스타일에 적합한 특정 시력강화운동모델이 추출되면, 시력강화운동 제공 서버에서는 네트워크를 통해 해당 사용자 단말기로 시력강화운동모델을 제공한다(⑦). 이때 사용자 단말기로 제공되는 시력강화운동모델은 실시간 스트리밍 형태로 제공되는 것이 바람직하지만, 이에 한정되는 것은 아니며 그 이외에 사용자 단말기에 각각의 스타일 정보별로 최적화된 시력강화운동모델을 사전에 저장해 두고 사용자의 스타일에 적합한 특정 시력강화운동모델을 재생, 출력할 수 있음은 물론이다.When a specific visual augmentation exercise model suitable for the user's style is extracted, the server for providing a visual augmentation motion provides a visual augmentation exercise model to the corresponding user terminal through the network (7). At this time, it is preferable that the visual strengthening exercise model provided to the user terminal is provided in a form of real-time streaming. However, the present invention is not limited to this, and the visual strengthening exercise model optimized for each style information may be stored in advance in the user terminal, It is of course possible to reproduce and output a specific visual acuity enhancement exercise model suitable for the visual acuity enhancement exercise model.
또한, 시력강화운동 제공 서버에서는 사용자가 자신에게 적합한 최적의 시력강화운동모델을 사용하여 시력강화운동을 수행할 때, 카메라로 촬영하여 분석한 사용자의 안구 움직임에 따른 반응속도를 토대로 표적물 이동이나 원근 이동의 속도를 변화시켜 시력강화운동을 수행하는 사용자의 훈련 효율을 높일 수 있다. 즉 사용자의 눈동자 반응속도보다 일정 부분 상회하는 움직임이 이루어지도록 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 가변함으로써, 인공지능 기반의 개인 맞춤형 시력강화운동을 제공할 수 있는 것이다.In addition, in the server for enhancing the visual acuity, when the user performs the visual acuity enhancement exercise using the optimum visual acuity enhancement exercise model suitable for the user, the target movement and the target movement based on the reaction speed according to the eye movement of the user, It is possible to increase the training efficiency of the user who performs the visual enhancement exercise by changing the speed of the far-sight movement. In other words, it is possible to provide a personalized visual enhancement exercise based on artificial intelligence by varying the speed of the target movement or the perspective movement of the visual enhancement exercise model so that the movement of the visual enhancement exercise is performed a certain amount above the user's reaction speed of the pupil.
또한, 시력강화운동 제공 서버에서는 사용자 단말기로부터 제공되는 촬영 데이터를 토대로 시력강화운동을 수행하는 사용자의 눈동자가 카메라 인식범위를 벗어나는지를 확인하고, 만일 사용자의 눈동자가 카메라 인식범위를 벗어나면 시력강화운동에 집중할 수 있도록 경고신호를 화면에 표시하거나 경고음을 출력하도록 제어할 수 있다. 이때 경고신호의 표시나 경고음 출력 기능을 시력강화운동 제공 서버에서 직접 수행하지 않고 사용자 단말기에 설치된 애플리케이션이나 실행프로그램에서 직접 처리하도록 구성할 수 있음은 물론이다.In addition, the server for providing visual acuity enhancement checks whether the pupil of the user performing the visual acuity strengthening exercise is out of the camera recognition range based on the photographing data provided from the user terminal. If the user's pupil is out of the camera recognition range, A warning signal can be displayed on the screen or a warning sound can be output. At this time, it is needless to say that the display of the warning signal or the output of the warning sound can be directly performed by the application installed in the user terminal or the execution program, without directly performing the operation by the server for enhancing the visual acuity.
이와 같이 사용자 단말기를 통해 사용자의 스타일에 적합한 특정 시력강화운동모델이 실행되어 시력강화운동이 수행되면, 시력강화운동 제공 서버에서는 각 사용자가 수행하는 훈련상황을 지속적으로 추적하여 데이터베이스에 저장, 관리한다(⑧). 즉 각 사용자들의 특정 시력강화운동모델 수행에 따라 생성되는 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 최고속도, 타인과의 비교 데이터 또는 이들의 조합을 날짜별로 구분하여 지속적으로 추적, 관리하고, 추적, 관리되는 각종 데이터를 사용자 단말기를 통해 실시간으로 텍스트 및 그래픽 형태로 다양하게 표시함으로써, 각 사용자들이 시력강화운동의 훈련성과나 시력향상여부를 손쉽게 확인할 수 있도록 하는 것이다.When a specific visual acuity enhancement exercise model suitable for the style of the user is executed through the user terminal and the visual acuity enhancement exercise is performed, the visual acuity enhancement exercise server keeps track of the drill conditions performed by each user, (⑧). That is, the pupil reaction speed, the training time, the maximum speed, the comparison data with other persons, or a combination of the pupil response and zigzag movement generated according to the specific visual acuity strengthening motion model execution performed by each user, And various data managed and tracked and managed in various forms in text and graphics form in real time through the user terminal so that each user can easily check whether the training result of the visual enhancement exercise or the visual improvement is improved.
한편, 상기 시력강화운동 제공 서버는 시력강화운동을 수행하는 다수의 사용자들이 그룹을 형성하는 경우, 그룹 내에 속한 구성원들의 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기로 제공하여, 각 구성원들이 다른 구성원들의 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 훈련데이터를 그래프나 수치로 확인하는 서비스를 제공할 수 있다.In the case where a plurality of users performing a visual acuity strengthening exercise form a group, the server provides the training data according to the visual acuity enhancement exercises of members belonging to the group to each user terminal belonging to the group, The members can provide a service of checking the training data such as the pupil movement speed of the other members, the perspective adjustment speed of the lens, and the like by graph or numerical value.
이에 따라 본 발명은 화면상에 눈의 피로가 줄어드는 물체를 보여주고 원근감 있는 이미지로 눈 근육을 운동시키고, 사용자의 눈동자를 카메라로 촬영하여 반응속도 등을 데이터베이스로 구축하고, 데이터베이스로 구축된 정보를 그래픽 등을 통해 사용자에게 제공함으로써, VR(Virtual Reality) 및 AI(Artificial Intelligence) 기술이 융합되어 개인별 눈 건강상태나 안 근육 운동 능력에 따른 맞춤형 시력강화운동 환경의 제공이 가능하다. 또한, 카메라 촬영 데이터를 벡터라이징(vectorizing)하여 사용자의 눈동자나 홍채 분석을 수행할 수 있고, 각 사용자별 스타일 정보에 따른 시력강화운동모델 제공을 통해 클라우드 컴퓨팅 기반에서의 빅 데이터 제공이 가능하다.Accordingly, the present invention provides an apparatus and a method for displaying an object with reduced eye fatigue on the screen, exercising an eye muscle with an image with a perspective, photographing a user's eye with a camera to construct a reaction rate and the like in a database, (VR) and artificial intelligence (AI) technology, it is possible to provide a customized visual enhancement exercise environment according to individual eye health condition and eye muscular exercise ability. Also, it is possible to perform user's pupil or iris analysis by vectorizing the camera photographed data, and to provide big data on the basis of cloud computing by providing a sight enhancement exercise model according to each user's style information.
도 2는 본 발명의 일 실시예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치의 구성을 개략적으로 나타낸 도면이고, 도 3은 도 2의 시력강화운동 제공 서버의 구성을 보다 상세하게 나타낸 도면이고, 도 4와 도 5는 도 3의 시력강화운동모델 생성부 및 시력강화운동모델 추출부의 구성을 상세하게 나타낸 도면이며, 도 6 내지 도 10은 본 발명이 적용된 시력강화운동모델의 표적물 이동, 원근 이동, 눈동자 추적에 의한 게임의 예를 각각 설명하기 위한 도면이다.FIG. 2 is a view schematically showing a configuration of a device for implementing a visual enhancement software based on a computer and a smartphone according to an embodiment of the present invention. FIGS. 4 and 5 are views showing in detail the structures of the visual enhancement movement model generating unit and the visual enhancement motion model extracting unit of FIG. 3, and FIGS. 6 to 10 are views showing the target of the visual enhancement exercise model to which the present invention is applied. Water movement, perspective movement, and pupil tracking, respectively.
도 2에 도시된 바와 같이 본 발명의 시력강화 소프트웨어 구현 장치는, 네트워크(100), 복수의 사용자 단말기(200), 시력강화운동 제공 서버(300), 데이터베이스(400) 등으로 구성된다.As shown in FIG. 2, the apparatus for implementing the vision enhancing software of the present invention includes a network 100, a plurality of user terminals 200, a server 300 for providing a visual enhancement, and a database 400.
네트워크(100)는 유/무선 인터넷, 블루투스(bluetooth), 지그비(Zigbee), 와이파이(Wi-Fi) 등을 포함한 현재 공지되어 있는 각종 통신망으로서, 복수의 사용자 단말기(200)와 시력강화운동 제공 서버(300) 사이의 통신회선을 연결하여 상호간에 카메라 촬영 데이터, 시력강화운동모델 등과 관련된 데이터 통신이 이루어지도록 한다.The network 100 is a variety of currently known communication networks including wired / wireless Internet, bluetooth, Zigbee, Wi-Fi and the like. The network 100 includes a plurality of user terminals 200, (300) are connected to each other so that data communication related to camera photographing data, visual acuity strengthening motion model, and the like can be performed between each other.
사용자 단말기(200)는 시력강화운동 제공 서버(300)를 통해 자신의 스타일에 맞는 시력강화운동 서비스를 이용하는 사용자들이 사용하는 컴퓨터, 스마트폰, 태블릿 PC, 노트 PC 등의 기기로서, 네트워크(100)를 통해 시력강화운동 제공 서버(300)와 통신 접속되어 있다. 그리고 상기 사용자 단말기(200)는 카메라가 필수적으로 구비되어 있으며, 시력강화운동 제공 서버(300)로부터 애플리케이션이나 실행프로그램을 네트워크(100)를 통해 다운로드받아 설치한다.The user terminal 200 is a device such as a computer, a smart phone, a tablet PC, a notebook PC, etc. used by users who use a visual acuity enhancing exercise service suited to their own style through a visual acuity enhancement server 300, And is communicatively connected to the server 300 for providing a visual enhancement exercise. In addition, the user terminal 200 is provided with a camera and downloads an application or an execution program from the server 300 for providing a visual enhancement work through the network 100 and installs the installed application.
또한, 상기 사용자 단말기(200)는 애플리케이션이나 실행프로그램을 구동하는 사용자의 조작에 따라 시력강화운동 제공 서버(300)와 통신 접속을 진행한 후, 시력강화운동 제공 서버(300)로부터 자신의 스타일에 적합한 특정 시력강화운동모델을 제공받아 시력강화운동을 수행한다. 이때 상기 스타일은 눈의 크기나 모양, 안경착용여부, 시력 또는 이들의 조합을 포함한 정보로서, 카메라 촬영 데이터를 토대로 시력강화운동 제공 서버(300)에서 사용자의 스타일을 분석하는데 사용될 수 있으며, 그 이외에 시력강화운동 제공 서버(300)에서는 카메라 촬영 데이터의 분석정보와 함께 사용자가 직접 입력하는 데이터(예를 들어, 시력, 원하는 테마 및 화면, 운동시간 등)를 토대로 스타일 분석을 수행할 수 있다.In addition, the user terminal 200 may establish a communication connection with the server 300 for providing enhanced visual acuity according to an operation of a user driving an application or an execution program, And performs a visual acuity strengthening exercise by providing a proper specific visual acuity enhancement exercise model. At this time, the style can be used for analyzing the style of the user in the server 300 for providing enhanced visual acuity based on the camera photographic data, including the size and shape of the eyes, the wearing of glasses, the visual acuity or a combination thereof, The server 300 may perform style analysis on the basis of analysis information of the camera shooting data and data (for example, visual acuity, desired theme, screen, exercise time, etc.) directly input by the user.
또한, 상기 사용자 단말기(200)는 카메라로 촬영하여 분석한 사용자의 안구 움직임에 따른 반응속도를 토대로 시력강화운동 제공 서버(300)에서 표적물 이동이나 원근 이동의 속도를 가변시킨 시력강화운동모델을 제공받아 시력강화운동을 수행할 수 있다.The user terminal 200 may further include a visual acuity enhancing exercise model in which the speed of the target movement or the perspective movement is varied in the visual accequity enhancing exercise providing server 300 based on the reaction speed according to the eye movement of the user, It is possible to perform a visual enhancement exercise.
시력강화운동 제공 서버(300)는 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함한 시력강화운동모델을 복수 개 설정하여 데이터베이스(400)를 통해 저장, 관리하며, 시력강화운동 서비스를 수행하기 위한 애플리케이션이나 실행프로그램을 원하는 사용자 단말기(200)로 제공한다.The server 300 for enhancing the eyesight enhancing exercise sets a plurality of eyesight strengthening exercise models including colors, theme screens, target position movement patterns, perspective movement patterns, or a combination thereof to relieve eye fatigue, And provides an application or an execution program for performing the visual acuity enhancement exercise service to the desired user terminal 200. [
또한, 상기 시력강화운동 제공 서버(300)는 시력강화운동을 수행하는 각각의 사용자별 눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함한 스타일 정보를 수집하고, 수집한 각각의 사용자별 스타일 정보를 기계학습을 통해 클러스터링하여 복수 개의 클러스터로 그룹핑하며, 그룹핑된 각 클러스터별로 기 설정되어 있는 시력강화운동모델을 기반으로 기계학습을 수행하여 각 그룹별로 적합한 시력강화운동모델을 생성한다.In addition, the server 300 for providing visual acuity enhancement collects style information including the size and shape of each eye, the wearing of glasses, the visual acuity, the degree of motion of the eye regulating muscles, or combinations thereof, And grouping the collected style information of each user into a plurality of clusters by machine learning, and performing machine learning based on the pre-established visual acuity strengthening motion model for each grouped cluster, Create an enhanced motion model.
또한, 상기 시력강화운동 제공 서버(300)는 각각의 스타일에 따른 각 그룹별 시력강화운동모델을 생성한 이후, 시력강화운동을 수행하기 위해 사용자 단말기(200)에서 촬영한 사용자의 촬영 데이터를 분석하여 스타일 정보를 확인하고, 분석된 사용자의 스타일 정보에 해당하는 클러스터를 선택하고, 선택한 클러스터에 속하는 특정 시력강화운동모델을 추출하여 해당 사용자 단말기(200)로 제공함으로써, 해당 사용자가 인공지능 기반의 개인 맞춤형 시력강화운동을 수행하도록 한다.In addition, the server 300 for providing visual acuity enhancement may generate a visual acuity strengthening exercise model for each group according to each style, and then analyze the shot data of the user, which is photographed by the user terminal 200, A cluster corresponding to the style information of the analyzed user is selected, a specific visual augmentation motion model belonging to the selected cluster is extracted and provided to the corresponding user terminal 200, Perform personalized vision enhancement exercises.
또한, 상기 시력강화운동 제공 서버(300)는 사용자 단말기(200)로부터 제공되는 촬영 데이터를 통해 분석한 사용자의 안구 움직임에 따른 반응속도를 참조하여 표적물 이동이나 원근 이동의 속도를 변화시켜 해당 사용자 단말기(200)로 제공할 수 있다.Also, the server 300 may change the speed of the target movement or the perspective movement by referring to the reaction speed according to the eye movement of the user analyzed through the shooting data provided from the user terminal 200, To the terminal (200).
또한, 상기 시력강화운동 제공 서버(300)는 사용자 단말기(200)로부터 제공되는 촬영 데이터를 토대로 시력강화운동을 수행하는 사용자의 눈동자가 카메라 인식범위를 벗어나면 이를 경고하는 문구나 경고음의 출력을 제어할 수 있다.When the eyes of the user performing the eyesight enhancing exercise are out of the camera recognition range based on the image pickup data provided from the user terminal 200, the server 300 may control the output of a warning or a warning sound can do.
또한, 상기 시력강화운동 제공 서버(300)는 시력강화운동을 수행하는 다수의 사용자들이 그룹을 형성하는 경우, 그룹 내에 속한 구성원들의 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기(200)로 제공할 수 있다. 이에 따라 그룹에 속한 각 구성원들은 그래프, 눈동자 움직임 속도, 수정체의 원근 조절 속도 등으로 구분하여 그룹 내 구성원들의 훈련데이터를 상호간에 확인할 수 있다.In addition, when the plurality of users performing the visual acuity strengthening exercise form a group, the server 300 for enhancing the visual acuity provides the training data corresponding to the visual acuity enhancement of members belonging to the group to each of the user terminals 200 ). Accordingly, each member of the group can identify the training data of the members in the group by dividing the graph, the pupil movement speed, and the perspective control speed of the lens.
데이터베이스(400)는 상기 시력강화운동 제공 서버(300)에서 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함하여 생성한 복수 개의 시력강화운동모델을 저장하고 있고, 시력강화운동 서비스를 위한 애플리케이션이나 실행프로그램을 저장하고 있다.The database 400 may include a plurality of visual acuity enhancement exercises generated by the visual acuity enhancement movement providing server 300 including a color for eliminating eye fatigue, a theme screen, a target position movement pattern, a perspective movement pattern, Stores the model, and stores applications and run-time programs for the sight-enhancement exercise service.
또한, 데이터베이스(400)는 시력강화운동 제공 서버(300)의 제어를 토대로 시력강화운동을 수행하는 각 사용자들의 스타일 정보를 저장하고 있으며, 상기 시력강화운동 제공 서버(300)에서 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 생성한 각각의 클러스터 및 클러스터별로 생성된 최적의 시력강화운동모델을 저장하고 있다.In addition, the database 400 stores style information of each user who performs a visual acuity enhancement exercise based on the control of the visual acuity enhancement exercise providing server 300. In the visual acuity enhancement exercise server 300, And the optimum visual acuity enhancement model generated for each cluster and cluster generated by performing machine learning based on information.
한편, 상기 시력강화운동 제공 서버(300)는 도 3에 도시된 바와 같이, 통신부(310), 시력강화운동모델 생성부(320), 시력강화운동모델 추출부(330), 시력강화운동 수행부(340), 추적 관리부(350), 경고 발생부(360), 제어부(370) 등으로 구성된다.3, the server 300 includes a communication unit 310, a visual enhancement motion model generation unit 320, a visual enhancement motion model extraction unit 330, a visual enhancement motion performance unit 330, An alert generator 340, a tracking manager 350, a warning generator 360, a controller 370, and the like.
통신부(310)는 네트워크(100)를 통해 사용자 단말기(200)와 통신 접속을 수행하고, 사용자 단말기(200)에서 촬영한 데이터를 전송받아 제어부(370)로 전달하며, 제어부(370)의 제어를 토대로 사용자의 스타일에 맞는 시력강화운동모델을 해당 사용자 단말기(200)로 출력한다.The communication unit 310 performs communication connection with the user terminal 200 through the network 100 and receives data photographed by the user terminal 200 and transfers the data to the control unit 370. The control unit 370 controls the control unit 370 And outputs the visual acuity enhancement exercise model to the corresponding user terminal 200 based on the user's style.
시력강화운동모델 생성부(320)는 시력강화운동을 수행하는 사용자들의 스타일 정보를 수집하여 데이터베이스(400)에 저장하도록 제어하고, 수집한 각각의 스타일별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑하며, 그룹핑된 각각의 클러스터별 시력강화운동모델을 생성하는 기능을 수행한다. 이때 상기 시력강화운동모델은 눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합을 포함하는 것으로서, 적어도 하나 이상 구비되어 데이터베이스(400)에 저장, 관리된다.The visual enhancement motion model generation unit 320 collects style information of users performing the visual aural enhancement motion and stores the collected style information in the database 400. The visual enhancement motion model generation unit 320 groups clusters according to the collected styles into a plurality of clusters, And performs a function of generating grouped visual acuity strengthening motion models for respective clusters. At this time, the visual acuity strengthening exercise model includes at least one of a color for eliminating eye fatigue, a theme screen, a target position movement pattern, a perspective movement pattern, or a combination thereof, do.
상기 시력강화운동모델 생성부(320)는 도 4에 도시된 바와 같이, 사용자 단말기(200)를 통해 시력강화운동을 수행하는 모든 사용자들의 스타일 정보를 수집하는 데이터 수집부(322)와, 데이터 수집부(322)에서 수집한 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 클러스터 생성부(324)와, 클러스터 생성부(324)를 통해 생성된 각각의 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 최적의 시력강화운동모델을 생성하는 모델 생성부(326)로 구성된다.As shown in FIG. 4, the visual enhancement motion model generation unit 320 includes a data collection unit 322 for collecting style information of all users performing a visual augmentation movement through the user terminal 200, A cluster generating unit 324 for generating a plurality of clusters by performing machine learning based on each user style information collected by the clustering unit 322 and grouping them by similar patterns; And a model generation unit 326 for learning a plurality of pre-set visual acuity enhancement motion models for each cluster and generating an optimal visual acuity enhancement motion model for each of the clusters.
시력강화운동모델 추출부(330)는 사용자 단말기(200)에서 촬영한 특정 사용자의 스타일 정보를 분석하여 시력강화운동모델 생성부(320)를 통해 그룹핑된 복수 개의 클러스터 중 어느 클러스터에 해당하는지를 확인하고, 확인된 특정 클러스터에 속하는 시력강화운동모델을 사용자가 수행할 시력강화운동모델로 추출하는 기능을 수행한다.The visual enhancement motion model extraction unit 330 analyzes the style information of a specific user photographed by the user terminal 200 and determines which cluster among the plurality of clusters grouped through the visual enhancement motion model generation unit 320 corresponds to , And performs a function of extracting a visual augmentation motion model belonging to the identified specific cluster as a visual augmentation motion model to be performed by the user.
상기 시력강화운동모델 추출부(330)는 도 5에 도시된 바와 같이, 사용자 단말기(200)로부터 입력되는 카메라 촬영 데이터를 토대로 특정 사용자의 스타일 정보를 분석하는 스타일 분석부(332)와, 스타일 분석부(332)를 통해 분석된 특정 사용자의 스타일 정보와 시력강화운동모델 생성부(320)에서 생성된 복수의 클러스터를 매칭하고 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하는 클러스터 선택부(334)와, 클러스터 선택부(334)에서 선택된 특정 클러스터에 속하는 시력강화운동모델을 사용자 단말기(200)에 제공할 시력강화운동모델로 선택하는 모델 선택부(336)로 구성된다.As shown in FIG. 5, the visual enhancement motion model extracting unit 330 includes a style analyzer 332 for analyzing style information of a specific user based on the camera photographic data input from the user terminal 200, A cluster selection unit 330 for matching the style information of the specific user analyzed through the unit 332 with a plurality of clusters generated by the visual enhancement motion model generation unit 320 and selecting a cluster corresponding to the style information of the user based on the matching result, And a model selection unit 336 for selecting a visual augmentation motion model belonging to a specific cluster selected by the cluster selection unit 334 as a visual augmentation motion model to be provided to the user terminal 200. [
시력강화운동 수행부(340)는 시력강화운동모델 추출부(330)에서 추출된 시력강화운동모델을 네트워크(100)를 통해 해당 사용자 단말기(200)로 제공하는 기능을 수행한다.The visual enhancement exercise performing unit 340 performs a function of providing the visual enhancement exercise model extracted by the visual enhancement exercise model extracting unit 330 to the corresponding user terminal 200 through the network 100. [
이때 상기 시력강화운동 수행부(340)는 시력강화운동모델을 통해 시력강화운동을 수행하는 사용자 단말기(200)에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공하는 기능을 추가로 수행할 수 있다. 즉 상기 시력강화운동 수행부(340)는 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하거나, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하거나, 카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절할 수 있는 것이다. 그리고 개인별 맞춤형 시력강화운동모델의 표적물 이동이나 원근 이도 속도의 변화는 사용자 단말기(200)에서 직접 수행되고, 그 결과를 시력강화운동 제공 서버(300)로 제공하여 업데이트하도록 할 수 있다.At this time, the visual enhancement exercise performing unit 340 analyzes the reaction speed according to the eye movement of the user photographed by the user terminal 200 performing the visual enhancement exercise through the visual enhancement exercise model, It is possible to further perform the function of changing the speed of the target movement or the perspective movement of the strengthening motion model. That is, the visual enhancement exercise performing unit 340 automatically adjusts the target speed according to the eye muscle agility for each user performing the visual acuity strengthening exercise based on the analysis of the pupil information of the user photographed by the camera, Based on the analysis of the pupil information, it is possible to automatically adjust the target's perspective velocity according to the ability of the eye muscles to adjust the perspective of the user performing the visual acuity strengthening exercise, or to perform the visual acuity enhancement exercise based on the user's eye information analysis The target size and sharpness can be automatically adjusted according to the muscle perspective agility. The target movement and the change of the perspective deviation velocity of the personalized vision enhanced movement model may be directly performed by the user terminal 200 and the result may be provided to the server 300 for providing the enhanced vision exercise to be updated.
상기 시력강화운동 수행부(340)를 통해 사용자 단말기(200)로 제공되는 시력강화운동모델을 보다 구체적으로 설명하면 다음과 같다.The visual enhancement exercise model provided to the user terminal 200 through the visual enhancement exercise performing unit 340 will be described in more detail as follows.
예를 들어, 도 6의 (a) 내지 (d)에 도시된 바와 같이 표적물을 좌측 상단에서 우측하단으로 이동시키거나, 우측하단에서 우측상단으로 이동시키거나, 우측상단에서 좌측하단으로 이동시키거나, 좌측하단에서 좌측상단으로 이동시킴으로써, 사용자 단말기(200)의 화면을 응시하는 사용자가 눈동자를 해당 표적물에 맞추어 시력강화운동을 수행하도록 한다.For example, as shown in FIGS. 6 (a) to 6 (d), the target may be moved from the upper left to the lower right, from the lower right to the upper right, or from the upper right to the lower left Or moving from the lower left to the upper left to allow the user gazing at the screen of the user terminal 200 to adjust the pupil to the target to perform the visual acuity enhancement.
마찬가지로 도 7에 도시된 바와 같이 사용자가 상하좌우로 회전되는 표적물에 맞추어 시력강화운동을 수행하거나, 도 8에 도시된 바와 같이 사용자가 지그재그로 이동되는 표적물에 맞추어 시력강화운동을 수행하거나, 도 9에 도시된 바와 같이 사용자가 원근 이동에 따라 크기가 달라지는 표적물에 맞추어 시력강화운동을 수행하도록 한다.Similarly, as shown in FIG. 7, a user may perform a visual acuity enhancement exercise in accordance with a target rotated in up, down, left, and right directions, perform a visual acuity enhancement exercise in accordance with a target moving in a zigzag, As shown in FIG. 9, the user performs the visual acuity enhancement exercise in accordance with the target whose size varies according to the perspective movement.
또한, 상기 시력강화운동 수행부(340)는 표적물 이동이나 원근 이동을 이용한 시력강화운동모델 이외에, 도 10에 도시된 바와 같이 사용자의 눈동자 이동을 추적하여 눈동자의 움직임만으로 두더지를 잡는 두더지 게임 등의 게임방식을 도입하여 제공할 수 있다. 이처럼 시력강화운동모델에 게임방식을 도입할 경우, 시력강화운동을 수행하는 사용자들의 재미와 참여를 높일 수 있으며, 이에 따라 훈련효율을 높일 수 있다.In addition, the visual acuity strengthening exercise performing unit 340 may include a mole game for tracking the movement of the pupil of the user as shown in FIG. 10 and capturing the mole only by the movement of the pupil, in addition to the visual acuity strengthening exercise model using the target movement or the perspective movement Can be introduced and provided. The introduction of the game method to the visual augmentation model can increase the fun and participation of the users who perform the visual augmentation exercise, thereby enhancing the training efficiency.
추적 관리부(350)는 사용자의 스타일 정보에 맞는 특정 시력강화운동모델을 통해 시력강화운동을 수행하는 사용자 단말기(200)에서 촬영한 사용자의 안구 움직임에 따른 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 포함한 훈련성과 및 통계정보를 데이터베이스(400)에 각 사용자별로 구분하여 누적, 저장하는 기능을 수행한다.The tracking management unit 350 monitors the movement of the user's eyes taken by the user terminal 200 performing the visual acuity enhancement through the specific visual acuity strengthening exercise model in accordance with the style information of the user according to the vertical movement, zigzag movement, and perspective movement The training result and the statistical information including the pupil reaction rate, the training time, the comparison data with other persons, or a combination thereof are stored in the database 400 for each user, and accumulated and stored.
또한, 상기 추적 관리부(350)는 제어부(370)의 제어를 토대로 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우, 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기(200)로 제공하는 기능을 추가로 수행할 수 있다. 즉 그룹에 속한 각 구성원들이 상호간에 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 훈련데이터를 그래프나 수치로 확인할 수 있도록 함으로써, 서로 경쟁 심리를 유도하여 훈련효과를 높일 수 있도록 하는 것이다.In addition, when the users performing the visual acuity strengthening exercise are formed on the basis of the control of the controller 370, the tracking supervisor 350 sets the training data according to the visual acuity enhancement exercises performed by the respective members in the group, To the user terminal 200 of the mobile terminal 200. That is, each member of the group can mutually confirm the training data such as the pupil movement speed and the perspective adjustment speed of the lens by the graph or the numerical value, thereby inducing the competition psychology to enhance the training effect.
경고 발생부(360)는 사용자의 스타일 정보에 맞는 특정 시력강화운동모델을 통해 시력강화운동을 수행하는 사용자 단말기(200)에서 촬영한 사용자의 눈동자가 기 설정되어 있는 카메라 인식범위를 벗어나는지를 판단하고, 판단결과 사용자의 눈동자가 카메라 인식범위를 벗어나면, 해당 사용자 단말기(200)의 화면상에 경고신호를 표시하거나 또는 스피커를 통해 경고음을 출력하는 기능을 수행한다.The warning generating unit 360 determines whether the user's eyes of the user photographed by the user terminal 200 performing the visual acuity enhancing exercise out of the predetermined camera recognition range through the specific visual acuity enhancement exercise model matching the user's style information And displays a warning signal on the screen of the user terminal 200 or outputs a warning sound through a speaker when the user's eyes are out of the camera recognition range.
제어부(370)는 통신부(310)에서의 사용자 단말기(200)와의 촬영 데이터 및 특정 시력강화운동모델의 송수신, 시력강화운동모델 생성부(320)에서의 각 사용자별 스타일 정보 수집, 기계학습을 통한 클러스터링 및 각 클러스터별 시력강화운동모델 생성, 시력강화운동모델 추출부(330)에서의 사용자 스타일 정보 분석, 클러스터 선택 및 특정 시력강화운동모델 선택, 시력강화운동 수행부(340)에서의 각각의 사용자별 시력강화운동 수행 및 사용자의 눈동자 반응속도에 따른 시력강화운동모델의 표적물 이동이나 원근 이동의 속도가변 등을 총괄적으로 제어하는 기능을 수행한다.The control unit 370 controls the communication unit 310 to transmit and receive the photographic data with the user terminal 200 and the specific visual acuity enhancement movement model, to collect style information for each user in the visual acuity enhancement movement model generation unit 320, Clustering and visual strengthening exercise modeling for each cluster, analysis of user style information in the visual enhancement exercise model extracting unit 330, cluster selection and selection of a specific visual acuity strengthening exercise model, And performs a function of controlling the target movement of the visual enhancement model according to the speed of the visual acuity strengthening exercise and the speed change of the perspective movement according to the speed of the user's eyes.
또한, 상기 제어부(370)는 추적 관리부(350)에서의 각 사용자별 훈련성과 및 통계정보 저장, 경고 발생부(360)에서의 경고표시 및 경고음 발생 등의 제어를 수행한다.In addition, the controller 370 controls the trace management unit 350 to store training results and statistical information for each user, to display a warning in the alert generator 360, and to generate a warning sound.
다음에는, 이와 같이 구성된 본 발명에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법의 일 실시예를 도 11 내지 도 14를 참조하여 상세하게 설명한다. 이때 본 발명의 방법에 따른 각 단계는 사용 환경이나 당업자에 의해 순서가 변경될 수 있다.Hereinafter, an embodiment of a method for implementing a visual enhancement software based on a computer and a smartphone according to the present invention will be described in detail with reference to FIGS. 11 to 14. FIG. At this time, each step according to the method of the present invention may be changed in the use environment or the order by a person skilled in the art.
도 11은 본 발명의 일 실시예에 따른 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법의 동작과정을 상세하게 나타낸 순서도이며, 도 12 내지 도 14는 도 11의 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하는 과정, 사용자별 안 근육 원근 조절능력에 따라 표적물의 원근 속도를 자동으로 조절하는 과정, 사용자별 안 근육 원근 민첩성에 따라 표적물의 크기 및 선명도를 자동으로 조절하는 과정 각각을 상세하게 나타낸 순서도이다.FIG. 11 is a flowchart illustrating an operation procedure of a method for implementing a visual enhancement software based on a computer and a smartphone according to an exemplary embodiment of the present invention. FIGS. 12 to 14 are flowcharts The process of automatically adjusting the target velocity according to the star's muscle agility, the process of automatically adjusting the target's perspective velocity according to the ability of the user to adjust the perspective of the muscles of the eye, the size and the sharpness of the target according to the user's eye muscle agility FIG. 5 is a flow chart showing details of each process of automatic adjustment.
우선, 시력강화운동 제공 서버(300)는 애플리케이션이나 실행프로그램이 설치된 사용자 단말기(200)를 통해 시력강화운동을 수행하는 각각의 사용자별 눈의 크기나 모양, 안경착용여부, 시력 또는 이들의 조합을 포함한 스타일 정보를 수집한다(S100).First, the server 300 for enhancing the eyesight enhances the size and shape of each eye, the wearing of glasses, the visual acuity, or a combination thereof by performing a visual acuity enhancement exercise through a user terminal 200 provided with an application or an execution program (S100).
S100 단계를 통해 각 사용자별 스타일 정보를 수집한 이후, 시력강화운동 제공 서버(300)는 각각의 스타일별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑한다(S200). 즉 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 것이다.After collecting the style information for each user through step S100, the server 300 for visual enhancement provides clusters for each style and groups them into a plurality of clusters (S200). That is, machine learning is performed based on each user-specific style information, and grouping is performed by similar patterns to generate a plurality of clusters.
S200 단계를 통해 각각의 스타일 정보별로 그룹핑이 수행되면, 시력강화운동 제공 서버(300)는 기계학습을 수행하여 S200 단계에서 그룹핑된 각 클러스터별 최적의 시력강화운동모델을 생성한다(S300). 즉 복수 개로 그룹핑된 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 최적의 시력강화운동모델을 생성하는 것이다.If grouping is performed for each style information through step S200, the server 300 for enhancing the visual acuity performs machine learning to generate an optimal visual acuity strengthening exercise model for each cluster grouped in step S200 (S300). That is, a plurality of visual acuity strengthening exercise models preliminarily grouped into a plurality of groups are learned and an optimal visual acuity enhancement exercise model is generated for each cluster.
S200 및 S300 단계를 통해 시력강화운동 제공 서버(300)에서 각각의 사용자별 스타일 정보를 기계학습을 통해 분석하여 복수 개의 클러스터로 구분하고 각 클러스터별 최적의 시력강화운동모델을 생성한 이후, 각각의 사용자 단말기(200)는 사용자의 조작에 따라 시력강화운동 제공 서버(300)로부터 다운로드받아 설치한 애플리케이션이나 실행프로그램이 구동되는지를 판단한다(S400).S200, and S300, the server 300 analyzes the style information for each user through machine learning, divides the information into a plurality of clusters, generates an optimal visual acuity-enhancing motion model for each cluster, In operation S400, the user terminal 200 determines whether an installed application or an executable program is downloaded from the server 300 for providing the enhanced visual acuity according to the user's operation.
S400 단계의 판단결과 사용자 단말기(200)에 설치된 애플리케이션이나 실행프로그램이 구동되면, 사용자 단말기(200)는 카메라를 통해 사용자의 눈 주변을 촬영하고, 촬영 데이터를 네트워크(100)를 통해 시력강화운동 제공 서버(300)로 제공한다(S500).As a result of the determination in step S400, when the application or the execution program installed in the user terminal 200 is driven, the user terminal 200 photographs the user's eyes around the camera and provides the photographic data through the network 100 To the server 300 (S500).
그러면 시력강화운동 제공 서버(300)는 사용자 단말기(200)에서 촬영한 특정 사용자의 스타일 정보를 분석하여 스타일 정보를 확인한다(S600). 즉 사용자 단말기(200)로부터 입력되는 카메라 촬영 데이터를 토대로 사용자의 눈의 모양이나 크기, 안경착용여부 등을 확인하여 해당 사용자의 스타일 정보를 분석하는 것이다.In operation S600, the server 300 analyzes style information of a specific user photographed by the user terminal 200 and confirms the style information. That is, based on the camera photographing data input from the user terminal 200, the style information of the user is analyzed by confirming the shape, size and wearing of the user's eye.
S600 단계를 통해 사용자의 스타일 정보가 분석되면, 시력강화운동 제공 서버(300)는 분석된 특정 사용자의 스타일 정보와 상기 S200 단계에서 생성된 복수의 클러스터를 매칭하고, 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하고, 선택된 특정 클러스터에 속하는 시력강화운동모델을 사용자 단말기(200)에 제공할 시력강화운동모델로 선택한다(S700).When the style information of the user is analyzed in step S600, the server 300 for providing enhanced visual acuity matches the analyzed style information of the specific user with the plurality of clusters generated in step S200, and based on the matching result, And selects a visual acuity enhancement motion model belonging to the selected specific cluster as a visual acuity enhancement motion model to be provided to the user terminal 200 (S700).
S700 단계를 통해 사용자의 스타일 정보에 적합한 특정 시력강화운동모델이 선택되면, 시력강화운동 제공 서버(300)는 특정 시력강화운동모델을 네트워크(100)를 통해 해당 사용자 단말기(200)로 제공하여 화면상에 시력강화운동모델을 실행시켜 사용자가 시력강화운동을 수행하도록 한다(S800). 이때 상기 사용자 단말기(200)로 제공되는 시력강화운동모델은 실시간 스트리밍 형태로 제공되는 것이 가장 바람직한 형태이지만, 사전에 사용자 단말기(200)에 모든 시력강화운동모델을 저장해 두고 사용자의 스타일에 적합한 특정 시력강화운동모델을 실행시키는 방식을 적용할 수도 있다.If a specific visual acuity enhancement exercise model suitable for the style information of the user is selected in step S700, the visual accequity enhancement exercise server 300 provides the specific visual acuity enhancement exercise model to the corresponding user terminal 200 through the network 100, The user performs the visual acuity enhancement exercise (S800). At this time, it is most preferable that the visual enhancement exercise model provided to the user terminal 200 is provided in a form of real-time streaming. However, all the enhanced visualized exercise models are stored in the user terminal 200 in advance, A method of executing an enforced motion model may be applied.
또한, 상기 S800 단계를 통해 사용자가 자신에게 적합한 특정 시력강화운동모델을 사용하여 시력강화운동을 수행할 때, 시력강화운동 제공 서버(300)는 사용자 단말기(200)에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공할 수 있다. 이때 개인별 맞춤형 시력강화운동모델의 표적물 이동이나 원근 이도 속도의 변화는 사용자 단말기(200)에서 직접 수행되고, 그 결과를 시력강화운동 제공 서버(300)로 제공하여 업데이트하도록 할 수 있다.In addition, when the user performs the visual acuity enhancement exercise using the specific visual acuity enhancement exercise model suitable for himself / herself in step S800, the server 300 for providing the visual acuity enhancement exercises the eye movement of the user photographed by the user terminal 200 And the rate of the target movement or the perspective movement of the visual acuity enhancement model can be changed based on the analyzed reaction rate. At this time, the target movement of the personalized visual acuity enhancement movement model or the change of the perspective motion velocity may be directly performed by the user terminal 200, and the result may be provided to the visual acuity enhancement movement providing server 300 for updating.
즉 시력강화운동 제공 서버(300)는 도 12 내지 도 14에 도시된 바와 같이, 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하거나, 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하거나, 는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절할 수 있도록 하는 것이다. 이는 운동을 꾸준히 하는 사람은 전혀 하지 않는 사람에 비해 운동능력이 뛰어나 노화가 늦게 일어나고, 마찬가지로 컴퓨터 앞에서 오랜 시간 근무하는 사람의 시력은 눈 운동을 많이 하는 사람에 비해 시력이 매우 떨어지게 되기 때문에 쉽게 수행하기 어려운 눈 운동을 통해 시력개선을 보다 효율적으로 수행하기 위함이다. 이때 상기 각각의 과정은 시력강화운동모듈에 따라 별개로 수행하거나 동시에 진행할 수 있다.That is, as shown in FIGS. 12 to 14, the server 300 for providing visual acuity enhancement may automatically adjust the target velocity according to the eye muscular agility for each user performing the visual acuity enhancement exercise, , Or automatically adjusts the target size and sharpness according to the user's muscular and distal muscle agility. This is because people who do not exercise consistently have better athletic ability than those who do not exercise at all, and aging is delayed. Likewise, those who work for a long time in front of a computer are easily performed because their eyesight is much lower than those who have a lot of eye exercises. It is to perform vision improvement more efficiently through difficult eye movement. At this time, the respective processes may be performed separately or simultaneously according to the visual enhancement module.
먼저 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하는 방식을 도 12를 참조하여 보다 구체적으로 설명하면, 카메라로 촬영한 눈동자 이미지를 벡터라이징한 후(S801), 눈동자의 위치를 파악한다(S802).First, a method of automatically adjusting the target velocity according to the user's muscular agility according to the user will be described in more detail with reference to FIG. 12. Referring to FIG. 12, after the pupil image photographed by the camera is vectorized (S801), the position of the pupil is grasped (S802).
그리고 눈동자가 표적물을 따라오는 속도를 계산하고(S803), 계산된 눈동자 속도와 표적물을 비교하여 눈동자 속도가 표적물보다 기 설정된 수치(본 발명에서는 10%로 설정함) 이상 느린지의 여부를 판단한다(S804).Then, the speed at which the pupil follows the target is calculated (S803), and the calculated pupil velocity is compared with the target to determine whether the pupil velocity is slower than the predetermined value (10% in the present invention) (S804).
S804 단계의 판단결과 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리지 않으면 표적물의 위치 이동을 수행하고(S805), 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리면 표적물의 속도를 5%(이때 표적물의 속도는 사용자가 임의로 변경할 수 있음) 낮추고(S806), S801 단계 이후를 반복하여 수행한다.If it is determined in step S804 that the pupil velocity is not slower than the predetermined value by at least a predetermined value (S805), the target position is moved (S805). If the pupil velocity is slower than the target value by at least a predetermined value, the target velocity is decreased to 5% (Step S806), and repeats step S801 and subsequent steps.
또한, 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하는 방식을 도 13을 참조하여 보다 구체적으로 설명하면, 카메라로 촬영한 눈동자 이미지를 벡터라이징한 후(S811), 눈동자 원근거리를 파악한다(S812).13, a method of automatically adjusting the target object perspective velocity according to the ability of the user to adjust the perspective direction of the eye muscles according to the user will be described in more detail. After vectorizing the pupil image photographed by the camera (S811) (S812).
그리고 눈동자가 표적물 원근 초점거리에 따라오는 속도를 계산하고(S813), 계산된 눈동자 속도와 표적물을 비교하여 눈동자 속도가 표적물보다 기 설정된 수치(본 발명에서는 10%로 설정함) 이상 느린지의 여부를 판단한다(S814).Then, the speed at which the pupil comes along the target far-field focal length is calculated (S813), and the calculated pupil velocity is compared with the target so that the pupil velocity is slower than the predetermined value (10% in the present invention) (S814).
S814 단계의 판단결과 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리지 않으면 표적물의 원근 초점 위치의 이동을 수행하고(S815), 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리면 표적물의 원근 속도를 5%(이때 표적물의 원근 속도는 사용자가 임의로 변경할 수 있음) 낮추고(S816), S811 단계 이후를 반복하여 수행한다.If it is determined in step S814 that the pupil velocity is not slower than the target value by at least a preset value, the target of the far-field focus position is moved (S815). If the pupil velocity is slower than the target value by at least a predetermined value, At this time, the user can arbitrarily change the perspective speed of the target (S816), and repeats the process after step S811.
또한, 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 방식을 도 14를 참조하여 보다 구체적으로 설명하면, 표적물을 작게 한 후 선명도를 낮춘 후(S821), 표적물을 크게 한 후 선명도를 높인다(S822).In addition, a method of automatically controlling the size and sharpness of the target according to the user's muscular muscular agility is described in more detail with reference to FIG. 14. The target is reduced and the sharpness is reduced (S821) And then the sharpness is increased (S822).
그리고 눈동자의 원근거리를 파악하고(S813), 눈동자가 표적물 원근 초점거리에 따라오는 속도를 계산하고(S824), 계산된 눈동자 속도와 표적물을 비교하여 눈동자 속도가 표적물보다 기 설정된 수치(본 발명에서는 10%로 설정함) 이상 느린지의 여부를 판단한다(S825).(S813). Then, the speed at which the pupil follows the target distance focal distance is calculated (S824), and the calculated pupil velocity is compared with the target to determine whether the pupil velocity is greater than a predetermined value 10% in the present invention) or more (S825).
S825 단계의 판단결과 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리지 않으면 표적물의 원근 초점 위치의 이동을 수행하고(S826), 눈동자 속도가 표적물보다 기 설정된 수치 이상 느리면 눈의 반응속도에 따라 표적물의 원근감을 가감(이때 표적물의 원근감 가감 조정은 사용자가 임의로 변경할 수 있음)시키고(S827), S821 단계 이후를 반복하여 수행한다.If it is determined in step S825 that the pupil velocity is not slower than the predetermined value by a predetermined value or more, the target's far-focus position is moved (S826). If the pupil velocity is slower than the target value by at least a predetermined value, (In this case, the user can arbitrarily change the Perspective Sensitivity Adjustment of the target) (S827), and repeats the steps after S821.
한편, 상기 S800 단계를 통해 사용자가 자신에게 적합한 특정 시력강화운동모델을 사용하여 시력강화운동을 수행할 때, 시력강화운동 제공 서버(300)는 시력강화운동을 수행하는 사용자 단말기(200)에서 촬영한 사용자의 눈동자가 기 설정된 카메라 인식범위를 벗어나는지의 여부를 모니터링하고, 사용자의 눈동자가 일정범위를 벗어나면 경고신호를 표시하거나 경고음을 출력하도록 제어할 수 있다.Meanwhile, when the user performs the visual acuity enhancement exercise using the specific visual acuity enhancement exercise model suitable for the user through step S800, the visual acuity enhancement exercise server 300 may acquire the visual acuity enhancement exercise model from the user terminal 200 performing the visual acuity enhancement exercise It is possible to monitor whether or not a pupil of a user is out of a predetermined camera recognition range and to control the display of a warning signal or a warning sound when the pupil of the user is out of a certain range.
S800 단계를 통해 사용자 단말기(200)에서 시력강화운동이 수행되면, 시력강화운동 제공 서버(300)는 각 사용자가 수행하는 훈련상황을 지속적으로 추적하여 데이터베이스에 저장, 관리한다(S900). 즉 각 사용자들의 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 최고속도, 타인과의 비교 데이터 또는 이들의 조합을 날짜별로 구분하여 저장, 관리하는 것이다. 이렇게 저장, 관리되는 각종 훈련상황 정보는 시력강화운동을 수행하는 사용자 단말기(200) 상에 실시간으로 텍스트 및 그래픽 형태로 다양하게 표시되어, 각 사용자들이 시력강화운동의 훈련성과나 시력향상여부를 손쉽게 확인할 수 있다.If the user intends to perform the visual enhancement exercise in step S800, the server 300 continuously monitors the training situations performed by the respective users and stores them in a database (S900). That is, it is to store and manage the pupil response speed, the training time, the maximum speed, comparison data with others, or a combination of them according to the date by moving up, down, left and right of each user, zigzag movement and perspective movement. Various kinds of training condition information stored and managed in this manner are displayed in various forms in text and graphic form in real time on the user terminal 200 performing the visual acuity strengthening exercise so that each user can easily recognize the improvement in visual acuity performance Can be confirmed.
또한, S900 단계를 통해 각 사용자들의 훈련상황을 추적 관리하는 시력강화운동 제공 서버(300)는 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우, 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기(200)로 제공하는 기능을 추가로 수행할 수 있다. 즉 그룹에 속한 각 구성원들이 다른 구성원들의 훈련데이터(예를 들어, 눈동자 움직임 속도, 수정체의 원근 조절 속도 등의 수치 및 그래프로 나타낸 정보)를 확인하도록 하여, 서로 경쟁 심리를 유도하여 훈련효과를 높일 수 있도록 하는 것이다.In step S900, the server 300 for tracking and managing the training status of each user may be configured to perform a visual enhancement exercise according to the visual enhancement exercises performed by the members in the group, And to provide the training data to each of the user terminals 200 belonging to the group. That is, each member of the group is required to confirm the training data of other members (for example, the pupil movement speed, the numerical values of the perspective adjustment speed of the lens, and the graph information) .
이처럼, 본 발명은 특정 사용자의 스타일 정보에 따른 최적의 시력강화운동모델을 추출하여 제공하기 때문에 각 사용자들이 자신에게 적합한 시력강화운동을 수행하여 눈의 근육을 강화시킴은 물론, 시력을 향상시킬 수 있으며, 노안 발생을 최대한 억제할 수 있다.As described above, the present invention extracts and provides an optimal visual acuity enhancement exercise model according to a style information of a specific user, so that each user performs a visual acuity enhancement exercise suitable for him / herself to reinforce the eye muscles, And the occurrence of presbyopia can be suppressed as much as possible.
또한, 카메라로 촬영하여 분석한 안구 움직임에 따른 반응속도에 따라 사용자 단말기 상에 표시되는 표적물 이동이나 원근 이동의 속도가 변화되기 때문에 맞춤형 시력강화운동을 제공받을 수 있으며, 이를 통해 시력강화운동의 효율을 극대화시킬 수 있다.Further, since the speed of the target movement or perspective movement displayed on the user terminal changes according to the reaction speed according to the eye movement analyzed by the camera, it is possible to provide a customized vision enhancement exercise, Thereby maximizing the efficiency.
또한, 시력강화운동 제공 서버 측에서 각 사용자들의 시력강화운동을 지속적으로 추적, 관리하기 때문에 각 사용자들이 자신의 시력강화운동의 훈련성과나 시력향상여부를 손쉽게 확인할 수 있다.In addition, since the server for enhancing visual acuity continuously monitors and manages each user's visual acuity enhancement exercise, each user can easily check his or her training performance or visual acuity improvement.
또한, 사용자의 눈동자가 소정 범위를 벗어나는 경우 경고신호가 표시되거나 경고음이 출력되기 때문에 각 사용자들이 시력강화운동에 집중하여 훈련효과를 높일 수 있다.In addition, when the user's pupil is out of a predetermined range, a warning signal is displayed or a warning sound is outputted, so that each user can concentrate on the visual acuity enhancement exercise and enhance the training effect.
또한, 친구, 가족, 지인들 간에 그룹을 형성하는 경우, 서로의 시력강화운동에 따른 훈련데이터를 그래프, 눈동자 움직임 속도, 수정체의 원근 조절 속도 등으로 구분하여 확인할 수 있으므로 그룹 내 구성원들이 훈련데이터의 공유를 통해 발전정보를 상호간에 확인하고 경쟁유도를 통해 시력강화 훈련효율을 증대시킬 수 있다.In addition, when a group is formed between friends, family members, and acquaintances, the training data according to each of the visual acuity exercises can be identified by classifying the graph, the pupil movement speed, and the perspective control speed of the lens, Sharing can improve the efficiency of visual reinforcement training by mutually confirming development information and inducing competition.
이상으로 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 판단되어야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, I will understand the point. Accordingly, the technical scope of the present invention should be determined by the following claims.
100 : 네트워크 200 : 사용자 단말기
300 : 시력강화운동 제공 서버 310 : 통신부
320 : 시력강화운동모델 생성부 322 : 데이터 수집부
324 : 클러스터 생성부 326 : 모델 생성부
330 : 시력강화운동모델 추출부 332 : 스타일 분석부
334 : 클러스터 선택부 336 : 모델 선택부
340 : 시력강화운동 수행부 350 : 추적 관리부
360 : 경고 발생부 370 : 제어부
400 : 데이터베이스
100: network 200: user terminal
300: a vision enhancing exercise providing server 310:
320: Visual Enhancement Exercise Model Generation Unit 322: Data Collection Unit
324: Cluster Generation Unit 326: Model Generation Unit
330: visual enhancement motion model extracting unit 332: style analyzing unit
334: Cluster selection unit 336: Model selection unit
340: visual enhancement exercise performing unit 350:
360: warning generating unit 370:
400: Database

Claims (18)

  1. 시력강화운동을 수행하는 사용자들의 스타일 정보를 수집하고, 각각의 스타일별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑하고, 그룹핑된 각각의 클러스터별 시력강화운동모델을 생성하는 시력강화운동모델 생성부; 및
    사용자 단말기에서 촬영한 특정 사용자의 스타일 정보를 분석하여 상기 시력강화운동모델 생성부를 통해 그룹핑된 복수 개의 클러스터 중 어느 클러스터에 해당하는지를 확인하고, 확인된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자가 수행할 시력강화운동모델로 추출하는 시력강화운동모델 추출부;를 포함하며,
    상기 시력강화운동모델 생성부는,
    상기 사용자 단말기를 통해 시력강화운동을 수행하는 복수의 사용자들의 스타일 정보를 수집하는 데이터 수집부;
    상기 데이터 수집부에서 수집한 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 클러스터 생성부; 및
    상기 클러스터 생성부를 통해 생성된 각각의 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 시력강화운동모델을 생성하는 모델 생성부;를 포함하며,
    상기 시력강화운동모델 추출부는,
    상기 사용자 단말기로부터 입력되는 카메라 촬영 데이터를 토대로 특정 사용자의 스타일 정보를 분석하는 스타일 분석부;
    상기 스타일 분석부를 통해 분석된 특정 사용자의 스타일 정보와 상기 시력강화운동모델 생성부에서 생성된 복수의 클러스터를 매칭하고, 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하는 클러스터 선택부; 및
    상기 클러스터 선택부에서 선택된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자 단말기에 제공할 시력강화운동모델로 선택하는 모델 선택부;를 포함하며,
    상기 스타일 정보는,
    눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    A visual enhancement motion model generation unit for collecting style information of users performing visual enhancement exercises, grouping them into a plurality of clusters by clustering each style, and generating grouped visual acuity enhancement motion models for each cluster; And
    Analyzing style information of a specific user photographed by the user terminal to check which cluster among a plurality of clusters grouped through the visual accequation enhanced movement model generation unit and checking whether a visual enhancement exercise model belonging to the identified specific cluster is performed by the user And a visual enhancement motion model extracting unit for extracting a visual enhancement motion model,
    Wherein the visual enhancement motion model generation unit generates,
    A data collection unit for collecting style information of a plurality of users performing a sight enhancement exercise through the user terminal;
    A cluster generating unit for generating a plurality of clusters by performing machine learning based on each user's style information collected by the data collecting unit and grouping them by similar patterns; And
    And a model generating unit that learns a plurality of pre-set visual acute-power-enhancing motion models for each of the clusters generated through the clustering unit and generates a cluster-specific visual acuity-enhancing motion model,
    Wherein the visual enhancement motion model extraction unit extracts,
    A style analyzer for analyzing style information of a specific user based on camera photographing data input from the user terminal;
    A cluster selector for matching the style information of a specific user analyzed through the style analyzer with a plurality of clusters generated by the visual enhancement motion model generation unit and selecting a cluster corresponding to style information of the user based on the matching result; And
    And a model selection unit for selecting a visual augmentation motion model belonging to a specific cluster selected by the cluster selection unit as a visual augmentation motion model to be provided to the user terminal,
    The style information may include:
    An eye size, a shape, wearing glasses, a visual acuity, an exercise degree of the eye regulating muscles, or a combination thereof.
  2. 삭제delete
  3. 청구항 1에 있어서,
    상기 시력강화운동모델은,
    눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴 또는 이들의 조합 중 적어도 하나 이상 설정되어 있는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    The method according to claim 1,
    The visual acuity enhancement model may include:
    At least one of a color, a theme screen, a target location movement pattern, or a combination thereof is set for eliminating eye fatigue.
  4. 청구항 1에 있어서,
    상기 시력강화 소프트웨어 구현 장치는,
    상기 시력강화운동모델 추출부에서 추출된 시력강화운동모델을 상기 사용자 단말기로 제공하는 시력강화운동 수행부;를 더 포함하며,
    상기 시력강화운동 수행부는,
    상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 상기 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공할 수 있는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    The method according to claim 1,
    Wherein the vision enhancing software implementation comprises:
    And a visual enhancement exercise performing unit for providing the user with a visual enhancement exercise model extracted by the visual enhancement exercise model extracting unit,
    Wherein the visual enhancement exercise performing unit comprises:
    And a control unit for analyzing reaction speeds of the user photographed by the user terminal performing the visual acuity enhancement movement through the visual acuity enhancement movement model according to the eye movement, Wherein the visual enhancement software is implemented by a computer and a smart phone.
  5. 청구항 4에 있어서,
    상기 시력강화운동 수행부는,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하고,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하며,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    The method of claim 4,
    Wherein the visual enhancement exercise performing unit comprises:
    Based on the analysis of the pupil information of the user photographed by the camera, the target speed is automatically controlled according to the eye muscle agility for each user performing the visual acuity strengthening exercise,
    Based on the analysis of the pupil information of the user who is photographed by the camera, the user adjusts the perspective distance speed automatically according to the ability of the user to adjust the perspective of the muscles of the eye,
    And a visual enhancement software based on a computer and a smart phone, characterized by automatically adjusting a target size and a sharpness according to the agility of the eye muscle of the user performing the visual acuity strengthening exercise based on the analysis of the pupil information of the user photographed by the camera Implementation device.
  6. 청구항 1에 있어서,
    상기 시력강화 소프트웨어 구현 장치는,
    상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 데이터베이스에 각 사용자별로 누적, 저장하는 추적 관리부;를 더 포함하며,
    상기 추적 관리부는, 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기로 제공하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    The method according to claim 1,
    Wherein the vision enhancing software implementation comprises:
    The pupil reaction speed, the training time, the comparison data with other persons or the like depending on the eye movement of the user photographed by the user terminal performing the visual acuity strengthening motion through the visual acuity strengthening motion model, zigzag movement, And a trace management unit for accumulating and storing combinations of each user in the database for each user,
    Wherein the tracking management unit provides the training data according to the visual acuity enhancement exercises performed by the respective members in the group to the respective user terminals belonging to the group when the users performing the visual acuity strengthening exercise form a group. Phone based sight enhancement software implementation device.
  7. 청구항 1에 있어서,
    상기 시력강화 소프트웨어 구현 장치는,
    상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 눈동자가 기 설정되어 있는 카메라 인식범위를 벗어나면 경고신호를 표시하거나 경고음을 출력하는 경고 발생부;를 더 포함하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 장치.
    The method according to claim 1,
    Wherein the vision enhancing software implementation comprises:
    And an alarm generating unit for displaying a warning signal or outputting a warning sound when a pupil of a user photographed by the user terminal performing the visual acuity enhancement movement through the visual acuity strengthening exercise model is out of a preset camera recognition range And a device for realizing a visual enhancement software based on a smart phone.
  8. 삭제delete
  9. 삭제delete
  10. 시력강화운동 제공 서버에서, 시력강화운동을 수행하는 사용자들의 스타일 정보를 수집하고, 각각의 스타일별로 클러스터링을 수행하여 복수 개의 클러스터로 그룹핑하고, 그룹핑된 각각의 클러스터별 시력강화운동모델을 생성하는 시력강화운동모델 생성 단계; 및
    상기 시력강화운동 제공 서버에서, 사용자 단말기에서 촬영한 특정 사용자의 스타일 정보를 분석하여 상기 시력강화운동모델 생성 단계에서 생성한 복수 개의 클러스터 중 어느 클러스터에 해당하는지를 확인하고, 확인된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자가 수행할 시력강화운동모델로 추출하는 시력강화운동모델 추출 단계;를 포함하며,
    상기 시력강화운동모델 생성 단계는,
    상기 시력강화운동 제공 서버에서, 상기 사용자 단말기를 통해 시력강화운동을 수행하는 복수의 사용자들의 스타일 정보를 수집하는 데이터 수집 단계;
    상기 데이터 수집 단계에서 수집한 각각의 사용자별 스타일 정보를 토대로 기계학습을 수행하여 유사한 패턴별로 그룹핑함으로써, 복수 개의 클러스터를 생성하는 클러스터 생성 단계; 및
    상기 클러스터 생성 단계를 통해 생성된 각각의 클러스터별로 기 설정되어 있는 복수 개의 시력강화운동모델을 학습하여 각각의 클러스터별 시력강화운동모델을 생성하는 모델 생성 단계;를 포함하며,
    상기 시력강화운동모델 추출 단계는,
    상기 시력강화운동 제공 서버에서, 상기 사용자 단말기로부터 입력되는 카메라 촬영 데이터를 토대로 특정 사용자의 스타일 정보를 분석하는 스타일 분석 단계;
    상기 스타일 분석 단계를 통해 분석된 특정 사용자의 스타일 정보와 상기 시력강화운동모델 생성 단계에서 생성된 복수의 클러스터를 매칭하고, 매칭 결과를 토대로 사용자의 스타일 정보에 해당하는 클러스터를 선택하는 클러스터 선택 단계; 및
    상기 클러스터 선택 단계에서 선택된 특정 클러스터에 속하는 시력강화운동모델을 상기 사용자 단말기에 제공할 시력강화운동모델로 선택하는 모델 선택 단계;를 포함하며,
    상기 스타일 정보는,
    눈의 크기나 모양, 안경착용여부, 시력, 안구 조절근육의 운동정도 또는 이들의 조합을 포함하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    In the server for enhancing the visual acuity, the style information of the users performing the visual acuity strengthening motion is collected, grouping into a plurality of clusters is performed for each style, and visual acuity An enhanced motion model generation step; And
    The server for providing visual acuity enhancement analyzes the style information of a specific user photographed by the user terminal to check which cluster among the plurality of clusters generated in the visual acuity enhancement movement model generation step, And a visual enhancement motion model extraction step of extracting the enhanced motion model as a visual enhancement motion model to be performed by the user,
    Wherein the step of generating the visual-
    A data gathering step of collecting style information of a plurality of users performing a sight enhancement exercise through the user terminal in the sight enhancement exercise providing server;
    A cluster generating step of generating a plurality of clusters by performing machine learning based on each user's style information collected in the data collecting step and grouping them by similar patterns; And
    And a model generation step of learning a plurality of pre-set visual acuity enhancement motion models for each of the clusters generated through the cluster creation step to generate visual acuity enhancement motion models for respective clusters,
    Wherein the step of extracting the visual acuity-
    A style analyzing step of analyzing style information of a specific user on the basis of the camera photographing data input from the user terminal in the sight enhancement motion providing server;
    A cluster selection step of matching the style information of the specific user analyzed through the style analysis step with a plurality of clusters generated in the step of generating the visual acuity-enhanced motion model, and selecting clusters corresponding to the style information of the user based on the matching result; And
    And a model selection step of selecting a visual acuity enhancement motion model belonging to a specific cluster selected in the cluster selection step as a visual acuity enhancement motion model to be provided to the user terminal,
    The style information may include:
    Wherein the visual acuity enhancement software includes a size, a shape, an eye wear, a visual acuity, an exercise degree of the eye regulating muscle, or a combination thereof.
  11. 삭제delete
  12. 청구항 10에 있어서,
    상기 시력강화운동모델은,
    눈의 피로를 해소하기 위한 컬러, 테마별 화면, 표적물 위치 이동패턴, 원근 이동패턴 또는 이들의 조합 중 적어도 하나 이상 설정되어 있는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    The method of claim 10,
    The visual acuity enhancement model may include:
    Wherein at least one of a color for eliminating eye fatigue, a theme screen, a target location movement pattern, a perspective movement pattern, or a combination thereof is set.
  13. 청구항 10에 있어서,
    상기 시력강화 소프트웨어 구현 방법은,
    상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델 추출 단계를 통해 추출한 시력강화운동모델을 상기 사용자 단말기로 제공하는 시력강화운동 수행 단계;를 더 포함하며,
    상기 시력강화운동 수행 단계는,
    상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 반응속도를 분석하고, 분석된 반응속도를 토대로 상기 시력강화운동모델의 표적물 이동이나 원근 이동의 속도를 변화시켜 제공할 수 있는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    The method of claim 10,
    The method of implementing the visual enhancement software comprises:
    And a visual acuity enhancement exercise step of providing the visual acuity enhancement exercise model extracted through the visual acuity enhancement exercise model extraction step to the user terminal,
    The performing step may include:
    And a control unit for analyzing reaction speeds of the user photographed by the user terminal performing the visual acuity enhancement movement through the visual acuity enhancement movement model according to the eye movement, Wherein the visual enhancement software is based on a computer and a smart phone.
  14. 청구항 13에 있어서,
    상기 시력강화운동 수행 단계는,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 민첩성에 따라 표적물 속도를 자동으로 조절하고,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 조절능력에 따라 표적물 원근 속도를 자동으로 조절하며,
    카메라로 촬영한 사용자의 눈동자 정보 분석을 토대로 시력강화운동을 수행하는 사용자별 안 근육 원근 민첩성에 따라 표적물 크기 및 선명도를 자동으로 조절하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    14. The method of claim 13,
    The performing step may include:
    Based on the analysis of the pupil information of the user photographed by the camera, the target speed is automatically controlled according to the eye muscle agility for each user performing the visual acuity strengthening exercise,
    Based on the analysis of the pupil information of the user who is photographed by the camera, the user adjusts the perspective distance speed automatically according to the ability of the user to adjust the perspective of the muscles of the eye,
    And a visual enhancement software based on a computer and a smart phone, characterized by automatically adjusting a target size and a sharpness according to the agility of the eye muscle of the user performing the visual acuity strengthening exercise based on the analysis of the pupil information of the user photographed by the camera Implementation method.
  15. 청구항 10에 있어서,
    상기 시력강화 소프트웨어 구현 방법은,
    상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 안구 움직임에 따른 상하좌우 이동, 지그재그 이동 및 원근 이동에 따른 눈동자 반응속도, 훈련시간, 타인과의 비교 데이터 또는 이들의 조합을 데이터베이스에 각 사용자별로 누적, 저장하는 추적 관리 단계;를 더 포함하며,
    상기 추적 관리 단계는, 시력강화운동을 수행하는 사용자들이 그룹을 형성한 경우 그룹 내의 각 구성원들이 수행한 시력강화운동에 따른 훈련데이터를 그룹 내에 속한 각각의 사용자 단말기로 제공하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    The method of claim 10,
    The method of implementing the visual enhancement software comprises:
    Wherein the visual acuity enhancing exercise server provides the visual acuity enhancing exercise model to the user terminal for performing a visual acuity enhancement exercise, the pupil reaction speed, the zigzag reaction, and the training time according to the eye movement of the user, And a trace management step of accumulating and storing comparison data with another person or a combination thereof in a database for each user,
    Wherein the tracking management step provides the training data corresponding to the visual acuity enhancement exercises performed by the members in the group to the respective user terminals belonging to the group when the users performing the visual acuity strengthening exercise group form a group. How to implement vision enhancing software based on smartphone.
  16. 청구항 10에 있어서,
    상기 시력강화 소프트웨어 구현 방법은,
    상기 시력강화운동 제공 서버에서, 상기 시력강화운동모델을 통해 시력강화운동을 수행하는 상기 사용자 단말기에서 촬영한 사용자의 눈동자가 기 설정되어 있는 카메라 인식범위를 벗어나면 경고신호를 표시하거나 경고음을 출력하는 경고 발생 단계;를 더 포함하는 것을 특징으로 하는 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법.
    The method of claim 10,
    The method of implementing the visual enhancement software comprises:
    The visual accequity enhancement movement providing server displays a warning signal or outputs a warning sound when a pupil of a user photographed by the user terminal performing the visual acuity enhancement movement is out of a preset camera recognition range The method of claim 1, further comprising the step of generating an alert.
  17. 삭제delete
  18. 삭제delete
KR1020160150014A 2016-11-11 2016-11-11 A method for implementing eyesight strengthen software based on computer and smartphone KR101899405B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160150014A KR101899405B1 (en) 2016-11-11 2016-11-11 A method for implementing eyesight strengthen software based on computer and smartphone

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160150014A KR101899405B1 (en) 2016-11-11 2016-11-11 A method for implementing eyesight strengthen software based on computer and smartphone

Publications (2)

Publication Number Publication Date
KR20180052892A KR20180052892A (en) 2018-05-21
KR101899405B1 true KR101899405B1 (en) 2018-09-17

Family

ID=62453355

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160150014A KR101899405B1 (en) 2016-11-11 2016-11-11 A method for implementing eyesight strengthen software based on computer and smartphone

Country Status (1)

Country Link
KR (1) KR101899405B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210093396A (en) 2020-01-17 2021-07-28 신라대학교 산학협력단 Image Analysis-Based Visual Function Training and Eye Disease Prediction System and Method

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110301724A (en) * 2019-07-22 2019-10-08 复汉海志(江苏)科技有限公司 A kind of field intelligent positioning bracelet
KR102280944B1 (en) * 2019-08-06 2021-07-23 김경태 Method for eye state inspection and computing device for executing the method
KR102250775B1 (en) * 2019-10-18 2021-05-11 주식회사 에스알파테라퓨틱스 Digital apparatus and application for treating myopia
KR102160817B1 (en) * 2019-10-31 2020-09-28 한민구 System of clustering

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5148016B2 (en) * 2011-05-20 2013-02-20 パナソニック株式会社 3D image providing apparatus and method
KR101471761B1 (en) * 2013-05-30 2014-12-10 가톨릭대학교 산학협력단 Apparatus for strengthening oculomotor capacity using 3d contents

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5148016B2 (en) * 2011-05-20 2013-02-20 パナソニック株式会社 3D image providing apparatus and method
KR101471761B1 (en) * 2013-05-30 2014-12-10 가톨릭대학교 산학협력단 Apparatus for strengthening oculomotor capacity using 3d contents

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210093396A (en) 2020-01-17 2021-07-28 신라대학교 산학협력단 Image Analysis-Based Visual Function Training and Eye Disease Prediction System and Method

Also Published As

Publication number Publication date
KR20180052892A (en) 2018-05-21

Similar Documents

Publication Publication Date Title
KR101899405B1 (en) A method for implementing eyesight strengthen software based on computer and smartphone
US20210110734A1 (en) Systems and methods for movement skill analysis and skill augmentation
CN102934458B (en) Interest-degree estimation unit and interest-degree method of estimation
US20190009133A1 (en) Systems and methods for data-driven movement skill training
CN109011508A (en) A kind of intelligent coach system and method
JP2021527998A (en) Augmented reality display with frame modulation functionality
US10795441B2 (en) Method of recognizing user intention by estimating brain signals, and brain-computer interface apparatus based on head mounted display implementing the method
US20180268738A1 (en) Systems and methods for augmented reality-based service delivery
CN109416865A (en) The apparatus and method for used for monitoring device
CN104850138A (en) Intelligent control zooming training device
US20210064128A1 (en) Human-computer interface using high-speed and accurate tracking of user interactions
CN106448088A (en) Intelligent wearable eyesight protecting device and method
EP3687388A1 (en) Directing live entertainment using biometric sensor data for detection of neurological state
CN110890140A (en) Virtual reality-based autism rehabilitation training and capability assessment system and method
KR20180109385A (en) Wearable Device for rehabilitating dizziness
CN109310561B (en) Motion teaching system and motion teaching method
US20210033873A1 (en) Electronic device and method of controlling the same
US20210038465A1 (en) Systems and methods for vestibular rehabilitation
KR102114946B1 (en) System and method for evaluating content quality based on biometric changing information according to watching virtual reality(vr) content
KR20190045041A (en) Method for recogniging user intention by estimating brain signals, and brain-computer interface apparatus based on head mounted display implementing the method
WO2018132446A1 (en) Adaptive behavioral training, and training of associated physiological responses, with assessment and diagnostic functionality
Zhang et al. Attention guided deep imitation learning
KR101734845B1 (en) Emotion classification apparatus using visual analysis and method thereof
KR102320960B1 (en) Personalized home training behavior guidance and correction system
KR20190047644A (en) Method and wearable device for providing feedback on exercise

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant