KR20190143742A - The Device for improving the study concentration - Google Patents
The Device for improving the study concentration Download PDFInfo
- Publication number
- KR20190143742A KR20190143742A KR1020180071642A KR20180071642A KR20190143742A KR 20190143742 A KR20190143742 A KR 20190143742A KR 1020180071642 A KR1020180071642 A KR 1020180071642A KR 20180071642 A KR20180071642 A KR 20180071642A KR 20190143742 A KR20190143742 A KR 20190143742A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- learning
- learning concentration
- concentration value
- image
- Prior art date
Links
- 238000013500 data storage Methods 0.000 claims abstract description 19
- 238000004364 calculation method Methods 0.000 claims abstract description 18
- 230000005540 biological transmission Effects 0.000 claims abstract description 14
- 238000001514 detection method Methods 0.000 claims abstract description 11
- 210000001747 pupil Anatomy 0.000 claims description 23
- 210000001331 nose Anatomy 0.000 claims description 21
- 238000000034 method Methods 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 description 5
- 230000008921 facial expression Effects 0.000 description 5
- 210000004556 brain Anatomy 0.000 description 4
- 201000003723 learning disability Diseases 0.000 description 4
- 206010041349 Somnolence Diseases 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000010921 in-depth analysis Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 208000032140 Sleepiness Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000008485 antagonism Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 230000000193 eyeblink Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000006883 memory enhancing effect Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 230000037321 sleepiness Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
- G06Q50/205—Education administration or guidance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Tourism & Hospitality (AREA)
- Strategic Management (AREA)
- General Health & Medical Sciences (AREA)
- Educational Technology (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Educational Administration (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
본 발명은 사용자의 학습 집중도를 향상시키기 위한 학습 집중도 향상 장치에 관한 것으로, 좀 더 상세하게는, 사용자의 학습 방해를 최소화하면서 일반적인 학습자의 얼굴 표정 또는 자세를 바탕으로 학습 집중도를 검출함과 함께, 각 사용자별 학습 자세 습관 및 얼굴 표정 습관을 학습 집중도 산출에 반영하고, 사용자별 고유한 습관을 반영하여 보다 정확한 학습 집중도를 산출해 낼 수 있도록 하며, 사용자별 학습 집중도를 바탕으로 사용자의 학습 집중도를 향상 시킬 수 있도록 집중도 향상 컨텐츠를 제공하는 학습 집중도 향상 장치에 관한 것이다.The present invention relates to an apparatus for improving learning concentration for improving a user's learning concentration, and more particularly, while detecting learning concentration based on a facial expression or posture of a general learner while minimizing user's learning disturbance. The learning posture habits and facial expression habits of each user are reflected in the calculation of learning concentration, and the user's learning concentration can be calculated based on the learning concentration of each user. The present invention relates to an apparatus for improving concentration of learning that provides content for improving concentration.
최근에 자녀의 교육에 대해 부모의 관심이 매우 높아지면서 국내 사회의 사교육 시장은 날로 성장하고 있으며, 그 열기가 과열되어 심각한 사회문제로 대두되고 있는 실정이다. 지속적인 사교육 시장의 성장을 억제하기 위해 사교육을 대체할 새로운 학습 도구가 개발되고 있으며, 그 일례로 학습자의 학습 집중도를 향상시키기 위한 기억력 증진용 약품 및 음식물, 빛과 소리의 동조화 현상을 이용한 전자파를 방출해 뇌 활성화를 도모하는 장치 등이 개발 활용되고 있다.Recently, as the parents' interest in the education of their children is very high, the private education market in the domestic society is growing day by day, and the heat is overheated and it is a serious social problem. New learning tools are being developed to replace private tutoring to curb the growth of the private tutoring market. For example, it emits electromagnetic waves by using memory-enhancing drugs, food and light, and sound and sound synchronization to improve learners' concentration of learning. Apparatuses which plan the brain activation are developed and utilized.
최근에는 컴퓨터 기반의 다양한 학습 도구가 개발 되고 있으며, 특히, 학업 집중력 향상이나 학습시간 측정에 대한 연구 및 개발이 진행되고 있다. 등록특허 제10-1693716호(발명의 명칭: '뇌파를 이용한 졸음정도 및 집중정도의 판단방법 및 이를 이용한 집중력저감 알림 시스템')에서는 뇌파를 측정하여 졸음정도 및 집중정도를 판단하는 방법으로 4채널 뇌파분석기를 이용하는 것으로, 머리에 뇌파 측정을 위한 전극 부착이 필수적이므로 학습자가 사용하는 것은 불편하여 오히려 집중력이 저하되거나 심리적인 반감을 초래할 수 있는 문제점이 있으며, 등록실용신안 제20-0438323호(고안의 명칭:'학습시간 확인기능을 갖춘 시계장치')에서는 학습 목표 시간을 설정하고, 학습 시작 및 종료 등을 설정하는 버튼 조작을 통하여 학습시간을 측정할 수 있게 구성된 것으로, 학습자의 학습태도와 무관하게 학습 목표시간 달성이 가능하므로 학습에 집중한 실질적 학습시간이 측정되지 못하는 문제점이 있다.Recently, various computer-based learning tools have been developed. In particular, research and development on improving academic concentration and measuring learning time have been conducted. Patent No. 10-1693716 (name of the invention: 'the method of determining the degree of drowsiness and concentration using brain waves and a concentration reduction notification system using the same') in the four-channel method to determine the degree of drowsiness and concentration by measuring the brain waves By using an EEG analyzer, it is necessary to attach an electrode for EEG measurement to the head, so it is inconvenient for the learner to use, which may result in a decreased concentration or a psychological antagonism. Registration Utility Model No. 20-0438323 (Draft) Name: 'Clock device with learning time check function' is configured to measure the learning time by setting the learning target time and setting the start and end of learning, etc., regardless of the learner's learning attitude. Therefore, there is a problem that the actual learning time focused on learning cannot be measured because the learning goal time can be achieved.
이에, 공개특허 제10-2015-0021274호(발명의 명칭: '인공지능을 활용한 학습시간 평가 시스템 및 그 방법')에서는 스마트폰이나 태블릿 PC 등의 모바일 기기를 이용해 학습 상황의 영상, 녹음 및, 소음 등의 자료를 수집하고, 학습 상황 여부를 판단할 수 있는 자료를 사전에 등록하여 상기 영상, 녹음, 소음 등의 수집된 자료와 비교함으로써, 학습 여부를 판단하며, 학습 여부 판단에 따른 학습 시간을 점수화하여 평가할 수 있도록 구성된 것으로, 단순히 학습 여부만을 판단한 후, 절대적 학습 시간을 평가함으로써, 평가된 학습 시간 중 학습자의 학습 집중도 및 학습 효율은 여전히 판단할 수 없는 문제점이 있으며, 각 학습자 개인별 고유한 학습 습관이나 버릇 등이 반영된 정확한 학습 평가를 하기 어렵거나 오랜시간이 소요되는 문제점이 있다.Accordingly, in Korean Patent Publication No. 10-2015-0021274 (name of the invention: 'learning time evaluation system using artificial intelligence and method thereof'), using a mobile device such as a smartphone or tablet PC, the image of the learning situation, recording and Collects data such as noise and noise, and registers data that can determine the learning situation in advance and compares it with the collected data such as video, recording and noise to determine whether to learn or not, and to learn according to learning It is configured to evaluate the time to score, simply determine whether the learning, and then by evaluating the absolute learning time, the learner's learning concentration and learning efficiency of the evaluated learning time still has a problem that can not be determined, each learner unique There is a problem that it is difficult or time-consuming to make accurate learning evaluations reflecting a learning habit or habit.
본 발명은 상기와 같은 문제점을 해결하기 위해 도출된 것으로, 사용자 신체에 측정 장치를 부착할 필요가 없도록 하여 사용자의 학습 방해를 최소화하면서 학습 집중도를 파악할 수 있도록 하고, 학습 시간뿐만아니라, 학습 시간 중 사용자의 학습 집중도도 평가할 수 있도록 하여 사용자의 학습 효율을 향상시킬 수 있도록 하며,The present invention was derived to solve the above problems, so that it is not necessary to attach the measuring device to the user's body to minimize the learning disturbance of the user to grasp the concentration of learning, as well as during the learning time, It also allows users to assess their learning concentration, which helps them improve their learning efficiency.
또한, 각 학습자 개인별 고유한 학습 자세 습관이나 버릇 등을 학습 집중도 분석에 반영하여 학습자 개인별 학습 집중도를 신속하고 정확하게 산출 평가해 낼 수 있도록 한다.In addition, it is possible to quickly and accurately calculate and evaluate the learning concentration of each learner by reflecting the learning attitude habits and habits of each learner in the learning concentration analysis.
상기 전술한 문제점을 해결하기 위한 본 발명의 일 형태에서는, 사용자 영상을 촬영하고, 촬영된 사용자 영상 중 사용자의 얼굴 영상을 취득하는 사용자 영상 취득부; 상기 사용자 영상 취득부로부터 사용자의 얼굴 영상을 입력받아 사용자의 동공 위치 및 시선 방향을 검출하고, 사용자의 눈, 코 및 입의 형상을 검출하는 사용자 영상 정보 검출부; 사전에 검출 수집된 다수 사용자의 동공 위치, 시선방향, 눈, 코 및 입의 형상에 따른 제1 학습 집중도값 결정 데이터가 저장되는 학습 집중도 데이터 저장부; 상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출하는 사용자 학습 집중도 산출부; 상기 사용자 학습 집중도 산출부에서 산출한 사용자의 학습 집중도값을 입력받고, 입력받은 상기 사용자의 학습 집중도값에 따라 소정 영상 또는 소리를 외부로 출력하는 집중도 알림부; 및, 상기 사용자 영상 정보 검출부에서 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및, 입의 형상을 검출하는데 이용된 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 저장하고, 외부로 출력하는 사용자 커스텀 영상 전송부를; 포함하여 구성되는 것을 특징으로 하는 학습 집중도 향상 장치를 제공한다.In one embodiment of the present invention for solving the above-mentioned problems, a user image acquisition unit for capturing a user image, and acquires a face image of the user from the photographed user image; A user image information detection unit which receives a user's face image from the user image acquisition unit, detects a pupil position and a gaze direction of the user, and detects shapes of eyes, nose and mouth of the user; A learning concentration data storage unit for storing first learning concentration value determination data according to pupil positions, gaze directions, eyes, noses, and mouth shapes of a plurality of users detected and collected in advance; The user's pupil position, gaze direction, shape of the user's eyes, nose, and mouth detected by the user image information detector are input, and the user is compared with the first learning concentration value determination data received from the learning concentration data storage unit. A user learning concentration calculator for calculating a learning concentration value of the learner; A concentration notification unit configured to receive a user's learning concentration value calculated by the user's learning concentration calculator and output a predetermined image or sound to the outside according to the received learning concentration value of the user; And storing, by the user image information detecting unit, a user image used to detect a pupil position, a gaze direction, a user's eyes, nose, and mouth shapes, and a user's learning concentration value calculated through the user image. A user custom image transmission unit which outputs to the outside; Provided is an apparatus for improving learning concentration, which is configured to include.
본 발명의 일 형태에 따른 학습 집중도 향상 장치에 있어서, 상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 입력받아 장치 관리자 디스플레이부로 출력하고, 장치 관리자로부터 상기 사용자의 학습 집중도값이 수정된 제2 학습 집중도값 결정 데이터를 입력받아 상기 사용자 영상 및 상기 제2 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 장치 관리자 시스템을; 더 포함하여 구성되며, 상기 사용자 학습 집중도 산출부는, 상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터 및 상기 장치 관리자 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출할 수 있고,In the apparatus for improving learning concentration in accordance with one embodiment of the present invention, the user custom image transmission unit receives a learning concentration value of the user calculated through the user image and the user image and outputs the result to the device manager display unit, and from the device manager. A device manager system configured to receive the second learning concentration value determination data whose learning concentration value is corrected, store the user image and the second learning concentration value determination data, and output the data to the user learning concentration calculation unit; The user learning concentration calculator further includes a pupil position, a gaze direction, a user's eyes, a nose, and a mouth shape detected by the user image information detector, and are input from the learning concentration data storage unit. The learning concentration value of the user may be calculated by comparing the received first learning concentration value determination data and the second learning concentration value determination data received from the device manager system.
바람직하게는,상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 입력받아 사용자 디스플레이부로 출력하고, 상기 사용자로부터 상기 사용자의 학습 집중도값이 수정된 제3 학습 집중도값 결정 데이터를 입력받아 상기 사용자 영상 및 상기 제3 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 학습 집중도 본인 커스텀부를; 더 포함하여 구성되며, 상기 사용자 학습 집중도 산출부는, 상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터, 상기 장치 관리자 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터 및, 상기 학습 집중도 본인 커스텀부로부터 입력받은 상기 제3 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출할 수 있다.Preferably, the third user inputs the user's learning concentration value calculated through the user image and the user's image from the user custom image transmission unit and outputs the user's learning concentration value, and the learning concentration value of the user is modified from the user. A learning concentration self-customizing unit which receives the learning concentration value determination data and stores the user image and the third learning concentration value determination data and outputs the same to the user learning concentration calculation unit; The user learning concentration calculator further includes a pupil position, a gaze direction, a user's eyes, a nose, and a mouth shape detected by the user image information detector, and are input from the learning concentration data storage unit. The user's learning is compared with the received first learning concentration value determination data, the second learning concentration value determination data inputted from the device manager system, and the learning concentration concentration determination data input from the user's custom unit. The concentration value can be calculated.
본 발명에 따른 학습 집중도 향상 장치는, 사용자 신체에 측정 장치를 부착할 필요가 없도록 하여 사용자의 학습 방해를 최소화하면서 학습 집중도를 파악할 수 있도록 하고, 학습 시간뿐만아니라, 학습 시간 중 사용자의 학습 집중도도 평가할 수 있도록 하여 사용자의 학습 효율을 향상시킬 수 있도록 하며,Learning concentration improving apparatus according to the present invention, so that it is not necessary to attach a measuring device to the user's body to minimize the learning disturbance of the user to grasp the learning concentration, not only the learning time, but also the learning concentration of the user during the learning time To help users learn more,
또한, 각 학습자 개인별 고유한 학습 자세 습관이나 버릇 등을 학습 집중도 분석에 반영하여 학습자 개인별 학습 집중도를 신속하고 정확하게 산출 평가해 낼 수 있도록 한다.In addition, it is possible to quickly and accurately calculate and evaluate the learning concentration of each learner by reflecting the learning attitude habits and habits of each learner in the learning concentration analysis.
도 1은 본 발명에 따른 학습 집중도 향상 장치를 나타내는 시스템 구성도; 및,
도 2는 본 발명에 따른 학습 집중도 향상 장치의 실행과정을 나타내는 흐름도;이다.1 is a system block diagram showing an apparatus for improving learning concentration according to the present invention; And,
2 is a flowchart illustrating an execution process of an apparatus for improving learning concentration according to the present invention;
이하 상기 목적이 구체적으로 실현될 수 있는 본 발명의 실시예들을 첨부된 도면을 참조하여 설명한다. 본 실시예들을 설명함에 있어서, 동일 구성에 대해서는 동일 명칭 및 부호가 사용되며, 이에 따른 부가적인 설명은 하기에서 생략된다.DETAILED DESCRIPTION Hereinafter, embodiments of the present invention in which the above object can be specifically realized are described with reference to the accompanying drawings. In describing the embodiments, the same names and symbols are used for the same components, and additional description thereof will be omitted below.
도 1은 본 발명에 따른 학습 집중도 향상 장치를 나타내는 시스템 구성도이고, 도 2는 본 발명에 따른 학습 집중도 향상 장치의 실행과정을 나타내는 흐름도이다.1 is a system configuration diagram showing an apparatus for improving learning concentration according to the present invention, and FIG. 2 is a flowchart showing an execution process of the apparatus for improving learning concentration according to the present invention.
본 발명에 따른 학습 집중도 향상 장치는, 도 1에 도시된 바와 같이, 크게, 사용자 영상을 취득하는 사용자 영상 취득부와, 취득된 사용자 영상에서 집중도 분석 영상 데이터를 검출해내는 사용자 영상 정보 검출부와, 다수 사용자들을 대상으로 사전에 수집된 제1 학습 집중도값 결정 데이터가 저장되는 학습 집중도 데이터 저장부와, 집중도 분석 영상 데이터와 제1 학습 집중도값 결정 데이터를 비교하여 학습 집중도값을 산출하는 사용자 학습 집중도 산출부와, 산출된 학습 집중도값에 따라 학습 집중도를 올리기 위한 명상음악 등의 다양한 시청각 자료를 출력하는 집중도 알림부 및, 각 사용자별 학습 자세 습관 및 표정 습관을 외부 관리자가 별도 판단하여 다음 집중도값 산출에 활용할 수 있도록 하기 위해, 당해 학습 집중도값의 산출에 사용된 사용자 영상 및 학습 집중도값을 외부로 출력하는 사용자 커스텀 영상 전송부를 포함하여 구성된다.As shown in FIG. 1, the apparatus for improving learning concentration according to the present invention includes a user image acquisition unit for acquiring a user image, a user image information detection unit for detecting concentration analysis image data from the acquired user image, A learning concentration data storage unit for storing first learning concentration value determination data collected in advance for a plurality of users, and a user learning concentration value for comparing a concentration analysis image data and a first learning concentration value determination data to calculate a learning concentration value. The calculation unit, a concentration notification unit for outputting various audio-visual materials such as meditation music for increasing the learning concentration according to the calculated learning concentration value, and the external concentration value of the next administrator by judging the learning posture habits and facial expression habits for each user separately. The company used to calculate the learning concentration value so that it can be used for calculation. It is configured to include character images and user-customized image transmission unit configured to output the learning intensity value to the outside.
상기 사용자 영상 취득부는, 카메라 등과 같은 촬영 장치를 통해 학습자의 영상을 촬용하고, 촬영된 영상 중 특정 부위 즉, 얼굴 영상을 인식해 취득한다. 상기 촬영장치로는 통상 스마트폰이나 태블릿 PC 등의 모바일 기기에 내장되는 내장형 카메라를 활용할 수 있으며, 촬영된 이미지상에서 사용자의 얼굴을 검출해 낸다. 바람직하게는, 촬영된 이미지상에서 사용자의 얼굴뿐만 아니라, 키넥트(Kinect) 장비를 추가하여 사용자의 스켈레톤 즉, 각 관절의 좌표를 검출하고, 스켈레톤 정보 검출 동작을 연속적으로 수행하여 각 관절의 움직임 경로 및 각 관절의 움직임 속도를 검출할 수 있으며, 이를 통해 사용자의 학습 자세 등을 산출해 상기 사용자의 얼굴 영상과 함께 사용자의 학습 집중도 분석에 활용하도록 한다.The user image acquisition unit captures an image of a learner through a photographing device such as a camera, and recognizes and acquires a specific part of the captured image, that is, a face image. As the photographing apparatus, a built-in camera that is usually embedded in a mobile device such as a smartphone or a tablet PC may be utilized, and a face of the user is detected on the captured image. Preferably, in addition to the user's face on the photographed image, Kinect equipment is added to detect the user's skeleton, that is, coordinates of each joint, and the skeleton information detection operation is continuously performed to perform the movement path of each joint. And it can detect the movement speed of each joint, through which the user's learning posture, etc. is calculated and used to analyze the learning concentration of the user along with the user's face image.
상기 사용자 영상 정보 검출부는, 상기 사용자 영상 취득부로부터 사용자의 얼굴 영상을 입력받아 사용자의 동공 위치 및 시선 방향을 검출하고, 사용자의 얼굴 영상으로부터 눈, 코 및 입을 인식하여 각각의 상대적 위치에 따른 표정을 검출하고, 표정에 따른 심리적 상태도 추측해 낼 수 있다. 즉, 입력받은 사용자의 얼굴 이미지상에서 사용자의 동공을 검출하고, 검출된 사용자의 동공 위치에 기초하여 사용자의 시선을 검출하며, 상기 시선 검출 작동을 연속적으로 수행하여 사용자의 시선이동, 안구운동, 시선경로, 동공변화, 눈 깜박임 및, 시선 응시점을 검출해 낼 수 있다.The user image information detection unit receives a user's face image from the user image acquisition unit, detects a user's pupil position and gaze direction, recognizes eyes, nose, and mouth from the user's face image, and expresses an expression according to each relative position. Can be detected and the psychological state according to the expression can be inferred. That is, the user's pupil is detected on the input face image of the user, the user's gaze is detected based on the detected user's pupil position, and the gaze detection operation is continuously performed to move the eyes, eyes, and eyes of the user. Paths, pupil changes, eye blinks, and gaze gaze points can be detected.
시선 검출 작동을 연속적으로 수행하여 검출해 낸 상기 정보들을 이용해 사용자의 시선이 고정될 때까지의 시간, 사용자의 시선이 머무는 시간, 사용자의 시선이 머무는 횟수, 특정영역에서 사용자의 시선이 머무는 총 시간 및, 단위 시간당 측정된 동공의 크기 등을 검출해 낼 수 있으며, 또한, 사용자의 얼굴 이미지상에서 눈, 코 및 입의 각 위치를 검출해 내고, 이들의 상대적 위치를 파악하여 일반적인 얼굴 형상에서 눈, 코 및 입의 상대적 위치에 따른 표정 및 그에 따른 심리상태를 추측해 낼 수 있다. 이러한 사용자의 얼굴 영상에서 각각의 정보를 추출하는 방법은 통상 널리 알려져 있는 바, 구체적인 방법에 대한 설명은 생략한다.The time until the user's gaze is fixed, the time the user's gaze stays, the number of times the user's gaze stays, the total time the user's gaze stays in a specific area by using the information detected by continuously performing the gaze detection operation And, it can detect the size of the pupil measured per unit time and the like, and also detect the respective positions of the eyes, nose and mouth on the user's face image, and grasp their relative position to determine the eyes, The facial expression and the psychological state according to the relative position of the nose and mouth can be inferred. Since a method of extracting each piece of information from the face image of the user is generally well known, a description of a specific method is omitted.
상기 학습 집중도 데이터 저장부는, 상기 전술한 방법으로 사전에 검출 수집된 다수 사용자의 동공 위치, 시선방향, 눈, 코 및, 입의 형상에 따른 제1 학습 집중도값 결정 데이터가 저장된다. 즉, 상기 학습 집중도 데이터 저장부에는 다수 사용자 각각의 동공위치, 시선방향, 눈, 코 및 입의 형상, 상대적 위치에 대응하여 산출된 학습 집중도값이 사전에 수집되어 저장되며, 다수 사용자의 영상 정보는 일반적인 학습 자세 및 표정 성향의 사용자들을 대상으로 사전에 통계 수집된 것으로, 각각의 영상 정보에 대해, 영상 및 심리 분석 전문가들의 심층 분석을 통해 산출한 학습 집중도값이 대응되어 제1 학습 집중도값 결정 데이터들이 형성되고, 상기 형성된 제1 학습 집중도값 결정 데이터들이 상기 학습 집중도 데이터 저장부에 저장된다.The learning concentration data storage unit stores first learning concentration value determination data according to pupil positions, eye directions, eyes, nose, and mouth shapes of a plurality of users previously detected and collected by the above-described method. That is, the learning concentration data storage unit collects and stores the learning concentration values calculated in advance corresponding to the pupil position, the gaze direction, the shape of the eyes, the nose and the mouth, and the relative position of each of the plurality of users. The statistics are collected in advance for users of general learning posture and facial expression inclination. For each image information, the learning concentration value calculated through in-depth analysis of image and psychoanalysis experts is corresponded to determine the first learning concentration value. Data are formed, and the formed first learning concentration value determination data are stored in the learning concentration data storage unit.
상기 사용자 학습 집중도 산출부는, 상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공위치, 시선방향, 사용자의 눈, 코 및 입의 형상의 영상 정보를 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터와 비교하여 현재 사용자의 학습 집중값을 산출하게 된다. 즉, 상기 사용자 학습 집중도 산출부는, 상기 학습 집중도 데이터 저장부로부터 입력받은 사전에 통계 수집된 각각의 영상 정보들 중, 상기 사용자 영상 정보 검출부로부터 입력받은 영상 정보와 가장 유사한 영상 정보를 비교 검색하고, 상기 비교 검색된 가장 유사한 영상 정보에 대응되는 제1 학습 집중도값을 사용자의 학습 집중도값으로 산출하게 된다.The user learning concentration calculator receives image information of a pupil position, a gaze direction, a user's eyes, a nose, and a mouth shape detected by the user image information detector, and receives the input from the learning concentration data storage unit. The learning concentration value of the current user is calculated by comparing the learning concentration value determination data. That is, the user learning concentration calculation unit compares and searches the image information most similar to the image information input from the user image information detection unit among the respective image information collected in advance statistically received from the learning concentration data storage unit, The first learning concentration value corresponding to the most similarly searched image information is calculated as the learning concentration value of the user.
상기 집중도 알림부는, 도 1에 도시된 바와 같이, 상기 사용자 학습 집중도 산출부에서 산출한 사용자의 학습 집중도값을 입력받고, 입력받은 상기 사용자의 학습 집중도값에 따라 소정 영상 및 소리를 디스플레이부 및 스피커부를 통해 외부로 출력하게 된다.As shown in FIG. 1, the concentration notification unit receives a user's learning concentration value calculated by the user's learning concentration calculator, and outputs a predetermined image and sound according to the received learning concentration value of the user. It will output to the outside through negative.
바람직하게는, 소정 시간동안의 산출된 상기 사용자의 학습 집중도값의 평균값이 소정값 미만일 경우에는 사용자의 집중도 및 학습 효율이 저하된 것으로 보고, 상기 디스플레이부 및 스피커부를 통해 이를 사용자에게 알려 좀 더 집중하도록 독려하는 내용의 문자나 알림소리를 출력하며, 상기 문자나 알림소리를 출력한 이후로도 지속적으로 학습 집중도값이 소정값 이상으로 올라가지 않는 경우에는, 다시 사용자에게 이를 알리고, 학습을 멈추고 소정 시간동안 휴식을 취할 것을 알리며, 휴식시간 동안에는 명상 영상 및 음악 등을 상기 상기 디스플레이부 및 스피커부를 통해 출력하여 사용자의 휴식을 도울 수 있도록 한다.Preferably, when the average value of the user's learning concentration value calculated for a predetermined time is less than a predetermined value, the user's concentration and learning efficiency are regarded as deteriorated, and the user is notified through the display unit and the speaker unit. It outputs a text or a notification sound of the content to be encouraged to, and if the learning concentration value does not continuously rise above a predetermined value even after outputting the text or the notification sound, the user is notified again, stops learning and rests for a predetermined time. Informing the user to take a break, the meditation image and music, etc. are output through the display unit and the speaker unit during the break so that the user can rest.
상기 사용자 커스텀 영상 전송부는, 도 1에 도시된 바와 같이, 상기 사용자 영상 정보 검출부에서 사용자의 동공위치, 시선방향, 사용자의 눈, 코 및 입의 형상을 검출하는데 이용된 해당 사용자 영상을 저장하고, 상기 저장된 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 외부로 출력한다.As shown in FIG. 1, the user custom image transmission unit stores a corresponding user image used to detect a pupil position, a gaze direction, a shape of a user's eyes, nose, and mouth in the user image information detection unit. The learning concentration value of the user calculated through the stored user image and the user image is output to the outside.
종래 학습 판단 장치들은, 통계 수집된 일반화된 영상 자료 및 학습 판단 자료들을 기준으로, 실시간 검출된 사용자의 영상과 단순 비교하여 사용자의 학습 여부를 판단함으로써, 사용자의 고유한 학습 습관이나 버릇이 반영되지 않아 사용자 개인별 정확한 학습 여부를 판별하지 못하는 문제점이 있었으나,Conventional learning judgment devices, based on the statistically collected generalized image data and learning judgment data, by simply comparing with the user's image detected in real time to determine whether the user learns, the unique learning habits or habits of the user is not reflected Therefore, there was a problem that can not determine the correct learning for each user,
본 발명에 따른 학습 집중도 향상 장치에서는, 사용자 개인별 영상 정보를 취득하지 못한 초기 사용시에는 사전에 통계 수집 된 일반화된 영상 정보 및 학습 집중도값이 저장된 상기 학습 집중도 데이터 저장부의 제1 학습 집중도값 결정 데이터를 이용하여 사용자 학습 집중도값을 산출하고, 이후에는 사용자 개인별 고유한 학습 습관이나 버릇 등을 반영하여 보다 정확한 사용자 학습 집중도값을 산출할 수 있도록, 실시간 취득된 사용자 영상 정보 및 해당 학습 집중도값을 상기 사용자 커스텀 영상 전송부를 통해 외부관리자 시스템으로 출력하고, 이를 전송받은 외부 장치 관리자 시스템에서는, 장치 관리자 디스플레이부에 출력되는 해당 사용자 영상 정보 및 해당 학습 집중도값에 대해 영상 및 심리 분석 전문가들이 심층 분석하며, 이를 통해 각 사용자 개인별 고유한 학습 습관이나 버릇 등을 반영하여 다시 해당 사용자 영상 정보에 대한 학습 집중도값을 수정 저장하고, 상기 수정 저장된 사용자 영상 정보 및 학습 집중도값을 상기 사용자 학습 집중도 산출부로 출력하여 다음 사용자 학습 집중도값 산출시에 이용할 수 있도록 한다.In the apparatus for improving concentration of learning according to the present invention, the initial concentration of data for determining the learning intensity of the learning intensity data storage unit in which the generalized image information and the learning intensity value, which have been previously collected in statistics, is stored at the time of initial use in which image information for each user is not acquired The user learning concentration value is calculated using the user's learning concentration value, and after that, the user's image information acquired in real time and the corresponding learning concentration value can be calculated to reflect the user's unique learning habits or habits. Output to the external manager system through the custom image transmission unit, and the external device manager system that receives the transmission, in-depth analysis by the video and psychoanalytical experts on the user image information and the corresponding learning concentration value output to the device manager display unit, Through each company Reflect and save the learning concentration value for the corresponding user image information by reflecting the unique learning habits or habits of each user, and output the corrected and stored user image information and the learning concentration value to the user learning concentration calculation unit. It can be used for value calculation.
바람직하게는, 도 1에 도시된 바와 같이, 상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 정보 및 상기 사용자 영상 정보를 통해 산출한 사용자의 학습 집중도값을 입력받아 장치 관리자 디스플레이부로 출력하고, 상기 장치 관리자 디스플레이부에서 출력되는 사용자 영상 정보 및 해당 사용자 영상 정보를 통해 산출한 사용자의 학습 집중도값을 영상 및 심리 분석 전문가들이 심층 분석하며, 이를 통해 각 사용자 개인별 고유한 학습 습관이나 버릇 등을 반영한 보다 정확하게 수정된 제2 학습 집중도값 결정 데이터를 장치 관리자로부터 입력받고, 입력받은 상기 수정된 제2 학습 집중도값 결정 데이터 및 해당 사용자 영상 정보를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 장치 관리자 시스템을 더 포함할 수 있다. 또한, 상기 사용자 학습 집중도 산출부는, 상기 사용자 영상 정보 검출부로부터 검출된 사용자 영상 정보를 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터 및 상기 장치 관리사 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출할 수도 있다.Preferably, as shown in FIG. 1, the user's custom image transmission unit receives the user's image information and the learning concentration value calculated through the user's image information, and outputs the device manager display to the device manager display unit. Video and psychoanalytical experts in-depth analyze the user image information output from the display unit and the user's learning concentration value calculated from the user image information. And a device manager system for receiving the received second learning concentration value determination data from the device manager, storing the corrected second learning concentration value determination data and the corresponding user image information, and outputting the second learning concentration value determination data to the user learning concentration calculation unit. It may include. The user learning concentration calculator may receive user image information detected by the user image information detector, and input the first learning concentration value determination data received from the learning concentration data storage unit and the device manager system. The learning concentration value of the user may be calculated by comparing with the second learning concentration value determination data.
바람직하게는, 상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 입력받아 사용자 디스플레이부로 출력하고, 상기 사용자 디스플레이부로 출력되는 본인 영상 및 그에 대응되는 학습 집중도값을 보고서 사용자 본인 스스로가 정확한 학습 집중도값을 수정 산출할 수 있도록 상기 사용자로부터 상기 사용자의 학습 집중도값이 수정된 제3 학습 집중도값 결정 데이터를 입력받으며, 입력받은 상기 제3 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 학습 집중도 본인 커스텀부가 더 포함될 수 있다. 또한, 상기 사용자 학습 집중도 산출부는, 상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공위치, 시선방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터, 상기 장치 관리자 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터 및, 상기 학습 집중도 본인 커스텀부로부터 입력받은 상기 제3 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출할 수도 있다.Preferably, the user's custom image transmission unit receives the user's learning concentration value calculated through the user image and the user image and outputs to the user display unit, the user's image output to the user display unit and the corresponding learning concentration degree Report the value, the user receives the third learning concentration value determination data of which the learning concentration value of the user has been modified from the user so that the user himself can correct and calculate the correct learning concentration value. Simultaneously with storing, the learning concentration output to the user learning concentration calculation unit may further include a custom part. The user learning concentration calculator may be configured to receive the user's pupil position, gaze direction, shape of the user's eyes, nose, and mouth detected by the user image information detector, and receive the first input from the learning concentration data storage unit. The learning concentration value of the user is calculated by comparing the learning concentration value determination data, the second learning concentration value determination data inputted from the device manager system, and the third learning concentration value determination data inputted from the learning concentration degree custom part. You may.
이와 같이 구성되는 본 발명에 따른 학습 집중도 향상 장치의 작동을, 도 2를 통해 간략히 설명하면, 스마트폰이나 태블릿 PC 등에 앱 형태로 본 학습 집중도 향상 장치를 구성 설치할 수 있으며, 스마트폰에 앱 형태로 설치된 경우, 사용자는 사용자의 영상을 촬용하기 용이한 곳에 상기 스마트폰을 위치시키고, 상기 학습 집중도 향상 장치를 작동시킨 후, 학습을 시작하면 상기 사용자 영상 취득부는 상기 스마트폰의 내장 카메라를 이용해 사용자 영상을 촬용하고, 촬영된 사용자 영상 중 사용자의 얼굴 영상을 취득하게 된다. 상기 사용자 영상 취득부로부터 사용자 얼굴 영상을 입력받은 상기 사용자 영상 정보 검출부는 사용자 얼굴 영상 이미지로부터 사용자의 동공위치, 시선방향, 눈 및 코의 형상 및 상대적 위치를 검출하여 상기 사용자 학습 집중도 산출부로 출력하게 된다.The operation of the learning concentration improving apparatus according to the present invention configured as described above will be briefly described with reference to FIG. 2, and the present invention can be configured to install the learning concentration improving apparatus in the form of an app on a smartphone or a tablet PC. When installed, the user places the smart phone in a place where the user's video is easy to shoot, operates the learning concentration improving device, and starts learning when the user image acquisition unit uses the built-in camera of the smart phone. And the face image of the user is acquired from the captured user image. The user image information detection unit which receives the user face image from the user image acquisition unit detects the pupil position, the gaze direction, the shape and the relative position of the eye and the nose from the user face image image, and outputs it to the user learning concentration calculator. do.
상기 사용자 영상 정보 검출부로부터 사용자 영상 정보를 입력받은 상기 사용자 학습 집중도 산출부는, 사전에 검출 수집된 다수 일반 사용자의 영상 정보 및 그에 해당하는 학습 집중도값을 포함하는 제1 학습 집중도값 결정 데이터가 저장된 학습 집중도 데이터 저장부로부터 상기 제1 학습 집중도값 결정 데이터를 입력받아 상기 사용자 영상 정보와 유사한 영상 정보를 비교 분석하여 선택하고, 선택된 영상 정보에 대응하는 학습 집중도값을 사용자 학습 집중도값으로 산출하게 된다.The user learning concentration calculator which receives user image information from the user image information detecting unit includes: learning in which first learning concentration value determination data including image information of a plurality of general users previously detected and collected and learning concentration values corresponding thereto are stored; The first learning concentration value determination data is received from the concentration data storage unit, and the image information similar to the user image information is analyzed and selected, and the learning concentration value corresponding to the selected image information is calculated as the user learning concentration value.
산출된 사용자 학습 집중도값을 입력받은 상기 집중도 알람부는 집중도값이 높은 경우에는 사용자의 현재 집중도를 흐트리지 않게 별도의 영상이나 소리를 출력하지 않으며, 소정 집중도값으로 낮은 경우에 한해 "좀 더 집중하세요" 등의 영상 및 경고음 등을 외부로 출력하여 사용자에게 학습에 집중할 것을 독려하게 된다. 또한, 소정 시간 동안 집중도값이 낮은 상태로 유지되는 경우에는, 학습을 멈출 것을 소정 영상 및 소리로 권고하고, 소정 시간 동안 명상 영상 및 음악을 외부로 출력하여 휴식 시간을 취할 수 있도록 한다.The concentration alarm unit that receives the calculated user learning concentration value does not output a separate image or sound when the concentration value is high so as not to obscure the current concentration of the user. ", Such as images and warning sounds to the outside to encourage users to focus on learning. In addition, when the concentration value is kept low for a predetermined time, it is recommended to stop learning by using a predetermined image and sound, and output a meditation image and music for a predetermined time to take a rest time.
상기 사용자 영상 정보 및 해당 학습 집중도값은 상기 사용자 커스텀 영상 전송부로 전송되어 저장됨과 동시에, 상기 장치 관리자 시스템으로 출력되며, 상기 장치 관리자 시스템의 디스플레이부를 통해 사용자 영상 및 해당 영상에 대한 학습 집중도값을 영상 및 심리 분석 전문가들이 심층 분석하여 각 사용자 개인별 고유한 학습 습관이나 버릇 등을 반영하여 보다 정확하게 학습 집중도값을 다시 수정 산출하며, 수정 산출된 학습 집중도값이 반영된 제2 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로출력하여 다음번 사용자 집중도 산출시에 활용할 수 있도록 한다.The user image information and the corresponding learning concentration value are transmitted to and stored in the user custom image transmission unit, and are output to the device manager system, and the user image and the learning concentration value for the corresponding image are displayed through the display unit of the device manager system. And in-depth analysis by psychoanalytical experts to accurately calculate and re-learn the learning concentration value by reflecting the unique learning habits and habits of each user, and storing the second learning concentration value determination data reflecting the modified learning concentration value. At the same time, it is output to the user learning concentration calculation unit so that it can be utilized at the next user concentration calculation.
또한, 보다 정확한 학습 습관 및 태도는 사용자 본인이 가장 잘 알고 있으므로, 학습 집중도 본인 커스텀부에서는, 사용자의 확인 요청이 있을 경우, 사용자 디스플레이부를 통해 사용자 영상 정보 및 해당 영상 정보에 대응되는 학습 집중도값을 출력하여 사용자 본인이 직접 사용자 영상 정보 및 해당 영상 정보에 대응되는 학습 집중도값을 검증하고, 이를 수정 및 재산출하여 제3 학습 집중도값 결정 데이터를 생성할 수 있도록 하며, 사용자 본인을 통해 생성된 상기 제3 학습 집중도값 결정 데이터는 저장됨과 동시에, 상기 사용자 학습 집중도 산출부로 출력하여 다음번 사용자 집중도 산출시에 활용할 수게 한다.In addition, since the user knows the learning habits and attitudes more accurately, the learning concentration level in the user's custom part, when the user requests a confirmation, the user concentration information corresponding to the user image information and the corresponding image information through the user display unit. Output and verify the user's own image information and the learning concentration value corresponding to the image information directly, and modify and recalculate it to generate the third learning concentration value determination data; The third learning concentration value determination data may be stored and output to the user learning concentration calculation unit to be used in the next user concentration calculation.
상기 사용자 학습 집중도 산출부에서 상기 제1, 제2 및 제3 학습 집중도값 결정 데이터를 통해 학습 집중도값을 산출하는 경우, 시간이 경과되어 더 많은 제2 및 제3 학습 집중도값 결정 데이터가 누적되어 저장되어 활용됨으로써, 각 학습자 개인별 고유한 학습 자세 습관이나 버릇 등이 반영된 보다 정확한 학습 집중도값을 산출할 수 있게 된다. 바람직하게는, 상기 각 학습 집중도값 결정 데이터의 산출 가중치를 개별로 사용자가 지정할 수도 있을 것이다.When the user learning concentration calculation unit calculates a learning concentration value through the first, second and third learning concentration value determination data, more second and third learning concentration value determination data is accumulated over time. By being stored and utilized, it is possible to calculate a more accurate learning concentration value reflecting each learner's unique learning posture habits and habits. Preferably, the user may separately designate a calculation weight of each learning concentration value determination data.
이와 같이, 본 발명에 따른 학습 집중도 향상 장치는, 사용자 신체에 측정 장치를 부착할 필요가 없어 사용자의 학습 방해를 최소화하면서 학습 집중도를 파악할 수 있고, 학습 시간뿐만아니라, 학습 시간 중 사용자의 학습 집중도도 평가할 수 있어 사용자의 학습 효율을 향상시킬 수 있으며,As described above, the apparatus for improving learning concentration according to the present invention does not need to attach a measuring device to the user's body, thereby minimizing learning disturbances of the user, and thus grasps the concentration of learning. Can also be evaluated to improve the learning efficiency of users.
특히, 각 학습자 개인별 고유한 학습 자세 습관이나 버릇 등을 학습 집중도 분석에 반영하여 학습자 개인별 학습 집중도를 신속하고 정확하게 산출 평가해 낼 수 있도록 한다.In particular, it is possible to quickly and accurately calculate and evaluate the learning concentration for each learner by reflecting the learning attitude habits and habits of each learner in the learning concentration analysis.
위에서 몇몇의 실시예가 예시적으로 설명되었음에도 불구하고, 본 발명이 이의 취지 및 범주에서 벗어남 없이 여러 다른 형태로 구체화될 수 있다는 사실은 해당 기술에 통상의 지식을 가진 이들에게는 자명한 것이다.Although some embodiments have been described above by way of example, it will be apparent to those skilled in the art that the present invention may be embodied in many different forms without departing from the spirit and scope thereof.
따라서, 상술된 실시예는 제한적인 것이 아닌 예시적인 것으로 여겨져야 하며, 첨부된 청구항 및 이의 동등 범위 내의 모든 실시예는 본 발명의 범주 내에 포함된다.Accordingly, the above-described embodiments should be considered as illustrative and not restrictive, and all embodiments within the scope of the appended claims and their equivalents are included within the scope of the present invention.
Claims (3)
상기 사용자 영상 취득부로부터 사용자의 얼굴 영상을 입력받아 사용자의 동공 위치 및 시선 방향을 검출하고, 사용자의 눈, 코 및 입의 형상을 검출하는 사용자 영상 정보 검출부;
사전에 검출 수집된 다수 사용자의 동공 위치, 시선방향, 눈, 코 및 입의 형상에 따른 제1 학습 집중도값 결정 데이터가 저장되는 학습 집중도 데이터 저장부;
상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출하는 사용자 학습 집중도 산출부;
상기 사용자 학습 집중도 산출부에서 산출한 사용자의 학습 집중도값을 입력받고, 입력받은 상기 사용자의 학습 집중도값에 따라 소정 영상 또는 소리를 외부로 출력하는 집중도 알림부; 및,
상기 사용자 영상 정보 검출부에서 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및, 입의 형상을 검출하는데 이용된 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 저장하고, 외부로 출력하는 사용자 커스텀 영상 전송부를; 포함하여 구성되는 것을 특징으로 하는 학습 집중도 향상 장치.
A user image acquisition unit for photographing a user image and acquiring a face image of the user from the photographed user images;
A user image information detection unit which receives a user's face image from the user image acquisition unit, detects a pupil position and a gaze direction of the user, and detects shapes of eyes, nose and mouth of the user;
A learning concentration data storage unit for storing first learning concentration value determination data according to pupil positions, gaze directions, eyes, noses, and mouth shapes of a plurality of users detected and collected in advance;
The user's pupil position, gaze direction, shape of the user's eyes, nose, and mouth detected by the user image information detector are input, and the user is compared with the first learning concentration value determination data received from the learning concentration data storage unit. A user learning concentration calculator for calculating a learning concentration value of the learner;
A concentration notification unit configured to receive a user's learning concentration value calculated by the user's learning concentration calculator and output a predetermined image or sound to the outside according to the received learning concentration value of the user; And,
The user image information detecting unit stores a user image used to detect a pupil position, a gaze direction, a user's eyes, nose, and mouth shapes, and a learning concentration value calculated by the user image, A user custom image transmission unit for outputting; Learning concentration improving device, characterized in that configured to include.
상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 입력받아 장치 관리자 디스플레이부로 출력하고, 장치 관리자로부터 상기 사용자의 학습 집중도값이 수정된 제2 학습 집중도값 결정 데이터를 입력받아 상기 사용자 영상 및 상기 제2 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 장치 관리자 시스템을; 더 포함하여 구성되며,
상기 사용자 학습 집중도 산출부는,
상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터 및 상기 장치 관리자 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출하는 것을 특징으로 하는 학습 집중도 향상 장치.
The method of claim 1,
A second learning intensity value from which the learning intensity value of the user calculated through the user image and the user image is input from the user custom image transmission unit and output to the device manager display unit, and the learning concentration value of the user is modified from the device manager; A device manager system configured to receive decision data, store the user image and the second learning concentration value determination data, and output the determination data to the user learning concentration calculator; It is configured to include more
The user learning concentration calculator,
The first learning concentration value determination data and the device manager received from the learning concentration data storage unit by receiving the user's pupil position, gaze direction, the shape of the user's eyes, nose, and mouth detected by the user image information detector; And a learning concentration value of the user is compared with the second learning concentration value determination data received from the system.
상기 사용자 커스텀 영상 전송부로부터 상기 사용자 영상 및 상기 사용자 영상을 통해 산출한 사용자의 학습 집중도값을 입력받아 사용자 디스플레이부로 출력하고, 상기 사용자로부터 상기 사용자의 학습 집중도값이 수정된 제3 학습 집중도값 결정 데이터를 입력받아 상기 사용자 영상 및 상기 제3 학습 집중도값 결정 데이터를 저장함과 동시에, 상기 사용자 학습 집중도 산출부로 출력하는 학습 집중도 본인 커스텀부를; 더 포함하여 구성되며,
상기 사용자 학습 집중도 산출부는,
상기 사용자 영상 정보 검출부로부터 검출된 사용자의 동공 위치, 시선 방향, 사용자의 눈, 코 및 입의 형상을 입력받아, 상기 학습 집중도 데이터 저장부로부터 입력받은 상기 제1 학습 집중도값 결정 데이터, 상기 장치 관리자 시스템으로부터 입력받은 상기 제2 학습 집중도값 결정 데이터 및, 상기 학습 집중도 본인 커스텀부로부터 입력받은 상기 제3 학습 집중도값 결정 데이터와 비교하여 사용자의 학습 집중도값을 산출하는 것을 특징으로 하는 학습 집중도 향상 장치.The method of claim 2,
Receiving a user's learning concentration value calculated through the user image and the user image from the user custom image transmission unit and outputs to the user display unit, Determining the third learning concentration value modified the learning concentration value of the user from the user A learning concentration self-customizing unit which receives data and stores the user image and the third learning concentration value determination data and outputs the data to the user learning concentration calculation unit; It is configured to include more
The user learning concentration calculator,
The first learning concentration value determination data received from the learning concentration data storage unit by receiving the user's pupil position, gaze direction, shape of the user's eyes, nose and mouth detected by the user image information detecting unit, and the device manager And a learning concentration value of the user, which is calculated by comparing the second learning concentration value determination data inputted from the system and the third learning concentration value determination data inputted from the learning concentration level custom part. .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180071642A KR20190143742A (en) | 2018-06-21 | 2018-06-21 | The Device for improving the study concentration |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180071642A KR20190143742A (en) | 2018-06-21 | 2018-06-21 | The Device for improving the study concentration |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR2020200000979U Division KR20200000680U (en) | 2020-03-20 | 2020-03-20 | The Device for improving the study concentration |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20190143742A true KR20190143742A (en) | 2019-12-31 |
Family
ID=69051701
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180071642A KR20190143742A (en) | 2018-06-21 | 2018-06-21 | The Device for improving the study concentration |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20190143742A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20220046082A (en) * | 2020-10-07 | 2022-04-14 | 동서대학교 산학협력단 | Ontact education platform system based on artificial intelligence |
| KR20220068282A (en) * | 2020-11-18 | 2022-05-26 | 재단법인대구경북과학기술원 | Intelligent virtual fitness system utilizing face recognition and motion recognition and operating method thereof |
| KR20230032665A (en) * | 2021-08-31 | 2023-03-07 | 엔에이치엔클라우드 주식회사 | Method and system for monitoring to student that taking online classes |
-
2018
- 2018-06-21 KR KR1020180071642A patent/KR20190143742A/en not_active Application Discontinuation
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20220046082A (en) * | 2020-10-07 | 2022-04-14 | 동서대학교 산학협력단 | Ontact education platform system based on artificial intelligence |
| KR20220068282A (en) * | 2020-11-18 | 2022-05-26 | 재단법인대구경북과학기술원 | Intelligent virtual fitness system utilizing face recognition and motion recognition and operating method thereof |
| KR20230032665A (en) * | 2021-08-31 | 2023-03-07 | 엔에이치엔클라우드 주식회사 | Method and system for monitoring to student that taking online classes |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2021138964A1 (en) | Read/write distance identification method based on smart watch | |
| CN108888277B (en) | Psychological test method, psychological test system and terminal equipment | |
| KR101455200B1 (en) | Learning monitering device and method for monitering of learning | |
| CA2782071A1 (en) | Liveness detection | |
| WO2020118669A1 (en) | Student concentration detection method, computer storage medium, and computer device | |
| KR20190143742A (en) | The Device for improving the study concentration | |
| CN109446947A (en) | The face recognition of enhancing in video | |
| CN108618747A (en) | Eyesight test method and intelligent terminal | |
| CN105448053B (en) | A kind of pose reminding method and system | |
| US10706281B2 (en) | Controlling focal parameters of a head mounted display based on estimated user age | |
| KR102466438B1 (en) | Cognitive function assessment system and method of assessing cognitive funtion | |
| CN111273232B (en) | Indoor abnormal condition judging method and system | |
| CN111444789A (en) | Myopia prevention method and system based on video induction technology | |
| CN113693552A (en) | Visual fatigue monitoring method and device, electronic equipment and readable storage medium | |
| CN111428686A (en) | Student interest preference evaluation method, device and system | |
| CN106202976A (en) | A kind of learning quality and the assessment assay method of time | |
| KR20200000680U (en) | The Device for improving the study concentration | |
| CN108492855A (en) | A kind of apparatus and method for training the elderly's attention | |
| Pillai | Student Engagement Detection in Classrooms through Computer Vision and Deep Learning: A Novel Approach Using YOLOv4 | |
| CN113034322B (en) | Internet-based online education supervision system and method | |
| JP2020126214A (en) | Information processing apparatus and information processing method | |
| WO2016139854A1 (en) | Information processing system and control method | |
| US20220160227A1 (en) | Autism treatment assistant system, autism treatment assistant device, and program | |
| CN113631211A (en) | Concentration degree measuring device, concentration degree measuring method, and program | |
| CN204133428U (en) | Full-automatic vision detects instrument for training |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |