KR20130109295A - Method for controlling e-book using image input device and the equipment - Google Patents

Method for controlling e-book using image input device and the equipment Download PDF

Info

Publication number
KR20130109295A
KR20130109295A KR1020120030888A KR20120030888A KR20130109295A KR 20130109295 A KR20130109295 A KR 20130109295A KR 1020120030888 A KR1020120030888 A KR 1020120030888A KR 20120030888 A KR20120030888 A KR 20120030888A KR 20130109295 A KR20130109295 A KR 20130109295A
Authority
KR
South Korea
Prior art keywords
page
eye
book
eye state
image input
Prior art date
Application number
KR1020120030888A
Other languages
Korean (ko)
Inventor
공현성
Original Assignee
공현성
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 공현성 filed Critical 공현성
Priority to KR1020120030888A priority Critical patent/KR20130109295A/en
Publication of KR20130109295A publication Critical patent/KR20130109295A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris

Abstract

PURPOSE: Electronic book (Ebook) control method and device thereof using an image input device are provided to immediately determine page movement according to an eye state inputted in real time by executing software automatically recognizing the eye state variation when performing an ebook in a device capable of reading an electronic book. CONSTITUTION: A comparison unit compares eye state variation recognition software with an eye state of an inputted image. A determination unit compares a page turning judgment item according to the eye state of image inputted through the image input unit with a set eye state. A judgment unit analyzes eye state variation and judges the page movement. [Reference numerals] (A103,A104) Analyze the status of the two eyes; (AA) Launch an Ebook; (BB) Not able to analyze; (CC) Not able to satisfy the conditions set in Figure 2; (DD) Satisfy the bookmark conditions set in Figure 2; (EE) Able to analyze; (FF) Satisfy the page (bookmark) turning conditions set in Figure 2; (S101) Launch an eye-status recognition SW program recognizing a face's eyes; (S102) Input the status of the two eyes using an image input unit on a real-time basis; (S105) Set a bookmark; (S106) Turn the page (bookmark); (S107) End the Ebook; (S108) End the eye-status recognition SW program

Description

영상 입력 장치를 이용한 전자책 제어 방법 및 그 기기 {Method for controlling e-Book using image input device and the equipment} Method for controlling e-book using image input device and its device {Method for controlling e-Book using image input device and the equipment}

본 발명은 전자책의 페이지 이동 제어 방법 및 이를 포함한 기기에 관한 것이다. 본 발명은 전자책을 볼 수 있는 기기에 영상입력장치가 포함되어 있거나 PC캠 등 외부 영상입력 장치를 연결하여 얼굴의 눈 상태 변화를 인식하여 눈의 깜박임 상태에 따라 자동으로 전자책의 페이지를 이동하거나 책갈피를 설정하고 책갈피로 이동할 수 있도록 한다. 예로 오른쪽 눈을 일정기간(예:1초 이상) 감아다가 뜨면 영상입력장치로 입력되어진 눈의 상태 변화를 인식하여 전자책이 다음 페이지로 넘어가고 왼쪽 눈을 일정기간(예 1초 이상) 감아다가 뜨면 영상입력장치로 입력되어진 눈의 상태 변화를 인식하여 전자책이 이전 페이지로 넘어가게 하는 전자책 단말기의 페이지 이동 제어방법 및 이를 수행하는 기기에 관한 것이다. The present invention relates to a page movement control method of an e-book and a device including the same. The present invention includes an image input device in a device for viewing an e-book or by connecting an external image input device such as a PC cam to recognize a change in the eye state of the face and automatically move pages of the e-book according to the blinking state of the eye. Or set a bookmark and navigate to it. For example, if the right eye is closed for a certain period of time (e.g. more than 1 second), the e-book will move to the next page and the left eye will be closed for a certain period of time (e.g. more than 1 second). The present invention relates to a method of controlling a page movement of an e-book device, in which an e-book is moved to a previous page by recognizing a state change of an eye inputted by an image input device.

일반적으로 전자책을 볼 수 있는 기기에서 전자책의 페이지 이동에 대한 제어 방법이 있다. 이런 기기에 영상입력 장치가 포함되어 있을 수도 있고 또는 외부 입력장치 예로 PC캠 등으로 영상을 입력받을 수 있다. 전자책을 볼 수 있는 기기에 터치 기능이 있을 경우 손가락 터치를 이용하여 페이지 이동 여부를 결정할 수 있다. In general, there is a control method for page movement of an e-book in a device capable of viewing the e-book. Such a device may include an image input device or may receive an image through an external input device as a PC cam. If the device that can view the e-book has a touch function, the user can determine whether to move the page using a finger touch.

영상입력 장치가 연결 되어진 전자책을 볼 수 있는 기기에서는 이 장치를 이용하여 영상을 입력 받을 수 있다.In a device that can view an e-book connected to a video input device, the device can receive an image.

즉 영상입력 장치를 통해 얼굴 부분을 전자책을 볼 수 있는 기기에 입력 받을 수 있다.That is, the face part may be input to a device that can read an e-book through an image input device.

한편 실시간으로 입력되는 영상에서 얼굴의 눈 상태를 눈의 위쪽 꺼풀 움직임과 아래쪽 꺼풀과의 거리 차이 등으로 눈을 얼마나 감아다가 떠는지를 구별해 낼 수 있다. On the other hand, in the image input in real time, the eye state of the face can be distinguished by how much the eyes are closed and floated by the distance between the upper and lower eyelid movements of the eye.

일반적으로 전자책을 볼 수 있는 기기의 경우 터치 기능을 이용하거나 마우스 클릭 등의 방법으로 전자책의 페이지 이동을 할 수 있다. 만일 전자책을 보면서 실시간으로 얼굴 눈 상태를 입력받아 눈의 상태에 따라 페이지를 이동한다면 편리하고 빠르게 페이지 이동이 가능하다.In general, a device that can read an e-book can move the page of the e-book by using a touch function or a mouse click. If you look at the e-book and receive the facial eye state in real time and move the page according to the eye state, you can move the page conveniently and quickly.

따라서 본 발명이 해결하고자 하는 과제는 전자책을 볼 수 있는 기기에서 전자책을 볼 때 페이지 이동을 더 빠르고 편리하게 판단할 수 있게 하는 것으로 영상입력장치를 통해 얼굴 눈 부위의 눈 깜박임 상태를 실시간으로 입력받아 눈의 상태에 따라 즉각적으로 페이지 이동 여부를 결정할 수 있게는 방법과 이를 수행하는 기기에 관한 것이다. 예로 전자책을 볼 수 있는 기기에서 전자책 보기를 실행하면 자동으로 얼굴의 눈 상태를 분석하는 프로그램이 실행되어 실시간으로 얼굴의 눈 변화를 분석하여 페이지 이동을 결정하게 한다. 이때 이 기기에서는 영상을 입력할 수 있는 장치가 있거나 외부 입력장치로 영상을 입력받을 수 있어야한다. 영상입력부분을 통해 실시간으로 얼굴의 눈의 상태 즉 오른쪽 눈을 일정기간(예: 1초 이상) 감아다가 뜨면 전자책의 페이지가 다음으로 넘어가고 오른쪽 눈을 연속으로 깜박이면 전자책의 페이지가 설정되어진 다음 책갈피로 이동하게 한다. 만일 책갈피 설정이 없으면 이동변화가 없게 한다. 그리고 눈의 상태 즉 왼쪽 눈을 일정기간(예: 1초 이상) 감아다가 뜨면 전자책의 페이지가 이전 페이지로 넘어가고 왼쪽 눈을 연속으로 깜박이면 전자책의 페이지가 설정되어진 이전 책갈피로 이동하게 한다. 만일 책갈피 설정이 없으면 이동변화가 없게 한다. 양쪽 눈을 일정기간(예: 1초 이상) 감아다가 뜨면 전자책의 현재 페이지가 책갈피로 설정되게 한다.
Therefore, the problem to be solved by the present invention is to enable faster and convenient judgment of page movement when viewing an e-book on a device that can see the e-book. The present invention relates to a method and a device for performing the same according to the state of the eye to determine whether to immediately move the page. For example, if you run the e-book viewer on a device that can read e-books, a program that automatically analyzes the eye conditions of the face is executed to analyze the eye changes in the face in real time to determine the page movement. At this time, the device should be able to input video or be able to receive video from an external input device. Through the video input part, the state of the face's eyes in real time, ie the right eye is closed for a certain period of time (for example, more than 1 second), then the page of the e-book goes to the next and the right eye's page blinks continuously. To the next bookmark. If there is no bookmark setting, there is no change. Then, if you open your eyes for a certain period of time (e.g. 1 second or more) and then open them, the page of the ebook will go to the previous page, and if the left eye is blinking continuously, the page of the ebook will go to the previous bookmark. . If there is no bookmark setting, there is no change. Closing both eyes for a period of time (for example, more than 1 second) and then opening will cause the current page of the e-book to be bookmarked.

상기 기술한 바와 같이 전자책을 볼 수 있는 기기의 전자책 페이지 이동 제어방법은 영상입력장치가 설치 되어져 있거나 없을 경우 PC캠등 외부 영상입력장치를 연결하여 실시간으로 영상을 입력받을 수 있어야 한다. 전자책의 페이지 이동 제어 방법에서, (a)전자책을 볼 수 있는 기기에서 전자책을 실행하였을 경우 얼굴의 눈 상태를 판단하는 소프트웨어가 실행되는 단계;(b)영상 입력 부분을 통해 얼굴의 눈 상태를 입력받아 눈의 상태를 구별하는 단계;(c)입력받아 구별된 눈의 상태 변화에 따라 페이지 이동 여부를 결정하는 단계를 포함하고 있다.(d)눈의 상태 즉 눈을 얼마의 시간 동안 감고 있어야 페이지 이동이 가능할지 그리고 책갈피 설정 방법등 사용자가 설정할 수 있는 페이지 이동에 관한 환경설정부분이 별도로 있게 하여 개인별로 얼굴의 특정 눈 상태변화에 따라 개별적으로 페이지 이동 여부를 결정할 수 있게 하는 환경설정부분이 있어야 한다.As described above, the method of controlling the e-book page movement of the device that can view the e-book should be able to receive an image in real time by connecting an external image input device such as a PC cam when the image input device is installed or not. In the method of controlling the page movement of an e-book, (a) when the e-book is executed in a device that can read the e-book is executed software that determines the eye state of the face; (b) the eye of the face through the image input portion (C) determining whether to move the page according to the change of the distinguished eye state by receiving the state; (d) the eye state, that is, the eye for some time; Environment setting that allows user to set page movement such as whether page can be moved when bookmark is closed and how to set bookmark, so that individual page can be decided individually according to specific eye condition of face. There must be a part.

본 발명을 통하면 일반적으로 전자책을 볼 수 있는 기기에서 전자책의 페이지 이동 여부를 마우스 클릭이나 손가락 터치 등의 방법으로 결정하는 것 보다 더 빠르고 편리하여 눈의 움직임 상태를 이용하여 결정할 수 있게 한다. 즉 전자책을 볼 수 있는 기기에서 전자책을 실행하면 자동으로 얼굴의 눈 상태변화를 인식하는 소프트웨어가 실행되어 실시간으로 입력 되어지는 눈의 상태에 따라 즉각적으로 페이지 이동 여부를 결정할 수 있다. According to the present invention, it is generally faster and more convenient to determine whether a page of an e-book is moved by a mouse click or a finger touch in a device that can read an e-book. . That is, when the e-book is executed in the device that can read the e-book, the software that automatically recognizes the change of the eye state of the face is executed, and it is possible to immediately decide whether to move the page according to the eye state input in real time.

또 손을 사용할 수 없는 상태나 손을 사용하지 않고도 전자책의 페이지 이동이 가능하여 손을 이용하는 일을 하면서도 손 이용하지 않고 페이지를 이동할 수 있어 편리하다.In addition, it is possible to move the pages of the e-book without using hands or hands, so you can move pages without using your hands while working.

도면 1은 본 발명의 간략한 실행 순서를 그린 예시도이다.
도면 2는 본 발명과 관련하여 페이지 이동 여부 환경을 설정하는 예시도이다.
도면 3은 본 발명과 관련하여 입력된 영상부분의 눈 상태를 분석하는 예시도이다.
도면 4는 본 발명에 관련하여 전자책의 페이지 이동 제어방법을 설명하는 예의 흐름도이다.
1 is an exemplary diagram showing a brief execution order of the present invention.
2 is an exemplary diagram for setting a page movement environment according to the present invention.
3 is an exemplary diagram of analyzing an eye state of an image portion input according to the present invention.
4 is a flowchart illustrating an example of a method for controlling page movement of an e-book in accordance with the present invention.

본 발명에 대해 예시도와 흐름도를 참조하여 구체적으로 설명하기로 한다.The present invention will be described in detail with reference to the accompanying drawings and a flowchart.

도면 1은 본 발명의 간략한 실행 순서를 그린 예시도이다. 먼저 전자책을 볼 수 있는 기기에서 1번과 같이 전자책 보기를 실행하면 2번과 같이 즉각 얼굴의 눈 상태 변화를 인식하는 프로그램이 실행된다. 그리고 동시에 3번과 같이 영상입력 장치를 통해 실시간으로 얼굴의 눈 상태를 입력받는다. 그리고 4번과 같이 3번에서 실시간으로 입력되는 얼굴의 눈 상태 변화를 2번에서 실행된 얼굴의 눈 상태변화를 인식하는 프로그램을 통해 분석하여 도면 2에서 설정된 페이지 이동 조건과 비교하여 도면 1의 5번과 같이 얼굴의 눈 상태 변화에 따라 전자책의 페이지 이동 여부를 결정한다.1 is an exemplary diagram showing a brief execution order of the present invention. First, when you run the e-book viewer on the device that can read the e-book, the program that recognizes the change in the eye condition of the face is executed immediately. At the same time, the eye state of the face is input in real time through the image input device as in step 3. In addition, as shown in FIG. 4, the eye state change of the face input in real time in step 3 is analyzed through a program that recognizes the eye state change of the face executed in step 2, and compared with the page shift condition set in FIG. As shown in Fig. 2, it determines whether the page of the e-book moves according to the change of the eye state of the face.

도면 2는 본 발명과 관련하여 전자책의 페이지 이동에 관한 환경을 설정하는 예시도이다.2 is an exemplary diagram for setting an environment related to page movement of an e-book according to the present invention.

페이지 이동 여부를 개별적으로 설정하여 사용자가 편리한 눈 동작으로 페이지 이동 여부를 판단할 수 있게 한다. 전자책을 볼 수 있는 기기에서 전자책을 실행하면 눈 상태 변화인식 소프트웨어가 실행되어 실시간으로 입력되어 지는 눈 상태를 분석하여 도면 2에서 설정 되어진 눈 상태와 비교하여 페이지 이동 여부를 판단하게 된다.By individually setting whether or not to move the page, the user can determine whether to move the page with a convenient eye movement. When the e-book is executed in the device that can read the e-book, the eye state change recognition software is executed to analyze the eye state input in real time and determine whether the page moves by comparing with the eye state set in FIG.

도면 2의 100번은 다음 페이지로 이동하는 조건을 설정하는 부분으로 세부적으로 101번과 같이 오른쪽 눈을 감고 있는 시간으로 설정되어 지고 도면 2의 200번은 다음 책갈피로 이동하는 조건을 설정하는 부분으로 세부적으로 201번과 같이 오른쪽 눈을 깜박이는 것으로 설정되어 진다. Figure 100 in Figure 2 is to set the condition to move to the next page in detail is set to the time to close the right eye as shown in 101, and Figure 200 in Figure 2 is to set the condition to move to the next bookmark in detail It is set as blinking right eye as 201.

도면 2의 300번은 이전 페이지로 이동하는 조건을 설정하는 부분으로 세부적으로 301번과 같이 왼쪽 눈을 감고 있는 시간으로 설정되어 지고 도면 2의 400번은 이전 책갈피로 이동하는 조건을 설정하는 부분으로 세부적으로 401번과 같이 왼쪽 눈을 깜박이는 것으로 설정되어 진다Figure 300 is a part that sets the condition to move to the previous page in detail is set to the time to close the left eye, as shown in 301, and Figure 400 is a part to set the condition to move to the previous bookmark in detail It is set to blink the left eye like 401

도면 2의 500번은 책갈피를 설정하는 조건으로 세부적으로 501번과 같이 양쪽 눈을 감고 있는 시간으로 설정되어 진다.500 in FIG. 2 is set to the time when both eyes are closed as 501 in detail as a condition for setting a bookmark.

여기서 도면 2의 201번과 401번의 경우 501번의 실행을 통해 책갈피가 이미 설정되어져 있을 경우만 책갈피 이동이 가능하고 이동할 책갈피가 없으면 반응하지 않는다.Here, in the case of 201 and 401 of FIG. 2, the bookmark can be moved only if the bookmark is already set through the execution of the 501 and does not respond if there is no bookmark to move.

그리고 도면 2에서 101번과 301번 그리고 501번을 선택하면 도면 2의 601번 창이 나타나 세부적으로 눈을 감고 있는 시간을 설정할 수 있다. 여기서 최소값 즉 최소한으로 눈을 감고 있는 시간과 최대값 즉 최대로 눈을 감고 있는 시간은 적절하게 시스템상에서 설정이 되어 개인은 최소값과 최대값 사이의 시간을 설정할 수 있게 한다.  In addition, when the numbers 101, 301 and 501 are selected in FIG. 2, the window 601 of FIG. 2 may appear to set the time of closing eyes in detail. Here, the minimum value, the minimum time to close the eyes and the maximum value, the maximum time to close the eyes, are appropriately set on the system so that the individual can set the time between the minimum and maximum values.

도면 3은 본 발명과 관련하여 입력된 영상부분의 눈 상태를 분석하는 예시도이다.3 is an exemplary diagram of analyzing an eye state of an image portion input according to the present invention.

이 부분은 얼굴인식에 대해 개발되어 진 기존기술을 사용할 수도 있다.This part can also use existing techniques developed for face recognition.

전자책을 볼 수 있는 기기에서 전자책 보기를 실행하면 즉각 얼굴의 눈 상태 변화를 인식하는 프로그램이 실행된다. 그리고 동시에 영상입력부분을 통해 실시간으로 영상을 입력받고 얼굴 인식 여부를 판단한 후 얼굴이 영상입력부분을 통해 입력되고 있으면 얼굴의 눈 상태를 분석한다. 실시간으로 입력되어 지는 얼굴의 눈 상태를 분석하여 오른쪽 눈과 왼쪽 눈을 판별한다. 오른쪽 눈과 외쪽 눈은 두 눈의 중간부분을 기준으로 X좌표가 0이게 하여 X좌표값이 + 이면 오른쪽 눈으로 인식하고 X좌표값이 - 일 경우 왼쪽 눈으로 인식하게 한다. 도면 3에서 R1이 R3과 특정거리로 가까워지거나 겹쳐지면 오른쪽 눈을 감 것으로 인식하고 시간을 카운트한다. 그리고 도면 3에서 L1과 L3이 특정거리로 가까워지거나 겹쳐지면 왼쪽 눈을 감은 것으로 인식하고 시간을 카운트한다. 도면 3에서 R1이 R3과 특정거리로 가까워져다가 일정시간 이내에 멀어져다가 다시 가까워지면 오른쪽 눈 깜박임으로 인식한다. 도면 3에서 L1이 L3과 특정거리로 가까워져다가 일정시간 이내에 멀어져다 다시 가까워지면 왼쪽 눈 깜박임으로 인식한다. When you run an e-book viewer on a device that can read e-books, it immediately launches a program that recognizes changes in the facial eye condition. At the same time, after receiving an image in real time through the image input part and determining whether the face is recognized, if the face is being input through the image input part, the eye state of the face is analyzed. The right eye and the left eye are distinguished by analyzing the eye state of the face input in real time. The right eye and the outer eye have the X coordinate equal to 0 based on the middle part of the two eyes. If the X coordinate value is +, the right eye is recognized. If the X coordinate value is-, the left eye is recognized. In FIG. 3, when R1 approaches or overlaps with R3 at a specific distance, the right eye is closed and the time is counted. In FIG. 3, when L1 and L3 get closer or overlap with a specific distance, the left eye is closed and the time is counted. In FIG. 3, when R1 approaches a specific distance from R3 and then moves away within a predetermined time, the R1 is recognized as a right eye blink. In FIG. 3, when L1 approaches a specific distance from L3 and then moves away within a predetermined time, the L1 is recognized as a left eye blink.

도면 4는 본 발명에 관련하여 전자책 페이지 이동 여부를 판단하는 방법을 설명하는 흐름도이다.4 is a flowchart illustrating a method of determining whether to move an e-book page according to the present invention.

전자책을 볼 수 있는 기기에서 전자책 보기를 실행하면 도면 4의 A101과 같이 해당 기기에 내장되어 있는 얼굴의 눈 상태 변화인식 프로그램이 실행된다. 실행된 얼굴의 눈 상태 변화인식 프로그램은 A102와 같이 영상입력부분을 통해 실시간으로 영상을 입력받는 명령을 실행시킨다. When the e-book view is executed in the device that can read the e-book, the facial state change recognition program of the face embedded in the device is executed as shown in A101 of FIG. 4. The executed eye state change recognition program of the face executes a command for receiving an image in real time through an image input unit as in A102.

A103과 같이 영상입력부분을 통해 실시간으로 입력되는 영상을 분석하여 얼굴이 영상입력부분에 특정거리로 가까이 있어 눈을 인식할 수 있는지를 판단한다. As shown in A103, the image inputted in real time through the image input part is analyzed to determine whether the face is close to the image input part so that eyes can be recognized.

A103에서 얼굴의 눈을 인식하였을 경우 A104로 이동하여 눈 상태변화를 분석하여 도면 2에서 설정 되어진 페이지 이동이나 책갈피 이동의 조건을 만족할 경우 프로그램은 A106으로 이동하여 페이지 또는 책갈피 이동을 한다. 만일 여기서 이동할 페이지나 책갈피가 없을 경우나 페이지 이동과 책갈피 이동이 실행되고 나면 다시 A102부분으로 프로그램이 이동하여 다음 눈 상태를 분석하여 페이지 이동에 관한 명령을 되풀이한다. A104에서 도면 2에서 설정된 책갈피 설정 조건을 만족할 경우 A105로 프로그램이 이동하여 현재 페이지를 책갈피로 설정하고 A102부분으로 프로그램이 이동하여 다음 눈 상태를 분석하여 페이지 이동에 관한 명령을 되풀이한다. 만일 전자책이 종료되면 얼굴의 눈 상태변화인식 프로그램은 A108과 같이 자동으로 종료된다.When the eye of the face is recognized in A103, the process moves to A104 to analyze the change of the eye state, and if the condition of page movement or bookmark movement set in FIG. 2 is satisfied, the program moves to A106 to move the page or bookmark. If there are no pages or bookmarks to be moved here, or after page and bookmarks have been executed, the program moves back to the A102 section and analyzes the next snow condition and repeats the command for page movement. When A104 satisfies the bookmark setting conditions set in FIG. 2, the program moves to A105 to set the current page as a bookmark, and the program moves to A102 to analyze the next snow state and repeats a command regarding page movement. If the e-book is closed, the facial eye state change recognition program is automatically terminated as shown in A108.

없음none

Claims (2)

얼굴의 눈 상태 변화인식 소프트웨어와 영상입력부분으로 입력되는 영상의 얼굴 부분 눈 상태를 실시간으로 비교하는 부분과 상기 영상입력부분으로 입력되어지는 영상의 얼굴부분 눈 상태와 미리 설정되어 진 눈의 상태에 따른 페이지 이동 여부 판별항목을 비교하여 전자책의 페이지이동 여부를 결정하는 부분을 포함하여 이를 특징으로 하는 기기.The eye state change of the face and the face part of the image input to the image input part and the face part of the image input to the image input part in real time and the face part eye state of the image input to the image input part and the preset eye state The apparatus comprising the part of determining whether to move the page of the e-book by comparing the page moving whether according to the determination item. 제 1항에 있어 전자책을 볼 수 있는 기기로 영상입력장치가 포함되어 있거나 영상입력장치가 포함되지 않은 기기의 경우 외부 영상입력장치를 연결하여 얼굴의 눈 상태 변화를 분석하여 전자책의 페이지 이동 여부에 대한 판단을 하는 부분을 포함하여 이를 특징으로 하는 기기.The apparatus of claim 1, wherein the device includes a video input device or a device that does not include a video input device. Device characterized in that it comprises a portion for determining whether or not.
KR1020120030888A 2012-03-27 2012-03-27 Method for controlling e-book using image input device and the equipment KR20130109295A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120030888A KR20130109295A (en) 2012-03-27 2012-03-27 Method for controlling e-book using image input device and the equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120030888A KR20130109295A (en) 2012-03-27 2012-03-27 Method for controlling e-book using image input device and the equipment

Publications (1)

Publication Number Publication Date
KR20130109295A true KR20130109295A (en) 2013-10-08

Family

ID=49631537

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120030888A KR20130109295A (en) 2012-03-27 2012-03-27 Method for controlling e-book using image input device and the equipment

Country Status (1)

Country Link
KR (1) KR20130109295A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200007316A (en) * 2018-07-12 2020-01-22 주식회사 위디코 Iot-based biometrics type gas safety cut-off system
WO2024014575A1 (en) * 2022-07-14 2024-01-18 주식회사 위디코 Speech recognition and facial recognition-type gas safety management system

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200007316A (en) * 2018-07-12 2020-01-22 주식회사 위디코 Iot-based biometrics type gas safety cut-off system
WO2024014575A1 (en) * 2022-07-14 2024-01-18 주식회사 위디코 Speech recognition and facial recognition-type gas safety management system

Similar Documents

Publication Publication Date Title
EP3644165B1 (en) Information processing device, information processing method, and recording medium
US10234953B1 (en) Cross-device interaction through user-demonstrated gestures
KR102017884B1 (en) Apparatus and method for analysis to concentrate with driver
KR101302638B1 (en) Method, terminal, and computer readable recording medium for controlling content by detecting gesture of head and gesture of hand
EP3234732A1 (en) 3d visualization
KR20160007634A (en) Feedback for gestures
KR101901735B1 (en) Method and system for providing user interface, and non-transitory computer-readable recording medium
EP3195102A1 (en) Simulating real-time responsiveness for touch displays
CN104090704B (en) Information processing method and electronic equipment
CN103631365A (en) Terminal input control method and device
CN103197755A (en) Page turning method, device and terminal
Xia et al. Iteratively designing gesture vocabularies: A survey and analysis of best practices in the HCI literature
KR20140047515A (en) Electronic device for inputting data and operating method thereof
JP6183188B2 (en) Display device, program, and display method
CN104866164A (en) Human-machine interaction system and method based on blink signal mode detection
CN103389871B (en) The control method of a kind of electronic equipment and electronic equipment
CN110389704A (en) One-handed performance method, mobile terminal and the storage medium of mobile terminal
CN105739700A (en) Notice opening method and apparatus
CN104898880A (en) Control method and electronic equipment
CN102467237A (en) Device and method for realizing mouse function by using non-contact gestures
CN115858080A (en) Method, device, equipment and storage medium for designing human-computer interaction interface
CN103177245B (en) gesture recognition method and device
KR101370027B1 (en) Mouse apparatus for eye-glass type display device and operating method for the same
KR20130109295A (en) Method for controlling e-book using image input device and the equipment
CN103809909B (en) A kind of information processing method and electronic equipment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application