KR20070043469A - System of indentifying the movement of physically handicapper as that of the mouse - Google Patents

System of indentifying the movement of physically handicapper as that of the mouse Download PDF

Info

Publication number
KR20070043469A
KR20070043469A KR1020050099781A KR20050099781A KR20070043469A KR 20070043469 A KR20070043469 A KR 20070043469A KR 1020050099781 A KR1020050099781 A KR 1020050099781A KR 20050099781 A KR20050099781 A KR 20050099781A KR 20070043469 A KR20070043469 A KR 20070043469A
Authority
KR
South Korea
Prior art keywords
mouse
signal
movement
recognition system
characterized
Prior art date
Application number
KR1020050099781A
Other languages
Korean (ko)
Inventor
허철호
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020050099781A priority Critical patent/KR20070043469A/en
Publication of KR20070043469A publication Critical patent/KR20070043469A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks

Abstract

본 발명은 손을 사용할 수 없는 장애인들이 마우스 기능을 사용할 수 있도록 하는 마우스 동작 인식 시스템에 관한 것이다. The present invention relates to a mouse gesture recognition system that will allow people with disabilities can not use a hand mouse enabled. 본 발명은 물리적인 움직임 동작 없이도 마우스의 기능을 사용할 수 있도록 하기 위하여, 사용자의 특정부위(눈)의 움직임에 마우스의 기능을 설정하고, 영상촬영에 의한 눈 움직임을 판단하고 마우스의 동작을 수행하도록 한다. In order that the present invention can use the functionality of, without physical movement operation mouse, setting the functions of the mouse to the movement of users in a certain area (the eye), and to determine the eye movements by video recording, and perform the operation of the mouse do. 따라서 본 발명은 거리에 제한을 받지 않고, 정상인과 장애인 모두 마우스의 기능을 사용하는 것이 가능하다. Therefore, the present invention is not limited to the distance, it is possible to use a function of both normal and impaired mice.
마우스, 장애인, 눈, Mouse, handicapped, snow,

Description

장애인을 위한 마우스 동작 인식 시스템 {System of Indentifying the movement of Physically Handicapper as That of the Mouse} Mouse gesture recognition system for the disabled {System of Indentifying the movement of Physically Handicapper as That of the Mouse}

도 1은 종래 기술에 따른 마우스의 연결 구성도, Figure 1 is a connection structure of a mouse according to the prior art,

도 2는 본 발명에 따른 장애인을 위한 마우스 동작 인식 시스템의 개념도, Figure 2 is a schematic diagram of the mouse gesture recognition system for disabled persons according to the invention,

도 3은 본 발명에 따른 장애인을 위한 마우스 동작 인식 시스템의 전체 구성도, Figure 3 is a general configuration of a mouse gesture recognition system for disabled persons according to the invention,

도 4는 본 발명에 따른 장애인을 위한 마우스 동작 인식상태의 예시도, Figure 4 is an example of a mouse gesture recognition conditions for the disabled according to the invention,

도 5는 본 발명에 따른 장애인을 위하여 사용자의 특정부위를 마우스 기능을 설정하는 동작 과정도, Figure 5 is a process operation to set the mouse function, the specific part of the user for the disabled according to the invention,

도 6은 본 발명에 따른 장애인을 위한 마우스 동작 인식을 위한 동작 과정도. Figure 6 is an operation process for a mouse operation recognition for the disabled according to the invention.

* 도면의 주요 부분에 대한 부호의 설명 * * Description of the Related Art *

100 : 시스템 110 : 카메라 100: 110 System: Camera

130 : 시스템 입력부 140 : 어플리케이션 프로그램 130: system input unit 140: application program

150 : 마우스 드라이버 160 : 저장장치 150: a mouse driver 160: storage device

본 발명은 마우스(Mouse) 동작을 인식하는 시스템에 관한 것으로, 더욱 상세하게는 손을 사용할 수 없는 장애인들이 마우스 기능을 사용할 수 있도록 하는 마우스 동작 인식 시스템에 관한 것이다. The present invention relates to a system which recognizes the mouse (Mouse) operation, they will more specifically, the disabled can not use the hand on the mouse gesture recognition system to be able to use the mouse function.

통상의 퍼스널 컴퓨터(Personal Computer), 워드 프로세서(Word processor) 및 통신 단말기(Commumication Terminal) 등과 같은 정보단말장치는 작성, 편집 및 열람 중인 정보문서 상의 위치의 변경에 있어서 사용자의 편의를 도모하기 위하여 마우스가 장착되어 있다. Conventional information apparatus such as personal computers (Personal Computer), a word processor (Word processor) and communication terminal (Commumication Terminal) are mice in order to promote the convenience of the user in the creation, editing and changing the position on the view information being document It is fitted. 이렇게 마우스가 장착되어진 정보단말장치는 마우스가 이동되어진 만큼 표시 스크린 상의 마우스 포인터를 이동시켜 사용자가 원하는 정보문서 상의 위치를 손쉽게 변경하게 한다. Thus the information terminal device has been mounted mouse makes to move the mouse pointer on the display screen as the mouse is moved been changing user easy access to the desired location on the document information.

마우스가 장착되어진 정보단말장치는 도 1에 도시된 바와 같이, 본체(10)와 이에 착탈 가능하게 연결되는 마우스(12)로 구성된다. Mouse been equipped with the information apparatus is composed of a main body 10, and its detachable mouse 12 which can be connected as shown in FIG. 정보단말장치의 본체에는 마우스(12)의 이동에 따라 마우스 포인터를 이동시키기 위한 마우스 드라이버(14)와, 상기 마우스 드라이버(14)와 마우스(12) 사이에 직렬 접속되어진 입/출력 제어기(16) 및 마우스 접속부(18)가 구비되어 있다. Mouse driver for the main body of the information terminal device to move the pointer according to the movement of the mouse 12, 14, the mouse driver 14 and mouse input / output controller (16) been connected in series between the 12 and it is provided with a mouse connection 18.

마우스(12)는 사용자에 의하여 이동됨에 따른 이동방향 및 이동량을 감지하고 그 감지되어진 이동방향 및 이동량을 마우스 접속부(18)를 경유하여 입출력제어기(16) 쪽으로 전송한다. Mouse 12 detects the moving direction and moving amount according As the movement by the user and transmitted towards the detection of the movement direction and movement amount been via a mouse connection 18, input and output controller 16. 또한 마우스(12)는, 좌측 버튼 및 우측 버튼과 같은 두 개의 버튼(Button) 또는 그 이상의 버튼을 구비하여 사용자가 지정하는 명령을 마우스 접속부(18)를 경유하여 입출력 제어기(16) 쪽으로 전송한다. In addition, the mouse 12, via the two buttons (Button) or mouse connection portion 18 an instruction to the user and specified by comprising a further button and a left button and a right button and sends towards IO controller 16. 마우스(12) 좌측버튼 또는 우측 버튼의 클릭여부(또는 압압 여부) 및 자체의 이동방향 및 이동량을 검출하기 위하여, 마우스(12)는 마우스 클럭을 이용하며, 아울러 검출되어진 버튼의 클릭여부, 이동방향 및 이동량을 포함하는 마우스 데이터를 마우스 클럭에 동기되게 마우스 접속부(18) 쪽으로 출력한다. Mouse 12, a left button or (whether or pressure) click if the right button, and to detect the moving direction and amount of movement of itself, a mouse 12, and using the mouse clock, as well as click been detected button or not, the movement direction to be synchronized with the mouse data, including the amount of movement and the mouse clock outputs towards mouse connection 18.

마우스 접속부(18)는, 마우스 클럭을 발생하여 그 발생된 마우스 클럭을 마우스(12)에 공급함과 아울러 마우스(12)로부터의 마우스 데이터를 마우스 클럭에 동기되게 입출력 제어기(16) 쪽으로 전송하게 된다. Mouse connection 18, to generate a mouse clock and supplies the generated mouse clock on mouse 12 as well as to be synchronized with the mouse data from the mouse 12, the mouse clock transmits towards IO controller 16. 또한, 마우스 접속부(18)는, 마우스(12)로부터 입출력 제어기(16) 쪽으로 전송될 마우스 데이터와 입출력 제어기(16) 및 마우스(12) 쪽으로 전송될 마우스 클럭에 포함되어진 고주파 성분의 잡음을 제거하게 된다. In addition, mouse connection 18, to remove the noise of the high-frequency component that is included in the mouse clock to be transmitted into the input-output controller 16 mouse data and input-output controller 16 and mouse 12 to be sent towards from the mouse 12 do.

입출력 제어기(16)는 마우스(12)로부터 마우스 접속부(18)를 경유하여 전송되는 마우스 데이터를 마우스 클럭에 동기되게 수신하여 수신되어진 마우스 데이터를 마우스 드라이버(14) 쪽으로 전송한다. Input and output controller 16 transmits the mouse data that has been received by the receiving to be synchronized with the mouse data to be transmitted via a mouse connection 18 from the mouse 12, the mouse into the mouse clock driver 14.

마우스 드라이버(14)는 입출력 제어기(16)로부터의 마우스 데이터를 선택적으로 가공하게 된다. Mouse driver 14 is selectively processed in the mouse data from the input-output controller 16. 이를 구체적으로 설명하면, 마우스 드라이버(14)의 입출력 제어기(16)으로부터의 마우스 데이터가 단지 마우스(12)에 마련된 버튼의 클릭여부(또는 압압 여부)만을 포함하는 경우에는 그 버튼의 클릭여부를 그대로 도시하지 않은 중앙 처리 유니트(Centural Process Unit) 쪽으로 전송한다. If it specifically, if the mouse driver 14, button clicks provided on the input-output controller 16, the mouse data is only mouse 12 from whether or not (or whether the pressing) only has as a click status of the button It transmits towards the central processing unit (Centural process unit), not shown. 이와는 달리, 입출력 제어기(16)으로부터의 데이터가 벡터 이동량을 포함하는 경우, 마우스 드라이버(14)는 입출력 제어기(16)으로부터의 마우스 데이터(즉, 상대좌표 형태의 벡터 이동량)에 근거하여 현재의 포인터 데이터를 갱신하고 그 갱신된 포인터 데이터를 중앙처리유니트에 공급하므로서 마우스 포인터가 마우스(12)의 이동한 만큼 이동한 방향으로 이동되게 한다. Alternatively, if the data from the input-output controller 16 includes a vector amount of movement, mouse driver 14 is the current pointer to the based on the mouse data (i. E., Vector amount of movement of the relative coordinate type) from the input-output controller 16 It causes the update data and the update of the pointer hameuroseo supply the pointer data to the central processing unit moves in one movement direction by a movement of the mouse 12.

이렇게 마우스(12)가 장착되어진 정보단말장치는 사용자가 마우스를 이동시킬 때마다 그 이동한 거리 만큼 현재의 마우스 포인터를 지정한 방향으로 지정한 위치만큼 이동시키게 된다. This mouse 12 has been mounted information terminal device, thereby each user to move the mouse by the travel distance moved by the specified location of the current pointer in the specified direction.

이와 같이 종래의 마우스는, 사용자가 직접 손을 이용하여 물리적으로 마우스를 이동시켜야만 마우스 포인터의 위치 이동이 가능하고, 또한 마우스 버튼의 사용도 사용자가 직접 손을 이용하여 클릭하는 작업을 필요로 하였다. Thus, the conventional mouse, the user directly with the hand physically sikyeoyaman hover possible the movement of the mouse pointer, and using the mouse button was also requires an action that a user clicks using a hand directly. 따라서 손에 장애가 심한 장애인의 경우, 마우스를 움직이거나 클릭하는 동작이 어려워서 마우스 사용이 불가능하였다. Therefore, if the disability severe disability in hand, the operation is difficult to move or click the mouse using a mouse impossible.

또한, 종래의 마우스는, 본체에 유선으로 연결하여야만 사용이 가능하였다. Furthermore, the conventional mouse, the use was possible hayeoyaman connected by wire to the main body. 그렇기 때문에 본체 가까이에서만 마우스의 사용이 가능하였고, 원거리에서는 사용이 불가능하였다. So this was only possible using the mouse close to the body, the distance was not available.

따라서 본 발명의 첫번째 목적은 장애인의 마우스 사용에 있어 편의성을 도모할 수 있는 장애인을 위한 마우스 동작 인식 시스템을 제공함에 있다. Thus the first aspect of the present invention is to provide a mouse gesture recognition system for disabled persons to achieve a convenience in use of the mouse impaired.

본 발명의 두번째 목적은 마우스에 직접적으로 물리적인 동작을 가하지 않아도 마우스 기능을 사용할 수 있는 장애인을 위한 마우스 동작 인식 시스템을 제공함에 있다. The second object of the present invention do not use a physical action directly on the mouse to provide a mouse gesture recognition system for disabled people to use the mouse function.

본 발명의 세번째 목적은 원거리에서도 마우스 기능을 사용할 수 있는 장애인을 위한 마우스 동작 인식 시스템을 제공함에 있다. A third aspect of the present invention is to provide a mouse gesture recognition system for people with disabilities to use the mouse functions from a distance.

상기 목적을 달성하기 위하여, 본 발명의 실시예에 따른 장애인을 위한 마우스 동작 인식 시스템은 사용자의 특정부위 움직임에 대해서 마우스 입력신호를 설정하고, 저장하는 저장수단과; In order to achieve the above object, the storage means that the mouse motion for the disabled according to an embodiment of the present recognition system is set to the mouse input signals to move a specific part of the user, and stores and; 사용자의 특정부위의 움직임을 촬영하고, 전기신호로 변환하는 카메라 촬영수단과; Camera photographing means for photographing the user's movement of the specific area, and converted into an electric signal; 상기 저장수단에 저장된 값에 기초해서 상기 카메라 촬영수단에서 출력하는 값을 마우스 입력신호로 변환하는 어플리케이션 프로그램과; Application program based on the value stored in the storage means to convert a value output from the camera photographing means with the mouse and the input signal; 상기 마우스 입력신호에 대하여 표시장치에 마우스 동작을 수행하는 마우스 출력신호를 출력하는 마우스 드라이버를 포함하여 구성되는 것을 특징으로 한다. Characterized in that the configuration including a mouse driver for outputting the output signal to perform a mouse mouse operation to the display device with respect to the mouse input signals.

본 발명은 사용자의 특정부위 움직임을, 눈동자의 움직임에 의해 제어하는 것을 특징으로 한다. The present invention is characterized in that controlled by the user of the specific part moves, the eye movements.

본 발명은 상기 카메라 촬영수단과 어플리케이션 프로그램 사이에 촬영값 입력과, 신호 변환을 위한 입력 인터페이스를 포함하는 것을 특징으로 한다. The present invention is characterized in that it comprises an input interface for recording input values ​​and signal conversion between the camera photographing means and an application program.

본 발명의 상기 입력부는, USB 인터페이스를 사용하는 것을 특징으로 한다. The input section of the present invention, characterized by using a USB interface.

또한, 본 발명의 실시예에 따른 장애인을 위한 마우스 동작 인식 시스템의 제어방법은, 사용자의 특정부위 움직임에 대해서 마우스 입력신호를 설정하고, 저 장하는 저장단계와; Further, a method, a mouse gesture recognition system for disabled persons according to an embodiment of the present invention, and set the mouse input signals to the user of the specific part moves, and a storage step that stores; 마우스로 사용할 사용자의 특정부위의 움직임을 촬영하고, 전기신호로 변환하는 촬영단계와; Photographing the user's motion of the specific portion using a mouse, and taking steps to convert into an electric signal; 상기 저장된 값에 기초해서 상기 촬영 값을 마우스 입력신호로 변환해서 출력하는 출력단계와; And an output step of outputting by converting the value taken as a mouse input signal on the basis of the stored values; 상기 마우스 입력신호에 대한 마우스 동작을 표시장치에 나타내는 표시단계를 포함하여 구성되는 것을 특징으로 한다. It is characterized in that comprises a display step that represents the mouse operation on the mouse input signals to the display device.

본 발명의 상기 사용자의 특정부위 움직임은, 눈 움직임에 의한 것임을 특징으로 한다. Certain part of the motion the user of the present invention is characterized in that according to the eye movement.

본 발명의 상기 출력단계는, 눈동자가 왼쪽 이동신호일 때, 마우스 포인터 왼쪽 이동신호를 출력하는 것을 특징으로 한다. The output stage of the invention is characterized in that the eye is an output signal when the left movement, the left mouse pointer movement signal.

본 발명의 상기 출력단계는, 눈동자가 오른쪽 이동신호일 때, 마우스 포인터 오른쪽 이동신호를 출력하는 것을 특징으로 한다. The output stage of the invention is characterized in that the eye is output when the signal-to-right, right mouse pointer movement signal.

본 발명의 상기 출력단계는, 왼쪽 눈 깜박임 신호일 때, 마우스 왼쪽 버튼 클릭신호를 출력하는 것을 특징으로 한다. The output step of the present invention is characterized by outputting a signal when the left eye blinks, the left mouse button click signal.

본 발명의 상기 출력단계는, 오른쪽 눈 깜박임 신호일 때, 마우스 오른쪽 버튼 클릭신호를 출력하는 것을 특징으로 한다. The output step of the present invention, when the right eye blinking signal, characterized in that the output, right-click signal.

본 발명의 상기 출력단계는, 눈동자가 위쪽 이동신호일 때, 마우스 포인터 위로 이동신호를 출력하는 것을 특징으로 한다. The output stage of the invention is characterized in that the eye is output when the upper movement signal, moving the mouse pointer over signal.

본 발명의 상기 출력단계는, 눈동자가 아랫쪽 이동신호일 때, 마우스 포인터를 아래로 이동신호를 출력하는 것을 특징으로 한다. The output stage of the invention is characterized in that the eye outputs a change signal when the downward movement signal, the mouse pointer down.

이하 본 발명의 실시예를 첨부한 도면을 참조하여 상세히 설명하기로 한다. With reference to the accompanying drawings, an embodiment of the present invention will be described in detail.

도 2는, 본 발명의 실시예에 따른 장애인을 위한 마우스 동작 인식 시스템의 기본 구성 블록도 이다. 2 is a basic configuration block diagram of a mouse gesture recognition system also for the disabled according to an embodiment of the invention.

도시하고 있는 바와 같이, 퍼스널 컴퓨터(PC), 텔레비젼(TV), 기타 여러가지 정보 입력을 가능하게 하는 단말장치(100)들은 작성, 편집 및 열람 중인 정보문서 상의 위치 변경에 있어서 사용자의 편의를 도모하기 위하여 마우스 기능을 필요로 한다. To plan, a personal computer (PC), television (TV), any other terminal device 100 to enable various information inputs the user's convenience in creating, editing, and position changes on Showing information document as that shown to require the functionality of a mouse. 따라서 본 발명에서는 사람의 특정부위(눈, 코, 입 등)의 움직임을 이용하여 마우스 기능을 구현하는 것을 특징으로 한다. Therefore, the present invention is characterized in that for implementing the mouse function by the use of the specific area (the eyes, nose, mouth, etc.) of the person's movement.

이를 위해서 본 발명에서는 단말장치(100)에 사람의 특정부위를 촬영하기 위한 카메라(110,120)를 연결한다. In the present invention, in order to do this, the camera is connected to 110 and 120 for photographing the specific part of the person to the terminal device 100. The 상기 카메라는, 한개 설치하거나 그 이상 설치하는 것도 가능하다. The cameras, it is also possible to install one or more installed. 상기 카메라를 여러개 설치한 경우, 마우스로 이용되어지는 사람의 특정부위를 촬영한 여러개의 값들 중에서 가장 선명한 값을 이용해서 사용하는 것이 바람직하다. If a multiple installing the camera, it is preferable to use, using the clearest value among a number of values ​​taken for a specific part of the person that is using the mouse.

도 2는 본 발명에 따른 장애인을 위한 마우스 동작 인식 시스템의 전체적인 개략도이다. 2 is an overall schematic diagram of a mouse gesture recognition system for disabled persons according to the invention.

우선, 시스템을 사용하는 사용자의 특성에 맞추어서 마우스로 이용될 특정부위를 설정한다. First, to set a specific area to be used as a mouse to match the user's characteristics using the system. 상기 설정동작은 시스템의 CMOS와 같이 초기설정단계에서 설정되도록 하는 것이 바람직하다. The setting operation is preferred to be set in the initial setting step, as in the system CMOS. 카메라(110)는, 상기 설정된 특정부위가 잘 찍히도록 촬영한다. Camera 110, and the set-up so that the specific portion jjikhi well. 상기 카메라(110)는, CCD 카메라 등을 이용한다. The camera 110 uses a CCD camera. 사용자는 마우스로 이용될 특정부위(눈, 코, 입 등)의 움직임이 상기 CCD 카메라(110)에 정확히 전달되어지게 한다. The user movement of the specific area (the eyes, nose, mouth, etc.) be used as a mouse is correctly be transmitted to the CCD camera 110.

상기 카메라(110)에서 촬영된 마우스 동작 인식을 위한 움직임 영상신호(B) 는, 퍼스널 컴퓨터, 게임기 등의 정보 입력을 필요로 하는 단말장치(100)의 입력부(130)에 입력되어진다. The motion picture signal for a mouse gesture recognition shot by the camera (110) (B) is, is entered to the input unit 130 of the terminal apparatus 100 which requires the input of information such as a personal computer, a game machine. 상기 입력부(130)는, USB 포트, PCI 인터페이스 등이 이용되어진다. The input unit 130 may be used is the, USB port, PCI interface, and so on. 상기 입력부(130)는, 카메라(110) 움직임 영상신호(B)를 시스템 내부의 소프트웨어에서 인식할 수 있는 상태로 변환하여 준다. The input unit 130 allows to convert the camera 110, the motion image signal (B) to a state that can be recognized in the internal software system. 따라서 상기 입력부(130)에서 출력되는 신호(C)는, 후술되는 어플리케이션 프로그램에서 인식할 수 있도록 드라이버 레벨(Driver Lever)의 소프트웨어가 동작되어 신호처리가 이루어진 상태가 된다. Therefore, the input signal (C) output from the unit 130, the software to operate the driver level (Driver Lever) to be recognized by the application program to be described later is in a state that the signal processing is made.

상기 입력부(130)에서 출력된 신호(C)는, 시스템 내부의 어플리케이션 프로그램(140)에 입력된다. The signal output from the input unit (130), (C) is input to an application program within the system 140. The 상기 어플리케이션 프로그램(140)은, 이미 정의된 특정부위 움직임에 따른 설정값을 이용해서 전달된 정보에 해당하는 마우스 입력신호를 출력한다. The application program 140 outputs a mouse input corresponding to the information conveyed by using a set value corresponding to a specific part movement has already been defined.

상기 어플리케이션 프로그램(140)은, 사용자 특정부위에 해당하는 마우스 입력신호를 미리 설정하고, 이 값이 저장되어 있는 저장장치(160)의 저장값에 기초해서 해당하는 마우스 입력신호를 출력한다. The application program 140, set the mouse input signals to the user a specific site in advance, and outputs a mouse input corresponding to the basis of the stored value of the storage device 160 that is the value is stored. 상기 저장장치(160)의 사용자의 특정부위(입, 코, 눈) 움직임마다 해당하는 마우스 입력신호를 저장한다. It stores a mouse input signal corresponding to each user of a specific area (mouth, nose, eyes), movement of the storage device 160.

상기 어플리케이션 프로그램(140)에서 출력되는 마우스 입력신호는, 마우스 드라이버(150)를 통해서 디스플레이 상에서 마우스 포인터의 이동 및 마우스 버튼의 클릭 등의 동작을 수행하기 위한 마우스 출력신호로 변환되어진다. Mouse which is output from the application program 140, the input signals are converted into mouse output signal for performing an action, such as, a mouse driver 150 of the mouse movement and mouse button click of the pointer on the display through.

다음, 도 4는, 사람의 눈을 이용한 마우스 동작 인식을 위한 간단한 예시도이다. Next, FIG. 4 is a diagram illustrating a simple mouse movements recognized by the human eye.

도시하고 있는 바와 같이, 사람의 두 눈동자가 마우스와 같이 이용되어지고 있다. As shown, there are two eyes of a human being is used as a mouse. 도 4의 (a)에 도시하고 있는 바와 같이, 양쪽 눈동자의 움직임의 마우스 포인터의 움직임을 만드는 것이 가능하다. As illustrated in (a) of Figure 4, it is possible to make the movement of the mouse pointer on each side eye movements. 양쪽 눈동자가 왼쪽으로 움직이면, 마우스 포인터는 디스플레이 상에서 왼쪽으로 이동하기 위한 마우스입력신호가 설정되고, 양쪽 눈동자가 오른쪽으로 움직이면, 마우스 포인터는 디스플레이 상에서 오른쪽으로 이동하라는 마우스입력신호가 설정된다. Both eyes move to the left, the mouse pointer is the input signal to move to the left on the display is set, both eyes move to the right, the mouse pointer is set to the mouse input signal to move to the right on the display. 그리고 양쪽 눈동자가 위쪽을 향하면, 마우스 포인터는 디스플레이 상에서 위쪽으로 이동하라는 마우스입력신호가 설정되고, 양쪽 눈동자가 아래쪽을 향하면, 마우스 포인터는 디스플레이 상에서 아래쪽으로 이동하기 위한 마우스입력신호가 설정된다. And the both eyes hyanghamyeon the top pointer is a mouse input signal to move upward on the display is set, and both eyes hyanghamyeon downward, the mouse pointer is set to the mouse input signal to move downward on the display.

도 4의 (b)에 도시하고 있는 바와 같이, 오른쪽 눈이 떠 있는 상태에서, 왼쪽 눈만 1회 깜박이면, 마우스의 왼쪽 버튼이 클릭동작을 수행하기 위한 입력신호이다. As illustrated in (b) of Figure 4, in a state floating from the right eye, the left nunman is once flashes, the input signal for the left button of the mouse to perform a click operation. 도 4의 (c)에 도시하고 있는 바와 같이, 왼쪽 눈이 떠 있는 상태에서, 오른쪽 눈만 1회 깜박이면 마우스의 오른쪽 버튼이 클릭 동작을 수행하기 위한 입력신호이다. As is shown in (c) of Figure 4, in the state floating on the left eye, the right nunman is flashing once the input signal for performing the click operation of the right button of the mouse.

그리고 도 4의 (d)에 도시하고 있는 바와 같이, 입의 움직임이나 코의 움직임을 이용해서도 마우스 포인터 이동 및 마우스 버튼 클릭동작 등을 설정하는 것이 가능하다. And as that shown in (d) of Figure 4, it is possible to also to set up such as a mouse pointer movement and mouse button click operation using the movement of the mouth or nose movement. 예를 들어서 입이 왼쪽 방향으로 쏠려 있을 때, 마우스 포인터를 왼쪽으로 이동시키도록 설정할 수 있다. For example, when you enter the ssolryeo to the left it can be set to move the mouse pointer to the left. 그리고 입이 오른쪽 방향으로 쏠리면, 마우스 포인터를 오른쪽으로 이동시키도록 설정한다. And set to the mouth ssolrimyeon in the right direction, move the mouse pointer to the right.

이와 같이, 사용자의 특정부위의 움직임에 해당하는 마우스 입력신호가 설정 되고, 상기 값들은 저장장치(160)에 저장되어진다. In this way, a mouse input signal corresponding to the user's specific part of the movement is set, and the values ​​are stored in the storage device 160.

도 5는, 본 발명에 따른 장애인을 위한 마우스 동작 인식을 위한 동작 흐름도이다. 5 is a flowchart illustrating an operation for a mouse operation recognition for the disabled according to the invention.

우선, 사용자의 특정부위의 움직임을 마우스 기능으로 설정하는 동작이 필요하다. First, it is necessary to set the behavior of the user specific part of the movement of the mouse functions. 상기 동작은, 시스템 초기 부팅 단계에서 CMOS 등의 초기화값에 설정되도록 하는 것이 바람직하다. The above operation, it is preferred that in the system the initial boot phase to be set to the initial value, such as CMOS.

사용자의 눈의 움직임에 의해서 마우스 기능을 설정하면(제 200 단계), 눈 움직임에 따라 이미 정의되고 저장되고 있는 저장장치(160)의 마우스 동작이 리딩되어져서 시스템 내의 어플리케이션 프로그램(140)에 인식되어진다(제 210 단계). Setting the mouse function by the user's eye movement so a mouse operation is reading of the (200th step), a storage device 160 that is already defined and stored depending on the eye movement are known to the application program 140 in the system It is (a step 210). 이때 눈의 움직임에 의한 마우스 기능은, 도 4에 도시되어져 있는 예시도와 같은 값으로 설정되고 있다. At this time, the mouse function by the eye movement, and is set to the same value as illustrated in helping been shown in Fig.

사용자의 입의 움직임에 의해서 마우스 기능을 설정하면(제 220 단계), 입의 움직임에 따라 이미 정의된 마우스 동작이 리딩되어져서 시스템 내의 어플리케이션 프로그램(140)에 인식되어진다(제 220 단계). Setting the mouse function by the motion of the user input (step 220), so this is already defined in accordance with the mouse operation leading mouth movement is recognized in the application program 140 in the system (the step 220). 이때 입의 움직임에 의한 마우스 기능은, 별도 도시하지는 않았지만, 상기 도 4에 도시되고 있는 눈의 움직임과 비슷한 유형으로 설정되어질 것이다. The mouse function of the mouth move, but not a separate city, will be set up in a similar type of eye movement that is shown in the Fig.

사용자의 코의 움직임에 의해서 마우스 기능을 설정하면(제 240 단계), 코의 움직임에 따라 이미 정의된 마우스 동작이 리딩되어져서 시스템 내의 어플리케이션 프로그램(140)에 의해 인식되게 된다(제 250 단계). Setting the mouse function by the user's nose, the movement (the 240 step), and so are already defined mouse operation leading, depending on the co-movement is to be recognized by the application program 140 in the system (the 250 step). 이때 코의 움직임에 의한 마우스 기능은, 별도 도시하지는 않았지만, 상기 도 4에 도시되고 있는 눈의 움직임 과 비슷한 유형으로 설정되어질 수 있다. The mouse function of the nose movement, although not separately illustrated, can be configured in a similar type of eye movement that is shown in the Fig. 제 200, 220 및 240 단계에서 눈, 입 및 코의 움직임에 의한 마우스 기능이 설정되지 않았으면, 사용자의 기능 선택에 따른 단계가 수행되게 된다(제 260 단계). The 200, 220 and 240 in step eyes, mouth, and if not, the mouse function by the setting motion of the nose, is presented step is performed according to a user's selection function (a step 260).

상기와 같은 동작으로 마우스 동작의 기초값을 위한 사용자의 특정부위 움직임이 설정되면, 이후 도 6에 도시된 바와 같이, 설정된 사용자의 특정부위의 움직임이 카메라에 의해 촬영되면서 마우스 동작이 수행되어진다. When the user of the specific portion movement operation as for the base of the mouse operation such as the setting, the later, as illustrated in Figure 6, the specific part of the set the user moves the mouse movement as captured by the camera are performed.

우선, 카메라(100)는, 도 5에서 설정되어진 사용자의 특정부위(눈)의 움직임을 중점적으로 촬영하고(제 300 단계), 촬영된 값을 USB 포트 또는 PCI 인터페이스 등을 통하여 단말장치(100) 내부의 입력부(130)에 전달한다. First, the camera 100 is also taken to the user's movement of the specific area (the eye) been set at 5 to focus and (the step 300), the captured value of the terminal device 100 through a standard USB port or PCI interface and it delivers the internal input (130). 이때 입력되는 촬영 값은, 입력부(130)에서 시스템 내부의 어플리케이션 프로그램에서 인식할 수 있는 신호로 변환되어진다(제 303 단계). The up value is input, and is converted in the input unit 130 into a signal that can be recognized by application programs within the system (the step 303).

상기 제 303 단계에서 어플리케이션 프로그램(140)에 입력된 값이 눈동자 움직임에 따른 신호인지를 판단한다(제 306 단계). And the value entered in the application program 140 in Step 303 determines whether the signal in accordance with the eye movements (the step 306). 상기 제 306 단계의 조건에 만족하면, 눈동자가 왼쪽 방향 이동인지(제 309 단계), 눈동자가 오른쪽 방향 이동인지를 판단하고(제 315 단계), 왼쪽 방향 이동일 때는 마우스 포인터를 왼쪽으로 이동시키기 위한 마우스입력신호를 출력한다. When satisfied with the conditions of the first step 306, whether the eye is the left direction movement (the step 309), determines whether the pupil is moved right, and (the step 315), when the left direction yidongil mouse to move the mouse pointer to the left and it outputs the input signal. 마우스 드라이버(150)는 상기 마우스입력신호에 해당하는 마우스 포인터 왼쪽 이동동작을 위하여 표시장치 상에 마우스 포인터의 왼쪽 이동을 제어한다(제 312 단계). Mouse driver 150 controls the left movement of the mouse pointer on the display to the left side of the mouse pointer movement operation corresponding to the mouse input signal (step 312). 그리고 눈동자가 오른쪽 방향 이동일 때는 마우스 포인터를 오른쪽으로 이동시키기 위한 마우스입력신호를 출력한다. And when the right eye yidongil outputs a mouse input signal for moving the mouse pointer to the right. 마우스 드라이버(150)는 상기 마우스입력신호에 해당하는 마우스 포인터 오른쪽 이 동동작을 위하여 표시장치 상에 마우스 포인터의 오른쪽 이동을 제어한다(제 318 단계). Mouse driver 150 controls the right to move the mouse pointer on the display device to the mouse right move operation corresponding to the mouse input signal (the step 318). 그리고 눈동자가 위쪽 방향 이동일 때는(제 321 단계), 마우스 포인터를 위쪽으로 이동시키기 위한 마우스입력신호를 출력하고 마우스 드라이버(150)에서 해당하는 마우스 포인터 이동을 제어한다(제 324 단계). And when the pupil yidongil upward direction (a step 321), and outputs a mouse input signal for moving the mouse pointer to the top of and control the mouse pointer is moved to the mouse in the driver 150 (the step 324). 눈동자가 아래쪽 방향 이동일 때는(제 327 단계), 마우스 포인터를 아래쪽으로 이동시키기 위한 마우스입력신호를 출력하고, 마우스 드라이버(150)에서 해당하는 마우스 포인터 아랫족 이동을 제어한다(제 330 단계). The eye to control the downward direction when yidongil (the step 327), the mouse pointer to move the pointer to the lower group, and outputs a mouse input signal to move downwards, in the mouse driver 150 (step 330).

상기 제 306 단계에서 눈동자 움직임에 따른 신호가 입력되지 않았을 때, 눈 깜박임 신호인지를 판단한다(제 333 단계). When it is not in the first step 306 a signal according to the eye movement input, it is determined whether the blinking signal (the step 333). 상기 제 333 단계의 조건에 만족하면, 왼쪽 눈 깜박임 신호인지(제 336 단계), 오른쪽 눈 깜박임 신호인지를 판단하고(제 342 단계), 왼쪽 눈 깜박임 신호일 때는 마우스의 왼쪽 버튼을 클릭하라는 입력신호를 출력한다. When satisfied with the conditions of the first 333 steps, that the left eye blink signal (the 336 step), and determines whether the right eye blinking signal (the 342 step), when the left eye blinking signal to the input signal to click the left button of the mouse outputs. 마우스 드라이버는 상기 입력신호에 따른 마우스의 왼쪽 버튼 클릭 출력신호를 출력한다(제 339 단계). Mouse driver, and outputs a left click of a mouse in accordance with the output signal to the input signal (the step 339). 그리고 오른쪽 눈 깜박임 신호일 때는 마우스의 오른쪽 버튼을 클릭하라는 신호를 입력신호를 출력한다. And when the right eye blinking signal and outputs a signal input a signal to click the right button of the mouse. 마우스 드라이버는 상기 입력신호에 따른 마우스 오른쪽 버튼 클릭 출력신호를 출력한다(제 345 단계). Mouse driver, and outputs a right-click the output signal based on the input signal (the step 345).

이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. Those skilled in the art what is described above will be appreciated that various changes and modifications within the range which does not depart from the spirit of the present invention are possible. 따라서 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허 청구의 범위에 의해 정하여 져야만 할 것이다. Therefore, the technical scope of the present invention will have to be not limited to the contents described in the description of the specification appointed by the claims.

상술한 바와 같이, 본 발명에 따른 장애인을 위한 마우스 동작 인식 시스템은, 손, 발을 사용하지 못하는 장애인들이 신호 입력을 위한 마우스 기능 사용이 용이해지고, 각종 퍼스널 컴퓨터, 텔레비젼, 및 신호입력을 필요로 하는 단말장치에서 특정부위 움직임 인식을 이용한 마우스 동작 신호입력을 편리하게 할 수 있다. , Mouse operation for the disabled according to the invention as described above, recognition systems, hand, the disabled can not use the feet are getting easier to use the mouse function for signal input, a variety of the personal computer, requires a TV, and a signal input in the terminal device with a unique site recognized mouse movement operation signal that is input can be made easy. 또한, 본 발명은 무선으로 이용하기 때문에 원거리에서도 문제없이 마우스 동작 입력이 가능하며, 마우스와 본체 사이의 유선 연결에 따른 신호선 연결이 불필요해지므로서 사용을 편리하게 할 수 있다. Further, the present invention can be used, because the air from a distance can be a mouse input operation without problems, because the standing unnecessary a signal line connection of the wired connection between the mouse and the body is convenient to use. 더불어 본 발명은 기존의 마우스가 특정 받침대(책상, 바닥)를 필요로 하였던 문제점을 해소하면서, 어느 조건에서도 사용을 가능하게 하는 효과를 얻을 수 있다. In addition the present invention can obtain an effect that a traditional mouse is possible to use in, any condition, while eliminating the problems who require specific base desktop or on the floor.

Claims (12)

  1. 사용자의 특정부위 움직임에 대해서 마우스 입력신호를 설정하고, 저장하는 저장수단과; Set the mouse input signals to the user of the specific part moves, and storing means for storing and;
    사용자의 특정부위의 움직임을 촬영하고, 전기신호로 변환하는 카메라 촬영수단과; Camera photographing means for photographing the user's movement of the specific area, and converted into an electric signal;
    상기 저장수단에 저장된 값에 기초해서 상기 카메라 촬영수단에서 출력하는 값을 마우스 입력신호로 변환하는 어플리케이션 프로그램과; Application program based on the value stored in the storage means to convert a value output from the camera photographing means with the mouse and the input signal;
    상기 마우스 입력신호에 대하여 표시장치에 마우스 동작을 수행하는 마우스 출력신호를 출력하는 마우스 드라이버를 포함하여 구성되는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템. Mouse gesture recognition system for disabled persons, characterized in that is comprises a mouse driver for outputting the output signal to perform a mouse mouse operation to the display device with respect to the mouse input signals.
  2. 제 1 항에 있어서, According to claim 1,
    사용자의 특정부위 움직임을, 눈동자의 움직임에 의해 제어하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템. The user's specific movement region, mouse gesture recognition system for disabled persons, characterized in that, controlled by eye movements.
  3. 제 1 항에 있어서, According to claim 1,
    상기 카메라 촬영수단과 어플리케이션 프로그램 사이에 촬영값 입력과, 신호 변환을 위한 입력 인터페이스를 포함하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템. The camera shooting mouse gesture recognition system for disabled persons, comprising a means with the input interface for the recording and the value input, the signal conversion between an application program.
  4. 제 3 항에 있어서, 4. The method of claim 3,
    상기 입력부는, USB 인터페이스를 사용하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템. The input unit includes a mouse gesture recognition system for disabled persons, which is characterized by using a USB interface.
  5. 사용자의 특정부위 움직임에 대해서 마우스 입력신호를 설정하고, 저장하는 저장단계와; Set the mouse input signals to the user of the specific part moves, and a storage step of storing and;
    마우스로 사용할 사용자의 특정부위의 움직임을 촬영하고, 전기신호로 변환하는 촬영단계와; Photographing the user's motion of the specific portion using a mouse, and taking steps to convert into an electric signal;
    상기 저장된 값에 기초해서 상기 촬영 값을 마우스 입력신호로 변환해서 출력하는 출력단계와; And an output step of outputting by converting the value taken as a mouse input signal on the basis of the stored values;
    상기 마우스 입력신호에 대한 마우스 동작을 표시장치에 나타내는 표시단계를 포함하여 구성되는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. A control method of a mouse gesture recognition system for disabled persons, characterized in that is comprises a display step that represents the mouse operation on the mouse input signals to the display device.
  6. 제 5 항에 있어서, 6. The method of claim 5,
    상기 사용자의 특정부위 움직임은, 눈 움직임에 의한 것임을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Specific areas of the user's movement, the control method of the mouse gesture recognition system for disabled persons, characterized in that due to the eye movement.
  7. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 눈동자가 왼쪽 이동신호일 때, 마우스 포인터 왼쪽 이동신호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Said output stage, when the signal moves left eye, mouse pointer control method of the left mouse movement operation for disabled persons, characterized in that for outputting a signal recognition system.
  8. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 눈동자가 오른쪽 이동신호일 때, 마우스 포인터 오른쪽 이동신호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Said output stage, when the signal-to-right eye, the control method of the mouse gesture recognition system for disabled persons, characterized in that the right and outputting the pointer movement signal.
  9. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 왼쪽 눈 깜박임 신호일 때, 마우스 왼쪽 버튼 클릭신호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Said output stage, the control method of the left eye when the flashing signal, the left mouse button on the mouse operation for disabled persons, characterized in that for outputting a click signal recognition system.
  10. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 오른쪽 눈 깜박임 신호일 때, 마우스 오른쪽 버튼 클릭신호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Said output stage, when the right eye blinking signal, the control method of the right-click mouse operation signals for disabled persons, characterized in that for outputting a recognition system.
  11. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 눈동자가 위쪽 이동신호일 때, 마우스 포인터 위로 이동신 호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. It said output stage, the control method of the mouse gesture recognition system for disabled persons, characterized in that the eye is an output signal when moving upwards, yidongsin No. mouse pointer over.
  12. 제 6 항에 있어서, 7. The method of claim 6,
    상기 출력단계는, 눈동자가 아랫쪽 이동신호일 때, 마우스 포인터를 아래로 이동신호를 출력하는 것을 특징으로 하는 장애인을 위한 마우스 동작 인식 시스템의 제어방법. Said output stage, a control method of a mouse eye motion recognition system for disabled persons, characterized in that for outputting a movement signal when the downward movement signal, the mouse pointer down.
KR1020050099781A 2005-10-21 2005-10-21 System of indentifying the movement of physically handicapper as that of the mouse KR20070043469A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050099781A KR20070043469A (en) 2005-10-21 2005-10-21 System of indentifying the movement of physically handicapper as that of the mouse

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050099781A KR20070043469A (en) 2005-10-21 2005-10-21 System of indentifying the movement of physically handicapper as that of the mouse

Publications (1)

Publication Number Publication Date
KR20070043469A true KR20070043469A (en) 2007-04-25

Family

ID=38177958

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050099781A KR20070043469A (en) 2005-10-21 2005-10-21 System of indentifying the movement of physically handicapper as that of the mouse

Country Status (1)

Country Link
KR (1) KR20070043469A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100906378B1 (en) * 2007-12-17 2009-07-07 한국전자통신연구원 User interfacing apparatus and method using head gesture
KR101019623B1 (en) * 2009-01-23 2011-03-07 (주)아이비리더스 Automatic teller machine for controlling input signal according to movement of user and method for controlling input signal of the automatic teller machine
WO2013133664A1 (en) * 2012-03-08 2013-09-12 삼성전자 주식회사 Method for controlling device on the basis of eyeball motion, and device therefor
WO2013133618A1 (en) * 2012-03-06 2013-09-12 Samsung Electronics Co., Ltd. Method of controlling at least one function of device by using eye action and device for performing the method
KR101501165B1 (en) * 2013-12-02 2015-03-11 한국산업기술대학교산학협력단 Eye-mouse for general paralyzed patient with eye-tracking
KR20150136329A (en) 2014-05-27 2015-12-07 전남대학교산학협력단 Apparatus and method for controlling device using eye movement
US9684372B2 (en) 2012-11-07 2017-06-20 Samsung Electronics Co., Ltd. System and method for human computer interaction
US9990902B2 (en) 2012-11-16 2018-06-05 Samsung Electronics Co., Ltd. Electronic device for adjusting brightness of screen and method thereof

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100906378B1 (en) * 2007-12-17 2009-07-07 한국전자통신연구원 User interfacing apparatus and method using head gesture
KR101019623B1 (en) * 2009-01-23 2011-03-07 (주)아이비리더스 Automatic teller machine for controlling input signal according to movement of user and method for controlling input signal of the automatic teller machine
WO2013133618A1 (en) * 2012-03-06 2013-09-12 Samsung Electronics Co., Ltd. Method of controlling at least one function of device by using eye action and device for performing the method
US9430041B2 (en) 2012-03-06 2016-08-30 Samsung Electronics Co., Ltd. Method of controlling at least one function of device by using eye action and device for performing the method
WO2013133664A1 (en) * 2012-03-08 2013-09-12 삼성전자 주식회사 Method for controlling device on the basis of eyeball motion, and device therefor
US10481685B2 (en) 2012-03-08 2019-11-19 Samsung Electronics Co., Ltd. Method for controlling device on the basis of eyeball motion, and device therefor
US9864429B2 (en) 2012-03-08 2018-01-09 Samsung Electronics Co., Ltd. Method for controlling device on the basis of eyeball motion, and device therefor
US9684372B2 (en) 2012-11-07 2017-06-20 Samsung Electronics Co., Ltd. System and method for human computer interaction
US9990902B2 (en) 2012-11-16 2018-06-05 Samsung Electronics Co., Ltd. Electronic device for adjusting brightness of screen and method thereof
KR101501165B1 (en) * 2013-12-02 2015-03-11 한국산업기술대학교산학협력단 Eye-mouse for general paralyzed patient with eye-tracking
KR20150136329A (en) 2014-05-27 2015-12-07 전남대학교산학협력단 Apparatus and method for controlling device using eye movement

Similar Documents

Publication Publication Date Title
US8160311B1 (en) System and method for detecting facial gestures for control of an electronic device
US6072467A (en) Continuously variable control of animated on-screen characters
Chau et al. Real time eye tracking and blink detection with usb cameras
US8745541B2 (en) Architecture for controlling a computer using hand gestures
US9268404B2 (en) Application gesture interpretation
US6791531B1 (en) Device and method for cursor motion control calibration and object selection
CN101901072B (en) Information processing apparatus and information processing method
US6160899A (en) Method of application menu selection and activation using image cognition
US8014567B2 (en) Method and apparatus for recognizing gesture in image processing system
Betke et al. The camera mouse: visual tracking of body features to provide computer access for people with severe disabilities
KR20110139223A (en) Chaining animations
US8432362B2 (en) Keyboards and methods thereof
US9218063B2 (en) Sessionless pointing user interface
JP5775514B2 (en) Gesture shortcut
US8290210B2 (en) Method and system for gesture recognition
JP2006516772A (en) Gaze tracking system and method
US20150143283A1 (en) Information processing device, display control method, and program
CN101751209B (en) Method and computer for adjusting screen display element
CN101681201B (en) Brain wave interface system, brain wave interface device, method and computer program
DE69913371T2 (en) Input device with sensor sensors
US8253685B2 (en) Head mount display
US20020039111A1 (en) Automated visual tracking for computer access
AU2013200054B2 (en) Touch free operation of devices by use of depth sensors
KR20160039298A (en) Authenticated gesture recognition
US20100156836A1 (en) Head mount display

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination