KR101368982B1 - 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법 - Google Patents

눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법 Download PDF

Info

Publication number
KR101368982B1
KR101368982B1 KR1020130047008A KR20130047008A KR101368982B1 KR 101368982 B1 KR101368982 B1 KR 101368982B1 KR 1020130047008 A KR1020130047008 A KR 1020130047008A KR 20130047008 A KR20130047008 A KR 20130047008A KR 101368982 B1 KR101368982 B1 KR 101368982B1
Authority
KR
South Korea
Prior art keywords
application
module
eye
executed
camera module
Prior art date
Application number
KR1020130047008A
Other languages
English (en)
Inventor
장재훈
이민정
Original Assignee
(주) 와이즈스톤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주) 와이즈스톤 filed Critical (주) 와이즈스톤
Priority to KR1020130047008A priority Critical patent/KR101368982B1/ko
Application granted granted Critical
Publication of KR101368982B1 publication Critical patent/KR101368982B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing

Abstract

본 발명은 눈 깜빡임 인식을 이용한 어플리케이션 구동 장치 및 그 방법에 관한 것으로, 눈 깜빡임을 촬영하는 카메라 모듈, 눈 깜빡임 횟수 및 눈 깜빡임 간격에 대응하는 어플리케이션을 설정하는 설정 모듈, 상기 카메라 모듈에 의해 촬영된 눈 깜빡임을 분석하고, 분석된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 어플리케이션을 실행하는 제어 모듈, 및 실행된 어플리케이션을 표시하는 디스플레이 모듈을 포함한다. 본 발명에 따르면, 눈 깜빡임을 통해 어플리케이션을 실행할 수 있다.

Description

눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법{Application operating device using eye blinking detection and method thereof}
본 발명은 눈 깜빡임 인식을 이용한 어플리케이션 구동 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 눈 깜빡임과 눈동자의 방향성을 인식하여 그에 대응하는 어플리케이션을 구동할 수 있는 장치 및 방법에 관한 것이다.
휴대 단말기에 포함된 어플리케이션을 구동하는데 있어서, 일반적으로 터치 패드를 이용한 터치 신호 또는 마이크 모듈을 이용한 음성 신호가 구동 신호로서 이용된다.
또한, 휴대 단말기의 카메라를 통해 구동 신호를 입력하는 방법도 있다. 일반적으로 휴대 단말기는 디스플레이 영역이 표시되는 방향과 동일한 방향으로 촬영가능한 카메라를 구비한다. 따라서, 카메라를 이용하여 휴대 단말기 사용자의 안구를 촬영하고, 촬영된 이미지에서 눈동자를 인식하여 응시 위치를 확인하여 어플리케이션을 실행할 수 있는 기술이 개발되고 있다.
그러나 눈동자의 응시 위치를 확인하는 과정은 응시 위치를 정확히 산출하기 위해 보다 복잡한 연산 과정을 포함하여야 하며, 디스플레이 영역에 사용자가 구동하기 원하는 어플리케이션이 존재하지 않는 경우, 또는 사용자가 눈동자를 움직이는 경우 정확한 응시 위치를 산출하기 어려워 사용자의 의도에 따른 어플리케이션 실행이 어렵다는 문제점이 있다.
본 발명은 카메라를 이용하여 눈의 깜빡임과 눈동자의 방향성을 인식하고 그에 대응하는 어플리케이션을 실행하고 조작함으로써, 터치 신호나 음성 신호를 입력할 필요없이 보다 간단하게 어플리케이션을 구동 및 제어할 수 있는 장치 및 그 방법을 제공하는데 그 목적이 있다.
상기 목적을 달성하기 위한 본 발명은, 눈 깜빡임을 촬영하는 카메라 모듈, 눈 깜빡임 횟수 및 눈 깜빡임 간격에 대응하는 어플리케이션을 설정하는 설정 모듈, 상기 카메라 모듈에 의해 촬영된 눈 깜빡임을 분석하고, 분석된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 어플리케이션을 실행하는 제어 모듈, 및 실행된 어플리케이션을 표시하는 디스플레이 모듈을 포함한다.
또한, 상기 목적을 달성하기 위한 본 발명은, 카메라 모듈을 통해 눈 깜빡임을 촬영하는 제1 단계, 설정 모듈을 통해 눈 깜빡임 횟수 및 눈 깜빡임 간격에 대응하는 어플리케이션 및 눈 깜빡임 속도를 설정하는 제2 단계, 제어 모듈을 통해 상기 카메라 모듈에 의해 촬영된 눈 깜빡임을 분석하고, 분석된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 어플리케이션을 실행하는 제3단계, 및 디스플레이 모듈을 통해 실행된 어플리케이션을 표시하는 제4단계를 포함한다.
본 발명에 따르면, 사용자는 터치 신호나 음성 신호를 입력할 필요없이 눈을 깜빡임으로써, 그에 대응하는 어플리케이션을 실행할 수 있으며, 눈동자의 방향성을 인식함으로써, 그에 대응하는 이벤트를 발생시켜 어플리케이션을 제어할 수 있다.
또한, 실행되는 어플리케이션을 사용자가 미리 설정할 수 있으므로, 사용자의 선호도에 따른 어플리케이션들을 우선적으로 설정할 수 있으며, 현재 디스플레이 영역에 표시되지 않는 어플리케이션도 눈 깜빡임을 통해 실행할 수 있다.
도 1은 본 발명의 일실시예에 따른 어플리케이션 구동 장치를 나타내는 구성도이다.
도 2는 본 발명의 일실시예에 따른 어플리케이션 구동 방법을 나타내는 흐름도이다.
도 3은 본 발명의 또 다른 실시예에 따른 어플리케이션 구동 방법을 나타내는 흐름도이다.
도 4 내지 도 7은 본 발명의 실시예에 따른 어플리케이션 구동 방법을 나타내는 도면이다.
도 1은 본 발명의 일실시예에 따른 어플리케이션 구동 장치를 나타내는 구성도이다.
도 1에 도시된 바와 같이, 어플리케이션 구동 장치는 카메라 모듈(10), 설정 모듈(20), 제어 모듈(30), 디스플레이 모듈(40) 및 알람 모듈(50)을 포함할 수 있다. 본 발명에 따른 어플리케이션 구동 장치는 휴대 단말기, 태블릿 PC, 유선 단말기 등에 구비될 수 있다.
카메라 모듈(10)은 디스플레이 모듈(40)의 디스플레이 영역과 동일한 방향을 촬영할 수 있는 모듈로서, 사용자의 눈 깜빡임 또는 눈동자의 움직임을 촬영할 수 있다.
설정 모듈(20)은 카메라 모듈(10)을 통해 촬영된 눈 깜빡임의 횟수 및 눈 깜빡임 간격에 따라 실행되는 어플리케이션을 설정하는 모듈이다. 예를 들어, 눈 깜빡임이 짧게(1 내지 2초) 1회인 경우, 메신저 어플리케이션을 실행하도록 설정하고, 눈 깜빡임이 짧게(1 내지 2초) 2회인 경우, 통화 목록이 실행되도록 설정하고, 눈 깜빡임을 길게(2초 내지 4초) 1회인 경우, 독서 어플리케이션을 실행하도록 설정할 수 있다. 본 발명에서 이용되는 눈 깜빡임 횟수 및 간격은 이에 한정되지 않으며, 다양하게 선택될 수 있다. 또한, 설정 모듈(20)은 실행되는 어플리케이션을 설정할 때 눈 깜빡임 속도(눈 깜빡임 사이의 시간 간격)를 더 고려할 수도 있다. 즉, 눈 깜빡임 사이의 시간 간격에 따라 눈깜빡임이 1회인지 2회인지 등을 구분할 수 있다.
여기서 어플리케이션이란, 휴대 단말기 또는 유선 단말기에서 실행될 수 있는 모든 형태의 프로그램을 포함한다. 예를 들어, 사진, 메신저, 이메일, 통화, 독서, 쇼핑, 음악 재생 및 정지, 웹툰과 관련된 어플리케이션 등을 포함한다.
상기와 같이, 눈 깜빡임의 횟수 및 간격에 대응하여, 사용자의 선호도에 따른 어플리케이션을 설정할 수 있으므로, 설정 모듈(20)을 통해 미리 설정된 어플리케이션이 디스플레이 영역에 표시되어 있지 않은 경우에도, 사용자는 눈 깜빡임을 통해 바로 어플리케이션을 실행시킬 수 있다. 따라서, 응시 위치에 표시되어 있지 않은 어플리케이션도, 눈 깜빡임을 통해 실행시킬 수 있는 효과가 있다.
제어 모듈(30)은 카메라 모듈(10)에 의해 촬영된 눈 깜빡임을 분석하여, 촬영된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 따라, 설정 모듈(20)을 통해 미리 설정된 어플리케이션을 실행한다. 예를 들어, 카메라 모듈(10)에 의해 촬영된 눈 깜빡임이 짧게(1 내지 2초) 2회인 경우, 제어 모듈(30)은 통화 목록을 실행한다. 여기서, 눈 깜빡임의 횟수란, 눈을 감고 뜨는 과정을 1회로 볼 수 있고, 눈 깜빡임의 간격이란, 눈을 감은 상태에서 경과된 시간으로 볼 수 있다.
또한, 제어 모듈(30)은 카메라 모듈(10)에 의해 촬영된 눈동자의 움직임을 분석하여, 어플리케이션이 실행된 상태에서, 눈동자의 움직임에 따라 어플리케이션의 하위 메뉴를 실행하거나 눈동자의 움직임에 따라 어플리케이션이 실행된 이미지를 상하 또는 좌우로 스크롤할 수 있다. 또한, 어플리케이션이 실행된 상태에서, 눈 깜빡임 및 눈동자의 움직임을 조합하여 실행된 어플리케이션을 다양하게 제어할 수 있다.
상기 제어 모듈(30)은 소정 시간동안 카메라 모듈(10)을 통해 눈 깜빡임이 확인되지 않는 경우, 알람 모듈(50)을 구동시킬 수 있다. 알람 모듈(50)이 구동되는 경우는 하기 도 2에서 보다 상세하게 설명한다.
디스플레이 모듈(40)은 제어 모듈(30)에 의해 실행된 어플리케이션, 어플리케이션의 하위 메뉴, 어플리케이션을 표시하는 이미지, 이미지의 스크롤링에 따른 상하 또는 좌우로 이동된 이미지 등을 디스플레이 영역에 표시한다.
또한, 디스플레이 모듈(40)은 카메라 모듈(10)이 사용자의 양쪽 눈을 모두 촬영할 수 있는 경우, 소정의 아이콘, 예를 들어 눈모양 아이콘을 디스플레이 영역에 표시할 수 있다. 따라서, 사용자는 디스플레이 영역에 표시된 눈모양 아이콘을 보고, 현재 카메라 모듈(10)이 눈 깜빡임을 촬영할 수 있는 상태임을 인지하고 눈을 깜빡임으로써 본 발명에 따른 어플리케이션 구동 장치를 이용할 수 있다.
알람 모듈(50)은 제어 모듈(30)로부터 전송되는 제어 신호에 따라 구동되어 소리 또는 진동을 출력하거나 출력을 해제한다. 알람 모듈(50)이 구동되는 경우는 하기 도 2에서 보다 상세하게 설명한다.
도 2는 본 발명의 일실시예에 따른 어플리케이션 구동 방법을 나타내는 흐름도이다.
도 2에 도시된 바와 같이, 먼저 카메라 모듈(10)을 통해 눈 깜빡임이 촬영된다(S60). 다음, 제어 모듈(30)이 촬영된 눈 깜빡임의 횟수 및 간격을 분석하고(S61), 분석된 눈 깜빡임의 횟수 및 간격에 따라 설정 모듈(20)을 통해 미리 설정한 어플리케이션을 실행한다(S62). 예를 들어, 눈 깜빡임이 길게(2초 내지 4초) 2회 입력되는 경우, 독서 어플리케이션이 실행되어 사용자가 읽고자 하는 문서가 디스플레이 모듈(40)에 표시된다.
다음, 제어 모듈(30)은 소정 시간 이내에 눈 깜빡임이 확인되는지 여부를 판단한다(S63). 여기서, 소정 시간이란 자유롭게 선택될 수 있으며, 예를 들어 20초로 설정될 수 있다. 눈 깜빡임이란 눈을 감고 뜨는 과정을 의미하므로, 눈을 감은 상태로 20초 이상 경과된 경우, 제어 모듈(30)은 알람 모듈(50)을 구동시켜 소리 또는 진동을 출력한다(S64). 따라서, 사용자의 졸음에 의해 눈 깜박임이 소정 시간 내에 확인되지 않는 경우, 소리 또는 진동이 출력됨으로써, 사용자의 주의를 환기시킬 수 있다.
한편, 알람 모듈(50)이 실행되는 동안, 눈 깜빡임이 다시 촬영되는 경우, 제어 모듈(30)은 촬영된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 알람 모듈의 구동을 해제할 수 있다. 예를 들어, 진동이 출력되는 동안, 눈 깜빡임이 짧게(1초 내지 2초) 2회 입력되는 경우, 알람 모듈(50)이 해제된다.
따라서, 본 발명은 눈 깜빡임을 통해 미리 설정된 어플리케이션을 실행할 뿐 아니라, 어플리케이션이 실행되는 동안에도 눈 깜빡임을 확인하여, 사용자의 졸음을 방지하고, 실행되고 있는 어플리케이션에 대한 집중도를 높일 수 있다.
도 3은 본 발명의 또 다른 실시예에 따른 어플리케이션 구동 방법을 나타내는 흐름도이다.
도 3에 도시된 바와 같이, 먼저 카메라 모듈(10)을 통해 눈 깜빡임이 촬영되고(S70), 제어 모듈(30)이 촬영된 눈 깜빡임의 횟수 및 간격을 분석하고(S71), 눈 깜빡임의 횟수 및 간격에 따라 설정 모듈(20)을 통해 미리 설정한 어플리케이션을 실행한다(S72).
어플리케이션이 실행된 상태에서, 카메라 모듈(10)은 눈동자를 촬영하고(S73), 제어 모듈(30)은 눈동자 움직임에 따라, 실행된 어플리케이션의 하위 메뉴를 실행할 수 있고, 어플리케이션이 표시된 이미지를 상하 또는 좌우로 스크롤할 수도 있다(S74).
상기한 바와 같이, 본 발명은 눈 깜빡임을 촬영하고 분석하여, 눈 깜빡임의 횟수 및 간격에 따라 미리 설정된 어플리케이션을 실행하며, 어플리케이션이 실행된 상태에서는 눈 깜빡임뿐 아니라 눈동자의 움직임을 이용하여, 실행된 어플리케이션에서 이용될 수 있는 하위 기능들을 실행할 수 있다.
도 4 내지 도 7은 본 발명의 실시예에 따른 어플리케이션 구동 방법을 나타내는 도면이다.
도 4는 눈 깜빡임을 통해 어플리케이션이 실행되는 화면을 나타내는 도면이며, 도 5 내지 도 7은 어플리케이션이 실행된 상태에서 눈 깜빡임 또는 눈동자의 움직임에 따라 어플리케이션의 하위 기능이 실행되는 화면을 나타내는 도면이다.
도 4에 도시된 바와 같이, 휴대 단말기의 홈 화면에서 눈 깜빡임이 짧게(1초 내지 2초) 2회 입력되는 경우, 음악 어플리케이션이 실행될 수 있다. 음악 어플리케이션은 홈 화면에 표시되지 않은 어플리케이션임에도 불구하고, 본 발명에 따라 미리 설정되어, 눈 깜빡임으로 실행될 수 있다. 따라서, 본 발명은 홈 화면 또는 현재 표시된 화면과 상관없이 눈 깜빡임을 통해 사용자가 원하는 어플리케이션을 바로 실행시킬 수 있으며, 눈동자가 응시하는 응시 위치를 정확히 판단하기 위한 연산도 필요하지 않으므로, 보다 정확하고 간단하게 어플리케이션을 실행시킬 수 있다.
도 5에 도시된 바와 같이, 독서 어플리케이션이 실행된 상태에서, 소정 시간 이상 눈 깜빡임이 확인되지 않는 경우, 제어 모듈(30)은 알람 모듈(50)을 구동시켜 소리 또는 진동을 출력함으로써, 사용자의 주의를 환기시킬 수 있다. 또 다른 실시예로서, 독서 어플리케이션이 실행된 상태에서, 눈동자가 상하 또는 좌우로 움직이는 경우, 상측, 하측, 좌측 또는 우측으로 화면을 스크롤하여, 터치 신호 또는 드래그 신호를 입력할 필요없이 문서를 연속적으로 읽을 수 있다.
도 6에 도시된 바와 같이, 눈 깜빡임이 짧게(1초 내지 2초) 2회 입력되는 경우, 사진 어플리케이션이 실행될 수 있다. 사진 어플리케이션이 실행된 상태에서, 눈동자가 상측으로 움직이는 경우, 제어 모듈(30)은 현재 표시된 사진을 공유하기 위한 어플리케이션, 예를 들어, 메신저, 메시지, 이메일 어플리케이션이 상단에 표시될 수 있으며, 눈동자가 좌우로 움직이는 경우, 좌측 또는 우측으로 화면을 스크롤하여, 이전 사진 또는 다음 사진이 표시될 수도 있다.
또한, 어플리케이션이 실행된 상태에서 또 다시 눈 깜빡임이 촬영되는 경우, 눈 깜빡임의 횟수 및 간격에 대응하여 어플리케이션의 또 다른 하위 기능이 실행될 수도 있다. 예를 들어 눈 깜빡임이 길게(2초 내지 4초) 1회 입력되는 경우, 현재 사진이 저장된 폴더에 포함된 사진들의 리스트가 디스플레이 모듈(40)에 표시될 수 있다.
도 7의 (a)에 도시된 바와 같이, 웹툰 어플리케이션이 실행된 상태에서, 눈동자가 상하로 움직이는 경우, 웹툰의 목록을 나타내는 리스트가 상측 또는 하측으로 스크롤될 수 있다. 한편, 리스트가 표시된 상태에서 눈동자가 우측으로 움직이는 경우, 리스트의 중앙에 표시된 웹툰이 선택되어 선택된 웹툰의 이미지가 표시될 수 있다. 또한, 도 7의 (b)에 도시된 바와 같이, 선택된 웹툰의 이미지가 표시된 상태에서 눈 깜빡임이 길게(2초 내지 4초) 1회 입력되고 눈동자가 좌측으로 움직이는 경우, 다시 리스트를 나타내는 화면이 표시될 수 있다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 개량이 가능하며, 상기 실시예 및 첨부된 도면에 의해 한정되는 것은 아니다.

Claims (16)

  1. 눈 깜빡임 및 눈동자를 촬영하는 카메라 모듈;
    사용자 선호도에 따라 눈 깜빡임 횟수 및 눈 깜빡임 간격에 대응하는 어플리케이션을 설정하는 설정 모듈;
    상기 카메라 모듈에 의해 촬영된 눈 깜빡임을 분석하고, 분석된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 어플리케이션을 실행하는 제어 모듈; 및
    실행된 어플리케이션을 표시하는 디스플레이 모듈을 포함하되,
    상기 제어 모듈은 상기 눈동자의 움직임을 분석하고, 분석된 눈동자의 움직임에 따라 실행된 어플리케이션의 하위 메뉴를 실행하거나, 또는 분석된 눈동자의 움직임에 따라 실행된 어플리케이션을 상하 또는 좌우로 스크롤하는 것을 특징으로 어플리케이션 구동 장치.
  2. 제1항에 있어서,
    소리 또는 진동을 출력하는 알람 모듈을 더 포함하는 것을 특징으로 하는 어플리케이션 구동 장치.
  3. 제2항에 있어서,
    상기 카메라 모듈을 통해 소정 시간 이상 눈 깜빡임이 확인되지 않는 경우, 상기 제어 모듈은 상기 알람 모듈을 실행하는 것을 특징으로 하는 어플리케이션 구동 장치.
  4. 제3항에 있어서,
    상기 알람 모듈이 실행되는 동안, 상기 카메라 모듈을 통해 눈 깜빡임이 촬영되는 경우, 상기 제어 모듈은 촬영된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 알람 모듈을 해제하는 것을 특징으로 하는 어플리케이션 구동 장치.
  5. 제1항에 있어서,
    상기 카메라 모듈이 양쪽 눈을 모두 촬영할 수 있는 경우, 상기 디스플레이 모듈은 소정의 아이콘을 표시하는 것을 특징으로 하는 어플리케이션 구동 장치.
  6. 삭제
  7. 삭제
  8. 삭제
  9. 제1항에 있어서,
    상기 어플리케이션이 실행된 상태에서 눈 깜빡임이 촬영된 경우, 상기 제어 모듈은 촬영된 눈 깜빡임 및 상기 눈동자의 움직임에 기초하여 상기 어플리케이션의 하위 기능을 실행하는 것을 특징으로 하는 어플리케이션 구동 장치.
  10. 카메라 모듈을 통해 눈 깜빡임 및 눈동자를 촬영하는 제1 단계;
    설정 모듈을 통해 사용자 선호도에 따라 눈 깜빡임 횟수 및 눈 깜빡임 간격에 대응하는 어플리케이션을 설정하는 제2 단계;
    제어 모듈을 통해 상기 카메라 모듈에 의해 촬영된 눈 깜빡임을 분석하고, 분석된 눈 깜빡임 횟수 및 눈 깜빡임 간격에 기초하여 상기 어플리케이션을 실행하는 제3 단계;
    디스플레이 모듈을 통해 실행된 어플리케이션을 표시하는 제4 단계;
    상기 제어 모듈을 통해 상기 눈동자의 움직임을 분석하는 제5 단계; 및
    분석된 눈동자의 움직임에 따라 실행된 어플리케이션의 하위 메뉴를 실행하거나, 또는 분석된 눈동자의 움직임에 따라 실행된 어플리케이션을 상하 또는 좌우로 스크롤하는 제6 단계를 포함하는 것을 특징으로 하는 어플리케이션 구동 방법.
  11. 제10항에 있어서,
    상기 제1 단계에서 소정 시간 이상 눈 깜빡임이 확인되지 않는 경우, 알람 모듈을 통해 소리 또는 진동을 출력하는 제7 단계를 더 포함하는 어플리케이션 구동 방법.
  12. 제10항에 있어서,
    상기 카메라 모듈이 양쪽 눈을 모두 촬영할 수 있는 경우, 상기 디스플레이 모듈을 통해 소정의 아이콘을 표시하는 제8 단계를 더 포함하는 어플리케이션 구동 방법.
  13. 삭제
  14. 삭제
  15. 삭제
  16. 제10항 내지 제12항 중 어느 한 항에 기재된 어플리케이션 구동 방법을 수행하는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체.
KR1020130047008A 2013-04-26 2013-04-26 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법 KR101368982B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130047008A KR101368982B1 (ko) 2013-04-26 2013-04-26 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130047008A KR101368982B1 (ko) 2013-04-26 2013-04-26 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR101368982B1 true KR101368982B1 (ko) 2014-03-03

Family

ID=50647252

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130047008A KR101368982B1 (ko) 2013-04-26 2013-04-26 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR101368982B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104460998A (zh) * 2014-11-28 2015-03-25 广东欧珀移动通信有限公司 消息提示方法、消息提示装置及终端

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110083770A (ko) * 2010-01-15 2011-07-21 에스케이텔레콤 주식회사 눈 깜빡임의 인식에 따른 단말의 기능 수행 방법 및 이를 적용한 단말
KR20120021550A (ko) * 2010-08-06 2012-03-09 삼성전자주식회사 휴대 단말, 휴대 단말을 이용한 위험 감지 장치 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110083770A (ko) * 2010-01-15 2011-07-21 에스케이텔레콤 주식회사 눈 깜빡임의 인식에 따른 단말의 기능 수행 방법 및 이를 적용한 단말
KR20120021550A (ko) * 2010-08-06 2012-03-09 삼성전자주식회사 휴대 단말, 휴대 단말을 이용한 위험 감지 장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104460998A (zh) * 2014-11-28 2015-03-25 广东欧珀移动通信有限公司 消息提示方法、消息提示装置及终端
CN104460998B (zh) * 2014-11-28 2017-07-28 广东欧珀移动通信有限公司 消息提示方法、消息提示装置及终端

Similar Documents

Publication Publication Date Title
US11967039B2 (en) Automatic cropping of video content
KR102543095B1 (ko) 증강 현실을 사용하여 측정하기 위한 디바이스들 및 방법들
CN113923301B (zh) 用于在多种模式下捕获和录制媒体的设备和方法
DK179932B1 (en) DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR NAVIGATING, DISPLAYING, AND EDITING MEDIA ITEMS WITH MULTIPLE DISPLAY MODES
KR102340795B1 (ko) 스타일러스 펜을 포함하는 모바일 디바이스 및 그 동작 방법
KR20220058857A (ko) 학습 상황 분석 방법 및 장치, 전자 기기 및 기억 매체, 컴퓨터 프로그램
KR20230071201A (ko) 시뮬레이션된 심도 효과들을 위한 사용자 인터페이스들
RU2656691C2 (ru) Способ и клиентский терминал для удаленной поддержки
KR20180128059A (ko) 햅틱 피드백을 제공하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
JP6374598B2 (ja) 再生制御方法、再生制御装置及び電子機器
US11588969B2 (en) Devices, methods, and graphical user interfaces for assisted photo-taking
KR101978299B1 (ko) 콘텐츠 서비스 시스템에서의 콘텐츠 서비스를 위한 장치
EP3754459A1 (en) Method and apparatus for controlling camera, device and storage medium
WO2018098860A1 (zh) 照片合成方法及装置
CN107688385A (zh) 一种控制方法及装置
WO2022179331A1 (zh) 拍摄方法、装置、移动终端及存储介质
US20230319413A1 (en) User interfaces for camera sharing
JP6841232B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US20210382736A1 (en) User interfaces for calibrations and/or synchronizations
US9148537B1 (en) Facial cues as commands
CN110622111B (zh) 用于用户界面的触觉反馈
CN110383229B (zh) 用于导航、显示和编辑具有多个显示模式的媒体项的设备、方法和图形用户界面
KR101368982B1 (ko) 눈 깜빡임과 눈동자의 방향성 인식을 이용한 어플리케이션 구동 장치 및 그 방법
JP2018073237A (ja) 会議情報表示システム、会議情報表示方法および会議情報表示プログラム
EP3342159B1 (en) Video communication device and operation thereof

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161223

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171208

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20181226

Year of fee payment: 6