KR100677457B1 - 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법 - Google Patents

단말기의 카메라를 이용한 메뉴 입력 장치 및 방법 Download PDF

Info

Publication number
KR100677457B1
KR100677457B1 KR1020050043866A KR20050043866A KR100677457B1 KR 100677457 B1 KR100677457 B1 KR 100677457B1 KR 1020050043866 A KR1020050043866 A KR 1020050043866A KR 20050043866 A KR20050043866 A KR 20050043866A KR 100677457 B1 KR100677457 B1 KR 100677457B1
Authority
KR
South Korea
Prior art keywords
camera
menu
target
terminal
cursor pointer
Prior art date
Application number
KR1020050043866A
Other languages
English (en)
Other versions
KR20060121610A (ko
Inventor
비토르 브이 레드코브
아나톨리 아이 티크홑스키
세르게이 에스 카르만넨코
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020050043866A priority Critical patent/KR100677457B1/ko
Priority to US11/439,174 priority patent/US20060274038A1/en
Publication of KR20060121610A publication Critical patent/KR20060121610A/ko
Application granted granted Critical
Publication of KR100677457B1 publication Critical patent/KR100677457B1/ko
Priority to US13/624,382 priority patent/US20130016120A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus

Abstract

본 발명의 목적은 다수의 아이템을 하나의 메뉴화면에 제공하기 위하여 3차원의 GUI 메뉴화면을 제공하는 것이다. 또한 본 발명의 목적은 소정의 거리를 두고 움직이는 표적물의 이동을 카메라가 추적하여 캡쳐하여, GUI 메뉴화면 상에서 움직이는 커서 포인터의 이동으로 전환시킴으로써 특정 메뉴 또는 아이템를 선택하여 입력하는 장치 및 방법을 제공하는데 있다. 상기와 같은 목적을 달성하기 위하여, 본 발명에 따른 단말기의 카메라를 이용한 메뉴선택 입력 방법은, 소정 메뉴의 특정 아이템에 커서 포인터가 위치하여 화면에 표시되는 과정, 카메라가 움직이는 표적물의 이동을 추적하여 캡쳐하는 과정, 상기 캡쳐된 표적물의 이동을 상기 메뉴 화면의 아이템들 사이에서 움직이는 커서 포인터의 이동으로 전환하는 과정, 상기 커서 포인터가 이동하여 상기 메뉴의 특정 아이템을 선택하는 과정을 포함하여 구성된 것이 특징이다.
카메라, 메뉴이동, 3차원 메뉴, 단말기

Description

단말기의 카메라를 이용한 메뉴 입력 장치 및 방법{MENU INPUT APPARATUS AND METHOD FOR A TERMINAL USING A CAMERA}
도1은 본 발명의 실시 예로서, 단말기의 카메라를 이용한 메뉴선택 입력장치의 개략적인 구성도.
도 2A 는 본 발명의 일 실시 예로서, 단말기의 메뉴화면에 위치한 커서 포인터를 도시한 도면.
도 2B는 본 발명의 일 실시 예로서, 단말기에 내장된 카메라와 표적물을 도시한 도면.
도 3A와 도 3B는 본 발명의 일 실시 예로서, 표적물이 하측방향으로 이동할 때 커서 포인터의 이동을 도시한 도면.
도 3C와 도 3D는 본 발명의 일 실시 예로서, 표적물이 좌측방향으로 이동할 때 커서 포인터의 이동을 도시한 도면.
도 4A와 도 4B는 본 발명의 일 실시 예로서, 표적물이 상측방향으로 이동할 때 커서 포인터의 이동을 도시한 도면.
도 4C는 사용자가 메뉴상에서 이동하여 선택한 아이템을 실행 명령한 경우에 디스플레이에 표시되는 화면을 나타낸 도면.
도 5A 는 본 발명의 일 실시 예로서, 3차원의 메뉴화면을 도시한 도면.
도 5B는 본 발명의 일 실시 예로서, 카메라 앞에서 X축,Y축,Z축의 세개 축 방향으로 이동하는 표적물을 도시한 도면.
도 6A는 본 발명의 일 실시 예로서, 메뉴화면의 도면이고, 도6B는 카메라와 결합된 입력버튼을 도시한 도면.
도 7은 본 발명의 일 실시 예로서, 카메라를 이용하여 메뉴화면에 커서 포인터를 이동하여 선택하고 특정 아이템을 입력하는 순서도.
*******도면의 주요 부분에 대한 부호의 설명 ********
20: 표적물 50: 입력버튼
110: 디스플레이 120: 처리부
130: 카메라 140: 입력부
본 발명은 단말기에 관한 것으로서, 특히 카메라를 이용하여 특정 메뉴를 선택하고 입력하는 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법에 관한 것이다.
이동통신 단말기(이하, '단말기'라 한다)는 현제 현대인의 필수품으로 자리 잡고 있으며, 그 단말기의 기능이 통화기능에서 머무는 것이 아니라 전자다이어리, 게임기능, MP3 기능, 전자사전, 그리고 디지털 카메라기능 등과 같은 다양한 서비스를 단말기의 사용자에게 제공하고 있다.
이와 같은 단말기 기능의 발전 추세에 맞추어, 사용자 입장에서 다양한 기능 및 옵션을 어떻게 보다 쉽고 편리하게 제공할 것인가, 그리고 사용자는 그 제공된 기능 및 옵션 중에서 원하는 기능을 어떻게 선택하여 입력할 것인가란 문제가 단말기 개발자에게 새로운 과제가 되었다. 이와 같은 주제 하에서, 사용자가 단말기에 수록된 다양한 기능을 보다 쉽게 선택하여 사용할 수 있도록, 현재 GUI(Graphic User Interface) 메뉴화면을 제공하는 방식이 널리 사용되고 있다. 이와 같은 GUI 메뉴가 제공됨에 따라서, 사용자는 키패드의 이동키를 눌러서 그 GUI 메뉴 상의 특정 아이템(Item)으로 이동하여 선택한 후에, 특정 입력 버튼을 눌러 그 선택된 아이템을 실행하도록 하고 있다.
그러나, 이와 같은 방식은 메뉴화면에서 제공하는 아이템의 수가 많을 경우 특정 아이템을 선택을 하기 위하여 이동키를 수회에 걸쳐 눌러 메뉴화면 및 아이템 간에 이동을 하여야 하는 불편한 점이 있다. 또한, 메뉴화면 및 아이템의 이동을 위한 키가 구비되어야 한다는 구조적인 한계가 있다.
따라서, 본 발명의 목적은 다수의 아이템을 하나의 메뉴화면에 제공하기 위하여 3차원의 GUI 메뉴화면을 제공하는 것이다.
또한, 본 발명의 다른 목적은 단말기에 내장된 카메라를 이용하여 표적물의 이동을 캡쳐하고, GUI 메뉴화면 상의 커서 포인터의 이동으로 전환시킴으로써, 사용자가 특정 메뉴 또는 특정 아이템을 선택하여 입력하는 장치 및 방법을 제공하는데 있다.
상기와 같은 목적을 달성하기 위하여, 본 발명에 따른 단말기의 카메라를 이용한 메뉴선택 입력 방법은,
카메라로 캡쳐한 표적물의 이동을 커서 포인터의 이동으로 전환하고;
상기 커서 포인터를 이동시켜 적어도 하나 이상의 메뉴 블럭을 포함하는 3차원 메뉴에서 특정 블럭을 선택하고;
상기 커서 포인터를 이동시켜 상기 선택된 특정 블럭의 특정 아이템을 선택하는 것이 특징이다.
바람직하게, 상기 메뉴는, 2차원 또는 3차원의 메뉴인 것이 특징이다.
삭제
삭제
삭제
삭제
바람직하게, 상기 카메라는, 상기 표적물이 상하, 좌우, 그리고 대각선 방향으로 이동하는 것을 추적하여 캡쳐하는 것이 특징이다.
또한, 상기와 같은 목적을 달성하기 위하여, 본 발명에 따른 단말기의 카메라를 이용한 메뉴선택 입력 장치는,
적어도 하나 이상의 메뉴 블록 및 적어도 하나 이상의 아이템을 포함하는 메뉴을 표시하는 디스플레이와;
표적물의 이동을 캡쳐하는 카메라와;
상기 카메라가 캡쳐한 표적물의 이동을 상기 메뉴 상에 커서 포인터의 이동으로 전환하도록 처리하는 처리부와;
상기 커서 포인터를 이동하여 상기 메뉴에서 특정 메뉴 블록 및 특정 아이템을 선택한 후, 그 선택된 특정 메뉴 블록 및 특정 아이템을 실행하도록 명령하는 입력부를 포함하여 구성된 것이 특징이다.
삭제
삭제
삭제
이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 상세히 설명하면 다음과 같다.
본 발명의 기본 개념은 단말기에 내장된 카메라가 움직이고 있는 표적물의 이동을 캡쳐하여, 표적물의 이동을 메뉴화면 상의 세부 아이템 간에 움직이는 커서 포인터의 이동으로 전환하여 특정 아이템을 선택하고 그 아이템에 지정된 명령을 입력하는 것이다. 특히, 3차원의 메뉴화면 상에서 본 발명이 구현할 수 있도록, 표적물의 이동을 x축,y축,z축의 세개 축으로 구분하여 3차원 메뉴화면에서 메뉴블록 간에 이동으로 그리고 아이템 간의 이동으로 전환하는 것이다.
도1은 본 발명의 실시 예로서, 단말기의 카메라를 이용한 메뉴선택 입력장치의 개략적인 구성도이다. 도시된 바와 같이, 본 발명에 따른 카메라를 이용한 메뉴선택 입력장치는, 적어도 하나 이상의 아이템을 포함하는 메뉴화면을 표시하는 디스플레이(110)와, 소정의 거리를 두고 움직이는 표적물의 이동을 캡쳐하는 카메라(130)와, 상기 카메라가 캡쳐한 표적물의 이동을 상기 메뉴화면의 아이템들 사이에서 움직이는 커서 포인터의 이동으로 전환하는 처리부(120)와, 상기 커서 포인터를 이동하여 메뉴화면의 특정 아이템을 선택한 후 선택된 그 아이템을 실행하도록 명령하는 입력부(140)를 포함하여 구성된다.
상기 입력부(140)은 도 6B에 도시 된 바와 같이 상기 카메라(130)과 일체형으로 결합되어 구성될 수도 있다. 이때 상기 입력부(140)는 상기 카메라(130)의 렌즈 주위를 감싸고 있는 형태로 결합되며 상기 카메라의 렌즈 조립 면 보다 상위에 위치하도록 결합되어 있다.
상기 카메라(130)는 단말기에 일체형으로 통합된 디지털 카메라로서 단말기의 전면 또는 후면의 일 부위에 결합된다.
이와 같이 구성된 본 발명의 기능 및 동작을 첨부된 도면 도2A-도 6B를 참조하여 설명하면 다음과 같다.
사용자가 단말기를 작동시켜 도2A와 같은 특정 메뉴화면이 디스플레이에 표시되었을 때, 사용자가 그 표시된 메뉴화면의 세부 아이템(Item) 중에서 특정 아이템을 실행하기 위해서는 먼저 그 아이템으로 커서 포인터(40)를 이동시켜서 선택하여야 한다. 이 때 사용자가 카메라(130) 앞에서 소정의 거리를 두고 있는 표적물(20)을 가로 방향과 세로 방향, 또는 대각선 방향으로 이동시키면, 카메라(130)가 표적물의 이동을 추적하여 그 이미지를 캡쳐한다. 상기 캡쳐한 이미지는 처리부(130)에서 커서 포인터(40)의 좌표 값으로 전환하여 메뉴화면 상에서 커서 포인터의 해당 좌표 위치에 표시되도록 처리한다. 이와 같은 처리부(120)의 동작을 보다 상세히 설명하면 다음과 같다.
상기 카메라(130)가 그 카메라와 소정의 간격 내에 있는 표적물(20)의 제1 이미지를 캡쳐한 후에, 상기 표적물 이동함에 따라 제 2 캡쳐이미지 및 제3 캡쳐이미지 등등의 연속적인 표적물 이미지를 계속하여 캡쳐한다. 이렇게 표적물의 이동에 따라 캡쳐한 이미지를 추출하여 A/D(Analog to Digital)변환 처리하여, 그 변환된 각 이미지를 메뉴화면 상의 커서 포인터의 해당 좌표값으로 전환하여 추출하기 위해서, 캡쳐이미지 각각을 해당하는 각 다이어그노스틱 요소로 지정한다. 그런 다 음, 처리부(120)가 미리 지정된 카메라의 캡쳐율에 따라 캡쳐되는 표적물(20)의 각 이미지의 해상도 변화를 시간에 따라 추적하여 상기 추출된 다이어그노스틱 요소 들의 좌표값을 추출한 후에, 그 추출된 좌표값 간의 차이값을 유출한다. 상기 유출된 차이값을 이용하여 메뉴화면의 아이템 간에 이동하는 커서 포인터(40)의 위치변화로 전환하도록 한다.
이와 같은 처리부(120)의 동작을 수행하기 위하여 상기 카메라(130)는 일정한 캡쳐율이 설정된 상태에서 이동하는 상기 표적물을 캡쳐하여야 한다. 즉, 실험에 의하여 획득한 결과로서 카메라는 초당 30프레임 이상의 캡쳐율을 유지하여 이동하는 표적물(20)의 이미지를 캡쳐하여야 한다. 또한, 상기 카메라(130)는 표적물이 갑자기 카메라에 포착되거나 사라지더라도 화상 변화를 수용할 수 있도록 충분한 마진을 설정하여야 한다.
상기와 같은 캡쳐율과 마진을 설정한 카메라는 표적물의 이동을 추적하여 캡쳐함으로써, 메뉴화면 상의 아이템 간의 커서 포인터를 이동시키고, 또 스크롤할 수 있다. 이 때 표적물이란 손가락, 손바닥, 또는 막대기와 같은 특정 물체가 될 수 있으며, 첨부된 도면에 도시된 표적물은 사용자의 검지 손가락으로 표시되어 있다. 그리고 상기 표적물은 상하, 좌우, 그리고 대각선 방향으로 이동할 때 카메라가 감지할 수 있다.
도3A와 도3B는 표적물이 하측방향으로, 도3C와 도3D는 표적물이 좌측방향으로, 그리고 도4A와 도4B는 표적물이 상측방향으로 이동하는 본 발명의 각각의 실시 예를 나타내는 도면이다.
도3A-도4B를 참조하여, 커서 포인터(40)가 도2A에서 보이는 바와 같이 메뉴화면의 아이템 1에 위치된 상태에서 커서 포인터의 연속적인 이동을 설명하면 다음과 같다.
도 3B에 도시된 바와 같이, 카메라 앞에서 표적물(20)이 하위 방향으로 움직이면, 카메라(130)가 이동하는 표적물(20)의 이미지를 연속으로 캡쳐하고, 그 캡쳐된 이미지가 처리부(130)의 이미지처리에 의하여 도 3A와 같이 메뉴화면 상의 아이템 간의 이동하는 커서 포인터(40)로 전환하여 표시한다. 이때, 사용자가 이동하고 싶은 만큼 표적물(20)을 하측방향으로 이동하여, 사용자가 원하는 아이템(아이템3)을 선택하면, 그 선택된 아이템(아이템3)이 하이라이트되어 표시된다. 이와 마찬가지로 도 3C와 도3D는, 사용자가 표적물을 좌측 방향으로 이동하는 경우에, 커서 포인터(40)가 좌측으로 이동(아이템3에서 아이템7으로 )하는 실시 예를 보여주고 있다. 또한 도4A와 도4B는, 사용자가 표적물(20)을 상측 방향으로 이동하는 경우에 커서 포인터(40)가 상측으로 이동(아이템7에서 아이템6으로)하는 실시 예를 보여주고 있다. 이와 같이 사용자가 카메라(130) 앞에서 표적물(20)을 상하, 좌우로 이동시켜서 원하는 아이템(예를 들면, 아이템6)을 선택할 수 있으며, 그 선택된 아이템(아이템6)을 단말기 키패드의 특정 버튼 눌러 입력함으로써, 도4C에서 보여지는 바와 같이 해당 아이템의 명령을 실행하게 할 수 있다. 이때, 선택된 아이템의 실행을 위하여 음성인식 방식으로 입력할 수도 있다.
이상 설명한 것은 커서 포인터(40)가 GUI 메뉴화면 상에서 X축 방향(또는 좌우방향)과 Y축 방향(상하측 방향)의 2차원으로 이동하는 실시 예를 설명 것이나, 이에 대비하여 도5A에 도시된 바와 같이 3차원의 GUI 메뉴화면이 제공되는 경우, X축 방향(또는 좌우방향), Y축 방향(상하측 방향), 그리고 Z축 방향(대각선 방향)으로의 표적물(130)의 이동을 커서 포인터(40)의 3차원적 이동이 가능하다. 즉, 본 발명은 도5A에 도시된 바와 같이, 8개의 아이템으로 구성된 2차원 GUI 메뉴화면으로서, 다수의 메뉴블록으로 블록화 되어있는 3차원의 GUI 메뉴화면을 사용자에게 제공할 수 있으며, 이와 같은 3차원의 메뉴에서 메뉴블록간의 이동은 사용자가 표적물(20)을 Z축 방향(대각선 방향)으로 이동할 때 커서 포인터(40)이 해당 메뉴 블록으로 이동한다. 그리고 그 이동한 메뉴블록에서 원하는 아이템으로 이동하여 선택하고, 그 선택된 아이템은 키패드의 특정키가 눌러져 입력됨으로써, 그 아이템의 해당 명령이 실행된다. 이때 입력버튼(50)의 결합위치가 도6B에 도시된 바와 같이 카메라와 함께 결합되어 있는 경우, 도6A에서 커서 포인터(40)가 선택한 아이템1을 상기 입력버튼(50)을 눌러 아이템1에 해당하는 명령을 실행시킬 수 있다.
이와 같은 본 발명의 구성 및 동작을 도 7의 순서도를 참조하여 설명하면 다음과 같다.
사용자가 단말기의 전원을 켜서 메뉴화면에 진입하면, 메뉴화면에서 특정 아이템에 커서 포인터가 위치한 상태로 디스플레이에 표시된다(S10). 이어서 사용자가 메뉴화면에 표시된 아이템 중에서 원하는 아이템으로 이동하기 위하여 카메라와 소정의 거리를 두고 표적물을 이동시키면 카메라가 표적물의 이동을 추적하여 그 이미지를 연속으로 캡쳐한다(S20). 상기 과정(S20)에서 캡쳐된 표적물의 3차원적 이동을 처리부에서 A/D 변환하고 메뉴화면 상에서 이동하는 커서 포인터의 3차 원 좌표로 전환한다(S30). 상기 과정(S30)의하여 커서 포인터를 이동하여 사용자가 원하는 아이템이 선택되면, 입력 버튼을 눌러 그 선택된 아이템에 해당하는 명령을 실행한다(S40).
이상 상술한 본 발명의 실시 예는 카메라가 내장된 이동통신 단말기에 초점을 맞추어 설명하였으나, 그 외에도 카메라가 부착된 노트북 등과 같이 모든 단말기에 본 발명의 기술적 사상을 동일하게 적용할 수 있다.
본 발명은 도면에 도시 된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
상술한 바와 같이 본 발명은, 카메라 앞에서 소정의 간격을 두고 움직이는 표적물의 이동을 메뉴화면 상에서 커서 포인터의 이동으로 전환하여 메뉴이동 및 선택 방법을 구현함으로써, 별도의 메뉴 이동키를 구비할 필요가 없는 효과가 있고, 아울러 이동키를 생산 및 조립으로 인하여 발생하는 생산 단가를 절감할 수 있는 경제적인 효과가 있다.
또한, 사용자가 선택한 메뉴의 아이템을 카메라와 함께 결합된 별도의 입력버튼을 통하여 입력할 수 있기 때문에 사용상의 편리한 효과가 있다.
또한, 본 발명은 3차원의 메뉴화면을 제공하여 하나의 메뉴화면에서 많은 아 이템을 제공하기 때문에 사용자가 원하는 메뉴로 빠르기 이동하여 선택할 수 있다는 효과가 있다.

Claims (39)

  1. (a) 카메라로 캡쳐한 표적물의 이동을 커서 포인터의 이동으로 전환하는 과정과;
    (b) 상기 커서 포인터를 이동시켜 적어도 하나 이상의 메뉴 블럭을 포함하는 3차원 메뉴에서 특정 블럭을 선택하는 과정과;
    (c) 상기 커서 포인터를 이동시켜 상기 선택된 특정 블럭의 특정 아이템을 선택하는 과정을 포함하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 제1항에 있어서, 상기 메뉴 블록은,
    적어도 하나 이상의 아이템을 포함하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  6. 제5항에 있어서, 상기 아이템은,
    사용자가 실행하고자 하는 특정 명령에 해당하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  7. 삭제
  8. 삭제
  9. 제1항에 있어서, 상기 (a)과정에서, 상기 카메라가 상기 표적물의 이동을 캡쳐할 수 있도록, 상기 표적물은 상기 카메라와 소정의 거리를 두고 이동하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  10. 제9항에 있어서, 상기 카메라는,
    상기 카메라와 소정의 거리 이내에서 이동하는 상기 표적물의 이동을 즉각적으로 캡쳐할 수 있도록, 소정의 캡쳐율로 상기 표적물을 캡쳐하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  11. 삭제
  12. 삭제
  13. 제1항에 있어서, 상기 커서 포인터를 상하, 좌우, 또는 대각선 방향으로 이동시켜서,
    상기 특정 메뉴블럭 또는 상기 특정 아이템을 선택하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  14. 제1항에 있어서, 상기 (a)과정에서,
    미리 설정된 초당 프레임으로 캡쳐한 상기 표적물의 이미지가 메뉴 상에서 상기 커서 포인터의 좌표 값으로 전환되는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  15. 삭제
  16. 제14항에 있어서, 상기 커서 포인터의 좌표 값은,
    3차원의 좌표 값인 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  17. 제1항에 있어서, 상기 (a)과정은,
    상기 카메라가 그 카메라와 소정의 간격을 두고 움직이는 표적물을 캡쳐하여 제 1 및 제2 캡쳐 이미지를 추출하는 과정;
    상기 표적물의 제1 및 제2 캡쳐 이미지를 A/D 변환 처리하는 과정;
    상기 A/D 변환된 제1 및 제2 캡쳐 이미지를 제1 및 제2 다이어그노스틱 요소로 각각 지정하는 과정;
    상기 제1 및 제2 다이어그스틱 요소에 해당하는 제1 및 제2 좌표 값을 추출하는 과정;
    상기 제1 및 제2의 좌표 값 간의 차이값을 추출하는 과정;
    상기 차이값을 이용하여, 메뉴 아이템 상에서 이동하는 상기 커서 포인터의 위치를 추적하는 과정을
    포함하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  18. 제1항에 있어서,
    (d) 상기 커서 포인터를 이동시켜서 선택된 상기 메뉴의 특정 블록 및 상기 특정 블록 내의 특정 아이템이 실행되도록
    실행명령을 입력하는 과정을 더 포함하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  19. 제18항에 있어서, 상기 실행명령은,
    단말기에 구비된 특정 입력 버튼을 누름으로써 입력되는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  20. 제18항에 있어서, 상기 실행명령은,
    단말기의 카메라와 일체형으로 조립된 입력 버튼을 누름으로써 입력되는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 방법.
  21. 적어도 하나 이상의 메뉴 블록 및 적어도 하나 이상의 아이템을 포함하는 메뉴을 표시하는 디스플레이와;
    표적물의 이동을 캡쳐하는 카메라와;
    상기 카메라가 캡쳐한 표적물의 이동을 상기 메뉴 상에 커서 포인터의 이동으로 전환하도록 처리하는 처리부와;
    상기 커서 포인터를 이동하여 상기 메뉴에서 특정 메뉴 블록 및 특정 아이템을 선택한 후, 그 선택된 특정 메뉴 블록 및 특정 아이템을 실행하도록 명령하는 입력부를 포함하여 구성된 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  22. 삭제
  23. 제21항에 있어서, 상기 디스플레이는,
    다수의 메뉴 블록 및 다수의 아이템으로 구성된 3차원 메뉴를 표시하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  24. 삭제
  25. 삭제
  26. 제21항에 있어서, 상기 아이템은,
    사용자가 실행하고자 하는 특정 명령에 해당하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  27. 삭제
  28. 제21항에 있어서, 상기 카메라는,
    단말기에 내장되어 있는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  29. 제21항에 있어서, 상기 카메라는,
    상기 카메라와 소정의 거리 이내에서 이동하는 상기 표적물의 이동을 즉각적으로 캡쳐할 수 있도록, 소정의 캡쳐율로 상기 표적물을 캡쳐하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  30. 삭제
  31. 제21항에 있어서, 상기 카메라는,
    상기 표적물이 상하, 좌우, 그리고 대각선 방향으로 이동하는 것을 추적하여, 상기 표적물을 캡쳐하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  32. 제21항에 있어서, 상기 처리부는,
    미리 설정된 초당 프레임으로 캡쳐한 상기 표적물의 이미지가 메뉴 상에서 상기 커서 포인터의 좌표 값으로 전환하도록 처리하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  33. 삭제
  34. 제32항에 있어서, 상기 커서 포인터의 좌표 값은,
    3차원의 좌표 값인 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  35. 제21항에 있어서, 상기 처리부는,
    상기 카메라가 그 카메라와 소정의 간격을 두고 움직이는 표적물을 캡쳐하여 제 1 및 제2 캡쳐 이미지를 추출하여 A/D 변환 처리하고,
    상기 A/D 변환된 제1 및 제2 캡쳐 이미지를 제1 및 제2 다이어그노스틱 요소로 각각 지정하여 제1 및 제2 다이어그노스틱 요소에 해당하는 제1 및 제2 좌표 값을 추출하고,
    상기 제1 및 제2의 좌표 값 간의 차이값을 이용하여 GUI 메뉴 아이템 상에서 이동하는 상기 커서 포인터의 위치를 추적하도록 처리하는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  36. 삭제
  37. 제21항에 있어서, 상기 입력부는,
    상기 카메라와 일체형으로 결합된 버튼인 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  38. 제37항에 있어서, 상기 입력부는,
    상기 카메라의 렌즈 조립 면 보다 상위에 위치하도록 결합되어 있는 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
  39. 제37항에 있어서, 상기 입력부는,
    상기 카메라의 렌즈 주위를 감싸고 있는 형태의 입력 버튼인 것을 특징으로 하는 단말기의 카메라를 이용한 메뉴선택 입력 장치.
KR1020050043866A 2005-05-24 2005-05-24 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법 KR100677457B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020050043866A KR100677457B1 (ko) 2005-05-24 2005-05-24 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법
US11/439,174 US20060274038A1 (en) 2005-05-24 2006-05-24 Menu input apparatus and method using camera of mobile communications terminal
US13/624,382 US20130016120A1 (en) 2005-05-24 2012-09-21 Menu input apparatus and method using camera of mobile communications terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050043866A KR100677457B1 (ko) 2005-05-24 2005-05-24 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20060121610A KR20060121610A (ko) 2006-11-29
KR100677457B1 true KR100677457B1 (ko) 2007-02-02

Family

ID=37493651

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050043866A KR100677457B1 (ko) 2005-05-24 2005-05-24 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법

Country Status (2)

Country Link
US (2) US20060274038A1 (ko)
KR (1) KR100677457B1 (ko)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
US8920343B2 (en) 2006-03-23 2014-12-30 Michael Edward Sabatino Apparatus for acquiring and processing of physiological auditory signals
KR100800889B1 (ko) 2006-08-08 2008-02-04 삼성전자주식회사 이동 통신 단말기의 기능 항목이 표시되는 화면의 구성을변경하기 위한 방법 및 이를 위한 단말기
CN101335030A (zh) * 2007-06-28 2008-12-31 英特维数位科技股份有限公司 多媒体光盘选单的操作方法
KR101432295B1 (ko) * 2007-09-05 2014-08-21 삼성전자주식회사 카메라를 구비한 휴대단말기에서 마우스 실행 장치 및 방법
KR20090025560A (ko) * 2007-09-06 2009-03-11 삼성전자주식회사 카메라를 구비한 휴대단말기에서 마우스 실행 장치 및 방법
US8294670B2 (en) * 2008-02-05 2012-10-23 Research In Motion Limited Optically based input mechanism for a handheld electronic communication device
EP2088497B1 (en) 2008-02-05 2020-06-03 BlackBerry Limited Optically based input mechanism for a handheld electronic communication device
US20100138797A1 (en) * 2008-12-01 2010-06-03 Sony Ericsson Mobile Communications Ab Portable electronic device with split vision content sharing control and method
JP2010170388A (ja) * 2009-01-23 2010-08-05 Sony Corp 入力装置および方法、情報処理装置および方法、情報処理システム、並びにプログラム
US20120086629A1 (en) * 2010-10-07 2012-04-12 Thoern Ola Electronic device having movement-based user input and method
KR101789683B1 (ko) * 2011-06-13 2017-11-20 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법, 그리고 리모컨 장치
US9176539B2 (en) 2012-11-10 2015-11-03 Ebay Inc. Key input using an active pixel camera

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1996009579A1 (en) * 1994-09-22 1996-03-28 Izak Van Cruyningen Popup menus with directional gestures
US7113171B2 (en) * 1997-06-10 2006-09-26 Mark Vayda Universal input device
JP4052498B2 (ja) * 1999-10-29 2008-02-27 株式会社リコー 座標入力装置および方法
US6847354B2 (en) * 2000-03-23 2005-01-25 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Three dimensional interactive display
JP2002062983A (ja) * 2000-08-21 2002-02-28 Hitachi Ltd ポインティングデバイス
US6577496B1 (en) * 2001-01-18 2003-06-10 Palm, Inc. Non-rigid mounting of a foldable display
TWI313835B (en) * 2002-06-04 2009-08-21 Koninkl Philips Electronics Nv Method of measuring the movement of an object relative to a user's input device and related input device,mobile phone apparatus, cordless phone apparatus, laptor computer, mouse and remote control
GB2404819A (en) * 2003-08-05 2005-02-09 Research In Motion Ltd Mobile communications device with integral optical navigation

Also Published As

Publication number Publication date
US20130016120A1 (en) 2013-01-17
KR20060121610A (ko) 2006-11-29
US20060274038A1 (en) 2006-12-07

Similar Documents

Publication Publication Date Title
KR100677457B1 (ko) 단말기의 카메라를 이용한 메뉴 입력 장치 및 방법
US8855707B2 (en) Camera as input interface
US8830273B2 (en) Display control apparatus and display control method, display control program, and recording medium
US20100053342A1 (en) Image edit method and apparatus for mobile terminal
EP3767939A1 (en) Photographing method and mobile terminal
KR102373021B1 (ko) 글로벌 특수 효과의 전환 방법, 전환 장치, 단말 설비 및 저장 매체
EP2620849A1 (en) Operation input apparatus, operation input method, and program
JP2009140368A (ja) 入力装置、表示装置、入力方法、表示方法及びプログラム
JP2006209563A (ja) インターフェース装置
EP2725458B1 (en) Information processing device, input control method, and input control program
US20130342441A1 (en) Character input method and information processing apparatus
JP4685708B2 (ja) 携帯端末装置
JP2013114647A (ja) ジェスチャー入力システム
KR101352462B1 (ko) 이동 단말의 가상 키보드
KR20110053396A (ko) 제스처를 이용한 사용자 인터페이스 제공 단말기 및 방법
CN111338529A (zh) 图标显示方法及电子设备
JP2013171529A (ja) 操作入力装置、操作判定方法およびプログラム
JP2007102415A (ja) ２つの入力モードを有する携帯端末、プログラム及び携帯端末への指令入力方法
CN113873159A (zh) 图像处理方法、装置及电子设备
KR101394604B1 (ko) 모션 감지를 통한 사용자 인터페이스 구현 방법 및 그 장치
JP5152639B2 (ja) 文字入力・機能操作装置、方法、プログラム及び携帯端末装置
JP2006099228A (ja) データ処理装置及びプログラム
US9116549B2 (en) Electronic device having input control application
JP6409777B2 (ja) 撮像装置、撮像方法及びプログラム
KR101324809B1 (ko) 휴대용 단말기 및 그 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121227

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20131224

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20141224

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20151224

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20161223

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20171222

Year of fee payment: 12

LAPS Lapse due to unpaid annual fee