KR101832757B1 - 전자 장치 및 메뉴 자동 구성 방법 - Google Patents

전자 장치 및 메뉴 자동 구성 방법 Download PDF

Info

Publication number
KR101832757B1
KR101832757B1 KR1020100137806A KR20100137806A KR101832757B1 KR 101832757 B1 KR101832757 B1 KR 101832757B1 KR 1020100137806 A KR1020100137806 A KR 1020100137806A KR 20100137806 A KR20100137806 A KR 20100137806A KR 101832757 B1 KR101832757 B1 KR 101832757B1
Authority
KR
South Korea
Prior art keywords
menu
screen
detected
hand
electronic device
Prior art date
Application number
KR1020100137806A
Other languages
English (en)
Other versions
KR20120076682A (ko
Inventor
채지석
이병헌
유경희
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020100137806A priority Critical patent/KR101832757B1/ko
Publication of KR20120076682A publication Critical patent/KR20120076682A/ko
Application granted granted Critical
Publication of KR101832757B1 publication Critical patent/KR101832757B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits

Abstract

전자 장치 및 메뉴 자동 구성 방법이 개시된다. 전자 장치는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하고, 손이 촬영된 영상 프레임을 획득한다. 그리고 전자 장치는 촬상된 영상 프레임을 이용하여 제스처 입력에 사용되는 손을 확인하고, 확인 결과에 따라 서비스 페이지 및 메뉴 객체의 배치를 변경한다.

Description

전자 장치 및 메뉴 자동 구성 방법{An electronic device, a method for auto configuring menu using the same}
본 발명은 전자 장치 및 메뉴 자동 구성 방법에 관한 것으로, 보다 상세하게는, 메뉴를 자동으로 구성하는 전자 장치 및 이를 이용한 메뉴 자동 구성 방법에 관한 것이다.
방송 수신기, 개인용 컴퓨터, 노트북, 휴대폰 등과 같은 전자 장치는 다양한 기능을 수행할 수 있도록 구성될 수 있다. 그러한 다양한 기능들의 예로 방송 수신 기능, 데이터 및 음성 통신 기능, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 스피커 시스템을 통한 음악 파일의 재생 기능, 이미지나 비디오의 디스플레이 기능 등이 있다. 일부 단말기는 게임을 실행할 수 있는 추가적 기능을 포함할 수 있다.
또한, 전자 장치는 이동의 편의를 위해 슬림화되고 있고, 조작을 편의를 위해 터치 패드 및 터치 스크린 등의 입력장치를 구비하도록 개발되고 있다. 현재 전자 장치는 터치 패드 및 터치 스크린이 터치되면 해당 동작들을 수행한다. 이 동작들은 디스플레이 화면상에서 선택을 하는 것에 대응한다. 또한 이 동작들은 페이지 넘김(paging), 스크롤링, 패닝(panning), 줌잉(zooming), 기타 등등도 포함할 수 있다.
터치 패드에 있어서, 입력 포인터의 움직임은, 사용자의 손가락이 터치 패드의 표면을 따라 움직일 때, 사용자의 손가락의 상대적 움직임에 대응한다. 반면에, 터치 스크린은 화면을 덮고 있는 터치 감지 투명 패널을 갖는 일종의 디스플레이 화면이다. 터치 스크린을 사용할 때, 사용자는 (보통 스타일러스 또는 손가락으로) 디스플레이 화면상에서 직접 GUI 객체를 가리킴으로써 해당 GUI 객체를 선택을 한다.
본 발명이 이루고자 하는 기술적 과제는 사용자에게 맞춤형 메뉴를 제공하는 전자 장치 및 메뉴 자동 구성 방법을 제공하는 데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는 사용자가 사용하기 편리한 형태로 메뉴 항목을 배치할 수 있는 전자 장치 및 메뉴 자동 구성 방법을 제공하는 데 있다.
본 발명이 이루고자 하는 또 다른 기술적 과제는 상기 메뉴 자동 구성 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공하는 데 있다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 메뉴 자동 구성 방법은 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하는 단계, 손이 촬영된 영상 프레임을 획득하는 단계, 상기 영상 프레임을 이용하여 제스처 입력에 사용되는 손을 확인하는 단계 및 상기 확인 결과에 따라 상기 서비스 페이지 및 상기 메뉴 객체의 배치를 변경하는 단계를 포함할 수 있다. 여기서, 상기 제스처는 공간 제스처 및 터치 제스처 중 적어도 하나를 포함할 수 있다. 또한 상기 메뉴 객체는 견출지 모양으로 디스플레이될 수 있다. 그리고 상기 복수의 서비스 페이지는 서로 일부 부분이 겹쳐져서 디스플레이될 수 있다.
상기 변경하는 단계에서, 서비스 페이지상에 붙는 상기 메뉴 객체의 부분이 변경될 수 있다.
상기 변경하는 단계에서, 상기 서비스 페이지 간의 겹쳐지는 부분이 변경될 수 있다.
상기 메뉴 자동 구성 방법은 메뉴 구성 모드 전환 명령이 감지된 경우에는, 상기 확인 결과에 따라 지정된 위치에 메뉴 생성 객체를 디스플레이하는 단계를 더 수 있다.
상기 메뉴 자동 구성 방법은 이동 명령이 감지된 경우에는, 상기 감지된 이동 명령에 따라 상기 메뉴 생성 객체를 이동시키는 단계, 드롭 명령이 감지된 경우에는, 상기 감지된 드롭 명령이 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에서 감지된지 여부를 확인하는 단계, 및 상기 드롭 명령이 상기 하나의 서비스 페이지상에서 감지된 경우에는, 상기 이동된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 드롭 명령이 감지된 서비스 페이지상에 붙이는 단계를 더 포함할 수 있다.
상기 메뉴 자동 구성 방법은 선택 명령이 감지된 경우에는, 상기 메뉴 생성 객체를 선택하는 단계, 및 위치 지정 명령이 감지된 경우에는, 상기 선택된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 위치 지정 명령이 지시하는 서비스 페이지상에 붙이는 단계를 더 포함할 수 있다.
상기의 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 메뉴 자동 구성 방법은, 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하는 단계, 전자 장치의 양 측면에 대한 접촉 지점을 검출하는 단계, 상기 검출된 접촉 지점을 이용하여 상기 전자 장치를 파지하는 손을 확인하는 단계, 및 상기 확인 결과에 따라 상기 서비스 페이지 및 상기 메뉴 객체의 배치를 변경하는 단계를 포함할 수 있다. 여기서, 상기 메뉴 객체는 견출지 모양으로 디스플레이될 수 있다. 그리고 상기 복수의 서비스 페이지는 서로 일부 부분이 겹쳐져서 디스플레이될 수 있다.
상기 변경하는 단계에서, 서비스 페이지상에 붙는 상기 메뉴 객체의 부분이 변경될 수 있다.
상기 변경하는 단계에서, 상기 서비스 페이지 간의 겹쳐지는 부분이 변경될 수 있다.
상기 메뉴 자동 구성 방법은 메뉴 구성 모드 전환 명령이 감지된 경우에는, 상기 확인 결과에 따라 지정된 위치에 메뉴 생성 객체를 디스플레이하는 단계를 더 수 있다.
상기 메뉴 자동 구성 방법은 이동 명령이 감지된 경우에는, 상기 감지된 이동 명령에 따라 상기 메뉴 생성 객체를 이동시키는 단계, 드롭 명령이 감지된 경우에는, 상기 감지된 드롭 명령이 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에서 감지된지 여부를 확인하는 단계, 및 상기 드롭 명령이 상기 하나의 서비스 페이지상에서 감지된 경우에는, 상기 이동된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 드롭 명령이 감지된 서비스 페이지상에 붙이는 단계를 더 포함할 수 있다.
상기의 또 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 전자 장치는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하는 디스플레이, 및 손이 촬영된 영상 프레임을 획득하고, 상기 영상 프레임을 이용하여 제스처 입력에 사용되는 손을 확인하며, 상기 확인 결과에 따라 상기 서비스 페이지 및 상기 메뉴 객체의 배치를 변경하는 제어부를 포함할 수 있다. 여기서, 상기 제스처는 공간 제스처 및 터치 제스처 중 적어도 하나를 포함할 수 있다. 또한 상기 메뉴 객체는 견출지 모양으로 디스플레이될 수 있다. 그리고 상기 복수의 서비스 페이지는 서로 일부 부분이 겹쳐져서 디스플레이될 수 있다.
상기 제어부는, 상기 확인 결과에 따라 서비스 페이지상에 붙는 상기 메뉴 객체의 부분을 변경할 수 있다.
상기 제어부는, 상기 확인 결과에 따라 상기 서비스 페이지 간에 겹쳐지는 부분을 변경할 수 있다.
상기 제어부는, 메뉴 구성 모드 전환 명령이 감지된 경우에는, 상기 확인 결과에 따라 지정된 위치에 메뉴 생성 객체가 디스플레이되도록 제어할 수 있다.
상기 제어부는, 이동 명령이 감지된 경우에는, 상기 감지된 이동 명령에 따라 상기 메뉴 생성 객체를 이동시키고, 드롭 명령이 감지된 경우에는, 상기 감지된 드롭 명령이 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에서 감지된지 여부를 확인하며, 상기 드롭 명령이 상기 하나의 서비스 페이지상에서 감지된 경우에는, 상기 이동된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 드롭 명령이 감지된 서비스 페이지상에 붙일 수 있다.
상기 제어부는, 선택 명령이 감지된 경우에는, 상기 메뉴 생성 객체를 선택하고, 위치 지정 명령이 감지된 경우에는, 상기 선택된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 위치 지정 명령이 지시하는 서비스 페이지상에 붙일 수 있다.
상기의 또 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 전자 장치는,화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하는 디스플레이, 상기 전자 장치의 양 측면에 대한 접촉 지점을 검출하는 접촉 검출부, 및 상기 검출된 접촉 지점을 이용하여 상기 전자 장치를 파지하는 손을 확인하고, 상기 확인 결과에 따라 상기 서비스 페이지 및 상기 메뉴 객체의 배치를 변경하는 제어부를 포함할 수 있다. 여기서, 상기 메뉴 객체는 견출지 모양으로 디스플레이될 수 있다. 그리고 상기 복수의 서비스 페이지는 서로 일부 부분이 겹쳐져서 디스플레이될 수 있다.
상기 제어부는, 상기 확인 결과에 따라 서비스 페이지상에 붙는 상기 메뉴 객체의 부분을 변경할 수 있다.
상기 제어부는, 상기 확인 결과에 따라 상기 서비스 페이지 간에 겹쳐지는 부분을 변경할 수 있다.
상기 제어부는, 메뉴 구성 모드 전환 명령이 감지된 경우에는, 상기 확인 결과에 따라 지정된 위치에 메뉴 생성 객체가 디스플레이되도록 제어할 수 있다.
상기 제어부는, 이동 명령이 감지된 경우에는, 상기 감지된 이동 명령에 따라 상기 메뉴 생성 객체를 이동시키고, 드롭 명령이 감지된 경우에는, 상기 감지된 드롭 명령이 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에서 감지된지 여부를 확인하며, 상기 드롭 명령이 상기 하나의 서비스 페이지상에서 감지된 경우에는, 상기 이동된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 드롭 명령이 감지된 서비스 페이지상에 붙일 수 있다.
상기 제어부는, 선택 명령이 감지된 경우에는, 상기 메뉴 생성 객체를 선택하고, 위치 지정 명령이 감지된 경우에는, 상기 선택된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 위치 지정 명령이 지시하는 서비스 페이지상에 붙일 수 있다.
본 발명에 따른 전자 장치 및 메뉴 자동 구성 방법에 의하면, 사용자 조치를 행하는 손을 확인하고 확인 결과에 따라 메뉴 화면을 제공하므로, 사용자에게 맞춤형 메뉴를 제공할 수 있고, 사용자가 사용하기 편리한 형태로 메뉴 항목을 배치할 수 있어, 사용자는 보다 용이하고 편리하게 전자 장치를 이용할 수 있다.
도 1은 본 발명에 따른 전자 장치에 대한 바람직한 일 실시예의 구성을 도시한 블록도,
도 2는 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면,
도 3은 메인 메뉴가 디스플레이된 일실시예의 화면을 도시한 도면,
도 4는 메인 메뉴가 디스플레이된 다른 실시예의 화면,
도 5는 메인 메뉴가 디스플레이된 또 다른 실시예의 화면을 도시한 도면,
도 6은 사용자 제스처가 인식된 화면의 일실시예를 도시한 도면,
도 7은 사용자 제스처가 인식된 화면의 다른 실시예를 도시한 도면,
도 8은 메뉴 생성 객체가 디스플레이된 일실시예의 화면을 도시한 도면,
도 9는 메뉴 생성 객체가 디스플레이된 다른 실시예의 화면을 도시한 도면,
도 10은 메뉴가 생성되는 일실시예의 과정 중 하나의 화면을 도시한 도면,
도 11은 메뉴가 생성되는 일실시예의 과정 중 다른 하나의 화면을 도시한 도면,
도 12는 메뉴가 생성되는 일실시예의 과정 중 또 다른 하나의 화면을 도시한 도면,
도 13은 메뉴가 생성되는 일실시예의 과정 중 또 다른 하나의 화면을 도시한 도면,
도 14는 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면,
도 15는 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면,
도 16은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면,
도 17은 메뉴가 생성되는 다른 실시예의 과정 중 하나의 화면을 도시한 도면,
도 18은 메뉴가 생성되는 다른 실시예의 과정 중 다른 하나의 화면을 도시한 도면,
도 19는 메뉴가 생성되는 다른 실시예의 과정 중 또 다른 하나의 화면을 도시한 도면,
도 20은 메뉴가 생성되는 다른 실시예의 과정 중 또 다른 하나의 화면을 도시한 도면,
도 21은 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면,
도 22는 본 발명에 따른 전자 장치의 좌측 측면도 및 우측 측면도의 일예를 도시한 도면,
도 23은 본 발명에 따른 전자 장치가 파지된 모습의 일예를 도시한 도면,
도 24는 본 발명에 따른 전자 장치가 파지된 모습의 다른 예를 도시한 도면,
도 25는 접촉 검출부가 검출한 접촉 지점을 도시한 도면,
도 26은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면,
도 27은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면, 그리고,
도 28은 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면이다.
이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.
도 1은 본 발명에 따른 전자 장치에 대한 바람직한 일 실시예의 구성을 도시한 블록도이다.
도 1을 참조하면, 전자 장치(100)는 튜너부(110), 이동통신부(115), 복조부(120), 네트워크 인터페이스부(130), 외부 신호 수신부(135), 신호 처리부(140), 디스플레이(150), 음성 출력부(160), 입력장치(170), 저장부(180), 제어부(190) 및 접촉 검출부(195)를 포함할 수 있다. 전자 장치(100)는 데스크톱, 랩톱, 태블릿 또는 핸드헬드 컴퓨터 등의 퍼스널 컴퓨터 시스템일 수 있다. 또한 전자 장치(100)는 휴대폰, 스마트폰(smart phone), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이션 등과 같은 이동 단말기일 수 있고, 디지털 TV 같은 고정형 가전기기일 수 있다.
전자 장치(100)는 데스크톱, 랩톱, 태블릿 또는 핸드헬드 컴퓨터 등의 퍼스널 컴퓨터 시스템일 수 있다. 또한 전자 장치(100)는 휴대폰, 스마트폰(smart phone), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등과 같은 이동 단말기일 수 있고, 디지털 TV 같은 고정형 가전기기일 수 있다.
튜너부(110)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환한다. 예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)로 변환한다. 즉, 튜너부(110)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다. 튜너부(110)에서 출력되는 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS SIF)는 신호처리부(140)로 직접 입력될 수 있다.
또한, 튜너부(110)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.
본 발명의 또 다른 실시예에 의하면, 전자 장치(100)는 적어도 2개의 튜너부를 구비할 수 있다. 적어도 2개의 튜너부를 구비하는 경우, 제2 튜너부는 제1 튜너부와 유사하게 안테나를 통해 수신되는 RF 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환한다.
또한, 제2 튜너부는 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다. 제2 튜너부는 주기적으로 모든 방송 채널의 변환 작업을 수행할 수 있다. 따라서 전자 장치(100)는 제1 튜너부를 통하여 변환된 방송 신호의 영상을 표시하면서, 제2 튜너부를 통하여 변환된 여러 채널의 영상을 썸 네일 형태로 제공할 수 있다. 이 경우, 제1 튜너부는 사용자가 선택한 메인 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환하고, 제2 튜너부는 메인 RF 방송 신호를 제외한 모든 RF 방송 신호를 순차적/주기적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다.
복조부(120)는 튜너부(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 일예로, 튜너부(110)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(120)는 8-VSB(8-Vestigial Side Band) 복조를 수행한다. 또 다른 예로, 튜너부(110)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(120)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다.
또한, 복조부(120)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(120)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.
복조부(120)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일 수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.
복조부(120)에서 출력한 스트림 신호는 신호처리부(140)로 입력될 수 있다. 신호처리부(140)는 역다중화 및 신호 처리 등을 수행한 후, 디스플레이(150)에 영상을 출력하고, 음성 출력부(160)로 음성을 출력한다.
또한, 적어도 2개의 튜너부가 구비된 디지털 방송 수신기의 경우, 그에 대응하는 수의 복조부를 구비할 수 있다. 또한 복조부는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비될 수 있다.
이동통신부(115)는 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
네트워크 인터페이스부(130)는 네트워크로부터 수신되는 패킷(packet)들을 수신하고, 네트워크로 패킷을 전송한다. 네트워크 인터페이스부(130)는 네트워크를 통해 방송 서비스 제공 서버로부터 방송 데이터를 전달하는 IP 패킷을 수신할 수 있다. 여기서 방송 데이터는 컨텐츠, 컨텐츠 업데이트 여부를 알리는 업데이트 메시지, 메타데이터, 서비스 정보, 소프트웨어 코드 및 A/V 데이터를 포함한다. 또한 서비스 정보는 실시간 방송 서비스에 대한 서비스 정보 및 인터넷 서비스에 대한 서비스 정보를 포함할 수 있다. 여기서 인터넷 서비스는 CoD(Content's on Demand) 서비스, 유튜브 서비스, 날씨, 뉴스, 지역 정보 및 검색 등의 인포메이션 서비스, 게임, 노래방 등의 엔터테인먼트 서비스, TV 메일, TV SMS(Short Message Service) 등의 커뮤니케이션 서비스 등 인터넷을 통해 제공될 수 있는 서비스를 의미한다. 이에 따라 본 발명에서 디지털 방송 수신기는 네트워크 TV, 웹 TV 및 브로드밴드 TV를 포함한다. 또한 방송 서비스는 지상파, 위성 및 케이블을 통해 제공되는 방송 서비스뿐만 아니라 인터넷 서비스를 포함할 수 있다.
제어부(190)는 명령어를 실행하고 전자 장치(100)와 연관된 동작을 수행한다. 예를 들면, 저장부(180)로부터 검색된 명령어를 사용하여, 제어부(190)는 전자 장치(100)의 컴포넌트들 간의 입력 및 출력, 데이터의 수신 및 처리를 제어할 수 있다. 제어부(190)는 단일 칩, 다수의 칩, 또는 다수의 전기 부품 상에 구현될 수 있다. 예를 들어, 전용 또는 임베디드 프로세서, 단일 목적 프로세서, 컨트롤러, ASIC, 기타 등등을 비롯하여 여러 가지 아키텍처가 제어부(190)에 대해 사용될 수 있다.
제어부(190)는 운영 체제와 함께 컴퓨터 코드를 실행하고 데이터를 생성 및 사용하는 동작을 한다. 운영 체제는 일반적으로 공지되어 있으며 이에 대해 보다 상세히 기술하지 않는다. 예로서, 운영 체제는 Window 계열 OS, Unix, Linux, Palm OS, DOS, 안드로이드 및 매킨토시 등일 수 있다. 운영 체제, 다른 컴퓨터 코드 및 데이터는 제어부(190)와 연결되어 동작하는 저장부(180) 내에 존재할 수 있다.
저장부(180)는 일반적으로 전자 장치(100)에 의해 사용되는 프로그램 코드 및 데이터를 저장하는 장소를 제공한다. 예로서, 저장부(180)는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 하드 디스크 드라이브 등으로 구현될 수 있다. 프로그램 코드 및 데이터는 분리형 저장 매체에 존재할 수 있고, 필요할 때, 전자 장치(100) 상으로 로드 또는 설치될 수 있다. 여기서 분리형 저장 매체는 CD-ROM, PC-CARD, 메모리 카드, 플로피 디스크, 자기 테이프, 및 네트워크 컴포넌트를 포함한다.
디스플레이(150)는 제어부(190)와 연결되어 동작할 수 있다. 디스플레이(150)는 유기 발광 패널이나 플라즈마 패널로 구현될 수 있다.
디스플레이(150)는 전자 장치의 사용자와 운영 체제 또는 운영 체제 상에서 실행 중인 애플리케이션 간의 사용하기 쉬운 인터페이스를 제공하는 그래픽 사용자 인터페이스(GUI)(153)를 디스플레이할 수 있다. GUI(153)는 프로그램, 파일, 및 동작 옵션들을 그래픽 이미지로 표현한다. 그래픽 이미지는 윈도우, 필드, 대화상자, 메뉴, 아이콘, 버튼, 커서 및 스크롤바 등을 포함할 수 있다. 이러한 이미지는 미리 정의된 레이아웃으로 정렬될 수 있거나, 사용자가 취하고 있는 특정의 조치를 돕기 위해 동적으로 생성될 수 있다. 동작 동안에, 사용자는 여러 가지 그래픽 이미지와 연관된 기능 및 작업을 제기하기 위해 그 이미지를 선택 및 활성화할 수 있다. 예로서, 사용자는 윈도우의 열기, 닫기, 최소화, 또는 최대화를 행하는 버튼, 또는 특정 프로그램을 가동시키는 아이콘을 선택할 수 있다.
입력장치(170)는 디스플레이(150) 상에 또는 그 전방에 배치되어 있는 터치 스크린일 수 있다. 터치 스크린은 디스플레이(150)와 일체로 되어 있거나 별개의 구성요소일 수 있다. 터치 스크린이 디스플레이(150)의 전방에 배치됨에 따라 사용자는 GUI(153)를 직접 조작할 수 있다. 예를 들어, 사용자는 단지 제어될 객체 상에 그의 손가락을 올려 놓을 수 있다. 터치패드에서는, 이것과 같은 일대일 관계가 없다.
터치패드에 있어서, 터치패드는 디스플레이(150)로부터 떨어져 일반적으로 다른 평면에 놓여 있다. 예를 들어, 디스플레이(150)는 일반적으로 수직 평면에 위치해 있고, 터치패드는 일반적으로 수평 평면에 위치해 있다. 이것은 그의 사용을 덜 직관적이게 하며, 따라서 터치 스크린과 비교할 때 더 어렵다. 터치 스크린인 것에 부가하여, 입력장치(170)는 다중점 입력장치일 수 있다.
제어부(190)는 입력장치(170)에 가해지는 제스처(171)를 인식하고 인식한 제스처(171)에 기초하여 전자 장치(100)를 제어할 수 있다. 여기서, 제스처는 터치 제스처와 공간 제스처를 포함할 수 있다. 터치 제스처는 하나 이상의 특정의 컴퓨팅 동작에 매핑되는, 입력장치(170)와의 양식화된 상호작용으로서 정의될 수 있다. 제스처(171)는 여러 가지 손을 통해, 보다 상세하게는 손가락 움직임을 통해 행해질 수 있다. 다른 대안으로서 또는 그에 부가하여, 제스처는 스타일러스로 행해질 수 있다.
입력장치(170)는 제스처(171)를 수신하고, 제어부(190)는 제스처(171)와 연관된 동작들을 수행하는 명령어들을 실행한다. 게다가, 저장부(180)는 운영 체제 또는 별도의 애플리케이션의 일부일 수 있는 제스처 작동 프로그램(181)을 포함할 수 있다. 제스처 작동 프로그램(181)은 일반적으로 제스처(171)의 발생을 인식하고 그 제스처(171) 및/또는 제스처(171)에 응답하여 무슨 조치(들)이 취해져야 하는지를 하나 이상의 소프트웨어 에이전트에게 알려주는 일련의 명령어를 포함한다.
사용자가 하나 이상의 제스처를 행할 때, 입력장치(170)는 제스처 정보를 제어부(190)로 전달한다. 저장부(180)로부터의 명령어, 보다 상세하게는 제스처 작동 프로그램(181)을 사용하여, 제어부(190)는 제스처(171)를 해석하고 저장부(180), 디스플레이(150), 음성 출력부(160), 신호 처리부(140), 네트워크 인터페이스부(130) 및 입력장치(170) 등의 전자 장치(100)의 서로 다른 컴포넌트를 제어한다. 제스처(171)는 저장부(180)에 저장된 애플리케이션에서의 동작을 수행하고, 디스플레이(150) 상에 나타난 GUI 객체를 수정하며, 저장부(180)에 저장된 데이터를 수정하고, 네트워크 인터페이스부(130), 신호 처리부(140)에서의 동작을 수행하는 명령으로서 식별될 수 있다. 예로서, 이들 명령은 줌잉, 패닝, 스크롤링, 페이지 넘김, 회전, 크기조정, 영상 채널 변경, 컨텐츠 수신, 인터넷 접속 등과 연관되어 있을 수 있다. 추가의 예로서, 명령은 또한 특정의 프로그램을 기동시키는 것, 파일 또는 문서를 여는 것, 메뉴를 보는 것, 선택을 하는 것, 명령어를 실행하는 것, 인터넷 사이트 시스템에 로그온하는 것, 인가된 개인에게 컴퓨터 시스템의 제한된 영역에의 액세스를 허용하는 것, 바탕화면의 사용자 선호 배열과 연관된 사용자 프로파일을 로드하는 것, 및/또는 기타 등등과 연관되어 있을 수 있다.
광범위한 서로 다른 제스처가 이용될 수 있다. 예로서, 제스처는 단일점(single point) 또는 다중점(multipoint) 제스처, 정적 또는 동적 제스처, 연속적(continuous) 또는 구분된(segmented) 제스처, 및/또는 기타 등등일 수 있다. 단일점 제스처는 단일의 접촉점으로 수행되는 제스처이다. 예를 들어, 이 제스처는 예를 들어 하나의 손가락, 손바닥 또는 스타일러스 등의 객체와의 단일의 터치로 수행된다. 다중점 제스처는 다수의 점으로 수행될 수 있는 제스처이다, 예를 들어, 이 제스처는 예를 들어 다수의 손가락, 손가락과 손바닥, 손가락과 스타일러스, 다수의 스타일러스 및/또는 이들의 임의의 조합으로부터와 같이 다수의 터치로 수행된다. 정적 제스처는 움직임을 포함하지 않는 제스처이고, 동적 제스처는 움직임을 포함하는 제스처이다. 연속적 제스처는 단일의 스트로크로 수행되는 제스처이고, 구분된 제스처는 별개의 스텝 또는 스트로크의 시퀀스로 수행되는 제스처이다.
객체와 터치 스크린의 접촉은 통상적으로 여러 상이한 패턴을 갖는다. 예를 들어, 터치 스크린 상에서의 단일점 제스처는 다운 이벤트(down event) 및 그에 뒤이은 다운 이벤트와 동일한 위치 또는 거의 동일한 위치에서의 업 이벤트(up event)를 포함한다. 터치 스크린 상에서의 동적 제스처는 다운 이벤트와 그에 뒤이은 적어도 하나의 드래깅 이벤트(dragging event), 그리고 그 다음에 오는 업 이벤트를 포함한다.
일부 실시예들에서, 손가락이 터치 스크린 디스플레이에 접근하고, 터치 스크린 디스플레이와 접촉하며, 터치 스크린 디스플레이로부터 멀어져가는 프로세스를 기술하기 위해 파라미터가 사용된다. 이 파라미터는 손가락과 터치 스크린 디스플레이 간의 거리, 손가락이 터치 스크린 디스플레이를 누르는 압력, 손가락과 터치 스크린 간의 접촉 면적, 손가락과 터치 스크린 간의 전압, 손가락과 터치 스크린 디스플레이 간의 커패시턴스, 또는 물리 파라미터들 중 적어도 하나의 함수일 수 있다.
일부 실시예들에서, 손가락과 터치 스크린 디스플레이 간의 파라미터(예를 들어, 커패시턴스)의 크기에 따라, 이 파라미터가 미리 정해진 문턱값을 넘을 때, 다운 이벤트가 일어나고, 이 파라미터가 미리 정해진 문턱값을 넘고 있는 동안에 손가락의 대응하는 커서 위치가 위치 A로부터 위치 B로 이동할 때, 드래깅 이벤트가 일어나며, 이 파라미터가 문턱값 레벨 아래로 떨어질 때 업 이벤트가 일어난다.
제어부(190)는 메뉴 구성 모드 전환 명령, 메뉴 모드 전환 명령, 메뉴 생성 객체 선택 명령, 메뉴 생성 객체 이동 명령, 메뉴 생성 객체 드롭 명령, 메뉴 생성 객체 위치 지정 명령, 메뉴 객체 선택 명령, 메뉴 객체 이동 명령, 메뉴 객체 드롭 명령 및 메뉴 객체 위치 지정 명령 각각을 연관된 제스처로부터 감지할 수 있다.
제어부(190)는 메뉴 생성 객체가 위치한 영역에서 다운 이벤트를 감지한 경우에는, 메뉴 생성 객체 선택 명령을 감지할 수 있고, 메뉴 객체가 위치한 영역에서 다운 이벤트를 감지한 경우에는, 메뉴 객체 선택 명령을 감지할 수 있다. 또한 제어부(190)는 메뉴 객체 또는 메뉴 생성 객체가 선택된 후에 드래깅 이벤트가 감지되면 메뉴 객체 이동 명령 또는 메뉴 생성 객체 이동 명령을 감지할 수 있다. 그리고 제어부(190)는 메뉴 객체 이동 명령 또는 메뉴 생성 객체 이동 명령을 감지한 후에 업 이벤트를 감지하면 메뉴 객체 드롭 명령 및 메뉴 생성 객체 드롭 명령을 감지할 수 있다.
제어부(190)는 메뉴 생성 객체 선택 명령 감지 후에, 다운 이벤트 및 그에 뒤이은 업 이벤트를 감지하면 메뉴 생성 객체 위치 지정 명령을 감지할 수 있다. 또한 제어부(190)는 메뉴 객체 선택 명령 감지 후에, 다운 이벤트 및 그에 뒤이은 업 이벤트를 감지하면 메뉴 객체 위치 지정 명령을 감지할 수 있다.
제어부(190)는 메뉴 모드에서 객체와 터치 스크린의 접촉이 일정 시간 이상 계속되면 메뉴 구성 모드 전환 명령을 감지할 수 있다. 또한 제어부(190)는 메뉴 구성 모드에서 객체와 터치 스크린의 접촉이 일정 시간 이상 계속되면 메뉴 모드 전환 명령을 감지할 수 있다. 여기서 접촉이 일어나는 영역은 메뉴 객체, 메뉴 생성 객체, 서비스 페이지가 디스플레이되지 않은 영역일 수 있다.
메뉴 구성 모드 전환 명령이 감지된 경우에는, 제어부(190)는 화면에 메뉴 생성 객체가 디스플레이되도록 제어한다. 메뉴 객체는 연관되는 컴퓨팅 동작이 매핑된 것으로, 특정 서비스 페이지와 연관된다. 즉 메뉴 객체는 적어도 하나의 메뉴 항목을 나타낸다. 메뉴 생성 객체는 메뉴 객체를 생성하기 위한 객체로, 연관되는 컴퓨팅 동작이 매핑되지 않은 객체이고 특정 서비스 페이지와 연관되지 않은 객체이다.
외부 신호 수신부(135)는 외부 장치와 전자 장치(100)를 연결할 수 있는 인터페이스를 제공할 수 있다. 여기서 외부 장치는 DVD(Digital Versatile Disk), 블루레이(Bluray), 게임기기, 켐코더, 컴퓨터(노트북) 등 다양한 종류의 영상 또는 음성 출력 장치를 의미할 수 있고, USB 메모리 또는 USB 하드 디스크 등의 저장 장치일 수 있다. 전자 장치(100)는 외부 신호 수신부(135)로부터 수신된 영상 신호 및 음성 신호가 디스플레이되도록 제어할 수 있고, 데이터 신호를 저장하거나 사용할 수 있다.
또한 외부 장치는 촬영 장치(90)일 수 있다. 촬영 장치(90)는 복수의 카메라를 포함할 수 있다. 촬영 장치(90)는 사람을 촬상할 수 있다. 촬영 장치(90)는 사람의 손 영역을 인식하여 손 영역에 초점을 맞추고, 줌인하여 촬상할 수 있다. 여기서 촬상된 손 모양은 공간 제스처로 인식될 수 있다. 즉 제어부(190)는 촬상된 손 모양을 공간 제스처로 인식하고 인식된 공간 제스처 연관된 동작들을 수행하는 명령어들을 실행할 수 있다. 여기서 공간 제스처는 하나 이상의 특정의 컴퓨팅 동작에 매핑되는, 촬영 장치(90)로부터 수신되는 영상 프레임 또는 영상으로부터 인식되는 제스처로 정의될 수 있다.
도 2는 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면이다.
도 2를 참조하면, 디스플레이(150)는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이한다(S100).
도 3은 메인 메뉴가 디스플레이된 일실시예의 화면을 도시한 도면이다.
도 3을 참조하면, 디스플레이(150)는 S100단계에서 화면(300)을 디스플레이할 수 있다. 화면(300)은 메인 메뉴가 디스플레이된 화면인 메인 메뉴 화면이다. 메인 메뉴 화면은 부팅 완료 후에 초기 화면으로 디스플레이될 수 있고, 메뉴 요청 명령이 감지된 경우에 디스플레이될 수 있고, 메뉴 모드 전환 명령이 감지된 경우에 디스플레이될 수 있다.
화면(300)은 메뉴 객체(311, 312, 313, 314, 315, 316, 317, 318) 및 서비스 페이지가 위치하는 영역(320)을 디스플레이한다. 여기서 메뉴 객체(311, 312, 313, 314, 315, 316, 317, 318)는 특정 서비스 페이지에 위치한다. 메뉴 객체(311)는 서비스 페이지(321)에 위치하고, 메뉴 객체(312)는 서비스 페이지(322)에 위치하며, 메뉴 객체(318)는 서비스 페이지(328)에 위치한다.
메뉴 객체(311, 312, 313, 314, 315, 316, 317, 318)는 일부 영역이 메뉴 객체가 위치하는 서비스 페이지상에 붙어 있다. 도시되지 않았으나, 메뉴 객체의 전 영역이 메뉴 객체가 위치하는 서비스 페이지상에 붙어 있을 수 있다.
화면(300)에서와 같이 메뉴 객체는 견출지 모양으로 디스플레이될 수 있고 복수의 서비스 페이지는 서로 일부 영역이 겹쳐져서 디스플레이될 수 있다.
제어부(190)는 손이 촬상된 영상 프레임을 획득한다(S105). 여기서 획득되는 영상 프레임은 촬영 장치(130)가 촬상한 영상 프레임일 수 있다. 즉 제어부(190)는 촬영 장치(130)로부터 영상 프레임을 획득할 수 있다.
제어부(190)는 획득한 영상 프레임을 이용하여 제스처 사용에 사용되는 손을 확인한다(S110). 여기서 제어부(190)는 상기 손이 왼손인지 오른손인지 확인한다. 또한 제스처는 공간 제스처 또는 터치 제스처일 수 있다.
제어부(190)는 획득한 영상 프레임에서 손영역을 추출하여 손모양의 외곽선을 얻을 수 있다. 그리고 제어부(190)는 상기 얻은 외곽선과 저장부(180)에 저장된 손모양의 외곽선들을 비교할 수 있고 상기 저장된 손모양의 외곽선들 중 상기 얻은 외곽선과 가장 유사도가 높은 손모양의 외곽선을 선택할 수 있다. 제어부(190)는 상기 선택한 손모양의 외곽선이 나타내는 손을 상기 제스처 사용에 사용되는 손으로 확인할 수 있다.
제어부(190)는 단계 S110의 확인 결과에 따라 단계 S100에서 디스플레이된 서비스 페이지 및 메뉴 객체의 위치를 변경한다(S115). 제어부(190)는 단계 S110의 확인 결과에 따라 서비스 페이지상에 붙는 메뉴 객체의 영역을 변경할 수 있고, 서비스 페이지가 서로 겹쳐지는 영역을 변경할 수 있다.
제스처 입력에 사용되는 손이 오른손으로 확인된 경우에는, 제어부(190)는 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 또한 제스처 입력에 사용되는 손이 왼손으로 확인된 경우에는, 제어부(190)는 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 여기서 오른손용으로 지정된 위치 및 왼손용으로 지정된 위치는 사용자 설정 명령에 따라 변경될 수 있다.
도 4는 메인 메뉴가 디스플레이된 다른 실시예의 화면을 도시한 도면이다.
도 4를 참조하면, 제스처 입력에 사용되는 손이 왼손(401)으로 확인된 경우에는, 디스플레이(150)는 단계 S115에서 화면(400)을 디스플레이할 수 있다. 화면(400)은 서비스 영역(420)의 왼쪽 측면과 화면(400)의 왼쪽 끝면 사이는 여백 영역을 존재한다. 또한 화면(400)에서 서비스 페이지(422)의 오른쪽 측면이 서비스 페이지(421)와 겹쳐진다.
또한 메뉴 객체(411, 412, 413, 414, 415, 416, 417, 418)는 오른쪽 측면의 일부 영역이 서비스 페이지와 붙도록 디스플레이된다. 메뉴 객체(411)의 오른쪽 측면의 일부 영역은 서비스 페이지(421)에 붙어서 디스플레이되고, 메뉴 객체(412)의 오른쪽 측면의 일부 영역은 서비스 페이지(422)에 붙어서 디스플레이된다. 또한 메뉴 객체(418)의 오른쪽 측면의 일부 영역은 서비스 페이지(428)에 붙어서 디스플레이된다. 여기서, 메뉴 객체(411, 412, 413, 414, 415, 416, 417, 418)는 각각 도 3의 메뉴 객체(311, 312, 313, 314, 315, 316, 317, 318)와 대응하고, 서비스 페이지(421, 422, 428)는 각각 도 3의 서비스 페이지(321, 322, 328)과 대응한다.
도 5는 메인 메뉴가 디스플레이된 또 다른 실시예의 화면을 도시한 도면이다.
도 5를 참조하면, 제스처 입력에 사용되는 손이 오른손(501)으로 확인된 경우에는, 디스플레이(150)는 단계 S115에서 화면(500)을 디스플레이할 수 있다. 화면(500)은 서비스 영역(520)의 오른쪽 측면과 화면(500)의 오른쪽 끝면 사이는 여백 영역을 존재한다. 화면(500)에서 서비스 페이지(522)의 왼쪽 측면이 서비스 페이지(521)와 겹쳐진다.
또한 메뉴 객체(511, 512, 513, 514, 515, 516, 517, 518)는 왼쪽 측면의 일부 영역이 서비스 페이지와 붙도록 디스플레이된다. 메뉴 객체(511)의 왼쪽 측면의 일부 영역은 서비스 페이지(521)에 붙어서 디스플레이되고, 메뉴 객체(512)의 왼쪽 측면의 일부 영역은 서비스 페이지(522)에 붙어서 디스플레이된다. 또한 메뉴 객체(518)의 왼쪽 측면의 일부 영역은 서비스 페이지(528)에 붙어서 디스플레이된다. 여기서, 메뉴 객체(511, 512, 513, 514, 515, 516, 517, 518)는 각각 도 3의 메뉴 객체(311, 312, 313, 314, 315, 316, 317, 318)와 대응하고, 서비스 페이지(521, 522, 528)는 각각 도 3의 서비스 페이지(321, 322, 328)과 대응한다.
일부 실시예로, 단계 S100이 이전에 단계 S105 및 S110가 진행되고, 단계 S100에서 단계 S110의 확인 결과에 따라 디스플레이부(150)는 화면(400) 또는 화면(500)을 디스플레이할 수 있다.
제어부(190)는 메뉴 구성 모드 전환 명령이 감지되었는지 여부를 확인한다(S120). 메뉴 구성 모드 전환 명령은 터치 제스처뿐만 아니라 공간 제스처로 인식될 수 있다.
도 6은 사용자 제스처가 인식된 화면의 일실시예를 도시한 도면이고, 도 7은 사용자 제스처가 인식된 화면의 다른 실시예를 도시한 도면이다.
도 6 및 도 7을 참조하면, 메뉴 모드 상태에서 공간 제스처(600)가 인식되면 제어부(190)는 메뉴 구성 모드 전환 명령이 감지된 것으로 확인할 수 있다. 또한 메뉴 구성 모드 상태에서 공간 제스처(700)가 인식되면, 제어부(190)는 메뉴 모드 전환 명령이 감지된 것으로 확인할 수 있다.
메뉴 구성 모드 전환 명령이 감지된 경우에는, 디스플레이(150)는 상기 화면에 메뉴 생성 객체를 디스플레이한다(S125). 여기서 제어부(190)는 단계 S110의 확인 결과에 따라 지정된 위치에 메뉴 생성 객체가 디스플레이되도록 제어할 수 있다.
도 8은 메뉴 생성 객체가 디스플레이된 일실시예의 화면을 도시한 도면이다.
도 8을 참조하면, 제스처에 사용되는 손이 왼손(801)로 확인된 경우에는, 디스플레이(150)는 단계 S125에서 화면(800)을 디스플레이할 수 있다. 화면(800)은 서비스 페이지가 위치하는 영역(820), 메뉴 객체(811, 812, 813, 814, 815, 816, 817, 818) 및 메뉴 생성 객체(821, 822, 823)를 디스플레이한다. 여기서 메뉴 생성 객체(821, 822, 823)는 서비스 페이지(820)의 왼쪽 측면과 화면(800)의 왼쪽 끝면 사이의 영역에 디스플레이된다. 이에 따라 본 발명에 따른 전자 장치는 사용자로 하여금 제스처에 사용되는 손(801)으로 화면 가림 없이 용이하게 메뉴 생성 객체를 선택 및 서비스 페이지(820)로 드래그할 수 있다.
메뉴 생성 객체(821, 822, 823)는 견출지 모양으로 디스플레이된다. 추가하여, 메뉴 객체와 메뉴 생성 객체를 동일한 모양으로 디스플레이될 수 있다. 또한 메뉴 생성 객체(821, 822, 823)는 각각 서로 다른 색으로 디스플레이될 수 있다.
도 9는 메뉴 생성 객체가 디스플레이된 다른 실시예의 화면을 도시한 도면이다.
도 9를 참조하면, 제스처에 사용되는 손이 오른손(901)로 확인된 경우에는, 디스플레이(150)는 단계 S125에서 화면(900)을 디스플레이할 수 있다. 화면(900)은 서비스 페이지가 위치하는 영역(920), 메뉴 객체(911, 912, 913, 914, 915, 916, 917, 918) 및 메뉴 생성 객체(921, 922, 923)를 디스플레이한다. 여기서 메뉴 생성 객체(921, 922, 923)는 서비스 페이지(920)의 오른쪽 측면과 화면(900)의 오른쪽 끝면 사이의 영역에 디스플레이된다. 이에 따라 본 발명에 따른 전자 장치는 사용자로 하여금 제스처에 사용되는 손(901)으로 화면 가림 없이 용이하게 메뉴 생성 객체를 선택 및 서비스 페이지(920)로 드래그할 수 있다.
메뉴 생성 객체(921, 922, 923)는 견출지 모양으로 디스플레이된다. 추가하여, 메뉴 객체와 메뉴 생성 객체를 동일한 모양으로 디스플레이될 수 있다. 또한 메뉴 생성 객체(921, 922, 923)는 각각 서로 다른 색으로 디스플레이될 수 있다.
제어부(190)는 메뉴 생성 객체 선택 명령이 감지되었는지 여부를 확인한다(S130).
메뉴 생성 객체 선택 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 선택 명령이 지시하는 메뉴 생성 객체를 선택한다(S135). 여기서 선택된 메뉴 생성 객체는 화면(800)의 메뉴 생성 객체(823) 또는 화면(900)의 메뉴 생성 객체(923)와 같이 선택된 사실을 표시하기 위한 표시가 디스플레이될 수 있다.
제어부(190)는 메뉴 생성 객체 이동 명령이 감지되었는지 여부를 확인한다(S140).
메뉴 생성 객체 이동 명령이 감지된 경우에는, 제어부(190)는 감지된 메뉴 생성 객체 이동 명령에 따라 상기 메뉴 생성 객체를 이동시킨다(S145).
도 10은 메뉴가 생성되는 일실시예의 과정 중 하나의 화면을 도시한 도면이다.
도 10을 참조하면, 제스처에 사용되는 손이 왼손(1001)으로 확인된 경우에는, 단계 S145이 수행되는 과정 중에 디스플레이(150)는 화면(1000)을 디스플레이할 수 있다. 메뉴 생성 객체 이동 명령에 따라 이동되는 메뉴 생성 객체는 화면(1000)의 메뉴 생성 객체(1030)와 같이 이동된 위치에 디스플레이될 수 있다. 메뉴 생성 객체(1030)는 왼쪽에서 오른쪽으로 드래그됨으로, 사용자는 메뉴 생성 객체(1030)를 왼손(1001)으로 편하게 드래그할 수 있다. 화면(1000)의 메뉴 생성 객체(823)와 같이 선택된 메뉴 생성 객체를 표시하기 위한 표시가 계속해서 디스플레이될 수 있다.
도 11은 메뉴가 생성되는 일실시예의 과정 중 다른 하나의 화면을 도시한 도면이다.
도 11을 참조하면, 제스처에 사용되는 손이 왼손(1101)으로 확인된 경우에는, 단계 S145이 수행되는 과정 중에 디스플레이(150)는 화면(1100)을 디스플레이할 수 있다. 메뉴 생성 객체 이동 명령에 따라 이동되는 메뉴 생성 객체는 화면(1100)의 메뉴 생성 객체(1130)와 같이 이동된 위치에 디스플레이될 수 있다. 메뉴 생성 객체(1130)는 왼쪽에서 오른쪽으로 드래그됨으로, 사용자는 메뉴 생성 객체(1130)를 왼손(1101)으로 편하게 드래그할 수 있다. 화면(1100)의 메뉴 생성 객체(923)와 같이 선택된 메뉴 생성 객체를 표시하기 위한 표시가 계속해서 디스플레이될 수 있다.
제어부(190)는 메뉴 생성 객체 드롭 명령이 감지되었는지 여부를 확인한다(S150).
메뉴 생성 객체 드롭 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 드롭 명령이 특정 서비스 페이지를 지시하는지 여부를 확인한다(S155). 여기서 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지는 메뉴 생성 객체 드롭 명령과 매핑하는 제스처에 포함된 업 이벤트가 발생된 지점에 위치하는 서비스 페이지일 수 있다. 만일 특정 서비스 페이지를 지시하지 않으면, 메뉴 생성 객체가 선택되기 전의 화면이 디스플레이될 수 있다.
메뉴 생성 객체 드롭 명령이 특정 서비스 페이지를 지시하는 경우에는, 제어부(190)는 상기 이동된 메뉴 생성 객체를 상기 메뉴 생성 객체 드롭 명령이 감지된 서비스 페이지상에 붙인다(S160).
도 12는 메뉴가 생성되는 일실시예의 과정 중 또 다른 하나의 화면을 도시한 도면이다.
도 12를 참조하면, 제스처에 사용되는 손이 왼손(1201)인 경우에는, 디스플레이(190)는 단계 S160에서 화면(1200)과 같이 이동된 메뉴 생성 객체가 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지에 붙은 화면을 디스플레이할 수 있다. 화면(1200)은 이동된 메뉴 생성 객체(1230)가 서비스 페이지(1221)에 붙은 상태를 디스플레이한다. 메뉴 생성 객체(1230)의 우측 영역이 서비스 페이지(1221)에 붙는다.
도 13은 메뉴가 생성되는 일실시예의 과정 중 또 다른 하나의 화면을 도시한 도면이다.
도 13을 참조하면, 제스처에 사용되는 손이 오른손(1301)인 경우에는, 디스플레이(190)는 단계 S160에서 화면(1300)과 같이 이동된 메뉴 생성 객체가 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지에 붙은 화면을 디스플레이할 수 있다. 화면(1300)은 이동된 메뉴 생성 객체(1330)가 서비스 페이지(1321)에 붙은 상태를 디스플레이한다. 메뉴 생성 객체(1330)의 좌측 영역이 서비스 페이지(1321)에 붙는다.
제어부(190)는 상기 메뉴 생성 객체에 대한 메뉴명 입력을 활성화한다(S165). 화면(1200) 또는 화면(1300)과 같이, 사용자는 메뉴 생성 객체(1330)의 영역 상에 특정 글자는 적는 방식으로 생성할 메뉴 객체의 메뉴명을 입력할 수 있다. 여기서 사용자는 화면(1200)과 같이 오른쪽에서 왼쪽 방향으로 메뉴명을 입력할 수 있고, 사용자는 화면(1300)과 같이 왼쪽에서 오른쪽 방향으로 메뉴명을 입력할 수 있다. 일부 실시예로, 사용자는 제스처에 사용되는 손별로 글자 입력 방식을 사전에 설정할 수 있고, 제어부(190)는 설정된 글자 입력 방식으로 입력되는 글자를 인식할 수 있다.
제어부(190)는 메뉴명 입력이 완료되었는지 여부를 확인한다(S170). 여기서, 입력여부는 다운 이벤트로 확인할 수 있고, 입력 완료 여부는 업 이벤트가 발생한 후 소정의 시간동안 다운 이벤트가 발생하지 않았는지를 판단하여 확인할 수 있다. 즉 제어부(190)는 소정의 시간동안 다운 이벤트가 발생하지 않았다면 메뉴명의 입력이 완료된 것으로 처리할 수 있다.
상기 메뉴명이 입력된 경우에는, 디스플레이(150)는 입력된 메뉴명을 메뉴 생성 객체 상에 디스플레이하고, 제어부(190)는 상기 메뉴 생성 객체를 메뉴 객체로 인식한다(S175). 입력된 메뉴명이 디스플레이된 일예로 , 화면(1200)의 메뉴 객체(1230) 또는 화면(1300)의 메뉴 객체(1230)는 메뉴명으로 "ideation"를 갖는다. 메뉴명이 오른쪽에서 왼쪽으로 입력되어 "noitaedi"으로 쓰여진 경우에는, 제어부(190)는 상기 순서를 변경하여 "ideation"으로 디스플레이되도록 제어할 수 있다.
도 14는 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면이다.
도 14를 참조하면, 디스플레이(150)는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이한다(S200). 여기서 디스플레이(150)는 도 3에 도시된 화면(300)을 디스플레이할 수 있다.
제어부(190)는 손이 촬상된 영상 프레임을 획득한다(S210). 여기서 획득되는 영상 프레임은 촬영 장치(130)가 촬상한 영상 프레임일 수 있다. 즉 제어부(190)는 촬영 장치(130)로부터 영상 프레임을 획득할 수 있다.
제어부(190)는 획득한 영상 프레임을 이용하여 제스처 사용에 사용되는 손을 확인한다(S220). 여기서 제어부(190)는 상기 손이 왼손인지 오른손인지 확인한다. 또한 제스처는 공간 제스처 또는 터치 제스처일 수 있다.
제어부(190)는 획득한 영상 프레임에서 손영역을 추출하여 손모양의 외곽선을 얻을 수 있다. 그리고 제어부(190)는 상기 얻은 외곽선과 저장부(180)에 저장된 손모양의 외곽선들을 비교할 수 있고 상기 저장된 손모양의 외곽선들 중 상기 얻은 외곽선과 가장 유사도가 높은 손모양의 외곽선을 선택할 수 있다. 제어부(190)는 상기 선택한 손모양의 외곽선이 나타내는 손을 상기 제스처 사용에 사용되는 손으로 확인할 수 있다.
제어부(190)는 단계 S210의 확인 결과에 따라 단계 S200에서 디스플레이된 서비스 페이지 및 메뉴 객체의 위치를 변경한다(S230). 제어부(190)는 단계 S220의 확인 결과에 따라 서비스 페이지상에 붙는 메뉴 객체의 영역을 변경할 수 있고, 복수의 서비스 페이지가 서로 겹쳐지는 영역을 변경할 수 있다.
제스처 입력에 사용되는 손이 오른손으로 확인된 경우에는, 제어부(190)는 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 여기서 디스플레이부(150)는 화면(500)을 디스플레이할 수 있다. 또한 제스처 입력에 사용되는 손이 왼손으로 확인된 경우에는, 제어부(190)는 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 여기서 디스플레이부(150)는 화면(400)을 디스플레이할 수 있다.
일부 실시예로, 단계 S200이 이전에 단계 S210 및 S220가 진행되고, 단계 S200에서 단계 S210의 확인 결과에 따라 디스플레이부(150)는 화면(400) 또는 화면(500)을 디스플레이할 수 있다.
제어부(190)는 메뉴 구성 모드 전환 명령이 감지되었는지 여부를 확인한다(S240). 메뉴 구성 모드 전환 명령은 터치 제스처뿐만 아니라 공간 제스처로 인식될 수 있다. 여기서 공간 제스처(600)가 인식되면, 제어부(190)는 메뉴 구성 모드 전환 명령이 감지된 것으로 확인할 수 있다. 또한 메뉴 구성 모드 상태에서 공간 제스처(700)가 인식되면, 제어부(190)는 메뉴 모드 전환 명령이 감지된 것으로 확인할 수 있다.
메뉴 구성 모드 전환 명령이 감지된 경우에는, 디스플레이(150)는 상기 화면에 메뉴 생성 객체를 디스플레이한다(S250).
도 15는 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면이다.
도 15를 참조하면, 제스처에 사용되는 손이 왼손(1501)으로 확인된 경우에는, 디스플레이(150)는 단계 S250에서 화면(1500)을 디스플레이할 수 있다. 화면(1500)은 서비스 페이지, 메뉴 객체 및 메뉴 생성 객체(1510, 1520, 1530, 1540, 1550)를 디스플레이한다. 메뉴 생성 객체(1510, 1520, 1530, 1540, 1550)는 각각 메뉴명 'picture', 'mail', 'diary', 'game' 및 'dictionary'을 포함한다. 또한 메뉴 생성 객체(1510, 1520, 1530, 1540, 1550)는 서비스 페이지(1560)의 왼쪽 측면과 화면(1500)의 왼쪽 끝면 사이의 영역에 디스플레이된다.
도 16은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면이다.
도 16을 참조하면, 제스처에 사용되는 손이 오른손(1601)으로 확인된 경우에는, 디스플레이(150)는 단계 S250에서 화면(1600)을 디스플레이할 수 있다. 화면(1600)은 서비스 페이지, 메뉴 객체 및 메뉴 생성 객체(1610, 1620, 1630, 1640, 1650)를 디스플레이한다. 메뉴 생성 객체(1610, 1620, 1630, 1640, 1650)는 각각 메뉴명 'picture', 'mail', 'diary', 'game' 및 'dictionary'을 포함한다. 또한 메뉴 생성 객체(1610, 1620, 1630, 1640, 1650)는 서비스 페이지(1660)의 오른 측면과 화면(1600)의 오른쪽 끝면 사이의 영역에 디스플레이된다.
제어부(190)는 메뉴 생성 객체 선택 명령이 감지되었는지 여부를 확인한다(S260).
메뉴 생성 객체 선택 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체를 선택한다(S270).
도 17은 메뉴가 생성되는 다른 실시예의 과정 중 하나의 화면을 도시한 도면이다.
도 17을 참조하면, 제스처에 사용되는 손이 왼손(1701)로 확인된 경우에는, 디스플레이(150)는 단계 S270에서 화면(1700)을 디스플레이할 수 있다. 화면(1700)에서 선택된 메뉴 생성 객체(1540)에는 선택된 사실을 표시하기 위한 표시가 디스플레이된다.
도 18은 메뉴가 생성되는 다른 실시예의 과정 중 다른 하나의 화면을 도시한 도면이다.
도 18을 참조하면, 제스처에 사용되는 손이 오른손(1801)로 확인된 경우에는, 디스플레이(150)는 단계 S270에서 화면(1800)을 디스플레이할 수 있다. 화면(1800)에서 선택된 메뉴 생성 객체(1640)에는 선택된 사실을 표시하기 위한 표시가 디스플레이된다.
제어부(190)는 메뉴 생성 객체 위치 지정 명령이 감지되었는지 여부를 확인한다(S280).
메뉴 생성 객체 위치 지정 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 위치 지정 명령이 지시하는 서비스 페이지상에 메뉴 생성 객체를 붙인다(S290).
도 19는 메뉴가 생성되는 다른 실시예의 과정 중 또 다른 하나의 화면을 도시한 도면이다.
도 19를 참조하면, 제스처에 사용되는 손이 왼손으로 확인된 경우에는, 디스플레이(150)는 단계 S290에서 화면(1900)을 디스플레이할 수 있다. 화면(1900)은 서비스 페이지(1901) 상에 붙여진 메뉴 객체(1940)를 디스플레이한다. 여기서 메뉴 객체(1940)는 메뉴 생성 객체(1540)가 서비스 페이지(1901)에 붙어서 생성된 것이다. 또한 메뉴 생성 객체(1540)의 우측 영역이 서비스 페이지(1901)에 붙는다.
도 20은 메뉴가 생성되는 다른 실시예의 과정 중 또 다른 하나의 화면을 도시한 도면이다.
도 20을 참조하면, 제스처에 사용되는 손이 오른손으로 확인된 경우에는, 디스플레이(150)는 단계 S290에서 화면(2000)을 디스플레이할 수 있다. 화면(2000)은 서비스 페이지(2001) 상에 붙여진 메뉴 객체(2040)를 디스플레이한다. 여기서 메뉴 객체(2040)는 메뉴 생성 객체(1640)가 서비스 페이지(2001)에 붙어서 생성된 것이다. 또한 메뉴 생성 객체(1640)의 좌측 영역이 서비스 페이지(1901)에 붙는다.
도 21은 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면이다.
도 21을 참조하면, 디스플레이(150)는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이한다(S300). 여기서 디스플레이(150)는 화면(300)을 디스플레이할 수 있다.
접촉 검출부(195)는 접촉 지점을 검출한다(S305). 여기서 접촉 검출부(195)는 사용자가 전자 장치(100)를 파지함으로써 발생되는 다수의 터치 지점을 검출할 수 있다.
도 22는 본 발명에 따른 전자 장치의 좌측 측면도 및 우측 측면도의 일예를 도시한 도면이다.
도 22를 참조하면, 좌측면도(2210)는 전자 장치(100)의 좌측면의 일예이고, 우측면도(2220)는 전자 장치(100)의 우측면의 일예이다. 접촉 검출부(195)는 좌측면(2210)에 구비되는 제1 접촉 검출부(2211) 및 우측면(2220)에 구비되는 제2 접촉 검출부(2221)를 포함할 수 있다. 일부 실시예로, 제1 접촉 검출부(2211) 및 제2 접촉 검출부(2221)는 각각 하나의 단일 센서로 전자 장치(100)의 양측면에 구비될 수 있다. 이 경우, 제1 접촉 검출부(2211) 및 제2 접촉 검출부(2221)는 다수의 터치 지점을 검출하는 멀티 터치 센서로 구현될 수 있고, 접촉 검출부(195)를 터치하는 하나 이상의 터치 지점의 좌표 또는 개수 등을 검출할 수 있다.
사용자가 왼손 또는 오른손으로 전자 장치(100)를 파지하면, 제1 접촉 검출부(2211) 및 제2 접촉 검출부(2221)는 각각 손이 접촉되는 지점의 좌표 또는 개수 등을 검출한다.
도 23 및 도 24는 본 발명에 따른 전자 장치가 파지된 모습을 도시한 도면이다.
도 23 및 도 24를 참조하면, 사용자는 양손 중 한 손을 이용하여 전자 장치(100)를 파지할 수 있다. 도 23은 사용자가 오른손으로 전자 장치(100)를 파지한 도면이고, 도 24는 사용자가 왼손으로 전자 장치(100)를 파지한 도면이다.
도 25는 접촉 검출부가 검출한 접촉 지점을 도시한 도면이다.
도 23과 같이 사용자가 오른손을 이용하여 전자 장치(100)를 파지한 경우에는, 접촉 검출부(195)는 도 25와 같이 접촉 지점을 검출할 수 있다. 제1 접촉 검출부(2211)는 다수의 접촉 지점(2510, 2520, 2530)을 검출할 수 있다. 여기서 접촉 지점(2510, 2520, 2530)은 각각 오른손의 검지, 중지, 약지 손가락에 의한 터치에 대응될 수 있다. 또한 사용자의 파지하는 방법의 차이에 따라, 제1 접촉 검출부(2211)는 세 개의 접촉 지점이 아닌 네 개의 접촉 지점을 검출할 수도 있다.
제2 접촉 검출부(2221)는 다수의 접촉 지점(2550, 2560)을 검출할 수 있다. 여기서 접촉 지점(2550, 2560)은 각각 사용자의 파지하는 손의 엄지 및 손바닥 중 엄지 손가락의 아래 부분에 위치한 부위에 의한 터치에 대응될 수 있다.
제어부(190)는 검출된 접촉 지점을 이용하여 전자 장치(100)를 파지하는 손을 확인한다(S310). 여기서 제어부(190)는 접촉 지점의 개수를 기초로 파지하는 손을 확인할 수 있다. 일예로, 제1 접촉 검출부(2211)가 검출한 접촉 지점의 개수와 제2 접촉 검출부(2221)가 검출한 접촉 지점의 개수를 비교하여, 제어부(190)는 보다 적은 접촉 지점을 검출한 쪽의 손을 파지하는 손으로 확인할 수 있다. 도 23의 경우에는, 도 25에서와 같이 제2 접촉 검출부(2221)가 적은 개수의 접촉 지점을 검출하였으므로, 제어부(190)는 사용자가 전자 장치(100)를 파지한 손이 오른손이라고 확인할 수 있다.
또한 제어부(190)는 접촉 지점의 면적을 기초로 파지한 손을 확인할 수 있다. 예를 들면, 제어부(190)는 큰 접촉 지점을 검출한 쪽의 손을 파지하는 손으로 확인할 수 있다. 도 23의 경우에는, 도 25에서와 같이 제2 접촉 검출부(2221)가 큰 접촉 지점(2560)을 검출하였으므로, 제어부(190)는 사용자가 전자 장치(100)를 파지한 손이 오른손이라고 확인할 수 있다.
제어부(190)는 단계 S310의 확인 결과에 따라 단계 S300에서 디스플레이된 서비스 페이지 및 메뉴 객체의 위치를 변경한다(S315). 제어부(190)는 단계 S310의 확인 결과에 따라 서비스 페이지상에 붙는 메뉴 객체의 영역을 변경할 수 있고, 서비스 페이지가 서로 겹쳐지는 영역을 변경할 수 있다.
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 제어부(190)는 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 또한 사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 제어부(190)는 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 여기서 사용자는 파지한 손에 따라 서비스 페이지 및 메뉴 객체의 지정 위치를 사전에 설정할 수 있고, 제어부(190)는 파지한 손의 확인 결과 및 설정된 지정 위치를 기초로 서비스 페이지 및 메뉴 객체의 위치를 변경할 수 있다. 이에 따라, 본 발명에 따른 전자 장치는 사용자의 사용 패턴에 맞추어 적절하게 메뉴의 위치 및 배치를 자동으로 조절할 수 있다.
만일 사용자가 파지하지 않은 손으로 제스처를 주로 행하는 경우에는, 파지한 손이 오른손이면 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되는 것이 상기 사용자에게 조작의 편리함을 주고, 파지한 손이 왼손이면 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되는 것이 상기 사용자에게 조작의 편리함을 준다.
만일 사용자가 파지한 손으로 제스처를 주로 행하는 경우에는, 파지한 손이 오른손이면 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되는 것이 상기 사용자에게 조작의 편리함을 주고, 파지한 손이 왼손이면 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되는 것이 상기 사용자에게 조작의 편리함을 준다.
도 23을 참조하면, 사용자가 전자 장치를 파지한 손이 오른손(2301)으로 확인된 경우에는, 디스플레이(150)는 단계 S315에서 화면(2300)을 디스플레이할 수 있다. 화면(2300)은 왼손 용 화면이며, 도 4의 화면(400)과 대응하며, 이하 구체적인 설명은 생략한다.
도 24를 참조하면, 사용자가 전자 장치를 파지한 손이 왼손(2401)으로 확인된 경우에는, 디스플레이(150)는 단계 S315에서 화면(2400)을 디스플레이할 수 있다. 화면(2400)은 오른손 용 화면이며, 도 3의 화면(300) 및 도 5의 화면(500)과 대응하며, 이하 화면(2400)에 대한 구체적인 설명은 생략한다.
일부 실시예로, 단계 S300이 이전에 단계 S305 및 S310가 진행되고, 단계 S300에서 단계 S310의 확인 결과에 따라 디스플레이부(150)는 화면(2300) 또는 화면(2400)을 디스플레이할 수 있다.
제어부(190)는 메뉴 구성 모드 전환 명령이 감지되었는지 여부를 확인한다(S320). 메뉴 구성 모드 전환 명령은 터치 제스처뿐만 아니라 공간 제스처로 인식될 수 있다. 여기서 공간 제스처(600)가 인식되면, 제어부(190)는 메뉴 구성 모드 전환 명령이 감지된 것으로 확인할 수 있다. 또한 메뉴 구성 모드 상태에서 공간 제스처(700)가 인식되면, 제어부(190)는 메뉴 모드 전환 명령이 감지된 것으로 확인할 수 있다.
메뉴 구성 모드 전환 명령이 감지된 경우에는, 디스플레이(150)는 상기 화면에 메뉴 생성 객체를 디스플레이한다(S325). 여기서 제어부(190)는 단계 S310의 확인 결과에 따라 지정된 위치에 메뉴 생성 객체가 디스플레이되도록 제어할 수 있다.
도 26은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면이다.
도 26을 참조하면, 사용자가 전자 장치를 파지한 손이 오른손(2601)으로 확인된 경우에는, 디스플레이(150)는 단계 S325에서 화면(2600)을 디스플레이할 수 있다. 화면(2600)은 화면(800)과 대응하는 하며, 이하 화면(2600)에 대한 구체적인 설명은 생략한다.
도 27은 메뉴 생성 객체가 디스플레이된 또 다른 실시예의 화면을 도시한 도면이다.
도 27을 참조하면, 사용자가 전자 장치를 파지한 손이 왼손(2701)으로 확인된 경우에는, 디스플레이(150)는 단계 S325에서 화면(2700)을 디스플레이할 수 있다. 화면(2700)은 화면(900)과 대응하는 하며, 이하 화면(2700)에 대한 구체적인 설명은 생략한다.
제어부(190)는 메뉴 생성 객체 선택 명령이 감지되었는지 여부를 확인한다(S330).
메뉴 생성 객체 선택 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 선택 명령이 지시하는 메뉴 생성 객체를 선택한다(S335). 여기서 화면(800)의 메뉴 생성 객체(823) 또는 화면(900)의 메뉴 생성 객체(923)와 같이 선택된 메뉴 생성 객체를 표시하기 위한 표시가 디스플레이될 수 있다.
제어부(190)는 메뉴 생성 객체 이동 명령이 감지되었는지 여부를 확인한다(S340).
메뉴 생성 객체 이동 명령이 감지된 경우에는, 제어부(190)는 감지된 메뉴 생성 객체 이동 명령에 따라 상기 메뉴 생성 객체를 이동시킨다(S345).
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 단계 S345가 수행되는 과정 중에 디스플레이(150)는 화면(1000)을 디스플레이할 수 있다. 메뉴 생성 객체 이동 명령에 따라 이동되는 메뉴 생성 객체는 화면(1000)의 메뉴 생성 객체(1030)와 같이 이동된 위치에 디스플레이될 수 있다.
사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 단계 S345이 수행되는 과정 중에 디스플레이(150)는 화면(1100)을 디스플레이할 수 있다. 메뉴 생성 객체 이동 명령에 따라 이동되는 메뉴 생성 객체는 화면(1100)의 메뉴 생성 객체(1130)와 같이 이동된 위치에 디스플레이될 수 있다.
제어부(190)는 메뉴 생성 객체 드롭 명령이 감지되었는지 여부를 확인한다(S350).
메뉴 생성 객체 드롭 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 드롭 명령이 특정 서비스 페이지를 지시하는지 여부를 확인한다(S355). 여기서 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지는 메뉴 생성 객체 드롭 명령과 매핑하는 제스처에 포함된 업 이벤트가 발생된 지점에 위치하는 서비스 페이지일 수 있다. 만일 특정 서비스 페이지를 지시하지 않으면, 메뉴 생성 객체가 선택되기 전의 화면이 디스플레이될 수 있다.
메뉴 생성 객체 드롭 명령이 특정 서비스 페이지를 지시하는 경우에는, 제어부(190)는 상기 이동된 메뉴 생성 객체를 상기 메뉴 생성 객체 드롭 명령이 감지된 서비스 페이지상에 붙인다(S360).
사용자가 전자 장치를 파지한 손이 오른손인 경우에는, 디스플레이(190)는 단계 S360에서 화면(1200)과 같이 이동된 메뉴 생성 객체가 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지에 붙은 화면을 디스플레이할 수 있다.
사용자가 전자 장치를 파지한 손이 왼손인 경우에는, 디스플레이(190)는 단계 S360에서 화면(1300)과 같이 이동된 메뉴 생성 객체가 메뉴 생성 객체 드롭 명령이 지시하는 서비스 페이지에 붙은 화면을 디스플레이할 수 있다.
제어부(190)는 상기 메뉴 생성 객체에 대한 메뉴명 입력을 활성화한다(S365). 화면(1200) 또는 화면(1300)과 같이, 사용자는 메뉴 생성 객체(1330)의 영역 상에 특정 글자는 적는 방식으로 생성할 메뉴 객체의 메뉴명을 입력할 수 있다. 여기서 사용자는 화면(1200)과 같이 오른쪽에서 왼쪽 방향으로 메뉴명을 입력할 수 있고, 사용자는 화면(1300)과 같이 왼쪽에서 오른쪽 방향으로 메뉴명을 입력할 수 있다. 일부 실시예로, 사용자는 제스처에 사용되는 손별로 글자 입력 방식을 사전에 설정할 수 있고, 제어부(190)는 설정된 글자 입력 방식으로 입력되는 글자를 인식할 수 있다.
제어부(190)는 메뉴명 입력이 완료되었는지 여부를 확인한다(S370). 여기서, 입력 여부는 다운 이벤트로 확인할 수 있고, 입력 완료 여부는 업 이벤트가 발생한 후 소정의 시간동안 다운 이벤트가 발생하지 않았는지를 판단하여 확인할 수 있다. 즉 제어부(190)는 소정의 시간동안 다운 이벤트가 발생하지 않았다면 메뉴명의 입력이 완료된 것으로 처리할 수 있다.
상기 메뉴명이 입력된 경우에는, 디스플레이(150)는 입력된 메뉴명을 메뉴 생성 객체 상에 디스플레이하고, 제어부는 상기 메뉴 생성 객체를 메뉴 객체로 인식한다(S375). 입력된 메뉴명이 디스플레이된 일예로, 화면(1200)의 메뉴 객체(1230) 또는 화면(1300)의 메뉴 객체(1330)는 메뉴명으로 "ideation"를 갖는다. 메뉴명이 오른쪽에서 왼쪽으로 입력되어 "noitaedi"으로 쓰여진 경우에는, 제어부(190)는 상기 순서를 변경하여 "ideation"으로 디스플레이되도록 제어할 수 있다.
도 28은 본 발명에 따른 메뉴 자동 구성 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면이다.
도 28을 참조하면, 디스플레이(150)는 화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이한다(S400). 여기서 디스플레이(150)는 도 3에 도시된 화면(300)을 디스플레이할 수 있다.
접촉 검출부(195)는 접촉 지점을 검출한다(S410). 여기서 접촉 검출부(195)는 사용자가 전자 장치(100)를 파지함으로써 발생되는 다수의 터치 지점을 검출할 수 있다.
제어부(190)는 검출된 접촉 지점을 이용하여 전자 장치(100)를 파지하는 손을 확인한다(S420). 여기서 제어부(190)는 접촉 지점의 개수를 기초로 파지하는 손을 확인할 수 있다. 일예로, 제1 접촉 검출부(2211)가 검출한 접촉 지점의 개수와 제2 접촉 검출부(2221)가 검출한 접촉 지점의 개수를 비교하여, 제어부(190)는 보다 적은 접촉 지점을 검출한 쪽의 손을 파지하는 손으로 확인할 수 있다. 도 23의 경우에는, 도 25에서와 같이 제2 접촉 검출부(2221)가 적은 개수의 접촉 지점을 검출하였으므로, 제어부(190)는 사용자가 전자 장치(100)를 파지한 손이 오른손이라고 확인할 수 있다.
또한 제어부(190)는 접촉 지점의 면적을 기초로 파지한 손을 확인할 수 있다. 예를 들면, 제어부(190)는 큰 접촉 지점을 검출한 쪽의 손을 파지하는 손으로 확인할 수 있다. 도 23의 경우에는, 도 25에서와 같이 제2 접촉 검출부(2221)가 큰 접촉 지점(2560)을 검출하였으므로, 제어부(190)는 사용자가 전자 장치(100)를 파지한 손이 오른손이라고 확인할 수 있다.
제어부(190)는 단계 S420의 확인 결과에 따라 단계 S400에서 디스플레이된 서비스 페이지 및 메뉴 객체의 위치를 변경한다(S430). 제어부(190)는 단계 S420의 확인 결과에 따라 서비스 페이지상에 붙는 메뉴 객체의 영역을 변경할 수 있고, 복수의 서비스 페이지가 서로 겹쳐지는 영역을 변경할 수 있다.
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 제어부(190)는 왼손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 또한 사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 제어부(190)는 오른손용으로 지정된 위치에 서비스 페이지 및 메뉴 객체가 디스플레이되도록 제어할 수 있다. 여기서 사용자는 파지한 손에 따라 서비스 페이지 및 메뉴 객체의 지정 위치를 사전에 설정할 수 있고, 제어부(190)는 파지한 손의 확인 결과 및 설정된 지정 위치를 기초로 서비스 페이지 및 메뉴 객체의 위치를 변경할 수 있다.
도 23을 참조하면, 사용자가 전자 장치를 파지한 손이 오른손(2301)으로 확인된 경우에는, 디스플레이(150)는 단계 S430에서 화면(2300)을 디스플레이할 수 있다.
도 24를 참조하면, 사용자가 전자 장치를 파지한 손이 왼손(2401)으로 확인된 경우에는, 디스플레이(150)는 단계 S430에서 화면(2400)을 디스플레이할 수 있다.
일부 실시예로, 단계 S400이 이전에 단계 S410 및 S420가 진행되고, 단계 S400에서 단계 S420의 확인 결과에 따라 디스플레이부(150)는 화면(2300) 또는 화면(2400)을 디스플레이할 수 있다.
제어부(190)는 메뉴 구성 모드 전환 명령이 감지되었는지 여부를 확인한다(S440). 메뉴 구성 모드 전환 명령은 터치 제스처뿐만 아니라 공간 제스처로 인식될 수 있다. 여기서 공간 제스처(600)가 인식되면, 제어부(190)는 메뉴 구성 모드 전환 명령이 감지된 것으로 확인할 수 있다. 또한 메뉴 구성 모드 상태에서 공간 제스처(700)가 인식되면, 제어부(190)는 메뉴 모드 전환 명령이 감지된 것으로 확인할 수 있다.
메뉴 구성 모드 전환 명령이 감지된 경우에는, 디스플레이(150)는 상기 화면에 메뉴 생성 객체를 디스플레이한다(S450).
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 디스플레이(150)는 단계 S450에서 화면(1500)을 디스플레이할 수 있다. 사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 디스플레이(150)는 단계 S450에서 화면(1600)을 디스플레이할 수 있다.
제어부(190)는 메뉴 생성 객체 선택 명령이 감지되었는지 여부를 확인한다(S460).
메뉴 생성 객체 선택 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체를 선택한다(S470).
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 디스플레이(150)는 단계 S470에서 화면(1700)을 디스플레이할 수 있다. 사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 디스플레이(150)는 단계 S470에서 화면(1800)을 디스플레이할 수 있다.
제어부(190)는 메뉴 생성 객체 위치 지정 명령이 감지되었는지 여부를 확인한다(S480).
메뉴 생성 객체 위치 지정 명령이 감지된 경우에는, 제어부(190)는 메뉴 생성 객체 위치 지정 명령이 지시하는 서비스 페이지상에 메뉴 생성 객체를 붙인다(S490).
사용자가 전자 장치를 파지한 손이 오른손으로 확인된 경우에는, 디스플레이(150)는 단계 S490에서 화면(1900)을 디스플레이할 수 있다. 사용자가 전자 장치를 파지한 손이 왼손으로 확인된 경우에는, 디스플레이(150)는 단계 S490에서 화면(2000)을 디스플레이할 수 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 장치에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.

Claims (20)

  1. 삭제
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 전자 장치에 있어서,
    화면에 복수의 서비스 페이지 및 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에 붙은 적어도 하나의 메뉴 객체를 디스플레이하는 디스플레이;
    상기 전자 장치의 좌측면에 구비되는 제1 접촉 검출부 및 우측면에 구비되는 제2 접촉 검출부를 포함하고, 접촉 지점의 면적을 검출하는 접촉 검출부-상기 제1 접촉 검출부는 상기 전자 장치의 좌측면 접촉 검출부이고, 상기 제2 접촉 검출부는 상기 전자 장치의 우측면 접촉 검출부임-;
    상기 제1 접촉 검출부에 의해 검출된 제1 면적과 상기 제2 접촉 검출부에 의해 검출된 제2 면적을 비교하고, 상기 비교 결과에 따라 상기 전자 장치를 파지하는 손을 확인하고, 상기 확인 결과에 따라 상기 서비스 페이지 및 상기 메뉴 객체의 배치를 변경하는 제어부를 포함하고,
    상기 제어부는,
    상기 검출된 제1 면적이 상기 검출된 제2 면적보다 큰 경우 상기 전자 장치를 파지하는 손을 왼손으로 확인하고, 상기 검출된 제1 면적이 상기 검출된 제2 면적보다 작거나 또는 같은 경우 상기 전자 장치를 파지하는 손을 오른손으로 확인하고,
    메뉴 구성 모드 전환 명령이 감지된 경우에는 상기 확인 결과에 따라 지정된 위치에 메뉴 생성 객체를 디스플레이하고, 디스플레이된 상기 메뉴 생성 객체에 대한 메뉴명 입력을 활성화하고, 상기 메뉴명 입력의 완료 여부를 확인하고, 상기 입력된 메뉴명을 상기 메뉴 생성 객체 상에 디스플레이하고, 상기 메뉴 생성 객체를 메뉴 객체로 인식하되,
    상기 확인 결과에 따라 상기 메뉴명 입력 방향을 왼쪽에서 오른쪽으로 향하는 제1방향 또는 오른쪽에서 왼쪽으로 향하는 제2방향 중 어느 하나로 설정하고, 상기 제2방향으로 설정됨에 따라 상기 메뉴명이 입력된 경우 상기 입력된 메뉴명을 상기 제1방향에 대응하도록 변경하여 디스플레이하는 것을 특징으로 하는 전자 장치.
  13. 삭제
  14. 제 12항에 있어서,
    상기 메뉴 객체는 견출지 모양으로 디스플레이되는 것을 특징으로 하는 전자 장치.
  15. 제 12항에 있어서,
    상기 제어부는,
    상기 확인 결과에 따라 서비스 페이지상에 붙는 상기 메뉴 객체의 부분을 변경하는 것을 특징으로 하는 전자 장치.
  16. 제 12항에 있어서,
    상기 복수의 서비스 페이지는 서로 일부 부분이 겹쳐져서 디스플레이되는 것을 특징으로 하는 전자 장치.
  17. 제 16항에 있어서,
    상기 제어부는,
    상기 확인 결과에 따라 상기 겹쳐진 부분을 변경하는 것을 특징으로 하는 전자 장치.
  18. 삭제
  19. 제 12항에 있어서,
    상기 제어부는,
    이동 명령이 감지된 경우에는, 상기 감지된 이동 명령에 따라 상기 메뉴 생성 객체를 이동시키고, 드롭 명령이 감지된 경우에는, 상기 감지된 드롭 명령이 상기 복수의 서비스 페이지 중 하나의 서비스 페이지상에서 감지된지 여부를 확인하며, 상기 드롭 명령이 상기 하나의 서비스 페이지상에서 감지된 경우에는, 상기 이동된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 드롭 명령이 감지된 서비스 페이지상에 붙이는 것을 특징으로 하는 전자 장치.
  20. 제 12항에 있어서,
    상기 제어부는,
    선택 명령이 감지된 경우에는, 상기 메뉴 생성 객체를 선택하고, 위치 지정 명령이 감지된 경우에는, 상기 선택된 메뉴 생성 객체의 부분 중에서 상기 확인 결과에 따라 지정된 부분을 상기 위치 지정 명령이 지시하는 서비스 페이지상에 붙이는 것을 특징으로 하는 전자 장치.
KR1020100137806A 2010-12-29 2010-12-29 전자 장치 및 메뉴 자동 구성 방법 KR101832757B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100137806A KR101832757B1 (ko) 2010-12-29 2010-12-29 전자 장치 및 메뉴 자동 구성 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100137806A KR101832757B1 (ko) 2010-12-29 2010-12-29 전자 장치 및 메뉴 자동 구성 방법

Publications (2)

Publication Number Publication Date
KR20120076682A KR20120076682A (ko) 2012-07-09
KR101832757B1 true KR101832757B1 (ko) 2018-02-27

Family

ID=46710273

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100137806A KR101832757B1 (ko) 2010-12-29 2010-12-29 전자 장치 및 메뉴 자동 구성 방법

Country Status (1)

Country Link
KR (1) KR101832757B1 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
KR101873814B1 (ko) 2013-12-19 2018-08-02 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 컨텐츠 추천 방법
CN111782129B (zh) 2014-06-24 2023-12-08 苹果公司 用于在用户界面中导航的列界面
KR102076252B1 (ko) * 2014-06-24 2020-02-11 애플 인크. 입력 디바이스 및 사용자 인터페이스 상호작용
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
US11966560B2 (en) 2016-10-26 2024-04-23 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
CN114115676A (zh) 2019-03-24 2022-03-01 苹果公司 包括内容项的可选表示的用户界面
US11962836B2 (en) 2019-03-24 2024-04-16 Apple Inc. User interfaces for a media browsing application
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
CN114302210A (zh) 2019-03-24 2022-04-08 苹果公司 用于查看和访问电子设备上的内容的用户界面
WO2020243645A1 (en) 2019-05-31 2020-12-03 Apple Inc. User interfaces for a podcast browsing and playback application
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090267909A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090267909A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof

Also Published As

Publication number Publication date
KR20120076682A (ko) 2012-07-09

Similar Documents

Publication Publication Date Title
KR101832757B1 (ko) 전자 장치 및 메뉴 자동 구성 방법
KR101719989B1 (ko) 전자 장치 및 메뉴를 구성하기 위한 인터페이스 방법
WO2022022495A1 (zh) 一种跨设备的对象拖拽方法及设备
US10482573B2 (en) Method and mobile device for displaying image
US9335835B2 (en) Method and apparatus for providing user interface
CN109428969B (zh) 双屏终端的边缘触控方法、装置及计算机可读存储介质
EP2575013B1 (en) Pen system and method for performing input operations to mobile device via the same
EP2431916A2 (en) Transparent display device and method for providing object information
US9632642B2 (en) Terminal apparatus and associated methodology for automated scroll based on moving speed
EP2068235A2 (en) Input device, display device, input method, display method, and program
US20140022193A1 (en) Method of executing functions of a terminal including pen recognition panel and terminal supporting the method
US20140232653A1 (en) Portable electronic apparatus, touch region setting method, and touch region setting program
KR101774997B1 (ko) 전자 장치 및 데이터 전송 방법
KR101737839B1 (ko) 투명 디스플레이 장치 및 객체 탐지 방법
US9043709B2 (en) Electronic device and method for providing menu using the same
KR101789617B1 (ko) 전자 장치 및 메뉴 편집 인터페이스 방법
KR20120029229A (ko) 투명 디스플레이 장치 및 지역 정보 제공 방법
KR101805532B1 (ko) 전자 장치 및 메뉴 자동 구성 방법
KR20120040347A (ko) 전자 장치 및 이동 정보 제공 방법
KR20120038826A (ko) 전자 다이어리 서비스를 제공하는 전자 장치 및 전자 다이어리 서비스 제공 방법, 그리고 전자 다이어리 서비스를 위한 인터페이스 방법
KR20120078816A (ko) 가상 터치 포인터 운용 방법 및 이를 지원하는 휴대 단말기
KR20140113757A (ko) 핑거프린트를 이용하여 미디어를 수신하는 휴대 단말 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant