KR101781908B1 - 이동 단말기 및 그것의 제어방법 - Google Patents

이동 단말기 및 그것의 제어방법 Download PDF

Info

Publication number
KR101781908B1
KR101781908B1 KR1020110026589A KR20110026589A KR101781908B1 KR 101781908 B1 KR101781908 B1 KR 101781908B1 KR 1020110026589 A KR1020110026589 A KR 1020110026589A KR 20110026589 A KR20110026589 A KR 20110026589A KR 101781908 B1 KR101781908 B1 KR 101781908B1
Authority
KR
South Korea
Prior art keywords
objects
sensing
display unit
mobile terminal
displayed
Prior art date
Application number
KR1020110026589A
Other languages
English (en)
Other versions
KR20120109090A (ko
Inventor
김종환
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020110026589A priority Critical patent/KR101781908B1/ko
Priority to US13/178,780 priority patent/US8797317B2/en
Priority to CN201110251163.3A priority patent/CN102693069B/zh
Priority to EP11007902.7A priority patent/EP2503438B1/en
Publication of KR20120109090A publication Critical patent/KR20120109090A/ko
Application granted granted Critical
Publication of KR101781908B1 publication Critical patent/KR101781908B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 3차원 입체 영상에 대한 터치 입력이 가능한 이동 단말기 및 그것의 제어 방법에 관한 것이다. 본 발명의 일 실시 예에 따른 이동 단말기의 제어 방법은, 복수의 객체들을 포함하는 3차원 입체 영상을 표시하는 단계, 상기 3차원 입체 영상에 대응하는 감지 영역에서 감지 대상의 위치를 감지하는 단계, 상기 감지 대상의 위치에 근거하여 제 1 객체를 선택하는 단계, 상기 제 1 객체가 선택된 상태에서, 상기 감지 대상의 이동에 따라 상기 제 1 객체를 이동하는 단계, 및 상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 일 방향으로 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성하는 단계를 포함한다.

Description

이동 단말기 및 그것의 제어방법{MOBILE TERMINAL AND CONTROL METHOD THEREOF}
본 발명은 이동 단말기에 관한 것으로, 좀 더 구체적으로 3차원 입체 영상에 대한 터치 입력이 가능한 이동 단말기 및 그것의 제어 방법에 관한 것이다.
단말기(terminal)는 이동 가능 여부에 따라 이동 단말기(mobile or portable terminal) 및 고정 단말기(stationary terminal)로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mount terminal)로 나뉠 수 있다.
이와 같은 단말기는 기능이 다양화됨에 따라, 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(multimedia player) 형태로 구현되고 있다. 나아가 단말기의 기능 지지 및 증대를 위해, 단말기의 구조적인 부분 및 소프트웨어적인 부분을 개량하는 것이 고려될 수 있다.
이러한 개량에 힘입어, 단말기는 2차원 영상 표시의 수준을 넘어서 깊이 지각(depth perception) 내지 입체시(stereovision)를 가능하게 하는 3차원 입체 영상을 표시할 수 있도록 진화하고 있다. 이로써, 사용자는 3차원 입체 영상을 통하여 보다 실감나는 사용자 인터페이스 또는 컨텐츠를 향유할 수 있게 된다.
본 발명의 목적은 3차원 입체 영상에 표시되는 개체들 사이의 거리 변화를 이용하여 객체들을 제어할 수 있는 이동 단말기 및 그것의 제어 방법을 제공하는 데 있다.
또한, 본 발명의 다른 목적은 3차원 입체 영상에 표시되는 객체들을 제어함에 있어서 사용자 편의를 높일 수 있는 이동 단말기 및 그것의 제어 방법을 제공하는 데 있다.
본 발명의 일 실시 예에 따른 이동 단말기의 제어 방법은, 복수의 객체들을 포함하는 3차원 입체 영상을 표시하는 단계, 상기 3차원 입체 영상에 대응하는 감지 영역에서 감지 대상의 위치를 감지하는 단계, 상기 감지 대상의 위치에 근거하여 제 1 객체를 선택하는 단계, 상기 제 1 객체가 선택된 상태에서, 상기 감지 대상의 이동에 따라 상기 제 1 객체를 이동하는 단계, 및 상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 일 방향으로 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성하는 단계를 포함한다.
상기 이동 단말기의 제어 방법은, 상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 상기 일 방향으로 감소하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들 중 적어도 하나를 삭제하는 단계를 더 포함할 수 있다.
상기 제 1 및 제 2 객체 사이에 생성 또는 삭제되는 객체들의 수는 상기 제 1 및 제 2 객체 사이의 변화되는 거리에 따라 정해질 수 있다. 상기 일 방향은 상기 3차원 입체 영상을 출력하는 디스플레이부에 대한 수직 방향일 수 있다.
상기 이동 단말기의 제어 방법은, 상기 제 1 및 제 2 객체 사이의 거리가 상기 일 방향과 직교하는 타 방향으로 변화하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들의 위치를 상기 타 방향으로 변경하는 단계를 더 포함할 수 있다.
상기 이동 단말기의 제어 방법은, 상기 감지 대상의 위치에 근거하여 제 3 객체를 선택하는 단계, 상기 제 1 및 제 3 객체가 선택된 상태에서, 상기 감지 대상의 이동에 따라 상기 제 1 및 제 3 객체를 이동하는 단계, 및 상기 제 1 및 제 3 객체의 이동으로 인해 상기 제 1 객체 및 제 3 객체 사이의 거리가 상기 일 방향으로 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 3 객체 사이에 생성하는 단계를 더 포함할 수 있다.
상기 이동 단말기의 제어 방법은, 상기 감지 대상의 위치에 근거하여 상기 제 1 및 제 2 객체 사이에 생성되는 제 4 객체를 선택하는 단계, 및 상기 제 4 객체가 선택된 상태에서, 상기 제 4 객체를 제어하는 단계를 더 포함할 수 있다.
상기 제 4 객체를 제어하는 단계는, 상기 제 4 객체와 관련되는 제어 메뉴를 표시하는 단계, 및 상기 제어 메뉴를 이용하여 입력되는 선택 정보에 대응하는 제 5 객체를 상기 제 4 객체에 추가하는 단계를 포함할 수 있다. 상기 제 4 객체를 제어하는 단계는, 상기 감지 대상에 의해 입력되는 삭제 명령에 응답하여 상기 제 4 객체를 삭제하는 단계를 포함할 수 있다.
상기 이동 단말기의 제어 방법은, 상기 제 4 객체가 삭제된 경우, 남아있는 객체들 중 적어도 하나의 위치를 변경하는 단계를 더 포함할 수 있다. 또한, 상기 이동 단말기의 제어 방법은, 상기 제 4 객체가 삭제된 경우, 상기 제 4 객체를 대체하는 제 6 객체를 상기 제 1 및 제 2 객체 사이의 빈 영역에 생성하는 단계를 더 포함할 수 있다.
상기 제 4 객체를 제어하는 단계는, 상기 감지 대상의 이동에 따라 상기 제 1 및 제 2 객체 사이에서 상기 제 4 객체를 이동하는 단계를 포함할 수 있다.
상기 이동 단말기의 제어 방법은, 제어 방법은, 상기 제 4 객체가 이동하는 경우, 상기 제 1 및 제 2 사이에 표시되는 적어도 하나의 객체의 위치를 변경하는 단계를 더 포함할 수 있다.
상기 제 4 객체를 제어하는 단계는, 상기 제 4 객체가 클립보드를 포함하는 경우, 상기 클립보드를 이용하여 편집 동작을 수행하는 단계를 포함할 수 있다. 상기 제 4 객체를 제어하는 단계는, 상기 제 4 객체가 가상 키보드를 포함하는 경우, 상기 가상 키보드를 이용하여 입력되는 데이터를 상기 제 4 객체에 표시 및 저장하는 단계를 포함할 수 있다. 상기 가상 키보드는 상기 3차원 영상을 표시하는 디스플레이부를 향해 기울어져 표시될 수 있다.
상기 이동 단말기의 제어 방법은, 상기 감지 대상에 의해 입력되는 고정 명령에 응답하여 상기 제 1 객체를 고정하는 단계를 더 포함할 수 있다. 상기 제 1 객체를 고정하는 단계에서, 상기 고정 명령은, 상기 감지 대상이 상기 제 1 객체를 상기 감지 영역 밖으로 드래그하는 경우 입력될 수 있다. 상기 제 1 객체를 고정하는 단계에서, 상기 고정 명령은, 상기 감지 대상이 상기 제 1 객체를 터치하는 횟수 및 시간 중 적어도 하나에 근거하여 입력될 수 있다.
상기 이동 단말기의 제어 방법은, 상기 제 1 및 제 2 객체 사이에 표시되는 제 3 및 제 4 객체가 상기 3차원 입체 영상 내의 그룹화 영역에 위치하는 경우, 상기 제 3 및 제 4 객체를 그룹화하는 단계를 더 포함할 수 있다.
상기 제 1 및 제 2 객체 사이에 생성되는 상기 적어도 하나의 객체는 객체 속성을 반영하는 인디케이션을 포함할 수 있다. 상기 3차원 입체 영상에 표시되는 객체들 각각에 대응하는 감지 범위는 상기 각각의 객체에 대한 수직거리에 따라 정해질 수 있다.
본 발명의 다른 실시 예에 따른 이동 단말기의 제어 방법은, 복수의 객체들을 포함하는 3차원 입체 영상을 디스플레이부에 표시하는 단계, 상기 디스플레이부에 가해지는 터치의 세기, 횟수 및 시간 중 적어도 하나에 근거하여 제 1 객체를 상기 디스플레이부에 대한 수직방향으로 이동하는 단계, 및 상기 제 1 객체가 상기 수직방향으로 이동하여 상기 제 1 객체 및 제 2 객체 사이의 거리가 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성하는 단계를 포함한다.
상기 이동 단말기의 제어 방법은, 상기 제 1 객체가 상기 수직방향으로 이동하여 상기 제 1 및 제 2 객체 사이의 거리가 감소하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들 중 적어도 하나를 삭제하는 단계를 더 포함할 수 있다.
상기 이동 단말기의 제어 방법은, 상기 디스플레이부 상에서의 드래그에 근거하여 상기 제 1 개체를 상기 디스플레이부에 대한 수평방향으로 이동하는 단계, 및 상기 제 1 객체가 상기 수평방향으로 이동하여 상기 제 1 및 제 2 객체 사이의 거리가 변화하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들의 위치를 상기 수평방향으로 변경하는 단계를 더 포함할 수 있다.
본 발명의 일 실시 예에 따른 이동 단말기는, 단말기 본체, 입체 디스 플레이부, 감지부 및 제어부를 포함한다. 상기 입체 디스플레이부는 상기 단말기 본체에 형성되고, 제 1 및 제 2 객체를 포함하는 3차원 입체 영상을 표시하도록 구성된다. 상기 감지부는 상기 단말기 본체에 장착되고, 상기 3차원 입체 영상에 대응하는 감지 영역에서 감지 대상의 위치를 감지한다. 그리고, 상기 제어부는 상기 감지 대상의 위치에 근거하여 제 1 객체를 선택하고, 상기 제 1 객체가 선택된 상태에서 상기 감지 대상의 이동에 따라 상기 제 1 객체를 이동하며, 상기 제 1 객체의 이동 인해 상기 제 1 객체 및 제 2 객체 사이의 거리가 일 방향으로 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성한다.
상기 제어부는, 상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 상기 일 방향으로 감소하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들 중 적어도 하나를 삭제할 수 있다.
상기 제어부는, 상기 제 1 및 제 2 객체 사이의 거리가 상기 일 방향과 직교하는 타방향으로 변화하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들의 위치를 상기 타방향으로 변경할 수 있다.
본 발명의 실시 예에 따른 이동 단말기 및 그것의 제어 방법에 의하면, 3차원 공간에서의 감지 대상의 이동에 따라 선택된 객체가 이동하고, 선택된 객체의 이동으로 인한 객체들 사이의 거리 변화에 따라 적어도 하나의 객체가 생성되거나 삭제되도록 또는 객체들의 위치(간격)가 변경되도록 객체 제어 동작이 수행될 수 있다. 이로써, 객체들은 선택된 객체의 이동과 관련되는 명령 외에 다른 추가 명령이 입력되지 않더라도 객체들 사이의 변화되는 공간을 활용하여 효율적으로 제어될 수 있다.
또한, 객체들에 대한 추가, 삭제, 이동, 그룹화, 편집, 입력 동작 등의 추가적인 제어를 지원함으로써, 3차원 입체 영상에 표시되는 객체들을 제어함에 있어서 사용자 편의를 높일 수 있다.
도 1은 본 발명의 일 실시 예에 따른 이동 단말기를 나타내는 블록도이다.
도 2는 도 1에 도시된 이동 단말기에 적용되는 제어 방법의 일 실시 예를 설명하기 위한 순서도이다.
도 3a, 도 3b, 도 4a, 도 4b, 도 5a 및 도 5b는 도 2에 도시된 제어 방법에 따른 작동 예들을 보여주는 개념도들이다.
도 6은 도 2에 도시된 제어 방법과 관련되는 객체 고정 모드가 실행되는 경우를 예시적으로 보여주는 개념도이다.
도 7 내지 도 12는 도 2에 도시된 제어 방법과 관련되는 추가적인 객체 제어 방법의 실시 예들을 보여주는 개념도들이다.
도 13a 내지 도 13c는 본 발명의 이동 단말기에 적용되는 제어 방법의 일 실시 예와 관련되는 시각 효과를 보여주는 개념도들이다.
도 14a 및 도 14b는 본 발명의 이동 단말기에 적용되는 제어 방법의 일 실시 예와 관련되는 객체 감지 범위를 보여주는 개념도이다.
도 15는 도 1에 도시된 이동 단말기에 적용되는 제어 방법의 다른 실시 예를 설명하기 위한 순서도이다.
도 16a 및 도 16b는 도 15에 도시된 제어 방법에 따른 작동 예들을 보여주는 개념도들이다.
도 17은 도 1에 도시된 이동 단말기에 적용되는 제어 방법의 또 다른 실시 예를 설명하기 위한 순서도이다.
도 18은 도 17에 도시된 제어 방법에 따른 일 작동 예를 보여주는 개념도이다.
이하, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 정도로 상세하게 설명하기 위하여, 본 발명의 실시 예가 첨부된 도면을 참조하여 설명한다. 하지만, 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며, 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고, 도면에서 본 발명을 명확하게 설명하기 위해 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통해 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서에서 설명되는 이동 단말기에는 휴대폰, 스마트폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이터(navigator) 등이 포함될 수 있다. 그러나, 본 명세서에 기재된 실시 예에 따른 구성은 이동 단말기에만 적용 가능한 경우를 제외하면, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기에도 적용될 수도 있음을 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 쉽게 알 수 있을 것이다.
도 1은 본 발명의 일 실시 예에 따른 이동 단말기(100)를 나타내는 블록도이다. 도 1을 참조하면, 이동 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 감지부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190)를 포함할 수 있다. 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 이동 단말기가 구현될 수 있다.
이하에서, 이동 단말기(100)의 구성요소들(110~190)에 대해 차례대로 살펴본다.
무선 통신부(110)는 이동 단말기(100)와 무선 통신 시스템 사이, 또는 이동 단말기(100)와 이동 단말기(100)가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부(110)는 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114) 및 위치정보 모듈(115)을 포함할 수 있다.
방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및 방송 관련 정보를 수신한다. 여기서, 방송 관련 정보는 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련되는 정보를 의미한다. 그리고, 방송 관련 정보는 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에, 방송 관련 정보는 이동통신 모듈(112)에 의해 수신될 수 있다. 방송 수신 모듈(111)을 통해 수신되는 방송 신호 및 방송 관련 정보는 메모리(160)에 저장될 수 있다.
이동통신 모듈(112)은 이동 통신망 상에서 기지국, 외부의 단말기, 서버 중 적어도 하나와 무선 신호를 송수신한다. 이러한 무선 신호는 음성 호 신호, 화상 통화 호 신호, 문자 메시지 또는 멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈로서, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.
근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.
위치정보 모듈(115)은 이동 단말기(100)의 위치를 획득하기 위한 모듈로서, 그것의 대표적인 예로는 GPS(Global Position System) 모듈이 있다.
계속해서 도 1을 참조하면, A/V(Audio/Video) 입력부(120)는 오디오 신호 및 비디오 신호 입력을 위한 것으로, 이에는 카메라(121), 마이크(122) 등이 포함될 수 있다. 카메라(121)는 화상 통화 모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상, 동영상 등의 화상 프레임을 처리한다. 카메라(121)에 의해 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다. 그리고, 이러한 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 카메라(121)는 사용 환경에 따라 2개 이상이 구비될 수 있다.
마이크(122)는 통화 모드, 녹음 모드, 음성인식 모드 등에서 외부로부터 입력되는 음향 신호를 전기적인 음성 데이터로 처리한다. 통화 모드에서 마이크(122)에 의해 처리된 음성 데이터는 이동통신 모듈(112)을 통해 이동통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 마이크(122)에는 외부의 음향 신호가 입력되는 과정에서 발생하는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
사용자 입력부(130)는 사용자가 이동 단말기(100)의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(정압 및 정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다.
감지부(140)는 사용자 접촉 유무, 이동 단말기(100)의 개폐 상태, 위치, 방위, 가속, 감속 등과 같은 이동 단말기(100)의 현재 상태를 감지하여 이동 단말기(100)의 동작을 제어하기 위한 감지 신호를 발생시킨다. 예를 들어, 이동 단말기(100)가 슬라이드 폰 형태인 경우, 감지부(140)는 슬라이드 폰의 개폐 여부를 감지할 수 있다. 또한, 감지부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등을 감지할 수도 있다.
감지부(140)는 근접 센서(141), 입체 터치 감지부(142), 초음파 감지부(143) 및 카메라 감지부(144)를 포함할 수 있다. 감지부(140)는 3차원 공간의 감지 영역에서 존재하고 움직이는 대상(이하, ‘감지 대상’이라 칭함)의 위치를 검출하는 3차원 센서로서도 구성될 수 있다.
또한, 감지부(140)는 디스플레이부(151)에 대한 터치 동작을 감지하는 터치 센서(미도시됨)를 포함할 수 있다. 터치 센서는 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다. 터치 센서는 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 되는 위치 및 면적뿐만 아니라, 터치 압력까지도 검출할 수 있도록 구성될 수 있다.
터치 센서와 디스플레이부(151)가 상호 레이어 구조를 이루는 경우에는, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 이러한 디스플레이부(151)는 ‘터치 스크린’으로 호칭할 수 있다.
터치 스크린을 통한 터치 입력이 있는 경우, 그것에 대응하는 신호들은 터치 제어기(미도시됨)로 보내진다. 터치 제어기는 터치 센서로부터 전달되는 신호들을 처리한 다음 처리된 신호들에 대응하는 데이터를 제어부(180)로 전송한다. 이로써, 제어부(180)는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부를 알 수 있게 된다.
터치 스크린이 정전식인 경우에는 감지 대상의 근접에 따른 전계의 변화로 감지 대상의 근접을 검출하도록 구성될 수 있다. 이러한 터치 스크린은 근접 센서(141)로 분류될 수 있다.
근접 센서(141)는 감지 대상의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서(141)는 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다. 근접 센서(141)의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다.
근접 센서(141)는 터치 스크린에 의해 감싸지는 이동 단말기(100)의 내부 영역 또는 터치 스크린의 근처에 배치될 수 있다. 근접 센서(141)는 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 터치를 가하는 감지 대상(예를 들어, 사용자의 손가락이나 스타일러스 펜)과 검출면의 거리를 측정한다. 근접 센서(141)는 이렇게 측정된 거리를 이용하여 입체 영상의 어느 부분이 터치되었는지를 인식할 수 있다.
한편, 근접 센서(141)는 감지 대상의 근접 정도를 이용하여 3차원 공간상의 터치를 감지하도록 구성될 수 있다.
입체 터치 감지부(142)는 터치 스크린상에 가해지는 터치의 세기, 횟수 또는 지속시간을 감지하도록 구성된다. 예를 들어, 입체 터치 감지부(142)는 터치를 가하는 압력을 감지하고, 가해지는 압력이 강하면 이를 이동 단말기(100)의 내부를 향하여 터치 스크린으로부터 보다 멀리 위치한 객체에 대한 터치로 인식한다.
초음파 감지부(143)는 초음파를 이용하여, 감지 대상의 위치를 감지하도록 구성된다. 예를 들어, 초음파 감지부(143)는 광 센서와 복수의 초음파 센서로 구성될 수 있다.
광 센서는 광을 감지하도록 구성된다. 예를 들어, 광 센서는 적외선을 감지하는 적외선 포트(Infrared data association, IRDA)가 될 수 있다.
초음파 센서는 초음파를 감지하도록 구성된다. 복수의 초음파 센서는 서로 이격되게 배치되며, 이를 통해 복수의 초음파 센서들은 동일하거나 인접한 지점으로부터 발생한 초음파를 감지하는 데 있어서 시간차를 가지게 된다.
초음파 및 광은 파동 발생원에서 발생한다. 이러한 파동 발생원은 감지 대상, 예를 들어, 스타일러스 펜에 구비될 수 있다. 광은 초음파보다 매우 빠르기 때문에, 광이 광 센서에 도달하는 시간은 초음파가 초음파 센서에 도달하는 시간보다 매우 빠르다. 따라서, 파동 발생원의 위치는 광과 초음파가 초음파 센서에 도달하는 차이를 이용하여 산출될 수 있다.
카메라 감지부(144)는 카메라, 레이저 센서, 포토 센서 중 적어도 하나를 포함한다. 예를 들어, 카메라와 레이저 센서는 서로 조합되어, 3차원 입체 영상에 대한 감지 대상의 터치를 감지한다. 카메라에 의해 촬영된 2차원 영상에 레이저 센서에 의해 감지된 거리정보가 더해지면, 3차원 정보가 획득될 수 있다.
다른 예를 들면, 포토 센서가 디스플레이 소자에 적층될 수 있다. 포토 센서는 터치 스크린에 근접한 감지 대상의 움직임을 스캐닝하도록 이루어진다. 보다 구체적으로, 포토 센서는 행과 열에 포토 다이오드(Photo Diode, PD)와 트랜지스터(Transistor)를 실장하고, 포토 다이오드에 인가되는 빛의 양에 따라 변화되는 전기적 신호를 이용하여 포토 센서 위에 올려지는 내용물을 스캔한다. 즉, 포토 센서를 통해 빛의 변화량에 따른 감지 대상의 위치 좌표가 검출될 수 있다.
출력부(150)는 시각, 청각, 촉각 등과 관련된 출력을 발생시킨다. 출력부(150)는 디스플레이부(151), 음향 출력 모듈(153), 알람부(154) 및 햅틱 모듈(155)를 포함할 수 있다.
디스플레이부(151)는 이동 단말기(100)에서 처리되는 정보를 표시(출력)한다. 예를 들어, 이동 단말기(100)가 통화 모드에서 동작하는 경우에는, 디스플레이부(151)는 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 이동 단말기(100)가 화상 통화 모드 또는 촬영 모드에서 동작하는 경우에는, 디스플레이부(151)는 촬영된 영상, 수신된 영상, UI 또는 GUI 등을 표시한다.
디스플레이부(151)는 액정 디스플레이(Liquid Crystal Display, LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display, TFT- LCD), 유기 발광 다이오드(Organic Light Emitting Diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전자잉크 디스플레이(e-ink display) 중 적어도 하나를 포함할 수 있다.
디스플레이부(151)에 포함되는 적어도 하나의 디스플레이(또는 디스플레이 소자)는 그것을 통해 외부를 볼 수 있도록 투명형 또는 광투과형으로 구성될 수 있다. 이는 투명 디스플레이라 호칭할 수 있는데, 이러한 투명 디스플레이의 대표적인 예로는 TOLED(Transparant OLED) 등이 있다. 디스플레이부(151)의 후방 구조 또한 광 투과형 구조로 구성될 수 있다. 이러한 구조에 의하여, 사용자는 단말기 본체에서 디스플레이부(151)가 차지하는 영역을 통해 단말기 본체의 후방에 위치한 사물을 볼 수 있다.
디스플레이부(151)는 이동 단말기(100)의 구현 형태에 따라 2개 이상 존재할 수 있다. 예를 들어, 이동 단말기(100)에는 복수의 디스플레이부들이 하나의 면에 이격되거나 일체로 배치될 수 있고, 또한 서로 다른 면에 각각 배치될 수도 있다.
디스플레이부(151)는 입체 영상을 표시하는 입체 디스플레이부(152)로서 구성될 수 있다. 여기서, 입체 영상은 3차원 입체 영상(3-dimensional stereoscopic image)을 나타내며, 3차원 입체 영상(3-dimensional stereoscopic image)은 모니터나 스크린상에서 사물이 위치한 점진적 깊이감(depth) 및 현실감(reality)을 현실 공간과 동일하게 느낄 수 있도록 한 영상이다.
3차원 입체 영상은 양안 시차(binocular disparity)를 이용하여 구현된다. 여기서, 양안 시차란, 약 65 밀리미터 떨어져 있는 두 눈의 위치에 의하여 이루어지는 시차를 의미하는 것으로, 두 눈이 서로 다른 2차원 화상을 보고 그 화상들이 망막을 통하여 뇌로 전달되어 융합되면 입체 영상의 깊이감 및 현실감을 느낄 수 있게 된다.
입체 디스플레이부(152)에는 스테레오스코픽 방식(안경 방식), 오토 스테레오스코픽 방식(무안경 방식), 프로젝션 방식(홀로그래픽 방식) 등의 3차원 디스플레이 방식이 적용될 수 있다. 가정용 텔레비전 수신기 등에 많이 이용되는 스테레오스코픽 방식에는 휘스톤 스테레오스코프 방식 등이 있다.
오토 스테레오스코픽 방식의 예로서, 패럴렉스 배리어(parallex barrier) 방식, 렌티큘러(lenticular) 방식, 집적영상(integral imaging) 방식 등이 있다. 프로젝션 방식에는 반사형 홀로그래픽 방식, 투과형 홀로그래픽 방식 등이 있다.
일반적으로, 3차원 입체 영상은 좌 영상(좌안용 영상)과 우 영상(우안용 영상)으로 구성된다. 3차원 입체 영상을 구현하는 방식은, 좌 영상과 우 영상이 3차원 입체 영상으로 합쳐지는 방식에 따라, 좌 영상과 우 영상을 한 프레임 내 상하로 배치하는 탑-다운(top-down) 방식, 좌 영상과 우 영상을 한 프레임 내 좌우로 배치하는 L-to-R(Left-to-Right, side by side) 방식, 좌 영상과 우 영상의 조각들을 타일 형태로 배치하는 체커 보드(checker board) 방식, 좌 영상과 우 영상을 열 단위 또는 행 단위로 번갈아 배치하는 인터레이스드(interlaced) 방식, 좌 영상과 우 영상을 시간별로 번갈아 표시하는 시분할(time sequential, frame by frame) 방식 등으로 나뉜다.
3차원 입체 영상의 예로서, 3차원 썸네일(thumbnail) 영상은 원본 영상 프레임의 좌 영상 및 우 영상으로부터 각각 좌 영상 썸네일 및 우 영상 썸네일을 생성하고, 이를 합쳐서 하나의 3차원 썸네일 영상을 생성할 수 있다. 일반적으로, 썸네일은 축소된 화상 또는 축소된 정지영상을 의미한다. 이렇게 생성된 좌 영상 썸네일과 우 영상 썸네일은 좌 영상과 우 영상의 시차에 대응하는 깊이만큼 화면상에서 좌우 거리 차이를 두고 표시됨으로써 입체적인 공간감을 나타낼 수 있다.
입체 디스플레이부(152)와 터치 센서가 상호 레이어 구조를 이루는 경우, 또는 입체 디스플레이부(152)와 터치 동작을 감지하는 3차원 센서가 서로 조합되는 경우에는 상기 입체 디스플레이부(152)는 3차원의 입력 장치로도 사용될 수 있다. 이러한 입체 디스플레이부(152)는 ‘입체 터치 스크린’으로 호칭할 수 있다.
음향 출력 모듈(153)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력할 수 있다. 음향 출력 모듈(153)은 이동 단말기(100)에서 수행되는 기능(예를 들어, 호 신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력하기도 한다. 이러한 음향 출력 모듈(153)에는 리시버(receiver), 스피커(speaker), 버저(buzzer) 등이 포함될 수 있다.
알람부(154)는 이동 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기(100)에서 발생 되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 터치 입력 등이 있다. 알람부(154)는 비디오 신호나 오디오 신호 이외에 다른 형태, 예를 들어, 진동으로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 비디오 신호나 오디오 신호는 디스플레이부(151)나 음성 출력 모듈(153)을 통해서도 출력될 수 있으므로, 디스플레이부(151) 및 음성 출력 모듈(153)은 알람부(154)의 일부로 분류될 수도 있다.
햅틱 모듈(haptic module)(155)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(155)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(155)이 발생시키는 진동의 세기, 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다.
햅틱 모듈(155)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다.
햅틱 모듈(155)은 직접적인 접촉을 통해 촉각 효과를 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구성될 수도 있다. 햅틱 모듈(155)은 이동 단말기(100)의 구성 태양에 따라 2개 이상이 구비될 수 있다.
메모리(160)는 제어부(180)의 동작을 위한 프로그램을 저장할 수 있고, 입력 및 출력되는 데이터들(예를 들어, 폰북, 메시지, 정지영상, 동영상 등)을 임시 저장할 수도 있다. 메모리(160)는 터치 스크린상의 터치 입력시 출력되는 다양한 패턴의 진동 및 음향에 관한 데이터를 저장할 수 있다.
메모리(160)는 플래시 메모리(flash memory), 하드디스크(hard disk), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 저장매체를 포함할 수 있다. 이동 단말기(100)는 인터넷(internet)상에서 메모리(160)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 통로 역할을 한다. 인터페이스부(170)는 외부 기기로부터 데이터를 전송받거나, 전원을 공급받아 이동 단말기(100) 내부의 각 구성요소에 전달하거나, 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다. 예를 들어, 인터페이스부(170)에는 유/무선 헤드셋 포트, 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등이 포함될 수 있다.
식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module: UIM), 가입자 인증 모듈(Subscriber Identify Module: SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module: USIM) 등을 포함할 수 있다. 식별 모듈이 구비된 장치(이하, ‘식별 장치’라고 칭함)는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 식별 장치는 포트를 통하여 단말기(100)와 연결될 수 있다.
인터페이스부(170)는 이동단말기(100)가 외부 크래들(cradle)과 연결될 때 크래들로부터의 전원이 이동단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 크래들에서 입력되는 각종 명령 신호가 이동 단말기(100)로 전달되는 통로가 될 수 있다. 크래들로부터 입력되는 각종 명령 신호 또는 전원은, 상기 이동 단말기(100)가 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작할 수도 있다.
제어부(controller, 180)는 이동 단말기(100)의 전반적인 동작을 제어한다. 예를 들어, 음성 통화, 데이터 통신, 화상 통화 등과 관련되는 제어 및 처리를 수행한다. 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 멀티미디어 모듈(181)은 제어부(180) 내에 구현될 수도 있고, 제어부(180)와 별도로 구현될 수도 있다.
상기 제어부(180)는 상기 터치 스크린상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 수행할 수 있다.
전원 공급부(190)는 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 인가받아 각 구성요소들의 동작에 필요한 전원을 공급한다.
여기에 설명되는 다양한 실시 예는 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 여기에 설명되는 실시 예는 ASICs(Application specific Integrated Circuits), DSPs(Digital Signal Processors), DSPDs(Digital Signal Processing Devices), PLDs(Programmable Logic Devices), FPGAs(Field Programmable Gate Arrays), 프로세서들(processors), 제어기들(controllers), 마이크로 컨트롤러들(micro-controllers), 마이크로 프로세서들(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시 예들이 제어부(180) 자체로 구현될 수 있다.
소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰인 소프트웨어 애플리케이션으로 소프트웨어 코드가 구현될 수 있다. 이러한 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수 있다.
이하에서, 이동 단말기(100)에 대한 사용자 입력의 처리 방법에 대하여 설명한다.
사용자 입력부(130)는 이동 단말기(100)의 동작을 제어하기 위한 명령을 입력받기 위해 조작되는 것으로서, 복수의 조작 유닛들을 포함할 수 있다. 조작 유닛들은 조작부(manipulating portion)로도 통칭 될 수 있으며, 사용자의 촉각을 이용하여 조작하게 되는 방식(tactile manner)이라면 어떤 방식이든 채용될 수 있다.
디스플레이부(151)에는 다양한 종류의 시각 정보가 표시될 수 있다. 이와 같은 시각 정보는 문자, 숫자, 기호, 그래픽, 아이콘 등의 형태로 표시될 수 있으며, 3차원 입체영상으로 이루어질 수 있다. 시각 정보의 입력을 위하여 문자, 숫자, 기호, 그래픽 및 아이콘 중 적어도 하나는 일정한 배열을 이루어 표시됨으로써 키패드의 형태로 구현될 수 있다. 이러한 키패드는 소위 ‘소프트키’라고 호칭할 수 있다.
디스플레이부(151)는 전체 영역으로 작동되거나, 복수의 영역들로 나뉘어져 작동될 수 있다. 후자의 경우, 복수의 영역들은 서로 연관되게 작동되도록 구성될 수 있다. 예를 들어, 디스플레이부(151)의 상부와 하부에는 출력창과 입력창이 각각 표시될 수 있다. 출력창과 입력창은 각각 정보의 출력 또는 입력을 위해 할당되는 영역이다. 입력창에는 전화 번호의 입력을 위한 숫자가 표시된 소프트키가 출력될 수 있다. 소프트키가 터치되면, 터치된 소프트키에 대응되는 숫자가 출력창에 표시된다. 조작 유닛이 조작되면 출력창에 표시된 전화 번호에 대한 호 연결이 시도되거나 출력창에 표시된 텍스트가 애플리케이션에 입력될 수 있다.
디스플레이부(151) 또는 터치 패드는 터치 스크롤(scroll)를 감지하도록 구성될 수 있다. 사용자는 디스플레이부(151) 또는 터치 패드를 스크롤 함으로써 디스플레이부(151)에 표시된 개체, 예를 들어, 아이콘에 위치한 커서 또는 포인터를 이동시킬 수 있다. 나아가, 손가락을 디스플레이부(151) 또는 터치 패드 상에서 이동시키는 경우, 손가락이 움직이는 경로가 디스플레이부(151)에 시각적으로 표시될 수도 있다. 이는 디스플레이부(151)에 표시되는 이미지를 편집함에 유용할 것이다.
디스플레이부(151) 및 터치 패드가 일정 시간 범위 내에서 함께 터치되는 경우에 대응하여, 이동 단말기(100)의 일 기능이 실행될 수도 있다. 함께 터치되는 경우로는, 사용자가 엄지 및 검지를 이용하여 이동 단말기(100)의 본체를 집는(clamping) 경우가 있을 수 있다. 이때, 실행되는 이동 단말기(100)의 일 기능은, 예를 들어, 디스플레이부(151) 또는 터치 패드에 대한 활성화 또는 비활성화일 수 있다.
이하에서, 이동 단말기(100)에서 3차원 입체 영상에 표시되는 개체들 사이의 거리 변화를 이용하여 객체들이 제어되는 메커니즘에 대해 설명한다.
도 2는 도 1에 도시된 이동 단말기(100)에 적용되는 제어 방법의 일 실시 예를 설명하기 위한 순서도이다. 도 2를 참조하면, 단계 S110에서, 복수의 객체들을 포함하는 3차원 입체 영상이 표시된다. 입체 디스플레이부(152, 도 1 참조)는 직접영상 방식에 의해 구현되는 3차원 입체 영상을 출력할 수 있다. 이러한 3차원 입체 영상은 이동 단말기(100)의 윈도우, 예를 들어, 입체 디스플레이부(152)의 일면을 기준으로 이동 단말기(100)의 외부로 돌출되거나 내부로 들어가는 형태로 이루어질 수 있다.
단계 S120에서, 3차원 입체 영상에 대응하는 감지 영역에서 감지 대상의 위치가 감지된다. 감지부(140, 도 1 참조)는 감지 대상의 2차원적 위치, 예를 들어, 이동 단말기(100)의 윈도우와 평행한 면상의 위치를 감지할 수 있다. 또한, 감지부(140)는 감지 대상의 3차원적 위치, 예를 들어, 이동 단말기(100)의 윈도우와의 수직거리까지 포함하는 위치를 감지할 수 있다.
단계 S130에서, 3차원 입체 영상에 포함되는 복수의 객체들 중 적어도 하나가 감지 대상의 위치에 근거하여 선택된다. 제어부(180)는 감지부(140)로부터 제공되는 감지 대상의 위치 정보를 이용하여 복수의 객체들 중 적어도 하나를 선택할 수 있다. 이때, 3차원 입체 영상에서 선택된 객체의 위치는 감지 영역에서 감지 대상의 위치에 대응한다.
단계 S140에서, 선택된 객체는 감지 대상의 이동에 따라 이동한다. 예를 들어, 감지 대상이 일 방향으로 이동하는 경우, 선택된 객체도 감지 대상의 이동 방향과 같은 방향으로 이동할 수 있다.
단계 S150에서, 선택된 객체의 이동으로 인해, 선택된 객체와 다른 객체 사이의 거리가 어느 방향으로 변화되는지가 판단된다. 판단 결과, 선택된 객체와 다른 객체 사이의 거리가 이동 단말기(100)의 윈도우에 대한 수직방향(이하, ‘수직방향’이라고 칭함)으로 변화되는 경우, 단계 S160이 진행된다. 반면, 선택된 객체와 다른 객체 사이의 거리가 이동 단말기(100)의 윈도우에 대한 수평방향(이하, ‘수평방향’이라고 칭함)으로 변화되는 경우, 단계 S190이 진행된다.
단계 S160에서, 선택된 객체와 다른 객체 사이의 거리가 증가 또는 감소하는지가 판단된다. 판단 결과, 선택된 객체와 다른 객체 사이의 거리가 증가하는 경우, 단계 S170이 진행된다. 단계 S170에서, 선택된 객체와 다른 객체 사이에 또 다른 객체가 생성된다. 반면, 선택된 객체와 다른 객체 사이의 거리가 감소하는 경우, 단계 S180이 진행된다. 단계 S180에서, 선택된 객체와 다른 객체 사이에 표시되는 객체들 중 적어도 하나가 삭제된다.
단계 S190에서, 선택된 객체와 다른 객체 사이에 표시되는 객체들의 위치가 수평방향으로 변경된다. 예를 들어, 선택된 객체와 다른 객체 사이에 표시되는 객체들의 간격은 수평방향으로 균등하게 조정될 수 있다.
상술한 바와 같이, 본 발명의 이동 단말기(100)에 적용되는 제어 방법의 일 실시 예에 의하면, 3차원 공간에서의 감지 대상의 이동에 따라 선택된 객체가 이동하고, 선택된 객체의 이동으로 인한 객체들 사이의 거리 변화에 따라 적어도 하나의 객체가 생성되거나 삭제되도록 객체 제어 동작이 수행될 수 있다. 또한, 객체들의 위치(간격)가 변경되도록 객체 제어 동작이 수행될 수 있다.
이로써, 이동 단말기(100)의 객체들은 선택된 객체의 이동과 관련되는 명령 외에 다른 추가 명령이 입력되지 않더라도 객체들 사이의 변화되는 공간을 활용하여 효율적으로 제어될 수 있다.
도 3a, 도 3b, 도 4a, 도 4b, 도 5a 및 도 5b는 도 2에 도시된 제어 방법에 따른 작동 예들을 보여주는 개념도들이다.
이하에서 설명되는 작동 예들에 있어서, 입체 디스플레이부(252)는 그 일면을 기준으로 이동 단말기(200)의 외부로 돌출되는 형태로 이루어진 3차원 입체 영상을 출력한다. 감지부(미도시됨)는 3차원 입체 영상에 대응하는 감지 영역(246)에서 감지 대상(248)의 위치를 감지한다. 제어부(미도시됨)는 감지 대상(248)의 위치에 근거하여 3차원 입체 영상에 표시되는 객체들을 제어한다.
도 3a 및 도 3b는 3차원 입체 영상에 포함되는 복수의 객체들(202, 204) 중 선택된 객체(202, 이하, ‘제 1 객체’라고 칭함)가 감지 대상(248)의 이동에 따라 수직방향으로 이동하는 경우를 보여준다.
도 3a를 참조하면, 제 1 객체(202)의 이동으로 인해 제 1 객체(202)와 선택되지 않은 객체(204, 이하, ‘제 2 객체’라고 칭함) 사이의 거리가 수직방향으로 증가하는 경우, 적어도 하나의 객체(206, 208)가 제 1 및 제 2 객체(202, 204) 사이에 생성된다.
이때, 이동 단말기(200)에 구동되고 있는 운영체제(OS) 및 애플리케이션에 따라 다양한 종류의 객체들이 제 1 및 제 2 객체(202, 204) 사이에 생성될 수 있다. 예를 들어, 빈 영역(3차원 입체 영상에 아무것도 표시되지 않은 영역), 메모장 또는 웹 브라우저 창의 빈 페이지, 클립보드, 가상 키보드, 아이콘, 멀티미디어 콘텐츠, 제어 메뉴, 전화번호목록, 대화창, 위젯(widget), E-Book, 문서, 스프레드 시트(spread sheet) 등이 제 1 및 제 2 객체(202, 204) 사이에 생성될 수 있다.
제 1 및 제 2 객체(202, 204) 사이에 생성되는 객체들의 수는 제 1 및 제 2 객체(202, 204) 사이의 변화되는 거리에 따라 정해질 수 있다. 예를 들어, 제 1 및 제 2 객체(202, 204) 사이의 거리가 증가할수록 생성되는 객체들의 수도 증가할 수 있다.
제 1 및 제 2 객체(202, 204) 사이에 생성된 객체들(206, 208)은 객체 속성을 반영하는 인디케이션을 포함할 수 있다. 예를 들어, 도면에 도시된 바와 같이, 생성된 객체들(206, 208)에 대한 추가적인 제어가 요구됨을 나타내는 인디케이션으로서, 더하기 기호가 생성된 객체들(206, 208) 상에 표시될 수 있다.
도 3b를 참조하면, 제 1 객체(202)의 이동으로 인해 제 1 객체(202)와 제 2 객체(204) 사이의 거리가 수직방향으로 감소하는 경우, 제 1 및 제 2 객체(202, 204) 사이에 표시되는 객체들(206, 208) 중 적어도 하나가 삭제된다.
이때, 제 1 및 제 2 객체(202, 204) 사이에 표시되는 객체들(206, 208)은 우선순위에 따라 삭제될 수 있다. 예를 들어, 도시된 바와 같이, 가장 나중에 생성된 객체(208)가 그 이전에 생성된 객체(206)보다 먼저 삭제될 수 있다.
도 4a 및 도 4b는 제 1 객체(202)가 감지 대상(248)의 이동에 따라 수평방향으로 이동하는 경우를 보여준다. 예를 들어, 도 4a 및 도 4b는 제 1 객체(202)가 입체 디스플레이부(252)와 평행한 면상에서 서로 다른 방향으로 이동하는 경우를 보여준다.
도 4a 및 도 4b를 참조하면, 제 1 객체(202)는 입체 디스플레이부(252)와의 수직거리를 유지하면서 수평방향으로 이동한다. 그리고, 이러한 제 1 객체(202)의 이동에 따라, 제 1 및 제 2 객체(202, 204) 사이에 표시되는 객체들(206, 208)의 위치가 수평방향으로 변경된다. 예를 들어, 객체들(202, 204, 206, 208)의 수평 간격이 균등해지도록, 제 1 및 제 2 객체(202, 204) 사이에 표시되는 객체들(206, 208)의 위치가 변경될 수 있다.
한편, 제 1 및 제 2 객체(202, 204) 사이에 표시되는 객체들(206, 208)은 제 1 및 제 2 객체(202, 204) 사이가 수직방향으로 증가하여 생성된 객체들일 수 있다.
도 5a 및 도 5b에서는, 제 1 및 제 2 객체(202, 204) 외에 또 하나의 선택된 객체(203, 이하, ‘제 3 객체’라고 칭함)가 더 도시된다. 도 5a 및 도 5b는 제 1 및 제 3 객체(202, 203)가 감지 대상(248)의 이동에 따라 수직방향으로 이동하는 경우를 보여준다. 즉, 도 5a 및 도 5b는 멀티터치(Multi-touch)를 이용하는 제어 방법의 실시 예를 보여준다.
도 5a를 참조하면, 제 1 및 제 3 객체(202, 203)는 감지 대상(248)의 이동에 따라 서로 간의 수직거리를 유지하면서 이동한다. 그리고, 이러한 제 1 및 제 3 객체(202, 203)의 이동으로 인해 제 1 및 제 3 객체(202, 203) 중 어느 하나와 제 2 객체(204) 사이의 거리가 수직방향으로 증가하는 경우, 적어도 하나의 객체(206)가 제 1 및 제 3 객체(202, 203) 중 어느 하나와 제 2 객체(204) 사이에 생성된다. 예를 들어, 적어도 하나의 객체(206)는, 도시된 바와 같이, 제 1 및 제 2 객체(202, 204) 사이에 생성될 수 있다.
도 5b를 참조하면, 제 1 및 제 3 객체(202, 203)는 감지 대상(248)의 이동에 따라 서로 멀어지는 방향으로 이동한다. 그리고, 이러한 제 1 및 제 3 객체(202, 203)의 이동으로 인해 제 1 및 제 3 객체(202, 203) 사이의 거리가 수직방향으로 증가하는 경우, 적어도 하나의 객체(206)가 제 1 및 제 3 객체(202, 203) 사이에 생성된다.
도 6은 도 2에 도시된 제어 방법과 관련되는 객체 고정 모드가 실행되는 경우를 예시적으로 보여주는 개념도이다. 여기서, 객체 고정 모드란, 감지 대상이 이동하더라도 선택된 객체의 위치가 고정되도록 선택된 객체의 속성을 변경하는 것을 말한다.
도 6을 참조하면, 제 1 객체(302)는 감지 대상(348)에 의해 입력되는 고정 명령에 응답하여 고정된다. 좀더 구체적으로, 고정 명령은 감지 대상(348)이 제 1 객체(302)를 감지 영역(346) 밖으로 드래그하는 경우 입력되고, 제 1 객체(302)는 이러한 고정 명령에 응답하여 고정된다. 이때, 제 1 객체(302)는 고정 명령이 입력되기 전까지는 감지 객체(302)의 이동에 따라 이동한다.
비록 도면에는 도시되지 않았지만, 고정 명령은 선택 키를 이용하여 입력될 수 있다. 또는, 고정 명령은 감지 대상(348)의 제 1 객체(302)에 대한 터치 횟수 및 시간 중 적어도 하나에 근거하여 입력될 수 있다.
객체 고정 모드가 실행되는 경우, 제 1 객체(302)가 고정되었음을 나타내는 인디케이션이 제 1 객체(302) 상에 표시될 수 있다.
한편, 본 발명의 실시 예에 있어서, 객체 고정 모드가 실행된 후에 제 1 및 제 2 객체(302, 304) 사이에 표시되는 객체들(306, 308)에 대한 추가적인 제어 동작이 수행될 수 있다. 이하에서, 사용자 편의를 높이기 위해 도 2에 도시된 제어 방법에 따라 객체들을 제어하고 나서 수행되는 객체 제어 동작에 대해 설명한다.
도 7 내지 도 12는 도 2에 도시된 제어 방법과 관련되는 추가적인 객체 제어 방법의 실시 예들을 보여주는 개념도들이다. 도 7 내지 11을 참조하여 설명되는 실시 예에 있어서, 이동 단말기(400)의 입체 디스플레이부(452)는 제 1 내지 제 4 객체(402, 404, 406, 408)를 포함하는 3차원 입체 영상을 출력한다. 여기서는, 제 3 및 4 객체(406, 408)가 제 1 및 제 2 객체(402, 404) 사이의 거리가 수직방향으로 증가함에 따라 제 1 및 제 2 객체(402, 404) 사이에 생성된 객체들을 의미한다. 즉, 여기에서 설명되는 제 3 객체(406)와 도 5a 및 도 5b에서의 제 3 객체(203)는 서로 다른 객체이다.
도 7을 참조하면, 감지 영역(446)에서 감지 대상(448)의 위치에 근거하여 제 4 객체(408)가 선택된다. 제 4 객체(408)가 선택되면, 제 4 객체(408)와 관련되는 제어 메뉴(401)가 3차원 입체 영상에 표시된다.
이러한 제어 메뉴(401)는 위젯, 메모장, MP3 플레이어 등의 후보 객체들에 대한 목록을 포함할 수 있다. 여기서, 제어 메뉴(401)의 목록상에 표시되는 후보 객체들의 명칭들은 스크롤 될 수 있다.
제어 메뉴(401)를 이용하여 입력되는 선택 정보에 따라 후보 객체들 중 하나(405, 이하, ‘제 5 객체’라고 칭함), 예를 들어, MP3 플레이어가 선택될 수 있다. 그리고, 제어 메뉴(401)를 이용하여 입력되는 선택 정보에 대응하는 제 5 객체(405)는 제 4 객체(408)에 추가된다.
도 8을 참조하면, 제 4 객체(408)는 감지 대상(448)에 의해 입력되는 삭제 명령에 응답하여 삭제된다. 좀더 구체적으로, 삭제 명령은 감지 대상(448)이 제 4 객체(408)를 감지 영역(446) 밖으로 드래그하는 경우 입력되고, 제 4 객체(408)는 이러한 삭제 명령에 응답하여 삭제된다.
제 4 객체(408)가 삭제되면, 제 4 객체(408)가 삭제된 위치를 빈 영역으로 남겨두거나, 추가적인 제어 동작이 수행될 수 있다. 예를 들어, 제 4 객체(408)가 삭제된 경우, 남아있는 제 1 내지 제 3 객체(402, 404, 406) 중 적어도 하나의 위치가 변경된다. 좀더 구체적으로, 제 1 내지 제 3 객체(402, 404, 406)의 간격이 균등해지도록 제 1 및 제 2 객체(402, 404) 사이에 표시되는 제 3 객체(406)의 위치가 변경될 수 있다.
다른 예를 들면, 제 4 객체(408)가 삭제된 경우, 제 4 객체(408)를 대체하는 제 6 객체(409)가 제 1 및 제 2 객체(402, 404) 사이의 빈 영역에 생성될 수 있다. 여기서, 제 6 객체(409)는 주변 객체와 관련되는 객체일 수 있다. 예를 들어, 제 6객체(409)는 E-mail과 관련되는 주소록일 수 있다. 제 1 및 제 2 객체(402, 404) 사이의 빈 영역은 제 4 객체(408)가 삭제되기 전에 있던 위치에 대응될 수 있다.
도 9를 참조하면, 제 4 객체(408)는 감지 대상(448)의 이동에 따라 제 1 및 제 2 객체(402, 404) 사이에서 이동한다. 그리고, 제 4 객체(408)가 이동하면, 제 1 및 제 2 객체(402, 404) 사이에 표시되는 적어도 하나의 객체의 위치가 변경된다. 예를 들어, 제 4 객체(408)가 제 3 객체(406)가 위치하는 곳으로 이동하는 경우, 제 3 및 제 4 객체(406, 408)의 위치는 서로 바뀔 수 있다.
도 10을 참조하면, 제 4 객체(408)는 클립보드를 포함할 수 있다. 클립보드는 텍스트, 이미지 등의 다양한 객체들(Obj1~Obj3)을 저장할 수 있다. 이러한 클립보드를 이용하여 복사, 자르기, 붙여넣기 등의 편집 동작이 수행될 수 있다. 예를 들어, 감지 대상(448)에 의해 입력되는 복사 명령에 응답하여 클립보드 내에 저장되어 있는 어느 하나의 객체(Obj2)를 복사하고, 감지 대상(448)에 의해 입력되는 붙여넣기 명령에 응답하여 복사된 객체(Obj2)가 제 3 객체(406)에 붙여넣어질 수 있다.
도 11을 참조하면, 제 4 객체(408)는 가상 키보드(408´)를 포함할 수 있다. 제 4 객체(408)가 가상 키보드(408´)를 포함하는 경우, 가상 키보드(408´)를 이용하여 입력되는 데이터는 제 4 객체(408)에 표시 및 저장될 수 있다.
좀더 구체적으로, 감지 대상(448)의 제 4 객체(408)에 대한 터치가 감지되면, 가상 키보드(408´)가 확대 및 팝업(pop-up)되고, 이러한 가상 키보드(408´)를 이용하여 데이터가 입력될 수 있다. 이때, 가상 키보드(408´)는 입체 디스플레이부(452)를 향해 기울어져 표시될 수 있다.
도 12를 참조하면, 제 1 및 제 2 객체(402, 404) 사이에 표시되는 제 3 및 제 4 객체(406, 408)가 하나의 그룹으로 묶일 수 있다. 좀더 구체적으로, 감지 대상(448)이 제 3 및 제 4 객체(406, 408)를 감지 영역(446) 내의 그룹화 영역(446´)으로 드래그하고, 그 결과, 제 3 및 제 4 객체(406, 408)가 그룹화 영역(446´)에 위치하는 경우, 제 3 및 제 4 객체(406, 408)가 그룹화된다.
예를 들어, 제 4 객체(408)가 감지 대상(448)의 드래그에 의해 그룹화 영역(446´)으로 이동 후에, 제 3 객체(406)가 감지 대상(448)의 드래그에 의해 그룹화 영역(446´)으로 이동하여 제 3 및 제 4 객체(406, 408)가 서로 인접하는 경우, 제 3 및 제 4 객체(406, 408)는 하나의 그룹으로 묶일 수 있다.
상술한 바와 같이, 객체들에 대한 추가, 삭제, 이동, 그룹화, 편집, 입력 동작 등의 추가적인 제어를 지원함으로써, 3차원 입체 영상에 표시되는 객체들을 제어함에 있어서 사용자 편의를 높일 수 있다.
도 13a 내지 도 13c는 본 발명의 이동 단말기에 적용되는 제어 방법의 일 실시 예와 관련되는 시각 효과를 보여주는 개념도들이다.
도 13a 내지 도 13c를 참조하여 설명되는 실시 예에 있어서, 이동 단말기(500)의 입체 디스플레이부(552)는 제 1 내지 제 2 객체(502, 504)를 포함하는 3차원 입체 영상을 출력한다. 제 1 객체(502)의 이동으로 인해 제 1 및 제 2 객체(502, 504) 사이의 거리가 수직방향으로 증가하는 경우, 제 3 객체(506)가 제 1 및 제 2 객체(502, 504) 사이에 생성된다.
제 3 객체(506)가 제 1 객체(502)를 제어함에 따라 생성된 객체임을 나타내는 시각 효과로서, 도 13a에 도시된 바와 같이 제 3 객체(506)의 일 부분이 폴딩(folding)되어 표시될 수 있고, 도 13b에 도시된 바와 같이 제 3 객체(506)가 입체 디스플레이부(552)를 향해 기울어져 표시될 수 있으며, 도 13c에 도시된 바와 같이 제 3 객체(506)가 2차원적으로 확대되어 표시될 수 있다.
비록 도면에는 도시되지 않았지만, 제 3 객체(506)가 제 1 객체(502)를 제어함에 따라 생성된 객체임을 나타내는 시각 효과로서, 제 3 객체(506)의 모양, 형태, 투명도, 배경색, 글자색 등을 다양하게 변경하거나, 제 3 객체(506)에 대해 하이라이트, 밑줄, 테두리 강조 등의 효과를 줄 수 있다. 또한, 페이지 번호, 그래프, 게이지(gage) 수치 등의 정보도 제 3 객체(506) 상에 표시될 수 있다.
도 14a 및 도 14b는 본 발명의 이동 단말기에 적용되는 제어 방법의 일 실시 예와 관련되는 객체 감지 범위를 보여주는 개념도이다.
도 14a 및 도 14b를 참조하면, 이동 단말기의 감지부가 감지 대상을 감지함에 있어서, 3차원 입체 영상에 표시되는 어느 하나의 객체(602)에 대응하는 감지 범위는 그 객체(602)에 대한 수직거리에 따라 정해질 수 있다. 예를 들어, 객체(602)로부터 멀어질수록 감지 범위는 넓어지고, 객체(602)로부터 가까워질수록 감지 범위는 좁아질 수 있다. 따라서, 객체(602)로부터 제 1 수직거리(d1)만큼 떨어진 평면상에서의 감지 범위는 제 2 수직거리(d2)만큼 떨어진 평면상에서의 감지 범위보다 좁다.
한편, 객체(602)에 대한 수직거리에 따른 감지 범위의 모양은, 도 14a에 도시된 바와 같이 원형일 수 있고, 도 14b에 도시된 바와 같이 사각형일 수 있다. 다만, 감지 범위의 모양은 이에 한정되지 않고 다양하게 구현될 수 있다.
도 15는 도 1에 도시된 이동 단말기(100)에 적용되는 제어 방법의 다른 실시 예를 설명하기 위한 순서도이다. 이하에서, 도 2에 도시된 제어 방법과 중복되는 설명은 생략한다.
도 15를 참조하면, 단계 S210에서, 복수의 객체들을 포함하는 3차원 입체 영상이 입체 디스플레이부(152, 도 1 참조)에 표시된다.
단계 S220에서, 복수의 객체들 중 선택된 객체는 입체 디스플레이부(152)에 가해지는 터치의 세기, 횟수 및 시간 중 적어도 하나에 근거하여 수직방향으로 이동한다. 예를 들어, 입체 디스플레이부(152)에 가해지는 터치의 횟수에 따라 선택된 객체가 입체 디스플레이부(152)와 멀어질 수 있다. 다른 예를 들면, 입체 디스플레이부(152)에 가해지는 터치의 시간에 따라 선택된 객체가 입체 디스플레이부(152)와 가까워질 수 있다.
단계 S230에서, 선택된 객체와 다른 객체 사이의 거리가 증가 또는 감소하는지가 판단된다. 판단 결과, 선택된 객체와 다른 객체 사이의 거리가 증가하는 경우, 단계 S240이 진행된다. 단계 S240에서, 선택된 객체와 다른 객체 사이에 또 다른 객체가 생성된다. 반면, 선택된 객체와 다른 객체 사이의 거리가 감소하는 경우, 단계 S250이 진행된다. 단계 S250에서, 선택된 객체와 다른 객체 사이에 표시되는 객체들 중 적어도 하나가 삭제된다.
상술한 바와 같이, 본 발명의 이동 단말기(100)에 적용되는 제어 방법의 다른 실시 예에 의하면, 입체 디스플레이부(152) 상에서의 터치를 이용하여, 선택된 객체를 수직방향으로 이동하고, 선택된 객체의 이동에 따라 적어도 하나의 객체가 생성되거나 삭제되도록 객체 제어 동작이 수행될 수 있다.
도 16a 및 도 16b는 도 15에 도시된 제어 방법에 따른 작동 예들을 보여주는 개념도들이다.
이하에서 설명되는 작동 예들에 있어서, 입체 디스플레이부(752)는 그 일면을 기준으로 이동 단말기(700)의 내부로 들어가는 형태로 이루어진 3차원 입체 영상을 출력한다. 감지부(미도시됨)는 입체 디스플레이부(752) 상에서의 터치를 감지한다. 제어부(미도시됨)는 감지되는 터치에 근거하여 3차원 입체 영상에 표시되는 객체들을 제어한다.
도 16a 및 도 16b는 제 1 객체(702)가 입체 디스플레이부(752)에 가해지는 터치의 세기, 횟수 및 시간 중 적어도 하나에 근거하여 수직방향으로 이동하는 경우를 보여준다. 예를 들어, 입체 디스플레이부(752)에 가해지는 터치의 횟수가 증가할수록, 제 1 객체(702)는 입체 디스플레이부(752)와 멀어질 수 있다. 다른 예를 들면, 입체 디스플레이부(752)에 가해지는 터치의 시간이 증가할수록, 제 1 객체(702)는 입체 디스플레이부(752)와 가까워질 수 있다.
도 16a를 참조하면, 제 1 객체(702)의 이동으로 인해 제 1 및 제 2 객체(702, 704) 사이의 거리가 수직방향으로 증가하는 경우, 적어도 하나의 객체(706, 708)가 제 1 및 제 2 객체(702, 704) 사이에 생성된다.
도 16b를 참조하면, 제 1 객체(702)의 이동으로 인해 제 1 및 제 2 객체(702, 704) 사이의 거리가 수직방향으로 감소하는 경우, 제 1 및 제 2 객체(702, 704) 사이에 표시되는 객체들(706, 708) 중 적어도 하나가 삭제된다.
이때, 제 1 및 제 2 객체(702, 704) 사이에 표시되는 객체들(706, 708)은 우선순위에 따라 삭제될 수 있다. 예를 들어, 도시된 바와 같이, 가장 나중에 생성된 객체(708)가 그 이전에 생성된 객체(706)보다 먼저 삭제될 수 있다.
도 17은 도 1에 도시된 이동 단말기(100)에 적용되는 제어 방법의 또 다른 실시 예를 설명하기 위한 순서도이다. 이하에서, 도 2에 도시된 제어 방법과 중복되는 설명은 생략한다.
도 17을 참조하면, 단계 S310에서, 복수의 객체들을 포함하는 3차원 입체 영상이 입체 디스플레이부(152, 도 1 참조)에 표시된다.
단계 S320에서, 복수의 객체들 중 선택된 객체는 입체 디스플레이부(152) 상에서의 드래그에 근거하여 수평방향으로 이동한다. 예를 들어, 선택된 객체는 입체 디스플레이부(152) 상에서의 드래그 방향과 같은 방향으로 입체 디스플레이부(152)와 멀어지거나 가까워질 수 있다.
단계 S330에서, 선택된 객체의 이동으로 인해 선택된 객체와 다른 객체 사이의 거리가 수평방향으로 변화되는 경우, 선택된 객체와 다른 객체 사이에 표시되는 객체들의 위치가 수평방향으로 변경된다. 예를 들어, 선택된 객체와 다른 객체 사이에 표시되는 객체들의 간격은 수평방향으로 균등하게 조정될 수 있다.
상술한 바와 같이, 본 발명의 이동 단말기(100)에 적용되는 제어 방법의 또 다른 실시 예에 의하면, 입체 디스플레이부(152) 상에서의 드래그를 이용하여, 선택된 객체를 수평방향으로 이동하고, 선택된 객체의 이동에 따라 객체들의 위치(간격)가 변경되도록 객체 제어 동작이 수행될 수 있다.
도 18은 도 17에 도시된 제어 방법에 따른 일 작동 예를 보여주는 개념도이다.
여기에서 설명되는 작동 예에 있어서, 입체 디스플레이부(852)는 그 일면을 기준으로 이동 단말기(800)의 내부로 들어가는 형태로 이루어진 3차원 입체 영상을 출력한다. 감지부(미도시됨)는 입체 디스플레이부(852) 상에서의 드래그를 감지한다. 제어부(미도시됨)는 감지되는 드래그에 근거하여 3차원 입체 영상에 표시되는 객체들을 제어한다.
도 18을 참조하면, 제 1 객체(802)는 입체 디스플레이부(852)와의 수직거리를 유지하면서 입체 디스플레이부(852) 상에서의 드래그 방향과 같은 방향으로 이동한다. 그리고, 이러한 제 1 객체(802)의 이동에 따라, 제 1 및 제 2 객체(802, 804) 사이에 표시되는 객체들(806, 808)의 위치가 수평방향으로 변경된다. 예를 들어, 객체들(802, 804, 806, 808)의 수평 간격이 균등해지도록, 제 1 및 제 2 객체(802, 804) 사이에 표시되는 객체들(806, 808)의 위치가 변경될 수 있다.
한편, 제 1 및 제 2 객체(802, 804) 사이에 표시되는 객체들(806, 808)은 제 1 및 제 2 객체(802, 804) 사이가 수직방향으로 증가하여 생성된 객체들일 수 있다.
본 발명의 범위 또는 기술적 사상을 벗어나지 않고 본 발명의 구조가 다양하게 수정되거나 변경될 수 있음은 이 분야에 숙련된 자들에게 자명하다. 상술한 내용을 고려하여 볼 때, 만약 본 발명의 수정 및 변경이 아래의 청구항들 및 동등물의 범주 내에 속한다면, 본 발명이 이 발명의 변경 및 수정을 포함하는 것으로 여겨진다.

Claims (28)

  1. 복수의 객체들을 디스플레이부에 표시하는 단계;
    상기 디스플레이부에 터치를 가하는 감지 대상의 위치에 근거하여 상기 복수의 객체들 중 제 1 객체를 선택하는 단계;
    상기 제 1 객체가 선택된 상태에서, 상기 감지 대상의 상기 제1 객체에 대한 터치 세기에 따라 상기 제 1 객체를 이동하는 단계;
    상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 일 방향으로 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성하는 단계;
    상기 감지 대상에 의해 입력되는 고정명령에 응답하여 상기 제1 객체를 고정하는 단계; 및
    상기 감지 대상의 상기 제1 및 제2 객체 사이에 생성된 객체에 가해지는 터치 세기에 따라, 상기 생성된 객체를 상기 제1 및 제2 객체의 사이에서 이동하고, 상기 생성된 객체가 이동된 위치에 있던 객체를 상기 생성된 객체의 이전 위치로 상대 이동하는 단계를 포함하는 이동 단말기의 제어 방법.
  2. 제 1 항에 있어서,
    상기 제 1 객체의 이동으로 인해 상기 제 1 및 제 2 객체 사이의 거리가 상기 일 방향으로 감소하는 경우, 상기 제 1 및 제 2 객체 사이에 표시되는 객체들 중 적어도 하나를 삭제하는 단계를 더 포함하는 이동 단말기의 제어 방법.
  3. 제 2 항에 있어서,
    상기 제 1 및 제 2 객체 사이에 생성 또는 삭제되는 객체들의 수는 상기 제 1 및 제 2 객체 사이의 변화되는 거리에 따라 정해지는 것을 특징으로 하는 이동 단말기의 제어 방법.
  4. 제 2 항에 있어서,
    상기 복수의 객체들은 3차원 입체 영상으로 표시되고,
    상기 일 방향은 상기 3차원 입체 영상을 출력하는 상기 디스플레이부에 대한 수직 방향인 것을 특징으로 하는 이동 단말기의 제어 방법.
  5. 삭제
  6. 삭제
  7. 제 1 항에 있어서,
    상기 감지 대상의 위치에 근거하여 상기 제 1 및 제 2 객체 사이에 생성되는 제 4 객체를 선택하는 단계; 및
    상기 제 4 객체가 선택된 상태에서, 상기 제 4 객체를 제어하는 단계를 더 포함하는 이동 단말기의 제어 방법.
  8. 제 7 항에 있어서,
    상기 제 4 객체를 제어하는 단계는,
    상기 제 4 객체와 관련되는 제어 메뉴를 표시하는 단계; 및
    상기 제어 메뉴를 이용하여 입력되는 선택 정보에 대응하는 제 5 객체를 상기 제 4 객체에 추가하는 단계를 포함하는 이동 단말기의 제어 방법.
  9. 제 7 항에 있어서,
    상기 제 4 객체를 제어하는 단계는,
    상기 감지 대상에 의해 입력되는 삭제 명령에 응답하여 상기 제 4 객체를 삭제하는 단계를 포함하는 이동 단말기의 제어 방법.
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 제 7 항에 있어서,
    상기 제 4 객체를 제어하는 단계는,
    상기 제 4 객체가 클립보드를 포함하는 경우, 상기 클립보드를 이용하여 편집 동작을 수행하는 단계를 포함하는 이동 단말기의 제어 방법.
  15. 제 7 항에 있어서,
    상기 제 4 객체를 제어하는 단계는,
    상기 제 4 객체가 가상 키보드를 포함하는 경우, 상기 가상 키보드를 이용하여 입력되는 데이터를 상기 제 4 객체에 표시 및 저장하는 단계를 포함하는 이동 단말기의 제어 방법.
  16. 삭제
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
  21. 제 1 항에 있어서,
    상기 제 1 및 제 2 객체 사이에 생성되는 상기 적어도 하나의 객체는 객체 속성을 반영하는 인디케이션을 포함하는 이동 단말기의 제어 방법.
  22. 제 1 항에 있어서,
    상기 복수의 객체들은 3차원 입체 영상으로 표시되고,
    상기 3차원 입체 영상에 표시되는 객체들 각각에 대응하는 감지 범위는 상기 각각의 객체에 대한 수직거리에 따라 정해지는 것을 특징으로 하는 이동 단말기의 제어 방법.
  23. 복수의 객체들을 포함하는 영상을 디스플레이부에 표시하는 단계;
    상기 디스플레이부에 가해지는 터치의 세기, 횟수 및 시간 중 적어도 하나에 근거하여 제 1 객체를 상기 디스플레이부에 대한 수직방향으로 이동하는 단계;
    상기 제 1 객체가 상기 수직방향으로 이동하여 상기 제 1 객체 및 제 2 객체 사이의 거리가 증가하는 경우, 적어도 하나의 객체를 상기 제 1 및 제 2 객체 사이에 생성하는 단계;
    상기 제1 객체에 가해진 터치에 의해 입력된 고정명령에 따라 상기 제1 객체의 수직방향의 위치를 고정하는 단계; 및
    상기 디스플레이부에 연속하여 가해지는 터치의 세기에 따라, 상기 제1 및 제 2 객체 사이에 생성된 객체를 상기 제1 및 제2 객체의 사이에서 수직방향으로 이동하고, 상기 생성된 객체가 이동된 위치에 있던 객체를 상기 생성된 객체의 이전 위치로 수직 이동하는 단계를 포함하는 이동 단말기의 제어 방법.
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
KR1020110026589A 2011-03-24 2011-03-24 이동 단말기 및 그것의 제어방법 KR101781908B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020110026589A KR101781908B1 (ko) 2011-03-24 2011-03-24 이동 단말기 및 그것의 제어방법
US13/178,780 US8797317B2 (en) 2011-03-24 2011-07-08 Mobile terminal and control method thereof
CN201110251163.3A CN102693069B (zh) 2011-03-24 2011-08-16 移动终端及其控制方法
EP11007902.7A EP2503438B1 (en) 2011-03-24 2011-09-29 Mobile terminal and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110026589A KR101781908B1 (ko) 2011-03-24 2011-03-24 이동 단말기 및 그것의 제어방법

Publications (2)

Publication Number Publication Date
KR20120109090A KR20120109090A (ko) 2012-10-08
KR101781908B1 true KR101781908B1 (ko) 2017-09-26

Family

ID=44897588

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110026589A KR101781908B1 (ko) 2011-03-24 2011-03-24 이동 단말기 및 그것의 제어방법

Country Status (4)

Country Link
US (1) US8797317B2 (ko)
EP (1) EP2503438B1 (ko)
KR (1) KR101781908B1 (ko)
CN (1) CN102693069B (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5785753B2 (ja) * 2011-03-25 2015-09-30 京セラ株式会社 電子機器、制御方法および制御プログラム
JP5734422B2 (ja) * 2011-05-24 2015-06-17 三菱電機株式会社 設備制御装置、操作受付方法及びプログラム
US20120304090A1 (en) * 2011-05-28 2012-11-29 Microsoft Corporation Insertion of picture content for use in a layout
WO2013005586A1 (ja) * 2011-07-04 2013-01-10 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 画像処理装置、画像処理方法、及び画像処理プログラム
US8943582B1 (en) * 2012-07-18 2015-01-27 Amazon Technologies, Inc. Transferring information among devices using cameras
JP5751233B2 (ja) * 2012-10-02 2015-07-22 株式会社デンソー 操作デバイス
US9652115B2 (en) * 2013-02-26 2017-05-16 Google Inc. Vertical floor expansion on an interactive digital map
JP6206099B2 (ja) * 2013-11-05 2017-10-04 セイコーエプソン株式会社 画像表示システム、画像表示システムを制御する方法、および、頭部装着型表示装置
KR102399589B1 (ko) * 2014-11-05 2022-05-18 삼성전자주식회사 디바이스에 오브젝트를 디스플레이 하는 방법, 그 디바이스 및 기록매체
KR102337216B1 (ko) 2015-01-05 2021-12-08 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
CN107823877A (zh) * 2016-09-16 2018-03-23 天津思博科科技发展有限公司 应用三维定位传感器实现的虚拟运动游戏装置
KR102316024B1 (ko) * 2017-03-02 2021-10-26 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 사용자 인터페이스 표시 방법
WO2019027919A2 (en) 2017-08-01 2019-02-07 Intuitive Surgical Operations, Inc. TOUCH SCREEN USER INTERFACE FOR INTERACTING WITH A VIRTUAL MODEL
DE102019200090A1 (de) * 2019-01-07 2020-07-09 Continental Automotive Gmbh Bedienvorrichtung zur Bedienung mindestens eines Gerätes und Verfahren zur Bedienung einer solchen Bedienvorrichtung

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011013778A (ja) 2009-06-30 2011-01-20 Sony Corp 立体画像表示装置、物体近接検出装置および電子機器

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6727924B1 (en) * 2000-10-17 2004-04-27 Novint Technologies, Inc. Human-computer interface including efficient three-dimensional controls
US7043701B2 (en) * 2002-01-07 2006-05-09 Xerox Corporation Opacity desktop with depth perception
JP4325449B2 (ja) * 2004-03-19 2009-09-02 ソニー株式会社 表示制御装置，表示制御方法，記録媒体
JP4274997B2 (ja) 2004-05-06 2009-06-10 アルパイン株式会社 操作入力装置および操作入力方法
KR100608589B1 (ko) * 2004-07-24 2006-08-03 삼성전자주식회사 3차원 모션 그래픽 사용자 인터페이스 및 이를 제공하는방법 및 장치
CN101308441B (zh) * 2004-10-12 2010-09-22 日本电信电话株式会社 三维显示控制方法和三维显示控制装置
US8334841B2 (en) * 2006-03-13 2012-12-18 Navisense Virtual user interface method and system thereof
US8578282B2 (en) * 2006-03-15 2013-11-05 Navisense Visual toolkit for a virtual user interface
US8402382B2 (en) * 2006-04-21 2013-03-19 Google Inc. System for organizing and visualizing display objects
US8284165B2 (en) * 2006-10-13 2012-10-09 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US8726194B2 (en) * 2007-07-27 2014-05-13 Qualcomm Incorporated Item selection using enhanced control
US9513765B2 (en) * 2007-12-07 2016-12-06 Sony Corporation Three-dimensional sliding object arrangement method and system
US8576181B2 (en) * 2008-05-20 2013-11-05 Lg Electronics Inc. Mobile terminal using proximity touch and wallpaper controlling method thereof
KR101481556B1 (ko) * 2008-09-10 2015-01-13 엘지전자 주식회사 이동 단말기 및 이를 이용한 객체 표시방법
KR101586627B1 (ko) * 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
KR20100041006A (ko) * 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
US20120005624A1 (en) * 2010-07-02 2012-01-05 Vesely Michael A User Interface Elements for Use within a Three Dimensional Scene
CN101989179A (zh) 2010-11-09 2011-03-23 福州瑞芯微电子有限公司 前进式三维用户界面的实现方法和移动终端

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011013778A (ja) 2009-06-30 2011-01-20 Sony Corp 立体画像表示装置、物体近接検出装置および電子機器

Also Published As

Publication number Publication date
EP2503438B1 (en) 2018-08-22
CN102693069B (zh) 2015-04-22
EP2503438A3 (en) 2016-06-08
US8797317B2 (en) 2014-08-05
EP2503438A2 (en) 2012-09-26
CN102693069A (zh) 2012-09-26
US20120242652A1 (en) 2012-09-27
KR20120109090A (ko) 2012-10-08

Similar Documents

Publication Publication Date Title
KR101781908B1 (ko) 이동 단말기 및 그것의 제어방법
US8780076B2 (en) Mobile terminal and method for controlling the same
KR101943357B1 (ko) 이동 단말기 및 그것의 제어방법
KR101899972B1 (ko) 이동 단말기 및 그것의 제어 방법
US20120038625A1 (en) Method for controlling depth of image and mobile terminal using the method
US20110246877A1 (en) Mobile terminal and image display controlling method thereof
US9459785B2 (en) Electronic device and contents generation method thereof
KR101810468B1 (ko) 이동 단말기 및 그것의 제어 방법
KR101952177B1 (ko) 이동 단말기 및 그것의 제어 방법
US10613744B2 (en) Mobile terminal and method for controlling the same
CN104423878A (zh) 显示装置以及控制该显示装置的方法
KR20120106284A (ko) 이동 단말기 및 그 제어방법
KR20120023262A (ko) 이동 단말기 및 이것의 3차원 디스플레이 제어 방법
KR20140090074A (ko) 영상표시장치 및 그것의 제어방법
US8941648B2 (en) Mobile terminal and control method thereof
KR20120034302A (ko) 이동 단말기 및 그 제어방법
KR101287966B1 (ko) 이동 단말기 및 그 동작 제어 방법
KR20110065748A (ko) 이동 단말기 및 그 제어방법
KR20130091182A (ko) 이동 단말기 및 그것의 제어 방법
KR101753033B1 (ko) 이동 단말기 및 그 제어방법
KR101850391B1 (ko) 이동 단말기 및 그것의 제어 방법
KR101260771B1 (ko) 이동 단말기 및 그것의 제어 방법
KR101970527B1 (ko) 이동 단말기 및 그것의 제어 방법
KR20130084879A (ko) 이동 단말기 및 그것의 제어 방법
KR20130060862A (ko) 이동 단말기 및 그것의 제어 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
GRNT Written decision to grant