KR20060092989A - 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 - Google Patents

데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 Download PDF

Info

Publication number
KR20060092989A
KR20060092989A KR1020050108665A KR20050108665A KR20060092989A KR 20060092989 A KR20060092989 A KR 20060092989A KR 1020050108665 A KR1020050108665 A KR 1020050108665A KR 20050108665 A KR20050108665 A KR 20050108665A KR 20060092989 A KR20060092989 A KR 20060092989A
Authority
KR
South Korea
Prior art keywords
user interface
main menu
item
menu
items
Prior art date
Application number
KR1020050108665A
Other languages
English (en)
Inventor
매지드 앤워
잭 맥긴리
스코트 에이. 젠슨
제임스 크루에트
Original Assignee
픽셀 (리서치) 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 픽셀 (리서치) 리미티드 filed Critical 픽셀 (리서치) 리미티드
Publication of KR20060092989A publication Critical patent/KR20060092989A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Telephone Function (AREA)

Abstract

데이터 처리 장치용 그래픽 사용자 인터페이스는 사용자에게 친근한 메뉴 시스템 및 네비게이션 능력을 제공한다. 메뉴 시스템은 각각 가시 영역을 갖는 제 1 다수의 주메뉴 항목을 디스플레이에 제공한다. 네비게이션 모듈은 사용자가 메뉴 시스템을 네비게이팅할 수 있게 한다. 표시 프로세스는 제 1 주메뉴 항목으로의 네비게이션에 응하여, 상기 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시하면서, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 제 1 주메뉴 항목에 관련된 제 1 다수의 부메뉴 항목을 표시한다.

Description

데이터 처리 장치 및 시스템에 대한 사용자 인터페이스{USER INTERFACES FOR DATA PROCESSING DEVICES AND SYSTEMS}
도 1은 본 발명의 예시적인 실시예에 따른 사용자 인터페이스를 포함하는 데이터 처리 장치의 개념상의 블록도이다.
도 2a 및 2b는 본 발명의 예시적인 실시예에 따른 예시적인 데이터 처리 장치의 입력 장치들의 평면도이다.
도 3은 본 발명의 일 예시적인 실시예에 따른 메뉴의 개념상의 블록도이다.
도 4 ~ 도 6은 본 발명의 다양한 양상에 따른 메뉴 조정, 메뉴 항목 선택, 메뉴 항목 강조 및 메뉴 항목 "표시" 기술의 실시예들을 설명한다.
도 7은 본 발명의 추가 양상에 따른 움직이는 줌 전환에 관한 실시예의 개략도이다.
도 8은 본 발명의 추가 양상에 따른 움직이는 줌 전환에 관한 추가 실시예의 개략도이다.
도 9 ~ 도 11은 본 발명의 예시적인 실시예에 따른 도 7 및 도 8의 줌 전환을 이용하는 디스플레이의 예들을 설명한다.
도 12는 본 발명의 추가 양상에 따른 추가 디스플레이 줌 기능의 실시예의 개략도이다.
도 13은 본 발명의 예시적인 실시예에 따른 메뉴 체계 및 데이터 내용을 통한 줌 메타포(Metaphor)의 일관된 사용을 설명한다.
도 14 및 도 15는 본 발명의 예시적인 실시예에 따른 "z-오더(z-order)" 강조 기술의 예들을 설명한다.
<도면의 주요부분에 대한 부호의 설명>
100 : 데이터 처리 장치 102 : 사용자 인터페이스
104 : 입력 장치 106 : 출력 장치
108 : 방향 컨트롤 110 : 선택 컨트롤
112 : 선택 해제 컨트롤 114 : 디스플레이
120 : 메뉴 시스템 122 : 네비게이션 모듈
124 : 메뉴 126 : 강조 표시 프로세스
128 : 표시 프로세스 130 : 방향 프로세스
132 : 선택 프로세스 134 : 선택 해제 프로세스
180 : 애플리케이션 182 : 기억 장치
본 발명은 데이터 처리 장치 및 이를 동작시키기 위한 사용자 인터페이스에 관한 것이다.
이동 전화 및 다른 소형 데이터 처리 장치들에 대한 사용자 인터페이스 설계 는 한정된 디스플레이 스크린 영역, 이러한 장치들에 제공될 수 있는 한정된 수의 컨트롤 및 신속하고 간단하며 직관적인 장치 동작의 필요성에 비추어 굉장한 난제를 제시한다. 이동 전화는 상당한 기능성(예를 들어, 연결 관리, 메시지 생성 및 전송, 전화 설정 개인화 및 알람 설정)을 제공한다. 이동 전화 사용자 인터페이스의 설계는 실질적으로 사용자가 자신의 이동 전화에 포함된 기능들과 정보를 얼마나 쉽게 네비게이팅할 수 있는지를 결정한다.
이동 전화 사용자 인터페이스들의 예로는 기본 5-방향 로커(rocker) 사용자 인터페이스, 미국 워싱턴 레드먼드의 마이크로소프트사(社)로부터 입수 가능한 WINDOWS SMARTPHONE 및 핀란드의 노키아사(社)로부터 입수 가능한 NOKIA SERIES 60이 있다. 이들 사용자 인터페이스는 원하는 기능을 찾아내는데 어려움을 갖는 사용자들로부터의 사용성이 제한된다. 또한, 사용자들이 버튼 기능에 대해 혼동한다. 이들 인터페이스의 버튼들의 기능은 버튼들을 누르는 상황에 따라 중요하게 변경된다.
또한, SMARTPHONE 및 NOKIA SERIES 60TM은 소프트 키의 사용에 크게 의존한다. 소프트 키는 일반적으로 디스플레이 바로 아래에 위치하는 문맥 감지형 다기능 컨트롤이다. 소프트 키들은 사용자들에게 추가 기능을 제공하지만, 이들은 공간이 중요한 디스플레이 상에 귀중한 스크린 영역을 차지한다.
이동 전화 사용자 인터페이스 설계에 있어서 한 가지 난제는 직관적이고, 익 히기 쉬우며, 일관적이고 예상하기 쉬운 방식으로 동작하고, 한정된 디스플레이 공간을 최상으로 활용하는 사용자 인터페이스를 제공하는 것이다. 사용자 인터페이스는 사용자가 이용할 수 있는 컨트롤이나 옵션이 너무 많아 혼란을 일으키지 않게 하면서 전화기 본래의 복잡성을 관리하기에 충분한 개수의 컨트롤을 제공할 필요가 있다. 따라서 본 발명의 양상들은 전화기 및 다른 소형 연산 장치 사용자들에게 보다 직관적이고 유용한 사용자 인터페이스를 제공하는 것을 목적으로 한다.
한 양상에 있어서, 본 발명은 디스플레이 및 방향 컨트롤을 갖는 데이터 처리 장치에 사용하기 위한 그래픽 사용자 인터페이스에 관련된다. 사용자 인터페이스는 제 1 다수의 주메뉴 항목을 포함하는 메뉴 시스템을 포함한다. 사용자 인터페이스는 각각의 주메뉴 항목에 데이터 처리 장치의 디스플레이 상의 가시 영역을 할당한다. 일 실시예에서, 사용자 인터페이스는 각 주메뉴 항목에 일반적으로 직사각형인 가시 영역을 하나씩 할당한다. 가시 영역은 주메뉴 항목에 대응하는 아이콘 및 텍스트 라벨을 포함할 수 있다.
사용자 인터페이스는 또한 사용자로부터의 입력을 수신하고 입력에 응하여 메뉴 시스템을 네비게이팅하는 네비게이션 모듈을 포함한다. 또한, 사용자 인터페이스는 사용자가 네비게이팅한 주메뉴 항목에 할당된 가시 영역 내에 제 1 다수의 부메뉴 항목을, 예를 들어 아이콘들로 이루어진 수평 행으로 표시하는 표시 프로세스를 갖는다. 주메뉴 항목이 네비게이팅될 때에도, 사용자 인터페이스는 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시한다. 일 실시예에서, 제 2 주메뉴 항목으로 네비게이팅하는 사용자에 응하여, 사용자 인터페이스는 이전에 네비게이팅 된 주메뉴 항목의 가시 영역에 표시되는 어떤 부메뉴 항목도 표시하지 않게 된다.
표시 프로세스에 의해 노출되는 부메뉴 항목들은 네비게이션 및/또는 기능 바로 가기를 포함할 수 있다. 네비게이션 바로 가기의 선택은 하부 데이터 처리 장치 기능의 실행에 대한 루트를 포함하여, 메뉴 시스템 내의 위치로의 가속 루트를 제공한다. 주메뉴 항목(360) 내에서 기능 바로 가기의 선택은 그 주메뉴 항목에 관련된 추가 기능들에 대한 액세스를 제공한다. 메뉴 항목들은 데이터 내용에 링크될 수도 있다. 메뉴 항목은 텍스트 및/또는 그래픽 아이콘으로 제시될 수 있다. 메뉴 항목들은 일 실시예에서는 선택 프로세스에 의해 해석되는 선택 컨트롤의 트리거를 통해 선택된다. 일 실시예에서, 메뉴 항목의 선택은 선택 해제 프로세스에 의해 해석되는 선택 해제 컨트롤의 트리거링에 의해 표시될 수 있다. 이로써, 선택 및 선택 해제 프로세스는 메뉴 시스템의 메뉴 레벨들 사이에 네비게이션을 제공한다.
사용자 인터페이스는 일 실시예에서 데이터 처리 장치가 동작하고 있는 상황에 기반하여 어떤 부메뉴 항목이 표시되는지를 결정할 수 있다. 예를 들어, 일 실시예에서 표시되는 부메뉴 항목들은 네트워크나 주변 장치들의 가용성에 의존한다.
일 실시예에서 사용자 인터페이스는 또한 메뉴 항목이 성공적으로 네비게이팅되었음을 사용자에게 지시하는 강조 표시 프로세스를 포함한다. 강조 표시는 사용자에 의해 네비게이팅된 메뉴 항목에 대응하는 가시 영역, 텍스트 또는 그래픽의 스케일링, 움직임 또는 z-오더의 변경을 포함할 수 있다. 일 실시예에서, 강조 표시되지 않은 메뉴 항목들은 디스플레이 상에서 그대로 정적이다. 그 결과, 강조 표시된 메뉴 항목들은 강조 표시되지 않은 메뉴 항목들을 오버랩할 수도 있다. 다른 실시예에서, 강조 표시된 메뉴 항목들은 적어도 하나의 강조 표시되지 않은 메뉴 항목 상에 모조 그림자를 투사할 수도 있다.
강조 표시된 메뉴 항목들은 데이터 처리 장치상의 선택 컨트롤을 사용함으로써 선택될 수 있다. 부메뉴 항목의 강조 표시에 의해 부메뉴 항목에 대응하는 추가 정보, 예를 들어 한정은 아닌 텍스트 라벨이나 관련 데이터 내용이 표시될 수 있다. 일 실시예에서, 강조 표시 프로세스는 메뉴 시스템의 대다수의 메뉴 항목들에 대해 일관된 강조 효과를 적용한다.
일 실시예에서, 사용자 인터페이스는 메뉴 항목들을 선택하는 사용자에 응하여 다수의 줌 효과를 적용한다. 줌은 줌인 및 줌아웃 모듈에 의해 제어될 수 있다. 이러한 모듈들은 선택 및 선택 해제 프로세스와 통합될 수 있다. 일 실시예에서, 적어도 하나의 줌 효과는 선택된 메뉴 항목에 중심을 둔다. 대안적으로, 줌은 디스플레이의 중앙에 중심을 둔다. 어떤 줌 효과에 있어서, 주메뉴 항목의 선택에 응하여 사용자 인터페이스는 선택의 스케일링 및 제 1 다수의 주메뉴 항목을 제 2 다수의 주메뉴 항목으로 부분적으로 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시한다. 다른 예에서, 메뉴 항목의 선택에 응하여, 사용자 인터페이스는 메뉴 항목을 데이터 내용으로 적어도 부분적으로 교체하는 움직이는 줌을 개시한다.
다른 줌 효과 예에 있어서, 선택 프로세스는 줌 전환 시퀀스의 마지막에, 선택된 제 1 다수의 메뉴 항목의 일부 위에 제 2 다수의 주메뉴 항목을 겹쳐 놓는다. 제 2 다수의 메뉴 항목이 겹쳐지는 상기 선택된 제 1 다수의 메뉴 항목의 일부는 상기 선택된 메뉴 항목의 스케일링된 버전일 수도 있다.
사용자 인터페이스는 또한 역행 줌 전환 시퀀스를 개시하는 선택 해제 프로세스를 포함한다. 역행 줌 전환 시퀀스는 실질적으로 이전 움직이는 줌 전환 시퀀스의 역행을 포함할 수도 있다.
첨부 도면을 참조하여, 본 발명의 실시예들을 단지 예시 목적으로 설명한다.
데이터 처리 장치의 사용자는 일반적으로 디스플레이 스크린 또는 스피커에 의해 가청음이나 영상 표시와 같은 감각 출력을 수신함으로써 하드웨어 입력 장치들을 통해 데이터 처리 장치와 상호 작용한다. 데이터 처리 장치 내부에서 상호 작용은 입력 장치로부터 수신된 입력을 해석하고 응답으로 출력을 생성하는 사용자 인터페이스에 의해 제어된다.
데이터 처리 장치
도 1은 본 발명의 일 실시예에 따른 사용자 인터페이스(102)를 포함하는 데이터 처리 장치(100)의 개념상의 블록도이다. 이 예시적인 실시예에서, 데이터 처리 장치(100)는 이동 전화이다. 데이터 처리 장치(100)는 입력 장치(104) 및 출력 장치(106)를 포함한다. 입력 장치(104)는 사용자로부터 입력을 수신하여 처리를 위해 이를 사용자 인터페이스(102)에 전달한다. 출력 장치(106)는 사용자 인터페이스(102)로부터의 출력을 수신하고 이를 사용자에게 제시한다.
다른 실시예에서, 데이터 처리 장치(100)는 예를 들어 전화기, 무선 전화기, 개인 휴대 단말, 팜탑 컴퓨터(palmtop computer), 디지털 스틸 또는 비디오 카메라, 미디어 플레이어, 텔레비전, 위성 텔레비전 단말, 케이블 텔레비전 단말, 차내 정보 시스템, 차내 엔터테인먼트 시스템, 프린터, 스캐너, 팩시밀리 및 데이터 저장 장치일 수 있으며, 이에 한정하는 것은 아니다. 여기서 이동 전화 데이터 처리 장치(100)에 관해 설명한 특징들 및 이점들은 상술한 어떤 장치에도 구현될 수 있다.
입력 장치(104)는 사용자가 데이터 처리 장치(100)에 입력을 제공할 수 이게 한다. 입력 장치(104)는 출력 장치(106)에서 볼 수 있는 항목들간 네비게이팅을 위한 방향 컨트롤(108)을 포함한다. 방향 컨트롤(108)은 상, 하, 좌, 우를 네비게이팅하기 위한 4개의 액추에이터를 포함한다. 입력 장치(104)는 또한 출력 장치(106) 상에 보이는 항목들을 선택하기 위한 선택 컨트롤(110)을 포함한다. 또한, 입력 장치(104)는 이전에 선택된 항목들을 선택 해제하기 위한 선택 해제 컨트롤(112)을 포함한다.
출력 장치(106)는 디스플레이(114)이다. 디스플레이(114)는 컬러 출력을 제공하는 액정 디스플레이이다. 다른 출력 장치들(106)은 그레이스케일 및 흑백 플라즈마 디스플레이, 음극선관, 투사 스크린 및 다른 적당한 동적 영상 장치들을 포함한다.
도 2a는 본 발명의 예시적인 실시예에 따른 이동 전화 데이터 처리 장치(200)의 예시적인 실시예의 평면도이다. 데이터 처리 장치(200)는 출력 장치(106)로서 디스플레이(214)를 포함한다. 디스플레이(214)는 컬러 액정 디스플레이이다. 입력 장치(104)에 관해, 데이터 처리장치(200)는 5-방향 로커 스위치(203)를 포함한다. 5-방향 로커 스위치(203)의 주변 액추에이터(209a-209d)가 방향 컨트롤(108) 기능을 한다. 5-방향 로크 스위치(203)의 중앙 액추에이터(210)는 선택 컨트롤(110) 기능을 한다. 추가 액추에이터(212)는 선택 해제 컨트롤(112) 기능을 한다. 선택 컨트롤(110)과 선택 해제 컨트롤(112)과의 관계는 시각적 표현으로 지시된다. 시각적 표현(207)은 컨트롤들(110, 112)을 연결하는 그래픽 모양이다. 다른 실시예들에서 시각적 표현(207)은 데이터 처리 장치(200)에 대한 지형도와 같은 물리적 모양이다.
도 2b는 본 발명의 다른 예시적인 실시예에 따른 데이터 처리 장치(200')에 대한 다른 입력 장치(104) 구성의 평면도이다. 데이터 처리 장치(200')에서 입력 장치(104)는 방향 컨트롤(108) 기능을 하는 4개의 액추에이터(209a'-209d')를 포함한다. 각각의 액추에이터(209a'-209d')는 상, 하, 좌, 우 방향에 대응한다. 데이터 처리 장치(200')는 4개의 액추에이터(209a'-209d')에 의해 형성된 일반적으로 원형인 영역 내에 위치하는 선택 컨트롤(210') 및 선택 해제 컨트롤(212')을 포함한다.
도 2c는 데이터 처리 장치(200")에 대한 또 다른 입력 장치(104) 구성의 평면도이다. 데이터 처리 장치(200')와 비슷하게, 데이터 처리 장치(200")에서 입력 장치(104)는 방향 컨트롤(108) 기능을 하는 4개의 액추에이터(209a"-209d")를 포함한다. 각각의 액추에이터(209a"-209d")는 상, 하, 좌, 우 방향에 대응한다. 데이터 처리 장치(200")는 4개의 액추에이터(209a"-209d")에 의해 형성된 일반적으로 타원형인 영역 내에 위치하는 선택 컨트롤(210") 및 선택 해제 컨트롤(212")을 포함한다.
데이터 처리 장치(200)의 컨트롤들은 상술한 스위치, 키 또는 버튼 이외의 다른 수단으로 제공될 수도 있다. 다른 종류의 방향 컨트롤(108)(예를 들어, 마우스, 터치패드, 터치스크린/스타일러스, 4-방향 로커 스위치 등)을 이용하여 동등한 기능이 제공될 수 있다. 터치스크린 구현에서는 선택 및 선택 해제 컨트롤(110, 112)이 스크린 버튼 상에 가상으로 제공되거나, PCT 특허 공보 WO01/79980호에 개시된 바와 같이, 제스처 기반 명령들, 예를 들어 인터페이스 명령들에 매핑된 기호 스타일러스 제스처로 제공된다.
사용자 인터페이스
다시 도 1을 참조하면, 데이터 처리 장치(100)는 사용자 인터페이스(102)를 포함한다. 사용자 인터페이스는 사용자로부터 입력을 수신하여 처리하고, 처리된 입력에 기반한 출력을 표시한다. 사용자 인터페이스는 메뉴 시스템(120) 및 네비게이션 모듈(122)을 포함한다. 요컨대, 메뉴 시스템(120)은 출력 장치에 표시되는 출력을 부분적으로 결정하고, 네비게이션 모듈(122)은 입력 장치(104)를 이용하여 이러한 출력을 제어하는 능력을 사용자에게 제공한다. 메뉴 시스템(120) 및 네비게이션 모듈(122)은 범용 또는 전용 프로세서에서 동작하는 소프트웨어 모듈로서 구현된다. 다른 실시예들에서 메뉴 시스템(120), 네비게이션 모듈(122) 또는 이들의 일부는 디지털 신호 처리기, 주문형 집적 회로, 프로그래밍 가능 로직 어레이 또는 다른 적당한 하드웨어 포맷 등의 집적 회로에 구현된다.
메뉴 시스템
보다 구체적으로, 메뉴 시스템(120)은 메뉴(124), 강조 표시 프로세스(126) 및 표시 프로세스(128)를 포함한다. 도 3은 본 발명의 예시적인 실시예에 따른 메뉴 시스템(120)에 포함된 메뉴(324)의 개념상의 블록도이다. 메뉴(324)는 다수의 주메뉴 항목(360a-360h)(집합적으로 주메뉴 항목(360)) 및 다수의 부메뉴 항목(362a-362m)(집합적으로 부메뉴 항목(362))을 포함한다. 메뉴(124)는 메뉴 레벨(364a-364d)(집합적으로 메뉴 레벨(364))에 메뉴 항목(360, 362)을 구성한다. 메뉴 항목(360, 362)은 일반적으로 다른 메뉴 레벨(364), 실행 가능한 프로그램이나 애플리케이션, 또는 텍스트, 이미지, 오디오, 비디오 및 멀티미디어 데이터를 포함하는 데이터에 대한 진입점을 제공한다. 메뉴는 아이콘 및 텍스트 라벨과 같은 그래픽 및/또는 텍스트 데이터를 메뉴 항목(360, 362)에 관련시켜 대응하는 메뉴 항목(360, 362)을 시각적으로 표시한다.
메뉴 레벨(364)은 일반적으로 계층적이며, 예를 들어 트리 및 가지 구조를 갖는다. 그러나 체계가 엄격할 필요는 없다. 메뉴(324)의 메뉴 레벨들(364)은 중첩할 수도 있고 개별 메뉴 항목(360, 362)이 다수의 메뉴 레벨(364)에 위치할 수 있다. 일부 메뉴 항목(360, 362)은 다수의 경로에 의해 메뉴(324)에 액세스할 수 있다("경로"는 소정의 메뉴 항목(360 또는 362)에 이르기 위해 사용자가 선택한 일련의 메뉴 항목(360, 362)을 나타냄). 메뉴 레벨(364)의 내용(즉, 메뉴 항목(360, 362)이 액세스할 수 있는)은 (다른 실시예에서 그럴 필요는 없지만) 문맥 감지형이다. 예를 들어, 메뉴(324)는 주변 장치의 부착을 검출한 데이터 처리 장치(100)에 응하여 추가 메뉴 항목(360, 362) 및/또는 메뉴 레벨(364)에 액세스할 수 있게 한다. 마찬가지로, 메뉴(324)는 데이터 처리 장치(100)의 이용 상황에 따라 메뉴 항목(360 또는 362) 또는 메뉴 레벨(364)을 불능케 한다. 예를 들어, 메뉴(324)는 열악한 접속 환경이나 데이터 처리 장치(100)의 전력이 낮을 때 통신 기능을 불가능하게 한다.
메뉴 레벨(364)은 하나 이상의 주메뉴 항목(360)을 포함한다. 예를 들어, 메뉴(324)의 상위 메뉴 레벨(364a)은 각각 "연결" 및 "메시지"라는 명칭의 주메뉴 항목(360a, 360b)을 포함한다. 제 1 메뉴 레벨(364) 상에서 주메뉴(360)의 선택은 다른 메뉴 레벨(364)로 이끈다. 예를 들어, 연결 주메뉴 항목(360a)의 선택은 제 2 연결 메뉴 레벨(364b)로 이끈다.
주메뉴 항목(360)은 하나 이상의 부메뉴 항목(362)에 관련된다. 예를 들어, "메시지"라는 명칭의 주메뉴 항목(360b)은 각각 "새로운 메시지" 및 "메뉴"라는 명칭의 부메뉴 항목(362d, 362e)에 관련된다. 부메뉴 항목(362)은 네비게이션 및/또는 기능 바로 가기를 제공한다.
네비게이션 바로 가기는 메뉴(324) 내의 다른 메뉴 레벨(364) 및/또는 메뉴 항목(360, 362)에 링크된다. 네비게이션 바로 가기는 부메뉴 항목(362)이 관련되는 주메뉴 항목(360)을 포함하는 메뉴(320) 체계의 가지 내에 있는 메뉴 레벨(364) 및 메뉴 항목(360, 362)에 링크된다. 네비게이션 바로 가기는 메뉴(320) 체계의 다른 가지들의 메뉴 레벨(364) 또는 메뉴 항목(360, 362)에 링크될 수도 있다. 이와 같이 네비게이션 바로 가기는 더욱 장황한 메뉴(324) 통과를 피하는 가속 경로 를 제공한다. 바로 가기 대상이 메뉴 트리 및 가지 구조의 리프(leaf)에 있으면, 네비게이션 바로 가기는 데이터 처리 장치(100)의 기능 실행을 시작한다. 예를 들어, "새로운 메시지"라는 명칭으로 "메시지" 주메뉴 항목(360b) 내에 위치하는 부메뉴 항목(362d)의 선택은 새로운 메시지의 생성 기능을 시작한다. 이는 메뉴 레벨(364a)로부터 메시지 메뉴 레벨(364d) 및 그 이상을 통과하는 다른 네비게이션과 대비하여 사용자에게 편리한 바로 가기를 제공한다.
기능 바로 가기는 기능 바로 가기가 활성화되는 주메뉴 항목(360)에 관련된다. 기능 바로 가기의 사용은 단일 메뉴 항목(360) 내에서 사용자가 다수의 기능에 액세스할 수 있게 함으로써, 소프트 키나 옵션 버튼을 사용할 필요성을 피한다. 기능 바로 가기의 예로는 "메뉴"라는 명칭으로 "메시지" 주메뉴 항목(360b)에 관련된 부메뉴 항목(362e)이 있다. 이는 "메시지" 메뉴 항목(360b)의 동작에 관련된 "새로운 메시지" 및 "폴더 보기"와 같이 보강된 사용자 옵션 세트에 대한 액세스를 제공하는 "메시지 메뉴" 메뉴 레벨(364c)에 링크된다. 바로 가기와 주메뉴 항목들과의 관련은 메뉴(320) 설계자 또는 저작자에 의해 미리 정해진다. 또한, 혹은 대안으로, 사용자는 메뉴(120)의 개별화된 사용을 반영하도록 상기 관련을 개인화할 수 있다.
도 4a-4d는 디스플레이(414) 상에 메뉴 시스템(120)의 출력을 표시하는 데이터 처리 장치(400)의 평면도이다. 도 4a의 예시적인 출력은 각각 "연결", "메시지", "달력", "카메라", "파일 브라우저" 및 "설정"이라는 명칭의 6개의 주메뉴 항목(460a-460f)을 포함한다. 메뉴 시스템(120)은 각 주메뉴 항목(46a-460f)에 주메 뉴 항목이 표시되는 해당 가시 영역(465a-465f)을 할당한다. 가시 영역(465)은 예를 들어 주메뉴 항목(460)들을 구별하는 직사각형 또는 다른 기하학적 형상으로 배열된 화소들의 집합이다.
도 4a에서 각 주메뉴 항목(460a-460f)에는 일반적으로 직사각형 가시 영역(465)이 수직 열로 차례로 할당된다. 각 가시 영역(465a-465f)은 관련 주메뉴 항목(460a-460f)에 대응하는 아이콘 및 텍스트 라벨을 포함한다. 또한, "연결"이라는 명칭의 (도 3의 주메뉴 항목(360a)에 대응하는) 가시 영역(465a)은 다른 가시 영역들(465b-465e)보다 크다. 가시 영역(465a)은 또한 3개의 부메뉴 항목(462a-462c)을 포함한다.
강조 표시 프로세스
주메뉴 항목(460a)의 더 큰 가시 영역(465a)은 주메뉴 항목(460a)이 활성화된 것을 나타낸다. 선택 컨트롤(110)의 트리거 효과는 뒤에 보다 상세히 설명하는 바와 같이, 어떤 메뉴 항목(460, 462)이 활성화되는지에 좌우된다. 더 큰 가시 영역(465a)은 소정 시간에 어떤 메뉴 항목 또는 항목들(460, 462)이 활성화되는지를 사용자에게 보여주기 위해 강조 표시 프로세스(126)에 의해 발생하는 다수의 시각적 신호 중 하나이다. 강조 표시 프로세스에 의해 발생하는 다른 시각적 신호들은 이에 한정하는 것은 아니지만 가시 영역(465)의 색상 변화, 주메뉴 항목(460)에 대응하는 아이콘이 움직임, 다른 비활성 메뉴 항목들의 가시 영역(465)에 대한 가시 영역(465)의 z-오더 변화를 포함한다. 활성 메뉴 항목(460, 462)을 더 강조 표시하기 위해 가시 영역(465) 뒤에 그림자를 붙이거나(z-오더를 이용함으로써 이 그림 자는 3-D 형상으로 나타날 수 있다) 투명을 이용하여 아래쪽 내용이 위층의 내용을 통과해 부분적으로 보일 수 있게 하는 등 다른 시각적 신호들이 사용될 수도 있다.
도 4b는 본 발명의 일 실시예에 따른 예시적인 데이터 처리 장치(400')의 제 2 평면도이다. 이 제 2 평면도에서는, "메시지"라는 명칭의 제 2 주메뉴 항목(460b')이 활성화되어 강조 표시 프로세스(126)에 의해 강조 표시된다. 도 4a에서 주메뉴 항목(460a)의 가시 영역(465a)과 같이, 주메뉴 항목(460b')의 가시 영역(465b')은 나머지 가시 영역(465a', 465c'-465f')보다 크다. 가시 영역(465b')의 스케일링은 도 4a에서 비활성화되어 스케일링되지 않고 강조 표시되지 않은 가시 영역(465b)과 비교하여 상당히 두드러진다.
도 4c는 부메뉴 항목(462)이 활성화될 때 강조 표시 프로세스(126)에 의해 부메뉴 항목(462) 또한 강조 표시되는 것을 설명한다. 도 4c에서는 "메시지' 주메뉴 항목(460b")과 "새로운 메시지" 부메뉴 항목(462d') 모두 활성화된다. 부메뉴 항목(462d')의 활성 상태는 부메뉴 항목(462d')을 둘러싸는 주메뉴 항목(460b") 가시 영역(465b") 일부의 색상을 변경하는 강조 표시 프로세스(126)에 의해 사용자에게 표시된다. 주메뉴 항목(460)의 강조 표시에 대해, 강조 표시 프로세스(126)는 부메뉴 항목(462)의 스케일링, 움직임, z-오더의 변경 등을 하여 부메뉴 항목(462)의 활성 상태를 나타낼 수 있다.
일 실시예에서 데이터 처리 장치(100)는 메뉴 시스템(120)의 모든 메뉴 레벨(364)은 아니지만 대부분의 메뉴 레벨 사이의 이동 및 강조 표시에 비슷한 시각적 신호들을 이용한다. 일관성은 사용을 더 용이하게 하고 사용자 인터페이스의 동작 이 사용자에게 더욱 직관적이게 할 수 있다. 그러나 다른 시각적 신호들이 본 발명의 범위를 벗어나지 않으면서 다양한 메뉴 항목(360, 362)과 다양한 메뉴 레벨(364)에 이용될 수도 있다.
표시 프로세스
일반적으로, 표시 프로세스는 활성 메뉴 항목들에 관련된 추가 정보를 표시한다. 예를 들어, 도 4a에서 데이터 처리 장치(400)는 주메뉴 항목(460a)이 활성화되므로 부메뉴 항목(462a-462c)을 표시한다. 이에 반해, 데이터 처리 장치(400')는 주메뉴 항목(460b')이 활성화되므로 부메뉴 항목(462d-462e)을 표시한다. 표시 기술을 이용하면, 활성 주메뉴 항목(460)에 대한 스크린상에 적어도 4개의 부메뉴 항목(462)을 갖는 것이 적당하다. 그러나 부메뉴 항목(462)은 표시 프로세스(128)가 활성 메뉴 항목에 관련하여 표시될 수 있는 단지 한 종류의 추가 정보이다.
도 4d는 예를 들어 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(400")의 제 4 평면도를 나타내며, 표시 프로세스(128)가 활성 메뉴 항목들에 관련하여 표시하는 데이터의 다른 형태들을 설명한다. 데이터 처리 장치(400"')는 데이터 처리 장치(400"') 상에 저장되는 개별 메시지에 대응하는 6개의 주메뉴 항목(460a"'-460f"')을 표시한다. 제 1 주메뉴 항목(460a"')이 활성화된다. 주메뉴 항목(460a"')에 대응하는 가시 영역(465a"')은 가시 영역(465a, 465b')이 관련 부메뉴 항목(462a-462c, 462d, 462e)을 포함하는 것과 비슷한 방식으로 3개의 부메뉴 항목(462g-462i)을 포함한다. 가시 영역(465a"')은 은 또한 주메뉴 항목(460a"') 에 대응하는 메시지의 초록(466)을 포함한다. 주메뉴 항목(460b"'-460f"')에 대응하는 가시 영역(465b"'-465f"')은 관련 메시지의 초록(466)을 포함하지 않는다.
또한, 부메뉴 항목(462)의 활성화에 응하여, 표시 프로세스(128)는 그 부메뉴 항목(462)에 관련된 추가 정보를 표시한다. 예를 들어, 도 4c에서는 부메뉴 항목(462d')이 활성화 및 강조 표시된다. 부메뉴 항목(462d')을 나타내는 아이콘 아래에는 표시 프로세스(128)에 의해 텍스트 라벨 "새로운 메시지"가 표시되어 사용자에게 부메뉴 항목(462d')의 기능을 알린다. 부메뉴 항목(462)이 활성화되지 않는 한 표시되지 않는 부메뉴 항목(462)에 관련된 정보의 표시는 "이중 표시" 프로세스라 한다.
표시 및 이중 표시 프로세스가 결합하여 초심자와 숙련자 모두에게 사용 편의를 제공한다. 각 동작의 텍스트 설명이 디스플레이(414)에 매핑되어 사용자에게 어떤 활성 메뉴 항목을 선택하기 전에 메뉴 항목의 기능을 알려줄 수 있다. 이와 관련하여, 기술은 소프트 키 매핑과 비슷한 속성을 제공하지만, 추가 물리적 키의 필요성 및 관련 스크린 공간의 낭비는 없다. 특히, 항목이 활성화될 때 필요에 따라 기능이 노출되고, 요구에 따라 기능들의 텍스트 설명이 노출된다. 이에 반해, 소프트 키 방법에서는 키 매핑이 영구적인 디스플레이 위치에 고정된다.
표시 기술에 의해 제공되는 더욱 넓은 범위의 바로 가기는 상당한 유용성 이익을 가질 수 있다. 특히, 많은 사용자는 데이터 처리 장치(100)의 이용 가능한 기능의 작은 서브셋만을 규칙적으로 사용할 것이다. 규칙적으로 사용되는 기능들을 메뉴 시스템(120)의 다양한 레벨에 신중히 배치하는 것은 계층적 메뉴 레벨의 상하 네비게이션의 양을 극적으로 감소시킬 수 있고, 특정 용도로 공통 사용되는 전체 기능을 하나 또는 소수의 주메뉴 항목(360 또는 460)에 대응하는 가까운 영역으로 묶을 수 있다.
네비게이션 모듈
다시 도 1을 참조하면, 네비게이션 모듈(122)은 사용자에게 메뉴 시스템(120)과 상호 작용하는 능력을 제공한다. 네비게이션 모듈(122)은 각각 방향 컨트롤(108), 선택 컨트롤(110) 및 선택 해제 컨트롤(112)에 응답하는 방향 프로세스(130), 선택 프로세스(132) 및 선택 해제 프로세스(134)를 포함한다. 일반적으로, 방향 프로세스(130)는 활성화되는 주메뉴 항목(360) 및/또는 부메뉴 항목(362)을 교환한다. 선택 프로세스(130) 및 선택 해제 프로세스(132)는 활성 메뉴 레벨을 변경하고, 선택 프로세스(130)는 또한 데이터 처리 장치(100)의 기능들의 시작을 제어한다.
방향 네비게이션
상술한 도 4a-4d는 네비게이션 모듈(122)에 의해 해석되는 것과 같은 사용자에 의해 입력된 다수의 네비게이션 명령을 나타낸다. 상술한 바와 같이, 방향 프로세스는 활성화되는 메뉴 항목 또는 항목들(360, 362, 460, 462)을 교환한다. 도 4a의 데이터 처리 장치(400)는 방향 컨트롤(408)을 포함한다. 방향 컨트롤(408)은 각각 상, 하, 좌, 우에 해당하는 4개의 액추에이터(409a, 409b, 409c, 409d)를 포함한다. 방향 프로세스(130)는 상향 액추에이터(409a) 또는 하향 액추에이터(409b)의 트리거를 활성 주메뉴 항목(460)을 변경하라는 지시로 해석한다. 예를 들어, 도 4a에서 사용자가 하향 액추에이터(409b)를 트리거 했다면, 방향 프로세스(130)는 메뉴 시스템(120)에 주메뉴 항목(460a)을 비활성화하고 주메뉴 항목(460b)을 활성화하라고 지시하게 되어, 도 4b의 디스플레이가 된다. 마찬가지로, 도 4b에서 사용자가 상향 액추에이터(409a)를 트리거 했다면, 방향 프로세스(130)는 메뉴 시스템에 주메뉴 항목(460b')을 비활성화하고 주메뉴 항목(460a')을 활성화하라고 지시하여, 도 4a의 디스플레이가 된다.
좌측 및 우측 액추에이터(409c, 409d)는 부메뉴 항목(362, 462)의 활성화 및 비활성화를 제어한다. 예를 들어, 도 4b에서 주메뉴 항목(460b')이 강조 표시되어 2개의 부메뉴 항목(462d, 462e)을 표시한다. 이 상태에서 사용자가 방향 컨트롤(408)의 우측 액추에이터(409d)를 트리거 했다면, 방향 프로세스(130)는 도 4c에 나타낸 바와 같이 메뉴 시스템(120)에 부메뉴 항목(462d)을 활성화하라고 지시하게 된다. 사용자가 다시 우측 액추에이터(409d)를 트리거 했다면, 도 4c에 표시된 제 2 부메뉴 항목(462e')이 활성화되어 강조 표시되고, 그 부메뉴 항목(462e')에 관련된 추가 정보가 표시된다. 대신, 사용자가 좌측 액추에이터(409c)를 눌렀다면, 부메뉴 항목(462d')이 비활성화되고 데이터 처리 장치(400")는 도 4b에 나타낸 상태로 돌아가게 된다.
선택 및 선택 해제
활성화된 부메뉴 항목(462, 362)이 없으면, 선택 프로세스(132) 및 선택 해제 프로세스(134)가 메뉴 시스템(120)의 메뉴 레벨들(364) 사이의 네비게이션을 가능하게 하는 기능을 한다. 선택 컨트롤(110)을 트리거하는 사용자에 응답하여, 선 택 프로세스("선택"이라 함)는 메뉴 레벨(364)을 하향 조정하고 선택 해제 프로세스(134)가 메뉴 레벨(364)을 뒤로 조정한다.
예를 들어, 도 4b 및 도 4c를 참조하면, 도 4b에서는 "메시지" 주메뉴 항목(460b')이 활성화된다. 데이터 처리 장치(400')가 이 상태에 있는 동안 사용자가 선택 컨트롤(410)을 트리거 했다면, 선택 프로세스(132)는 메뉴(124)의 "메시지" 메뉴 가지에 있는 메뉴 레벨(364)을 하향 조정할 것을 메뉴 시스템(120)에 지시한다. 이 네비게이션에 의해 도 4d의 디스플레이(414"')가 표시된다. 메뉴(124)의 "메시지" 메뉴 가지의 부메뉴 레벨(364)은 개별 메시지에 대응하는 주메뉴 항목(460a"-460f")을 포함한다. 데이터 처리 장치(400"')가 도 4d에 표시된 상태에 있을 때 사용자가 선택 해제 컨트롤(412)을 트리거 했다면, 선택 해제 프로세스가 메뉴 시스템(120)에 한 메뉴 레벨(364) 뒤로 갈 것을 지시하여, 도 4b의 데이터 처리 장치(400') 출력이 된다.
선택 및 선택 해제 프로세스(132, 134)는 또한 부메뉴 항목(362, 462)의 선택 및 선택 해제에 대한 데이터 처리 장치(100')의 응답을 제어한다. 부메뉴 항목(362 또는 462)의 선택에 대한 응답은 부메뉴 항목이 기능 바로 가기인지 네비게이션 바로 가기인지에 좌우된다.
도 5a-5e는 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(500)의 디스플레이(514)의 평면도이다. 디스플레이(514)는 부메뉴 항목(562)에 대한 네비게이션 및 부메뉴 항목(562)의 선택을 설명한다. 도 5a에 나타낸(예를 들어, 데이터 처리 장치(500) 전원이 켜질 때 표시되는) 시작 화면으로부터 선택 컨트롤(110)을 누르면 처음에 "연결"이라는 명칭으로 강조 표시되어 추가 정보를 표시하는 상위 주메뉴 항목(560a)을 갖는 제 1 메뉴 레벨(564a)(도 5b)이 표시된다. 다시 선택 컨트롤(110)을 누르면 메뉴(124)의 "연결" 가지의 다음 메뉴 레벨(364)로 조종된다. 제 2 메뉴 레벨(564b)에는 개별 연결 목록이 있다. 처음에 연결 목록 메뉴 레벨을 표시할 때, 연결 목록의 처음 연결 상대에 해당하는 상위 주메뉴 항목(560a')이 활성화되어 강조 표시된다(도 5c). 강조 표시된 주메뉴 항목(560a')은 각각 연결 상대의 이동 전화번호 및 집 전화번호, 연결 상대의 이메일 주소 및 메뉴 링크에 대응하는 4개의 부메뉴 항목(562a-562d)을 포함한다.
어떤 부메뉴 항목(562a-562d)도 활성화되지 않는 동안 방향 컨트롤(508)의 우측 액추에이터(509d)를 누르면, 도 5d에 나타낸 바와 같이 연결 상대의 이동 전화번호에 대응하는 제 1 부메뉴 항목(562a)이 활성화된다. 이 상태에서, 즉 이동 전화 부메뉴 항목(562a")이 활성화되는 동안 다시 선택 컨트롤(110)을 누르면, 도 5e의 디스플레이(514)에 나타낸 바와 같이, 이 연결 상대의 이동 전화번호로 전화 호출이 활성화된다. 도 5d의 화면으로부터 선택 해제 컨트롤(110)을 반복적으로 누르면, 메뉴 경로를 통해 도 5a의 시작 화면으로 뒤로 이동한다.
도 6a-6c는 기능 바로 가기 부메뉴 항목(662)의 선택을 설명하는 데이터 처리 장치(600)의 평면도이다. 데이터 처리 장치(600)의 디스플레이(614)는 "메시지" 주메뉴 항목(660b)의 "메뉴" 부메뉴 항목 아이콘(662b)이 활성화되어 강조 표시되는 것을 나타낸다. 이러한 시나리오에서 사용자가 선택 컨트롤(610)을 누르는 것에 응답하여, 선택 프로세스(132)는 메뉴 시스템에 부메뉴 항목(662b)의 활성화 를 지시한다. 부메뉴 항목(662b)은 기능 바로 가기에 대응하기 때문에, 메뉴 시스템은 부메뉴 항목(662b)이 링크되는 메뉴 레벨(364), 즉 도 6b에 나타낸 메뉴 레벨(664b)을 표시한다. 이 메뉴 레벨(664b)은 선택된 메뉴 아이콘(662b)을 포함하는 이전 디스플레이(614)의 메시지 가시 영역(665b)의 확대 또는 줌 확대된 영역 표시 위에 겹쳐 표시된다. 도 6b의 메뉴 레벨은 또한 방향 컨트롤(608)의 상향 및 하향 액추에이터(609a, 609b) 및 선택 컨트롤(610)을 사용하여 활성화 및 선택될 수 있는 수평 가시 영역들(665a'-665c')의 열을 포함한다. 선택 해제 컨트롤(612)을 누르면, 디스플레이(614)가 도 6c에 나타낸 것과 같이 이전 레벨로 돌아가며, 도 6c는 도 6a와 동일하다.
일 특징에 따르면, 네비게이션 모듈(122) 및 메뉴 시스템(120)의 조합된 프로세스는 사용자 인터페이스의 3가지 기본 동작: 기능 체계의 상위 및 하위 레벨의 네비게이팅; 추가 옵션들을 제시함으로써 레벨 내의 포인트들의 기능 보강; 및 기능 체계의 한 특정 포인트에서 다른 특정 포인트로 이동하는 가속 경로의 선택적인 제공(네비게이션 바로 가기)을 처리하기 위해 종래의 설계에서 이용할 수 없는 응집성을 제공한다.
제 2 상황의 예로서, 사용자가 수신한 모든 텍스트 메시지의 목록을 보기 위해 계층을 내려가면, 특정 메시지의 선택(예를 들어, 한 레벨 이상 하향 네비게이팅)이 그 메시지를 표시하게 된다. 그러나 사용자가 메시지를 선택하고자(보고자) 하는 것이 아니라 삭제 또는 저장하고자 하거나 또는 발신자 상세를 얻고자 할 수도 있다. 이 시나리오는 계층 레벨들의 엄격한 상승/하강에 의해 제공되는 것보다 많은 행동을 필요로 한다. 제 3 상황의 예는 상위 레벨 메뉴로 돌아가기 위해 낮은 메뉴 레벨에 제공되는 "홈(Home)" 옵션이다.
예시적인 실시예에 따르면, 본 발명은 보다 간단하고, 보다 일관되며, 보다 예상하기 쉬워 기존 설계들보다 직관적인 해법의 3가지 사용자 인터페이스 동작을 결합한다. 이는 예를 들어 메뉴 시스템의 어떤 포인트에서도 모든 가능한 사용자 동작이 4개의 방향 버튼을 이용하여 스크린상에서 "지역 선택(geographic)" 네비게이션에 의해서만 상, 하 또는 교차 액세스 가능하기 때문이다. 이는 종래의 설계와 대조적으로, 사용자는 간단한 방향 컨트롤을 벗어나, 예를 들어 보강된 기능을 제공하는 소프트 키를 선택하거나 전용 "옵션" 버튼을 눌려야 한다. 본 발명의 일 구성에 있어서, 방향 컨트롤만을 사용하는 지역 선택 네비게이션은 모든 옵션에 대한 액세스를 제공하는데, 보강된 기능들 및 네비게이션 바로 가기가 4-방향 액추에이터의 네비게이션 구간 내에 부메뉴 항목(362)으로서 표시될 수 있기 때문이다.
사용중에, 사용자 인터페이스(102)의 네비게이션은 4개의 방향 컨트롤을 이용하여 스크린의 2-D 평면에 완전히 배치된 옵션들의 그리드를 가로지르는 것과 비교된다. 선택/선택 해제 컨트롤(110, 112)은 이 개념적 "평면"에 수직인 방향으로 네비게이팅하여 하나의 선택 그리드를 계층에서 다음으로 높은 또는 낮은 평면으로 교체하는 것으로 간주할 수 있다. 따라서 사용자 인터페이스(102)의 네비게이션은 전반적으로 일관되며 예상 가능한 방식으로 사용되는 6개의 액추에이터 - 4개 방향과 선택 및 선택 해제 -의 범위 내에 완전히 포함될 수 있다. 종래의 설계는 사용자가 메뉴에서 예상할 수 없는 임의의 포인트에서 한 네비게이션 모드로부터 다른 모드(예를 들어, 소프트 키 활성화)로 바꿀 필요가 있어, 인터페이스를 복잡하게 하고 사용자가 익히고 사용하는 것을 어렵게 하기 때문에 이러한 레벨의 응집성 및 일관성을 달성하지 못한다.
가시 효과
데이터 처리 장치(100) 및 사용자 인터페이스(102)의 일부 특징들은 후술하는 하나 이상의 가시 효과를 이용함으로써 증폭된다.
도 7 내지 도 10은 본 발명의 예시적인 실시예에 따른 그래픽 줌 기술을 설명한다. 강조 표시된 메뉴 항목(360 또는 362)이 선택되면, 현재 디스플레이를 다음 메뉴 레벨(364)의 디스플레이로 간단히 교체하는 대신, 움직이는 줌 전환 시퀀스에 의해 현재 메뉴 레벨(364)에서 다음 메뉴 레벨(364)로의 전환이 제공된다.
데이터 처리 장치(100)는 적어도 두 종류의 줌 전환, 즉 줌 전환 유형 1 및 줌 전환 유형 2를 이용한다. 이러한 줌 전환 유형 둘 다 뒤에 보다 상세히 설명한다. 일 실시예에서, 줌 전환 유형 1은 (예를 들어, 주메뉴 항목(360)의 선택에 의한) 주메뉴 레벨들(364) 사이의 전환(도 7과 같은) 또는 (예를 들어, 하위 메뉴 레벨(364)에서 관련 내용으로의 줌에 관한) 메뉴 레벨(364)에서 데이터/내용으로의 전환에 사용된다. 이에 반해, 줌 전환 유형 2는 부메뉴 항목(362) 아이콘의 선택에 이어지는 전환을 표시하는데 사용된다(도 6, 도 10 및 도 11b와 같은).
도 7a는 주메뉴 항목(760a-760f)(예를 들어 도 4a에 대응하는 수평 가시 영역(765a-765f))의 열을 포함하는 개념상 초기 화면 디스플레이를 나타낸다. 제 2 주메뉴 항목은 도면에 어둡게 나타낸 것과 같이 강조 표시된다(760b). 강조 표시 된 메뉴 항목(760b)은 움직이는 줌 전환 시퀀스를 시작한다. 선택된 메뉴 항목(760b)이 시작 화면의 인접한 메뉴 항목(760a, 760c)을 부분적으로 가리도록 선택된 메뉴 항목(760b)을 확대함으로써 전환 시퀀스가 시작한다(즉, 선택된 항목(760b)의 가시 영역(765)이 차지하는 스크린 영역이 점진적으로 확장함). 이는 도 7b에 나타내며, 확대된 항목(760b')을 나타낸다.
이 단계에서, 확대된 가시 영역(765b')의 내용은 선택된 메뉴 항목(760b) 내용의 확대 표시이다. 가시 영역(765b')이 계속해서 확대됨에 따라, 선택된 메뉴 항목(760b)의 확대 표시는 다음 메뉴 레벨(764')의 내용 표시로 교체된다. 특히, 확대된 가시 영역(765b')의 내용은 도 7c에 나타낸 것과 같이 처음에 축소된 규모로 표시되는 새로운 주메뉴 항목(760g-760l)의 열로 교체된다. 새로운 주메뉴 항목(760g-760l)의 열은 새로운 메뉴 레벨(764')의 마지막 화면 디스플레이가 도 7d에 나타낸 것과 같이 표시될 때까지 확대되며, 이는 제 1 새로운 주메뉴 항목(760g')이 강조 표시된 새로운 메뉴 항목(760g'-760l') 열을 나타낸다.
도 4a-4b 및 도 7의 예에서, 새로운 메뉴 레벨(364)의 디스플레이는 스크린 영역을 효과적으로 채운다. 줌 전환 유형 2에서 새로운 메뉴 레벨(364)의 디스플레이는 스크린을 채우는 것이 아니라, (도 5b에 나타낸 것과 같이) 이전 메뉴 레벨(364)로부터 선택된 메뉴 항목(362)의 확대 표시 위에 겹쳐 나타난다.
줌 전환 유형 2의 예는 도 5a와 도 5b 사이의 전환에 대응하는 도 8a-8c에 나타낸다. 도 8a는 주메뉴 항목(860a-860f) 열을 포함하는 시작 표시 화면을 나타낸다. 강조 표시된 주메뉴 항목(860c)은 2개의 부메뉴 항목(862a, 862b)을 포함한 다. 부메뉴 항목(862a)이 강조 표시되어, 추가 관련 정보("텍스트 스트링")를 표시한다. 선택된 항목에 인접한 주메뉴 항목(860b, 860d)은 텍스트 "위로" 및 "아래로"에 의해 지시된다.
강조 표시된 부메뉴 항목(862a)의 선택으로 줌 전환 시퀀스 유형 2가 시작한다. 도 8b에 나타낸 바와 같이, 이 경우에 줌 전환 시퀀스는 선택된 부메뉴 항목(862a')과 함께 현재 메뉴 레벨(864a)의 인접 영역의 디스플레이를 확대한다. 이 시퀀스 동안 어떤 단계에서 새로운 메뉴 레벨(864b)의 표시는 현재 메뉴 레벨(864a)의 확대 표시 위에 겹쳐져 함께 확대된다. 도 8c는 새로운 메뉴 레벨(864b) 주메뉴 항목(860a'-860d')이 이전 메뉴 레벨(864a) 주메뉴 항목(860c)의 확대 표시를 배경으로 하여 나타나는 마지막 화면을 나타낸다.
도 9a 및 9b는 강조 및 표시 기술을 통합한 구현에 있어서 줌 전환 유형 2의 시작 및 마지막 화면의 예를 나타낸다. 도 9a에서 현재 메뉴 레벨(964a)의 "메시지" 주메뉴 항목(960a)이 강조 표시되어 2개의 부메뉴 항목(962a, 962b)을 표시하며, 그 오른쪽 "메뉴" 부메뉴 항목(962b)이 강조 표시된다. 이는 기술 텍스트 "메뉴"의 표시를 제공한다.
"메뉴" 부메뉴 항목(962b)의 선택은 도 9b의 화면으로 끝나는 줌 전환 유형 2를 시작한다. "새로운 메시지"라는 명칭으로 강조 표시된 주메뉴 항목(960a')으로 다음 메뉴 레벨(964b)이 표시된다. 다음 메뉴 레벨(964b)은 또한 각각 "폴더 보기" 및 "메시지 설정"이라는 명칭의 주메뉴 항목(960b', 960c')을 포함하며, 이는 선택된 부메뉴 항목(962b) 아이콘 및 도 9a의 시작 디스플레이의 인접 부분의 확대 표시 위에 겹쳐진다. 도 9b에서 텍스트 "메시지" 및 "메뉴"의 일부를 볼 수 있음에 유의한다.
줌 전환의 사용은 메뉴(124) 계층을 통한 네비게이션의 감지되는 가시 로직을 개선하여, 사용자에게 메뉴(124) 계층 내의 현재 디스플레이 화면 위치의 보다 나은 감지를 제공한다. 다른 종류의 메뉴 동작에 대한 다른 종류의 줌 전환의 사용(예를 들어, 메인 레벨 전환을 위한 유형 1 및 바로 가기 전환을 위한 유형 2)은 이러한 메뉴(124) 위치의 감지를 더욱 개선한다.
줌 전환 시퀀스에 사용되는 중간 화면 수는 시퀀스의 듀레이션에 따라 달라질 수 있다. 통상적으로, 시퀀스는 초당 5 내지 25 프레임의 속도로 움직이게 된다. 시퀀스의 듀레이션은 인지할 수 있는 가시 줌 효과를 제공하기에 충분히 길지만, 전화기의 정상 동작을 용납하기 어려운 정도로 지연시킬 만큼 길지는 않아야 한다. 일반적으로, 시퀀스의 듀레이션은 1초의 약 1/8 내지 1초 범위가 된다. 사용자가 시퀀스의 듀레이션을 미리 결정된 범위 내로 선택할 수 있도록, 그리고/또는 효과를 오프로 전환하도록 편의가 제공될 수 있다. 줌 전환 시퀀스 내에서 확대되는 현재 메뉴 항목 내용으로부터 새로운 메뉴 레벨 내용으로 확대 가시 영역의 내용을 전환하는 것은 잘 알려진 다양한 "영화" 편집 전환, 예를 들어 컷, 페이드, 디졸브, 와이프를 이용하여 수행될 수 있다.
계층을 통해 "뒤로" 네비게이팅 할 때, 상술한 줌"인" 전환은 단순히 역행하여 양 방향으로 동일한 가시 로직을 제공할 수 있다. 이 점에 있어서, 선택 컨트롤(110)은 메뉴 시스템(120)에서 "줌인" 동작을 하고, 선택 해제 컨트롤(112)은 " 줌아웃" 동작을 하여, 가시 줌은 메뉴(120) 계층을 통해 네비게이션의 방향을 반영한다.
일 실시예에서, 줌 전환은 일반적으로 선택된 항목의 물리적 화면 위치에 시각적으로 중심을 둔다. 도 9a-9b에서 줌은 선택된 부메뉴 항목(962b)에 중심을 둔다. 메뉴 항목들이 수평 영역의 왼쪽 끝에 표시 아이콘들을 포함하는 부메뉴 항목 메뉴 레벨 전환에 대해, 줌은 이러한 아이콘에 중심을 둘 수 있다.
도 10a 및 10b는 줌 전환 유형 2의 추가 예를 메뉴 레벨에서 내용으로의 전환 형태로 설명한다. 이 예에서, 메시지 메뉴(1092)로부터 텍스트 메시지(1090)를 여는 모듈에 줌 전환 유형 1이 적용된다. 도 10a는 제 1 주메뉴 항목(1060a)이 강조 표시되어 메시지 내용의 초록(1094) 및 3개의 부메뉴 항목(1062a-1062c) 바로 가기 아이콘을 표시하는(아무것도 강조 표시되지 않음) 메시지 메뉴(1092)를 나타낸다. 선택 컨트롤(110)을 누르면 도 10b의 화면으로 끝나는 줌 전환 유형 1이 시작한다.
이 경우, 줌 전환은 도 10a의 왼쪽 상부에 있는 봉투 아이콘(1096)을 시각적으로 중심에 둔다. 도 10b는 도 10b에서와 동일한 부메뉴 항목(1062a'-1062c') 외에도 "줌" 부메뉴 항목(1062d)을 갖는 완전한 메시지(1090)를 표시한다. 도 10b에서 왼쪽의 부메뉴 항목(1062d)은 메시지(1090)가 열릴 때 이미 강조 표시되어, 기술 텍스트 "줌"을 표시한다. 이는 메뉴 계층의 하위 레벨이 어떻게 "이중 표시" 상태에서 이미 부메뉴 항목(1062) 아이콘을 표시하는지를 설명한다. 이는 필수적인 것은 아니지만, 선택 컨트롤(110)의 사용이 일반적으로 더 낮은 레벨의 메뉴 레 벨(364)로 이끄는 것은 아니므로, 메뉴(124) 계층의 하위 레벨에 대해 특히 이해된다. 이 원리는 더 높은 레벨의 메뉴 레벨(364)에 적용될 수도 있다.
도 11a 및 11b는 줌 전환 유형 2를 이용하여, 도 10a에 나타낸 "메뉴" 바로 가기 아이콘(1162c)의 줌인 및 줌아웃의 효과를 나타낸다. 이러한 줌은 강조 표시된 "메뉴" 부메뉴 항목(1162c) 바로 가기에 중심을 둔다. 도 11b에 표시된 메뉴 레벨은 (도 11a의 레벨 이상의 메뉴 레벨(364)에 있는 메시지 항목으로부터 액세스 된) 도 11a의 메뉴와 동일한 옵션(추가 옵션을 더하여)을 포함한다.
도 11b의 메뉴는 모든 메시지에 일반적인 옵션들을 나타내는 한편, 도 11a의 메뉴는 특정 메시지 특유의 옵션들을 나타낸다. 이는 데이터 처리 장치(100)의 사용자 인터페이스가 일반적으로 일관된 가시 로직을 유지하고 최소한의 제어 버튼을 사용하면서 어떻게 문맥 감지형 메뉴 옵션들을 제공할 수 있는지의 추가 예이다.
도 12a-12d는 장치(100) 상에서 실행되는 애플리케이션의 동작, 또는 장치(100) 상에 보이는 문서들의 동작으로 줌의 이용을 어떻게 확장하는지를 설명한다. 예를 들어, 브라우저 애플리케이션 또는 보여지는 문서는 하이퍼링크(1298)를 포함할 수 있다. 하이퍼링크(1298)를 클릭하면, 하이퍼링크 대상(1299)이 링크(1298)가 차지하는 페이지 위치를 줌아웃하게 된다. 시각적으로 이러한 동작은 상술한 바와 같이 메뉴 레벨들 사이의 줌 동작과 흡사하다.
메뉴 시스템(120)을 통한 그리고 메뉴 시스템(120)을 통해 액세스 되는 애플리케이션 및 데이터로의 시각적 줌의 이용은 단지 4-방향, 선택 및 선택 해제 컨트롤(108, 110, 112)을 이용하여 시스템 네비게이션과 내용 사이의 자연스러운 전환 을 제공한다. 줌인/아웃 명령은 일반적으로 선택/선택 해제 컨트롤(110, 112)을 이용하여 입력되며, 이러한 버튼들의 동작은 상황에 적절하게 자동으로 또는 예를 들어 적절한 부메뉴 항목 등으로서 표시될 수 있는 줌 아이콘 등으로 먼저 네비게이팅함으로써 줌 명령으로 해석된다.
메뉴 시스템(120)을 통한 데이터 내용으로의 그리고 그 반대로의 줌 메타포의 계속은 도 13a-13d에서 설명한다. 상위 메시지(1390a)가 강조 표시된 이용 가능한 메시지(1390a-1390f) 목록을 나타내는 메뉴 레벨(1364)을 도 13a에 나타낸다. 선택 컨트롤(1310)을 누르면, 도 13b로 전환되어, 선택된 메시지(1390a)의 전체 텍스트가 표시된다. 도 10b를 참조로 상술한 바와 같이 부메뉴 항목(1362a-1362d) 세트가 제 1 "줌" 부메뉴 항목(1362a)을 이중 표시하여 제시된다. 이 시점에서 선택 컨트롤(1310)을 누르면, 도 13c에 나타낸 바와 같이 메시지(1390a')의 텍스트 내용이 줌인 된다. 이 상태에서 사용자가 방향 컨트롤(108)을 이용하여 표시된 텍스트 내용을 스크롤하여 움직일 수도 있다.
이 실시예에서, 선택 컨트롤(1310)의 사용은 사용자에게 인터페이스를 통한 일관된 줌 감지를 제공한다. 특히, 도 13a에서 도 13b로의 전환에서, 선택 컨트롤(1310)은 더 낮은 메뉴 레벨로 줌을 하는 한편, 도 13b에서 도 13c로의 전환에서는 동일한 선택 컨트롤(1310)이 더 낮은 메뉴 레벨이 없을 때의 내용으로 사용자가 줌을 하게 한다. 줌 메타포는 선택 해제 컨트롤(1312)의 사용에 의해 더 강화되어 내용을 줌아웃한다. 이는 선택 해제 컨트롤(1312)을 누름으로써 도 13c로부터 도달하는 도 13d에서 설명한다. 도 13d는 도 13b와 동일하다. 따라서 역행 줌이 메 뉴(120) 계층을 계속해서 역행시켜(사용자가 선택 해제 컨트롤(1312)을 다시 누르면) 도 13a의 상태로 돌아가게 된다.
도 14a 및 도 14b, 도 15a, 도 15b 및 도 15c는 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(100)에 의해 이용되는 z-오더 강조 효과를 나타낸다. 도 14a에서 "메시지" 주메뉴 항목(1460b)이 강조 표시된다. 이를 표시하기 위해, "연결"이라는 명칭의 인접하는 주메뉴 항목(1460a)의 일부 위에 물리적으로 위치하는 것으로 나타난다. 연결 주메뉴 항목(1460a)은 부분적으로 가려지기는 하지만 여전히 볼 수 있으며 방향 컨트롤(108)의 사용에 의해 활성화될 수 있다. 도 14b는 동일한 목록에서 현재 강조 표시된 연결 주메뉴 항목(1460a')을 나타낸다. 이는 "메시지" 영역(1460b')이 더 낮은 z-오더 위치로 돌아가게 하여, 현재 맨 위에서 주메뉴 항목(1460a')이 강조 표시되었다.
활성 메뉴 항목을 강조 표시하기 위해 메뉴 항목들의 z-오더를 재정렬하는 것 외에도, 강조 표시 프로세스(126)는 활성 메뉴 항목의 가시 영역을 스케일링하여 주요 부분을 강조 표시한다. 강조 표시된 메뉴 항목의 가시 영역은 강조 표시되지 않은 메뉴 항목들의 가시 영역에 비해 확대된다. 스케일링은 강조 표시된 가시 영역 내의 텍스트, 폰트 및 그래픽(즉, 그래픽 및 텍스트 객체)의 스케일링을 포함할 수 있다. 또한, 강조 표시되지 않은 가시 영역은 디스플레이 상에서 스케일 및 위치가 일정하여, 사용중 메뉴에 대한 일관적이고 안정적인 검색을 제공한다. 사용자가 메뉴 레벨을 하향 네비게이팅할 때, 각 주메뉴 항목의 가시 영역이 강조 표시되어 앞당겨지는 한편, (다른 실시예들에서는 강조 표시되지 않은 주메뉴 항목들이 위치를 시프트할 수도 있지만) 다른 영역들은 위치 및 외관이 그대로 유지된다. 이 기술은 도 15a 내지 도 15c에 나타낸 바와 같이 강조 표시된 영역에 관련된 일부 내용을 표시하는데 사용될 수도 있으며, 이는 텍스트 메시지(1590a-1590c)의 목록에서 항목들의 연속하는 강조 표시를 나타낸다.
z-오더 기술은 "표시" 기술에 사용될 수도 있다. z-방향을 이용함으로써 스크린에 더 큰 공간을 형성하는 능력은 강조 표시된 영역에 바로 가기 아이콘들 및 다른 추가 정보를 표시하는데 이익이 된다. z-오더 강조 표시는 적어도 주메뉴 항목에 적용되며, 표시된 부메뉴 항목 등으로 확대될 수도 있다. z-오더 기술은 애플리케이션 및 문서 내의 하이퍼링크와 같이 사용자 선택 가능한 항목들로 확대될 수도 있다.
상술한 데이터 처리 장치(100)의 특징들 외에도, 다음의 하나 이상의 대안 실시예들 또는 이들의 조합으로 추가 기능이 얻어질 수 있다.
제 1 대안 실시예
다시 도 1을 참조하면, 상술한 예시적인 실시예에서 메뉴 시스템(120)은 디스플레이(114)에 제시되는 출력을 생성하기에 충분한 정보를 포함한다. 대안 실시예들에서, 메뉴 시스템은 한번에 한 메뉴 레벨(364)을 표시하는데 필요한 출력을 생성하기에 충분한 정보를 저장할 수 있는 상태 머신을 포함한다. 이러한 대안 실시예에서, 메뉴 시스템(120)은 하나 이상의 하부 애플리케이션(180) 및 데이터 소스(182)와 통신한다. 예를 들어, 애플리케이션들은 "연결" 데이터베이스 애플리케이션(180) 및 "메시징" 애플리케이션(180)을 포함할 수 있다. 데이터 소스(182)는 데이터 처리 장치(100) 자체의 데이터 테이블들, 또는 원격 기억 장치들에 저장된 데이터를 포함할 수 있다. 네비게이션 모듈(12)로부터 선택 명령 수신시, 메뉴 시스템은 적절한 결과를 알기 위해 적절한 애플리케이션(180) 및/또는 데이터 소스(182)에 질문한다. 예를 들어, "연결" 주메뉴 항목이 활성화될 때 사용자가 선택 컨트롤을 트리거하면, 메뉴 시스템은 "연결" 애플리케이션(180)에 질문하여 주메뉴 항목들로서 사용할 연결 목록을 검색하고 주메뉴 항목마다 관련 부메뉴 항목들의 목록을 검색한다. 마찬가지로, 특정 연결 전화번호 부메뉴 항목이 활성화되어 사용자가 선택 컨트롤을 트리거하면, 메뉴 시스템은 연결 애플리케이션(180)에 활성 부메뉴 항목에 관련된 전화번호를 다이얼 할 것을 지시한다.
선택 해제 컨트롤(112) 및 선택 해제 모듈(134)이 선택 컨트롤(110) 및 모듈로 이중 동작한다. 예를 들어, 선택된 마지막 메뉴 항목에 의해 메뉴 시스템(120) 내의 새로운 메뉴 레벨로 네비게이션 했다면, 사용자가 선택 해제 컨트롤(112)을 누르는 것에 응하여 선택 해제 모듈(134)이 네비게이션 컨트롤에 현재 활성 메뉴 항목 및 메뉴 레벨의 비활성화를 알리고 이전의 활성 메뉴 레벨을 활성화한다. 이 때문에, 네비게이션 모듈(122)이 사용자로부터 수신된 네비게이션 입력의 이력을 저장할 수 있다. 선택된 마지막 메뉴 항목에 의해 기능이 시작하면, 선택 해제 컨트롤(112)의 누름에 응하여, 선택 해제 모듈(134)은 시작된 기능을 중단한다.
제 2 대안 실시예
여기서 설명하는 사용자 인터페이스 프레임워크는 국제 특허 출원 WO 01/79984에 개시된 형태의 디지털 문서 처리 시스템과 결합하여 사용될 때 더욱 강 화되고 확장될 수 있다. 이러한 문서 처리 시스템은 각각의 문서 에이전트가 미리 결정된 문서 형식을 인식하여 해석하고, 미리 결정된 형식으로 들어오는 문서를 내부 문서 표현으로 변환하도록 형성된 다수의 "문서 에이전트"를 포함하는 구조를 특징으로 한다. 문서 에이전트에 의해 생성되는 내부 표현은 일반적이고 에이전트들 사이에 공통적이므로, 시스템의 나머지는 들어오는 문서의 형식에 관계없이 단일 데이터 표시만 다룰 필요가 있다.
문서 처리 시스템은 또한 내부 표현에 대해 문서 레이아웃, 렌더링, 애니메이션 및 이벤트 처리를 수행하도록 동작하는 핵심 엔진을 포함한다. 코어 엔진은 스크립트 성능을 가지며, 적절한 반사 계층과 함께 스크립트 또는 바이트코드 해석기를 포함하여, 처리된 문서들 내에 포함된 스크립트들을 처리할 수 있다. 문서 처리 시스템은 또한 팬(pan), 줌, 페이지로 가기 등의 일반적인 문서 조작 컨트롤들을 제공한다.
코어 문서 엔진은 추상 계층을 통해 시스템을 작동시키는 데이터 처리 장치(100)와 직접 통신하므로, OS 기능들과 장치 이벤트들 모두에 대한 액세스를 갖는다. 따라서 코어 엔진은 사용자 인터페이스와 상호 작용하는데 필요한 이벤트 처리 및 스크립트 실행 모두에 이용될 수 있다. 또한, 사용자 인터페이스는 문서 처리 시스템에 상주하는 문서 에이전트에 의해 처리될 수도 있는 대화식 멀티미디어 작업으로서 구현될 수도 있다. 문서 처리 시스템은 멀티미디어 작업을 코어 엔진에 의해 랜더링되는 내부 표현으로 변환한다.
이와 같이 구현되는 해법은 멀티미디어 작업의 많은 형식에 대한 공통 표현 모델을 가능하게 한다. 모듈 문서 에이전트의 존재는 예를 들어 HTML에 대한 문서 에이전트, (캘리포니아 샌프란시스코의 매크로미디어사에 의해 제공되는) MACROMEDIA FLASH에 대한 다른 형식, SVG, SMIL 등에 대한 다른 형식을 제공함으로써 다양한 멀티미디어 형식으로 작업이 생성될 수 있다. 문서 에이전트는 주로 파서(parser)이기 때문에, 문서 에이전트는 코드 크기가 작을 수 있어(100 kBytes 이하) 한정된 메모리를 가진 이동 장치에도 여러 개가 제공될 수 있다. 일반적인 플레이어에서 이루어지는 레이아웃, 렌더링, 스타일링, 애니메이션 및 타임라인 핸들링이 모두 문서 처리 시스템의 코어 엔진에 의해 처리되기 때문에 문서 에이전트는 일반 멀티미디어 플레이어보다 훨씬 더 작다. 코어 엔진은 공동 내부 표현으로 동작하기 때문에, 다른 멀티미디어 형식이 사용될 때 복제될 필요가 없고, 여분의 문서 에이전트만이 필요하다.
이러한 시스템은 사용자 인터페이스 작업이 다른 멀티미디어 형식으로 형성되고, 이러한 형식들이 단일 인터페이스로 조합될 가능성을 연다. 예를 들어, SVG로 작성된 연결 애플리케이션에 대한 인터페이스 작업은 FLASH로 작성된 게임 인터페이스 및 HTML로 저작된 메시징 인터페이스와 동일한 장치상에서 결합할 수도 있다. 이들 개별 작업은 단일 장치 인터페이스에서 사용자에게 투명한 방식으로 자연스럽게 함께 플레이될 수 있다. 각각의 멀티미디어 작업은 필요에 따라 로딩되어, 파일 형식에 따른 적절한 문서 에이전트에 매치된다. 코어 엔진에 의해 수행되는 이벤트 처리, 렌더링, 애니메이션 및 스크립트는 멀티미디어 작업의 본래 형식에 관계없이 일정하게 적용된다.
상기에 제안한 바와 같이, 사용자 인터페이스(102)는 하나 이상의 대화식 멀티미디어 작업으로서 구현될 수 있으며, 대화식 멀티미디어 작업은 다수의 멀티미디어 세그먼트로 구성될 수 있다. HTML과 같은 멀티미디어 형식은 비주얼 인터페이스의 기초를 형성하도록 설계될 수 있는 텍스트, 이미지 및 스타일링을 포함하는 문서들의 작성을 가능하게 한다. SVG(확장 벡터 그래픽), MACROMEDIA FLASH 및 SMIL(동기화 멀티미디어 통합 언어)과 같은 여러 멀티미디어 형식은 후술하는 움직이는 줌 효과와 같은 효과들을 발생시키도록 작업 내에서 이용할 수 있는 본래의 애니메이션 기능을 제공한다. 멀티미디어 작업에 포함된 실행 가능한 스크립트들에 의해 연결 작동(interactivity)이 제공된다.
스크립트는 잠재적으로 논리적 결정, 루핑(looping) 및 조건부 루핑을 포함하는 지시들의 시퀀스이다. 연결 작동을 가능하게 하기 위해, 스크립트는 소위 "이벤트 핸들러"를 사용하여 연산 환경에서 일어나는 이벤트들을 포착하고 그 이벤트에 응하여 스크립트 코드를 실행한다.
스위스 제네바의 ECMA 인터내셔널에 의해 제공되는 ECMASCRIPT는 스크립트 문법을 정의하고 수학, 날짜 등의 어떤 원시 함수가 제공될 필요가 있는 일반 스크립트 언어이다. 다른 점에서, ECMASCRIPT는 호스트 환경에서 지원되는 한 확장 가능하다. ECMASCRIPT 컴플라이언트 스크립트 언어의 가장 친숙한 예는 (캘리포니아 팔로알토의 썬 마이크로시스템사로부터의) JAVASCRIPT이며, 이는 일반적으로 브라우저가 보여주는 웹페이지 내에 있다. 이 스크립트는 웹페이지 자체 내에 포함되며, 호스트 브라우저 환경에서 볼 때 웹 문서에 효과를 적용한다(예를 들어, 마우 스 오버시 내용 변경).
또 다른 예는 캘리포니아 샌프란시스코의 매크로미디어사에 의해 제공되는 MACROMEDIA FLASH ACTIONSCRIPT이다. 이것은 (완전히 컴플라이언트 하지는 않지만) ECMASCRIPT를 기반으로 하지만, JAVASCRIPT와는 다른 객체, 속성 등의 세트를 갖는다. 예를 들어, ACTIONSCRIPT는 MovieClip과 같은 FLASH 특정 객체를 포함한다. ACTIONSCRIPT에 의한 문서는 FLASH 플레이어에서 예를 들어 적절한 플레이를 위해 이러한 함수들을 인식하고 실행하는 호스트 환경을 필요로 한다.
문서 내의 스크립트를 인식하고 실행하는 호스트 애플리케이션(브라우저나 코어 엔진 등)의 능력은 호스트 환경에서 대응하는 데이터 및 함수들에 스크립트 객체 및 메소드(method)를 묶는 브리징 계층에 의해 결정된다. 이는 공통적으로 "반사 계층"이라 하는데, 원시 객체들이 스크립팅 월드에 반사되어 스크립트 명령들에 의해 액세스 되고 처리될 수 있기 때문이다. 예를 들어, 종래의 브라우저(마이크로소프트 인터넷 익스플로러 또는 넷스케이프 등)가 새로운 브라우저 창을 열 수도 있다. 브라우저의 반사 계층은 이러한 창을 나타내기 위한 새로운 객체를 생성하여, JAVASCRIPT가 창 속성에 액세스할 수 있다(예를 들어, 창의 메뉴 바 속성이 JAVASCRIPT에 현재 이용 가능하다).
스크립팅 언어는 일반적으로 "문서 객체 모델" 또는 DOM이라고 하는 것을 이용한다. 이는 객체 및 그 속성, 메소드 및 이벤트의 계층이다. 이러한 속성 및 메소드를 통해 스크립트는 상기 브라우저 창 예시에서와 같이 호스트 애플리케이션 자체의 양상을 액세스 및 지정할 수 있고, 또한 스크립트를 포함하는 문서 내의 객 체에 액세스할 수 있다. 예를 들어, 브라우저에 호스팅 되는 웹페이지의 폼(f1) 안의 버튼(버튼 1)은 스크립트 객체 document. f1 . button1에 의해 액세스 될 수 있다. 이러한 버튼과의 상호 작용 결과는 클릭 이벤트에 응하여 실행되는 스크립트 시퀀스로서 저작될 수 있다.
DOM 및 ACTIONSCRIPT를 사용하여 데이터 처리 사용자 인터페이스가 MACROMEDIA FLACH에 구현될 수 있다. 예를 들어, 메뉴 레벨을 표시하기 위해, 데이터 처리 장치(100)는 메뉴 레벨의 가시 엘리먼트들을 포함하는 FLASH 멀티미디어 작업("작업")을 실행한다. '하향 키 누름' 이벤트에 응하여, 작업의 스크립트 핸들러는 표시된 항목들을 재정렬하여 갱신된 디스플레이를 랜더링한다. 강조 표시된 영역의 z-오더 및 스케일링은 표시된 내용을 조정하여 새로운 정보를 표시할 수 있는 것과 같이 멀티미디어 작업 내에서 직접 이루어질 수 있다. 마찬가지로, 작업은 FLASH 형식 내에 제공된 애니메이션 특징들을 이용함으로써 줌 효과를 포함할 수 있다. 이러한 애니메이션은 키 누름 이벤트에 응하여 이벤트 핸들러 스크립트를 통해 활성화된다.
본 발명의 예시적인 구현에 따른 멀티미디어 작업에 기반한 사용자 인터페이스는 스크립트될 수 없는 원시 코드에 액세스하는 기능을 포함한다. 따라서 사용자 인터페이스용 멀티미디어 플레이어는 _app 객체로 불리는 객체로 확장되는 DOM, 원시 코드 라이브러리(DLL)가 등록될 수 있게 하는 이 객체들에 관한 메소드 세트, 및 멀티미디어 작업 내의 스크립트들에 의한 사용을 위해 노출된 함수들을 갖는다.
원시 코드 라이브러리는 C나 C++과 같은 컴파일된 언어로 작성될 수 있다. 이들은 이러한 언어의 사용에 의해서만 프로그래밍 될 수 있으며 멀티미디어 작업에 관련된 스크립팅 언어의 성능 및 범위를 넘는 함수들을 포함할 수 있다. 샘플 라이브러리는 MP3 파일들을 플레이하기 위한 라이브러리, 또는 연결 상대들의 데이터베이스를 관리하기 위한 라이브러리를 포함한다. 사용자 인터페이스 프레임워크의 원하는 확장 가능성을 달성하기 위한 한 가지 수단은 DLL에 제공된 원시 함수들에 16진 UID 번호(고유 식별자)를 할당하는 것이다. 예를 들어, MP3 라이브러리에서 PlayAudioFile 함수에 UID 0x2400이 부여될 수 있다. 이들 함수는 상기에 소개한 _app 객체의 메소드를 통해 멀티미디어 작업의 저작자가 이용할 수 있게 된다.
라이브러리를 등록한 후, 멀티미디어 작업은 _app.handler라 불리는 메소드에 의해 노출된 라이브러리 함수들을 필요한 함수에 대한 UID와 함께 호출할 수 있다. 예를 들어, UI 저작자는 _app.handler(0x2400, "보헤미안 랩소디")를 불러내 그 이름의 MP3 오디오 파일을 플레이 하게 된다. 이러한 방법은 선언된 라이브러리 함수들을 반사 계층에 효과적으로 부가하고, 이를 작업의 스크립트에 의한 UID 참조에 의해 호출되도록 사용 가능하게 한다. 반사 계층은 새로운 함수들의 부가에 의해 극적으로 확장된다.
이 기술은 파일 디렉토리를 열거하고 그 내용의 목록을 되돌리는 것과 같은 함수들에 의해 멀티미디어 플레이어로의 확장을 가능하게 한다. 이 정보는 엘리먼트들이 다른 내용과 같은 작업에 사용될 수 있는 가변 어레이의 멀티미디어 작업으로 되돌려질 수 있다. 개별 파일들을 열고 그 내용들을 추출하기 위한 원시 함수들이 제공될 수도 있다. 장치에 근거리이며 네트워크에 걸쳐 있는 파일링 시스템 들, 저장 카드 또는 주변 장치에 대한 액세스는 저작자가 멀티미디어 작업의 실제 파일 자체 내에 포함되지 않는 외부 문서들 또는 내용을 통합할 수 있게 한다.
이러한 예는 외관 및 전이 효과 등을 포함하는 사진들을 표시하라는 명령들을 갖는 작업이 저작되는 "스마트 포토 갤러리"이다. 그러나 작업에 의해 표시되어야 하는 사진들은 종래의 접근법에서와 같이 작업 자체의 일부는 아니다. 현재 방법 하에서 플레이어에 대해 디렉토리를 열거하라는 명령에 의해 사진들이 작업에 집합될 수 있으며, 디렉토리는 플레이어를 실행하고 있는 카메라폰의 포토 디렉토리일 수도 있다. 디렉토리에 있는 사진들의 목록이 플레이어에 의해 판독되고, _app 객체 어레이로서 멀티미디어 작업에 전달된다. 멀티미디어 작업은 _app 어레이에서 인덱스를 참조하고, 객체를 열어 저작품에 정의된 효과를 적용함으로써 외부적으로 제공된 포토 객체들을 갤러리 내에 통합할 수 있다.
다른 예들은 목록이나 메뉴를 동적으로 모으는 것을 포함할 수 있으며, 저작된 멀티미디어 작업 내에 하드코드된 목록이나 메뉴를 갖는 것이 아니라, 작업은 대신 목록이나 메뉴를 포함하는 원격 위치를 참조하며, 이 원격 위치는 원래 작업의 제어에 의해 동적으로 변화할 수 있다. 예를 들어, 새로운 항목들이 목록에 부가될 수 있으며, 다음에 작업이 플레이될 때 새로운 목록 항목들이 이용 가능하게 된다. 저작된 작업은 목록에 있는 것을 사용하라는 명령을 포함하지만, 목록 자체는 현재의 많은 접근법에서와 같이 작업 내에 정적으로 정의될 필요는 없다.
또 다른 예는 연결 상대 데이터베이스를 사용하도록 저작된 작업이며, 데이터베이스는 동적으로 성장 및 변화할 수 있다. 작업의 기능은 미리 저작되기 때문 에 변경되지 않는다. 그러나 이 기능이 적용되는 내용은 정적이 아니라 동적이다. 이러한 예들은 동적 템플릿의 의미를 설명하며, 내용은 멀티미디어 템플릿에 동적으로 삽입된다.
또한, 프레임워크는 기능이 실행 시간으로 확장될 수 있게 한다. 예를 들어, 데이터 처리 장치(100)에는 한정된 기능을 갖는 사용자 인터페이스(102) 작업이 적재될 수도 있다. 프리미엄을 지불함으로써 사용자는 오디오 플레이어나 문서 뷰어 능력과 같이 보강된 기능을 포함하는 새로운 사용자 인터페이스(102) 작업을 다운로드할 수도 있다. 여기서 설명한 것과 같은 사용자 인터페이스(102) 프레임워크 내에서 플레이될 때 새로운 작업이 기본 인터페이스에 의해 이용되지 않는 추가 라이브러리(DLL)를 등록하게 되고, 이들 라이브러리는 장치의 실행 시간에 적재되어 한정된 인터페이스 작업으로부터 이전에 액세스 불가능했던 새로운 기능을 노출할 수도 있다. DOM 및 확장 가능한 반사 계층을 포함하는 프레임워크는 새로운 라이브러리 함수를 호출하는 보강된 작업과 함수 호출에 응하여 실행하는 DLL 사이의 시스템 내에서 통합, 제어 및 통신을 관리한다.
상술한 바와 같은 구현은 또한 기존의 멀티미디어 형식들(FLASH, SVG, HTML, SMIL 등)이 그 본래의 범위를 넘어가는 이벤트를 처리/응답하도록 확장될 수 있게 한다. 종래의 이벤트들은 예를 들어 마우스 클릭 및 키 누름을 포함하고, 표준 스크립팅 언어는 OnClick, OnKeypress 등을 사용함으로써 이벤트들에 응답할 수 있다. 제안된 시스템은 시스템, 장치 및 라이브러리 이벤트 - 예를 들어, OutOfMemory; IncomingCall; CardInserted; 등의 이벤트들에 응답하는 리스너 객체 들을 UI에 등록함으로써 언어를 확장할 수 있다.
이를 달성하는 메커니즘은 확장 가능한 반사 계층을 이용한다. C나 이에 상당하는 것으로 작성된 각각의 원시 애플리케이션은 운영 체계 및 장치 소프트웨어에 의해 제공된 원시 이벤트들에 대한 액세스를 획득할 수 있다. 따라서 이들 원시 라이브러리는 시스템 및 장치 이벤트들을 노출할 수 있으며, 예를 들어 이메일 애플리케이션은 새로운 이메일이 수신된 것을 지시하는 이벤트를 끌어들일 수도 있다.
_app 객체 및 _app.handler 메소드를 이용함으로써 이들 시스템 이벤트는 작업 내의 스크립트에 의해 작동하도록 멀티미디어 작업을 통해 반사될 수도 있다. 예를 들어, 이메일 애플리케이션은 원시 애플리케이션에 의해 끌어들인 이벤트들이 다음과 같이 콜백 객체에 부착되도록, UID 0x0036을 가진 함수를 포함하여 스크립트에 콜백 객체를 부가할 수도 있다:
listenerobj = new Object();
result = _app.handler(0x0036 /*email_addCallbackObject*/, listenerobj)
/* 콜백 객체가 성공적으로 추가되었다면 result에 불린값(Boolean value) true를 돌린다 */
listenerobj.onincomingemail = function()
{
trace("New mail recieved");
}
이 스크립트는 원시 이메일 애플리케이션으로부터의 이벤트에 응답할 수 있는 스크립트 내에 객체(listenerobj)를 형성한다. 이 경우, 스크립트는 새로운 메일이 도착했을 때 스크린 메시지를 불러내는 이벤트 핸들러를 활성화한다.
이는 상이한 멀티미디어 작업들이 저작자의 의도에 따라 동일한 이벤트에 대해 다른 방식으로 응답할 가능성을 전개한다. 일례는 휴대형 장치에서 실행하는 종류의 플레이어이다. 사용자가 장치에 메모리 카드를 삽입하여, 장치가 멀티미디어 플레이어에 의해 인터셉트된 이벤트를 생성하게 한다. 인터셉션은 플레이어가 "카드 삽입" 이벤트에 관련된 작업 내에서 기능을 실행하게 한다. 멀티미디어 작업의 이벤트 핸들러는 (예를 들어) 상술한 기술을 이용하여 삽입된 카드에 파일을 열거하도록 선택될 수 있으며, 슬라이드 쇼 내에 선택된 파일들을 포함할 수 있다. 다른 작업들이 사용자에게 카드가 삽입되었음을 알려주는 특별한 음을 플레이하는 기능을 대신 가질 수도 있다.
마찬가지로, 휴대 전화는 텍스트 메시지가 수신되었다거나, (워싱턴 D.C.의 블루투스 SIG사의) 블루투스(BLUETOOTH) 무선 통신 채널이 개방되었음을 지시하는 이벤트를 생성할 수 있다. 멀티미디어 플레이어는 멀티미디어 작업에 대해 이 이벤트를 푸시하여, 예를 들어 사용자에게 통보하는 클립을 표시하거나 작업 내에 텍스트 메시지를 통합함으로써 여러 가지 방법으로 응답할 수 있다. 다른 종류의 이벤트들은 착신, 문서 로딩 완료, 메모리 부족 등을 포함한다.
사용자 인터페이스(102)가 멀티미디어 플레이어를 포함하는 구현의 경우, 사용자 인터페이스(102)는 멀티미디어 작업들에 하부 시스템을 통합하는 관리자 모듈을 포함할 수 있다. 이 모듈은 멀티미디어 작업을 플레이어에 로딩하거나, 멀티미디어 작업에 필요한 필수 애플리케이션 라이브러리들을 로딩 및 언로딩하거나, 필요에 따라 다른 멀티미디어 작업들 간의 스위칭 등의 작업을 처리할 수 있다. 관리자 모듈은 완전한 사용자 인터페이스(102)가 단일 사용자 인터페이스(102) 멀티미디어 작업의 여러 세그먼트들, 또는 각각 특정 기능 - 예를 들어 게임 인터페이스, 주소록 등을 수행하는 다수의 개별 작업들로 구성될 수 있게 한다. 관리자 모듈은 각각의 작업이 하나 또는 여러 애플리케이션 서비스에 액세스하고, 여러 멀티미디어 작업이 단일 애플리케이션 서비스에 대한 액세스를 공유하는 유연성을 제공한다. 가장 넓은 의미에서 이러한 방법은 시스템 이벤트를 원래부터 인식하지 않는 넓은 범위의 미디어 형식에 이러한 이벤트를 노출시키는 환경을 제공한다. 상기 방법은 시스템 이벤트들에 대한 응답을 포함하도록 이들 형식의 이벤트 핸들링을 확장한다.
일 구현예에 있어서, 멀티미디어 작업 및 멀티미디어 플레이어는 멀티미디어 작업 본래의 사용자 인터페이스(102) 출력뿐 아니라 문서 내용도 랜더링한다. 멀티미디어 플레이어는 처음에 텍스트 메시지와 같은 문서 내용을 작업 내의 스크립트에 의해 멀티미디어 작업에 수집함으로써 그 출력을 구성한다. 내용의 랜더링은 작업에서 그래픽 아이콘들과 같은 다른 사용자 인터페이스 엘리먼트들의 랜더링과 동일하게 멀티미디어 플레이어에 의해 수행된다.
다른 구현예에서 텍스트 메시지의 내용은 상술한 유형의 문서 처리 엔진에 의해 개별적으로 처리된다. 멀티미디어 작업의 사용자 인터페이스 엘리먼트들(아이콘 등)은 멀티미디어 플레이어에 의해 계속해서 처리된다. 이러한 구현에 의해 데이터 처리 장치는 플레이어의 출력 상에 문서 엔진으로부터 랜더링된 출력(텍스트 메시지)을 오버레이 함으로써 디스플레이를 구성한다. 이는 각각의 출력에 이용 가능한 화면 영역들을 분할하거나(분할은 멀티미디어 스크립트에 의해 제어됨) 문서 처리 엔진에 의해 사용되는 플레이어 출력 내에 투명 캔버스를 형성하는 투명성을 이용함으로써 이루어질 수 있다. 이 구현예는 사용자 인터페이스에 의해 이용 가능한 문서 엔진의 특수화된 기능을 이룬다. 예를 들어, 문서 내용은 플레이어를 통해 랜더링되는 가시 사용자 인터페이스 컨트롤들을 변경하지 않고 스케일링, 패닝(panning), 리플로우 등이 이루어질 수 있다. 사용자 인터페이스 엘리먼트들 및 내용은 다른 팩터들로 스케일링될 수 있다. 문서 처리 엔진이 다수의 문서 종류를 처리할 때, 컨트롤들의 단일 세트를 갖는 사용자 인터페이스 작업은 다수의 문서 종류를 일관적으로 처리할 수도 있다.
본 발명은 그 사상 및 본질적 특징들을 벗어나지 않으면서 다른 특정한 형태들로 구현될 수 있다. 따라서 상술한 실시예들은 본 발명의 한정이 아니라 모든 점에서 예시가 되는 것으로 생각해야 한다.
본 발명에 의해, 전화기 및 다른 소형 연산 장치 사용자들에게 보다 직관적이고, 익히기 쉬우며, 일관적이고 예상하기 쉬운 방식으로 동작하고, 한정된 디스 플레이 공간을 최상으로 활용하는 사용자 인터페이스를 제공할 수 있다.

Claims (44)

  1. 데이터 처리 시스템에 사용하기 위한 그래픽 사용자 인터페이스로서,
    각각 가시 영역을 갖는 제 1 다수의 주메뉴 항목을 디스플레이에 제공하는 메뉴 시스템;
    사용자가 상기 메뉴 시스템을 네비게이팅할 수 있게 하는 네비게이션 모듈; 및
    제 1 주메뉴 항목으로의 네비게이션에 응하여, 상기 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시하면서, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 제 1 주메뉴 항목에 관련된 제 1 다수의 부메뉴 항목을 표시하는 표시 프로세스를 포함하는, 사용자 인터페이스.
  2. 제 1 항에 있어서, 상기 표시 프로세스는 제 2 주메뉴 항목으로의 네비게이션에 응하여 상기 디스플레이로부터 상기 제 1 다수의 부메뉴 항목을 제거하는 것을 특징으로 하는 사용자 인터페이스.
  3. 제 1 항 또는 제 2 항에 있어서, 상기 부메뉴 항목들은 바로 가기 항목들을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  4. 제 1 항 내지 제 3 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항 목 중 적어도 하나는 상기 메뉴 시스템 내의 위치에 대한 네비게이션 바로 가기의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항목 중 적어도 하나는 상기 제 1 주메뉴 항목에 관련된 옵션에 대한 기능 바로 가기의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  6. 제 1 항 내지 제 5 항 중 어느 한 항에 있어서, 상기 부메뉴 항목들 중 적어도 하나는 아이콘으로 구성되거나 아이콘을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 있어서, 상기 부메뉴 항목들 중 적어도 하나는 텍스트 설명으로 구성되거나 텍스트 설명을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  8. 제 1 항 내지 제 7 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항목은 문맥 감지형(context sensitive)인 것을 특징으로 하는 사용자 인터페이스.
  9. 제 8 항에 있어서, 상기 문맥 감지형의 제 1 다수의 부메뉴 항목은 상기 사용자 인터페이스를 통합한 장치의 상태에 의존하는 것을 특징으로 하는 사용자 인 터페이스.
  10. 제 9 항에 있어서, 상기 장치의 상태는 네트워크 접속의 가용성 및 주변 장치의 가용성 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스.
  11. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서, 주메뉴 항목 및 부메뉴 항목 중 적어도 하나에 대한 성공적인 네비게이션을 시각적으로 나타내는 강조 표시 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
  12. 제 11 항에 있어서, 상기 사용자 인터페이스는 상기 데이터 처리 시스템의 선택 컨트롤에 응답하도록 되어 있으며, 상기 사용자 인터페이스는 상기 선택 컨트롤의 사용에 응하여 주메뉴 항목 및 부메뉴 항목 중 하나가 강조 표시될 때 그 선택을 수락하는 선택 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
  13. 제 12 항에 있어서, 제 1 주메뉴 항목에 관련된 제 1 기능을 포함하며, 상기 선택 컨트롤에 의한 상기 제 1 주메뉴 항목의 선택은 상기 제 1 기능의 수행을 개시하는 것을 특징으로 하는 사용자 인터페이스.
  14. 제 13 항에 있어서, 상기 제 1 기능은 제 2 다수의 주메뉴 항목을 포함하는 제 2 주메뉴를 표시하는 것을 특징으로 하는 사용자 인터페이스.
  15. 제 12 항에 있어서, 제 1 부메뉴 항목에 관련된 제 1 기능을 포함하며, 상기 선택 컨트롤에 의한 상기 제 1 부메뉴 항목의 선택은 상기 제 1 기능의 수행을 개시하는 것을 특징으로 하는 사용자 인터페이스.
  16. 제 15 항에 있어서, 상기 제 1 기능은 다수의 제 2 주메뉴 항목을 포함하는 제 2 주메뉴를 표시하는 것을 특징으로 하는 사용자 인터페이스.
  17. 제 11 항에 있어서, 상기 제 1 다수의 부메뉴 항목의 강조 표시에 응하여, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 다수의 부메뉴 항목 중 제 1 부메뉴 항목에 관련된 추가 정보를 표시하는 이중 표시 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
  18. 제 17 항에 있어서, 상기 부메뉴 항목은 아이콘을 포함하며, 상기 추가 정보는 상기 부메뉴 항목의 텍스트 설명을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  19. 제 18 항에 있어서, 상기 추가 정보는 상기 강조 표시된 부메뉴 항목에 관련된 데이터의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  20. 제 1 항에 있어서, 상기 표시 프로세스는 상기 제 1 주메뉴 항목에 관련된 데이터의 시각적 표현을 표시하는 것을 특징으로 하는 사용자 인터페이스.
  21. 제 1 항 내지 제 20 항 중 어느 한 항에 있어서, 상기 주메뉴 항목들은 상기 디스플레이 상에 수직 열로 표시되며, 각 주메뉴 항목의 가시 영역은 상기 디스플레이 폭에 걸쳐 수평으로 연장하는 것을 특징으로 하는 사용자 인터페이스.
  22. 제 21 항에 있어서, 상기 표시 프로세스는 상기 제 1 다수의 부메뉴 항목을 상기 제 1 주메뉴 항목의 가시 영역 내의 수평 행에 표시하는 것을 특징으로 하는 사용자 인터페이스.
  23. 제 17 항에 있어서, 강조 표시된 가시 영역들에 있는 추가 정보의 표시 형식은 주메뉴 항목들의 선택에 의해 액세스 되는 대다수의 메뉴 레벨 전체에 걸쳐 일관적으로 유지되는 것을 특징으로 하는 사용자 인터페이스.
  24. 제 12 항에 있어서, 상기 선택 프로세스는 주메뉴 항목의 선택에 응하여, 상기 선택의 스케일링 및 상기 제1 다수의 주메뉴 항목을 제 2 다수의 주메뉴 항목으로 적어도 일부 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시하는 것을 특징으로 하는 사용자 인터페이스.
  25. 제 12 항에 있어서, 상기 선택 프로세스는 주메뉴 항목 및 부메뉴 항목 중 하나의 선택에 응하여, 상기 선택의 스케일링 및 상기 주메뉴 항목을 데이터 내용으로 적어도 일부 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시하는 것을 특징으로 하는 사용자 인터페이스.
  26. 제 24 항에 있어서, 상기 선택 프로세스는 상기 움직이는 줌 전환 시퀀스의 마지막에, 상기 제 1 다수의 메뉴 항목의 일부 위에 상기 제 2 다수의 주메뉴 항목을 겹쳐 놓는 것을 특징으로 하는 사용자 인터페이스.
  27. 제 26 항에 있어서, 상기 제 1 다수의 주메뉴 항목의 일부는 상기 선택의 스케일링된 버전을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  28. 제 24 항에 있어서, 상기 사용자 인터페이스는 상기 데이터 처리 시스템의 선택 해제 컨트롤에 응답하도록 되어 있으며, 상기 사용자 인터페이스는 상기 선택 해제 컨트롤의 활성화에 응하여 역행 줌 전환 시퀀스를 개시하는 선택 해제 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
  29. 제 28 항에 있어서, 상기 역행 줌 전환 시퀀스는 실질적으로 상기 움직이는 줌 전환 시퀀스의 역행을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  30. 제 24 항에 있어서, 상기 움직이는 시각적 줌 전환 시퀀스는 상기 선택에 시각적으로 중심을 두는 것을 특징으로 하는 사용자 인터페이스.
  31. 제 28 항에 있어서, 상기 선택 컨트롤에 응하여 다수 레벨의 메뉴 항목들을 통한 하향 네비게이션을 제공하고, 선택 해제 컨트롤에 응하여 상기 다수 레벨의 메뉴 항목들을 통한 상향 네비게이션을 제공하는 것을 특징으로 하는 사용자 인터페이스.
  32. 제 12 항에 있어서, 상기 선택된 부메뉴 항목은 내용에 대한 링크를 포함하고, 상기 부메뉴 항목의 선택은 상기 부메뉴 항목이 점진적으로 스케일링되고 상기 내용에 의해 적어도 부분적으로 교체되는 것을 특징으로 하는 사용자 인터페이스.
  33. 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역을 확장함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
  34. 제 11 항에 있어서, 상기 강조 표시 프로세스는 부메뉴 항목에 관련된 그래픽 및 텍스트 객체들의 디스플레이를 스케일링함으로써 상기 부메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
  35. 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역을 제 2 주메뉴 항목의 가시 영역과 적어도 부분적으로 오버랩하도록 확장시키는 것을 특징으로 하는 사용자 인터페이스.
  36. 제 11 항에 있어서, 강조 표시되지 않은 주메뉴 항목들은 상기 제 1 주메뉴 항목의 강조 표시에 응하여 위치가 그대로인 것을 특징으로 하는 사용자 인터페이스.
  37. 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 디스플레이의 인접 부분에 상기 제 1 주메뉴 항목에 대응하는 모조 그림자를 그래픽적으로 표시함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
  38. 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역 내에 표시되는 그래픽 및 텍스트 객체들을 스케일링함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
  39. 제 1 항에 있어서, 상기 사용자 인터페이스는 상기 메뉴 시스템에 이용 가능한 내용에 액세스하기 위한 줌인(zoom-in) 모듈; 및 액세스된 내용을 차단하기 위 한 줌아웃(zoom-out) 모듈을 포함하는 것을 특징으로 하는 사용자 인터페이스.
  40. 제 39 항에 있어서, 상기 줌인 및 줌아웃 모듈은 상기 메뉴 시스템에 의해 액세스되는 내용의 디스플레이를 스케일링하는 수단을 제공하는 것을 특징으로 하는 사용자 인터페이스.
  41. 제 39 항에 있어서, 상기 줌인 및 줌아웃 모듈의 활성화는 다수 레벨의 주메뉴 항목들간 네비게이션을 제공하는 것을 특징으로 하는 사용자 인터페이스.
  42. 제 1 항 내지 제 41 항 중 어느 한 항에 있어서, 상기 네비게이션 모듈은 상기 메뉴 시스템의 지역 선택(geographic) 네비게이션을 가능하게 하는 것을 특징으로 하는 사용자 인터페이스.
  43. 제 42 항에 있어서, 상기 네비게이션 모듈에 의해 제공되는 지역 선택 네비게이션 능력은 상기 메뉴 시스템의 대다수의 메뉴 레벨들 사이에 일관된 것을 특징으로 하는 사용자 인터페이스.
  44. 제 43 항에 있어서, 상기 지역 선택 네비게이션 능력은 상기 메뉴 시스템의 모든 메뉴 레벨들 사이에 일관된 것을 특징으로 하는 사용자 인터페이스.
KR1020050108665A 2004-12-03 2005-11-14 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 KR20060092989A (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US63321804P 2004-12-03 2004-12-03
US60/633,218 2004-12-03
US11/061,185 US20060123360A1 (en) 2004-12-03 2005-02-18 User interfaces for data processing devices and systems
US11/061,185 2005-02-18

Publications (1)

Publication Number Publication Date
KR20060092989A true KR20060092989A (ko) 2006-08-23

Family

ID=35841775

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050108665A KR20060092989A (ko) 2004-12-03 2005-11-14 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스

Country Status (4)

Country Link
US (1) US20060123360A1 (ko)
EP (1) EP1667013A3 (ko)
JP (1) JP2006164260A (ko)
KR (1) KR20060092989A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101346889B1 (ko) * 2006-11-17 2014-01-02 엘지전자 주식회사 조이스틱을 갖는 이동통신단말기 및 그 입력 처리방법

Families Citing this family (217)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI20031433A (fi) * 2003-10-03 2005-04-04 Nokia Corp Menetelmä valikkojen muodostamiseksi
US8402384B2 (en) 2004-11-09 2013-03-19 Research In Motion Limited Dynamic bar oriented user interface
EP1836564A4 (en) * 2004-12-07 2011-07-27 Nuance Communications Inc USER INTERFACE WITH ADDED SEARCH PROPERTIES
EP1677182B1 (en) * 2004-12-28 2014-04-23 Sony Mobile Communications Japan, Inc. Display method, portable terminal device, and display program
JP4674311B2 (ja) * 2005-02-21 2011-04-20 株式会社リコー コンテンツ閲覧システム、コンテンツ閲覧方法およびプログラム
KR100643293B1 (ko) * 2005-05-02 2006-11-10 삼성전자주식회사 그래픽 사용자 인터페이스의 기하학적 변형을 통해 파일정보를 제공하는 장치 및 방법
US20060252462A1 (en) * 2005-05-05 2006-11-09 Govind Balakrishnan Accessing dedicated functions in personal devices
KR100617716B1 (ko) * 2005-06-09 2006-08-28 삼성전자주식회사 백라이트를 제어하는 휴대 단말기 및 그 방법
US8370770B2 (en) 2005-06-10 2013-02-05 T-Mobile Usa, Inc. Variable path management of user contacts
US8370769B2 (en) 2005-06-10 2013-02-05 T-Mobile Usa, Inc. Variable path management of user contacts
US8359548B2 (en) 2005-06-10 2013-01-22 T-Mobile Usa, Inc. Managing subset of user contacts
US7685530B2 (en) 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
JP2007052403A (ja) * 2005-07-19 2007-03-01 Canon Inc 表示装置及び表示方法及びプログラム及び記憶媒体
US20070067738A1 (en) * 2005-09-16 2007-03-22 Microsoft Corporation Extensible, filtered lists for mobile device user interface
US20070067726A1 (en) * 2005-09-16 2007-03-22 Microsoft Corporation Content sharing user interface for mobile devices
US7933632B2 (en) 2005-09-16 2011-04-26 Microsoft Corporation Tile space user interface for mobile devices
US7873356B2 (en) * 2005-09-16 2011-01-18 Microsoft Corporation Search interface for mobile devices
US8539374B2 (en) * 2005-09-23 2013-09-17 Disney Enterprises, Inc. Graphical user interface for electronic devices
US7631271B2 (en) * 2005-12-16 2009-12-08 Xerox Corporation Touch screen user interface with multi-text field display
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US20070156841A1 (en) * 2005-12-31 2007-07-05 Govind Balakrishnan Platform independent user interface for a mobile device
US7660558B2 (en) 2005-12-31 2010-02-09 Adobe Systems Incorporated Interrupting and resuming a media player
US20070155425A1 (en) * 2005-12-31 2007-07-05 Govind Balakrishnan Enabling rapid and de-coupled ui development for a cellular telephone
US7603113B2 (en) 2005-12-31 2009-10-13 Adobe Systems Incorporated Using local codecs
US20070157194A1 (en) * 2005-12-31 2007-07-05 Govind Balakrishnan Post-deployment user interface update in a mobile device
US20070155426A1 (en) * 2005-12-31 2007-07-05 Govind Balakrishnan Application access to cellular telephone settings
US7587684B2 (en) * 2006-01-23 2009-09-08 Nokia Corporation Mobile communication terminal and method therefore
KR100790078B1 (ko) * 2006-03-14 2008-01-02 삼성전자주식회사 이동 통신 단말기에서 어플리케이션으로의 빠른 접근 방법및 장치
US8510666B2 (en) * 2006-03-14 2013-08-13 Siemens Enterprise Communications Gmbh & Co. Kg Systems for development and/or use of telephone user interface
US8606247B2 (en) * 2006-03-20 2013-12-10 Sms.Ac, Inc. Systems and methods for billing for a network enabled application through a network platform regardless of whether the network enabled application is hosted by the platform
WO2007137240A2 (en) * 2006-05-21 2007-11-29 Motionphoto, Inc. Methods and apparatus for remote motion graphics authoring
US8307307B2 (en) 2006-05-25 2012-11-06 Research In Motion Limited Method for prompting user confirmation
US8255281B2 (en) 2006-06-07 2012-08-28 T-Mobile Usa, Inc. Service management system that enables subscriber-driven changes to service plans
WO2007147247A1 (en) * 2006-06-20 2007-12-27 Cogneto Development Inc. Grouped cascading user interface
WO2008007905A1 (en) 2006-07-12 2008-01-17 Lg Electronics Inc. Method and apparatus for encoding/decoding signal
JP4768537B2 (ja) * 2006-07-18 2011-09-07 株式会社リコー コンテンツ閲覧システムおよびプログラム
KR101154996B1 (ko) * 2006-07-25 2012-06-14 엘지전자 주식회사 이동통신 단말기 및 그 메뉴화면 구성 방법
KR100800889B1 (ko) 2006-08-08 2008-02-04 삼성전자주식회사 이동 통신 단말기의 기능 항목이 표시되는 화면의 구성을변경하기 위한 방법 및 이를 위한 단말기
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
AU2016204921C1 (en) * 2006-09-06 2017-10-19 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7940250B2 (en) * 2006-09-06 2011-05-10 Apple Inc. Web-clip widgets on a portable multifunction device
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US8253695B2 (en) * 2006-09-06 2012-08-28 Apple Inc. Email client for a portable multifunction device
ES2955850T3 (es) 2006-09-07 2023-12-07 Opentv Inc Procedimiento y sistema para navegar por contenido visible
WO2008036685A2 (en) * 2006-09-18 2008-03-27 Sms.Ac Billing for network enabled application through a network platform
US20080086703A1 (en) * 2006-10-06 2008-04-10 Microsoft Corporation Preview expansion of list items
KR100761809B1 (ko) * 2006-10-11 2007-09-28 삼성전자주식회사 휴대 단말기 및 휴대 단말기의 대기화면 표시 방법
WO2008048067A1 (en) * 2006-10-19 2008-04-24 Lg Electronics Inc. Encoding method and apparatus and decoding method and apparatus
US7614003B2 (en) * 2006-10-23 2009-11-03 Adobe Systems Incorporated Rendering hypertext markup language content
US8020089B1 (en) 2006-10-23 2011-09-13 Adobe Systems Incorporated Rendering hypertext markup language content
US8490117B1 (en) 2006-10-23 2013-07-16 Adobe Systems Incorporated Bridging script engines
US8291346B2 (en) 2006-11-07 2012-10-16 Apple Inc. 3D remote control system employing absolute and relative position detection
US20080115060A1 (en) * 2006-11-15 2008-05-15 First International Computer, Inc. Computer user interface menu selection process
US20130167024A1 (en) 2006-12-05 2013-06-27 Adobe Systems Incorporated Embedded document within an application
AU2006252194B2 (en) 2006-12-21 2010-02-11 Canon Kabushiki Kaisha Scrolling Interface
AU2006252196B2 (en) 2006-12-21 2009-05-14 Canon Kabushiki Kaisha Scrolling Interface
US20080155433A1 (en) * 2006-12-21 2008-06-26 Microsoft Corporation Zooming task management
AU2006252191B2 (en) 2006-12-21 2009-03-26 Canon Kabushiki Kaisha Scrolling Interface
US8519964B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display
US9817436B2 (en) * 2007-01-07 2017-11-14 Apple Inc. Portable multifunction device, method, and graphical user interface for displaying user interface objects adaptively
US8788954B2 (en) 2007-01-07 2014-07-22 Apple Inc. Web-clip widgets on a portable multifunction device
US20080172614A1 (en) * 2007-01-08 2008-07-17 Varia Mobil Llc Action-based menus for a portable media device
US7743339B1 (en) 2007-02-01 2010-06-22 Adobe Systems Incorporated Rendering text in a brew device
JP4612647B2 (ja) * 2007-03-06 2011-01-12 Necカシオモバイルコミュニケーションズ株式会社 電子機器および電子機器の処理プログラム
US8589779B2 (en) * 2007-03-08 2013-11-19 Adobe Systems Incorporated Event-sensitive content for mobile devices
KR100883117B1 (ko) * 2007-04-10 2009-02-11 삼성전자주식회사 Drm 컨텐츠 상세 정보 표시 방법 및 이를 이용하는 휴대단말기
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US9772751B2 (en) * 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
US9116593B2 (en) 2007-07-06 2015-08-25 Qualcomm Incorporated Single-axis window manager
US8782555B2 (en) * 2007-08-30 2014-07-15 Microsoft Corporation Nested user interfaces for multiple displays
US11126321B2 (en) * 2007-09-04 2021-09-21 Apple Inc. Application menu user interface
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8619038B2 (en) 2007-09-04 2013-12-31 Apple Inc. Editing interface
US8334847B2 (en) 2007-10-19 2012-12-18 Qnx Software Systems Limited System having user interface using object selection and gestures
US20090113333A1 (en) * 2007-10-26 2009-04-30 Palm, Inc. Extendable Toolbar for Navigation and Execution of Operational Functions
US8943425B2 (en) 2007-10-30 2015-01-27 Google Technology Holdings LLC Method and apparatus for context-aware delivery of informational content on ambient displays
US8497842B2 (en) 2007-11-02 2013-07-30 Qnx Software Systems Limited System having user interface using motion based object selection and mouse movement
US7996045B1 (en) 2007-11-09 2011-08-09 Google Inc. Providing interactive alert information
KR20090058073A (ko) * 2007-12-04 2009-06-09 삼성전자주식회사 단말 및 그의 기능 수행 방법
US8881049B2 (en) * 2007-12-14 2014-11-04 Apple Inc. Scrolling displayed objects using a 3D remote controller in a media system
US8194037B2 (en) * 2007-12-14 2012-06-05 Apple Inc. Centering a 3D remote controller in a media system
US20090153475A1 (en) * 2007-12-14 2009-06-18 Apple Inc. Use of a remote controller Z-direction input mechanism in a media system
US8341544B2 (en) 2007-12-14 2012-12-25 Apple Inc. Scroll bar with video region in a media system
US8004541B2 (en) * 2008-01-28 2011-08-23 Hewlett-Packard Development Company, L.P. Structured display system with system defined transitions
KR100900295B1 (ko) * 2008-04-17 2009-05-29 엘지전자 주식회사 이동 디바이스와 이동 통신 시스템의 사용자 인터페이스방법
US8266187B2 (en) 2008-02-19 2012-09-11 Hewlett-Packard Development Company, L.P. Integration of static and dynamic data for database entities and the unified presentation thereof
US9483755B2 (en) 2008-03-04 2016-11-01 Apple Inc. Portable multifunction device, method, and graphical user interface for an email client
US8640040B2 (en) * 2008-03-28 2014-01-28 Sprint Communications Company L.P. Persistent event-management access in a mobile communications device
US8438539B2 (en) * 2008-04-11 2013-05-07 International Business Machines Corporation Using a menu slideshow framework for generating a custom menu-driven slideshow containing definable content
TWI366787B (en) * 2008-04-18 2012-06-21 Htc Corp Method for displaying information contents and a electric apparatus and storage medium thereof
JP4533943B2 (ja) * 2008-04-28 2010-09-01 株式会社東芝 情報処理装置、表示制御方法およびプログラム
US8457592B2 (en) * 2008-05-01 2013-06-04 Verizon Patent And Licensing Inc. Configurable communications device
US20120221962A1 (en) 2008-08-05 2012-08-30 Eugene Lee Lew Social messaging hub system
KR20110081935A (ko) 2008-08-05 2011-07-15 미디어프렌즈 인크 컴퓨터 디바이스를 위한 sms 기술
US11172067B1 (en) 2008-08-05 2021-11-09 HeyWire, Inc. Call center mobile messaging
US9356907B2 (en) 2008-08-05 2016-05-31 HeyWire, Inc. Messaging system having multiple number, dual mode phone support
US9014530B2 (en) * 2008-08-12 2015-04-21 2236008 Ontario Inc. System having movie clip object controlling an external native application
US20100064255A1 (en) * 2008-09-05 2010-03-11 Apple Inc. Contextual menus in an electronic device
JP5596914B2 (ja) * 2008-09-16 2014-09-24 富士通株式会社 端末装置、表示制御方法、及び表示機能を備えたプログラム
US8584031B2 (en) * 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100138766A1 (en) * 2008-12-03 2010-06-03 Satoshi Nakajima Gravity driven user interface
US20100141658A1 (en) * 2008-12-09 2010-06-10 Microsoft Corporation Two-dimensional shadows showing three-dimensional depth
US8793615B2 (en) * 2008-12-22 2014-07-29 Verizon Patent And Licensing Inc. Interactive profile cards for mobile device
US8453057B2 (en) * 2008-12-22 2013-05-28 Verizon Patent And Licensing Inc. Stage interaction for mobile device
EP2211259A1 (en) * 2009-01-26 2010-07-28 Research In Motion Limited Method and apparatus for controlling a display of a portable electronic device
US9208754B2 (en) * 2009-01-26 2015-12-08 Blackberry Limited Method and apparatus for controlling a display of a portable electronic device
USD636401S1 (en) 2009-03-27 2011-04-19 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US9195966B2 (en) 2009-03-27 2015-11-24 T-Mobile Usa, Inc. Managing contact groups from subset of user contacts
USD636402S1 (en) 2009-03-27 2011-04-19 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US8577350B2 (en) 2009-03-27 2013-11-05 T-Mobile Usa, Inc. Managing communications utilizing communication categories
USD636399S1 (en) 2009-03-27 2011-04-19 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD633918S1 (en) * 2009-03-27 2011-03-08 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US9369542B2 (en) 2009-03-27 2016-06-14 T-Mobile Usa, Inc. Network-based processing of data requests for contact information
USD631888S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD631890S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD631887S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD631889S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US9210247B2 (en) 2009-03-27 2015-12-08 T-Mobile Usa, Inc. Managing contact groups from subset of user contacts
US8428561B1 (en) 2009-03-27 2013-04-23 T-Mobile Usa, Inc. Event notification and organization utilizing a communication network
US8631070B2 (en) 2009-03-27 2014-01-14 T-Mobile Usa, Inc. Providing event data to a group of contacts
USD631891S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US8893025B2 (en) 2009-03-27 2014-11-18 T-Mobile Usa, Inc. Generating group based information displays via template information
US8676626B1 (en) 2009-03-27 2014-03-18 T-Mobile Usa, Inc. Event notification and organization utilizing a communication network
US9355382B2 (en) 2009-03-27 2016-05-31 T-Mobile Usa, Inc. Group based information displays
US8140621B2 (en) * 2009-03-27 2012-03-20 T-Mobile, Usa, Inc. Providing event data to a group of contacts
USD636400S1 (en) 2009-03-27 2011-04-19 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD636403S1 (en) 2009-03-27 2011-04-19 T-Mobile Usa, Inc. Portion of a display screen with a user interface
USD631886S1 (en) 2009-03-27 2011-02-01 T-Mobile Usa, Inc. Portion of a display screen with a user interface
US9532197B1 (en) 2009-03-30 2016-12-27 Salesforce.Com, Inc. DID line type provisioning verification
US9542058B2 (en) * 2009-04-21 2017-01-10 Sony Corporation System and method for interactive competitive release board
US10453011B1 (en) 2009-08-19 2019-10-22 Allstate Insurance Company Roadside assistance
US9412130B2 (en) 2009-08-19 2016-08-09 Allstate Insurance Company Assistance on the go
US9070243B1 (en) 2009-08-19 2015-06-30 Allstate Insurance Company Assistance on the go
US9384491B1 (en) 2009-08-19 2016-07-05 Allstate Insurance Company Roadside assistance
US9659301B1 (en) 2009-08-19 2017-05-23 Allstate Insurance Company Roadside assistance
JP5359693B2 (ja) * 2009-08-28 2013-12-04 コニカミノルタ株式会社 画像形成装置および画像形成方法
KR101427114B1 (ko) * 2009-10-30 2014-08-07 삼성전자 주식회사 화상형성장치 및 화상형성장치의 타겟영역 확대 표시방법
JP2011108186A (ja) * 2009-11-20 2011-06-02 Sony Corp 情報処理装置、情報処理方法およびプログラム
CN102104673A (zh) * 2009-12-18 2011-06-22 深圳富泰宏精密工业有限公司 通讯录管理系统及方法
US8736561B2 (en) 2010-01-06 2014-05-27 Apple Inc. Device, method, and graphical user interface with content display modes and display rotation heuristics
WO2011092635A1 (en) * 2010-01-26 2011-08-04 Uiyou Ltd. Method and system for customizing a user-interface of an end-user device
US20110199386A1 (en) * 2010-02-12 2011-08-18 Honeywell International Inc. Overlay feature to provide user assistance in a multi-touch interactive display environment
US20110252349A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Folders
US10788976B2 (en) 2010-04-07 2020-09-29 Apple Inc. Device, method, and graphical user interface for managing folders with multiple pages
US20110296354A1 (en) * 2010-05-04 2011-12-01 Qwest Communications International Inc. Content-Driven Navigation
US9559869B2 (en) 2010-05-04 2017-01-31 Qwest Communications International Inc. Video call handling
US9501802B2 (en) 2010-05-04 2016-11-22 Qwest Communications International Inc. Conversation capture
US8819566B2 (en) 2010-05-04 2014-08-26 Qwest Communications International Inc. Integrated multi-modal chat
US9356790B2 (en) 2010-05-04 2016-05-31 Qwest Communications International Inc. Multi-user integrated task list
US9003306B2 (en) 2010-05-04 2015-04-07 Qwest Communications International Inc. Doodle-in-chat-context
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US9471145B2 (en) 2011-01-06 2016-10-18 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9477311B2 (en) 2011-01-06 2016-10-25 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9423878B2 (en) 2011-01-06 2016-08-23 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9766718B2 (en) 2011-02-28 2017-09-19 Blackberry Limited Electronic device and method of displaying information in response to input
US9015641B2 (en) 2011-01-06 2015-04-21 Blackberry Limited Electronic device and method of providing visual notification of a received communication
US9465440B2 (en) * 2011-01-06 2016-10-11 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9245259B2 (en) 2011-01-14 2016-01-26 Apple Inc. Presenting E-mail on a touch device
US9213421B2 (en) 2011-02-28 2015-12-15 Blackberry Limited Electronic device and method of displaying information in response to detecting a gesture
US8620113B2 (en) 2011-04-25 2013-12-31 Microsoft Corporation Laser diode modes
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US20130067366A1 (en) * 2011-09-14 2013-03-14 Microsoft Corporation Establishing content navigation direction based on directional user gestures
CN103035211A (zh) * 2011-09-29 2013-04-10 博西华电器(江苏)有限公司 具有液晶显示装置的家用电器及其显示方法
US9485411B2 (en) * 2011-10-28 2016-11-01 Canon Kabushiki Kaisha Display control apparatus and method for controlling display control apparatus
US8635637B2 (en) 2011-12-02 2014-01-21 Microsoft Corporation User interface presenting an animated avatar performing a media reaction
US9100685B2 (en) 2011-12-09 2015-08-04 Microsoft Technology Licensing, Llc Determining audience state or interest using passive sensor data
US9619038B2 (en) 2012-01-23 2017-04-11 Blackberry Limited Electronic device and method of displaying a cover image and an application image from a low power condition
US9058168B2 (en) 2012-01-23 2015-06-16 Blackberry Limited Electronic device and method of controlling a display
US11847300B2 (en) * 2012-03-12 2023-12-19 Comcast Cable Communications, Llc Electronic information hierarchy
US8898687B2 (en) 2012-04-04 2014-11-25 Microsoft Corporation Controlling a media program based on a media reaction
US20130290879A1 (en) * 2012-04-30 2013-10-31 Research In Motion Tat Ab Displaying notification messages and messages on a portable electronic device
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
US20130346922A1 (en) * 2012-06-26 2013-12-26 Google Inc. Insitu actions within presentation of notifications
US9256351B2 (en) * 2012-07-20 2016-02-09 Blackberry Limited Method and electronic device for facilitating user control of a menu
US9729695B2 (en) * 2012-11-20 2017-08-08 Dropbox Inc. Messaging client application interface
US8615221B1 (en) 2012-12-06 2013-12-24 Google Inc. System and method for selection of notification techniques in an electronic device
AU350580S (en) * 2013-02-22 2013-09-04 Samsung Electronics Co Ltd Display screen with icon for an electronic device
US9690476B2 (en) 2013-03-14 2017-06-27 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US11073979B2 (en) 2013-03-15 2021-07-27 Arris Enterprises Llc Non-linear navigation of data representation
US9507495B2 (en) 2013-04-03 2016-11-29 Blackberry Limited Electronic device and method of displaying information in response to a gesture
JP5956963B2 (ja) * 2013-08-29 2016-07-27 京セラドキュメントソリューションズ株式会社 画像形成装置及び表示プログラム
US9405442B1 (en) 2013-09-04 2016-08-02 Ca, Inc. List control with zoom operation
US9792015B2 (en) * 2013-09-19 2017-10-17 Microsoft Technology Licensing, Llc Providing visualizations for conversations
US20150106741A1 (en) 2013-10-15 2015-04-16 Microsoft Corporation Managing conversations
CN105849675B (zh) 2013-10-30 2019-09-24 苹果公司 显示相关的用户界面对象
USD763881S1 (en) * 2013-11-22 2016-08-16 Goldman, Sachs & Co. Display screen or portion thereof with graphical user interface
US8949283B1 (en) 2013-12-23 2015-02-03 Google Inc. Systems and methods for clustering electronic messages
US9542668B2 (en) 2013-12-30 2017-01-10 Google Inc. Systems and methods for clustering electronic messages
US9767189B2 (en) 2013-12-30 2017-09-19 Google Inc. Custom electronic message presentation based on electronic message category
US9124546B2 (en) 2013-12-31 2015-09-01 Google Inc. Systems and methods for throttling display of electronic messages
US9152307B2 (en) * 2013-12-31 2015-10-06 Google Inc. Systems and methods for simultaneously displaying clustered, in-line electronic messages in one display
US10033679B2 (en) 2013-12-31 2018-07-24 Google Llc Systems and methods for displaying unseen labels in a clustering in-box environment
US9306893B2 (en) 2013-12-31 2016-04-05 Google Inc. Systems and methods for progressive message flow
US9037455B1 (en) * 2014-01-08 2015-05-19 Google Inc. Limiting notification interruptions
US9854415B2 (en) 2015-04-30 2017-12-26 HeyWire, Inc. Call center A2P-to-P2P message routing conversion
US10360309B2 (en) 2015-04-30 2019-07-23 Salesforce.Com, Inc. Call center SMS-MMS language router
USD812068S1 (en) * 2016-02-15 2018-03-06 Adp, Llc Display screen with graphical user interface
USD812091S1 (en) * 2016-02-15 2018-03-06 Adp, Llc Display screen with graphical user interface
US11003627B2 (en) 2016-04-21 2021-05-11 Microsoft Technology Licensing, Llc Prioritizing thumbnail previews based on message content
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
US11816325B2 (en) 2016-06-12 2023-11-14 Apple Inc. Application shortcuts for carplay
WO2018013511A1 (en) 2016-07-11 2018-01-18 Salesforce.Com, Inc. System and method to use a mobile number in conjunction with a non-telephony internet connected device
US11348170B2 (en) 2018-03-27 2022-05-31 Allstate Insurance Company Systems and methods for identifying and transferring digital assets
US11748817B2 (en) 2018-03-27 2023-09-05 Allstate Insurance Company Systems and methods for generating an assessment of safety parameters using sensors and sensor data
US10936163B2 (en) 2018-07-17 2021-03-02 Methodical Mind, Llc. Graphical user interface system
US11170035B2 (en) * 2019-03-29 2021-11-09 Snap Inc. Context based media curation
US11016643B2 (en) 2019-04-15 2021-05-25 Apple Inc. Movement of user interface object with user-specified content
US11675476B2 (en) 2019-05-05 2023-06-13 Apple Inc. User interfaces for widgets
US11074408B2 (en) 2019-06-01 2021-07-27 Apple Inc. Mail application features
USD924916S1 (en) * 2020-02-12 2021-07-13 SpotLogic, Inc. Computer display panel with a meeting planning graphical user interface for an application that optimizes interpersonal interaction
USD932507S1 (en) * 2020-02-12 2021-10-05 SpotLogic, Inc. Computer display panel with a meeting objective editing graphical user interface for an application that optimizes interpersonal interaction
USD933692S1 (en) * 2020-02-12 2021-10-19 SpotLogic, Inc. Computer display panel with a meeting objective editing graphical user interface for an application that optimizes interpersonal interaction
USD923033S1 (en) 2020-02-12 2021-06-22 SpotLogic, Inc. Computer display panel with a home screen graphical user interface for an application that optimizes interpersonal interaction
USD925595S1 (en) 2020-02-12 2021-07-20 SpotLogic, Inc. Computer display panel with a graphical user interface for an application that optimizes interpersonal interaction

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5588107A (en) * 1993-03-22 1996-12-24 Island Graphics Corporation Method and apparatus for selectably expandable menus
JP2813728B2 (ja) * 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム/パン機能付パーソナル通信機
DE29503933U1 (de) * 1994-03-16 1995-12-07 Ericsson Telefon Ab L M Gleichförmige Mensch-Maschine-Schnittstelle für zellulare Mobiltelefone
US6075575A (en) * 1995-10-02 2000-06-13 Starsight Telecast, Inc. Remote control device and method for using television schedule information
FI955340A (fi) * 1995-11-07 1997-05-08 Nokia Mobile Phones Ltd Matkapuhelimen käyttäjäliityntä
US5774540A (en) * 1995-11-15 1998-06-30 Lucent Technologies Inc. Hierarchical menu screen interface for displaying and accessing telephone terminal features
DE19610637A1 (de) * 1996-03-11 1997-09-18 Mannesmann Ag Mittel zur menugeführten Navigation in einem komplexen Datenbestand
EP1107097A4 (en) * 1998-08-24 2007-10-17 Hitachi Ltd SYSTEM, DEVICE AND METHOD FOR DISPLAYING MULTIMEDIA INFORMATION PROCESSING
GB2347316A (en) * 1999-02-22 2000-08-30 Nokia Mobile Phones Ltd Display function for a handset
SE514282C2 (sv) * 1999-04-22 2001-02-05 Nokia Multimedia Terminals Oy Förfarande och anordning för rullbar krysspunktnavigering i ett användargränssnitt
JP4352518B2 (ja) * 1999-08-06 2009-10-28 ソニー株式会社 情報処理装置および方法、並びに記録媒体
US6690391B1 (en) * 2000-07-13 2004-02-10 Sony Corporation Modal display, smooth scroll graphic user interface and remote command device suitable for efficient navigation and selection of dynamic data/options presented within an audio/visual system
JP2002041205A (ja) * 2000-07-21 2002-02-08 Matsushita Electric Ind Co Ltd 携帯情報端末の情報表示方法
GB0019459D0 (en) * 2000-07-28 2000-09-27 Symbian Ltd Computing device with improved user interface for applications
EP1195673B1 (de) * 2000-10-04 2007-05-09 Siemens Aktiengesellschaft Kraftfahrzeug-Multimediasystem mit animierter Anzeigefunktion
JP2002140144A (ja) * 2000-10-31 2002-05-17 Sony Corp 情報処理装置、メニュー表示方法及びプログラム格納媒体
JP2002207562A (ja) * 2001-01-05 2002-07-26 Sony Corp 情報処理装置および方法、並びに記録媒体
US20030014445A1 (en) * 2001-07-13 2003-01-16 Dave Formanek Document reflowing technique
JP2003067101A (ja) * 2001-08-27 2003-03-07 Fujitsu Ltd メッセージ表示プログラムおよびメッセージ表示装置
JP4088749B2 (ja) * 2001-11-09 2008-05-21 ソニー株式会社 情報処理装置および情報処理方法、並びにプログラム
JP4313013B2 (ja) * 2002-09-18 2009-08-12 富士通株式会社 携帯端末装置、その情報処理方法及び、その情報処理プログラム
FR2849318B1 (fr) * 2002-12-24 2005-02-18 Radiotelephone Sfr Procede de navigation optimisee dans les menus d'affichage d'un terminal mobile et terminal mobile associe

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101346889B1 (ko) * 2006-11-17 2014-01-02 엘지전자 주식회사 조이스틱을 갖는 이동통신단말기 및 그 입력 처리방법

Also Published As

Publication number Publication date
EP1667013A3 (en) 2011-09-21
JP2006164260A (ja) 2006-06-22
EP1667013A2 (en) 2006-06-07
US20060123360A1 (en) 2006-06-08

Similar Documents

Publication Publication Date Title
KR20060092989A (ko) 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스
KR20060092988A (ko) 사용자 인터페이스를 구비하는 데이터 처리 장치 및 시스템
JP7028935B2 (ja) アプリケーションに対応するユーザインタフェースオブジェクトと対話するためのデバイス、方法、及びグラフィカルユーザインタフェース
JP7002506B2 (ja) フォルダを管理するためのデバイス、方法及びグラフィカル・ユーザインタフェース
AU2016225811B2 (en) Navigating among content items in a browser using an array mode
US20190391730A1 (en) Computer application launching
KR101733839B1 (ko) 사용자 인터페이스에서의 작업 공간 관리
AU2011253548B2 (en) Grouping and browsing open windows
KR101985291B1 (ko) 컴퓨팅 장치용 사용자 인터페이스
WO2012071352A2 (en) Browsing and interacting with open windows
AU2016203061B2 (en) Grouping and browsing open windows
AU2014203657B2 (en) Grouping and browsing open windows

Legal Events

Date Code Title Description
A201 Request for examination
E601 Decision to refuse application
N231 Notification of change of applicant