KR20060092989A - 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 - Google Patents
데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 Download PDFInfo
- Publication number
- KR20060092989A KR20060092989A KR1020050108665A KR20050108665A KR20060092989A KR 20060092989 A KR20060092989 A KR 20060092989A KR 1020050108665 A KR1020050108665 A KR 1020050108665A KR 20050108665 A KR20050108665 A KR 20050108665A KR 20060092989 A KR20060092989 A KR 20060092989A
- Authority
- KR
- South Korea
- Prior art keywords
- user interface
- main menu
- item
- menu
- items
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
- H04B1/40—Circuits
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Digital Computer Display Output (AREA)
- Telephone Function (AREA)
Abstract
데이터 처리 장치용 그래픽 사용자 인터페이스는 사용자에게 친근한 메뉴 시스템 및 네비게이션 능력을 제공한다. 메뉴 시스템은 각각 가시 영역을 갖는 제 1 다수의 주메뉴 항목을 디스플레이에 제공한다. 네비게이션 모듈은 사용자가 메뉴 시스템을 네비게이팅할 수 있게 한다. 표시 프로세스는 제 1 주메뉴 항목으로의 네비게이션에 응하여, 상기 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시하면서, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 제 1 주메뉴 항목에 관련된 제 1 다수의 부메뉴 항목을 표시한다.
Description
도 1은 본 발명의 예시적인 실시예에 따른 사용자 인터페이스를 포함하는 데이터 처리 장치의 개념상의 블록도이다.
도 2a 및 2b는 본 발명의 예시적인 실시예에 따른 예시적인 데이터 처리 장치의 입력 장치들의 평면도이다.
도 3은 본 발명의 일 예시적인 실시예에 따른 메뉴의 개념상의 블록도이다.
도 4 ~ 도 6은 본 발명의 다양한 양상에 따른 메뉴 조정, 메뉴 항목 선택, 메뉴 항목 강조 및 메뉴 항목 "표시" 기술의 실시예들을 설명한다.
도 7은 본 발명의 추가 양상에 따른 움직이는 줌 전환에 관한 실시예의 개략도이다.
도 8은 본 발명의 추가 양상에 따른 움직이는 줌 전환에 관한 추가 실시예의 개략도이다.
도 9 ~ 도 11은 본 발명의 예시적인 실시예에 따른 도 7 및 도 8의 줌 전환을 이용하는 디스플레이의 예들을 설명한다.
도 12는 본 발명의 추가 양상에 따른 추가 디스플레이 줌 기능의 실시예의 개략도이다.
도 13은 본 발명의 예시적인 실시예에 따른 메뉴 체계 및 데이터 내용을 통한 줌 메타포(Metaphor)의 일관된 사용을 설명한다.
도 14 및 도 15는 본 발명의 예시적인 실시예에 따른 "z-오더(z-order)" 강조 기술의 예들을 설명한다.
<도면의 주요부분에 대한 부호의 설명>
100 : 데이터 처리 장치 102 : 사용자 인터페이스
104 : 입력 장치 106 : 출력 장치
108 : 방향 컨트롤 110 : 선택 컨트롤
112 : 선택 해제 컨트롤 114 : 디스플레이
120 : 메뉴 시스템 122 : 네비게이션 모듈
124 : 메뉴 126 : 강조 표시 프로세스
128 : 표시 프로세스 130 : 방향 프로세스
132 : 선택 프로세스 134 : 선택 해제 프로세스
180 : 애플리케이션 182 : 기억 장치
본 발명은 데이터 처리 장치 및 이를 동작시키기 위한 사용자 인터페이스에 관한 것이다.
이동 전화 및 다른 소형 데이터 처리 장치들에 대한 사용자 인터페이스 설계 는 한정된 디스플레이 스크린 영역, 이러한 장치들에 제공될 수 있는 한정된 수의 컨트롤 및 신속하고 간단하며 직관적인 장치 동작의 필요성에 비추어 굉장한 난제를 제시한다. 이동 전화는 상당한 기능성(예를 들어, 연결 관리, 메시지 생성 및 전송, 전화 설정 개인화 및 알람 설정)을 제공한다. 이동 전화 사용자 인터페이스의 설계는 실질적으로 사용자가 자신의 이동 전화에 포함된 기능들과 정보를 얼마나 쉽게 네비게이팅할 수 있는지를 결정한다.
이동 전화 사용자 인터페이스들의 예로는 기본 5-방향 로커(rocker) 사용자 인터페이스, 미국 워싱턴 레드먼드의 마이크로소프트사(社)로부터 입수 가능한 WINDOWS SMARTPHONE 및 핀란드의 노키아사(社)로부터 입수 가능한 NOKIA SERIES 60이 있다. 이들 사용자 인터페이스는 원하는 기능을 찾아내는데 어려움을 갖는 사용자들로부터의 사용성이 제한된다. 또한, 사용자들이 버튼 기능에 대해 혼동한다. 이들 인터페이스의 버튼들의 기능은 버튼들을 누르는 상황에 따라 중요하게 변경된다.
또한, SMARTPHONE 및 NOKIA SERIES 60TM은 소프트 키의 사용에 크게 의존한다. 소프트 키는 일반적으로 디스플레이 바로 아래에 위치하는 문맥 감지형 다기능 컨트롤이다. 소프트 키들은 사용자들에게 추가 기능을 제공하지만, 이들은 공간이 중요한 디스플레이 상에 귀중한 스크린 영역을 차지한다.
이동 전화 사용자 인터페이스 설계에 있어서 한 가지 난제는 직관적이고, 익 히기 쉬우며, 일관적이고 예상하기 쉬운 방식으로 동작하고, 한정된 디스플레이 공간을 최상으로 활용하는 사용자 인터페이스를 제공하는 것이다. 사용자 인터페이스는 사용자가 이용할 수 있는 컨트롤이나 옵션이 너무 많아 혼란을 일으키지 않게 하면서 전화기 본래의 복잡성을 관리하기에 충분한 개수의 컨트롤을 제공할 필요가 있다. 따라서 본 발명의 양상들은 전화기 및 다른 소형 연산 장치 사용자들에게 보다 직관적이고 유용한 사용자 인터페이스를 제공하는 것을 목적으로 한다.
한 양상에 있어서, 본 발명은 디스플레이 및 방향 컨트롤을 갖는 데이터 처리 장치에 사용하기 위한 그래픽 사용자 인터페이스에 관련된다. 사용자 인터페이스는 제 1 다수의 주메뉴 항목을 포함하는 메뉴 시스템을 포함한다. 사용자 인터페이스는 각각의 주메뉴 항목에 데이터 처리 장치의 디스플레이 상의 가시 영역을 할당한다. 일 실시예에서, 사용자 인터페이스는 각 주메뉴 항목에 일반적으로 직사각형인 가시 영역을 하나씩 할당한다. 가시 영역은 주메뉴 항목에 대응하는 아이콘 및 텍스트 라벨을 포함할 수 있다.
사용자 인터페이스는 또한 사용자로부터의 입력을 수신하고 입력에 응하여 메뉴 시스템을 네비게이팅하는 네비게이션 모듈을 포함한다. 또한, 사용자 인터페이스는 사용자가 네비게이팅한 주메뉴 항목에 할당된 가시 영역 내에 제 1 다수의 부메뉴 항목을, 예를 들어 아이콘들로 이루어진 수평 행으로 표시하는 표시 프로세스를 갖는다. 주메뉴 항목이 네비게이팅될 때에도, 사용자 인터페이스는 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시한다. 일 실시예에서, 제 2 주메뉴 항목으로 네비게이팅하는 사용자에 응하여, 사용자 인터페이스는 이전에 네비게이팅 된 주메뉴 항목의 가시 영역에 표시되는 어떤 부메뉴 항목도 표시하지 않게 된다.
표시 프로세스에 의해 노출되는 부메뉴 항목들은 네비게이션 및/또는 기능 바로 가기를 포함할 수 있다. 네비게이션 바로 가기의 선택은 하부 데이터 처리 장치 기능의 실행에 대한 루트를 포함하여, 메뉴 시스템 내의 위치로의 가속 루트를 제공한다. 주메뉴 항목(360) 내에서 기능 바로 가기의 선택은 그 주메뉴 항목에 관련된 추가 기능들에 대한 액세스를 제공한다. 메뉴 항목들은 데이터 내용에 링크될 수도 있다. 메뉴 항목은 텍스트 및/또는 그래픽 아이콘으로 제시될 수 있다. 메뉴 항목들은 일 실시예에서는 선택 프로세스에 의해 해석되는 선택 컨트롤의 트리거를 통해 선택된다. 일 실시예에서, 메뉴 항목의 선택은 선택 해제 프로세스에 의해 해석되는 선택 해제 컨트롤의 트리거링에 의해 표시될 수 있다. 이로써, 선택 및 선택 해제 프로세스는 메뉴 시스템의 메뉴 레벨들 사이에 네비게이션을 제공한다.
사용자 인터페이스는 일 실시예에서 데이터 처리 장치가 동작하고 있는 상황에 기반하여 어떤 부메뉴 항목이 표시되는지를 결정할 수 있다. 예를 들어, 일 실시예에서 표시되는 부메뉴 항목들은 네트워크나 주변 장치들의 가용성에 의존한다.
일 실시예에서 사용자 인터페이스는 또한 메뉴 항목이 성공적으로 네비게이팅되었음을 사용자에게 지시하는 강조 표시 프로세스를 포함한다. 강조 표시는 사용자에 의해 네비게이팅된 메뉴 항목에 대응하는 가시 영역, 텍스트 또는 그래픽의 스케일링, 움직임 또는 z-오더의 변경을 포함할 수 있다. 일 실시예에서, 강조 표시되지 않은 메뉴 항목들은 디스플레이 상에서 그대로 정적이다. 그 결과, 강조 표시된 메뉴 항목들은 강조 표시되지 않은 메뉴 항목들을 오버랩할 수도 있다. 다른 실시예에서, 강조 표시된 메뉴 항목들은 적어도 하나의 강조 표시되지 않은 메뉴 항목 상에 모조 그림자를 투사할 수도 있다.
강조 표시된 메뉴 항목들은 데이터 처리 장치상의 선택 컨트롤을 사용함으로써 선택될 수 있다. 부메뉴 항목의 강조 표시에 의해 부메뉴 항목에 대응하는 추가 정보, 예를 들어 한정은 아닌 텍스트 라벨이나 관련 데이터 내용이 표시될 수 있다. 일 실시예에서, 강조 표시 프로세스는 메뉴 시스템의 대다수의 메뉴 항목들에 대해 일관된 강조 효과를 적용한다.
일 실시예에서, 사용자 인터페이스는 메뉴 항목들을 선택하는 사용자에 응하여 다수의 줌 효과를 적용한다. 줌은 줌인 및 줌아웃 모듈에 의해 제어될 수 있다. 이러한 모듈들은 선택 및 선택 해제 프로세스와 통합될 수 있다. 일 실시예에서, 적어도 하나의 줌 효과는 선택된 메뉴 항목에 중심을 둔다. 대안적으로, 줌은 디스플레이의 중앙에 중심을 둔다. 어떤 줌 효과에 있어서, 주메뉴 항목의 선택에 응하여 사용자 인터페이스는 선택의 스케일링 및 제 1 다수의 주메뉴 항목을 제 2 다수의 주메뉴 항목으로 부분적으로 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시한다. 다른 예에서, 메뉴 항목의 선택에 응하여, 사용자 인터페이스는 메뉴 항목을 데이터 내용으로 적어도 부분적으로 교체하는 움직이는 줌을 개시한다.
다른 줌 효과 예에 있어서, 선택 프로세스는 줌 전환 시퀀스의 마지막에, 선택된 제 1 다수의 메뉴 항목의 일부 위에 제 2 다수의 주메뉴 항목을 겹쳐 놓는다. 제 2 다수의 메뉴 항목이 겹쳐지는 상기 선택된 제 1 다수의 메뉴 항목의 일부는 상기 선택된 메뉴 항목의 스케일링된 버전일 수도 있다.
사용자 인터페이스는 또한 역행 줌 전환 시퀀스를 개시하는 선택 해제 프로세스를 포함한다. 역행 줌 전환 시퀀스는 실질적으로 이전 움직이는 줌 전환 시퀀스의 역행을 포함할 수도 있다.
첨부 도면을 참조하여, 본 발명의 실시예들을 단지 예시 목적으로 설명한다.
데이터 처리 장치의 사용자는 일반적으로 디스플레이 스크린 또는 스피커에 의해 가청음이나 영상 표시와 같은 감각 출력을 수신함으로써 하드웨어 입력 장치들을 통해 데이터 처리 장치와 상호 작용한다. 데이터 처리 장치 내부에서 상호 작용은 입력 장치로부터 수신된 입력을 해석하고 응답으로 출력을 생성하는 사용자 인터페이스에 의해 제어된다.
데이터 처리 장치
도 1은 본 발명의 일 실시예에 따른 사용자 인터페이스(102)를 포함하는 데이터 처리 장치(100)의 개념상의 블록도이다. 이 예시적인 실시예에서, 데이터 처리 장치(100)는 이동 전화이다. 데이터 처리 장치(100)는 입력 장치(104) 및 출력 장치(106)를 포함한다. 입력 장치(104)는 사용자로부터 입력을 수신하여 처리를 위해 이를 사용자 인터페이스(102)에 전달한다. 출력 장치(106)는 사용자 인터페이스(102)로부터의 출력을 수신하고 이를 사용자에게 제시한다.
다른 실시예에서, 데이터 처리 장치(100)는 예를 들어 전화기, 무선 전화기, 개인 휴대 단말, 팜탑 컴퓨터(palmtop computer), 디지털 스틸 또는 비디오 카메라, 미디어 플레이어, 텔레비전, 위성 텔레비전 단말, 케이블 텔레비전 단말, 차내 정보 시스템, 차내 엔터테인먼트 시스템, 프린터, 스캐너, 팩시밀리 및 데이터 저장 장치일 수 있으며, 이에 한정하는 것은 아니다. 여기서 이동 전화 데이터 처리 장치(100)에 관해 설명한 특징들 및 이점들은 상술한 어떤 장치에도 구현될 수 있다.
입력 장치(104)는 사용자가 데이터 처리 장치(100)에 입력을 제공할 수 이게 한다. 입력 장치(104)는 출력 장치(106)에서 볼 수 있는 항목들간 네비게이팅을 위한 방향 컨트롤(108)을 포함한다. 방향 컨트롤(108)은 상, 하, 좌, 우를 네비게이팅하기 위한 4개의 액추에이터를 포함한다. 입력 장치(104)는 또한 출력 장치(106) 상에 보이는 항목들을 선택하기 위한 선택 컨트롤(110)을 포함한다. 또한, 입력 장치(104)는 이전에 선택된 항목들을 선택 해제하기 위한 선택 해제 컨트롤(112)을 포함한다.
출력 장치(106)는 디스플레이(114)이다. 디스플레이(114)는 컬러 출력을 제공하는 액정 디스플레이이다. 다른 출력 장치들(106)은 그레이스케일 및 흑백 플라즈마 디스플레이, 음극선관, 투사 스크린 및 다른 적당한 동적 영상 장치들을 포함한다.
도 2a는 본 발명의 예시적인 실시예에 따른 이동 전화 데이터 처리 장치(200)의 예시적인 실시예의 평면도이다. 데이터 처리 장치(200)는 출력 장치(106)로서 디스플레이(214)를 포함한다. 디스플레이(214)는 컬러 액정 디스플레이이다. 입력 장치(104)에 관해, 데이터 처리장치(200)는 5-방향 로커 스위치(203)를 포함한다. 5-방향 로커 스위치(203)의 주변 액추에이터(209a-209d)가 방향 컨트롤(108) 기능을 한다. 5-방향 로크 스위치(203)의 중앙 액추에이터(210)는 선택 컨트롤(110) 기능을 한다. 추가 액추에이터(212)는 선택 해제 컨트롤(112) 기능을 한다. 선택 컨트롤(110)과 선택 해제 컨트롤(112)과의 관계는 시각적 표현으로 지시된다. 시각적 표현(207)은 컨트롤들(110, 112)을 연결하는 그래픽 모양이다. 다른 실시예들에서 시각적 표현(207)은 데이터 처리 장치(200)에 대한 지형도와 같은 물리적 모양이다.
도 2b는 본 발명의 다른 예시적인 실시예에 따른 데이터 처리 장치(200')에 대한 다른 입력 장치(104) 구성의 평면도이다. 데이터 처리 장치(200')에서 입력 장치(104)는 방향 컨트롤(108) 기능을 하는 4개의 액추에이터(209a'-209d')를 포함한다. 각각의 액추에이터(209a'-209d')는 상, 하, 좌, 우 방향에 대응한다. 데이터 처리 장치(200')는 4개의 액추에이터(209a'-209d')에 의해 형성된 일반적으로 원형인 영역 내에 위치하는 선택 컨트롤(210') 및 선택 해제 컨트롤(212')을 포함한다.
도 2c는 데이터 처리 장치(200")에 대한 또 다른 입력 장치(104) 구성의 평면도이다. 데이터 처리 장치(200')와 비슷하게, 데이터 처리 장치(200")에서 입력 장치(104)는 방향 컨트롤(108) 기능을 하는 4개의 액추에이터(209a"-209d")를 포함한다. 각각의 액추에이터(209a"-209d")는 상, 하, 좌, 우 방향에 대응한다. 데이터 처리 장치(200")는 4개의 액추에이터(209a"-209d")에 의해 형성된 일반적으로 타원형인 영역 내에 위치하는 선택 컨트롤(210") 및 선택 해제 컨트롤(212")을 포함한다.
데이터 처리 장치(200)의 컨트롤들은 상술한 스위치, 키 또는 버튼 이외의 다른 수단으로 제공될 수도 있다. 다른 종류의 방향 컨트롤(108)(예를 들어, 마우스, 터치패드, 터치스크린/스타일러스, 4-방향 로커 스위치 등)을 이용하여 동등한 기능이 제공될 수 있다. 터치스크린 구현에서는 선택 및 선택 해제 컨트롤(110, 112)이 스크린 버튼 상에 가상으로 제공되거나, PCT 특허 공보 WO01/79980호에 개시된 바와 같이, 제스처 기반 명령들, 예를 들어 인터페이스 명령들에 매핑된 기호 스타일러스 제스처로 제공된다.
사용자 인터페이스
다시 도 1을 참조하면, 데이터 처리 장치(100)는 사용자 인터페이스(102)를 포함한다. 사용자 인터페이스는 사용자로부터 입력을 수신하여 처리하고, 처리된 입력에 기반한 출력을 표시한다. 사용자 인터페이스는 메뉴 시스템(120) 및 네비게이션 모듈(122)을 포함한다. 요컨대, 메뉴 시스템(120)은 출력 장치에 표시되는 출력을 부분적으로 결정하고, 네비게이션 모듈(122)은 입력 장치(104)를 이용하여 이러한 출력을 제어하는 능력을 사용자에게 제공한다. 메뉴 시스템(120) 및 네비게이션 모듈(122)은 범용 또는 전용 프로세서에서 동작하는 소프트웨어 모듈로서 구현된다. 다른 실시예들에서 메뉴 시스템(120), 네비게이션 모듈(122) 또는 이들의 일부는 디지털 신호 처리기, 주문형 집적 회로, 프로그래밍 가능 로직 어레이 또는 다른 적당한 하드웨어 포맷 등의 집적 회로에 구현된다.
메뉴 시스템
보다 구체적으로, 메뉴 시스템(120)은 메뉴(124), 강조 표시 프로세스(126) 및 표시 프로세스(128)를 포함한다. 도 3은 본 발명의 예시적인 실시예에 따른 메뉴 시스템(120)에 포함된 메뉴(324)의 개념상의 블록도이다. 메뉴(324)는 다수의 주메뉴 항목(360a-360h)(집합적으로 주메뉴 항목(360)) 및 다수의 부메뉴 항목(362a-362m)(집합적으로 부메뉴 항목(362))을 포함한다. 메뉴(124)는 메뉴 레벨(364a-364d)(집합적으로 메뉴 레벨(364))에 메뉴 항목(360, 362)을 구성한다. 메뉴 항목(360, 362)은 일반적으로 다른 메뉴 레벨(364), 실행 가능한 프로그램이나 애플리케이션, 또는 텍스트, 이미지, 오디오, 비디오 및 멀티미디어 데이터를 포함하는 데이터에 대한 진입점을 제공한다. 메뉴는 아이콘 및 텍스트 라벨과 같은 그래픽 및/또는 텍스트 데이터를 메뉴 항목(360, 362)에 관련시켜 대응하는 메뉴 항목(360, 362)을 시각적으로 표시한다.
메뉴 레벨(364)은 일반적으로 계층적이며, 예를 들어 트리 및 가지 구조를 갖는다. 그러나 체계가 엄격할 필요는 없다. 메뉴(324)의 메뉴 레벨들(364)은 중첩할 수도 있고 개별 메뉴 항목(360, 362)이 다수의 메뉴 레벨(364)에 위치할 수 있다. 일부 메뉴 항목(360, 362)은 다수의 경로에 의해 메뉴(324)에 액세스할 수 있다("경로"는 소정의 메뉴 항목(360 또는 362)에 이르기 위해 사용자가 선택한 일련의 메뉴 항목(360, 362)을 나타냄). 메뉴 레벨(364)의 내용(즉, 메뉴 항목(360, 362)이 액세스할 수 있는)은 (다른 실시예에서 그럴 필요는 없지만) 문맥 감지형이다. 예를 들어, 메뉴(324)는 주변 장치의 부착을 검출한 데이터 처리 장치(100)에 응하여 추가 메뉴 항목(360, 362) 및/또는 메뉴 레벨(364)에 액세스할 수 있게 한다. 마찬가지로, 메뉴(324)는 데이터 처리 장치(100)의 이용 상황에 따라 메뉴 항목(360 또는 362) 또는 메뉴 레벨(364)을 불능케 한다. 예를 들어, 메뉴(324)는 열악한 접속 환경이나 데이터 처리 장치(100)의 전력이 낮을 때 통신 기능을 불가능하게 한다.
메뉴 레벨(364)은 하나 이상의 주메뉴 항목(360)을 포함한다. 예를 들어, 메뉴(324)의 상위 메뉴 레벨(364a)은 각각 "연결" 및 "메시지"라는 명칭의 주메뉴 항목(360a, 360b)을 포함한다. 제 1 메뉴 레벨(364) 상에서 주메뉴(360)의 선택은 다른 메뉴 레벨(364)로 이끈다. 예를 들어, 연결 주메뉴 항목(360a)의 선택은 제 2 연결 메뉴 레벨(364b)로 이끈다.
주메뉴 항목(360)은 하나 이상의 부메뉴 항목(362)에 관련된다. 예를 들어, "메시지"라는 명칭의 주메뉴 항목(360b)은 각각 "새로운 메시지" 및 "메뉴"라는 명칭의 부메뉴 항목(362d, 362e)에 관련된다. 부메뉴 항목(362)은 네비게이션 및/또는 기능 바로 가기를 제공한다.
네비게이션 바로 가기는 메뉴(324) 내의 다른 메뉴 레벨(364) 및/또는 메뉴 항목(360, 362)에 링크된다. 네비게이션 바로 가기는 부메뉴 항목(362)이 관련되는 주메뉴 항목(360)을 포함하는 메뉴(320) 체계의 가지 내에 있는 메뉴 레벨(364) 및 메뉴 항목(360, 362)에 링크된다. 네비게이션 바로 가기는 메뉴(320) 체계의 다른 가지들의 메뉴 레벨(364) 또는 메뉴 항목(360, 362)에 링크될 수도 있다. 이와 같이 네비게이션 바로 가기는 더욱 장황한 메뉴(324) 통과를 피하는 가속 경로 를 제공한다. 바로 가기 대상이 메뉴 트리 및 가지 구조의 리프(leaf)에 있으면, 네비게이션 바로 가기는 데이터 처리 장치(100)의 기능 실행을 시작한다. 예를 들어, "새로운 메시지"라는 명칭으로 "메시지" 주메뉴 항목(360b) 내에 위치하는 부메뉴 항목(362d)의 선택은 새로운 메시지의 생성 기능을 시작한다. 이는 메뉴 레벨(364a)로부터 메시지 메뉴 레벨(364d) 및 그 이상을 통과하는 다른 네비게이션과 대비하여 사용자에게 편리한 바로 가기를 제공한다.
기능 바로 가기는 기능 바로 가기가 활성화되는 주메뉴 항목(360)에 관련된다. 기능 바로 가기의 사용은 단일 메뉴 항목(360) 내에서 사용자가 다수의 기능에 액세스할 수 있게 함으로써, 소프트 키나 옵션 버튼을 사용할 필요성을 피한다. 기능 바로 가기의 예로는 "메뉴"라는 명칭으로 "메시지" 주메뉴 항목(360b)에 관련된 부메뉴 항목(362e)이 있다. 이는 "메시지" 메뉴 항목(360b)의 동작에 관련된 "새로운 메시지" 및 "폴더 보기"와 같이 보강된 사용자 옵션 세트에 대한 액세스를 제공하는 "메시지 메뉴" 메뉴 레벨(364c)에 링크된다. 바로 가기와 주메뉴 항목들과의 관련은 메뉴(320) 설계자 또는 저작자에 의해 미리 정해진다. 또한, 혹은 대안으로, 사용자는 메뉴(120)의 개별화된 사용을 반영하도록 상기 관련을 개인화할 수 있다.
도 4a-4d는 디스플레이(414) 상에 메뉴 시스템(120)의 출력을 표시하는 데이터 처리 장치(400)의 평면도이다. 도 4a의 예시적인 출력은 각각 "연결", "메시지", "달력", "카메라", "파일 브라우저" 및 "설정"이라는 명칭의 6개의 주메뉴 항목(460a-460f)을 포함한다. 메뉴 시스템(120)은 각 주메뉴 항목(46a-460f)에 주메 뉴 항목이 표시되는 해당 가시 영역(465a-465f)을 할당한다. 가시 영역(465)은 예를 들어 주메뉴 항목(460)들을 구별하는 직사각형 또는 다른 기하학적 형상으로 배열된 화소들의 집합이다.
도 4a에서 각 주메뉴 항목(460a-460f)에는 일반적으로 직사각형 가시 영역(465)이 수직 열로 차례로 할당된다. 각 가시 영역(465a-465f)은 관련 주메뉴 항목(460a-460f)에 대응하는 아이콘 및 텍스트 라벨을 포함한다. 또한, "연결"이라는 명칭의 (도 3의 주메뉴 항목(360a)에 대응하는) 가시 영역(465a)은 다른 가시 영역들(465b-465e)보다 크다. 가시 영역(465a)은 또한 3개의 부메뉴 항목(462a-462c)을 포함한다.
강조 표시 프로세스
주메뉴 항목(460a)의 더 큰 가시 영역(465a)은 주메뉴 항목(460a)이 활성화된 것을 나타낸다. 선택 컨트롤(110)의 트리거 효과는 뒤에 보다 상세히 설명하는 바와 같이, 어떤 메뉴 항목(460, 462)이 활성화되는지에 좌우된다. 더 큰 가시 영역(465a)은 소정 시간에 어떤 메뉴 항목 또는 항목들(460, 462)이 활성화되는지를 사용자에게 보여주기 위해 강조 표시 프로세스(126)에 의해 발생하는 다수의 시각적 신호 중 하나이다. 강조 표시 프로세스에 의해 발생하는 다른 시각적 신호들은 이에 한정하는 것은 아니지만 가시 영역(465)의 색상 변화, 주메뉴 항목(460)에 대응하는 아이콘이 움직임, 다른 비활성 메뉴 항목들의 가시 영역(465)에 대한 가시 영역(465)의 z-오더 변화를 포함한다. 활성 메뉴 항목(460, 462)을 더 강조 표시하기 위해 가시 영역(465) 뒤에 그림자를 붙이거나(z-오더를 이용함으로써 이 그림 자는 3-D 형상으로 나타날 수 있다) 투명을 이용하여 아래쪽 내용이 위층의 내용을 통과해 부분적으로 보일 수 있게 하는 등 다른 시각적 신호들이 사용될 수도 있다.
도 4b는 본 발명의 일 실시예에 따른 예시적인 데이터 처리 장치(400')의 제 2 평면도이다. 이 제 2 평면도에서는, "메시지"라는 명칭의 제 2 주메뉴 항목(460b')이 활성화되어 강조 표시 프로세스(126)에 의해 강조 표시된다. 도 4a에서 주메뉴 항목(460a)의 가시 영역(465a)과 같이, 주메뉴 항목(460b')의 가시 영역(465b')은 나머지 가시 영역(465a', 465c'-465f')보다 크다. 가시 영역(465b')의 스케일링은 도 4a에서 비활성화되어 스케일링되지 않고 강조 표시되지 않은 가시 영역(465b)과 비교하여 상당히 두드러진다.
도 4c는 부메뉴 항목(462)이 활성화될 때 강조 표시 프로세스(126)에 의해 부메뉴 항목(462) 또한 강조 표시되는 것을 설명한다. 도 4c에서는 "메시지' 주메뉴 항목(460b")과 "새로운 메시지" 부메뉴 항목(462d') 모두 활성화된다. 부메뉴 항목(462d')의 활성 상태는 부메뉴 항목(462d')을 둘러싸는 주메뉴 항목(460b") 가시 영역(465b") 일부의 색상을 변경하는 강조 표시 프로세스(126)에 의해 사용자에게 표시된다. 주메뉴 항목(460)의 강조 표시에 대해, 강조 표시 프로세스(126)는 부메뉴 항목(462)의 스케일링, 움직임, z-오더의 변경 등을 하여 부메뉴 항목(462)의 활성 상태를 나타낼 수 있다.
일 실시예에서 데이터 처리 장치(100)는 메뉴 시스템(120)의 모든 메뉴 레벨(364)은 아니지만 대부분의 메뉴 레벨 사이의 이동 및 강조 표시에 비슷한 시각적 신호들을 이용한다. 일관성은 사용을 더 용이하게 하고 사용자 인터페이스의 동작 이 사용자에게 더욱 직관적이게 할 수 있다. 그러나 다른 시각적 신호들이 본 발명의 범위를 벗어나지 않으면서 다양한 메뉴 항목(360, 362)과 다양한 메뉴 레벨(364)에 이용될 수도 있다.
표시 프로세스
일반적으로, 표시 프로세스는 활성 메뉴 항목들에 관련된 추가 정보를 표시한다. 예를 들어, 도 4a에서 데이터 처리 장치(400)는 주메뉴 항목(460a)이 활성화되므로 부메뉴 항목(462a-462c)을 표시한다. 이에 반해, 데이터 처리 장치(400')는 주메뉴 항목(460b')이 활성화되므로 부메뉴 항목(462d-462e)을 표시한다. 표시 기술을 이용하면, 활성 주메뉴 항목(460)에 대한 스크린상에 적어도 4개의 부메뉴 항목(462)을 갖는 것이 적당하다. 그러나 부메뉴 항목(462)은 표시 프로세스(128)가 활성 메뉴 항목에 관련하여 표시될 수 있는 단지 한 종류의 추가 정보이다.
도 4d는 예를 들어 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(400")의 제 4 평면도를 나타내며, 표시 프로세스(128)가 활성 메뉴 항목들에 관련하여 표시하는 데이터의 다른 형태들을 설명한다. 데이터 처리 장치(400"')는 데이터 처리 장치(400"') 상에 저장되는 개별 메시지에 대응하는 6개의 주메뉴 항목(460a"'-460f"')을 표시한다. 제 1 주메뉴 항목(460a"')이 활성화된다. 주메뉴 항목(460a"')에 대응하는 가시 영역(465a"')은 가시 영역(465a, 465b')이 관련 부메뉴 항목(462a-462c, 462d, 462e)을 포함하는 것과 비슷한 방식으로 3개의 부메뉴 항목(462g-462i)을 포함한다. 가시 영역(465a"')은 은 또한 주메뉴 항목(460a"') 에 대응하는 메시지의 초록(466)을 포함한다. 주메뉴 항목(460b"'-460f"')에 대응하는 가시 영역(465b"'-465f"')은 관련 메시지의 초록(466)을 포함하지 않는다.
또한, 부메뉴 항목(462)의 활성화에 응하여, 표시 프로세스(128)는 그 부메뉴 항목(462)에 관련된 추가 정보를 표시한다. 예를 들어, 도 4c에서는 부메뉴 항목(462d')이 활성화 및 강조 표시된다. 부메뉴 항목(462d')을 나타내는 아이콘 아래에는 표시 프로세스(128)에 의해 텍스트 라벨 "새로운 메시지"가 표시되어 사용자에게 부메뉴 항목(462d')의 기능을 알린다. 부메뉴 항목(462)이 활성화되지 않는 한 표시되지 않는 부메뉴 항목(462)에 관련된 정보의 표시는 "이중 표시" 프로세스라 한다.
표시 및 이중 표시 프로세스가 결합하여 초심자와 숙련자 모두에게 사용 편의를 제공한다. 각 동작의 텍스트 설명이 디스플레이(414)에 매핑되어 사용자에게 어떤 활성 메뉴 항목을 선택하기 전에 메뉴 항목의 기능을 알려줄 수 있다. 이와 관련하여, 기술은 소프트 키 매핑과 비슷한 속성을 제공하지만, 추가 물리적 키의 필요성 및 관련 스크린 공간의 낭비는 없다. 특히, 항목이 활성화될 때 필요에 따라 기능이 노출되고, 요구에 따라 기능들의 텍스트 설명이 노출된다. 이에 반해, 소프트 키 방법에서는 키 매핑이 영구적인 디스플레이 위치에 고정된다.
표시 기술에 의해 제공되는 더욱 넓은 범위의 바로 가기는 상당한 유용성 이익을 가질 수 있다. 특히, 많은 사용자는 데이터 처리 장치(100)의 이용 가능한 기능의 작은 서브셋만을 규칙적으로 사용할 것이다. 규칙적으로 사용되는 기능들을 메뉴 시스템(120)의 다양한 레벨에 신중히 배치하는 것은 계층적 메뉴 레벨의 상하 네비게이션의 양을 극적으로 감소시킬 수 있고, 특정 용도로 공통 사용되는 전체 기능을 하나 또는 소수의 주메뉴 항목(360 또는 460)에 대응하는 가까운 영역으로 묶을 수 있다.
네비게이션 모듈
다시 도 1을 참조하면, 네비게이션 모듈(122)은 사용자에게 메뉴 시스템(120)과 상호 작용하는 능력을 제공한다. 네비게이션 모듈(122)은 각각 방향 컨트롤(108), 선택 컨트롤(110) 및 선택 해제 컨트롤(112)에 응답하는 방향 프로세스(130), 선택 프로세스(132) 및 선택 해제 프로세스(134)를 포함한다. 일반적으로, 방향 프로세스(130)는 활성화되는 주메뉴 항목(360) 및/또는 부메뉴 항목(362)을 교환한다. 선택 프로세스(130) 및 선택 해제 프로세스(132)는 활성 메뉴 레벨을 변경하고, 선택 프로세스(130)는 또한 데이터 처리 장치(100)의 기능들의 시작을 제어한다.
방향 네비게이션
상술한 도 4a-4d는 네비게이션 모듈(122)에 의해 해석되는 것과 같은 사용자에 의해 입력된 다수의 네비게이션 명령을 나타낸다. 상술한 바와 같이, 방향 프로세스는 활성화되는 메뉴 항목 또는 항목들(360, 362, 460, 462)을 교환한다. 도 4a의 데이터 처리 장치(400)는 방향 컨트롤(408)을 포함한다. 방향 컨트롤(408)은 각각 상, 하, 좌, 우에 해당하는 4개의 액추에이터(409a, 409b, 409c, 409d)를 포함한다. 방향 프로세스(130)는 상향 액추에이터(409a) 또는 하향 액추에이터(409b)의 트리거를 활성 주메뉴 항목(460)을 변경하라는 지시로 해석한다. 예를 들어, 도 4a에서 사용자가 하향 액추에이터(409b)를 트리거 했다면, 방향 프로세스(130)는 메뉴 시스템(120)에 주메뉴 항목(460a)을 비활성화하고 주메뉴 항목(460b)을 활성화하라고 지시하게 되어, 도 4b의 디스플레이가 된다. 마찬가지로, 도 4b에서 사용자가 상향 액추에이터(409a)를 트리거 했다면, 방향 프로세스(130)는 메뉴 시스템에 주메뉴 항목(460b')을 비활성화하고 주메뉴 항목(460a')을 활성화하라고 지시하여, 도 4a의 디스플레이가 된다.
좌측 및 우측 액추에이터(409c, 409d)는 부메뉴 항목(362, 462)의 활성화 및 비활성화를 제어한다. 예를 들어, 도 4b에서 주메뉴 항목(460b')이 강조 표시되어 2개의 부메뉴 항목(462d, 462e)을 표시한다. 이 상태에서 사용자가 방향 컨트롤(408)의 우측 액추에이터(409d)를 트리거 했다면, 방향 프로세스(130)는 도 4c에 나타낸 바와 같이 메뉴 시스템(120)에 부메뉴 항목(462d)을 활성화하라고 지시하게 된다. 사용자가 다시 우측 액추에이터(409d)를 트리거 했다면, 도 4c에 표시된 제 2 부메뉴 항목(462e')이 활성화되어 강조 표시되고, 그 부메뉴 항목(462e')에 관련된 추가 정보가 표시된다. 대신, 사용자가 좌측 액추에이터(409c)를 눌렀다면, 부메뉴 항목(462d')이 비활성화되고 데이터 처리 장치(400")는 도 4b에 나타낸 상태로 돌아가게 된다.
선택 및 선택 해제
활성화된 부메뉴 항목(462, 362)이 없으면, 선택 프로세스(132) 및 선택 해제 프로세스(134)가 메뉴 시스템(120)의 메뉴 레벨들(364) 사이의 네비게이션을 가능하게 하는 기능을 한다. 선택 컨트롤(110)을 트리거하는 사용자에 응답하여, 선 택 프로세스("선택"이라 함)는 메뉴 레벨(364)을 하향 조정하고 선택 해제 프로세스(134)가 메뉴 레벨(364)을 뒤로 조정한다.
예를 들어, 도 4b 및 도 4c를 참조하면, 도 4b에서는 "메시지" 주메뉴 항목(460b')이 활성화된다. 데이터 처리 장치(400')가 이 상태에 있는 동안 사용자가 선택 컨트롤(410)을 트리거 했다면, 선택 프로세스(132)는 메뉴(124)의 "메시지" 메뉴 가지에 있는 메뉴 레벨(364)을 하향 조정할 것을 메뉴 시스템(120)에 지시한다. 이 네비게이션에 의해 도 4d의 디스플레이(414"')가 표시된다. 메뉴(124)의 "메시지" 메뉴 가지의 부메뉴 레벨(364)은 개별 메시지에 대응하는 주메뉴 항목(460a"-460f")을 포함한다. 데이터 처리 장치(400"')가 도 4d에 표시된 상태에 있을 때 사용자가 선택 해제 컨트롤(412)을 트리거 했다면, 선택 해제 프로세스가 메뉴 시스템(120)에 한 메뉴 레벨(364) 뒤로 갈 것을 지시하여, 도 4b의 데이터 처리 장치(400') 출력이 된다.
선택 및 선택 해제 프로세스(132, 134)는 또한 부메뉴 항목(362, 462)의 선택 및 선택 해제에 대한 데이터 처리 장치(100')의 응답을 제어한다. 부메뉴 항목(362 또는 462)의 선택에 대한 응답은 부메뉴 항목이 기능 바로 가기인지 네비게이션 바로 가기인지에 좌우된다.
도 5a-5e는 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(500)의 디스플레이(514)의 평면도이다. 디스플레이(514)는 부메뉴 항목(562)에 대한 네비게이션 및 부메뉴 항목(562)의 선택을 설명한다. 도 5a에 나타낸(예를 들어, 데이터 처리 장치(500) 전원이 켜질 때 표시되는) 시작 화면으로부터 선택 컨트롤(110)을 누르면 처음에 "연결"이라는 명칭으로 강조 표시되어 추가 정보를 표시하는 상위 주메뉴 항목(560a)을 갖는 제 1 메뉴 레벨(564a)(도 5b)이 표시된다. 다시 선택 컨트롤(110)을 누르면 메뉴(124)의 "연결" 가지의 다음 메뉴 레벨(364)로 조종된다. 제 2 메뉴 레벨(564b)에는 개별 연결 목록이 있다. 처음에 연결 목록 메뉴 레벨을 표시할 때, 연결 목록의 처음 연결 상대에 해당하는 상위 주메뉴 항목(560a')이 활성화되어 강조 표시된다(도 5c). 강조 표시된 주메뉴 항목(560a')은 각각 연결 상대의 이동 전화번호 및 집 전화번호, 연결 상대의 이메일 주소 및 메뉴 링크에 대응하는 4개의 부메뉴 항목(562a-562d)을 포함한다.
어떤 부메뉴 항목(562a-562d)도 활성화되지 않는 동안 방향 컨트롤(508)의 우측 액추에이터(509d)를 누르면, 도 5d에 나타낸 바와 같이 연결 상대의 이동 전화번호에 대응하는 제 1 부메뉴 항목(562a)이 활성화된다. 이 상태에서, 즉 이동 전화 부메뉴 항목(562a")이 활성화되는 동안 다시 선택 컨트롤(110)을 누르면, 도 5e의 디스플레이(514)에 나타낸 바와 같이, 이 연결 상대의 이동 전화번호로 전화 호출이 활성화된다. 도 5d의 화면으로부터 선택 해제 컨트롤(110)을 반복적으로 누르면, 메뉴 경로를 통해 도 5a의 시작 화면으로 뒤로 이동한다.
도 6a-6c는 기능 바로 가기 부메뉴 항목(662)의 선택을 설명하는 데이터 처리 장치(600)의 평면도이다. 데이터 처리 장치(600)의 디스플레이(614)는 "메시지" 주메뉴 항목(660b)의 "메뉴" 부메뉴 항목 아이콘(662b)이 활성화되어 강조 표시되는 것을 나타낸다. 이러한 시나리오에서 사용자가 선택 컨트롤(610)을 누르는 것에 응답하여, 선택 프로세스(132)는 메뉴 시스템에 부메뉴 항목(662b)의 활성화 를 지시한다. 부메뉴 항목(662b)은 기능 바로 가기에 대응하기 때문에, 메뉴 시스템은 부메뉴 항목(662b)이 링크되는 메뉴 레벨(364), 즉 도 6b에 나타낸 메뉴 레벨(664b)을 표시한다. 이 메뉴 레벨(664b)은 선택된 메뉴 아이콘(662b)을 포함하는 이전 디스플레이(614)의 메시지 가시 영역(665b)의 확대 또는 줌 확대된 영역 표시 위에 겹쳐 표시된다. 도 6b의 메뉴 레벨은 또한 방향 컨트롤(608)의 상향 및 하향 액추에이터(609a, 609b) 및 선택 컨트롤(610)을 사용하여 활성화 및 선택될 수 있는 수평 가시 영역들(665a'-665c')의 열을 포함한다. 선택 해제 컨트롤(612)을 누르면, 디스플레이(614)가 도 6c에 나타낸 것과 같이 이전 레벨로 돌아가며, 도 6c는 도 6a와 동일하다.
일 특징에 따르면, 네비게이션 모듈(122) 및 메뉴 시스템(120)의 조합된 프로세스는 사용자 인터페이스의 3가지 기본 동작: 기능 체계의 상위 및 하위 레벨의 네비게이팅; 추가 옵션들을 제시함으로써 레벨 내의 포인트들의 기능 보강; 및 기능 체계의 한 특정 포인트에서 다른 특정 포인트로 이동하는 가속 경로의 선택적인 제공(네비게이션 바로 가기)을 처리하기 위해 종래의 설계에서 이용할 수 없는 응집성을 제공한다.
제 2 상황의 예로서, 사용자가 수신한 모든 텍스트 메시지의 목록을 보기 위해 계층을 내려가면, 특정 메시지의 선택(예를 들어, 한 레벨 이상 하향 네비게이팅)이 그 메시지를 표시하게 된다. 그러나 사용자가 메시지를 선택하고자(보고자) 하는 것이 아니라 삭제 또는 저장하고자 하거나 또는 발신자 상세를 얻고자 할 수도 있다. 이 시나리오는 계층 레벨들의 엄격한 상승/하강에 의해 제공되는 것보다 많은 행동을 필요로 한다. 제 3 상황의 예는 상위 레벨 메뉴로 돌아가기 위해 낮은 메뉴 레벨에 제공되는 "홈(Home)" 옵션이다.
예시적인 실시예에 따르면, 본 발명은 보다 간단하고, 보다 일관되며, 보다 예상하기 쉬워 기존 설계들보다 직관적인 해법의 3가지 사용자 인터페이스 동작을 결합한다. 이는 예를 들어 메뉴 시스템의 어떤 포인트에서도 모든 가능한 사용자 동작이 4개의 방향 버튼을 이용하여 스크린상에서 "지역 선택(geographic)" 네비게이션에 의해서만 상, 하 또는 교차 액세스 가능하기 때문이다. 이는 종래의 설계와 대조적으로, 사용자는 간단한 방향 컨트롤을 벗어나, 예를 들어 보강된 기능을 제공하는 소프트 키를 선택하거나 전용 "옵션" 버튼을 눌려야 한다. 본 발명의 일 구성에 있어서, 방향 컨트롤만을 사용하는 지역 선택 네비게이션은 모든 옵션에 대한 액세스를 제공하는데, 보강된 기능들 및 네비게이션 바로 가기가 4-방향 액추에이터의 네비게이션 구간 내에 부메뉴 항목(362)으로서 표시될 수 있기 때문이다.
사용중에, 사용자 인터페이스(102)의 네비게이션은 4개의 방향 컨트롤을 이용하여 스크린의 2-D 평면에 완전히 배치된 옵션들의 그리드를 가로지르는 것과 비교된다. 선택/선택 해제 컨트롤(110, 112)은 이 개념적 "평면"에 수직인 방향으로 네비게이팅하여 하나의 선택 그리드를 계층에서 다음으로 높은 또는 낮은 평면으로 교체하는 것으로 간주할 수 있다. 따라서 사용자 인터페이스(102)의 네비게이션은 전반적으로 일관되며 예상 가능한 방식으로 사용되는 6개의 액추에이터 - 4개 방향과 선택 및 선택 해제 -의 범위 내에 완전히 포함될 수 있다. 종래의 설계는 사용자가 메뉴에서 예상할 수 없는 임의의 포인트에서 한 네비게이션 모드로부터 다른 모드(예를 들어, 소프트 키 활성화)로 바꿀 필요가 있어, 인터페이스를 복잡하게 하고 사용자가 익히고 사용하는 것을 어렵게 하기 때문에 이러한 레벨의 응집성 및 일관성을 달성하지 못한다.
가시 효과
데이터 처리 장치(100) 및 사용자 인터페이스(102)의 일부 특징들은 후술하는 하나 이상의 가시 효과를 이용함으로써 증폭된다.
도 7 내지 도 10은 본 발명의 예시적인 실시예에 따른 그래픽 줌 기술을 설명한다. 강조 표시된 메뉴 항목(360 또는 362)이 선택되면, 현재 디스플레이를 다음 메뉴 레벨(364)의 디스플레이로 간단히 교체하는 대신, 움직이는 줌 전환 시퀀스에 의해 현재 메뉴 레벨(364)에서 다음 메뉴 레벨(364)로의 전환이 제공된다.
데이터 처리 장치(100)는 적어도 두 종류의 줌 전환, 즉 줌 전환 유형 1 및 줌 전환 유형 2를 이용한다. 이러한 줌 전환 유형 둘 다 뒤에 보다 상세히 설명한다. 일 실시예에서, 줌 전환 유형 1은 (예를 들어, 주메뉴 항목(360)의 선택에 의한) 주메뉴 레벨들(364) 사이의 전환(도 7과 같은) 또는 (예를 들어, 하위 메뉴 레벨(364)에서 관련 내용으로의 줌에 관한) 메뉴 레벨(364)에서 데이터/내용으로의 전환에 사용된다. 이에 반해, 줌 전환 유형 2는 부메뉴 항목(362) 아이콘의 선택에 이어지는 전환을 표시하는데 사용된다(도 6, 도 10 및 도 11b와 같은).
도 7a는 주메뉴 항목(760a-760f)(예를 들어 도 4a에 대응하는 수평 가시 영역(765a-765f))의 열을 포함하는 개념상 초기 화면 디스플레이를 나타낸다. 제 2 주메뉴 항목은 도면에 어둡게 나타낸 것과 같이 강조 표시된다(760b). 강조 표시 된 메뉴 항목(760b)은 움직이는 줌 전환 시퀀스를 시작한다. 선택된 메뉴 항목(760b)이 시작 화면의 인접한 메뉴 항목(760a, 760c)을 부분적으로 가리도록 선택된 메뉴 항목(760b)을 확대함으로써 전환 시퀀스가 시작한다(즉, 선택된 항목(760b)의 가시 영역(765)이 차지하는 스크린 영역이 점진적으로 확장함). 이는 도 7b에 나타내며, 확대된 항목(760b')을 나타낸다.
이 단계에서, 확대된 가시 영역(765b')의 내용은 선택된 메뉴 항목(760b) 내용의 확대 표시이다. 가시 영역(765b')이 계속해서 확대됨에 따라, 선택된 메뉴 항목(760b)의 확대 표시는 다음 메뉴 레벨(764')의 내용 표시로 교체된다. 특히, 확대된 가시 영역(765b')의 내용은 도 7c에 나타낸 것과 같이 처음에 축소된 규모로 표시되는 새로운 주메뉴 항목(760g-760l)의 열로 교체된다. 새로운 주메뉴 항목(760g-760l)의 열은 새로운 메뉴 레벨(764')의 마지막 화면 디스플레이가 도 7d에 나타낸 것과 같이 표시될 때까지 확대되며, 이는 제 1 새로운 주메뉴 항목(760g')이 강조 표시된 새로운 메뉴 항목(760g'-760l') 열을 나타낸다.
도 4a-4b 및 도 7의 예에서, 새로운 메뉴 레벨(364)의 디스플레이는 스크린 영역을 효과적으로 채운다. 줌 전환 유형 2에서 새로운 메뉴 레벨(364)의 디스플레이는 스크린을 채우는 것이 아니라, (도 5b에 나타낸 것과 같이) 이전 메뉴 레벨(364)로부터 선택된 메뉴 항목(362)의 확대 표시 위에 겹쳐 나타난다.
줌 전환 유형 2의 예는 도 5a와 도 5b 사이의 전환에 대응하는 도 8a-8c에 나타낸다. 도 8a는 주메뉴 항목(860a-860f) 열을 포함하는 시작 표시 화면을 나타낸다. 강조 표시된 주메뉴 항목(860c)은 2개의 부메뉴 항목(862a, 862b)을 포함한 다. 부메뉴 항목(862a)이 강조 표시되어, 추가 관련 정보("텍스트 스트링")를 표시한다. 선택된 항목에 인접한 주메뉴 항목(860b, 860d)은 텍스트 "위로" 및 "아래로"에 의해 지시된다.
강조 표시된 부메뉴 항목(862a)의 선택으로 줌 전환 시퀀스 유형 2가 시작한다. 도 8b에 나타낸 바와 같이, 이 경우에 줌 전환 시퀀스는 선택된 부메뉴 항목(862a')과 함께 현재 메뉴 레벨(864a)의 인접 영역의 디스플레이를 확대한다. 이 시퀀스 동안 어떤 단계에서 새로운 메뉴 레벨(864b)의 표시는 현재 메뉴 레벨(864a)의 확대 표시 위에 겹쳐져 함께 확대된다. 도 8c는 새로운 메뉴 레벨(864b) 주메뉴 항목(860a'-860d')이 이전 메뉴 레벨(864a) 주메뉴 항목(860c)의 확대 표시를 배경으로 하여 나타나는 마지막 화면을 나타낸다.
도 9a 및 9b는 강조 및 표시 기술을 통합한 구현에 있어서 줌 전환 유형 2의 시작 및 마지막 화면의 예를 나타낸다. 도 9a에서 현재 메뉴 레벨(964a)의 "메시지" 주메뉴 항목(960a)이 강조 표시되어 2개의 부메뉴 항목(962a, 962b)을 표시하며, 그 오른쪽 "메뉴" 부메뉴 항목(962b)이 강조 표시된다. 이는 기술 텍스트 "메뉴"의 표시를 제공한다.
"메뉴" 부메뉴 항목(962b)의 선택은 도 9b의 화면으로 끝나는 줌 전환 유형 2를 시작한다. "새로운 메시지"라는 명칭으로 강조 표시된 주메뉴 항목(960a')으로 다음 메뉴 레벨(964b)이 표시된다. 다음 메뉴 레벨(964b)은 또한 각각 "폴더 보기" 및 "메시지 설정"이라는 명칭의 주메뉴 항목(960b', 960c')을 포함하며, 이는 선택된 부메뉴 항목(962b) 아이콘 및 도 9a의 시작 디스플레이의 인접 부분의 확대 표시 위에 겹쳐진다. 도 9b에서 텍스트 "메시지" 및 "메뉴"의 일부를 볼 수 있음에 유의한다.
줌 전환의 사용은 메뉴(124) 계층을 통한 네비게이션의 감지되는 가시 로직을 개선하여, 사용자에게 메뉴(124) 계층 내의 현재 디스플레이 화면 위치의 보다 나은 감지를 제공한다. 다른 종류의 메뉴 동작에 대한 다른 종류의 줌 전환의 사용(예를 들어, 메인 레벨 전환을 위한 유형 1 및 바로 가기 전환을 위한 유형 2)은 이러한 메뉴(124) 위치의 감지를 더욱 개선한다.
줌 전환 시퀀스에 사용되는 중간 화면 수는 시퀀스의 듀레이션에 따라 달라질 수 있다. 통상적으로, 시퀀스는 초당 5 내지 25 프레임의 속도로 움직이게 된다. 시퀀스의 듀레이션은 인지할 수 있는 가시 줌 효과를 제공하기에 충분히 길지만, 전화기의 정상 동작을 용납하기 어려운 정도로 지연시킬 만큼 길지는 않아야 한다. 일반적으로, 시퀀스의 듀레이션은 1초의 약 1/8 내지 1초 범위가 된다. 사용자가 시퀀스의 듀레이션을 미리 결정된 범위 내로 선택할 수 있도록, 그리고/또는 효과를 오프로 전환하도록 편의가 제공될 수 있다. 줌 전환 시퀀스 내에서 확대되는 현재 메뉴 항목 내용으로부터 새로운 메뉴 레벨 내용으로 확대 가시 영역의 내용을 전환하는 것은 잘 알려진 다양한 "영화" 편집 전환, 예를 들어 컷, 페이드, 디졸브, 와이프를 이용하여 수행될 수 있다.
계층을 통해 "뒤로" 네비게이팅 할 때, 상술한 줌"인" 전환은 단순히 역행하여 양 방향으로 동일한 가시 로직을 제공할 수 있다. 이 점에 있어서, 선택 컨트롤(110)은 메뉴 시스템(120)에서 "줌인" 동작을 하고, 선택 해제 컨트롤(112)은 " 줌아웃" 동작을 하여, 가시 줌은 메뉴(120) 계층을 통해 네비게이션의 방향을 반영한다.
일 실시예에서, 줌 전환은 일반적으로 선택된 항목의 물리적 화면 위치에 시각적으로 중심을 둔다. 도 9a-9b에서 줌은 선택된 부메뉴 항목(962b)에 중심을 둔다. 메뉴 항목들이 수평 영역의 왼쪽 끝에 표시 아이콘들을 포함하는 부메뉴 항목 메뉴 레벨 전환에 대해, 줌은 이러한 아이콘에 중심을 둘 수 있다.
도 10a 및 10b는 줌 전환 유형 2의 추가 예를 메뉴 레벨에서 내용으로의 전환 형태로 설명한다. 이 예에서, 메시지 메뉴(1092)로부터 텍스트 메시지(1090)를 여는 모듈에 줌 전환 유형 1이 적용된다. 도 10a는 제 1 주메뉴 항목(1060a)이 강조 표시되어 메시지 내용의 초록(1094) 및 3개의 부메뉴 항목(1062a-1062c) 바로 가기 아이콘을 표시하는(아무것도 강조 표시되지 않음) 메시지 메뉴(1092)를 나타낸다. 선택 컨트롤(110)을 누르면 도 10b의 화면으로 끝나는 줌 전환 유형 1이 시작한다.
이 경우, 줌 전환은 도 10a의 왼쪽 상부에 있는 봉투 아이콘(1096)을 시각적으로 중심에 둔다. 도 10b는 도 10b에서와 동일한 부메뉴 항목(1062a'-1062c') 외에도 "줌" 부메뉴 항목(1062d)을 갖는 완전한 메시지(1090)를 표시한다. 도 10b에서 왼쪽의 부메뉴 항목(1062d)은 메시지(1090)가 열릴 때 이미 강조 표시되어, 기술 텍스트 "줌"을 표시한다. 이는 메뉴 계층의 하위 레벨이 어떻게 "이중 표시" 상태에서 이미 부메뉴 항목(1062) 아이콘을 표시하는지를 설명한다. 이는 필수적인 것은 아니지만, 선택 컨트롤(110)의 사용이 일반적으로 더 낮은 레벨의 메뉴 레 벨(364)로 이끄는 것은 아니므로, 메뉴(124) 계층의 하위 레벨에 대해 특히 이해된다. 이 원리는 더 높은 레벨의 메뉴 레벨(364)에 적용될 수도 있다.
도 11a 및 11b는 줌 전환 유형 2를 이용하여, 도 10a에 나타낸 "메뉴" 바로 가기 아이콘(1162c)의 줌인 및 줌아웃의 효과를 나타낸다. 이러한 줌은 강조 표시된 "메뉴" 부메뉴 항목(1162c) 바로 가기에 중심을 둔다. 도 11b에 표시된 메뉴 레벨은 (도 11a의 레벨 이상의 메뉴 레벨(364)에 있는 메시지 항목으로부터 액세스 된) 도 11a의 메뉴와 동일한 옵션(추가 옵션을 더하여)을 포함한다.
도 11b의 메뉴는 모든 메시지에 일반적인 옵션들을 나타내는 한편, 도 11a의 메뉴는 특정 메시지 특유의 옵션들을 나타낸다. 이는 데이터 처리 장치(100)의 사용자 인터페이스가 일반적으로 일관된 가시 로직을 유지하고 최소한의 제어 버튼을 사용하면서 어떻게 문맥 감지형 메뉴 옵션들을 제공할 수 있는지의 추가 예이다.
도 12a-12d는 장치(100) 상에서 실행되는 애플리케이션의 동작, 또는 장치(100) 상에 보이는 문서들의 동작으로 줌의 이용을 어떻게 확장하는지를 설명한다. 예를 들어, 브라우저 애플리케이션 또는 보여지는 문서는 하이퍼링크(1298)를 포함할 수 있다. 하이퍼링크(1298)를 클릭하면, 하이퍼링크 대상(1299)이 링크(1298)가 차지하는 페이지 위치를 줌아웃하게 된다. 시각적으로 이러한 동작은 상술한 바와 같이 메뉴 레벨들 사이의 줌 동작과 흡사하다.
메뉴 시스템(120)을 통한 그리고 메뉴 시스템(120)을 통해 액세스 되는 애플리케이션 및 데이터로의 시각적 줌의 이용은 단지 4-방향, 선택 및 선택 해제 컨트롤(108, 110, 112)을 이용하여 시스템 네비게이션과 내용 사이의 자연스러운 전환 을 제공한다. 줌인/아웃 명령은 일반적으로 선택/선택 해제 컨트롤(110, 112)을 이용하여 입력되며, 이러한 버튼들의 동작은 상황에 적절하게 자동으로 또는 예를 들어 적절한 부메뉴 항목 등으로서 표시될 수 있는 줌 아이콘 등으로 먼저 네비게이팅함으로써 줌 명령으로 해석된다.
메뉴 시스템(120)을 통한 데이터 내용으로의 그리고 그 반대로의 줌 메타포의 계속은 도 13a-13d에서 설명한다. 상위 메시지(1390a)가 강조 표시된 이용 가능한 메시지(1390a-1390f) 목록을 나타내는 메뉴 레벨(1364)을 도 13a에 나타낸다. 선택 컨트롤(1310)을 누르면, 도 13b로 전환되어, 선택된 메시지(1390a)의 전체 텍스트가 표시된다. 도 10b를 참조로 상술한 바와 같이 부메뉴 항목(1362a-1362d) 세트가 제 1 "줌" 부메뉴 항목(1362a)을 이중 표시하여 제시된다. 이 시점에서 선택 컨트롤(1310)을 누르면, 도 13c에 나타낸 바와 같이 메시지(1390a')의 텍스트 내용이 줌인 된다. 이 상태에서 사용자가 방향 컨트롤(108)을 이용하여 표시된 텍스트 내용을 스크롤하여 움직일 수도 있다.
이 실시예에서, 선택 컨트롤(1310)의 사용은 사용자에게 인터페이스를 통한 일관된 줌 감지를 제공한다. 특히, 도 13a에서 도 13b로의 전환에서, 선택 컨트롤(1310)은 더 낮은 메뉴 레벨로 줌을 하는 한편, 도 13b에서 도 13c로의 전환에서는 동일한 선택 컨트롤(1310)이 더 낮은 메뉴 레벨이 없을 때의 내용으로 사용자가 줌을 하게 한다. 줌 메타포는 선택 해제 컨트롤(1312)의 사용에 의해 더 강화되어 내용을 줌아웃한다. 이는 선택 해제 컨트롤(1312)을 누름으로써 도 13c로부터 도달하는 도 13d에서 설명한다. 도 13d는 도 13b와 동일하다. 따라서 역행 줌이 메 뉴(120) 계층을 계속해서 역행시켜(사용자가 선택 해제 컨트롤(1312)을 다시 누르면) 도 13a의 상태로 돌아가게 된다.
도 14a 및 도 14b, 도 15a, 도 15b 및 도 15c는 본 발명의 예시적인 실시예에 따른 데이터 처리 장치(100)에 의해 이용되는 z-오더 강조 효과를 나타낸다. 도 14a에서 "메시지" 주메뉴 항목(1460b)이 강조 표시된다. 이를 표시하기 위해, "연결"이라는 명칭의 인접하는 주메뉴 항목(1460a)의 일부 위에 물리적으로 위치하는 것으로 나타난다. 연결 주메뉴 항목(1460a)은 부분적으로 가려지기는 하지만 여전히 볼 수 있으며 방향 컨트롤(108)의 사용에 의해 활성화될 수 있다. 도 14b는 동일한 목록에서 현재 강조 표시된 연결 주메뉴 항목(1460a')을 나타낸다. 이는 "메시지" 영역(1460b')이 더 낮은 z-오더 위치로 돌아가게 하여, 현재 맨 위에서 주메뉴 항목(1460a')이 강조 표시되었다.
활성 메뉴 항목을 강조 표시하기 위해 메뉴 항목들의 z-오더를 재정렬하는 것 외에도, 강조 표시 프로세스(126)는 활성 메뉴 항목의 가시 영역을 스케일링하여 주요 부분을 강조 표시한다. 강조 표시된 메뉴 항목의 가시 영역은 강조 표시되지 않은 메뉴 항목들의 가시 영역에 비해 확대된다. 스케일링은 강조 표시된 가시 영역 내의 텍스트, 폰트 및 그래픽(즉, 그래픽 및 텍스트 객체)의 스케일링을 포함할 수 있다. 또한, 강조 표시되지 않은 가시 영역은 디스플레이 상에서 스케일 및 위치가 일정하여, 사용중 메뉴에 대한 일관적이고 안정적인 검색을 제공한다. 사용자가 메뉴 레벨을 하향 네비게이팅할 때, 각 주메뉴 항목의 가시 영역이 강조 표시되어 앞당겨지는 한편, (다른 실시예들에서는 강조 표시되지 않은 주메뉴 항목들이 위치를 시프트할 수도 있지만) 다른 영역들은 위치 및 외관이 그대로 유지된다. 이 기술은 도 15a 내지 도 15c에 나타낸 바와 같이 강조 표시된 영역에 관련된 일부 내용을 표시하는데 사용될 수도 있으며, 이는 텍스트 메시지(1590a-1590c)의 목록에서 항목들의 연속하는 강조 표시를 나타낸다.
z-오더 기술은 "표시" 기술에 사용될 수도 있다. z-방향을 이용함으로써 스크린에 더 큰 공간을 형성하는 능력은 강조 표시된 영역에 바로 가기 아이콘들 및 다른 추가 정보를 표시하는데 이익이 된다. z-오더 강조 표시는 적어도 주메뉴 항목에 적용되며, 표시된 부메뉴 항목 등으로 확대될 수도 있다. z-오더 기술은 애플리케이션 및 문서 내의 하이퍼링크와 같이 사용자 선택 가능한 항목들로 확대될 수도 있다.
상술한 데이터 처리 장치(100)의 특징들 외에도, 다음의 하나 이상의 대안 실시예들 또는 이들의 조합으로 추가 기능이 얻어질 수 있다.
제 1 대안 실시예
다시 도 1을 참조하면, 상술한 예시적인 실시예에서 메뉴 시스템(120)은 디스플레이(114)에 제시되는 출력을 생성하기에 충분한 정보를 포함한다. 대안 실시예들에서, 메뉴 시스템은 한번에 한 메뉴 레벨(364)을 표시하는데 필요한 출력을 생성하기에 충분한 정보를 저장할 수 있는 상태 머신을 포함한다. 이러한 대안 실시예에서, 메뉴 시스템(120)은 하나 이상의 하부 애플리케이션(180) 및 데이터 소스(182)와 통신한다. 예를 들어, 애플리케이션들은 "연결" 데이터베이스 애플리케이션(180) 및 "메시징" 애플리케이션(180)을 포함할 수 있다. 데이터 소스(182)는 데이터 처리 장치(100) 자체의 데이터 테이블들, 또는 원격 기억 장치들에 저장된 데이터를 포함할 수 있다. 네비게이션 모듈(12)로부터 선택 명령 수신시, 메뉴 시스템은 적절한 결과를 알기 위해 적절한 애플리케이션(180) 및/또는 데이터 소스(182)에 질문한다. 예를 들어, "연결" 주메뉴 항목이 활성화될 때 사용자가 선택 컨트롤을 트리거하면, 메뉴 시스템은 "연결" 애플리케이션(180)에 질문하여 주메뉴 항목들로서 사용할 연결 목록을 검색하고 주메뉴 항목마다 관련 부메뉴 항목들의 목록을 검색한다. 마찬가지로, 특정 연결 전화번호 부메뉴 항목이 활성화되어 사용자가 선택 컨트롤을 트리거하면, 메뉴 시스템은 연결 애플리케이션(180)에 활성 부메뉴 항목에 관련된 전화번호를 다이얼 할 것을 지시한다.
선택 해제 컨트롤(112) 및 선택 해제 모듈(134)이 선택 컨트롤(110) 및 모듈로 이중 동작한다. 예를 들어, 선택된 마지막 메뉴 항목에 의해 메뉴 시스템(120) 내의 새로운 메뉴 레벨로 네비게이션 했다면, 사용자가 선택 해제 컨트롤(112)을 누르는 것에 응하여 선택 해제 모듈(134)이 네비게이션 컨트롤에 현재 활성 메뉴 항목 및 메뉴 레벨의 비활성화를 알리고 이전의 활성 메뉴 레벨을 활성화한다. 이 때문에, 네비게이션 모듈(122)이 사용자로부터 수신된 네비게이션 입력의 이력을 저장할 수 있다. 선택된 마지막 메뉴 항목에 의해 기능이 시작하면, 선택 해제 컨트롤(112)의 누름에 응하여, 선택 해제 모듈(134)은 시작된 기능을 중단한다.
제 2 대안 실시예
여기서 설명하는 사용자 인터페이스 프레임워크는 국제 특허 출원 WO 01/79984에 개시된 형태의 디지털 문서 처리 시스템과 결합하여 사용될 때 더욱 강 화되고 확장될 수 있다. 이러한 문서 처리 시스템은 각각의 문서 에이전트가 미리 결정된 문서 형식을 인식하여 해석하고, 미리 결정된 형식으로 들어오는 문서를 내부 문서 표현으로 변환하도록 형성된 다수의 "문서 에이전트"를 포함하는 구조를 특징으로 한다. 문서 에이전트에 의해 생성되는 내부 표현은 일반적이고 에이전트들 사이에 공통적이므로, 시스템의 나머지는 들어오는 문서의 형식에 관계없이 단일 데이터 표시만 다룰 필요가 있다.
문서 처리 시스템은 또한 내부 표현에 대해 문서 레이아웃, 렌더링, 애니메이션 및 이벤트 처리를 수행하도록 동작하는 핵심 엔진을 포함한다. 코어 엔진은 스크립트 성능을 가지며, 적절한 반사 계층과 함께 스크립트 또는 바이트코드 해석기를 포함하여, 처리된 문서들 내에 포함된 스크립트들을 처리할 수 있다. 문서 처리 시스템은 또한 팬(pan), 줌, 페이지로 가기 등의 일반적인 문서 조작 컨트롤들을 제공한다.
코어 문서 엔진은 추상 계층을 통해 시스템을 작동시키는 데이터 처리 장치(100)와 직접 통신하므로, OS 기능들과 장치 이벤트들 모두에 대한 액세스를 갖는다. 따라서 코어 엔진은 사용자 인터페이스와 상호 작용하는데 필요한 이벤트 처리 및 스크립트 실행 모두에 이용될 수 있다. 또한, 사용자 인터페이스는 문서 처리 시스템에 상주하는 문서 에이전트에 의해 처리될 수도 있는 대화식 멀티미디어 작업으로서 구현될 수도 있다. 문서 처리 시스템은 멀티미디어 작업을 코어 엔진에 의해 랜더링되는 내부 표현으로 변환한다.
이와 같이 구현되는 해법은 멀티미디어 작업의 많은 형식에 대한 공통 표현 모델을 가능하게 한다. 모듈 문서 에이전트의 존재는 예를 들어 HTML에 대한 문서 에이전트, (캘리포니아 샌프란시스코의 매크로미디어사에 의해 제공되는) MACROMEDIA FLASH에 대한 다른 형식, SVG, SMIL 등에 대한 다른 형식을 제공함으로써 다양한 멀티미디어 형식으로 작업이 생성될 수 있다. 문서 에이전트는 주로 파서(parser)이기 때문에, 문서 에이전트는 코드 크기가 작을 수 있어(100 kBytes 이하) 한정된 메모리를 가진 이동 장치에도 여러 개가 제공될 수 있다. 일반적인 플레이어에서 이루어지는 레이아웃, 렌더링, 스타일링, 애니메이션 및 타임라인 핸들링이 모두 문서 처리 시스템의 코어 엔진에 의해 처리되기 때문에 문서 에이전트는 일반 멀티미디어 플레이어보다 훨씬 더 작다. 코어 엔진은 공동 내부 표현으로 동작하기 때문에, 다른 멀티미디어 형식이 사용될 때 복제될 필요가 없고, 여분의 문서 에이전트만이 필요하다.
이러한 시스템은 사용자 인터페이스 작업이 다른 멀티미디어 형식으로 형성되고, 이러한 형식들이 단일 인터페이스로 조합될 가능성을 연다. 예를 들어, SVG로 작성된 연결 애플리케이션에 대한 인터페이스 작업은 FLASH로 작성된 게임 인터페이스 및 HTML로 저작된 메시징 인터페이스와 동일한 장치상에서 결합할 수도 있다. 이들 개별 작업은 단일 장치 인터페이스에서 사용자에게 투명한 방식으로 자연스럽게 함께 플레이될 수 있다. 각각의 멀티미디어 작업은 필요에 따라 로딩되어, 파일 형식에 따른 적절한 문서 에이전트에 매치된다. 코어 엔진에 의해 수행되는 이벤트 처리, 렌더링, 애니메이션 및 스크립트는 멀티미디어 작업의 본래 형식에 관계없이 일정하게 적용된다.
상기에 제안한 바와 같이, 사용자 인터페이스(102)는 하나 이상의 대화식 멀티미디어 작업으로서 구현될 수 있으며, 대화식 멀티미디어 작업은 다수의 멀티미디어 세그먼트로 구성될 수 있다. HTML과 같은 멀티미디어 형식은 비주얼 인터페이스의 기초를 형성하도록 설계될 수 있는 텍스트, 이미지 및 스타일링을 포함하는 문서들의 작성을 가능하게 한다. SVG(확장 벡터 그래픽), MACROMEDIA FLASH 및 SMIL(동기화 멀티미디어 통합 언어)과 같은 여러 멀티미디어 형식은 후술하는 움직이는 줌 효과와 같은 효과들을 발생시키도록 작업 내에서 이용할 수 있는 본래의 애니메이션 기능을 제공한다. 멀티미디어 작업에 포함된 실행 가능한 스크립트들에 의해 연결 작동(interactivity)이 제공된다.
스크립트는 잠재적으로 논리적 결정, 루핑(looping) 및 조건부 루핑을 포함하는 지시들의 시퀀스이다. 연결 작동을 가능하게 하기 위해, 스크립트는 소위 "이벤트 핸들러"를 사용하여 연산 환경에서 일어나는 이벤트들을 포착하고 그 이벤트에 응하여 스크립트 코드를 실행한다.
스위스 제네바의 ECMA 인터내셔널에 의해 제공되는 ECMASCRIPT는 스크립트 문법을 정의하고 수학, 날짜 등의 어떤 원시 함수가 제공될 필요가 있는 일반 스크립트 언어이다. 다른 점에서, ECMASCRIPT는 호스트 환경에서 지원되는 한 확장 가능하다. ECMASCRIPT 컴플라이언트 스크립트 언어의 가장 친숙한 예는 (캘리포니아 팔로알토의 썬 마이크로시스템사로부터의) JAVASCRIPT이며, 이는 일반적으로 브라우저가 보여주는 웹페이지 내에 있다. 이 스크립트는 웹페이지 자체 내에 포함되며, 호스트 브라우저 환경에서 볼 때 웹 문서에 효과를 적용한다(예를 들어, 마우 스 오버시 내용 변경).
또 다른 예는 캘리포니아 샌프란시스코의 매크로미디어사에 의해 제공되는 MACROMEDIA FLASH ACTIONSCRIPT이다. 이것은 (완전히 컴플라이언트 하지는 않지만) ECMASCRIPT를 기반으로 하지만, JAVASCRIPT와는 다른 객체, 속성 등의 세트를 갖는다. 예를 들어, ACTIONSCRIPT는 MovieClip과 같은 FLASH 특정 객체를 포함한다. ACTIONSCRIPT에 의한 문서는 FLASH 플레이어에서 예를 들어 적절한 플레이를 위해 이러한 함수들을 인식하고 실행하는 호스트 환경을 필요로 한다.
문서 내의 스크립트를 인식하고 실행하는 호스트 애플리케이션(브라우저나 코어 엔진 등)의 능력은 호스트 환경에서 대응하는 데이터 및 함수들에 스크립트 객체 및 메소드(method)를 묶는 브리징 계층에 의해 결정된다. 이는 공통적으로 "반사 계층"이라 하는데, 원시 객체들이 스크립팅 월드에 반사되어 스크립트 명령들에 의해 액세스 되고 처리될 수 있기 때문이다. 예를 들어, 종래의 브라우저(마이크로소프트 인터넷 익스플로러 또는 넷스케이프 등)가 새로운 브라우저 창을 열 수도 있다. 브라우저의 반사 계층은 이러한 창을 나타내기 위한 새로운 객체를 생성하여, JAVASCRIPT가 창 속성에 액세스할 수 있다(예를 들어, 창의 메뉴 바 속성이 JAVASCRIPT에 현재 이용 가능하다).
스크립팅 언어는 일반적으로 "문서 객체 모델" 또는 DOM이라고 하는 것을 이용한다. 이는 객체 및 그 속성, 메소드 및 이벤트의 계층이다. 이러한 속성 및 메소드를 통해 스크립트는 상기 브라우저 창 예시에서와 같이 호스트 애플리케이션 자체의 양상을 액세스 및 지정할 수 있고, 또한 스크립트를 포함하는 문서 내의 객 체에 액세스할 수 있다. 예를 들어, 브라우저에 호스팅 되는 웹페이지의 폼(f1) 안의 버튼(버튼 1)은 스크립트 객체 document. f1 . button1에 의해 액세스 될 수 있다. 이러한 버튼과의 상호 작용 결과는 클릭 이벤트에 응하여 실행되는 스크립트 시퀀스로서 저작될 수 있다.
DOM 및 ACTIONSCRIPT를 사용하여 데이터 처리 사용자 인터페이스가 MACROMEDIA FLACH에 구현될 수 있다. 예를 들어, 메뉴 레벨을 표시하기 위해, 데이터 처리 장치(100)는 메뉴 레벨의 가시 엘리먼트들을 포함하는 FLASH 멀티미디어 작업("작업")을 실행한다. '하향 키 누름' 이벤트에 응하여, 작업의 스크립트 핸들러는 표시된 항목들을 재정렬하여 갱신된 디스플레이를 랜더링한다. 강조 표시된 영역의 z-오더 및 스케일링은 표시된 내용을 조정하여 새로운 정보를 표시할 수 있는 것과 같이 멀티미디어 작업 내에서 직접 이루어질 수 있다. 마찬가지로, 작업은 FLASH 형식 내에 제공된 애니메이션 특징들을 이용함으로써 줌 효과를 포함할 수 있다. 이러한 애니메이션은 키 누름 이벤트에 응하여 이벤트 핸들러 스크립트를 통해 활성화된다.
본 발명의 예시적인 구현에 따른 멀티미디어 작업에 기반한 사용자 인터페이스는 스크립트될 수 없는 원시 코드에 액세스하는 기능을 포함한다. 따라서 사용자 인터페이스용 멀티미디어 플레이어는 _app 객체로 불리는 객체로 확장되는 DOM, 원시 코드 라이브러리(DLL)가 등록될 수 있게 하는 이 객체들에 관한 메소드 세트, 및 멀티미디어 작업 내의 스크립트들에 의한 사용을 위해 노출된 함수들을 갖는다.
원시 코드 라이브러리는 C나 C++과 같은 컴파일된 언어로 작성될 수 있다. 이들은 이러한 언어의 사용에 의해서만 프로그래밍 될 수 있으며 멀티미디어 작업에 관련된 스크립팅 언어의 성능 및 범위를 넘는 함수들을 포함할 수 있다. 샘플 라이브러리는 MP3 파일들을 플레이하기 위한 라이브러리, 또는 연결 상대들의 데이터베이스를 관리하기 위한 라이브러리를 포함한다. 사용자 인터페이스 프레임워크의 원하는 확장 가능성을 달성하기 위한 한 가지 수단은 DLL에 제공된 원시 함수들에 16진 UID 번호(고유 식별자)를 할당하는 것이다. 예를 들어, MP3 라이브러리에서 PlayAudioFile 함수에 UID 0x2400이 부여될 수 있다. 이들 함수는 상기에 소개한 _app 객체의 메소드를 통해 멀티미디어 작업의 저작자가 이용할 수 있게 된다.
라이브러리를 등록한 후, 멀티미디어 작업은 _app.handler라 불리는 메소드에 의해 노출된 라이브러리 함수들을 필요한 함수에 대한 UID와 함께 호출할 수 있다. 예를 들어, UI 저작자는 _app.handler(0x2400, "보헤미안 랩소디")를 불러내 그 이름의 MP3 오디오 파일을 플레이 하게 된다. 이러한 방법은 선언된 라이브러리 함수들을 반사 계층에 효과적으로 부가하고, 이를 작업의 스크립트에 의한 UID 참조에 의해 호출되도록 사용 가능하게 한다. 반사 계층은 새로운 함수들의 부가에 의해 극적으로 확장된다.
이 기술은 파일 디렉토리를 열거하고 그 내용의 목록을 되돌리는 것과 같은 함수들에 의해 멀티미디어 플레이어로의 확장을 가능하게 한다. 이 정보는 엘리먼트들이 다른 내용과 같은 작업에 사용될 수 있는 가변 어레이의 멀티미디어 작업으로 되돌려질 수 있다. 개별 파일들을 열고 그 내용들을 추출하기 위한 원시 함수들이 제공될 수도 있다. 장치에 근거리이며 네트워크에 걸쳐 있는 파일링 시스템 들, 저장 카드 또는 주변 장치에 대한 액세스는 저작자가 멀티미디어 작업의 실제 파일 자체 내에 포함되지 않는 외부 문서들 또는 내용을 통합할 수 있게 한다.
이러한 예는 외관 및 전이 효과 등을 포함하는 사진들을 표시하라는 명령들을 갖는 작업이 저작되는 "스마트 포토 갤러리"이다. 그러나 작업에 의해 표시되어야 하는 사진들은 종래의 접근법에서와 같이 작업 자체의 일부는 아니다. 현재 방법 하에서 플레이어에 대해 디렉토리를 열거하라는 명령에 의해 사진들이 작업에 집합될 수 있으며, 디렉토리는 플레이어를 실행하고 있는 카메라폰의 포토 디렉토리일 수도 있다. 디렉토리에 있는 사진들의 목록이 플레이어에 의해 판독되고, _app 객체 어레이로서 멀티미디어 작업에 전달된다. 멀티미디어 작업은 _app 어레이에서 인덱스를 참조하고, 객체를 열어 저작품에 정의된 효과를 적용함으로써 외부적으로 제공된 포토 객체들을 갤러리 내에 통합할 수 있다.
다른 예들은 목록이나 메뉴를 동적으로 모으는 것을 포함할 수 있으며, 저작된 멀티미디어 작업 내에 하드코드된 목록이나 메뉴를 갖는 것이 아니라, 작업은 대신 목록이나 메뉴를 포함하는 원격 위치를 참조하며, 이 원격 위치는 원래 작업의 제어에 의해 동적으로 변화할 수 있다. 예를 들어, 새로운 항목들이 목록에 부가될 수 있으며, 다음에 작업이 플레이될 때 새로운 목록 항목들이 이용 가능하게 된다. 저작된 작업은 목록에 있는 것을 사용하라는 명령을 포함하지만, 목록 자체는 현재의 많은 접근법에서와 같이 작업 내에 정적으로 정의될 필요는 없다.
또 다른 예는 연결 상대 데이터베이스를 사용하도록 저작된 작업이며, 데이터베이스는 동적으로 성장 및 변화할 수 있다. 작업의 기능은 미리 저작되기 때문 에 변경되지 않는다. 그러나 이 기능이 적용되는 내용은 정적이 아니라 동적이다. 이러한 예들은 동적 템플릿의 의미를 설명하며, 내용은 멀티미디어 템플릿에 동적으로 삽입된다.
또한, 프레임워크는 기능이 실행 시간으로 확장될 수 있게 한다. 예를 들어, 데이터 처리 장치(100)에는 한정된 기능을 갖는 사용자 인터페이스(102) 작업이 적재될 수도 있다. 프리미엄을 지불함으로써 사용자는 오디오 플레이어나 문서 뷰어 능력과 같이 보강된 기능을 포함하는 새로운 사용자 인터페이스(102) 작업을 다운로드할 수도 있다. 여기서 설명한 것과 같은 사용자 인터페이스(102) 프레임워크 내에서 플레이될 때 새로운 작업이 기본 인터페이스에 의해 이용되지 않는 추가 라이브러리(DLL)를 등록하게 되고, 이들 라이브러리는 장치의 실행 시간에 적재되어 한정된 인터페이스 작업으로부터 이전에 액세스 불가능했던 새로운 기능을 노출할 수도 있다. DOM 및 확장 가능한 반사 계층을 포함하는 프레임워크는 새로운 라이브러리 함수를 호출하는 보강된 작업과 함수 호출에 응하여 실행하는 DLL 사이의 시스템 내에서 통합, 제어 및 통신을 관리한다.
상술한 바와 같은 구현은 또한 기존의 멀티미디어 형식들(FLASH, SVG, HTML, SMIL 등)이 그 본래의 범위를 넘어가는 이벤트를 처리/응답하도록 확장될 수 있게 한다. 종래의 이벤트들은 예를 들어 마우스 클릭 및 키 누름을 포함하고, 표준 스크립팅 언어는 OnClick, OnKeypress 등을 사용함으로써 이벤트들에 응답할 수 있다. 제안된 시스템은 시스템, 장치 및 라이브러리 이벤트 - 예를 들어, OutOfMemory; IncomingCall; CardInserted; 등의 이벤트들에 응답하는 리스너 객체 들을 UI에 등록함으로써 언어를 확장할 수 있다.
이를 달성하는 메커니즘은 확장 가능한 반사 계층을 이용한다. C나 이에 상당하는 것으로 작성된 각각의 원시 애플리케이션은 운영 체계 및 장치 소프트웨어에 의해 제공된 원시 이벤트들에 대한 액세스를 획득할 수 있다. 따라서 이들 원시 라이브러리는 시스템 및 장치 이벤트들을 노출할 수 있으며, 예를 들어 이메일 애플리케이션은 새로운 이메일이 수신된 것을 지시하는 이벤트를 끌어들일 수도 있다.
_app 객체 및 _app.handler 메소드를 이용함으로써 이들 시스템 이벤트는 작업 내의 스크립트에 의해 작동하도록 멀티미디어 작업을 통해 반사될 수도 있다. 예를 들어, 이메일 애플리케이션은 원시 애플리케이션에 의해 끌어들인 이벤트들이 다음과 같이 콜백 객체에 부착되도록, UID 0x0036을 가진 함수를 포함하여 스크립트에 콜백 객체를 부가할 수도 있다:
listenerobj = new Object();
result = _app.handler(0x0036 /*email_addCallbackObject*/, listenerobj)
/* 콜백 객체가 성공적으로 추가되었다면 result에 불린값(Boolean value) true를 돌린다 */
listenerobj.onincomingemail = function()
{
trace("New mail recieved");
}
이 스크립트는 원시 이메일 애플리케이션으로부터의 이벤트에 응답할 수 있는 스크립트 내에 객체(listenerobj)를 형성한다. 이 경우, 스크립트는 새로운 메일이 도착했을 때 스크린 메시지를 불러내는 이벤트 핸들러를 활성화한다.
이는 상이한 멀티미디어 작업들이 저작자의 의도에 따라 동일한 이벤트에 대해 다른 방식으로 응답할 가능성을 전개한다. 일례는 휴대형 장치에서 실행하는 종류의 플레이어이다. 사용자가 장치에 메모리 카드를 삽입하여, 장치가 멀티미디어 플레이어에 의해 인터셉트된 이벤트를 생성하게 한다. 인터셉션은 플레이어가 "카드 삽입" 이벤트에 관련된 작업 내에서 기능을 실행하게 한다. 멀티미디어 작업의 이벤트 핸들러는 (예를 들어) 상술한 기술을 이용하여 삽입된 카드에 파일을 열거하도록 선택될 수 있으며, 슬라이드 쇼 내에 선택된 파일들을 포함할 수 있다. 다른 작업들이 사용자에게 카드가 삽입되었음을 알려주는 특별한 음을 플레이하는 기능을 대신 가질 수도 있다.
마찬가지로, 휴대 전화는 텍스트 메시지가 수신되었다거나, (워싱턴 D.C.의 블루투스 SIG사의) 블루투스(BLUETOOTH) 무선 통신 채널이 개방되었음을 지시하는 이벤트를 생성할 수 있다. 멀티미디어 플레이어는 멀티미디어 작업에 대해 이 이벤트를 푸시하여, 예를 들어 사용자에게 통보하는 클립을 표시하거나 작업 내에 텍스트 메시지를 통합함으로써 여러 가지 방법으로 응답할 수 있다. 다른 종류의 이벤트들은 착신, 문서 로딩 완료, 메모리 부족 등을 포함한다.
사용자 인터페이스(102)가 멀티미디어 플레이어를 포함하는 구현의 경우, 사용자 인터페이스(102)는 멀티미디어 작업들에 하부 시스템을 통합하는 관리자 모듈을 포함할 수 있다. 이 모듈은 멀티미디어 작업을 플레이어에 로딩하거나, 멀티미디어 작업에 필요한 필수 애플리케이션 라이브러리들을 로딩 및 언로딩하거나, 필요에 따라 다른 멀티미디어 작업들 간의 스위칭 등의 작업을 처리할 수 있다. 관리자 모듈은 완전한 사용자 인터페이스(102)가 단일 사용자 인터페이스(102) 멀티미디어 작업의 여러 세그먼트들, 또는 각각 특정 기능 - 예를 들어 게임 인터페이스, 주소록 등을 수행하는 다수의 개별 작업들로 구성될 수 있게 한다. 관리자 모듈은 각각의 작업이 하나 또는 여러 애플리케이션 서비스에 액세스하고, 여러 멀티미디어 작업이 단일 애플리케이션 서비스에 대한 액세스를 공유하는 유연성을 제공한다. 가장 넓은 의미에서 이러한 방법은 시스템 이벤트를 원래부터 인식하지 않는 넓은 범위의 미디어 형식에 이러한 이벤트를 노출시키는 환경을 제공한다. 상기 방법은 시스템 이벤트들에 대한 응답을 포함하도록 이들 형식의 이벤트 핸들링을 확장한다.
일 구현예에 있어서, 멀티미디어 작업 및 멀티미디어 플레이어는 멀티미디어 작업 본래의 사용자 인터페이스(102) 출력뿐 아니라 문서 내용도 랜더링한다. 멀티미디어 플레이어는 처음에 텍스트 메시지와 같은 문서 내용을 작업 내의 스크립트에 의해 멀티미디어 작업에 수집함으로써 그 출력을 구성한다. 내용의 랜더링은 작업에서 그래픽 아이콘들과 같은 다른 사용자 인터페이스 엘리먼트들의 랜더링과 동일하게 멀티미디어 플레이어에 의해 수행된다.
다른 구현예에서 텍스트 메시지의 내용은 상술한 유형의 문서 처리 엔진에 의해 개별적으로 처리된다. 멀티미디어 작업의 사용자 인터페이스 엘리먼트들(아이콘 등)은 멀티미디어 플레이어에 의해 계속해서 처리된다. 이러한 구현에 의해 데이터 처리 장치는 플레이어의 출력 상에 문서 엔진으로부터 랜더링된 출력(텍스트 메시지)을 오버레이 함으로써 디스플레이를 구성한다. 이는 각각의 출력에 이용 가능한 화면 영역들을 분할하거나(분할은 멀티미디어 스크립트에 의해 제어됨) 문서 처리 엔진에 의해 사용되는 플레이어 출력 내에 투명 캔버스를 형성하는 투명성을 이용함으로써 이루어질 수 있다. 이 구현예는 사용자 인터페이스에 의해 이용 가능한 문서 엔진의 특수화된 기능을 이룬다. 예를 들어, 문서 내용은 플레이어를 통해 랜더링되는 가시 사용자 인터페이스 컨트롤들을 변경하지 않고 스케일링, 패닝(panning), 리플로우 등이 이루어질 수 있다. 사용자 인터페이스 엘리먼트들 및 내용은 다른 팩터들로 스케일링될 수 있다. 문서 처리 엔진이 다수의 문서 종류를 처리할 때, 컨트롤들의 단일 세트를 갖는 사용자 인터페이스 작업은 다수의 문서 종류를 일관적으로 처리할 수도 있다.
본 발명은 그 사상 및 본질적 특징들을 벗어나지 않으면서 다른 특정한 형태들로 구현될 수 있다. 따라서 상술한 실시예들은 본 발명의 한정이 아니라 모든 점에서 예시가 되는 것으로 생각해야 한다.
본 발명에 의해, 전화기 및 다른 소형 연산 장치 사용자들에게 보다 직관적이고, 익히기 쉬우며, 일관적이고 예상하기 쉬운 방식으로 동작하고, 한정된 디스 플레이 공간을 최상으로 활용하는 사용자 인터페이스를 제공할 수 있다.
Claims (44)
- 데이터 처리 시스템에 사용하기 위한 그래픽 사용자 인터페이스로서,각각 가시 영역을 갖는 제 1 다수의 주메뉴 항목을 디스플레이에 제공하는 메뉴 시스템;사용자가 상기 메뉴 시스템을 네비게이팅할 수 있게 하는 네비게이션 모듈; 및제 1 주메뉴 항목으로의 네비게이션에 응하여, 상기 제 1 다수의 주메뉴 항목의 나머지를 계속해서 표시하면서, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 제 1 주메뉴 항목에 관련된 제 1 다수의 부메뉴 항목을 표시하는 표시 프로세스를 포함하는, 사용자 인터페이스.
- 제 1 항에 있어서, 상기 표시 프로세스는 제 2 주메뉴 항목으로의 네비게이션에 응하여 상기 디스플레이로부터 상기 제 1 다수의 부메뉴 항목을 제거하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 또는 제 2 항에 있어서, 상기 부메뉴 항목들은 바로 가기 항목들을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 3 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항 목 중 적어도 하나는 상기 메뉴 시스템 내의 위치에 대한 네비게이션 바로 가기의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 4 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항목 중 적어도 하나는 상기 제 1 주메뉴 항목에 관련된 옵션에 대한 기능 바로 가기의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 5 항 중 어느 한 항에 있어서, 상기 부메뉴 항목들 중 적어도 하나는 아이콘으로 구성되거나 아이콘을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 6 항 중 어느 한 항에 있어서, 상기 부메뉴 항목들 중 적어도 하나는 텍스트 설명으로 구성되거나 텍스트 설명을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 7 항 중 어느 한 항에 있어서, 상기 제 1 다수의 부메뉴 항목은 문맥 감지형(context sensitive)인 것을 특징으로 하는 사용자 인터페이스.
- 제 8 항에 있어서, 상기 문맥 감지형의 제 1 다수의 부메뉴 항목은 상기 사용자 인터페이스를 통합한 장치의 상태에 의존하는 것을 특징으로 하는 사용자 인 터페이스.
- 제 9 항에 있어서, 상기 장치의 상태는 네트워크 접속의 가용성 및 주변 장치의 가용성 중 적어도 하나를 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 10 항 중 어느 한 항에 있어서, 주메뉴 항목 및 부메뉴 항목 중 적어도 하나에 대한 성공적인 네비게이션을 시각적으로 나타내는 강조 표시 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 사용자 인터페이스는 상기 데이터 처리 시스템의 선택 컨트롤에 응답하도록 되어 있으며, 상기 사용자 인터페이스는 상기 선택 컨트롤의 사용에 응하여 주메뉴 항목 및 부메뉴 항목 중 하나가 강조 표시될 때 그 선택을 수락하는 선택 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 12 항에 있어서, 제 1 주메뉴 항목에 관련된 제 1 기능을 포함하며, 상기 선택 컨트롤에 의한 상기 제 1 주메뉴 항목의 선택은 상기 제 1 기능의 수행을 개시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 13 항에 있어서, 상기 제 1 기능은 제 2 다수의 주메뉴 항목을 포함하는 제 2 주메뉴를 표시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 12 항에 있어서, 제 1 부메뉴 항목에 관련된 제 1 기능을 포함하며, 상기 선택 컨트롤에 의한 상기 제 1 부메뉴 항목의 선택은 상기 제 1 기능의 수행을 개시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 15 항에 있어서, 상기 제 1 기능은 다수의 제 2 주메뉴 항목을 포함하는 제 2 주메뉴를 표시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 제 1 다수의 부메뉴 항목의 강조 표시에 응하여, 상기 제 1 주메뉴 항목의 가시 영역 내에 상기 다수의 부메뉴 항목 중 제 1 부메뉴 항목에 관련된 추가 정보를 표시하는 이중 표시 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 17 항에 있어서, 상기 부메뉴 항목은 아이콘을 포함하며, 상기 추가 정보는 상기 부메뉴 항목의 텍스트 설명을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 18 항에 있어서, 상기 추가 정보는 상기 강조 표시된 부메뉴 항목에 관련된 데이터의 시각적 표현을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항에 있어서, 상기 표시 프로세스는 상기 제 1 주메뉴 항목에 관련된 데이터의 시각적 표현을 표시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 20 항 중 어느 한 항에 있어서, 상기 주메뉴 항목들은 상기 디스플레이 상에 수직 열로 표시되며, 각 주메뉴 항목의 가시 영역은 상기 디스플레이 폭에 걸쳐 수평으로 연장하는 것을 특징으로 하는 사용자 인터페이스.
- 제 21 항에 있어서, 상기 표시 프로세스는 상기 제 1 다수의 부메뉴 항목을 상기 제 1 주메뉴 항목의 가시 영역 내의 수평 행에 표시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 17 항에 있어서, 강조 표시된 가시 영역들에 있는 추가 정보의 표시 형식은 주메뉴 항목들의 선택에 의해 액세스 되는 대다수의 메뉴 레벨 전체에 걸쳐 일관적으로 유지되는 것을 특징으로 하는 사용자 인터페이스.
- 제 12 항에 있어서, 상기 선택 프로세스는 주메뉴 항목의 선택에 응하여, 상기 선택의 스케일링 및 상기 제1 다수의 주메뉴 항목을 제 2 다수의 주메뉴 항목으로 적어도 일부 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 12 항에 있어서, 상기 선택 프로세스는 주메뉴 항목 및 부메뉴 항목 중 하나의 선택에 응하여, 상기 선택의 스케일링 및 상기 주메뉴 항목을 데이터 내용으로 적어도 일부 교체하는 것을 포함하는 움직이는 줌 전환 시퀀스를 개시하는 것을 특징으로 하는 사용자 인터페이스.
- 제 24 항에 있어서, 상기 선택 프로세스는 상기 움직이는 줌 전환 시퀀스의 마지막에, 상기 제 1 다수의 메뉴 항목의 일부 위에 상기 제 2 다수의 주메뉴 항목을 겹쳐 놓는 것을 특징으로 하는 사용자 인터페이스.
- 제 26 항에 있어서, 상기 제 1 다수의 주메뉴 항목의 일부는 상기 선택의 스케일링된 버전을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 24 항에 있어서, 상기 사용자 인터페이스는 상기 데이터 처리 시스템의 선택 해제 컨트롤에 응답하도록 되어 있으며, 상기 사용자 인터페이스는 상기 선택 해제 컨트롤의 활성화에 응하여 역행 줌 전환 시퀀스를 개시하는 선택 해제 프로세스를 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 28 항에 있어서, 상기 역행 줌 전환 시퀀스는 실질적으로 상기 움직이는 줌 전환 시퀀스의 역행을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 24 항에 있어서, 상기 움직이는 시각적 줌 전환 시퀀스는 상기 선택에 시각적으로 중심을 두는 것을 특징으로 하는 사용자 인터페이스.
- 제 28 항에 있어서, 상기 선택 컨트롤에 응하여 다수 레벨의 메뉴 항목들을 통한 하향 네비게이션을 제공하고, 선택 해제 컨트롤에 응하여 상기 다수 레벨의 메뉴 항목들을 통한 상향 네비게이션을 제공하는 것을 특징으로 하는 사용자 인터페이스.
- 제 12 항에 있어서, 상기 선택된 부메뉴 항목은 내용에 대한 링크를 포함하고, 상기 부메뉴 항목의 선택은 상기 부메뉴 항목이 점진적으로 스케일링되고 상기 내용에 의해 적어도 부분적으로 교체되는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역을 확장함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 강조 표시 프로세스는 부메뉴 항목에 관련된 그래픽 및 텍스트 객체들의 디스플레이를 스케일링함으로써 상기 부메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역을 제 2 주메뉴 항목의 가시 영역과 적어도 부분적으로 오버랩하도록 확장시키는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 강조 표시되지 않은 주메뉴 항목들은 상기 제 1 주메뉴 항목의 강조 표시에 응하여 위치가 그대로인 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 디스플레이의 인접 부분에 상기 제 1 주메뉴 항목에 대응하는 모조 그림자를 그래픽적으로 표시함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
- 제 11 항에 있어서, 상기 강조 표시 프로세스는 상기 제 1 주메뉴 항목의 가시 영역 내에 표시되는 그래픽 및 텍스트 객체들을 스케일링함으로써 상기 제 1 주메뉴 항목으로의 성공적인 네비게이션을 나타내는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항에 있어서, 상기 사용자 인터페이스는 상기 메뉴 시스템에 이용 가능한 내용에 액세스하기 위한 줌인(zoom-in) 모듈; 및 액세스된 내용을 차단하기 위 한 줌아웃(zoom-out) 모듈을 포함하는 것을 특징으로 하는 사용자 인터페이스.
- 제 39 항에 있어서, 상기 줌인 및 줌아웃 모듈은 상기 메뉴 시스템에 의해 액세스되는 내용의 디스플레이를 스케일링하는 수단을 제공하는 것을 특징으로 하는 사용자 인터페이스.
- 제 39 항에 있어서, 상기 줌인 및 줌아웃 모듈의 활성화는 다수 레벨의 주메뉴 항목들간 네비게이션을 제공하는 것을 특징으로 하는 사용자 인터페이스.
- 제 1 항 내지 제 41 항 중 어느 한 항에 있어서, 상기 네비게이션 모듈은 상기 메뉴 시스템의 지역 선택(geographic) 네비게이션을 가능하게 하는 것을 특징으로 하는 사용자 인터페이스.
- 제 42 항에 있어서, 상기 네비게이션 모듈에 의해 제공되는 지역 선택 네비게이션 능력은 상기 메뉴 시스템의 대다수의 메뉴 레벨들 사이에 일관된 것을 특징으로 하는 사용자 인터페이스.
- 제 43 항에 있어서, 상기 지역 선택 네비게이션 능력은 상기 메뉴 시스템의 모든 메뉴 레벨들 사이에 일관된 것을 특징으로 하는 사용자 인터페이스.
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US63321804P | 2004-12-03 | 2004-12-03 | |
US60/633,218 | 2004-12-03 | ||
US11/061,185 US20060123360A1 (en) | 2004-12-03 | 2005-02-18 | User interfaces for data processing devices and systems |
US11/061,185 | 2005-02-18 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20060092989A true KR20060092989A (ko) | 2006-08-23 |
Family
ID=35841775
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020050108665A KR20060092989A (ko) | 2004-12-03 | 2005-11-14 | 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20060123360A1 (ko) |
EP (1) | EP1667013A3 (ko) |
JP (1) | JP2006164260A (ko) |
KR (1) | KR20060092989A (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101346889B1 (ko) * | 2006-11-17 | 2014-01-02 | 엘지전자 주식회사 | 조이스틱을 갖는 이동통신단말기 및 그 입력 처리방법 |
Families Citing this family (218)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI20031433A (fi) * | 2003-10-03 | 2005-04-04 | Nokia Corp | Menetelmä valikkojen muodostamiseksi |
US8402384B2 (en) | 2004-11-09 | 2013-03-19 | Research In Motion Limited | Dynamic bar oriented user interface |
RU2007125666A (ru) * | 2004-12-07 | 2009-01-20 | Зи Корпорейшн Оф Канада, Инк. (Ca) | Пользовательский интерфейс с расширенными характеристиками поиска |
EP1677182B1 (en) * | 2004-12-28 | 2014-04-23 | Sony Mobile Communications Japan, Inc. | Display method, portable terminal device, and display program |
JP4674311B2 (ja) * | 2005-02-21 | 2011-04-20 | 株式会社リコー | コンテンツ閲覧システム、コンテンツ閲覧方法およびプログラム |
KR100643293B1 (ko) * | 2005-05-02 | 2006-11-10 | 삼성전자주식회사 | 그래픽 사용자 인터페이스의 기하학적 변형을 통해 파일정보를 제공하는 장치 및 방법 |
US20060252462A1 (en) * | 2005-05-05 | 2006-11-09 | Govind Balakrishnan | Accessing dedicated functions in personal devices |
KR100617716B1 (ko) * | 2005-06-09 | 2006-08-28 | 삼성전자주식회사 | 백라이트를 제어하는 휴대 단말기 및 그 방법 |
US7685530B2 (en) | 2005-06-10 | 2010-03-23 | T-Mobile Usa, Inc. | Preferred contact group centric interface |
US8370769B2 (en) | 2005-06-10 | 2013-02-05 | T-Mobile Usa, Inc. | Variable path management of user contacts |
US8370770B2 (en) | 2005-06-10 | 2013-02-05 | T-Mobile Usa, Inc. | Variable path management of user contacts |
US8359548B2 (en) | 2005-06-10 | 2013-01-22 | T-Mobile Usa, Inc. | Managing subset of user contacts |
JP2007052403A (ja) * | 2005-07-19 | 2007-03-01 | Canon Inc | 表示装置及び表示方法及びプログラム及び記憶媒体 |
US20070067726A1 (en) * | 2005-09-16 | 2007-03-22 | Microsoft Corporation | Content sharing user interface for mobile devices |
US7873356B2 (en) * | 2005-09-16 | 2011-01-18 | Microsoft Corporation | Search interface for mobile devices |
US7933632B2 (en) * | 2005-09-16 | 2011-04-26 | Microsoft Corporation | Tile space user interface for mobile devices |
US20070067738A1 (en) * | 2005-09-16 | 2007-03-22 | Microsoft Corporation | Extensible, filtered lists for mobile device user interface |
US8539374B2 (en) * | 2005-09-23 | 2013-09-17 | Disney Enterprises, Inc. | Graphical user interface for electronic devices |
US7631271B2 (en) * | 2005-12-16 | 2009-12-08 | Xerox Corporation | Touch screen user interface with multi-text field display |
US7509588B2 (en) | 2005-12-30 | 2009-03-24 | Apple Inc. | Portable electronic device with interface reconfiguration mode |
US7660558B2 (en) | 2005-12-31 | 2010-02-09 | Adobe Systems Incorporated | Interrupting and resuming a media player |
US20070157194A1 (en) * | 2005-12-31 | 2007-07-05 | Govind Balakrishnan | Post-deployment user interface update in a mobile device |
US20070155426A1 (en) * | 2005-12-31 | 2007-07-05 | Govind Balakrishnan | Application access to cellular telephone settings |
US20070156841A1 (en) * | 2005-12-31 | 2007-07-05 | Govind Balakrishnan | Platform independent user interface for a mobile device |
US7603113B2 (en) | 2005-12-31 | 2009-10-13 | Adobe Systems Incorporated | Using local codecs |
US20070155425A1 (en) * | 2005-12-31 | 2007-07-05 | Govind Balakrishnan | Enabling rapid and de-coupled ui development for a cellular telephone |
US7587684B2 (en) * | 2006-01-23 | 2009-09-08 | Nokia Corporation | Mobile communication terminal and method therefore |
US8510666B2 (en) * | 2006-03-14 | 2013-08-13 | Siemens Enterprise Communications Gmbh & Co. Kg | Systems for development and/or use of telephone user interface |
KR100790078B1 (ko) * | 2006-03-14 | 2008-01-02 | 삼성전자주식회사 | 이동 통신 단말기에서 어플리케이션으로의 빠른 접근 방법및 장치 |
US8606247B2 (en) * | 2006-03-20 | 2013-12-10 | Sms.Ac, Inc. | Systems and methods for billing for a network enabled application through a network platform regardless of whether the network enabled application is hosted by the platform |
WO2007137240A2 (en) * | 2006-05-21 | 2007-11-29 | Motionphoto, Inc. | Methods and apparatus for remote motion graphics authoring |
US8307307B2 (en) | 2006-05-25 | 2012-11-06 | Research In Motion Limited | Method for prompting user confirmation |
US8255281B2 (en) | 2006-06-07 | 2012-08-28 | T-Mobile Usa, Inc. | Service management system that enables subscriber-driven changes to service plans |
US20070294637A1 (en) * | 2006-06-20 | 2007-12-20 | Martin Renaud | Grouped cascading user interface |
WO2008007905A1 (en) | 2006-07-12 | 2008-01-17 | Lg Electronics Inc. | Method and apparatus for encoding/decoding signal |
JP4768537B2 (ja) * | 2006-07-18 | 2011-09-07 | 株式会社リコー | コンテンツ閲覧システムおよびプログラム |
KR101154996B1 (ko) * | 2006-07-25 | 2012-06-14 | 엘지전자 주식회사 | 이동통신 단말기 및 그 메뉴화면 구성 방법 |
KR100800889B1 (ko) * | 2006-08-08 | 2008-02-04 | 삼성전자주식회사 | 이동 통신 단말기의 기능 항목이 표시되는 화면의 구성을변경하기 위한 방법 및 이를 위한 단말기 |
US10313505B2 (en) | 2006-09-06 | 2019-06-04 | Apple Inc. | Portable multifunction device, method, and graphical user interface for configuring and displaying widgets |
US7956849B2 (en) | 2006-09-06 | 2011-06-07 | Apple Inc. | Video manager for portable multifunction device |
US7940250B2 (en) * | 2006-09-06 | 2011-05-10 | Apple Inc. | Web-clip widgets on a portable multifunction device |
US8564544B2 (en) | 2006-09-06 | 2013-10-22 | Apple Inc. | Touch screen device, method, and graphical user interface for customizing display of content category icons |
US7864163B2 (en) | 2006-09-06 | 2011-01-04 | Apple Inc. | Portable electronic device, method, and graphical user interface for displaying structured electronic documents |
US8842074B2 (en) | 2006-09-06 | 2014-09-23 | Apple Inc. | Portable electronic device performing similar operations for different gestures |
AU2016204921C1 (en) * | 2006-09-06 | 2017-10-19 | Apple Inc. | Portable electronic device, method, and graphical user interface for displaying structured electronic documents |
US8253695B2 (en) * | 2006-09-06 | 2012-08-28 | Apple Inc. | Email client for a portable multifunction device |
US8429692B2 (en) | 2006-09-07 | 2013-04-23 | Opentv, Inc. | Method and system to search viewable content |
WO2008036685A2 (en) * | 2006-09-18 | 2008-03-27 | Sms.Ac | Billing for network enabled application through a network platform |
US20080086703A1 (en) * | 2006-10-06 | 2008-04-10 | Microsoft Corporation | Preview expansion of list items |
KR100761809B1 (ko) * | 2006-10-11 | 2007-09-28 | 삼성전자주식회사 | 휴대 단말기 및 휴대 단말기의 대기화면 표시 방법 |
EP2090096A4 (en) | 2006-10-19 | 2010-11-03 | Lg Electronics Inc | METHOD AND DEVICE FOR ENCODING; METHOD AND DEVICE FOR DECODING |
US8490117B1 (en) | 2006-10-23 | 2013-07-16 | Adobe Systems Incorporated | Bridging script engines |
US8020089B1 (en) | 2006-10-23 | 2011-09-13 | Adobe Systems Incorporated | Rendering hypertext markup language content |
US7614003B2 (en) * | 2006-10-23 | 2009-11-03 | Adobe Systems Incorporated | Rendering hypertext markup language content |
US8291346B2 (en) * | 2006-11-07 | 2012-10-16 | Apple Inc. | 3D remote control system employing absolute and relative position detection |
US20080115060A1 (en) * | 2006-11-15 | 2008-05-15 | First International Computer, Inc. | Computer user interface menu selection process |
US20130167024A1 (en) | 2006-12-05 | 2013-06-27 | Adobe Systems Incorporated | Embedded document within an application |
AU2006252194B2 (en) | 2006-12-21 | 2010-02-11 | Canon Kabushiki Kaisha | Scrolling Interface |
US20080155433A1 (en) * | 2006-12-21 | 2008-06-26 | Microsoft Corporation | Zooming task management |
AU2006252191B2 (en) | 2006-12-21 | 2009-03-26 | Canon Kabushiki Kaisha | Scrolling Interface |
AU2006252196B2 (en) | 2006-12-21 | 2009-05-14 | Canon Kabushiki Kaisha | Scrolling Interface |
US8788954B2 (en) | 2007-01-07 | 2014-07-22 | Apple Inc. | Web-clip widgets on a portable multifunction device |
US8519964B2 (en) | 2007-01-07 | 2013-08-27 | Apple Inc. | Portable multifunction device, method, and graphical user interface supporting user navigations of graphical objects on a touch screen display |
US9817436B2 (en) * | 2007-01-07 | 2017-11-14 | Apple Inc. | Portable multifunction device, method, and graphical user interface for displaying user interface objects adaptively |
US20080172614A1 (en) * | 2007-01-08 | 2008-07-17 | Varia Mobil Llc | Action-based menus for a portable media device |
US7743339B1 (en) | 2007-02-01 | 2010-06-22 | Adobe Systems Incorporated | Rendering text in a brew device |
JP4612647B2 (ja) * | 2007-03-06 | 2011-01-12 | Necカシオモバイルコミュニケーションズ株式会社 | 電子機器および電子機器の処理プログラム |
US8589779B2 (en) * | 2007-03-08 | 2013-11-19 | Adobe Systems Incorporated | Event-sensitive content for mobile devices |
KR100883117B1 (ko) * | 2007-04-10 | 2009-02-11 | 삼성전자주식회사 | Drm 컨텐츠 상세 정보 표시 방법 및 이를 이용하는 휴대단말기 |
US9933937B2 (en) | 2007-06-20 | 2018-04-03 | Apple Inc. | Portable multifunction device, method, and graphical user interface for playing online videos |
US9772751B2 (en) | 2007-06-29 | 2017-09-26 | Apple Inc. | Using gestures to slide between user interfaces |
US9116593B2 (en) | 2007-07-06 | 2015-08-25 | Qualcomm Incorporated | Single-axis window manager |
US8782555B2 (en) * | 2007-08-30 | 2014-07-15 | Microsoft Corporation | Nested user interfaces for multiple displays |
US9619143B2 (en) * | 2008-01-06 | 2017-04-11 | Apple Inc. | Device, method, and graphical user interface for viewing application launch icons |
US11126321B2 (en) | 2007-09-04 | 2021-09-21 | Apple Inc. | Application menu user interface |
US8619038B2 (en) | 2007-09-04 | 2013-12-31 | Apple Inc. | Editing interface |
US8334847B2 (en) | 2007-10-19 | 2012-12-18 | Qnx Software Systems Limited | System having user interface using object selection and gestures |
US20090113333A1 (en) * | 2007-10-26 | 2009-04-30 | Palm, Inc. | Extendable Toolbar for Navigation and Execution of Operational Functions |
US8943425B2 (en) | 2007-10-30 | 2015-01-27 | Google Technology Holdings LLC | Method and apparatus for context-aware delivery of informational content on ambient displays |
US8497842B2 (en) | 2007-11-02 | 2013-07-30 | Qnx Software Systems Limited | System having user interface using motion based object selection and mouse movement |
US7996045B1 (en) | 2007-11-09 | 2011-08-09 | Google Inc. | Providing interactive alert information |
KR20090058073A (ko) * | 2007-12-04 | 2009-06-09 | 삼성전자주식회사 | 단말 및 그의 기능 수행 방법 |
US8881049B2 (en) * | 2007-12-14 | 2014-11-04 | Apple Inc. | Scrolling displayed objects using a 3D remote controller in a media system |
US20090153475A1 (en) * | 2007-12-14 | 2009-06-18 | Apple Inc. | Use of a remote controller Z-direction input mechanism in a media system |
US8341544B2 (en) | 2007-12-14 | 2012-12-25 | Apple Inc. | Scroll bar with video region in a media system |
US8194037B2 (en) * | 2007-12-14 | 2012-06-05 | Apple Inc. | Centering a 3D remote controller in a media system |
US8004541B2 (en) * | 2008-01-28 | 2011-08-23 | Hewlett-Packard Development Company, L.P. | Structured display system with system defined transitions |
KR100900295B1 (ko) * | 2008-04-17 | 2009-05-29 | 엘지전자 주식회사 | 이동 디바이스와 이동 통신 시스템의 사용자 인터페이스방법 |
US8266187B2 (en) | 2008-02-19 | 2012-09-11 | Hewlett-Packard Development Company, L.P. | Integration of static and dynamic data for database entities and the unified presentation thereof |
US9483755B2 (en) | 2008-03-04 | 2016-11-01 | Apple Inc. | Portable multifunction device, method, and graphical user interface for an email client |
US8640040B2 (en) * | 2008-03-28 | 2014-01-28 | Sprint Communications Company L.P. | Persistent event-management access in a mobile communications device |
US8438539B2 (en) * | 2008-04-11 | 2013-05-07 | International Business Machines Corporation | Using a menu slideshow framework for generating a custom menu-driven slideshow containing definable content |
TWI366787B (en) * | 2008-04-18 | 2012-06-21 | Htc Corp | Method for displaying information contents and a electric apparatus and storage medium thereof |
JP4533943B2 (ja) * | 2008-04-28 | 2010-09-01 | 株式会社東芝 | 情報処理装置、表示制御方法およびプログラム |
US8457592B2 (en) * | 2008-05-01 | 2013-06-04 | Verizon Patent And Licensing Inc. | Configurable communications device |
US9356907B2 (en) | 2008-08-05 | 2016-05-31 | HeyWire, Inc. | Messaging system having multiple number, dual mode phone support |
EP2311277A4 (en) | 2008-08-05 | 2014-01-08 | Mediafriends Inc | SMS TECHNOLOGY FOR COMPUTER DEVICES |
US11172067B1 (en) | 2008-08-05 | 2021-11-09 | HeyWire, Inc. | Call center mobile messaging |
US20120221962A1 (en) | 2008-08-05 | 2012-08-30 | Eugene Lee Lew | Social messaging hub system |
US9014530B2 (en) | 2008-08-12 | 2015-04-21 | 2236008 Ontario Inc. | System having movie clip object controlling an external native application |
US20100064255A1 (en) * | 2008-09-05 | 2010-03-11 | Apple Inc. | Contextual menus in an electronic device |
JP5596914B2 (ja) * | 2008-09-16 | 2014-09-24 | 富士通株式会社 | 端末装置、表示制御方法、及び表示機能を備えたプログラム |
US8584031B2 (en) * | 2008-11-19 | 2013-11-12 | Apple Inc. | Portable touch screen device, method, and graphical user interface for using emoji characters |
US20100138766A1 (en) * | 2008-12-03 | 2010-06-03 | Satoshi Nakajima | Gravity driven user interface |
US20100141658A1 (en) * | 2008-12-09 | 2010-06-10 | Microsoft Corporation | Two-dimensional shadows showing three-dimensional depth |
US8453057B2 (en) * | 2008-12-22 | 2013-05-28 | Verizon Patent And Licensing Inc. | Stage interaction for mobile device |
US8793615B2 (en) * | 2008-12-22 | 2014-07-29 | Verizon Patent And Licensing Inc. | Interactive profile cards for mobile device |
EP2211259A1 (en) * | 2009-01-26 | 2010-07-28 | Research In Motion Limited | Method and apparatus for controlling a display of a portable electronic device |
US9208754B2 (en) * | 2009-01-26 | 2015-12-08 | Blackberry Limited | Method and apparatus for controlling a display of a portable electronic device |
USD631889S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD636403S1 (en) | 2009-03-27 | 2011-04-19 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US9355382B2 (en) | 2009-03-27 | 2016-05-31 | T-Mobile Usa, Inc. | Group based information displays |
US9210247B2 (en) | 2009-03-27 | 2015-12-08 | T-Mobile Usa, Inc. | Managing contact groups from subset of user contacts |
US9369542B2 (en) | 2009-03-27 | 2016-06-14 | T-Mobile Usa, Inc. | Network-based processing of data requests for contact information |
US9195966B2 (en) | 2009-03-27 | 2015-11-24 | T-Mobile Usa, Inc. | Managing contact groups from subset of user contacts |
USD636399S1 (en) | 2009-03-27 | 2011-04-19 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD631887S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD636401S1 (en) | 2009-03-27 | 2011-04-19 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD636400S1 (en) | 2009-03-27 | 2011-04-19 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US8577350B2 (en) | 2009-03-27 | 2013-11-05 | T-Mobile Usa, Inc. | Managing communications utilizing communication categories |
USD636402S1 (en) | 2009-03-27 | 2011-04-19 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US8676626B1 (en) | 2009-03-27 | 2014-03-18 | T-Mobile Usa, Inc. | Event notification and organization utilizing a communication network |
USD631890S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD631886S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US8631070B2 (en) | 2009-03-27 | 2014-01-14 | T-Mobile Usa, Inc. | Providing event data to a group of contacts |
USD633918S1 (en) | 2009-03-27 | 2011-03-08 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
USD631891S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US8428561B1 (en) | 2009-03-27 | 2013-04-23 | T-Mobile Usa, Inc. | Event notification and organization utilizing a communication network |
US8893025B2 (en) | 2009-03-27 | 2014-11-18 | T-Mobile Usa, Inc. | Generating group based information displays via template information |
US8140621B2 (en) * | 2009-03-27 | 2012-03-20 | T-Mobile, Usa, Inc. | Providing event data to a group of contacts |
USD631888S1 (en) | 2009-03-27 | 2011-02-01 | T-Mobile Usa, Inc. | Portion of a display screen with a user interface |
US9532197B1 (en) | 2009-03-30 | 2016-12-27 | Salesforce.Com, Inc. | DID line type provisioning verification |
US9542058B2 (en) * | 2009-04-21 | 2017-01-10 | Sony Corporation | System and method for interactive competitive release board |
US9384491B1 (en) | 2009-08-19 | 2016-07-05 | Allstate Insurance Company | Roadside assistance |
US9412130B2 (en) | 2009-08-19 | 2016-08-09 | Allstate Insurance Company | Assistance on the go |
US9659301B1 (en) | 2009-08-19 | 2017-05-23 | Allstate Insurance Company | Roadside assistance |
US9070243B1 (en) | 2009-08-19 | 2015-06-30 | Allstate Insurance Company | Assistance on the go |
US10453011B1 (en) | 2009-08-19 | 2019-10-22 | Allstate Insurance Company | Roadside assistance |
JP5359693B2 (ja) | 2009-08-28 | 2013-12-04 | コニカミノルタ株式会社 | 画像形成装置および画像形成方法 |
KR101427114B1 (ko) * | 2009-10-30 | 2014-08-07 | 삼성전자 주식회사 | 화상형성장치 및 화상형성장치의 타겟영역 확대 표시방법 |
JP2011108186A (ja) * | 2009-11-20 | 2011-06-02 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
CN102104673A (zh) * | 2009-12-18 | 2011-06-22 | 深圳富泰宏精密工业有限公司 | 通讯录管理系统及方法 |
US8736561B2 (en) | 2010-01-06 | 2014-05-27 | Apple Inc. | Device, method, and graphical user interface with content display modes and display rotation heuristics |
WO2011092635A1 (en) * | 2010-01-26 | 2011-08-04 | Uiyou Ltd. | Method and system for customizing a user-interface of an end-user device |
US20110199386A1 (en) * | 2010-02-12 | 2011-08-18 | Honeywell International Inc. | Overlay feature to provide user assistance in a multi-touch interactive display environment |
US8423911B2 (en) | 2010-04-07 | 2013-04-16 | Apple Inc. | Device, method, and graphical user interface for managing folders |
US10788976B2 (en) | 2010-04-07 | 2020-09-29 | Apple Inc. | Device, method, and graphical user interface for managing folders with multiple pages |
US8819566B2 (en) | 2010-05-04 | 2014-08-26 | Qwest Communications International Inc. | Integrated multi-modal chat |
US20110296354A1 (en) * | 2010-05-04 | 2011-12-01 | Qwest Communications International Inc. | Content-Driven Navigation |
US9003306B2 (en) | 2010-05-04 | 2015-04-07 | Qwest Communications International Inc. | Doodle-in-chat-context |
US9501802B2 (en) | 2010-05-04 | 2016-11-22 | Qwest Communications International Inc. | Conversation capture |
US9559869B2 (en) | 2010-05-04 | 2017-01-31 | Qwest Communications International Inc. | Video call handling |
US9356790B2 (en) | 2010-05-04 | 2016-05-31 | Qwest Communications International Inc. | Multi-user integrated task list |
US9244606B2 (en) | 2010-12-20 | 2016-01-26 | Apple Inc. | Device, method, and graphical user interface for navigation of concurrently open software applications |
US9423878B2 (en) | 2011-01-06 | 2016-08-23 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
US9015641B2 (en) | 2011-01-06 | 2015-04-21 | Blackberry Limited | Electronic device and method of providing visual notification of a received communication |
US9477311B2 (en) | 2011-01-06 | 2016-10-25 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
US9471145B2 (en) | 2011-01-06 | 2016-10-18 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
US9465440B2 (en) * | 2011-01-06 | 2016-10-11 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
US9766718B2 (en) | 2011-02-28 | 2017-09-19 | Blackberry Limited | Electronic device and method of displaying information in response to input |
US9245259B2 (en) | 2011-01-14 | 2016-01-26 | Apple Inc. | Presenting E-mail on a touch device |
US9213421B2 (en) | 2011-02-28 | 2015-12-15 | Blackberry Limited | Electronic device and method of displaying information in response to detecting a gesture |
US8620113B2 (en) | 2011-04-25 | 2013-12-31 | Microsoft Corporation | Laser diode modes |
US8760395B2 (en) | 2011-05-31 | 2014-06-24 | Microsoft Corporation | Gesture recognition techniques |
US20130067366A1 (en) * | 2011-09-14 | 2013-03-14 | Microsoft Corporation | Establishing content navigation direction based on directional user gestures |
CN103035211A (zh) * | 2011-09-29 | 2013-04-10 | 博西华电器(江苏)有限公司 | 具有液晶显示装置的家用电器及其显示方法 |
US9485411B2 (en) * | 2011-10-28 | 2016-11-01 | Canon Kabushiki Kaisha | Display control apparatus and method for controlling display control apparatus |
US8635637B2 (en) | 2011-12-02 | 2014-01-21 | Microsoft Corporation | User interface presenting an animated avatar performing a media reaction |
US9100685B2 (en) | 2011-12-09 | 2015-08-04 | Microsoft Technology Licensing, Llc | Determining audience state or interest using passive sensor data |
US9619038B2 (en) | 2012-01-23 | 2017-04-11 | Blackberry Limited | Electronic device and method of displaying a cover image and an application image from a low power condition |
US9058168B2 (en) | 2012-01-23 | 2015-06-16 | Blackberry Limited | Electronic device and method of controlling a display |
US11847300B2 (en) * | 2012-03-12 | 2023-12-19 | Comcast Cable Communications, Llc | Electronic information hierarchy |
US8898687B2 (en) | 2012-04-04 | 2014-11-25 | Microsoft Corporation | Controlling a media program based on a media reaction |
US20130290879A1 (en) * | 2012-04-30 | 2013-10-31 | Research In Motion Tat Ab | Displaying notification messages and messages on a portable electronic device |
CA2775700C (en) | 2012-05-04 | 2013-07-23 | Microsoft Corporation | Determining a future portion of a currently presented media program |
US9049261B2 (en) * | 2012-06-26 | 2015-06-02 | Google Inc. | Prioritized management and presentation of notifications |
US9256351B2 (en) * | 2012-07-20 | 2016-02-09 | Blackberry Limited | Method and electronic device for facilitating user control of a menu |
US9729695B2 (en) * | 2012-11-20 | 2017-08-08 | Dropbox Inc. | Messaging client application interface |
US8615221B1 (en) | 2012-12-06 | 2013-12-24 | Google Inc. | System and method for selection of notification techniques in an electronic device |
EP3617843A1 (en) * | 2012-12-10 | 2020-03-04 | Samsung Electronics Co., Ltd. | Mobile device, control method thereof, and ui display method |
AU350580S (en) * | 2013-02-22 | 2013-09-04 | Samsung Electronics Co Ltd | Display screen with icon for an electronic device |
US9690476B2 (en) | 2013-03-14 | 2017-06-27 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
US11073979B2 (en) | 2013-03-15 | 2021-07-27 | Arris Enterprises Llc | Non-linear navigation of data representation |
US9507495B2 (en) | 2013-04-03 | 2016-11-29 | Blackberry Limited | Electronic device and method of displaying information in response to a gesture |
JP5956963B2 (ja) * | 2013-08-29 | 2016-07-27 | 京セラドキュメントソリューションズ株式会社 | 画像形成装置及び表示プログラム |
US9405442B1 (en) | 2013-09-04 | 2016-08-02 | Ca, Inc. | List control with zoom operation |
US9792015B2 (en) * | 2013-09-19 | 2017-10-17 | Microsoft Technology Licensing, Llc | Providing visualizations for conversations |
US20150106741A1 (en) | 2013-10-15 | 2015-04-16 | Microsoft Corporation | Managing conversations |
JP6393325B2 (ja) | 2013-10-30 | 2018-09-19 | アップル インコーポレイテッドApple Inc. | 関連するユーザインターフェースオブジェクトの表示 |
USD763881S1 (en) * | 2013-11-22 | 2016-08-16 | Goldman, Sachs & Co. | Display screen or portion thereof with graphical user interface |
US8949283B1 (en) | 2013-12-23 | 2015-02-03 | Google Inc. | Systems and methods for clustering electronic messages |
US9542668B2 (en) | 2013-12-30 | 2017-01-10 | Google Inc. | Systems and methods for clustering electronic messages |
US9767189B2 (en) | 2013-12-30 | 2017-09-19 | Google Inc. | Custom electronic message presentation based on electronic message category |
US10033679B2 (en) | 2013-12-31 | 2018-07-24 | Google Llc | Systems and methods for displaying unseen labels in a clustering in-box environment |
US9152307B2 (en) * | 2013-12-31 | 2015-10-06 | Google Inc. | Systems and methods for simultaneously displaying clustered, in-line electronic messages in one display |
US9124546B2 (en) | 2013-12-31 | 2015-09-01 | Google Inc. | Systems and methods for throttling display of electronic messages |
US9306893B2 (en) | 2013-12-31 | 2016-04-05 | Google Inc. | Systems and methods for progressive message flow |
US9037455B1 (en) * | 2014-01-08 | 2015-05-19 | Google Inc. | Limiting notification interruptions |
US10360309B2 (en) | 2015-04-30 | 2019-07-23 | Salesforce.Com, Inc. | Call center SMS-MMS language router |
US9854415B2 (en) | 2015-04-30 | 2017-12-26 | HeyWire, Inc. | Call center A2P-to-P2P message routing conversion |
USD812068S1 (en) * | 2016-02-15 | 2018-03-06 | Adp, Llc | Display screen with graphical user interface |
USD812091S1 (en) * | 2016-02-15 | 2018-03-06 | Adp, Llc | Display screen with graphical user interface |
US11003627B2 (en) | 2016-04-21 | 2021-05-11 | Microsoft Technology Licensing, Llc | Prioritizing thumbnail previews based on message content |
DK201670595A1 (en) | 2016-06-11 | 2018-01-22 | Apple Inc | Configuring context-specific user interfaces |
US11816325B2 (en) | 2016-06-12 | 2023-11-14 | Apple Inc. | Application shortcuts for carplay |
WO2018013511A1 (en) | 2016-07-11 | 2018-01-18 | Salesforce.Com, Inc. | System and method to use a mobile number in conjunction with a non-telephony internet connected device |
US11748817B2 (en) | 2018-03-27 | 2023-09-05 | Allstate Insurance Company | Systems and methods for generating an assessment of safety parameters using sensors and sensor data |
US11348170B2 (en) | 2018-03-27 | 2022-05-31 | Allstate Insurance Company | Systems and methods for identifying and transferring digital assets |
WO2020018592A1 (en) | 2018-07-17 | 2020-01-23 | Methodical Mind, Llc. | Graphical user interface system |
US11170035B2 (en) * | 2019-03-29 | 2021-11-09 | Snap Inc. | Context based media curation |
US11016643B2 (en) | 2019-04-15 | 2021-05-25 | Apple Inc. | Movement of user interface object with user-specified content |
US11675476B2 (en) | 2019-05-05 | 2023-06-13 | Apple Inc. | User interfaces for widgets |
US11074408B2 (en) | 2019-06-01 | 2021-07-27 | Apple Inc. | Mail application features |
USD933692S1 (en) * | 2020-02-12 | 2021-10-19 | SpotLogic, Inc. | Computer display panel with a meeting objective editing graphical user interface for an application that optimizes interpersonal interaction |
USD923033S1 (en) | 2020-02-12 | 2021-06-22 | SpotLogic, Inc. | Computer display panel with a home screen graphical user interface for an application that optimizes interpersonal interaction |
USD932507S1 (en) * | 2020-02-12 | 2021-10-05 | SpotLogic, Inc. | Computer display panel with a meeting objective editing graphical user interface for an application that optimizes interpersonal interaction |
USD925595S1 (en) | 2020-02-12 | 2021-07-20 | SpotLogic, Inc. | Computer display panel with a graphical user interface for an application that optimizes interpersonal interaction |
USD924916S1 (en) * | 2020-02-12 | 2021-07-13 | SpotLogic, Inc. | Computer display panel with a meeting planning graphical user interface for an application that optimizes interpersonal interaction |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5588107A (en) * | 1993-03-22 | 1996-12-24 | Island Graphics Corporation | Method and apparatus for selectably expandable menus |
JP2813728B2 (ja) * | 1993-11-01 | 1998-10-22 | インターナショナル・ビジネス・マシーンズ・コーポレイション | ズーム/パン機能付パーソナル通信機 |
DE29503933U1 (de) * | 1994-03-16 | 1995-12-07 | Telefonaktiebolaget L M Ericsson, Stockholm | Gleichförmige Mensch-Maschine-Schnittstelle für zellulare Mobiltelefone |
US6075575A (en) * | 1995-10-02 | 2000-06-13 | Starsight Telecast, Inc. | Remote control device and method for using television schedule information |
FI955340A (fi) * | 1995-11-07 | 1997-05-08 | Nokia Mobile Phones Ltd | Matkapuhelimen käyttäjäliityntä |
US5774540A (en) * | 1995-11-15 | 1998-06-30 | Lucent Technologies Inc. | Hierarchical menu screen interface for displaying and accessing telephone terminal features |
DE19610637A1 (de) * | 1996-03-11 | 1997-09-18 | Mannesmann Ag | Mittel zur menugeführten Navigation in einem komplexen Datenbestand |
WO2000011540A1 (fr) * | 1998-08-24 | 2000-03-02 | Hitachi, Ltd. | Systeme, dispositif et procede d'affichage de traitement d'informations multimedia |
GB2347316A (en) * | 1999-02-22 | 2000-08-30 | Nokia Mobile Phones Ltd | Display function for a handset |
SE514282C2 (sv) * | 1999-04-22 | 2001-02-05 | Nokia Multimedia Terminals Oy | Förfarande och anordning för rullbar krysspunktnavigering i ett användargränssnitt |
JP4352518B2 (ja) * | 1999-08-06 | 2009-10-28 | ソニー株式会社 | 情報処理装置および方法、並びに記録媒体 |
US6690391B1 (en) * | 2000-07-13 | 2004-02-10 | Sony Corporation | Modal display, smooth scroll graphic user interface and remote command device suitable for efficient navigation and selection of dynamic data/options presented within an audio/visual system |
JP2002041205A (ja) * | 2000-07-21 | 2002-02-08 | Matsushita Electric Ind Co Ltd | 携帯情報端末の情報表示方法 |
GB0019459D0 (en) * | 2000-07-28 | 2000-09-27 | Symbian Ltd | Computing device with improved user interface for applications |
ATE362131T1 (de) * | 2000-10-04 | 2007-06-15 | Siemens Ag | Kraftfahrzeug-multimediasystem mit animierter anzeigefunktion |
JP2002140144A (ja) * | 2000-10-31 | 2002-05-17 | Sony Corp | 情報処理装置、メニュー表示方法及びプログラム格納媒体 |
JP2002207562A (ja) * | 2001-01-05 | 2002-07-26 | Sony Corp | 情報処理装置および方法、並びに記録媒体 |
US20030014445A1 (en) * | 2001-07-13 | 2003-01-16 | Dave Formanek | Document reflowing technique |
JP2003067101A (ja) * | 2001-08-27 | 2003-03-07 | Fujitsu Ltd | メッセージ表示プログラムおよびメッセージ表示装置 |
JP4088749B2 (ja) * | 2001-11-09 | 2008-05-21 | ソニー株式会社 | 情報処理装置および情報処理方法、並びにプログラム |
JP4313013B2 (ja) * | 2002-09-18 | 2009-08-12 | 富士通株式会社 | 携帯端末装置、その情報処理方法及び、その情報処理プログラム |
FR2849318B1 (fr) * | 2002-12-24 | 2005-02-18 | Radiotelephone Sfr | Procede de navigation optimisee dans les menus d'affichage d'un terminal mobile et terminal mobile associe |
-
2005
- 2005-02-18 US US11/061,185 patent/US20060123360A1/en not_active Abandoned
- 2005-11-14 KR KR1020050108665A patent/KR20060092989A/ko not_active Application Discontinuation
- 2005-11-14 JP JP2005329351A patent/JP2006164260A/ja active Pending
- 2005-11-26 EP EP05257279A patent/EP1667013A3/en not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101346889B1 (ko) * | 2006-11-17 | 2014-01-02 | 엘지전자 주식회사 | 조이스틱을 갖는 이동통신단말기 및 그 입력 처리방법 |
Also Published As
Publication number | Publication date |
---|---|
US20060123360A1 (en) | 2006-06-08 |
EP1667013A2 (en) | 2006-06-07 |
JP2006164260A (ja) | 2006-06-22 |
EP1667013A3 (en) | 2011-09-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20060092989A (ko) | 데이터 처리 장치 및 시스템에 대한 사용자 인터페이스 | |
KR20060092988A (ko) | 사용자 인터페이스를 구비하는 데이터 처리 장치 및 시스템 | |
JP7028935B2 (ja) | アプリケーションに対応するユーザインタフェースオブジェクトと対話するためのデバイス、方法、及びグラフィカルユーザインタフェース | |
JP7002506B2 (ja) | フォルダを管理するためのデバイス、方法及びグラフィカル・ユーザインタフェース | |
AU2016225811B2 (en) | Navigating among content items in a browser using an array mode | |
US20190391730A1 (en) | Computer application launching | |
KR101733839B1 (ko) | 사용자 인터페이스에서의 작업 공간 관리 | |
AU2011253548B2 (en) | Grouping and browsing open windows | |
KR101985291B1 (ko) | 컴퓨팅 장치용 사용자 인터페이스 | |
WO2012071352A2 (en) | Browsing and interacting with open windows | |
AU2016203061B2 (en) | Grouping and browsing open windows | |
AU2014203657B2 (en) | Grouping and browsing open windows |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E601 | Decision to refuse application | ||
N231 | Notification of change of applicant |