KR101317547B1 - 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스 - Google Patents

이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR101317547B1
KR101317547B1 KR1020117014104A KR20117014104A KR101317547B1 KR 101317547 B1 KR101317547 B1 KR 101317547B1 KR 1020117014104 A KR1020117014104 A KR 1020117014104A KR 20117014104 A KR20117014104 A KR 20117014104A KR 101317547 B1 KR101317547 B1 KR 101317547B1
Authority
KR
South Korea
Prior art keywords
emoji
subset
character keys
category
keyboard
Prior art date
Application number
KR1020117014104A
Other languages
English (en)
Other versions
KR20110089429A (ko
Inventor
브래드포드 알렌 무어
바스 오딩
엘리자베스 캐롤린 퓨체스
스테펜 제이. 쉬크
케네쓰 코씨엔다
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20110089429A publication Critical patent/KR20110089429A/ko
Application granted granted Critical
Publication of KR101317547B1 publication Critical patent/KR101317547B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202—Constructional details or processes of manufacture of the input device
    • G06F3/0219—Special purpose keyboards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H04M1/73—Battery saving arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

일부 실시예에서, 터치 스크린 디스플레이를 갖춘 휴대용 전자 장치에서 수행되는 컴퓨터 구현 방법은 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 복수의 이모지 카테고리 아이콘을 동시에 표시하는 단계를 포함한다. 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 방법은 또한 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘을 동시에 표시하는 단계를 포함한다. 방법은 또한 키보드 표시 영역에서 제스처를 검출하는 단계, 및 응답하여, 이모지 캐릭터 키들의 제1 서브세트의 표시를 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하는 단계, 및 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하는 단계를 포함한다.

Description

이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스{PORTABLE TOUCH SCREEN DEVICE, METHOD, AND GRAPHICAL USER INTERFACE FOR USING EMOJI CHARACTERS}
개시되는 실시예들은 일반적으로 전자 메시지들 및 문서들에 대한 이모지 캐릭터(emoji character)들을 제공하는 휴대용 전자 장치들에 관한 것으로서, 보다 상세하게는 전자 메시지들 및 문서들에 대한 이모지 캐릭터들을 제공하는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치들에 관한 것이다.
휴대용 전자 장치들이 더 작아지고, 주어진 장치에 의해 수행되는 기능들의 수가 증가함에 따라, 사용자들이 다기능 장치와 쉽게 상호작용할 수 있게 하는 사용자 인터페이스를 설계하는 것이 중요한 과제가 되었다. 이러한 과제는 데스크탑 또는 랩탑 컴퓨터들보다 훨씬 더 작은 스크린을 갖는 터치 감지 디스플레이를 구비한 핸드헬드 휴대용 장치들에 대해 특히 중요하다. 이러한 상황은 유감스러운데, 그 이유는 사용자 인터페이스가 사용자들이 콘텐츠를 수신하는 것뿐만 아니라 장치의 특징들, 도구들 및 기능들에 액세스하기 위한 사용자 시도들을 포함하는 사용자 액션들 또는 거동들에 응답하는 수단이기 때문이다. 일부 휴대용 통신 장치들(예컨대, 때로는 모바일 폰, 셀 폰, 셀룰러 전화 등이라고도 하는 이동 전화)은 사용자가 데이터에 액세스하고, 저장하고, 조작할 수 있게 하기 위해 더 많은 푸시 버튼들을 추가하거나, 푸시 버튼들의 밀도를 증가시키거나, 푸시 버튼들의 기능들을 오버로딩하거나, 복잡한 메뉴 시스템들을 이용하는 것에 의존하여 왔다. 이러한 통상의 사용자 인터페이스들은 종종 사용자가 기억해야 하는 키 시퀀스들 및 메뉴 계층 구조들을 복잡하게 한다.
물리적 푸시 버튼들을 포함하는 것들과 같은 많은 통상의 사용자 인터페이스들은 융통성이 없다. 이것은 사용자 인터페이스가 휴대용 장치상에서 실행되는 애플리케이션에 의해 또는 사용자들에 의해 구성 및/또는 적응되는 것을 방해할 수 있다. 이러한 융통성 없음은, 다수의 키 시퀀스들 및 메뉴 계층 구조들을 기억해야 하는 시간 소모적인 요구 및 원하는 푸시 버튼의 작동의 어려움과 결합될 때 대부분의 사용자들을 실망시킨다.
최근에, 이모지 캐릭터들의 이용을 지원하는 휴대용 전자 장치들이 개발되어 왔다. 이모지 캐릭터들은 웹 포럼들, 이메일 메시지들, 인스턴트 메시지들(예컨대, SMS 텍스트 메시지들), 노트들 및 온라인 게임들에서 종종 사용된다. 많은, 점점 증가하는 수의 이모지 캐릭터들이 존재한다. 그러나, 작은 디스플레이 스크린들을 갖춘 기존의 휴대용 전자 장치들에서 많은 수의 이모지 캐릭터를 표시하고, 체계화하고, 이용하는 것은 매우 성가시다.
따라서, 이모지 캐릭터들을 이용하기 위한 더 투명하고 효율적인 사용자 인터페이스를 구비한 터치 스크린 디스플레이를 갖춘 휴대용 전자 장치들이 필요하다. 이러한 인터페이스들은 이모지 캐릭터들과 관련된 작업들이 사용자들에 의해 더 빠르고 효율적으로 수행될 수 있게 하여, 전력을 보존하고, 휴대용 전자 장치들에서의 배터리 충전들 사이의 기간을 증가시킨다. 또한, 이러한 인터페이스들은 휴대용 전자 장치들의 유효성 및 사용자 만족도를 증가시킨다.
휴대용 장치들 상에서 이모지를 제공하고 이용하기 위한 사용자 인터페이스들과 관련된 위의 결함들 및 기타 문제들은 개시되는 휴대용 다기능 장치에 의해 줄어든다. 일부 실시예들에서, 이러한 장치는 그래픽 사용자 인터페이스(GUI)를 갖춘 터치 감지 디스플레이("터치 스크린"으로도 알려짐), 하나 이상의 프로세서, 메모리, 및 다수의 기능을 수행하기 위해 메모리에 저장된 하나 이상의 모듈들, 프로그램들 또는 명령어들의 세트들을 구비한다. 일부 실시예들에서, 사용자는 주로 터치 감지 디스플레이상에서의 손가락 접촉들 및 제스처들을 통해 GUI와 상호작용한다. 일부 실시예들에서, 기능들은 전화 통화, 화상 회의, 이메일링, 인스턴트 메시징, 블로깅, 디지털 포토그래핑, 디지털 비디오잉(digital videoing), 웹 브라우징, 디지털 뮤직 플레이잉(digital music playing) 및/또는 디지털 비디오 플레이잉을 포함할 수 있다. 이러한 기능들을 수행하기 위한 명령어들은 하나 이상의 프로세서들에 의해 실행되도록 구성되는 컴퓨터 프로그램 제품(명령어들을 저장한 컴퓨터 판독 가능 저장 매체)에 포함될 수 있다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 갖춘 휴대용 전자 장치에서 컴퓨터 구현 방법이 수행된다. 컴퓨터 구현 방법은 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역 및 복수의 이모지 카테고리 아이콘을 동시에 표시하는 단계를 포함한다. 본 명세서 및 청구항들에서 사용될 때, 텍스트 문자들은 영숫자 문자, 시노그래프(sinograph), 일어 간지 또는 가나 심벌 및/또는 다른 필기용 인간 언어 문자들을 지칭한다. 본 명세서 및 청구항들에서 사용될 때, 이모지 캐릭터들은 필기용 인간 언어들 내의 텍스트 문자들이 아닌 정지 또는 애니메이트되는 그림 문자들을 지칭한다. 이모지 카테고리 아이콘들은 복수의 이모지 카테고리에 대응한다. 컴퓨터 구현 방법은 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘 상의 제스처를 검출하는 단계; 및 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘 - 서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수 및 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 - 을 동시에 표시하는 단계를 더 포함한다. 컴퓨터 구현 방법은 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에, 키보드 표시 영역에서 제스처를 검출하는 단계; 및 키보드 표시 영역에서의 제스처의 검출에 응답하여, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하는 단계, 및 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하는 단계를 더 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 하나 이상의 프로세서; 메모리; 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 복수의 이모지 카테고리에 대응하는 복수의 이모지 카테고리 아이콘을 동시에 표시하기 위한 명령어들을 포함한다. 하나 이상의 프로그램은 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘 상의 제스처를 검출하고, 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘 - 서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수 및 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 - 을 동시에 표시하기 위한 명령어들을 더 포함한다. 프로그램들은 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에, 키보드 표시 영역에서 제스처를 검출하고, 키보드 표시 영역에서의 제스처의 검출에 응답하여, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하기 위한 명령어들을 더 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때 장치로 하여금, 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 복수의 이모지 카테고리에 대응하는 복수의 이모지 카테고리 아이콘을 동시에 표시하고; 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘 상의 제스처를 검출하고; 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘 - 서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수 및 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 - 을 동시에 표시하고; 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에, 키보드 표시 영역에서 제스처를 검출하고; 키보드 표시 영역에서의 제스처의 검출에 응답하여, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하게 하는 명령어들을 저장한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 복수의 이모지 카테고리 아이콘을 포함한다. 이모지 카테고리 아이콘들은 복수의 이모지 카테고리에 대응한다. 각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함한다. 그래픽 사용자 인터페이스는 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘도 포함한다. 서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수 및 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공한다. 문자 입력 영역, 키보드 표시 영역 및 복수의 이모지 카테고리 아이콘이 동시에 표시된다. 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트가 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘과 동시에 표시된다. 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에 키보드 표시 영역에서 제스처를 검출하는 것에 응답하여, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시가 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체되고, 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보가 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하도록 갱신된다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이, 및 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 복수의 이모지 카테고리에 대응하는 복수의 이모지 카테고리 아이콘을 동시에 표시하기 위한 수단을 포함한다. 장치는 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘 상의 제스처를 검출하기 위한 수단, 각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘을 동시에 표시하기 위한 수단을 더 포함한다. 서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수 및 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공한다. 장치는 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에, 키보드 표시 영역에서 제스처를 검출하기 위한 수단, 및 키보드 표시 영역에서의 제스처의 검출에 응답하여, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하기 위한 수단을 더 포함한다.
일부 실시예들에 따르면, 컴퓨터 구현 방법은 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에서 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에 수행된다. 방법은 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하는 단계; 및 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하는 단계를 포함한다. 방법은 터치 스크린 디스플레이 상에서 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들을 검출하는 단계; 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계; 및 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 응답을 전송하는 단계를 더 포함한다. 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들에 대응하는 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 하나 이상의 프로세서; 메모리; 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하기 위한 명령어; 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하기 위한 명령어; 터치 스크린 디스플레이 상에서 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들을 검출하기 위한 명령어; 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 명령어; 및 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 응답을 전송하기 위한 명령어를 포함한다. 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들에 대응하는 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 장치로 하여금 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하게 하는 명령어들을 저장한다. 명령어들은 또한 장치로 하여금 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고; 터치 스크린 디스플레이 상에서 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들을 검출하고; 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 응답을 전송하게 한다. 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들에 대응하는 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 적어도 일부를 포함한다. 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이가 파워 업되고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부가 터치 스크린 디스플레이 상에 표시된다. 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이 상에서 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들이 검출된다. 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 응답이 전송된다. 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들에 대응하는 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이, 및 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하기 위한 수단, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하기 위한 수단, 및 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하기 위한 수단, 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들을 터치 스크린 디스플레이 상에서 검출하기 위한 수단; 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단, 및 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 응답을 전송하기 위한 수단을 포함한다. 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처에 대응하는 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 컴퓨터 구현 방법은 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에서, 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하는 단계, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고, 들어온 메시지에 대한 복수의 사전 정의된 응답을 표시하는 단계 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -, 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하는 단계, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계, 및 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 선택된 사전 정의된 응답을 전송하는 단계를 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리 및 하나 이상의 프로그램을 포함하고, 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하기 위한 명령어, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고, 들어온 메시지에 대한 복수의 사전 정의된 응답을 표시하기 위한 명령어 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -, 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하기 위한 명령어, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 명령어, 및 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 선택된 사전 정의된 응답을 전송하기 위한 명령어를 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 장치로 하여금, 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하고, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고, 들어온 메시지에 대한 복수의 사전 정의된 응답을 표시하고 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -, 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하고, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하고, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 선택된 사전 정의된 응답을 전송하게 하는 명령어들을 저장한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 적어도 일부, 및 들어온 메시지에 대한 복수의 사전 정의된 응답을 포함한다. 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함한다. 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이가 파워 업되고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부가 터치 스크린 디스플레이 상에 표시되고, 들어온 메시지에 대한 복수의 사전 정의된 응답이 표시되고, 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션이 검출되고, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 선택된 사전 정의된 응답이 전송된다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 및 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하기 위한 수단, 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하기 위한 수단, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하기 위한 수단, 및 들어온 메시지에 대한 복수의 사전 정의된 응답을 표시하기 위한 수단 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단; 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단; 및 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 들어온 메시지에 대한 선택된 사전 정의된 응답을 전송하기 위한 수단을 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에서의 컴퓨터 구현 방법은 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하는 단계; 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하는 단계; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 복수의 사전 정의된 응답을 표시하는 단계; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하는 단계; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계; 및 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 선택된 들어온 메시지에 대한 사전 정의된 응답을 전송하는 단계를 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 하나 이상의 프로세서; 메모리; 및 하나 이상의 프로그램을 포함하고, 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하고; 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션을 검출하고 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 복수의 사전 정의된 응답을 표시하고; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하고; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 선택된 들어온 메시지에 대한 사전 정의된 응답을 전송하기 위한 명령어들을 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 장치로 하여금, 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하고; 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하고; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션을 검출하고 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 복수의 사전 정의된 응답을 표시하고; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하고; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 선택된 들어온 메시지에 대한 사전 정의된 응답을 전송하게 하기 위한 명령어들을 저장한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 적어도 일부, 및 들어온 메시지에 대한 복수의 사전 정의된 응답을 포함한다. 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함한다. 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이가 파워 업되고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부가 터치 스크린 디스플레이 상에 표시되고; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 복수의 사전 정의된 응답이 표시되고; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션이 검출되고; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 선택된 들어온 메시지에 대한 사전 정의된 응답이 전송된다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이, 및 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에, 터치 스크린 디스플레이가 전력 보존 상태에 있는 동안에, 당사자로부터 휴대용 전자 장치의 사용자에게 들어온 메시지를 수신하기 위한 수단; 들어온 메시지의 수신에 응답하여, 터치 스크린 디스플레이를 파워 업하기 위한 수단, 및 당사자로부터 사용자에게 들어온 메시지의 적어도 일부를 터치 스크린 디스플레이 상에 표시하기 위한 수단; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단 - 사전 정의된 응답들은 복수의 이모지 캐릭터를 포함함 -; 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 복수의 사전 정의된 응답을 표시하기 위한 수단; 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단; 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단; 및 선택된 들어온 메시지에 대한 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 선택된 들어온 메시지에 대한 사전 정의된 응답을 전송하기 위한 수단을 포함한다. 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에서의 컴퓨터 구현 방법은 휴대용 전자 장치가 사용자 정의 제스처 기록 모드에 있는 동안에 터치 스크린 디스플레이 상의 사용자 정의 제스처를 검출하는 단계; 사용자 정의 제스처의 표현을 생성하는 단계; 사용자 정의 제스처의 표현과 이모지 캐릭터를 연관시키는 단계; 및 사용자 정의 제스처의 표현 및 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관을 저장하는 단계를 포함한다.
일부 실시예들에서, 휴대용 전자 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함하고, 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 휴대용 전자 장치가 사용자 정의 제스처 기록 모드에 있는 동안에 터치 스크린 디스플레이 상의 사용자 정의 제스처를 검출하고; 사용자 정의 제스처의 표현을 생성하고; 사용자 정의 제스처의 표현과 이모지 캐릭터를 연관시키고; 사용자 정의 제스처의 표현 및 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관을 저장하기 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 장치로 하여금, 휴대용 전자 장치가 사용자 정의 제스처 기록 모드에 있는 동안에 터치 스크린 디스플레이 상의 사용자 정의 제스처를 검출하고; 사용자 정의 제스처의 표현을 생성하고; 사용자 정의 제스처의 표현과 이모지 캐릭터를 연관시키고; 사용자 정의 제스처의 표현 및 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관을 저장하게 하기 위한 명령어들을 저장한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 휴대용 전자 장치가 사용자 정의 제스처 기록 모드에 있는 동안에 터치 스크린 디스플레이 상의 사용자 정의 제스처를 검출하기 위한 수단; 사용자 정의 제스처의 표현을 생성하기 위한 수단; 사용자 정의 제스처의 표현과 이모지 캐릭터를 연관시키기 위한 수단; 및 사용자 정의 제스처의 표현 및 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관을 저장하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에서의 컴퓨터 구현 방법은 전자 메시지를 수신하는 단계를 포함한다. 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 표현하는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함한다. 이모지 데이터는 위치 데이터와 연관된다. 방법은 터치 스크린 디스플레이 상에 전자 메시지를 표시하는 단계; 표시된 전자 메시지 상에서 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계; 및 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 지리 맵핑 애플리케이션 내에 지리 맵을 표시하는 단계, 및 위치 데이터에 대응하는 지리 맵 상의 위치에 이모지 캐릭터를 표시하는 단계를 더 포함한다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함하고, 하나 이상의 프로그램은 메모리에 저장되고, 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은 전자 메시지를 수신하기 위한 명령어들을 포함하며, 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 표현하는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함한다. 이모지 데이터는 위치 데이터와 연관된다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에 전자 메시지를 표시하고; 표시된 전자 메시지 상에서 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 지리 맵핑 애플리케이션 내에 지리 맵을 표시하고, 위치 데이터에 대응하는 지리 맵 상의 위치에 이모지 캐릭터를 표시하기 위한 명령어들을 더 포함한다.
일부 실시예들에 따르면, 컴퓨터 판독 가능 저장 매체는 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때, 장치로 하여금, 전자 메시지를 수신하게 하는 명령어들을 저장한다. 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 표현하는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함한다. 이모지 데이터는 위치 데이터와 연관된다. 명령어들은 또한 장치로 하여금 터치 스크린 디스플레이 상에 전자 메시지를 표시하고; 표시된 전자 메시지 상에서 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 지리 맵핑 애플리케이션 내에 지리 맵을 표시하고, 위치 데이터에 대응하는 지리 맵 상의 위치에 이모지 캐릭터를 표시하게 한다.
일부 실시예들에 따르면, 터치 스크린 디스플레이를 구비한 휴대용 전자 장치 상의 그래픽 사용자 인터페이스는 전자 메시지, 지리 맵 및 이모지 캐릭터를 포함한다. 전자 메시지는 휴대용 전자 장치에 의해 수신된다. 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 표현하는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함한다. 이모지 데이터는 위치 데이터와 연관된다. 전자 메시지는 터치 스크린 디스플레이 상에 표시된다. 표시된 전자 메시지 상에서 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션을 검출하는 것에 응답하여, 지리 맵이 지리 맵핑 애플리케이션 내에 표시되고, 이모지 캐릭터가 위치 데이터에 대응하는 지리 맵 상의 위치에 표시된다.
일부 실시예들에 따르면, 휴대용 전자 장치는 터치 스크린 디스플레이; 전자 메시지를 수신하기 위한 수단을 포함하며, 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 표현하는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함하고, 이모지 데이터는 위치 데이터와 연관된다. 장치는 터치 스크린 디스플레이 상에 전자 메시지를 표시하기 위한 수단; 표시된 전자 메시지 상에서 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션을 검출하기 위한 수단; 및 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 지리 맵핑 애플리케이션 내에 지리 맵을 표시하기 위한 수단, 및 위치 데이터에 대응하는 지리 맵 상의 위치에 이모지 캐릭터를 표시하기 위한 수단을 더 포함한다.
따라서, 본 발명은 터치 감지 디스플레이를 구비한 휴대용 전자 장치들 상에서 이모지를 이용하기 위한 간단하고, 효율적이고, 사용하기 쉬운 인터페이스들을 제공한다. 이러한 인터페이스들은 사용자가 작업들을 더 빠르게 완료할 수 있게 함으로써 전력을 보존하며, 따라서 배터리 충전들 사이의 기간을 늘린다. 이러한 인터페이스들은 휴대용 전자 장치들에 대한 사용자 만족도도 향상시킨다.
본 발명의 전술한 실시예들은 물론, 본 발명의 추가적인 실시예들의 더 나은 이해를 위해, 도면들 전반에서 동일한 참조 번호들이 대응하는 요소들을 지시하는 아래의 도면들과 관련하여 아래의 실시예들에 대한 설명을 참조해야 한다.
도 1A 및 1B는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 다기능 장치들을 나타내는 블록도이다.
도 2는 일부 실시예들에 따른 터치 스크린을 구비한 휴대용 다기능 장치를 나타내는 도면이다.
도 3은 일부 실시예들에 따른 휴대용 전자 장치를 잠금 해제하기 위한 예시적인 사용자 인터페이스의 도면이다.
도 4A-4B는 일부 실시예들에 따른 휴대용 다기능 장치 상의 애플리케이션들의 메뉴를 위한 예시적인 사용자 인터페이스들의 도면이다.
도 5A-5G는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치 상에 이모지 캐릭터 키들을 제공하고 체계화하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 6A-6E는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 특정 이모지 카테고리 내의 이모지 캐릭터 서브세트들 사이를 네비게이트하고 이모지 캐릭터를 입력하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 7A-7E는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 이모지 캐릭터를 입력하고 이모지 캐릭터를 포함하는 전자 메시지를 전송하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 8A-8C는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 소프트웨어 키보드 내의 이모지 캐릭터 키들을 재구성하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 9A-9H는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 10A-10E는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 사용자 정의 제스처를 이모지 캐릭터에 할당하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 11A-11B는 일부 실시예들에 따른 전자 메시지를 통해 이모지 캐릭터를 맵 상의 위치 지시자로서 이용하기 위한 예시적인 사용자 인터페이스들의 도면이다.
도 12A-12F는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 이모지 캐릭터 키보드들을 조작하는 방법을 나타내는 흐름도이다.
도 13은 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 방법을 나타내는 흐름도이다.
도 14는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 방법을 나타내는 흐름도이다.
도 15는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 방법을 나타내는 흐름도이다.
도 16은 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 사용자 정의 제스처를 이모지에 할당하는 방법을 나타내는 흐름도이다.
도 17은 일부 실시예들에 따른 전자 메시지를 통해 이모지를 맵 상의 위치 지시자로서 이용하는 방법을 나타내는 흐름도이다.
이하, 그 예들이 첨부 도면들에 도시된 실시예들을 상세히 참조할 것이다. 아래의 상세한 설명에서는, 본 발명의 충분한 이해를 제공하기 위해 다양한 특정 상세들이 설명된다. 그러나, 이 분야의 통상의 기술자에게는 본 발명이 이러한 특정 상세들 없이도 실시될 수 있음이 명백할 것이다. 다른 예들에서는, 실시예들의 양태들을 불필요하게 불명확하게 하지 않기 위해, 공지된 방법들, 절차들, 컴포넌트들, 회로들 및 네트워크들은 상세히 설명되지 않았다.
제1, 제2 등의 용어들은 본 명세서에서 다양한 요소들을 설명하는 데 사용될 수 있지만, 이러한 요소들은 이러한 용어들에 의해 제한되지 않아야 한다는 것도 이해할 것이다. 이러한 용어들은 하나의 요소를 다른 요소와 구별하는 데에만 사용된다. 예컨대, 본 발명의 범위를 벗어나지 않고, 제1 제스처는 제2 제스처로 지칭될 수 있으며, 마찬가지로 제2 제스처는 제1 제스처로 지칭될 수 있다.
본 명세서에서 본 발명의 설명에 사용되는 용어는 특정 실시예들을 설명하기 위한 것일 뿐, 본 발명을 한정하는 것을 의도하지 않는다. 본 발명의 설명 및 첨부된 청구항들에서 사용될 때, 단수 형태들 "a", "an" 및 "the"는 문맥이 명확히 달리 지시하지 않는 한 복수 형태들도 포함하는 것을 의도한다. 본 명세서에서 사용되는 바와 같은 용어 "및/또는"은 관련된 열거 아이템들 중 하나 이상의 아이템들의 임의 및 모든 가능한 조합들을 지칭하고 포함한다는 것도 이해할 것이다. 본 명세서에서 사용될 때 "포함한다" 및/또는 "포함하는"이라는 용어들은 언급되는 특징들, 정수들, 단계들, 동작들, 요소들 및/또는 컴포넌트들의 존재를 지정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 요소들, 컴포넌트들 및/또는 이들의 그룹들의 존재 또는 추가를 배제하지 않는다는 것을 더 이해할 것이다.
본 명세서에서 사용될 때, "~하는 경우(if)"라는 용어는 문맥에 따라 "~할 때" 또는 "~시에" 또는 "~의 결정에 응답하여" 또는 "~의 검출에 응답하여"를 의미하는 것으로 해석될 수 있다. 마찬가지로, "~하는 것으로 결정되는 경우" 또는 "[언급된 조건 또는 이벤트]가 검출되는 경우"라는 문구는 문맥에 따라 "~의 결정시에" 또는 "~의 결정에 응답하여" 또는 "[언급된 조건 또는 이벤트]의 검출시에" 또는 "[언급된 조건 또는 이벤트]의 검출에 응답하여"를 의미하는 것으로 해석될 수 있다.
휴대용 다기능 장치, 그러한 장치들의 사용자 인터페이스들 및 그러한 장치들을 이용하기 위한 관련 프로세스들의 실시예들이 설명된다. 일부 실시예들에서, 장치는 PDA 및/또는 뮤직 플레이어 기능들과 같은 다른 기능들도 포함하는 이동 전화와 같은 휴대용 통신 장치이다. 휴대용 다기능 장치들의 모범적인 실시예들은 캘리포니아, 쿠퍼티노의 애플 컴퓨터사로부터의 iPhone? 및 iPod Touch? 장치들을 포함하지만, 이에 한정되지 않는다.
사용자 인터페이스는 터치 스크린 또는 터치 스크린 상에 표시되는 가상 클릭 휠에 더하여 물리적 클릭 휠을 포함할 수 있다. 클릭 휠은 휠의 각도 배치 또는 장치의 사용자에 의한 휠과의 접점에 기초하여 네비게이션 명령들을 제공할 수 있는 사용자 인터페이스 장치이다. 클릭 휠은 예를 들어 장치의 사용자가 휠의 적어도 일부 또는 휠의 중앙 위를 아래로 누를 때 하나 이상의 아이템의 선택에 대응하는 사용자 명령을 제공하는 데에도 사용될 수 있다. 대안으로, 터치 스크린 표면 상에서의 클릭 휠 이미지와의 접촉의 해제가 선택에 대응하는 사용자 명령을 지시할 수 있다. 간략화를 위해, 아래의 설명에서는 터치 스크린을 포함하는 휴대용 다기능 장치가 모범적인 실시예로서 사용된다. 그러나, 사용자 인터페이스들 및 관련 프로세스들 중 일부는 다른 휴대용 장치들에도 적용될 수 있다는 것을 이해해야 한다.
장치는 전화 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 블로깅 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 뮤직 플레이어 애플리케이션 및/또는 디지털 비디오 플레이어 애플리케이션 중 하나 이상과 같은 다양한 애플리케이션들을 지원할 수 있다.
장치상에서 실행될 수 있는 다양한 애플리케이션들은 터치 스크린과 같은 적어도 하나의 공통 물리 사용자 인터페이스 장치를 사용할 수 있다. 터치 스크린의 하나 이상의 기능은 물론, 장치 상에 표시된 대응하는 정보도 애플리케이션마다 그리고/또는 각각의 애플리케이션 내에서 조정 및/또는 변경될 수 있다. 이러한 방식으로, 장치의 공통 물리 아키텍처(터치 스크린 등)는 직관적이고 투명한 사용자 인터페이스들을 이용하여 다양한 애플리케이션들을 지원할 수 있다.
사용자 인터페이스들은 텍스트 문자들 및 이모지 캐릭터들을 입력하기 위한 또는 입력하도록 동작 가능한 소프트 키보드 실시예들을 포함할 수 있다. 소프트 키보드 실시예들은 그 전체 내용이 본 명세서에 참고로 반영된 2006년 7월 24일자로 출원된 "Keyboards For Portable Electronics Devices"라는 제목의 미국 특허 출원 제11/459,606호 및 2006년 7월 24일자로 출원된 "Touch Screen Keyboards For Portable Electronics Devices"라는 제목의 제11/459,615호에 설명된 것들과 같은 키보드의 표시된 아이콘들 상의 심벌들의 표준(QWERTY) 및/또는 비표준 구성들을 포함할 수 있다. 키보드 실시예들은 타자기에 대한 것과 같은 기존의 물리 키보드들 내의 키들의 수에 비해 감소한 수의 아이콘들(또는 소프트 키들)을 포함할 수 있다. 이것은 사용자들이 키보드 내에서 하나 이상의 아이콘, 따라서 하나 이상의 대응하는 심벌을 선택하는 것을 더 쉽게 해줄 수 있다. 키보드 실시예들은 적응적일 수 있다. 예를 들어, 표시된 아이콘들은 하나 이상의 아이콘 및/또는 하나 이상의 대응하는 심벌의 선택과 같은 사용자 액션들에 따라 변경될 수 있다. 휴대용 장치 상의 하나 이상의 애플리케이션이 공통 및/또는 상이한 키보드 실시예들을 이용할 수 있다. 따라서, 사용되는 키보드 실시예는 애플리케이션들 중 적어도 일부에 대해 맞춤화될 수 있다. 일부 실시예들에서는, 하나 이상의 키보드 실시예가 각각의 사용자에 대해 맞춤화될 수 있다. 예컨대, 하나 이상의 키보드 실시예가 각각의 사용자의 단어 사용 이력(사전 편집, 속어, 개별 사용)에 기초하여 각각의 사용자에 대해 맞춤화될 수 있다. 키보드 실시예들 중 일부는 소프트 키보드 실시예들을 이용할 때 하나 이상의 아이콘, 따라서 하나 이상의 심벌을 선택할 때 사용자 에러의 가능성을 줄이도록 조정될 수 있다. 이모지 캐릭터들을 입력하기 위한 또는 입력하도록 동작 가능한 소프트 키보드들이 아래에 더 상세히 설명된다.
이제, 장치의 실시예들을 설명한다. 도 1A 및 1B는 일부 실시예들에 따른 터치 감지 스크린(112)을 구비한 휴대용 다기능 장치(100)를 나타내는 블록도이다. 터치 감지 스크린(112)은 때때로 편의를 위해 "터치 스크린"이라고 하며, 터치 감지 디스플레이 시스템으로도 알려지거나 지칭될 수 있다. 장치(100)는 메모리(102)(하나 이상의 컴퓨터 판독 가능 저장 매체를 포함할 수 있음), 메모리 제어기(122), 하나 이상의 처리 유닛(CPU)(120), 주변 장치 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입출력(I/O) 서브시스템(106), 다른 입력 또는 제어 장치들(116) 및 외부 포트(124)를 포함할 수 있다. 장치(100)는 하나 이상의 광 센서(164)를 포함할 수 있다. 이러한 컴포넌트들은 하나 이상의 통신 버스 또는 신호 라인(103)을 통해 통신할 수 있다.
장치(100)는 휴대용 다기능 장치(100)의 일례일 뿐이며, 장치(100)는 도시된 것보다 많거나 적은 컴포넌트들을 가질 수 있거나, 둘 이상의 컴포넌트를 결합할 수 있거나, 컴포넌트들의 상이한 구성 또는 배열을 가질 수 있다는 것을 알아야 한다. 도 1A 및 1B에 도시된 다양한 컴포넌트들은 하나 이상의 신호 처리 및/또는 주문형 집적 회로를 포함하는 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어 양자의 조합으로 구현될 수 있다.
메모리(102)는 고속 랜덤 액세스 메모리를 포함할 수 있으며, 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치 또는 다른 비휘발성 반도체 메모리 장치와 같은 비휘발성 메모리를 포함할 수도 있다. CPU(120) 및 주변 장치 인터페이스(118)와 같은 장치(100)의 다른 컴포넌트들에 의한 메모리(102)의 액세스는 메모리 제어기(122)에 의해 제어될 수 있다.
주변 장치 인터페이스(118)는 장치의 입력 및 출력 주변 장치들을 CPU(120) 및 메모리(102)에 결합한다. 하나 이상의 프로세서(120)는 메모리(102)에 저장된 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 처리 또는 실행하여 장치(100)의 다양한 기능들을 수행하고 데이터를 처리한다.
일부 실시예들에서, 주변 장치 인터페이스(118), CPU(120) 및 메모리 제어기(122)는 칩(104)과 같은 단일 칩 상에 구현될 수 있다. 일부 다른 실시예들에서, 이들은 개별 칩들로서 구현될 수 있다.
무선 주파수(RF) 회로(108)는 전자기 신호들이라고도 하는 RF 신호들을 수신하고 송신한다. RF 회로(108)는 전기 신호들을 전자기 신호들로/전자기 신호들을 전기 신호들로 변환하며, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 장치들과 통신한다. RF 회로(108)는 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호 프로세서, CODEC 칩셋, 가입자 식별 모듈(SIM) 카드, 메모리 등을 포함하지만 이에 한정되지 않는, 그러한 기능들을 수행하기 위한 공지 회로를 포함할 수 있다. RF 회로(108)는 월드 와이드 웹(WWW)이라고도 하는 인터넷, 인트라넷 및/또는 셀룰러 전화 네트워크, 무선 근거리 네트워크(LAN)와 같은 무선 네트워크 및/또는 도시 영역 네트워크(MAN)와 같은 네트워크들과, 그리고 무선 통신에 의해 다른 장치들과 통신할 수 있다. 무선 통신은 GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스, Wi-Fi(Wireless Fidelity)(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일용 프로토콜(예컨대, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예를 들어, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extension), IMPS(Instant Messaging and Presence Service) 및/또는 SMS(Short Message Service)), 또는 본 명세서의 출원일 현재 아직 개발되지 않은 통신 프로토콜들을 임의의 다른 적절한 통신 프로토콜을 포함하지만 이에 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술 중 어느 하나를 이용할 수 있다.
오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 장치(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변 장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하고, 전기 신호를 스피커(111)로 전송한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 사운드파로 변환한다. 오디오 회로(110)는 또한 마이크로폰(113)에 의해 사운드파로부터 변환된 전기 신호들을 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변 장치 인터페이스(118)로 전송한다. 오디오 데이터는 주변 장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되고 그리고/또는 그들로 전송될 수 있다. 일부 실시예들에서, 오디오 회로(110)는 헤드셋 잭(예컨대, 도 2의 212)도 포함한다. 헤드셋 잭은 오디오 회로(110)와 출력 전용 헤드폰 또는 출력(예컨대, 하나 또는 양쪽 귀에 대한 헤드폰)과 입력(예를 들어, 마이크로폰) 모두를 가진 헤드셋과 같은 이동식 오디오 입출력 주변 장치들 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 다른 입력/제어 장치들(116)과 같은 장치(100) 상의 입출력 주변 장치들을 주변 장치 인터페이스(118)에 결합한다. I/O 서브시스템(106)은 디스플레이 제어기(156) 및 다른 입력 또는 제어 장치들에 대한 하나 이상의 입력 제어기(160)를 포함할 수 있다. 하나 이상의 입력 제어기(160)는 다른 입력 또는 제어 장치들(116)로부터 전기 신호를 수신하고/그들로 전기 신호를 전송한다. 다른 입력/제어 장치들(116)은 물리 버튼(예컨대, 푸시 버튼, 로커(rocker) 버튼 등), 다이얼, 슬라이더, 스위치, 조이스틱, 클릭 휠 등을 포함할 수 있다. 일부 대안 실시예들에서, 입력 제어기(들)(160)는 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 장치 중 어느 하나에 결합되거나 어느 것에도 결합되지 않을 수 있다. 하나 이상의 버튼(예를 들어, 도 2의 208)은 스피커(111) 및/또는 마이크로폰(113)의 볼륨 제어를 위한 업/다운 버튼을 포함할 수 있다. 하나 이상의 버튼은 푸시 버튼(예컨대, 도 2의 206)을 포함할 수 있다. 푸시 버튼의 신속한 누름은 터치 스크린(112)의 잠금을 해제하거나, 그 전체가 본 명세서에 참고로 반영된, 2005년 12월 23일자로 출원된 "Unlocking a Device by Performing Gestures on an Unlock Image"라는 제목의 미국 특허 출원 제11/322,549호에 설명된 바와 같이, 장치를 잠금 해제하기 위해 터치 스크린 상에서 제스처들을 이용하는 프로세스를 개시할 수 있다. 푸시 버튼(예컨대, 206)의 더 긴 누름은 장치(100)에 대한 전력을 턴온 또는 턴오프할 수 있다. 사용자는 하나 이상의 버튼의 기능을 맞춤화할 수 있다. 터치 스크린(112)은 가상 또는 소프트 버튼들 및 하나 이상의 소프트 키보드를 구현하는 데 사용된다.
터치 감지 터치 스크린(112)은 장치와 사용자 사이에 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 제어기(156)는 터치 스크린(112)으로부터 전기 신호를 수신하고 그리고/또는 전기 신호를 터치 스크린으로 전송한다. 터치 스크린(112)은 사용자에게 시각적 출력을 표시한다. 시각 출력은 그래픽, 텍스트, 아이콘, 비디오 및 이들의 임의 조합(집합적으로 "그래픽"으로 지칭됨)을 포함할 수 있다. 일부 실시예들에서, 시각 출력의 일부 또는 전부는 사용자 인터페이스 객체들에 대응할 수 있다.
터치 스크린(112)은 햅틱 및/또는 촉각 접촉에 기초하여 사용자로부터 입력을 수신하는 터치 감지 표면, 센서 또는 센서들의 세트를 구비한다. 터치 스크린(112) 및 디스플레이 제어기(156)는 (메모리(102) 내의 임의의 관련 모듈들 및/또는 명령어들의 세트들과 더불어) 터치 스크린(112) 상의 접촉(및 접촉의 임의의 움직임 또는 해제)를 검출하고, 검출된 접촉을 터치 스크린 상에 표시되는 사용자-인터페이스 객체들(예컨대, 하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지)과의 상호작용으로 변환한다. 모범적인 실시예에서, 터치 스크린(112)과 사용자 간의 접점은 사용자의 손가락에 대응한다.
터치 스크린(112)은 액정 디스플레이(LCD) 기술 또는 발광 폴리머 디스플레이(LPD) 기술을 이용할 수 있지만, 다른 디스플레이 기술들이 다른 실시예들에서 사용될 수 있다. 터치 스크린(112) 및 디스플레이 제어기(156)는 터치 스크린(112)과의 하나 이상의 접점을 결정하기 위해 용량, 저항, 적외선 및 표면 음향파 기술들은 물론, 다른 근접 센서 어레이들 또는 다른 요소들을 포함하지만 이에 한정되지 않는 현재 공지되었거나 나중에 개발될 복수의 터치 감지 기술 중 어느 하나를 이용하여 접촉 및 접촉의 임의의 움직임 또는 해제를 검출할 수 있다. 모범적인 실시예에서는, 캘리포니아, 쿠퍼티노의 애플 컴퓨터사로부터의 iPhone? 및 iPod Touch?에서 발견되는 것과 같은 투영 상호 용량 감지 기술이 이용된다.
터치 스크린(112)의 일부 실시예들에서의 터치 감지 디스플레이는 각각의 전체 내용이 본 명세서에 참고로 반영된 미국 특허 제6,323,846호(Westerman 등), 제6,570,557호(Westerman 등) 및/또는 제6,677,932호(Westerman 등) 및/또는 미국 특허 공개 2002/0015024A1에서 설명된 다중 터치 감지 태블릿들과 유사할 수 있다. 그러나, 터치 스크린(112)은 휴대용 장치(100)로부터 시각 출력을 표시하는 반면, 터치 감지 태블릿들은 시각 출력을 제공하지 않는다.
터치 스크린(112)의 일부 실시예들에서의 터치 감지 디스플레이는 (1) 2006년 5월 2일자로 출원된 미국 특허 출원 제11/381,313호 "Multipoint Touch Surface Controller"; (2) 2004년 5월 6일자로 출원된 미국 특허 출원 제10/840,862호 "Multipoint Touchscreen"; (3) 2004년 7월 30일자로 출원된 미국 특허 출원 제10/903,964호 "Gestures For Touch Sensitive Input Devices"; (4) 2005년 1월 31일자로 출원된 미국 특허 출원 제11/048,264호 "Gestures For Touch Sensitive Input Devices"; (5) 2005년 1월 18일자로 출원된 미국 특허 출원 제11/038,590호 "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices"; (6) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,758호 "Virtual Input Device Placement On A Touch Screen User Interface"; (7) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,700호 "Operation Of A Computer With A Touch Screen Interface"; (8) 2005년 9월 16일자로 출원된 미국 특허 출원 제11/228,737호 "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard"; 및 (9) 2006년 3월 3일자로 출원된 미국 특허 출원 제11/367, 749호 "Multi-Functional Hand-Held Device"에서 설명된 것과 같은 것일 수 있다. 이들 모든 출원은 그 전체가 본 명세서에 참고로 반영된다.
터치 스크린(112)은 100 dpi를 넘는 해상도를 가질 수 있다. 모범적인 실시예에서, 터치 스크린은 약 160 dpi의 해상도를 갖는다. 사용자는 스타일러스, 손가락 등과 같은 임의의 적절한 객체 또는 부속물을 이용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예들에서, 사용자 인터페이스는 터치 스크린 상의 손가락의 더 큰 접촉 면적으로 인해 스타일러스 기반 입력보다 훨씬 덜 정밀한 손가락 기반 접촉들 및 제스처들을 주로 이용하여 작업하도록 설계된다. 일부 실시예들에서, 장치는 사용자가 원하는 액션들을 수행하기 위해 대략적인 손가락 기반 입력을 정밀한 포인터/커서 위치 또는 명령으로 변환한다.
일부 실시예들에서, 장치(100)는 터치 스크린에 더하여 특정 기능들을 활성화 또는 비활성화하기 위한 터치패드(도시되지 않음)를 포함할 수 있다. 일부 실시예들에서, 터치패드는 터치 스크린과 달리 시각 출력을 표시하지 않는 장치의 터치 감지 영역이다. 터치패드는 터치 스크린(112)과 분리된 터치 감지 표면이거나, 터치 스크린에 의해 형성된 터치 감지 표면의 확장일 수 있다.
일부 실시예들에서, 장치(100)는 입력 제어 장치(116)로서 물리 또는 가상 클릭 휠을 포함할 수 있다. 사용자는 클릭 휠을 회전시키거나 클릭 휠과의 접점을 이동시킴으로써 (예를 들어, 접점의 이동량이 클릭 휠의 중심점에 대한 그의 각도 배치에 의해 측정됨) 터치 스크린(112)에 표시된 하나 이상의 그래픽 객체들(이하, 아이콘들이라 한다) 사이를 네비게이트하고 이들과 상호작용할 수 있다. 클릭 휠은 표시된 아이콘들 중 하나 이상을 선택하는 데에도 사용될 수 있다. 예를 들어, 사용자는 클릭 휠의 적어도 일부 또는 관련 버튼 위를 아래로 누를 수 있다. 클릭 휠을 통해 사용자에 의해 제공되는 사용자 명령들 및 네비게이션 명령들은 입력 제어기(160)는 물론, 메모리(102) 내의 모듈들 및/또는 명령어들의 세트들 중 하나 이상에 의해 처리될 수 있다. 가상 클릭 휠의 경우, 클릭 휠 및 클릭 휠 제어기는 각각 터치 스크린(112) 및 디스플레이 제어기(156)의 일부일 수 있다. 가상 클릭 휠의 경우, 클릭 휠은 장치와의 사용자 상호작용에 응답하여 터치 스크린 디스플레이 상에 나타나고 사라지는 불투명 또는 반투명 객체일 수 있다. 일부 실시예들에서, 가상 클릭 휠은 휴대용 다기능 장치의 터치 스크린 상에 표시되고, 터치 스크린과의 사용자 접촉에 의해 조작된다.
장치(100)는 또한 다양한 컴포넌트들에 급전하기 위한 전력 시스템(162)을 포함한다. 전력 시스템(162)은 전력 관리 시스템, 하나 이상의 전력 소스(예컨대, 배터리, 교류(AC)), 재충전 시스템, 전력 고장 검출 회로, 전력 컨버터 또는 인버터, 전력 상태 지시기(예컨대, 발광 다이오드(LED)) 및 휴대용 장치들 내의 전력의 생성, 관리 및 분배와 관련된 임의의 다른 컴포넌트들을 포함할 수 있다.
장치(100)는 하나 이상의 광 센서(164)를 더 포함할 수 있다. 도 1A 및 1B는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 결합된 광 센서를 도시한다. 광 센서(164)는 전하 결합 소자(CCD) 또는 상보형 금속-산화물-반도체(CMOS) 광 트랜지스터들을 포함할 수 있다. 광 센서(164)는 하나 이상의 렌즈를 통해 투영된 환경으로부터의 광을 수신하고, 이 광을 이미지를 표현하는 데이터로 변환한다. 광 센서(164)는 (카메라 모듈이라고도 하는) 이미징 모듈(143)과 연계하여 정지 이미지들 또는 비디오를 캡처할 수 있다. 일부 실시예들에서, 광 센서는 장치 정면의 터치 스크린 디스플레이(112)의 반대편에 장치(100)의 배면에 배치되며, 따라서 터치 스크린 디스플레이는 정지 및/또는 비디오 이미지 획득을 위한 뷰파인더로서 사용될 수 있다. 일부 실시예들에서, 광 센서는 장치의 정면에 배치되며, 따라서 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보는 동안에 사용자의 이미지가 화상 회의를 위해 취득될 수 있다. 일부 실시예들에서, 광 센서(164)의 위치는 사용자에 의해(예컨대, 장치 하우징 내의 렌즈 및 센서를 회전시킴으로써) 변경될 수 있으며, 따라서 단일 광 센서(164)가 화상 회의 및 정지 및/또는 비디오 이미지 취득 모두를 위해 터치 스크린 디스플레이와 함께 사용될 수 있다.
장치(100)는 하나 이상의 근접 센서(166)를 더 포함할 수 있다. 도 1A 및 1B는 주변 장치 인터페이스(118)에 결합된 근접 센서(166)를 도시한다. 대안으로서, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수 있다. 근접 센서(166)는 그 전체가 본 명세서에 참고로 반영된 미국 특허 출원 제11/241,839호 "Proximity Detector In Handheld Device"; 제11/240,788호 "Proximity Detector In Handheld Device"; 제11/620,702호 "Using Ambient Light Sensor To Augment Proximity Sensor Output"; 제11/586,862호 "Automated Response To And Sensing Of User Activity In Portable Devices"; 및 제11/638,251호 "Methods And Systems For Automatic Configuration Of Peripherals"에 설명된 바와 같이 동작할 수 있다. 일부 실시예들에서, 근접 센서는 다기능 장치가 사용자의 귀 근처에 배치될 때(예컨대, 사용자가 전화 통화를 행하고 있을 때) 터치 스크린(112)을 턴오프하여 디스에이블시킨다. 일부 실시예들에서, 근접 센서는 장치가 사용자의 포켓, 지갑 또는 다른 어두운 영역에 있을 때 스크린을 오프 상태로 유지하여, 장치가 잠금 상태에 있을 때 불필요한 배터리 소모를 방지한다.
장치(100)는 하나 이상의 가속도계(168)를 더 포함할 수 있다. 도 1A 및 1B는 주변 장치 인터페이스(118)에 결합된 가속도계(168)를 도시한다. 대안으로서, 가속도계(168)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수 있다. 가속도계(168)는 그 전체가 본 명세서에 참고로 포함된 미국 특허 출원 제20050190059호 "Acceleration-based Theft Detection System for Portable Electronic Devices" 및 미국 특허 출원 제20060017692호 "Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer"에 설명된 바와 같이 동작할 수 있다. 일부 실시예들에서, 정보는 하나 이상의 가속도계로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 가로 또는 세로로 표시된다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트들은 운영 체제(126), 통신 모듈(또는 명령어들의 세트)(128), 접촉/모션 모듈(또는 명령어들의 세트)(130), 그래픽 모듈(또는 명령어들의 세트)(132), 텍스트 입력 모듈(또는 명령어들의 세트)(134), 글로벌 포지셔닝 시스템(GPS) 모듈(또는 명령어들의 세트)(135) 및 애플리케이션들(또는 명령어들의 세트)(136)을 포함할 수 있다.
운영 체제(126)(예컨대, Darwin, RTXC, LINUX, UNIX, OS X, WINDOWS 또는 VxWorks와 같은 내장 운영 체제)는 일반 시스템 작업들(예를 들어, 메모리 관리, 저장 장치 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하며, 다양한 하드웨어 및 소프트웨어 컴포넌트들 사이의 통신을 돕는다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치들과의 통신을 용이하게 하며, RF 회로(108) 및/또는 외부 포트(124)에 의해 수신되는 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트들도 포함한다. 외부 포트(124)(예를 들어, 유니버설 직렬 버스(USB), FIREWIRE 등)는 다른 장치들에 직접 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 결합하도록 적응된다. 일부 실시예들에서, 외부 포트는 iPod(애플 컴퓨터사의 상표) 장치들에서 사용되는 30핀 커넥터와 동일하거나 유사하거나 그리고/또는 호환되는 다중 핀(예컨대, 30핀) 커넥터이다.
접촉/모션 모듈(130)은 터치 스크린(112)(디스플레이 제어기(156)과 연결된) 및 다른 터치 감지 장치들(예컨대, 터치패드 또는 물리 클릭 휠)과의 접촉을 검출할 수 있다. 접촉/모션 모듈(130)은 접촉이 발생하였는지의 결정(예컨대, 손가락 다운 이벤트의 검출), 접촉의 움직임이 있는지를 결정하고, 터치 스크린(112)을 가로지르는 움직임을 추적하는 것(예컨대, 하나 이상의 손가락 드래깅 이벤트의 검출) 및 접촉이 멈추었는지의 결정(예컨대, 손가락 업 이벤트 또는 접촉 해제의 검출)과 같은 접촉 검출과 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(130)은 터치 스크린(112)으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터로 표현되는 접점의 움직임의 결정은 접점의 속력(크기), 속도(크기 및 방향) 및/또는 가속도(크기 및/또는 방향의 변화)의 결정을 포함할 수 있다. 이러한 동작들은 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉들(예컨대, "다중 터치"/다수 손가락 접촉들)에 적용될 수 있다. 일부 실시예들에서, 접촉/모션 모듈(130) 및 디스플레이 제어기(156)는 터치 패드 상의 접촉도 검출한다. 일부 실시예들에서, 접촉/모션 모듈(130) 및 제어기(160)는 클릭 휠 상의 접촉을 검출한다.
접촉/모션 모듈(130)은 사용자에 의해 입력된 제스처를 검출할 수 있다. 터치 스크린(112) 상의 상이한 제스처들은 상이한 접촉 패턴들을 가질 수 있다. 따라서, 특정 접촉 패턴을 검출함으로써 제스처가 검출될 수 있다. 예컨대, 손가락 탭 제스처의 검출은 손가락 다운 이벤트를 검출한 후에 손가락 다운 이벤트와 동일한 위치에서(또는 실질적으로 동일한 위치에서)(예컨대, 소프트 키보드 내의 텍스트 문자 키 또는 이모지 캐릭터 키와 같은 버튼 스타일 사용자 인터페이스 객체의 위치에서) 손가락 업 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 스크린 상의 손가락 스와이프 제스처의 검출은 손가락 다운 이벤트를 검출한 후에 하나 이상의 손가락 드래깅 이벤트를 검출하고, 이어서 손가락 업 이벤트를 검출하는 것을 포함한다. 일부 실시예들에서, 접촉/모션 모듈(130)은 사용자 정의 제스처들을 검출한다.
그래픽 모듈(132)은 표시되는 그래픽의 강도를 변경하기 위한 컴포넌트들을 포함하는, 터치 스크린(112) 상에 그래픽을 렌더링 및 표시하기 위한 다양한 공지 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용될 때, "그래픽"이라는 용어는 텍스트, 웹페이지, 아이콘(소프트 키들을 포함하는 사용자 인터페이스 객체 등), 디지털 이미지, 비디오, 애니메이션 등을 포함하지만 이에 한정되지 않는, 사용자에게 표시될 수 있는 임의의 객체를 포함한다.
일부 실시예들에서, 그래픽 모듈(132)은 사용할 그래픽들을 표현하는 데이터를 저장한다. 각각의 그래픽은 대응하는 코드에 할당될 수 있다. 그래픽 모듈(132)은 애플리케이션 등으로부터, 필요한 경우에 좌표 데이터 및 다른 그래픽 특성 데이터와 더불어 표시될 그래픽들을 지정하는 하나 이상의 코드를 수신한 후에, 디스플레이 제어기(156)로 출력할 스크린 이미지 데이터를 생성한다.
그래픽 모듈(132)의 컴포넌트일 수 있는 텍스트 입력 모듈(134)은 다양한 애플리케이션(예컨대, 연락처(137), 이메일(140), IM(141), 브라우저(147) 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션)에서 텍스트를 입력하기 위한 소프트 키보드들을 제공한다. 텍스트 입력 모듈(134)은 또한 다양한 애플리케이션(예컨대, 이메일(140), IM(141) 및 이모지 캐릭터 입력을 사용하는 임의의 다른 애플리케이션)에서 이모지 캐릭터들을 입력하기 위한 이모지 소프트 키보드들을 제공하도록 구성된다. 일부 실시예들에서, 텍스트 입력 모듈(134)은 텍스트 및 이모지 소프트 키보드들을 입력하기 위한 소프트 키보드들을 표현하는 데이터를 저장한다.
GPS 모듈(135)은 장치의 위치를 결정하고, 다양한 애플리케이션들에서의 사용을 위해 이 정보를 (예컨대, 위치 기반 다이얼링에서 사용하기 위해 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에 그리고 날씨 위젯, 로컬 옐로 페이지 위젯 및 맵/네비게이션 위젯과 같은 위치 기반 서비스들을 제공하는 애플리케이션들에) 제공한다.
애플리케이션들(136)은 다음과 같은 모듈들(또는 명령어들의 세트들) 또는 이들의 서브세트 또는 수퍼세트를 포함할 수 있다.
ㆍ 연락처 모듈(137)(때로는 어드레스 북 또는 연락처 리스트라고 함);
ㆍ 전화 모듈(138);
ㆍ 화상 회의 모듈(139);
ㆍ 이메일 클라이언트 모듈(140);
ㆍ 인스턴트 메시징(IM) 모듈(141);
ㆍ 연습 지원 모듈(142);
ㆍ 정지 및/또는 비디오 이미지들을 위한 카메라 모듈(143);
ㆍ 이미지 관리 모듈(144);
ㆍ 비디오 플레이어 모듈(145);
ㆍ 뮤직 플레이어 모듈(146);
ㆍ 브라우저 모듈(147);
ㆍ 캘린더 모듈(148);
ㆍ 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5) 및 사용자가 취득한 다른 위젯들은 물론, 사용자 생성 위젯들(149-6)을 포함할 수 있는 위젯 모듈들(149);
ㆍ 사용자 생성 위젯들(149-6)을 생성하기 위한 위젯 생성기 모듈(150);
ㆍ 검색 모듈(151);
ㆍ 비디오 플레이어 모듈(145) 및 뮤직 플레이어 모듈(146)을 병합하는 비디오 및 뮤직 플레이어 모듈(152);
ㆍ 노트 모듈(153);
ㆍ 맵 모듈(154); 및/또는
ㆍ 온라인 비디오 모듈(155).
메모리(102)에 저장될 수 있는 다른 애플리케이션들(136)의 예는 다른 워드 프로세싱 애플리케이션들, JAVA 인에이블드 애플리케이션들, 암호화, 디지털 권리 관리, 음성 인식 및 음성 복제를 포함한다.
연락처 모듈(137)은 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여 어드레스 북에 이름(들) 추가, 어드레스 북으로부터 이름(들) 삭제, 전화 번호(들), 이메일 어드레스(들), 물리 어드레스(들) 또는 다른 정보와 이름을 연관시키는 것, 이미지와 이름을 연관시키는 것, 이름들을 카테고리화하고 분류하는 것, 전화(138), 화상 회의(139), 이메일(140) 또는 IM(141)에 의한 통신들을 개시하고 그리고/또는 촉진하기 위해 전화 번호들 또는 이메일 어드레스들을 제공하는 것 등을 포함하는 어드레스 북 또는 연락처 리스트의 관리에 사용될 수 있다.
전화 모듈(138)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여 전화 번호에 대응하는 문자들의 시퀀스를 입력하고, 어드레스 북(137) 내의 하나 이상의 전화 번호에 액세스하고, 입력된 전화 번호를 수정하고, 각각의 전화 번호를 다이얼링하고, 대화를 행하고, 대화가 끝난 때 접속 해제하거나 전화를 끊는 데에 사용될 수 있다. 전술한 바와 같이, 무선 통신은 복수의 통신 표준, 프로토콜 및 기술 중 어느 하나를 이용할 수 있다.
화상 회의 모듈(139)은 RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 리스트(137) 및 전화 모듈(138)과 연계하여 사용자와 하나 이상의 다른 참가자 사이의 화상 회의를 개시하고, 수행하고, 종료하는 데 사용될 수 있다.
이메일 클라이언트 모듈(140)은 RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여 이메일을 생성하고, 전송하고, 수신하고, 관리하는 데 사용될 수 있다. 이메일 모듈(140)은 이미지 관리 모듈(144)과 연계하여, 카메라 모듈(143)에 의해 촬영된 정지 또는 비디오 이미지들을 갖는 이메일들을 생성하고 전송하는 것을 매우 쉽게 한다. 또한, 텍스트 입력 모듈(134)은 이메일 클라이언트 모듈(140)과 연계하여 이모지를 이메일들에 삽입하는 것을 용이하게 한다.
인스턴트 메시징 모듈(141)은 RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여 인스턴트 메시지에 대응하는 문자들의 시퀀스를 입력하고, 이전에 입력된 문자들을 수정하고, 각각의 인스턴트 메시지를 (예컨대, 전화 기반 인스턴트 메시지들을 위한 단문 메시지 서비스(SMS) 또는 멀티미디어 메시지 서비스(MMS) 프로토콜을 이용하여 또는 인터넷 기반 인스턴트 메시지들을 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 전송하고, 인스턴트 메시지들을 수신하고, 수신된 인스턴트 메시지들을 보는 데 사용될 수 있다. 일부 실시예들에서, 송신 및/또는 수신되는 인스턴트 메시지들은 그래픽, 사진, 오디오 파일, 비디오 파일 및/또는 MMS 및/또는 고급 메시징 서비스(EMS)에서 지원되는 바와 같은 다른 부속물들을 포함할 수 있다. 본 명세서에서 사용될 때, "인스턴트 메시징"은 전화 기반 메시지들(예컨대, SMS 또는 MMS를 이용하여 전송된 메시지들) 및 인터넷 기반 메시지들(예컨대, XMPP, SIMPLE 또는 IMPS를 이용하여 전송된 메시지들) 모두를 지칭한다. 또한, 텍스트 입력 모듈(134)은 인스턴트 메시징 모듈(141)과 연계하여 이모지를 각각의 인스턴트 메시지에 삽입하는 것을 용이하게 한다.
연습 지원 모듈(142)은 RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 맵 모듈(154) 및 뮤직 플레이어 모듈(146)과 연계하여, (예컨대, 시간, 거리 및/또는 칼로리 연소 목표들을 갖는) 연습들을 생성하고, 연습 센서들(스포츠 장치들)과 통신하고, 연습 센서 데이터를 수신하고, 연습을 모니터링하는 데 사용되는 센서들을 교정하고, 연습용 음악을 재생하고, 연습 데이터를 표시, 저장 및 전송하는 데에 사용될 수 있다.
카메라 모듈(143)은 터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 연계하여, 정지 이미지들 또는 비디오(비디오 스트림 포함)를 캡처하여 이들을 메모리(102)에 저장하거나, 정지 이미지 또는 비디오의 특성들을 변경하거나, 메모리(102)로부터 정지 이미지 또는 비디오를 삭제하는 데에 사용될 수 있다.
이미지 관리 모듈(144)은 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 연계하여, 정지 및/또는 비디오 이미지들을 배열, 변경 또는 조작, 라벨링, 삭제, (예컨대, 디지털 슬라이드 쇼 또는 앨범 내에) 제공 및 저장하는 데에 사용될 수 있다.
비디오 플레이어 모듈(145)은 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110) 및 스피커(111)와 연계하여, (예컨대, 터치 스크린 상에 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에) 비디오를 표시, 제공 또는 재생하는 데 사용될 수 있다.
뮤직 플레이어 모듈(146)은 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 연계하여, 사용자가 MP3 또는 AAC 파일들과 같은 하나 이상의 파일 포맷으로 저장된 기록 음악 및 다른 사운드 파일들을 다운로드 및 재생할 수 있게 한다. 일부 실시예들에서, 장치(100)는 iPod(애플 컴퓨터사의 상표)와 같은 MP3 플레이어의 기능을 포함할 수 있다.
브라우저 모듈(147)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여, 웹 페이지들 또는 그의 부분들은 물론, 웹페이지들에 링크된 부속물들 및 다른 파일들을 검색, 링크, 수신 및 표시하는 것을 포함하여 인터넷을 브라우징하는 데 사용될 수 있다.
캘린더 모듈(148)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 모듈(140), 및 브라우저 모듈(147)과 연계하여, 캘린더들 및 캘린더들과 관련된 데이터(예컨대, 캘린더 엔트리, 작업 리스트(to do list) 등)를 생성, 표시, 수정 및 저장하는데 사용될 수 있다. 또한, 텍스트 입력 모듈(134)은 캘린더 모듈(148)과 연계하여, 캘린더 엔트리, 작업 리스트 등에 이모지를 삽입하는 것을 용이하게 한다.
위젯 모듈들(149)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 연계하여, 사용자에 의해 다운로드되어 사용될 수 있거나(예컨대, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)), 사용자에 의해 생성될 수 있는(예컨대, 사용자 생성 위젯(149-6)) 미니 애플리케이션들이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일 및 자바스크립트 파일을 포함한다. 일부 실시예들에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예컨대, 야후 위젯)을 포함한다.
위젯 생성기 모듈(150)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 연계하여, 사용자에 의해 위젯들을 생성(예를 들어, 웹페이지의 사용자 지정 부분을 위젯으로 변환)하는 데 사용될 수 있다.
검색 모듈(151)은 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여, 하나 이상의 검색 기준(예컨대, 하나 이상의 사용자 지정 검색 용어)과 매칭되는 메모리(102) 내의 텍스트, 음악, 사운드, 이미지, 비디오 및/또는 다른 파일들을 검색하는 데 사용될 수 있다.
노트 모듈(153)은 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 연계하여, 노트, 작업 리스트 등을 생성하고 관리하는 데 사용될 수 있다. 또한, 텍스트 입력 모듈(134)은 노트 모듈(153)과 연계하여 노트, 작업 리스트 등에 이모지를 삽입하는 것을 용이하게 한다.
맵 모듈(154)은 RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 연계하여, 맵들 및 맵들과 관련된 데이터(예컨대, 운전 방향; 특정 장소의 또는 그 근처의 상점들 및 다른 관심 지점들에 대한 데이터; 및 다른 장소 기반 데이터)를 수신, 표시, 수정 및 저장하는 데 사용될 수 있다. 또한, 텍스트 입력 모듈(134)은 맵 모듈(154)과 연계하여 맵들에 이모지를 삽입하는 것을 용이하게 한다.
온라인 비디오 모듈(155)은 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 연계하여, 사용자가 H.264와 같은 하나 이상의 파일 포맷의 온라인 비디오들에 액세스하고, 브라우징하고, (예를 들어, 스트리밍 및/또는 다운로드에 의해) 수신하고, (예컨대, 터치 스크린 상에서 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에서) 재생하고, 특정 온라인 비디오에 대한 링크를 갖는 이메일을 전송하고, 아니면 관리할 수 있게 한다. 일부 실시예들에서는, 이메일 클라이언트 모듈(140)이 아니라, 인스턴트 메시징 모듈(141)이 특정 온라인 비디오에 대한 링크를 전송하는 데 사용된다. 온라인 비디오 애플리케이션에 대한 추가 설명은 2007년 6월 20일자로 출원된 미국 특허 가출원 제60/936,562호 "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos" 및 2007년 12월 31일자로 출원된 미국 특허 출원 제11/968,067호 "Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos"에서 발견할 수 있으며, 이들의 내용은 그 전체가 본 명세서에 참고로 반영된다.
저술한 모듈들 및 애플리케이션들의 각각은 전술한 하나 이상의 기능을 수행하기 위한 명령어들의 세트에 대응한다. 이러한 모듈들(즉, 명령어들의 세트들)은 개별 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 따라서 다양한 실시예들에서 이러한 모듈들의 다양한 서브세트들이 결합되거나, 재배열될 수 있다. 예컨대, 비디오 플레이어 모듈(145)은 뮤직 플레이어 모듈(146)과 더불어 단일 모듈(예컨대, 비디오 및 뮤직 플레이어 모듈(152), 도 1B)로 결합될 수 있다. 일부 실시예들에서, 메모리(102)는 전술한 모듈들 및 데이터 구조들의 서브세트를 저장할 수 있다. 더욱이, 메모리(102)는 전술하지 않은 추가 모듈들 및 데이터 구조들을 저장할 수 있다.
일부 실시예들에서, 장치(100)는 장치 상의 기능들의 사전 정의된 세트의 동작이 터치 스크린(112) 및/또는 터치 패드를 통해서만 수행되는 장치이다. 터치 스크린 및/또는 터치 패드를 장치(100)의 동작을 위한 주요 입력/제어 장치로서 사용함으로써, 장치(100) 상의 (푸시 버튼, 다이얼 등과 같은) 물리 입력/제어 장치들의 수가 감소할 수 있다.
터치 스크린 및/또는 터치 패드를 통해서만 수행될 수 있는 기능들의 사전 정의된 서브세트는 사용자 인터페이스들 간의 네비게이션을 포함한다. 일부 실시예들에서, 터치 패드는 사용자에 의해 터치될 때 장치(100)를 장치(100) 상에 표시될 수 있는 임의의 사용자 인터페이스로부터 메인, 홈 또는 루트 메뉴로 네비게이트한다. 이러한 실시예들에서, 터치 패드는 "메뉴 버튼"으로 지칭될 수 있다. 일부 다른 실시예들에서, 메뉴 버튼은 터치 패드 대신에 물리 푸시 버튼 또는 다른 물리 입력/제어 장치일 수 있다.
도 2는 일부 실시예들에 따른 터치 스크린(112)을 구비한 휴대용 다기능 장치(100)를 나타낸다. 터치 스크린은 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 표시할 수 있다. 이 실시예는 물론, 다른 실시예들에서, 사용자는 예를 들어 (도면에서 축척으로 도시되지 않은) 하나 이상의 손가락(202)으로 그래픽들을 접촉 또는 터치함으로써 그래픽들 중 하나 이상을 선택할 수 있다. 일부 실시예들에서, 하나 이상의 그래픽의 선택은 사용자가 하나 이상의 그래픽과의 접촉을 해제할 때 발생한다. 일부 실시예들에서, 접촉은 하나 이상의 탭, 하나 이상의 스와이프(좌에서 우로, 우에서 좌로, 위로 및/또는 아래로) 및/또는 장치(100)와 접촉한 손가락의 롤링(우에서 좌로, 좌에서 우로, 위로 및/또는 아래로)과 같은 제스처를 포함할 수 있다. 일부 실시예들에서, 그래픽과의 우연한 접촉은 그래픽을 선택하지 못할 수 있다. 예컨대, 애플리케이션 아이콘 위를 스치는 스와이프 제스처는 선택에 대응하는 제스처가 탭일 때 대응하는 애플리케이션을 선택하지 못할 수 있다.
장치(100)는 "홈" 또는 메뉴 버튼(204)과 같은 하나 이상의 물리 버튼도 포함할 수 있다. 전술한 바와 같이, 메뉴 버튼(204)은 장치(100) 상에서 실행될 수 있는 애플리케이션들의 세트 내의 임의의 애플리케이션(136)으로 네비게이트하는 데 사용될 수 있다. 대안으로서, 일부 실시예들에서, 메뉴 버튼은 터치 스크린(112) 내의 GUI 내의 소프트 키로서 구현된다.
일 실시예에서, 장치(100)는 터치 스크린(112), 메뉴 버튼(204), 장치를 파워 온/오프하고 장치를 잠그기 위한 푸시 버튼(206), 볼륨 조정 버튼(들)(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드셋 잭(212) 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버튼(206)은 버튼을 누르고, 버튼을 누른 상태로 사전 정의된 기간 동안 유지함으로써 장치 상의 전력을 턴 온/오프시키고; 버튼을 누르고, 사전 정의된 기간이 지나기 전에 버튼을 누름 해제함으로써 장치를 잠그고; 그리고/또는 장치를 잠금 해제하거나 잠금 해제 프로세스를 개시하는 데 사용될 수 있다. 대안 실시예에서, 장치(100)는 마이크로폰(113)을 통해 일부 기능들의 활성화 및 비활성화를 위한 구두 입력을 수신할 수도 있다.
도 3은 일부 실시예들에 따른 휴대용 전자 장치를 잠금 해제하기 위한 예시적인 사용자 인터페이스를 나타낸다. 일부 실시예들에서, 사용자 인터페이스(300)는 다음 요소들, 또는 이들의 서브세트 또는 수퍼세트를 포함한다.
ㆍ 장치를 잠금 해제하기 위한 손가락 제스처에 의해 이동되는 잠금 해제 이미지(302);
ㆍ 잠금 해제 제스처에 대한 시각적 큐를 제공하는 화살표(304);
ㆍ 잠금 해제 제스처에 대한 추가 큐들을 제공하는 채널(306);
ㆍ 시간(308);
ㆍ 날(310);
ㆍ 날짜(312); 및
ㆍ 벽지 이미지(314).
일부 실시예들에서, 장치는 장치가 사용자 인터페이스 잠금 상태에 있는 동안에 터치 감지 디스플레이와의 접촉(예를 들어, 잠금 해제 이미지(302) 상의 또는 그 근처의 사용자 손가락의 접촉)을 검출한다. 장치는 접촉에 따라 잠금 해제 이미지(302)를 이동시킨다. 장치는 검출된 접촉이 채널(306)을 가로지르는 잠금 해제 이미지의 이동과 같은 사전 정의된 제스처에 대응하는 경우에 사용자 인터페이스 잠금 해제 상태로 전환한다. 역으로, 장치는 검출된 접촉이 사전 정의된 제스처에 대응하지 않는 경우에는 사용자 인터페이스 잠금 상태를 유지한다. 전술한 바와 같이, 장치를 잠금 해제하기 위해 터치 스크린 상의 제스처들을 이용하는 프로세스들은 2005년 12월 23일자로 출원된 "Unlocking A Device By Performing Gestures On An Unlock Image"라는 제목의 미국 특허 출원 제11/322,549호, 및 2005년 12월 23일자로 출원된 제11/322,550호 "Indication Of Progress Towards Satisfaction Of A User Input Condition"에 설명되어 있으며, 이들 전체는 본 명세서에 참고로 포함된다.
도 4A 및 4B는 일부 실시예들에 따른 휴대용 다기능 장치 상의 애플리케이션들의 메뉴에 대한 예시적인 사용자 인터페이스를 나타낸다. 일부 실시예들에서, 사용자 인터페이스(400A)는 다음 요소들, 또는 이들의 서브세트 또는 수퍼세트를 포함한다.
ㆍ 셀룰러 및 Wi-Fi 신호들과 같은 무선 통신(들)에 대한 신호 강도 지시자(들)(402);
ㆍ 시간(404);
ㆍ 배터리 상태 지시자(406);
ㆍ 다음과 같은 자주 사용되는 애플리케이션들에 대한 아이콘들을 갖는 트레이(408):
ㆍ 놓친 통화들 또는 음성 메일 메시지들의 수의 지시자(414)를 포함할 수 있는 전화(138);
ㆍ 읽지 않은 이메일들의 수의 지시자(410)를 포함할 수 있는 이메일 클라이언트(140);
ㆍ 브라우저(147); 및
ㆍ 뮤직 플레이어(146); 및
ㆍ 다음과 같은 다른 애플리케이션들에 대한 아이콘들:
ㆍ IM(141);
ㆍ 이미지 관리(144);
ㆍ 카메라(143);
ㆍ 비디오 플레이어(145);
ㆍ 날씨(149-1);
ㆍ 주식(149-2);
ㆍ 연습 지원(142);
ㆍ 캘린더(148);
ㆍ 계산기(149-3);
ㆍ 알람 시계(149-4);
ㆍ 사전(149-5); 및
ㆍ 사용자 생성 위젯(149-6).
일부 실시예들에서, 사용자 인터페이스(400B)는 다음 요소들, 또는 이들의 서브세트 또는 수퍼세트를 포함한다.
ㆍ 전술한 바와 같은 402, 404, 406, 141, 148, 144, 143, 149-3, 149-2, 149-1, 149-4, 410, 414, 138, 140 및 147;
ㆍ 맵(154);
ㆍ 노트(153);
ㆍ 아래에 더 설명되는 바와 같은 장치(100) 및 그의 다양한 애플리케이션들(136)의 설정들에 대한 액세스를 제공하는 설정들(412);
ㆍ iPod(애플 컴퓨터사의 상표) 모듈(152)이라고도 하는 비디오 및 뮤직 플레이어 모듈(152); 및
ㆍ YouTube(구글사의 상표) 모듈(155)이라고도 하는 온라인 비디오 모듈(155).
일부 실시예들에서, UI(400A 또는 400B)는 위젯 기반 애플리케이션들 및 비 위젯 기반 애플리케이션들 모두에 대한 통합 액세스를 제공한다. 일부 실시예들에서, 위젯들 모두는 사용자 생성 위젯인지의 여부에 관계없이 UI(400A 또는 400B)에 표시된다. 다른 실시예들에서, 사용자 생성 위젯(149-6)에 대한 아이콘의 활성화는 사용자 생성 위젯들 또는 사용자 생성 위젯들에 대응하는 아이콘들을 포함하는 다른 UI로 안내할 수 있다.
일부 실시예들에서, 사용자는 예를 들어, 본 명세서에 그 전체가 참고로 반영된, 2006년 7월 24일자로 출원된 미국 특허 출원 제11/459,602호 "Portable Electronic Device With Interface Reconfiguration Mode"에 설명된 프로세스들을 이용하여 UI(400A 또는 400B) 내의 아이콘들을 재배열할 수 있다. 예를 들어, 사용자는 손가락 제스처들을 이용하여 애플리케이션 아이콘들을 트레이(408) 안팎으로 이동시킬 수 있다.
도 5A-5G는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100) 상에 이모지 캐릭터 키들을 제공하고 체계화하기 위한 예시적인 사용자 인터페이스를 나타낸다. 이 도면들의 개요가 여기에 제공된다.
도 5A는 인스턴트 메시징 애플리케이션(141) 내의 사용자 인터페이스(500A)를 나타낸다. 이 예에서 도시된 바와 같이, 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하기 위한 또는 표시하도록 동작 가능한 문자 입력 영역(5000)이 제공된다. 전술한 바와 같이, 본 명세서 및 청구항들에서 사용될 때, 문자 입력은 영숫자 문자, 시노그래프, 일어 간지 또는 가나 심벌 및/또는 다른 필기용 인간 언어 문자들을 지칭하며, 이모지 캐릭터들은 필기용 인간 언어들 내의 텍스트 문자들이 아닌 정지 또는 애니메이트되는 그림 문자들을 지칭한다. 복수의 이모지 카테고리 아이콘(5010)을 포함할 수 있는 키보드 표시 영역(5005)도 사용자 인터페이스(500A) 내에 제공된다. 이모지 카테고리 아이콘들(5010)은 복수의 이모지 카테고리, 예를 들어 가장 최근에 빈번하게 사용된 사람, 자연, 객체, 여행, 심벌 및/또는 계절 이모지 카테고리에 대응한다. UI(500A)에 표시된 모범적인 실시예에서, 이모지 카테고리 아이콘(5010-1)은 가장 최근에 자주 사용된 시계에 대응하고, 이모지 카테고리 아이콘(5010-2)은 사람에 대응하고, 이모지 카테고리 아이콘(5010-3)은 자연에 대응하고, 이모지 카테고리 아이콘(5010-4)은 객체에 대응하고, 이모지 카테고리 아이콘(5010-5)은 여행에 대응하고, 이모지 카테고리 아이콘(5010-6)은 심벌에 대응한다.
UI(500A)는 표시되는 각각의 이모지 카테고리에 대한 키보드 표시 영역(5005) 내의 예시적인 이모지 캐릭터 키들(5015)도 포함한다. 예시적인 UI(500A)에서, 표시되는 이모지 캐릭터 키들(즉, 5015-1, 5015-2, 5015-3)은 '가장 최근에 자주 사용된' 이모지 카테고리에 대응하는데, 그 이유는 가장 최근에 자주 사용된 이모지 카테고리 아이콘(5010-1)이 현재 선택되었기 때문이다. 현재 선택된 이모지 카테고리 아이콘(5010)은 통상적으로 예를 들어 선택되지 않은 이모지 카테고리 아이콘들에 대해 그의 배경 컬러를 강조하거나 변경함으로써 선택되지 않은 이모지 카테고리 아이콘들과 시각적으로 구별된다.
일부 실시예들에서, 이모지 카테고리 아이콘(5010-1)에 대응하는 이모지 카테고리 내의 이모지 캐릭터 키들, 즉 가장 최근에 자주 사용된 이모지 캐릭터들은 사용된 이모지 캐릭터들에 대한 사용의 최신성은 물론, 사용 빈도를 분석하는 알고리즘에 기초하여 표시를 위해 선택된다. 알고리즘은 이모지 캐릭터 사용의 이력 리스트를 생성한다. 이력 리스트 내의 각각의 엔트리는 이력 리스트 내의 엔트리의 위치에 기초하는 상대적 가중치를 부여받는다. 예컨대, 가장 최근에 사용된 이모지 캐릭터는 최고 가중치를 받고, 두 번째로 가장 최근에 사용된 이모지 캐릭터는 가장 최근에 사용된 이모지 캐릭터보다 낮은 가중치를 받고, 세 번째로 가장 최근에 사용된 이모지 캐릭터는 두 번째로 가장 최근에 사용된 이모지 캐릭터보다 낮은 가중치를 받고, 기타 등등이다. 이어서, 각각의 상이한 이모지 캐릭터에 대해, 그 이모지 캐릭터에 대한 상대 가중치들을 조합(예컨대, 합산)함으로써 전체 스코어가 결정된다. 예컨대, 이력 리스트 내의 제2, 제10 및 제20 위치들을 차지하는 이모지 캐릭터의 경우, 그 이모지 캐릭터에 대한 전체 스코어는 이력 리스트 내의 제2, 제10 및 제20 위치들에 주어진 상대 가중치들의 합이다. 이어서, 최고의 전체 스코어를 갖는 이모지 캐릭터들이 '가장 최근에 자주 사용된' 이모지 카테고리 내에 (예컨대, 스코어 내림차순으로) 표시된다.
이러한 모범적인 실시예에서, UI(500A)는 키보드 선택 아이콘(5020)도 포함한다. 일부 실시예들에서, 키보드 선택 아이콘(5020)은 예를 들어 터치 스크린 디스플레이의 하부를 따르는 사전 정의된 영역(5009) 내에 복수의 이모지 카테고리 아이콘(5010)과 동시에 표시된다. 일부 실시예들에서, 키보드 선택 아이콘(5020)은 이모지 캐릭터 키들의 표시를 키보드 표시 영역(5005) 내의 텍스트 문자 입력 키보드(예컨대, 도 5G의 5055)의 표시로 대체하는 데 사용된다. 또한, UI(500A)는 송신 아이콘(5025)을 포함하며, 이 아이콘은 (예를 들어, 손가락 탭 제스처에 의해) 활성화될 때 영역(5000) 내의 전자 메시지 입력의 전송을 개시한다. UI(500A)는 삭제 아이콘(5011)도 포함하며, 이 아이콘은 (예컨대, 손가락 탭 제스처에 의해) 활성화될 때 입력 영역(5000) 내의 하나 이상의 문자를 삭제한다.
UI(500B)(도 5B)는 이모지 카테고리 아이콘(5010-2)의 강조에 의해 선택되는 것으로 시각적으로 지시되는 각각의 이모지 카테고리, 여기서는 사람에 대한 서브세트-시퀀스-지시 아이콘들(5040)을 포함하는 키보드 표시 영역(5005)을 나타낸다. 서브세트 시퀀스 지시 아이콘들(5040)은 현재 표시되는 이모지 카테고리 내의 서브세트들의 수는 물론, 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공한다. 여기서, 서브세트 시퀀스 지시 아이콘들(5040)은 사람 이모지 카테고리 내에 6개의 이모지 캐릭터 키들의 서브세트가 존재하고, 사람 이모지 카테고리 내의 첫 번째 서브세트가 현재 표시되고 있음을 지시한다. 다른 예로서, 도 6A-6C의 서브세트 시퀀스 지시 아이콘들(6000)에 대한 아래의 설명을 참고한다.
도 5C 내지 5F에 도시된 UI(500C), UI(500D), UI(500E) 및 UI(500F)는 각각 다른 예시적인 이모지 카테고리들 및 이모지 캐릭터 키보드들을 갖는 사용자 인터페이스들의 예들을 나타낸다.
UI(500G)(도 5G)는 키보드 표시 영역(5005) 내의 텍스트 문자 입력 키보드(5055)를 나타낸다. 일부 실시예들에서, 키보드(5055)는 텍스트 문자 입력 카테고리 아이콘(5060)을 포함하며, 이 아이콘은 (예컨대, 아이콘 상의 손가락 탭 제스처에 의한) 활성화시에 숫자 키들 및 다른 텍스트 문자 입력 키들을 갖는 대안적인 텍스트 문자 키보드를 표시한다. 일부 실시예들에서, 키보드(5055)는 하이브리드 목적의 키(5062)를 포함하며, 이 키는 공간 문자들을 입력하도록 동작할 수 있고, 또한 텍스트 문자들을 입력할 때 자동 완료 및/또는 자동 정정들을 확인하도록 동작할 수 있다. 예컨대, 일어 텍스트를 입력할 때, 일부 실시예들은 음성 텍스트의 이용을 허가한다. 장치가 사용자에 의해 입력된 텍스트 문자들을 평가할 때, 이미 입력된 텍스트에 대해 추천되는 하나 이상의 단어의 완료 후보가 제공된다. 예컨대, 사용자가 문자들 "ra"를 타이핑하는 경우, "rain"이 완료 후보로서 추천될 수 있다. 이어서, "rain" 완료 후보가 표시되는 동안(도시되지 않음), (예컨대, 키(5062) 상의 손가락 탭 제스처에 의한) 하이브리드 목적 키(5062)의 활성화는 "rain"이 입력하기로 의도한 텍스트임을 확인시키며, 장치는 문자들의 열 "rain"을 문자 입력 영역(5000)에 삽입할 것이다. 일부 실시예들에서는, 시노그래프들 또는 일어 가나 문자들이 완료 후보들로서 제공될 수 있다. 일부 실시예들에서, 키보드(5055)는 하이브리드 목적 키(5063)를 포함하며, 이 키는 반환 문자를 입력하도록 동작 가능하고, 또한 액션들에 대한 자동 완료를 확인하도록 동작 가능하다. 예컨대, 사용자가 문자들 "goo"를 타이핑할 경우, 장치는 Google 검색 엔진으로 가는 것을 액션 완료 후보로서 추천할 수 있다. 이어서, (예컨대, 키(5063) 상의 손가락 탭 제스처에 의한) 하이브리드 목적 키(5063)의 활성화는 장치가 브라우징 모듈(147)을 열고, Google 검색 엔진을 위한 웹페이지를 표시하게 할 것이다. 키보드(5055)는 키보드 선택 아이콘(5020)도 포함한다. 또한, 키보드(5055)는 많은 가운데 특히 5065-1("Q"), 5065-2("A") 및 5065-3("S")과 같은 텍스트 문자 입력 키들(5065)을 포함한다.
도 6A-6E는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100) 상에서 특정 이모지 카테고리 내의 이모지 캐릭터 서브세트들 사이를 네비게이트하고 이모지 캐릭터를 입력하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 도면들의 개요가 여기에 제공된다.
UI(600A)(도 6A)는 이모지 카테고리 아이콘(5010-3)의 강조에 의해 선택되는 것으로 시각적으로 지시되는 현재 표시된 이모지 카테고리, 여기서는 자연에 대한 서브세트 시퀀스 지시 아이콘들(6000-1, 6000-2, 6000-3)을 나타낸다. 서브세트 시퀀스 지시 아이콘들(6000-1, 6000-2, 6000-3)은 현재 표시되는 이모지 카테고리 내의 서브세트들의 수는 물론, 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 대한 정보를 제공한다. 예컨대, UI(600A)에서, 지시 아이콘들(6000)의 수는 이 이모지 카테고리(자연) 내에 3개의 서브세트가 존재함을 지시한다. 또한, 아이콘들(6000-2, 6000-3)에 대한 아이콘(6000-1)의 시각적 강조는 이 카테고리 내의 제1 서브세트(6015)가 표시되고 있음을 지시한다.
일부 실시예들에서는, 키보드 표시 영역(5005) 내의 제스처(예컨대, 제스처 6010(도 6A), 즉 수평 또는 실질적으로 수평인 손가락 스와이프 제스처)의 검출시에, 이모지 캐릭터 키들(6015)의 제1 서브세트가 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들(6020, 도 6B)의 제2 서브세트의 표시로 대체된다. 또한, 일부 실시예들에서, 서브세트 시퀀스 지시 아이콘들에 의해 제공되는 정보는 표시된 이모지 캐릭터 키들(6015)의 제1 서브세트가 이모지 캐릭터 키들(6020)의 제2 서브세트로 대체된 것을 반영하도록 갱신된다. 이 예에서는, UI(600A) 내에서 서브세트 시퀀스 지시 아이콘(6000-1)이 강조되는데, 그 이유는 자연 카테고리 내의 이모지 캐릭터 키들(6015)의 제1 서브세트가 표시되기 때문이다. 이모지 캐릭터 키들(6015)의 제1 서브세트가 이모지 캐릭터 키들(6020)의 제2 서브세트(도 6B)로 대체될 때, 서브세트 시퀀스 지시 아이콘(6000-2)이 대신 강조된다. 일부 실시예들에서는, 현재 표시되는 이모지 캐릭터 키들의 서브세트에 대응하는 서브세트 시퀀스 지시 아이콘이 강조되거나 시각적으로 구별되는 반면, 표시된 이모지 캐릭터 키들의 서브세트에 대응하는 다른 서브세트 시퀀스 지시 아이콘의 강조 또는 시각적 구별이 종료된다.
위에서 어느 정도 이미 설명된 UI(600B)(도 6B)는 키보드 표시 영역(5005) 내의 다른 제스처(예를 들어, 제스처 6025, 즉 수평 또는 실질적으로 수평인 손가락 스와이프 제스처)의 검출을 나타낸다. 제스처(6025)의 검출에 응답하여, 이모지 캐릭터 키들(6020)의 제2 서브세트가 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들(6040)(도 6C)의 제3 서브세트의 표시로 대체된다. 따라서, UI(600C)(도 6C)에 도시된 바와 같이, 서브세트 시퀀스 지시 아이콘(6000-2) 대신에 서브세트 시퀀스 지시 아이콘(6000-3)이 강조된다.
UI(600C)(도 6C)는 키보드 표시 영역(5005) 내의 다른 제스처(예컨대, 제스처 6030, 즉 제스처(6025)의 방향과 실질적으로 반대인 수평 또는 실질적으로 수평인 손가락 스와이프 제스처)의 검출을 나타낸다. 제스처(6030)의 검출에 응답하여, 이모지 캐릭터 키들(6040)의 제3 서브세트가 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들(6020)(도 6B)의 제2 서브세트의 표시로 대체된다. 따라서, 서브세트 시퀀스 지시 아이콘(6000-3) 대신에 서브세트 시퀀스 지시 아이콘(6000-2)이 강조된다(도 6B).
UI(600C)(도 6C)는 또한 이모지 키(6050) 상의 사용자 제스처(6045)(예컨대, 손가락 탭 제스처)를 나타낸다. UI(600D)(도 6D)는 사용자 제스처(6045)에서의 손가락 접촉이 여전히 (도 6C에 도시된) 이모지 키(6050) 상에 있는 동안에 표시되는 키 선택 아이콘(6060)을 나타낸다. 키 선택 아이콘(6060)은 사용자의 손가락이 터치 스크린 디스플레이 상의 손가락 접촉의 현재 위치에서 터치 스크린 디스플레이로부터 들어 올려지는(접촉을 해제하는) 경우에 선택되는 키를 나타낸다. 일부 실시예들에서, 선택된 이모지 캐릭터, 이 예에서는 이모지 키(6050)에 대응하는 이모지 캐릭터의 이미지(6061)가 키 선택 아이콘(6060) 내에 표시된다.
UI(600E)(도 6E)는 선택된 이모지 캐릭터, 이 예에서는 제스처(6045)의 검출에 응답하여 문자 입력 영역(5000) 내에 표시되는, 이모지 키(6050)에 대응하는 이모지 캐릭터의 이미지(6070)를 나타낸다.
도 7A-7E는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100) 상에서 이모지 캐릭터를 입력하고 이모지 캐릭터를 포함하는 전자 메시지를 전송하기 위한 예시적인 사용자 인터페이스들을 도시한다. 이 도면들의 개요가 여기에 제공된다.
UI(700A) 내지 UI(700C)는 전술한 것과 유사한 방식의 이모지 캐릭터의 사용자 선택을 나타낸다. UI(700A)에서, 사용자 제스처(7001)(예컨대, 손가락 탭 제스처)의 검출에 응답하여 이모지 키(7000)가 선택된다. UI(700B)(도 7B)는 제스처(7001)에 사용된 손가락이 이모지 키(7000)에 대응하는 영역과 접촉을 유지하고 있는 동안에 표시되는 키 선택 아이콘(7010)을 나타낸다.
UI(700C)(도 7C)는 제스처(7001)의 검출에 응답하여 문자 입력 영역(5000) 내에 표시된 선택된 이모지 캐릭터의 이미지(7025)를 나타낸다. 송신 아이콘(5025)(도 7D) 상의 사용자 제스처(예컨대, 손가락 탭 제스처 7026, 도 7D)의 검출에 응답하여, 영역(5000) 내에 입력된 텍스트 문자들 및 이모지 캐릭터들이 전자 메시지로서 다른 당사자(예컨대, 도 7D 및 7E의 john appleseed로) 전송된다.
이 예에서, 이모지 캐릭터는 인스턴트 메시지 내에 입력되고 전송된다. 그러나, 이 분야의 통상의 기술자는 이모지 캐릭터가 이메일(140)과 같은 다른 타입의 전자 메시지들 및 문서들 내에 입력되고 전송될 수도 있다는 것을 이해할 것이다.
도 8A-8C는 일부 실시예들에 따른 터치 감지 스크린(112)을 구비한 휴대용 전자 장치(100) 상에서 소프트웨어 키보드 내의 이모지 캐릭터 키들을 재구성하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 프로세스는 사용자가 (예컨대, 사용자에 의한 더 효율적인 입력을 위해 이모지 캐릭터 키 위치들을 최적화하기 위해) 휴대용 전자 장치 상의 이모지 캐릭터 키들을 재배열하기 위한 간단하고 효율적인 메커니즘을 제공한다.
UI(800A)(도 8A)는 이모지 키들(8001-1, 8001-2)을 포함하는 복수의 이모지 캐릭터 키(8002)를 갖는 키보드 표시 영역(5005)을 나타낸다. 사용자 인터페이스는 사전 정의된 사용자 인터페이스 재구성 프로세스를 개시하기 위한 사전 정의된 사용자 액션(예컨대, 임의의 이모지 캐릭터 키(8001)를 누르고 그 위의 손가락 접촉(8005)을 사전 결정된 기간보다 오랫동안 유지함)을 검출하도록 구성된다.
UI(800B)(도 8B)는 일부 실시예들에서 사전 정의된 사용자 액션(8005)의 검출시에 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들(8001)이 각각의 이모지 캐릭터 키의 각각의 평균 위치 상에 실질적으로 중심을 갖는 영역 내에서 진동(예컨대, 진동들 8020-1, 8020-2, 8020-3 등)하는 것을 나타낸다. 이러한 진동들은 장치가 현재 인터페이스 재구성 모드에 있고, 진동하는 아이콘들이 재배열될 수 있다는 간단한 시각적 지시자를 제공한다.
UI(800B)는 또한 일부 실시예들에서 장치가 사용자가 복수의 이모지 캐릭터 키(8002) 내의 제1 이모지 캐릭터 키(8001-2)에 대응하는 제1 위치에서 터치 스크린 디스플레이(112)와 접점(8050)을 만드는 것을 검출하고, 터치 스크린 디스플레이(112) 상에서 접점(8050)의 제2 위치(8025)로의 이동을 검출하는 것을 도시한다. 일부 실시예들에서, 사용자 인터페이스는 접점(8050)의 검출된 이동에 따라 터치 스크린 디스플레이(112) 상에서 제1 이모지 캐릭터 키(8001-2)의 제2 위치(8025)로의 이동을 표시할 것이다.
UI(800C)(도 8C)에서, 사용자 인터페이스는 사전 정의된 사용자 인터페이스 재구성 프로세스를 종료하기 위한 제2의 사전 정의된 사용자 액션의 검출(예컨대, 홈 버튼(204)의 작동의 검출)에 응답하여 제1 이모지 캐릭터 키(8001-2)의 위치를 제2 위치에 고정한다. 도시된 예에서, 최종 결과로서, 이모지 캐릭터 키들(8001-1, 8001-2)은 UI(800A)와 비교할 때 UI(800C) 내에서 바뀐 위치들을 갖는다.
도 9A-9H는 일부 실시예들에 따른 터치 감지 스크린(112)을 구비한 휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지로 메시지들에 응답하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 도면들의 개요가 여기에 설명된다.
UI(900A)(도 9A)는 사용자 인터페이스 잠금 모드에 있는 예시적인 사용자 인터페이스를 도시한다. 위의 도 3의 설명도 참고한다. 사용자 인터페이스 잠금 해제 모드에서, 장치(100)는 그의 정상 동작 상태에 있으며, 사용자 인터페이스와의 상호작용에 대응하는 사용자 입력을 검출하고 응답한다. 잠금 해제 모드에 있는 장치(100)는 잠금 해제된 장치(100)로서 설명될 수 있다. 잠금 해제된 장치(100)는 사용자 인터페이스들 사이를 네비게이트하기 위한 사용자 입력, 데이터의 입력 및 기능들의 활성화 또는 비활성화를 검출하고 응답한다. 사용자 인터페이스 잠금 해제 모드와 달리, 사용자 인터페이스 잠금 모드에서는, 제어 아이콘들 중 제한된 서브세트만이 표시되고, 장치(100)는 손가락 제스처들의 제한된 세트에만 응답한다. 예컨대, 잠금 해제 이미지(302), 화살표(304) 및 채널(306)만이 벽지 이미지(314)와 함께 표시된다(UI 900A). 또한, 후술하는 바와 같이, 이모지 캐릭터들을 포함하는 적은 수의 사전 정의된 응답들이 표시될 수 있으며, 그리고/또는 사용자 인터페이스 잠금 모드에 있는 동안에 수신된 메시지들에 응답하기 위해 적은 수의 제스처들이 사용될 수 있다.
UI(900B)(도 9B)는 사용자 인터페이스가 사용자 인터페이스 잠금 모드에 있는 동안에 당사자(2210)(여기서는 "Jane Doe")로부터 휴대용 전자 장치의 사용자에게 들어오는 메시지를 수신하는 것을 나타내며, 당사자(2210)로부터 들어온 메시지(2212)의 적어도 일부가 터치 스크린 디스플레이(112) 상에서 사용자에게 표시된다.
UI(900C)(도 9C)는 사용자 인터페이스가 터치 스크린 디스플레이(112) 상에서 이모지 캐릭터에 대응하는 하나 이상의 사전 정의된 손가락 제스처들(예컨대, 탭 제스처들(9100-1, 9100-2) 및 스와이프 제스처(9100-3))을 검출하는 것을 나타낸다. 일부 실시예들에서, 이러한 하나 이상의 사전 정의된 손가락 제스처들과 이모지 캐릭터 사이의 대응은 도 10A-10E 및 도 16과 관련하여 후술하는 바와 같이 하나 이상의 사전 정의된 손가락 제스처들을 이모지 캐릭터에 할당함으로써 이루어진다. 일부 실시예들에서, 사용자 인터페이스는 또한 들어온 메시지(2212)에 응답하여 전송을 개시하기 위한 사전 정의된 사용자 액션(예컨대, 스와이프 제스처(2213))을 검출한 후에, 들어온 메시지(2212)에 대한 응답을 전송하며, 이 응답은 터치 스크린 디스플레이(112) 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들(예컨대, 9100-1, 9100-2, 9100-3)에 대응하는 이모지 캐릭터를 포함한다.
UI(900D)(도 9D)는 일부 실시예들에서 사용자 인터페이스가 들어온 메시지(2212)에 대한 복수의 사전 정의된 응답(9110)을 표시할 수 있으며, 사전 정의된 응답들(예컨대, 9110-1, 9110-2, 9110-3)이 복수의 이모지 캐릭터(예컨대, 9111-1, 9111-2, 9111-3)를 포함함을 도시한다. UI(900D)에서, 각각의 사전 정의된 응답(9110)은 단일 이모지 캐릭터(9111)를 포함한다. 더 일반적으로, 다른 사전 정의된 응답들(9110)은 둘 이상의 이모지 캐릭터를 포함할 수 있으며, 일부 사전 정의된 응답들(9110)은 어떠한 이모지 캐릭터도 포함하지 않을 수 있다(도시되지 않음).
UI(900E)(도 9E)는 사전 정의된 응답(예컨대, 응답 9110-1)을 선택하기 위한 사용자 액션(예컨대, 탭 제스처 9120)의 검출을 도시한다. 사용자는 이모지 캐릭터들을 포함하는 사전 정의된 응답들의 리스트로부터 빠르게 선택하여, 선택된 응답을 장치의 잠금 해제 없이 전송할 수 있다. 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출은 또한 사용자에 의한 임의의 추가 액션의 검출 없이 사전 정의된 응답의 전송을 개시한다. 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출 후에, 홈 버튼(204)의 작동의 검출, "송신" 버튼(도시되지 않음)의 작동의 검출 또는 채널(306)을 가로질러 잠금 해제 이미지(302)를 이동시키는 것으로 보이는 슬라이딩 손가락 제스처(2213)의 검출(이 경우, 채널(306) 내의 "slide to view" 메시지가 도 9E의 "slide to send response" 메시지 또는 유사한 메시지로 바뀔 수 있다)과 같이, 응답 전송을 개시하기 위한 추가적인 사전 정의된 사용자 액션이 검출된다.
UI(900F)(도 9F)는 장치가 후속적으로 잠금 해제된 후의 메시징 애플리케이션 내의 사용자 인터페이스를 나타내며, 이는 장치가 잠금 상태에 있는 동안에 전송된 사전 정의된 응답(9110-1)을 보여준다.
UI(900G) 및 UI(900H)(각각 도 9G 및 9H)는 사전 정의된 응답들(9110-4, 9110-5, 9110-6)이 텍스트 문자들과 이모지 캐릭터들의 조합이 아니라 이모지 캐릭터들만으로 구성된다는 점 외에는 UI(900E) 및 UI(900F)(각각 도 9E 및 9F)와 유사하다. 유사하게, 도 9H 내의 전송되는 사전 정의된 응답(9110-4)은 도 9G 내의 사전 정의된 응답(9110-4)에 대응하며, 이모지 캐릭터(9225)만으로 구성된다.
도 10A-10E는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100) 상에서 이모지 캐릭터에 사용자 정의 제스처를 할당하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 도면들의 개요가 여기에 제공된다.
UI(1000A)(도 10A)는 사용자 정의 제스처들을 기록하기 위한 예시적인 사용자 인터페이스를 나타낸다. UI(1000A)는 기록 아이콘(1001), 연관 아이콘(1010), 저장 아이콘(1015) 및 취소 아이콘(1016)을 포함한다. 기록 아이콘(1001) 상의 사용자 제스처(1020)의 검출시, 사용자 인터페이스는 제스처 기록 모드에 들어간다. UI(1000B)(도 10B)는 제스처 기록 모드에 있는 동안에 터치 스크린(112) 상에서 검출된 사용자 정의 제스처(1030)를 나타낸다. 일부 실시예들에서는, 연관 아이콘(1010) 상의 제스처(예컨대, 도 10C의 손가락 탭 제스처(1040))의 검출에 응답하여, 사용자 정의 제스처(1030)의 표현을 이모지 캐릭터와 연관시키기 위한 프로세스가 개시되며, 이 프로세스는 이모지 캐릭터 키들을 갖는 하나 이상의 사용자 인터페이스(예컨대, 도 10D의 UI(1000D))를 표시하는 단계를 포함할 수 있다. 일부 실시예들에서, 이모지 캐릭터 키들을 갖는 사용자 인터페이스들은 UI들(도 5A-F의 500A-500F)과 유사하지만, 여기서 사용자 인터페이스들은 전자 메시지 또는 문서에 입력하기 위한 이모지 캐릭터를 선택하는 것이 아니라 이모지를 사용자 정의 제스처(1030)와 연관시키는 데 사용된다. 이모지 캐릭터 키 상의 제스처(예컨대, 도 10D의 이모지 키(1060) 상의 손가락 탭 제스처(1070))의 검출에 응답하여, 사용자 정의 제스처(1030)의 표현이 이모지 캐릭터 키(1060)에 대응하는 이모지 캐릭터와 연관된다(또는 사용자 확인시까지 임시로 연관된다). 일부 실시예들에서, 확인 UI(예컨대, 도 10E의 UI(1000E))는 (예컨대, 도 10E의 손가락 탭 제스처(1080)에 의한) 저장 아이콘(1015)의 활성화가 검출된 후에 사용자 정의 제스처(1030)와 연관될 이모지 캐릭터(1075)를 표시한다. (예컨대, 손가락 탭 제스처에 의한) 취소 아이콘(1016)의 활성화에 응답하여, 이모지 캐릭터에 사용자 정의 제스처를 할당하는 프로세스가 종료된다.
도 11A-11B는 일부 실시예들에 따른 이모지 캐릭터를 전자 메시지를 통해 맵 상의 위치 지시자로서 이용하기 위한 예시적인 사용자 인터페이스들을 나타낸다. 이 도면들의 개요가 여기에 제공된다.
UI(1100A)(도 11A)는 인스턴트 메시징 애플리케이션(141) 내에 표시된 전자 메시지(2216)를 나타낸다. 전자 메시지는 지리 맵핑 애플리케이션을 개시하기 위한 명령어들, 지리 맵 상의 위치를 나타내는 위치 데이터 및 이모지 캐릭터를 나타내는 이모지 데이터를 포함한다. 이모지 데이터는 위치 데이터와 연관된다. 메시지 상의 사전 정의된 사용자 액션(예컨대, Lake Tahoe에 대한 링크(2220) 상의 손가락 탭 제스처(1105))의 검출에 응답하여, 장치는 지리 맵핑 애플리케이션(154) 내에 지리 맵(예컨대, 도 11B의 맵(1115))을 표시하고, 장치는 위치 데이터에 대응하는 지리 맵(1115) 상의 위치에 이모지 캐릭터(1120)(도 11B)를 표시한다.
도 5A-11C 내의 사용자 인터페이스들의 일부는 아래의 도 12A-12F 및 도 13-17에서 설명되는 프로세스들을 설명하는 데 사용된다.
도 12A-12F는 일부 실시예들에 따른 터치 감지 디스플레이를 구비한 휴대용 전자 장치상에서 이모지 캐릭터 키보드들을 조작하기 위한 방법을 나타내는 흐름도들이다. 방법(1200)은 터치 스크린 디스플레이를 구비한 휴대용 전자 장치(예컨대, 휴대용 다기능 장치(100)) 상에서 수행된다. 방법은 휴대용 전자 장치상에서 이모지 캐릭터들을 체계화하고 선택하기 위한 더 효율적인 수단을 제공하여, 전력을 보존하고, 배터리 충전 간격을 증가시키고, 장치에 대한 사용자 만족을 증가시킨다.
휴대용 전자 장치는 문자 입력 영역(예컨대, 도 6A의 영역(5000)), 키보드 표시 영역(예컨대, 도 6A의 영역(5005)) 및 복수의 이모지 카테고리 아이콘(예컨대, 도 6A의 아이콘들(5010))을 동시에 표시한다(1202). 문자 입력 영역(5005)은 사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하거나, 표시하도록 동작할 수 있다.
이모지 카테고리 아이콘들은 복수의 이모지 카테고리(예를 들어, 도 6A의 5010-1 내지 5010-6)에 대응한다. 일부 실시예들에서, 복수의 이모지 카테고리 아이콘은 사용자에 의해 최근에 빈번하게 선택된 복수의 이모지 캐릭터에 대응하는 최근에 빈번하게 사용된 이모지 카테고리 아이콘(예컨대, 도 6A의 최근에 빈번하게 사용된 이모지 카테고리 아이콘(5010-1))을 포함한다(1204). 일부 실시예들에서, 복수의 이모지 카테고리 아이콘은 특정 계절(예컨대, 봄, 여름, 가을 또는 겨울)과 관련된 복수의 이모지 캐릭터에 대응하는 계절 이모지 카테고리 아이콘을 포함한다(1206). 일부 실시예들에서, 복수의 이모지 카테고리 아이콘은 특정 휴일(예컨대, 크리스마스 또는 신년)과 관련된 복수의 이모지 캐릭터에 대응하는 휴일 이모지 카테고리 아이콘을 포함한다(1208).
일부 실시예들에서, 복수의 이모지 카테고리 아이콘(5010)은 키보드 표시 영역(5005)(도 6A) 내에 표시된다(1210).
장치는 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘(5010) 상의 제스처를 검출한다(1212). 일부 실시예들에서, 제스처는 손가락 탭 제스처(예컨대, 도 5A의 카테고리 아이콘(5010-3) 상의 탭 제스처(5007))일 수 있다.
각각의 이모지 카테고리 아이콘 상의 제스처의 검출에 응답하여, 장치는 키보드 표시 영역(5005) 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트(예컨대, 도 6A의 서브세트 6015) 및 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘(예컨대, 도 6A의 서브세트 시퀀스 지시 아이콘들(6000))을 동시에 표시한다(1214).
각각의 이모지 카테고리는 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함한다. 예컨대, 도 6A-6C의 자연 이모지 카테고리는 키보드 표시 영역(5005) 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 3개 서브세트, 즉 도 6A의 제1 서브세트(6015), 도 6B의 제2 서브세트(6020) 및 도 6C의 제3 서브세트(6040)를 포함한다.
서브세트 시퀀스 지시 아이콘들은 각각의 이모지 카테고리 내의 서브세트들의 수는 물론, 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 대한 정보를 제공한다. 예컨대, 도 6A-6C에서, 서브세트 시퀀스 지시 아이콘들(6000-1, 6000-2, 6000-3)은 자연 이모지 카테고리(5010-3) 내에 이모지 캐릭터 키들의 3개 서브세트가 존재함을 지시한다. 또한, 제1 서브세트(6015)가 표시될 때 아이콘(6000-1)이 강조되고(도 6A); 제2 서브세트(6020)가 표시될 때 아이콘(6000-2)이 강조되며(도 6B); 제3 서브세트(6040)가 표시될 때 아이콘(6000-3)이 강조된다(도 6C). 일부 실시예들에서, 서브세트 시퀀스 지시 아이콘들은 원, 정사각형, 직사각형 또는 별과 같은 간단한 기하 형상을 갖는다.
일부 실시예들에서는, 적어도 하나의 이모지 카테고리 내의 이모지 캐릭터 키들을 이모지 캐릭터 사용 데이터에 따라 배열한다(1216). 일부 실시예들에서, 이모지 캐릭터 사용 데이터는 휴대용 전자 장치상에서 실행되는 소프트웨어 애플리케이션들로부터의 이모지 캐릭터 사용 데이터를 포함한다(1218). 일부 실시예들에서, 이모지 캐릭터 사용 데이터는 휴대용 전자 장치의 서비스 제공자로부터 수신된(예컨대, 다운로드된) 이모지 캐릭터 사용 데이터를 포함한다(1220). 일부 실시예들에서는, 적어도 하나의 이모지 카테고리 내의 이모지 캐릭터 키들을 이모지 캐릭터 인기 데이터에 따라 배열한다(1222).
일부 실시예들에서는, 키보드 표시 영역에 서브세트 시퀀스 지시 아이콘들을 표시한다(1224)(예컨대, 도 6A의 영역(5005)에 서브세트 시퀀스 지시 아이콘들(6000)을 표시한다).
키보드 표시 영역에 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 동안에, 장치는 키보드 표시 영역 내의 제스처를 검출한다(1226). 예컨대, 장치는 영역(5005)(도 6A) 내에서 수평 또는 실질적으로 수평인 손가락 스와이프 제스처(6010)를 검출한다.
키보드 표시 영역 내의 제스처의 검출에 응답하여, 장치는 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 표시된 이모지 캐릭터 키들의 제1 서브세트의 이모지 캐릭터 키들의 제2 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신한다(1228). 예컨대, 키보드 표시 영역(5005) 내의 수평 손가락 스와이프 제스처(6010)의 검출에 응답하여, 장치는 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6015)(도 6A)의 제1 서브세트의 표시를 키보드 표시 영역(5005) 내의 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6020)(도 6B)의 제2 서브세트의 표시로 대체하고, 표시된 이모지 캐릭터 키들(6015)의 제1 서브세트의 이모지 캐릭터 키들(6020)의 제2 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들(6000)에 의해 제공된 정보를 갱신한다. 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보의 갱신은 이모지 캐릭터 키들의 제2 서브세트에 대응하는 서브세트 시퀀스 지시 아이콘을 강조하거나 시각적으로 구별하고, 이모지 캐릭터 키들의 제1 서브세트에 대응하는 다른 서브세트 시퀀스 지시 아이콘의 강조 또는 시각적 구별을 종료하는 것(예를 들어, 도 6B에서 아이콘(6000-2)을 강조하고, 아이콘(6000-1)의 강조를 종료하는 것)을 포함할 수 있지만, 이에 한정되지 않는다.
일부 실시예들에서, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하는 단계는 터치 스크린 디스플레이로부터 벗어나는 이모지 캐릭터 키들의 제1 서브세트의 애니메이션을 표시하는 단계(1230)를 포함한다. 예컨대, 도 6A와 6B 사이에, 터치 스크린 디스플레이(112)로부터 벗어나는 서브세트(6015)의 애니메이션이 표시될 수 있다.
일부 실시예들에서, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하는 단계는 터치 스크린 디스플레이 상에서 이동하는 이모지 캐릭터 키들의 제2 서브세트의 애니메이션을 표시하는 단계(1232)를 포함한다. 예컨대, 도 6A와 6B 사이에, 터치 스크린 디스플레이(112) 상에서 이동하는 서브세트(6020)의 애니메이션이 표시될 수 있다.
일부 실시예들에서, 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하는 단계는 터치 스크린 디스플레이로부터 벗어나는 이모지 캐릭터 키들의 제1 서브세트의 애니메이션을 표시하고, 터치 스크린 디스플레이 상에서 이동하는 이모지 캐릭터 키들의 제2 서브세트의 애니메이션을 표시하는 단계(1234)를 포함한다. 예를 들어, 도 6A와 6B 사이에, 터치 스크린 디스플레이(112)로부터 벗어나는 서브세트(6015) 및 터치 스크린 디스플레이(112) 상에서 이동하는 서브세트(6020)의 애니메이션이 표시될 수 있다.
일부 실시예들에서, 장치는 키보드 표시 영역 내에 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트를 표시하는 동안에 키보드 표시 영역 내의 제스처를 검출한다. 예컨대, 장치는 서브세트(6020)(도 6B)를 표시하는 동안에 영역(5005) 내에서 수평 또는 실질적으로 수평인 손가락 스와이프 제스처(6025)를 검출한다. 키보드 표시 영역 내의 제스처(예컨대, 제스처 6025)의 검출에 응답하여, 장치는 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시로 대체한다(1236). 또한, 키보드 표시 영역 내의 제스처(예컨대, 제스처 6025)의 검출에 응답하여, 장치는 표시된 이모지 캐릭터 키들의 제2 서브세트의 이모지 캐릭터 키들의 제3 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신한다(1236). 예컨대, 키보드 표시 영역(5000) 내의 수평 손가락 스와이프 제스처(6025)의 검출에 응답하여, 장치는 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6020)(도 6B)의 제2 서브세트의 표시를 키보드 표시 영역(5005) 내의 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6040)(도 6C)의 제3 서브세트의 표시로 대체하고, 표시된 이모지 캐릭터 키들(6020)의 제2 서브세트의 이모지 캐릭터 키들(6040)의 제3 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들(6000)에 의해 제공된 정보를 갱신한다. 정보의 갱신은 이모지 캐릭터 키들의 제3 서브세트에 대응하는 서브세트 시퀀스 지시 아이콘을 강조하거나 시각적으로 구별하고, 이모지 캐릭터 키들의 제2 서브세트에 대응하는 다른 서브세트 시퀀스 지시 아이콘의 강조 또는 시각적 구별을 종료하는 것(예컨대, 도 6C에서 아이콘(6000-3)을 강조하고, 아이콘(6000-2)의 강조를 종료하는 것)을 포함할 수 있지만, 이에 한정되지 않는다.
일부 실시예들에서, 이모지 캐릭터 키들의 제2 서브세트를 표시하는 동안에 검출되는 제스처는 제1 방향의 스와이프 제스처(예컨대, 도 6B의 우에서 좌로의 스와이프 제스처 6025)이다. 장치가 터치 스크린 디스플레이 상에서 키보드 표시 영역 내에서 제1 방향과 실질적으로 반대인 방향의 제2 스와이프 제스처(예컨대, 도 6C의 좌에서 우로의 스와이프 제스처 6030)를 검출하는 것에 응답하여, 장치는 각각의 이모지 캐릭터에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 표시된 이모지 캐릭터 키들의 제3 서브세트의 이모지 캐릭터 키들의 제2 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신한다(예컨대, 이모지 캐릭터 키들의 제2 서브세트에 대응하는 서브세트 시퀀스 지시 아이콘을 강조하거나 시각적으로 구별하고, 이모지 캐릭터 키들의 제3 서브세트에 대응하는 다른 서브세트 시퀀스 지시 아이콘의 강조 또는 시각적 구별을 종료한다)(1238). 예컨대, 터치 스크린 디스플레이 상에서 키보드 표시 영역(5005) 내에서 제스처(6025)(도 6B)의 방향과 실질적으로 반대인 방향의 스와이프 제스처(도 6C의 6030)를 검출하는 것에 응답하여, 장치는 자연 이모지 캐릭터에 대한 이모지 캐릭터 키들(6040)의 제3 서브세트의 표시를 키보드 표시 영역(5005) 내의 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6020)의 제2 서브세트의 표시로 대체하고, 표시된 이모지 캐릭터 키들의 제3 서브세트의 이모지 캐릭터 키들의 제2 서브세트에 의한 대체를 반영하도록 서브세트 시퀀스 지시 아이콘들(6000)에 의해 제공된 정보를 갱신한다(예컨대, 이모지 캐릭터 키들(6020)의 제2 서브세트에 대응하는 서브세트 시퀀스 지시 아이콘(6000-2)을 강조하거나 시각적으로 구별하고, 이모지 캐릭터 키들(6040)의 제3 서브세트에 대응하는 다른 서브세트 시퀀스 지시 아이콘(6000-3)의 강조 또는 시각적 구별을 종료한다).
일부 실시예들에서, 장치는 키보드 선택 아이콘(예컨대, 도 6B의 아이콘 5020)을 표시한다. 일부 실시예들에서, 키보드 선택 아이콘(5020)은 (예컨대, 터치 스크린 디스플레이의 하부를 따르는 사전 정의된 영역(5009)에) 복수의 이모지 카테고리 아이콘(5010)과 함께 동시에 표시된다. 장치는 키보드 선택 아이콘 상의 제스처(예컨대, 도 6B의 손가락 탭 제스처 6055)를 검출한다. 키보드 선택 아이콘 상의 제스처를 검출한 후에, 장치는 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시를 키보드 표시 영역 내의 텍스트 문자 입력 키보드의 표시로 대체한다(1240). 예컨대, 키보드 선택 아이콘(5020) 상의 탭 제스처(6055)를 검출한 후에, 장치는 자연 이모지 카테고리에 대한 이모지 캐릭터 키들(6020)(도 6B)의 제2 서브세트의 표시를 키보드 표시 영역(5005)(도 5G) 내의 텍스트 문자 입력 키보드(5055)의 표시로 대체한다. 일부 실시예들에서, 이모지 캐릭터 키들(6020)의 제2 서브세트는 제스처(6055)의 검출에 응답하여 텍스트 문자 입력 키보드(5055)로 대체된다. 일부 실시예들에서는 특정 텍스트 문자 입력 키보드(예컨대, 영숫자 키보드, 가나 키보드 또는 간지 키보드)가 선택되어 영역(5005)에 표시되기 전에 하나 이상의 중간 텍스트 문자 입력 키보드 선택 UI들이 표시된다.
일부 실시예들에서, 장치는 텍스트 문자 입력 키보드(예컨대, 도 5G의 키보드 5055)를 이용하여 사용자가 입력한 하나 이상의 단어를 수신한다. 장치는 사용자가 입력한 하나 이상의 단어를 문자 입력 영역(5000)에 표시한다. 텍스트 문자 입력 키보드를 이용하여 사용자가 입력한 하나 이상의 단어의 수신에 응답하여, 장치는 사용자가 입력한 하나 이상의 단어에 적어도 부분적으로 기초하여 추천할 이모지 캐릭터를 결정하고, 장치는 추천할 이모지 캐릭터를 터치 스크린 디스플레이 상에 표시한다(1242). 추천할 이모지 캐릭터의 결정은 사용자가 입력한 구두점이 아니라 사용자가 입력한 단어들에 기초한다. 예컨대, 사용자가 단어 "rain"을 타이핑하는 경우, 우산 및/또는 빗방울들의 이모지 캐릭터가 추천될 수 있다. 유사하게, 사용자가 단어 "fly"를 입력하는 경우, 비행기의 이모지 캐릭터가 추천될 수 있다. 일부 실시예들에서는, 단일 이모지 캐릭터가 추천된다. 다른 실시예들에서는 복수의 이모지 캐릭터가 추천된다. 일부 실시예들에서, 장치는 터치 스크린 디스플레이 상의 제스처(예컨대, 텍스트 문자 입력 키보드 내의 스페이스 바 상의 탭 제스처 또는 추천된 이모지 캐릭터 상의 탭 제스처)를 검출한다. 그러한 제스처의 검출에 응답하여, 장치는 문자 입력 영역에서 사용자에 의해 입력된 하나 이상의 단어 뒤에 추천된 이모지 캐릭터를 삽입하고 표시한다(1244).
일부 실시예들에서, 장치는 키보드 표시 영역(5005)(도 5G)에 텍스트 문자 입력 키보드(5055)가 표시되는 동안에 키보드 선택 아이콘(5020)을 표시한다. 이어서, 손가락 탭 제스처와 같은 키보드 선택 아이콘(5020) 상의 제스처를 검출한 후에, 장치는 텍스트 문자 입력 키보드(5055)의 표시를 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들(6020)(도 6B)의 제2 서브세트 및 대응하는 서브세트 시퀀스 지시 아이콘들(6000)의 동시 표시로 대체한다(1246). 일부 실시예들에서, 텍스트 문자 입력 키보드(5055)는 제스처의 검출에 응답하여 이모지 캐릭터 키들(6020)의 제2 서브세트로 대체된다. 일부 실시예들에서, 이모지 캐릭터 키들의 특정 서브세트가 선택되고 영역(5005)에 표시되기 전에 하나 이상의 중간 이모지 키보드 선택 UI들이 표시된다. 일부 실시예들에서, 키보드 선택 아이콘(5020) 상의 제스처의 검출에 응답하여, 장치는 텍스트 문자 입력 키보드의 표시와 가장 최근에 표시된 이모지 캐릭터 키들의 서브세트 사이에서 토글링한다.
일부 실시예들에서, 장치는 이모지 캐릭터 키들의 제2 서브세트 내의 각각의 이모지 캐릭터 키 상의 제스처를 검출한다. 이모지 캐릭터 키들의 제2 서브세트 내의 각각의 이모지 캐릭터 키 상의 제스처의 검출에 응답하여, 장치는 대응하는 이모지 캐릭터를 문자 입력 영역에 삽입하고 표시한다(1248). 예를 들어, 이모지 캐릭터 키들(6020)의 제2 서브세트 내의 이모지 캐릭터 키 상의 탭 제스처의 검출에 응답하여, 장치는 대응하는 이모지 캐릭터를 문자 입력 영역(5000)에 삽입하고 표시한다. 도 6C-6E는 이모지 캐릭터들(6040)의 제3 서브세트로부터의 입력 영역(5000) 내의 이모지 캐릭터의 유사한 삽입 및 표시를 나타낸다. 추가적인 이모지 캐릭터 키들 상의 제스처들의 검출에 응답하여 문자 입력 영역(5000)에 추가적인 이모지 캐릭터들이 삽입되고 표시될 수 있다.
일부 실시예들에서, 장치는 사전 정의된 사용자 인터페이스 재구성 프로세스를 개시하기 위한 사전 정의된 사용자 액션(예컨대, 이모지 캐릭터 키를 누르고, 이모지 캐릭터 키 상의 손가락 접촉을 사전 결정된 기간보다 오래 유지하는 것)을 검출한다. 사전 결정된 사용자 액션의 검출에 응답하여, 장치는 이모지 캐릭터 키들의 제2 서브세트 내의 둘 이상의 이모지 캐릭터 키들의 위치들을 변경한다. 이러한 변경은 둘 이상의 이모지 캐릭터 키들 중 각각의 이모지 캐릭터 키의 위치들을 둘 이상의 이모지 캐릭터 키들 중 다른 이모지 캐릭터 키들의 각각의 평균 위치들과 다른 각각의 평균 위치에 대해 변경하는 것을 포함한다(1249). 예컨대, 사전 결정된 기간(예컨대, 1초)보다 긴 기간 동안의 임의의 이모지 캐릭터 키(8001)(도 8A) 상의 손가락 접촉의 검출에 응답하여, 장치는 이모지 캐릭터 키들(8002)의 서브세트(도 8A; 도 6B의 서브세트(6020)에 대응함) 내의 모든 이모지 캐릭터 키들의 위치들을 변경한다.
일부 실시예들에서, 둘 이상의 이모지 캐릭터 키들의 각각의 이모지 캐릭터 키는 (도 8B에 도시된 바와 같이) 각각의 이모지 캐릭터 키의 각각의 평균 위치 상에 실질적으로 중심을 갖는 영역에서 진동한다(1250).
일부 실시예들에서, 장치는 사용자가 이모지 캐릭터 키들의 제2 서브세트 내의 제1 이모지 캐릭터 키에 대응하는 제1 위치에서 터치 스크린 디스플레이와의 접점을 만드는 것을 검출하고, 또한 접점의 터치 스크린 디스플레이 상의 제2 위치로의 이동을 검출한다. 이러한 2개의 검출에 응답하여, 장치는 검출된 접점의 이동에 따라 제1 이모지 캐릭터 키의 터치 스크린 디스플레이 상의 제2 위치로의 이동을 표시한다(1252). 예컨대, 사용자가 이모지 캐릭터 키(8001-2)에 대응하는 위치에서 터치 스크린 디스플레이와 접점(8050)(도 8B)을 만드는 것을 검출하고, 또한 접점(8050)의 터치 스크린 디스플레이 상의 제2 위치(825)로의 이동을 검출하는 것에 응답하여, 장치는 검출된 접점의 이동에 따라 이모지 캐릭터 키(8001-2)의 터치 스크린 디스플레이 상의 제2 위치(825)로의 이동을 표시한다.
일부 실시예들에서, 장치는 사전 정의된 사용자 인터페이스 재구성 프로세스를 종료하기 위한 제2의 사전 정의된 사용자 액션의 검출(예컨대, 홈 버튼(204)의 작동의 검출)에 응답하여 제1 이모지 캐릭터 키(예컨대, 도 8C의 8000-2)의 위치를 제2 위치에 고정한다(1254).
도 13은 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 방법을 나타내는 흐름도이다. 방법(1300)은 장치가 잠금 상태에 있는 동안에 사용자가 들어온 메시지에 빠르게 응답하기 위한 간단하고 직관적인 수단을 제공하며, 따라서 전력을 보존하고, 배터리 충전 간격을 늘릴 수 있다.
휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에(1301), 동작들(1302-1314)이 수행된다. 장치는 터치 스크린 디스플레이가 전력 보전 상태에 있는 동안에 당사자로부터 휴대용 전자 장치의 사용자에게 들어오는 메시지를 수신한다(1302). 전력 보존 상태에서, 터치 스크린은 공백 상태이며(아무것도 표시되지 않음), 터치를 감지하지 못한다.
들어온 메시지의 수신에 응답하여, 장치는 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부(예컨대, 도 9B의 메시지 부분(2212))를 터치 스크린 디스플레이 상에 표시한다(1304). 장치는 이모지 캐릭터에 대응하는 터치 스크린 디스플레이 상의 하나 이상의 사전 정의된 손가락 제스처(예컨대, 도 9C의 제스처들 9100-1, 9100-2, 9100-3)를 검출한다(1306). 장치는 (예컨대, 도 9C에서 홈 버튼(204)의 작동을 검출하거나, "송신" 버튼(도시되지 않음)의 작동을 검출하거나, 스와이프 제스처(2213)를 검출하는 것과 같이) 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출한다(1308). 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 들어온 메시지에 대한 응답을 전송한다(1310). 이 응답은 터치 스크린 디스플레이 상에서 검출된 하나 이상의 사전 정의된 손가락 제스처들에 대응하는 이모지 캐릭터를 포함한다. 예컨대, 도 9C의 사전 정의된 손가락 제스처들(9100-1, 9100-2, 9100-3)은 미소짓는 얼굴의 이모지 캐릭터에 대응할 수 있다. 이모지를 하나 이상의 사전 정의된 손가락 제스처와 연관시키는 하나의 방법은 아래에서 도 10A-10E 및 도 16과 관련하여 설명된다.
일부 실시예들에서, 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1312). 일부 실시예들에서, 장치는 들어온 메시지에 대한 응답이 전송된 후 사전 결정된 기간(예컨대, 5-15초) 내에 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1314).
도 14는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 다른 방법을 나타내는 흐름도이다. 방법(1400)은 장치가 잠금 상태에 있는 동안에 사용자가 들어온 메시지에 빠르게 응답하기 위한 간단하고 직관적인 수단을 제공하며, 따라서 전력을 보존하고, 배터리 충전 간격을 늘릴 수 있다.
휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에(1401), 동작들(1402-1414)이 수행된다. 장치는 터치 스크린 디스플레이가 전력 보전 상태에 있는 동안에 당사자로부터 휴대용 전자 장치의 사용자에게 들어오는 메시지를 수신한다(1402). 전력 보존 상태에서, 터치 스크린은 공백 상태이며(아무것도 표시되지 않음), 터치를 감지하지 못한다.
들어온 메시지의 수신에 응답하여, 장치는 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부(예컨대, 도 9D의 메시지 부분(2212))를 터치 스크린 디스플레이 상에 표시하고, 들어온 메시지에 대한 복수의 사전 정의된 응답(예컨대, 도 9D 또는 도 9G의 응답들(9110))을 표시한다(1404). 사전 정의된 응답들(9110)은 복수의 이모지 캐릭터(예컨대, 도 9D의 이모지 캐릭터들(9111) 또는 도 9G의 응답들(9110) 내의 이모지 캐릭터들만)를 포함한다.
장치는 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션(예컨대, 도 9E의 응답(9110-1) 상의 손가락 탭 제스처(9120) 또는 도 9G의 응답(9110-4) 상의 손가락 탭 제스처(9210))을 검출한다(1406). 장치는 들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출한다(1408). 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출은 또한 사용자에 의한 임의의 추가 액션의 검출 없이 사전 정의된 응답의 전송을 개시한다. 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출 후에, 홈 버튼(204)의 작동의 검출, "송신" 버튼(도시되지 않음)의 작동의 검출 또는 채널(306)을 가로질러 잠금 해제 이미지(302)를 이동시키는 것으로 보이는 슬라이딩 손가락 제스처(2213)의 검출(이 경우, 채널(306) 내의 "slide to view" 메시지가 도 9E의 "slide to send response" 메시지 또는 유사한 메시지로 바뀔 수 있다)과 같이, 응답 전송을 개시하기 위한 추가적인 사전 정의된 사용자 액션이 검출된다.
들어온 메시지에 대한 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 들어온 메시지에 대한 응답을 전송한다(1410). 선택된 사전 정의된 응답(9110)은 복수의 이모지 캐릭터 내의 이모지 캐릭터(예컨대, 9111)를 포함한다(1410).
일부 실시예들에서, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1412). 일부 실시예들에서, 장치는 들어온 메시지에 대한 선택된 사전 정의된 응답이 전송된 후 사전 결정된 기간(예컨대, 5-15초) 내에 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1414).
도 15는 일부 실시예들에 따른 터치 감지 디스플레이(112)를 구비한 휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에 이모지를 이용하여 메시지들에 응답하기 위한 다른 방법을 나타내는 흐름도이다. 방법(1500)은 장치가 잠금 상태에 있는 동안에 사용자가 들어온 메시지에 빠르게 응답하기 위한 간단하고 직관적인 수단을 제공하며, 따라서 전력을 보존하고, 배터리 충전 간격을 늘릴 수 있다.
휴대용 전자 장치(100)가 사용자 인터페이스 잠금 모드에 있는 동안에(1501), 동작들(1502-1518)이 수행된다. 장치는 터치 스크린 디스플레이가 전력 보전 상태에 있는 동안에 당사자로부터 휴대용 전자 장치의 사용자에게 들어오는 메시지를 수신한다(1502). 전력 보존 상태에서, 터치 스크린은 공백 상태이며(아무것도 표시되지 않음), 터치를 감지하지 못한다.
들어온 메시지의 수신에 응답하여, 장치는 터치 스크린 디스플레이를 파워 업하고, 당사자로부터 사용자에게 들어온 메시지의 적어도 일부(예컨대, 도 9B의 메시지 부분(2212))을 터치 스크린 디스플레이 상에 표시한다(1504).
장치는 들어온 메시지에 대한 복수의 사전 정의된 응답(9110)의 표시를 개시하기 위한 사전 정의된 사용자 액션(예컨대, 응답 아이콘(도시되지 않음) 상의 손가락 탭 또는 터치 스크린(112) 상의 더블 탭 제스처)을 검출한다(1506). 사전 정의된 응답들은 복수의 이모지 캐릭터(예컨대, 도 9D의 이모지 캐릭터들(9111) 및 도 9G의 응답들(9110) 내의 이모지 캐릭터들만)를 포함한다. 들어온 메시지에 대한 복수의 사전 정의된 응답의 표시를 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 복수의 사전 정의된 응답(예컨대, 도 9D 또는 도 9G의 응답들(9110))을 표시한다(1508).
장치는 복수의 사전 정의된 응답 내의 사전 정의된 응답을 선택하기 위한 사전 정의된 사용자 액션(예컨대, 도 9E의 응답(9110-1) 상의 손가락 탭 제스처(9120) 또는 도 9G의 응답(9110-4) 상의 손가락 탭 제스처(9210))을 검출한다(1510).
장치는 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션을 검출한다(1512). 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출은 또한 사용자에 의한 임의의 추가 액션의 검출 없이 사전 정의된 응답의 전송을 개시한다. 일부 실시예들에서, 사전 정의된 응답(9110)의 선택의 검출 후에, 홈 버튼(204)의 작동의 검출, "송신" 버튼(도시되지 않음)의 작동의 검출 또는 채널(306)을 가로질러 잠금 해제 이미지(302)를 이동시키는 것으로 보이는 슬라이딩 손가락 제스처(2213)의 검출(이 경우, 채널(306) 내의 "slide to view" 메시지가 도 9E의 "slide to send response" 메시지 또는 유사한 메시지로 바뀔 수 있다)과 같이, 응답 전송을 개시하기 위한 추가적인 사전 정의된 사용자 액션이 검출된다.
들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 들어온 메시지에 대한 선택된 사전 정의된 응답을 전송한다(1514). 선택된 사전 정의된 응답은 복수의 이모지 캐릭터 내의 이모지 캐릭터를 포함한다.
일부 실시예들에서, 들어온 메시지에 대한 선택된 사전 정의된 응답의 전송을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1516). 일부 실시예들에서, 장치는 들어온 메시지에 대한 선택된 사전 정의된 응답이 전송된 후 사전 결정된 기간(예컨대, 5-15초) 내에 터치 스크린 디스플레이를 전력 보존 상태로 복귀시킨다(1518).
도 16은 일부 실시예들에 따른 터치 감지 스크린(112)을 구비한 휴대용 전자 장치(100) 상에서 이모지에 사용자 정의 제스처를 할당하는 방법을 나타내는 흐름도이다. 방법(1600)은 사용자가 나중에 소환하기 위해 사용자 정의 제스처를 이모지 캐릭터와 연관시키기 위한 간단하고 직관적인 수단을 제공하며, 따라서 사용자들이 이모지 키보드들을 사용할 필요 없이 장치상에서 이모지 캐릭터들(예를 들어, 사용자의 자주 사용하는 이모지 캐릭터들)을 입력할 수 있게 한다.
장치는 휴대용 전자 장치가 사용자 정의 제스처 기록 모드에 있는 동안에 터치 스크린 디스플레이 상의 사용자 정의 제스처(예컨대, 도 10B의 제스처(1030))를 검출한다(1602). 장치는 사용자 정의 제스처의 표현을 생성한다(1604). 이 표현은 제스처 내의 손가락 접촉들의 절대 또는 상태 위치들, 및 제스처 내의 손가락 접촉들의 상대 또는 절대 이동들을 포함할 수 있다. 장치는 (예컨대, 도 10C-10E와 관련하여 전술한 바와 같이) 사용자 정의 제스처의 표현과 이모지 캐릭터를 연관시킨다(1606). 장치는 사용자 정의 제스처의 표현은 물론, 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관도 저장한다(1608).
일부 실시예들에서, 사용자 정의 제스처의 표현 및 사용자 정의 제스처의 표현과 이모지 캐릭터의 연관을 저장한 후에, 장치는 터치 스크린 디스플레이 상의 제스처를 검출하고, 검출된 제스처가 저장된 사용자 정의 제스처의 표현에 대응하는지를 결정한다. 검출된 제스처가 저장된 사용자 정의 제스처의 표현에 대응하는 경우, 장치는 인스턴트 메시지(예컨대, 텍스트 메시지) 또는 이메일 메시지와 같은 전자 메시지 또는 문서 내에 이모지 캐릭터를 삽입한다(1610).
도 17은 일부 실시예들에 따른 이모지를 전자 메시지를 통해 맵 상의 위치 지시자로서 이용하는 방법을 나타내는 흐름도이다. 방법(1700)은 대응하는 전자 메시지 내의 정보를 증대시키는 맵 상의 이모지를 갖는 위치 데이터를 제공하기 위한 빠르고 간단한 수단이다.
장치(예컨대, 휴대용 장치(100) 또는 데스크탑 컴퓨팅 장치)는 지리 맵핑 애플리케이션(154)을 개시하기 위한 또는 개시하도록 동작할 수 있는 명령어들, 지리 맵 상의 위치를 나타내는 위치 데이터, 및 이모지 캐릭터를 표현하는 이모지 데이터를 포함하는 전자 메시지를 수신한다(1702). 이모지 데이터는 위치 데이터와 연관된다(따라서, 예컨대 이모지 데이터에 대응하는 이모지 캐릭터는 맵 상에 위치 데이터에 대응하는 위치에 표시될 것이다). 일부 실시예들에서, 전자 메시지는 지리 맵 애플리케이션을 열기 위한 링크를 갖는 텍스트 메시지이다(1704).
장치는 터치 스크린 디스플레이 상에 전자 메시지(예컨대, 도 11A의 메시지(2216))를 표시한다(1706). 장치는 지리 맵핑 애플리케이션을 개시하기 위한 표시된 전자 메시지 상의 사전 정의된 사용자 액션(예컨대, 도 11A의 메시지(2216) 내의 Lake Tahoe에 대한 링크(2220) 상의 탭 제스처(1105))을 검출한다(1708). 지리 맵핑 애플리케이션을 개시하기 위한 사전 정의된 사용자 액션의 검출에 응답하여, 장치는 지리 맵핑 애플리케이션(154) 내에 지리 맵(예컨대, 도 11B의 맵(1115))을 표시하고, 위치 데이터에 대응하는 지리 맵 상의 위치에 이모지 캐릭터(예컨대, 도 11B의 이모지 캐릭터(1120))를 표시한다(1710).
설명의 목적을 위한 위의 설명은 특정 실시예들과 관련하여 설명되었다. 그러나, 위의 예시적인 설명들은 포괄적이거나, 본 발명을 개시된 바로 그 형태들로 한정하는 것을 의도하지 않는다. 위의 가르침에 비추어 많은 변경 및 변형이 가능하다. 실시예들은 본 발명의 원리들 및 그의 실제 응용들을 최상으로 설명하기 위해 선택되고 설명되었으며, 따라서 이 분야의 다른 기술자들이 고려되는 특정 이용에 적합한 바와 같은 다양한 변경들과 더불어 본 발명 및 다양한 실시예들을 최상으로 이용할 수 있게 할 것이다.

Claims (56)

  1. 컴퓨터 구현 방법으로서,
    터치 스크린 디스플레이를 갖춘 휴대용 전자 장치에서,
    사용자에 의해 선택된 텍스트 문자 입력 및 이모지(emoji) 문자 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 상기 키보드 표시 영역 내의 복수의 이모지 카테고리 아이콘 - 상기 이모지 카테고리 아이콘들은 복수의 이모지 카테고리에 대응함 - 을 동시에 표시하는 단계;
    상기 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘상의 제스처를 검출하는 단계;
    상기 각각의 이모지 카테고리 아이콘상의 상기 제스처의 검출에 응답하여, 상기 키보드 표시 영역 내의 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 상기 각각의 이모지 카테고리는 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및 상기 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘(subset-sequence-indicia icon) - 상기 서브세트 시퀀스 지시 아이콘들은 상기 각각의 이모지 카테고리 내의 서브세트들의 수 및 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 - 을 동시에 표시하는 단계;
    상기 키보드 표시 영역 내의 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 한편으로, 상기 키보드 표시 영역에서 제스처를 검출하는 단계; 및
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 상기 키보드 표시 영역 내의 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하는 단계
    를 포함하는 컴퓨터 구현 방법.
  2. 제1항에 있어서, 적어도 하나의 이모지 카테고리 내의 이모지 캐릭터 키들은 이모지 캐릭터 사용 데이터(emoji character usage data)에 따라 정렬되는 컴퓨터 구현 방법.
  3. 제1항에 있어서,
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브 세트를 표시하는 한편으로 상기 키보드 표시 영역에서 제스처를 검출하는 단계; 및
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제2 서브세트를 이모지 캐릭터 키들의 제3 서브세트로 대체한 것을 반영하는 단계
    를 포함하는 컴퓨터 구현 방법.
  4. 제3항에 있어서,
    상기 이모지 캐릭터 키들의 제2 서브세트를 표시하는 한편으로 검출된 제스처는 제1 방향으로의 스와이프 제스처(swipe gesture)이고,
    상기 컴퓨터 구현 방법은,
    상기 터치 스크린 디스플레이상에서 상기 키보드 표시 영역에서 상기 제1 방향과 실질적으로 반대인 방향으로의 제2 스와이프 제스처를 검출하는 단계; 및
    상기 키보드 표시 영역에서의 상기 제2 스와이프 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제3 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하는 단계
    를 더 포함하는 컴퓨터 구현 방법.
  5. 제1항에 있어서,
    키보드 선택 아이콘을 표시하는 단계;
    상기 키보드 선택 아이콘상의 제스처를 검출하는 단계; 및
    상기 키보드 선택 아이콘상의 제스처를 검출한 후에, 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브 세트의 표시를 상기 키보드 표시 영역 내의 텍스트 문자 입력 키보드의 표시로 대체하는 단계
    를 포함하는 컴퓨터 구현 방법.
  6. 제5항에 있어서,
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 하나 이상의 단어를 수신하는 단계;
    상기 사용자가 입력한 상기 하나 이상의 단어를 상기 문자 입력 영역에 표시하는 단계; 및
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 상기 하나 이상의 단어를 수신하는 것에 응답하여,
    상기 사용자가 입력한 상기 하나 이상의 단어에 적어도 부분적으로 기초하여 추천 이모지 캐릭터를 결정하고, 및
    상기 추천 이모지 캐릭터를 상기 터치 스크린 디스플레이 상에 표시하는 단계
    를 포함하는 컴퓨터 구현 방법.
  7. 제1항에 있어서,
    사전 정의된 인터페이스 재구성 프로세스를 개시하기 위한 사전 정의된 사용자 액션을 검출하는 단계; 및
    상기 사전 정의된 사용자 액션의 검출에 응답하여, 이모지 캐릭터 키들의 제2 서브세트 내의 둘 이상의 이모지 캐릭터 키들의 위치들을 변경하는 단계 - 상기 변경하는 단계는 상기 둘 이상의 이모지 캐릭터 키들 중 각각의 이모지 캐릭터 키의 위치들을, 상기 둘 이상의 이모지 캐릭터 키들 중의 다른 이모지 캐릭터 키들의 각각의 평균 위치들과 구별되는 각각의 평균 위치 주위로 변경하는 단계를 포함함 -
    를 포함하는 컴퓨터 구현 방법.
  8. 휴대용 전자 장치로서,
    터치 스크린 디스플레이;
    하나 이상의 프로세서;
    메모리; 및
    하나 이상의 프로그램
    을 포함하고,
    상기 하나 이상의 프로그램은 상기 메모리에 저장되고 또한 상기 하나 이상의 프로세서에 의해 실행되도록 구성되며,
    상기 하나 이상의 프로그램은,
    사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 상기 키보드 표시 영역 내의 복수의 이모지 카테고리 아이콘 - 상기 이모지 카테고리 아이콘은 복수의 이모지 카테고리에 대응함 - 을 동시에 표시하고;
    상기 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘상의 제스처를 검출하고;
    상기 각각의 이모지 카테고리 아이콘상의 제스처의 검출에 응답하여,
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 상기 각각의 이모지 카테고리는 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및
    상기 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘 - 상기 서브세트 시퀀스 지시 아이콘들은 상기 각각의 이모지 카테고리 내의 서브세트들의 수 및 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 -
    을 동시에 표시하고;
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 한편으로, 상기 키보드 표시 영역에서 제스처를 검출하고; 및
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 상기 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하기 위한 명령어들을 포함하는
    휴대용 전자 장치.
  9. 제8항에 있어서, 적어도 하나의 이모지 카테고리 내의 이모지 캐릭터 키들은 이모지 캐릭터 사용 데이터에 따라 정렬되는 휴대용 전자 장치.
  10. 제8항에 있어서,
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 세트를 표시하는 한편으로 상기 키보드 표시 영역에서 제스처를 검출하고; 및
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제2 서브세트를 이모지 캐릭터 키들의 제3 서브세트로 대체한 것을 반영하기 위한 명령어들을 포함하는
    휴대용 전자 장치.
  11. 제10항에 있어서,
    상기 이모지 캐릭터 키들의 제2 서브세트를 표시하는 한편으로 검출된 제스처는 제1 방향으로의 스와이프 제스처이고,
    상기 터치 스크린 디스플레이상에서 상기 키보드 표시 영역에서 상기 제1 방향과 실질적으로 반대인 방향으로의 제2 스와이프 제스처를 검출하고; 및
    상기 키보드 표시 영역에서의 상기 제2 스와이프 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고, 및
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제3 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하기 위한 명령어들을 더 포함하는
    휴대용 전자 장치.
  12. 제8항에 있어서,
    키보드 선택 아이콘을 표시하고;
    상기 키보드 선택 아이콘상의 제스처를 검출하고; 및
    상기 키보드 선택 아이콘상의 제스처를 검출한 후에, 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브 세트의 표시를 상기 키보드 표시 영역 내의 텍스트 문자 입력 키보드의 표시로 대체하기 위한 명령어들을 포함하는
    휴대용 전자 장치.
  13. 제12항에 있어서,
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 하나 이상의 단어를 수신하고;
    상기 사용자가 입력한 상기 하나 이상의 단어를 상기 문자 입력 영역에 표시하고; 및
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 상기 하나 이상의 단어를 수신하는 것에 응답하여,
    상기 사용자가 입력한 상기 하나 이상의 단어에 적어도 부분적으로 기초하여 추천 이모지 캐릭터를 결정하고, 및
    상기 추천 이모지 캐릭터를 상기 터치 스크린 디스플레이상에 표시하기 위한 명령어들을 포함하는
    휴대용 전자 장치.
  14. 제8항에 있어서,
    사전 정의된 인터페이스 재구성 프로세스를 개시하기 위한 사전 정의된 사용자 액션을 검출하고; 및
    상기 사전 정의된 사용자 액션의 검출에 응답하여, 이모지 캐릭터 키들의 제2 서브세트 내의 둘 이상의 이모지 캐릭터 키들의 위치들을 변경하기 위한 - 상기 변경은 상기 둘 이상의 이모지 캐릭터 키들의 각각의 이모지 캐릭터 키의 위치들을 상기 둘 이상의 이모지 캐릭터 키들의 다른 이모지 캐릭터 키들의 각각의 평균 위치들과 구별되는 각각의 평균 위치 주위로 변경하는 것을 포함함 - 명령어들을 포함하는
    휴대용 전자 장치.
  15. 명령어들을 저장한 컴퓨터 판독 가능 저장 매체로서,
    상기 명령어들은 터치 스크린 디스플레이를 구비한 휴대용 전자 장치에 의해 실행될 때 상기 장치로 하여금,
    사용자에 의해 선택된 텍스트 문자 입력 및 이모지 캐릭터 입력을 표시하도록 동작 가능한 문자 입력 영역, 키보드 표시 영역, 및 상기 키보드 표시 영역 내의 복수의 이모지 카테고리 아이콘 - 상기 이모지 카테고리 아이콘들은 복수의 이모지 카테고리에 대응함 - 을 동시에 표시하고;
    상기 복수의 이모지 카테고리 아이콘 내의 각각의 이모지 카테고리 아이콘상의 제스처를 검출하고;
    상기 각각의 이모지 카테고리 아이콘상의 제스처의 검출에 응답하여,
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트 - 상기 각각의 이모지 카테고리는 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스로서 개별적으로 표시되도록 구성되는 이모지 캐릭터 키들의 다수의 서브세트를 포함함 -, 및
    상기 각각의 이모지 카테고리에 대한 복수의 서브세트 시퀀스 지시 아이콘 - 상기 서브세트 시퀀스 지시 아이콘들은 상기 각각의 이모지 카테고리 내의 서브세트들의 수 및 상기 키보드 표시 영역 내의 이모지 캐릭터 키들의 서브세트들의 시퀀스 내의 표시된 서브세트의 위치에 관한 정보를 제공함 - 을 동시에 표시하고;
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트를 표시하는 한편으로, 상기 키보드 표시 영역에서 제스처를 검출하고;
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제1 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고,
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제1 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하게 야기하는 컴퓨터 판독 가능 저장 매체.
  16. 제15항에 있어서, 적어도 하나의 이모지 카테고리 내의 이모지 캐릭터 키들은 이모지 캐릭터 사용 데이터에 따라 정렬되는 컴퓨터 판독 가능 저장 매체.
  17. 제15항에 있어서,
    상기 장치로 하여금,
    상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브 세트를 표시하는 한편으로 상기 키보드 표시 영역에서 제스처를 검출하고;
    상기 키보드 표시 영역에서의 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시로 대체하고,
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제2 서브세트를 이모지 캐릭터 키들의 제3 서브세트로 대체한 것을 반영하게 야기하는 명령어들을 포함하는 컴퓨터 판독 가능 저장 매체.
  18. 제17항에 있어서,
    이모지 캐릭터 키들의 제2 서브세트를 표시하는 한편으로 검출된 상기 제스처는 제1 방향으로의 스와이프 제스처이고,
    상기 터치 스크린 디스플레이상에서 상기 키보드 표시 영역에서 상기 제1 방향과 실질적으로 반대인 방향으로의 제2 스와이프 제스처를 검출하고,
    상기 키보드 표시 영역에서의 상기 제2 스와이프 제스처의 검출에 응답하여,
    상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제3 서브세트의 표시를 상기 키보드 표시 영역 내의 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브세트의 표시로 대체하고,
    상기 서브세트 시퀀스 지시 아이콘들에 의해 제공된 정보를 갱신하여, 이모지 캐릭터 키들의 표시된 제3 서브세트를 이모지 캐릭터 키들의 제2 서브세트로 대체한 것을 반영하게 야기하는 명령어들을 더 포함하는 컴퓨터 판독 가능 저장 매체.
  19. 제15항에 있어서,
    상기 장치로 하여금,
    키보드 선택 아이콘을 표시하고;
    상기 키보드 선택 아이콘상의 제스처를 검출하고;
    상기 키보드 선택 아이콘상의 제스처를 검출한 후에, 상기 각각의 이모지 카테고리에 대한 이모지 캐릭터 키들의 제2 서브 세트의 표시를 상기 키보드 표시 영역 내의 텍스트 문자 입력 키보드의 표시로 대체하게 야기하는 명령어들을 포함하는 컴퓨터 판독 가능 저장 매체.
  20. 제19항에 있어서,
    상기 장치로 하여금,
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 하나 이상의 단어를 수신하고;
    상기 사용자가 입력한 상기 하나 이상의 단어를 상기 문자 입력 영역에 표시하고;
    상기 텍스트 문자 입력 키보드에 의해 상기 사용자가 입력한 상기 하나 이상의 단어를 수신하는 것에 응답하여,
    상기 사용자가 입력한 상기 하나 이상의 단어에 적어도 부분적으로 기초하여 추천 이모지 캐릭터를 결정하고,
    상기 추천 이모지 캐릭터를 상기 터치 스크린 디스플레이상에 표시하게 야기하는 명령어들을 포함하는 컴퓨터 판독 가능 저장 매체.
  21. 제15항에 있어서,
    상기 장치로 하여금,
    사전 정의된 사용자 인터페이스 재구성 프로세스를 개시하기 위한 사전 정의된 사용자 액션을 검출하고;
    상기 사전 정의된 사용자 액션의 검출에 응답하여, 이모지 캐릭터 키들의 제2 서브세트 내의 둘 이상의 이모지 캐릭터 키들의 위치들을 변경하게 - 상기 변경은 상기 둘 이상의 이모지 캐릭터 키들의 각각의 이모지 캐릭터 키의 위치들을 상기 둘 이상의 이모지 캐릭터 키들의 다른 이모지 캐릭터 키들의 각각의 평균 위치들과 구별되는 각각의 평균 위치 주위로 변경하는 것을 포함함 - 야기하는 명령어들을 포함하는
    컴퓨터 판독 가능 저장 매체.
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
  47. 삭제
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 삭제
  54. 삭제
  55. 삭제
  56. 삭제
KR1020117014104A 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스 KR101317547B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/274,346 2008-11-19
US12/274,346 US8584031B2 (en) 2008-11-19 2008-11-19 Portable touch screen device, method, and graphical user interface for using emoji characters
PCT/US2009/060317 WO2010059306A2 (en) 2008-11-19 2009-10-12 Portable touch screen device, method, and graphical user interface for using emoji characters

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020137009794A Division KR101590462B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스

Publications (2)

Publication Number Publication Date
KR20110089429A KR20110089429A (ko) 2011-08-08
KR101317547B1 true KR101317547B1 (ko) 2013-10-16

Family

ID=41572519

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020177029054A KR101967353B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020137009794A KR101590462B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020157017527A KR101590457B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020117014104A KR101317547B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020167002214A KR101787035B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 컴퓨터 판독가능 저장매체

Family Applications Before (3)

Application Number Title Priority Date Filing Date
KR1020177029054A KR101967353B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020137009794A KR101590462B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스
KR1020157017527A KR101590457B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 그래픽 사용자 인터페이스

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020167002214A KR101787035B1 (ko) 2008-11-19 2009-10-12 이모지 캐릭터들을 이용하기 위한 휴대용 터치 스크린 장치, 방법 및 컴퓨터 판독가능 저장매체

Country Status (6)

Country Link
US (7) US8584031B2 (ko)
JP (5) JP5319781B2 (ko)
KR (5) KR101967353B1 (ko)
CN (3) CN104156142B (ko)
HK (2) HK1203671A1 (ko)
WO (1) WO2010059306A2 (ko)

Families Citing this family (588)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8531431B2 (en) * 2003-10-13 2013-09-10 Integritouch Development Ab High speed 3D multi touch sensitive device
BRPI0419168B1 (pt) 2004-09-24 2017-05-16 Nokia Corp dispositivo eletrônico compreendendo a detecção de uma entrada de um usuário durante um modo de operação inativo
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US7958456B2 (en) 2005-12-23 2011-06-07 Apple Inc. Scrolling list with floating adjacent index symbols
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
WO2009042392A2 (en) 2007-09-24 2009-04-02 Apple Inc. Embedded authentication systems in an electronic device
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20090323260A1 (en) * 2008-06-25 2009-12-31 Microsoft Corporation Slide and click combination switch for a personal media player
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US20100070931A1 (en) * 2008-09-15 2010-03-18 Sony Ericsson Mobile Communications Ab Method and apparatus for selecting an object
USD618248S1 (en) 2008-09-23 2010-06-22 Apple Inc. Graphical user interface for a display screen or portion thereof
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9002120B2 (en) * 2008-10-03 2015-04-07 Intellectual Ventures Fund 83 Llc Interactive image selection method
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US20100171888A1 (en) * 2009-01-05 2010-07-08 Hipolito Saenz Video frame recorder
US8689128B2 (en) 2009-03-16 2014-04-01 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
KR20120016060A (ko) * 2009-03-20 2012-02-22 구글 인코포레이티드 입력 방식 편집기 컴퓨팅 디바이스와의 상호작용
KR20100116274A (ko) * 2009-04-22 2010-11-01 삼성전자주식회사 휴대용 단말기의 터치 입력 장치 및 방법
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US8745518B2 (en) * 2009-06-30 2014-06-03 Oracle America, Inc. Touch screen input recognition and character selection
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US9563350B2 (en) * 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
US8624933B2 (en) 2009-09-25 2014-01-07 Apple Inc. Device, method, and graphical user interface for scrolling a multi-section document
KR101633332B1 (ko) * 2009-09-30 2016-06-24 엘지전자 주식회사 단말기 및 그 제어 방법
US9424444B2 (en) 2009-10-14 2016-08-23 At&T Mobility Ii Llc Systems, apparatus, methods and computer-readable storage media for facilitating integrated messaging, contacts and social media for a selected entity
US8924893B2 (en) 2009-10-14 2014-12-30 At&T Mobility Ii Llc Locking and unlocking of an electronic device using a sloped lock track
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US20110163967A1 (en) * 2010-01-06 2011-07-07 Imran Chaudhri Device, Method, and Graphical User Interface for Changing Pages in an Electronic Document
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
KR101650339B1 (ko) * 2010-03-12 2016-09-05 삼성전자 주식회사 휴대 단말기의 문자 입력 방법 및 이를 지원하는 휴대 단말기
US8756522B2 (en) * 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
KR20110113844A (ko) * 2010-04-12 2011-10-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
US20110283241A1 (en) * 2010-05-14 2011-11-17 Google Inc. Touch Gesture Actions From A Device's Lock Screen
US20110279459A1 (en) * 2010-05-17 2011-11-17 Google, Inc. System and Method for Graphically Enriching Promotional Messages Delivered to Handheld Communication Devices
CN103069376B (zh) * 2010-05-25 2016-11-09 索尼移动通信株式会社 用于电子设备上的触敏显示器的用户接口
US8811948B2 (en) 2010-07-09 2014-08-19 Microsoft Corporation Above-lock camera access
US8229511B2 (en) * 2010-08-11 2012-07-24 Research In Motion Limited Electronic device including touch-sensitive display
KR20120019531A (ko) * 2010-08-26 2012-03-07 삼성전자주식회사 휴대 단말기의 ｇｕｉ제공 방법 및 장치
KR101701151B1 (ko) * 2010-09-20 2017-02-02 삼성전자주식회사 휴대 단말기를 이용한 통합 메시지 송수신 방법 및 장치
US9449308B2 (en) * 2010-12-14 2016-09-20 Microsoft Technology Licensing, Llc Defining actions for data streams via icons
KR20120067078A (ko) * 2010-12-15 2012-06-25 삼성전자주식회사 터치 스크린을 구비한 휴대용 단말기에서 어플리케이션 정보를 제공하고 어플리케이션을 실행하기 위한 장치 및 방법
JP5692792B2 (ja) * 2011-02-09 2015-04-01 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 データ入力装置、データ入力方法、プログラム
JP2012169777A (ja) * 2011-02-10 2012-09-06 Sony Corp 情報処理装置、情報処理方法、およびプログラム
US20130033436A1 (en) * 2011-02-17 2013-02-07 Htc Corporation Electronic device, controlling method thereof and computer program product
US9407984B2 (en) * 2011-02-24 2016-08-02 Htc Corporation Method and apparatus for adjusting sound quality
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10241670B2 (en) * 2011-03-31 2019-03-26 Nokia Technologies Oy Character entry apparatus and associated methods
US9606643B2 (en) * 2011-05-02 2017-03-28 Microsoft Technology Licensing, Llc Extended above the lock-screen experience
US20120284631A1 (en) * 2011-05-02 2012-11-08 German Lancioni Methods to adapt user interfaces and input controls
KR101677639B1 (ko) 2011-05-06 2016-11-18 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
TWI490769B (zh) * 2011-05-12 2015-07-01 群邁通訊股份有限公司 捷徑圖示的定位系統及方法
US8666406B2 (en) * 2011-05-12 2014-03-04 Qualcomm Incorporated Gesture-based commands for a group communication session on a wireless communications device
US20120304074A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Device user interface to input emoji and other symbols
US10715380B2 (en) 2011-05-23 2020-07-14 Apple Inc. Setting a reminder that is triggered by a target user device
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
EP4344163A3 (en) 2011-06-05 2024-04-24 Apple Inc. Systems and methods for displaying notifications received from multiple applications
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
US20130231091A1 (en) * 2011-06-23 2013-09-05 Isaac S. Daniel Apparatus system and method for transmitting coded messages electronically
US9411506B1 (en) * 2011-06-28 2016-08-09 Google Inc. Providing additional functionality for a group messaging application
JP5779422B2 (ja) * 2011-06-28 2015-09-16 シャープ株式会社 表示システムおよび表示プログラム
USD693835S1 (en) * 2011-09-23 2013-11-19 Isaac S. Daniel Display screen with graphical user interface
US20130024781A1 (en) * 2011-07-22 2013-01-24 Sony Corporation Multi-Modal and Updating Interface for Messaging
JP5757815B2 (ja) * 2011-07-27 2015-08-05 京セラ株式会社 電子機器、文章編集方法及び制御プログラム
KR101830965B1 (ko) * 2011-08-03 2018-02-22 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
GB2493709A (en) * 2011-08-12 2013-02-20 Siine Ltd Faster input of text in graphical user interfaces
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
JP6045847B2 (ja) * 2011-08-18 2016-12-14 京セラ株式会社 携帯電子機器、制御方法、および、制御プログラム
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
KR101951257B1 (ko) * 2011-09-09 2019-02-26 삼성전자주식회사 데이터 입력 방법 및 이를 구현하는 휴대 단말기
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
CA3023918C (en) 2011-09-30 2022-11-29 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US20130111378A1 (en) * 2011-10-31 2013-05-02 Nokia Corporation Portable electronic device, associated apparatus and methods
US9063629B2 (en) * 2011-10-31 2015-06-23 Nokia Technologies Oy Responding to a received message in a locked user interaction mode
US20130111579A1 (en) * 2011-10-31 2013-05-02 Nokia Corporation Electronic device mode, associated apparatus and methods
KR101301794B1 (ko) * 2011-11-04 2013-08-29 (주)카카오 동적 이모티콘을 이용하는 인스턴트 메시징 서비스를 제공하는 방법 및 그 방법을 실행하는 이동 단말
US20130113606A1 (en) * 2011-11-08 2013-05-09 International Business Machines Corporation Passive Wireless Article with Passcode Touch Sensor Array
US20140310636A1 (en) * 2011-11-11 2014-10-16 Nokia Corporation User interface method and apparatus for providing deformation-sensitive input
KR20130055404A (ko) * 2011-11-18 2013-05-28 삼성전자주식회사 터치 디바이스에서 문자 입력 방법 및 장치
US9204265B2 (en) * 2011-11-22 2015-12-01 Weusi Erskine Method of transmitting coded messages and providing for calendaring responses
JP5827109B2 (ja) * 2011-11-28 2015-12-02 京セラ株式会社 装置、方法、及びプログラム
US10423515B2 (en) 2011-11-29 2019-09-24 Microsoft Technology Licensing, Llc Recording touch information
US9858173B2 (en) 2011-12-01 2018-01-02 Microsoft Technology Licensing, Llc Recording user-driven events within a computing system including vicinity searching
JP5720549B2 (ja) * 2011-12-02 2015-05-20 株式会社デンソー 表示装置
US9173092B1 (en) * 2011-12-02 2015-10-27 Google Inc. Base station data embedded for transmission within information provided to a user device
US9378290B2 (en) 2011-12-20 2016-06-28 Microsoft Technology Licensing, Llc Scenario-adaptive input method editor
US8965425B2 (en) * 2011-12-23 2015-02-24 Isaac S. Daniel System and method of transmitting coded messages using programmable icons
US9134900B2 (en) * 2012-01-18 2015-09-15 Qualcomm Incorporated Traversal of a soft bar to unlock an application
KR101863197B1 (ko) 2012-01-31 2018-05-31 삼성전자주식회사 컨텐츠 공유 네트워크에서 발견된 디바이스를 알리기 위한 장치 및 방법
KR20130096107A (ko) * 2012-02-21 2013-08-29 삼성전자주식회사 태스크 수행 방법 및 시스템과 기록 매체
CN104272236B (zh) * 2012-02-27 2018-06-01 诺基亚技术有限公司 装置和关联方法
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
USD704212S1 (en) * 2012-03-06 2014-05-06 Apple Inc. Display screen or portion thereof with graphical user interface
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9082239B2 (en) 2012-03-14 2015-07-14 Flextronics Ap, Llc Intelligent vehicle for assisting vehicle occupants
US9378601B2 (en) 2012-03-14 2016-06-28 Autoconnect Holdings Llc Providing home automation information via communication with a vehicle
WO2014172380A1 (en) 2013-04-15 2014-10-23 Flextronics Ap, Llc Altered map routes based on user profile information
US9384609B2 (en) 2012-03-14 2016-07-05 Autoconnect Holdings Llc Vehicle to vehicle safety and traffic communications
US20140309871A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc User gesture control of vehicle features
US9082238B2 (en) 2012-03-14 2015-07-14 Flextronics Ap, Llc Synchronization between vehicle and user device calendar
US20140309893A1 (en) 2013-04-15 2014-10-16 Flextronics Ap, Llc Health statistics and communications of associated vehicle users
US9412273B2 (en) 2012-03-14 2016-08-09 Autoconnect Holdings Llc Radar sensing and emergency response vehicle detection
USD705263S1 (en) 2012-03-27 2014-05-20 Microsoft Corporation Display screen with icon
KR20130123705A (ko) * 2012-05-03 2013-11-13 삼성전자주식회사 추가 문자 입력을 위한 가상 키보드와 그를 사용한 추가 문자 입력 장치 및 방법
US10613743B2 (en) 2012-05-09 2020-04-07 Apple Inc. User interface for receiving user input
WO2016036522A2 (en) * 2014-09-02 2016-03-10 Apple Inc. User interface for receiving user input
US10990270B2 (en) 2012-05-09 2021-04-27 Apple Inc. Context-specific user interfaces
US9547425B2 (en) 2012-05-09 2017-01-17 Apple Inc. Context-specific user interfaces
US9459781B2 (en) 2012-05-09 2016-10-04 Apple Inc. Context-specific user interfaces for displaying animated sequences
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US20130326361A1 (en) * 2012-06-04 2013-12-05 EyeSay, LLC System and method for managing mobile multimedia messages
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
WO2014000143A1 (en) 2012-06-25 2014-01-03 Microsoft Corporation Input method editor application platform
US9391945B1 (en) 2012-06-25 2016-07-12 Daniel Isaac S System and method of posting coded messages on social networks
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
WO2014000251A1 (en) * 2012-06-29 2014-01-03 Microsoft Corporation Input method editor
US9911222B2 (en) 2012-07-06 2018-03-06 Tangome, Inc. Animation in threaded conversations
CN103543903B (zh) * 2012-07-11 2018-07-17 腾讯科技（深圳）有限公司 快捷操作方法、装置及移动终端
US9058103B2 (en) * 2012-07-25 2015-06-16 Facebook, Inc. Gestures for keyboard switch
KR102101818B1 (ko) * 2012-07-30 2020-04-17 삼성전자주식회사 단말기의 데이터전송 제어장치 및 방법
USD755210S1 (en) * 2012-08-17 2016-05-03 P&W Solutions Co., Ltd. Display screen with graphical user interface
CN104584518A (zh) * 2012-08-24 2015-04-29 丰田自动车株式会社 移动终端装置、移动终端装置的控制方法、移动终端装置中执行的程序、以及移动终端装置用通信支架
CN104823183B (zh) 2012-08-30 2018-04-24 微软技术许可有限责任公司 基于特征的候选选择
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US8601561B1 (en) 2012-09-20 2013-12-03 Google Inc. Interactive overlay to prevent unintentional inputs
US8732624B2 (en) * 2012-09-20 2014-05-20 Google Inc. Protection for unintentional inputs
US8656296B1 (en) 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9746990B2 (en) * 2012-09-28 2017-08-29 Intel Corporation Selectively augmenting communications transmitted by a communication device
KR20140051487A (ko) * 2012-10-08 2014-05-02 삼성전자주식회사 단말기의 데이터보호 장치 및 방법
US9147058B2 (en) 2012-10-12 2015-09-29 Apple Inc. Gesture entry techniques
US9372970B2 (en) 2012-10-12 2016-06-21 Apple Inc. Gesture entry techniques
KR101390228B1 (ko) 2012-10-22 2014-05-07 (주)카카오 채팅 영역에 이미지를 표시하는 디바이스 및 방법, 그리고 채팅 데이터를 관리하는 서버
US9804777B1 (en) * 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
US8806384B2 (en) * 2012-11-02 2014-08-12 Google Inc. Keyboard gestures for character string replacement
WO2014078598A1 (en) 2012-11-14 2014-05-22 invi Labs, Inc. System for and method of embedding rich media into text messages
CN103019587B (zh) * 2012-11-19 2016-08-24 广东欧珀移动通信有限公司 一种移动终端图片浏览的方法及装置
US10824297B2 (en) 2012-11-26 2020-11-03 Google Llc System for and method of accessing and selecting emoticons, content, and mood messages during chat sessions
WO2014084761A1 (en) * 2012-11-27 2014-06-05 Telefonaktiebolaget L M Ericsson (Publ) Sub-keyboards with keys dependent on the frequency of use
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
CN103927190A (zh) * 2013-01-11 2014-07-16 腾讯科技（深圳）有限公司 网络表情下载方法与装置
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
CN113470640B (zh) 2013-02-07 2022-04-26 苹果公司 数字助理的语音触发器
US10976922B2 (en) * 2013-02-17 2021-04-13 Benjamin Firooz Ghassabian Data entry systems
KR102146244B1 (ko) * 2013-02-22 2020-08-21 삼성전자주식회사 휴대 단말에 대한 동작 관련 입력에 따라 복수개의 객체들의 표시를 제어하는 방법 및 이를 위한 휴대 단말
JP6255646B2 (ja) * 2013-03-04 2018-01-10 株式会社Ｌ ｉｓ Ｂ メッセージシステム
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
CN103218159A (zh) * 2013-03-14 2013-07-24 鸿富锦精密工业（深圳）有限公司 应用程序检索系统及方法
US20140280603A1 (en) * 2013-03-14 2014-09-18 Endemic Mobile Inc. User attention and activity in chat systems
US9027153B2 (en) 2013-03-15 2015-05-05 Google Technology Holdings LLC Operating a computer with a touchscreen
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US8918339B2 (en) * 2013-03-15 2014-12-23 Facebook, Inc. Associating an indication of user emotional reaction with content items presented by a social networking system
WO2014143776A2 (en) * 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
WO2014155429A1 (ja) * 2013-03-29 2014-10-02 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 携帯情報端末の制御方法及びプログラム
EP2987153A4 (en) 2013-04-15 2016-09-21 Autoconnect Holdings Llc CENTRAL NETWORK FOR THE AUTOMATED REGULATION OF ROAD TRAFFIC
EP2992402A4 (en) * 2013-04-29 2016-12-07 Hewlett Packard Development Co Lp DEVICE FOR DISPLAYING A RECEIVED USER INTERFACE
DE112013006924T5 (de) * 2013-05-27 2016-01-07 Mitsubishi Electric Corporation Programmierbare Anzeigevorrichtung und Bildschirmbedienungsverarbeitungsprogramm hierfür
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US9465985B2 (en) 2013-06-09 2016-10-11 Apple Inc. Managing real-time handwriting recognition
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
TW201501013A (zh) * 2013-06-28 2015-01-01 Zeroplus Technology Co Ltd 表情符號之製作及運用方法及其表情符號製作與應用系統
USD745895S1 (en) * 2013-06-28 2015-12-22 Microsoft Corporation Display screen with graphical user interface
CN104252811B (zh) * 2013-06-28 2017-11-24 联想(北京)有限公司 一种信息处理方法及电子设备
USD731553S1 (en) * 2013-07-31 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
CN105580004A (zh) 2013-08-09 2016-05-11 微软技术许可有限责任公司 提供语言帮助的输入方法编辑器
CN108762480A (zh) * 2013-08-28 2018-11-06 联想(北京)有限公司 一种输入方法和电子设备
JP6018996B2 (ja) * 2013-09-04 2016-11-02 シャープ株式会社 情報処理装置
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
USD754736S1 (en) * 2013-09-10 2016-04-26 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
KR102057944B1 (ko) * 2013-09-17 2019-12-23 삼성전자주식회사 단말 장치 및 그의 공유 방법
JP6223118B2 (ja) * 2013-10-23 2017-11-01 東芝テック株式会社 買物支援システム
US20150121248A1 (en) * 2013-10-24 2015-04-30 Tapz Communications, LLC System for effectively communicating concepts
CN106991305A (zh) * 2013-11-22 2017-07-28 华为终端有限公司 消息的处理方法及装置
WO2015079458A2 (en) * 2013-11-27 2015-06-04 V Shyam Pathy Integration of emotional artifacts into textual information exchange
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
USD762680S1 (en) 2013-12-18 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
WO2015104751A1 (ja) 2014-01-09 2015-07-16 日本電気株式会社 Ｍｔｃ－ｉｗｆエンティティ、ｐｃｒｆエンティティ、及び制御方法
US10013601B2 (en) * 2014-02-05 2018-07-03 Facebook, Inc. Ideograms for captured expressions
CN104866219A (zh) * 2014-02-26 2015-08-26 腾讯科技（深圳）有限公司 快速签到的方法及装置
CN103777891A (zh) * 2014-02-26 2014-05-07 全蕊 消息尾部插入表情发送的方法
USD780776S1 (en) * 2014-03-11 2017-03-07 King.Com Ltd. Display screen or portion thereof with game graphical user interface
CN104935491B (zh) * 2014-03-17 2018-08-07 腾讯科技（深圳）有限公司 一种发送表情图像的方法及装置
USD738910S1 (en) * 2014-03-19 2015-09-15 Wargaming.Net Llp Display screen with animated graphical user interface
USD757800S1 (en) * 2014-04-15 2016-05-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US10482163B2 (en) * 2014-04-23 2019-11-19 Klickafy, Llc Clickable emoji
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
TWI506569B (zh) * 2014-05-15 2015-11-01 Nat Univ Tsing Hua 一種可辨識圖片中物件之位置範圍與行爲關係之圖片標記方法
WO2015175240A1 (en) * 2014-05-15 2015-11-19 Narvii Inc. Systems and methods implementing user interface objects
KR102177607B1 (ko) * 2014-05-16 2020-11-11 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10482461B2 (en) 2014-05-29 2019-11-19 Apple Inc. User interface for payments
US20150350146A1 (en) 2014-05-29 2015-12-03 Apple Inc. Coordination of message alert presentations across devices based on device modes
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10579212B2 (en) 2014-05-30 2020-03-03 Apple Inc. Structured suggestions
KR101929372B1 (ko) 2014-05-30 2018-12-17 애플 인크. 하나의 디바이스의 사용으로부터 다른 디바이스의 사용으로의 전환
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US20150350118A1 (en) 2014-05-30 2015-12-03 Apple Inc. Canned answers in messages
US10565219B2 (en) 2014-05-30 2020-02-18 Apple Inc. Techniques for automatically generating a suggested contact based on a received message
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US9185062B1 (en) 2014-05-31 2015-11-10 Apple Inc. Message user interfaces for capture and transmittal of media and location content
KR20150143989A (ko) * 2014-06-16 2015-12-24 주식회사 큐키 간편한 이모티콘 입력 방법 및 이 방법을 구현한 장치
CN111078110B (zh) * 2014-06-24 2023-10-24 苹果公司 输入设备和用户界面交互
US10708203B2 (en) * 2014-06-25 2020-07-07 Convergence Acceleration Solutions, Llc Systems and methods for indicating emotions through electronic self-portraits
WO2015200890A2 (en) 2014-06-27 2015-12-30 Apple Inc. Reduced size user interface
US20160048492A1 (en) * 2014-06-29 2016-02-18 Emoji 3.0 LLC Platform for internet based graphical communication
USD755225S1 (en) * 2014-06-30 2016-05-03 Aliphcom Display screen or portion thereof with animated graphical user interface
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
TWI647608B (zh) 2014-07-21 2019-01-11 美商蘋果公司 遠端使用者介面
USD751115S1 (en) * 2014-07-29 2016-03-08 Krush Technologies, Llc Display screen or portion thereof with icon
USD754195S1 (en) * 2014-07-29 2016-04-19 Krush Technologies, Llc Display screen or portion thereof with icon
US9651997B2 (en) * 2014-07-30 2017-05-16 Intel Corporation Methods, systems and apparatus to manage a spatially dynamic display
USD755838S1 (en) * 2014-07-30 2016-05-10 Krush Technologies, Llc Display screen or portion thereof with icon
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
KR20160026578A (ko) * 2014-09-01 2016-03-09 삼성전자주식회사 전자 장치의 디스플레이 방법 및 그 전자 장치
TWD178887S (zh) 2014-09-01 2016-10-11 蘋果公司 顯示螢幕之圖形使用者介面之部分
US9547419B2 (en) 2014-09-02 2017-01-17 Apple Inc. Reduced size configuration interface
WO2016036481A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
US20160259502A1 (en) * 2014-09-10 2016-09-08 Katrina Parrott Diverse emojis/emoticons
US10146748B1 (en) * 2014-09-10 2018-12-04 Google Llc Embedding location information in a media collaboration using natural language processing
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10212111B2 (en) 2014-09-12 2019-02-19 Google Llc System and interface that facilitate selecting videos to share in a messaging application
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10769607B2 (en) * 2014-10-08 2020-09-08 Jgist, Inc. Universal symbol system language-one world language
CN104375864A (zh) * 2014-11-22 2015-02-25 深圳市梧桐世界科技有限公司 一种ssid加载图形的方法
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9721024B2 (en) * 2014-12-19 2017-08-01 Facebook, Inc. Searching for ideograms in an online social network
USD755236S1 (en) * 2015-01-02 2016-05-03 Chris J. Katopis Display screen with donkey-themed keyboard graphical user interface (GUI)
USD755235S1 (en) * 2015-01-02 2016-05-03 Chris J. Katopis Display screen with elephant-themed keyboard graphical user interface (GUI)
USD818497S1 (en) * 2015-01-06 2018-05-22 King.Com Limited Display screen with icon
USD777746S1 (en) * 2015-01-15 2017-01-31 Charter Communications Operating, Llc Display screen or portion thereof with graphical user interface
USD777187S1 (en) * 2015-01-15 2017-01-24 Charter Communications Operating, Llc Display screen or portion thereof with graphical user interface
EP3998762A1 (en) 2015-02-02 2022-05-18 Apple Inc. Device, method, and graphical user interface for establishing a relationship and connection between two devices
CN104579934B (zh) * 2015-02-10 2016-08-17 腾讯科技（深圳）有限公司 一种信息处理方法及客户端
KR101622872B1 (ko) 2015-02-11 2016-05-19 라인 가부시키가이샤 인스턴트 메시징 서비스에서 공식계정의 리치 메뉴를 제공하는 방법과 시스템 및 기록 매체
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10216351B2 (en) 2015-03-08 2019-02-26 Apple Inc. Device configuration user interface
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
CN106033337B (zh) * 2015-03-13 2019-07-16 腾讯科技（深圳）有限公司 一种即时通信表情符号生成方法及装置
US20160359773A1 (en) * 2015-03-16 2016-12-08 Boogoo Intellectual Property LLC Electronic Communication System
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9715111B2 (en) * 2015-03-27 2017-07-25 Ca, Inc. Secure user input mode for electronic devices using randomized locations of selection indicia
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US20180107279A1 (en) * 2015-04-20 2018-04-19 Afarin Pirzadeh Applications, systems, and methods for facilitating emotional gesture-based communications
WO2016179087A1 (en) * 2015-05-01 2016-11-10 Ink Corp. Personalized image-based communication on mobile platforms
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10042548B2 (en) 2015-06-02 2018-08-07 Facebook, Inc. Methods and systems for providing user feedback using an emotion scale
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10275116B2 (en) 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
DK179328B1 (en) 2015-06-07 2018-05-07 Apple Inc DEVICES, METHODS AND GRAPHICAL USER INTERFACES FOR PROVIDING AND INTERACTING WITH NOTIFICATIONS
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
USD775671S1 (en) * 2015-06-10 2017-01-03 Twiin, Inc. Display screen or portion thereof with icon
USD775212S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774551S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD775211S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774552S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774098S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
USD774096S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
USD775213S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774549S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774550S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774548S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD775210S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774097S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
US9658704B2 (en) * 2015-06-10 2017-05-23 Apple Inc. Devices and methods for manipulating user interfaces with a stylus
USD788809S1 (en) * 2015-06-22 2017-06-06 Gamblit Gaming, Llc Display screen for a graphical user interface
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
CN105138222B (zh) * 2015-08-26 2018-12-04 美国掌赢信息科技有限公司 一种选择表情图标的方法和电子设备
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
EP3792742B1 (en) * 2015-09-09 2023-08-16 Apple Inc. Emoji and canned responses
US10445425B2 (en) * 2015-09-15 2019-10-15 Apple Inc. Emoji and canned responses
US10203843B2 (en) * 2015-09-21 2019-02-12 Microsoft Technology Licensing, Llc Facilitating selection of attribute values for graphical elements
US9665567B2 (en) 2015-09-21 2017-05-30 International Business Machines Corporation Suggesting emoji characters based on current contextual emotional state of user
US10474877B2 (en) 2015-09-22 2019-11-12 Google Llc Automated effects generation for animated content
US11138207B2 (en) * 2015-09-22 2021-10-05 Google Llc Integrated dynamic interface for expression-based retrieval of expressive media content
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
WO2017059524A1 (en) * 2015-10-08 2017-04-13 Magnificus Software Inc. Method and system for creating and using emojis and other graphic content in instant messaging systems
US10496275B2 (en) * 2015-10-12 2019-12-03 Microsoft Technology Licensing, Llc Multi-window keyboard
US10599305B2 (en) * 2015-10-16 2020-03-24 International Business Machines Corporation Approach for selecting a desired object on a small touch screen
JP6687878B2 (ja) * 2015-10-27 2020-04-28 富士ゼロックス株式会社 情報処理装置およびプログラム
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10025972B2 (en) * 2015-11-16 2018-07-17 Facebook, Inc. Systems and methods for dynamically generating emojis based on image analysis of facial features
US10692126B2 (en) 2015-11-17 2020-06-23 Nio Usa, Inc. Network-based system for selling and servicing cars
DE112015007170T5 (de) * 2015-12-02 2018-08-23 Motorola Solutions, Inc. Verfahren zum assoziieren einer gruppe von anwendungen mit einer spezifischen form
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
CN106886396B (zh) * 2015-12-16 2020-07-07 北京奇虎科技有限公司 表情管理方法及装置
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
USD852839S1 (en) * 2015-12-23 2019-07-02 Beijing Xinmei Hutong Technology Co., Ltd Display screen with a graphical user interface
JP2019504413A (ja) * 2015-12-29 2019-02-14 エム・ゼット・アイ・ピィ・ホールディングス・リミテッド・ライアビリティ・カンパニーＭｚ Ｉｐ Ｈｏｌｄｉｎｇｓ， Ｌｌｃ 絵文字を提案するためのシステムおよび方法
USD839308S1 (en) * 2016-01-22 2019-01-29 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
CN105700703A (zh) * 2016-02-24 2016-06-22 北京小牛互联科技有限公司 一种在键盘的文字输入界面嵌入表情并支持自定义表情的方法和装置
USD842900S1 (en) * 2016-03-08 2019-03-12 King.Com Limited Display screen with icon
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US11494547B2 (en) 2016-04-13 2022-11-08 Microsoft Technology Licensing, Llc Inputting images to electronic devices
CN105930828B (zh) * 2016-04-15 2021-05-14 腾讯科技（深圳）有限公司 表情分类标识的控制方法及装置
US20170308289A1 (en) * 2016-04-20 2017-10-26 Google Inc. Iconographic symbol search within a graphical keyboard
CN105975563B (zh) * 2016-04-29 2019-10-11 腾讯科技（深圳）有限公司 表情推荐方法及装置
KR101780809B1 (ko) * 2016-05-09 2017-09-22 네이버 주식회사 이모티콘이 함께 제공되는 번역문 제공 방법, 사용자 단말, 서버 및 컴퓨터 프로그램
US10680980B2 (en) 2016-05-10 2020-06-09 Cisco Technology, Inc. Interactive contextual emojis
KR102172901B1 (ko) 2016-05-18 2020-11-02 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US10331336B2 (en) * 2016-05-18 2019-06-25 Apple Inc. Devices, methods, and graphical user interfaces for messaging
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN105871695B (zh) * 2016-05-19 2019-03-26 腾讯科技（深圳）有限公司 表情发送方法和装置
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670616A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
DK179374B1 (en) 2016-06-12 2018-05-28 Apple Inc Handwriting keyboard for monitors
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10409488B2 (en) * 2016-06-13 2019-09-10 Microsoft Technology Licensing, Llc Intelligent virtual keyboards
US10001901B2 (en) * 2016-06-14 2018-06-19 Unity IPR ApS System and method for texturing in virtual reality and mixed reality environments
US10182047B1 (en) 2016-06-30 2019-01-15 Snap Inc. Pictograph password security system
US20180012196A1 (en) 2016-07-07 2018-01-11 NextEv USA, Inc. Vehicle maintenance manager
US9973456B2 (en) 2016-07-22 2018-05-15 Strip Messenger Messaging as a graphical comic strip
US9684430B1 (en) * 2016-07-27 2017-06-20 Strip Messenger Linguistic and icon based message conversion for virtual environments and objects
US9928734B2 (en) 2016-08-02 2018-03-27 Nio Usa, Inc. Vehicle-to-pedestrian communication systems
WO2018023578A1 (zh) * 2016-08-04 2018-02-08 薄冰 根据手势发送表情的方法以及表情系统
WO2018023576A1 (zh) * 2016-08-04 2018-02-08 薄冰 根据市场反馈调整表情发送技术的方法以及表情系统
WO2018023577A1 (zh) * 2016-08-04 2018-02-08 薄冰 手势匹配表情发送指令的停用方法以及表情系统
CN106293131A (zh) * 2016-08-16 2017-01-04 广东小天才科技有限公司 表情输入方法及装置
US10409487B2 (en) * 2016-08-23 2019-09-10 Microsoft Technology Licensing, Llc Application processing based on gesture input
USD853444S1 (en) * 2016-08-25 2019-07-09 Emojot, Inc. Display screen with graphical user interface
USD854049S1 (en) * 2016-08-25 2019-07-16 Emojot, Inc. Display screen with a graphical user interface
US10063929B1 (en) 2016-09-01 2018-08-28 Nufbee Llc Community controlled audio entertainment system
US10798044B1 (en) 2016-09-01 2020-10-06 Nufbee Llc Method for enhancing text messages with pre-recorded audio clips
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US9940498B2 (en) * 2016-09-09 2018-04-10 Motorola Mobility Llc Low power application access using fingerprint sensor authentication
USD808429S1 (en) * 2016-09-20 2018-01-23 Google Llc Display screen with icon
JP6718555B2 (ja) * 2016-09-20 2020-07-08 グーグル エルエルシー メッセージングアプリケーションにおいて応答を送信するためのシステムおよび方法
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10218802B2 (en) 2016-10-18 2019-02-26 Microsoft Technology Licensing, Llc Tiered notification framework
KR20230111276A (ko) 2016-10-26 2023-07-25 애플 인크. 전자 디바이스 상의 다수의 콘텐츠 애플리케이션으로부터의콘텐츠를 브라우징하기 위한 사용자 인터페이스
USD817993S1 (en) * 2016-10-27 2018-05-15 Apple Inc. Display screen or portion thereof with graphical user interface
USD820304S1 (en) 2016-10-27 2018-06-12 Apple Inc. Display screen or portion thereof with graphical user interface
US10838584B2 (en) * 2016-10-31 2020-11-17 Microsoft Technology Licensing, Llc Template based calendar events with graphic enrichment
US9963106B1 (en) 2016-11-07 2018-05-08 Nio Usa, Inc. Method and system for authentication in autonomous vehicles
US11321890B2 (en) * 2016-11-09 2022-05-03 Microsoft Technology Licensing, Llc User interface for generating expressive content
US10694357B2 (en) 2016-11-11 2020-06-23 Nio Usa, Inc. Using vehicle sensor data to monitor pedestrian health
US10410064B2 (en) 2016-11-11 2019-09-10 Nio Usa, Inc. System for tracking and identifying vehicles and pedestrians
US10708547B2 (en) 2016-11-11 2020-07-07 Nio Usa, Inc. Using vehicle sensor data to monitor environmental and geologic conditions
US10515390B2 (en) 2016-11-21 2019-12-24 Nio Usa, Inc. Method and system for data optimization
WO2018098098A1 (en) 2016-11-23 2018-05-31 Google Llc Providing mediated social interactions
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10249104B2 (en) 2016-12-06 2019-04-02 Nio Usa, Inc. Lease observation and event recording
GB201620802D0 (en) 2016-12-07 2017-01-18 Microsoft Technology Licensing Llc Messaging system
USD808400S1 (en) * 2016-12-19 2018-01-23 Coren Intellect LLC Display screen with employee survey graphical user interface
USD841667S1 (en) * 2016-12-19 2019-02-26 Coren Intellect LLC Display screen with employee survey graphical user interface
USD847825S1 (en) 2016-12-19 2019-05-07 Coren Intellect LLC Display screen with graphical user interface for employee profile
CN106843635B (zh) * 2016-12-20 2020-04-28 北京猎豹移动科技有限公司 信息展示方法、装置和电子设备
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11199965B2 (en) * 2016-12-29 2021-12-14 Verizon Patent And Licensing Inc. Virtual keyboard
US10452411B2 (en) 2016-12-30 2019-10-22 Riyad Mobeen System and method of using emojis for interactive and enhanced data matching capabilities
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
USD818037S1 (en) 2017-01-11 2018-05-15 Apple Inc. Type font
US10074223B2 (en) 2017-01-13 2018-09-11 Nio Usa, Inc. Secured vehicle for user use only
US10031521B1 (en) 2017-01-16 2018-07-24 Nio Usa, Inc. Method and system for using weather information in operation of autonomous vehicles
US10471829B2 (en) 2017-01-16 2019-11-12 Nio Usa, Inc. Self-destruct zone and autonomous vehicle navigation
US9984572B1 (en) 2017-01-16 2018-05-29 Nio Usa, Inc. Method and system for sharing parking space availability among autonomous vehicles
US10286915B2 (en) 2017-01-17 2019-05-14 Nio Usa, Inc. Machine learning for personalized driving
US10464530B2 (en) 2017-01-17 2019-11-05 Nio Usa, Inc. Voice biometric pre-purchase enrollment for autonomous vehicles
US10897469B2 (en) 2017-02-02 2021-01-19 Nio Usa, Inc. System and method for firewalls between vehicle networks
CN106998492A (zh) * 2017-03-02 2017-08-01 合网络技术（北京）有限公司 弹幕的显示控制方法及装置
TWI754694B (zh) * 2017-03-21 2022-02-11 香港商阿里巴巴集團服務有限公司 通訊方法及裝置
JP6360227B2 (ja) * 2017-04-13 2018-07-18 株式会社Ｌ ｉｓ Ｂ メッセージシステム
US11402909B2 (en) 2017-04-26 2022-08-02 Cognixion Brain computer interface for augmented reality
US11237635B2 (en) 2017-04-26 2022-02-01 Cognixion Nonverbal multi-input and feedback devices for user intended computer control and communication of text, graphics and audio
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK180007B1 (en) * 2017-05-16 2020-01-16 Apple Inc. RECORDING AND SENDING EMOJI
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
USD841677S1 (en) 2017-06-04 2019-02-26 Apple Inc. Display screen or portion thereof with graphical user interface
US10318109B2 (en) * 2017-06-09 2019-06-11 Microsoft Technology Licensing, Llc Emoji suggester and adapted user interface
US10234302B2 (en) 2017-06-27 2019-03-19 Nio Usa, Inc. Adaptive route and motion planning based on learned external and internal vehicle environment
US10710633B2 (en) 2017-07-14 2020-07-14 Nio Usa, Inc. Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles
US10369974B2 (en) 2017-07-14 2019-08-06 Nio Usa, Inc. Control and coordination of driverless fuel replenishment for autonomous vehicles
CN107463273B (zh) * 2017-07-14 2021-06-18 北京新美互通科技有限公司 一种表情符号输入方法和装置
CN107479784B (zh) * 2017-07-31 2022-01-25 腾讯科技（深圳）有限公司 表情展示方法、装置及计算机可读存储介质
US10837790B2 (en) 2017-08-01 2020-11-17 Nio Usa, Inc. Productive and accident-free driving modes for a vehicle
KR102389678B1 (ko) 2017-09-09 2022-04-21 애플 인크. 생체측정 인증의 구현
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
USD873284S1 (en) 2017-09-09 2020-01-21 Apple Inc. Electronic device with graphical user interface
USD843442S1 (en) 2017-09-10 2019-03-19 Apple Inc. Type font
USD987669S1 (en) 2017-09-11 2023-05-30 Apple Inc. Electronic device with graphical user interface
USD861704S1 (en) 2017-09-11 2019-10-01 Apple Inc. Electronic device with graphical user interface
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10635109B2 (en) 2017-10-17 2020-04-28 Nio Usa, Inc. Vehicle path-planner monitor and controller
US10593087B2 (en) 2017-10-23 2020-03-17 Paypal, Inc. System and method for generating emoji mashups with machine learning
CN109725957A (zh) * 2017-10-27 2019-05-07 钉钉控股（开曼）有限公司 团体配置方法及装置、内容共享系统
US10606274B2 (en) 2017-10-30 2020-03-31 Nio Usa, Inc. Visual place recognition based self-localization for autonomous vehicles
US10935978B2 (en) 2017-10-30 2021-03-02 Nio Usa, Inc. Vehicle self-localization using particle filters and visual odometry
US10717412B2 (en) 2017-11-13 2020-07-21 Nio Usa, Inc. System and method for controlling a vehicle using secondary access methods
JP7008486B2 (ja) 2017-11-21 2022-01-25 Ｋｙｂ株式会社 サスペンション装置
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
USD844700S1 (en) * 2018-01-18 2019-04-02 Apple Inc. Type font
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
USD846596S1 (en) * 2018-02-05 2019-04-23 Lindsey A. Berry Portion of a display panel with a computer icon image
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
KR20190109705A (ko) * 2018-03-18 2019-09-26 김시환 스마트폰 문자 서비스 내에서 컨텐츠 제공 시스템 및 방법
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK201870380A1 (en) 2018-05-07 2020-01-29 Apple Inc. DISPLAYING USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10369966B1 (en) 2018-05-23 2019-08-06 Nio Usa, Inc. Controlling access to a vehicle using wireless access devices
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
USD846633S1 (en) * 2018-06-03 2019-04-23 Apple Inc. Type font
USD880495S1 (en) 2018-06-03 2020-04-07 Apple Inc. Electronic device with graphical user interface
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
CN109379270A (zh) * 2018-08-27 2019-02-22 北京达佳互联信息技术有限公司 表情信息处理方法和装置、移动终端、服务器及存储介质
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US10764224B2 (en) * 2018-10-05 2020-09-01 International Business Machines Corporation Conveying electronic messages according to representation of emotion
JP1662143S (ko) * 2018-10-13 2020-06-22
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10547970B1 (en) 2018-12-19 2020-01-28 Snap Inc. Mapping discovery system
USD937898S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
USD938495S1 (en) * 2018-12-21 2021-12-14 Waymo Llc Display screen or portion thereof with an icon image
USD937899S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
USD937900S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
CN109710086A (zh) * 2018-12-28 2019-05-03 北京微播视界科技有限公司 表情面板的显示方法、装置、电子设备及可读存储介质
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
USD900925S1 (en) 2019-02-01 2020-11-03 Apple Inc. Type font and electronic device with graphical user interface
CN109871165B (zh) * 2019-02-01 2022-03-01 天津字节跳动科技有限公司 表情回应的显示方法、装置、终端设备和服务器
USD902221S1 (en) 2019-02-01 2020-11-17 Apple Inc. Electronic device with animated graphical user interface
USD900871S1 (en) 2019-02-04 2020-11-03 Apple Inc. Electronic device with animated graphical user interface
CN113366483A (zh) * 2019-02-14 2021-09-07 索尼集团公司 信息处理装置、信息处理方法及信息处理程序
WO2020174289A2 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11962836B2 (en) 2019-03-24 2024-04-16 Apple Inc. User interfaces for a media browsing application
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
KR102393717B1 (ko) 2019-05-06 2022-05-03 애플 인크. 전자 디바이스의 제한된 동작
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970530A1 (en) 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
WO2020243645A1 (en) 2019-05-31 2020-12-03 Apple Inc. User interfaces for a podcast browsing and playback application
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
WO2020243691A1 (en) 2019-05-31 2020-12-03 Apple Inc. User interfaces for audio media control
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11074408B2 (en) 2019-06-01 2021-07-27 Apple Inc. Mail application features
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US10946294B1 (en) * 2019-08-30 2021-03-16 Sony Interactive Entertainment Inc. Summarizing notifications on a user display
CN110750198A (zh) * 2019-09-23 2020-02-04 维沃移动通信有限公司 一种表情发送方法及移动终端
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
CN114514497A (zh) 2019-09-27 2022-05-17 苹果公司 用于自定义图形对象的用户界面
US11252274B2 (en) * 2019-09-30 2022-02-15 Snap Inc. Messaging application sticker extensions
USD917540S1 (en) * 2019-09-30 2021-04-27 Apple Inc. Electronic device with animated graphical user interface
CN110928429B (zh) * 2019-11-22 2020-12-22 北京海泰方圆科技股份有限公司 一种信息输入方法、装置、介质和设备
JP7159396B2 (ja) * 2019-12-12 2022-10-24 キヤノン株式会社 画像形成装置、画像処理装置の制御方法及びプログラム
CN112988030B (zh) * 2019-12-13 2022-05-17 深圳市万普拉斯科技有限公司 终端控制方法、装置、终端和存储介质
KR102324200B1 (ko) * 2019-12-19 2021-11-08 주식회사 카카오 인스턴트 메시징 서비스에서 이모티콘을 제공하는 방법, 이를 구현한 서버, 사용자 단말 및 어플리케이션
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11455078B1 (en) 2020-03-31 2022-09-27 Snap Inc. Spatial navigation and creation interface
CN112306224A (zh) * 2020-04-30 2021-02-02 北京字节跳动网络技术有限公司 人机交互方法、装置和电子设备
US11921998B2 (en) 2020-05-11 2024-03-05 Apple Inc. Editing features of an avatar
US11209964B1 (en) * 2020-06-05 2021-12-28 SlackTechnologies, LLC System and method for reacting to messages
US11609640B2 (en) * 2020-06-21 2023-03-21 Apple Inc. Emoji user interfaces
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
USD965013S1 (en) * 2020-09-28 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD964391S1 (en) * 2020-09-28 2022-09-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
USD977523S1 (en) * 2020-12-21 2023-02-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD976959S1 (en) * 2020-12-21 2023-01-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US11797162B2 (en) 2020-12-22 2023-10-24 Snap Inc. 3D painting on an eyewear device
US11782577B2 (en) 2020-12-22 2023-10-10 Snap Inc. Media content player on an eyewear device
KR102619340B1 (ko) * 2021-01-28 2023-12-28 주식회사 카카오 사용자에게 컨텐츠를 제공하는 방법 및 사용자 단말
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
US11888797B2 (en) * 2021-04-20 2024-01-30 Snap Inc. Emoji-first messaging
US11531406B2 (en) 2021-04-20 2022-12-20 Snap Inc. Personalized emoji dictionary
US11593548B2 (en) 2021-04-20 2023-02-28 Snap Inc. Client device processing received emoji-first messages
US11938376B2 (en) 2021-05-15 2024-03-26 Apple Inc. User interfaces for group workouts
US11714536B2 (en) 2021-05-21 2023-08-01 Apple Inc. Avatar sticker editor user interfaces
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
KR102652719B1 (ko) * 2021-06-25 2024-03-28 주식회사 카카오 커스텀 키워드를 이용하여 이모티콘을 표시하는 방법 및 사용자 단말
US20230005495A1 (en) * 2021-06-30 2023-01-05 Ringcentral, Inc Systems and methods for virtual meeting speaker separation
USD1017618S1 (en) * 2021-10-13 2024-03-12 Zoom Video Communications, Inc. Display screen or portion thereof with graphical user interface
US11841898B2 (en) * 2021-12-01 2023-12-12 Whitestar Communications, Inc. Coherent pictograph organizer based on structuring pattern markers for hierarchal pictograph presentation
US11825004B1 (en) * 2023-01-04 2023-11-21 Mattel, Inc. Communication device for children

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008171127A (ja) 2007-01-10 2008-07-24 Sharp Corp 携帯情報端末および制御プログラム

Family Cites Families (347)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01172997A (ja) 1987-12-23 1989-07-07 Internatl Business Mach Corp <Ibm> メニユー表示を図形的にカストマイズする方法
US5169527A (en) * 1988-04-07 1992-12-08 Roediger Pittsburgh, Inc. Liquid extracting device and associated method
US5146556A (en) 1988-10-11 1992-09-08 Next Computer, Inc. System and method for managing graphic images
US5196838A (en) 1990-12-28 1993-03-23 Apple Computer, Inc. Intelligent scrolling
FR2693810B1 (fr) 1991-06-03 1997-01-10 Apple Computer Systemes d'interfaces d'utilisateurs a acces direct a une zone secondaire d'affichage.
US5592675A (en) * 1992-01-08 1997-01-07 Hitachi, Ltd. Computer controlled method and system capable of preserving information representing plural work states and recovering the work states
JP3248981B2 (ja) 1992-06-02 2002-01-21 松下電器産業株式会社 計算機
US5414805A (en) 1992-11-06 1995-05-09 International Business Machines Corporation Visual display transition effects using sorted table of display cells
US5812862A (en) 1993-05-10 1998-09-22 Apple Computer, Inc. Computer-human interface system for compound documents
US5745910A (en) * 1993-05-10 1998-04-28 Apple Computer, Inc. Frame structure which provides an interface between parts of a compound document
EP0626635B1 (en) 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
US5490245A (en) 1993-08-12 1996-02-06 Ast Research, Inc. Component-based icon construction and customization system
US5825357A (en) 1993-12-13 1998-10-20 Microsoft Corporation Continuously accessible computer system interface
US5642490A (en) * 1994-06-24 1997-06-24 International Business Machines Corporation Providing icon placement alternatives for dynamically added container records
EP0713172B1 (en) * 1994-11-15 2002-02-06 Microsoft Corporation Slide out interface bar
EP0717344B1 (en) * 1994-12-13 2001-10-31 Microsoft Corporation Taskbar with start menu
US5760773A (en) * 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
US5644739A (en) * 1995-01-27 1997-07-01 Microsoft Corporation Method and system for adding buttons to a toolbar
US5611060A (en) * 1995-02-22 1997-03-11 Microsoft Corporation Auto-scrolling during a drag and drop operation
US5914717A (en) * 1995-07-21 1999-06-22 Microsoft Methods and system for providing fly out menus
US5877765A (en) * 1995-09-11 1999-03-02 Microsoft Corporation Method and system for displaying internet shortcut icons on the desktop
US5796401A (en) 1996-08-09 1998-08-18 Winer; Peter W. System for designing dynamic layouts adaptable to various display screen sizes and resolutions
US6097431A (en) * 1996-09-04 2000-08-01 Flashpoint Technology, Inc. Method and system for reviewing and navigating among images on an image capture unit
US5870683A (en) 1996-09-18 1999-02-09 Nokia Mobile Phones Limited Mobile station having method and apparatus for displaying user-selectable animation sequence
JP2008123553A (ja) * 1996-10-16 2008-05-29 Sharp Corp 情報機器
US6144863A (en) 1996-11-26 2000-11-07 U.S. Philips Corporation Electronic device with screen comprising a menu which can be customized by a user
US6710788B1 (en) 1996-12-03 2004-03-23 Texas Instruments Incorporated Graphical user interface
US6256008B1 (en) * 1996-12-10 2001-07-03 Motorola Computer screen saver with wireless messaging capability and method therefor
US5923327A (en) * 1997-04-23 1999-07-13 Bell-Northern Research Ltd. Scrolling with automatic compression and expansion
US5934707A (en) 1997-05-30 1999-08-10 Johnson; Joyce W. Message calendar
US5995119A (en) 1997-06-06 1999-11-30 At&T Corp. Method for generating photo-realistic animated characters
US6433801B1 (en) 1997-09-26 2002-08-13 Ericsson Inc. Method and apparatus for using a touch screen display on a portable intelligent communications device
FI109733B (fi) * 1997-11-05 2002-09-30 Nokia Corp Viestin sisällön hyödyntäminen
JPH11154899A (ja) * 1997-11-19 1999-06-08 Toshiba Corp 通信端末装置
US6133914A (en) 1998-01-07 2000-10-17 Rogers; David W. Interactive graphical user interface
US6072486A (en) * 1998-01-13 2000-06-06 Microsoft Corporation System and method for creating and customizing a deskbar
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
KR100595925B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6466213B2 (en) 1998-02-13 2002-10-15 Xerox Corporation Method and apparatus for creating personal autonomous avatars
US6275935B1 (en) 1998-04-17 2001-08-14 Thingworld.Com, Llc Systems and methods for locking interactive objects
US6145083A (en) 1998-04-23 2000-11-07 Siemens Information And Communication Networks, Inc. Methods and system for providing data and telephony security
JP2000003316A (ja) * 1998-06-15 2000-01-07 Casio Comput Co Ltd メール装置及びメール処理プログラムを記録した記録媒体
US6229542B1 (en) * 1998-07-10 2001-05-08 Intel Corporation Method and apparatus for managing windows in three dimensions in a two dimensional windowing system
JP2000105772A (ja) 1998-07-28 2000-04-11 Sharp Corp 情報管理装置
US20010015719A1 (en) 1998-08-04 2001-08-23 U.S. Philips Corporation Remote control has animated gui
US6049336A (en) * 1998-08-12 2000-04-11 Sony Corporation Transition animation for menu structure
US6278454B1 (en) 1998-09-24 2001-08-21 Ericsson Inc. Call progress graphical user interface
US6195094B1 (en) * 1998-09-29 2001-02-27 Netscape Communications Corporation Window splitter bar system
JP2000163193A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
US6353451B1 (en) * 1998-12-16 2002-03-05 Intel Corporation Method of providing aerial perspective in a graphical user interface
US6628309B1 (en) 1999-02-05 2003-09-30 International Business Machines Corporation Workspace drag and drop
JP2000330526A (ja) 1999-03-12 2000-11-30 Minolta Co Ltd 液晶表示装置、携帯電子機器及び駆動方法
JP3726824B2 (ja) * 1999-03-12 2005-12-14 コニカミノルタホールディングス株式会社 液晶表示装置及び表示システム
US6545669B1 (en) * 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US7030863B2 (en) * 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
US6317140B1 (en) 1999-08-02 2001-11-13 Hewlett-Packard Company Displaying interactive bitmap images within a display space
US6763388B1 (en) 1999-08-10 2004-07-13 Akamai Technologies, Inc. Method and apparatus for selecting and viewing portions of web pages
US6781575B1 (en) 2000-09-21 2004-08-24 Handspring, Inc. Method and apparatus for organizing addressing elements
US20020173721A1 (en) 1999-08-20 2002-11-21 Novasonics, Inc. User interface for handheld imaging devices
GB9920327D0 (en) 1999-08-28 1999-11-03 Koninkl Philips Electronics Nv Menu display for a graphical user interface
US6976210B1 (en) 1999-08-31 2005-12-13 Lucent Technologies Inc. Method and apparatus for web-site-independent personalization from multiple sites having user-determined extraction functionality
US7134095B1 (en) 1999-10-20 2006-11-07 Gateway, Inc. Simulated three-dimensional navigational menu system
US7369130B2 (en) 1999-10-29 2008-05-06 Hitachi Kokusai Electric Inc. Method and apparatus for editing image data, and computer program product of editing image data
US6820111B1 (en) 1999-12-07 2004-11-16 Microsoft Corporation Computer user interface architecture that saves a user's non-linear navigation history and intelligently maintains that history
US6978127B1 (en) 1999-12-16 2005-12-20 Koninklijke Philips Electronics N.V. Hand-ear user interface for hand-held device
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US7362331B2 (en) 2000-01-05 2008-04-22 Apple Inc. Time-based, non-constant translation of user interface objects between states
US6396520B1 (en) * 2000-01-05 2002-05-28 Apple Computer, Inc. Method of transition between window states
WO2001057716A2 (en) 2000-02-02 2001-08-09 Ezlogin.Com, Inc. Clipping and manipulating elements contained in a web page
GB2365676B (en) 2000-02-18 2004-06-23 Sensei Ltd Mobile telephone with improved man-machine interface
JP2001265481A (ja) 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
JP3763389B2 (ja) 2000-03-24 2006-04-05 シャープ株式会社 画像データ編集操作方法および情報処理装置
US20010048448A1 (en) 2000-04-06 2001-12-06 Raiz Gregory L. Focus state themeing
JP2002014810A (ja) 2000-04-06 2002-01-18 Microsoft Corp 融合を用いたテーマ認識処理
JP3665535B2 (ja) * 2000-05-26 2005-06-29 株式会社ケンウッド 移動通信端末装置、移動通信端末装置のロック制御方法及び記録媒体
US7624356B1 (en) 2000-06-21 2009-11-24 Microsoft Corporation Task-sensitive methods and systems for displaying command sets
AU2001269891A1 (en) 2000-07-07 2002-01-21 Openwave Systems Inc. Graphical user interface features of a browser in a hand-held wireless communication device
IL153939A0 (en) * 2000-07-18 2003-07-31 Incredimail Ltd System and method for visual feedback of command execution in electronic mail systems
US20020104096A1 (en) 2000-07-19 2002-08-01 Cramer Allen Brett System and methods for providing web-based multimedia presentations
CA2349649A1 (en) 2000-07-31 2002-01-31 International Business Machines Corporation Switching between virtual desktops
US6704024B2 (en) * 2000-08-07 2004-03-09 Zframe, Inc. Visual content browsing using rasterized representations
JP2002062966A (ja) 2000-08-21 2002-02-28 Seiko Epson Corp 情報処理装置およびその制御方法
US20020054090A1 (en) * 2000-09-01 2002-05-09 Silva Juliana Freire Method and apparatus for creating and providing personalized access to web content and services from terminals having diverse capabilities
US7003308B1 (en) * 2000-09-12 2006-02-21 At&T Corp. Method and system for handwritten electronic messaging
US6990452B1 (en) * 2000-11-03 2006-01-24 At&T Corp. Method for sending multi-media messages using emoticons
WO2002039216A2 (en) 2000-11-03 2002-05-16 Outlet Group, Llc Method and system of an integrated business topography and virtual 3d network portal
US6918091B2 (en) * 2000-11-09 2005-07-12 Change Tools, Inc. User definable interface system, method and computer program product
US6590568B1 (en) * 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
KR100377936B1 (ko) 2000-12-16 2003-03-29 삼성전자주식회사 이동통신 단말기의 감정 아이콘 입력방법
US6727916B1 (en) * 2000-12-21 2004-04-27 Sprint Spectrum, L.P. Method and system for assisting a user to engage in a microbrowser-based interactive chat session
US7139982B2 (en) * 2000-12-21 2006-11-21 Xerox Corporation Navigation methods, systems, and computer program products for virtual three-dimensional books
FR2819675B1 (fr) 2001-01-17 2003-05-16 Sagem Telephone portable a navigateur de capture et de rappel d'adresses informatiques
US6677932B1 (en) * 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) * 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US20050024341A1 (en) * 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US7010758B2 (en) 2001-05-21 2006-03-07 Leap Wireless International, Inc. Dynamically defined context sensitive jump menu
US7434246B2 (en) * 2001-06-08 2008-10-07 Digeo, Inc. Systems and methods for automatic personalizing of channel favorites in a set top box
US8063923B2 (en) * 2001-07-13 2011-11-22 Universal Electronics Inc. System and method for updating information in an electronic portable device
US20050134578A1 (en) * 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
US6819340B2 (en) * 2001-07-23 2004-11-16 Paul E. Burke Adding a shortcut to a web site
US6987991B2 (en) * 2001-08-17 2006-01-17 Wildseed Ltd. Emoticon input method and apparatus
US7221933B2 (en) * 2001-10-22 2007-05-22 Kyocera Wireless Corp. Messaging system for mobile communication
JP2003162687A (ja) * 2001-11-28 2003-06-06 Toshiba Corp 手書き文字入力装置、手書き文字認識プログラム
US7310636B2 (en) 2002-01-15 2007-12-18 International Business Machines Corporation Shortcut enabled, context aware information management
US20030154446A1 (en) 2002-01-28 2003-08-14 Constant Nicholas Robert Character-based, graphically expressive mobile messaging system
JP2003248538A (ja) 2002-02-25 2003-09-05 Gakken Co Ltd プログラム及びそれを用いた情報処理装置、情報処理方法
US8972890B2 (en) 2002-03-06 2015-03-03 Apple Inc. Aminated menu bar
US7607102B2 (en) 2002-03-14 2009-10-20 Apple Inc. Dynamically changing appearances for user interface elements during drag-and-drop operations
US20030184552A1 (en) 2002-03-26 2003-10-02 Sanja Chadha Apparatus and method for graphics display system for markup languages
US6931601B2 (en) 2002-04-03 2005-08-16 Microsoft Corporation Noisy operating system user interface
US7689673B2 (en) 2002-04-23 2010-03-30 Canon Kabushiki Kaisha Remote creation of printer instances on a workstation
US6629793B1 (en) 2002-04-26 2003-10-07 Westie Intellectual Properties Limited Partnership Emoticon keyboard
US7810038B2 (en) 2002-05-03 2010-10-05 International Business Machines Corporation Method for modifying a GUI for an application
JP2003339079A (ja) * 2002-05-20 2003-11-28 Ntt Docomo Inc 移動通信端末、プログラム及び記録媒体
FI20021162A0 (fi) 2002-06-14 2002-06-14 Nokia Corp Elektroninen laite ja menetelmä sen näppäimistön hallintaan
JP2004023651A (ja) * 2002-06-19 2004-01-22 Matsushita Electric Ind Co Ltd 電話機
JP2004038310A (ja) * 2002-06-28 2004-02-05 Kyocera Corp 携帯情報端末装置及びこれに用いられる制御プログラム
US20040164973A1 (en) 2002-06-28 2004-08-26 Kyocera Corporation Personal digital assistant and program for controlling used for the same
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7027054B1 (en) 2002-08-14 2006-04-11 Avaworks, Incorporated Do-it-yourself photo realistic talking head creation system and method
US6919892B1 (en) 2002-08-14 2005-07-19 Avaworks, Incorporated Photo realistic talking head creation system and method
US20040041849A1 (en) * 2002-08-30 2004-03-04 Von Mock Display screen saver with two way messaging capability and method therefor
GB0220748D0 (en) 2002-09-06 2002-10-16 Saw You Com Ltd Improved communication using avatars
JP2004132741A (ja) 2002-10-08 2004-04-30 Kenwood Corp ナビゲーション装置
US20040085360A1 (en) * 2002-10-31 2004-05-06 Hallmark Interactive, Llc Icon-based graphical user interface for text messaging
US20040093582A1 (en) * 2002-11-01 2004-05-13 Segura Tim E. Method for allowing a computer to be used as an information kiosk while locked
JP2004159180A (ja) * 2002-11-07 2004-06-03 Toshiba Corp 電子メール送受信システム
US7266776B2 (en) * 2002-11-25 2007-09-04 Aol Llc Facilitating communications between computer users across a network
JP2004227393A (ja) 2003-01-24 2004-08-12 Sony Corp アイコン描画システム、アイコン描画方法及び電子機器装置
US20040155909A1 (en) 2003-02-07 2004-08-12 Sun Microsystems, Inc. Scroll tray mechanism for cellular telephone
US7185285B2 (en) * 2003-02-19 2007-02-27 Microsoft Corporation User interface and content enhancements for real-time communication
JP4074530B2 (ja) 2003-02-28 2008-04-09 京セラ株式会社 携帯情報端末装置
US7231229B1 (en) * 2003-03-16 2007-06-12 Palm, Inc. Communication device interface
US20040215719A1 (en) 2003-04-09 2004-10-28 Altshuler Dennis Wayne Method and system for designing, editing and publishing web page content in a live internet session
US9607092B2 (en) * 2003-05-20 2017-03-28 Excalibur Ip, Llc Mapping method and system
JP2005004396A (ja) * 2003-06-11 2005-01-06 Sony Corp 情報表示方法及び情報表示装置、並びにコンピュータ・プログラム
WO2004111816A2 (en) 2003-06-13 2004-12-23 University Of Lancaster User interface
CN101040249A (zh) 2003-06-27 2007-09-19 索夫特斯扣普有限公司 虚拟桌面—元－组织和控制系统
KR100508123B1 (ko) * 2003-07-04 2005-08-10 엘지전자 주식회사 기호 입력방법 및 장치
US20050066279A1 (en) 2003-07-23 2005-03-24 Lebarton Jeffrey Stop motion capture tool
US7164410B2 (en) 2003-07-28 2007-01-16 Sig G. Kupka Manipulating an on-screen object using zones surrounding the object
US20050026644A1 (en) * 2003-07-28 2005-02-03 Inventec Appliances Corp. Cellular phone for specific person
US6973299B2 (en) 2003-08-01 2005-12-06 Microsoft Corporation Unified contact list
US7325204B2 (en) * 2003-08-29 2008-01-29 Yahoo! Inc. Slideout windows
KR20050022117A (ko) * 2003-08-29 2005-03-07 엘지전자 주식회사 이동통신단말기의 절전장치 및 방법
JP2005092441A (ja) * 2003-09-16 2005-04-07 Aizu:Kk 文字入力方法
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
JP2005115896A (ja) 2003-10-10 2005-04-28 Nec Corp 通信装置及び通信方法
US8527896B2 (en) * 2003-10-23 2013-09-03 Microsoft Corporation User interface menu with hovering icons
FI116641B (fi) 2003-10-24 2006-01-13 Nokia Corp Menetelmä elektronisessa laitteessa olevan pikavalinnan muuttamiseksi, laitteen näyttöyksikkö sekä elektroninen laite
US20050097089A1 (en) * 2003-11-05 2005-05-05 Tom Nielsen Persistent user interface for providing navigational functionality
US7355593B2 (en) * 2004-01-02 2008-04-08 Smart Technologies, Inc. Pointer tracking across multiple overlapping coordinate input sub-regions defining a generally contiguous input region
US8171084B2 (en) * 2004-01-20 2012-05-01 Microsoft Corporation Custom emoticons
US20050202748A1 (en) 2004-03-11 2005-09-15 Beanhead Toys & Entertainment Freestanding, reconfigurable, disposable character form and kit for making same
US7546554B2 (en) * 2004-03-31 2009-06-09 Fuji Xerox Co., Ltd. Systems and methods for browsing multimedia content on small mobile devices
US20050229102A1 (en) 2004-04-12 2005-10-13 Microsoft Corporation System and method for providing an interactive display
JP4241484B2 (ja) * 2004-04-14 2009-03-18 日本電気株式会社 携帯端末装置、着信応答メッセージ送信方法およびサーバ装置
JP2005309933A (ja) 2004-04-23 2005-11-04 Canon Inc 拡張制御装置および画像処理システムおよびアプリケーションアイコン表示方法およびプログラムおよび記憶媒体
US7565625B2 (en) 2004-05-06 2009-07-21 Pixar Toolbar slot method and apparatus
US20050250438A1 (en) 2004-05-07 2005-11-10 Mikko Makipaa Method for enhancing communication, a terminal and a telecommunication system
JP2005352943A (ja) 2004-06-14 2005-12-22 Matsushita Electric Ind Co Ltd 情報端末及び表示制御プログラム
US7358962B2 (en) 2004-06-15 2008-04-15 Microsoft Corporation Manipulating association of data with a physical object
FI20045245A0 (fi) 2004-06-28 2004-06-28 Nokia Corp Selauksen tehostaminen elektronisessa laitteessa
US7689939B1 (en) * 2004-06-30 2010-03-30 Avaya Inc. Software application break through a screen blanker
US7669135B2 (en) 2004-07-15 2010-02-23 At&T Mobility Ii Llc Using emoticons, such as for wireless devices
US20060025110A1 (en) 2004-07-28 2006-02-02 Jun Liu Password protection for mobile phones
KR100610894B1 (ko) * 2004-07-28 2006-08-10 엘지전자 주식회사 스크린 세이버 자동 잠금 기능을 포함하는 이동통신단말기 및 그 제어방법
WO2006020305A2 (en) 2004-07-30 2006-02-23 Apple Computer, Inc. Gestures for touch sensitive input devices
US20060025091A1 (en) * 2004-08-02 2006-02-02 Matsushita Electric Industrial Co., Ltd Method for creating and using phrase history for accelerating instant messaging input on mobile devices
CA2481065C (en) * 2004-09-07 2014-01-21 Research In Motion Limited System and method for inserting a graphic object in to a text based message
BRPI0419168B1 (pt) * 2004-09-24 2017-05-16 Nokia Corp dispositivo eletrônico compreendendo a detecção de uma entrada de um usuário durante um modo de operação inativo
JP2006134288A (ja) * 2004-10-06 2006-05-25 Sharp Corp インターフェース及びコンピュータにより実行されるインターフェースプログラム
US20060080616A1 (en) * 2004-10-13 2006-04-13 Xerox Corporation Systems, methods and user interfaces for document workflow construction
US7603105B2 (en) 2004-11-12 2009-10-13 Research In Motion Limited Method of making phone calls from a locked out handheld electronic device and a handheld electronic device incorporating the same
US7925996B2 (en) * 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US20060123360A1 (en) * 2004-12-03 2006-06-08 Picsel Research Limited User interfaces for data processing devices and systems
US8375327B2 (en) * 2005-01-16 2013-02-12 Zlango Ltd. Iconic communication
TWI254558B (en) 2005-01-18 2006-05-01 Asustek Comp Inc Mobile communication device with a transition effect function
US20060209035A1 (en) 2005-03-17 2006-09-21 Jenkins Phillip D Device independent specification of navigation shortcuts in an application
US7340686B2 (en) 2005-03-22 2008-03-04 Microsoft Corporation Operating system program launch menu search
US7512898B2 (en) * 2005-04-07 2009-03-31 Microsoft Corporation User interface with multi-state menu
US7506268B2 (en) * 2005-04-07 2009-03-17 Microsoft Corporation User interface with visual tracking feature
US7614016B2 (en) 2005-04-21 2009-11-03 Microsoft Corporation Multiple roots in navigation pane
US7530029B2 (en) 2005-05-24 2009-05-05 Microsoft Corporation Narrow mode navigation pane
US20060277460A1 (en) 2005-06-03 2006-12-07 Scott Forstall Webview applications
US7195170B2 (en) 2005-06-09 2007-03-27 Fuji Xerox Co., Ltd. Post-bit: multimedia ePaper stickies
US7432928B2 (en) 2005-06-14 2008-10-07 Microsoft Corporation User interface state reconfiguration through animation
US7676767B2 (en) 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
US8963926B2 (en) 2006-07-11 2015-02-24 Pandoodle Corporation User customized animated video and method for making the same
JP2007052403A (ja) * 2005-07-19 2007-03-01 Canon Inc 表示装置及び表示方法及びプログラム及び記憶媒体
JP4815927B2 (ja) * 2005-07-27 2011-11-16 ソニー株式会社 表示装置、メニュー表示方法、メニュー表示方法のプログラム及びメニュー表示方法のプログラムを記録した記録媒体
US20070055947A1 (en) * 2005-09-02 2007-03-08 Microsoft Corporation Animations and transitions
WO2007031816A1 (en) * 2005-09-14 2007-03-22 Nokia Corporation A device, method, computer program and user interface for enabling a user to vary which items are displayed to the user
US20070067738A1 (en) 2005-09-16 2007-03-22 Microsoft Corporation Extensible, filtered lists for mobile device user interface
US20070152980A1 (en) * 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US20070072602A1 (en) * 2005-09-21 2007-03-29 Iyer Radha J Automated reply to voice call
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
US8769408B2 (en) * 2005-10-07 2014-07-01 Apple Inc. Intelligent media navigation
US7603424B2 (en) * 2005-11-03 2009-10-13 Research In Motion Limited Method and system for generating template replies to electronic mail messages
US7730425B2 (en) * 2005-11-30 2010-06-01 De Los Reyes Isabelo Function-oriented user interface
US20070132789A1 (en) * 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
KR100801089B1 (ko) 2005-12-13 2008-02-05 삼성전자주식회사 터치 및 드래그를 이용하여 제어 가능한 모바일 장치 및 그조작 방법
EP1801711A1 (en) * 2005-12-21 2007-06-27 Transmedia Communications Sàrl Method for remotely organizing audio-visual items stored in a central database
US7657849B2 (en) * 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7509588B2 (en) * 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US8370360B2 (en) 2005-12-31 2013-02-05 G & G Commerce Ltd. Merchandise recommending system and method thereof
EP1977312A2 (en) * 2006-01-16 2008-10-08 Zlango Ltd. Iconic communication
US7961903B2 (en) * 2006-01-25 2011-06-14 Microsoft Corporation Handwriting style data input via keys
US7450003B2 (en) 2006-02-24 2008-11-11 Yahoo! Inc. User-defined private maps
US8139514B2 (en) 2006-02-24 2012-03-20 Yahoo! Inc. Method and system for communicating with multiple users via a map over the internet
JP2007274240A (ja) * 2006-03-30 2007-10-18 Nec Corp 携帯端末
DE202006021132U1 (de) * 2006-03-31 2012-12-20 Research In Motion Limited Vorrichtung zur Bereitstellung von Kartenorten bei Benutzeranwendungen unter Verwendung von URL-Strings
AU2006352758A1 (en) 2006-04-10 2008-12-24 Avaworks Incorporated Talking Head Creation System and Method
US8968077B2 (en) * 2006-04-13 2015-03-03 Idt Methods and systems for interfacing with a third-party application
US8548452B2 (en) 2006-04-13 2013-10-01 Blackberry Limited System and method for controlling device usage
US20070245250A1 (en) 2006-04-18 2007-10-18 Microsoft Corporation Microsoft Patent Group Desktop window manager using an advanced user interface construction framework
US7783990B2 (en) 2006-05-05 2010-08-24 Microsoft Corporation Association of display elements
CN101490676B (zh) 2006-05-10 2014-07-30 谷歌公司 Web笔记本工具
US8571580B2 (en) * 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
KR100827230B1 (ko) 2006-06-09 2008-05-07 삼성전자주식회사 메뉴 아이콘을 제공하는 휴대용 장치 및 그 방법
US8086971B2 (en) * 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7880728B2 (en) 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
US8369843B2 (en) * 2006-07-27 2013-02-05 Research In Motion Limited Method of responding to an incoming communication received by a handheld device
US20080034309A1 (en) 2006-08-01 2008-02-07 Louch John O Multimedia center including widgets
US7996789B2 (en) 2006-08-04 2011-08-09 Apple Inc. Methods and apparatuses to control application programs
US7805684B2 (en) 2006-09-01 2010-09-28 Nokia Corporation Mobile communications terminal
US10313505B2 (en) * 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US9304675B2 (en) * 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7853972B2 (en) 2006-09-11 2010-12-14 Apple Inc. Media preview user interface
US20080104515A1 (en) 2006-10-30 2008-05-01 Dan Dumitru System and method for slide presentation
US8161395B2 (en) * 2006-11-13 2012-04-17 Cisco Technology, Inc. Method for secure data entry in an application
EP2098010A1 (en) 2006-11-30 2009-09-09 WANLESS, James Andrew A method and system for providing automated real-time contact information
KR100822295B1 (ko) * 2006-12-07 2008-04-16 삼성전자주식회사 메시지 정보 표시 방법 및 시스템
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US7890778B2 (en) 2007-01-06 2011-02-15 Apple Inc. Power-off methods for portable electronic devices
US20080168367A1 (en) * 2007-01-07 2008-07-10 Chaudhri Imran A Dashboards, Widgets and Devices
US7742774B2 (en) * 2007-01-11 2010-06-22 Virgin Mobile Usa, L.P. Location-based text messaging
US20080182628A1 (en) * 2007-01-26 2008-07-31 Matthew Lee System and method for previewing themes
US8996045B2 (en) * 2007-01-29 2015-03-31 Blackberry Limited Method of e-mailing a map location using predefined context-sensitive messages
US8601370B2 (en) 2007-01-31 2013-12-03 Blackberry Limited System and method for organizing icons for applications on a mobile device
US20080189108A1 (en) 2007-02-05 2008-08-07 Comverse Ltd. Text messaging in a telephony network
US20080242423A1 (en) 2007-03-27 2008-10-02 Shelford Securities, S.A. Real-money online multi-player trivia system, methods of operation, and storage medium
US20080268882A1 (en) 2007-04-30 2008-10-30 Palm, Inc. Short message service enhancement techniques for added communication options
US9317110B2 (en) 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US20080300572A1 (en) 2007-06-01 2008-12-04 Medtronic Minimed, Inc. Wireless monitor for a personal medical device system
US8218734B2 (en) 2007-06-12 2012-07-10 Microsoft Corporation Messaging with a locked communication device
US9772751B2 (en) * 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
GB2450757A (en) 2007-07-06 2009-01-07 Sony Comp Entertainment Europe Avatar customisation, transmission and reception
US8745060B2 (en) 2007-07-25 2014-06-03 Yahoo! Inc. Indexing and searching content behind links presented in a communication
US8146005B2 (en) 2007-08-07 2012-03-27 International Business Machines Corporation Creating a customized avatar that reflects a user's distinguishable attributes
US20090055484A1 (en) 2007-08-20 2009-02-26 Thanh Vuong System and method for representation of electronic mail users using avatars
US11126321B2 (en) * 2007-09-04 2021-09-21 Apple Inc. Application menu user interface
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8446371B2 (en) 2007-12-19 2013-05-21 Research In Motion Limited Method and apparatus for launching activities
WO2009083981A1 (en) * 2007-12-31 2009-07-09 Bklk Ltd. A method and a system for rapid awareness, recognition, and response to digital messages
US8356258B2 (en) 2008-02-01 2013-01-15 Microsoft Corporation Arranging display areas utilizing enhanced window states
US20090222765A1 (en) * 2008-02-29 2009-09-03 Sony Ericsson Mobile Communications Ab Adaptive thumbnail scrollbar
US20110025707A1 (en) 2009-02-17 2011-02-03 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US20100211900A1 (en) 2009-02-17 2010-08-19 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US20100211899A1 (en) 2009-02-17 2010-08-19 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US9744466B2 (en) 2008-03-13 2017-08-29 Mattel, Inc. Widgetized avatar and a method and system of creating and using same
US20090247112A1 (en) * 2008-03-28 2009-10-01 Sprint Communications Company L.P. Event disposition control for mobile communications device
US8832552B2 (en) 2008-04-03 2014-09-09 Nokia Corporation Automated selection of avatar characteristics for groups
US20090254799A1 (en) * 2008-04-04 2009-10-08 Michael Unger System for creating graphical display from text
US20090271731A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
EP2293855A1 (en) 2008-06-02 2011-03-16 Nike International Ltd. System and method for creating an avatar
KR100989624B1 (ko) * 2008-09-18 2010-10-26 오광만 이동통신 단말기의 이모티콘 문자 입력 방법
US8941642B2 (en) 2008-10-17 2015-01-27 Kabushiki Kaisha Square Enix System for the creation and editing of three dimensional models
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100169376A1 (en) 2008-12-29 2010-07-01 Yahoo! Inc. Visual search engine for personal dating
TWI439960B (zh) 2010-04-07 2014-06-01 Apple Inc 虛擬使用者編輯環境
US9542038B2 (en) 2010-04-07 2017-01-10 Apple Inc. Personalizing colors of user interfaces
US8694899B2 (en) 2010-06-01 2014-04-08 Apple Inc. Avatars reflecting user states
US20110298808A1 (en) 2010-06-02 2011-12-08 Toyota Motor Engineering & Manufacturing North America, Inc. Animated Vehicle Attendance Systems
US20110304629A1 (en) 2010-06-09 2011-12-15 Microsoft Corporation Real-time animation of facial expressions
US8749557B2 (en) 2010-06-11 2014-06-10 Microsoft Corporation Interacting with user interface via avatar
JP5134653B2 (ja) 2010-07-08 2013-01-30 株式会社バンダイナムコゲームス プログラム及びユーザ端末
CN102347912B (zh) 2010-08-02 2014-11-05 腾讯科技（深圳）有限公司 即时通讯软件中获取动态更新的方法及系统
US8558844B2 (en) 2010-09-28 2013-10-15 Apple Inc. Systems, methods, and computer-readable media for changing colors of displayed assets
CA2813758C (en) 2010-10-08 2023-01-03 Brian Lee Moffat Private data sharing system
JP2012181704A (ja) 2011-03-01 2012-09-20 Sony Computer Entertainment Inc 情報処理装置および情報処理方法
US9563703B2 (en) 2011-03-10 2017-02-07 Cox Communications, Inc. System, method and device for sharing of playlists of authorized content with other users
US9013489B2 (en) 2011-06-06 2015-04-21 Microsoft Technology Licensing, Llc Generation of avatar reflecting player appearance
US10262327B1 (en) 2011-09-22 2019-04-16 Glance Networks, Inc. Integrating screen sharing sessions with customer relationship management
US8867849B1 (en) 2011-10-05 2014-10-21 Google Inc. Suggesting profile images for a social network
US9747495B2 (en) 2012-03-06 2017-08-29 Adobe Systems Incorporated Systems and methods for creating and distributing modifiable animated video messages
US9402057B2 (en) 2012-04-02 2016-07-26 Argela Yazilim ve Bilisim Teknolojileri San. ve Tic. A.S. Interactive avatars for telecommunication systems
CN104205171A (zh) 2012-04-09 2014-12-10 英特尔公司 用于化身生成、渲染和动画的系统和方法
US20140115451A1 (en) 2012-06-28 2014-04-24 Madeleine Brett Sheldon-Dante System and method for generating highly customized books, movies, and other products
US9936165B2 (en) 2012-09-06 2018-04-03 Intel Corporation System and method for avatar creation and synchronization
US20140078144A1 (en) 2012-09-14 2014-03-20 Squee, Inc. Systems and methods for avatar creation
US9148489B2 (en) 2013-03-11 2015-09-29 Qualcomm Incorporated Exchanging a contact profile between client devices during a communication session
US20140279062A1 (en) 2013-03-15 2014-09-18 Rodan & Fields, Llc Consultant tool for direct selling
WO2014153689A1 (en) 2013-03-29 2014-10-02 Intel Corporation Avatar animation, social networking and touch screen applications
IL226047A (en) 2013-04-29 2017-12-31 Hershkovitz Reshef May A method and system for giving personal expressions
US10877629B2 (en) 2016-10-13 2020-12-29 Tung Inc. Conversion and display of a user input
US9489760B2 (en) 2013-11-14 2016-11-08 Intel Corporation Mechanism for facilitating dynamic simulation of avatars corresponding to changing user performances as detected at computing devices
CN104836879A (zh) 2014-02-12 2015-08-12 腾讯科技（深圳）有限公司 通讯录的更新方法、服务器及系统
US20150254886A1 (en) 2014-03-07 2015-09-10 Utw Technology Co., Ltd. System and method for generating animated content
CN106233323A (zh) 2014-03-09 2016-12-14 迪罗有限公司 组源联系人目录的管理系统和方法
WO2015139231A1 (en) 2014-03-19 2015-09-24 Intel Corporation Facial expression and/or interaction driven avatar apparatus and method
US9536228B2 (en) 2014-07-31 2017-01-03 Gretel, LLC Contact management systems
US20160055370A1 (en) 2014-08-21 2016-02-25 Futurewei Technologies, Inc. System and Methods of Generating User Facial Expression Library for Messaging and Social Networking Applications
US20160057087A1 (en) 2014-08-21 2016-02-25 Facebook, Inc. Processing media messages based on the capabilities of the receiving device
KR101540544B1 (ko) 2014-09-05 2015-07-30 서용창 캐릭터를 이용한 메시지 서비스 방법, 상기 방법을 수행하는 사용자 단말, 상기 방법을 포함하는 메시지 애플리케이션
US9984487B2 (en) 2014-09-24 2018-05-29 Intel Corporation Facial gesture driven animation communication system
US9898849B2 (en) 2014-11-05 2018-02-20 Intel Corporation Facial expression based avatar rendering in video animation and method
US9491258B2 (en) 2014-11-12 2016-11-08 Sorenson Communications, Inc. Systems, communication endpoints, and related methods for distributing images corresponding to communication endpoints
US9824502B2 (en) 2014-12-23 2017-11-21 Intel Corporation Sketch selection for rendering 3D model avatar
JP6461630B2 (ja) 2015-02-05 2019-01-30 任天堂株式会社 通信システム、通信装置、プログラム及び表示方法
JP2018514020A (ja) 2015-04-07 2018-05-31 インテル コーポレイション アバターキーボード
US20160307028A1 (en) 2015-04-16 2016-10-20 Mikhail Fedorov Storing, Capturing, Updating and Displaying Life-Like Models of People, Places And Objects
KR102305525B1 (ko) 2015-06-09 2021-09-27 삼성전자주식회사 이동 통신 시스템에서 단말을 이용하는 사용자 프로필 정보 공유 기법
US9891933B2 (en) 2015-06-24 2018-02-13 International Business Machines Corporation Automated testing of GUI mirroring
US10171985B1 (en) 2015-07-22 2019-01-01 Ginko LLC Method and apparatus for data sharing
US11048739B2 (en) 2015-08-14 2021-06-29 Nasdaq, Inc. Computer-implemented systems and methods for intelligently retrieving, analyzing, and synthesizing data from databases
US10475225B2 (en) 2015-12-18 2019-11-12 Intel Corporation Avatar animation system
US10366090B2 (en) 2016-03-30 2019-07-30 Facebook, Inc. Displaying temporary profile content items on communication networks
US10331336B2 (en) 2016-05-18 2019-06-25 Apple Inc. Devices, methods, and graphical user interfaces for messaging
US10491553B2 (en) 2016-05-26 2019-11-26 International Business Machines Corporation Dynamically integrating contact profile pictures into messages based on user input
CN106101358A (zh) 2016-05-27 2016-11-09 珠海市魅族科技有限公司 一种联系人信息更新的方法及智能设备
US10607386B2 (en) 2016-06-12 2020-03-31 Apple Inc. Customized avatars and associated framework
US10855632B2 (en) 2016-07-19 2020-12-01 Snap Inc. Displaying customized electronic messaging graphics
US11003898B2 (en) 2016-07-25 2021-05-11 BGR Technologies Pty Limited Creating videos with facial expressions
US20180047200A1 (en) 2016-08-11 2018-02-15 Jibjab Media Inc. Combining user images and computer-generated illustrations to produce personalized animated digital avatars
EP3516627A4 (en) 2016-09-23 2020-06-24 Apple Inc. CREATION AND EDITION OF AVATAR
US10528801B2 (en) 2016-12-07 2020-01-07 Keyterra LLC Method and system for incorporating contextual and emotional visualization into electronic communications
US10242503B2 (en) 2017-01-09 2019-03-26 Snap Inc. Surface aware lens
WO2018148084A1 (en) 2017-02-07 2018-08-16 Iot Holdings, Inc. System and method to prevent surveillance and preserve privacy in virtual reality
KR20180120449A (ko) 2017-04-27 2018-11-06 삼성전자주식회사 프로필 이미지 공유 방법 및 이를 지원하는 전자 장치
CN107171934B (zh) 2017-05-05 2019-10-25 沈思远 即时通讯工具的信息处理方法、即时通讯客户端及系统
DK179948B1 (en) 2017-05-16 2019-10-22 Apple Inc. Recording and sending Emoji
US10397391B1 (en) 2017-05-22 2019-08-27 Ginko LLC Two-way permission-based directory of contacts
US20190114037A1 (en) 2017-10-17 2019-04-18 Blend Systems, Inc. Systems and methods for distributing customized avatars responsive to events
CN107613085A (zh) 2017-10-31 2018-01-19 武汉诚迈科技有限公司 手机通讯录自动更新方法、服务器和用户终端
KR102517427B1 (ko) 2017-11-29 2023-04-03 스냅 인코포레이티드 전자 메시징 애플리케이션들을 위한 그래픽 렌더링
KR102565755B1 (ko) 2018-02-23 2023-08-11 삼성전자주식회사 얼굴의 특징점의 움직임에 따라 모션이 수행된 아바타를 표시하는 전자 장치와 이의 동작 방법
CN111742351A (zh) 2018-02-23 2020-10-02 三星电子株式会社 用于生成包括通过与面部相对应的3d化身反映面部运动的3d化身的图像的电子设备及操作其的方法
US11062494B2 (en) 2018-03-06 2021-07-13 Didimo, Inc. Electronic messaging utilizing animatable 3D models
US20190295056A1 (en) 2018-03-20 2019-09-26 Rocky Jerome Wright Augmented Reality and Messaging
KR102002863B1 (ko) 2018-04-13 2019-07-24 라인플러스 주식회사 사람의 얼굴을 이용한 동물 형상의 아바타를 생성하는 방법 및 시스템
US10607065B2 (en) 2018-05-03 2020-03-31 Adobe Inc. Generation of parameterized avatars
US10953334B2 (en) 2019-03-27 2021-03-23 Electronic Arts Inc. Virtual character generation from image or video data
DK201970530A1 (en) 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008171127A (ja) 2007-01-10 2008-07-24 Sharp Corp 携帯情報端末および制御プログラム

Also Published As

Publication number Publication date
HK1204115A1 (en) 2015-11-06
JP2015215914A (ja) 2015-12-03
US20190199848A1 (en) 2019-06-27
KR20150084072A (ko) 2015-07-21
US20210227065A1 (en) 2021-07-22
JP6518705B2 (ja) 2019-05-22
US20100125785A1 (en) 2010-05-20
JP2014002755A (ja) 2014-01-09
KR20160018816A (ko) 2016-02-17
US20100123724A1 (en) 2010-05-20
JP5771243B2 (ja) 2015-08-26
WO2010059306A2 (en) 2010-05-27
KR101590457B1 (ko) 2016-02-04
KR20110089429A (ko) 2011-08-08
CN104133589A (zh) 2014-11-05
US20220221985A1 (en) 2022-07-14
KR20170118237A (ko) 2017-10-24
US20120319985A1 (en) 2012-12-20
US11307763B2 (en) 2022-04-19
CN102265586A (zh) 2011-11-30
CN102265586B (zh) 2014-07-16
JP6584710B2 (ja) 2019-10-02
HK1203671A1 (en) 2015-10-30
KR101967353B1 (ko) 2019-04-10
CN104156142B (zh) 2017-10-24
US8584031B2 (en) 2013-11-12
JP6085006B2 (ja) 2017-02-22
KR101590462B1 (ko) 2016-02-04
US8255810B2 (en) 2012-08-28
KR20130064806A (ko) 2013-06-18
US20100125811A1 (en) 2010-05-20
JP5319781B2 (ja) 2013-10-16
CN104133589B (zh) 2018-06-15
CN104156142A (zh) 2014-11-19
JP2019164804A (ja) 2019-09-26
JP2017097911A (ja) 2017-06-01
JP2012509641A (ja) 2012-04-19
KR101787035B1 (ko) 2017-11-15

Similar Documents

Publication Publication Date Title
JP6584710B2 (ja) 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
US11743375B2 (en) Portable electronic device with conversation management for incoming instant messages
US8407603B2 (en) Portable electronic device for instant messaging multiple recipients
US9207855B2 (en) Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US8624935B2 (en) Smart keyboard management for a multifunction device with a touch screen display
KR102226667B1 (ko) 동시 오픈 소프트웨어 애플리케이션들을 관리하는 제스처 기반 그래픽 사용자 인터페이스

Legal Events

Date Code Title Description
A201 Request for examination
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160921

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170919

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180918

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190917

Year of fee payment: 7