KR101958517B1 - 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스 - Google Patents

터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR101958517B1
KR101958517B1 KR1020157018448A KR20157018448A KR101958517B1 KR 101958517 B1 KR101958517 B1 KR 101958517B1 KR 1020157018448 A KR1020157018448 A KR 1020157018448A KR 20157018448 A KR20157018448 A KR 20157018448A KR 101958517 B1 KR101958517 B1 KR 101958517B1
Authority
KR
South Korea
Prior art keywords
intensity
input
delete delete
touch sensitive
contact
Prior art date
Application number
KR1020157018448A
Other languages
English (en)
Other versions
KR20150093813A (ko
Inventor
제프리 트레어 번스테인
줄리안 미시그
아비 이. 시엡플린스키
웨인 씨. 웨스터맨
데이비드 제이. 하트
비. 마이클 빅토르
크리스티 이.에스. 바우얼리
다니엘 맥스 스트롱워터
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20150093813A publication Critical patent/KR20150093813A/ko
Application granted granted Critical
Publication of KR101958517B1 publication Critical patent/KR101958517B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/045—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/046—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by electromagnetic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105—Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

터치 감응형 표면, 디스플레이, 및 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스는, 접촉을 검출하고, 터치 감응형 표면 상의 접촉의 위치 및 세기를 결정하고, 응답을 디스플레이하며, 응답은 접촉 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초한다. 입력-출력 매핑은 제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계, 제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계, 및 제1 범위의 세기 값들이 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함한다. 전환 세기 값에서, 제1 입력-출력 관계는 제1 변화율을 갖고, 제2 입력-출력 관계는 제2 변화율을 가지며, 제1 변화율은 제2 변화율과 실질적으로 동일하다.

Description

터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스{DEVICE, METHOD, AND GRAPHICAL USER INTERFACE FOR TRANSITIONING BETWEEN TOUCH INPUT TO DISPLAY OUTPUT RELATIONSHIPS}
관련 출원
본 출원은 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Transitioning between Touch Input to Display Output Relationships"인 미국 특허 가출원 제61/778,363호; 및 2012년 12월 29일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Manipulating User Interface Objects with Visual and/or Haptic Feedback"인 미국 특허 가출원 제61/747,278호에 대한 우선권을 주장하며, 이들 출원은 참조 문헌으로서 그 전문이 본 명세서에 편입된다.
본 출원은 또한, 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Selecting Object within a Group of Objects"인 미국 특허 가출원 제61/778,092호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Navigating User Interface Hierarchies"인 미국 특허 가출원 제61/778,125호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Manipulating Framed Graphical Objects"인 미국 특허 가출원 제61/778,156호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Scrolling Nested Regions"인 미국 특허 가출원 제61/778,179호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Displaying Additional Information in Response to a User Contact"인 미국 특허 가출원 제61/778,171호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Displaying User Interface Objects Corresponding to an Application"인 미국 특허 가출원 제61/778,191호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Facilitating User Interaction with Controls in a User Interface"인 미국 특허 가출원 제61/778,211호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Forgoing Generation of Tactile Output for a Multi-Contact Gesture"인 미국 특허 가출원 제61/778,239호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Providing Tactile Feedback for Operations Performed in a User Interface"인 미국 특허 가출원 제61/778,284호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Providing Feedback for Changing Activation States of a User Interface Object"인 미국 특허 가출원 제61/778,287호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Moving a User Interface Object Based on an Intensity of a Press Input"인 미국 특허 가출원 제61/778,367호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Transitioning between Display States in Response to a Gesture"인 미국 특허 가출원 제61/778,265호; 2013년 3월 12일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Managing Activation of a Control Based on Contact Intensity"인 미국 특허 가출원 제61/778,373호; 2013년 3월 13일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Displaying Content Associated with a Corresponding Affordance"인 미국 특허 가출원 제61/778,412호; 2013년 3월 13일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Selecting User Interface Objects"인 미국 특허 가출원 제61/778,413호; 2013년 3월 13일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Moving and Dropping a User Interface Object"인 미국 특허 가출원 제61/778,414호; 2013년 3월 13일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Determining Whether to Scroll or Select Content"인 미국 특허 가출원 제61/778,416호; 및 2013년 3월 13일자로 출원된, 발명의 명칭이 "Device, Method, and Graphical User Interface for Switching between User Interfaces"인 미국 특허 가출원 제61/778,418호와 관련되며, 이들은 참조 문헌으로서 그 전문이 본 명세서에 편입된다.
본 출원은 또한, 2012년 5월 9일자로 출원된, 발명의 명칭이 "Adaptive Haptic Feedback for Electronic Devices"인 미국 특허 가출원 제61/645,033호; 2012년 6월 28일자로 출원된, 발명의 명칭이 "Adaptive Haptic Feedback for Electronic Devices"인 미국 특허 가출원 제61/665,603호; 및 2012년 8월 8일자로 출원된, 발명의 명칭이 "Adaptive Haptic Feedback for Electronic Devices"인 미국 특허 가출원 제61/681,098호와 관련되며, 이들은 참조 문헌으로서 그 전문이 본 명세서에 편입된다.
기술분야
본 발명은 대체로 터치 감응형 표면(touch-sensitive surface)들을 구비한 전자 디바이스들에 관한 것으로서, 사용자 인터페이스들을 조작하기 위한 입력들을 검출하는 터치 감응형 표면들을 구비한 전자 디바이스들을 포함하지만 이로 제한되지는 않는다.
컴퓨터들 및 다른 전자 컴퓨팅 디바이스들에 대한 입력 디바이스들로서의 터치 감응형 표면들의 사용은 최근 몇 년 내에 현저히 증가했다. 예시적인 터치 감응형 표면들은 터치패드들 및 터치 스크린 디스플레이들을 포함한다. 그러한 표면들은 디스플레이 상의 사용자 인터페이스 객체들을 조작하기 위해 널리 사용된다.
예시적인 조작들은, 하나 이상의 사용자 인터페이스 객체의 위치 및/또는 크기를 조정하는 것 또는 버튼들을 활성화시키는 것 또는 사용자 인터페이스 객체들에 의해 표현된 파일들/애플리케이션들을 여는 것뿐만 아니라, 메타데이터를 하나 이상의 사용자 인터페이스 객체와 연관시키는 것 또는 다른 방법으로 사용자 인터페이스들을 조작하는 것을 포함한다. 예시적인 사용자 인터페이스 객체들은 디지털 이미지, 비디오, 텍스트, 아이콘, 버튼과 같은 제어 요소, 및 기타 그래픽을 포함한다. 일부 환경들에서, 사용자는 그러한 조작들을 파일 관리 프로그램(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사(Apple Inc.)로부터의 파인더(Finder)), 이미지 관리 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 애퍼처(Aperture) 또는 아이포토(iPhoto)), 디지털 콘텐츠(예를 들어, 비디오 및 음악) 관리 애플리케이션(예를 들면, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 아이튠즈(iTunes)), 그리기 애플리케이션(drawing application), 프레젠테이션 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 키노트(Keynote)), 워드 프로세싱 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 페이지스(Pages)), 웹사이트 제작 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 아이웹(iWeb)), 디스크 저작 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 아이디비디(iDVD)), 또는 스프레드시트 애플리케이션(예를 들어, 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 넘버스(Numbers))에서의 사용자 인터페이스 객체들에 대해 수행할 필요가 있을 것이다.
그러나, 이들 조작을 수행하기 위한 기존의 방법들은 복잡하고 비효율적이다. 게다가, 기존의 방법들은 필요한 것보다 더 오래 걸리고, 이에 의해 에너지를 낭비한다. 이러한 후자의 고려사항은 배터리 작동형 디바이스들에서 특히 중요하다.
따라서, 사용자 인터페이스들을 조작하기 위한, 보다 빠르고 보다 효율적인 방법들 및 인터페이스들을 구비한 전자 디바이스들이 필요하다. 그러한 방법들 및 인터페이스들은 선택적으로, 사용자 인터페이스들을 조작하기 위한 종래의 방법들을 보완하거나 대체한다. 그러한 방법들 및 인터페이스들은 사용자에 대한 인지적 부담을 감소시키고 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 디바이스들에 대해, 그러한 방법들 및 인터페이스들은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
터치 감응형 표면들을 구비한 전자 디바이스들에 대한 사용자 인터페이스들과 연관된 상기의 결함들 및 다른 문제들은 개시된 디바이스들에 의해 감소되거나 제거된다. 일부 실시예들에서, 디바이스는 데스크톱 컴퓨터이다. 일부 실시예들에서, 디바이스는 휴대용(예컨대, 노트북 컴퓨터, 태블릿 컴퓨터, 또는 핸드헬드 디바이스)이다. 일부 실시예들에서, 디바이스는 터치패드를 갖는다. 일부 실시예들에서, 디바이스는 터치 감응형 디스플레이("터치 스크린" 또는 "터치 스크린 디스플레이"로도 알려짐)를 갖는다. 일부 실시예들에서, 디바이스는 그래픽 사용자 인터페이스(graphical user interface: GUI), 하나 이상의 프로세서, 메모리, 및 다수의 기능을 수행하기 위해 메모리에 저장되는 하나 이상의 모듈, 프로그램 또는 명령어의 세트들을 갖는다. 일부 실시예들에서, 사용자는 주로 터치 감응형 표면 상의 손가락 접촉들 및 제스처들을 통해 GUI와 상호작용한다. 일부 실시예들에서, 기능들은 선택적으로, 이미지 편집, 그리기, 프레젠팅(presenting), 워드 프로세싱, 웹사이트 생성, 디스크 저작, 스프레드시트 작성, 게임 하기, 전화 걸기, 화상 회의, 이메일 보내기, 인스턴트 메시징(instant messaging), 운동 지원, 디지털 사진촬영, 디지털 비디오 녹화, 웹 브라우징, 디지털 음악 재생, 및/또는 디지털 비디오 재생을 포함한다. 이들 기능을 수행하기 위한 실행가능한 명령어들은 선택적으로, 비일시적 컴퓨터 판독가능 저장 매체 또는 하나 이상의 프로세서에 의한 실행을 위해 구성된 다른 컴퓨터 프로그램 제품에 포함된다.
집계 세기(aggregate intensity)의 개별 부분들을 복수의 접촉에 할당하기 위한, 보다 빠르고 보다 효율적인 방법들을 구비한 전자 디바이스들이 필요하다. 그러한 방법들은 집계 세기의 개별 부분들을 복수의 접촉에 할당하기 위한 종래의 방법들을 보완하거나 대체할 수 있다. 그러한 방법들은 사용자에 대한 인지적 부담을 감소시키고 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 디바이스들에 대해, 그러한 방법들은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에 따르면, 방법이 디스플레이, 터치 감응형 표면 및 터치 감응형 표면과의 접촉들의 세기를 검출하는 복수의 세기 센서를 구비한 전자 디바이스에서 수행된다. 방법은 터치 감응형 표면 상에서 복수의 접촉을 검출하는 단계를 포함한다. 복수의 접촉을 검출하는 동안, 방법은, 복수의 세기 센서 중 제1 세기 센서로부터 제1 세기 측정치를 수신하는 단계; 복수의 세기 센서 중 제2 세기 센서로부터 제2 세기 측정치를 수신하는 단계 - 제1 세기 센서는 제2 세기 센서와 상이함 -; 및 접촉들의 집계 세기의 제1 부분을 제1 접촉에 할당하고 집계 세기의 제2 부분을 제2 접촉에 할당하는 단계를 추가로 포함한다. 방법은, 제1 세기 측정치; 제2 세기 측정치; 터치 감응형 표면에 대한 제1 세기 센서의 위치; 터치 감응형 표면에 대한 제2 세기 센서의 위치; 및 제1 접촉의 하나 이상의 속성의 세트의 값들과 제2 접촉의 하나 이상의 속성의 세트의 대응하는 값들 사이의 비교에 적어도 부분적으로 기초하여, 집계 세기를 할당하는 단계를 포함한다. 복수의 접촉을 검출하는 단계에 응답하여, 방법은, 제1 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초하여, 동작을 수행하는 단계를 추가로 포함한다.
일부 실시예들에 따르면, 전자 디바이스는, 정보를 디스플레이하도록 구성된 디스플레이 유닛; 접촉들을 수용하는 터치 감응형 표면; 터치 감응형 표면과의 접촉들의 세기를 검출하는 복수의 세기 센서 유닛; 및 디스플레이 유닛, 터치 감응형 표면 유닛, 및 복수의 센서 유닛에 연결된 처리 유닛을 포함한다. 처리 유닛은 터치 감응형 표면 유닛 상에서, 복수의 접촉을 검출하도록 구성된다. 복수의 접촉을 검출하는 동안, 처리 유닛은, 복수의 세기 센서 유닛 중 제1 세기 센서 유닛으로부터 제1 세기 측정치를 수신하고; 복수의 세기 센서 유닛 중 제2 세기 센서 유닛으로부터 제2 세기 측정치를 수신하고 - 제1 세기 센서 유닛은 제2 세기 센서 유닛과 상이함 -; 접촉들의 집계 세기의 제1 부분을 제1 접촉에 할당하고 집계 세기의 제2 부분을 제2 접촉에 할당하도록 추가로 구성된다. 처리 유닛은, 제1 세기 측정치; 제2 세기 측정치; 터치 감응형 표면 유닛에 대한 제1 세기 센서 유닛의 위치; 터치 감응형 표면 유닛에 대한 제2 세기 센서 유닛의 위치; 및 제1 접촉의 하나 이상의 속성의 세트의 값들과 제2 접촉의 하나 이상의 속성의 세트의 대응하는 값들 사이의 비교에 적어도 부분적으로 기초하여, 집계 세기를 복수의 접촉에 할당하도록 구성된다. 처리 유닛은, 제1 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초하여 동작을 수행함으로써 복수의 접촉을 검출하는 것에 응답하도록 추가로 구성된다.
따라서, 디스플레이들, 터치 감응형 표면들, 및 터치 감응형 표면과의 접촉들의 세기를 검출하는 복수의 세기 센서를 구비한 전자 디바이스들에는, 집계 세기의 개별 부분들을 복수의 접촉에 할당하기 위한 보다 빠르고 보다 효율적인 방법들이 제공되며, 그로써 그러한 디바이스들에 대한 유효성, 효율성, 및 사용자 만족도를 증가시킨다. 그러한 방법들은 집계 세기의 개별 부분들을 복수의 접촉에 할당하기 위한 종래의 방법들을 보완하거나 대체할 수 있다.
전자 디바이스는 터치 감응형 표면 상에서, 복수의 세기 센서를 통해 복수의 접촉을 검출한다. 복수의 접촉을 검출하는 동안, 디바이스는, 제1 세기 센서로부터 수신된 제1 세기 측정치; 제2 세기 센서로부터 수신된 제2 세기 측정치; 터치 감응형 표면에 대한 제1 세기 센서의 위치; 터치 감응형 표면에 대한 제2 세기 센서의 위치; 및 제1 접촉의 하나 이상의 속성의 세트의 값들과 제2 접촉의 대응하는 값들 사이의 비교에 기초하여, 접촉들의 집계 세기의 부분들을 복수의 접촉 각각에 할당한다. 복수의 접촉을 검출하는 것에 응답하여, 디바이스는 제1 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초하여 동작을 수행한다.
터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 보다 빠르고 보다 효율적인 방법들 및 인터페이스들을 구비한 전자 디바이스들이 필요하다. 그러한 방법들 및 인터페이스들은 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 종래의 방법들을 보완하거나 대체할 수 있다. 그러한 방법들 및 인터페이스들은 사용자에 대한 인지적 부담을 감소시키고 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 디바이스들에 대해, 그러한 방법들 및 인터페이스들은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에 따르면, 방법이 터치 감응형 표면 및 디스플레이를 구비한 전자 디바이스에서 수행되며, 여기서 디바이스는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 포함한다. 방법은, 터치 감응형 표면 상에서 접촉을 검출하는 단계, 터치 감응형 표면 상의 접촉의 위치를 결정하는 단계, 터치 감응형 표면 상의 접촉의 세기를 결정하는 단계, 및 검출된 접촉에 따라 응답을 디스플레이하는 단계를 포함하며, 응답은 터치 감응형 표면 상의 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초한다. 입력-출력 매핑은, 터치 감응형 표면 상의 개별 위치에 대하여, 제1 범위의 세기 값들에 걸친 세기와 응답 사이의 (예컨대, 터치 입력에서 디스플레이 출력으로의) 제1 입력-출력 관계, 제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 제2 범위의 세기 값들은 제1 범위의 세기 값들과 상이함 -, 및 제1 범위의 세기 값들이 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값(transitional intensity value)을 포함하며, 전환 세기 값에서, 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고, 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 가지며, 제1 변화율은 제2 변화율과 실질적으로 동일하다.
일부 실시예들에 따르면, 전자 디바이스는 검출된 접촉에 따라 응답을 디스플레이하도록 구성된 디스플레이 유닛, 사용자 접촉들을 수용하도록 구성된 터치 감응형 표면 유닛, 터치 감응형 표면 유닛과의 접촉들의 세기를 검출하도록 구성된 하나 이상의 센서 유닛, 및 디스플레이 유닛, 터치 감응형 표면 유닛 및 센서 유닛들에 연결된 처리 유닛을 포함한다. 처리 유닛은, 터치 감응형 표면 유닛 상에서 접촉을 검출하고, 터치 감응형 표면 유닛 상의 접촉의 위치를 결정하고, 터치 감응형 표면 유닛 상의 접촉의 세기를 결정하고, 검출된 접촉에 따라 응답의 디스플레이를 가능하게 하도록 구성되고, 응답은 터치 감응형 표면 유닛 상의 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초한다. 입력-출력 매핑은, 터치 감응형 표면 유닛 상의 개별 위치에 대하여, 제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계, 제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 제2 범위의 세기 값들은 제1 범위의 세기 값들과 상이함 -, 및 제1 범위의 세기 값들이 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함하며, 전환 세기 값에서, 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고, 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 가지며, 제1 변화율은 제2 변화율과 실질적으로 동일하다.
이와 같이, 디스플레이들, 터치 감응형 표면들 및 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스들에는, 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 보다 빠르고 보다 효율적인 방법들 및 인터페이스들이 제공되며, 그로써 그러한 디바이스들에 대한 유효성, 효율성, 및 사용자 만족도를 증가시킨다. 그러한 방법들 및 인터페이스들은 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 종래의 방법들을 보완하거나 대체할 수 있다.
접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 보다 빠르고 보다 효율적인 방법들 및 인터페이스들을 구비한 전자 디바이스들이 필요하다. 그러한 방법들 및 인터페이스들은 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 종래의 방법들을 보완하거나 대체할 수 있다. 그러한 방법들 및 인터페이스들은 사용자에 대한 인지적 부담을 감소시키고 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 디바이스들에 대해, 그러한 방법들 및 인터페이스들은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에 따르면, 방법이 터치 감응형 표면 및 디스플레이를 구비한 전자 디바이스에서 수행되며, 여기서 디바이스는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 포함한다. 방법은, 터치 감응형 표면 상에서 접촉을 검출하는 단계, 및 터치 감응형 표면 상의 접촉의 개별 위치를 결정하는 단계를 포함하며, 터치 감응형 표면 상의 개별 위치는 접촉의 세기를 검출하기 위한 개별 동적 범위를 갖는다. 방법은, 개별 위치에서 터치 감응형 표면 상의 접촉의 세기를 결정하는 단계, 접촉의 세기의 변화를 검출하는 단계, 및 터치 감응형 표면 상의 개별 위치에서 접촉의 세기의 변화를 검출하는 단계에 응답하여 디바이스의 출력을 조정하는 단계를 추가로 포함하며, 여기서, 개별 위치가 제1 동적 범위를 갖는다는 결정에 따라, 출력은, 개별 위치에서의 접촉의 세기의 변화, 및 제1 동적 범위에 대응하는 세기에서 응답으로의 제1 입력-출력 매핑에 따라 조정되고, 개별 위치가 제1 동적 범위와 상이한 제2 동적 범위를 갖는다는 결정에 따라, 출력은, 개별 위치에서의 접촉의 세기의 변화, 및 제2 동적 범위에 대응하는 세기에서 응답으로의 제2 입력-출력 매핑에 따라 조정되며, 제2 입력-출력 매핑은 제1 입력-출력 매핑과 상이하다.
일부 실시예들에 따르면, 전자 디바이스는, 디스플레이 유닛, 사용자 접촉들을 수용하도록 구성된 터치 감응형 표면 유닛, 터치 감응형 표면 유닛과의 접촉들의 세기를 검출하도록 구성된 하나 이상의 센서 유닛, 및 디스플레이 유닛, 터치 감응형 표면 유닛 및 센서 유닛들에 연결된 처리 유닛을 포함한다. 처리 유닛은 터치 감응형 표면 유닛 상에서 접촉을 검출하고, 터치 감응형 표면 유닛 상의 접촉의 개별 위치를 결정하도록 구성되며, 여기서 터치 감응형 표면 유닛 상의 개별 위치는 접촉의 세기를 검출하기 위한 개별 동적 범위를 갖는다. 처리 유닛은, 개별 위치에서 터치 감응형 표면 유닛 상의 접촉의 세기를 결정하고, 접촉의 세기의 변화를 검출하고, 터치 감응형 표면 상의 개별 위치에서 접촉의 세기의 변화를 검출하는 것에 응답하여, 디바이스의 출력을 조정하도록 추가로 구성되며, 여기서, 개별 위치가 제1 동적 범위를 갖는다는 결정에 따라, 출력은, 개별 위치에서의 접촉의 세기의 변화, 및 제1 동적 범위에 대응하는 세기에서 응답으로의 제1 입력-출력 매핑에 따라 조정되고, 개별 위치가 제1 동적 범위와 상이한 제2 동적 범위를 갖는다는 결정에 따라, 출력은, 개별 위치에서의 접촉의 세기의 변화 및 제2 동적 범위에 대응하는 세기에서 응답으로의 제2 입력-출력 매핑에 따라 조정되며, 제2 입력-출력 매핑은 제1 입력-출력 매핑과 상이하다.
이와 같이, 디스플레이들, 터치 감응형 표면들, 및 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스들에는, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 보다 빠르고 보다 효율적인 방법들 및 인터페이스들이 제공되며, 그로써 그러한 디바이스들에 대한 유효성, 효율성, 및 사용자 만족도를 증가시킨다. 그러한 방법들 및 인터페이스들은 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 종래의 방법들을 보완하거나 대체할 수 있다.
일부 실시예들에 따르면, 전자 디바이스는 디스플레이, 터치 감응형 표면, 선택적으로는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함하며; 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성되며, 하나 이상의 프로그램은 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급된 방법들 중 임의의 방법의 동작들을 수행하기 위한 명령어들을 포함한다. 일부 실시예들에 따르면, 디스플레이, 터치 감응형 표면, 선택적으로는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서, 메모리, 및 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 구비한 전자 디바이스 상의 그래픽 사용자 인터페이스는, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급된 방법들 중 임의의 방법에서 디스플레이되는 요소들 중 하나 이상을 포함하며, 이러한 요소들은 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급된 방법들 중 임의의 방법에서 기술되는 바와 같이 입력들에 응답하여 업데이트된다. 일부 실시예들에 따르면, 컴퓨터 판독가능 저장 매체는, 디스플레이, 터치 감응형 표면, 및 선택적으로는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스에 의해 실행될 때, 디바이스로 하여금, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급된 방법들 중 임의의 방법의 동작들을 수행하게 하는 명령어들을 저장하고 있다. 일부 실시예들에 따르면, 전자 디바이스는 디스플레이, 터치 감응형 표면, 및 선택적으로는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서; 및 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급된 방법들 중 임의의 방법의 동작들을 수행하기 위한 수단을 포함한다. 일부 실시예들에 따르면, 디스플레이, 터치 감응형 표면, 및 선택적으로는 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스에서 사용하기 위한 정보 처리 장치는, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 언급되는 방법들 중 임의의 방법의 동작들을 수행하기 위한 수단을 포함한다.
다양하게 기술된 실시예들의 보다 양호한 이해를 위해, 다음의 도면과 관련하여 하기의 발명을 실시하기 위한 구체적인 내용이 참조되어야 하며, 도면에서는 유사한 도면 부호들이 도면 전체에 걸쳐서 대응하는 부분들을 나타낸다.
도 1a는 일부 실시예들에 따른, 터치 감응형 디스플레이를 구비한 휴대용 다기능 디바이스를 예시하는 블록 다이어그램이다.
도 1b는 일부 실시예들에 따른, 이벤트 핸들링을 위한 예시적인 컴포넌트들을 예시하는 블록 다이어그램이다.
도 2는 일부 실시예들에 따른, 터치 스크린을 갖는 휴대용 다기능 디바이스를 예시한다.
도 3은 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 구비한 예시적인 다기능 디바이스의 블록 다이어그램이다.
도 4a는 일부 실시예들에 따른, 휴대용 다기능 디바이스 상의 애플리케이션들의 메뉴에 대한 예시적인 사용자 인터페이스를 예시한다.
도 4b는 일부 실시예들에 따른, 디스플레이와 별개인 터치 감응형 표면을 구비한 다기능 디바이스에 대한 예시적인 사용자 인터페이스를 예시한다.
도 5a 내지 도 5l은 일부 실시예들에 따른, 집계 세기의 개별 부분들이 할당되는 터치 감응형 표면과의 접촉들 및 예시적인 사용자 인터페이스들을 예시한다.
도 6a 내지 도 6c는 일부 실시예들에 따른, 집계 세기의 개별 부분들을 복수의 접촉에 할당하는 방법을 예시하는 흐름도들이다.
도 7은 일부 실시예들에 따른 전자 디바이스의 기능 블록 다이어그램이다.
도 8a 내지 도 8v는 일부 실시예들에 따른, 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 예시적인 사용자 인터페이스들을 예시한다.
도 9a 내지 도 9c는 일부 실시예들에 따른, 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하는 방법을 예시하는 흐름도들이다.
도 10은 일부 실시예들에 따른 전자 디바이스의 기능 블록 다이어그램이다.
도 11a는 일부 실시예들에 따른, 터치 감응형 표면 상의 하나 이상의 접촉에 대하여, 세기 값들의 범위들과 출력 응답들 사이의 매핑들을 예시한다.
도 11b 내지 도 11u는 일부 실시예들에 따른, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 예시적인 사용자 인터페이스들을 예시한다.
도 12a 내지 도 12d는 일부 실시예들에 따른, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하는 방법을 예시하는 흐름도들이다.
도 13은 일부 실시예들에 따른 전자 디바이스의 기능 블록 다이어그램이다.
본 명세서에 기술되는 방법들, 디바이스들, 및 GUI들은 사용자 인터페이스 객체들의 조작이 사용자에게 보다 효율적이고 직관적이 되게 하는 시각적 및/또는 햅틱 피드백을 제공한다. 예를 들어, 트랙패드의 클릭 행동이 활성화 임계치에 도달하는 데 필요한 접촉 세기(예컨대, 접촉 힘, 접촉 압력, 또는 이들을 대체하는 것(substitute))로부터 연결해제되는 시스템에서, 디바이스는 (예컨대, 특정 결과를 성취하는 클릭들이, 어떠한 결과도 생성하지 않거나 특정 결과와는 상이한 결과를 성취하는 클릭들과 구별되도록) 상이한 활성화 이벤트들에 대하여 상이한 촉각적 출력들(예컨대, "상이한 클릭들")을 생성할 수 있다. 게다가, 촉각적 출력들은 접촉의 세기를 증가시키는 것에 관련되지 않는 다른 이벤트들에 응답하여 생성될 수 있는데, 예컨대, 사용자 인터페이스 객체가 특정 위치, 경계 또는 배향으로 이동되는 경우, 또는 디바이스에서 이벤트가 발생되는 경우 촉각적 출력(예컨대, "디텐트(detent)")을 생성하는 것이다.
또한, 트랙패드 또는 터치 스크린 디스플레이가 하나 또는 둘을 초과하는 (예컨대, 단순한 온/오프, 이원적 세기 결정치보다 많은) 특정 세기 값들을 포함하는 소정 범위의 접촉 세기에 감응하는 시스템에서, 사용자 인터페이스는 그 범위 내의 접촉의 세기를 나타내는 응답들(예컨대, 시각적 또는 촉각적 큐(cue)들)을 제공할 수 있다. 일부 구현예들에서, 입력에 대한 활성화 전 임계치 응답(pre-activation-threshold response) 및/또는 활성화 후 임계치 응답(post-activation-threshold response)이 계속적인 애니메이션들로서 디스플레이된다. 그러한 응답의 하나의 예로서, 아직 동작을 수행하기 위한 활성화 임계치 미만인 접촉 세기에서의 증가를 검출하는 것에 응답하여, 동작의 미리보기가 디스플레이된다. 그러한 응답의 다른 예로서, 동작과 연관된 애니메이션은 동작에 대한 활성화 임계치가 도달된 후에도 계속된다. 이 예들 둘 모두는 사용자에게 사용자의 접촉의 힘 또는 압력에 대한 계속적인 응답을 제공하는데, 이는 사용자에게 보다 풍부하고 보다 직관적인 시각적 및/또는 햅틱 피드백을 제공한다. 보다 구체적으로, 그러한 계속적인 힘 응답들은, 동작을 미리보기 위하여 가볍게 누를 수 있고 그리고/또는 동작에 대응하는 미리 정의된 사용자 인터페이스 상태를 "지나서(past)" 또는 "통해서(through)" 푸시하도록 깊게 누를 수 있는 경험을 사용자에게 제공한다.
또한, 소정 범위의 접촉 세기에 감응하는 터치 감응형 표면을 구비한 디바이스에 대해, 다수의 접촉 세기 임계치가 디바이스에 의해 모니터링될 수 있고, 상이한 기능들이 상이한 접촉 세기 임계치들에 매핑될 수 있다. 이것은 제2 "깊게 누르기" 세기 임계치 이상으로 접촉의 세기를 증가시키는 것이 디바이스로 하여금 접촉의 세기가 제1 "활성화" 세기 임계치와 제2 "깊게 누르기" 세기 임계치 사이에 있는 경우에 수행될 동작과는 상이한 동작을 수행하게 할 것임을 알고 있는 사용자들을 위해 개선된 특징들로의 용이한 액세스를 제공하는 이용 가능한 "제스처 공간"을 증가시키도록 기능한다. 익숙한 기능을 제1 "활성화" 세기 임계치로 유지하면서 추가 기능을 제2 "깊게 누르기" 세기 임계치에 할당하는 것의 이점은, 일부 환경들에서, 추가 기능에 의해 혼동스러워 하는 미경험 사용자들이 제1 "활성화" 세기 임계치까지 세기를 가하는 것만으로 익숙한 기능을 이용할 수 있고, 그 반면에 경험이 보다 많은 사용자들은 제2 "깊게 누르기" 세기 임계치에 있는 세기를 가함으로써 추가 기능을 활용할 수 있다는 것이다.
또한, 소정 범위의 접촉 세기에 감응하는 터치 감응형 표면을 구비한 디바이스에 대해, 디바이스는 사용자들이 단일의 계속적 접촉으로 복잡한 동작들을 수행하게 함으로써 추가 기능을 제공할 수 있다. 예를 들어, 객체들의 그룹을 선택할 때, 사용자는 터치 감응형 표면 주위로 계속적 접촉을 이동시킬 수 있으며, 추가 요소들을 선택에 추가하기 위해 드래그하는 동안(예컨대, "깊게 누르기" 세기 임계치보다 더 큰 세기를 가하는 동안) 누를 수 있다. 이러한 방식으로, 사용자는 사용자 인터페이스와 직관적으로 상호작용할 수 있는데, 여기서 접촉을 이용하여 더 세게 누르는 것은 사용자 인터페이스 내의 객체들이 "더 달라붙게" 한다.
클릭 행동이 활성화 임계치에 도달하는 데 요구되는 힘으로부터 연결해제되고/되거나 디바이스가 넓은 범위의 접촉 세기들에 감응하는 디바이스 상에 직관적 사용자 인터페이스를 제공하는 것에 대한 다수의 상이한 접근법이 아래에 기술된다. 이들 접근법 중 하나 이상을 (선택적으로는 서로 함께) 사용하는 것은 사용자에게 추가적인 정보 및 기능을 직관적으로 제공하는 사용자 인터페이스를 제공하는 것을 도움으로써, 사용자의 인지적 부담을 감소시키고 인간-기계 인터페이스를 개선한다. 인간-기계 인터페이스에서의 그러한 개선들은 사용자들이 디바이스를 더 빠르고 더 효율적으로 사용할 수 있게 한다. 배터리 작동형 디바이스들에 대해, 이러한 개선점들은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다. 설명의 용이성을 위해, 이들 접근법 중 일부의 예시적인 예들을 포함하기 위한 시스템들, 방법들 및 사용자 인터페이스들이 다음과 같이 아래에 기술된다:
Figure 112015066562072-pct00001
많은 전자 디바이스가 사용자 입력의 압력을 감지한다. 예를 들어, 압력 감응형 버튼을 구비한 디바이스는, 버튼과 통합된 압력 센서의 압력 측정치에 기초하여 버튼이 사용자에 의해 눌러지는 양을 결정한다. 그러나, 그러한 방법들은 다수의 상이한, 동시에 검출된 접촉들의 세기를 추정하는 방법을 제공하지 않으며, 따라서 다수의 접촉을 이용해 세기 감응형 사용자 인터페이스와 상호작용하는 방법을 제공하지 않는다. 디바이스는, 터치 감응형 표면 상에서 복수의 접촉을 검출하는 동안, 터치 감응형 표면 상의 복수의 접촉의 집계 세기(예컨대, 복수의 세기 센서의 각각의 세기 센서로부터 수신된 세기 측정치들의 총합)의 제1 부분을 복수의 접촉 중 제1 접촉에 할당하고 집계 세기의 제2 부분을 복수의 접촉 중 제2 접촉에 할당함으로써 이 방법들을 개선하고, 그로써 디바이스로 하여금 다수의 동시에 검출된 접촉의 세기를 추정하고 이 정보를 이용해 편리하고 효율적인 사용자 인터페이스들을 제어할 수 있게 한다. 특히, 도 5a 내지 도 5l은 복수의 접촉에 집계 세기의 개별 부분들이 할당되는 터치 감응형 표면과의 접촉들 및 예시적인 사용자 인터페이스들을 예시한다. 도 6a 내지 도 6c는 집계 세기의 개별 부분들을 복수의 접촉에 할당하는 방법을 예시하는 흐름도들이다. 도 5a 내지 도 5l 의 도면들이 도 6a 내지 도 6c의 프로세스들을 예시하기 위해 사용된다.
Figure 112015066562072-pct00002
많은 전자 디바이스는 입력들과 대응 출력들 사이의 입력-출력 관계들에 따라 제어되는 다양한 사용자 인터페이스 객체들을 포함하는 그래픽 사용자 인터페이스들을 갖는다. 일부 상황들에서, 입력들과 대응 출력들 사이에 일정한 입력-출력 관계가 있다. 그러나, 일정한 입력-출력 관계는, 사용자가 달성하고 싶어할 가능성이 있는 출력들의 특정 범위가 있는 경우, 사용자에게 불편하고 비효율적일 수 있다. 단순한 가변적 입력-출력 관계는 또한, 사용자가 입력-출력 관계 내에서 불연속들을 인지할 경우, 사용자에게 혼란스럽거나 당황스러울 수 있다. 아래에 기술되는 실시예들은 사용자 인터페이스 객체들과 상호작용할 때에 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하는 효율적이고 직관적인 방법을 제공하며, 그로써 디바이스로 하여금 편리하고 효율적인 사용자 인터페이스들을 제어할 수 있게 한다. 특히, 도 8a 내지 도 8v는, 터치 감응형 표면 상의 입력들을 이용해 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 9a 내지 도 9c는, 터치 감응형 표면 상의 입력들을 이용해 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하는 방법을 예시하는 흐름도들이다. 도 8a 내지 도 8v의 사용자 인터페이스들은 도 9a 내지 도 9c를 참조하여 아래에 기술되는 프로세스들을 예시하기 위해 또한 사용된다.
Figure 112015066562072-pct00003
많은 전자 디바이스가 터치 감응형 표면들을 갖는다. 터치 감응형 표면들은 선택적으로 다수의 세기 센서를 활용하고, 터치 감응형 표면 상의 위치에 따라 변화하는 최대 세기 검출 임계치를 갖는다. 최대 세기 검출 임계치에서의 이 변화는, 최소 공통 분모(lowest common denominator) 최대 세기 검출 임계치인 전체 터치 감응형 표면에 대한 균일한 최대 세기 검출 임계치를 이용함으로써 해결될 수 있다. 그러나, 이러한 접근법은 디바이스로 하여금 그것의 잠재력이 최대한 이용되지 못하게 하고, 따라서 덜 효율적이고 덜 효과적인 사용자 인터페이스를 제공한다. 아래에 기술되는 실시예들은, 터치 감응형 표면의 최소 감응 부분들 상의 최대 세기 임계치들보다 더 높은 최대 세기 검출 임계치들을 활용하기 위해 입력-출력 관계들을 동적으로 조정함으로써, 이 방법들을 개선한다. 아래에 기술되는 실시예들은 접촉의 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하는 효율적이고 직관적인 방법을 제공하며, 그로써 디바이스가 편리하고 효율적인 사용자 인터페이스들을 제어할 수 있게 한다. 특히, 도 11b 내지 도 11u는 일부 실시예에 따른, (예컨대, 터치 감응형 표면 상의 입력들에 대응하는) 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 예시적인 사용자 인터페이스들을 예시한다. 도 12a 내지 도 12d는 일부 실시예들에 따른, (예컨대, 터치 감응형 표면 상의 입력들에 대응하는) 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하는 방법을 예시하는 흐름도들이다. 도 11b 내지 도 11u의 사용자 인터페이스들은 도 12a 내지 도 12d를 참조하여 아래에 기술되는 프로세스들을 예시하는 데 또한 사용된다.
예시적인 디바이스
이제, 실시예들이 상세하게 참조될 것이며, 실시예들의 예들이 첨부 도면들에 예시된다. 하기의 상세한 설명에서, 많은 구체적인 상세사항들이 다양하게 기술된 실시예들의 완전한 이해를 제공하기 위해 설명된다. 그러나, 다양하게 기술된 실시예들이 이들 구체적인 상세사항 없이 실시될 수 있다는 것은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에게 명백할 것이다. 다른 예들에서, 잘 알려진 방법들, 절차들, 컴포넌트들, 회로들, 및 네트워크들은 실시예들의 양태들을 불필요하게 모호하게 하지 않기 위해 상세히 설명되지 않았다.
일부 예들에서, 용어들, 제1, 제2 등이 본 명세서에서 다양한 요소들을 기술하는 데 사용되지만, 이들 요소들은 이들 용어들로 제한되어서는 안 된다는 것이 또한 이해될 것이다. 이들 용어들은 하나의 요소를 다른 요소와 구별하는 데에만 사용된다. 예를 들어, 다양하게 기술된 실시예들의 범주로부터 벗어남이 없이, 제1 접촉이 제2 접촉으로 지칭될 수 있고, 유사하게, 제2 접촉이 제1 접촉으로 지칭될 수 있다. 제1 접촉 및 제2 접촉 둘 모두가 접촉이지만, 그들이 동일한 접촉인 것은 아니다.
본 명세서 내의 다양하게 기술된 실시예들의 설명에 사용되는 용어는 특정 실시예들을 기술하는 목적만을 위한 것이고, 제한하려는 의도는 아니다. 다양하게 기술된 실시예들의 설명 및 첨부된 청구범위에 사용되는 바와 같이, 단수의 형태("a", "an" 및 "the")는 문맥상 명백히 다르게 나타나지 않는다면 복수의 형태도 마찬가지로 포함하려는 것으로 의도된다. 또한, 본 명세서에서 사용되는 바와 같은 용어 "및/또는"은 열거되는 연관된 항목들 중 하나 이상의 항목의 임의의 및 모든 가능한 조합들을 나타내고 그들을 포괄하는 것임이 이해될 것이다. 본 명세서에서 사용될 때 용어들 "포함한다(include)", "포함하는(including)", "포함한다(comprise)", 및/또는 "포함하는(comprising)"은 진술되는 특징들, 정수들, 단계들, 동작들, 요소들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 이상의 다른 특징, 정수, 단계, 동작, 요소, 컴포넌트, 및/또는 이들의 그룹들의 존재 또는 추가를 배제하지 않음이 추가로 이해될 것이다.
본 명세서에서 사용되는 바와 같이, "~는 경우(if)"라는 용어는, 선택적으로, 문맥에 따라 "~할 때(when)" 또는 "~ 시(upon)" 또는 "결정한 것에 응답하여(in response to determining)" 또는 "검출한 것에 응답하여(in response to detecting)"를 의미하는 것으로 해석된다. 유사하게, 구문 "결정된 경우" 또는 "[진술된 상태 또는 이벤트가] 검출된 경우"는, 선택적으로, 문맥에 따라 "결정 시" 또는 "결정한 것에 응답하여" 또는 "[진술된 상태 또는 이벤트] 검출 시" 또는 "[진술된 상태 또는 이벤트를] 검출한 것에 응답하여"를 의미하는 것으로 해석된다.
전자 디바이스들, 그러한 디바이스들에 대한 사용자 인터페이스들, 및 그러한 디바이스들을 사용하기 위한 연관된 프로세스들의 실시예들이 기술된다. 일부 실시예들에서, 디바이스는 PDA 및/또는 음악 재생기 기능들과 같은 다른 기능들을 또한 포함하는, 이동 전화기와 같은, 휴대용 통신 디바이스이다. 휴대용 다기능 디바이스들의 예시적인 실시예들은 미국 캘리포니아주 쿠퍼티노 소재의 애플 사로부터의 아이폰(iPhone)(등록상표), 아이팟 터치(iPod Touch)(등록상표), 및 아이패드(iPad)(등록상표) 디바이스들을 제한 없이 포함한다. 터치 감응형 표면들(예컨대, 터치 스크린 디스플레이들 및/또는 터치패드들)을 구비한 랩톱 또는 태블릿 컴퓨터들과 같은 다른 휴대용 전자 디바이스들이 선택적으로 사용된다. 일부 실시예들에서, 디바이스는 휴대용 통신 디바이스가 아니라 터치 감응형 표면(예컨대, 터치 스크린 디스플레이 및/또는 터치패드)을 구비한 데스크톱 컴퓨터임이 또한 이해되어야 한다.
이하의 논의에서, 디스플레이 및 터치 감응형 표면을 포함하는 전자 디바이스가 기술된다. 그러나, 전자 디바이스가 선택적으로 물리적 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 물리적 사용자 인터페이스 디바이스들을 포함한다는 것을 이해하여야 한다.
디바이스는 전형적으로 그리기 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 제작 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게임 애플리케이션, 전화 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 운동 지원 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 재생기 애플리케이션, 및/또는 디지털 비디오 재생기 애플리케이션 중 하나 이상과 같은 다양한 애플리케이션들을 지원한다.
디바이스 상에서 실행되는 다양한 애플리케이션들은, 선택적으로, 터치 감응형 표면과 같은 적어도 하나의 보편적인 물리적 사용자 인터페이스 디바이스를 사용한다. 터치 감응형 표면의 하나 이상의 기능뿐만 아니라 디바이스 상에 디스플레이되는 대응하는 정보는 하나의 애플리케이션으로부터 다음 애플리케이션으로 그리고/또는 개별 애플리케이션 내에서 선택적으로 조정되고/되거나 변화된다. 이러한 방식으로, 디바이스의 (터치 감응형 표면과 같은) 보편적인 물리적 아키텍처는, 선택적으로, 사용자에게 직관적이고 명료한 사용자 인터페이스들을 이용하여 다양한 애플리케이션들을 지원한다.
이제 터치 감응형 디스플레이들을 구비한 휴대용 디바이스들의 실시예들에 주목한다. 도 1a는 일부 실시예들에 따른, 터치 감응형 디스플레이들(112)을 구비한 휴대용 다기능 디바이스(100)를 예시하는 블록 다이어그램이다. 터치 감응형 디스플레이(112)는 때때로 편의상 "터치 스크린"이라 지칭되고, 때때로 터치 감응형 디스플레이 시스템으로 알려지거나 지칭된다. 디바이스(100)는 메모리(102)(선택적으로, 하나 이상의 컴퓨터 판독가능 저장 매체를 포함함), 메모리 제어기(122), 하나 이상의 처리 유닛(CPU)(120), 주변기기 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입력/출력(I/O) 서브시스템(106), 다른 입력 또는 제어 디바이스들(116) 및 외부 포트(124)를 포함한다. 디바이스(100)는 선택적으로 하나 이상의 광 센서(optical sensor)(164)를 포함한다. 디바이스(100)는, 선택적으로, 디바이스(100) 상의 접촉들의 세기를 검출하기 위한 하나 이상의 세기 센서(165)(예컨대, 디바이스(100)의 터치 감응형 디스플레이 시스템(112)과 같은 터치 감응형 표면)를 포함한다. 디바이스(100)는, 선택적으로, 디바이스(100) 상에 촉각적 출력들을 생성하기 위한 (예컨대, 디바이스(100)의 터치 감응형 디스플레이 시스템(112) 또는 디바이스(300)의 터치패드(355)와 같은 터치 감응형 표면 상에 촉각적 출력들을 생성하기 위한) 하나 이상의 촉각적 출력 생성기(167)를 포함한다. 이들 컴포넌트는 선택적으로 하나 이상의 통신 버스 또는 신호 라인(103)을 통해 통신한다.
명세서 및 청구범위에서 사용되는 바와 같이, 터치 감응형 표면 상의 접촉의 "세기"라는 용어는 터치 감응형 표면 상의 접촉(예컨대, 손가락 접촉)의 힘 또는 압력(단위 면적 당 힘), 또는 터치 감응형 표면 상의 접촉의 힘 또는 압력을 대체(대용)하는 것을 지칭한다. 접촉의 세기는, 적어도 4개의 구별되는 값들을 포함하고 보다 전형적으로는 수백 개(예컨대, 적어도 256개)의 구별되는 값들을 포함하는 다양한 값들을 갖는다. 접촉의 세기는, 선택적으로, 다양한 접근법들과 다양한 센서들 또는 센서들의 조합들을 이용하여 결정(또는 측정)된다. 예를 들어, 터치 감응형 표면 아래의 또는 그에 인접한 하나 이상의 힘 센서가 선택적으로 사용되어, 터치 감응형 표면 상의 다양한 지점들에서 힘을 측정한다. 일부 구현예들에서, 다수의 힘 센서로부터의 힘 측정치들이 조합(예컨대, 가중 평균화)되어, 접촉의 추정된 힘을 결정한다. 유사하게, 스타일러스의 압력 감응형 팁(tip)은, 선택적으로, 터치 감응형 표면 상의 스타일러스의 압력을 결정하는 데 사용된다. 대안적으로, 터치 감응형 표면 상에서 검출된 접촉 면적의 크기 및/또는 그에 대한 변화들, 접촉 부근의 터치 감응형 표면의 커패시턴스(capacitance) 및/또는 그에 대한 변화들, 및/또는 접촉 부근의 터치 감응형 표면의 저항(resistance) 및/또는 그에 대한 변화들은, 선택적으로, 터치 감응형 표면 상의 접촉의 힘 또는 압력을 대체하는 것으로서 사용된다. 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들이 직접 사용되어, 세기 임계치가 초과되었는지 여부를 결정한다(예를 들어, 세기 임계치는 대체 측정치들에 대응하는 단위로 설명됨). 일부 구현예들에서, 접촉 힘 또는 압력에 대한 대체 측정치들은 추정된 힘 또는 압력으로 변환되고, 추정된 힘 또는 압력이 사용되어 세기 임계치가 초과되었는지 여부를 결정한다(예를 들어, 세기 임계치는 압력의 단위로 측정된 압력 임계치임).
명세서 및 청구범위에 사용되는 바와 같이, "촉각적 출력"이라는 용어는 디바이스의 이전 위치에 대한 디바이스의 물리적 변위, 디바이스의 다른 컴포넌트(예컨대, 하우징)에 대한 디바이스의 소정 컴포넌트(예컨대, 터치 감응형 표면)의 물리적 변위, 또는 사용자의 촉각을 이용하여 사용자에 의해 검출될 디바이스의 질량 중심에 대한 컴포넌트의 변위를 지칭한다. 예를 들어, 디바이스 또는 디바이스의 컴포넌트가 터치에 감응하는 사용자의 표면(예컨대, 손가락, 손바닥, 또는 사용자의 손의 다른 부위)과 접촉하는 상황들에서, 물리적 변위에 의해 생성된 촉각적 출력은 사용자에 의해 디바이스 또는 디바이스의 컴포넌트의 물리적 특성들에서의 인지된 변화에 대응하는 촉감(tactile sensation)으로서 해석될 것이다. 예를 들어, 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 또는 트랙패드)의 이동은, 선택적으로, 물리적 액추에이터 버튼의 "다운 클릭(down click)" 또는 "업 클릭(up click)"으로서 사용자에 의해 해석된다. 일부 경우들에 있어서, 사용자는 사용자의 이동에 의해 물리적으로 눌리는(예컨대, 변위되는) 터치 감응형 표면과 연관된 물리적 액추에이터 버튼의 이동이 없는 경우에도 "다운 클릭" 또는 "업 클릭"과 같은 촉감을 느낄 것이다. 다른 예로서, 터치 감응형 표면의 이동은, 선택적으로, 터치 감응형 표면의 평탄성에 변화가 없는 경우에도 터치 감응형 표면의 "거칠기(roughness)"로서 사용자에 의해 해석되거나 감지된다. 사용자에 의한 터치의 그러한 해석들이 사용자의 개인화된 감각 인지(sensory perception)들에 영향을 받기 쉬울 것이지만, 대다수의 사용자들에게 공통적인 많은 터치 감각 인지들이 존재한다. 따라서, 촉각적 출력이 사용자의 특정 감각 인지(예컨대, "업 클릭", "다운 클릭", "거칠기")에 대응하는 것으로서 기술되는 경우, 달리 언급되지 않는다면, 생성된 촉각적 출력은 통상적인(또는 평균적인) 사용자에 대한 기술된 감각 인지를 발생시킬 디바이스 또는 그의 컴포넌트의 물리적 변위에 대응한다.
디바이스(100)는 휴대용 다기능 디바이스의 일례일 뿐이고, 디바이스(100)는 선택적으로 도시된 것보다 더 많거나 더 적은 컴포넌트들을 갖거나, 선택적으로 2개 이상의 컴포넌트들을 조합하거나, 선택적으로 컴포넌트들의 상이한 구성 또는 배열을 갖는다는 것이 인식되어야 한다. 도 1a에 도시된 다양한 컴포넌트들은 하나 이상의 신호 처리 및/또는 주문형 집적 회로(application specific integrated circuit)를 비롯한, 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어 둘 모두의 조합으로 구현된다.
메모리(102)는, 선택적으로, 고속 랜덤 액세스 메모리를 포함하고, 또한 선택적으로, 하나 이상의 자기 디스크 저장 디바이스, 플래시 메모리 디바이스, 또는 다른 비휘발성 솔리드 스테이트 메모리 디바이스와 같은 비휘발성 메모리를 포함한다. CPU(120) 및 주변기기 인터페이스(118)와 같은 디바이스(100)의 다른 컴포넌트들에 의한 메모리(102)에의 액세스는 선택적으로 메모리 제어기(122)에 의해 제어된다.
주변기기 인터페이스(118)는 디바이스의 입력 및 출력 주변기기들을 CPU(120) 및 메모리(102)에 연결하는 데 사용될 수 있다. 하나 이상의 프로세서(120)는 디바이스(100)에 대한 다양한 기능들을 수행하고 데이터를 처리하기 위해 메모리(102)에 저장된 다양한 소프트웨어 프로그램들 및/또는 명령어들의 세트들을 구동하거나 실행시킨다.
일부 실시예들에서, 주변기기 인터페이스(118), CPU(120) 및 메모리 제어기(122)는, 선택적으로, 칩(104)과 같은 단일 칩 상에서 구현된다. 일부 다른 실시예들에서, 이들은 선택적으로 별개의 칩들 상에서 구현된다.
RF(radio frequency) 회로(108)는 전자기 신호들로도 지칭되는 RF 신호들을 수신 및 송신한다. RF 회로(108)는 전기 신호들을 전자기 신호들로/로부터 변환하고, 전자기 신호들을 통해 통신 네트워크들 및 다른 통신 디바이스들과 통신한다. RF 회로(108)는 선택적으로 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호 프로세서, CODEC 칩셋, 가입자 식별 모듈(subscriber identity module: SIM) 카드, 메모리 등을 포함하지만 이들로 한정되지 않는, 이러한 기능들을 수행하기 위한 잘 알려진 회로를 포함한다. RF 회로(108)는 선택적으로 네트워크들, 예를 들어 월드 와이드 웹(WWW)으로 또한 지칭되는 인터넷, 인트라넷, 및/또는 무선 네트워크, 예컨대 셀룰러 전화 네트워크, 무선 근거리 통신망(local area network: LAN) 및/또는 대도시 통신망(metropolitan area network: MAN), 및 다른 디바이스들과 무선 통신에 의해 통신한다. 무선 통신은, 선택적으로, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), HSUPA(high-speed uplink packet access), EV-DO(Evolution, Data-Only), HSPA, HSPA+, DC-HSPDA(Dual-Cell HSPA), LTE(long term evolution), NFC(near field communication), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), Wi-Fi(Wireless Fidelity)(예컨대, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일용 프로토콜(예컨대, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예컨대, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)), 및/또는 SMS(Short Message Service), 또는 본 문헌의 출원일 현재 아직 개발되지 않은 통신 프로토콜을 포함한 임의의 다른 적합한 통신 프로토콜을 포함하지만 이들로 제한되지는 않는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것을 이용한다.
오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 디바이스(100) 사이의 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변기기 인터페이스(118)로부터 오디오 데이터를 수신하고, 그 오디오 데이터를 전기 신호로 변환하고, 그 전기 신호를 스피커(111)로 송신한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 음파로 변환한다. 오디오 회로(110)는 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변기기 인터페이스(118)로 송신한다. 오디오 데이터는 선택적으로 주변기기 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되고/되거나 메모리(102) 및/또는 RF 회로(108)로 송신된다. 일부 실시예들에서, 오디오 회로(110)는 또한 헤드셋 잭(예를 들어, 도 2의 212)을 포함한다. 헤드셋 잭은 출력-전용 헤드폰들, 또는 출력(예컨대, 한쪽 또는 양쪽 귀를 위한 헤드폰) 및 입력(예컨대, 마이크로폰) 양쪽 모두를 갖는 헤드셋과 같은 분리가능한 오디오 입력/출력 주변기기들과 오디오 회로(110) 사이의 인터페이스를 제공한다.
I/O 서브시스템(106)은 터치 스크린(112) 및 다른 입력 제어 디바이스들(116)과 같은, 디바이스(100) 상의 입력/출력 주변기기들을 주변기기 인터페이스(118)에 연결한다. I/O 서브시스템(106)은 선택적으로 디스플레이 제어기(156), 광 센서 제어기(158), 세기 센서 제어기(159), 햅틱 피드백 제어기(161) 및 다른 입력 또는 제어 디바이스들을 위한 하나 이상의 입력 제어기(160)를 포함한다. 하나 이상의 입력 제어기(160)는 다른 입력 또는 제어 디바이스들(116)로부터/로 전기 신호들을 수신/송신한다. 다른 입력 제어 디바이스들(116)은 선택적으로 물리적 버튼들(예컨대, 푸시 버튼, 로커 버튼(rocker button) 등), 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함한다. 일부 다른 실시예들에서, 입력 제어기(들)(160)는 선택적으로 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 디바이스 중 임의의 것에 연결된다(또는 어떤 것에도 연결되지 않는다). 하나 이상의 버튼(예를 들어, 도 2의 208)은 선택적으로 스피커(111) 및/또는 마이크로폰(113)의 음량 제어를 위한 업/다운 버튼을 포함한다. 하나 이상의 버튼은 선택적으로 푸시 버튼(예를 들어, 도 2의 206)을 포함한다.
터치 감응형 디스플레이(112)는 디바이스와 사용자 사이의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 제어기(156)는 터치 스크린(112)으로부터/으로 전기 신호들을 수신 및/또는 송신한다. 터치 스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은, 선택적으로, 그래픽, 텍스트, 아이콘들, 비디오 및 이들의 임의의 조합(총칭하여 "그래픽"으로 지칭함)을 포함한다. 일부 실시예들에서, 시각적 출력의 일부 또는 전부가 사용자 인터페이스 객체들에 대응한다.
터치 스크린(112)은 햅틱 및/또는 촉각적 접촉에 기초하는 사용자로부터의 입력을 수용하는 터치 감응형 표면, 센서 또는 센서들의 세트를 갖는다. 터치 스크린(112) 및 디스플레이 제어기(156)는 (메모리(102) 내의 임의의 연관된 모듈들 및/또는 명령어들의 세트들과 함께) 터치 스크린(112) 상의 접촉(및 접촉의 임의의 이동 또는 중단)을 검출하고, 검출된 접촉을 터치 스크린(112) 상에 디스플레이된 사용자 인터페이스 객체들(예컨대, 하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지)과의 상호작용으로 변환한다. 예시적인 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉 지점은 사용자의 손가락에 대응한다.
터치 스크린(112)은, 선택적으로, LCD(액정 디스플레이) 기술, LPD(발광 중합체 디스플레이) 기술, 또는 LED(발광 다이오드) 기술을 이용하지만, 다른 실시예들에서는 다른 디스플레이 기술들이 이용된다. 터치 스크린(112) 및 디스플레이 제어기(156)는 선택적으로 터치 스크린(112)과의 하나 이상의 접촉 지점을 결정하기 위해 정전용량, 저항, 적외선 및 표면 음향파 기술들과 다른 근접 센서 어레이들 또는 다른 요소들을 포함하지만 이들로 한정되지 않는, 현재 알려져 있거나 추후에 개발될 복수의 터치 감지 기술 중 임의의 것을 이용하여, 접촉 및 그의 임의의 이동 또는 중단을 검출한다. 예시적인 실시예에서, 미국 캘리포니아주 쿠퍼티노의 애플 사부터의 아이폰(등록상표), 아이팟 터치(등록상표), 및 아이패드(등록상표)에서 발견되는 것과 같은 투영형 상호 정전용량식 감지 기술(projected mutual capacitance sensing technology)이 이용된다.
터치 스크린(112)은, 선택적으로, 100dpi를 초과하는 비디오 해상도를 갖는다. 일부 실시예들에서, 터치 스크린은 대략 160dpi의 비디오 해상도를 갖는다. 사용자는 선택적으로 스타일러스, 손가락 등과 같은 임의의 적합한 물체 또는 부속물을 이용하여 터치 스크린(112)과 접촉한다. 일부 실시예들에서, 사용자 인터페이스는 손가락 기반 접촉 및 제스처를 주로 이용하여 작업하도록 설계되는데, 이는 터치 스크린 상의 손가락의 더 넓은 접촉 면적으로 인해 스타일러스 기반 입력보다 덜 정밀할 수 있다. 일부 실시예들에서, 디바이스는 대략적인 손가락 기반 입력을 사용자가 원하는 행동들을 수행하기 위한 정밀한 포인터/커서 위치 또는 커맨드로 변환한다.
일부 실시예들에서, 터치 스크린 외에도, 디바이스(100)는, 선택적으로, 특정 기능들을 활성화 또는 비활성화하기 위한 터치패드(도시되지 않음)를 포함한다. 일부 실시예들에서, 터치패드는 터치 스크린과는 다르게 시각적 출력을 디스플레이하지 않는 디바이스의 터치 감응형 영역이다. 터치패드는 선택적으로 터치 스크린(112)과 별개인 터치 감응형 표면 또는 터치 스크린에 의해 형성된 터치 감응형 표면의 연장부이다.
디바이스(100)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전원 계통(162)을 포함한다. 전원 계통(162)은, 선택적으로, 전력 관리 시스템, 하나 이상의 전원(예컨대, 배터리, 교류 전류(alternating current: AC)), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시자(예컨대, 발광 다이오드(LED)), 및 휴대용 디바이스들 내에서의 전력의 생성, 관리 및 분산과 연관된 임의의 다른 컴포넌트들을 포함한다.
디바이스(100)는 또한 선택적으로 하나 이상의 광 센서(164)를 포함한다. 도 1a는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 연결된 광 센서를 도시한다. 광 센서(164)는 선택적으로 전하-결합 소자(charge-coupled device: CCD) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터들을 포함한다. 광 센서(164)는 하나 이상의 렌즈를 통해 투영된 주변환경으로부터의 광을 수신하고, 그 광을 이미지를 나타내는 데이터로 변환한다. 이미징 모듈(143)(카메라 모듈로도 지칭됨)과 함께, 광 센서(164)는 선택적으로, 정지 이미지들 또는 비디오를 캡처한다. 일부 실시예들에서, 광 센서는 디바이스 전면 상의 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치되어, 터치 스크린 디스플레이가 정지 및/또는 비디오 이미지 획득을 위한 뷰파인더로서 사용될 수 있게 된다. 일부 실시예들에서, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보는 동안, 사용자의 이미지가 선택적으로 화상 회의를 위해 획득되도록 다른 광 센서가 디바이스의 전면 상에 위치된다.
디바이스(100)는 또한, 선택적으로, 하나 이상의 접촉 세기 센서(165)를 포함한다. 도 1a는 I/O 서브시스템(106) 내의 세기 센서 제어기(159)에 연결된 접촉 세기 센서를 도시한다. 접촉 세기 센서(165)는 선택적으로 하나 이상의 압전 저항 스트레인 게이지, 용량성 힘 센서, 전기적 힘 센서, 압전 힘 센서, 광학적 힘 센서, 용량성 터치 감응형 표면, 또는 다른 세기 센서(예컨대, 터치 감응형 표면 상의 접촉 힘(또는 압력)을 측정하는 데 사용되는 센서들)를 포함한다. 접촉 세기 센서(165)는 환경으로부터 접촉 세기 정보(예컨대, 압력 정보 또는 압력 정보를 대용하는 것)를 수신한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서는 터치 감응형 표면(예를 들어, 터치 감응형 디스플레이 시스템(112))과 함께 위치되거나 그에 근접한다. 일부 실시예들에서, 적어도 하나의 접촉 세기 센서가 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 근접 센서(166)를 포함한다. 도 1a는 주변기기 인터페이스(118)에 연결된 근접 센서(166)를 도시한다. 대안적으로, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 연결된다. 일부 실시예들에서, 근접 센서는 다기능 디바이스가 사용자의 귀 근처에 위치될 때(예를 들어, 사용자가 전화 통화를 하고 있을 때), 터치 스크린(112)을 끄고 디스에이블시킨다.
디바이스(100)는 또한 선택적으로 하나 이상의 촉각적 출력 생성기(167)를 포함한다. 도 1a는 I/O 서브시스템(106) 내의 햅틱 피드백 제어기(161)에 연결된 촉각적 출력 생성기를 도시한다. 촉각적 출력 생성기(167)는 선택적으로 스피커들 또는 다른 오디오 컴포넌트들과 같은 하나 이상의 전자음향 디바이스 및/또는 모터, 솔레노이드, 전기활성 중합체, 압전 액추에이터, 정전 액추에이터, 또는 다른 촉각적 출력 생성 컴포넌트(예컨대, 전기 신호들을 디바이스 상의 촉각적 출력들로 변환하는 컴포넌트)와 같이 에너지를 선형 모션으로 변환하는 전자기계 디바이스들을 포함한다. 접촉 세기 센서(165)는 햅틱 피드백 모듈(133)로부터 촉각적 피드백 생성 명령어들을 수신하여 디바이스(100)의 사용자에 의해 감지될 수 있는 디바이스(100) 상의 촉각적 출력들을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기가 터치 감응형 표면(예컨대, 터치 감응형 디스플레이 시스템(112))과 함께 위치되거나 그에 근접하며, 선택적으로 터치 감응형 표면을 수직으로(예컨대, 디바이스(100)의 표면 내/외로) 또는 측방향으로(예컨대, 디바이스(100)의 표면과 동일한 평면 내에서 전후로) 이동함으로써 촉각적 출력을 생성한다. 일부 실시예들에서, 적어도 하나의 촉각적 출력 생성기 센서는 디바이스(100)의 전면 상에 위치된 터치 스크린 디스플레이(112)의 반대편인 디바이스(100)의 배면 상에 위치된다.
디바이스(100)는 또한 선택적으로 하나 이상의 가속도계(168)를 포함한다. 도 1a는 주변기기 인터페이스(118)에 연결된 가속도계(168)를 도시한다. 대안적으로, 가속도계(168)는 선택적으로 I/O 서브시스템(106) 내의 입력 제어기(160)에 연결된다. 일부 실시예들에서, 하나 이상의 가속도계로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 세로보기(portrait view) 또는 가로보기(landscape view)로 정보가 디스플레이된다. 디바이스(100)는 가속도계(들)(168) 외에도 자력계(도시되지 않음), 및 디바이스(100)의 위치 및 배향(예컨대, 세로 또는 가로)에 관한 정보를 획득하기 위한 GPS(또는 GLONASS 또는 다른 글로벌 내비게이션 시스템) 수신기(도시되지 않음)를 선택적으로 포함한다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트들은 운영 체제(126), 통신 모듈(또는 명령어들의 세트)(128), 접촉/모션 모듈(또는 명령어들의 세트)(130), 그래픽 모듈(또는 명령어들의 세트)(132), 텍스트 입력 모듈(또는 명령어들의 세트)(134), 위성 위치확인 시스템(GPS) 모듈(또는 명령어들의 세트)(135), 및 애플리케이션들(또는 명령어들의 세트들)(136)을 포함한다. 게다가, 일부 실시예들에서, 메모리(102)는 도 1a 및 도 3에 도시된 바와 같이 디바이스/글로벌 내부 상태(157)를 저장한다. 디바이스/글로벌 내부 상태(157)는 애플리케이션들이, 존재하는 경우, 현재 활성 상태임을 나타내는 활성 애플리케이션 상태; 어떤 애플리케이션들, 뷰들 또는 다른 정보가 터치 스크린 디스플레이(112)의 다양한 구역들을 점유하는지를 나타내는 디스플레이 상태; 디바이스의 다양한 센서들 및 입력 제어 디바이스들(116)로부터 획득된 정보를 포함하는 센서 상태; 및 디바이스의 위치 및/또는 자세에 관한 위치 정보 중 하나 이상을 포함한다.
운영 체제(126)(예컨대, 다윈(Darwin), RTXC, 리눅스(LINUX), 유닉스(UNIX), OS X, 윈도(WINDOWS), 또는 VxWorks와 같은 내장형 운영 체제)는 일반적인 시스템 태스크들(예컨대, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어 및 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어 및 소프트웨어 컴포넌트들 사이의 통신을 용이하게 한다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 디바이스들과의 통신을 용이하게 하고, 또한 RF 회로(108) 및/또는 외부 포트(124)에 의해 수신되는 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 외부 포트(124)(예컨대, 범용 직렬 버스(Universal Serial Bus: USB), 파이어와이어(FIREWIRE) 등)는 다른 디바이스들에 직접적으로 또는 네트워크(예컨대, 인터넷, 무선 LAN 등)를 통해 간접적으로 연결하도록 구성된다. 일부 실시예들에서, 외부 포트는 아이팟(애플 사의 상표) 디바이스들에서 사용되는 30-핀 커넥터와 동일하거나 유사하고/하거나 호환가능한 멀티-핀(예컨대, 30-핀) 커넥터이다.
접촉/모션 모듈(130)은, 선택적으로, (디스플레이 제어기(156)와 함께) 터치 스크린(112), 및 다른 터치 감응형 디바이스들(예컨대, 터치패드 또는 물리적 클릭 휠)과의 접촉을 검출한다. 접촉/모션 모듈(130)은 접촉이 발생했는지를 결정하는 것(예컨대, 손가락-다운 이벤트(finger-down event)를 검출하는 것), 접촉의 세기(예컨대, 접촉의 힘 또는 압력, 또는 접촉의 힘 또는 압력을 대체하는 것)를 결정하는 것, 접촉의 이동이 있는지를 결정하고 터치 감응형 표면을 가로지르는 이동을 추적하는 것(예컨대, 하나 이상의 손가락-드래그 이벤트(finger-dragging event)를 검출하는 것), 및 접촉이 중지되었는지를 결정하는 것(예컨대, 손가락-업 이벤트(finger-up event) 또는 접촉 중단을 검출하는 것)과 같은, 접촉의 검출에 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/모션 모듈(130)은 터치 감응형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 지점의 이동을 결정하는 것은 선택적으로, 접촉 지점의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향의 변화)를 결정하는 것을 포함한다. 이들 동작들은, 선택적으로, 단일 접촉들(예컨대, 한 손가락 접촉들)에 또는 다수의 동시 접촉(예컨대, "멀티터치"/다수의 손가락 접촉)에 적용된다. 일부 실시예들에서, 접촉/모션 모듈(130) 및 디스플레이 제어기(156)는 터치패드 상의 접촉을 검출한다.
일부 실시예들에서, 접촉/모션 모듈(130)은 동작이 사용자에 의해 수행되었는지 여부를 결정하는 데(예컨대, 사용자가 아이콘에 대해 "클릭"했는지 여부를 결정하는 데) 하나 이상의 세기 임계치들의 세트를 이용한다. 일부 실시예들에서, 적어도 세기 임계치들의 하위세트가 소프트웨어 파라미터들에 따라 결정된다(예를 들어, 세기 임계치들은 특정 물리적 액추에이터들의 활성화 임계치들에 의해 결정되지 않으며, 디바이스(100)의 물리적 하드웨어를 변경하지 않고서 조정될 수 있음). 예를 들어, 트랙패드 또는 터치 스크린 디스플레이의 마우스 "클릭" 임계치는 트랙패드 또는 터치 스크린 디스플레이 하드웨어를 변경하지 않고서 넓은 범위의 미리 정의된 임계 값들 중 임의의 것으로 설정될 수 있다. 추가적으로, 일부 구현예들에서, 디바이스의 사용자에게는 (예컨대, 개별적인 세기 임계치들을 조정함으로써 그리고/또는 복수의 세기 임계치를 시스템-레벨 클릭 "세기" 파라미터로 한번에 조정함으로써) 세기 임계치들의 세트 중의 하나 이상을 조정하기 위한 소프트웨어 세팅들이 제공된다.
접촉/모션 모듈(130)은, 선택적으로, 사용자에 의한 제스처 입력을 검출한다. 터치 감응형 표면 상의 상이한 제스처들은 상이한 접촉 패턴들 및 세기들을 갖는다. 따라서, 제스처는 선택적으로 특정 접촉 패턴을 검출함으로써 검출된다. 예를 들어, 손가락 탭 제스처(finger tap gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 손가락-다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)(예컨대, 아이콘의 위치)에서 손가락-업(떨어짐(lift off)) 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감응형 표면 상에서 손가락 스와이프 제스처(swipe gesture)를 검출하는 것은 손가락-다운 이벤트를 검출한 다음에 하나 이상의 손가락-드래그 이벤트를 검출하고, 그에 후속하여 손가락-업(떨어짐) 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(132)은 디스플레이되는 그래픽의 시각적 임팩트(예컨대, 밝기, 투명도, 채도, 콘트라스트 또는 다른 시각적 속성)를 변경하기 위한 컴포넌트들을 포함하는, 터치 스크린(112) 또는 다른 디스플레이 상에서 그래픽을 렌더링 및 디스플레이하기 위한 다양한 알려진 소프트웨어 컴포넌트들을 포함한다. 본 명세서에서 사용되는 바와 같이, "그래픽"이라는 용어는 텍스트, 웹 페이지들, 아이콘들(예컨대, 소프트 키들을 포함하는 사용자 인터페이스 객체들), 디지털 이미지들, 비디오들, 애니메이션들 등을 제한 없이 포함하는, 사용자에게 디스플레이될 수 있는 임의의 객체를 포함한다.
일부 실시예들에서, 그래픽 모듈(132)은 사용될 그래픽을 나타내는 데이터를 저장한다. 각각의 그래픽에는 선택적으로 대응하는 코드가 할당된다. 그래픽 모듈(132)은 필요한 경우 좌표 데이터 및 다른 그래픽 속성 데이터와 함께 디스플레이될 그래픽을 특정하는 하나 이상의 코드를 애플리케이션들 등으로부터 수신하며, 이어서 스크린 이미지 데이터를 생성하여 디스플레이 제어기(156)에 출력한다.
햅틱 피드백 모듈(133)은 디바이스(100)와의 사용자 상호작용들에 응답하여 디바이스(100) 상의 하나 이상의 위치에서 촉각적 출력들을 생성하기 위하여 촉각적 출력 생성기(들)(167)에 의해 이용되는 명령어들을 생성하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다.
선택적으로 그래픽 모듈(132)의 컴포넌트인 텍스트 입력 모듈(134)은 다양한 애플리케이션들(예컨대, 연락처(137), 이메일(140), IM(141), 브라우저(147), 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션)에 텍스트를 입력하기 위한 소프트 키보드들을 제공한다.
GPS 모듈(135)은 디바이스의 위치를 결정하고, 이 정보를 다양한 애플리케이션들에서의 사용을 위해 (예컨대, 위치 기반 다이얼링에서 사용하기 위한 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에, 그리고 날씨 위젯들, 지역 옐로우 페이지 위젯들 및 지도/내비게이션 위젯들과 같은 위치 기반 서비스들을 제공하는 애플리케이션들에) 제공한다.
애플리케이션들(136)은, 선택적으로, 하기의 모듈들(또는 명령어들의 세트들), 또는 이들의 하위세트 또는 상위세트를 포함한다:
Figure 112015066562072-pct00004
연락처 모듈(137)(때때로 주소록 또는 연락처 목록으로 지칭됨);
Figure 112015066562072-pct00005
전화 모듈(138);
Figure 112015066562072-pct00006
화상 회의 모듈(139);
Figure 112015066562072-pct00007
이메일 클라이언트 모듈(140);
Figure 112015066562072-pct00008
인스턴트 메시징(IM) 모듈(141);
Figure 112015066562072-pct00009
운동 지원 모듈(142);
Figure 112015066562072-pct00010
정지 및/또는 비디오 이미지들을 위한 카메라 모듈(143);
Figure 112015066562072-pct00011
이미지 관리 모듈(144);
Figure 112015066562072-pct00012
브라우저 모듈(147);
Figure 112015066562072-pct00013
캘린더 모듈(148);
Figure 112015066562072-pct00014
날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자에 의해 획득되는 다른 위젯들뿐 아니라 사용자-생성 위젯들(149-6) 중 하나 이상을 선택적으로 포함하는 위젯 모듈들(149);
Figure 112015066562072-pct00015
사용자-생성 위젯들(149-6)을 만들기 위한 위젯 생성기 모듈(150);
Figure 112015066562072-pct00016
검색 모듈(151);
Figure 112015066562072-pct00017
비디오 재생기 모듈 및 음악 재생기 모듈로 선택적으로 구성되는 비디오 및 음악 재생기 모듈(152);
Figure 112015066562072-pct00018
메모 모듈(153);
Figure 112015066562072-pct00019
지도 모듈(154); 및/또는
Figure 112015066562072-pct00020
온라인 비디오 모듈(155).
메모리(102)에 선택적으로 저장되는 다른 애플리케이션들(136)의 예들은 다른 워드 프로세싱 애플리케이션들, 다른 이미지 편집 애플리케이션들, 그리기 애플리케이션들, 프레젠테이션 애플리케이션들, JAVA-작동식 애플리케이션들, 암호화, 디지털 권한 관리, 음성 인식 및 음성 복제를 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 연락처 모듈(137)은, 선택적으로, 주소록에 이름(들)을 추가하는 것; 주소록으로부터 이름(들)을 삭제하는 것; 전화번호(들), 이메일 주소(들), 물리적 주소(들) 또는 기타 정보를 이름과 연관시키는 것; 이미지를 이름과 연관시키는 것; 이름들을 분류 및 구분하는 것; 전화(138), 화상 회의(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시하고/하거나 용이하게 하기 위해 전화번호들 또는 이메일 주소들을 제공하는 것 등을 포함하여 주소록 또는 연락처 목록(예컨대, 메모리(102) 또는 메모리(370) 내의 연락처 모듈(137)의 애플리케이션 내부 상태(192)에 저장됨)을 관리하는 데 사용된다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 입력 모듈(134)과 함께, 전화 모듈(138)은, 선택적으로, 전화번호에 대응하는 문자들의 시퀀스를 입력하고, 주소록(137) 내의 하나 이상의 전화번호에 액세스하고, 입력된 전화번호를 수정하고, 개별 전화번호를 다이얼링하고, 대화를 하고, 대화가 완료된 때 접속해제하거나 끊는 데 사용된다. 전술된 바와 같이, 무선 통신은 선택적으로 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것을 사용한다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 목록(137) 및 전화 모듈(138)과 함께, 화상 회의 모듈(139)은 사용자 명령어들에 따라 사용자와 한 명 이상의 다른 참여자들 사이의 화상 회의를 개시, 시행 및 종료하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 이메일 클라이언트 모듈(140)은 사용자 명령어들에 응답하여 이메일을 작성, 전송, 수신, 및 관리하도록 하는 실행가능한 명령어들을 포함한다. 이미지 관리 모듈(144)과 함께, 이메일 클라이언트 모듈(140)은 카메라 모듈(143)로 촬영된 정지 또는 비디오 이미지들을 갖는 이메일을 작성 및 전송하는 것을 매우 용이하게 한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 인스턴트 메시징 모듈(141)은, 인스턴트 메시지에 대응하는 문자들의 시퀀스를 입력하고, 이전에 입력된 문자들을 수정하고, (예를 들어, 전화 기반 인스턴트 메시지들을 위한 단문자 메시지 서비스(SMS) 또는 멀티미디어 메시지 서비스(Multimedia Message Service: MMS) 프로토콜을 이용하거나 인터넷 기반 인스턴트 메시지들을 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 개별 인스턴트 메시지를 송신하고, 인스턴트 메시지들을 수신하고, 수신된 인스턴트 메시지들을 보도록 하는 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 송신 및/또는 수신된 인스턴트 메시지들은 선택적으로 그래픽, 사진, 오디오 파일, 비디오 파일 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 다른 첨부물들을 포함한다. 본 명세서에서 사용되는 바와 같이, "인스턴트 메시징"은 전화 기반 메시지들(예컨대, SMS 또는 MMS를 이용하여 전송된 메시지들) 및 인터넷 기반 메시지들(예컨대, XMPP, SIMPLE 또는 IMPS를 이용하여 전송된 메시지들) 둘 모두를 지칭한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 지도 모듈(154), 및 음악 재생기 모듈(146)과 함께, 운동 지원 모듈(142)은 (예컨대, 시간, 거리, 및/또는 열량 소비 목표와 함께) 운동들을 고안하고; 운동 센서들(스포츠 디바이스들)과 통신하고; 운동 센서 데이터를 수신하고; 운동을 모니터하는 데 사용되는 센서들을 교정하고; 운동 동안 음악을 선택 및 재생하고; 운동 데이터를 디스플레이, 저장 및 송신하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 카메라 모듈(143)은 정지 이미지들 또는 비디오(비디오 스트림을 포함함)를 캡처하고 이들을 메모리(102)에 저장하거나, 정지 이미지 또는 비디오의 특성들을 수정하거나, 메모리(102)로부터 정지 이미지 또는 비디오를 삭제하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 이미지 관리 모듈(144)은 정지 및/또는 비디오 이미지들을 배열하거나 수정(예컨대, 편집)하거나 달리 조작하고, 라벨링하고, 삭제하고, (예컨대, 디지털 슬라이드 쇼 또는 앨범에) 표시하고, 저장하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 브라우저 모듈(147)은 사용자 명령어들에 따라 인터넷을 브라우징하도록 - 웹 페이지들 또는 그들의 일부분뿐만 아니라 웹 페이지들에 링크된 첨부물들 및 다른 파일들을 검색, 그에 링크, 수신, 및 디스플레이하는 것을 포함함 - 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 캘린더 모듈(148)은 캘린더들 및 캘린더들과 연관된 데이터(예컨대, 캘린더 엔트리들, 할 일 목록들 등)를 생성, 디스플레이, 수정, 및 저장하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 모듈들(149)은, 선택적으로 사용자에 의해 다운로드 및 사용되거나(예컨대, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)) 또는 사용자에 의해 생성되는(예컨대, 사용자-생성 위젯(149-6)) 미니-애플리케이션들이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일 및 자바스크립트(JavaScript) 파일을 포함한다. 일부 실시예들에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예를 들어, 야후!(Yahoo!) 위젯들)을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 생성기 모듈(150)은 선택적으로 사용자에 의해 위젯들을 생성(예를 들어, 웹 페이지의 사용자-지정 부분을 위젯으로 변경)하는 데 사용된다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 검색 모듈(151)은 사용자 명령어들에 따라 하나 이상의 검색 기준(예컨대, 하나 이상의 사용자-지정 검색어)에 일치하는 메모리(102) 내의 텍스트, 음악, 사운드, 이미지, 비디오, 및/또는 다른 파일들을 검색하도록 하는 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 및 브라우저 모듈(147)과 함께, 비디오 및 음악 재생기 모듈(152)은 사용자가 MP3 또는 AAC 파일들과 같은 하나 이상의 파일 포맷으로 저장된 녹음된 음악 및 다른 사운드 파일들을 다운로드 및 재생하게 하는 실행가능한 명령어들, 및 비디오들을 (예컨대, 터치 스크린(112) 상에서 또는 외부 포트(124)를 통해 외부의 접속된 디스플레이 상에서) 디스플레이하거나, 상영하거나, 그렇지 않으면 재생하도록 하는 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 디바이스(100)는 선택적으로 아이팟(애플 사의 상표)과 같은 MP3 재생기의 기능을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 메모 모듈(153)은 사용자 명령어들에 따라 메모들, 할 일 목록들 등을 생성 및 관리하도록 하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 함께, 지도 모듈(154)은, 선택적으로, 사용자 명령어들에 따라 지도들 및 지도들과 연관된 데이터(예컨대, 운전 방향; 특정 위치에서의 또는 그 인근의 상점들 및 다른 관심 지점들에 관한 데이터; 및 다른 위치 기반 데이터)를 수신하고, 디스플레이하고, 수정하고, 저장하는 데 사용된다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 온라인 비디오 모듈(155)은 사용자가 H.264와 같은 하나 이상의 파일 포맷의 온라인 비디오들을 액세스하고, 브라우징하고, (예컨대, 스트리밍 및/또는 다운로드에 의해) 수신하고, (예컨대, 터치 스크린 상에서 또는 외부 포트(124)를 통해 외부의 접속된 디스플레이 상에서) 재생하고, 특정 온라인 비디오로의 링크와 함께 이메일을 전송하고, 다른 방법으로 관리하게 하는 명령어들을 포함한다. 일부 실시예들에서, 이메일 클라이언트 모듈(140)보다는 오히려 인스턴트 메시징 모듈(141)이 특정 온라인 비디오로의 링크를 전송하는 데 사용된다.
앞서 확인된 모듈들 및 애플리케이션들의 각각은 전술된 하나 이상의 기능 및 본 출원에 기술된 방법들(예컨대, 본 명세서에 기술되는 컴퓨터-구현 방법들 및 다른 정보 처리 방법들)을 수행하기 위한 실행가능한 명령어들의 세트에 대응한다. 이들 모듈(즉, 명령어들의 세트들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 따라서 이들 모듈의 다양한 하위세트들이 선택적으로 다양한 실시예들에서 조합되거나 달리 재배열된다. 일부 실시예들에서, 메모리(102)가 선택적으로, 앞서 확인된 모듈들 및 데이터 구조들의 하위세트를 저장한다. 또한, 메모리(102)는 선택적으로 전술되지 않은 추가의 모듈들 및 데이터 구조들을 저장한다.
일부 실시예들에서, 디바이스(100)는 디바이스 상의 미리 정의된 기능들의 세트의 동작이 터치 스크린 및/또는 터치패드를 통해 전용으로 수행되는 디바이스이다. 터치 스크린 및/또는 터치패드를 디바이스(100)의 동작을 위한 주 입력 제어 디바이스로서 사용함으로써, 디바이스(100) 상의 (푸시 버튼들, 다이얼들 등과 같은) 물리적 입력 제어 디바이스들의 수가 선택적으로 감소된다.
터치 스크린 및/또는 터치패드를 통해 전용으로 수행되는 미리 정의된 기능들의 세트는 선택적으로 사용자 인터페이스들 사이의 내비게이션을 포함한다. 일부 실시예들에서, 터치패드는 사용자에 의해 터치될 때, 디바이스(100)를 디바이스(100) 상에 디스플레이되는 임의의 사용자 인터페이스로부터 메인, 홈 또는 루트 메뉴로 내비게이션한다. 그러한 실시예들에서, 터치패드를 이용하여 " 메뉴 버튼"이 구현된다. 일부 다른 실시예들에서, 메뉴 버튼은 터치패드 대신에 물리적 푸시 버튼 또는 다른 물리적 입력 제어 디바이스이다.
도 1b는 일부 실시예들에 따른, 이벤트 핸들링을 위한 예시적인 컴포넌트들을 예시하는 블록 다이어그램이다. 일부 실시예들에서, 메모리((102, 도 1a) 또는 (370, 도 3))는 (예컨대, 운영 체제(126)에서의) 이벤트 분류기(170) 및 개별 애플리케이션(136-1)(예컨대, 전술된 애플리케이션들(137-151, 155, 380-390) 중 임의의 것)을 포함한다.
이벤트 분류기(170)는 이벤트 정보를 수신하고 그 이벤트 정보를 전달할 애플리케이션(136-1), 및 애플리케이션(136-1)의 애플리케이션 뷰(191)를 결정한다. 이벤트 분류기(170)는 이벤트 모니터(171)와 이벤트 디스패처 모듈(event dispatcher module)(174)을 포함한다. 일부 실시예들에서, 애플리케이션(136-1)은 애플리케이션이 활성 상태이거나 실행 중일 때 터치 감응형 디스플레이(112) 상에 디스플레이되는 현재 애플리케이션 뷰(들)를 나타내는 애플리케이션 내부 상태(192)를 포함한다. 일부 실시예들에서, 디바이스/글로벌 내부 상태(157)는 이벤트 분류기(170)에 의해 어느 애플리케이션(들)이 현재 활성 상태인지를 결정하는 데 이용되며, 애플리케이션 내부 상태(192)는 이벤트 분류기(170)에 의해 이벤트 정보를 전달할 애플리케이션 뷰들(191)을 결정하는 데 이용된다.
일부 실시예들에서, 애플리케이션 내부 상태(192)는 애플리케이션(136-1)이 실행을 재개할 때 이용될 재개 정보, 애플리케이션(136-1)에 의해 디스플레이되고 있거나 디스플레이될 준비가 된 정보를 나타내는 사용자 인터페이스 상태 정보, 사용자가 애플리케이션(136-1)의 이전 상태 또는 뷰로 되돌아가게 하기 위한 상태 큐, 및 사용자에 의해 취해진 이전 행동들의 재실행(redo)/실행취소(undo) 큐 중 하나 이상과 같은 추가의 정보를 포함한다.
이벤트 모니터(171)는 주변기기 인터페이스(118)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브-이벤트(예컨대, 멀티-터치 제스처의 일부로서 터치 감응형 디스플레이(112) 상의 사용자 터치)에 대한 정보를 포함한다. 주변기기 인터페이스(118)는 I/O 서브시스템(106) 또는 센서, 예컨대 근접 센서(166), 가속도계(들)(168), 및/또는 (오디오 회로(110)를 통한) 마이크로폰(113)으로부터 수신하는 정보를 전송한다. 주변기기 인터페이스(118)가 I/O 서브시스템(106)으로부터 수신하는 정보는 터치 감응형 디스플레이(112) 또는 터치 감응형 표면으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(171)는 주변기기 인터페이스(118)에 요청들을 미리 결정된 간격으로 전송한다. 응답으로, 주변기기 인터페이스(118)는 이벤트 정보를 송신한다. 다른 실시예들에서, 주변기기 인터페이스(118)는 중요한 이벤트(예컨대, 미리 결정된 잡음 임계치를 초과하는 입력 및/또는 미리 결정된 지속기간 초과 동안의 입력을 수신하는 것)가 있을 때에만 이벤트 정보를 송신한다.
일부 실시예들에서, 이벤트 분류기(170)는 또한 히트 뷰(hit view) 결정 모듈(172) 및/또는 활성 이벤트 인식기 결정 모듈(173)을 포함한다.
히트 뷰 결정 모듈(172)은 터치 감응형 디스플레이(112)가 하나 초과의 뷰를 디스플레이할 때 하나 이상의 뷰 내에서 서브-이벤트가 발생한 장소를 결정하기 위한 소프트웨어 절차들을 제공한다. 뷰들은 사용자가 디스플레이 상에서 볼 수 있는 제어부들 및 다른 요소들로 구성된다.
애플리케이션과 연관된 사용자 인터페이스의 다른 양태는 본 명세서에서 때때로 애플리케이션 뷰들 또는 사용자 인터페이스 창(user interface window)들로 지칭되는 한 세트의 뷰들이며, 여기서 정보가 디스플레이되고 터치 기반 제스처가 발생한다. 터치가 검출되는 (개별 애플리케이션의) 애플리케이션 뷰들은 선택적으로 애플리케이션의 프로그램 또는 뷰 계층구조 내의 프로그램 레벨들에 대응한다. 예를 들어, 터치가 검출되는 최하위 레벨의 뷰는 선택적으로 히트 뷰로 지칭되고, 적절한 입력들로서 인식되는 이벤트들의 세트는 선택적으로 터치 기반 제스처를 시작하는 초기 터치의 히트 뷰에 적어도 부분적으로 기초하여 결정된다.
히트 뷰 결정 모듈(172)은 터치 기반 제스처의 서브-이벤트들에 관련된 정보를 수신한다. 애플리케이션이 계층구조에서 조직화된 다수의 뷰들을 갖는 경우, 히트 뷰 결정 모듈(172)은 히트 뷰를 서브-이벤트를 처리해야 하는 계층구조 내의 최하위 뷰로서 식별한다. 대부분의 상황들에서, 히트 뷰는 개시되는 서브-이벤트가 발생하는 최하위 레벨 뷰이다(즉, 이벤트 또는 잠재적 이벤트를 형성하는 서브-이벤트들의 시퀀스 내의 첫 번째 서브-이벤트임). 일단 히트 뷰가 히트 뷰 결정 모듈에 의해 식별되면, 히트 뷰는 전형적으로 그것이 히트 뷰로서 식별되게 하는 것과 동일한 터치나 입력 소스에 관련된 모든 서브-이벤트들을 수신한다.
활성 이벤트 인식기 결정 모듈(173)은 뷰 계층구조 내에서 어느 뷰 또는 뷰들이 서브-이벤트들의 특정 시퀀스를 수신해야 하는지를 결정한다. 일부 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 히트 뷰만이 서브-이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 서브-이벤트의 물리적 위치를 포함하는 모든 뷰들이 적극 참여 뷰(actively involved view)인 것으로 결정하고, 그에 따라 모든 적극 참여 뷰들이 서브-이벤트들의 특정 시퀀스를 수신해야 하는 것으로 결정한다. 다른 실시예들에서, 터치 서브-이벤트들이 전적으로 하나의 특정 뷰와 연관된 영역으로 한정되더라도, 계층구조 내의 상위 뷰들은 여전히 적극 참여 뷰들로서 유지될 것이다.
이벤트 디스패처 모듈(174)은 이벤트 정보를 이벤트 인식기(예컨대, 이벤트 인식기(180))에 송달한다. 활성 이벤트 인식기 결정 모듈(173)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 정보를 활성 이벤트 인식기 결정 모듈(173)에 의해 결정된 이벤트 인식기에 전달한다. 일부 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 큐 내에 이벤트 정보를 저장하는데, 이벤트 정보는 개별 이벤트 수신기 모듈(182)에 의해 검색된다.
일부 실시예들에서, 운영 체제(126)는 이벤트 분류기(170)를 포함한다. 대안적으로, 애플리케이션(136-1)은 이벤트 분류기(170)를 포함한다. 또 다른 실시예들에서, 이벤트 분류기(170)는 독립형 모듈이거나 접촉/모션 모듈(130)과 같이 메모리(102)에 저장되는 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(136-1)은 복수의 이벤트 핸들러(190) 및 하나 이상의 애플리케이션 뷰(191)를 포함하며, 이들의 각각은 애플리케이션의 사용자 인터페이스의 개별 뷰 내에 발생하는 터치 이벤트들을 처리하기 위한 명령어들을 포함한다. 애플리케이션(136-1)의 각각의 애플리케이션 뷰(191)는 하나 이상의 이벤트 인식기(180)를 포함한다. 전형적으로, 개별 애플리케이션 뷰(191)는 복수의 이벤트 인식기(180)를 포함한다. 다른 실시예들에서, 이벤트 인식기들(180) 중 하나 이상은 사용자 인터페이스 키트(도시되지 않음) 또는 애플리케이션(136-1)이 방법들 및 다른 속성들을 이어받게 되는 상위 레벨 객체와 같은 별개의 모듈의 일부이다. 일부 실시예들에서, 개별 이벤트 핸들러(190)는 데이터 업데이터(176), 객체 업데이터(177), GUI 업데이터(178), 및/또는 이벤트 분류기(170)로부터 수신된 이벤트 데이터(179) 중 하나 이상을 포함한다. 이벤트 핸들러(190)는 선택적으로 데이터 업데이터(176), 객체 업데이터(177) 또는 GUI 업데이터(178)를 이용하거나 호출하여 애플리케이션 내부 상태(192)를 업데이트한다. 대안적으로, 애플리케이션 뷰들(191) 중 하나 이상은 하나 이상의 개별 이벤트 핸들러(190)를 포함한다. 또한, 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178) 중 하나 이상은 개별 애플리케이션 뷰(191)에 포함된다.
개별 이벤트 인식기(180)는 이벤트 분류기(170)로부터 이벤트 정보(예컨대, 이벤트 데이터(179))를 수신하고 그 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(180)는 이벤트 수신기(182) 및 이벤트 비교기(184)를 포함한다. 일부 실시예들에서, 이벤트 인식기(180)는 또한 적어도 메타데이터(183) 및 이벤트 전달 명령어들(188)(선택적으로 서브-이벤트 전달 명령어들을 포함함)의 하위세트를 포함한다.
이벤트 수신기(182)는 이벤트 분류기(170)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브-이벤트, 예를 들어 터치 또는 터치 이동에 대한 정보를 포함한다. 서브-이벤트에 따라, 이벤트 정보는 또한 서브-이벤트의 위치와 같은 추가의 정보를 포함한다. 서브-이벤트가 터치의 모션과 관련될 때, 이벤트 정보는 또한 선택적으로 서브-이벤트의 속력 및 방향을 포함한다. 일부 실시예들에서, 이벤트는 하나의 배향으로부터 다른 배향으로(예컨대, 세로 배향으로부터 가로 배향으로 또는 그 반대로)의 디바이스의 회전을 포함하며, 이벤트 정보는 디바이스의 현재 배향(디바이스 자세로도 지칭됨)에 관한 대응 정보를 포함한다.
이벤트 비교기(184)는 이벤트 정보를 미리 정의된 이벤트 또는 서브-이벤트 정의들과 비교하고, 그 비교에 기초하여 이벤트 또는 서브-이벤트를 결정하거나, 이벤트 또는 서브-이벤트의 상태를 결정 또는 업데이트한다. 일부 실시예들에서, 이벤트 비교기(184)는 이벤트 정의들(186)을 포함한다. 이벤트 정의들(186)은 이벤트들(예컨대, 서브-이벤트들의 미리 정의된 시퀀스들), 예를 들어 이벤트 1(187-1), 이벤트 2(187-2) 등의 정의를 포함한다. 일부 실시예들에서, 이벤트(187) 내의 서브-이벤트들은, 예를 들어 터치 시작, 터치 종료, 터치 이동, 터치 취소, 및 다중 터치를 포함한다. 일례에서, 이벤트 1(187-1)에 대한 정의는 디스플레이된 객체 상의 더블 탭(double tap)이다. 더블 탭은, 예를 들어 미리 결정된 페이즈(phase) 동안의 디스플레이된 객체 상의 제1 터치(터치 시작), 미리 결정된 페이즈 동안의 제1 리프트 오프(lift-off)(터치 종료), 미리 결정된 페이즈 동안의 디스플레이된 객체 상의 제2 터치(터치 시작), 및 미리 결정된 페이즈 동안의 제2 리프트 오프(터치 종료)를 포함한다. 다른 예에서, 이벤트 2(187-2)에 대한 정의는 디스플레이된 객체 상의 드래깅(dragging)이다. 드래깅은, 예를 들어 미리 결정된 페이즈 동안의 디스플레이된 객체 상의 터치(또는 접촉), 터치 감응형 디스플레이(112)를 가로지르는 터치의 이동, 및 터치의 리프트 오프(터치 종료)을 포함한다. 일부 실시예들에서, 이벤트는 또한 하나 이상의 연관된 이벤트 핸들러(190)에 대한 정보를 포함한다.
일부 실시예들에서, 이벤트 정의(187)는 개별 사용자 인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(184)는 어느 사용자 인터페이스 객체가 서브-이벤트와 연관되어 있는지를 결정하도록 히트 테스트(hit test)를 수행한다. 예를 들어, 3개의 사용자 인터페이스 객체가 터치 감응형 디스플레이(112) 상에 디스플레이된 애플리케이션 뷰에서, 터치 감응형 디스플레이(112) 상에서 터치가 검출되는 경우, 이벤트 비교기(184)는 3개의 사용자 인터페이스 객체들 중 어느 것이 터치(서브-이벤트)와 연관되어 있는지를 결정하도록 히트 테스트를 수행한다. 각각의 디스플레이된 객체가 개별 이벤트 핸들러(190)와 연관되는 경우, 이벤트 비교기는 어느 이벤트 핸들러(190)가 활성화되어야 하는지를 결정하는 데 히트 테스트의 결과를 이용한다. 예를 들어, 이벤트 비교기(184)는 히트 테스트를 트리거하는 서브-이벤트 및 객체와 연관되는 이벤트 핸들러를 선택한다.
일부 실시예들에서, 개별 이벤트(187)에 대한 정의는 또한 서브-이벤트들의 시퀀스가 이벤트 인식기의 이벤트 유형에 대응하는지 대응하지 않는지 여부가 결정된 후까지 이벤트 정보의 전달을 지연하는 지연된 행동들을 포함한다.
개별 이벤트 인식기(180)가 일련의 서브-이벤트들이 이벤트 정의들(186) 내의 이벤트들 중 어떠한 것과도 일치하지 않는 것으로 결정하면, 개별 이벤트 인식기(180)는 이벤트 불가능, 이벤트 실패, 또는 이벤트 종료 상태에 진입하고, 그 후 개별 이벤트 인식기는 터치 기반 제스처의 후속적인 서브-이벤트들을 무시한다. 이러한 상황에서, 만일 있다면, 히트 뷰에 대해 활성 상태로 유지되는 다른 이벤트 인식기들이 진행 중인 터치 기반 제스처의 서브-이벤트들을 계속해서 추적 및 처리한다.
일부 실시예들에서, 개별 이벤트 인식기(180)는 이벤트 전달 시스템이 어떻게 적극 참여 이벤트 인식기들에 대한 서브-이벤트 전달을 수행해야 하는지를 나타내는 구성 가능한 속성들, 플래그(flag)들, 및/또는 목록들을 갖는 메타데이터(183)를 포함한다. 일부 실시예들에서, 메타데이터(183)는 이벤트 인식기들이 어떻게 서로 상호작용하는지, 또는 상호작용할 수 있는지를 나타내는 구성 가능한 속성들, 플래그들, 및/또는 목록들을 포함한다. 일부 실시예들에서, 메타데이터(183)는, 서브-이벤트들이 뷰 또는 프로그램 계층구조에서의 변화하는 레벨들에 전달되는지 여부를 나타내는 구성 가능한 속성들, 플래그들, 및/또는 목록들을 포함한다.
일부 실시예들에서, 개별 이벤트 인식기(180)는 이벤트의 하나 이상의 특정 서브-이벤트가 인식될 때 이벤트와 연관된 이벤트 핸들러(190)를 활성화한다. 일부 실시예들에서, 개별 이벤트 인식기(180)는 이벤트와 연관된 이벤트 정보를 이벤트 핸들러(190)에 전달한다. 이벤트 핸들러(190)를 활성화하는 것은 개별 히트 뷰에 서브-이벤트들을 전송(및 지연 전송)하는 것과는 구별된다. 일부 실시예들에서, 이벤트 인식기(180)는 인식된 이벤트와 연관된 플래그를 보내고, 그 플래그와 연관된 이벤트 핸들러(190)는 그 플래그를 캡처하고 미리 정의된 프로세스를 수행한다.
일부 실시예들에서, 이벤트 전달 명령어들(188)은 이벤트 핸들러를 활성화시키지 않고 서브-이벤트에 대한 이벤트 정보를 전달하는 서브-이벤트 전달 명령어들을 포함한다. 대신, 서브-이벤트 전달 명령어들은 일련의 서브-이벤트들과 연관된 이벤트 핸들러들에 또는 적극 참여 뷰들에 이벤트 정보를 전달한다. 일련의 서브-이벤트들 또는 적극 참여 뷰들과 연관된 이벤트 핸들러들은 이벤트 정보를 수신하고 미리 결정된 프로세스를 수행한다.
일부 실시예들에서, 데이터 업데이터(176)는 애플리케이션(136-1)에서 이용되는 데이터를 생성 및 업데이트한다. 예를 들어, 데이터 업데이터(176)는 연락처 모듈(137)에서 이용되는 전화번호를 업데이트하거나 비디오 재생기 모듈(145)에서 이용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 업데이터(177)는 애플리케이션(136-1)에서 이용되는 객체들을 생성 및 업데이트한다. 예를 들어, 객체 업데이터(176)는 새로운 사용자 인터페이스 객체를 생성하거나 사용자 인터페이스 객체의 위치를 업데이트한다. GUI 업데이터(178)는 GUI를 업데이트한다. 예를 들어, GUI 업데이터(178)는 디스플레이 정보를 준비하고 이것을 터치 감응형 디스플레이 상의 디스플레이를 위한 그래픽 모듈(132)에 전송한다.
일부 실시예들에서, 이벤트 핸들러(들)(190)는 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)를 포함하거나 이들에 액세스한다. 일부 실시예들에서, 데이터 업데이터(176), 객체 업데이터(177), 및 GUI 업데이터(178)는 개별 애플리케이션(136-1) 또는 애플리케이션 뷰(191)의 단일 모듈 내에 포함된다. 다른 실시예들에서, 이들은 2개 이상의 소프트웨어 모듈에 포함된다.
터치 감응형 디스플레이들 상의 사용자 터치들의 이벤트 처리에 관한 전술한 논의는 또한 입력 디바이스들을 구비한 다기능 디바이스들(100)을 작동시키기 위한 다른 형태들의 사용자 입력들에도 적용되지만, 그 모두가 터치 스크린들 상에서 개시되는 것이 아니라는 것을 이해해야 한다. 예를 들어,단일 또는 다수의 키보드 누르기 또는 유지와 선택적으로 조화된 마우스 이동 및 마우스 버튼 누르기; 터치패드 상의, 탭, 드래그, 스크롤 등과 같은 접촉 이동들; 펜 스타일러스 입력들; 디바이스의 이동; 구두 명령어들; 검출된 눈 이동들; 생체 측정 입력들; 및/또는 이들의 임의의 조합이 인식될 이벤트를 정의하는 서브-이벤트들에 대응하는 입력들로서 선택적으로 이용된다.
도 2는 일부 실시예들에 따른, 터치 스크린(112)을 갖는 휴대용 다기능 디바이스(100)를 예시한다. 터치 스크린은 선택적으로 사용자 인터페이스(UI)(200) 내에서 하나 이상의 그래픽을 디스플레이한다. 이러한 실시예에서뿐만 아니라 아래에 기술되는 다른 실시예들에서, 사용자는 예를 들어 하나 이상의 손가락(202)(도면에서 축척대로 도시되지 않음) 또는 하나 이상의 스타일러스(203)(도면에서 축척대로 도시되지 않음)을 이용하여 그래픽 상에 제스처를 행함으로써 그래픽들 중 하나 이상을 선택하는 것이 가능하게 된다. 일부 실시예들에서, 하나 이상의 그래픽의 선택은 사용자가 하나 이상의 그래픽과의 접촉을 중단할 때 발생한다. 일부 실시예들에서, 제스처는 선택적으로 디바이스(100)와 접촉을 이룬 손가락의 하나 이상의 탭, (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 하나 이상의 스와이프 및/또는 (우에서 좌로, 좌에서 우로, 위로 및/또는 아래로의) 롤링을 포함한다. 일부 구현예들 또는 상황들에서, 그래픽과의 의도하지 않은 접촉은 그래픽을 선택하지 않는다. 예를 들어, 선택에 대응하는 제스처가 탭인 경우에, 애플리케이션 아이콘 위에서 휩쓰는(sweep) 스와이프 제스처는 선택적으로, 대응하는 애플리케이션을 선택하지 않는다.
디바이스(100)는 또한 선택적으로 "홈" 또는 메뉴 버튼(204)과 같은 하나 이상의 물리적 버튼을 포함한다. 전술된 바와 같이, 메뉴 버튼(204)은 선택적으로, 디바이스(100) 상에서 선택적으로 실행되는 애플리케이션들의 세트 내의 임의의 애플리케이션(136)으로 내비게이션하는 데 사용된다. 대안적으로, 일부 실시예들에서, 메뉴 버튼은 터치 스크린(112) 상에 디스플레이된 GUI에서 소프트 키로서 구현된다.
일 실시예에서, 디바이스(100)는 터치 스크린(112), 메뉴 버튼(204), 디바이스의 전원을 켜거나/끄고 디바이스를 잠그기 위한 푸시 버튼(206), 음량 조절 버튼(들)(208), 가입자 식별 모듈(SIM) 카드 슬롯(210), 헤드 셋 잭(212), 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버튼(206)은 선택적으로, 버튼을 누르고 버튼을 미리 정의된 시간 간격 동안 누른 상태로 유지함으로써 디바이스에서 전원을 켜거나/끄고; 버튼을 누르고 미리 정의된 시간 간격이 경과하기 전에 버튼 누르기를 해제함으로써 디바이스를 잠그고; 그리고/또는 디바이스를 잠금해제하거나 잠금해제 프로세스를 개시하기 위해 사용된다. 대안적인 실시예에서, 디바이스(100)는 또한 마이크로폰(113)을 통해 일부 기능들의 활성화 또는 비활성화를 위한 구두 입력을 수용한다. 디바이스(100)는 또한 선택적으로 터치 스크린(112) 상의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서(165) 및/또는 디바이스(100)의 사용자를 위해 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기(167)를 포함한다.
도 3은 일부 실시예들에 따른, 디스플레이 및 터치 감응형 표면을 구비한 예시적인 다기능 디바이스의 블록 다이어그램이다. 디바이스(300)가 휴대용일 필요는 없다. 일부 실시예들에서, 디바이스(300)는 랩톱 컴퓨터, 데스크톱 컴퓨터, 태블릿 컴퓨터, 다기능 재생기 디바이스, 내비게이션 디바이스, (아이들의 학습 장난감과 같은) 교육용 디바이스, 게임 시스템, 또는 제어 디바이스(예컨대, 가정용 또는 산업용 제어기)이다. 디바이스(300)는 전형적으로 하나 이상의 처리 유닛(CPU)(310), 하나 이상의 네트워크 또는 다른 통신 인터페이스들(360), 메모리(370), 및 이들 컴포넌트를 상호접속하기 위한 하나 이상의 통신 버스(320)를 포함한다. 통신 버스들(320)은 선택적으로 시스템 컴포넌트들을 상호접속시키고 이들 사이의 통신을 제어하는 회로(때때로 칩셋으로 지칭됨)를 포함한다. 디바이스(300)는 전형적으로 터치 스크린 디스플레이인 디스플레이(340)를 포함하는 입력/출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 또한 선택적으로 키보드 및/또는 마우스(또는 기타의 포인팅 디바이스)(350) 및 터치패드(355), (예를 들어, 도 1a를 참조하여 전술된 촉각적 출력 생성기(들)(167)와 유사한) 디바이스(300) 상에 촉각적 출력들을 생성하기 위한 촉각적 출력 생성기(357), 센서들(359)(예를 들어, 도 1a를 참조하여 전술된 접촉 세기 센서(들)(165)와 유사한 광, 가속도, 근접, 터치 감응형, 및/또는 접촉 세기 센서들)을 포함한다. 메모리(370)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 솔리드 스테이트 메모리 디바이스들과 같은 고속 랜덤 액세스 메모리를 포함하며; 선택적으로 하나 이상의 자기 디스크 저장 디바이스, 광 디스크 저장 디바이스, 플래시 메모리 디바이스, 또는 다른 비휘발성 솔리드 스테이트 저장 디바이스와 같은 비휘발성 메모리를 포함한다. 메모리(370)는 선택적으로 CPU(310)(들)로부터 원격으로 위치된 하나 이상의 저장 디바이스를 포함한다. 일부 실시예들에서, 메모리(370)는 휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)에 저장된 프로그램들, 모듈들, 및 데이터 구조들과 유사한 프로그램들, 모듈들, 및 데이터 구조들 또는 이들의 하위세트를 저장한다. 또한, 메모리(370)는 선택적으로 휴대용 다기능 디바이스(100)의 메모리(102) 내에 존재하지 않는 추가의 프로그램들, 모듈들 및 데이터 구조들을 저장한다. 예를 들어, 디바이스(300)의 메모리(370)는 선택적으로 그리기 모듈(380), 프레젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹사이트 제작 모듈(386), 디스크 저작 모듈(388), 및/또는 스프레드시트 모듈(390)을 저장하는 반면, 휴대용 다기능 디바이스(100)(도 1a)의 메모리(102)는 선택적으로 이들 모듈을 저장하지 않는다.
도 3에서의 앞서 확인된 요소들 각각은, 선택적으로, 전술된 메모리 디바이스들 중 하나 이상에 저장된다. 앞서 확인된 모듈들 각각은 전술된 기능을 수행하기 위한 명령어들의 세트에 대응한다. 앞서 확인된 모듈들 또는 프로그램들(즉, 명령어들의 세트들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로서 구현될 필요가 없으며, 따라서 다양한 실시예들에서 이들 모듈의 다양한 하위세트들이 선택적으로 조합되거나 달리 재배열된다. 일부 실시예들에서, 메모리(370)는 선택적으로, 앞서 확인된 모듈들 및 데이터 구조들의 하위세트를 저장한다. 또한, 메모리(370)는 선택적으로 전술되지 않은 추가의 모듈들 및 데이터 구조들을 저장한다.
이제 휴대용 다기능 디바이스(100) 상에서 선택적으로 구현되는 사용자 인터페이스들("UI")의 실시예들에 주목한다.
도 4a는 일부 실시예들에 따른, 휴대용 다기능 디바이스(100) 상의 애플리케이션들의 메뉴에 대한 예시적인 사용자 인터페이스를 예시한다. 유사한 사용자 인터페이스들이 선택적으로 디바이스(300) 상에 구현된다. 일부 실시예들에서, 사용자 인터페이스(400)는 다음의 요소들, 또는 그 하위세트나 상위세트를 포함한다:
Figure 112015066562072-pct00021
셀룰러 및 Wi-Fi 신호들과 같은 무선 통신(들)에 대한 신호 강도 표시자(들)(402);
Figure 112015066562072-pct00022
시간(404);
Figure 112015066562072-pct00023
블루투스 표시자(405);
Figure 112015066562072-pct00024
배터리 상태 표시자(406);
Figure 112015066562072-pct00025
다음과 같은, 빈번하게 사용되는 애플리케이션들에 대한 아이콘들을 갖는 트레이(408):
Figure 112015066562072-pct00026
부재 중 전화들 또는 음성메일 메시지들의 개수의 표시자(414)를 선택적으로 포함하는 "전화"라고 라벨링된 전화 모듈(138)용 아이콘(416);
Figure 112015066562072-pct00027
읽지 않은 이메일들의 개수의 표시자(410)를 선택적으로 포함하는 "메일"이라고 라벨링된 이메일 클라이언트 모듈(140)용 아이콘(418);
Figure 112015066562072-pct00028
"브라우저"라고 라벨링된 브라우저 모듈(147)용 아이콘(420); 및
Figure 112015066562072-pct00029
아이팟(애플 사의 상표) 모듈(152)로도 지칭되는, "아이팟"이라고 라벨링된 비디오 및 음악 재생기 모듈(152)용 아이콘(422); 및
Figure 112015066562072-pct00030
다음과 같은, 다른 애플리케이션들에 대한 아이콘들:
Figure 112015066562072-pct00031
"텍스트"라고 라벨링된 IM 모듈(141)용 아이콘(424);
Figure 112015066562072-pct00032
"캘린더"라고 라벨링된 캘린더 모듈(148)용 아이콘(426);
Figure 112015066562072-pct00033
"사진"이라고 라벨링된 이미지 관리 모듈(144)용 아이콘(428);
Figure 112015066562072-pct00034
"카메라"라고 라벨링된 카메라 모듈(143)용 아이콘(430);
Figure 112015066562072-pct00035
"온라인 비디오"라고 라벨링된 온라인 비디오 모듈(155)용 아이콘(432);
Figure 112015066562072-pct00036
"주식"이라고 라벨링된 주식 위젯(149-2)용 아이콘(434);
Figure 112015066562072-pct00037
"지도"라고 라벨링된 지도 모듈(154)용 아이콘(436);
Figure 112015066562072-pct00038
"날씨"라고 라벨링된 날씨 위젯(149-1)용 아이콘(438);
Figure 112015066562072-pct00039
"시계"라고 라벨링된 알람 시계 위젯(149-4)용 아이콘(440);
Figure 112015066562072-pct00040
"운동 지원"이라고 라벨링된 운동 지원 모듈(142)용 아이콘(442);
Figure 112015066562072-pct00041
"메모"라고 라벨링된 메모 모듈(153)용 아이콘(444); 및
Figure 112015066562072-pct00042
디바이스(100) 및 그의 다양한 애플리케이션들(136)에 대한 설정에의 액세스를 제공하는 설정 애플리케이션 또는 모듈용 아이콘(446).
도 4a에 예시된 아이콘 라벨들이 단지 예시적인 것임에 주목하여야 한다. 예를 들어, 비디오 및 음악 재생기 모듈(152)에 대한 아이콘(422)이 "음악" 또는 "음악 재생기"로 라벨링된다. 기타 라벨들이 선택적으로 다양한 애플리케이션 아이콘들에 대해 사용된다. 일부 실시예에서, 개별 애플리케이션 아이콘에 대한 라벨은 개별 애플리케이션 아이콘에 대응하는 애플리케이션의 이름을 포함한다. 일부 실시예들에서, 특정 애플리케이션 아이콘에 대한 라벨은 특정 애플리케이션 아이콘에 대응하는 애플리케이션의 이름과 구별된다.
도 4b는 디스플레이(450)(예컨대, 터치 스크린 디스플레이(112))와 별개인 터치 감응형 표면(451)(예컨대, 태블릿 또는 터치패드(355), 도 3)을 구비한 디바이스(예컨대, 디바이스(300), 도 3) 상의 예시적인 사용자 인터페이스를 예시한다. 디바이스(300)는 또한 선택적으로, 터치 감응형 표면(451) 상의 접촉들의 세기를 검출하기 위한 하나 이상의 접촉 세기 센서(예컨대, 센서들(357) 중 하나 이상) 및/또는 디바이스(300)의 사용자에 대한 촉각적 출력들을 생성하기 위한 하나 이상의 촉각적 출력 생성기(359)를 포함한다.
후속하는 일부 예들이 (터치 감응형 표면과 디스플레이가 조합된) 터치 스크린 디스플레이(112) 상의 입력들을 참조하여 제공될 것이지만, 일부 실시예들에서, 디바이스는 도 4b에 도시된 바와 같이 디스플레이와 별개인 터치 감응형 표면 상에서 입력들을 검출한다. 일부 실시예들에서, 터치 감응형 표면(예컨대, 도 4b의 451)은 디스플레이(예컨대, 450) 상의 주축(예컨대, 도 4b의 453)에 대응하는 주축(예컨대, 도 4b의 452)을 갖는다. 이들 실시예에 따르면, 디바이스는 디스플레이 상의 개별 위치들에 대응하는 위치들(예컨대, 도 4b에서, 460은 468에 대응하고, 462는 470에 대응함)에서 터치 감응형 표면(451)과의 접촉들(예컨대, 도 4b의 460 및 462)을 검출한다. 이러한 방식으로, 터치 감응형 표면(예컨대, 도 4b의 451) 상에서 디바이스에 의해 검출된 사용자 입력들(예컨대, 접촉들(460, 462) 및 그 이동들)은 터치 감응형 표면이 디스플레이와 별개인 경우 디바이스에 의해 다기능 디바이스의 디스플레이(예컨대, 도 4b의 450) 상의 사용자 인터페이스를 조작하는 데 사용된다. 유사한 방법들이 선택적으로 본 명세서에 기술되는 다른 사용자 인터페이스들에 사용된다는 것을 이해하여야 한다.
추가로, 후속하는 예들이 손가락 입력들(예컨대, 손가락 접촉들, 손가락 탭 제스처들, 손가락 스와이프 제스처들)을 주로 참조하여 주어지는 한편, 일부 실시예들에서, 손가락 입력들 중 하나 이상은 다른 입력 디바이스로부터의 입력(예컨대, 마우스 기반 입력 또는 스타일러스 입력)으로 대체되는 것이 이해되어야 한다. 예를 들어, 스와이프 제스처가 선택적으로 (예를 들어, 접촉 대신) 마우스 클릭 다음에 (예컨대, 접촉의 이동 대신) 스와이프의 경로를 따른 커서의 이동이 이어지는 것으로 대체된다. 다른 예로서, 탭 제스처는, 선택적으로, (예를 들어, 접촉의 검출 다음에 접촉을 검출하는 것을 중지하는 것이 이어지는 대신) 커서가 탭 제스처의 위치 위에 위치되는 동안 마우스 클릭으로 대체된다. 유사하게, 다수의 사용자 입력이 동시에 검출되는 경우, 다수의 컴퓨터 마우스가 선택적으로 동시에 사용되거나, 또는 마우스와 손가락 접촉들이 선택적으로 동시에 사용되는 것으로 이해하여야 한다.
본 명세서에 사용되는 바와 같이, "포커스 셀렉터(focus selector)"라는 용어는 사용자가 상호작용하고 있는 사용자 인터페이스의 현재 부분을 나타내는 입력 요소를 지칭한다. 커서 또는 다른 위치 마커를 포함하는 일부 구현예들에서, 커서는 "포커스 셀렉터"로서의 역할을 하여, 커서가 특정 사용자 인터페이스 요소(예컨대, 버튼, 창, 슬라이더 또는 다른 사용자 인터페이스 요소) 위에 있는 동안 입력(예컨대, 누르기 입력)이 터치 감응형 표면(예컨대, 도 3의 터치패드(355) 또는 도 4b의 터치 감응형 표면(451)) 상에서 검출될 때, 특정 사용자 인터페이스 요소가 검출된 입력에 따라 조정되게 된다. 터치 스크린 디스플레이 상의 사용자 인터페이스 요소들과의 직접 상호작용을 가능하게 하는 터치 스크린 디스플레이(예컨대, 도 1a의 터치 감응형 디스플레이 시스템(112) 또는 도 4a의 터치 스크린(112))를 포함하는 일부 구현예들에서, 터치 스크린 상의 검출된 접촉은 "포커스 셀렉터"로서의 역할을 하여, 입력(예컨대, 접촉에 의한 누르기 입력)이 터치 스크린 디스플레이 상에서 특정 사용자 인터페이스 요소(예컨대, 버튼, 창, 슬라이더 또는 다른 사용자 인터페이스 요소)의 위치에서 검출되는 경우 특정 사용자 인터페이스 요소가 검출된 입력에 따라 조정되게 된다. 일부 구현예들에서, (예를 들어, 포커스를 하나의 버튼으로부터 다른 버튼으로 이동시키기 위해 탭 키 또는 화살표 키를 사용함으로써) 터치 스크린 디스플레이 상의 대응하는 커서의 이동 또는 접촉의 이동 없이 포커스가 사용자 인터페이스의 하나의 구역으로부터 사용자 인터페이스의 다른 구역으로 이동되며, 이러한 구현예들에서, 포커스 셀렉터는 사용자 인터페이스의 상이한 구역들 사이에서의 포커스의 이동에 따라 이동한다. 포커스 셀렉터에 의해 취해지는 구체적인 형태와 무관하게, 포커스 셀렉터는 일반적으로, (예를 들어, 사용자가 상호작용하고자 하는 사용자 인터페이스의 요소를 디바이스에 나타냄으로써) 사용자 인터페이스와의 사용자의 의도된 상호작용을 전달하기 위하여 사용자에 의해 제어되는 사용자 인터페이스 요소(또는 터치 스크린 디스플레이 상의 접촉)이다. 예를 들어, 터치 감응형 표면(예컨대, 터치패드 또는 터치 스크린) 상에서 누르기 입력이 검출되는 동안 개별 버튼 위의 포커스 셀렉터(예컨대, 커서, 접촉 또는 선택 박스)의 위치는 (디바이스의 디스플레이 상에 나타내어진 다른 사용자 인터페이스 요소들과 반대로) 사용자가 개별 버튼을 활성화할 의도를 갖고 있다는 것을 나타낼 것이다.
아래에 기술되는 사용자 인터페이스 도면들은 하나 이상의 세기 임계치(예컨대, 접촉-검출 세기 임계치(contact detection intensity threshold) IT0, 가볍게 누르기 세기 임계치(light press intensity threshold) ITL, 깊게 누르기 세기 임계치(deep press intensity threshold) ITD, 및/또는 하나 이상의 다른 세기 임계치)에 대한 터치 감응형 표면 상의 접촉의 현재 세기를 보여주는 다양한 세기 다이어그램들을 포함한다. 이러한 세기 다이어그램은 전형적으로, 디스플레이된 사용자 인터페이스의 일부가 아니라, 도면들의 해석을 돕도록 제공된다. 일부 실시예들에서, 가볍게 누르기 세기 임계치는, 디바이스가 물리적 마우스 또는 트랙패드의 버튼을 클릭하는 것과 전형적으로 연관된 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 깊게 누르기 세기 임계치는, 디바이스가 물리적 마우스 또는 트랙패드의 버튼을 클릭하는 것과 전형적으로 연관된 동작들과는 상이한 동작들을 수행하게 될 세기에 대응한다. 일부 실시예들에서, 접촉이 가볍게 누르기 세기 임계치 미만의 (예를 들면, 그리고 공칭 접촉-검출 세기 임계치 IT0 - 이 공칭 접촉-검출 세기 임계치 미만으로는 접촉이 더 이상 검출되지 않음 - 를 초과하는) 세기로 검출되는 경우, 디바이스는 가볍게 누르기 세기 임계치 또는 깊게 누르기 세기 임계치와 연관된 동작을 수행함이 없이 터치 감응형 표면 상의 접촉의 이동에 따라 포커스 셀렉터를 이동시킬 것이다. 일반적으로, 달리 언급되지 않는다면, 이들 세기 임계치는 상이한 세트들의 사용자 인터페이스 도면들 사이에서 일관성을 갖는다.
가볍게 누르기 세기 임계치 ITL 미만의 세기에서 가볍게 누르기 세기 임계치 ITL와 깊게 누르기 세기 임계치 ITD 사이의 세기로의 접촉의 세기의 증가는, 때때로 "가볍게 누르기" 입력으로서 지칭된다. 깊게 누르기 세기 임계치 ITD 미만의 세기에서 깊게 누르기 세기 임계치 ITD 초과의 세기로의 접촉의 세기의 증가는, 때때로 "깊게 누르기" 입력으로서 지칭된다. 접촉-검출 세기 임계치 IT0 미만의 세기에서 접촉-검출 세기 임계치 IT0와 가볍게 누르기 세기 임계치 ITL 사이의 세기로의 접촉의 세기의 증가는, 때때로 터치-표면 상의 접촉을 검출하는 것으로 지칭된다. 접촉-검출 세기 임계치 IT0 초과의 세기에서 접촉 세기 임계치 IT0 미만의 세기로의 접촉의 세기의 감소는, 때때로 터치-표면으로부터의 접촉의 떨어짐(liftoff)을 검출하는 것으로 지칭된다. 일부 실시예들에서, IT0은 영(0)이다. 일부 실시예들에서, IT0은 0보다 크다. 일부 예시들에서, 음영처리된(shaded) 원 또는 타원은 터치 감응형 표면 상의 접촉의 세기를 표현하는 데 사용된다. 일부 예시들에서, 음영처리되지 않은 원 또는 타원은 개별 접촉의 세기를 특정하지 않으면서 터치 감응형 표면 상의 개별 접촉을 표현하는 데 사용된다.
본 명세서에 기술되는 일부 실시예들에서, 하나 이상의 동작이, 개별 누르기 입력을 포함하는 제스처를 검출하는 것에 응답하여 또는 개별 접촉(또는 복수의 접촉)으로 수행되는 개별 누르기 입력을 검출하는 것에 응답하여 수행되는데, 여기서 개별 누르기 입력은 누르기-입력 세기 임계치 초과로의 접촉(또는 복수의 접촉)의 세기에서의 증가를 검출하는 것에 적어도 부분적으로 기초하여 검출된다. 일부 실시예들에서, 개별 동작은, 누르기-입력 세기 임계치 초과로의 개별 접촉의 세기에서의 증가(예컨대, 개별 누르기 입력의 "다운 스트로크(down stroke)")를 검출하는 것에 응답하여 수행된다. 일부 실시예들에서, 누르기 입력은, 누르기-입력 세기 임계치 초과로의 개별 접촉의 세기에서의 증가, 및 누르기-입력 세기 임계치 미만으로의 접촉의 세기에서의 후속적인 감소를 포함하며, 개별 동작은 누르기-입력 임계치 미만으로의 개별 접촉의 세기에서의 후속적인 감소(예컨대, 개별 누르기 입력의 "업 스트로크(up stroke)")를 검출하는 것에 응답하여 수행된다.
일부 실시예들에서, 디바이스는 때때로 "지터(jitter)"라고 불리는 돌발적인 입력들을 회피하기 위해 세기 히스테리시스를 채용하며, 여기서 디바이스는 누르기-입력 세기 임계치에 대한 미리 정의된 관계를 갖는 히스테리시스 세기 임계치를 정의하거나 선택한다(예를 들어, 히스테리시스 세기 임계치는 누르기-입력 세기 임계치보다 X 세기 단위 더 낮거나, 또는 히스테리시스 세기 임계치는 누르기-입력 세기 임계치의 75%, 90% 또는 소정의 적절한 비율이다). 따라서, 일부 실시예들에서, 누르기 입력은 누르기-입력 세기 임계치 초과로의 개별 접촉의 세기에서의 증가 및 누르기-입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만으로의 접촉의 세기에서의 후속적인 감소를 포함하며, 개별 동작은 히스테리시스 세기 임계치 미만으로의 개별 접촉의 세기에서의 후속적인 감소(예컨대, 개별 누르기 입력의 "업 스트로크")를 검출하는 것에 응답하여 수행된다. 유사하게, 일부 실시예들에서, 누르기 입력은 디바이스가 히스테리시스 세기 임계치 이하의 세기에서 누르기-입력 세기 임계치 이상의 세기로의 접촉의 세기에서의 증가 및, 선택적으로, 히스테리시스 세기 이하의 세기로의 접촉의 세기에서의 후속적인 감소를 검출하는 경우에만 검출되며, 개별 동작은 누르기 입력(예컨대, 상황에 따라, 접촉의 세기에서의 증가 또는 접촉의 세기에서의 감소)을 검출하는 것에 응답하여 수행된다.
설명의 용이성을 위해, 누르기-입력 세기 임계치와 연관된 누르기 입력에 응답하여 또는 누르기 입력을 포함하는 제스처에 응답하여 수행되는 동작들의 설명은, 선택적으로, 누르기-입력 세기 임계치 초과로의 접촉의 세기에서의 증가, 히스테리시스 세기 임계치 미만의 세기에서 누르기-입력 세기 임계치 초과의 세기로의 접촉의 세기에서의 증가, 누르기-입력 세기 임계치 미만으로의 접촉의 세기에서의 감소, 및/또는 누르기-입력 세기 임계치에 대응하는 히스테리시스 세기 임계치 미만으로의 접촉의 세기에서의 감소 중 어느 하나를 검출하는 것에 응답하여 트리거된다. 또한, 동작이 누르기-입력 세기 임계치 미만으로의 접촉의 세기에서의 감소를 검출하는 것에 응답하여 수행되는 것으로 기술되는 예들에서, 동작은, 선택적으로, 누르기-입력 세기 임계치에 대응하고 이보다 더 낮은 히스테리시스 세기 임계치 미만으로의 접촉의 세기에서의 감소를 검출하는 것에 응답하여 수행된다.
사용자 인터페이스 및 연관된 프로세스
집계 세기의 개별 부분들의 복수의 접촉으로의 할당
많은 전자 바이스가 사용자 입력의 압력을 감지한다. 예를 들어, 압력 감응형 버튼을 구비한 디바이스는 버튼과 일체화된 압력 센서의 압력 측정치에 기초하여 버튼이 사용자에 의해 눌러지는 양을 결정한다. 그러나, 그러한 방법들은 다수의 상이한, 동시에 검출된 접촉들의 세기를 추정하는 방법을 제공하지 않으며, 따라서 다수의 접촉들을 이용해 세기 감응형 사용자 인터페이스와 상호작용하는 방법을 제공하지 않는다. 디바이스는, 터치 감응형 표면 상에서 복수의 접촉을 검출하는 동안, 터치 감응형 표면 상의 복수의 접촉의 집계 세기(예컨대, 복수의 세기 센서의 각각의 세기 센서로부터 수신된 세기 측정치들의 총합)의 제1 부분을 복수의 접촉 중 제1 접촉에 할당함으로써, 그리고 집계 세기의 제2 부분을 복수의 접촉 중 제2 접촉에 할당함으로써, 그러한 방법들을 개선한다. 디바이스는, 복수의 세기 센서 중 제1 세기 센서로부터 수신된 제1 세기 측정치; 복수의 세기 센서 중 제2 세기 센서로부터의 제2 세기 측정치; 터치 감응형 표면에 대한 제1 세기 센서의 위치; 터치 감응형 표면에 대한 제2 세기 센서의 위치; 및 제1 접촉의 하나 이상의 속성의 세트의 값들(예컨대, 힘의 중심에 대한 제1 접촉의 위치)과 제2 접촉의 하나 이상의 속성의 세트의 대응하는 값들 사이의 비교에 적어도 부분적으로 기초하여, 집계 세기를 복수의 접촉에 할당하며, 그로써 디바이스로 하여금 다수의 동시에 검출된 접촉들의 세기를 추정하고 이 정보를 이용해 편리하고 효율적인 사용자 인터페이스들을 제어할 수 있게 한다.
도 5a 내지 도 5l은 일부 실시예들에 따른, 집계 세기의 개별 부분들이 복수의 접촉에 할당되는 터치 감응형 표면과의 접촉들 및 예시적인 사용자 인터페이스들을 예시한다. 이들 도면에서의 서술들은 도 6a 내지 도 6c의 프로세스들을 포함하여 이하에서 기술되는 프로세스들을 예시하기 위해 사용된다. 도 5b 및 도 5h 내지 도 5k는 세기 단위에 대한 세기 센서들의 현재 세기 측정치들을 나타내는 세기 다이어그램들을 포함한다. 도 5f 및 도 5h 내지 도 5j는 세기 단위에 대한 터치 감응형 표면 상의 복수의 접촉의 현재 세기들을 나타내는 세기 다이어그램들을 포함한다.
일부 구현예들에서, 개별 접촉에 할당된 세기는 복수의 구별되는 세기 임계치 중 하나 이상, 예를 들어 접촉-검출 세기 임계치 "IT0", 가볍게 누르기 세기 임계치 "ITL", 및 깊게 누르기 세기 임계치 "ITD" 중 하나 이상과 비교되고, 이어서 하나 이상의 동작이, 본 명세서에서 기술된 다른 방법들(예컨대, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)에 대해 더욱 상세히 기술되는 바와 같이 비교의 결과에 따라 수행된다.
일부 실시예들에서, 디바이스는 별개의 디스플레이(예컨대, 디스플레이(450)) 및 별개의 터치 감응형 표면(예컨대, 터치 감응형 표면(451))을 구비한 전자 디바이스이다. 일부 실시예들에서, 디바이스는 휴대용 다기능 디바이스(100)이고, 디스플레이는 터치 감응형 디스플레이 시스템(112)이며, 터치 감응형 표면은 디스플레이 상의 촉각적 출력 생성기들(167)을 포함한다(도 1a). 설명의 편의를 위하여, 도 5a 내지 도 5l 및 도 6a 내지 도 6c를 참조하여 기술되는 실시예들이 디스플레이(450) 및 별개의 터치 감응형 표면(451)을 참조하여 논의될 것이지만; 유사한 동작들이, 선택적으로, 도 5a 내지 도 5l에 도시된 사용자 인터페이스들을 터치 감응형 디스플레이 시스템(112) 상에 디스플레이하는 동안 터치 감응형 디스플레이 시스템(112) 상에서 도 5a 내지 도 5l에 기술된 접촉들을 검출하는 것에 응답하여, 터치 감응형 디스플레이 시스템(112)을 구비한 디바이스 상에서 수행된다. 일부 구현예들에서, 포커스 셀렉터는, 선택적으로, 개별 접촉, 접촉에 대응하는 대표 지점(예컨대, 개별 접촉의 도심(centroid) 또는 개별 접촉과 연관된 지점), 또는 터치 감응형 디스플레이 시스템(112) 상에서 검출된 2개 이상의 접촉들의 힘의 중심(center) 또는 도심이다.
도 5a는 복수의 세기 센서(12902)를 구비한 터치 감응형 표면(451)을 예시한다. 일부 구현예들에서, 터치 감응형 표면(451)은 4개 이상의 세기 센서(12902)를 갖는다. 이 예에서, 복수의 세기 센서(12902)(예컨대, 4개의 세기 센서) 각각은 터치 감응형 표면(451)의 개별 코너에 배치된다.
도 5b는 터치 감응형 표면(451) 상에서 복수의 접촉(12904)을 검출하는 것을 예시한다. 이 예에서, 터치 감응형 표면(451) 상에서 검출된 접촉들의 개수(예컨대, 5개의 접촉(12904))는 세기 센서들의 개수(예컨대, 4개의 세기 센서(12902))보다 크다. 일부 실시예들에서, 검출된 접촉들의 총수(count)(예컨대, 도 5b의 5개)는 세기 센서 유닛들의 총수(예컨대, 도 5b의 4개)보다 크다. 도 5b는 복수의 접촉(12904)이 터치 감응형 표면(451) 상에서 검출되는 동안 각각의 세기 센서(12902)의 개별 세기 측정치들(예컨대, 각각의 센서에서 기록된 압력의 측정치)을 추가로 예시한다. 이 예에서, 세기 센서들(12902-1, 12902-4)의 세기 측정치들은 각각 9 세기 단위이고, 세기 센서들(12902-2, 12902-3)의 세기 측정치들은 각각 7 세기 단위이다. 게다가, 일부 구현예들에서, 집계 세기는 복수의 세기 센서(12902)의 세기 측정치들의 총합이며, 이는 이 예에서 32 세기 단위이다. 도 5b 내지 도 5i에서 접촉들(12904)의 배열은 반드시 전형적인 인간-사용자 입력들인 것은 아니다.
도 5c는 터치 감응형 표면(451)에 대한 세기 센서들(12902)의 위치(예컨대, 각각의 세기 센서(12902)는 터치 감응형 표면(451)의 개별 코너에 배치됨) 및 세기 센서들(12902)의 세기 측정치들(예컨대, 도 5b에서의 세기 센서들(12902)의 세기 측정치들)에 적어도 부분적으로 기초하여, 터치 감응형 표면(451) 상의 힘의 중심(12906)을 결정하는 것을 예시한다. 일부 구현예들에서, 힘의 중심(12906)의 x, y 성분들은 x = α(Bx - Ax)/(Bx + Ax) 이고 y = β(Dy - Cy)/(Dy + Cy)와 같은 미리 정의된 수학 함수들을 이용해 결정되며, 여기서 Ax는 센서들(12902-3, 12902-4)의 측정된 세기들의 총합이고, Bx는 센서들(12902-1, 12902-2)의 측정된 세기들의 총합이며, Cy는 센서들(12902-2, 12902-3)의 측정된 세기들의 총합이고, Dy는 센서들(12902-1, 12902-4)의 측정된 세기들의 총합이고, α, β는 스케일링 인자(scaling factor)들이다.
도 5d는 힘의 중심(12906)에서 세기 센서들(12902)까지의 거리를 예시한다. 이 예에서, 힘의 중심(12906)에서 센서들(12902-1, 12902-4)까지의 거리들(예컨대, 각각 DS1, DS4)은 힘의 중심(12906)에서 센서들(12902-2, 12902-3)까지의 거리들(예컨대, 각각 DS2, DS3)보다 더 짧다. 이 예에서, 세기 센서들(12902-2, 12902-3)의 세기 측정치들(예컨대, 도 5b에서 각각 7 세기 단위)에 반해 세기 센서들(12902-1, 12902-4)의 더 높은 세기 측정치들(예컨대, 도 5b에서 각각 9 세기 단위)로 인하여, 힘의 중심(12906)은 센서들(12902-1, 12902-4)에 더 가깝다.
도 5e는 힘의 중심(12906)에 대한 접촉들(12904)의 위치를 결정하는 것을 예시한다. 이 예에서, 힘의 중심(12906)에서 접촉들(12904-1, 12904-2, 12904-5)까지의 거리들(예컨대, 각각 DC1, DC2, DC5)은 힘의 중심(12906)에서 접촉들(12904-3, 12904-4)까지의 거리들(예컨대, 각각 DC3, DC4)보다 더 작다.
도 5f는 힘의 중심(12906)으로부터의 그들의 거리들(예컨대, 도 5e에서 개별 DC 거리들)에 기초하여 집계 세기(예컨대, 도 5b에서 세기 센서들(12902)의 세기 측정치들의 총합 - 32 세기 단위)를 접촉들(12904)에 할당하는 것을 예시한다. 이 예에서, 접촉들(12904-1, 12904-2, 12904-5) 각각에는 집계 세기 중 8 세기 단위가 할당되고, 접촉들(12904-3, 12904-4) 각각에는 집계 세기 중 4 세기 단위가 할당된다. 보다 일반적으로, 일부 실시예들에서, 각각의 접촉 j에는 미리 정의된 수학 함수, Ij = A·(Dj/∑Di)에 따라 집계 세기 A의 일부분인 개별 세기 Ij가 할당되며, 여기서 Dj는 개별 접촉 j에서 힘의 중심까지의 거리이고, ∑Di는 개별 접촉들(예컨대, i=1 내지 마지막) 모두에서 힘의 중심까지의 거리들의 총합이다.
도 5g는 제1 접촉 및 제2 접촉에 할당된 집계 세기의 부분들에 적어도 부분적으로 기초하여 동작을 수행하는 것을 예시한다. 이 예에서, 접촉들(12904)의 각각은 터치 감응형 표면(451) 상의 개별 위치(a)에서 개별 위치(b)로 이동한다(예컨대, 접촉(12904-1)은 위치(12904-1-a)에서 위치(12904-1-b)로 이동했다). 도 5g는, 도 5f를 참조하여 전술된 바와 같이, 개별 접촉(12904)의 위치의 변화에 따라 디스플레이(450) 상에 선들(12908)을 디스플레이하고, 대응하는 개별 접촉들(12904)에 할당된 세기에 따라 선들(12908)의 선 두께들을 디스플레이(450) 상에 디스플레이하는 것을 추가로 예시한다. 이 예에서, 선들(12908)의 개별 길이는 도 5g에서의 접촉들(12904)의 위치의 대응하는 개별 변화에 매핑된다(예컨대, 선(12908-1)의 길이는 위치(12904-1-a)에서 위치(12904-1-b)로의 접촉(12904-1)의 위치의 변화에 매핑되고, 선(12908-3)의 길이는 위치(12904-3-a)에서 위치(12904-3-b)로의 접촉(12904-3)의 위치의 변화에 매핑된다). 또한, 이 예에서, 선들(12908)의 두께들은, 도 5f를 참조하여 전술된 바와 같이, 접촉들(12904)에 할당된 대응하는 개별 세기에 매핑된다(예컨대, 선(12908-1)의 두께는 도 5f에서의 접촉(12904-1)에 할당된 세기인 8 세기 단위에 매핑되고, 선(12908-3)의 두께는 도 5f에서의 접촉(12904-3)에 할당된 세기인 4 세기 단위에 매핑된다).
도 5h는 도 5c에서의 힘의 중심(12906)과 비교해 (예컨대, 도 5h에서의 세기 센서들(12902)의 세기 측정치들로 인해) 접촉(12904-1)에 더 가까운 위치에 있는 힘의 중심(12910)을 예시한다. 이 예에서, 세기 센서들(12902-1, 12902-4)의 세기 측정치들은 각각 10 세기 단위이고, 세기 센서들(12902-2, 12902-3)의 세기 측정치들은 각각 6 세기 단위이다(예컨대, 집계 세기는 세기 센서들(12902)의 세기 측정치들의 총합임 - 32 세기 단위).
도 5i는 도 5c에서의 힘의 중심(12906)과 비교해 (예컨대, 도 5i에서의 세기 센서들(12902)의 세기 측정치들로 인해) 접촉들(12904-3, 12904-4)에 더 가까운 위치에 있는 힘의 중심(12912)을 예시한다. 이 예에서, 세기 센서들(12902-2, 12902-3)의 세기 측정치들은 각각 9 세기 단위이고, 세기 센서들(12902-1, 12902-4)의 세기 측정치들은 각각 7 세기 단위이다(예컨대, 집계 세기는 세기 센서들(12902)의 세기 측정치들의 총합임 - 32 세기 단위).
도 5j는 터치 감응형 표면(451) 상에서 검출된 접촉들(12914)을 예시한다(예컨대, 접촉(12914)은 도 5c에서의 접촉들(12904)보다 터치 감응형 표면(451)의 하부 에지에 더 가깝게 배치되어 있음). 도 5j는 도 5j에서의 접촉들(12914)에 할당된 세기들이 도 5f에서의 접촉들(12904)에 할당된 세기들과 동일하도록, 접촉들(12914)에 대해 소정의 위치에 있는 힘의 중심(12916)을 추가로 예시한다.
도 5k는 터치 감응형 표면(451) 상에서 검출된 복수의 접촉(12918)을 예시한다. 이 예에서, 6개의 접촉이 터치 감응형 표면(451) 상에서 검출된다(예컨대, 접촉들(12918)은 사람-사용자의 손바닥의 일부분을 포함하는 사람-사용자의 오른손을 나타냄). 도 5k는 터치 감응형 표면(451) 상의 우발적(incidental) 접촉(예컨대, 접촉(12918-6) - 사람-사용자의 손바닥의 상기 일부분)을 식별하는 것을 추가로 예시한다. 이 예에서, 세기 센서들(12902-1, 12902-4)의 세기 측정치들은 각각 10 세기 단위이고, 세기 센서들(12902-2, 12902-3)의 세기 측정치들은 각각 5 세기 단위이다(예컨대, 집계 세기는 세기 센서들(12902)의 세기 측정치들의 총합임 - 30 세기 단위).
도 5l은 터치 감응형 표면(451) 상의 개별 우발적 접촉(예컨대, 우발적 손바닥 접촉(12918-6))의 존재를 보상하는 것을 예시한다. 이 예에서, 우발적 접촉(12918-6)은 무시되고, 손바닥 입력으로 인한 세기 기여도들은, 선택적으로, (예컨대, 총 검출된 세기의 어떠한 것도 우발적 접촉(12918-6)에 할당하지 않으면서 총 검출된 세기를 이용해 접촉들의 세기들을 계산함으로써) 다른 접촉들에 속하게 된다. 대안적으로, 접촉 기여도 기준들(예컨대, 접촉(12918-6)의 형상, 표면적 및/또는 세기)에 기초하여 힘의 중심(12920)을 결정할 때, 세기 센서들(12902)의 세기 측정치들에 대한 우발적 접촉(12918-6)의 추정된 기여도는 소거된다. 예를 들어, 일부 구현예들에서, 접촉이 미리 정의된 접촉 기여도 기준들을 충족시키지 못하는 경우, 접촉은 적어도 힘의 중심을 결정하기 위한 목적으로 무시되거나, 또는 (예컨대, 우발적 접촉(12918-6)의 접촉 크기 또는 미리 결정된 값에 기초한) 우발적 접촉(12918-6)의 추정된 세기 기여도는 가중 평균으로부터 감산된다. 도 5l은 (예컨대, 접촉(12918-6)을 무시하면서) 집계 세기(예컨대, 총 30 세기 단위)의 부분들을 접촉들(12918)에 할당하는 것을 추가로 예시한다. 도 5l은 접촉(12918-6)이 무시되는 것으로 인해, 또는 도 5k에서의 세기 센서들(12902)의 세기 측정치들에 대한 그것의 추정된 기여도의 소거로 인해, 줄이 그어져 지워진 접촉(12918-6)을 추가로 예시한다.
도 6a 내지 도 6c는 일부 실시예들에 따른, 집계 세기의 개별 부분들을 복수의 접촉에 할당하는 방법(13000)을 예시하는 흐름도들이다. 방법(13000)은 디스플레이 및 터치 감응형 표면을 구비한 전자 디바이스(예컨대, 도 3의 디바이스(300) 또는 도 1a의 휴대용 다기능 디바이스(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감응형 표면이 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치 감응형 표면과 별개이다. 방법(13000)에서의 일부 동작들이, 선택적으로, 조합되고/되거나 일부 동작들의 순서가, 선택적으로, 변경된다.
아래에 기술되는 바와 같이, 방법(13000)은 집계 세기의 개별 부분들을 복수의 접촉에 할당하는 직관적인 방법을 제공한다. 방법은 집계 세기의 개별 부분들을 복수의 접촉에 할당할 때 사용자에 대한 인지적 부담을 감소시키며, 그로써 보다 효율적인 인간-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들에 대해, 사용자가 집계 세기의 개별 부분들을 복수의 접촉에 더 빠르고 더 효율적으로 할당할 수 있게 하는 것은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
디바이스는, 터치 감응형 표면 상에서, 복수의 접촉을 검출하며, 복수의 세기 센서는 터치 감응형 표면과의 접촉들의 세기를 검출한다(13002). 도 5b는, 예를 들어, 복수의 세기 센서(12902)(예컨대, 4개의 세기 센서)를 통해 터치 감응형 표면(451) 상에서 복수의 접촉(12904)(예컨대, 5개의 접촉)을 검출하는 디바이스를 도시한다.
일부 실시예들에서, 복수의 세기 센서는 적어도 4개의 세기 센서를 포함한다(13004). 도 5b는, 예를 들어, 4개의 세기 센서(12902)를 도시한다. 일부 실시예들에서, 검출된 접촉들의 개수는 세기 센서들의 개수보다 크다(13006)(예컨대, 디바이스는 터치 감응형 표면 상에서 5개의 접촉을 검출하고, 4개의 세기 센서가 있으며, 터치 감응형 표면의 각각의 코너에 하나의 세기 센서가 있다). 도 5b는, 예를 들어, 5개의 검출된 접촉(예컨대, 접촉들(12904)) 및 4개의 세기 센서(12902)를 도시한다(예컨대, 검출된 접촉들(12904)의 총수는 세기 센서 유닛들(12902)의 총수보다 더 크다).
일부 실시예들에서, 터치 감응형 표면은 복수의 개별 코너를 갖고, 복수의 세기 센서의 각각의 개별 세기 센서는 대응하는 개별 코너에 근접하여 배치된다(13008). 도 5b는, 예를 들어, 터치 감응형 표면(451)의 대응하는 코너에 근접하여 배치된 복수의 세기 센서(12902)의 각각의 세기 센서를 도시한다.
일부 실시예들에서, 복수의 세기 센서는 디바이스의 둘레(perimeter)(예컨대, 터치 감응형 표면의 둘레)를 정의하고, 복수의 접촉은 복수의 세기 센서에 의해 정의된 둘레 내에서 검출된다(13010). 도 5b는, 예를 들어, 터치 감응형 표면(451)의 둘레를 정의하는 세기 센서들(12902) 및 세기 센서들(12902)에 의해 정의된 둘레 내에서 검출되는 복수의 접촉(12902)을 도시한다.
복수의 접촉을 검출하는 동안(13012), 디바이스는 복수의 세기 센서 중 제1 세기 센서로부터 제1 세기 측정치를 수신하고(13014), 디바이스는 또한 복수의 세기 센서 중 제2 세기 센서로부터 제2 세기 측정치를 수신하며, 여기서 제1 세기 센서는 제2 세기 센서와 상이하다(13016). 도 5b는, 예를 들어, 터치 감응형 표면(451) 상에서 복수의 접촉(12904)을 검출하는 동안, 제1 세기 센서(예컨대, 세기 센서(12902-1))로부터 제1 세기 측정치(예컨대, 세기 센서(12902-1)의 세기 측정치)를 수신하고, 또한, 제2 세기 센서(예컨대, 세기 센서(12902-2))로부터 제2 세기 측정치(예컨대, 세기 센서(12902-2)의 세기 측정치)를 수신하는 디바이스를 도시한다.
복수의 접촉을 검출하는 동안(13012), 디바이스는 접촉들의 집계 세기의 제1 부분을 제1 접촉에 할당하고 접촉들의 집계 세기의 제2 부분을 제2 접촉에 할당한다(13018). 도 5b는, 예를 들어, 접촉들의 집계 세기를 도시한다(예컨대, 세기 센서들(12902)의 세기 측정치들의 총합 - 32 세기 단위). 도 5f는, 예를 들어, 디바이스가 터치 감응형 표면(451) 상에서 복수의 접촉(12904)을 검출하는 동안, 접촉들의 집계 세기의 제1 부분을 제1 접촉(12904-1)에 할당하는(예컨대, 접촉(12904-1)의 세기는 8 세기 단위임) 디바이스를 도시한다. 도 5f는, 예를 들어, 디바이스가 터치 감응형 표면(451) 상에서 복수의 접촉(12904)을 검출하는 동안, 집계 세기의 제2 부분을 제2 접촉(12904-2)에 할당하는(예컨대, 접촉(12904-2)의 세기는 8 단위의 세기임) 디바이스를 또한 도시한다.
디바이스는, 제1 세기 측정치; 제2 세기 측정치; 터치 감응형 표면에 대한 제1 세기 센서의 위치; 및 터치 감응형 표면에 대한 제2 세기 센서의 위치에 적어도 부분적으로 기초하여(13020), 집계 세기의 부분들을 복수의 접촉에 할당한다(13018). 도 5f는, 예를 들어, 도 5b의 세기 센서(12902-1)의 제1 세기 측정치; 도 5b의 세기 센서(12902-2)의 제2 세기 측정치; 도 5b의 터치 감응형 표면(451)에 대한 제1 세기 센서(12902-1)의 위치; 및 도 5b의 터치 감응형 표면(451)에 대한 제2 세기 센서(12902-2)의 위치에 적어도 부분적으로 기초하여, 집계 세기(예컨대, 32 세기 단위)를 복수의 접촉(12904)에 할당하는 디바이스를 도시한다.
디바이스는 또한, 제1 접촉의 하나 이상의 속성의 세트(예컨대, 위치, 힘의 중심으로부터의 거리, 접촉 크기)의 값들과 제2 접촉의 하나 이상의 속성의 세트의 대응하는 값들 사이의 비교(13022)에 적어도 부분적으로 기초하여, 집계 세기의 부분들을 복수의 접촉에 할당한다(13018). 도 5f는, 예를 들어, 제1 접촉(12904-1)의 하나 이상의 속성의 세트의 값들(예컨대, 도 5e에서의 힘의 중심(12906)에서 접촉(12904-1)까지의 거리 - DC1)과 제2 접촉(12904-2)의 하나 이상의 속성의 세트의 대응하는 값들(예컨대, 도 5e에서의 힘의 중심(12906)에서 접촉(12904-2)까지의 거리 - DC2) 사이의 비교에 또한 적어도 부분적으로 기초하여, 집계 세기(예컨대, 32 세기 단위)를 복수의 접촉에 할당하는 디바이스를 도시한다.
일부 실시예들에서, 개별 접촉에 대한 하나 이상의 속성의 세트는 터치 감응형 표면 상의 개별 접촉의 위치를 포함한다(13024). 터치 감응형 표면 상의 접촉의 위치는, 선택적으로, 하나 이상의 다른 검출된 접촉에 대한 것이거나, 힘의 중심에 대한 것이거나(예컨대, 도 5e에서의 개별 접촉들(12904)의 대응하는 DC 거리들), 또는 하나 이상의 세기 센서에 대한 것이다. 일부 실시예들에서, 개별 접촉의 하나 이상의 속성의 세트는 터치 감응형 표면 상의 개별 접촉의 접촉 크기를 포함한다(13026). 일부 실시예들에서, 하나의 손가락이 터치 감응형 표면 상에 눌러지는 동안 더 많은 손가락이 터치 감응형 표면과 접촉 상태가 되기 때문에, 접촉들의 상대적인 세기는 절대적인 접촉 크기 또는 접촉 크기의 변화에 부분적으로 기초하여 결정될 수 있다. 따라서, 사용자가 터치 감응형 표면 상으로 손가락을 더 세게 누름에 따라, 손가락에 대응하는 접촉의 크기는 증가한다.
일부 실시예들에서, 디바이스는 다수의 세기 센서를 포함하고, 집계 세기는 다수의 검출된 접촉들 사이에서 분할되고, 검출된 접촉들의 개수는 세기 센서들의 개수보다 크다(13028). 일부 구현예들에서, 세기 센서들의 개수는 4 이상이다. 도 5f는, 예를 들어, 터치 감응형 표면(451) 상의 다수의 검출된 접촉들(12904) 사이에서 분할되는 집계 세기(예컨대, 도 5b의 세기 센서들(12902)의 세기 측정치들의 총합 - 32 세기 단위)를 도시한다(예컨대, 도 5f의 접촉들(12904)의 세기들의 총합은 집계 세기 - 32 세기 단위 - 와 동일함). 또한, 도 5f에서, 예를 들어, 검출된 접촉들(12904)의 개수(예컨대, 5)는 세기 센서들(12902)의 개수(예컨대, 4)보다 크다.
복수의 접촉을 검출하는 것에 응답하여, 디바이스는 제1 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초하여 동작을 수행한다(13030). 일부 실시예들에서, 동작을 수행하기 위한 수단은, 복수의 접촉을 검출하기 위한 수단이 복수의 접촉을 검출하고 있는 동안 인에이블된다. 일부 실시예들에서, 동작은 제2 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초한다(13032). 도 5g는, 예를 들어, 제1 접촉 및 제2 접촉에 할당된 집계 세기의 부분들에 적어도 부분적으로 기초하여 동작을 수행하는(예컨대, 디스플레이(450) 상에 선들(12908)을 디스플레이하는) 디바이스를 도시한다(예컨대, 도 5f에서, 선들(12908-1, 12908-2)의 두께는 대응하는 접촉들(12904-1, 12904-2)에 할당된 세기에 각각 대응한다).
일부 실시예들에서, 디바이스는, 터치 감응형 표면에 대한 제1 세기 센서의 위치; 터치 감응형 표면에 대한 제2 세기 센서의 위치; 제1 세기 센서의 제1 세기 측정치; 및 제2 세기 센서의 제2 세기 측정치에 적어도 부분적으로 기초하여 터치 감응형 표면 상의 힘의 중심을 결정한다(13034). 일부 실시예들에서, 힘의 중심은 세기 센서들(12902)의 위치들의 가중 평균이며(예컨대, 개별 세기 센서들(12902)에서 힘의 중심(12906)까지의 대응하는 DS 거리들), 세기 센서들(12902) 각각의 세기 기여도들은 개별 세기 센서에 대응하는 개별 세기 측정치에 따라 가중된다. 도 5c는, 예를 들어, 터치 감응형 표면(451)에 대한 제1 세기 센서(12902-1)의 위치; 터치 감응형 표면(451)에 대한 제2 세기 센서(12902-2)의 위치; 도 5b의 제1 세기 센서(12902-1)의 제1 세기 측정치; 및 도 5b의 제2 세기 센서(12902-2)의 제2 세기 측정치에 적어도 부분적으로 기초하여 결정되는 힘의 중심(12906)을 도시한다. 일부 실시예들에서, 터치 감응형 표면 상의 힘의 중심은 (동작(13018)을 참조하여 앞에서 더욱 상세히 기술된 바와 같이) 터치 감응형 표면 상의 접촉들의 세기의 부분들을 할당하기 전에, 또는 그 일부로서, 결정된다.
일부 실시예들에서, 힘의 중심을 결정하는 것은, 터치 감응형 표면 상의 하나 이상의 우발적 접촉(예컨대, 손바닥 접촉 또는 돌발적인 손가락 접촉)을 식별하는 것; 및 터치 감응형 표면 상의 개별 우발적 접촉의 존재를 보상하는 것(예컨대, 우발적 접촉을 무시하는 것, 또는 집계 세기에 대한 우발적 접촉의 추정된 기여도를 소거하는 것)을 포함한다(13036). 도 5l은, 예를 들어, 힘의 중심(13020)을 결정할 때 터치 감응형 표면(451) 상의 우발적 접촉(예컨대, 접촉들(12918-6))을 식별하고, (예컨대, 도 5k의 세기 센서들(12902)의 세기 측정치들에 대한 우발적 접촉(12918-6)의 추정된 기여도를 소거함으로써) 터치 감응형 표면(451) 상의 접촉(12918-6)의 존재를 보상하는 것을 도시한다.
일부 실시예들에서, 디바이스는 힘의 중심에 대한 제1 접촉의 위치를 결정하고, 힘의 중심에 대한 제2 접촉의 위치를 결정하고, 힘의 중심에 대한 제1 접촉의 위치에 기초하여 집계 세기의 제1 부분을 제1 접촉에 할당하고, 힘의 중심에 대한 제2 접촉의 위치에 기초하여 집계 세기의 제2 부분을 제2 접촉에 할당한다(13038). 일부 실시예들에서, 집계 세기는, 힘의 중심에 대한 제1 접촉의 위치와 힘의 중심에 대한 제2 접촉의 위치 사이의 비교에 기초하여, 제1 접촉 및 제2 접촉을 포함하는 검출된 접촉들 사이에서 분할되어, 힘의 중심에 더 가까운 접촉에 더 큰 세기가 할당되게 된다(예컨대, 집계 세기는, 개별 접촉의 세기 기여도가 접촉에서 힘의 중심까지의 거리에 비례한다는 가정에 기초하여, 접촉들에 할당된다). 일부 구현예들에서, 힘의 중심은 도 5c를 참조하여 전술된 미리 정의된 수학 함수를 이용해 결정된다. 또한, 일부 구현예들에서, 개별의 검출된 접촉들에 할당된 집계 세기의 부분은 도 5f를 참조하여 전술된 미리 정의된 수학 함수를 이용해 결정된다. 일부 실시예들에서, 접촉들의 위치들은, (동작(13018)을 참조하여 위에서 더욱 상세히 기술된 바와 같이) 터치 감응형 표면 상의 접촉들의 세기의 부분들을 할당하기 전에, 또는 그 일부로서, 결정된다.
예를 들어, 복수의 접촉의 세기 기여도들은, 복수의 접촉의 위치들의 가중 평균에 따라 힘의 중심이 터치 감응형 표면 상에 위치되도록 결정되며, 여기서 개별 접촉들의 각각의 위치들은 개별 접촉에 할당되는 집계 세기의 개별 부분에 따라 가중된다(예컨대, 특정 접촉들에 할당되는 집계 세기의 부분들은, 가중 평균의 계산을 역으로 하고(reversing), 총 세기, 가중 평균의 위치 및 접촉들의 위치들로 시작하여, 상이한 접촉들에 대한 가중치들을 결정하기 위해 반대 방향으로 작용함으로써(working backwards), 결정된다). 예를 들어, 4개의 세기 센서가 터치 감응형 표면 상의 개별 지점(예컨대, 힘의 중심)에서 4 세기 단위의 집계 세기를 식별하고, 디바이스가 터치 감응형 표면 상에서 2개의 접촉 - 제1 접촉은 개별 지점에서 1 센티미터, 제2 접촉은 개별 지점에서 3 센티미터이고 제1 접촉 바로 건너에 있음 - 을 검출하는 경우, 디바이스는 그 세기의 75%(예컨대, 3 세기 단위)를 제1 접촉에 할당하고 그 세기의 25%(예컨대, 1 세기 단위)를 제2 접촉에 할당할 것이다.
도 5e는, 예를 들어, 힘의 중심(12906)에 대한 제1 접촉(12904-1)의 위치(예컨대, 거리 DC1) 및 힘의 중심(12906)에 대한 제2 접촉(12904-2)의 위치(예컨대, 거리 DC2)를 결정하는 디바이스를 도시한다. 도 5f는, 예를 들어, 힘의 중심(12906)에 대한 제1 접촉(12904-1)의 위치(예컨대, 거리 DC1)에 기초하여 집계 세기(예컨대, 도 5b의 세기 센서들(12902)의 세기 측정치들의 총합)의 제1 부분을 제1 접촉(12904-1)에 할당하고(예컨대, 접촉(12904-1)의 세기 - 8 세기 단위), 힘의 중심(12906)에 대한 제2 접촉(12904-2)의 위치(예컨대, 거리 DC2)에 기초하여 집계 세기(예컨대, 도 5b의 세기 센서들(12902)의 세기 측정치들의 총합)의 제2 부분을 제2 접촉(12904-2)에 할당하는(예컨대, 접촉(12904-2)의 세기 - 8 세기 단위) 디바이스를 추가로 도시한다. 도 6a 내지 도 6c에서의 동작들이 기술되는 특정한 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지 않는다는 것이 이해되어야 한다. 본 발명이 속한 기술분야에서 통상의 지식을 가진 자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방법들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예를 들어, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 6a 내지 도 6c와 관련하여 전술된 방법(13000)에도 유사한 방식으로 또한 적용가능하다는 것에 주목해야 한다. 예를 들어, 방법(13000)을 참조하여 전술된 접촉들은 선택적으로 본 명세서에 기술된 다른 방법들(예를 들어, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)을 참조하여 본 명세서에 기술된 접촉들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
일부 실시예들에 따르면, 도 7는 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(13100)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 수행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합으로 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 7에서 기술된 기능 블록들이 선택적으로 조합되거나 하위 블록들로 분리될 수 있음이 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의해 이해된다. 따라서, 본 명세서의 설명은 선택적으로 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가적 한정을 지원한다.
도 7에 도시된 바와 같이, 전자 디바이스(13100)는, 정보를 디스플레이하도록 구성된 디스플레이 유닛(13102); 접촉들을 수용하도록 구성된 터치 감응형 표면 유닛(13104); 터치 감응형 표면(13104)과의 접촉들의 세기를 검출하는 복수의 세기 센서 유닛(13106); 및 디스플레이 유닛(13102), 터치 감응형 표면 유닛(13104) 및 복수의 세기 센서 유닛(13106)에 연결된 처리 유닛(13108)을 포함한다. 일부 실시예들에서, 처리 유닛(13108)은 검출 유닛(13110), 수신 유닛(13112), 할당 유닛(13114), 수행 유닛(13116), 결정 유닛(13118), 식별 유닛(13120), 및 보상 유닛(13122)을 포함한다.
처리 유닛(13108)은, (예컨대, 검출 유닛(13110)을 이용해) 터치 감응형 표면 유닛(13104) 상에서 복수의 접촉을 검출하도록 구성된다. 복수의 접촉을 검출하는 동안, 처리 유닛(13108)은, (예컨대, 수신 유닛(13112)을 이용해) 복수의 세기 센서 유닛(13106) 중 제1 세기 센서 유닛(13106-1)으로부터 제1 세기 측정치를 수신하고; (예컨대, 수신 유닛(13112)을 이용해) 복수의 세기 센서 유닛(13106) 중 제2 세기 센서 유닛(13106-2)으로부터 제2 세기 측정치를 수신하고 - 제1 세기 센서 유닛(13106-1)은 제2 세기 센서 유닛(13106-2)과 상이함 -; (예컨대, 할당 유닛(13114)을 이용해) 접촉들의 집계 세기의 제1 부분을 제1 접촉에 할당하고 (예컨대, 할당 유닛(13114)를 이용해) 집계 세기의 제2 부분을 제2 접촉에 할당하도록 추가로 구성된다. 처리 유닛(13108)은, 제1 세기 측정치; 제2 세기 측정치; 터치 감응형 표면 유닛(13104)에 대한 제1 세기 센서 유닛(13106-1)의 위치; 터치 감응형 표면 유닛(13104)에 대한 제2 세기 센서 유닛(13106-2)의 위치; 및 제1 접촉의 하나 이상의 속성의 세트의 값들과 제2 접촉의 하나 이상의 속성의 세트의 대응하는 값들 사이의 비교에 적어도 부분적으로 기초하여, (예컨대, 할당 유닛(13114)를 이용해) 집계 세기를 할당하도록 구성된다. 복수의 접촉을 검출하는 것에 응답하여, 처리 유닛(13108)은 제1 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초하여 (예컨대, 수행 유닛(13116)을 이용해) 동작을 수행하도록 추가로 구성된다.
일부 실시예들에서, 동작은 제2 접촉에 할당된 집계 세기의 부분에 적어도 부분적으로 기초한다.
일부 실시예들에서, 검출된 접촉들의 개수는 세기 센서 유닛들(13106)의 개수보다 크다.
일부 실시예들에서, 디바이스는 다수의 세기 센서 유닛(13106)을 포함하고, 집계 세기는 다수의 검출된 접촉들 사이에서 분할되며, 검출된 접촉들의 개수는 세기 센서 유닛들(13106)의 개수보다 크다.
일부 실시예들에서, 복수의 세기 센서 유닛(13106)은 디바이스 상의 둘레를 정의하고, 복수의 접촉은 복수의 세기 센서 유닛(13106)에 의해 정의된 둘레 내에서 검출된다.
일부 실시예들에서, 복수의 세기 센서 유닛(13106)은 적어도 4개의 세기 센서 유닛을 포함한다.
일부 실시예들에서, 터치 감응형 표면 유닛(13104)은 복수의 개별 코너를 갖고, 복수의 세기 센서 유닛(13106)의 각각의 개별 세기 센서 유닛은 대응하는 개별 코너에 근접하여 배치된다.
일부 실시예들에서, 개별 접촉에 대한 하나 이상의 속성의 세트는 터치 감응형 표면 유닛(13104)의 개별 접촉의 위치를 포함한다.
일부 실시예들에서, 개별 접촉의 하나 이상의 속성의 세트는 터치 감응형 표면 유닛(13104) 상의 개별 접촉의 접촉 크기를 포함한다.
일부 실시예들에서, 처리 유닛(13108)은, 터치 감응형 표면 유닛(13104)에 대한 제2 세기 센서 유닛(13106-2)의 위치; 제1 세기 센서 유닛(13106-1)의 제1 세기 측정치; 및 제2 세기 센서 유닛(13106-2)의 제2 세기 측정치에 적어도 부분적으로 기초하여, (예컨대, 결정 유닛(13118)을 이용해) 터치 감응형 표면 유닛(13104) 상의 힘의 중심을 결정하도록 추가로 구성된다.
일부 실시예들에서, (예컨대, 결정 유닛(13118)을 이용해) 힘의 중심을 결정하는 것은, (예컨대, 식별 유닛(13120)을 이용해) 터치 감응형 표면 유닛(13104) 상의 하나 이상의 우발적 접촉을 식별하는 것; 및 (예컨대, 보상 유닛(13122)를 이용해) 터치 감응형 표면 유닛(13104) 상의 개별 우발적 접촉의 존재를 보상하는 것을 포함한다.
일부 실시예들에서, 처리 유닛(13108)은, (예컨대, 결정 유닛(13118)을 이용해) 힘의 중심에 대한 제1 접촉의 위치를 결정하고; (예컨대, 결정 유닛(13118)을 이용해) 힘의 중심에 대한 제2 접촉의 위치를 결정하고; (예컨대, 할당 유닛(13114)를 이용해) 힘의 중심에 대한 제1 접촉의 위치에 기초하여 집계 세기의 제1 부분을 제1 접촉에 할당하고; 힘의 중심에 대한 제2 접촉의 위치에 기초하여 (예컨대, 할당 유닛(13114)를 이용해) 집계 세기의 제2 부분을 제2 접촉에 할당하도록 구성된다.
전술된 정보 처리 방법들에서의 동작들은, 선택적으로, (예컨대, 도 1a 및 도 3과 관련하여 전술된 바와 같이) 범용 프로세서 또는 ASIC(application specific chip)과 같은 정보 처리 장치에서 하나 이상의 기능 모듈을 실행함으로써 구현된다.
도 6a 내지 도 6c를 참조하여 전술된 동작들은, 선택적으로, 도 1a와 도 1b 또는 도 7에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작(13002), 수신 동작들(13014 내지 13016), 할당 동작(13018), 및 결정 동작(13034)은, 선택적으로, 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상의 접촉을 검출하고 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 개별 이벤트 인식기(180)는 이벤트 정보를 개별 이벤트 정의들(186)과 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상의 객체의 선택과 같은 미리 정의된 이벤트 또는 서브-이벤트에 대응하는지 여부를 결정한다. 개별의 미리 정의된 이벤트 또는 서브-이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브-이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는 선택적으로 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 애플리케이션에 의해 디스플레이되는 것을 업데이트하기 위해 개별 GUI 업데이터(178)에 액세스한다. 유사하게, 다른 프로세스들이 어떻게 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 구현될 수 있는지는 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.
터치 입력에서 디스플레이 출력으로의 관계들 사이의 전환
많은 전자 디바이스는 입력들과 대응 출력들 사이의 입력-출력 관계들에 따라 제어되는 다양한 사용자 인터페이스 객체들을 포함하는 그래픽 사용자 인터페이스들을 갖는다. 일부 상황들에서, 입력들과 대응 출력들 사이에 일정한 입력-출력 관계가 있다. 그러나, 일정한 입력-출력 관계는, 사용자가 달성하고 싶어할 가능성이 있는 출력들의 특정 범위가 있는 경우, 사용자에게 불편하고 비효율적일 수 있다. 그러나, 가변적 입력-출력 관계는 또한, 사용자가 입력-출력 관계 내에서 불연속들을 인지할 경우, 사용자에게 혼란스럽거나 당황스러울 수 있다. 아래에 기술되는 실시예들은 사용자 인터페이스 객체들과 상호작용할 때 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하는 효율적이고 직관적인 방법을 제공함으로써 이 방법들을 개선한다. 특히, 아래에 기술되는 일부 실시예들에 따르면, 일부 사용자 인터페이스 객체들은 사용자 입력들, 특히 터치 입력들에 응답하여 그러한 객체들이 어떻게 디스플레이되는지를 결정하는, 2개 이상의 터치 입력에서 디스플레이 출력으로의 관계들을 갖는다. 예를 들어, 일부 상황들에서, 파일 폴더를 여는 것은 사용자 입력의 속성들에 따라 다수의 단계 또는 옵션을 갖는 애니메이션 진행을 수반한다.
도 8a 내지 도 8v는 일부 실시예들에 따른, 터치 감응형 표면 상의 입력들을 이용해 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이들 도면에서의 사용자 인터페이스들은, 도 9a 내지 도 9c를 참조하여 아래에 기술된 프로세스들을 포함하는 아래에 기술된 프로세스들을 예시하는 데 사용된다. 도 8b 내지 도 8i 및 도 8n 내지 도 8t는 개별 임계치(예컨대, "ITD")를 포함하는 복수의 세기 임계치에 대한 터치 감응형 표면 상의 접촉의 현재 세기를 도시하는 세기 다이어그램들을 포함한다. 일부 실시예들에서, ITD를 참조하여 아래에 기술되는 것들과 유사한 동작들이 상이한 세기 임계치(예컨대, "ITL")를 참조하여 수행된다.
도 8a는, 디바이스(예컨대, 디바이스(300))의 디스플레이(450) 상에 디스플레이되고 터치 감응형 표면(451) 상의 입력들(예컨대, 손가락 접촉)에 응답하는 파일 아이콘(13205)을 포함하는, 예시적인 사용자 인터페이스(13204)를 예시한다. 도 8a는 터치 감응형 표면(451) 상의 접촉들의 세기를 검출하는 세기 센서들(13208)을 추가로 예시한다. 도 8a는 접촉(13202) 및 접촉(13202)의 세기 뿐만 아니라, 터치 감응형 표면(451) 상의 접촉(13202)과 세기 센서들(13208)의 상대적인 위치에 대응하는 추가의 세기 범위(13210)를 도시한다. 일부 실시예들에 따르면, 도 8a는 또한, 터치 감응형 표면(451) 상에서 검출된 입력(13202)에 대응하는 포커스 셀렉터(예컨대, 커서(13206))의 디스플레이된 표현을 예시한다.
일부 실시예들에서, 디바이스는 별개의 디스플레이(예컨대, 디스플레이(450)) 및 별개의 터치 감응형 표면(예컨대, 터치 감응형 표면(451))을 구비한 전자 디바이스이다. 일부 실시예들에서, 디바이스는 휴대용 다기능 디바이스(100)이고, 디스플레이는 터치 감응형 디스플레이 시스템(112)이며, 터치 감응형 표면은 디스플레이 상의 접촉 세기 센서(들)(165)를 포함한다(도 1a). 설명의 편의를 위하여, 도 8a 내지 도 8k 및 도 9a 및 도 9c를 참조하여 기술되는 실시예들은 디스플레이(450) 및 별개의 터치 감응형 표면(451)을 참조하여 논의될 것이지만, 유사한 동작들이, 선택적으로, 도 8a 내지 도 8k에 도시된 사용자 인터페이스들을 터치 감응형 디스플레이 시스템(112) 상에 디스플레이하는 동안 터치 감응형 디스플레이 시스템(112) 상의 도 8a 내지 도 8k에 기술된 접촉들을 검출하는 것에 응답하여, 터치 감응형 디스플레이 시스템(112)을 구비한 디바이스 상에서 수행되고; 그러한 실시예들에서, 포커스 셀렉터는, 선택적으로, 커서(13206) 대신에, 개별 접촉, 접촉에 대응하는 대표 지점(예컨대, 개별 접촉의 도심 또는 개별 접촉과 연관된 지점), 또는 터치 감응형 디스플레이 시스템(112) 상에서 검출된 2개 이상의 접촉들의 도심이다. 마찬가지로, 터치 감응형 디스플레이 시스템(112)을 참조하여 논의되는 실시예들에 대해(예컨대, 도 8m 내지 도 8v에 도시된 바와 같이), 유사한 동작들이, 선택적으로, 도 8m 내지 도 8v에 도시된 사용자 인터페이스들을 디스플레이(450) 상에 디스플레이하는 동안 터치 감응형 표면(451) 상의 도 8m 내지 도 8v에 기술된 접촉들을 검출하는 것에 응답하여, 디스플레이(450) 및 별개의 터치 감응형 표면(451)을 구비한 디바이스 상에서 수행된다. 디스플레이(450) 및 터치 감응형 표면(451)이 터치 스크린(112)을 대체하는 실시예들에서, 포커스 셀렉터는, 선택적으로, 터치 감응형 디스플레이 시스템(112) 상에서 검출되는 개별 접촉(예컨대, 도 8m 내지 도 8v의 접촉(13228)), 접촉에 대응하는 대표 지점, 또는 2개 이상의 접촉들의 도심 대신에, 커서, 확대경, 또는 스포트라이트이다.
일부 실시예들에서, 커서(13206)는 터치 감응형 표면(451)에 의해 수용된 접촉들에 따라 결정되는 디스플레이(450) 상의 위치를 갖는 디스플레이된 포커스 셀렉터의 표현이다. 다른 구현예들에서, 포커스 셀렉터는 상이한 디스플레이된 표현(예컨대, 확대경)을 갖는다. 대안적으로, 일부 구현예들에서 포커스 셀렉터의 표현은 디스플레이되지 않는다. 예를 들어, 터치 감응형 디스플레이 시스템을 사용하는 구현예들에서, 포커스 셀렉터의 위치는 접촉 또는 제스처의 디스플레이 상의 위치에 대응한다. 게다가, 포커스 셀렉터는, 포커스 셀렉터의 위치가 사용자 인터페이스 객체의 디스플레이 상의 위치에 대응하는 경우, 본 명세서에서 사용자 인터페이스 객체 "위에(over)" 있는 것으로 정의된다.
도 8b 내지 도 8k는 접촉의 세기에 따라 애니메이션의 진행을 조정하는 예를 예시한다. 도 8b 내지 도 8e는 접촉(13202)의 세기가 ITL 바로 위에서 ITD 바로 아래로 증가하는 동안 제1 터치 입력에서 디스플레이 출력으로의 관계에 따라 진행하는 파일 아이콘(13205)과 연관된 파일들을 디스플레이하는 애니메이션을 예시한다. 도 8f는 접촉(13202)의 세기가 ITD에 도달하는 동안 애니메이션 진행에서의 전환 지점을 도시한다. 도 8g 내지 도 8i는 접촉(13202)의 세기가 ITD를 넘어 증가하는 동안 제2 터치 입력에서 디스플레이 출력으로의 관계에 따라 진행하는 애니메이션을 예시한다. 도 8j 및 도 8k는 접촉(13202)의 리프트 오프, 및 파일 아이콘(13205)과 연관된 파일들의 그래픽 표현을 도 8f에 도시된 상태로 되돌아가게 하는(예컨대, 회복시키는(bounce back)) 애니메이션을 예시한다.
도 8l은 입력의 변화(예컨대, 손가락 접촉의 세기의 변화)에 응답하여 출력을 조정하는 예를 예시한다. 도 8l은 ITL와 ITD 사이의 제1 범위의 세기 값들(13212)에 대응하는 제1 터치 입력 대 디스플레이 출력 응답(13216)(예컨대, 선형 응답)을 도시한다. 도 8l은 또한, 세기 ITD에 대응하는 터치 입력 대 디스플레이 출력 응답의 전환 지점(13217), 및 ITD와 ITMAX 사이의 제2 범위의 세기 값들(13214)에 대응하는 제2 터치 입력 대 디스플레이 출력 응답(13218)(예컨대, 큐빅 스플라인(cubic spline) 응답)으로의 부드러운 전환을 도시한다. 도 8l은 입력이 ITMAX에 접근하는 동안 최대 출력(13220)에 접근하는 출력을 추가로 도시한다.
도 8m은 입력들(예컨대, 손가락 접촉)에 응답하는, 터치 감응형 디스플레이(13222) 상에 디스플레이된 메뉴 바(13227)를 포함하는, 예시적인 사용자 인터페이스(13226)를 예시한다. 도 8m은 터치 감응형 디스플레이(13222) 상의 접촉들의 세기를 검출하는 세기 센서들(13232)을 추가로 예시한다.
도 8n 내지 도 8v는 접촉의 세기에 따라 애니메이션의 진행을 조정하는 다른 예를 예시한다. 도 8n 및 도 8o는 메뉴바(13227) 상의 "도구" 옵션 위에서 검출된 접촉(13228) 및 접촉(13228)의 세기뿐만 아니라, 터치 감응형 디스플레이(13222) 상의 접촉(13228)과 세기 센서들(13232)의 상대적인 위치에 대응하는 추가의 세기 범위(13230)를 도시한다. 도 8n 및 도 8o는 접촉(13228)의 세기의 변화에 따라 출력 응답(예컨대, 애니메이션 진행)을 디스플레이하는 그래프(13236)을 추가로 도시한다. 도 8n 및 도 8o에서, "도구" 서브-메뉴(13240)의 애니메이션은, 접촉(13228)의 세기가 제1 터치 입력 대 디스플레이 출력 응답에 따라 (도 8n의) IT0 바로 위에서 (도 8o의) ITL 바로 아래로 증가하는 동안, 진행한다. 도 8p는 ITL에 도달하는 접촉(13228)의 세기 및 터치 입력 대 디스플레이 출력의 전환 지점(13238)에 도달하는 애니메이션 진행을 도시한다. 도 8p는 또한 "도구" 서브-메뉴(13240)의 전체를 도시한다. 도 8q 내지 도 8t는, 접촉(13228)의 세기가 제2 터치 입력 대 디스플레이 출력 응답에 따라 ITL을 초과하여 증가하는 동안 진행하는 "도구" 서브-메뉴(13240)의 애니메이션을 예시한다. 도 8u 및 도 8v는 접촉(13228)의 리프트 오프 및, "도구" 서브-메뉴(13240)의 그래픽 표현을 도 8p에 도시된 상태로 되돌아가게 하는(예컨대, 회복시키는) 애니메이션을 예시한다.
도 9a 내지 도 9c는 일부 실시예들에 따른, 입력-출력 관계들(예컨대, 터치 입력에서 디스플레이 출력으로의 관계들) 사이에서 전환하는 방법(13300)을 예시하는 흐름도들이다. 방법(13300)은 디스플레이 및 터치 감응형 표면을 구비한 전자 디바이스(예컨대, 도 3의 디바이스(300) 또는 도 1a의 휴대용 다기능 디바이스(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감응형 표면이 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치 감응형 표면과 별개이다. 방법(13300)에서의 일부 동작들이, 선택적으로, 조합되고/되거나 일부 동작들의 순서가, 선택적으로, 변경된다.
아래에 기술되는 바와 같이, 방법(13300)은 입력-출력 관계들 사이에서 전환하는 직관적인 방법을 제공한다. 방법은 사용자 인터페이스 계층들을 내비게이션할 때 사용자에 대한 인지적 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들에 대해, 사용자가 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 더 빠르고 더 효율적으로 전환할 수 있게 하는 것은 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
일부 실시예들에서, 디바이스는 복수의 사용자 인터페이스 객체를 포함하는 사용자 인터페이스를 디스플레이하며(13301), 여기서 복수의 사용자 인터페이스 객체는 대응하는 활성화 세기 임계치들(예컨대, 사용자 인터페이스 객체들의 개별 객체들에 대응하는 활성화 세기 임계치들)을 초과하는 세기를 갖는 누르기 입력들에 응답하고, 사용자 인터페이스 객체들 중 2개 이상의 객체에 대한 개별 활성화 세기 임계치는 전환 세기 값과 동일하다. 예를 들어, 하나 이상의 버튼, 링크, 메뉴, 또는 다른 선택가능한 사용자 인터페이스 요소들은, 대응하는 포커스 셀렉터가 사용자 인터페이스 요소 위에 있는 동안 전환 세기 값 초과의 세기를 갖는 접촉을 검출하는 것에 응답하여, 디바이스에 의해 선택된다. 이들 실시예에서, 예를 들어, 도 8n에서 메뉴바(13227) 내의 메뉴 옵션들 중 하나 이상은 "도구" 옵션과 동일한 ITL 및 입력-출력 전환 지점(13238)을 갖는다.
디바이스는 터치 감응형 표면 상에서 접촉(예컨대, 손가락 접촉)을 검출한다(13302). 예를 들어, 도 8a에서 디바이스는 터치 감응형 표면(451) 상에서 접촉(13202)을 검출한다.
디바이스는 터치 감응형 표면 상의 접촉의 위치(예컨대, 접촉의 도심과 같은, 접촉 내의 대표 지점의 현재 (x,y) 위치)를 결정한다(13304). 예를 들어, 도 8a의 디바이스는 터치 감응형 표면(451) 상의 접촉(13202)의 위치를 결정한다.
디바이스는 터치 감응형 표면 상의 접촉의 세기를 결정한다(13306). 일부 실시예들에서, 터치 감응형 표면 상의 접촉의 세기를 결정하는 것은 시간에 따른 접촉의 세기의 변화들을 검출하기 위하여 시간에 따른 접촉의 세기의 복수의 측정치를 생성하는 것을 포함한다. 예를 들어, 도 8a의 디바이스는 터치 감응형 표면(451) 상의 접촉(13202)의 세기를 결정한다.
디바이스는 검출된 접촉에 따라 응답을 디스플레이하며(13308)(예를 들어, 접촉의 세기 및/또는 접촉의 세기의 변화에 따라 응답을 디스플레이함), 응답은 터치 감응형 표면 상의 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초한다. 예를 들어, 도 8b 내지 도 8k에서 디바이스는 접촉(13202)의 세기에 따라 애니메이션 진행을 디스플레이한다.
입력-출력 매핑은, 터치 감응형 표면 상의 개별 위치에 대해, 제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계, 제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 제2 범위의 세기 값들은 제1 범위의 세기 값들과 상이함 -, 및 제1 범위의 세기 값들이 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함하며(13310), 전환 세기 값에서, 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고, 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 가지며, 제1 변화율은 제2 변화율과 실질적으로 동일하다. 일부 실시예들에서, 제1 변화율은, 제1 변화율이 제2 변화율의 10% 또는 20%의 마진 내에 있을 때, 제2 변화율과 실질적으로 동일하다. 일부 실시예들에서, 제1 변화율은 제2 변화율과 동일하다. 예를 들어, 도 8n 내지 도 8t에서 디바이스는 접촉(13228)의 세기에 따라 진행하는 애니메이션을 디스플레이한다. 이 예에서, 도 8n 및 도 8o는 접촉(13228)의 세기가 IT0 약간 위에서 ITL 약간 아래로 증가하는 동안 제1 입력-출력 관계에 따라 진행하는 애니메이션을 도시하고, 도 8p는 전환 세기 값 ITL에서의 애니메이션의 부드러운 전환을 예시하며, 도 8q 내지 도 8t는 접촉(13228)의 세기가 ITL을 초과하여 증가하는 동안 제2 입력-출력 관계에 따라 진행하는 애니메이션을 예시한다.
일부 실시예들에서, 제2 입력-출력 관계 및 제1 입력-출력 관계는 전환 세기 값에서 동일한 출력을 갖는다(13312)(예컨대, 제1 입력-출력 관계와 제2 입력-출력 관계 사이에 계속적인 전환이 있다). 예를 들어, 도 8o 내지 도 8q는 전환 세기 값 ITL에 대응하는 입력-출력 전환 지점(13238)에서 애니메이션 진행에서의 계속적인 전환을 예시한다.
일부 실시예들에서, 제1 입력-출력 관계는 선형이다(13314). 예를 들어, 도 8l에서 제1 범위의 세기 값들(13212)에 대응하는 제1 입력-출력 응답(13216)은 선형이다.
일부 실시예들에서, 제2 입력-출력 관계는 비선형이다(13316)(예컨대, 제2 입력-출력 관계는 큐빅 스플라인 곡선이다). 예를 들어, 도 8l에서 제2 범위의 세기 값들(13214)에 대응하는 제2 입력-출력 응답(13218)은 비선형이다.
일부 실시예들에서, 제2 입력-출력 관계는 접촉의 세기가 전환 세기 값을 초과하여 증가함에 따라 최대 출력에 점근적으로 접근한다(13318). 예를 들어, 애니메이션은 최대 한도를 갖고, 접촉의 세기가 터치 감응형 표면 상의 접촉의 위치에서 개별 최대 세기를 향해 증가함에 따라 애니메이션의 최대 한도는 점근적으로 접근된다. 도 8q 내지 도 8t에서, 예를 들어, 접촉(13228)의 세기가 터치 감응형 디스플레이(13222) 상의 접촉(13228)의 위치에 대응하는 개별 최대 세기를 향해 증가함에 따라, 애니메이션은 최대 한도(13240)에 점근적으로 접근한다.
일부 실시예들에서, 디바이스의 제1 속성(예컨대, 터치 감응형 표면 상의 접촉의 세기를 검출하기 위한 디바이스의 동적 범위)은 터치 감응형 표면 상의 상이한 위치들에서 변화한다(13320). 일부 구현예들에서, 제1 입력-출력 관계는 터치 감응형 표면 상의 제1 위치 및 제2 위치에서 동일하고, 제2 입력-출력 관계는 터치 감응형 표면 상의 제1 위치에서 제2 위치에서와 상이하다. 예를 들어, 제2 입력-출력 관계는, 접촉의 위치에서의 세기 검출의 동적 범위와 같은 접촉의 위치에서의 세기를 검출하는 것에 대한 제한을 또한 고려하면서, 고정된 제1 입력-출력 관계에서 동적인 제2 입력-출력 관계로의 부드러운 전환을 제공하기 위하여, 디바이스의 현재 조건들에 응답하여 디바이스에 의해 선택되거나 정의된다. 이들 실시예에서, 예를 들어, 도 8n 내지 도 8p의 제1 입력-출력 관계는 터치 감응형 디스플레이(13222) 상의 접촉(13228)의 상이한 위치들에 대해 동일하고, 도 8q 내지 도 8t의 제2 입력-출력 관계는 터치 감응형 디스플레이(13222) 상의 접촉(13228)의 상이한 위치들에 대해 상이하다.
일부 실시예들에서, 응답은 미리 정의된 범위의 값들 내의 제1 값에서 제2 값으로 속성의 현재 값을 변화시키는 것을 포함한다(13322). 예를 들어, 파일 애니메이션을 변화시키는 것은 도 8b의 제1 값에서 도 8c의 제2 값으로 진행한다.
일부 실시예들에서, 응답은, 음량, 밝기, 사용자 인터페이스 객체 간격, 사용자 인터페이스 객체 크기, 사용자 인터페이스 객체 불투명도, 콘텐츠 스크러빙(content scrubbing), 및 애니메이션 진행 중 하나 이상을 조정하는 것을 포함한다(13324). 예를 들어, 파일 애니메이션 진행에 대한 연속적인 조정들이 도 8b 내지 도 8k에 예시되어 있다.
도 9a 내지 도 9c에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 본 발명이 속한 기술분야에서 통상의 지식을 가진 자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방법들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예를 들어, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 9a 내지 도 9c와 관련하여 전술된 방법(13300)에도 유사한 방식으로 또한 적용가능하다는 것에 주목해야 한다. 예를 들어, 방법(13300)을 참조하여 전술된 접촉들, 접촉 위치들, 접촉 세기들, 사용자 인터페이스들, 입력-출력 매핑들, 입력-출력 관계들, 및 응답들은, 선택적으로, 본 명세서에 기술된 다른 방법들(예를 들어, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)을 참조하여 본 명세서에 기술된 접촉들, 접촉 위치들, 접촉 세기들, 사용자 인터페이스들, 입력-출력 매핑들, 입력-출력 관계들, 및 응답들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
일부 실시예들에 따르면, 도 10은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(13400)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 10에서 기술된 기능 블록들이, 선택적으로, 조합되거나 하위 블록들로 분리될 수 있음이 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의해 이해된다. 따라서, 본 명세서의 설명은, 선택적으로, 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가적 한정을 지원한다. 도 10에 도시된 바와 같이, 전자 디바이스(13400)는 검출된 접촉에 따라 응답을 디스플레이하도록 구성된 디스플레이 유닛(13402), 사용자 접촉들을 수용하도록 구성된 터치 감응형 표면 유닛(13404), 터치 감응형 표면 유닛과의 접촉들의 세기를 검출하도록 구성된 하나 이상의 센서 유닛(13405), 및 디스플레이 유닛(13402), 터치 감응형 표면 유닛(13404) 및 센서 유닛들(13405)에 연결된 처리 유닛(13406)을 포함한다. 일부 실시예들에서, 처리 유닛(13406)은 검출 유닛(13408), 결정 유닛(13410), 및 디스플레이 가능화 유닛(13412)을 포함한다.
처리 유닛(13406)은, (예컨대, 검출 유닛(13408)을 이용해) 터치 감응형 표면 유닛 상에서 접촉을 검출하고, (예컨대, 결정 유닛(13410)을 이용해) 터치 감응형 표면 유닛 상의 접촉의 위치를 결정하고, (예컨대, 결정 유닛(13410)을 이용해) 터치 감응형 표면 유닛 상의 접촉의 세기를 결정하고, 검출된 접촉에 따라 (예컨대, 디스플레이 가능화 유닛(13412)을 이용해) 응답의 디스플레이를 가능하게 하도록 구성되며, 응답은 터치 감응형 표면 유닛 상의 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초한다. 입력-출력 매핑은, 터치 감응형 표면 유닛 상의 개별 위치에 대해, 제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계, 제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 제2 범위의 세기 값들은 제1 범위의 세기 값들과 상이함 -, 및 제1 범위의 세기 값들이 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함한다. 전환 세기 값에서, 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고, 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 가지며, 제1 변화율은 제2 변화율과 실질적으로 동일하다.
일부 실시예들에서, 제2 입력-출력 관계 및 제1 입력-출력 관계는 전환 세기 값에서 동일한 출력을 갖는다.
일부 실시예들에서, 제1 입력-출력 관계는 선형이다.
일부 실시예들에서, 제2 입력-출력 관계는 비선형이다.
일부 실시예들에서, 제2 입력-출력 관계는 접촉의 세기가 전환 세기 값을 초과하여 증가함에 따라 최대 출력에 점근적으로 접근한다.
일부 실시예들에서, 처리 유닛(13406)은, (예컨대, 디스플레이 가능화 유닛(13412)를 이용해) 복수의 사용자 인터페이스 객체를 포함하는 사용자 인터페이스의 디스플레이를 가능하게 하도록 추가로 구성되며, 복수의 사용자 인터페이스 객체는 대응하는 활성화 세기 임계치들을 초과하는 세기를 갖는 누르기 입력들에 응답하고, 사용자 인터페이스 객체들 중 2개 이상의 객체에 대한 개별 활성화 세기 임계치는 전환 세기 값과 동일하다.
일부 실시예들에서, 디바이스의 제1 속성은 터치 감응형 표면 유닛(13404) 상의 상이한 위치들에서 변화하고, 제1 입력-출력 관계는 터치 감응형 표면 유닛(13404) 상의 제1 위치 및 제2 위치에서 동일하며, 제2 입력-출력 관계는 터치 감응형 표면 유닛(13404) 상의 제1 위치에서 제2 위치에서와 상이하다.
일부 실시예들에서, 응답은 미리 정의된 범위의 값들 내의 제1 값에서 제2 값으로 속성의 현재 값을 변화시키는 것을 포함한다.
일부 실시예들에서, 응답은, 음량, 밝기, 사용자 인터페이스 객체 간격, 사용자 인터페이스 객체 크기, 사용자 인터페이스 객체 불투명도, 콘텐츠 스크러빙, 및 애니메이션 진행 중 하나 이상을 조정하는 것을 포함한다.
전술된 정보 처리 방법들에서의 동작들이, 선택적으로, (예컨대, 도 1a 및 도 3과 관련하여 전술된 바와 같이) 범용 프로세서 또는 ASIC과 같은 정보 처리 장치에서 하나 이상의 기능 모듈을 실행함으로써 구현된다. 도 9a 내지 도 9c를 참조하여 전술된 동작들은, 선택적으로, 도 1a와 도 1b 또는 도 10에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작(13302), 결정 동작들(13304, 13306) 및 디스플레이 동작(13308)은, 선택적으로, 이벤트 분류기(170), 이벤트 인식기(180) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에서 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 개별 이벤트 인식기(180)는, 이벤트 정보를 개별 이벤트 정의들(186)과 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상의 객체의 선택과 같은 미리 정의된 이벤트 또는 서브-이벤트에 대응하는지 여부를 결정한다. 개별의 미리 정의된 이벤트 또는 서브-이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브-이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는 선택적으로 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 애플리케이션에 의해 디스플레이되는 것을 업데이트하기 위해 개별 GUI 업데이터(178)에 액세스한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.
접촉 세기의 변화에 따른 출력 조정 및 세기 검출의 동적 변위 변경
많은 전자 디바이스가 터치 감응형 표면들을 갖는다. 터치 감응형 표면들은 선택적으로 다수의 세기 센서를 활용하고, 터치 감응형 표면 상의 위치에 따라 변화하는 최대 세기 검출 임계치를 갖는다. 최대 세기 검출 임계치에서의 이 변화는, 최소 공통 분모 최대 세기 검출 임계치인 전체 터치 감응형 표면에 대한 균일한 최대 세기 검출 임계치를 이용함으로써 해결될 수 있다. 그러나, 이러한 접근법은 디바이스로 하여금 그것의 잠재력이 최대한 이용되지 못하게 하고, 따라서 덜 효율적이고 덜 효과적인 사용자 인터페이스를 제공한다. 아래에 기술되는 실시예들은, 터치 감응형 표면의 최소 감응 부분들 상의 최대 세기 임계치들보다 더 높은 최대 세기 검출 임계치들을 활용하기 위해 입력-출력 관계들을 동적으로 조정함으로써, 이 방법들을 개선한다. 예를 들어, 일부 상황들에서, 다수의 세기 센서를 구비한 터치 감응형 표면은, 제1 위치에서 500g의 힘에 대응하는 최대 세기를 갖고, 제2 위치에서 2000g의 힘에 대응하는 최대 세기를 갖는다. 이 예에서, 제2 위치에서 추가의 세기 범위를 활용하는 것이 바람직하다. 아래에 기술되는 실시예들은, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하는 효율적이고 직관적인 방법을 제공하며, 그로써 디바이스가 편리하고 효율적인 사용자 인터페이스들을 제어할 수 있게 한다.
도 11b 내지 도 11u는 일부 실시예들에 따른, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하기 위한 예시적인 사용자 인터페이스들을 예시한다. 이들 도면들에서의 사용자 인터페이스들은 도 12a 내지 도 12d를 참조하여 아래에 기술되는 프로세스들을 포함하는 아래에 기술되는 프로세스들을 예시하는 데 사용된다. 도 11b 내지 도 11j 및 도 11m 내지 도 11u는 개별 임계치(예컨대,"ITD")를 포함하는 복수의 세기 임계치에 대한 터치 감응형 표면 상의 접촉의 현재 세기를 도시하는 세기 다이어그램들을 포함한다. 일부 실시예들에서, ITD를 참조하여 아래에 기술되는 것들과 유사한 동작들이 상이한 세기 임계치(예컨대,"ITL")를 참조하여 수행된다.
도 11a는 입력들의 변화(예컨대, 손가락 접촉의 세기의 변화)에 응답하여 출력들을 조정하는 예를 예시한다. 도 11a는, ITL과 ITD 사이의 다양한 세기 값들에 대응하는 제1 입력-출력 응답(13502)(예컨대, 선형 응답), 세기 ITD에 대응하는 입력-출력 응답 전환 지점(13504), ITD와 ITMAX1 사이의 다양한 세기 값들에 대응하는 제2 입력-출력 응답(13506)(예컨대, 큐빅 스플라인 응답)으로의 부드러운 전환, 및 입력이 ITMAX1에 접근함에 따라 최대 출력(13508)에 접근하는 출력을 포함하는, 제1 입력-출력 매핑(13501)을 도시한다. 도 11a는, ITL과 ITD 사이의 다양한 세기 값들에 대응하는 제1 입력-출력 응답(13510), 세기 ITD에 대응하는 입력-출력 응답 전환 지점(13512), ITD와 ITMAX2 사이의의 다양한 세기 값들에 대응하는 제2 입력-출력 응답(13514)으로의 부드러운 전환, 및 입력이 ITMAX2에 접근함에 따라 최대 출력(13516)에 접근하는 출력을 포함하는, 제2 입력-출력 매핑(13509)을 추가로 도시한다.
도 11b는 터치 감응형 디스플레이(13518) 상에 디스플레이되는, 메뉴바(13521) 및 도구 서브메뉴(13523)을 포함하는 예시적인 사용자 인터페이스(13520)를 예시한다. 도 11b는 터치 감응형 디스플레이(13518) 상의 접촉들의 세기를 검출하는 세기 센서들(13522)을 추가로 예시한다. 도 11b는 접촉(13524) 및 접촉(13524)의 세기뿐만 아니라, 터치 감응형 디스플레이(13518) 상의 접촉(13524)과 세기 센서들(13522)의 상대적인 위치에 대응하는 추가의 동적 범위(13526)를 또한 도시한다. 도 11b는 접촉(13528) 및 접촉(13528)의 세기뿐만 아니라, 터치 감응형 디스플레이(13518) 상의 접촉(13528)과 세기 센서들(13522)의 상대적인 위치에 대응하는 추가의 동적 범위(13530)를 추가로 도시한다.
도 11c 내지 도 11l은 접촉의 세기에 따라 애니메이션의 진행을 조정하는 예를 예시한다. 도 11c는 디바이스(예컨대, 디바이스(300))의 디스플레이(450) 상에 디스플레이되는, 파일 아이콘(13534)를 포함하는 사용자 인터페이스(13532)를 예시한다. 도 11c는 터치 감응형 표면(451) 상에서 검출된 접촉(13540), ITL 미만의 접촉(13540)의 세기, 세기 센서들(13538), 터치 감응형 표면(451) 상의 접촉(13540)과 세기 센서들(13538)의 상대적인 위치에 대응하는 추가의 동적 범위(13542)를 추가로 예시한다. 일부 실시예들에 따르면, 도 11c 내지 도 11l은 터치 감응형 표면(451) 상에서 검출된 입력(13540)에 대응하는 포커스 셀렉터(예컨대, 커서(13536))의 디스플레이된 표현을 예시한다. 도 11d 내지 도 11g는 접촉(13540)의 세기가 ITL에서 ITD 바로 아래로 증가하는 동안 제1 입력-출력 관계에 따라 진행하는 파일 아이콘(13505)과 연관된 파일들을 디스플레이하는 애니메이션을 예시한다. 도 11h는 접촉(13540)의 세기가 ITD에 접근하는 동안 애니메이션 진행에서의 전환 지점을 도시한다. 도 11i 내지 도 11j는 접촉(13540)의 세기가 ITD를 넘어 증가하는 동안 제2 입력-출력 관계에 따라 진행하는 애니메이션을 예시한다. 도 11k 내지 도 11l은 접촉(13540)의 리프트 오프 및, 파일 아이콘(13534)과 연관된 파일들의 그래픽 표현을 도 11h에 도시된 상태로 되돌아가게 하는(예컨대, 회복시키는) 애니메이션을 예시한다.
일부 실시예들에서, 디바이스는 별개의 디스플레이(예컨대, 디스플레이(450)) 및 별개의 터치 감응형 표면(예컨대, 터치 감응형 표면(451))을 구비한 전자 디바이스이다. 일부 실시예들에서, 디바이스는 휴대용 다기능 디바이스(100)이고, 디스플레이는 터치 감응형 디스플레이 시스템(112)이며, 터치 감응형 표면은 디스플레이 상의 접촉 세기 센서(들)(165)를 포함한다(도 1a).
일부 실시예들에서, 디바이스는 별개의 디스플레이(예컨대, 디스플레이(450)) 및 별개의 터치 감응형 표면(예컨대, 터치 감응형 표면(451))을 구비한 전자 디바이스이다. 일부 실시예들에서, 디바이스는 휴대용 다기능 디바이스(100)이고, 디스플레이는 터치 감응형 디스플레이 시스템(112)이며, 터치 감응형 표면은 디스플레이 상의 접촉 세기 센서들(165)을 포함한다(도 1a). 설명의 편이를 위하여, 도 11c 내지 도 11u를 참조하여 기술되는 실시예들은 디스플레이(450) 및 별개의 터치 감응형 표면(451)을 참조하여 논의될 것이다. 그러나, 유사한 동작들이, 선택적으로, 도 11c 내지 도 11u에 도시된 사용자 인터페이스들을 터치 감응형 디스플레이 시스템(112) 상에 디스플레이하는 동안 터치 감응형 디스플레이 시스템(112) 상의 도 11c 내지 도 11u에 기술된 접촉들을 검출하는 것에 응답하여, 터치 감응형 디스플레이 시스템(112)을 구비한 디바이스 상에서 수행되며; 그러한 실시예들에서, 포커스 셀렉터는, 선택적으로, 커서(13536) 대신에, 개별 접촉, 접촉에 대응하는 대표 지점(예컨대, 개별 접촉의 도심 또는 개별 접촉과 연관된 지점), 또는 터치 감응형 디스플레이 시스템(112) 상에서 검출된 2개 이상의 접촉들의 도심이다.
도 11m 내지 도 11u는 접촉의 세기에 따라 애니메이션의 진행을 조정하는 다른 예를 예시한다. 도 11m은 디바이스(예컨대, 디바이스(300))의 디스플레이(450) 상에 디스플레이되는, 파일 아이콘(13546)를 포함하는 사용자 인터페이스(13544)를 예시한다. 도 11m은 터치 감응형 표면(451) 상에서 검출된 접촉(13548), ITL 미만의 접촉(13548)의 세기, 세기 센서들(13538), 터치 감응형 표면(451) 상의 접촉(13548)과 세기 센서들(13538)의 상대적인 위치에 대응하는 추가의 동적 범위(13550)를 추가로 예시한다. 도 11n 내지 도 11q는 접촉(13548)의 세기가 ITL에서 ITD 바로 아래로 증가하는 동안 제1 입력-출력 관계에 따라 진행하는 파일 아이콘(13546)과 연관된 파일들을 디스플레이하는 애니메이션을 예시한다. 도 11r은 접촉(13548)의 세기가 ITD에 도달하는 동안 애니메이션 진행에서의 전환 지점을 예시한다. 도 11s 내지 도 11u는 접촉(13548)의 세기가 ITD를 넘어 증가하는 동안 제2 입력-출력 관계에 따라 진행하는 애니메이션을 예시한다.
도 12a 내지 도 12d는 일부 실시예들에 따른, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하는 방법(13600)을 예시하는 흐름도들이다. 방법(13600)은 디스플레이 및 터치 감응형 표면을 구비한 전자 디바이스(예컨대, 도 3의 디바이스(300), 또는 도 1a의 휴대용 다기능 디바이스(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이고, 터치 감응형 표면이 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치 감응형 표면과 별개이다. 방법(13600)에서의 일부 동작들이, 선택적으로, 조합되고/되거나 일부 동작들의 순서가, 선택적으로, 변경된다.
아래에 기술되는 바와 같이, 방법(13600)은 접촉 세기의 변화들에 따라, 그리고 접촉의 위치에 따라 변화하는 동적 입력 범위에 따라, 사용자 인터페이스 출력들을 조정하는 직관적인 방법을 제공한다. 방법은 사용자 인터페이스 계층들을 내비게이션할 때 사용자에 대한 인지적 부담을 감소시키며, 그로써 보다 효율적인 사람-기계 인터페이스를 생성한다. 배터리 작동형 전자 디바이스들에 대해, 접촉 세기의 변화들에 따라 출력들을 조정하고 세기 검출의 동적 범위를 변경하면서, 사용자가 사용자 인터페이스 계층들을 보다 빠르고 보다 효율적으로 내비게이션할 수 있게 하는 것은, 전력을 보존하고 배터리 충전들 사이의 시간을 증가시킨다.
디바이스는 터치 감응형 표면 상에서 접촉(예컨대, 손가락 접촉)을 검출한다(13602). 예를 들어, 도 11b에서 디바이스는 터치 감응형 디스플레이(13518) 상에서 접촉(13524)을 검출한다.
디바이스는 터치 감응형 표면 상의 접촉의 개별 위치(예컨대, 접촉의 도심과 같은, 접촉 내의 대표 지점의 현재 (x,y) 위치)를 결정하며(13604), 여기서 터치 감응형 표면 상의 개별 위치는 접촉의 세기를 검출하기 위한 개별 동적 범위를 갖는다. 예를 들어, 도 11b의 디바이스는 접촉(13524)의 위치 및 대응하는 추가의 세기 범위(13526)를 결정한다.
일부 실시예들에서, 디바이스가 개별 위치에 대한 개별 동적 범위를 결정하는 것은, 개별 위치에서의 접촉의 세기를 검출하기 위한 디바이스의 동적 범위에 관해 저장된 정보(예컨대, 디바이스에서 또는 원격 컴퓨터 시스템에서 이전에 저장된 정보)를 검색하는 것을 포함한다(13606). 예를 들어, 이들 실시예에서, 도 11b의 디바이스는 접촉(13524)의 위치에 대응하는 추가의 동적 범위(13526)에 관한 저장된 정보를 검색한다.
디바이스는 개별 위치에서 터치 감응형 표면 상의 접촉의 세기를 결정한다(13608). 일부 실시예들에서, 터치 감응형 표면 상의 접촉의 세기를 결정하는 것은 시간에 따른 접촉의 세기의 변화들을 검출하기 위하여 시간에 따른 접촉의 세기의 복수의 측정치를 생성하는 것을 포함한다. 예를 들어, 도 11b의 디바이스는 접촉(13524)의 세기를 결정한다.
일부 실시예들에서, 터치 감응형 표면과의 접촉들의 세기를 검출하는 센서들은, 터치 감응형 표면의 둘레 주위에 배치된 복수의 세기 센서를 포함하고(13610) (예컨대, 세기 센서들은 트랙패드의 코너들에 근접하여 위치됨), 터치 감응형 표면의 둘레 근처의 위치들은 터치 감응형 표면의 중심 근처의 위치들보다 더 낮은 동적 범위를 갖는다. 예를 들어, 도 11c의 디바이스는 터치 감응형 표면(451)의 코너들에 근접하여 위치된 세기 센서들(13538)을 포함한다.
디바이스는 접촉의 세기의 변화를 검출한다(13612). 일부 실시예들에서, 접촉의 세기의 변화는, 접촉이 개별 위치에서 유지되는 동안 검출된다. 예를 들어, 도 11c 및 도 11d는 터치 감응형 표면(451) 상에서 접촉(13540)을 검출하는 디바이스, 및 도 11c의 ITL 미만에서 도 11d의 ITL로의 접촉(13540)의 세기에서의 증가를 예시한다.
터치 감응형 표면 상의 개별 위치에서의 접촉의 세기의 변화를 검출하는 것에 응답하여, 디바이스는 출력을 조정한다(13614). 예를 들어, 도 11c 내지 도 11l에서, 디바이스는 파일 아이콘(13534)과 연관된 파일들의 애니메이션 진행을 조정한다.
개별 위치가 제1 동적 범위를 갖는다는(13616) 결정에 따라, 출력은 개별 위치에서의 접촉의 세기의 변화, 및 제1 동적 범위에 대응하는 세기에서 응답으로의 제1 입력-출력 매핑에 따라 조정된다. 예를 들어, 도 11c 내지 도 11l에서, 디바이스는 파일 아이콘(13534)과 연관된 파일들의 애니메이션 진행을 조정한다. 도 11c 내지 도 11j는 터치 감응형 표면(451) 상의 접촉(13540)의 위치 및 대응하는 추가의 동적 범위(13542)를 추가로 예시한다. 이 예에서, 애니메이션은 접촉(13540)의 세기의 변화들 및 추가의 동적 범위(13542)에 대응하는 입력-출력 매핑에 따라 진행한다.
반대로, 개별 위치가 제1 동적 범위와 상이한 제2 동적 범위를 갖는다는(13618) 결정에 따라, 출력은 개별 위치에서의 접촉의 세기의 변화, 및 제2 동적 범위에 대응하는 세기에서 응답으로의 입력-출력 매핑에 따라 조정되며, 여기서 제2 입력-출력 매핑은 제1 입력-출력 매핑과 상이하다. 예를 들어, 도 11m 내지 도 11u에서 디바이스는 파일 아이콘(13546)과 연관된 파일들의 애니메이션 진행을 조정한다. 도 11m 내지 도 11u는 터치 감응형 표면(451) 상의 접촉(13548)의 위치, 및 도 11c의 추가의 동적 범위(13542)와 상이한 대응하는 추가의 동적 범위(13550)을 추가로 예시한다. 이 예에서, 애니메이션은 접촉(13548)의 세기의 변화들, 및 추가의 동적 범위(13550)에 대응하는 입력-출력 매핑에 따라 진행한다.
일부 실시예들에서, 제2 동적 범위는 제1 동적 범위보다 높고(13620) (예컨대, 제2 동적 범위는 제1 동적 범위보다 더 큰 범위의 세기 값들을 포함함), 제2 입력-출력 매핑은 제1 동적 범위 밖에 있는 하나 이상의 세기 값에 대하여 세기를 출력 값들에 매핑한다(예컨대, 제2 동적 범위는 제1 동적 범위의 최대 검출가능 세기보다 더 높은 최대 검출가능 세기를 포함함). 예를 들어, 도 11b에서 디바이스는 대응하는 추가의 동적 범위(13526)를 갖는 제1 위치에서 접촉(13524)을 검출하고, 대응하는 추가의 동적 범위(13530)를 갖는 제2 위치에서 접촉(13528)을 검출한다. 이 예에서, 제2 위치에서의 접촉(13528)은, 접촉(13524)의 위치와 연관된 동적 범위 밖에 있는 다수의 세기 값을 포함하는 더 큰 동적 범위를 갖는다.
일부 실시예들에서, 제1 동적 범위의 상한은, 터치 감응형 표면 상의 제1 위치에서의 제1 세기 검출 한계에 대응하는 제1 세기에 기초하여 결정되고(13622), 제2 동적 범위의 상한은, 터치 감응형 표면 상의 제1 위치와 상이한 제2 위치에서의 제2 세기 검출 한계에 대응하는, 제1 세기와 상이한 제2 세기에 기초하여 결정된다. 일부 실시예들에서, 제1 세기 검출 한계는 디바이스가 제1 위치에서 검출할 수 있는 최대 세기인, 실제적이거나, 이론적이거나, 또는 추정된 세기에 기초하여 결정된다. 일부 실시예들에서, 제2 세기 검출 한계는 디바이스가 제2 위치에서 검출할 수 있는 최대 세기인, 실제적이거나, 이론적이거나, 또는 추정된 세기에 기초하여 결정된다. 이들 실시예에서, 예를 들어, 도 11b에서 추가의 동적 범위(13526)는 접촉(13524)의 위치와 연관된 제1 세기 검출 한계에 대응하고, 추가의 동적 범위(13530)는 접촉(13528)의 위치와 연관된 제2 세기 검출 한계에 대응한다.
일부 실시예들에서, 제1 입력-출력 매핑은 디바이스가 제1 세기(예컨대, 제1 동적 범위의 상한)에 가까운 세기 값들을 검출함에 따라 개별 최대 출력에 점근적으로 접근하고(13624), 제2 입력-출력 매핑은 디바이스가 제2 세기(예컨대, 제2 동적 범위의 상한)에 가까운 세기 값들을 검출함에 따라 개별(예컨대, 동일한 개별의) 최대 출력에 점근적으로 접근한다. 일부 실시예들에서, 입력-출력 매핑들 둘 모두는 최대 검출가능한 세기에서 동일한 최종 애니메이션 상태에 접근하지만, 입력-출력 매핑들의 최대 검출가능한 세기들은 상이하다. 따라서, 디바이스는, 디바이스가 제2 위치에서 최종 애니메이션 상태에 도달하는 세기와 상이한 세기로, 제1 위치에서 최종 애니메이션 상태에 도달한다. 예를 들어, 도 11a는 최대 응답 값(13508)을 갖는 제1 입력-출력 매핑(13501) 및 최대 응답 값(13516)을 갖는 제2 입력-출력 매핑(13509)을 예시한다. 도 11a는 최대 응답 값(13508)에 점근적으로 접근하는 제1 입력-출력 매핑(13501)에서의 출력 응답, 및 최대 응답 값(13516)에 점근적으로 접근하는 제2 입력-출력 매핑(13509)에서의 출력 응답을 추가로 예시한다. 이 예에서, 그리고 이들 실시예에서, 최대 응답 값(13508)은 최대 응답 값(13516)과 동일하다.
일부 실시예들에서, 제1 입력-출력 매핑은 제1 범위의 세기 값들을 개별 범위의 출력에 매핑하고(13626), 제2 입력-출력 매핑은 제1 범위의 세기 값들과 상이한 제2 범위의 세기 값들을 그 개별 범위(예컨대, 동일한 개별 범위)의 출력에 매핑한다. 예를 들어, 제1 위치에서 0 내지 500g의 힘이 미리 정의된 범위의 출력 값들(예컨대, 0 내지 130%의 애니메이션 진행)에 매핑되고, 제2 위치에서 0 내지 2000g의 힘이 동일한 미리 정의된 범위의 출력 값들(예컨대, 0 내지 130%의 애니메이션 진행)에 매핑된다. 이들 실시예에서, 예를 들어, 도 11c 내지 도 11j에 예시된 애니메이션 진행은 제1 입력-출력 매핑에 대응하고, 도 11m 내지 도 11u에 예시된 애니메이션 진행은 제2 입력-출력 매핑에 대응한다. 이 예에서, 그리고 이들 실시예에서, 도 11c 내지 도 11j에 예시된 애니메이션 진행은 도 11m 내지 도 11u에 예시된 애니메이션 진행과 동일한 개별 출력 범위에 대응한다.
일부 실시예들에서, 제1 입력-출력 매핑은 전환 세기 값 미만의 다양한 세기 값들에 대응하는 제1 부분(예컨대, 선형 응답 부분), 및 전환 세기 값 초과의 다양한 세기 값들에 대응하는 제2 부분(예컨대, 비선형 응답 부분)을 갖는다(13628). 일부 구현예들에서, 제2 입력-출력 매핑은 전환 세기 값 미만의 다양한 세기 값들에 대응하는 제1 부분(예컨대, 선형 응답 부분), 및 전환 세기 값 초과의 다양한 세기 값들에 대응하는 제2 부분(예컨대, 비선형 응답 부분)을 갖는다. 일부 구현예들에서, 제1 입력-출력 매핑의 제1 부분은 제2 입력-출력 매핑의 제1 부분과 동일하고(예컨대, 선형 부분), 제1 입력-출력 매핑의 제2 부분은 제2 입력-출력 매핑의 제2 부분과 상이하다(예컨대, 큐빅 부분). 예를 들어, 도 11a는, ITL과 ITD 사이의 세기들에 대응하는 제1 범위의 세기 값들(13502)(예컨대, 선형 부분) 및 ITD와 ITMAX1 사이의 세기들에 대응하는 제2 범위의 세기 값들(13506)(예컨대, 비선형 부분)을 포함하는 제1 입력-출력 매핑(13501)을 도시한다. 도 11a는 ITL과 ITD 사이의 세기들에 대응하는 제1 범위의 세기 값들(13510) 및 ITD와 ITMAX2 사이의 세기들에 대응하는 제2 범위의 세기 값들(13514)을 포함하는 제2 입력-출력 매핑(13509)을 추가로 도시한다. ITMAX2는 ITMAX1와 상이하고, 이 예에서는 ITMAX1 보다 더 높은 세기 값을 나타내는 것에 주목하여야 한다. 이들 실시예에 따르면, 제1 입력-출력 매핑(13501)에서의 제1 범위의 세기 값들(13502)은 제2 입력-출력 매핑(13509)에서의 제1 범위의 세기 값들(13510)과 동일하고, 제1 입력-출력 매핑(13501)에서의 제2 범위의 세기 값들(13506)은 제2 입력-출력 매핑(13509)에서의 제2 범위의 세기 값들(13514)과 상이하다.
일부 실시예들에서, 디바이스의 출력을 조정하는 것은, 접촉의 최대 세기가 전환 세기 값 미만이라는 결정에 따라, 개별 위치가 제1 동적 범위를 갖는지 또는 제2 동적 범위를 갖는지에 상관없이 접촉의 최대 세기에 따라 동일한 출력을 생성하는 것(13632), 접촉의 최대 세기가 전환 세기 값 초과라는 결정에 따라, 접촉의 최대 세기에 따라 그리고 개별 위치가 제1 동적 범위를 갖는지 또는 제2 동적 범위를 갖는지에 따라 상이한 출력들을 생성하는 것(13634)을 포함한다(13630) (예컨대, 개별 위치가 제1 동적 범위를 가질 때, 디바이스는 제1 출력을 생성하고, 개별 위치가 제2 동적 범위를 가질 때, 디바이스는 제1 출력과 상이한 제2 출력을 생성함). 예를 들어, 디바이스가 터치 감응형 표면 상의 2개의 상이한 위치에서 실질적으로 동일한 2개의 누르기 입력을 검출했다면(예컨대, 제1 동적 범위를 갖는 제1 위치 및 제2 동적 범위를 갖는 제2 위치, 두 입력은 상이한 시간들에서 검출됨), 디바이스는 위치들의 동적 범위, 및 접촉의 세기가 전환 세기를 초과하는지 여부에 적어도 부분적으로 의존하는 출력들을 생성한다. 이 예에서, 입력들이 전환 세기 미만인 경우, 디바이스는 두 위치에서 실질적으로 동일한 출력들을 생성하지만, 입력들이 전환 세기 초과인 경우, 디바이스는 두 입력들이 실질적으로 동일하다고 할지라도 두 위치들에서 상이한 출력들을 생성한다. 따라서, 이 예에서, 누르기 입력의 위치의 상이한 동적 범위로 인한 출력에서의 차이들은, 전환 세기 초과인 세기들의 범위로 국한된다. 결과적으로, 이 예에서, 디바이스는, 터치 감응형 표면의 일부분들(예컨대, 터치 감응형 표면의 중심, 터치 감응형 표면의 중심 근처의(예컨대, 중심의 미리 정의된 거리 내의, 또는 중심 주위의 미리 정의된 창 내의) 위치들)의 증가된 동적 범위를 또한 이용하면서, 전환 세기 미만의 세기들을 갖는 입력들에 대해 터치 감응형 표면에 걸쳐서 일관된 사용자 경험을 유지하여, 사용자에게 추가의 피드백을 제공한다.
일부 실시예들에서, 제1 입력-출력 매핑에 따라 디바이스의 출력을 조정하는 동안, 디바이스는 제1 동적 범위를 갖는 터치 감응형 표면 상의 제1 위치에서 제2 동적 범위를 갖는 터치 감응형 표면 상의 제2 위치로의 접촉의 이동을 검출하고(13636), 제1 위치에서 제2 위치로의 접촉의 이동을 검출하는 것에 응답하여, 디바이스는 접촉이 제2 위치에 있는 동안 제1 입력-출력 매핑을 계속해서 이용하여(13638) 디바이스의 출력을 조정한다. 이들 실시예에서, 도 11c 내지 도 11j에 예시된 애니메이션은 접촉(13540)의 후속적인 이동에 의해 변화되지 않는다.
반대로, 일부 실시예들에서, 제1 입력-출력 매핑에 따라 디바이스의 출력을 조정하는 동안, 디바이스는 제1 동적 범위를 갖는 터치 감응형 표면 상의 제1 위치에서 제2 동적 범위를 갖는 터치 감응형 표면 상의 제2 위치로의 접촉의 이동을 검출하고(13640), 제1 위치에서 제2 위치로의 접촉의 이동을 검출하는 것에 응답하여, 디바이스는 접촉이 제2 위치에 있는 동안 제2 입력-출력 매핑을 이용하여(13642) 디바이스의 출력을 조정한다. 일부 실시예들에서, 제1 입력-출력 매핑과 제2 입력-출력 매핑 사이에 부드러운 전환이 있음으로써, 접촉의 세기가 개별 세기에서 유지되는 경우, 접촉이 제1 위치에서 제2 위치로 이동하는 동안 출력이 점차적으로 변화하게 된다. 이들 실시예에서, 도 11c 내지 도 11j에 예시된 애니메이션은 접촉(13540)의 후속적인 이동으로 인한 접촉(13540)의 위치에 대응하는 동적 범위에 따라 조정된다.
도 12a 내지 도 12d에서의 동작들이 기술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 본 발명이 속한 기술분야에서 통상의 지식을 가진 자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방법들을 인식할 것이다. 또한, 본 명세서에 기술된 다른 방법들(예를 들어, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에서 열거된 방법들)과 관련하여 본 명세서에 기술된 다른 프로세스들의 상세사항들이 도 12a 내지 도 12d와 관련하여 전술된 방법(13600)에도 유사한 방식으로 또한 적용가능하다는 것에 주목해야 한다. 예를 들어, 방법(13600)을 참조하여 전술된 접촉들, 제스처들, 사용자 인터페이스 객체들, 세기 임계치들, 포커스 셀렉터들, 출력들, 및 애니메이션들은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들)을 참조하여 본 명세서에 기술된 접촉들, 제스처들, 사용자 인터페이스 객체들, 세기 임계치들, 포커스 셀렉터들, 출력들, 및 애니메이션들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 이들 상세사항들은 여기서 반복되지 않는다.
일부 실시예들에 따르면, 도 13은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(13700)의 기능 블록 다이어그램을 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 13에서 기술된 기능 블록들이, 선택적으로, 조합되거나 하위 블록들로 분리됨이 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의해 이해된다. 따라서, 본 명세서의 설명은 선택적으로 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가적 한정을 지원한다.
도 13에 도시된 바와 같이, 전자 디바이스(13700)는 디스플레이 유닛(13702), 사용자 접촉들을 수용하도록 구성된 터치 감응형 표면 유닛(13704), 터치 감응형 표면 유닛과의 접촉들의 세기를 검출하도록 구성된 하나 이상의 센서 유닛(13705), 및 디스플레이 유닛(13702), 터치 감응형 표면 유닛(13704) 및 센서 유닛들(13705)에 연결된 처리 유닛(13706)을 포함한다. 일부 실시예들에서, 처리 유닛(13706)은 위치 검출 유닛(13708), 접촉 세기 검출 유닛(13709), 결정 유닛(13710), 및 조정 유닛(13712)을 포함한다.
처리 유닛(13706)은, (예컨대, 접촉 세기 검출 유닛(13709)을 이용해) 터치 감응형 표면 유닛(13704) 상의 접촉을 검출하고, (예컨대, 결정 유닛(13710)을 이용해) 터치 감응형 표면 유닛(13704) 상의 접촉의 개별 위치를 결정하도록 구성되며, 터치 감응형 표면 유닛(13704) 상의 개별 위치는 접촉의 세기를 검출하기 위한 개별 동적 범위를 갖는다. 처리 유닛(13706)은 (예컨대, 결정 유닛(13710)을 이용해) 개별 위치에서 터치 감응형 표면 유닛(13704) 상의 접촉의 세기를 결정하고, (예컨대, 접촉 세기 검출 유닛(13709)을 이용해) 접촉의 세기의 변화를 검출하도록 추가로 구성된다. 처리 유닛(13706)은, 터치 감응형 표면(13704) 상의 개별 위치에서 접촉의 세기의 변화를 검출하는 것에 응답하여, (예컨대, 조정 유닛(13712)을 이용해) 디바이스의 출력을 조정하도록 추가로 구성되며, 개별 위치가 제1 동적 범위를 갖는다는 결정에 따라, 개별 위치에서의 접촉의 세기의 변화, 및 제1 동적 범위에 대응하는 세기에서 응답으로의 제1 입력-출력 매핑에 따라 출력이 조정되고, 개별 위치가 제1 동적 범위와 상이한 제2 동적 범위를 갖는다는 결정에 따라, 개별 위치에서의 접촉의 세기의 변화, 및 제2 동적 범위에 대응하는 세기에서 응답으로의 제2 입력-출력 매핑에 따라 출력이 조정되며, 제2 입력-출력 매핑은 제1 입력-출력 매핑과 상이하다.
일부 실시예들에서, 디바이스가 개별 위치에 대한 개별 동적 범위를 (예컨대, 결정 유닛(13710)을 이용해) 결정하는 것은, 개별 위치에서의 접촉의 세기를 검출하기 위한 디바이스의 동적 범위에 관한 저장된 정보를 검색하는 것을 포함한다.
일부 실시예들에서, 제2 동적 범위는 제1 동적 범위보다 높고, 제2 입력-출력 매핑은 제1 동적 범위 밖에 있는 하나 이상의 세기 값에 대해 세기를 출력 값들에 매핑한다.
일부 실시예들에서, 제1 동적 범위의 상한은 (예컨대, 결정 유닛(13710)을 이용해) 터치 감응형 표면 유닛(13704) 상의 제1 위치에서의 제1 세기 검출 한계에 대응하는 제1 세기에 기초하여 결정되고, 제2 동적 범위의 상한은 (예컨대, 결정 유닛(13710)을 이용해) 터치 감응형 표면 유닛(13704) 상의 제1 위치와 상이한 제2 위치에서의 제2 세기 검출 한계에 대응하는, 제1 세기와 상이한 제2 세기에 기초하여 결정된다.
일부 실시예들에서, 제1 입력-출력 매핑은 디바이스가 (예컨대, 접촉 세기 검출 유닛(13709)을 이용해) 제1 세기에 가까운 세기 값들을 검출함에 따라 개별 최대 출력에 점근적으로 접근하고, 제2 입력-출력 매핑은 디바이스가 (예컨대, 접촉 세기 검출 유닛(13709)을 이용해) 제2 세기에 가까운 세기 값들을 검출함에 따라 개별 최대 출력에 점근적으로 접근한다.
일부 실시예들에서, 제1 입력-출력 매핑은 제1 범위의 세기 값들을 개별 범위의 출력에 매핑하고, 제2 입력-출력 매핑은, 제1 범위의 세기 값들과 상이한 제2 범위의 세기 값들을 개별 범위의 출력에 매핑한다.
일부 실시예들에서, 제1 입력-출력 매핑은 전환 세기 값 미만의 다양한 세기 값들에 대응하는 제1 부분 및 전환 세기 값 초과의 다양한 세기 값들에 대응하는 제2 부분을 갖고, 제2 입력-출력 매핑은 전환 세기 값 미만의 다양한 세기 값들에 대응하는 제1 부분 및 전환 세기 값 초과의 다양한 세기 값들에 대응하는 제2 부분을 가지며, 제1 입력-출력 매핑의 제1 부분은 제2 입력-출력 매핑의 제1 부분과 동일하고, 제1 입력-출력 매핑의 제2 부분은 제2 입력-출력 매핑의 제2 부분과 상이하다.
일부 실시예들에서, (예컨대, 조정 유닛(13712)을 이용해) 디바이스의 출력을 조정하는 것은, 접촉의 최대 세기가 전환 세기 값 미만이라는 결정에 따라, 개별 위치가 제1 동적 범위를 갖는지 또는 제2 동적 범위를 갖는지에 상관없이 접촉의 최대 세기에 따라 동일한 출력을 생성하는 것, 및 접촉의 최대 세기가 전환 세기 값 초과라는 결정에 따라, 접촉의 최대 세기, 및 개별 위치가 제1 동적 범위를 갖는지 또는 제2 동적 범위를 갖는지에 따라 상이한 출력들을 생성하는 것을 포함한다.
일부 실시예들에서, 터치 감응형 표면 유닛(13704)과의 접촉들의 세기를 검출하도록 구성된 센서 유닛들(13705)은 터치 감응형 표면 유닛(13704)의 둘레 주위에 배치된 복수의 세기 센서를 포함하고, 터치 감응형 표면 유닛(13704)의 둘레 근처의 위치들은 터치 감응형 표면 유닛(13704)의 중심 근처의 위치들보다 더 낮은 동적 범위를 갖는다.
일부 실시예들에서, 처리 유닛(13706)은, (예컨대, 조정 유닛(13712)을 이용해) 제1 입력-출력 매핑에 따라 디바이스의 출력을 조정하는 동안, (예컨대, 위치 검출 유닛(13708)을 이용해) 제1 동적 범위를 갖는 터치 감응형 표면 유닛(13704) 상의 제1 위치에서 제2 동적 범위를 갖는 터치 감응형 표면 유닛(13704) 상의 제2 위치로의 접촉의 이동을 검출하고, 제1 위치에서 제2 위치로의 접촉의 이동을 검출하는 것에 응답하여, (예컨대, 조정 유닛(13712)을 이용해) 접촉이 제2 위치에 있는 동안 제1 입력-출력 매핑을 계속해서 이용하여 디바이스의 출력을 조정하도록 추가로 구성된다.
일부 실시예들에서, 처리 유닛(13706)은, (예컨대, 조정 유닛(13712)을 이용해) 제1 입력-출력 매핑에 따라 디바이스의 출력을 조정하는 동안, (예컨대, 위치 검출 유닛(13708)을 이용해) 제1 동적 범위를 갖는 터치 감응형 표면 유닛(13704) 상의 제1 위치에서 제2 동적 범위를 갖는 터치 감응형 표면 유닛(13704) 상의 제2 위치로의 접촉의 이동을 검출하고, 제1 위치에서 제2 위치로의 접촉의 이동을 검출하는 것에 응답하여, (예컨대, 조정 유닛(13712)을 이용해) 접촉이 제2 위치에 있는 동안 제2 입력-출력 매핑을 이용하여 디바이스의 출력을 조정하도록 추가로 구성된다.
전술된 정보 처리 방법들에서의 동작들이, 선택적으로, (예컨대, 도 1a 및 도 3과 관련하여 전술된 바와 같이) 범용 프로세서 또는 ASIC과 같은 정보 처리 장치에서 하나 이상의 기능 모듈을 실행함으로써 구현된다.
도 12a 내지 도 12d를 참조하여 전술한 동작들은, 선택적으로, 도 1a와 도 1b 또는 도 13에 도시된 컴포넌트들에 의해 구현된다. 예를 들어, 검출 동작들(13602, 13612, 13636, 13640), 결정 동작들(13604, 13608), 및 조정 동작(13614)은, 선택적으로, 이벤트 분류기(170), 이벤트 인식기(180) 및 이벤트 핸들러(190)에 의해 구현된다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치 감응형 디스플레이(112) 상에서 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 개별 이벤트 인식기(180)는 이벤트 정보를 개별 이벤트 정의들(186)과 비교하고, 터치 감응형 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상의 객체의 선택과 같은 미리 정의된 이벤트 또는 서브-이벤트에 대응하는지 여부를 결정한다. 개별의 미리 정의된 이벤트 또는 서브-이벤트가 검출되는 경우, 이벤트 인식기(180)는 이벤트 또는 서브-이벤트의 검출과 연관된 이벤트 핸들러(190)를 활성화시킨다. 이벤트 핸들러(190)는 선택적으로 애플리케이션 내부 상태(192)를 업데이트하기 위해 데이터 업데이터(176) 또는 객체 업데이터(177)를 활용하거나 호출한다. 일부 실시예들에서, 이벤트 핸들러(190)는 애플리케이션에 의해 디스플레이되는 것을 업데이트하기 위해 각각의 GUI 업데이터(178)에 액세스한다. 유사하게, 다른 프로세스들이 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 어떻게 구현될 수 있는지는 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.
동작들이 전술된 특정 순서는 단지 예시적인 것이며 기술된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내는 것으로 의도되지는 않는다는 것이 이해되어야 한다. 본 발명이 속한 기술분야에서 통상의 지식을 가진 자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방법들을 인식할 것이다. 또한, 본 명세서에 개별적으로 기술된 다양한 프로세스들(예컨대, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 프로세스들)은 상이한 배열들로 서로 조합될 수 있다는 것에 주목해야 한다. 예를 들어, 본 명세서에 개별적으로 기술된 다양한 프로세스들(예컨대, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 프로세스들) 중 임의의 하나를 참조하여 전술된 접촉들, 사용자 인터페이스 객체들, 촉감들, 세기 임계치들, 및/또는 포커스 셀렉터들은, 선택적으로, 본 명세서에 기술된 다른 방법들(예컨대, 발명을 실시하기 위한 구체적인 내용의 다섯 번째 단락에 열거된 방법들) 중 하나 이상을 참조하여 본 명세서에 기술된 접촉들, 제스처들, 사용자 인터페이스 객체들, 촉감들, 세기 임계치들, 및 포커스 셀렉터들의 특성들 중 하나 이상을 갖는다. 간결성을 위해, 다양한 가능 조합들 모두가 여기서 구체적으로 열거되지 않지만, 전술된 청구범위가 상호 배타적인 청구항 특징들에 의해 배제되지 않는 임의의 방식으로 조합될 수 있다는 것이 이해되어야 한다.
상기의 기술된 내용은 설명을 위해 특정 실시예들을 참조하여 설명되었다. 그러나, 상기의 예시적인 논의들은 다양하게 기술된 실시예들을 총망라하거나 개시된 정확한 형태들로 제한하도록 의도되지 않는다. 많은 수정들 및 변형들이 상기 교시 내용들의 관점에서 가능하다. 다양하게 기술된 실시예들의 원리 및 이들의 실제적인 응용을 가장 잘 설명하여 본 발명이 속한 기술분야에서 통상의 지식을 가진 자들이 다양하게 기술된 실시예들을 고려되는 특정 용도에 적합한 바와 같은 다양한 변형을 갖고서 가장 잘 이용하는 것을 가능하게 하도록 실시예들이 선택 및 설명되었다.

Claims (92)

  1. 방법으로서,
    터치 감응형 표면(touch-sensitive surface) 및 디스플레이를 구비한 전자 디바이스 - 상기 디바이스는 상기 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 포함함 - 에서,
    상기 터치 감응형 표면 상에서 접촉을 검출하는 단계;
    상기 터치 감응형 표면 상의 상기 접촉의 위치를 결정하는 단계;
    상기 터치 감응형 표면 상의 상기 접촉의 세기를 결정하는 단계; 및
    상기 검출된 접촉에 따라 응답을 디스플레이하는 단계
    를 포함하며, 상기 응답은 상기 터치 감응형 표면 상의 상기 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초하고, 상기 입력-출력 매핑은, 상기 터치 감응형 표면 상의 개별 위치에 대해,
    제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계 - 상기 제1 입력-출력 관계는 선형임 -;
    제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 상기 제2 범위의 세기 값들은 상기 제1 범위의 세기 값들과 상이하고, 상기 제2 입력-출력 관계는 비선형임 -; 및
    상기 제1 범위의 세기 값들이 상기 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값(transitional intensity value)을 포함하며, 상기 전환 세기 값에서,
    상기 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고;
    상기 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 갖고;
    상기 제1 변화율은 상기 제2 변화율과 실질적으로 동일한, 방법.
  2. 제1항에 있어서, 상기 제2 입력-출력 관계 및 상기 제1 입력-출력 관계는 상기 전환 세기 값에서 동일한 출력을 갖는, 방법.
  3. 제1항에 있어서, 상기 제2 입력-출력 관계는 상기 접촉의 세기가 상기 전환 세기 값을 초과하여 증가함에 따라 최대 출력에 점근적으로 접근하는, 방법.
  4. 제1항에 있어서, 복수의 사용자 인터페이스 객체를 포함하는 사용자 인터페이스를 디스플레이하는 단계를 포함하며,
    상기 복수의 사용자 인터페이스 객체는 대응하는 활성화 세기 임계치들을 초과하는 세기를 갖는 누르기 입력들에 응답하고;
    상기 사용자 인터페이스 객체들 중 2개 이상의 객체에 대한 개별 활성화 세기 임계치는 상기 전환 세기 값과 동일한, 방법.
  5. 제1항에 있어서,
    상기 디바이스의 제1 속성은 상기 터치 감응형 표면 상의 상이한 위치들에서 변화하고;
    상기 제1 입력-출력 관계는 상기 터치 감응형 표면 상의 제1 위치 및 제2 위치에서 동일하고;
    상기 제2 입력-출력 관계는 상기 터치 감응형 표면 상의 상기 제1 위치에서 상기 제2 위치에서와 상이한, 방법.
  6. 제1항에 있어서,
    상기 응답은 사전정의된 범위의 값들 내의 제1 값에서 제2 값으로 속성의 현재 값을 변화시키는 것을 포함하는, 방법.
  7. 제1항에 있어서,
    상기 응답은 음량, 밝기, 사용자 인터페이스 객체 간격, 사용자 인터페이스 객체 크기, 사용자 인터페이스 객체 불투명도, 콘텐츠 스크러빙(content scrubbing) 및 애니메이션 진행 중 하나 이상을 조정하는 것을 포함하는, 방법.
  8. 전자 디바이스로서,
    디스플레이;
    터치 감응형 표면;
    상기 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서;
    하나 이상의 프로세서;
    메모리; 및
    상기 메모리에 저장되고 상기 하나 이상의 프로세서에 의해 실행되도록 구성되는 하나 이상의 프로그램
    을 포함하며, 상기 하나 이상의 프로그램은,
    상기 터치 감응형 표면 상에서 접촉을 검출하고;
    상기 터치 감응형 표면 상의 상기 접촉의 위치를 결정하고;
    상기 터치 감응형 표면 상의 상기 접촉의 세기를 결정하고;
    상기 검출된 접촉에 따라 응답을 디스플레이하기 위한 명령어들을 포함하며, 상기 응답은 상기 터치 감응형 표면 상의 상기 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초하고, 상기 입력-출력 매핑은, 상기 터치 감응형 표면 상의 개별 위치에 대해,
    제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계 - 상기 제1 입력-출력 관계는 선형임 -;
    제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 상기 제2 범위의 세기 값들은 상기 제1 범위의 세기 값들과 상이하고, 상기 제2 입력-출력 관계는 비선형임 -; 및
    상기 제1 범위의 세기 값들이 상기 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함하며, 상기 전환 세기 값에서,
    상기 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고;
    상기 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 갖고;
    상기 제1 변화율은 상기 제2 변화율과 실질적으로 동일한, 전자 디바이스.
  9. 제8항에 있어서, 상기 제2 입력-출력 관계 및 상기 제1 입력-출력 관계는 상기 전환 세기 값에서 동일한 출력을 갖는, 전자 디바이스.
  10. 제8항에 있어서, 상기 제2 입력-출력 관계는 상기 접촉의 세기가 상기 전환 세기 값을 초과하여 증가함에 따라 최대 출력에 점근적으로 접근하는, 전자 디바이스.
  11. 제8항에 있어서, 복수의 사용자 인터페이스 객체를 포함하는 사용자 인터페이스를 디스플레이하기 위한 명령어들을 포함하며,
    상기 복수의 사용자 인터페이스 객체는 대응하는 활성화 세기 임계치들을 초과하는 세기를 갖는 누르기 입력들에 응답하고;
    상기 사용자 인터페이스 객체들 중 2개 이상의 객체에 대한 개별 활성화 세기 임계치는 상기 전환 세기 값과 동일한, 전자 디바이스.
  12. 제8항에 있어서,
    상기 디바이스의 제1 속성은 상기 터치 감응형 표면 상의 상이한 위치들에서 변화하고;
    상기 제1 입력-출력 관계는 상기 터치 감응형 표면 상의 제1 위치 및 제2 위치에서 동일하고;
    상기 제2 입력-출력 관계는 상기 터치 감응형 표면 상의 상기 제1 위치에서 상기 제2 위치에서와 상이한, 전자 디바이스.
  13. 제8항에 있어서,
    상기 응답은 사전정의된 범위의 값들 내의 제1 값에서 제2 값으로 속성의 현재 값을 변화시키는 것을 포함하는, 전자 디바이스.
  14. 제8항에 있어서,
    상기 응답은 음량, 밝기, 사용자 인터페이스 객체 간격, 사용자 인터페이스 객체 크기, 사용자 인터페이스 객체 불투명도, 콘텐츠 스크러빙 및 애니메이션 진행 중 하나 이상을 조정하는 것을 포함하는, 전자 디바이스.
  15. 하나 이상의 프로그램을 저장하는 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램은, 디스플레이, 터치 감응형 표면, 및 상기 터치 감응형 표면과의 접촉들의 세기를 검출하는 하나 이상의 센서를 구비한 전자 디바이스에 의해 실행될 때, 상기 디바이스로 하여금,
    상기 터치 감응형 표면 상에서 접촉을 검출하고;
    상기 터치 감응형 표면 상의 상기 접촉의 위치를 결정하고;
    상기 터치 감응형 표면 상의 상기 접촉의 세기를 결정하고;
    상기 검출된 접촉에 따라 응답을 디스플레이하게 하는 명령어들을 포함하며, 상기 응답은 상기 터치 감응형 표면 상의 상기 접촉의 위치에서의 세기에서 응답으로의 입력-출력 매핑에 적어도 부분적으로 기초하고, 상기 입력-출력 매핑은, 상기 터치 감응형 표면 상의 개별 위치에 대해,
    제1 범위의 세기 값들에 걸친 세기와 응답 사이의 제1 입력-출력 관계- 상기 제1 입력-출력 관계는 선형임 -;
    제2 범위의 세기 값들에 걸친 세기와 응답 사이의 제2 입력-출력 관계 - 상기 제2 범위의 세기 값들은 상기 제1 범위의 세기 값들과 상이하고, 상기 제2 입력-출력 관계는 비선형임 -; 및
    상기 제1 범위의 세기 값들이 상기 제2 범위의 세기 값들과 만나거나 중첩되는 전환 세기 값을 포함하며, 상기 전환 세기 값에서,
    상기 제1 입력-출력 관계는 세기의 변화에 따른 응답의 제1 변화율을 갖고;
    상기 제2 입력-출력 관계는 세기의 변화에 따른 응답의 제2 변화율을 갖고;
    상기 제1 변화율은 상기 제2 변화율과 실질적으로 동일한, 컴퓨터 판독가능 저장 매체.
  16. 제15항에 있어서, 상기 제2 입력-출력 관계 및 상기 제1 입력-출력 관계는 상기 전환 세기 값에서 동일한 출력을 갖는, 컴퓨터 판독가능 저장 매체.
  17. 제15항에 있어서, 상기 제2 입력-출력 관계는 상기 접촉의 세기가 상기 전환 세기 값을 초과하여 증가함에 따라 최대 출력에 점근적으로 접근하는, 컴퓨터 판독가능 저장 매체.
  18. 제15항에 있어서, 상기 디바이스로 하여금 복수의 사용자 인터페이스 객체를 포함하는 사용자 인터페이스를 디스플레이하게 하는 명령어들을 포함하며,
    상기 복수의 사용자 인터페이스 객체는 대응하는 활성화 세기 임계치들을 초과하는 세기를 갖는 누르기 입력들에 응답하고;
    상기 사용자 인터페이스 객체들 중 2개 이상의 객체에 대한 개별 활성화 세기 임계치는 상기 전환 세기 값과 동일한, 컴퓨터 판독가능 저장 매체.
  19. 제15항에 있어서,
    상기 디바이스의 제1 속성은 상기 터치 감응형 표면 상의 상이한 위치들에서 변화하고;
    상기 제1 입력-출력 관계는 상기 터치 감응형 표면 상의 제1 위치 및 제2 위치에서 동일하고;
    상기 제2 입력-출력 관계는 상기 터치 감응형 표면 상의 상기 제1 위치에서 상기 제2 위치에서와 상이한, 컴퓨터 판독가능 저장 매체.
  20. 제15항에 있어서,
    상기 응답은 사전정의된 범위의 값들 내의 제1 값에서 제2 값으로 속성의 현재 값을 변화시키는 것을 포함하는, 컴퓨터 판독가능 저장 매체.
  21. 제15항에 있어서,
    상기 응답은 음량, 밝기, 사용자 인터페이스 객체 간격, 사용자 인터페이스 객체 크기, 사용자 인터페이스 객체 불투명도, 콘텐츠 스크러빙 및 애니메이션 진행 중 하나 이상을 조정하는 것을 포함하는, 컴퓨터 판독가능 저장 매체.
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
  47. 삭제
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 삭제
  54. 삭제
  55. 삭제
  56. 삭제
  57. 삭제
  58. 삭제
  59. 삭제
  60. 삭제
  61. 삭제
  62. 삭제
  63. 삭제
  64. 삭제
  65. 삭제
  66. 삭제
  67. 삭제
  68. 삭제
  69. 삭제
  70. 삭제
  71. 삭제
  72. 삭제
  73. 삭제
  74. 삭제
  75. 삭제
  76. 삭제
  77. 삭제
  78. 삭제
  79. 삭제
  80. 삭제
  81. 삭제
  82. 삭제
  83. 삭제
  84. 삭제
  85. 삭제
  86. 삭제
  87. 삭제
  88. 삭제
  89. 삭제
  90. 삭제
  91. 삭제
  92. 삭제
KR1020157018448A 2012-12-29 2013-11-11 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스 KR101958517B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261747278P 2012-12-29 2012-12-29
US61/747,278 2012-12-29
US201361778363P 2013-03-12 2013-03-12
US61/778,363 2013-03-12
PCT/US2013/069483 WO2014105276A1 (en) 2012-12-29 2013-11-11 Device, method, and graphical user interface for transitioning between touch input to display output relationships

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020177008614A Division KR101958582B1 (ko) 2012-12-29 2013-11-11 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스

Publications (2)

Publication Number Publication Date
KR20150093813A KR20150093813A (ko) 2015-08-18
KR101958517B1 true KR101958517B1 (ko) 2019-03-14

Family

ID=49679632

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020157018448A KR101958517B1 (ko) 2012-12-29 2013-11-11 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
KR1020177008614A KR101958582B1 (ko) 2012-12-29 2013-11-11 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020177008614A KR101958582B1 (ko) 2012-12-29 2013-11-11 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스

Country Status (8)

Country Link
US (3) US9778771B2 (ko)
EP (2) EP3435220B1 (ko)
JP (2) JP6158947B2 (ko)
KR (2) KR101958517B1 (ko)
CN (1) CN104903834B (ko)
AU (2) AU2013368443B2 (ko)
HK (2) HK1212064A1 (ko)
WO (1) WO2014105276A1 (ko)

Families Citing this family (515)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7536565B2 (en) 2005-01-07 2009-05-19 Apple Inc. Techniques for improved playlist processing on media devices
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
KR101606655B1 (ko) 2007-09-24 2016-03-25 애플 인크. 전자 장치 내의 내장형 인증 시스템들
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US10095375B2 (en) 2008-07-09 2018-10-09 Apple Inc. Adding a contact to a home screen
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
USRE49044E1 (en) 2010-06-01 2022-04-19 Apple Inc. Automatic avatar creation
US9542202B2 (en) 2010-10-19 2017-01-10 Apple Inc. Displaying and updating workspaces in a user interface
US9684394B2 (en) 2011-01-10 2017-06-20 Apple Inc. Button functionality
US9158455B2 (en) 2011-07-12 2015-10-13 Apple Inc. Multifunctional environment for image cropping
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US9361942B2 (en) 2011-12-22 2016-06-07 Apple Inc. Playlist configuration and preview
US10990270B2 (en) 2012-05-09 2021-04-27 Apple Inc. Context-specific user interfaces
US9547425B2 (en) 2012-05-09 2017-01-17 Apple Inc. Context-specific user interfaces
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
US10097496B2 (en) 2012-05-09 2018-10-09 Apple Inc. Electronic mail user interface
AU2013259630B2 (en) 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to gesture
DE112013002387T5 (de) 2012-05-09 2015-02-12 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Bereitstellung taktiler Rückkopplung für Operationen in einer Benutzerschnittstelle
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
US9804759B2 (en) 2012-05-09 2017-10-31 Apple Inc. Context-specific user interfaces
US10649622B2 (en) 2012-05-09 2020-05-12 Apple Inc. Electronic message user interface
EP2847660B1 (en) 2012-05-09 2018-11-14 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
AU2013259642A1 (en) 2012-05-09 2014-12-04 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
DE112013002412T5 (de) 2012-05-09 2015-02-19 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche zum Bereitstellen von Rückmeldung für das Wechseln von Aktivierungszuständen eines Benutzerschnittstellenobjekts
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
US10613743B2 (en) 2012-05-09 2020-04-07 Apple Inc. User interface for receiving user input
US10051104B2 (en) 2012-05-14 2018-08-14 Apple Inc. Delivery/read receipts for electronic messaging
US9348607B2 (en) 2012-06-07 2016-05-24 Apple Inc. Quiet hours for notifications
US10354004B2 (en) 2012-06-07 2019-07-16 Apple Inc. Intelligent presentation of documents
US10222975B2 (en) 2012-08-27 2019-03-05 Apple Inc. Single contact scaling gesture
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10691230B2 (en) 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
US10275117B2 (en) 2012-12-29 2019-04-30 Apple Inc. User interface object manipulations in a user interface
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
CN103197889B (zh) * 2013-04-03 2017-02-08 锤子科技（北京）有限公司 一种亮度调整方法、装置及一种电子设备
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US10001817B2 (en) 2013-09-03 2018-06-19 Apple Inc. User interface for manipulating user interface objects with magnetic properties
EP3822759A1 (en) 2013-09-03 2021-05-19 Apple Inc. User interface for manipulating user interface objects
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
US10503388B2 (en) 2013-09-03 2019-12-10 Apple Inc. Crown input for a wearable electronic device
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
US9665206B1 (en) 2013-09-18 2017-05-30 Apple Inc. Dynamic user interface adaptable to multiple input tools
US9405759B2 (en) * 2013-11-20 2016-08-02 Lenovo (Beijing) Co., Ltd. Information processing method and electronic device
US9652148B2 (en) * 2014-01-06 2017-05-16 Sap Se Soft keyboard with keypress markers
US10482461B2 (en) 2014-05-29 2019-11-19 Apple Inc. User interface for payments
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
AU2015100490C4 (en) 2014-05-30 2017-04-13 Apple Inc. Continuity
JP6328797B2 (ja) 2014-05-30 2018-05-23 アップル インコーポレイテッド １つのデバイスの使用から別のデバイスの使用への移行
US10789642B2 (en) 2014-05-30 2020-09-29 Apple Inc. Family accounts for an online content storage sharing service
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US9766702B2 (en) 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
EP3882753A1 (en) 2014-06-24 2021-09-22 Apple Inc. Application menu for video system
CN111104040B (zh) 2014-06-24 2023-10-24 苹果公司 输入设备和用户界面交互
WO2015200228A1 (en) 2014-06-24 2015-12-30 Apple Inc. Character recognition on a computing device
CN106415475A (zh) 2014-06-24 2017-02-15 苹果公司 用于在用户界面中导航的列界面
EP4068067A1 (en) 2014-06-24 2022-10-05 Apple Inc. Music now playing user interface
CN106462340B (zh) 2014-06-27 2019-09-13 苹果公司 尺寸减小的用户界面
EP3195098A2 (en) 2014-07-21 2017-07-26 Apple Inc. Remote user interface
EP3158425A1 (en) 2014-08-02 2017-04-26 Apple Inc. Context-specific user interfaces
CN106605201B (zh) 2014-08-06 2021-11-23 苹果公司 用于电池管理的减小尺寸的用户界面
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
USD795916S1 (en) 2014-08-19 2017-08-29 Google Inc. Display screen with animated graphical user interface
WO2016032806A1 (en) 2014-08-26 2016-03-03 Apple Inc. User interface for limiting notifications and alerts
CN112199000A (zh) 2014-09-02 2021-01-08 苹果公司 多维对象重排
US10073590B2 (en) 2014-09-02 2018-09-11 Apple Inc. Reduced size user interface
EP4209872A1 (en) 2014-09-02 2023-07-12 Apple Inc. Phone user interface
US10066959B2 (en) 2014-09-02 2018-09-04 Apple Inc. User interactions for a mapping application
WO2016036416A1 (en) 2014-09-02 2016-03-10 Apple Inc. Button functionality
WO2016036509A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic mail user interface
KR102016160B1 (ko) 2014-09-02 2019-08-29 애플 인크. 경고를 관리하기 위한 축소된 크기의 인터페이스
US10254948B2 (en) 2014-09-02 2019-04-09 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
CN110072131A (zh) 2014-09-02 2019-07-30 苹果公司 音乐用户界面
DE112015002326B4 (de) 2014-09-02 2021-09-23 Apple Inc. Monitor für physische Aktivität und Training
USD762693S1 (en) 2014-09-03 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
USD788788S1 (en) 2014-11-18 2017-06-06 Google Inc. Display screen with animated graphical user interface
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
DE102014019040B4 (de) 2014-12-18 2021-01-14 Audi Ag Verfahren zum Betreiben einer Bedienvorrichtung eines Kraftfahrzeugs bei einer Mehrfingerbedienung
US9875346B2 (en) 2015-02-06 2018-01-23 Apple Inc. Setting and terminating restricted mode operation on electronic devices
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
USD765098S1 (en) 2015-03-06 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
JP2018508076A (ja) 2015-03-08 2018-03-22 アップル インコーポレイテッド 回転可能入力機構を用いたユーザインタフェース
WO2016144977A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10244175B2 (en) 2015-03-09 2019-03-26 Apple Inc. Automatic cropping of video content
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US10359849B2 (en) 2015-04-14 2019-07-23 Jose Antonio DELMAR LISSA Portable communication device for transmitting touch-generated messages
CN111913606A (zh) 2015-04-20 2020-11-10 株式会社和冠 传感器控制器、主机处理器、通信方法和系统
CN105094637B (zh) * 2015-06-02 2018-03-23 努比亚技术有限公司 一种多行程控制方法和系统
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US10037216B2 (en) 2015-06-07 2018-07-31 Apple Inc. Intelligent disabling of browser plugins
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
DK179116B1 (en) * 2015-06-07 2017-11-06 Apple Inc Devices and Methods for Navigating Between User Interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) * 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
AU2016231472B1 (en) * 2015-06-07 2016-11-10 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9652125B2 (en) 2015-06-18 2017-05-16 Apple Inc. Device, method, and graphical user interface for navigating media content
USD848458S1 (en) * 2015-08-03 2019-05-14 Google Llc Display screen with animated graphical user interface
USD849027S1 (en) * 2015-08-03 2019-05-21 Google Llc Display screen with animated graphical user interface
US9965445B2 (en) 2015-08-06 2018-05-08 FiftyThree, Inc. Systems and methods for gesture-based formatting
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
CN105162974B (zh) * 2015-08-19 2016-09-07 努比亚技术有限公司 一种动态显示联系人属性的装置和方法
EP4321088A3 (en) 2015-08-20 2024-04-24 Apple Inc. Exercise-based watch face
JP2017068350A (ja) * 2015-09-28 2017-04-06 株式会社東海理化電機製作所 操作入力装置
US20170090606A1 (en) * 2015-09-30 2017-03-30 Polycom, Inc. Multi-finger touch
USD820861S1 (en) * 2015-11-30 2018-06-19 Uber Technologies, Inc. Display screen with graphical user interface for enabling color selection
US10296088B2 (en) * 2016-01-26 2019-05-21 Futurewei Technologies, Inc. Haptic correlated graphic effects
US10154316B2 (en) 2016-02-26 2018-12-11 Apple Inc. Motion-based configuration of a multi-user device
US11150798B2 (en) 2016-03-28 2021-10-19 Apple Inc. Multifunction device control of another electronic device
US20170295276A1 (en) 2016-04-11 2017-10-12 Futurewei Technologies, Inc. Method for dynamically changing user interface elements
USD796542S1 (en) * 2016-04-20 2017-09-05 E*Trade Financial Corporation Display screen with a graphical user interface
USD820849S1 (en) * 2016-05-16 2018-06-19 Google Llc Display screen or portion thereof with a graphical user interface for messaging
USD821409S1 (en) * 2016-05-16 2018-06-26 Google Llc Display screen or portion thereof with a graphical user interface for messaging
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
KR102561736B1 (ko) * 2016-06-01 2023-08-02 삼성전자주식회사 터치 디스플레이를 가지는 전자 장치 및 이의 지문을 이용한 기능 실행 방법
US10637986B2 (en) 2016-06-10 2020-04-28 Apple Inc. Displaying and updating a set of application views
US20170357427A1 (en) 2016-06-10 2017-12-14 Apple Inc. Context-specific user interfaces
US11033708B2 (en) 2016-06-10 2021-06-15 Apple Inc. Breathing sequence user interface
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
US10621581B2 (en) 2016-06-11 2020-04-14 Apple Inc. User interface for transactions
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
US20170357411A1 (en) 2016-06-11 2017-12-14 Apple Inc. User interface for initiating a telephone call
DK179329B1 (en) 2016-06-12 2018-05-07 Apple Inc Handwriting keyboard for monitors
DK201670596A1 (en) 2016-06-12 2018-02-19 Apple Inc Digital touch on live video
DK179034B1 (en) 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
US10983688B2 (en) 2016-06-12 2021-04-20 Apple Inc. Content scrubber bar with real-world time indications
CN108829325B (zh) * 2016-06-12 2021-01-08 苹果公司 用于动态地调整音频输出的呈现的设备、方法和图形用户界面
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
WO2017218069A1 (en) * 2016-06-12 2017-12-21 Apple Inc. Devices, methods, and graphical user interfaces for processing intensity information associated with touch inputs
DK201670609A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
AU2017286129B2 (en) 2016-06-12 2018-12-20 Apple Inc. User interface for managing controllable external devices
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
CN114707984A (zh) 2016-06-12 2022-07-05 苹果公司 用于交易的用户界面
WO2017218195A1 (en) 2016-06-12 2017-12-21 Apple Inc. Wrist-based tactile time feedback for non-sighted users
WO2018004967A1 (en) 2016-06-12 2018-01-04 Apple Inc. Digital touch on live video
WO2017218194A1 (en) 2016-06-12 2017-12-21 Apple Inc. User interfaces for retrieving contextually relevant media content
KR102535793B1 (ko) 2016-06-15 2023-05-23 삼성전자주식회사 터치 처리 방법 및 이를 지원하는 전자 장치
US20180068313A1 (en) 2016-09-06 2018-03-08 Apple Inc. User interfaces for stored-value accounts
US10466891B2 (en) 2016-09-12 2019-11-05 Apple Inc. Special lock mode user interface
US11782531B2 (en) 2016-09-19 2023-10-10 Apple Inc. Gesture detection, list navigation, and item selection using a crown and sensors
WO2018057268A1 (en) 2016-09-23 2018-03-29 Apple Inc. Image data for enhanced user interactions
CN109691074A (zh) 2016-09-23 2019-04-26 苹果公司 用于增强的用户交互的图像数据
KR20230153524A (ko) 2016-09-23 2023-11-06 애플 인크. 아바타 생성 및 편집
US10496808B2 (en) 2016-10-25 2019-12-03 Apple Inc. User interface for managing access to credentials for use in an operation
EP4044613A1 (en) 2016-10-26 2022-08-17 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
GB2558912B (en) 2017-01-19 2020-08-19 Touchnetix Ltd Sensing apparatus
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
US20180329586A1 (en) 2017-05-15 2018-11-15 Apple Inc. Displaying a set of application views
US10845955B2 (en) 2017-05-15 2020-11-24 Apple Inc. Displaying a scrollable list of affordances associated with physical activities
KR20230144661A (ko) 2017-05-16 2023-10-16 애플 인크. 이모지 레코딩 및 전송
CN110490093B (zh) 2017-05-16 2020-10-16 苹果公司 表情符号录制和发送
US10796294B2 (en) 2017-05-16 2020-10-06 Apple Inc. User interfaces for peer-to-peer transfers
CN109688442B (zh) 2017-05-16 2021-06-04 苹果公司 用于家庭媒体控制的方法和界面
EP3952317A1 (en) 2017-05-16 2022-02-09 Apple Inc. Methods and interfaces for home media control
US11928483B2 (en) 2017-05-16 2024-03-12 Apple Inc. Devices, methods, and graphical user interfaces for seamless transition of user interface behaviors
KR20230117638A (ko) 2017-05-16 2023-08-08 애플 인크. 향상된 사용자 상호작용들을 위한 이미지 데이터
CN110520901B (zh) 2017-05-16 2021-01-05 苹果公司 表情符号录制和发送
CN110651282B (zh) 2017-05-16 2023-08-25 苹果公司 商业即时消息界面
WO2018213133A1 (en) 2017-05-16 2018-11-22 Apple Inc. User interface for a flashlight mode on an electronic device
EP3901755A1 (en) 2017-05-16 2021-10-27 Apple Inc. Voice communication method
US10511707B2 (en) 2017-05-16 2019-12-17 Apple Inc. Voice communication method
EP3586481B1 (en) 2017-05-16 2024-01-03 Apple Inc. User interfaces for peer-to-peer transfers
DE202017002874U1 (de) 2017-05-31 2017-09-07 Apple Inc. Benutzerschnittstelle für Kameraeffekte
DK180859B1 (en) * 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
KR102246830B1 (ko) 2017-06-04 2021-05-03 애플 인크. 다중-디바이스 충전 사용자 인터페이스
AU2018279787B2 (en) * 2017-06-04 2019-12-19 Apple Inc. User interface camera effects
US10558278B2 (en) 2017-07-11 2020-02-11 Apple Inc. Interacting with an electronic device through physical movement
US10395107B2 (en) * 2017-09-05 2019-08-27 Koto Co., Ltd. Authentication method, computer system, server computer and authentication program
KR102389678B1 (ko) 2017-09-09 2022-04-21 애플 인크. 생체측정 인증의 구현
WO2018226265A1 (en) 2017-09-09 2018-12-13 Apple Inc. Implementation of biometric authentication
EP3745303B1 (en) 2017-09-09 2023-06-07 Apple Inc. Implementation of biometric authentication with error condition detection and display of an error indication
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
EP3598341B1 (en) 2017-09-09 2022-11-23 Apple Inc. Implementation of biometric authentication using a viewfinder
US10372298B2 (en) 2017-09-29 2019-08-06 Apple Inc. User interface for multi-user communication session
US11079995B1 (en) 2017-09-30 2021-08-03 Apple Inc. User interfaces for devices with multiple displays
USD872120S1 (en) * 2017-10-26 2020-01-07 Herdx, Inc. Flat soft touch control panel user interface
US20190228847A1 (en) 2018-01-22 2019-07-25 Apple Inc. Systems and methods for displaying aggregated health records
CN111630827A (zh) 2018-01-22 2020-09-04 苹果公司 基于数据的视觉表示的具有认证的安全登录
KR102448223B1 (ko) 2018-02-09 2022-09-29 애플 인크. 그래픽 사용자 인터페이스를 위한 미디어 캡처 잠금 어포던스
DK180241B1 (en) 2018-03-12 2020-09-08 Apple Inc User interfaces for health monitoring
EP3596734A1 (en) 2018-03-12 2020-01-22 Apple Inc. User interfaces for health monitoring
US10813169B2 (en) 2018-03-22 2020-10-20 GoTenna, Inc. Mesh network deployment kit
USD881933S1 (en) * 2018-04-23 2020-04-21 Ollie Sports LLC Display screen or portion thereof with animated graphical user interface
USD881932S1 (en) * 2018-04-23 2020-04-21 Ollie Sports LLC Display screen or portion thereof with graphical user interface
CN110531842A (zh) 2018-05-07 2019-12-03 苹果公司 显示与身体活动相关联的用户界面
DK180078B1 (en) 2018-05-07 2020-03-31 Apple Inc. USER INTERFACE FOR AVATAR CREATION
CN110457091A (zh) 2018-05-07 2019-11-15 苹果公司 多参与者实时通信用户界面
CN113535306B (zh) 2018-05-07 2023-04-07 苹果公司 头像创建用户界面
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
US10955956B2 (en) 2018-05-07 2021-03-23 Apple Inc. Devices, methods, and graphical user interfaces for interaction with an intensity-sensitive input region
KR102583214B1 (ko) 2018-05-07 2023-09-27 애플 인크. 아바타 생성 사용자 인터페이스
CN110456971B (zh) 2018-05-07 2021-11-02 苹果公司 用于共享上下文相关的媒体内容的用户界面
JP7073238B2 (ja) 2018-05-07 2022-05-23 アップル インコーポレイテッド クリエイティブカメラ
DK201870353A1 (en) 2018-05-07 2019-12-04 Apple Inc. USER INTERFACES FOR RECOMMENDING AND CONSUMING CONTENT ON AN ELECTRONIC DEVICE
EP3665558B1 (en) 2018-05-07 2022-03-02 Apple Inc. User interfaces for sharing contextually relevant media content
EP4249088A3 (en) 2018-05-07 2024-03-20 Apple Inc. Displaying user interfaces associated with physical activities
KR102265402B1 (ko) 2018-05-07 2021-06-16 애플 인크. 다중 참가자 라이브 통신 사용자 인터페이스
US10904628B2 (en) 2018-05-07 2021-01-26 Apple Inc. User interfaces for viewing live video feeds and recorded video
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US11317833B2 (en) 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
EP3567457B1 (en) 2018-05-07 2021-07-14 Apple Inc. Avatar creation user interface
US10872024B2 (en) 2018-05-08 2020-12-22 Apple Inc. User interfaces for controlling or presenting device usage on an electronic device
DK180081B1 (en) 2018-06-01 2020-04-01 Apple Inc. Access to system user interfaces on an electronic device
WO2019232428A1 (en) 2018-06-01 2019-12-05 Apple Inc. Accessing system user interfaces on an electronic device
US11922006B2 (en) 2018-06-03 2024-03-05 Apple Inc. Media control for screensavers on an electronic device
DK201870354A1 (en) 2018-06-03 2019-12-20 Apple Inc. SETUP PROCEDURES FOR AN ELECTRONIC DEVICE
DK201870358A1 (en) 2018-06-03 2020-01-03 Apple Inc. ACCELERATED TASK PERFORMANCE
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
US10887193B2 (en) 2018-06-03 2021-01-05 Apple Inc. User interfaces for updating network connection settings of external devices
US10776006B2 (en) 2018-06-03 2020-09-15 Apple Inc. Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
US11669243B2 (en) 2018-06-03 2023-06-06 Apple Inc. Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
US11100498B2 (en) 2018-06-03 2021-08-24 Apple Inc. User interfaces for transfer accounts
AU2019100576C4 (en) 2018-06-03 2020-01-30 Apple Inc. Accelerated task performance
US10909524B2 (en) 2018-06-03 2021-02-02 Apple Inc. User interfaces for transfer accounts
US11567632B2 (en) 2018-07-03 2023-01-31 Apple Inc. Systems and methods for exploring a geographic region
US11422765B2 (en) 2018-07-10 2022-08-23 Apple Inc. Cross device interactions
WO2020055613A1 (en) 2018-09-11 2020-03-19 Apple Inc. User interfaces for simulated depth effects
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10999158B2 (en) 2018-09-11 2021-05-04 Apple Inc. User interfaces for controlling or presenting information about multiple cellular identifiers on an electronic device
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
DK179888B1 (en) 2018-09-11 2019-08-27 Apple Inc. CONTENT-BASED TACTICAL OUTPUTS
US11340962B2 (en) 2018-09-11 2022-05-24 Apple Inc. Multiple notification user interface
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US10976989B2 (en) 2018-09-26 2021-04-13 Apple Inc. Spatial management of audio
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11422692B2 (en) 2018-09-28 2022-08-23 Apple Inc. System and method of controlling devices using motion gestures
US10969941B2 (en) 2018-09-28 2021-04-06 Apple Inc. Underwater user interface
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US11635928B2 (en) 2019-01-04 2023-04-25 Apple Inc. User interfaces for content streaming
US11107261B2 (en) 2019-01-18 2021-08-31 Apple Inc. Virtual avatar animation based on facial feature movement
US11822943B2 (en) 2019-01-18 2023-11-21 Apple Inc. User interfaces for presenting information about and facilitating application functions
WO2020190485A1 (en) 2019-03-18 2020-09-24 Apple Inc. User interfaces for subscription applications
US11381674B2 (en) 2019-03-18 2022-07-05 Apple Inc. User interfaces for subscription applications
CN114690987B (zh) 2019-03-18 2023-04-07 苹果公司 用于订阅应用程序的用户界面
CN114115676A (zh) 2019-03-24 2022-03-01 苹果公司 包括内容项的可选表示的用户界面
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
CN113940088A (zh) 2019-03-24 2022-01-14 苹果公司 用于查看和访问电子设备上的内容的用户界面
US11328352B2 (en) 2019-03-24 2022-05-10 Apple Inc. User interfaces for managing an account
CN113906419A (zh) 2019-03-24 2022-01-07 苹果公司 用于媒体浏览应用程序的用户界面
DK180359B1 (en) 2019-04-15 2021-02-03 Apple Inc Accelerated scrolling and selection
AU2020223752B2 (en) 2019-04-15 2021-06-24 Apple Inc. Accelerated scrolling and selection
CN114173288A (zh) 2019-04-17 2022-03-11 苹果公司 用于跟踪和查找物品的用户界面
US20200341610A1 (en) 2019-04-28 2020-10-29 Apple Inc. Presenting user interfaces that update in response to detection of a hovering object
EP3963433A4 (en) 2019-04-28 2023-01-25 Apple Inc. PRODUCTION OF TOUCH OUTPUT SEQUENCES ASSOCIATED WITH AN OBJECT
WO2020222988A1 (en) 2019-04-30 2020-11-05 Apple Inc. Utilizing context information with an electronic device
DK201970535A1 (en) 2019-05-06 2020-12-21 Apple Inc Media browsing user interface with intelligently selected representative media items
EP3827323B1 (en) 2019-05-06 2023-12-13 Apple Inc. Restricted operation of an electronic device
CN111901479B (zh) 2019-05-06 2021-05-25 苹果公司 一种用于显示相机用户界面的方法、电子设备和非暂态计算机可读存储介质
US11863700B2 (en) 2019-05-06 2024-01-02 Apple Inc. Providing user interfaces based on use contexts and managing playback of media
US20220197493A1 (en) 2019-05-06 2022-06-23 Apple Inc. Handwriting entry on an electronic device
DK201970532A1 (en) 2019-05-06 2021-05-03 Apple Inc Activity trends and workouts
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
WO2020227273A1 (en) 2019-05-06 2020-11-12 Apple Inc. Media browsing user interface with intelligently selected representative media items
WO2020226785A1 (en) 2019-05-06 2020-11-12 Apple Inc. Avatar integration with multiple applications
US10852915B1 (en) 2019-05-06 2020-12-01 Apple Inc. User interfaces for sharing content with other electronic devices
CN113190303A (zh) 2019-05-06 2021-07-30 苹果公司 活动趋势和健身
US11646591B2 (en) 2019-05-09 2023-05-09 Apple Inc. Indication for protective charging mode
US20200379716A1 (en) 2019-05-31 2020-12-03 Apple Inc. Audio media user interface
CN111399714A (zh) 2019-05-31 2020-07-10 苹果公司 用户活动快捷方式建议
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
US11363382B2 (en) 2019-05-31 2022-06-14 Apple Inc. Methods and user interfaces for audio synchronization
EP3977245A1 (en) 2019-05-31 2022-04-06 Apple Inc. User interfaces for a podcast browsing and playback application
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
KR102376183B1 (ko) 2019-05-31 2022-03-21 애플 인크. 오디오 공유를 위한 방법들 및 사용자 인터페이스들
EP3948517A1 (en) 2019-05-31 2022-02-09 Apple Inc. User interfaces for audio media control
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11379113B2 (en) 2019-06-01 2022-07-05 Apple Inc. Techniques for selecting text
US10698701B1 (en) 2019-06-01 2020-06-30 Apple Inc. User interface for accessing an account
WO2020247283A1 (en) 2019-06-01 2020-12-10 Apple Inc. User interfaces for cycle tracking
CN114327734A (zh) 2019-06-01 2022-04-12 苹果公司 用于管理音频暴露的用户界面
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11797113B2 (en) 2019-06-01 2023-10-24 Apple Inc. Devices, methods, and graphical user interfaces for interaction with a control
JP7297940B2 (ja) 2019-06-01 2023-06-26 アップル インコーポレイテッド マルチモードの活動追跡ユーザインタフェース
US11675563B2 (en) 2019-06-01 2023-06-13 Apple Inc. User interfaces for content applications
US11829591B2 (en) 2019-06-01 2023-11-28 Apple Inc. User interface for managing input techniques
US11074408B2 (en) 2019-06-01 2021-07-27 Apple Inc. Mail application features
US11556631B2 (en) 2019-06-01 2023-01-17 Apple Inc. User interfaces for managing user account passwords
WO2020247281A1 (en) 2019-06-01 2020-12-10 Apple Inc. User interfaces for managing contacts on another electronic device
WO2020247049A1 (en) 2019-06-01 2020-12-10 Apple Inc. User interfaces for monitoring noise exposure levels
US11144176B2 (en) 2019-06-01 2021-10-12 Apple Inc. User interfaces for electronic voice communications
US11481205B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for managing subscriptions
US11481100B2 (en) 2019-06-25 2022-10-25 Apple Inc. User interfaces for a compass application
US20210020316A1 (en) 2019-07-17 2021-01-21 Apple Inc. Health event logging and coaching user interfaces
CN114706505A (zh) 2019-09-09 2022-07-05 苹果公司 调查研究用户界面
AU2020309093B2 (en) 2019-09-09 2021-07-22 Apple Inc. Techniques for managing display usage
US10878782B1 (en) 2019-09-09 2020-12-29 Apple Inc. Techniques for managing display usage
WO2021061435A1 (en) 2019-09-27 2021-04-01 Apple Inc. User interfaces for customizing graphical objects
AU2020356269B2 (en) 2019-09-29 2023-04-06 Apple Inc. Account management user interfaces
US11169830B2 (en) 2019-09-29 2021-11-09 Apple Inc. Account management user interfaces
USD966286S1 (en) * 2019-10-31 2022-10-11 LINE Plus Corporation Display panel with a graphical user interface
CN114730580A (zh) 2019-11-11 2022-07-08 苹果公司 基于时间段的精选播放列表的用户界面
EP4221279A1 (en) 2020-01-27 2023-08-02 Apple Inc. Mobile key enrollment and use
US11643048B2 (en) 2020-01-27 2023-05-09 Apple Inc. Mobile key enrollment and use
EP4100824A1 (en) 2020-02-03 2022-12-14 Apple Inc. Cursor integration with a touch screen user interface
JP7101220B2 (ja) 2020-02-14 2022-07-14 アップル インコーポレイテッド トレーニングコンテンツのユーザインタフェース
DK202070616A1 (en) 2020-02-14 2022-01-14 Apple Inc User interfaces for workout content
US11150758B2 (en) * 2020-03-13 2021-10-19 Wacom Co., Ltd. Pressure activated accurate pointing
DE102020107752A1 (de) * 2020-03-20 2021-09-23 Daimler Ag Verfahren und Vorrichtung zur Auswahl von auf einem Bildschirm angezeigten Eingabefeldern und/oder zur Aktivierung von auf dem Bildschirm in einem ausgewählten Eingabefeld angezeigten Eingabeinhalten durch manuelle Eingaben
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
AU2020239747B2 (en) 2020-04-10 2021-11-04 Apple Inc. User interfaces for enabling an activity
JP7100224B2 (ja) 2020-05-11 2022-07-13 アップル インコーポレイテッド 時間に関係するユーザインタフェース
AU2020233622B2 (en) 2020-05-11 2022-03-10 Apple Inc. System, method and user interface for supporting scheduled mode changes on electronic devices
EP4283452A3 (en) 2020-05-11 2024-02-28 Apple Inc. User interface for accessory control
US11921998B2 (en) 2020-05-11 2024-03-05 Apple Inc. Editing features of an avatar
EP4133371A1 (en) 2020-05-11 2023-02-15 Apple Inc. User interfaces for managing user interface sharing
US11656758B2 (en) 2020-05-11 2023-05-23 Apple Inc. Interacting with handwritten content on an electronic device
US20210356288A1 (en) 2020-05-15 2021-11-18 Apple Inc. User interfaces for providing navigation directions
CN115667850B (zh) 2020-05-18 2023-11-10 苹果公司 用于报告事件的用户界面
US11526262B2 (en) 2020-05-29 2022-12-13 Apple Inc. Sharing and using passes or accounts
US20210374744A1 (en) 2020-05-29 2021-12-02 Apple Inc. Configuring an account for a second user identity
AU2020239717B2 (en) 2020-06-01 2022-06-16 Apple Inc. User interfaces for managing media
EP4158460A1 (en) 2020-06-01 2023-04-05 Apple Inc. User interfaces for transitioning between selection modes
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
CN115185430B (zh) 2020-06-01 2023-05-26 苹果公司 用于管理媒体的用户界面
CN115769280A (zh) 2020-06-02 2023-03-07 苹果公司 用于跟踪物理活动事件的用户界面
KR102614341B1 (ko) 2020-06-02 2023-12-19 애플 인크. 건강 애플리케이션들을 위한 사용자 인터페이스들
CN114978795B (zh) 2020-06-03 2023-12-08 苹果公司 相机和访问者用户界面
US11743213B2 (en) 2020-06-09 2023-08-29 Apple Inc. User interfaces for messages
WO2021252979A2 (en) 2020-06-11 2021-12-16 Apple Inc. User interfaces for customized navigation routes
US11788851B2 (en) 2020-06-11 2023-10-17 Apple Inc. User interfaces for customized navigation routes
WO2021258014A1 (en) 2020-06-19 2021-12-23 Apple Inc. User interfaces for presenting indications of incoming calls
US11609640B2 (en) 2020-06-21 2023-03-21 Apple Inc. Emoji user interfaces
US11816194B2 (en) 2020-06-21 2023-11-14 Apple Inc. User interfaces for managing secure operations
US11601419B2 (en) 2020-06-21 2023-03-07 Apple Inc. User interfaces for accessing an account
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
CN116235137A (zh) 2020-08-11 2023-06-06 苹果公司 用于管理健康数据的用户界面
WO2022036212A1 (en) 2020-08-14 2022-02-17 Apple Inc. Audio media playback user interface
US11698710B2 (en) 2020-08-31 2023-07-11 Apple Inc. User interfaces for logging user activities
US11409410B2 (en) 2020-09-14 2022-08-09 Apple Inc. User input interfaces
WO2022055519A1 (en) 2020-09-14 2022-03-17 Apple Inc. User interfaces for location-related communications
US11670144B2 (en) 2020-09-14 2023-06-06 Apple Inc. User interfaces for indicating distance
AU2021349382B2 (en) 2020-09-25 2023-06-29 Apple Inc. Methods for adjusting and/or controlling immersion associated with user interfaces
CN116324698A (zh) 2020-09-25 2023-06-23 苹果公司 用于控制插入标记的用户界面
CN116261708A (zh) 2020-09-25 2023-06-13 苹果公司 用于跟踪和查找物品的用户界面
CN116438505A (zh) 2020-09-25 2023-07-14 苹果公司 用于操纵环境中的对象的方法
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
CN116171417A (zh) 2020-09-25 2023-05-26 苹果公司 与远程输入设备相关联的用户界面
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
KR20230050466A (ko) 2020-09-25 2023-04-14 애플 인크. 사용자 인터페이스들을 내비게이팅하기 위한 방법들
US20220116399A1 (en) 2020-10-12 2022-04-14 Apple Inc. Media service configuration
US20220129144A1 (en) 2020-10-26 2022-04-28 Apple Inc. Methods and user interfaces for handling user requests
US20220135001A1 (en) 2020-11-05 2022-05-05 Apple Inc. Mobile key user interfaces
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
EP4260339A1 (en) 2021-01-14 2023-10-18 Apple Inc. User interfaces for monitoring health
WO2022155609A1 (en) 2021-01-18 2022-07-21 Apple Inc. Configuring accessories
WO2022159899A1 (en) 2021-01-25 2022-07-28 Apple Inc. Implementation of biometric authentication
EP4285601A1 (en) 2021-01-29 2023-12-06 Apple Inc. User interfaces for indicating and/or controlling content item playback formats
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
CN117597682A (zh) 2021-01-29 2024-02-23 苹果公司 用于共享内容项部分的用户界面和相关联系统及方法
WO2022165147A1 (en) 2021-01-31 2022-08-04 Apple Inc. User interfaces for wide angle video conference
US11868461B2 (en) 2021-02-01 2024-01-09 Apple Inc. User interfaces for sharing an account with another user identity
US20220245618A1 (en) 2021-02-01 2022-08-04 Apple Inc. Displaying a representation of a card with a layered structure
US20220253136A1 (en) * 2021-02-11 2022-08-11 Apple Inc. Methods for presenting and sharing content in an environment
US20220289029A1 (en) 2021-03-14 2022-09-15 Apple Inc. User interfaces with variable appearances
US20220345565A1 (en) 2021-04-15 2022-10-27 Apple Inc. Interfaces and devices for dynamically-available media playback
US11669194B2 (en) 2021-04-19 2023-06-06 Apple Inc. Navigating user interfaces with multiple navigation modes
KR20240018701A (ko) 2021-04-19 2024-02-13 애플 인크. 미디어 내의 시각적 콘텐츠를 관리하기 위한 사용자 인터페이스
WO2022225942A1 (en) 2021-04-19 2022-10-27 Apple Inc. User interfaces for an electronic key
WO2022232159A1 (en) 2021-04-27 2022-11-03 Apple Inc. Techniques for managing display usage
EP4109884A1 (en) 2021-04-30 2022-12-28 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
EP4320845A1 (en) 2021-05-15 2024-02-14 Apple Inc. Real-time communication user interface
EP4323992A1 (en) 2021-05-15 2024-02-21 Apple Inc. User interfaces for group workouts
WO2022245668A1 (en) 2021-05-15 2022-11-24 Apple Inc. User interfaces for managing accessories
WO2022245665A1 (en) 2021-05-15 2022-11-24 Apple Inc. Shared-content session user interfaces
EP4327559A1 (en) 2021-05-15 2024-02-28 Apple Inc. User interfaces and associated systems and processes for shared playback of content items
WO2022246411A2 (en) 2021-05-17 2022-11-24 Apple Inc. User interfaces for entity status
CN117581188A (zh) 2021-05-17 2024-02-20 苹果公司 与笔记用户界面交互
WO2022245787A1 (en) 2021-05-18 2022-11-24 Apple Inc. Adaptive video conference user interfaces
WO2022246113A2 (en) 2021-05-19 2022-11-24 Apple Inc. Methods and user interfaces for auditory features
WO2022246060A1 (en) 2021-05-19 2022-11-24 Apple Inc. Navigating user interfaces using hand gestures
KR20230169370A (ko) 2021-05-21 2023-12-15 애플 인크. 아바타 스티커 편집기 사용자 인터페이스들
US20220374106A1 (en) 2021-05-21 2022-11-24 Apple Inc. Methods and user interfaces for tracking execution times of certain functions
WO2022251865A1 (en) 2021-05-26 2022-12-01 Apple Inc. User interfaces for customized navigation routes
WO2022256200A1 (en) 2021-06-01 2022-12-08 Apple Inc. User interfaces for managing media styles
WO2022256195A1 (en) 2021-06-01 2022-12-08 Apple Inc. Aggregated content item user interfaces
US11893212B2 (en) 2021-06-06 2024-02-06 Apple Inc. User interfaces for managing application widgets
WO2022260996A2 (en) 2021-06-06 2022-12-15 Apple Inc. Methods and user interfaces for voice-based user profile management
US11570129B2 (en) 2021-06-06 2023-01-31 Apple Inc. User interfaces for messaging conversations
WO2022260876A1 (en) 2021-06-06 2022-12-15 Apple Inc. User interfaces for audio routing
EP4352737A1 (en) 2021-06-06 2024-04-17 Apple Inc. User interfaces for shared health-related data
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
WO2022260851A2 (en) 2021-06-06 2022-12-15 Apple Inc. Digital identification credential user interfaces
WO2022261606A1 (en) 2021-06-06 2022-12-15 Apple Inc. User interfaces for messaging conversations
WO2022260861A1 (en) 2021-06-06 2022-12-15 Apple Inc. User interfaces for managing locks
US20230084751A1 (en) 2021-06-06 2023-03-16 Apple Inc. User interfaces for managing passwords
EP4330975A1 (en) 2021-06-06 2024-03-06 Apple Inc. Walking steadiness user interfaces
WO2022260857A1 (en) 2021-06-06 2022-12-15 Apple Inc. User interfaces related to clinical data
US20220390248A1 (en) 2021-06-07 2022-12-08 Apple Inc. User interfaces for maps and navigation
WO2022261621A2 (en) 2021-06-07 2022-12-15 Apple Inc. User interfaces for maps and navigation
EP4141636A1 (en) 2021-08-31 2023-03-01 Apple Inc. Methods and user interfaces for initiating communications
US20230328171A1 (en) 2021-08-31 2023-10-12 Apple Inc. Methods and user interfaces for initiating communications
WO2023039234A1 (en) 2021-09-13 2023-03-16 Apple Inc. Low-bandwidth and emergency communication user interfaces
US11775115B2 (en) 2021-09-13 2023-10-03 Apple Inc. Methods, systems and devices for dynamically assigning button functionality based on orientation
WO2023044044A1 (en) 2021-09-20 2023-03-23 Apple Inc. Requests to add assets to an asset account
EP4282132A1 (en) 2021-09-20 2023-11-29 Apple Inc. User interfaces for digital identification
EP4324193A1 (en) 2021-09-24 2024-02-21 Apple Inc. Wide angle video conference
WO2023049023A1 (en) 2021-09-24 2023-03-30 Apple Inc. Media controls user interface
WO2023064580A1 (en) 2021-10-14 2023-04-20 Apple Inc. Camera user interface with recording space management
WO2023086862A1 (en) 2021-11-10 2023-05-19 Apple Inc. Methods, systems and devices for remotely managing one or more electronic devices
WO2023091627A1 (en) 2021-11-19 2023-05-25 Apple Inc. Systems and methods for managing captions
WO2023141212A1 (en) 2022-01-24 2023-07-27 Apple Inc. User interfaces for indicating time
WO2023146832A1 (en) 2022-01-25 2023-08-03 Apple Inc. Methods and user interfaces for account recovery
WO2023146734A1 (en) 2022-01-25 2023-08-03 Apple Inc. Managing information on a computer system
US20230319224A1 (en) 2022-03-10 2023-10-05 Apple Inc. User interfaces for managing visual content in a media representation
WO2023196231A1 (en) 2022-04-04 2023-10-12 Apple Inc. User interfaces for camera sharing
WO2023196350A1 (en) 2022-04-05 2023-10-12 Apple Inc. User interfaces for initiating transactions
US20230342009A1 (en) 2022-04-21 2023-10-26 Apple Inc. User interfaces for sharing locations of findable items
WO2023211790A1 (en) 2022-04-25 2023-11-02 Apple Inc. User interfaces for facilitating operations
US11837067B2 (en) 2022-04-25 2023-12-05 Apple Inc. User interfaces for facilitating operations
EP4298777A1 (en) 2022-05-10 2024-01-03 Google LLC Upgrading legacy devices for interoperability with a matter network
WO2023219974A2 (en) 2022-05-10 2023-11-16 Apple Inc. Low power display state
US20230370507A1 (en) 2022-05-10 2023-11-16 Apple Inc. User interfaces for managing shared-content sessions
US20230376168A1 (en) 2022-05-10 2023-11-23 Apple Inc. User interfaces for managing media libraries
US20240046031A1 (en) 2022-05-11 2024-02-08 Apple Inc. Account management
WO2023224863A1 (en) 2022-05-16 2023-11-23 Apple Inc. Methods and user interfaces for monitoring sound reduction
WO2023225012A1 (en) 2022-05-17 2023-11-23 Apple Inc. User interfaces for device controls
WO2023225131A2 (en) 2022-05-17 2023-11-23 Apple Inc. User interfaces for detecting objects
US20230375359A1 (en) 2022-05-17 2023-11-23 Apple Inc. User interfaces for navigation
WO2023225122A1 (en) 2022-05-17 2023-11-23 Apple Inc. Systems and methods for remote interaction between electronic devices
US20230396871A1 (en) 2022-06-01 2023-12-07 Apple Inc. Lock screen flashlight
WO2023235162A1 (en) 2022-06-02 2023-12-07 Apple Inc. Passkey management and sharing
WO2023235147A1 (en) 2022-06-03 2023-12-07 Apple Inc. User interfaces related to physiological measurements
WO2023235608A1 (en) 2022-06-03 2023-12-07 Apple Inc. Systems and methods for sleep tracking
WO2023235557A1 (en) 2022-06-03 2023-12-07 Apple Inc. User interfaces for managing accessories
WO2023235121A1 (en) 2022-06-03 2023-12-07 Apple Inc. Methods and user interfaces for managing audio channels
WO2023235364A1 (en) 2022-06-03 2023-12-07 Apple Inc. Method of activating and managing dual user interface operating modes
WO2023235594A1 (en) 2022-06-03 2023-12-07 Apple Inc. User interfaces for managing a time-based event
WO2023235615A1 (en) 2022-06-03 2023-12-07 Apple Inc. User interfaces for messages and shared documents
WO2023235266A1 (en) 2022-06-04 2023-12-07 Apple Inc. User interfaces for sharing an electronic key
WO2023235567A2 (en) 2022-06-04 2023-12-07 Apple Inc. Customized user interfaces
WO2023235350A1 (en) 2022-06-04 2023-12-07 Apple Inc. User interfaces for account management
US20230393717A1 (en) 2022-06-04 2023-12-07 Apple Inc. User interfaces for displaying handwritten content on an electronic device
WO2023235466A1 (en) 2022-06-04 2023-12-07 Apple Inc. Digital identification credential user interfaces
US20230390626A1 (en) 2022-06-05 2023-12-07 Apple Inc. User interfaces for physical activity information
WO2023239625A1 (en) 2022-06-05 2023-12-14 Apple Inc. User interfaces for creating journaling entries
WO2023239615A1 (en) 2022-06-05 2023-12-14 Apple Inc. User interfaces to track medications
US20240044656A1 (en) 2022-06-05 2024-02-08 Apple Inc. Searching for stops in multistop routes
WO2023239624A1 (en) 2022-06-05 2023-12-14 Apple Inc. Providing personalized audio
WO2023239581A1 (en) 2022-06-05 2023-12-14 Apple Inc. User interfaces for physical activity information
US20240080543A1 (en) 2022-06-05 2024-03-07 Apple Inc. User interfaces for camera management
WO2023239589A1 (en) 2022-06-05 2023-12-14 Apple Inc. Physical activity information user interfaces
WO2023239620A1 (en) 2022-06-05 2023-12-14 Apple Inc. Sticker creation for messaging
US20240031313A1 (en) 2022-06-05 2024-01-25 Apple Inc. User interfaces for messaging content
WO2024039588A1 (en) 2022-08-14 2024-02-22 Apple Inc. Cruise control user interfaces
WO2024050038A1 (en) 2022-09-02 2024-03-07 Apple Inc. Content output devices and user interfaces
WO2024054498A1 (en) 2022-09-06 2024-03-14 Apple Inc. Interfaces for device interactions
WO2024054437A2 (en) 2022-09-06 2024-03-14 Apple Inc. Navigational user interfaces
WO2024054347A1 (en) 2022-09-06 2024-03-14 Apple Inc. Physical activity user interfaces
WO2024054378A1 (en) 2022-09-06 2024-03-14 Apple Inc. User interfaces for health tracking
WO2024054479A2 (en) 2022-09-06 2024-03-14 Apple Inc. Crash detection user interface
WO2024059284A1 (en) 2022-09-15 2024-03-21 Apple Inc. User interfaces for indicating time
WO2024064395A1 (en) 2022-09-24 2024-03-28 Apple Inc. Input mechanisms
WO2024064394A1 (en) 2022-09-24 2024-03-28 Apple Inc. Navigation user interfaces
WO2024064945A1 (en) 2022-09-24 2024-03-28 Apple Inc. Offline maps
WO2024064949A2 (en) 2022-09-24 2024-03-28 Apple Inc. User interfaces for supplemental maps
WO2024064393A1 (en) 2022-09-24 2024-03-28 Apple Inc. Movement user interface
WO2024064939A1 (en) 2022-09-24 2024-03-28 Apple Inc. Transportation mode specific navigation user interfaces

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008305174A (ja) * 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム

Family Cites Families (1104)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6074003A (ja) 1983-09-30 1985-04-26 Ryozo Setoguchi 形状創成装置
US4903201A (en) 1983-11-03 1990-02-20 World Energy Exchange Corporation Automated futures trading exchange
US5270922A (en) 1984-06-29 1993-12-14 Merrill Lynch & Company, Inc. System for distributing, processing and displaying financial information
US4674044A (en) 1985-01-30 1987-06-16 Merrill Lynch, Pierce, Fenner & Smith, Inc. Automated securities trading system
US4750135A (en) 1986-05-01 1988-06-07 Reuters Limited Method for dynamically creating a receiver definable local trading instrument displayable record from a remotely transmitted trading instrument common data stream
US5038284A (en) 1988-02-17 1991-08-06 Kramer Robert M Method and apparatus relating to conducting trading transactions with portable trading stations
WO1989011694A1 (en) 1988-05-27 1989-11-30 Wang Laboratories, Inc. Document folder icon for display in a data processing system
CA2029893A1 (en) 1989-03-14 1990-09-15 Glen W. Belden Method and apparatus for auction market trading
EP0388162A3 (en) 1989-03-14 1993-03-03 Chicago Board Of Trade Apparatus for market trading
AU5418190A (en) 1989-03-28 1990-10-22 Chicago Board Of Trade Simulated live market trading system
US5077665A (en) 1989-05-25 1991-12-31 Reuters Limited Distributed matching system
US5136501A (en) 1989-05-26 1992-08-04 Reuters Limited Anonymous matching system
US5101353A (en) 1989-05-31 1992-03-31 Lattice Investments, Inc. Automated system for providing liquidity to securities markets
US5297031A (en) 1990-03-06 1994-03-22 Chicago Board Of Trade Method and apparatus for order management by market brokers
GB9027249D0 (en) 1990-12-17 1991-02-06 Reuters Ltd Offer matching system
US5297032A (en) 1991-02-01 1994-03-22 Merrill Lynch, Pierce, Fenner & Smith Incorporated Securities trading workstation
US5184120A (en) 1991-04-04 1993-02-02 Motorola, Inc. Menu selection using adaptive force sensing resistor
US6347997B1 (en) 1997-10-01 2002-02-19 Brad A. Armstrong Analog controls housed with electronic displays
US6208271B1 (en) 1998-09-04 2001-03-27 Brad A. Armstrong Remote controller with analog button(s)
US5717725A (en) 1992-03-12 1998-02-10 Ntp Incorporated System for wireless transmission and receiving of information through a computer bus interface and method of operation
US5544262A (en) 1992-04-07 1996-08-06 Apple Computer, Inc. Method and apparatus for processing graphically input equations
DE69324067T2 (de) 1992-06-08 1999-07-15 Synaptics Inc Objekt-Positionsdetektor
JPH0651738A (ja) 1992-07-27 1994-02-25 Canon Inc コンピュータシステムの情報表示装置
US5428730A (en) 1992-12-15 1995-06-27 International Business Machines Corporation Multimedia system having software mechanism providing standardized interfaces and controls for the operation of multimedia devices
US5455965A (en) 1993-02-26 1995-10-03 Motorola, Inc. Method for determining and utilizing simulcast transmit times
US5555354A (en) 1993-03-23 1996-09-10 Silicon Graphics Inc. Method and apparatus for navigation within three-dimensional information landscape
US5463722A (en) 1993-07-23 1995-10-31 Apple Computer, Inc. Automatic alignment of objects in two-dimensional and three-dimensional display space using an alignment field gradient
BE1007462A3 (nl) 1993-08-26 1995-07-04 Philips Electronics Nv Dataverwerkings inrichting met aanraakscherm en krachtopnemer.
JPH07151512A (ja) 1993-10-05 1995-06-16 Mitsutoyo Corp 三次元測定機の操作装置
JPH09506191A (ja) 1993-10-29 1997-06-17 オブジェクト テクノロジー ライセンシング コーポレイション グラフィック・エディタ・フレームワーク・システム
DE69426919T2 (de) 1993-12-30 2001-06-28 Xerox Corp Gerät und Verfahren zur Ausführung von vielen verkettenden Befehlsgesten in einen System mit Gestenbenutzerschnittstelle
CA2119921C (en) 1994-03-23 2009-09-29 Sydney H. Belzberg Computerized stock exchange trading system
WO1995027945A1 (en) 1994-04-06 1995-10-19 Morgan Stanley Group Inc. Data processing system and method for financial debt instruments
GB9416673D0 (en) 1994-08-17 1994-10-12 Reuters Ltd Data exchange filtering system
US5559301A (en) 1994-09-15 1996-09-24 Korg, Inc. Touchscreen interface having pop-up variable adjustment displays for controllers and audio processing systems
US5797002A (en) 1994-09-20 1998-08-18 Papyrus Technology Corp. Two-way wireless system for financial industry transactions
US5774877A (en) 1994-09-20 1998-06-30 Papyrus Technology Corp. Two-way wireless system for financial industry transactions
WO1996009579A1 (en) 1994-09-22 1996-03-28 Izak Van Cruyningen Popup menus with directional gestures
US5689651A (en) 1994-10-13 1997-11-18 Lozman; Fane System for processing and displaying financial information
AU4158496A (en) 1994-11-14 1996-06-06 Catapult Entertainment, Inc. Method and apparatus for synchronizing the execution of multiple video game systems in a networked environment
US5805144A (en) 1994-12-14 1998-09-08 Dell Usa, L.P. Mouse pointing device having integrated touchpad
JPH08227341A (ja) 1995-02-22 1996-09-03 Mitsubishi Electric Corp ユーザインターフェース
US5657246A (en) 1995-03-07 1997-08-12 Vtel Corporation Method and apparatus for a video conference user interface
US5845266A (en) 1995-12-12 1998-12-01 Optimark Technologies, Inc. Crossing network utilizing satisfaction density profile with price discovery features
IL117424A (en) 1995-04-27 1999-09-22 Optimark Tech Inc Crossing network utilizing satisfaction density profile
US6072488A (en) 1995-05-05 2000-06-06 Apple Computer, Inc. Systems and methods for replacing open windows in a graphical user interface
US5793360A (en) 1995-05-05 1998-08-11 Wacom Co., Ltd. Digitizer eraser system and method
US5717438A (en) 1995-08-25 1998-02-10 International Business Machines Corporation Multimedia document using time box diagrams
ES2210389T3 (es) 1995-08-28 2004-07-01 Ebs Dealing Resources, Inc. Sistema de transacciones comerciales anonimas con caracteristicas mejoradas de introduccion de cotizaciones.
US5844560A (en) 1995-09-29 1998-12-01 Intel Corporation Graphical user interface control element
JP3417741B2 (ja) 1995-10-06 2003-06-16 富士通株式会社 取引制御システム
US5910882A (en) 1995-11-14 1999-06-08 Garmin Corporation Portable electronic device for use in combination portable and fixed mount applications
US5793377A (en) 1995-11-22 1998-08-11 Autodesk, Inc. Method and apparatus for polar coordinate snap in a computer implemented drawing tool
US5801692A (en) 1995-11-30 1998-09-01 Microsoft Corporation Audio-visual user interface controls
US5719796A (en) 1995-12-04 1998-02-17 Advanced Micro Devices, Inc. System for monitoring and analyzing manufacturing processes using statistical simulation with single step feedback
US5825352A (en) 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US5695400A (en) 1996-01-30 1997-12-09 Boxer Jam Productions Method of managing multi-player game playing over a network
US5946647A (en) 1996-02-01 1999-08-31 Apple Computer, Inc. System and method for performing an action on a structure in computer-generated data
US5820463A (en) 1996-02-06 1998-10-13 Bell Atlantic Network Services, Inc. Method and apparatus for multi-player gaming over a network
US5880733A (en) 1996-04-30 1999-03-09 Microsoft Corporation Display system and method for displaying windows of an operating system to provide a three-dimensional workspace for a computer system
US5924083A (en) 1996-05-29 1999-07-13 Geneva Branch Of Reuters Transaction Services Limited Distributed matching system for displaying a book of credit filtered bids and offers
US5819293A (en) 1996-06-06 1998-10-06 Microsoft Corporation Automatic Spreadsheet forms
JP4484255B2 (ja) 1996-06-11 2010-06-16 株式会社日立製作所 タッチパネルを備えた情報処理装置および情報処理方法
US6014643A (en) 1996-06-28 2000-01-11 Minton; Vernon F. Interactive securities trading system
US8674932B2 (en) 1996-07-05 2014-03-18 Anascape, Ltd. Image controller
US6208329B1 (en) 1996-08-13 2001-03-27 Lsi Logic Corporation Supplemental mouse button emulation system, method and apparatus for a coordinate based data input device
US6247000B1 (en) 1996-08-21 2001-06-12 Crossmar, Inc. Method and system for confirmation and settlement for financial transactions matching
US6195647B1 (en) 1996-09-26 2001-02-27 The Nasdaq Stock Market, Inc. On-line transaction processing system for security trading
US5963923A (en) 1996-11-12 1999-10-05 Garber; Howard B. System and method for trading having a principal market maker
EP0859307A1 (en) 1997-02-18 1998-08-19 International Business Machines Corporation Control mechanism for graphical user interface
US6031989A (en) 1997-02-27 2000-02-29 Microsoft Corporation Method of formatting and displaying nested documents
US6954899B1 (en) 1997-04-14 2005-10-11 Novint Technologies, Inc. Human-computer interface including haptically controlled interactions
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
GB2339941B (en) 1997-04-30 2001-10-31 Roderick Malcolm Gordon Lawrie Network computer trading system
US6266684B1 (en) 1997-08-06 2001-07-24 Adobe Systems Incorporated Creating and saving multi-frame web pages
US6411998B1 (en) 1997-09-08 2002-06-25 International Business Machines Corporation World wide web internet delay monitor
US6002397A (en) 1997-09-30 1999-12-14 International Business Machines Corporation Window hatches in graphical user interface
US6532000B2 (en) 1997-10-01 2003-03-11 Brad A. Armstrong Analog controls housed with electronic displays for global positioning systems
US6456778B2 (en) 1997-10-01 2002-09-24 Brad A. Armstrong Analog controls housed with electronic displays for video recorders and cameras
US6421653B1 (en) 1997-10-14 2002-07-16 Blackbird Holdings, Inc. Systems, methods and computer program products for electronic trading of financial instruments
US6131087A (en) 1997-11-05 2000-10-10 The Planning Solutions Group, Inc. Method for automatically identifying, matching, and near-matching buyers and sellers in electronic market transactions
US6448977B1 (en) 1997-11-14 2002-09-10 Immersion Corporation Textures and other spatial sensations for a relative haptic interface device
US6088019A (en) 1998-06-23 2000-07-11 Immersion Corporation Low cost force feedback device with actuator for non-primary axis
CN1619561A (zh) 1997-12-08 2005-05-25 新日铁系统集成株式会社 商品交易装置
US6035287A (en) 1997-12-17 2000-03-07 Omega Consulting, Inc. Method and apparatus for bundled asset trading
US6088027A (en) 1998-01-08 2000-07-11 Macromedia, Inc. Method and apparatus for screen object manipulation
JPH11203044A (ja) 1998-01-16 1999-07-30 Sony Corp 情報処理システム
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7760187B2 (en) 2004-07-30 2010-07-20 Apple Inc. Visual expander
KR100595912B1 (ko) 1998-01-26 2006-07-07 웨인 웨스터만 수동 입력 통합 방법 및 장치
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US6219034B1 (en) 1998-02-23 2001-04-17 Kristofer E. Elbing Tactile computer interface
US6211880B1 (en) 1998-04-13 2001-04-03 Albert Joseph Impink, Jr. Display apparatus
US6180894B1 (en) 1998-05-07 2001-01-30 Aiptek International Inc. Dual mode digitizer tablet system
US6208340B1 (en) 1998-05-26 2001-03-27 International Business Machines Corporation Graphical user interface including a drop-down widget that permits a plurality of choices to be selected in response to a single selection of the drop-down widget
JPH11355617A (ja) 1998-06-05 1999-12-24 Fuji Photo Film Co Ltd 画像表示器付きカメラ
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6563487B2 (en) 1998-06-23 2003-05-13 Immersion Corporation Haptic feedback for directional control pads
US6229542B1 (en) 1998-07-10 2001-05-08 Intel Corporation Method and apparatus for managing windows in three dimensions in a two dimensional windowing system
US6243080B1 (en) 1998-07-14 2001-06-05 Ericsson Inc. Touch-sensitive panel with selector
AU5777599A (en) 1998-08-21 2000-03-14 Marketxt, Inc. Anti-manipulation method and system for a real-time computerized stock trading system
US6326956B1 (en) 1998-08-24 2001-12-04 Intertactile Technologies Corporation Circuit control devices utilizing electronic display screen light
US6111575A (en) 1998-09-24 2000-08-29 International Business Machines Corporation Graphical undo/redo manager and method
DE19849460B4 (de) 1998-10-28 2009-11-05 Völckers, Oliver Numerische digitale Telefontastatur für ein Telefongerät mit einem Display und Verfahren zur schnellen Textauswahl aus einer Liste mittels der numerischen Telefontastatur
US6377940B2 (en) 1998-11-05 2002-04-23 International Securities Exchange, Llc Method and apparatus for setting a price for a security on an automated exchange based on a comparison of prices on other exchanges
US6405180B2 (en) 1998-11-05 2002-06-11 International Securities Exchange, Llc Automated exchange for matching bids between a party and a counterparty based on a relationship between the counterparty and the exchange
JP2000148348A (ja) 1998-11-13 2000-05-26 Internatl Business Mach Corp <Ibm> 起動中のアプリケーション・プログラムを容易に識別し、かつ終了させることができる方法およびシステム
AU774267B2 (en) 1998-11-24 2004-06-24 Niksun, Inc. Apparatus and method for collecting and analyzing communications data
US6252594B1 (en) 1998-12-11 2001-06-26 International Business Machines Corporation Method and system for aiding a user in scrolling through a document using animation, voice cues and a dockable scroll bar
US6489975B1 (en) 1998-12-14 2002-12-03 International Business Machines Corporation System and method for improved navigation between open windows in an application program using window tabs
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US6396962B1 (en) 1999-01-29 2002-05-28 Sony Corporation System and method for providing zooming video
US6512761B1 (en) 1999-02-02 2003-01-28 3Com Corporation System for adjusting billing for real-time media transmissions based on delay
US6272474B1 (en) 1999-02-08 2001-08-07 Crisostomo B. Garcia Method for monitoring and trading stocks via the internet displaying bid/ask trade bars
EP1028583A1 (en) 1999-02-12 2000-08-16 Hewlett-Packard Company Digital camera with sound recording
US6551357B1 (en) 1999-02-12 2003-04-22 International Business Machines Corporation Method, system, and program for storing and retrieving markings for display to an electronic media file
US20020026321A1 (en) 1999-02-26 2002-02-28 Sadeg M. Faris Internet-based system and method for fairly and securely enabling timed-constrained competition using globally time-sychronized client subsystems and information servers having microsecond client-event resolution
KR100743896B1 (ko) 1999-02-26 2007-07-30 리베오 인코포레이티드 글로벌 시간 동기화된 시스템, 장치, 및 방법
WO2000052619A1 (en) 1999-03-01 2000-09-08 Wit Capital Corporation A system and method for conducting securities transactions over a computer network
US6408282B1 (en) 1999-03-01 2002-06-18 Wit Capital Corp. System and method for conducting securities transactions over a computer network
US7212999B2 (en) 1999-04-09 2007-05-01 Trading Technologies International, Inc. User interface for an electronic trading system
US6278982B1 (en) 1999-04-21 2001-08-21 Lava Trading Inc. Securities trading system for consolidation of trading on multiple ECNS and electronic exchanges
AU4369100A (en) 1999-04-22 2000-11-10 Trading Technologies, Inc. Electronic securities trading system
JP2001034775A (ja) 1999-05-17 2001-02-09 Fuji Photo Film Co Ltd 履歴画像表示方法
US6227743B1 (en) 1999-07-01 2001-05-08 Karl A. Robb Pen cap stylus for use with touch screens
US6904405B2 (en) 1999-07-17 2005-06-07 Edwin A. Suominen Message recognition using shared language model
US6396523B1 (en) 1999-07-29 2002-05-28 Interlink Electronics, Inc. Home entertainment device remote control
US6489978B1 (en) 1999-08-06 2002-12-03 International Business Machines Corporation Extending the opening time of state menu items for conformations of multiple changes
US6459424B1 (en) 1999-08-10 2002-10-01 Hewlett-Packard Company Touch-sensitive input screen having regional sensitivity and resolution properties
AU1250001A (en) 1999-08-30 2001-03-26 Epit Inc. User interface for semi-fungible trading
US7685048B1 (en) 1999-09-01 2010-03-23 Bloomberg L.P. Electronic trading system for forwards spread trades
US6459442B1 (en) 1999-09-10 2002-10-01 Xerox Corporation System for applying application behaviors to freeform data
US7181424B1 (en) 1999-09-23 2007-02-20 The Nasdaq Stock Market, Inc. Montage for automated market system
US8311926B1 (en) 1999-09-23 2012-11-13 The Nasdaq Omx Group, Inc. Montage for automated market system
US8239303B2 (en) 1999-09-23 2012-08-07 The Nasdaq Omx Group, Inc. Match-off of order flow in electronic market system
US6377636B1 (en) 1999-11-02 2002-04-23 Iospan Wirless, Inc. Method and wireless communications system using coordinated transmission and training for interference mitigation
US8482535B2 (en) 1999-11-08 2013-07-09 Apple Inc. Programmable tactile touch screen displays and man-machine interfaces for improved vehicle instrumentation and telematics
US20020023039A1 (en) 1999-12-03 2002-02-21 Fritsch Daniel Scott Computerized system and method for conducting an online virtual auction
US20020055899A1 (en) 1999-12-06 2002-05-09 Williams Joseph C. Display system and method for displaying and organizing financial information
US6664991B1 (en) 2000-01-06 2003-12-16 Microsoft Corporation Method and apparatus for providing context menus on a pen-based device
US6661438B1 (en) 2000-01-18 2003-12-09 Seiko Epson Corporation Display apparatus and portable information processing apparatus
JP2001202192A (ja) 2000-01-18 2001-07-27 Sony Corp 情報処理装置及びその方法並びにプログラム格納媒体
US6512530B1 (en) 2000-01-19 2003-01-28 Xerox Corporation Systems and methods for mimicking an image forming or capture device control panel control element
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
US7138983B2 (en) 2000-01-31 2006-11-21 Canon Kabushiki Kaisha Method and apparatus for detecting and interpreting path of designated position
AU2001238311A1 (en) 2000-02-14 2001-08-27 Geophoenix, Inc. System and method for graphical programming
GB2366630A (en) 2000-02-17 2002-03-13 Gold On Line Trading Ltd Internet Trading System
US6772132B1 (en) 2000-03-02 2004-08-03 Trading Technologies International, Inc. Click based trading with intuitive grid display of market depth
JP2001265481A (ja) 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
US20020035534A1 (en) 2000-05-04 2002-03-21 Buist Walter D. Method and apparatus for auctioning securities
US7246092B1 (en) 2000-05-12 2007-07-17 The Nasdaq Stock Market, Inc. Montage for an electronic market
US6831666B1 (en) 2000-06-14 2004-12-14 Canon Kabushiki Kaisha Application selection window in a windows operation system
JP2002041023A (ja) 2000-07-06 2002-02-08 Internatl Business Mach Corp <Ibm> コンピュータシステム、表示制御装置、ディスプレイ装置、表示制御方法、記憶媒体及びプログラム伝送装置
KR20020007860A (ko) 2000-07-19 2002-01-29 백승헌 인터넷상의 시간보정 방법 및 이를 이용한 상거래시점관리 방법
US6583798B1 (en) 2000-07-21 2003-06-24 Microsoft Corporation On-object user interface
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
JP3949912B2 (ja) 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6906697B2 (en) 2000-08-11 2005-06-14 Immersion Corporation Haptic sensations for tactile feedback interface devices
US8924277B2 (en) 2000-08-17 2014-12-30 Nyse Group, Inc. Method and system for automatic execution of a securities transaction
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
US6891551B2 (en) 2000-11-10 2005-05-10 Microsoft Corporation Selection handles in editing electronic documents
US6590568B1 (en) 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
DE10059906A1 (de) 2000-12-01 2002-06-06 Bs Biometric Systems Gmbh Druckempfindliche Fläche eines Bildschirms oder Displays
US20020077117A1 (en) 2000-12-15 2002-06-20 Jocelyn Cloutier Synchronous transmission of data with network remote control
GB2370739A (en) 2000-12-27 2002-07-03 Nokia Corp Flashlight cursor for set-top boxes
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US20050183017A1 (en) 2001-01-31 2005-08-18 Microsoft Corporation Seekbar in taskbar player visualization mode
US20020107748A1 (en) 2001-02-05 2002-08-08 International Business Machines Corporation Method and system for decentralized order matching among individual marketplaces
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US20020120837A1 (en) 2001-02-28 2002-08-29 Maxemchuk Nicholas Frank Distributed internet multicast system for the stock market
JP2002268867A (ja) 2001-03-13 2002-09-20 Sony Corp 表示装置及び表示方法、プログラム記録媒体並びにプログラム
US20020178102A1 (en) 2001-03-15 2002-11-28 Larry Scheinberg Margin release system for an electronic-based market
JP2002286489A (ja) 2001-03-28 2002-10-03 Clarion Co Ltd カーナビゲーション装置及び方法並びにカーナビゲーション用ソフトウェア
US7012595B2 (en) 2001-03-30 2006-03-14 Koninklijke Philips Electronics N.V. Handheld electronic device with touch pad
TW502180B (en) 2001-03-30 2002-09-11 Ulead Systems Inc Previewing method of editing multimedia effect
US20020149630A1 (en) 2001-04-16 2002-10-17 Parascript Llc Providing hand-written and hand-drawn electronic mail service
US7134093B2 (en) 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US20020161693A1 (en) 2001-04-30 2002-10-31 Greenwald Jamie A. Automated over-the-counter derivatives trading system
US8125492B1 (en) 2001-05-18 2012-02-28 Autodesk, Inc. Parameter wiring
TW521205B (en) 2001-06-05 2003-02-21 Compal Electronics Inc Touch screen capable of controlling amplification with pressure
US20020186257A1 (en) 2001-06-08 2002-12-12 Cadiz Jonathan J. System and process for providing dynamic communication access and information awareness in an interactive peripheral display
US7190379B2 (en) 2001-06-29 2007-03-13 Contex A/S Method for resizing and moving an object on a computer screen
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
JP2003084744A (ja) 2001-09-10 2003-03-19 Sharp Corp エミュレーション装置、エミュレーション方法及びその方法を実行するプログラム並びにそのプログラムを記録した記録媒体
US7103848B2 (en) 2001-09-13 2006-09-05 International Business Machines Corporation Handheld electronic book reader with annotation and usage tracking capabilities
US6965645B2 (en) 2001-09-25 2005-11-15 Microsoft Corporation Content-based characterization of video frame sequences
US20030206169A1 (en) 2001-09-26 2003-11-06 Michael Springer System, method and computer program product for automatically snapping lines to drawing elements
US8001189B2 (en) 2001-10-16 2011-08-16 Microsoft Corporation Routing of network messages
KR20100046271A (ko) 2001-11-01 2010-05-06 임머숀 코퍼레이션 촉각을 제공하기 위한 방법 및 장치
JP2003157131A (ja) 2001-11-22 2003-05-30 Nippon Telegr & Teleph Corp <Ntt> 入力方法、表示方法、メディア情報合成表示方法、入力装置、メディア情報合成表示装置、入力プログラム、メディア情報合成表示プログラム、これらのプログラムを記録した記録媒体
JP2003162355A (ja) 2001-11-26 2003-06-06 Sony Corp タスクの表示切り替え方法及び携帯機器及び携帯通信機器
JP2003186597A (ja) 2001-12-13 2003-07-04 Samsung Yokohama Research Institute Co Ltd 携帯端末装置
US20030112269A1 (en) 2001-12-17 2003-06-19 International Business Machines Corporation Configurable graphical element for monitoring dynamic properties of a resource coupled to a computing environment
US7346855B2 (en) 2001-12-21 2008-03-18 Microsoft Corporation Method and system for switching between multiple computer applications
US20030184574A1 (en) 2002-02-12 2003-10-02 Phillips James V. Touch screen interface with haptic feedback device
US6888537B2 (en) 2002-02-13 2005-05-03 Siemens Technology-To-Business Center, Llc Configurable industrial input devices that use electrically conductive elastomer
EP1483653B1 (en) 2002-03-08 2006-05-31 Revelations in Design, LP Electric device control apparatus
US7114091B2 (en) 2002-03-18 2006-09-26 National Instruments Corporation Synchronization of distributed systems
TWI234115B (en) 2002-04-03 2005-06-11 Htc Corp Method and device of setting threshold pressure for touch panel
US20030189647A1 (en) 2002-04-05 2003-10-09 Kang Beng Hong Alex Method of taking pictures
US7178049B2 (en) 2002-04-24 2007-02-13 Medius, Inc. Method for multi-tasking multiple Java virtual machines in a secure environment
JP2004062648A (ja) 2002-07-30 2004-02-26 Kyocera Corp 表示制御装置及びこれに用いられる表示制御プログラム
US20030222915A1 (en) 2002-05-30 2003-12-04 International Business Machines Corporation Data processor controlled display system with drag and drop movement of displayed items from source to destination screen positions and interactive modification of dragged items during the movement
US7801796B2 (en) 2002-06-05 2010-09-21 The Nasdaq Omx Group, Inc. Message prioritization process and method
US7259752B1 (en) 2002-06-28 2007-08-21 Microsoft Corporation Method and system for editing electronic ink
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
JP2004054861A (ja) 2002-07-16 2004-02-19 Sanee Denki Kk タッチ式マウス
US20040056849A1 (en) 2002-07-25 2004-03-25 Andrew Lohbihler Method and apparatus for powering, detecting and locating multiple touch input devices on a touch screen
US7549127B2 (en) 2002-08-01 2009-06-16 Realnetworks, Inc. Method and apparatus for resizing video content displayed within a graphical user interface
JP4115198B2 (ja) 2002-08-02 2008-07-09 株式会社日立製作所 タッチパネルを備えた表示装置
JP4500485B2 (ja) 2002-08-28 2010-07-14 株式会社日立製作所 タッチパネルを備えた表示装置
US7739604B1 (en) 2002-09-25 2010-06-15 Apple Inc. Method and apparatus for managing windows
US20040138849A1 (en) 2002-09-30 2004-07-15 Albrecht Schmidt Load sensing surface as pointing device
EP1406150A1 (en) 2002-10-01 2004-04-07 Sony Ericsson Mobile Communications AB Tactile feedback method and device and portable device incorporating same
US7752115B2 (en) 2002-10-02 2010-07-06 Trading Technologies International, Inc. Method and apparatus for a fair exchange
JP4173718B2 (ja) 2002-10-31 2008-10-29 富士通株式会社 ウィンドウ切替装置及びウィンドウ切替プログラム
US20050114785A1 (en) 2003-01-07 2005-05-26 Microsoft Corporation Active content wizard execution with improved conspicuity
US20070128899A1 (en) 2003-01-12 2007-06-07 Yaron Mayer System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows
US7224362B2 (en) 2003-01-30 2007-05-29 Agilent Technologies, Inc. Systems and methods for providing visualization and network diagrams
US7685538B2 (en) 2003-01-31 2010-03-23 Wacom Co., Ltd. Method of triggering functions in a computer application using a digitizer having a stylus and a digitizer system
US7493573B2 (en) 2003-02-07 2009-02-17 Sun Microsystems, Inc. Scrolling vertical column mechanism for cellular telephone
US7185291B2 (en) 2003-03-04 2007-02-27 Institute For Information Industry Computer with a touch screen
US7369102B2 (en) 2003-03-04 2008-05-06 Microsoft Corporation System and method for navigating a graphical user interface on a smaller display
US7532206B2 (en) 2003-03-11 2009-05-12 Smart Technologies Ulc System and method for differentiating between pointers used to contact touch surface
US7380218B2 (en) 2003-03-27 2008-05-27 International Business Machines Corporation Method and apparatus for managing windows
US20040219968A1 (en) 2003-05-01 2004-11-04 Fiden Daniel P. Gaming machine with interactive pop-up windows
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
US7159189B2 (en) 2003-06-13 2007-01-02 Alphabase Systems, Inc. Method and system for controlling cascaded windows on a GUI desktop on a computer
US7051282B2 (en) 2003-06-13 2006-05-23 Microsoft Corporation Multi-layer graphical user interface
EP1644816B1 (en) 2003-06-20 2016-09-14 Apple Inc. Computer interface having a virtual single-layer mode for viewing overlapping objects
US20040267823A1 (en) 2003-06-24 2004-12-30 Microsoft Corporation Reconcilable and undoable file system
US8682097B2 (en) 2006-02-14 2014-03-25 DigitalOptics Corporation Europe Limited Digital image enhancement with reference images
JP2005031786A (ja) 2003-07-08 2005-02-03 Fujitsu Ten Ltd 文字入力装置
US8373660B2 (en) 2003-07-14 2013-02-12 Matt Pallakoff System and method for a portable multimedia client
US7036088B2 (en) 2003-07-24 2006-04-25 Sap Ag Multi-modal method for application swapping
US7721228B2 (en) 2003-08-05 2010-05-18 Yahoo! Inc. Method and system of controlling a context menu
KR100580174B1 (ko) 2003-08-21 2006-05-16 삼성전자주식회사 회전 가능한 디스플레이 장치 및 화면 조정 방법
US9024884B2 (en) 2003-09-02 2015-05-05 Apple Inc. Touch-sensitive electronic apparatus for media applications, and methods therefor
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
JP2005092386A (ja) 2003-09-16 2005-04-07 Sony Corp 画像選択装置および画像選択方法
KR100597588B1 (ko) 2003-10-02 2006-07-06 한국전자통신연구원 우선순위기반 능동 시험패킷을 이용한 노드간 경로특성측정방법
US20050091604A1 (en) 2003-10-22 2005-04-28 Scott Davis Systems and methods that track a user-identified point of focus
JP2005135106A (ja) 2003-10-29 2005-05-26 Sony Corp 表示画像制御装置及び方法
US20050183035A1 (en) 2003-11-20 2005-08-18 Ringel Meredith J. Conflict resolution for graphic multi-user interface
US20050110777A1 (en) 2003-11-25 2005-05-26 Geaghan Bernard O. Light-emitting stylus and user input device using same
US8164573B2 (en) 2003-11-26 2012-04-24 Immersion Corporation Systems and methods for adaptive interpretation of input from a touch-sensitive input device
JP2005157842A (ja) 2003-11-27 2005-06-16 Fujitsu Ltd ブラウザプログラム、ブラウジング方法、及びブラウジング装置
ES2292924T3 (es) 2003-12-01 2008-03-16 Sony Ericsson Mobile Communications Ab Camara para registrar una secuencia de imagenes.
CA2727763C (en) 2003-12-01 2013-09-10 Research In Motion Limited Previewing a new event on a small screen device
US7454713B2 (en) 2003-12-01 2008-11-18 Sony Ericsson Mobile Communications Ab Apparatus, methods and computer program products providing menu expansion and organization functions
US20050125742A1 (en) 2003-12-09 2005-06-09 International Business Machines Corporation Non-overlapping graphical user interface workspace
US7085590B2 (en) 2003-12-31 2006-08-01 Sony Ericsson Mobile Communications Ab Mobile terminal with ergonomic imaging functions
EP1557744B1 (en) 2004-01-20 2008-04-16 Sony Deutschland GmbH Haptic key controlled data input
US7966352B2 (en) 2004-01-26 2011-06-21 Microsoft Corporation Context harvesting from selected content
JP4790990B2 (ja) 2004-01-27 2011-10-12 京セラ株式会社 携帯端末
US7441204B2 (en) 2004-02-06 2008-10-21 Microsoft Corporation Method and system for automatically displaying content of a window on a display that has changed orientation
EP1723632A4 (en) 2004-02-25 2007-07-25 Xplore Technologies Corp DEVICE FOR PROVIDING DIGITAL INPUTS WITH SEVERAL OPERATING TYPES
US20050190280A1 (en) 2004-02-27 2005-09-01 Haas William R. Method and apparatus for a digital camera scrolling slideshow
US7180531B2 (en) 2004-02-27 2007-02-20 Microsoft Corporation Method and apparatus for enabling application program compatibility with display devices having improved pixel density
KR100611182B1 (ko) 2004-02-27 2006-08-10 삼성전자주식회사 회전상태에 따라 메뉴표시상태를 변경하는 휴대형전자기기 및 그 방법
US7788595B2 (en) 2004-03-08 2010-08-31 Sap Ag Method and system for switching among management system applications
WO2005086854A2 (en) 2004-03-09 2005-09-22 Freedom Scientific, Inc. Low vision enhancement for graphic user interface
GB2412831A (en) 2004-03-30 2005-10-05 Univ Newcastle Highlighting important information by blurring less important information
US20050223338A1 (en) 2004-04-05 2005-10-06 Nokia Corporation Animated user-interface in electronic devices
CN100437464C (zh) 2004-04-05 2008-11-26 松下电器产业株式会社 显示屏管理单元
US20050229112A1 (en) 2004-04-13 2005-10-13 Clay Timothy M Method and system for conveying an image position
JP2005309933A (ja) 2004-04-23 2005-11-04 Canon Inc 拡張制御装置および画像処理システムおよびアプリケーションアイコン表示方法およびプログラムおよび記憶媒体
US7694236B2 (en) 2004-04-23 2010-04-06 Microsoft Corporation Stack icons representing multiple objects
US7787026B1 (en) 2004-04-28 2010-08-31 Media Tek Singapore Pte Ltd. Continuous burst mode digital camera
KR20070012816A (ko) 2004-05-05 2007-01-29 코닌클리케 필립스 일렉트로닉스 엔.브이. 매체 항목의 탐색
US8453065B2 (en) 2004-06-25 2013-05-28 Apple Inc. Preview and installation of user interface elements in a display environment
US8281241B2 (en) 2004-06-28 2012-10-02 Nokia Corporation Electronic device and method for providing extended user interface
US8046712B2 (en) 2004-06-29 2011-10-25 Acd Systems International Inc. Management of multiple window panels with a graphical user interface
US7743348B2 (en) 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
US20060020904A1 (en) 2004-07-09 2006-01-26 Antti Aaltonen Stripe user interface
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
EP1812892B1 (en) 2004-08-02 2010-09-29 Koninklijke Philips Electronics N.V. Touch screen with pressure-dependent visual feedback
JP2008508628A (ja) 2004-08-02 2008-03-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ タッチスクリーンにおける圧力制御ナビゲーション
US7178111B2 (en) 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
US7728821B2 (en) 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
US7724242B2 (en) 2004-08-06 2010-05-25 Touchtable, Inc. Touch driven method and apparatus to integrate and display multiple image layers forming alternate depictions of same subject matter
GB2417176A (en) 2004-08-12 2006-02-15 Ibm Mouse cursor display
US20060041846A1 (en) 2004-08-19 2006-02-23 International Business Machines Corporation Method of window management for a windowing system
FR2874432A1 (fr) 2004-08-20 2006-02-24 Gervais Danone Sa Procede d'analyse de produits industriels alimentaires, cosmetiques et/ou d'hygiene, interface de mesure pour la mise en oeuvre du procede et systeme electronique de mise en oeuvre de l'interface
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
WO2006030055A1 (en) 2004-09-15 2006-03-23 Nokia Corporation Handling and scrolling of content on screen
JP2006091446A (ja) 2004-09-24 2006-04-06 Fuji Photo Film Co Ltd カメラ
US20060067654A1 (en) 2004-09-24 2006-03-30 Magix Ag Graphical user interface adaptable to multiple display devices
WO2006042309A1 (en) 2004-10-08 2006-04-20 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
WO2006043209A1 (en) 2004-10-19 2006-04-27 Koninklijke Philips Electronics N.V. Master substrate and method of manufacturing a high-density relief structure
US8677274B2 (en) 2004-11-10 2014-03-18 Apple Inc. Highlighting items for search results
US20060107226A1 (en) 2004-11-16 2006-05-18 Microsoft Corporation Sidebar autohide to desktop
JP4950058B2 (ja) 2004-11-16 2012-06-13 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 局所エンハンスメントのための画像の非接触操作
FR2878344B1 (fr) 2004-11-22 2012-12-21 Sionnest Laurent Guyot Dispositif de commandes et d'entree de donnees
US7847789B2 (en) 2004-11-23 2010-12-07 Microsoft Corporation Reducing accidental touch-sensitive device activation
US20060136834A1 (en) 2004-12-15 2006-06-22 Jiangen Cao Scrollable toolbar with tool tip on small screens
US7458038B2 (en) 2004-12-20 2008-11-25 Microsoft Corporation Selection indication fields
US7619616B2 (en) 2004-12-21 2009-11-17 Microsoft Corporation Pressure sensitive controls
US7683889B2 (en) 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
US7629966B2 (en) * 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
CN101099192A (zh) 2005-01-05 2008-01-02 松下电器产业株式会社 屏幕显示设备
US7552397B2 (en) 2005-01-18 2009-06-23 Microsoft Corporation Multiple window behavior system
US8341541B2 (en) 2005-01-18 2012-12-25 Microsoft Corporation System and method for visually browsing of open windows
US8464176B2 (en) 2005-01-19 2013-06-11 Microsoft Corporation Dynamic stacking and expansion of visual items
US7574434B2 (en) 2005-02-25 2009-08-11 Sony Corporation Method and system for navigating and selecting media from large data sets
KR101604565B1 (ko) 2005-03-04 2016-03-17 애플 인크. 다기능 휴대용 장치
JP4166229B2 (ja) 2005-03-14 2008-10-15 株式会社日立製作所 タッチパネルを備えた表示装置
US20060213754A1 (en) 2005-03-17 2006-09-28 Microsoft Corporation Method and system for computer application program task switching via a single hardware button
US7454702B2 (en) 2005-03-21 2008-11-18 Microsoft Corporation Tool for selecting ink and other objects in an electronic document
US7661069B2 (en) 2005-03-31 2010-02-09 Microsoft Corporation System and method for visually expressing user interface elements
US7478339B2 (en) 2005-04-01 2009-01-13 Microsoft Corporation Method and apparatus for application window grouping and management
US8023568B2 (en) 2005-04-15 2011-09-20 Avid Technology, Inc. Capture, editing and encoding of motion pictures encoded with repeating fields or frames
US7673255B2 (en) 2005-04-22 2010-03-02 Microsoft Corporation Interface and system for manipulating thumbnails of live windows in a window manager
US7609178B2 (en) 2006-04-20 2009-10-27 Pressure Profile Systems, Inc. Reconfigurable tactile sensor input device
US9569093B2 (en) 2005-05-18 2017-02-14 Power2B, Inc. Displays and information input devices
US20070024646A1 (en) 2005-05-23 2007-02-01 Kalle Saarinen Portable electronic apparatus and associated method
US9785329B2 (en) 2005-05-23 2017-10-10 Nokia Technologies Oy Pocket computer and associated methods
US7710397B2 (en) 2005-06-03 2010-05-04 Apple Inc. Mouse with improved input mechanisms using touch sensors
JP2006345209A (ja) 2005-06-08 2006-12-21 Sony Corp 入力装置、情報処理装置、情報処理方法、及びプログラム
US7903090B2 (en) 2005-06-10 2011-03-08 Qsi Corporation Force-based input device
TWI296395B (en) 2005-06-24 2008-05-01 Benq Corp Method for zooming image on touch screen
US20070004461A1 (en) 2005-06-30 2007-01-04 Bathina Sridhar N Terminal with messaging application
US20070004451A1 (en) 2005-06-30 2007-01-04 C Anderson Eric Controlling functions of a handheld multifunction device
US8542196B2 (en) 2005-07-22 2013-09-24 Move Mobile Systems, Inc. System and method for a thumb-optimized touch-screen user interface
US8049731B2 (en) 2005-07-29 2011-11-01 Interlink Electronics, Inc. System and method for implementing a control function via a sensor having a touch sensitive control input surface
JP4622727B2 (ja) 2005-07-29 2011-02-02 日本電気株式会社 適応送信タイミング制御方法、無線通信システムおよび無線通信装置
WO2007016704A2 (en) 2005-08-02 2007-02-08 Ipifini, Inc. Input device having multifunctional keys
US7680513B2 (en) 2005-08-08 2010-03-16 Palm, Inc. Contact-centric user-interface features for computing devices
US8483765B2 (en) 2005-08-26 2013-07-09 Kt Corporation User terminal for performing a plurality of applications simultaneously
WO2007033354A2 (en) 2005-09-13 2007-03-22 Spacetime3D, Inc. System and method for providing three-dimensional graphical user interface
US20070152980A1 (en) 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US7694231B2 (en) 2006-01-05 2010-04-06 Apple Inc. Keyboards for portable electronic devices
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
TW200715192A (en) 2005-10-07 2007-04-16 Elan Microelectronics Corp Method for a window to generate different moving speed
JP2007116384A (ja) * 2005-10-20 2007-05-10 Funai Electric Co Ltd 電子番組情報表示装置
CN1955906A (zh) 2005-10-28 2007-05-02 华硕电脑股份有限公司 单键多程式的执行方法
US7725839B2 (en) 2005-11-15 2010-05-25 Microsoft Corporation Three-dimensional active file explorer
US8643605B2 (en) 2005-11-21 2014-02-04 Core Wireless Licensing S.A.R.L Gesture based document editor
US7331245B2 (en) 2005-11-22 2008-02-19 Avago Technologies Ecbu Ip Pte Ltd Pressure distribution sensor and sensing method
JP2007148927A (ja) 2005-11-29 2007-06-14 Alps Electric Co Ltd 入力装置及びこれを用いたスクロール制御方法
WO2007068091A1 (en) 2005-12-12 2007-06-21 Audiokinetic Inc. Method and system for multi-version digital authoring
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US20070152959A1 (en) 2005-12-29 2007-07-05 Sap Ag Pressure-sensitive button
CN101379461A (zh) 2005-12-30 2009-03-04 苹果公司 具有多重触摸输入的便携式电子设备
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US7797642B1 (en) 2005-12-30 2010-09-14 Google Inc. Method, system, and graphical user interface for meeting-spot-related contact lists
US20070168369A1 (en) 2006-01-04 2007-07-19 Companionlink Software, Inc. User interface for a portable electronic device
US7757185B2 (en) 2006-01-06 2010-07-13 Apple Inc. Enabling and disabling hotkeys
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
US7486282B2 (en) 2006-01-27 2009-02-03 Microsoft Corporation Size variant pressure eraser
US7536654B2 (en) 2006-02-06 2009-05-19 Microsoft Corporation Photo browse and zoom
US8510669B2 (en) 2006-02-06 2013-08-13 Yahoo! Inc. Method and system for presenting photos on a website
US20110096174A1 (en) 2006-02-28 2011-04-28 King Martin T Accessing resources based on capturing information from a rendered document
KR100744400B1 (ko) 2006-03-07 2007-07-30 삼성전자주식회사 이동 통신 단말기의 메뉴 화면에서 빠른 메뉴 제공 방법 및장치
US7532837B2 (en) 2006-03-09 2009-05-12 Kabushiki Kaisha Toshiba Multifunction peripheral with template registration and template registration method
US8745526B2 (en) 2006-03-14 2014-06-03 Blackberry Limited Screen display in application switching
KR100746874B1 (ko) 2006-03-16 2007-08-07 삼성전자주식회사 이동 단말기에서 터치패드를 이용한 서비스 제공 장치 및방법
GB0605587D0 (en) 2006-03-20 2006-04-26 British Broadcasting Corp Graphical user interface methods and systems
US8405618B2 (en) 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
US7925250B2 (en) 2006-03-27 2011-04-12 International Business Machines Corporation Reuse of a mobile device application in a desktop environment
JP2007264808A (ja) 2006-03-27 2007-10-11 Nikon Corp 表示入力装置及び撮像装置
US7656413B2 (en) 2006-03-29 2010-02-02 Autodesk, Inc. Large display attention focus system
US7538760B2 (en) 2006-03-30 2009-05-26 Apple Inc. Force imaging input device and system
US8040142B1 (en) 2006-03-31 2011-10-18 Cypress Semiconductor Corporation Touch detection techniques for capacitive touch sense systems
US7861176B2 (en) 2006-04-13 2010-12-28 Touchcommerce, Inc. Methods and systems for providing online chat
US7607088B2 (en) 2006-04-18 2009-10-20 International Business Machines Corporation Computer program product, apparatus and method for displaying a plurality of entities in a tooltip for a cell of a table
US8683362B2 (en) 2008-05-23 2014-03-25 Qualcomm Incorporated Card metaphor for activities in a computing device
US8296684B2 (en) 2008-05-23 2012-10-23 Hewlett-Packard Development Company, L.P. Navigating among activities in a computing device
WO2007121557A1 (en) 2006-04-21 2007-11-01 Anand Agarawala System for organizing and visualizing display objects
KR100771626B1 (ko) 2006-04-25 2007-10-31 엘지전자 주식회사 단말기 및 이를 위한 명령 입력 방법
US8279180B2 (en) 2006-05-02 2012-10-02 Apple Inc. Multipoint touch surface controller
JP4737539B2 (ja) 2006-05-03 2011-08-03 株式会社ソニー・コンピュータエンタテインメント マルチメディア再生装置および背景画像表示方法
US9063647B2 (en) 2006-05-12 2015-06-23 Microsoft Technology Licensing, Llc Multi-touch uses, gestures, and implementation
US20070299923A1 (en) 2006-06-16 2007-12-27 Skelly George J Methods and systems for managing messaging
US7921116B2 (en) 2006-06-16 2011-04-05 Microsoft Corporation Highly meaningful multimedia metadata creation and associations
KR101242030B1 (ko) 2006-06-22 2013-03-11 엘지디스플레이 주식회사 유기전계발광 소자
US7880728B2 (en) 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
JP2008009759A (ja) 2006-06-29 2008-01-17 Toyota Motor Corp タッチパネル装置
JP4751780B2 (ja) 2006-07-07 2011-08-17 株式会社エヌ・ティ・ティ・ドコモ キー入力装置
JP4583344B2 (ja) 2006-07-10 2010-11-17 シャープ株式会社 携帯電話機
EP1882902A1 (en) 2006-07-27 2008-01-30 Aisin AW Co., Ltd. Navigation apparatus and method for providing guidance to a vehicle user using a touch screen
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US8255815B2 (en) 2006-08-04 2012-08-28 Apple Inc. Motion picture preview icons
US20080051989A1 (en) 2006-08-25 2008-02-28 Microsoft Corporation Filtering of data layered on mapping applications
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7930650B2 (en) 2006-09-11 2011-04-19 Apple Inc. User interface with menu abstractions and content abstractions
US7743338B2 (en) 2006-09-11 2010-06-22 Apple Inc. Image rendering with image artifact along a multidimensional path
US8564543B2 (en) 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7581186B2 (en) 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
US20080094398A1 (en) 2006-09-19 2008-04-24 Bracco Imaging, S.P.A. Methods and systems for interacting with a 3D visualization system using a 2D interface ("DextroLap")
JP5176300B2 (ja) 2006-09-22 2013-04-03 富士通株式会社 電子機器、その制御方法及びその制御プログラム
JP2008076818A (ja) 2006-09-22 2008-04-03 Fujitsu Ltd 携帯端末装置
CN101506758A (zh) 2006-09-27 2009-08-12 诺基亚公司 触觉型触摸屏
US8245154B2 (en) 2006-11-03 2012-08-14 International Business Machines Corporation Most-recently-used task switching among parent and child windows
US20080106523A1 (en) 2006-11-07 2008-05-08 Conrad Richard H Ergonomic lift-clicking method and apparatus for actuating home switches on computer input devices
WO2008064142A2 (en) 2006-11-20 2008-05-29 Pham Don N Interactive sequential key system to input characters on small keypads
US8006002B2 (en) 2006-12-12 2011-08-23 Apple Inc. Methods and systems for automatic configuration of peripherals
JP2008146453A (ja) * 2006-12-12 2008-06-26 Sony Corp 映像信号出力装置、操作入力処理方法
KR20080058121A (ko) 2006-12-21 2008-06-25 삼성전자주식회사 휴대단말기에서의 촉각형 사용자 인터페이스 제공 장치 및방법
US20080163119A1 (en) 2006-12-28 2008-07-03 Samsung Electronics Co., Ltd. Method for providing menu and multimedia device using the same
WO2008085874A2 (en) 2007-01-05 2008-07-17 Marvell World Trade Ltd. Methods and systems for improving low-resolution video
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US20080168395A1 (en) 2007-01-07 2008-07-10 Bas Ording Positioning a Slider Icon on a Portable Multifunction Device
US9001047B2 (en) 2007-01-07 2015-04-07 Apple Inc. Modal change based on orientation of a portable multifunction device
US20080222545A1 (en) 2007-01-07 2008-09-11 Lemay Stephen O Portable Electronic Device with a Global Setting User Interface
US8082523B2 (en) 2007-01-07 2011-12-20 Apple Inc. Portable electronic device with graphical user interface supporting application switching
US7978176B2 (en) 2007-01-07 2011-07-12 Apple Inc. Portrait-landscape rotation heuristics for a portable multifunction device
US7957762B2 (en) 2007-01-07 2011-06-07 Apple Inc. Using ambient light sensor to augment proximity sensor output
EP2104890B1 (en) 2007-01-11 2019-04-03 Koninklijke Philips N.V. Method and apparatus for providing an undo/redo mechanism
GB2446702A (en) 2007-02-13 2008-08-20 Qrg Ltd Touch Control Panel with Pressure Sensor
KR101450584B1 (ko) 2007-02-22 2014-10-14 삼성전자주식회사 단말의 화면 표시 방법
US8650505B2 (en) 2007-02-28 2014-02-11 Rpx Corporation Multi-state unified pie user interface
EP2541902B1 (en) 2007-03-06 2014-06-25 Panasonic Corporation Imaging processing device and image processing method
WO2008109172A1 (en) 2007-03-07 2008-09-12 Wiklof Christopher A Recorder with retrospective capture
US8352881B2 (en) 2007-03-08 2013-01-08 International Business Machines Corporation Method, apparatus and program storage device for providing customizable, immediate and radiating menus for accessing applications and actions
US7895533B2 (en) 2007-03-13 2011-02-22 Apple Inc. Interactive image thumbnails
US20080244448A1 (en) 2007-04-01 2008-10-02 Katharina Goering Generation of menu presentation relative to a given menu orientation
US20080259046A1 (en) 2007-04-05 2008-10-23 Joseph Carsanaro Pressure sensitive touch pad with virtual programmable buttons for launching utility applications
US7973778B2 (en) 2007-04-16 2011-07-05 Microsoft Corporation Visual simulation of touch pressure
US8140996B2 (en) 2007-04-17 2012-03-20 QNX Software Systems Limtied System for endless loop scrolling and display
CN101290553A (zh) 2007-04-17 2008-10-22 索尼（中国）有限公司 具有显示屏的电子设备
WO2008131544A1 (en) 2007-04-26 2008-11-06 University Of Manitoba Pressure augmented mouse
US20080270910A1 (en) 2007-04-30 2008-10-30 Lukasik Derek J User selection of a remote session
JP2008283629A (ja) 2007-05-14 2008-11-20 Sony Corp 撮像装置、撮像信号処理方法、プログラム
CN201107762Y (zh) 2007-05-15 2008-08-27 宏达国际电子股份有限公司 具有可切换使用者界面以及无阻碍触控操作的电子装置
US8621348B2 (en) 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
JPWO2008146784A1 (ja) 2007-05-29 2010-08-19 株式会社Ａｃｃｅｓｓ 端末装置、ヒストリ管理方法、およびヒストリ管理の為のコンピュータ使用可能な記憶媒体
US7801950B2 (en) 2007-06-01 2010-09-21 Clustrmaps Ltd. System for analyzing and visualizing access statistics for a web site
US20080307359A1 (en) 2007-06-08 2008-12-11 Apple Inc. Grouping Graphical Representations of Objects in a User Interface
US8010900B2 (en) 2007-06-08 2011-08-30 Apple Inc. User interface for electronic backup
US8667418B2 (en) 2007-06-08 2014-03-04 Apple Inc. Object stack
US8381122B2 (en) 2007-06-08 2013-02-19 Apple Inc. Multi-dimensional application environment
US8745535B2 (en) 2007-06-08 2014-06-03 Apple Inc. Multi-dimensional desktop
US9933937B2 (en) 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
US8059101B2 (en) 2007-06-22 2011-11-15 Apple Inc. Swipe gestures for touch screen keyboards
US8302033B2 (en) 2007-06-22 2012-10-30 Apple Inc. Touch screen device, method, and graphical user interface for providing maps, directions, and location-based information
US8315482B2 (en) 2007-06-26 2012-11-20 Microsoft Corporation Integrated platform for user input of digital ink
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
US20090046110A1 (en) 2007-08-16 2009-02-19 Motorola, Inc. Method and apparatus for manipulating a displayed image
US20110210931A1 (en) 2007-08-19 2011-09-01 Ringbow Ltd. Finger-worn device and interaction methods and communication methods
KR20090019161A (ko) 2007-08-20 2009-02-25 삼성전자주식회사 전자 장치 및 이를 조작하는 방법
KR101424259B1 (ko) 2007-08-22 2014-07-31 삼성전자주식회사 휴대단말에서 입력 피드백 제공 방법 및 장치
US9477395B2 (en) 2007-09-04 2016-10-25 Apple Inc. Audio file interface
US8825802B2 (en) 2007-09-04 2014-09-02 Sony Computer Entertainment America Llc System and method for identifying compatible users
US8826132B2 (en) 2007-09-04 2014-09-02 Apple Inc. Methods and systems for navigating content on a portable device
US20110145068A1 (en) 2007-09-17 2011-06-16 King Martin T Associating rendered advertisements with digital content
US20090089293A1 (en) 2007-09-28 2009-04-02 Bccg Ventures, Llc Selfish data browsing
US8098235B2 (en) 2007-09-28 2012-01-17 Immersion Corporation Multi-touch device having dynamic haptic effects
US8125458B2 (en) 2007-09-28 2012-02-28 Microsoft Corporation Detecting finger orientation on a touch-sensitive device
TWI417764B (zh) 2007-10-01 2013-12-01 Giga Byte Comm Inc A control method and a device for performing a switching function of a touch screen of a hand-held electronic device
DE202008018283U1 (de) 2007-10-04 2012-07-17 Lg Electronics Inc. Menüanzeige für ein mobiles Kommunikationsendgerät
KR101570368B1 (ko) 2008-08-22 2015-11-20 엘지전자 주식회사 이동 단말기 및 그 메뉴 표시 방법
KR20090036877A (ko) 2007-10-10 2009-04-15 삼성전자주식회사 다중 프로젝션 윈도우 환경에서 기준자 기반으로오브젝트를 관리하는 방법 및 그 시스템
CN101414231B (zh) 2007-10-17 2011-09-21 鸿富锦精密工业（深圳）有限公司 触摸屏装置及其图像显示方法
US20090102805A1 (en) 2007-10-18 2009-04-23 Microsoft Corporation Three-dimensional object simulation using audio, visual, and tactile feedback
DE102007052008A1 (de) 2007-10-26 2009-04-30 Andreas Steinhauser Single- oder multitouchfähiger Touchscreen oder Touchpad bestehend aus einem Array von Drucksensoren sowie Herstellung solcher Sensoren
US8024670B1 (en) 2007-10-30 2011-09-20 Intuit Inc. Workflow management using live thumbnails
US8201101B2 (en) 2007-10-31 2012-06-12 Stratovan Corporation Resolution independent layout
JP2009129171A (ja) * 2007-11-22 2009-06-11 Denso It Laboratory Inc 移動体に搭載される情報処理装置
US20090140985A1 (en) 2007-11-30 2009-06-04 Eric Liu Computing device that determines and uses applied pressure from user interaction with an input interface
US20090167507A1 (en) 2007-12-07 2009-07-02 Nokia Corporation User interface
US8140974B2 (en) 2007-12-14 2012-03-20 Microsoft Corporation Presenting secondary media objects to a user
JP4605214B2 (ja) 2007-12-19 2011-01-05 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
TW200930009A (en) 2007-12-21 2009-07-01 Inventec Appliances Corp Procedure of acting personally hot function setting
US8233671B2 (en) 2007-12-27 2012-07-31 Intel-Ge Care Innovations Llc Reading device with hierarchal navigation
US9170649B2 (en) 2007-12-28 2015-10-27 Nokia Technologies Oy Audio and tactile feedback based on visual environment
US8138896B2 (en) 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
US9857872B2 (en) 2007-12-31 2018-01-02 Apple Inc. Multi-touch display screen with localized tactile feedback
US9063627B2 (en) 2008-01-04 2015-06-23 Tactus Technology, Inc. User interface and methods
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8196042B2 (en) 2008-01-21 2012-06-05 Microsoft Corporation Self-revelation aids for interfaces
US8504945B2 (en) 2008-02-01 2013-08-06 Gabriel Jakobson Method and system for associating content with map zoom function
US8423076B2 (en) 2008-02-01 2013-04-16 Lg Electronics Inc. User interface for a mobile device
US8314801B2 (en) 2008-02-29 2012-11-20 Microsoft Corporation Visual state manager for control skinning
US8717305B2 (en) 2008-03-04 2014-05-06 Apple Inc. Touch event model for web pages
US20090276730A1 (en) 2008-03-04 2009-11-05 Alexandre Aybes Techniques for navigation of hierarchically-presented data
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
KR101012300B1 (ko) 2008-03-07 2011-02-08 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 사용자 인터페이스장치 및 그 방법
JP4670879B2 (ja) 2008-03-11 2011-04-13 ブラザー工業株式会社 接触入力型の情報処理装置、接触入力型の情報処理方法、及び情報処理プログラム
US20090237374A1 (en) 2008-03-20 2009-09-24 Motorola, Inc. Transparent pressure sensor and method for using
US8228300B2 (en) 2008-03-28 2012-07-24 Sprint Communications Company L.P. Physical feedback to indicate object directional slide
JP5200641B2 (ja) 2008-04-10 2013-06-05 ソニー株式会社 リスト表示装置及びリスト表示方法
US8745514B1 (en) 2008-04-11 2014-06-03 Perceptive Pixel, Inc. Pressure-sensitive layering of displayed objects
US8259208B2 (en) 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
JP5428189B2 (ja) 2008-04-17 2014-02-26 三洋電機株式会社 ナビゲーション装置
US20090267906A1 (en) 2008-04-25 2009-10-29 Nokia Corporation Touch sensitive apparatus
US20090271731A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
US8159469B2 (en) 2008-05-06 2012-04-17 Hewlett-Packard Development Company, L.P. User interface for initiating activities in an electronic device
KR101461954B1 (ko) 2008-05-08 2014-11-14 엘지전자 주식회사 단말기 및 그 제어 방법
US20090280860A1 (en) 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
US20100138780A1 (en) 2008-05-20 2010-06-03 Adam Marano Methods and systems for using external display devices with a mobile computing device
US7958447B2 (en) 2008-05-23 2011-06-07 International Business Machines Corporation Method and system for page navigating user interfaces for electronic devices
US20090307633A1 (en) 2008-06-06 2009-12-10 Apple Inc. Acceleration navigation of media device displays
US8099332B2 (en) 2008-06-06 2012-01-17 Apple Inc. User interface for application management for a mobile device
KR101498623B1 (ko) 2008-06-25 2015-03-04 엘지전자 주식회사 휴대 단말기 및 그 제어방법
WO2009155981A1 (en) 2008-06-26 2009-12-30 Uiq Technology Ab Gesture on touch sensitive arrangement
JP4896932B2 (ja) 2008-06-26 2012-03-14 京セラ株式会社 入力装置
US8504946B2 (en) 2008-06-27 2013-08-06 Apple Inc. Portable device, method, and graphical user interface for automatically scrolling to display the top of an electronic document
WO2009158549A2 (en) 2008-06-28 2009-12-30 Apple Inc. Radial menu selection
US8477228B2 (en) 2008-06-30 2013-07-02 Verizon Patent And Licensing Inc. Camera data management and user interface apparatuses, systems, and methods
JP4938733B2 (ja) 2008-06-30 2012-05-23 株式会社ソニー・コンピュータエンタテインメント メニュー画面表示方法およびメニュー画面表示装置
EP3258361B1 (en) 2008-07-01 2020-08-12 LG Electronics Inc. -1- Mobile terminal using pressure sensor and method of controlling the mobile terminal
US20100013613A1 (en) 2008-07-08 2010-01-21 Jonathan Samuel Weston Haptic feedback projection system
US10095375B2 (en) 2008-07-09 2018-10-09 Apple Inc. Adding a contact to a home screen
JP4198190B1 (ja) 2008-07-11 2008-12-17 任天堂株式会社 画像通信システム、画像通信装置、および画像通信プログラム
US8274484B2 (en) 2008-07-18 2012-09-25 Microsoft Corporation Tracking input in a screen-reflective interface environment
KR101495559B1 (ko) 2008-07-21 2015-02-27 삼성전자주식회사 사용자 명령 입력 방법 및 그 장치
US9176620B2 (en) 2008-07-22 2015-11-03 Lg Electronics Inc. Mobile terminal and method for displaying information list thereof
KR20100010302A (ko) 2008-07-22 2010-02-01 엘지전자 주식회사 이동단말기 및 그 메뉴 표시방법
JP5100556B2 (ja) 2008-07-30 2012-12-19 キヤノン株式会社 情報処理方法及び装置
US10983665B2 (en) 2008-08-01 2021-04-20 Samsung Electronics Co., Ltd. Electronic apparatus and method for implementing user interface
US8604364B2 (en) 2008-08-15 2013-12-10 Lester F. Ludwig Sensors, algorithms and applications for a high dimensional touchpad
JP4600548B2 (ja) 2008-08-27 2010-12-15 ソニー株式会社 再生装置、再生方法、およびプログラム
US10375223B2 (en) 2008-08-28 2019-08-06 Qualcomm Incorporated Notifying a user of events in a computing device
US8913176B2 (en) 2008-09-05 2014-12-16 Lg Electronics Inc. Mobile terminal and method of performing multi-focusing and photographing image including plurality of objects using the same
US20100277496A1 (en) 2008-09-16 2010-11-04 Ryouichi Kawanishi Data display device, integrated circuit, data display method, data display program, and recording medium
JP5494485B2 (ja) 2008-09-17 2014-05-14 日本電気株式会社 入力装置及びその制御方法並びに入力装置を備えた電子機器
US9041650B2 (en) 2008-09-18 2015-05-26 Apple Inc. Using measurement of lateral force for a tracking input device
US20100070908A1 (en) 2008-09-18 2010-03-18 Sun Microsystems, Inc. System and method for accepting or rejecting suggested text corrections
US8769427B2 (en) 2008-09-19 2014-07-01 Google Inc. Quick gesture input
KR101451667B1 (ko) 2008-09-24 2014-10-16 엘지전자 주식회사 단말기 및 그 제어 방법
US8359547B2 (en) 2008-10-01 2013-01-22 Nintendo Co., Ltd. Movable user interface indicator of at least one parameter that is adjustable with different operations for increasing and decreasing the parameter and/or methods of providing the same
US8462107B2 (en) 2008-10-03 2013-06-11 International Business Machines Corporation Pointing device and method with error prevention features
EP2175344B1 (en) 2008-10-06 2020-02-12 Samsung Electronics Co., Ltd. Method and apparatus for displaying graphical user interface depending on a user's contact pattern
US9442648B2 (en) 2008-10-07 2016-09-13 Blackberry Limited Portable electronic device and method of controlling same
US20100088628A1 (en) 2008-10-07 2010-04-08 Sony Ericsson Mobile Communications Ab Live preview of open windows
US9395867B2 (en) 2008-10-08 2016-07-19 Blackberry Limited Method and system for displaying an image on an electronic device
US20100085314A1 (en) 2008-10-08 2010-04-08 Research In Motion Limited Portable electronic device and method of controlling same
EP2175357B1 (en) 2008-10-08 2012-11-21 Research In Motion Limited Portable electronic device and method of controlling same
US8245143B2 (en) 2008-10-08 2012-08-14 Research In Motion Limited Method and handheld electronic device having a graphical user interface which arranges icons dynamically
KR100941512B1 (ko) 2008-10-15 2010-02-10 (주)엠쓰리모바일 스타일러스 펜
JP2010097353A (ja) 2008-10-15 2010-04-30 Access Co Ltd 情報端末
KR100961473B1 (ko) 2008-10-15 2010-06-08 주식회사 케이티 무선 인터넷 브라우저의 웹 페이지 내용을 메시징하는 이동단말 및 그 방법
KR101510738B1 (ko) 2008-10-20 2015-04-10 삼성전자주식회사 휴대단말의 대기화면 구성 방법 및 장치
KR101569176B1 (ko) 2008-10-30 2015-11-20 삼성전자주식회사 오브젝트 실행 방법 및 장치
CN101727268A (zh) 2008-11-03 2010-06-09 英业达股份有限公司 手持式电子装置与其程序显示切换方法
EP2863289A1 (en) 2008-11-18 2015-04-22 Studer Professional Audio GmbH Input device and method of detecting a user input with an input device
JP4752900B2 (ja) 2008-11-19 2011-08-17 ソニー株式会社 画像処理装置、画像表示方法および画像表示プログラム
US20100123686A1 (en) 2008-11-19 2010-05-20 Sony Ericsson Mobile Communications Ab Piezoresistive force sensor integrated in a display
US8788977B2 (en) 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism
EP2368170B1 (en) 2008-11-26 2017-11-01 BlackBerry Limited Touch-sensitive display method and apparatus
US20100138776A1 (en) 2008-11-30 2010-06-03 Nokia Corporation Flick-scrolling
DE112009003521T5 (de) 2008-12-04 2013-10-10 Mitsubishi Electric Corp. Anzeigeeingabevorrichtung
US8638311B2 (en) 2008-12-08 2014-01-28 Samsung Electronics Co., Ltd. Display device and data displaying method thereof
JP2010165337A (ja) 2008-12-15 2010-07-29 Sony Corp 情報処理装置、情報処理方法およびプログラム
WO2010071630A1 (en) 2008-12-15 2010-06-24 Hewlett-Packard Development Company, L.P. Gesture based edit mode
US9246487B2 (en) 2008-12-16 2016-01-26 Dell Products Lp Keyboard with user configurable granularity scales for pressure sensitive keys
US8711011B2 (en) 2008-12-16 2014-04-29 Dell Products, Lp Systems and methods for implementing pressure sensitive keyboards
US20100149096A1 (en) 2008-12-17 2010-06-17 Migos Charles J Network management using interaction with display surface
KR101352264B1 (ko) * 2008-12-18 2014-01-17 엘지디스플레이 주식회사 멀티 터치 감지방법 및 장치
JP4975722B2 (ja) 2008-12-22 2012-07-11 京セラ株式会社 入力装置および入力装置の制御方法
US8547342B2 (en) 2008-12-22 2013-10-01 Verizon Patent And Licensing Inc. Gesture-based delivery from mobile device
US8451236B2 (en) 2008-12-22 2013-05-28 Hewlett-Packard Development Company L.P. Touch-sensitive display screen with absolute and relative input modes
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US20100156823A1 (en) 2008-12-23 2010-06-24 Research In Motion Limited Electronic device including touch-sensitive display and method of controlling same to provide tactile feedback
JP4885938B2 (ja) 2008-12-25 2012-02-29 京セラ株式会社 入力装置
JP4746085B2 (ja) 2008-12-25 2011-08-10 京セラ株式会社 入力装置
JP4683126B2 (ja) 2008-12-26 2011-05-11 ブラザー工業株式会社 入力装置
KR20100080429A (ko) 2008-12-30 2010-07-08 엘지전자 주식회사 영상표시기기 및 그 제어 방법
US8219927B2 (en) 2009-01-06 2012-07-10 Microsoft Corporation Revealing of truncated content on scrollable grid
US8446376B2 (en) 2009-01-13 2013-05-21 Microsoft Corporation Visual response to touch inputs
JP2010176174A (ja) 2009-01-27 2010-08-12 Fujifilm Corp 電子機器および電子機器の操作入力制御方法、並びに電子機器の操作入力制御プログラム
JP5173870B2 (ja) 2009-01-28 2013-04-03 京セラ株式会社 入力装置
US20100194693A1 (en) 2009-01-30 2010-08-05 Sony Ericsson Mobile Communications Ab Electronic apparatus, method and computer program with adaptable user interface environment
EP2214087B1 (en) 2009-01-30 2015-07-08 BlackBerry Limited A handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
JP4723656B2 (ja) 2009-02-03 2011-07-13 京セラ株式会社 入力装置
US9152292B2 (en) 2009-02-05 2015-10-06 Hewlett-Packard Development Company, L.P. Image collage authoring
US9176747B2 (en) 2009-02-17 2015-11-03 Sandisk Il Ltd. User-application interface
CN105930311B (zh) 2009-02-18 2018-10-09 谷歌有限责任公司 执行与再现文档关联的动作的方法、移动设备和可读介质
US20100214239A1 (en) 2009-02-23 2010-08-26 Compal Electronics, Inc. Method and touch panel for providing tactile feedback
KR100993064B1 (ko) 2009-03-02 2010-11-08 주식회사 팬택 터치 스크린 적용 음원 재생 장치에서의 음원 선택 재생 방법
JP5267229B2 (ja) 2009-03-09 2013-08-21 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
JP5157969B2 (ja) 2009-03-09 2013-03-06 ソニー株式会社 情報処理装置、閾値設定方法及びそのプログラム
WO2010105245A2 (en) 2009-03-12 2010-09-16 Exbiblio B.V. Automatically providing content associated with captured information, such as information captured in real-time
US8285499B2 (en) 2009-03-16 2012-10-09 Apple Inc. Event recognition
US8370736B2 (en) 2009-03-16 2013-02-05 Apple Inc. Methods and graphical user interfaces for editing on a multifunction device with a touch screen display
US9852761B2 (en) 2009-03-16 2017-12-26 Apple Inc. Device, method, and graphical user interface for editing an audio or video attachment in an electronic message
US9262071B2 (en) 2009-03-16 2016-02-16 Microsoft Technology Licensing, Llc Direct manipulation of content
US9684521B2 (en) 2010-01-26 2017-06-20 Apple Inc. Systems having discrete and continuous gesture recognizers
US8984431B2 (en) 2009-03-16 2015-03-17 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
KR101549558B1 (ko) 2009-03-18 2015-09-03 엘지전자 주식회사 휴대 단말기 및 그 제어방법
JP5252378B2 (ja) 2009-03-26 2013-07-31 ヤマハ株式会社 ミキサ装置のウィンドウ制御方法、ミキサ装置、およびミキサ装置のウィンドウ制御プログラム
US8355698B2 (en) 2009-03-30 2013-01-15 Microsoft Corporation Unlock screen
US9189124B2 (en) 2009-04-15 2015-11-17 Wyse Technology L.L.C. Custom pointer features for touch-screen on remote client devices
US20100271312A1 (en) 2009-04-22 2010-10-28 Rachid Alameh Menu Configuration System and Method for Display on an Electronic Device
WO2010122813A1 (ja) 2009-04-24 2010-10-28 京セラ株式会社 入力装置
JP4801228B2 (ja) 2009-04-24 2011-10-26 京セラ株式会社 入力装置
KR20100118458A (ko) 2009-04-28 2010-11-05 엘지전자 주식회사 이미지 처리 방법 및 이를 적용한 카메라가 장착된 이동 통신 단말기
US9354795B2 (en) 2009-04-29 2016-05-31 Lenovo (Singapore) Pte. Ltd Refining manual input interpretation on touch surfaces
US8418082B2 (en) 2009-05-01 2013-04-09 Apple Inc. Cross-track edit indicators and edit selections
US8627207B2 (en) 2009-05-01 2014-01-07 Apple Inc. Presenting an editing tool in a composite display area
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
US8427503B2 (en) 2009-05-18 2013-04-23 Nokia Corporation Method, apparatus and computer program product for creating graphical objects with desired physical features for usage in animation
KR101601040B1 (ko) 2009-05-19 2016-03-09 삼성전자주식회사 휴대 단말기의 화면 표시 방법 및 이를 지원하는 휴대 단말기
US20140078318A1 (en) 2009-05-22 2014-03-20 Motorola Mobility Llc Electronic Device with Sensing Assembly and Method for Interpreting Consecutive Gestures
KR101560718B1 (ko) 2009-05-29 2015-10-15 엘지전자 주식회사 이동 단말기 및 이동 단말기에서의 정보 표시 방법
US9148618B2 (en) 2009-05-29 2015-09-29 Apple Inc. Systems and methods for previewing newly captured image content and reviewing previously stored image content
US8549432B2 (en) 2009-05-29 2013-10-01 Apple Inc. Radial menus
KR20100129424A (ko) 2009-06-01 2010-12-09 한국표준과학연구원 터치스크린의 접촉위치 및 접촉힘의 세기를 이용한 사용자 인터페이스 제공 방법 및 장치
US9372536B2 (en) 2009-06-05 2016-06-21 Empire Technology Development Llc Touch screen with tactile feedback
US8493344B2 (en) 2009-06-07 2013-07-23 Apple Inc. Devices, methods, and graphical user interfaces for accessibility using a touch-sensitive surface
US9405456B2 (en) 2009-06-08 2016-08-02 Xerox Corporation Manipulation of displayed objects by virtual magnetism
US20100313158A1 (en) 2009-06-08 2010-12-09 Lg Electronics Inc. Method for editing data in mobile terminal and mobile terminal using the same
US8621387B2 (en) 2009-06-08 2013-12-31 Apple Inc. User interface for multiple display regions
US8823749B2 (en) 2009-06-10 2014-09-02 Qualcomm Incorporated User interface methods providing continuous zoom functionality
KR101598335B1 (ko) 2009-06-11 2016-02-29 엘지전자 주식회사 휴대 단말기 및 그 동작방법
US8593415B2 (en) 2009-06-19 2013-11-26 Lg Electronics Inc. Method for processing touch signal in mobile terminal and mobile terminal using the same
US9330503B2 (en) 2009-06-19 2016-05-03 Microsoft Technology Licensing, Llc Presaging and surfacing interactivity within data visualizations
EP2447857A4 (en) 2009-06-26 2016-05-11 Kyocera Corp COMMUNICATION DEVICE AND ELECTRONIC DEVICE
US20110010626A1 (en) 2009-07-09 2011-01-13 Jorge Fino Device and Method for Adjusting a Playback Control with a Finger Gesture
KR101608764B1 (ko) 2009-07-14 2016-04-04 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
CA2761700C (en) 2009-07-24 2014-12-02 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP5197521B2 (ja) 2009-07-29 2013-05-15 京セラ株式会社 入力装置
US9244562B1 (en) 2009-07-31 2016-01-26 Amazon Technologies, Inc. Gestures and touches on force-sensitive input devices
US20110055135A1 (en) 2009-08-26 2011-03-03 International Business Machines Corporation Deferred Teleportation or Relocation in Virtual Worlds
JP5310389B2 (ja) 2009-08-27 2013-10-09 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US8363020B2 (en) 2009-08-27 2013-01-29 Symbol Technologies, Inc. Methods and apparatus for pressure-based manipulation of content on a touch screen
JP2011048669A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置
JP2011048686A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置
JP5304544B2 (ja) 2009-08-28 2013-10-02 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5267388B2 (ja) 2009-08-31 2013-08-21 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8390583B2 (en) 2009-08-31 2013-03-05 Qualcomm Incorporated Pressure sensitive user interface for mobile devices
JP5593655B2 (ja) 2009-08-31 2014-09-24 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
KR20110023977A (ko) 2009-09-01 2011-03-09 삼성전자주식회사 휴대단말기의 위젯 관리 방법 및 장치
JP2011053971A (ja) 2009-09-02 2011-03-17 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011053974A (ja) 2009-09-02 2011-03-17 Sony Corp 操作制御装置、操作制御方法およびコンピュータプログラム
JP5310403B2 (ja) 2009-09-02 2013-10-09 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8451238B2 (en) 2009-09-02 2013-05-28 Amazon Technologies, Inc. Touch-screen user interface
JP5182260B2 (ja) 2009-09-02 2013-04-17 ソニー株式会社 操作制御装置、操作制御方法およびコンピュータプログラム
US9262063B2 (en) 2009-09-02 2016-02-16 Amazon Technologies, Inc. Touch-screen user interface
TW201109990A (en) 2009-09-04 2011-03-16 Higgstec Inc Touch gesture detecting method of a touch panel
JP5278259B2 (ja) 2009-09-07 2013-09-04 ソニー株式会社 入力装置、入力方法及びプログラム
EP2302496A1 (en) * 2009-09-10 2011-03-30 Research In Motion Limited Dynamic sizing of identifier on a touch-sensitive display
US20110057886A1 (en) 2009-09-10 2011-03-10 Oliver Ng Dynamic sizing of identifier on a touch-sensitive display
KR20110028834A (ko) 2009-09-14 2011-03-22 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 터치 압력을 이용한 사용자 인터페이스 제공 방법 및 장치
WO2011037558A1 (en) 2009-09-22 2011-03-31 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8264471B2 (en) 2009-09-22 2012-09-11 Sony Mobile Communications Ab Miniature character input mechanism
US8421762B2 (en) 2009-09-25 2013-04-16 Apple Inc. Device, method, and graphical user interface for manipulation of user interface objects with activation regions
JP5393377B2 (ja) 2009-09-25 2014-01-22 京セラ株式会社 入力装置
US8436806B2 (en) 2009-10-02 2013-05-07 Research In Motion Limited Method of synchronizing data acquisition and a portable electronic device configured to perform the same
US9141260B2 (en) 2009-10-08 2015-09-22 Red Hat, Inc. Workspace management tool
US20110084910A1 (en) 2009-10-13 2011-04-14 Research In Motion Limited Portable electronic device including touch-sensitive display and method of controlling same
KR101092592B1 (ko) 2009-10-14 2011-12-13 주식회사 팬택 이동통신단말기 및 이의 터치 인터페이스 제공 방법
US10068728B2 (en) 2009-10-15 2018-09-04 Synaptics Incorporated Touchpad with capacitive force sensing
CA2680602C (en) 2009-10-19 2011-07-26 Ibm Canada Limited - Ibm Canada Limitee System and method for generating and displaying hybrid context menus
US8677284B2 (en) 2009-11-04 2014-03-18 Alpine Electronics, Inc. Method and apparatus for controlling and displaying contents in a user interface
JP5328611B2 (ja) 2009-11-05 2013-10-30 シャープ株式会社 携帯情報端末
US8843838B2 (en) 2009-11-13 2014-09-23 Google Inc. Live wallpaper
JP2011107823A (ja) 2009-11-13 2011-06-02 Canon Inc 表示制御装置及び表示制御方法
KR101611440B1 (ko) 2009-11-16 2016-04-11 삼성전자주식회사 이미지 처리 방법 및 장치
US8665227B2 (en) 2009-11-19 2014-03-04 Motorola Mobility Llc Method and apparatus for replicating physical key function with soft keys in an electronic device
US8432367B2 (en) 2009-11-19 2013-04-30 Google Inc. Translating user interaction with a touch screen into input commands
KR101620058B1 (ko) 2009-11-23 2016-05-24 삼성전자주식회사 가상 머신 간 화면 전환 장치 및 방법
KR101073309B1 (ko) 2009-11-24 2011-10-12 삼성모바일디스플레이주식회사 터치 스크린 시스템 및 그 구동방법
US8799816B2 (en) 2009-12-07 2014-08-05 Motorola Mobility Llc Display interface and method for displaying multiple items arranged in a sequence
US8769428B2 (en) 2009-12-09 2014-07-01 Citrix Systems, Inc. Methods and systems for generating a combined display of taskbar button group entries generated on a local machine and on a remote machine
US9557735B2 (en) 2009-12-10 2017-01-31 Fisher-Rosemount Systems, Inc. Methods and apparatus to manage process control status rollups
US8633916B2 (en) 2009-12-10 2014-01-21 Apple, Inc. Touch pad with force sensors and actuator feedback
JP5490508B2 (ja) 2009-12-11 2014-05-14 京セラ株式会社 タッチセンサを有する装置、触感呈示方法及び触感呈示プログラム
US8358281B2 (en) 2009-12-15 2013-01-22 Apple Inc. Device, method, and graphical user interface for management and manipulation of user interface elements
US8274592B2 (en) 2009-12-22 2012-09-25 Eastman Kodak Company Variable rate browsing of an image collection
US8438504B2 (en) 2010-01-06 2013-05-07 Apple Inc. Device, method, and graphical user interface for navigating through multiple viewing areas
US8698845B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface with interactive popup views
US8525839B2 (en) 2010-01-06 2013-09-03 Apple Inc. Device, method, and graphical user interface for providing digital content products
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8793611B2 (en) 2010-01-06 2014-07-29 Apple Inc. Device, method, and graphical user interface for manipulating selectable user interface objects
US8862576B2 (en) 2010-01-06 2014-10-14 Apple Inc. Device, method, and graphical user interface for mapping directions between search results
US20110167339A1 (en) 2010-01-06 2011-07-07 Lemay Stephen O Device, Method, and Graphical User Interface for Attachment Viewing and Editing
KR101616875B1 (ko) 2010-01-07 2016-05-02 삼성전자주식회사 터치 패널 및 이를 구비한 전자기기
US9715332B1 (en) 2010-08-26 2017-07-25 Cypress Lake Software, Inc. Methods, systems, and computer program products for navigating between visual components
US10007393B2 (en) 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
JP5636678B2 (ja) 2010-01-19 2014-12-10 ソニー株式会社 表示制御装置、表示制御方法及び表示制御プログラム
US20110179381A1 (en) 2010-01-21 2011-07-21 Research In Motion Limited Portable electronic device and method of controlling same
KR101304321B1 (ko) 2010-01-22 2013-09-11 전자부품연구원 싱글 터치 압력에 기반한 ｕｉ 제공방법 및 이를 적용한 전자기기
US8914732B2 (en) 2010-01-22 2014-12-16 Lg Electronics Inc. Displaying home screen profiles on a mobile terminal
US8683363B2 (en) 2010-01-26 2014-03-25 Apple Inc. Device, method, and graphical user interface for managing user interface content and user interface elements
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US20110185299A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
US8988367B2 (en) 2010-02-05 2015-03-24 Broadcom Corporation Systems and methods for providing enhanced touch sensing
US20110193881A1 (en) 2010-02-05 2011-08-11 Sony Ericsson Mobile Communications Ab Regulation of navigation speed among displayed items and tilt angle thereof responsive to user applied pressure
US8839150B2 (en) 2010-02-10 2014-09-16 Apple Inc. Graphical objects that respond to touch or motion input
KR101673918B1 (ko) 2010-02-11 2016-11-09 삼성전자주식회사 휴대단말에서 복수의 정보들을 제공하는 방법 및 장치
KR101690786B1 (ko) 2010-02-12 2016-12-28 삼성전자주식회사 멀티태스킹 수행 장치 및 방법
US8782556B2 (en) 2010-02-12 2014-07-15 Microsoft Corporation User-centric soft keyboard predictive technologies
US9417787B2 (en) 2010-02-12 2016-08-16 Microsoft Technology Licensing, Llc Distortion effects to indicate location in a movable data collection
EP2360570A3 (en) 2010-02-15 2012-05-16 Research In Motion Limited Graphical context short menu
EP2362615A1 (en) 2010-02-15 2011-08-31 Research In Motion Limited Method, program and system for displaying a contact object icon and corresponding contact's status on one or more communications services in a display of a mobile communications device
JP2011197848A (ja) * 2010-03-18 2011-10-06 Rohm Co Ltd タッチパネル入力装置
US9274682B2 (en) 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
EP2541376B1 (en) 2010-02-23 2019-07-31 Kyocera Corporation Electronic apparatus
EP2679013A2 (en) 2010-02-23 2014-01-01 MUV Interactive Ltd. A system for projecting content to a display surface having user-controlled size, shape and location/direction and apparatus and methods useful in conjunction therewith
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9361018B2 (en) 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
JP5413250B2 (ja) 2010-03-05 2014-02-12 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US8941600B2 (en) 2010-03-05 2015-01-27 Mckesson Financial Holdings Apparatus for providing touch feedback for user input to a touch sensitive surface
US20110221684A1 (en) 2010-03-11 2011-09-15 Sony Ericsson Mobile Communications Ab Touch-sensitive input device, mobile device and method for operating a touch-sensitive input device
JP2011192179A (ja) 2010-03-16 2011-09-29 Kyocera Corp 文字入力装置、文字入力方法及び文字入力プログラム
JP2011192215A (ja) 2010-03-16 2011-09-29 Kyocera Corp 文字入力装置、文字入力方法及び文字入力プログラム
CN102812422B (zh) 2010-03-18 2016-01-06 京瓷株式会社 电子设备
US8756522B2 (en) 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
US9069416B2 (en) 2010-03-25 2015-06-30 Google Inc. Method and system for selecting content using a touchscreen
US8725706B2 (en) 2010-03-26 2014-05-13 Nokia Corporation Method and apparatus for multi-item searching
WO2011121375A1 (en) 2010-03-31 2011-10-06 Nokia Corporation Apparatuses, methods and computer programs for a virtual stylus
US8826184B2 (en) 2010-04-05 2014-09-02 Lg Electronics Inc. Mobile terminal and image display controlling method thereof
JP2011221640A (ja) 2010-04-06 2011-11-04 Sony Corp 情報処理装置、情報処理方法およびプログラム
US10788976B2 (en) 2010-04-07 2020-09-29 Apple Inc. Device, method, and graphical user interface for managing folders with multiple pages
US9823831B2 (en) 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US20110252357A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US9417695B2 (en) 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
EP2375309A1 (en) 2010-04-08 2011-10-12 Research in Motion Limited Handheld device with localized delays for triggering tactile feedback
US20110248948A1 (en) 2010-04-08 2011-10-13 Research In Motion Limited Touch-sensitive device and method of control
EP2375314A1 (en) 2010-04-08 2011-10-12 Research in Motion Limited Touch-sensitive device and method of control
EP2378406B1 (en) 2010-04-13 2018-08-22 LG Electronics Inc. Mobile terminal and method of controlling operation of the mobile terminal
US9026932B1 (en) 2010-04-16 2015-05-05 Amazon Technologies, Inc. Edge navigation user interface
KR101668240B1 (ko) 2010-04-19 2016-10-21 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
EP2381351B1 (en) 2010-04-20 2017-12-06 BlackBerry Limited Portable electronic device having touch-sensitive display with a variable repeat control mode.
KR101704531B1 (ko) 2010-04-22 2017-02-08 삼성전자주식회사 휴대 단말기의 텍스트 정보 표시 방법 및 장치
JP2011242386A (ja) 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体
JP2011238125A (ja) 2010-05-12 2011-11-24 Sony Corp 画像処理装置および方法、並びにプログラム
US8466889B2 (en) 2010-05-14 2013-06-18 Research In Motion Limited Method of providing tactile feedback and electronic device
US8451255B2 (en) 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
EP2386935B1 (en) 2010-05-14 2015-02-11 BlackBerry Limited Method of providing tactile feedback and electronic device
WO2011146740A2 (en) 2010-05-19 2011-11-24 Google Inc. Sliding motion to change computer keys
US20110296333A1 (en) 2010-05-25 2011-12-01 Bateman Steven S User interaction gestures with virtual keyboard
US20110296351A1 (en) 2010-05-26 2011-12-01 T-Mobile Usa, Inc. User Interface with Z-axis Interaction and Multiple Stacks
US8860672B2 (en) 2010-05-26 2014-10-14 T-Mobile Usa, Inc. User interface with z-axis interaction
KR101626301B1 (ko) 2010-05-28 2016-06-01 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
US8669946B2 (en) 2010-05-28 2014-03-11 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
EP2570981A4 (en) 2010-05-28 2014-04-09 Rakuten Inc CONTENTS OF THE TABLE OF CONTENTS, TABLE OF CONTENTS, TABLE OF CONTENTS AND RECORDING MEDIUM, WITH THE CONTENT OF THE TABLE OF CONTENTS
EP2390772A1 (en) 2010-05-31 2011-11-30 Sony Ericsson Mobile Communications AB User interface with three dimensional user input
US20130212541A1 (en) 2010-06-01 2013-08-15 Nokia Corporation Method, a device and a system for receiving user input
US9329767B1 (en) 2010-06-08 2016-05-03 Google Inc. User-specific customization based on characteristics of user-interaction
JP2011257941A (ja) 2010-06-08 2011-12-22 Panasonic Corp 文字入力装置、文字装飾方法、及び文字装飾プログラム
US20120089951A1 (en) 2010-06-10 2012-04-12 Cricket Communications, Inc. Method and apparatus for navigation within a multi-level application
US20110307778A1 (en) 2010-06-10 2011-12-15 Acer Incorporated Mobile electronic apparatus and method of switching application programs thereof
US20110304577A1 (en) * 2010-06-11 2011-12-15 Sp Controls, Inc. Capacitive touch screen stylus
US20110304559A1 (en) 2010-06-11 2011-12-15 Research In Motion Limited Portable electronic device including touch-sensitive display and method of changing tactile feedback
WO2011158054A1 (en) 2010-06-14 2011-12-22 Sony Ericsson Mobile Communications Ab Regulation of audio volume and/or speed responsive to user applied pressure and related methods
US8477109B1 (en) 2010-06-24 2013-07-02 Amazon Technologies, Inc. Surfacing reference work entries on touch-sensitive displays
US8542205B1 (en) 2010-06-24 2013-09-24 Amazon Technologies, Inc. Refining search results based on touch gestures
KR20120002727A (ko) 2010-07-01 2012-01-09 주식회사 팬택 3ｄ ｕｉ 표시 장치
US8972903B2 (en) 2010-07-08 2015-03-03 Apple Inc. Using gesture to navigate hierarchically ordered user interface screens
US20120013541A1 (en) 2010-07-14 2012-01-19 Research In Motion Limited Portable electronic device and method of controlling same
US20120013542A1 (en) 2010-07-16 2012-01-19 Research In Motion Limited Portable electronic device and method of determining a location of a touch
US8854316B2 (en) 2010-07-16 2014-10-07 Blackberry Limited Portable electronic device with a touch-sensitive display and navigation device and method
US20120019448A1 (en) 2010-07-22 2012-01-26 Nokia Corporation User Interface with Touch Pressure Level Sensing
JP5529663B2 (ja) 2010-07-28 2014-06-25 京セラ株式会社 入力装置
JP2012027875A (ja) 2010-07-28 2012-02-09 Sony Corp 電子機器、処理方法及びプログラム
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
US8593418B2 (en) 2010-08-08 2013-11-26 Qualcomm Incorporated Method and system for adjusting display content
CA2807956C (en) 2010-08-09 2019-02-12 Intelligent Mechatronic Systems Inc. Interface for mobile device and computing device
US8698765B1 (en) 2010-08-17 2014-04-15 Amazon Technologies, Inc. Associating concepts within content items
US8576184B2 (en) 2010-08-19 2013-11-05 Nokia Corporation Method and apparatus for browsing content files
JP5625612B2 (ja) 2010-08-19 2014-11-19 株式会社リコー 操作表示装置および操作表示方法
JP5510185B2 (ja) 2010-08-20 2014-06-04 ソニー株式会社 情報処理装置、プログラム及び表示制御方法
JP5573487B2 (ja) 2010-08-20 2014-08-20 ソニー株式会社 情報処理装置、プログラム及び操作制御方法
JP2011048832A (ja) 2010-08-27 2011-03-10 Kyocera Corp 入力装置
JP5732783B2 (ja) 2010-09-02 2015-06-10 ソニー株式会社 情報処理装置、情報処理装置の入力制御方法及びプログラム
KR101739054B1 (ko) 2010-09-08 2017-05-24 삼성전자주식회사 디바이스상의 움직임 제어 방법 및 장치
US10645344B2 (en) 2010-09-10 2020-05-05 Avigilion Analytics Corporation Video system with intelligent visual display
US20120066648A1 (en) 2010-09-14 2012-03-15 Xerox Corporation Move and turn touch screen interface for manipulating objects in a 3d scene
JP6049990B2 (ja) 2010-09-15 2016-12-21 京セラ株式会社 携帯電子機器、画面制御方法および画面制御プログラム
KR101657122B1 (ko) 2010-09-15 2016-09-30 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US9164670B2 (en) 2010-09-15 2015-10-20 Microsoft Technology Licensing, Llc Flexible touch-based scrolling
EP2431870B1 (en) 2010-09-17 2019-11-27 LG Electronics Inc. Mobile terminal and control method thereof
GB201015720D0 (en) 2010-09-20 2010-10-27 Gammons Richard Findability of data elements
DE112011101203T5 (de) 2010-09-24 2013-01-17 Qnx Software Systems Ltd. Tragbare elektronische Vorrichtung und Verfahren zu deren Steuerung
US9030419B1 (en) 2010-09-28 2015-05-12 Amazon Technologies, Inc. Touch and force user interface navigation
JP5725533B2 (ja) 2010-09-29 2015-05-27 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 情報処理装置および入力方法
US8817053B2 (en) 2010-09-30 2014-08-26 Apple Inc. Methods and systems for opening a file
US9323442B2 (en) 2010-09-30 2016-04-26 Apple Inc. Managing items in a user interface
US8713474B2 (en) 2010-10-05 2014-04-29 Citrix Systems, Inc. Providing user interfaces and window previews for hosted applications
EP2447818A1 (en) 2010-10-07 2012-05-02 Research in Motion Limited Method and portable electronic device for presenting text
US20120089942A1 (en) 2010-10-07 2012-04-12 Research In Motion Limited Method and portable electronic device for presenting text
JP5664103B2 (ja) 2010-10-08 2015-02-04 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP5751934B2 (ja) 2010-10-15 2015-07-22 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
KR20130052743A (ko) 2010-10-15 2013-05-23 삼성전자주식회사 항목 선택 방법
KR101726607B1 (ko) 2010-10-19 2017-04-13 삼성전자주식회사 휴대 단말기의 화면 제어 방법 및 장치
US20120102437A1 (en) 2010-10-22 2012-04-26 Microsoft Corporation Notification Group Touch Gesture Dismissal Techniques
JP5710934B2 (ja) * 2010-10-25 2015-04-30 シャープ株式会社 コンテンツ表示装置、およびコンテンツ表示方法
US8655085B2 (en) 2010-10-28 2014-02-18 Microsoft Corporation Burst mode image compression and decompression
US20120105367A1 (en) 2010-11-01 2012-05-03 Impress Inc. Methods of using tactile force sensing for intuitive user interface
US9262002B2 (en) 2010-11-03 2016-02-16 Qualcomm Incorporated Force sensing touch screen
US8587540B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US9760241B1 (en) 2010-11-05 2017-09-12 Amazon Technologies, Inc. Tactile interaction with content
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
EP2638450A1 (en) 2010-11-09 2013-09-18 Koninklijke Philips Electronics N.V. User interface with haptic feedback
JP5719205B2 (ja) 2010-11-22 2015-05-13 シャープ株式会社 電子機器および表示制御方法
US8560960B2 (en) 2010-11-23 2013-10-15 Apple Inc. Browsing and interacting with open windows
US9223445B2 (en) 2010-12-02 2015-12-29 Atmel Corporation Position-sensing and force detection panel
JP5700783B2 (ja) 2010-12-07 2015-04-15 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法
US9223461B1 (en) 2010-12-08 2015-12-29 Wendell Brown Graphical user interface
US8660978B2 (en) * 2010-12-17 2014-02-25 Microsoft Corporation Detecting and responding to unintentional contact with a computing device
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US9354804B2 (en) 2010-12-29 2016-05-31 Microsoft Technology Licensing, Llc Touch event anticipation in a computing device
JP5698529B2 (ja) 2010-12-29 2015-04-08 任天堂株式会社 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法
US9423878B2 (en) 2011-01-06 2016-08-23 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9471145B2 (en) 2011-01-06 2016-10-18 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20120179967A1 (en) 2011-01-06 2012-07-12 Tivo Inc. Method and Apparatus for Gesture-Based Controls
KR101892630B1 (ko) 2011-01-10 2018-08-28 삼성전자주식회사 터치 디스플레이 장치 및 그 디스플레이 방법
US20120185787A1 (en) 2011-01-13 2012-07-19 Microsoft Corporation User interface interaction behavior based on insertion point
US20120183271A1 (en) 2011-01-17 2012-07-19 Qualcomm Incorporated Pressure-based video recording
US9519418B2 (en) 2011-01-18 2016-12-13 Nokia Technologies Oy Method and apparatus for providing a multi-stage device transition mechanism initiated based on a touch gesture
US20120218203A1 (en) 2011-02-10 2012-08-30 Kanki Noriyoshi Touch drawing display apparatus and operation method thereof, image display apparatus allowing touch-input, and controller for the display apparatus
US10133388B2 (en) 2011-02-10 2018-11-20 Kyocera Corporation Input device
US8756503B2 (en) 2011-02-21 2014-06-17 Xerox Corporation Query generation from displayed text documents using virtual magnets
US9727177B2 (en) 2011-02-23 2017-08-08 Kyocera Corporation Electronic device with a touch sensor
US8593420B1 (en) 2011-03-04 2013-11-26 Amazon Technologies, Inc. Providing tactile output and interaction
EP2686758B1 (en) 2011-03-17 2020-09-30 Laubach, Kevin Input device user interface enhancements
US8479110B2 (en) 2011-03-20 2013-07-02 William J. Johnson System and method for summoning user interface objects
US11580155B2 (en) 2011-03-28 2023-02-14 Kodak Alaris Inc. Display device for displaying related digital images
US20120249853A1 (en) 2011-03-28 2012-10-04 Marc Krolczyk Digital camera for reviewing related images
US20120256846A1 (en) 2011-04-05 2012-10-11 Research In Motion Limited Electronic device and method of controlling same
US8872773B2 (en) 2011-04-05 2014-10-28 Blackberry Limited Electronic device and method of controlling same
US20120256857A1 (en) 2011-04-05 2012-10-11 Mak Genevieve Elizabeth Electronic device and method of controlling same
US8736716B2 (en) 2011-04-06 2014-05-27 Apple Inc. Digital camera having variable duration burst mode
US20120260220A1 (en) 2011-04-06 2012-10-11 Research In Motion Limited Portable electronic device having gesture recognition and a method for controlling the same
US10222974B2 (en) 2011-05-03 2019-03-05 Nokia Technologies Oy Method and apparatus for providing quick access to device functionality
WO2012153555A1 (ja) * 2011-05-12 2012-11-15 アルプス電気株式会社 入力装置及び前記入力装置を用いた複数点の荷重検出方法
US9152288B2 (en) 2011-05-19 2015-10-06 Microsoft Technology Licensing, Llc Remote multi-touch
US8952987B2 (en) 2011-05-19 2015-02-10 Qualcomm Incorporated User interface elements augmented with force detection
US20120304132A1 (en) 2011-05-27 2012-11-29 Chaitanya Dev Sareen Switching back to a previously-interacted-with application
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
WO2012164895A1 (ja) * 2011-05-27 2012-12-06 京セラ株式会社 電子機器
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
KR101802759B1 (ko) 2011-05-30 2017-11-29 엘지전자 주식회사 이동 단말기 및 이것의 디스플레이 제어 방법
KR101290145B1 (ko) 2011-05-31 2013-07-26 삼성전자주식회사 터치 스크린 제어 방법 및 장치, 컴퓨터에 의해 독출될 수 있는 기록 매체, 그리고 단말장치
US9092130B2 (en) 2011-05-31 2015-07-28 Apple Inc. Devices, methods, and graphical user interfaces for document manipulation
US8587542B2 (en) 2011-06-01 2013-11-19 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
US8508494B2 (en) 2011-06-01 2013-08-13 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
US9310958B2 (en) 2011-06-02 2016-04-12 Lenovo (Singapore) Pte. Ltd. Dock for favorite applications
US20120311504A1 (en) 2011-06-03 2012-12-06 Van Os Marcel Extensible architecture for navigating a hierarchy
KR101838260B1 (ko) 2011-06-03 2018-03-13 구글 엘엘씨 텍스트를 선택하기 위한 제스처들
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
US8661337B2 (en) 2011-06-05 2014-02-25 Apple Inc. Techniques for use of snapshots with browsing transitions
KR20120135723A (ko) * 2011-06-07 2012-12-17 김연수 터치패널 타입의 신호입력장치
TWI431516B (zh) 2011-06-21 2014-03-21 Quanta Comp Inc 觸覺回饋方法及其電子裝置
US9304668B2 (en) 2011-06-28 2016-04-05 Nokia Technologies Oy Method and apparatus for customizing a display screen of a user interface
WO2013002779A1 (en) 2011-06-29 2013-01-03 Research In Motion Limited Character preview method and apparatus
US9720587B2 (en) 2011-07-11 2017-08-01 Kddi Corporation User interface device enabling input motions by finger touch in different modes, and method and program for recognizing input motion
US20130016042A1 (en) 2011-07-12 2013-01-17 Ville Makinen Haptic device with touch gesture interface
JP5325943B2 (ja) 2011-07-12 2013-10-23 富士フイルム株式会社 情報処理装置、情報処理方法及びプログラム
US9158455B2 (en) 2011-07-12 2015-10-13 Apple Inc. Multifunctional environment for image cropping
US9086794B2 (en) 2011-07-14 2015-07-21 Microsoft Technology Licensing, Llc Determining gestures on context based menus
US20130212515A1 (en) 2012-02-13 2013-08-15 Syntellia, Inc. User interface for text input
WO2013015070A1 (ja) 2011-07-22 2013-01-31 Kddi株式会社 指の移動を伴うことなく画像スクロールが可能なユーザインタフェース装置、画像スクロール方法及びプログラム
US8713482B2 (en) 2011-07-28 2014-04-29 National Instruments Corporation Gestures for presentation of different views of a system diagram
JP5295328B2 (ja) 2011-07-29 2013-09-18 Ｋｄｄｉ株式会社 スクリーンパッドによる入力が可能なユーザインタフェース装置、入力処理方法及びプログラム
KR101830965B1 (ko) 2011-08-03 2018-02-22 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130044062A1 (en) 2011-08-16 2013-02-21 Nokia Corporation Method and apparatus for translating between force inputs and temporal inputs
US20130047100A1 (en) 2011-08-17 2013-02-21 Google Inc. Link Disambiguation For Touch Screens
US20130050131A1 (en) 2011-08-23 2013-02-28 Garmin Switzerland Gmbh Hover based navigation user interface control
US8806369B2 (en) 2011-08-26 2014-08-12 Apple Inc. Device, method, and graphical user interface for managing and interacting with concurrently open software applications
KR101351162B1 (ko) 2011-08-30 2014-01-14 주식회사 팬택 플리킹을 이용한 리스트 선택 지원 단말 장치 및 방법
US20130050143A1 (en) 2011-08-31 2013-02-28 Samsung Electronics Co., Ltd. Method of providing of user interface in portable terminal and apparatus thereof
US8743069B2 (en) 2011-09-01 2014-06-03 Google Inc. Receiving input at a computing device
CN102981659B (zh) 2011-09-06 2016-01-27 宸鸿光电科技股份有限公司 触控面板的控制系统与控制方法及其使用的触控笔
TWI475470B (zh) 2011-09-07 2015-03-01 Acer Inc 電子裝置及應用程式操作方法
US20130067411A1 (en) 2011-09-08 2013-03-14 Google Inc. User gestures indicating rates of execution of functions
JP5576841B2 (ja) 2011-09-09 2014-08-20 Ｋｄｄｉ株式会社 押圧による画像のズームが可能なユーザインタフェース装置、画像ズーム方法及びプログラム
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US9069460B2 (en) 2011-09-12 2015-06-30 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US9071854B2 (en) 2011-09-12 2015-06-30 Disney Enterprises, Inc. System and method for transmitting a services list to a playback device
US9501213B2 (en) 2011-09-16 2016-11-22 Skadool, Inc. Scheduling events on an electronic calendar utilizing fixed-positioned events and a draggable calendar grid
US9519350B2 (en) 2011-09-19 2016-12-13 Samsung Electronics Co., Ltd. Interface controlling apparatus and method using force
US8959430B1 (en) 2011-09-21 2015-02-17 Amazon Technologies, Inc. Facilitating selection of keys related to a selected key
US20130074003A1 (en) 2011-09-21 2013-03-21 Nokia Corporation Method and apparatus for integrating user interfaces
US20130082824A1 (en) 2011-09-30 2013-04-04 Nokia Corporation Feedback response
US20130086056A1 (en) 2011-09-30 2013-04-04 Matthew G. Dyor Gesture based context menus
JP2012027940A (ja) 2011-10-05 2012-02-09 Toshiba Corp 電子機器
US10394441B2 (en) 2011-10-15 2019-08-27 Apple Inc. Device, method, and graphical user interface for controlling display of application windows
US8634807B2 (en) 2011-10-17 2014-01-21 Blackberry Limited System and method for managing electronic groups
US9170607B2 (en) 2011-10-17 2015-10-27 Nokia Technologies Oy Method and apparatus for determining the presence of a device for executing operations
CA2792685C (en) 2011-10-18 2017-08-22 Research In Motion Limited Method of modifying rendered attributes of list elements in a user interface
US8810535B2 (en) 2011-10-18 2014-08-19 Blackberry Limited Electronic device and method of controlling same
CA2792895C (en) 2011-10-18 2020-04-28 Research In Motion Limited Method of rendering a user interface
EP2584463B1 (en) 2011-10-18 2017-09-13 BlackBerry Limited Method of rendering a user interface
EP2584462B1 (en) 2011-10-18 2019-03-27 BlackBerry Limited Method of rendering a user interface
CA2792188A1 (en) 2011-10-18 2013-04-18 Research In Motion Limited Method of animating a rearrangement of ui elements on a display screen of an electronic device
US9389707B2 (en) 2011-10-28 2016-07-12 Atmel Corporation Active stylus with configurable touch sensor
DE102012110278A1 (de) 2011-11-02 2013-05-02 Beijing Lenovo Software Ltd. Verfahren und Vorrichtungen zur Fensterdarstellung und Verfahren und Vorrichtungen zur Berührungsbedienung von Anwendungen
US9582178B2 (en) 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
CA2856209C (en) 2011-11-09 2020-04-07 Blackberry Limited Touch-sensitive display method and apparatus
KR101888457B1 (ko) 2011-11-16 2018-08-16 삼성전자주식회사 복수 개의 어플리케이션을 실행하는 터치스크린을 가지는 장치 및 그 제어 방법
KR101803261B1 (ko) 2011-11-18 2017-11-30 센톤스 아이엔씨. 터치 입력 힘 검출
KR101796481B1 (ko) 2011-11-28 2017-12-04 삼성전자주식회사 저전력 셔터랙 제거 방법, 카메라 모듈 및 이를 구비하는 모바일 기기
KR101873744B1 (ko) 2011-11-29 2018-07-03 엘지전자 주식회사 이동단말기 및 그 제어방법
KR101824007B1 (ko) 2011-12-05 2018-01-31 엘지전자 주식회사 이동 단말기 및 그의 멀티 태스킹 방법
US8581870B2 (en) 2011-12-06 2013-11-12 Apple Inc. Touch-sensitive button with two levels
US8633911B2 (en) 2011-12-14 2014-01-21 Synaptics Incorporated Force sensing input device and method for determining force information
CA2798979C (en) 2011-12-16 2017-02-28 Research In Motion Limited Method of rendering a user interface
US20130154933A1 (en) 2011-12-20 2013-06-20 Synaptics Incorporated Force touch mouse
US20130154959A1 (en) 2011-12-20 2013-06-20 Research In Motion Limited System and method for controlling an electronic device
WO2013094371A1 (ja) 2011-12-22 2013-06-27 ソニー株式会社 表示制御装置、表示制御方法およびコンピュータプログラム
US9257098B2 (en) 2011-12-23 2016-02-09 Nokia Technologies Oy Apparatus and methods for displaying second content in response to user inputs
KR102006470B1 (ko) 2011-12-28 2019-08-02 삼성전자 주식회사 사용자 디바이스에서 멀티태스킹 운용 방법 및 장치
US9116611B2 (en) 2011-12-29 2015-08-25 Apple Inc. Devices, methods, and graphical user interfaces for providing multitouch inputs and hardware-based features using a single touch input
US10248278B2 (en) 2011-12-30 2019-04-02 Nokia Technologies Oy Method and apparatus for intuitive multitasking
US8756511B2 (en) 2012-01-03 2014-06-17 Lg Electronics Inc. Gesture based unlocking of a mobile terminal
CA2860569A1 (en) 2012-01-09 2013-07-18 Airbiquity Inc. User interface for mobile device
KR101710547B1 (ko) 2012-01-10 2017-02-27 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US9619038B2 (en) 2012-01-23 2017-04-11 Blackberry Limited Electronic device and method of displaying a cover image and an application image from a low power condition
JP5410555B2 (ja) 2012-01-26 2014-02-05 京セラドキュメントソリューションズ株式会社 タッチパネル装置
US20130198690A1 (en) 2012-02-01 2013-08-01 Microsoft Corporation Visual indication of graphical user interface relationship
KR101973631B1 (ko) 2012-02-01 2019-04-29 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US9164779B2 (en) 2012-02-10 2015-10-20 Nokia Technologies Oy Apparatus and method for providing for remote user interaction
US9146914B1 (en) 2012-02-17 2015-09-29 Google Inc. System and method for providing a context sensitive undo function
EP2631737A1 (en) 2012-02-24 2013-08-28 Research In Motion Limited Method and apparatus for providing a contextual user interface on a device
KR101356368B1 (ko) 2012-02-24 2014-01-29 주식회사 팬택 어플리케이션 전환 장치 및 방법
KR101894567B1 (ko) 2012-02-24 2018-09-03 삼성전자 주식회사 락스크린 운용 방법 및 이를 지원하는 단말기
TWI519155B (zh) 2012-02-24 2016-01-21 宏達國際電子股份有限公司 影像連續拍攝方法與相關影像擷取系統
US9898174B2 (en) 2012-02-28 2018-02-20 Google Llc Previewing expandable content items
US9817568B2 (en) 2012-02-29 2017-11-14 Blackberry Limited System and method for controlling an electronic device
KR20130099647A (ko) 2012-02-29 2013-09-06 한국과학기술원 사이드 인터페이스를 이용한 사용자 단말 컨텐츠 제어방법 및 제어장치
US9542013B2 (en) 2012-03-01 2017-01-10 Nokia Technologies Oy Method and apparatus for determining recipients of a sharing operation based on an indication associated with a tangible object
US20130232402A1 (en) 2012-03-01 2013-09-05 Huawei Technologies Co., Ltd. Method for Processing Sensor Data and Computing Node
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
US20130234929A1 (en) 2012-03-07 2013-09-12 Evernote Corporation Adapting mobile user interface to unfavorable usage conditions
US20150029149A1 (en) 2012-03-13 2015-01-29 Telefonaktiebolaget L M Ericsson (Publ) Apparatus and Method for Navigating on a Touch Sensitive Screen Thereof
CN102662573B (zh) 2012-03-24 2016-04-27 上海量明科技发展有限公司 通过触压获得选择项的方法及终端
US10673691B2 (en) 2012-03-24 2020-06-02 Fred Khosropour User interaction platform
US9063644B2 (en) 2012-03-26 2015-06-23 The Boeing Company Adjustment mechanisms for virtual knobs on a touchscreen interface
US11474645B2 (en) 2012-03-27 2022-10-18 Nokia Technologies Oy Method and apparatus for force sensing
US9116571B2 (en) 2012-03-27 2015-08-25 Adonit Co., Ltd. Method and system of data input for an electronic device equipped with a touch screen
KR101924095B1 (ko) 2012-04-06 2018-11-30 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
US9146655B2 (en) 2012-04-06 2015-09-29 Samsung Electronics Co., Ltd. Method and device for executing object on display
US9104260B2 (en) 2012-04-10 2015-08-11 Typesoft Technologies, Inc. Systems and methods for detecting a press on a touch-sensitive surface
US20130271355A1 (en) 2012-04-13 2013-10-17 Nokia Corporation Multi-segment wearable accessory
TWI459287B (zh) 2012-04-20 2014-11-01 Hon Hai Prec Ind Co Ltd 觸控操作方法及使用其的電子系統
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
EP2847660B1 (en) 2012-05-09 2018-11-14 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
AU2013259642A1 (en) 2012-05-09 2014-12-04 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
DE112013002412T5 (de) 2012-05-09 2015-02-19 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche zum Bereitstellen von Rückmeldung für das Wechseln von Aktivierungszuständen eines Benutzerschnittstellenobjekts
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169304A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Determining characteristics of user input to input and output devices
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
DE112013002387T5 (de) 2012-05-09 2015-02-12 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Bereitstellung taktiler Rückkopplung für Operationen in einer Benutzerschnittstelle
AU2013259630B2 (en) 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to gesture
EP2662761B1 (en) 2012-05-11 2020-07-01 Samsung Electronics Co., Ltd Multiple display window providing apparatus and method
US9454303B2 (en) 2012-05-16 2016-09-27 Google Inc. Gesture touch inputs for controlling video on a touchscreen
JP6023879B2 (ja) 2012-05-18 2016-11-09 アップル インコーポレイテッド 指紋センサ入力に基づくユーザインタフェースを操作するための機器、方法、及びグラフィカルユーザインタ−フェース
US9360942B2 (en) 2012-05-21 2016-06-07 Door Number 3 Cursor driven interface for layer control
US8816989B2 (en) 2012-05-22 2014-08-26 Lenovo (Singapore) Pte. Ltd. User interface navigation utilizing pressure-sensitive touch
WO2013180454A1 (en) 2012-05-29 2013-12-05 Samsung Electronics Co., Ltd. Method for displaying item in terminal and terminal using the same
US9418672B2 (en) 2012-06-05 2016-08-16 Apple Inc. Navigation application with adaptive instruction text
CN102799347B (zh) 2012-06-05 2017-01-04 北京小米科技有限责任公司 应用于触屏设备的用户界面交互方法、装置及触屏设备
KR101909030B1 (ko) 2012-06-08 2018-10-17 엘지전자 주식회사 비디오 편집 방법 및 이를 위한 디지털 디바이스
JP2013257657A (ja) 2012-06-11 2013-12-26 Fujitsu Ltd 情報端末装置及び表示制御方法
KR20130142301A (ko) 2012-06-19 2013-12-30 삼성전자주식회사 단말기의 메뉴환경 설정 장치 및 방법
US20140002374A1 (en) 2012-06-29 2014-01-02 Lenovo (Singapore) Pte. Ltd. Text selection utilizing pressure-sensitive touch
US20140026098A1 (en) 2012-07-19 2014-01-23 M2J Think Box, Inc. Systems and methods for navigating an interface of an electronic device
US9298295B2 (en) 2012-07-25 2016-03-29 Facebook, Inc. Gestures for auto-correct
KR102014775B1 (ko) 2012-07-30 2019-08-27 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
JP2014032506A (ja) 2012-08-02 2014-02-20 Sharp Corp 情報処理装置、選択操作検出方法およびプログラム
WO2014024475A1 (ja) 2012-08-10 2014-02-13 パナソニック株式会社 映像提供方法、送信装置および受信装置
US9280206B2 (en) 2012-08-20 2016-03-08 Samsung Electronics Co., Ltd. System and method for perceiving images with multimodal feedback
KR101946365B1 (ko) 2012-08-20 2019-02-11 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US9720586B2 (en) 2012-08-21 2017-08-01 Nokia Technologies Oy Apparatus and method for providing for interaction with content within a digital bezel
US9250783B2 (en) 2012-08-21 2016-02-02 Apple Inc. Toggle gesture during drag gesture
TWI484405B (zh) 2012-08-23 2015-05-11 Egalax Empia Technology Inc 圖形使用者界面的顯示方法及使用該方法的電子裝置
KR101946366B1 (ko) 2012-08-23 2019-02-11 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
KR101956170B1 (ko) 2012-08-29 2019-03-08 삼성전자 주식회사 카메라의 이미지 저장 장치 및 방법
US8732613B2 (en) 2012-09-06 2014-05-20 Google Inc. Dynamic user interface for navigating among GUI elements
US9696879B2 (en) 2012-09-07 2017-07-04 Google Inc. Tab scrubbing using navigation gestures
US20140078343A1 (en) 2012-09-20 2014-03-20 Htc Corporation Methods for generating video and multiple still images simultaneously and apparatuses using the same
US9063563B1 (en) 2012-09-25 2015-06-23 Amazon Technologies, Inc. Gesture actions for interface elements
US9671943B2 (en) 2012-09-28 2017-06-06 Dassault Systemes Simulia Corp. Touch-enabled complex data entry
US9372538B2 (en) 2012-09-28 2016-06-21 Denso International America, Inc. Multiple-force, dynamically-adjusted, 3-D touch surface with feedback for human machine interface (HMI)
US20140109016A1 (en) 2012-10-16 2014-04-17 Yu Ouyang Gesture-based cursor control
US20140111670A1 (en) 2012-10-23 2014-04-24 Nvidia Corporation System and method for enhanced image capture
US20140118268A1 (en) 2012-11-01 2014-05-01 Google Inc. Touch screen operation using additional inputs
US9448694B2 (en) 2012-11-09 2016-09-20 Intel Corporation Graphical user interface for navigating applications
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US20140152581A1 (en) 2012-11-30 2014-06-05 Lenovo (Singapore) Pte. Ltd. Force as a device action modifier
JP5786909B2 (ja) 2012-11-30 2015-09-30 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理システム、情報の表示方法、制御方法、及びプログラム
KR20140071118A (ko) 2012-12-03 2014-06-11 삼성전자주식회사 가상 버튼을 디스플레이하기 위한 방법 및 그 전자 장치
US10282088B2 (en) 2012-12-06 2019-05-07 Samsung Electronics Co., Ltd. Configuration of application execution spaces and sub-spaces for sharing data on a mobile tough screen device
US9189131B2 (en) 2012-12-11 2015-11-17 Hewlett-Packard Development Company, L.P. Context menus
US20140168093A1 (en) 2012-12-13 2014-06-19 Nvidia Corporation Method and system of emulating pressure sensitivity on a surface
US20140168153A1 (en) 2012-12-17 2014-06-19 Corning Incorporated Touch screen systems and methods based on touch location and touch force
KR20140079110A (ko) 2012-12-18 2014-06-26 엘지전자 주식회사 이동 단말기 및 그 동작 방법
CN104380231B (zh) 2012-12-20 2017-10-24 英特尔公司 包括压力传感器的触摸屏
US9244576B1 (en) 2012-12-21 2016-01-26 Cypress Semiconductor Corporation User interface with child-lock feature
US20150332107A1 (en) 2012-12-24 2015-11-19 Nokia Technologies Oy An apparatus and associated methods
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR101905174B1 (ko) 2012-12-29 2018-10-08 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
KR102072582B1 (ko) 2012-12-31 2020-02-03 엘지전자 주식회사 듀얼 디스플레이 방법 및 장치
US10082949B2 (en) 2013-01-17 2018-09-25 Samsung Electronics Co., Ltd. Apparatus and method for application peel
JP6075854B2 (ja) 2013-01-21 2017-02-08 キヤノン株式会社 表示制御装置、その制御方法、およびプログラム、並びに撮像装置および記憶媒体
KR20140097902A (ko) 2013-01-30 2014-08-07 삼성전자주식회사 햅틱 패턴을 생성하는 휴대 단말 및 방법
US20140210798A1 (en) 2013-01-31 2014-07-31 Hewlett-Packard Development Company, L.P. Digital Drawing Using A Touch-Sensitive Device To Detect A Position And Force For An Input Event
KR102133410B1 (ko) 2013-01-31 2020-07-14 삼성전자 주식회사 멀티태스킹 운용 방법 및 이를 지원하는 단말기
EP2767896B1 (en) 2013-02-14 2019-01-16 LG Electronics Inc. Mobile terminal and method of controlling the mobile terminal
US20140237408A1 (en) 2013-02-15 2014-08-21 Flatfrog Laboratories Ab Interpretation of pressure based gesture
KR101761190B1 (ko) 2013-02-22 2017-07-25 삼성전자 주식회사 휴대 단말기의 사용자 인터페이스 제공 방법 및 장치
JP2014165663A (ja) 2013-02-25 2014-09-08 Kyocera Corp 携帯端末装置、プログラムおよび携帯端末装置の制御方法
US8769431B1 (en) 2013-02-28 2014-07-01 Roy Varada Prasad Method of single-handed software operation of large form factor mobile electronic devices
US10203815B2 (en) 2013-03-14 2019-02-12 Apple Inc. Application-based touch sensitivity
US9690476B2 (en) 2013-03-14 2017-06-27 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US9225677B2 (en) 2013-03-15 2015-12-29 Facebook, Inc. Systems and methods for displaying a digest of messages or notifications without launching applications associated with the messages or notifications
WO2014143706A1 (en) 2013-03-15 2014-09-18 Tk Holdings Inc. Adaptive human machine interfaces for pressure sensitive control in a distracted operating environment and method of using the same
US9355472B2 (en) 2013-03-15 2016-05-31 Apple Inc. Device, method, and graphical user interface for adjusting the appearance of a control
EP3726359A1 (en) 2013-03-15 2020-10-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9451230B1 (en) 2013-03-15 2016-09-20 Google Inc. Playback adjustments for digital media items
US9507495B2 (en) 2013-04-03 2016-11-29 Blackberry Limited Electronic device and method of displaying information in response to a gesture
US20140304646A1 (en) 2013-04-04 2014-10-09 Klip, Inc. Sliding side menu gui with menu items displaying indicia of updated content
US9389718B1 (en) 2013-04-04 2016-07-12 Amazon Technologies, Inc. Thumb touch interface
KR102091235B1 (ko) 2013-04-10 2020-03-18 삼성전자주식회사 휴대 단말기에서 메시지를 편집하는 장치 및 방법
US20140306897A1 (en) 2013-04-10 2014-10-16 Barnesandnoble.Com Llc Virtual keyboard swipe gestures for cursor movement
US9146672B2 (en) 2013-04-10 2015-09-29 Barnes & Noble College Booksellers, Llc Multidirectional swipe key for virtual keyboard
KR20140132632A (ko) 2013-05-08 2014-11-18 삼성전자주식회사 휴대 장치 및 휴대 장치의 오브젝트 표시 방법
US20140344765A1 (en) 2013-05-17 2014-11-20 Barnesandnoble.Com Llc Touch Sensitive UI Pinch and Flick Techniques for Managing Active Applications
US9319589B2 (en) 2013-05-31 2016-04-19 Sony Corporation Device and method for capturing images and selecting a desired image by tilting the device
US9307112B2 (en) 2013-05-31 2016-04-05 Apple Inc. Identifying dominant and non-dominant images in a burst mode capture
US10282067B2 (en) 2013-06-04 2019-05-07 Sony Corporation Method and apparatus of controlling an interface based on touch operations
US9477393B2 (en) 2013-06-09 2016-10-25 Apple Inc. Device, method, and graphical user interface for displaying application status information
US9733716B2 (en) 2013-06-09 2017-08-15 Apple Inc. Proxy gesture recognizer
US9626087B2 (en) 2013-06-09 2017-04-18 Apple Inc. Device, method, and graphical user interface for navigating between user interfaces
US10481769B2 (en) 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
KR102113674B1 (ko) 2013-06-10 2020-05-21 삼성전자주식회사 다중 터치를 이용한 객체 선택 장치, 방법 및 컴퓨터 판독 가능한 기록 매체
US9400601B2 (en) 2013-06-21 2016-07-26 Nook Digital, Llc Techniques for paging through digital content on touch screen devices
CN103309618A (zh) 2013-07-02 2013-09-18 姜洪明 移动操作系统
KR102080746B1 (ko) 2013-07-12 2020-02-24 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US9342228B2 (en) 2013-07-17 2016-05-17 Blackberry Limited Device and method for filtering messages using sliding touch input
KR20150013991A (ko) 2013-07-25 2015-02-06 삼성전자주식회사 휴대단말기의 어플리케이션 실행 방법 및 장치
US9335897B2 (en) 2013-08-08 2016-05-10 Palantir Technologies Inc. Long click display of a context menu
KR20150019165A (ko) 2013-08-12 2015-02-25 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR102101741B1 (ko) 2013-08-16 2020-05-29 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9547525B1 (en) 2013-08-21 2017-01-17 Google Inc. Drag toolbar to enter tab switching interface
CN104423740B (zh) 2013-08-30 2018-07-13 唐山东唐电气股份有限公司 基于电容式触控装置的感测方法
KR102332675B1 (ko) 2013-09-02 2021-11-30 삼성전자 주식회사 전자 장치의 컨텐츠 공유 방법 및 장치
KR20150026649A (ko) 2013-09-03 2015-03-11 삼성전자주식회사 전자 장치에서 제스처를 설정하는 장치 및 방법
US20150071547A1 (en) 2013-09-09 2015-03-12 Apple Inc. Automated Selection Of Keeper Images From A Burst Photo Captured Set
JP6138641B2 (ja) 2013-09-13 2017-05-31 株式会社Ｎｔｔドコモ 地図情報表示装置、地図情報表示方法、及び地図情報表示プログラム
US9407964B2 (en) 2013-10-25 2016-08-02 Verizon Patent And Licensing Inc. Method and system for navigating video to an instant time
KR20150049700A (ko) 2013-10-30 2015-05-08 삼성전자주식회사 전자 장치에서 입력을 제어하는 방법 및 장치
US10067651B2 (en) 2013-11-15 2018-09-04 Thomson Reuters Global Resources Unlimited Company Navigable layering of viewable areas for hierarchical content
CN114237485A (zh) 2013-12-11 2022-03-25 北京三星通信技术研究有限公司 触控操作的方法及装置
JP2015114836A (ja) 2013-12-11 2015-06-22 キヤノン株式会社 画像処理装置、触感制御方法及びプログラム
US9483118B2 (en) 2013-12-27 2016-11-01 Rovi Guides, Inc. Methods and systems for selecting media guidance functions based on tactile attributes of a user input
KR20150081125A (ko) 2014-01-03 2015-07-13 삼성전자주식회사 전자 장치 스크린에서의 입자 효과 디스플레이
CN104834456A (zh) 2014-02-12 2015-08-12 深圳富泰宏精密工业有限公司 触控界面多任务切换方法、系统及电子装置
CN106030483B (zh) 2014-02-18 2019-12-17 剑桥触控科技有限公司 使用压感触摸的触摸屏的功率模式的动态切换
US9436348B2 (en) 2014-03-18 2016-09-06 Blackberry Limited Method and system for controlling movement of cursor in an electronic device
KR102129798B1 (ko) 2014-05-08 2020-07-03 엘지전자 주식회사 비히클 및 그 제어 방법
US9477653B2 (en) 2014-06-26 2016-10-25 Blackberry Limited Character entry for an electronic device using a position sensing keyboard
US9294719B2 (en) 2014-06-30 2016-03-22 Salesforce.Com, Inc. Systems, methods, and apparatuses for implementing in-app live support functionality
US20160004393A1 (en) 2014-07-01 2016-01-07 Google Inc. Wearable device user interface control
US20160019718A1 (en) 2014-07-16 2016-01-21 Wipro Limited Method and system for providing visual feedback in a virtual reality environment
US9363644B2 (en) 2014-07-16 2016-06-07 Yahoo! Inc. System and method for detection of indoor tracking units
US9600114B2 (en) 2014-07-31 2017-03-21 International Business Machines Corporation Variable pressure touch system
KR20160021524A (ko) 2014-08-18 2016-02-26 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US10203858B2 (en) 2014-08-28 2019-02-12 Blackberry Limited Portable electronic device and method of controlling the display of information
EP3189395A2 (en) 2014-09-02 2017-07-12 Apple Inc. Semantic framework for variable haptic output
US20160132139A1 (en) 2014-11-11 2016-05-12 Qualcomm Incorporated System and Methods for Controlling a Cursor Based on Finger Pressure and Direction
KR20150021977A (ko) 2015-01-19 2015-03-03 인포뱅크 주식회사 휴대용 단말기에서의 ｕｉ 구성 방법
US20160224220A1 (en) 2015-02-04 2016-08-04 Wipro Limited System and method for navigating between user interface screens
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
DK179360B1 (en) 2015-06-07 2018-05-22 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US20170046058A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices, Methods, and Graphical User Interfaces for Adjusting User Interface Objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
KR101749933B1 (ko) 2015-11-12 2017-06-22 엘지전자 주식회사 이동 단말기 및 그 제어방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008305174A (ja) * 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム

Also Published As

Publication number Publication date
EP3435220A1 (en) 2019-01-30
US20150138155A1 (en) 2015-05-21
JP2017199394A (ja) 2017-11-02
US20150138126A1 (en) 2015-05-21
AU2016201303A1 (en) 2016-03-17
CN104903834B (zh) 2019-07-05
KR101958582B1 (ko) 2019-07-04
AU2016201303B2 (en) 2018-03-22
US9778771B2 (en) 2017-10-03
KR20170039309A (ko) 2017-04-10
EP3435220B1 (en) 2020-09-16
HK1215090A1 (zh) 2016-08-12
US20180024681A1 (en) 2018-01-25
US9965074B2 (en) 2018-05-08
EP2939098A1 (en) 2015-11-04
CN104903834A (zh) 2015-09-09
US9857897B2 (en) 2018-01-02
HK1212064A1 (en) 2016-06-03
JP6515137B2 (ja) 2019-05-15
AU2013368443A1 (en) 2015-05-07
KR20150093813A (ko) 2015-08-18
EP2939098B1 (en) 2018-10-10
AU2013368443B2 (en) 2016-03-24
JP6158947B2 (ja) 2017-07-05
WO2014105276A1 (en) 2014-07-03
JP2016502209A (ja) 2016-01-21

Similar Documents

Publication Publication Date Title
KR101958517B1 (ko) 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
JP6723318B2 (ja) ユーザインタフェース階層をナビゲートするためのデバイス、方法、及びグラフィカルユーザインタフェース
US20220011932A1 (en) Device, Method, and Graphical User Interface for Moving a User Interface Object Based on an Intensity of a Press Input
KR102001332B1 (ko) 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
KR101755029B1 (ko) 다중 접촉 제스처에 대한 촉각적 출력의 발생을 보류하는 디바이스, 방법, 및 그래픽 사용자 인터페이스

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2017101001517; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20170329

Effective date: 20181214

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)