KR20160007634A - 제스처에 대한 피드백 - Google Patents

제스처에 대한 피드백 Download PDF

Info

Publication number
KR20160007634A
KR20160007634A KR1020157035243A KR20157035243A KR20160007634A KR 20160007634 A KR20160007634 A KR 20160007634A KR 1020157035243 A KR1020157035243 A KR 1020157035243A KR 20157035243 A KR20157035243 A KR 20157035243A KR 20160007634 A KR20160007634 A KR 20160007634A
Authority
KR
South Korea
Prior art keywords
user interface
graphical user
area
movement
display
Prior art date
Application number
KR1020157035243A
Other languages
English (en)
Inventor
지아웨이 구
시유안 팡
홍 제트. 탄
Original Assignee
마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 filed Critical 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Publication of KR20160007634A publication Critical patent/KR20160007634A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04809—Textured surface identifying touch areas, e.g. overlay structure for a virtual keyboard

Abstract

일부 예에서, 전자 디바이스는 전자 디바이스를 사용하여 작업을 수행하기 위한 제스처와 연관된 햅틱 출력을 제공할 수 있다. 예를 들어, 전자 디바이스의 하나 이상의 센서는 그래픽 사용자 인터페이스의 영역에 대응하는 디스플레이의 영역 내의 터치 입력의 움직임을 검출할 수 있다. 터치 입력의 움직임을 검출하는 것에 응답하여, 하나 이상의 햅틱 피드백 컴포넌트는 운영 체제 작업과 같은 작업과 연관된 햅틱 출력을 발생할 수 있다. 일부 구현에서, 햅틱 출력은 터치 입력의 움직임 동안 디스플레이의 영역의 표면 마찰을 변경하며, 사용자가 작업을 성공적으로 완료할 수 있도록 피드백 및 안내를 제공한다.

Description

제스처에 대한 피드백{FEEDBACK FOR GESTURES}
본 발명은 제스처(gesture)에 대한 피드백에 관한 것이다.
컴퓨터 및 기타 유형의 전자 디바이스는 통상적으로 디스플레이 상에 그래픽 출력의 형태로 사용자에게 정보를 제시한다. 일부 전자 디바이스는 디스플레이와의 접촉을 통해, 예를 들어 손가락 끝이나 스타일러스를 통해 사용자로부터의 입력을 수신한다. 사용자는, 파일을 이동시키거나 컴퓨터 프로그램을 닫는 것과 같은 작업(task)을 수행하기 위해 손가락 끝을 사용하여 특정 제스처를 수행할 수 있다. 손가락 끝이나 스타일러스를 통해 컴퓨터의 그래픽 사용자 인터페이스와 상호작용할 때, 사용자는 통상적으로 시각적 피드백을 수신하고, 또한 청각적 피드백도 수신할 수 있다. 그러나, 이들 형태의 피드백에도, 사용자가 상이한 작업들을 달성하기 위해 제스처를 어떻게 수행할지 아는 것이 어려울 수 있다. 예를 들어, 일부 시각적 또는 청각적 피드백에도 불구하고, 사용자는 손 끝이나 스타일러스가 작업을 성공적으로 수행하도록 적절한 이동을 행하고 있는지 결정하는 데 어려움을 겪을 수 있다. 작업의 실행 전에, 실행 동안 또는 실행 후에 사용자에게 제공되는 유용한 피드백이 종종 거의 없거나 아예 없다. 따라서, 다양한 입력 제스처 및 대응하는 다양한 작업들로 인해, 사용자는 터치 입력을 통해 다양한 작업들을 수행하는 것을 학습하고 능숙해지는 것이 어렵다는 것을 알 수 있다.
이 요약은 상세한 설명에서 아래에 더 기재되는 개념의 선택을 단순화된 형태로 소개하고자 제공된다. 이 요약은 청구하는 주제의 핵심 또는 필수 특징을 나타내는 것도 아니며, 또한 청구하는 주제의 범위를 결정하거나 한정하는데 사용되고자 하는 것도 아니다.
여기에 개시된 일부 구현은, 예를 들어 운영 체제, 애플리케이션 또는 기타 컴퓨터 프로그램의 그래픽 사용자 인터페이스를 사용하여 작업을 수행하기 위해, 제스처와 연관된 햅틱(haptic) 출력을 제공한다. 일부 예에서, 하나 이상의 센서는 터치 입력의 움직임을 검출할 수 있고, 하나 이상의 햅틱 피드백 컴포넌트는 대응하는 작업과 연관된 햅틱 출력을 발생할 수 있다. 예를 들어, 그래픽 사용자 인터페이스의 일부에 대응하는 디스플레이의 영역 내의 터치 입력의 움직임을 검출하는 것에 응답하여, 하나 이상의 피드백 컴포넌트는 작업과 연관된 햅틱 출력을 발생할 수 있다. 또한, 일부 구현에서, 햅틱 출력은 객체를 움직이는 것과 연관된 저항(resistance)을 시뮬레이션(simulation)할 수 있다.
첨부 도면에 관련하여 상세한 설명이 서술된다. 도면에서, 참조 번호의 가장 왼쪽의 숫자(들)는 그 참조 번호가 처음 나타나는 도면을 식별한다. 상이한 도면에서의 동일한 참조 번호의 사용은 동일하거나 유사한 항목 또는 특징을 나타낸다.
도 1은 일부 구현에 따른 예시적인 전자 디바이스의 선택 요소들을 예시한 블록도이다.
도 2는 일부 구현에 따라 햅틱 출력을 제공하기 위한 디스플레이의 예를 예시한다.
도 3은 일부 구현에 따라 햅틱 출력을 제공하기 위한 디스플레이의 예를 예시한다.
도 4는 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 5는 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 6은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 7은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 8은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 9는 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 10은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 11은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 12는 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 작업을 수행하도록 전자 디바이스를 채용한 예를 예시한다.
도 13은 일부 구현에 따라 터치 입력 및 햅틱 피드백을 사용하여 전자 디바이스와 상호작용하는 예시적인 프로세스의 흐름도이다.
도 14는 일부 구현에 따른 예시적인 전자 디바이스의 선택 요소들을 예시한 블록도이다.
터치 입력 제스처에 대한 피드백
여기에 기재된 기술은 일반적으로 터치 입력 제스처에 대한 피드백을 제공하는 것과 관련된다. 일부 구현에 따르면, 그래픽 사용자 인터페이스의 영역에 대응하는 디스플레이의 영역 내의 터치 입력의 움직임을 검출하는 것에 응답하여, 하나 이상의 피드백 컴포넌트는 디스플레이의 영역 내에 햅틱 출력을 발생할 수 있다. 하나의 예로서, 햅틱 출력은 그래픽 사용자 인터페이스 내에서 운영 체제의 작업 또는 다른 작업을 수행하는 것과 연관된다. 일부 구현에서, 햅틱 출력은 객체를 움직이는 것과 연관된 저항을 시뮬레이션한다. 예를 들어, 햅틱 출력은 터치 입력과 연관된 표면 마찰의 증가를 일으킬 수 있다. 따라서, 햅틱 출력은 사용자가 성공적으로 작업을 수행하는 것을 돕도록 안내 및 피드백을 제공할 수 있다.
운영 체제의 인터페이스 내에서 작업을 수행하는 환경에서의 일부 예가 기재된다. 그러나, 구현은 운영 체제 인터페이스 내에서 작업을 수행하는 것에 한정되지 않고, 여기에 기재된 바와 유사하게 터치 입력 제스처를 사용하는 임의의 그래픽 인터페이스로 확장될 수 있다. 예로서, 다양한 작업들이 운영 체제 내에서 수행될 수 있다. 이러한 작업들은, 예를 들어 메뉴 또는 제어 패널을 열거나 닫기, 데스크탑 상의 파일 또는 폴더 아이콘 이동, 프로그램 열기, 또는 프로그램 닫기를 포함할 수 있다. 결과적으로, 다양한 입력 체스처가 사용될 수 있으며, 각각의 입력 제스처는 상이한 운영 체제 작업에 대응한다. 다양한 입력 제스처로 인해, 시각적 피드백은 작업을 성공적으로 수행하도록 사용자를 안내하기에 충분한 정도의 피드백을 제공하지 못할 수 있다. 따라서, 작업에 대응하는, 시각적 피드백과 함께 일어나는 햅틱 출력을 발생하는 것은, 사용자가 작업을 수행하고 완료하는 것을 더 돕도록 추가적인 유형의 피드백을 제공한다. 시각적 및 햅틱 출력과 함께 추가적인 형태의 피드백이 또한 제공될 수도 있다. 예를 들어, 오디오 피드백이 제공될 수 있다. 따라서, 그래픽 출력, 햅틱 출력, 그리고 일부 경우에는 오디오 출력을 통한 다중 모드 안내는 운영 체제 작업을 수행할 때 사용자를 돕는 데 더욱 유리할 수 있다.
여기에서의 일부 구현에 따르면, 전자 디바이스는 그래픽 사용자 인터페이스의 영역에 대응하는 디스플레이의 영역 내의 터치 입력의 움직임을 검출하기 위한 하나 이상의 센서를 포함할 수 있다. 터치 입력의 움직임은 운영 체제 작업과 같은 작업을 수행하기 위한 것이다. 전자 디바이스는 터치 입력의 움직임을 검출하는 것에 응답하여 작업과 연관된 그래픽 출력을 발생한다. 전자 디바이스는 또한, 터치 입력의 움직임을 검출하는 것에 응답하여, 디스플레이의 영역 내에 작업과 연관된 햅틱 출력을 발생하기 위한 하나 이상의 피드백 컴포넌트를 포함할 수 있다. 햅틱 출력은 여기에 기재된 바와 같이 다양한 상이한 유형의 출력을 포함할 수 있다.
일부 예에서, 터치 입력의 움직임을 검출하는 것에 응답하여, 전자 디바이스는 터치 입력이 운영 체제 작업과 같은 작업을 수행하는 것과 연관된다고 결정한다. 터치 입력이 작업과 연관된다고 결정하는 것에 응답하여, 전자 디바이스는 그래픽 출력 및 햅틱 출력을 발생한다.
여기에서의 일부 구현에 따르면, 전자 디바이스는 또한 프로세서, 오디오 컴포넌트, 및 그래픽 사용자 인터페이스의 동작을 제공하기 위한 하나 이상의 추가의 컴포넌트를 포함할 수 있다.
예시적인 전자 디바이스
도 1은 일부 구현에 따른 예시적인 전자 디바이스(100)의 선택 요소들을 예시한 블록도이다. 전자 디바이스(100)는 그래픽 사용자 인터페이스(104)를 제시하기 위한 터치 감지형 디스플레이(102)를 갖는 임의의 유형의 디바이스일 수 있다. 몇몇 예로서, 전자 디바이스(100)는 태블릿 컴퓨팅 디바이스, 랩톱 컴퓨팅 디바이스, 데스크톱 컴퓨팅 디바이스, 셀룰러 폰 또는 스마트 폰, 비디오 게임 디바이스, 텔레비전 또는 홈 전자 디바이스, 자동차 전자 디바이스, 금전 등록기, 내비게이션 디바이스 등일 수 있다.
예시된 예에서, 전자 디바이스(100)는 하나 이상의 센서(106) 및 하나 이상의 햅틱 피드백 컴포넌트(108)를 포함한다. 센서(106) 및 햅틱 피드백 컴포넌트(108)는 디스플레이(102) 내에 내장될 수 있고, 아니면 터치 입력(110)을 검출하고 햅틱 출력을 발생하기에 적합한 방식으로 전자 디바이스(100)와 통합될 수 있다. 일부 구현에서, 센서(106)는 터치 패드 또는 다른 입력 디바이스에서와 같이 디스플레이와 별개일 수 있다. 일부 구현에서, 햅틱 출력은 터치 입력(110)을 포함하는 디스플레이(102)의 영역 내에 물리적으로 위치될 수 있다.
센서(106)는 전자 디바이스(100)가 터치 입력(110)의 움직임을 정확하게 검출하고 추적할 수 있게 하는 입력을 제공한다. 터치 입력(110)은 사용자의 손가락(112), 스타일러스, 그리고 전자 디바이스(100)로 터치 입력을 입력하기에 적합한 임의의 다른 물체에 의해 제공될 수 있다. 따라서, 손가락(112)이 여기에서의 예로서 사용되지만, 임의의 다른 신체 부분, 스타일러스, 또는 터치 입력(110)을 제공하기에 적합한 다른 물체가 손가락(112) 대신에 사용될 수 있다. 햅틱 피드백 컴포넌트(108)는 전자 디바이스(100)에 터치 입력(110) 및 터치 입력(110)의 움직임을 제공하는 사용자에게 햅틱 출력을 제공하도록 동작가능한 하나 이상의 컴포넌트를 포함할 수 있다. 예를 들어, 아래에 더 상세하게 기재되는 바와 같이, 햅틱 피드백 컴포넌트(108)는 터치 입력(110)과 연관된 표면 마찰의 변경을 시뮬레이션할 수 있다. 따라서, 햅틱 피드백 컴포넌트(108)는 물리적 물체와의 상호작용을 시뮬레이션하기 위해 터치 입력(110)과 연관된 표면 마찰의 변경을 시뮬레이션하도록 햅틱 출력을 유도할 수 있다. 예를 들어, 햅틱 피드백 컴포넌트(108)는 물리적 물체를 움직이는 것과 연관된 저항을 시뮬레이션하기 위해 터치 입력(110)의 움직임을 수신하는 영역 내의 표면 마찰을 증가시킬 수 있다. 따라서, 그래픽 사용자 인터페이스(104) 상에서 그래픽 객체(114)를 움직이는데 필요한 힘이 증가될 수 있다. 일부 예에서, 햅틱 피드백 컴포넌트(108)는 그 후에 영역 내의 표면 마찰을 감소시키며 그래픽 객체(114)를 움직이는데 필요한 힘을 감소시킬 수 있다. 일부 예에서, 전자 디바이스(100)는 또한, 그래픽 출력 및 햅틱 출력과 함께 그리고 동시에 사용자에게 피드백을 제공할 수 있다.
전자 디바이스(100)는 여기에 기재된 기능을 수행하기 위한 다양한 모듈 및 기능 컴포넌트를 포함할 수 있다. 일부 구현에서, 전자 디바이스(100)는, 센서(106) 및 햅틱 피드백 컴포넌트(108)와 같은 전자 디바이스(100)의 다양한 컴포넌트의 동작을 제어하기 위한 제어 모듈(116)을 포함할 수 있다. 예를 들어, 제어 모듈(116)은 센서(106)를 통해 터치 입력(110) 및 터치 입력(110)의 움직임을 검출하고 등록할 수 있다. 검출에 응답하여, 제어 모듈(116)은 햅팁 피드백 컴포넌트(108)를 통해 햅팁 출력을 발생할 수 있다. 또한, GUI 모듈(118)은 검출에 응답하여 그래픽 사용자 인터페이스(104)에 대한 그래픽 출력을 발생할 수 있다. 일부 예에서, 제어 모듈(116) 및 GUI 모듈(118)에 의해 수행되는 기능이, 다른 기능과 함께, 하나의 모듈에 의해 수행될 수 있다. 제어 모듈(116) 및 GUI 모듈(118)의 추가적인 양상들이 아래에 설명된다.
예시적인 디스플레이
도 2는 일부 구현에 따라 햅틱 출력을 제공하기 위한 디스플레이(102)의 예를 예시한다. 예에서, 디스플레이(102)의 표면은 유리로 제조된다. 그러나, 터치 기반의 그래픽 사용자 인터페이스와 함께 사용하기에 적합한 임의의 다른 재료가 사용될 수 있다. 유리의 표면 마찰은, 가변 가능하고 제어 가능한 속도로 디스플레이 표면(206) 상에 진동 및 기타 햅틱 피드백을 유도할 수 있는, 압전 액추에이터와 같은 액추에이터(202 및 204)를 사용하여 변조(증가 및 감소)될 수 있다. 일부 구현에서, 진동 및 기타 햅틱 피드백은 디스플레이(102)의 특정 부분에서 유도된다. 예를 들어, 진동 및 기타 햅틱 피드백은 터치 입력(110)을 수신하는 디스플레이 표면(206)의 일부 상에서 유도될 수 있으며, 디스플레이 표면(206)의 다른 부분 상에서는 진동 및 기타 햅틱 피드백이 유도되지 않는다. 일부 구현에서, 진동 및 기타 햅틱 피드백은 전체 디스플레이 표면(206) 상에서 유도될 수 있다. 여기에 기재된 바와 같이, 기타 햅틱 피드백은 기계적 키-클릭(key-click) 감각(sensation)을 시뮬레이션하도록 설계되는 한 사이클의 성형 펄스(shaped pulse)를 포함할 수 있다. 일부 구현에서, 액추에이터(202) 또는 액추에이터(204)는 진동과 기타 햅틱 피드백 둘 다, 진동만, 아니면 햅틱 피드백만 유도한다. 예에서, 액추에이터(202, 204)는 표면(206)의 에지(edge)를 따라 그 아래에 배치된다. 일부 예에서, 액추에이터(202, 204)는 디스플레이(102)의 에지를 따라 또는 그 근방에 숨겨진다. 예를 들어, 액추에이터(202, 204)는 베젤(도 2에는 도시되지 않음) 아래에 숨겨질 수 있다.
예시적인 예에서, 디스플레이(102)의 좌측 및 우측 측부를 따라 액추에이터(202)는 표면(206)을 손가락(112)을 향해 가까이 그리고 멀리 움직이는 주파수로 구동된다. 따라서, 움직임은 표면(206)의 평면에 수직인 방향을 따른다. 움직임은 스퀴즈 공기 필름(squeeze air film) 효과를 생성하도록 손가락(112)과 표면(206) 사이에 얇은 공기층을 가둔다. 스퀴즈 공기 필름 효과는 손가락(112)과 표면(206) 사이의 마찰을 감소시킨다. 주파수는 약 35 kHz의 초음파 주파수 또는 스퀴즈 공기 필름 효과를 생성하기에 적합한 임의의 다른 주파수일 수 있다.
표면(206)의 초음파 진동의 진폭을 변경함으로써, 손가락(112)과 표면(206) 사이의 표면 마찰이 증가되거나 감소될 수 있다. 따라서, 손가락(112)이 터치 입력(110)을 생성하도록 디스플레이(102)의 표면(206)을 따라 움직임에 따라, 사용자는 표면(206)의 마찰이 변하는 것을 느낄 수 있다. 마찰의 변화는 표면 텍스쳐의 변경 또는 저항력(resistive force)의 변경으로서 사용자에 의해 감지될 수 있다. 예시적인 예에서, 디스플레이(102)의 상단 및 하단 에지를 따라 액추에이터(204)는, 상기 기재된 성형 펄스와 같은 사용자에 대한 키-클릭 감각을 생성하기 위해 디스플레이의 적어도 일부 상에 움직임을 발생하도록 1-사이클 500 Hz 신호에 의해 구동된다. 따라서, 디스플레이(102)는 클릭 움직임을 시뮬레이션하도록 손가락(112)과 상호작용하는 햅틱 출력을 발생한다. 주파수는 사용자가 검출하기에(예를 들어 키-클릭을 시뮬레이션하도록) 충분한 움직임 패턴을 발생하도록 적합한 임의의 주파수일 수 있다.
도 3은 일부 구현에 따라 햅틱 출력을 제공하기 위한 디스플레이(102)와 같은 디스플레이의 예시적인 단면을 예시한다. 예에서, 디스플레이(102)의 측면도가 도시된다. 이전 예에서와 같이, 디스플레이(102)의 표면은 유리로 제조된다. 그러나, 터치 기반의 그래픽 사용자 인터페이스에서 사용하기에 적합한 임의의 다른 재료가 사용될 수 있다.
예시적인 예에서, 디스플레이(102)는 손가락(112)과 접촉하게 되는 디스플레이 표면(206)으로서의 절연 층(302), 전도 층(304) 및 유리 층(306)을 포함한다. 전기 신호가 전도 층(304)에 적용될 때, 신호는 손가락(112)에 반대 전하를 유도한다. 예시적인 예에서, 전도 층(304)의 양의 전하는 손가락(112)에 음의 전하를 유도한다.
마찰력, f는 다음 식에 기초하여 결정될 수 있다:
Figure pct00001
여기에서,
Figure pct00002
는 표면의 마찰 계수이고,
Figure pct00003
는 손가락(112)이 아래로 누르며 유리에 가하는 수직 힘이고,
Figure pct00004
는 손가락(112)과 전도 층(304) 사이의 용량(capacitive) 효과로 인한 전기력이다. 전기 신호 강도가 변함에 따라,
Figure pct00005
가 변하며, 그 결과 마찰력이 변한다. 따라서, 사용자는 마찰력의 변경을
Figure pct00006
의 변경으로 인한 것으로 보며, 표면 마찰의 증가 또는 감소를 일으키고, 이는 그렇지 않으면 평탄한 표면의 거칠기 변화의 착각을 일으킬 수 있다.
그래픽 사용자 인터페이스와의 상호작용
도 4는 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 디스플레이(102)는 그래픽 사용자 인터페이스(104)를 제시한다. 그래픽 사용자 인터페이스(104)는, 측부(side)(406) 및 대향(opposite) 측부(408)를 포함한 4개의 측부를 갖는다. 영역(410)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(410)은, 측부(406)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(406)에 더 가까운 디스플레이(102)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(406)로부터 대향 측부(408)를 향해 움직일 때, 센서(106)는 영역(410) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 영역(410) 내의 표면 마찰을 증가시키는 것을 포함한다. 햅틱 출력은 또한, 그 후에 영역(410) 내의 표면 마찰의 감소를 포함할 수 있다. 그래픽 출력은 터치 입력(110)의 움직임 방향으로 메뉴 바, 패널, 또는 기타 그래픽 객체의 움직임을 시뮬레이션할 수 있다. 표면 마찰을 증가시키고 그 후에 감소시키는 것은 서랍(drawer)(410)을 당기는 것과 연관된 관성을 시뮬레이션할 수 있는데, 서랍(410)이 움직이기 시작한 후에는 서랍(410)을 당기는데 더 적은 힘이 필요하기 때문이다.
일부 예에서, 베젤 또는 릿지(ridge)와 같은 물리적 장애물과 연관된 저항을 시뮬레이션하기 위해 측부(406)를 따라 또는 그 근방에 표면 마찰이 증가된다. 따라서, 증가된 표면 마찰은 무언가(예를 들어, 서랍)를 드래그할 가능성을 암시할 수 있다. 일부 예에서, 햅틱 피드백 컴포넌트(108)는 영역(406) 내에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 동시에 발생할 수 있다. 또한, 전자 디바이스(100)는 동시에 사운드를 발생할 수 있다. 임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 또는 백그라운드에서 실행 중인 애플리케이션들 사이의 전환과 같은 작업을 수행하기 위해 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(406)는 그래픽 사용자 인터페이스(104)의 상단 측부이고 대향 측부(408)는 하단 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 5는 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(502) 및 대향 측부(504)를 포함한 4개의 측부를 갖는다. 영역(506)은 터치 입력(110)을 수신하는 디스플레이(104)의 영역의 일부이다. 일부 예에서, 영역(506)은, 측부(502)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(502)에 더 가까운 디스플레이(102)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(502)로부터 대향 측부(504)를 향해 움직일 때에, 센서(106)는 영역(506) 내의 터치 입력의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 영역(506) 내의 표면 마찰을 증가시키는 것을 포함한다. 그래픽 출력은 터치 입력(110)의 움직임 방향으로 커맨드 패널 또는 다른 그래픽 객체의 움직임을 포함할 수 있다. 일부 예에서, 표면 마찰은 터치 입력(110)이 영역(506) 내에서 움직임에 따라 번갈아 증가 및 감소할 수 있다. 일부 예에서, 햅틱 피드백 컴포넌트(108)는 영역(506) 내에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 동시에 발생할 수 있다. 또한, 전자 디바이스(100)는 동시에 사운드를 발생할 수 있다. 따라서, 묶이지 않은 아이템들(510)을 갖는 서랍(508) 열기를 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 일부 구현에서, 햅틱 출력은 디스플레이(102)의 다른 영역에서 발생된다. 예를 들어, 햅틱 피드백 컴포넌트(108)는 영역(506) 및 손이나 다른 신체 부분과 접촉해 있을 수 있는 디스플레이(102)의 또다른 영역 내에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 동시에 발생할 수 있다. 따라서, 사용자는 또한, 전자 디바이스(100)를 잡고 있을 수 있는 또다른 손으로 햅틱 출력을 수신할 수 있다. 임의의 상기 예들은, 시스템 커맨드 패널 열기, 운영 체제의 메뉴 바 드래그 아웃, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 및 그래픽 객체 이동과 같은 임의의 적합한 작업을 위해 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(502)는 그래픽 사용자 인터페이스(104)의 우측 측부이고 대향 측부(504)는 좌측 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 6은 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(602) 및 대향 측부(604)를 포함한 4개의 측부를 갖는다. 영역(606)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(606)은, 측부(602)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(602)에 더 가까운 디스플레이(102)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(602)로부터 대향 측부(604)를 향해 움직일 때에, 센서(106)는 영역(606) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 영역(606) 내의 표면 마찰을 소정 레벨로 증가시키고 터치 입력(110)의 움직임 동안 표면 마찰의 레벨을 유지하는 것을 포함한다. 따라서, 도르래(pulley)(610)를 통해 객체(608)를 당기거나 마찬가지 방식으로 객체를 들어올리는 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 그래픽 출력은 커맨드 패널을 열거나 그래픽 객체를 이동시키는 것을 포함할 수 있다. 일부 구현에서, 햅틱 출력은 디스플레이(102)의 다른 영역에서 발생된다. 예를 들어, 햅틱 피드백 컴포넌트(108)는 영역(606) 및 손이나 다른 신체 부분과 접촉해 있을 수 있는 디스플레이(102)의 또다른 영역 내에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 동시에 발생할 수 있다. 따라서, 사용자는 또한, 전자 디바이스(100)를 잡고 있을 수 있는 또다른 손으로 햅틱 출력을 수신할 수 있다. 예를 들어, 내비게이션 바 또는 기타 그래픽 객체가 그래픽 사용자 인터페이스(104)를 따라 움직이는 동안 햅틱 출력이 발생될 수 있으며, 잡고 있는 손이 진동 및 기타 햅틱 피드백을 느낄 수 있게 해준다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(602)는 그래픽 사용자 인터페이스(104)의 상단 측부이고 대향 측부(604)는 하단 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 7은 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(702) 및 대향 측부(704)를 포함한 4개의 측부를 갖는다. 영역(706)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(706)은, 측부(702)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(702)에 더 가까운 디스플레이(102)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(702)로부터 대향 측부(704)를 향해 움직일 때에, 센서(106)는 영역(706) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은, 터치 입력(110)의 움직임 동안, 영역(706) 내의 표면 마찰을 제1 레벨로 증가시키고, 그 다음 표면 마찰을 제2 레벨로 감소시키며, 그 다음 표면 마찰을 제3 레벨로 감소시키는 것을 포함한다. 따라서, 한 벌의 카드(710)의 상부로부터 카드(708)를 튕기는(flicking) 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 그래픽 출력은 애플리케이션 아이콘을 이동시키거나 또다른 그래픽 객체를 이동시키는 것을 포함할 수 있다. 일부 예에서, 수행되는 작업은 백그라운드 애플리케이션들 사이에 전환하는 것이다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(702)는 그래픽 사용자 인터페이스(104)의 상단 측부이고 대향 측부(704)는 하단 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 8은 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(802) 및 대향 측부(804)를 포함한 4개의 측부를 갖는다. 영역(806)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(806)은, 측부(802)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(802)에 더 가까운 디스플레이(102)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(802)로부터 대향 측부(804)를 향해 움직일 때, 센서(106)는 영역(806) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 터치 입력(110)의 움직임 동안 디스플레이(102)의 적어도 일부 상에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 발생하는 것을 포함한다. 일부 예에서, 햅틱 출력은 손가락이 움직이는 것을 멈춘 후에 발생할 수 있다. 그래픽 출력은 터치 입력(110)의 움직임 방향으로 슬라이드 바(808)를 움직이거나 손가락(112) 아래의 또다른 그래픽 객체를 움직이는 것을 포함할 수 있다. 따라서, 슬라이드 바(808)가 그래픽 사용자 인터페이스(104)를 가로질러 움직임에 따라 손가락(112) 아래의 리플 또는 파동(810)을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 일부 예에서, 수행되는 작업은 백그라운드 애플리케이션들 사이에 전환하는 것이다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(802)는 그래픽 사용자 인터페이스(104)의 좌측 측부이고 대향 측부(804)는 우측 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 9는 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 좌측 측부(902) 및 우측 측부(904)를 갖는다.
영역(906)은 그래픽 객체에 대응하는 디스플레이(102)의 영역이다. 영역(906)은 우측 측부(904)를 향한 터치 입력(908)의 움직임을 수신한다. 일부 예에서, 그래픽 객체는 애플리케이션 아이콘일 수 있다. 센서(106)는 영역(906) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다. 예에서, 햅틱 출력은 표면 마찰을 증가시키는 것을 포함한다. 일부 예에서, 햅틱 출력은 움직임 거리 양에 비례하여 표면 마찰을 증가시키는 것을 포함한다. 그래픽 출력은 터치 입력의 방향으로(예를 들어, 오른쪽으로) 그래픽 객체를 움직이는 것을 포함할 수 있다. 따라서, 그래픽 사용자 인터페이스(104)의 중앙으로부터 스퀴징(squeezing) 또는 밀어내는 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다.
영역(910)은 그래픽 객체에 대응하는 디스플레이(102)의 영역이다. 영역(910)은 좌측 측부(902)를 향해 터치 입력(912)의 움직임을 수신한다. 일부 예에서, 그래픽 객체는 애플리케이션 아이콘일 수 있다. 센서(106)는 영역(910) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다. 예에서, 햅틱 출력은 표면 마찰을 증가시키는 것을 포함한다. 일부 예에서, 햅틱 출력은 움직임 거리 양에 비례하여 표면 마찰을 증가시키는 것을 포함한다. 그래픽 출력은 터치 입력의 방향으로(예를 들어, 왼쪽으로) 그래픽 객체를 움직이는 것을 포함할 수 있다. 따라서, 그래픽 사용자 인터페이스(104)의 중앙으로부터 스퀴징 또는 밀어내는 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다.
영역(914)은 그래픽 객체에 대응하는 디스플레이(102)의 영역이다. 영역(914)은 좌측 측부(902)를 향한 터치 입력(916)의 움직임 또는 우측 측부(904)를 향한 터치 입력(918)의 움직임을 수신한다. 일부 예에서, 그래픽 객체는 애플리케이션 아이콘일 수 있다. 센서(106)는 영역(914) 내의 터치 입력의 움직임을 검출할 수 있다. 터치 입력의 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다. 예에서, 햅틱 출력은 표면 마찰을 증가시키는 것을 포함한다. 일부 예에서, 햅틱 출력은 움직임 거리 양에 비례하여 표면 마찰을 증가시키는 것을 포함한다. 그래픽 출력은 터치 입력의 방향으로 그래픽 객체를 움직이는 것을 포함할 수 있다. 따라서, 그래픽 사용자 인터페이스(104)의 각각의 측부로부터 스퀴징 또는 밀어내는 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합으로 사용될 수 있다. 예시적인 예에서, 측부(902)는 그래픽 사용자 인터페이스(104)의 좌측 측부이고 대향 측부(904)는 우측 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 10은 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(1002) 및 대향 측부(1004)를 포함한 4개의 측부를 갖는다. 영역(1006)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(1006)은, 측부(1002)로부터 연장하거나 또는 그래픽 사용자 인터페이스(104)의 임의의 다른 측부보다 측부(1002)에 더 가까운 그래픽 사용자 인터페이스(104)의 영역일 수 있다.
손가락(112)이 디스플레이(102)를 따라 측부(1002)로부터 대향 측부(1004)를 따라 그리고 다시 측부(1002)를 향해 움직일 때, 센서(106)는 영역(1006) 내의 터치 입력(110)의 움직임을 검출한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 터치 입력(110)의 움직임 동안 디스플레이(102)의 적어도 일부 상에 진동 및 기타 햅틱 피드백(예를 들어, 성형 펄스)을 발생하는 것을 포함한다. 따라서, 버튼(1010)의 클릭, 스테플러 펀칭, 또는 유사한 감각을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 그래픽 출력은 패널(1008)을 움직이거나 또다른 그래픽 객체를 뷰 안으로 움직이는 것을 포함할 수 있다. 일부 예에서, 패널(1008)은 멀티태스크 프리뷰 모드와 같은 하나 이상의 애플리케이션 아이콘들의 뷰이다. 그래픽 출력은 햅틱 출력과 동시에 발생할 수 있다. 그래픽 출력 및 햅틱 출력은, 패널(1008)의 움직임 동안 또는 패널이 나타나고 정지된 후에 발생할 수 있다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(1002)는 그래픽 사용자 인터페이스(104)의 좌측 측부이고 대향 측부(1004)는 우측 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 11은 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(1102) 및 대향 측부(1104)를 포함한 4개의 측부를 갖는다. 영역(1106)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(1106)은 애플리케이션 아이콘과 같은 그래픽 객체에 대응할 수 있다.
손가락(112)이 그래픽 사용자 인터페이스(104)를 따라 측부(1102)로부터 대향 측부(1104)를 향해 움직일 때에, 센서(106)는 영역(1106) 내의 터치 입력(110)의 움직임을 검출한다. 일부 예에서, 손가락(112)은, 측부(1102) 및 대향 측부(1104)에 대응하는 영역들 사이에 있는 디스플레이(102)의 영역으로부터 움직임을 시작한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 터치 입력(110)의 움직임 길이에 비례하여 영역(1106) 내의 표면 마찰을 증가시키는 것을 포함하며, 손가락이 대향 측부(1104)를 향해 움직임에 따라 표면 마찰을 증가시킨다. 따라서, 기타 줄과 같은 탄성 스트링(1108)을 당기거나 퉁기는(plucking) 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 그래픽 출력은 터치 입력의 움직임 방향으로 그래픽 객체를 움직이는 것을 포함할 수 있다. 예를 들어, 영역(1106)은 애플리케이션 아이콘과 같은 그래픽 객체에 대응할 수 있다. 일부 예에서, 터치 입력(110)이 제거될 때(예를 들어, 손가락(112)이 올라감), 그래픽 객체는 측부(1102)를 향해 다시 움직인다. 또한, 그래픽 객체는 측부(1102)에 머무르거나, 형상을 변경하거나, 크기를 변경하거나, 색상을 변경하거나, 또는 사라질 수 있다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널 열기, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(1102)는 그래픽 사용자 인터페이스(104)의 상단 측부이고 대향 측부(1104)는 하단 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다.
도 12는 일부 구현에 따라 작업을 수행하도록 전자 디바이스(100)를 채용한 예를 예시한다. 예에서, 그래픽 사용자 인터페이스(104)는 측부(1202) 및 대향 측부(1204)를 포함한 4개의 측부를 갖는다. 영역(1206)은 터치 입력(110)을 수신하는 디스플레이(102)의 영역의 일부이다. 일부 예에서, 영역(1206)은 애플리케이션 아이콘과 같은 그래픽 객체에 대응할 수 있다.
손가락(112)이 디스플레이(102)를 따라 대향 측부(1204)를 향해 움직일 때에, 센서(106)는 영역(1206) 내의 터치 입력(110)의 움직임을 검출한다. 일부 예에서, 손가락(112)은 측부(1202)로부터 움직임을 시작한다. 움직임을 검출하는 것에 응답하여, 그래픽 사용자 인터페이스(104)는 작업과 연관된 그래픽 출력을 발생하고, 햅틱 피드백 컴포넌트(108)는 작업과 연관된 햅틱 출력을 발생한다.
예에서, 햅틱 출력은 터치 입력(110)의 움직임 길이에 비례하여 영역(1206) 내의 표면 마찰을 증가시키는 것을 포함하며, 손가락이 대향 측부(1204)를 향해 움직임에 따라 표면 마찰을 증가시킨다. 따라서, 기타 줄과 같은 탄성 스트링(1208)을 당기거나 퉁기는 것을 시뮬레이션하도록 표면 마찰이 사용될 수 있다. 그래픽 출력은 터치 입력의 움직임 방향으로 그래픽 객체를 움직이는 것을 포함할 수 있다. 예를 들어, 영역(1206)은 애플리케이션 아이콘과 같은 그래픽 객체에 대응할 수 있다.
예에서, 터치 입력(110)이 임계 거리를 지나 움직이는 것에 응답하여, 햅틱 출력은 표면 마찰을 감소시키는 것을 포함한다. 일부 구현에서, 표면 마찰의 큰 감소가 일어나고, 표면 마찰의 감소는 즉시 또는 갑자기 일어날 수 있다. 예를 들어, 손가락이 대향 측부(1204)를 향해 움직이기 시작함에 따라 표면 마찰은 기존보다 대략 더 낮은 레벨로 돌아올 수 있다. 또한, 표면 마찰이 더 낮은 레벨로 돌아오는 것은, 발생된 표면 마찰 증가 속도보다 훨씬 더 빠른 속도로, 일부 경우에 즉시 또는 갑자기 일어날 수 있다. 따라서, 햅틱 출력은 기타 줄을 끊는 것과 같은 탄성 스트링 브레이킹을 시뮬레이션할 수 있다. 햅틱 출력은 또한 진동을 포함할 수 있다. 오디오 출력이 또한, 햅틱 및 그래픽 출력과 동시에 발생할 수 있다. 또한, 그래픽 객체는 대향 측부(1204)를 향해 이동하거나, 형상을 변경하거나, 크기를 변경하거나, 색상을 변경하거나, 또는 사라질 수 있다. 일부 예에서, 작업은 애플리케이션을 닫는 것일 수 있다.
임의의 상기 예들은, 운영 체제의 메뉴 바 드래그 아웃, 시스템 커맨드 패널, 애플리케이션 내비게이션 커맨드 패널 열기, 애플리케이션들 사이의 전환, 또는 애플리케이션 윈도우의 드래그 아웃과 같은 임의의 적합한 운영 체제 작업에 대한 피드백을 제공하도록, 단독으로 또는 조합하여 사용될 수 있다. 예시적인 예에서, 측부(1202)는 그래픽 사용자 인터페이스(104)의 상단 측부이고 대향 측부(1204)는 하단 측부이지만, 다른 예는 대신에 그래픽 사용자 인터페이스(104)의 임의의 다른 측부 및 대응하는 대향 측부를 사용할 수 있다. 또한, 햅틱, 그래픽, 및 오디오 출력의 임의의 상기 예들은 햅틱, 그래픽, 및 오디오 출력의 임의의 다른 예들과 함께 결합되거나 추가될 수 있다. 또한, 임의의 상기 예에서, 상이한 햅틱 출력 응답을 달성하기 위하여, 표면 마찰의 증가는 표면 마찰의 감소와 바뀔 수 있고 그 반대일 수 있다.
도 13은 일부 구현에 따라 전자 디바이스(100)와 상호작용하는 예시적인 프로세스(1300)의 흐름도이다. 흐름도에서, 각각의 블록은 하드웨어, 소프트웨어, 또는 이들의 조합으로 구현될 수 있는 하나 이상의 동작을 나타낸다. 소프트웨어에 관련하여, 블록들은, 하나 이상의 프로세서에 의해 실행될 때, 프로세서로 하여금 인용된 동작들을 수행하게 하는 컴퓨터 실행가능한 명령어들을 나타낸다. 일반적으로, 컴퓨터 실행가능한 명령어들은, 특정 기능을 수행하거나 특정 추상 데이터 타입을 구현하는 루틴, 프로그램, 객체, 컴포넌트, 데이터 구조 등을 포함한다. 블록들이 기재되는 순서는 한정으로서 해석되도록 의도되지 않으며, 임의의 수의 기재된 동작들이 프로세스를 구현하도록 임의의 순서로 그리고/또는 동시에 조합될 수 있다. 설명 목적을 위해, 프로세스(1300)는 도 1의 전자 디바이스(100)를 참조하여 기재되지만, 다른 디바이스, 시스템, 프레임워크 및 환경이 이 프로세스를 구현할 수 있다.
블록 1302에서, 센서(106)는 그래픽 사용자 인터페이스(104)의 영역에 대응하는 디스플레이(102)의 영역 상의 터치 입력의 움직임을 검출한다. 예를 들어, 사용자는 그래픽 사용자 인터페이스(104)의 상단 에지로부터 하단 에지를 향해 아래로 손가락을 스와이핑할 수 있다.
블록 1304에서, 전자 디바이스(100)는, 터치 입력의 움직임이 전자 디바이스(100)의 운영 체제의 작업과 같은 작업을 수행하는 것과 연관되는지 여부를 결정한다. 예를 들어, 전자 디바이스(100)는, 터치 입력의 움직임이 그래픽 사용자 인터페이스(104) 상에 메뉴 바를 디스플레이하는 것과 연관된다고 결정할 수 있다. 전자 디바이스(100)가 터치 입력의 움직임이 운영 체제의 작업과 연관되지 않는다고 결정하는 경우에는, 방법은 임의의 부가의 터치 입력을 검출하도록 단계 1302로 돌아간다.
전자 디바이스(100)가 터치 입력의 움직임이 운영 체제의 작업과 연관된다고 결정하는 경우, 단계 1306에서, 전자 디바이스(100)는 그래픽 사용자 인터페이스(104) 상에 작업과 연관된 그래픽 출력을 발생한다. 예를 들어, 그래픽 사용자 인터페이스(104)는 메뉴 바의 디스플레이를 발생할 수 있다. 단계 1308에서, 전자 디바이스(100)는 작업과 연관된 오디오 출력을 발생한다. 예를 들어, 전자 디바이스(100)는 메뉴가 나타날 때 사운드를 발생할 수 있다. 단계 1310에서, 전자 디바이스(100)는 그래픽 사용자 인터페이스(104)의 영역에 대응하는 디스플레이(102)의 영역 내에 작업과 연관된 햅틱 출력을 발생한다. 예를 들어, 햅틱 피드백 컴포넌트(108)는 그래픽 사용자 인터페이스(104)의 영역에 대응하는 디스플레이(102)의 영역 내의 표면 마찰을 증가시킬 수 있다. 단계 1306, 1308 및 1310은 동시에 또는 적어도 부분적으로 동시에 발생할 수 있다. 예를 들어, 햅틱 출력은 그래픽 출력이 발생하는 동안 그리고 오디오 출력이 발생하는 동안에 발생할 수 있다. 설명 목적을 위해 몇몇 예들이 여기에 기재되지만, 본 개시는 특정 예에 한정되지 않고, 추가의 디바이스, 환경, 애플리케이션 및 설정으로 확장될 수 있다.
예시적인 전자 디바이스
도 14는 일부 구현에 따른 예시적인 전자 디바이스(1400)의 선택 요소들을 예시한 블록도이다. 전자 디바이스(1400)는 도 1의 전자 디바이스(100)의 예이다. 따라서, 전자 디바이스는 그래픽 사용자 인터페이스(104)를 제시하기 위한 터치 감지형 디스플레이(102)를 갖는 임의의 유형의 디바이스일 수 있다. 예시된 예에서, 전자 디바이스(1400)는 하나 이상의 프로세서(1402), 제어 모듈(116)과 GUI 모듈(118)을 포함하는 하나 이상의 컴퓨터 판독가능한 매체(1404), 오디오 컴포넌트(1406), 하나 이상의 센서(106), 하나 이상의 햅틱 피드백 컴포넌트(108), 및 디스플레이(104)를 포함하며, 이들은 전부 시스템 버스(1408) 또는 기타 적합한 접속을 통해 통신할 수 있다. 오디오 컴포넌트(1406)는 상기 설명된 햅틱 및 그래픽 출력과 함께 또는 동시에 오디오 출력을 발생할 수 있다.
일부 구현에서, 프로세서(1402)는 마이크로프로세싱 유닛(MPU; microprocessing unit), CPU(central processing unit), 또는 당해 기술 분야에 공지된 기타 프로세싱 유닛 또는 컴포넌트이다. 다른 능력들 중에서도, 프로세서(1402)는 컴퓨터 판독가능한 매체(1404) 또는 기타 컴퓨터 판독가능한 저장 매체에 저장된 컴퓨터 판독가능한 프로세서 액세스가능한 명령어를 페치 및 실행하도록 구성될 수 있다.
여기에서 사용될 때, "컴퓨터 판독가능한 매체"는 컴퓨터 저장 매체 및 통신 매체를 포함한다.
컴퓨터 저장 매체는, 컴퓨터 판독가능한 명령어, 데이터 구조, 프로그램 모듈, 또는 기타 데이터와 같은 정보의 저장을 위해 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성, 분리식 및 비분리식 매체를 포함한다. 컴퓨터 저장 매체는, RAM(random access memory), ROM(read only memory), EEPROM(electrically erasable programmable ROM), 플래시 메모리 또는 기타 메모리 기술, CD-ROM(compact disk ROM), DVD(digital versatile disk) 또는 기타 광 스토리지, 자기 카세트, 자기 테이프, 자기 디스크 스토리지 또는 기타 자기 스토리지 장치, 또는 컴퓨터 디바이스에 의한 액세스를 위해 정보를 저장하도록 사용될 수 있는 임의의 기타 매체를 포함하지만, 이에 한정되지 않는다.
이와 달리, 통신 매체는 컴퓨터 판독가능한 명령어, 데이터 구조, 프로그램 모듈, 또는 기타 데이터를 반송파와 같은 변조된 데이터 신호로 구현할 수 있다. 여기에서 정의될 때, 컴퓨터 저장 매체는 통신 매체를 포함하지 않는다.
컴퓨터 판독가능한 매체(1404)는 전자 디바이스(1400)가 여기에 기재된 기능을 수행할 수 있게 하기 위한 다양한 모듈 및 기능 컴포넌트를 포함할 수 있다. 일부 구현에서, 컴퓨터 판독가능한 매체(1404)는, 센서(106) 및 햅틱 피드백 컴포넌트(108)와 같은 전자 디바이스(100)의 다양한 컴포넌트의 동작을 제어하기 위한 제어 모듈(116)을 포함할 수 있다. 예를 들어, 제어 모듈(116)은 센서(106)를 통한 터치 입력 및 터치 입력의 움직임을 검출하고 등록할 수 있다. 검출하는 것에 응답하여, 제어 모듈(116)은 햅틱 피드백 컴포넌트(108)를 통해 햅틱 출력을 발생할 수 있다. 또한, 상기 설명된 바와 같이, GUI 모듈(118)은 검출하는 것에 응답하여 디스플레이(104) 상에 그래픽 출력을 발생할 수 있다. 제어 모듈(116) 및/또는 GUI 모듈(118)은 복수의 프로세서 실행가능한 명령어를 포함할 수 있으며, 이는 단일 명령어 모듈을 포함할 수 있거나 또는 임의의 수의 명령어 모듈로 나뉠 수 있다. 이러한 명령어들은, 예를 들어 전자 디바이스(100)의 하드웨어 컴포넌트에 대한 드라이버를 더 포함할 수 있다.
제어 모듈(116) 및/또는 GUI 모듈(118)은 전자 디바이스(110) 상에 완전히 또는 부분적으로 구현될 수 있다. 도 1에서는 전자 디바이스(1400)의 컴퓨터 판독가능한 매체(1404)에 저장되는 것으로 예시되어 있지만, 제어 모듈(116) 및 GUI 모듈(118), 또는 이들의 일부는, 전자 디바이스(1400)에 의해 액세스 가능한 임의의 형태의 컴퓨터 판독가능한 매체를 사용하여 구현될 수 있다. 일부 구현에서, 제어 모듈(116) 및/또는 GUI 모듈(118)은 부분적으로 또다른 디바이스 또는 서버 상에 구현된다. 또한, 컴퓨터 판독가능한 매체(1404)는, 운영 체제, 디바이스 드라이버 등과 같은 다른 모듈 뿐만 아니라, 제어 모듈(116) 및 기타 모듈에 의해 사용되는 데이터를 포함할 수 있다.
컴퓨터 판독가능한 매체(1404) 또는 기타 기계 판독가능한 저장 매체는 여기에 기재된 방법 또는 기능의 임의의 하나 이상을 구현하는 하나 이상의 명령어 세트(예를 들어, 소프트웨어)를 저장한다. 명령어는 또한 전자 디바이스(1400)에 의한 그의 실행 동안, 완전히 또는 적어도 부분적으로, 컴퓨터 판독가능한 매체(1404) 내에 그리고 프로세서(1402) 내에 상주할 수 있다. 프로그램 코드는 하나 이상의 컴퓨터 판독가능한 메모리 디바이스 또는 컴퓨터 판독가능한 매체(1404)와 같은 기타 컴퓨터 판독가능한 저장 디바이스에 저장될 수 있다. 또한, 예시적인 디바이스 구성 및 아키텍처가 기재되었지만, 다른 구현은 여기에 기재된 특정 구성 및 아키텍처에 한정되지 않는다. 따라서, 본 개시는 당해 기술 분야에서의 숙련자에게 공지되었거나 공지될 다른 구현으로 확장될 수 있다.
여기에 기재된 예시적인 환경, 시스템 및 컴퓨팅 디바이스는 단지 일부 구현에 적합한 예일 뿐이며, 여기에 기재된 프로세스, 컴포넌트 및 특징을 구현할 수 있는 환경, 아키텍처 및 프레임워크의 기능 또는 사용 범위에 대해 어떠한 한정도 제안하고자 하는 것이 아니다. 따라서, 여기에서의 구현은 다수의 환경 또는 아키텍처와 함께 작용가능하며, 범용 및 특수 용도 컴퓨팅 시스템, 또는 프로세싱 능력을 갖는 다른 디바이스로 구현될 수 있다. 일반적으로, 도면에 관련하여 기재된 임의의 기능은 소프트웨어, 하드웨어(예를 들어, 고정된 로직 회로), 또는 이들 구현의 조합을 사용하여 구현될 수 있다. 따라서, 여기에 기재된 프로세스, 컴포넌트, 및 모듈은 컴퓨터 프로그램 제품에 의해 구현될 수 있다.
또한, 본 개시는 기재된 바와 같이 그리고 도면에 예시된 바와 같이 다양한 예시적인 구현을 제공한다. 그러나, 본 개시는 여기에 기재되고 예시된 구현에 한정되지 않고, 당해 기술 분야에서의 숙련자에게 공지되었거나 공지될 다른 구현으로 확장될 수 있다. 명세서 내의 "하나의 예", "일부 예", "일부 구현", "예", "예시적인 예", 또는 유사 문구의 인용은, 기재된 특정 특징, 구조 또는 특성이 적어도 하나의 구현에 포함된다는 것을 의미하며, 명세서 내의 다양한 곳에 이들 문구가 보이는 것이 반드시 모두가 동일 구현을 지칭하는 것은 아니다.
결론
구조적 특징 및/또는 방법 동작에 특정한 언어로 주제가 기재되었지만, 첨부된 청구항에서 정의되는 주제는 상기 기재된 특정 특징 또는 동작에 한정되지 않는다. 오히려, 상기 기재된 특정 특징 및 동작은 청구항을 구현하는 예시적인 형태로서 개시된다. 본 개시는 개시된 구현의 임의의 그리고 모든 적응 또는 변형을 커버하도록 의도되고, 다음의 청구항은 명세서에 개시된 특정 구현에 한정되는 것으로 해석되어서는 안 된다. 대신에, 본 명세서의 범위는 완전히 다음의 청구항에 의해, 이러한 청구항이 부여하는 등가물의 전체 범위와 함께, 결정되어야 할 것이다.

Claims (10)

  1. 디스플레이 상에 그래픽 사용자 인터페이스를 제시하는 단계;
    작업(task)을 수행하는 것과 연관된, 상기 그래픽 사용자 인터페이스의 영역에 대응하는 디스플레이의 영역 상의 터치 입력의 움직임을 검출하는 단계; 및
    상기 검출하는 것에 응답하여,
    상기 작업과 연관된 그래픽 출력을 발생하는 단계; 및
    상기 디스플레이의 영역 내에서, 상기 작업과 연관된 햅틱(haptic) 출력을 발생하는 단계
    를 포함하는 방법.
  2. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부(side) 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향(opposite) 측부를 향한 것이며,
    상기 햅틱 출력은,
    표면 마찰을 증가시키고,
    그 후에 상기 움직임 동안 상기 표면 마찰을 감소시키는 것
    을 포함하는 것인 방법.
  3. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향 측부를 향한 것이며,
    상기 햅틱 출력은, 표면 마찰을 증가시키고 진동을 일으키는 것을 포함하는 것인 방법.
  4. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향 측부를 향한 것이며,
    상기 햅틱 출력은, 표면 마찰을 증가시키고 상기 움직임 동안 상기 표면 마찰의 레벨을 유지하는 것을 포함하는 것인 방법.
  5. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향 측부를 향한 것이며,
    상기 햅틱 출력은, 상기 움직임 동안 표면 마찰을 제1 레벨로 변경하고 상기 표면 마찰을 제2 레벨로 변경하며 상기 표면 마찰을 제3 레벨로 변경하는 것을 포함하는 것인 방법.
  6. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향 측부를 향한 것이며,
    상기 햅틱 출력은 상기 디스플레이의 적어도 일부 상의 펄스를 포함하는 것인 방법.
  7. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역이 상기 그래픽 사용자 인터페이스의 좌측 영역 또는 우측 영역을 포함할 때, 상기 햅틱 출력은, 상기 움직임이 상기 그래픽 사용자 인터페이스의 중앙 영역을 향할 때에 표면 마찰을 변경하는 것을 포함하고,
    상기 그래픽 사용자 인터페이스의 영역이 상기 그래픽 사용자 인터페이스의 중앙 영역을 포함할 때, 상기 햅틱 출력은, 상기 움직임이 상기 그래픽 사용자 인터페이스의 좌측 영역 또는 우측 영역을 향할 때에 표면 마찰을 변경하는 것을 포함하는 것인 방법.
  8. 청구항 1에 있어서,
    상기 그래픽 사용자 인터페이스의 영역은 상기 그래픽 사용자 인터페이스의 측부 영역을 포함하고,
    상기 움직임은 상기 그래픽 사용자 인터페이스의 대향 측부를 향하고 그 후에 그로부터 멀어지는 것이며,
    상기 햅틱 출력은 상기 디스플레이의 적어도 일부 상의 펄스를 포함하는 것인 방법.
  9. 그래픽 사용자 인터페이스를 제시하기 위한 디스플레이;
    상기 그래픽 사용자 인터페이스의 영역에 대응하는 터치 입력의 움직임을 검출하기 위한 하나 이상의 센서로서,
    상기 터치 입력은 작업을 수행하는 것과 연관되고,
    상기 그래픽 사용자 인터페이스는 상기 검출하는 것에 응답하여 상기 작업과 연관된 그래픽 출력을 발생하는 것인, 상기 센서; 및
    상기 디스플레이의 영역 내에서, 상기 검출하는 것에 응답하여 상기 작업과 연관된 햅틱 출력을 발생하기 위한 하나 이상의 햅틱 피드백 컴포넌트를 포함하는 디바이스.
  10. 컴퓨터 실행가능한 명령어들을 저장한 컴퓨터 판독가능한 매체에 있어서,
    상기 명령어들은 하나 이상의 프로세서로 하여금,
    디스플레이 상에 그래픽 사용자 인터페이스를 제시하는 동작;
    작업을 수행하는 것과 연관된, 상기 그래픽 사용자 인터페이스의 영역에 대응하는 디스플레이의 영역 상의 터치 입력의 움직임을 검출하는 동작;
    상기 터치 입력의 움직임이 상기 작업을 수행하는 것과 연관된다고 결정하는 동작; 및
    상기 결정하는 것에 응답하여,
    상기 작업과 연관된 그래픽 출력 - 상기 그래픽 출력은 상기 터치 입력의 움직임 방향으로 하나 이상의 그래픽 객체를 움직이는 것을 포함함 - 을 발생하는 동작과,
    상기 디스플레이의 영역 내에서, 상기 작업과 연관된 햅틱 출력 - 상기 햅틱 출력은 상기 디스플레이의 표면 마찰을 변경하는 것을 포함함 - 을 발생하는 동작
    을 포함한 동작들을 수행하게 하는 것인 컴퓨터 판독가능한 매체.
KR1020157035243A 2013-05-14 2014-05-14 제스처에 대한 피드백 KR20160007634A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/893,554 US20140340316A1 (en) 2013-05-14 2013-05-14 Feedback for Gestures
US13/893,554 2013-05-14
PCT/US2014/037936 WO2014186424A1 (en) 2013-05-14 2014-05-14 Feedback for gestures

Publications (1)

Publication Number Publication Date
KR20160007634A true KR20160007634A (ko) 2016-01-20

Family

ID=50933540

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157035243A KR20160007634A (ko) 2013-05-14 2014-05-14 제스처에 대한 피드백

Country Status (6)

Country Link
US (1) US20140340316A1 (ko)
EP (1) EP2997446A1 (ko)
KR (1) KR20160007634A (ko)
CN (1) CN105247449A (ko)
TW (1) TW201447741A (ko)
WO (1) WO2014186424A1 (ko)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8405618B2 (en) * 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
US9244606B2 (en) 2010-12-20 2016-01-26 Apple Inc. Device, method, and graphical user interface for navigation of concurrently open software applications
US9411422B1 (en) 2013-12-13 2016-08-09 Audible, Inc. User interaction with content markers
CN115756151A (zh) 2014-09-02 2023-03-07 苹果公司 用于可变触觉输出的语义框架
JP5950139B1 (ja) * 2015-03-04 2016-07-13 Smk株式会社 電子機器の振動発生装置
US10664053B2 (en) 2015-09-30 2020-05-26 Apple Inc. Multi-transducer tactile user interface for electronic devices
CN105536249B (zh) * 2016-02-18 2023-09-01 高创(苏州)电子有限公司 游戏系统
JP2019514139A (ja) * 2016-04-21 2019-05-30 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 電子デバイス用触知ユーザインターフェース
DK179823B1 (en) * 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201670737A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
US10671167B2 (en) * 2016-09-01 2020-06-02 Apple Inc. Electronic device including sensed location based driving of haptic actuators and related methods
CN109240500A (zh) * 2016-09-06 2019-01-18 苹果公司 用于提供触觉反馈的设备、方法和图形用户界面
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
US10365719B2 (en) * 2017-07-26 2019-07-30 Google Llc Haptic feedback of user interface scrolling with synchronized visual animation components
US10509473B2 (en) * 2017-09-21 2019-12-17 Paypal, Inc. Providing haptic feedback on a screen
US11016643B2 (en) * 2019-04-15 2021-05-25 Apple Inc. Movement of user interface object with user-specified content
CN110246394B (zh) * 2019-06-21 2021-04-30 北京百度网讯科技有限公司 一种智能吉他及其学习方法和吉他指套
CN110362200A (zh) * 2019-06-24 2019-10-22 瑞声科技(新加坡)有限公司 触觉反馈的生成方法与装置
JP2022012116A (ja) * 2020-07-01 2022-01-17 コニカミノルタ株式会社 情報処理装置、情報処理装置の制御方法及びプログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080048837A (ko) * 2006-11-29 2008-06-03 삼성전자주식회사 촉각 피드백을 출력하는 장치 및 방법
US20090219252A1 (en) * 2008-02-28 2009-09-03 Nokia Corporation Apparatus, method and computer program product for moving controls on a touchscreen
KR101486343B1 (ko) * 2008-03-10 2015-01-26 엘지전자 주식회사 단말기 및 그 제어 방법
BRPI0804355A2 (pt) * 2008-03-10 2009-11-03 Lg Electronics Inc terminal e método de controle do mesmo
US9696803B2 (en) * 2009-03-12 2017-07-04 Immersion Corporation Systems and methods for friction displays and additional haptic effects
KR20110019144A (ko) * 2009-08-19 2011-02-25 엘지전자 주식회사 진동 패턴 발생 장치 및 방법
KR101484826B1 (ko) * 2009-08-25 2015-01-20 구글 잉크. 직접적인 조작 제스처들
US9448713B2 (en) * 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
US8570296B2 (en) * 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US10775888B2 (en) * 2013-02-15 2020-09-15 Facebook, Inc. Method and system for integrating haptic feedback into portable electronic devices
US9285905B1 (en) * 2013-03-14 2016-03-15 Amazon Technologies, Inc. Actuator coupled device chassis

Also Published As

Publication number Publication date
WO2014186424A1 (en) 2014-11-20
EP2997446A1 (en) 2016-03-23
TW201447741A (zh) 2014-12-16
US20140340316A1 (en) 2014-11-20
CN105247449A (zh) 2016-01-13

Similar Documents

Publication Publication Date Title
KR20160007634A (ko) 제스처에 대한 피드백
US10620707B2 (en) Systems and methods for interfaces featuring surface-based haptic effects
US10013063B2 (en) Systems and methods for determining haptic effects for multi-touch input
US9910524B1 (en) Devices and methods for processing and disambiguating touch inputs using intensity thresholds based on prior input intensity
EP2406702B1 (en) System and method for interfaces featuring surface-based haptic effects
KR101885740B1 (ko) 마찰 디스플레이에서 특징부를 제공하는 시스템 및 방법
CN106125973B (zh) 用于在触摸使能的显示器中提供特征的系统和方法
US9342148B2 (en) Electronic device for generating vibrations in response to touch operation
JP2017016643A (ja) 触覚フィードバックを伴う入力
KR20170118864A (ko) 곡면형 디스플레이와의 사용자 상호작용을 위한 시스템들 및 방법들
US11928483B2 (en) Devices, methods, and graphical user interfaces for seamless transition of user interface behaviors
US20150033193A1 (en) Methods for modifying images and related aspects
CN110058757B (zh) 用于对触摸输入进行处理和消除歧义的设备和方法
KR102194778B1 (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
JP6399216B2 (ja) 駆動制御装置、電子機器、駆動制御プログラム、及び駆動制御方法

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid