KR20120060763A - 햅틱 피드백 보조 텍스트 조작 - Google Patents

햅틱 피드백 보조 텍스트 조작 Download PDF

Info

Publication number
KR20120060763A
KR20120060763A KR1020110127877A KR20110127877A KR20120060763A KR 20120060763 A KR20120060763 A KR 20120060763A KR 1020110127877 A KR1020110127877 A KR 1020110127877A KR 20110127877 A KR20110127877 A KR 20110127877A KR 20120060763 A KR20120060763 A KR 20120060763A
Authority
KR
South Korea
Prior art keywords
text
haptic
touch
instructions
processor
Prior art date
Application number
KR1020110127877A
Other languages
English (en)
Other versions
KR101911088B1 (ko
Inventor
크리스토프 람스테인
데이비드 번바움
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20120060763A publication Critical patent/KR20120060763A/ko
Application granted granted Critical
Publication of KR101911088B1 publication Critical patent/KR101911088B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting

Abstract

터치스크린을 갖는 시스템은 터치스크린 상에 디스플레이된 텍스트의 조작에 응답하여 햅틱 효과들을 생성한다. 시스템은 텍스트 내의 터치를 감지하고, 터치가 텍스트의 조작인지 결정하고, 조작의 종류를 결정한다. 그 후, 시스템은 결정된 조작의 종류에 적어도 부분적으로 기초한 햅틱 이벤트의 종류를 생성한다.

Description

햅틱 피드백 보조 텍스트 조작{HAPTIC FEEDBACK ASSISTED TEXT MANIPULATION}
일 실시예는 일반적으로 컴퓨터 터치스크린에 관한 것이며, 상세하게는 컴퓨터 터치스크린을 위한 햅틱 피드백에 관한 것이다.
터치스크린은 디스플레이 영역 내에서 터치의 존재 및 위치를 검출할 수 있는 전자 시각 디스플레이이다. "터치"는 일반적으로 디바이스의 디스플레이와 손가락 또는 손의 접촉을 참조한다. 터치스크린들은 또한 스타일러스와 같은 다른 수동적인 또는 능동적인 객체들을 감지할 수 있다.
터치스크린은 두 가지 주요 속성들을 갖는다. 첫번째로, 그것은 간접적으로 마우스 또는 터치패드에 의해 제어되는 커서를 통하기보다는 사람이 디스플레이된 것과 직접 상호작용하는 것을 가능하게 한다. 두번째로, 그것은 손에 쥐어져야 하는 임의의 중간 디바이스를 요구하지 않고 사람이 상호작용하는 것을 허용한다. 터치스크린들은 컴퓨터들에, 또는 단말기로서 네트워크들에 부착될 수 있다. 그것들은 또한 개인용 휴대 단말기(PDA), 개인용 매체 재생기(PMP), 위성 내비게이션 디바이스, 휴대 전화, 및 비디오 게임과 같은 디지털 제품의 설계에 중요한 역할을 한다.
터치스크린들은 워드 프로세싱, 스프레드시트 등과 같은 전형적인 "오피스" 어플리케이션들을 구현하는 컴퓨터들 또는 컴퓨터 "패드들"과 함께 점점 많이 사용되고 있다. 터치 기능은 때로는 이러한 어플리케이션들의 사용자 경험을 향상시킬 수 있다.
일 실시예는 터치스크린 상에 디스플레이된 텍스트의 조작에 응답하여 햅틱 효과들을 생성하는 터치스크린을 갖는 시스템이다. 시스템은 텍스트 내의 터치를 감지하고, 터치가 텍스트의 조작인지를 결정하며, 조작의 종류를 결정한다. 그 후, 시스템은 결정된 조작의 종류에 적어도 부분적으로 기초한 햅틱 이벤트의 종류를 생성한다.
도 1은 본 발명의 일 실시예에 따른 디바이스의 평면도이다.
도 2는 본 발명의 일 실시예에 따른 햅틱 피드백 시스템의 블록도이다.
도 3은 텍스트 조작에 응답하여 햅틱 피드백을 제공하는 본 발명의 일 실시예를 도시한다.
도 4는 손가락이 좌측에서 우측으로 이동하며 더 많은 양의 단어들을 선택/하이라이트함에 따른 확대 윈도우의 진행을 도시한다.
도 5는 일 실시예에 따른, 텍스트 조작에 응답하여 햅틱 피드백을 생성할 때의 햅틱 피드백 모듈의 기능의 흐름도이다.
일 실시예는, 사용자의 제스쳐에 응답하여 및/또는 텍스트의 내용에 기초하여 햅틱 피드백 효과들을 통합함으로써 사용자의 텍스트 조작을 용이하게 하는 터치스크린을 갖는 디바이스이다. 그러므로, 사용자는 텍스트의 크기, 터치스크린의 크기, 또는 사용자가 사용자의 지시 손가락 또는 다른 객체 아래의 텍스트를 볼 수 있는지의 여부와 상관없이 더 쉽게 그리고 효율적으로 텍스트를 조작하고 텍스트와 상호작용할 수 있다.
도 1은 본 발명의 일 실시예에 따른 디바이스(50)의 평면도이다. 도시된 바와 같이, 디바이스(50)는 핸드헬드 컴퓨터 태블릿 또는 패드이며, 터치스크린(55)을 포함한다. 그러나, 다른 실시예들에서, 디바이스(50)는 PDA, PMP, 휴대 게이밍 디바이스 등을 포함하는, 터치스크린을 포함하는 임의의 종류의 핸드헬드 디바이스일 수 있다. 디바이스(50)는 텍스트(58)를 생성하는 어플리케이션을 실행하며, 사용자가 손가락(56) 또는 다른 객체를 사용하여 텍스트(58)와 상호작용하고 텍스트를 조작하도록 허용한다. 상호작용에 응답하여, 디바이스(50)는 손가락(56)에 의해 감지될 수 있는 진동의 형태일 수 있는 햅틱 피드백(54)을 생성한다. 디바이스(50)는 또한 옵션으로서 사용자로 하여금 마우스, 터치패드 등과 같은 다른 인터페이스 디바이스들을 사용하여 텍스트(58)를 조작하도록 허용할 수 있다.
텍스트의 조작은 사용자가 디스플레이된 텍스트/문자들에 대해, 또는 그것들에 응답하여 수행할 수 있는 임의의 작업을 포함할 수 있다. 조작의 예들은, 사용자가 텍스트의 본문(body) 내에서 커서를 이동하는 것, 디스플레이된 텍스트 중 특정 문자들, 단어들, 또는 행(line)들을 선택하는 것, 및 디스플레이된 텍스트의 부분들을 복사 및 붙여넣는 것, 텍스트의 부분들의 위치를 변경하는 것, 텍스트를 지우는 것, 텍스트 스타일(예컨대, 굵기(weight), 기울기 등), 크기, 색, 또는 서체(예컨대, 폰트), 순서(예컨대, 알파벳 순서의 리스트)를 변경하는 것, 표 작성, 아웃라이닝(outlining), 줄 간격 맞추기(line spacing), 커닝(kerning), 또는 다른 행동들과 같은 포매팅(formatting)을 포함한다.
도 2는 본 발명의 일 실시예에 따른 햅틱 피드백 시스템(10)의 블록도이다. 시스템(10)은 도 1의 디바이스(50)의 일부이며, 텍스트 조작 기능에 응답하여 햅틱 피드백을 제공한다. 하나의 시스템으로 도시되었으나, 시스템(10)의 기능은 분산된 시스템으로 구현될 수 있다. 시스템(10)은 정보를 통신하기 위한 버스(12) 또는 다른 통신 메커니즘, 및 정보를 처리하기 위해 버스(12)에 연결된 프로세서(22)를 포함한다. 프로세서(22)는 임의의 종류의 범용 또는 특정 목적의 프로세서일 수 있다. 시스템(10)은 정보, 및 프로세서(22)에 의해 실행될 명령어들을 저장하기 위한 메모리(14)를 더 포함한다. 메모리(14)는 랜덤 액세스 메모리("RAM"), 판독 전용 메모리("ROM"), 자기 또는 광학 디스크와 같은 정적 스토리지, 또는 임의의 다른 종류의 컴퓨터 판독 가능한 매체로 구성될 수 있다.
컴퓨터 판독 가능한 매체는 프로세서(22)에 의해 액세스될 수 있는 임의의 사용 가능한 매체일 수 있으며, 휘발성 및 비휘발성 매체, 이동형 및 비이동형 매체, 및 통신 매체를 포함한다. 통신 매체는 컴퓨터 판독 가능한 명령어들, 데이터 구조들, 프로그램 모듈들, 또는 다른 데이터를 캐리어 웨이브 또는 다른 전달 메커니즘과 같은 변조된 데이터 신호 내에 포함할 수 있으며, 임의의 정보 전달 매체를 포함한다.
일 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈들을 저장한다. 일 실시예에서, 모듈들은 시스템(10)은 물론, 디바이스(50)의 나머지를 위한 운영 체제 기능을 제공하는 운영 체제(15)를 포함한다. 하기 더 상세히 개시된 바와 같이, 모듈들은 텍스트 조작을 인식하고 햅틱 피드백을 생성하는 햅틱 피드백 모듈(16)을 더 포함한다. 시스템(10)은 전형적으로, 모듈(16)에 이미 통합되지 않았다면 도 1의 텍스트(58)를 생성하는 워드 프로세싱 어플리케이션과 같은 추가적인 기능을 포함하기 위한 하나 이상의 추가적인 어플리케이션 모듈들(18)을 포함할 것이다.
원격 소스들로부터 데이터를 송신 및/또는 수신하는 실시예들에서, 시스템(10)은 적외선, 라디오, Wi-Fi, 또는 셀룰러 네트워크 통신과 같은 모바일 무선 네트워크 통신을 제공하기 위해 네트워크 인터페이스 카드와 같은 통신 디바이스(20)를 더 포함한다. 다른 실시예들에서, 통신 디바이스(20)는 이더넷(Ethernet) 연결 또는 모뎀과 같은 유선 네트워크 연결을 제공한다.
프로세서(22)는 또한 그래픽 표현 또는 사용자 인터페이스를 사용자에게 디스플레이하고, 사용자의 터치들을 인식하기 위한 터치스크린 디스플레이(24)에 버스(12)를 통해 연결된다. 터치스크린 디스플레이(24)는 멀티 터치 터치스크린을 포함하는 임의의 종류의 터치스크린일 수 있다.
시스템(10)은 하나 이상의 액추에이터(actuator)(26)를 더 포함한다. 프로세서(22)는 햅틱 효과 또는 "햅틱 이벤트"와 연관된 햅틱 신호를 액추에이터(26)에 송신할 수 있으며, 이어서 액추에이터는 햅틱 피드백/효과들을 출력한다. 액추에이터(26)는, 예컨대 전기 모터, 전자기 액추에이터, 음성 코일(voice coil), 선형 공진 액추에이터(linear resonant actuator), 압전 액추에이터(piezoelectric actuator), 형상 기억 합금, 전자 활성 중합체, 솔레노이드, 편심 회전 질량 모터("ERM") 또는 선형 공진 액추에이터("LRA")일 수 있다. 도 1의 디바이스(50)에 대해, 액추에이터(26)는 터치스크린(55), 디바이스(50)의 하우징에 연결되거나 또는 디바이스(50)로부터 멀리 떨어져 위치할 수 있으나, 여전히 사용자에 의해 액세스 가능할 수 있다. 예컨대, 프로세서(22)로부터의 신호들에 의해 생성된 햅틱 피드백은 사용자의 원격 전화 또는 시계에 "디스플레이"되거나 감지될 수 있다.
일 실시예에서, 사용자는 텍스트에 걸쳐 손가락을 드래그하며, 하나 이상의 종류의 햅틱 피드백이 텍스트에 대한 손가락의 위치에 관한 정보를 사용자에게 제공할 수 있다. 일 실시예에서, 햅틱 피드백은 액추에이터에 의해 생성된 진동이며, 진동의 진폭 및/또는 주파수를 변경하거나 개별적인 햅틱 이벤트의 지속 시간을 변경함으로써 사용자에 의해 식별 가능한 상이한 종류의 햅틱 피드백 또는 상이한 햅틱 피드백 "이벤트들"이 생성될 수 있다. 일부 실시예들에서, 통상적으로 사용자의 손가락에 의해 시각적으로 가려질 커서 위치가 검출될 수 있도록, 햅틱 피드백과 함께 텍스트가 확대된다.
도 3은 텍스트 조작에 응답하여 햅틱 피드백을 제공하는 본 발명의 일 실시예를 도시한다. 도 3에 도시된 것과 같이, 손가락(56)은 터치스크린(55)을 터치함으로써 텍스트(58)의 일부를 선택한다. 도 3의 실시예에서, 손가락(56)에 의해 가려진 텍스트를 디스플레이하기 위해 확대 윈도우(70)(즉, "back' with un")가 생성된다. 사용자가 텍스트(58)를 처음 터치하면, 커서의 초기 위치를 나타내는 "핸들"(78)이 디스플레이된다. 손가락(56)이 핸들(78)로부터 좌측 또는 우측으로 미끄러지면, 텍스트의 그 부분이 하이라이팅되어(하이라이팅(74)), 사용자가 텍스트의 그 부분을 선택한다는 것을 나타낸다. 손가락(56)이 텍스트(58)에 걸쳐 미끄러짐에 따라, 예컨대 손가락(56)이 텍스트 문자를 가리는지, 또는 문자들 사이 또는 단어들 사이의 공간에 있는지를 나타내는 상이한 햅틱 이벤트들이 생성된다.
도 4는 손가락(56)이 좌측에서 우측으로 이동하며 더 많은 양의 단어들을 선택/하이라이트함에 따른 확대 윈도우(70)의 진행을 도시한다. 도시된 것과 같이, 손가락(56)이 텍스트(58)의 상이한 단어들을 가림에 따라, 윈도우(70)는 "ch back' with"을 디스플레이하는 것으로부터 "back' with un"을, 그리고 "for an ever-gr"을 디스플레이하는 것으로 진행된다.
손가락(56)이 텍스트(58)에 걸쳐 터치 또는 미끄러짐에 따라, 손가락(56)의 위치, 텍스트의 문맥 등에 기초하여 상이한 햅틱 이벤트들이 생성될 수 있다. 예컨대, 문자가 선택되면, 특정한 햅틱 피드백 이벤트가 생성된다. 고유한 문자들은 고유한 햅틱 이벤트들과 연관될 수 있다. 문자들의 그룹들은 햅틱 이벤트들의 그룹들과 연관될 수 있다. 더욱이, 완전한 단어가 선택되면, 상이한 햅틱 이벤트가 생성된다. 완전한 단어 선택은 공간들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다. 더욱이, 행이 선택된다면, 상이한 햅틱 이벤트가 생성된다. 행 선택은 새로운 행 문자들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다. 또한, 문단이 선택된다면, 상이한 햅틱 이벤트가 생성된다. 문단 선택은 새로운 문단 문자들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다.
더욱이, 햅틱 이벤트는 선택된 항목의 말단에서 생성될 수 있다. 예컨대, 단어, 문장, 또는 문단이 선택된다면, 햅틱 이벤트는 단어, 문장, 또는 문단의 말단에 도달했을 때 생성된다. 상기 생성은 제스처의 방향에 의존할 수 있으므로, 예컨대, 단어에 대해, 방향이 좌측에서 우측이라면, 마지막 글자에 도달했을 때 햅틱 이벤트가 생성되며, 방향이 우측에서 좌측이라면, 첫번째 글자에 도달했을 때 햅틱 이벤트가 생성된다(텍스트는 좌측에서 우측으로 읽도록 의도되었다고 가정한다).
일 실시예에서, 햅틱 이벤트의 종류는 속도와 같은 다른 제스처 파라미터들의 영향을 받을 수 있다. 예컨대, 빠른 제스처는 느린 제스처 동안 통상적으로 일어날 햅틱 이벤트들 중 일부를 필터링 아웃할 수 있다. 그러므로, 사용자가 손가락을 텍스트에 걸쳐 느리게 움직인다면, 햅틱 피드백은 문자들 사이의 공간과 마주칠 때 햅틱 이벤트의 종류를 변경함으로써 사용자로 하여금 각각의 문자를 감지하도록 허용할 수 있다. 그러나, 사용자가 손가락을 텍스트에 걸쳐 더 빠르게 움직인다면, 햅틱 피드백은 단어들 사이의 공간과 마주칠 때 햅틱 이벤트의 종류를 변경함으로써 사용자로 하여금 문자보다는 각각의 개별적인 단어를 감지하도록 허용할 수 있다. 예컨대, 속도의 다른 변화들은 문장 또는 문단이 햅틱 이벤트에 의해 구별되게 할 수 있다.
도 5는 일 실시예에 따른, 텍스트 조작에 응답하여 햅틱 피드백을 생성할 때의 햅틱 피드백 모듈(16)의 기능의 흐름도이다. 일 실시예에서, 도 5의 흐름도의 기능은 메모리 또는 다른 컴퓨터 판독 가능한 또는 유형의 매체에 저장되고, 프로세서에 의해 실행되는 소프트웨어에 의해 구현된다. 다른 실시예들에서, 상기 기능은 하드웨어(예컨대, 어플리케이션 특정 집적 회로("ASIC"), 프로그램 가능한 게이트 어레이("PGA"), 필드 프로그램 가능한 게이트 어레이("FPGA") 등), 또는 하드웨어 및 소프트웨어의 임의의 조합에 의해 수행될 수 있다.
502에서, 모듈(16)은 도 1의 터치스크린(55)과 같은 디스플레이에 생성된 텍스트 또는 문자들 내의 제스처들을 검출한다. "텍스트"는 어플리케이션에 의해 생성된 임의의 종류의 문자들, 또는 데이터베이스 퀘리(query) 또는 다른 생성의 결과로서 디스플레이되는 데이터일 수 있다. 일반적으로, 텍스트는 동적으로 생성되며, 텍스트 또는 데이터를 제어 또는 수정하도록 사용되는 더 정적인 입력 컨트롤들 또는 다른 종류의 사용자 인터페이스들과 상이하다. 대부분의 실시예들에서, 텍스트는 UI 컨트롤들 및 다른 비 텍스트 영역으로부터 분리된 디스플레이의 영역 에 디스플레이된다.
504에서, 제스처가 텍스트에 가해지는 사용자의 손가락 또는 다른 객체라고 결정되면, 모듈(16)은 사용자가 텍스트를 선택하려고 하는지, 텍스트 내에 커서를 놓으려고 하는지, 또는 텍스트를 조작하려고 시도하는지를 결정한다.
504에서 '예'인 경우, 506에서, 텍스트 선택 또는 커서 삽입의 종류에 기초하여 햅틱 피드백 이벤트들이 검색 및/또는 생성된다. 예컨대, 문자, 단어, 행, 또는 문단이 선택되는지에 따라 상이한 햅틱 이벤트가 생성될 수 있다.
햅틱 이벤트들은 선택하는 동안보다는 커서가 텍스트 내에서 움직일 때 제공될 수 있다. 커서 배치는 그것을 구별하기 위해 선택과 상이하게 느껴질 수 있거나, 또는 사용자 경험 일관성을 강조하기 위해 동일하게 느껴질 수 있다.
일 실시예에서, 텍스트의 상이한 부분들에 적용할 상이한 햅틱 이벤트들을 결정하기 위해 지능적인 텍스트 프로세싱을 사용한 선택들이 발생하면, 햅틱 피드백은 다른 "관심 지점들"에 또한 제공될 수 있다. 예컨대, 사용자가 연락처의 이름을 선택하거나, 전화번호로 인식되는 숫자들의 시퀀스를 선택할 때 햅틱 효과가 생성될 수 있다. 예컨대, 이메일과 같은 텍스트에는, 내장된 주소가 존재할 수 있다. 주소는 사용자에 의해 터치되었을 때, 텍스트의 나머지로부터 쉽게 구별될 수 있도록 고유한 햅틱 효과를 생성할 수 있다. 그러므로, 사용자는 햅틱 피드백의 지원을 받아 텍스트 주소를 선택할 수 있으며, 예컨대, 주소를 다른 어플리케이션에 붙여넣을 수 있다.
햅틱 효과는 텍스트의 의미적 문맥에 기초하여 생성될 수 있다. 예컨대, 텍스트가 의미적으로 프로세스되거나, 주어진 지식 영역 내의 개념들, 용어들, 및 관계들의 공식적인 설명으로 주석이 달린다면, 이러한 주석들이 햅틱 효과를 생성할 수 있다.
햅틱 이벤트는 선택된 텍스트에 대해 실행될 동작들의 가용성을 나타낼 수 있다. 예컨대, 선택된 텍스트가 "붙여넣기" 명령어를 위해 적합하다면 특정한 햅틱 피드백 효과가 생성될 수 있거나, 또는 그 반대일 수 있다. 더욱이, 잘라내기, 복사, 붙여넣기, 삽입 등과 같은 다른 텍스트 선택/조작 기능들은 각각 고유의 햅틱 효과들을 가질 수 있으며, 선택과 연관될 수 있다. 예컨대, "붙여넣기"와 연관된 햅틱 효과는 붙여넣어지는 텍스트의 볼륨에 따라 변하는 강도를 가질 수 있다. 붙여넣기 효과의 강도는 각각의 개별적인 문자가 선택됨에 따라 생성된 햅틱 강도의 총 합의 반영일 수 있다.
실시예들은 "텍스트"를 예시하지만, 다른 실시예들에서, 사용자가 스크린 제스처들을 사용하여 선택하기를 원할 수 있는 스크린 상에 디스플레이되는 아이콘, 이미지, 또는 다른 가상/UI 객체들을 포함하는 사용자 인터페이스("UI") 요소 또는 다른 종류의 "객체" 선택의 조작이 검출될 수 있다. 예컨대, 전경 섹션 및 배경 섹션을 갖는 이미지가 디스플레이된다면, 사용자의 손가락이 전경으로부터 배경으로 이동함에 따라 햅틱 이벤트가 생성될 수 있다. 더욱이, 복수의 아이콘들이 디스플레이된다면, 사용자가 아이콘들 사이를 이동함에 따라 햅틱 이벤트들이 변할 수 있다.
개시된 바와 같이, 실시예들은 사용자가 텍스트 또는 다른 종류의 문자들, 또는 다른 정보를 조작함에 따라 다양한 햅틱 이벤트들을 생성한다. 다양한 햅틱 이벤트들은 사용자가 텍스트를 복사하고 붙여 넣는것, 텍스트의 선택, 텍스트 내의 커서 삽입 등과 같은 상호 작용을 수행하는 것을 돕는다.
본원에서 몇몇 실시예들이 구체적으로 예시되고 및/또는 설명된다. 그러나, 개시된 실시예들의 변형들 및 변경들은 본 발명의 진의 및 의도된 범위로부터 벗어나지 않으면서 상기 가르침들에 포함되며 첨부된 청구항들의 범위 내에 있다는 것이 인식될 것이다.
예컨대, 진동에 기초한 햅틱 이벤트 대신에, 디스플레이는 햅틱 효과가 진동보다는 스크린의 표면의 정적인 변화, 또는 마찰의 변화일 수 있도록 폴리모픽(polymorphic) 표면(즉, 변형 가능한 표면 액추에이터들)으로 형성될 수 있다. 더욱이, 진동 대신에, 힘 또는 전자 접촉 자극(electro-tactile stimulation)이 사용될 수 있다.

Claims (15)

  1. 프로세서에 의해 실행될 때 상기 프로세서로 하여금 터치스크린을 포함하는 디바이스에 햅틱 피드백을 제공하도록 하는 명령어들을 저장한 컴퓨터 판독 가능한 매체로서,
    상기 명령어들은,
    텍스트를 디스플레이하는 명령어;
    상기 텍스트 내의 터치를 감지하는 명령어;
    상기 터치가 상기 텍스트의 조작인지의 여부, 및 상기 조작의 종류를 결정하는 명령어; 및
    상기 조작의 종류에 적어도 부분적으로 기초하여 햅틱 이벤트의 종류를 생성하는 명령어
    를 포함하는 컴퓨터 판독 가능 매체.
  2. 제1항에 있어서,
    상기 조작은,
    상기 텍스트의 선택, 상기 텍스트 내의 커서의 삽입 또는 배치, 상기 텍스트의 복사, 상기 텍스트의 이동, 또는 상기 텍스트의 붙여넣기
    중 적어도 하나를 포함하는 컴퓨터 판독 가능 매체.
  3. 제2항에 있어서,
    상기 텍스트의 선택은 문자, 단어, 문장, 또는 문단을 선택하는 것 중 하나를 포함하며, 상기 문자, 상기 단어, 상기 문장, 또는 상기 문단 각각에 대해 제1 햅틱 이벤트가 생성되는 컴퓨터 판독 가능 매체.
  4. 제1항에 있어서,
    진동의 진폭, 지속 시간, 또는 주파수 중 하나 이상을 변경하는 것에 의해 햅틱 이벤트들의 종류들이 생성되는 컴퓨터 판독 가능 매체.
  5. 제1항에 있어서,
    상기 터치는 상기 텍스트에 걸친 객체의 미끄러짐(sliding)을 포함하며, 상기 햅틱 이벤트의 종류는 상기 미끄러짐의 속도에 적어도 기초하는 컴퓨터 판독 가능 매체.
  6. 제5항에 있어서,
    상기 속도가 제1 양(amount)이라면, 햅틱 이벤트의 제1 종류가 개별적인 문자 느낌(feeling)를 제공하며, 상기 속도가 상기 제1 양보다 큰 제2 양이라면, 햅틱 이벤트의 제2 종류가 개별적인 단어 느낌를 제공하는 컴퓨터 판독 가능 매체.
  7. 제1항에 있어서,
    상기 조작의 종류를 결정하는 것은 상기 텍스트의 관심 지점이 터치되었는지를 결정하는 것을 포함하고, 상기 관심 지점은 연락처의 이름, 전화 번호, 및 주소 중 적어도 하나를 포함하는 컴퓨터 판독 가능 매체.
  8. 제2항에 있어서,
    상기 햅틱 이벤트의 종류는 상기 선택된 텍스트를 위한 동작들의 가용성에 적어도 기초하고, 동작들의 상기 가용성은 자르기, 복사, 붙여넣기, 또는 삽입 중 적어도 하나를 포함하는 컴퓨터 판독 가능 매체.
  9. 제8항에 있어서,
    상기 붙여넣기의 가용성에 응답하여 생성된 상기 햅틱 이벤트는 선택된 텍스트의 볼륨(volume)에 기초한 강도(strength)를 포함하는 컴퓨터 판독 가능 매체.
  10. 제1항에 있어서,
    배경(background) 및 전경(foreground)을 갖는 이미지 내의 제2 터치를 감지하는 명령어 - 상기 터치는 상기 전경으로부터 상기 배경으로 횡단함 -; 및
    상기 제2 터치가 상기 배경으로 이동할 때 햅틱 이벤트를 생성하는 명령어
    을 더 포함하는 컴퓨터 판독 가능 매체.
  11. 제1항에 있어서,
    진동, 표면의 국부적 변형, 또는 마찰의 변화 중 적어도 하나에 의해 햅틱 이벤트들의 종류들이 생성되는 컴퓨터 판독 가능 매체.
  12. 터치스크린을 포함하는 디바이스에 햅틱 피드백을 제공하기 위한 컴퓨터 구현 방법으로서,
    텍스트를 디스플레이하는 단계;
    상기 텍스트 내의 터치를 감지하는 단계;
    상기 터치가 상기 텍스트의 조작인지의 여부, 및 상기 조작의 종류를 결정하는 단계; 및
    상기 조작의 상기 종류에 적어도 부분적으로 기초하여 햅틱 이벤트의 종류를 생성하는 단계
    를 포함하는 컴퓨터 구현 방법.
  13. 제12항에 있어서,
    상기 조작은:
    상기 텍스트의 선택, 상기 텍스트 내의 커서의 삽입, 또는 상기 텍스트의 복사, 이동, 및 붙여넣기
    중 적어도 하나를 포함하는 컴퓨터 구현 방법.
  14. 제13항에 있어서,
    상기 텍스트의 선택은 문자, 단어, 문장, 또는 문단을 선택하는 것 중 하나를 포함하며, 상기 문자, 상기 단어, 상기 문장, 또는 상기 문단 각각에 대해 햅틱 이벤트의 상이한 종류가 생성되는 컴퓨터 구현 방법.
  15. 장치로서,
    프로세서;
    상기 프로세서에 연결되며 명령어들을 저장하는 메모리;
    상기 프로세서에 연결된 터치스크린;
    상기 프로세서에 연결된 액추에이터(actuator);
    를 포함하고, 상기 명령어들은, 상기 프로세서에 의해 실행될 때, 상기 장치로 하여금:
    텍스트를 디스플레이하고;
    상기 텍스트 내의 터치를 감지하고;
    상기 터치가 상기 텍스트의 조작인지의 여부, 및 상기 조작의 종류를 결정하고;
    상기 조작의 종류에 적어도 부분적으로 기초하여 상기 액추에이터에 의해 햅틱 이벤트의 종류를 생성하게 하는 장치.
KR1020110127877A 2010-12-02 2011-12-01 햅틱 피드백 보조 텍스트 조작 KR101911088B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/958,705 2010-12-02
US12/958,705 US10503255B2 (en) 2010-12-02 2010-12-02 Haptic feedback assisted text manipulation

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020180123518A Division KR20180117078A (ko) 2010-12-02 2018-10-17 햅틱 피드백 보조 텍스트 조작

Publications (2)

Publication Number Publication Date
KR20120060763A true KR20120060763A (ko) 2012-06-12
KR101911088B1 KR101911088B1 (ko) 2018-12-28

Family

ID=45421852

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020110127877A KR101911088B1 (ko) 2010-12-02 2011-12-01 햅틱 피드백 보조 텍스트 조작
KR1020180123518A KR20180117078A (ko) 2010-12-02 2018-10-17 햅틱 피드백 보조 텍스트 조작

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020180123518A KR20180117078A (ko) 2010-12-02 2018-10-17 햅틱 피드백 보조 텍스트 조작

Country Status (4)

Country Link
US (1) US10503255B2 (ko)
EP (1) EP2461228A3 (ko)
JP (1) JP5991808B2 (ko)
KR (2) KR101911088B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140108010A (ko) * 2013-02-28 2014-09-05 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
KR20190054907A (ko) * 2017-11-13 2019-05-22 주식회사 씨케이머티리얼즈랩 햅틱 제어 신호 제공 장치 및 방법
CN109917970A (zh) * 2013-12-31 2019-06-21 意美森公司 使用单个控制器和支持触觉的用户接口控制多个显示器的系统和方法
US10671165B2 (en) 2012-09-25 2020-06-02 Nokia Technologies Oy Method and display device with tactile feedback
US11847262B2 (en) 2017-11-13 2023-12-19 Ck Materials Lab Co., Ltd. Apparatus and method for providing haptic control signal

Families Citing this family (106)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US8621380B2 (en) 2010-01-06 2013-12-31 Apple Inc. Apparatus and method for conditionally enabling or disabling soft buttons
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
AU2011220382A1 (en) 2010-02-28 2012-10-18 Microsoft Corporation Local advertising content on an interactive head-mounted eyepiece
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US9542091B2 (en) 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
JP5656511B2 (ja) * 2010-08-26 2015-01-21 京セラ株式会社 表示装置
US10013058B2 (en) 2010-09-21 2018-07-03 Apple Inc. Touch-based user interface with haptic feedback
US8754860B2 (en) 2010-11-05 2014-06-17 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US10120446B2 (en) 2010-11-19 2018-11-06 Apple Inc. Haptic input device
EP2466538A1 (en) * 2010-12-20 2012-06-20 Alcatel Lucent Media asset management system
US10002501B2 (en) * 2010-12-22 2018-06-19 Kyocera Corporation Electronic device
US10365819B2 (en) 2011-01-24 2019-07-30 Apple Inc. Device, method, and graphical user interface for displaying a character input user interface
US9250798B2 (en) * 2011-01-24 2016-02-02 Apple Inc. Device, method, and graphical user interface with a dynamic gesture disambiguation threshold
KR20120102262A (ko) * 2011-03-08 2012-09-18 삼성전자주식회사 휴대용 단말기가 열람하는 텍스트에서 원하는 내용을 선택하는 방법 및 장치
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
CN105955617B (zh) 2011-06-03 2019-07-12 谷歌有限责任公司 用于选择文本的手势
US9612670B2 (en) 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
JP5950275B2 (ja) * 2011-12-21 2016-07-13 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ 表示装置上に表示可能な１又は複数の電子データ中に振動部分を設定する方法、並びに、その装置及びコンピュータ・プログラム
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169882A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
AU2013259614B2 (en) 2012-05-09 2016-08-25 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
CN108241465B (zh) 2012-05-09 2021-03-09 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
EP2847657B1 (en) 2012-05-09 2016-08-10 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
US9891709B2 (en) * 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US8570296B2 (en) * 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US20140002377A1 (en) * 2012-07-02 2014-01-02 Microsoft Corporation Manipulating content on a canvas with touch gestures
KR20140037535A (ko) * 2012-09-19 2014-03-27 삼성전자주식회사 사용자 효과를 포함하는 전자책 생성 방법 및 그 장치
US8656296B1 (en) * 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9178509B2 (en) 2012-09-28 2015-11-03 Apple Inc. Ultra low travel keyboard
US9804777B1 (en) 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
US20140139451A1 (en) * 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9836150B2 (en) 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
US11003351B2 (en) * 2012-12-26 2021-05-11 Gree, Inc. Display processing method and information device
AU2013368445B8 (en) 2012-12-29 2017-02-09 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
US9785240B2 (en) * 2013-03-18 2017-10-10 Fuji Xerox Co., Ltd. Systems and methods for content-aware selection
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9652040B2 (en) 2013-08-08 2017-05-16 Apple Inc. Sculpted waveforms with no or reduced unforced response
US9779592B1 (en) 2013-09-26 2017-10-03 Apple Inc. Geared haptic feedback element
US9928950B2 (en) 2013-09-27 2018-03-27 Apple Inc. Polarized magnetic actuators for haptic response
US9886093B2 (en) * 2013-09-27 2018-02-06 Apple Inc. Band with haptic actuators
WO2015047364A1 (en) 2013-09-29 2015-04-02 Pearl Capital Developments Llc Devices and methods for creating haptic effects
US10236760B2 (en) 2013-09-30 2019-03-19 Apple Inc. Magnetic actuators for haptic response
US9317118B2 (en) 2013-10-22 2016-04-19 Apple Inc. Touch surface for simulating materials
CN105814510B (zh) 2013-12-10 2019-06-07 苹果公司 具有触觉响应的带体附接机构
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
US9501912B1 (en) 2014-01-27 2016-11-22 Apple Inc. Haptic feedback device with a rotating mass of variable eccentricity
DE112014006608B4 (de) 2014-04-21 2024-01-25 Apple Inc. Verfahren, Systeme und elektronische Vorrichtungen zum Bestimmen der Kräfteaufteilung für Multi-Touch-Eingabevorrichtungen elektronischer Vorrichtungen
JP6351353B2 (ja) * 2014-05-01 2018-07-04 オリンパス株式会社 操作端末、操作方法およびプログラム
US20150346998A1 (en) * 2014-05-30 2015-12-03 Qualcomm Incorporated Rapid text cursor placement using finger orientation
US9898162B2 (en) 2014-05-30 2018-02-20 Apple Inc. Swiping functions for messaging applications
US9971500B2 (en) 2014-06-01 2018-05-15 Apple Inc. Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application
DE102015209639A1 (de) 2014-06-03 2015-12-03 Apple Inc. Linearer Aktuator
US11023655B2 (en) * 2014-06-11 2021-06-01 Microsoft Technology Licensing, Llc Accessibility detection of content properties through tactile interactions
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
KR102143310B1 (ko) 2014-09-02 2020-08-28 애플 인크. 햅틱 통지
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US20160179765A1 (en) * 2014-12-18 2016-06-23 Kobo Incorporated Method and system for extraneous object notification via digital content repagination
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) * 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
AU2016100399B4 (en) 2015-04-17 2017-02-02 Apple Inc. Contracting and elongating materials for providing input and output for an electronic device
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
JP5906344B1 (ja) * 2015-07-06 2016-04-20 ヤフー株式会社 情報処理装置、情報表示プログラムおよび情報表示方法
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
CN107925333B (zh) 2015-09-08 2020-10-23 苹果公司 用于在电子设备中使用的线性致动器
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
US10039080B2 (en) 2016-03-04 2018-07-31 Apple Inc. Situationally-aware alerts
US10268272B2 (en) 2016-03-31 2019-04-23 Apple Inc. Dampening mechanical modes of a haptic actuator using a delay
US10739972B2 (en) 2016-06-10 2020-08-11 Apple Inc. Device, method, and graphical user interface for managing electronic communications
DK179034B1 (en) 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
WO2018001456A1 (en) * 2016-06-28 2018-01-04 Telefonaktiebolaget Lm Ericsson (Publ) Device and method for haptic exploration of a rendered object
US20190332173A1 (en) * 2016-08-10 2019-10-31 Alexander Wellen Method and device for tactilely reading time on a touch screen
US10622538B2 (en) 2017-07-18 2020-04-14 Apple Inc. Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body
US10691211B2 (en) 2018-09-28 2020-06-23 Apple Inc. Button providing force sensing and/or haptic output
US10599223B1 (en) 2018-09-28 2020-03-24 Apple Inc. Button providing force sensing and/or haptic output
US11380470B2 (en) 2019-09-24 2022-07-05 Apple Inc. Methods to control force in reluctance actuators based on flux related parameters
WO2021183122A1 (en) * 2020-03-11 2021-09-16 Google Llc Controlling haptic response to contact
TWI811789B (zh) * 2021-09-10 2023-08-11 宏碁股份有限公司 智能放大方法及應用其之電子裝置
US11809631B2 (en) 2021-09-21 2023-11-07 Apple Inc. Reluctance haptic engine for an electronic device

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3408332B2 (ja) * 1994-09-12 2003-05-19 富士通株式会社 ハイパーテキスト読上装置
US6078308A (en) * 1995-12-13 2000-06-20 Immersion Corporation Graphical click surfaces for force feedback applications to provide user selection using cursor interaction with a trigger position within a boundary of a graphical object
US6750877B2 (en) * 1995-12-13 2004-06-15 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
US5663748A (en) * 1995-12-14 1997-09-02 Motorola, Inc. Electronic book having highlighting feature
US6519584B1 (en) * 1996-06-26 2003-02-11 Sun Microsystem, Inc. Dynamic display advertising
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6943778B1 (en) * 2000-11-20 2005-09-13 Nokia Corporation Touch screen input technique
KR20090096559A (ko) 2001-11-01 2009-09-10 임머숀 코퍼레이션 촉각을 제공하기 위한 방법 및 장치
US8264465B2 (en) * 2004-10-08 2012-09-11 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
US20100315345A1 (en) * 2006-09-27 2010-12-16 Nokia Corporation Tactile Touch Screen
US20090102805A1 (en) * 2007-10-18 2009-04-23 Microsoft Corporation Three-dimensional object simulation using audio, visual, and tactile feedback
US8294669B2 (en) * 2007-11-19 2012-10-23 Palo Alto Research Center Incorporated Link target accuracy in touch-screen mobile devices by layout adjustment
US8138896B2 (en) * 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
KR101012379B1 (ko) 2008-03-25 2011-02-09 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
KR101658261B1 (ko) 2009-03-12 2016-09-22 임머숀 코퍼레이션 그래픽 사용자 인터페이스 위젯에서 텍스처를 사용하는 시스템 및 방법
US20100289757A1 (en) * 2009-05-14 2010-11-18 Budelli Joey G Scanner with gesture-based text selection capability

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10671165B2 (en) 2012-09-25 2020-06-02 Nokia Technologies Oy Method and display device with tactile feedback
KR20140108010A (ko) * 2013-02-28 2014-09-05 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
US11422627B2 (en) 2013-02-28 2022-08-23 Samsung Electronics Co., Ltd Apparatus and method for providing haptic feedback to input unit
CN109917970A (zh) * 2013-12-31 2019-06-21 意美森公司 使用单个控制器和支持触觉的用户接口控制多个显示器的系统和方法
KR20190054907A (ko) * 2017-11-13 2019-05-22 주식회사 씨케이머티리얼즈랩 햅틱 제어 신호 제공 장치 및 방법
US11847262B2 (en) 2017-11-13 2023-12-19 Ck Materials Lab Co., Ltd. Apparatus and method for providing haptic control signal

Also Published As

Publication number Publication date
JP5991808B2 (ja) 2016-09-14
CN102591518A (zh) 2012-07-18
JP2012118993A (ja) 2012-06-21
KR20180117078A (ko) 2018-10-26
EP2461228A2 (en) 2012-06-06
US10503255B2 (en) 2019-12-10
EP2461228A3 (en) 2012-10-03
US20120139844A1 (en) 2012-06-07
KR101911088B1 (ko) 2018-12-28

Similar Documents

Publication Publication Date Title
KR101911088B1 (ko) 햅틱 피드백 보조 텍스트 조작
US10102010B2 (en) Layer-based user interface
US8214768B2 (en) Method, system, and graphical user interface for viewing multiple application windows
CN108319491B (zh) 管理用户界面中的工作空间
EP2252926B1 (en) Interpreting ambiguous inputs on a touch-screen
US9292161B2 (en) Pointer tool with touch-enabled precise placement
JP6342464B2 (ja) キーボードインタフェース機能のためのデバイス、方法及びグラフィカルユーザインタフェース
JP2020038688A (ja) タッチ入力カーソル操作
US20110248939A1 (en) Apparatus and method for sensing touch
US20120044164A1 (en) Interface apparatus and method for setting a control area on a touch screen
KR102228335B1 (ko) 그래픽 사용자 인터페이스의 일 부분을 선택하는 방법
US20130080963A1 (en) Electronic Device and Method For Character Deletion
MX2014002955A (es) Entrada de formula para dispositivos de presentacion limitada.
US20140123036A1 (en) Touch screen display process
US9069391B2 (en) Method and medium for inputting Korean characters using a touch screen
CN103207759A (zh) 使用触摸的键盘布局方法和装置
KR20100041150A (ko) 멀티터치를 이용한 사용자 인터페이스 제어방법
KR20200031598A (ko) 즐겨찾기모드 조작방법 및 이를 수행하는 터치 스크린을 포함하는 장치
EP2584441A1 (en) Electronic device and method of controlling same
KR102208628B1 (ko) 휴대 장치의 문서 편집 방법 및 이를 사용하는 휴대 장치
KR20210029175A (ko) 즐겨찾기모드 조작방법 및 이를 수행하는 터치 스크린을 포함하는 장치
CN109656460A (zh) 提供键盘的可选择的键的电子设备和方法
KR20170071460A (ko) 즐겨찾기모드 조작방법 및 이를 수행하는 터치 스크린을 포함하는 장치
KR20160027063A (ko) 그래픽 사용자 인터페이스의 일 부분을 선택하는 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
A107 Divisional application of patent
GRNT Written decision to grant