KR20180117078A - 햅틱 피드백 보조 텍스트 조작 - Google Patents

햅틱 피드백 보조 텍스트 조작 Download PDF

Info

Publication number
KR20180117078A
KR20180117078A KR1020180123518A KR20180123518A KR20180117078A KR 20180117078 A KR20180117078 A KR 20180117078A KR 1020180123518 A KR1020180123518 A KR 1020180123518A KR 20180123518 A KR20180123518 A KR 20180123518A KR 20180117078 A KR20180117078 A KR 20180117078A
Authority
KR
South Korea
Prior art keywords
text
haptic
haptic feedback
user
finger
Prior art date
Application number
KR1020180123518A
Other languages
English (en)
Inventor
크리스토프 람스테인
데이비드 번바움
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20180117078A publication Critical patent/KR20180117078A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting

Abstract

터치스크린을 갖는 시스템은 터치스크린 상에 디스플레이된 텍스트의 조작에 응답하여 햅틱 효과들을 생성한다. 시스템은 텍스트 내의 터치를 감지하고, 터치가 텍스트의 조작인지 결정하고, 조작의 종류를 결정한다. 그 후, 시스템은 결정된 조작의 종류에 적어도 부분적으로 기초한 햅틱 이벤트의 종류를 생성한다.

Description

햅틱 피드백 보조 텍스트 조작{HAPTIC FEEDBACK ASSISTED TEXT MANIPULATION}
일 실시예는 일반적으로 컴퓨터 터치스크린에 관한 것이며, 상세하게는 컴퓨터 터치스크린을 위한 햅틱 피드백에 관한 것이다.
터치스크린은 디스플레이 영역 내에서 터치의 존재 및 위치를 검출할 수 있는 전자 시각 디스플레이이다. "터치"는 일반적으로 디바이스의 디스플레이와 손가락 또는 손의 접촉을 참조한다. 터치스크린들은 또한 스타일러스와 같은 다른 수동적인 또는 능동적인 객체들을 감지할 수 있다.
터치스크린은 두 가지 주요 속성들을 갖는다. 첫번째로, 그것은 간접적으로 마우스 또는 터치패드에 의해 제어되는 커서를 통하기보다는 사람이 디스플레이된 것과 직접 상호작용하는 것을 가능하게 한다. 두번째로, 그것은 손에 쥐어져야 하는 임의의 중간 디바이스를 요구하지 않고 사람이 상호작용하는 것을 허용한다. 터치스크린들은 컴퓨터들에, 또는 단말기로서 네트워크들에 부착될 수 있다. 그것들은 또한 개인용 휴대 단말기(PDA), 개인용 매체 재생기(PMP), 위성 내비게이션 디바이스, 휴대 전화, 및 비디오 게임과 같은 디지털 제품의 설계에 중요한 역할을 한다.
터치스크린들은 워드 프로세싱, 스프레드시트 등과 같은 전형적인 "오피스" 어플리케이션들을 구현하는 컴퓨터들 또는 컴퓨터 "패드들"과 함께 점점 많이 사용되고 있다. 터치 기능은 때로는 이러한 어플리케이션들의 사용자 경험을 향상시킬 수 있다.
일 실시예는 터치스크린 상에 디스플레이된 텍스트의 조작에 응답하여 햅틱 효과들을 생성하는 터치스크린을 갖는 시스템이다. 시스템은 텍스트 내의 터치를 감지하고, 터치가 텍스트의 조작인지를 결정하며, 조작의 종류를 결정한다. 그 후, 시스템은 결정된 조작의 종류에 적어도 부분적으로 기초한 햅틱 이벤트의 종류를 생성한다.
도 1은 본 발명의 일 실시예에 따른 디바이스의 평면도이다.
도 2는 본 발명의 일 실시예에 따른 햅틱 피드백 시스템의 블록도이다.
도 3은 텍스트 조작에 응답하여 햅틱 피드백을 제공하는 본 발명의 일 실시예를 도시한다.
도 4는 손가락이 좌측에서 우측으로 이동하며 더 많은 양의 단어들을 선택/하이라이트함에 따른 확대 윈도우의 진행을 도시한다.
도 5는 일 실시예에 따른, 텍스트 조작에 응답하여 햅틱 피드백을 생성할 때의 햅틱 피드백 모듈의 기능의 흐름도이다.
일 실시예는, 사용자의 제스쳐에 응답하여 및/또는 텍스트의 내용에 기초하여 햅틱 피드백 효과들을 통합함으로써 사용자의 텍스트 조작을 용이하게 하는 터치스크린을 갖는 디바이스이다. 그러므로, 사용자는 텍스트의 크기, 터치스크린의 크기, 또는 사용자가 사용자의 지시 손가락 또는 다른 객체 아래의 텍스트를 볼 수 있는지의 여부와 상관없이 더 쉽게 그리고 효율적으로 텍스트를 조작하고 텍스트와 상호작용할 수 있다.
도 1은 본 발명의 일 실시예에 따른 디바이스(50)의 평면도이다. 도시된 바와 같이, 디바이스(50)는 핸드헬드 컴퓨터 태블릿 또는 패드이며, 터치스크린(55)을 포함한다. 그러나, 다른 실시예들에서, 디바이스(50)는 PDA, PMP, 휴대 게이밍 디바이스 등을 포함하는, 터치스크린을 포함하는 임의의 종류의 핸드헬드 디바이스일 수 있다. 디바이스(50)는 텍스트(58)를 생성하는 어플리케이션을 실행하며, 사용자가 손가락(56) 또는 다른 객체를 사용하여 텍스트(58)와 상호작용하고 텍스트를 조작하도록 허용한다. 상호작용에 응답하여, 디바이스(50)는 손가락(56)에 의해 감지될 수 있는 진동의 형태일 수 있는 햅틱 피드백(54)을 생성한다. 디바이스(50)는 또한 옵션으로서 사용자로 하여금 마우스, 터치패드 등과 같은 다른 인터페이스 디바이스들을 사용하여 텍스트(58)를 조작하도록 허용할 수 있다.
텍스트의 조작은 사용자가 디스플레이된 텍스트/문자들에 대해, 또는 그것들에 응답하여 수행할 수 있는 임의의 작업을 포함할 수 있다. 조작의 예들은, 사용자가 텍스트의 본문(body) 내에서 커서를 이동하는 것, 디스플레이된 텍스트 중 특정 문자들, 단어들, 또는 행(line)들을 선택하는 것, 및 디스플레이된 텍스트의 부분들을 복사 및 붙여넣는 것, 텍스트의 부분들의 위치를 변경하는 것, 텍스트를 지우는 것, 텍스트 스타일(예컨대, 굵기(weight), 기울기 등), 크기, 색, 또는 서체(예컨대, 폰트), 순서(예컨대, 알파벳 순서의 리스트)를 변경하는 것, 표 작성, 아웃라이닝(outlining), 줄 간격 맞추기(line spacing), 커닝(kerning), 또는 다른 행동들과 같은 포매팅(formatting)을 포함한다.
도 2는 본 발명의 일 실시예에 따른 햅틱 피드백 시스템(10)의 블록도이다. 시스템(10)은 도 1의 디바이스(50)의 일부이며, 텍스트 조작 기능에 응답하여 햅틱 피드백을 제공한다. 하나의 시스템으로 도시되었으나, 시스템(10)의 기능은 분산된 시스템으로 구현될 수 있다. 시스템(10)은 정보를 통신하기 위한 버스(12) 또는 다른 통신 메커니즘, 및 정보를 처리하기 위해 버스(12)에 연결된 프로세서(22)를 포함한다. 프로세서(22)는 임의의 종류의 범용 또는 특정 목적의 프로세서일 수 있다. 시스템(10)은 정보, 및 프로세서(22)에 의해 실행될 명령어들을 저장하기 위한 메모리(14)를 더 포함한다. 메모리(14)는 랜덤 액세스 메모리("RAM"), 판독 전용 메모리("ROM"), 자기 또는 광학 디스크와 같은 정적 스토리지, 또는 임의의 다른 종류의 컴퓨터 판독 가능한 매체로 구성될 수 있다.
컴퓨터 판독 가능한 매체는 프로세서(22)에 의해 액세스될 수 있는 임의의 사용 가능한 매체일 수 있으며, 휘발성 및 비휘발성 매체 및 이동형 및 비이동형 매체를 포함한다.
일 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈들을 저장한다. 일 실시예에서, 모듈들은 시스템(10)은 물론, 디바이스(50)의 나머지를 위한 운영 체제 기능을 제공하는 운영 체제(15)를 포함한다. 하기 더 상세히 개시된 바와 같이, 모듈들은 텍스트 조작을 인식하고 햅틱 피드백을 생성하는 햅틱 피드백 모듈(16)을 더 포함한다. 시스템(10)은 전형적으로, 모듈(16)에 이미 통합되지 않았다면 도 1의 텍스트(58)를 생성하는 워드 프로세싱 어플리케이션과 같은 추가적인 기능을 포함하기 위한 하나 이상의 추가적인 어플리케이션 모듈들(18)을 포함할 것이다.
원격 소스들로부터 데이터를 송신 및/또는 수신하는 실시예들에서, 시스템(10)은 적외선, 라디오, Wi-Fi, 또는 셀룰러 네트워크 통신과 같은 모바일 무선 네트워크 통신을 제공하기 위해 네트워크 인터페이스 카드와 같은 통신 디바이스(20)를 더 포함한다. 다른 실시예들에서, 통신 디바이스(20)는 이더넷(Ethernet) 연결 또는 모뎀과 같은 유선 네트워크 연결을 제공한다.
프로세서(22)는 또한 그래픽 표현 또는 사용자 인터페이스를 사용자에게 디스플레이하고, 사용자의 터치들을 인식하기 위한 터치스크린 디스플레이(24)에 버스(12)를 통해 연결된다. 터치스크린 디스플레이(24)는 멀티 터치 터치스크린을 포함하는 임의의 종류의 터치스크린일 수 있다.
시스템(10)은 하나 이상의 액추에이터(actuator)(26)를 더 포함한다. 프로세서(22)는 햅틱 효과 또는 "햅틱 이벤트"와 연관된 햅틱 신호를 액추에이터(26)에 송신할 수 있으며, 이어서 액추에이터는 햅틱 피드백/효과들을 출력한다. 액추에이터(26)는, 예컨대 전기 모터, 전자기 액추에이터, 음성 코일(voice coil), 선형 공진 액추에이터(linear resonant actuator), 압전 액추에이터(piezoelectric actuator), 형상 기억 합금, 전자 활성 중합체, 솔레노이드, 편심 회전 질량 모터("ERM") 또는 선형 공진 액추에이터("LRA")일 수 있다. 도 1의 디바이스(50)에 대해, 액추에이터(26)는 터치스크린(55), 디바이스(50)의 하우징에 연결되거나 또는 디바이스(50)로부터 멀리 떨어져 위치할 수 있으나, 여전히 사용자에 의해 액세스 가능할 수 있다. 예컨대, 프로세서(22)로부터의 신호들에 의해 생성된 햅틱 피드백은 사용자의 원격 전화 또는 시계에 "디스플레이"되거나 감지될 수 있다.
일 실시예에서, 사용자는 텍스트에 걸쳐 손가락을 드래그하며, 하나 이상의 종류의 햅틱 피드백이 텍스트에 대한 손가락의 위치에 관한 정보를 사용자에게 제공할 수 있다. 일 실시예에서, 햅틱 피드백은 액추에이터에 의해 생성된 진동이며, 진동의 진폭 및/또는 주파수를 변경하거나 개별적인 햅틱 이벤트의 지속 시간을 변경함으로써 사용자에 의해 식별 가능한 상이한 종류의 햅틱 피드백 또는 상이한 햅틱 피드백 "이벤트들"이 생성될 수 있다. 일부 실시예들에서, 통상적으로 사용자의 손가락에 의해 시각적으로 가려질 커서 위치가 검출될 수 있도록, 햅틱 피드백과 함께 텍스트가 확대된다.
도 3은 텍스트 조작에 응답하여 햅틱 피드백을 제공하는 본 발명의 일 실시예를 도시한다. 도 3에 도시된 것과 같이, 손가락(56)은 터치스크린(55)을 터치함으로써 텍스트(58)의 일부를 선택한다. 도 3의 실시예에서, 손가락(56)에 의해 가려진 텍스트를 디스플레이하기 위해 확대 윈도우(70)(즉, "back' with un")가 생성된다. 사용자가 텍스트(58)를 처음 터치하면, 커서의 초기 위치를 나타내는 "핸들"(78)이 디스플레이된다. 손가락(56)이 핸들(78)로부터 좌측 또는 우측으로 미끄러지면, 텍스트의 그 부분이 하이라이팅되어(하이라이팅(74)), 사용자가 텍스트의 그 부분을 선택한다는 것을 나타낸다. 손가락(56)이 텍스트(58)에 걸쳐 미끄러짐에 따라, 예컨대 손가락(56)이 텍스트 문자를 가리는지, 또는 문자들 사이 또는 단어들 사이의 공간에 있는지를 나타내는 상이한 햅틱 이벤트들이 생성된다.
도 4는 손가락(56)이 좌측에서 우측으로 이동하며 더 많은 양의 단어들을 선택/하이라이트함에 따른 확대 윈도우(70)의 진행을 도시한다. 도시된 것과 같이, 손가락(56)이 텍스트(58)의 상이한 단어들을 가림에 따라, 윈도우(70)는 "ch back' with"을 디스플레이하는 것으로부터 "back' with un"을, 그리고 "for an ever-gr"을 디스플레이하는 것으로 진행된다.
손가락(56)이 텍스트(58)에 걸쳐 터치 또는 미끄러짐에 따라, 손가락(56)의 위치, 텍스트의 문맥 등에 기초하여 상이한 햅틱 이벤트들이 생성될 수 있다. 예컨대, 문자가 선택되면, 특정한 햅틱 피드백 이벤트가 생성된다. 고유한 문자들은 고유한 햅틱 이벤트들과 연관될 수 있다. 문자들의 그룹들은 햅틱 이벤트들의 그룹들과 연관될 수 있다. 더욱이, 완전한 단어가 선택되면, 상이한 햅틱 이벤트가 생성된다. 완전한 단어 선택은 공간들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다. 더욱이, 행이 선택된다면, 상이한 햅틱 이벤트가 생성된다. 행 선택은 새로운 행 문자들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다. 또한, 문단이 선택된다면, 상이한 햅틱 이벤트가 생성된다. 문단 선택은 새로운 문단 문자들의 선택을 찾는 것, 또는 다른 방법들에 의해 달성될 수 있다.
더욱이, 햅틱 이벤트는 선택된 항목의 말단에서 생성될 수 있다. 예컨대, 단어, 문장, 또는 문단이 선택된다면, 햅틱 이벤트는 단어, 문장, 또는 문단의 말단에 도달했을 때 생성된다. 상기 생성은 제스처의 방향에 의존할 수 있으므로, 예컨대, 단어에 대해, 방향이 좌측에서 우측이라면, 마지막 글자에 도달했을 때 햅틱 이벤트가 생성되며, 방향이 우측에서 좌측이라면, 첫번째 글자에 도달했을 때 햅틱 이벤트가 생성된다(텍스트는 좌측에서 우측으로 읽도록 의도되었다고 가정한다).
일 실시예에서, 햅틱 이벤트의 종류는 속도와 같은 다른 제스처 파라미터들의 영향을 받을 수 있다. 예컨대, 빠른 제스처는 느린 제스처 동안 통상적으로 일어날 햅틱 이벤트들 중 일부를 필터링 아웃할 수 있다. 그러므로, 사용자가 손가락을 텍스트에 걸쳐 느리게 움직인다면, 햅틱 피드백은 문자들 사이의 공간과 마주칠 때 햅틱 이벤트의 종류를 변경함으로써 사용자로 하여금 각각의 문자를 감지하도록 허용할 수 있다. 그러나, 사용자가 손가락을 텍스트에 걸쳐 더 빠르게 움직인다면, 햅틱 피드백은 단어들 사이의 공간과 마주칠 때 햅틱 이벤트의 종류를 변경함으로써 사용자로 하여금 문자보다는 각각의 개별적인 단어를 감지하도록 허용할 수 있다. 예컨대, 속도의 다른 변화들은 문장 또는 문단이 햅틱 이벤트에 의해 구별되게 할 수 있다.
도 5는 일 실시예에 따른, 텍스트 조작에 응답하여 햅틱 피드백을 생성할 때의 햅틱 피드백 모듈(16)의 기능의 흐름도이다. 일 실시예에서, 도 5의 흐름도의 기능은 메모리 또는 다른 컴퓨터 판독 가능한 또는 유형의 매체에 저장되고, 프로세서에 의해 실행되는 소프트웨어에 의해 구현된다. 다른 실시예들에서, 상기 기능은 하드웨어(예컨대, 어플리케이션 특정 집적 회로("ASIC"), 프로그램 가능한 게이트 어레이("PGA"), 필드 프로그램 가능한 게이트 어레이("FPGA") 등), 또는 하드웨어 및 소프트웨어의 임의의 조합에 의해 수행될 수 있다.
502에서, 모듈(16)은 도 1의 터치스크린(55)과 같은 디스플레이에 생성된 텍스트 또는 문자들 내의 제스처들을 검출한다. "텍스트"는 어플리케이션에 의해 생성된 임의의 종류의 문자들, 또는 데이터베이스 퀘리(query) 또는 다른 생성의 결과로서 디스플레이되는 데이터일 수 있다. 일반적으로, 텍스트는 동적으로 생성되며, 텍스트 또는 데이터를 제어 또는 수정하도록 사용되는 더 정적인 입력 컨트롤들 또는 다른 종류의 사용자 인터페이스들과 상이하다. 대부분의 실시예들에서, 텍스트는 UI 컨트롤들 및 다른 비 텍스트 영역으로부터 분리된 디스플레이의 영역 에 디스플레이된다.
504에서, 제스처가 텍스트에 가해지는 사용자의 손가락 또는 다른 객체라고 결정되면, 모듈(16)은 사용자가 텍스트를 선택하려고 하는지, 텍스트 내에 커서를 놓으려고 하는지, 또는 텍스트를 조작하려고 시도하는지를 결정한다.
504에서 '예'인 경우, 506에서, 텍스트 선택 또는 커서 삽입의 종류에 기초하여 햅틱 피드백 이벤트들이 검색 및/또는 생성된다. 예컨대, 문자, 단어, 행, 또는 문단이 선택되는지에 따라 상이한 햅틱 이벤트가 생성될 수 있다.
햅틱 이벤트들은 선택하는 동안보다는 커서가 텍스트 내에서 움직일 때 제공될 수 있다. 커서 배치는 그것을 구별하기 위해 선택과 상이하게 느껴질 수 있거나, 또는 사용자 경험 일관성을 강조하기 위해 동일하게 느껴질 수 있다.
일 실시예에서, 텍스트의 상이한 부분들에 적용할 상이한 햅틱 이벤트들을 결정하기 위해 지능적인 텍스트 프로세싱을 사용한 선택들이 발생하면, 햅틱 피드백은 다른 "관심 지점들"에 또한 제공될 수 있다. 예컨대, 사용자가 연락처의 이름을 선택하거나, 전화번호로 인식되는 숫자들의 시퀀스를 선택할 때 햅틱 효과가 생성될 수 있다. 예컨대, 이메일과 같은 텍스트에는, 내장된 주소가 존재할 수 있다. 주소는 사용자에 의해 터치되었을 때, 텍스트의 나머지로부터 쉽게 구별될 수 있도록 고유한 햅틱 효과를 생성할 수 있다. 그러므로, 사용자는 햅틱 피드백의 지원을 받아 텍스트 주소를 선택할 수 있으며, 예컨대, 주소를 다른 어플리케이션에 붙여넣을 수 있다.
햅틱 효과는 텍스트의 의미적 문맥에 기초하여 생성될 수 있다. 예컨대, 텍스트가 의미적으로 프로세스되거나, 주어진 지식 영역 내의 개념들, 용어들, 및 관계들의 공식적인 설명으로 주석이 달린다면, 이러한 주석들이 햅틱 효과를 생성할 수 있다.
햅틱 이벤트는 선택된 텍스트에 대해 실행될 동작들의 가용성을 나타낼 수 있다. 예컨대, 선택된 텍스트가 "붙여넣기" 명령어를 위해 적합하다면 특정한 햅틱 피드백 효과가 생성될 수 있거나, 또는 그 반대일 수 있다. 더욱이, 잘라내기, 복사, 붙여넣기, 삽입 등과 같은 다른 텍스트 선택/조작 기능들은 각각 고유의 햅틱 효과들을 가질 수 있으며, 선택과 연관될 수 있다. 예컨대, "붙여넣기"와 연관된 햅틱 효과는 붙여넣어지는 텍스트의 볼륨에 따라 변하는 강도를 가질 수 있다. 붙여넣기 효과의 강도는 각각의 개별적인 문자가 선택됨에 따라 생성된 햅틱 강도의 총 합의 반영일 수 있다.
실시예들은 "텍스트"를 예시하지만, 다른 실시예들에서, 사용자가 스크린 제스처들을 사용하여 선택하기를 원할 수 있는 스크린 상에 디스플레이되는 아이콘, 이미지, 또는 다른 가상/UI 객체들을 포함하는 사용자 인터페이스("UI") 요소 또는 다른 종류의 "객체" 선택의 조작이 검출될 수 있다. 예컨대, 전경 섹션 및 배경 섹션을 갖는 이미지가 디스플레이된다면, 사용자의 손가락이 전경으로부터 배경으로 이동함에 따라 햅틱 이벤트가 생성될 수 있다. 더욱이, 복수의 아이콘들이 디스플레이된다면, 사용자가 아이콘들 사이를 이동함에 따라 햅틱 이벤트들이 변할 수 있다.
개시된 바와 같이, 실시예들은 사용자가 텍스트 또는 다른 종류의 문자들, 또는 다른 정보를 조작함에 따라 다양한 햅틱 이벤트들을 생성한다. 다양한 햅틱 이벤트들은 사용자가 텍스트를 복사하고 붙여 넣는것, 텍스트의 선택, 텍스트 내의 커서 삽입 등과 같은 상호 작용을 수행하는 것을 돕는다.
본원에서 몇몇 실시예들이 구체적으로 예시되고 및/또는 설명된다. 그러나, 개시된 실시예들의 변형들 및 변경들은 본 발명의 진의 및 의도된 범위로부터 벗어나지 않으면서 상기 가르침들에 포함되며 첨부된 청구항들의 범위 내에 있다는 것이 인식될 것이다.
예컨대, 진동에 기초한 햅틱 이벤트 대신에, 디스플레이는 햅틱 효과가 진동보다는 스크린의 표면의 정적인 변화, 또는 마찰의 변화일 수 있도록 폴리모픽(polymorphic) 표면(즉, 변형 가능한 표면 액추에이터들)으로 형성될 수 있다. 더욱이, 진동 대신에, 힘 또는 전자 접촉 자극(electro-tactile stimulation)이 사용될 수 있다.

Claims (1)

  1. 프로세서에 의해 실행될 때 상기 프로세서로 하여금 터치스크린을 포함하는 디바이스에 햅틱 피드백을 제공하도록 하는 명령어들을 저장한 컴퓨터 판독 가능한 매체로서,
    상기 명령어들은,
    그래픽 객체를 포함하는 복수의 문자를 포함하는 동적으로 생성되는 텍스트를 디스플레이하는 명령어;
    사용자의 손가락에 의한 상기 동적으로 생성되는 텍스트 내의 터치를 감지하는 명령어;
    상기 터치가 상기 동적으로 생성되는 텍스트의 조작인지의 여부를 결정하고, 두 가지보다 많은 가능한 상이한 조작의 종류 중에서 상기 조작의 종류를 결정하는 명령어 - 상기 동적으로 생성되는 텍스트의 조작은 상기 터치를 사용하여 상기 동적으로 생성되는 텍스트에 작업을 수행하는 것을 포함하고, 상기 작업은, 상기 동적으로 생성되는 텍스트에 걸쳐 상기 손가락을 미끄러지게(sliding) 하는 것 및 상기 미끄러짐을 통해 상기 동적으로 생성되는 텍스트 내에서 상기 문자 중 적어도 하나를 이동시키는 것을 포함함 -; 및
    상기 손가락이 상기 동적으로 생성되는 텍스트에 걸쳐 미끄러지고 상기 작업을 수행하는 동안, 상기 조작의 종류에 적어도 부분적으로 기초하여 햅틱 이벤트의 종류를 생성하는 명령어 - 상기 햅틱 이벤트는 상기 미끄러짐 동안 상기 손가락에 가해지는 상기 햅틱 피드백을 생성함 -
    를 포함하고,
    상기 상이한 조작의 종류 각각은 상기 문자 중 적어도 하나의 이동을 포함하고, 조작의 제1 종류는 상기 동적으로 생성되는 텍스트 내에서 단어를 이동시키는 것을 포함하며, 조작의 제2 종류는 상기 그래픽 객체를 이동시키는 것을 포함하는 컴퓨터 판독 가능 매체.
KR1020180123518A 2010-12-02 2018-10-17 햅틱 피드백 보조 텍스트 조작 KR20180117078A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/958,705 2010-12-02
US12/958,705 US10503255B2 (en) 2010-12-02 2010-12-02 Haptic feedback assisted text manipulation

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020110127877A Division KR101911088B1 (ko) 2010-12-02 2011-12-01 햅틱 피드백 보조 텍스트 조작

Publications (1)

Publication Number Publication Date
KR20180117078A true KR20180117078A (ko) 2018-10-26

Family

ID=45421852

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020110127877A KR101911088B1 (ko) 2010-12-02 2011-12-01 햅틱 피드백 보조 텍스트 조작
KR1020180123518A KR20180117078A (ko) 2010-12-02 2018-10-17 햅틱 피드백 보조 텍스트 조작

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020110127877A KR101911088B1 (ko) 2010-12-02 2011-12-01 햅틱 피드백 보조 텍스트 조작

Country Status (4)

Country Link
US (1) US10503255B2 (ko)
EP (1) EP2461228A3 (ko)
JP (1) JP5991808B2 (ko)
KR (2) KR101911088B1 (ko)

Families Citing this family (111)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US8621380B2 (en) 2010-01-06 2013-12-31 Apple Inc. Apparatus and method for conditionally enabling or disabling soft buttons
WO2011106798A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Local advertising content on an interactive head-mounted eyepiece
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US20120249797A1 (en) * 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
US9542091B2 (en) 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
JP5656511B2 (ja) * 2010-08-26 2015-01-21 京セラ株式会社 表示装置
US10013058B2 (en) 2010-09-21 2018-07-03 Apple Inc. Touch-based user interface with haptic feedback
US8659562B2 (en) 2010-11-05 2014-02-25 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US10120446B2 (en) 2010-11-19 2018-11-06 Apple Inc. Haptic input device
EP2466538A1 (en) * 2010-12-20 2012-06-20 Alcatel Lucent Media asset management system
JP5543615B2 (ja) * 2010-12-22 2014-07-09 京セラ株式会社 電子機器
US9436381B2 (en) 2011-01-24 2016-09-06 Apple Inc. Device, method, and graphical user interface for navigating and annotating an electronic document
US9250798B2 (en) * 2011-01-24 2016-02-02 Apple Inc. Device, method, and graphical user interface with a dynamic gesture disambiguation threshold
KR20120102262A (ko) * 2011-03-08 2012-09-18 삼성전자주식회사 휴대용 단말기가 열람하는 텍스트에서 원하는 내용을 선택하는 방법 및 장치
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
WO2012162895A1 (en) * 2011-06-03 2012-12-06 Google Inc. Gestures for selecting text
US9612670B2 (en) 2011-09-12 2017-04-04 Microsoft Technology Licensing, Llc Explicit touch selection and cursor placement
JP5950275B2 (ja) * 2011-12-21 2016-07-13 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ 表示装置上に表示可能な１又は複数の電子データ中に振動部分を設定する方法、並びに、その装置及びコンピュータ・プログラム
CN108241465B (zh) 2012-05-09 2021-03-09 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
KR101670570B1 (ko) 2012-05-09 2016-10-28 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
DE112013002381T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Bewegung und Ablegen eines Benutzerschnittstellenobjekts
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
CN104487929B (zh) 2012-05-09 2018-08-17 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP2847662B1 (en) 2012-05-09 2020-02-19 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
KR101823288B1 (ko) 2012-05-09 2018-01-29 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
US8570296B2 (en) * 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US9891709B2 (en) * 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US20140002377A1 (en) * 2012-07-02 2014-01-02 Microsoft Corporation Manipulating content on a canvas with touch gestures
KR20140037535A (ko) * 2012-09-19 2014-03-27 삼성전자주식회사 사용자 효과를 포함하는 전자책 생성 방법 및 그 장치
WO2014049392A1 (en) 2012-09-25 2014-04-03 Nokia Corporation Method and display device with tactile feedback
US8656296B1 (en) * 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9178509B2 (en) 2012-09-28 2015-11-03 Apple Inc. Ultra low travel keyboard
US9804777B1 (en) 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
US20140139451A1 (en) * 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9836150B2 (en) 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
WO2014103634A1 (ja) * 2012-12-26 2014-07-03 グリー株式会社 表示処理方法及び情報装置
EP2912542B1 (en) 2012-12-29 2022-07-13 Apple Inc. Device and method for forgoing generation of tactile output for a multi-contact gesture
CN104885050B (zh) 2012-12-29 2017-12-08 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
KR102104910B1 (ko) * 2013-02-28 2020-04-27 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
US9785240B2 (en) * 2013-03-18 2017-10-10 Fuji Xerox Co., Ltd. Systems and methods for content-aware selection
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9652040B2 (en) 2013-08-08 2017-05-16 Apple Inc. Sculpted waveforms with no or reduced unforced response
US9779592B1 (en) 2013-09-26 2017-10-03 Apple Inc. Geared haptic feedback element
WO2015047343A1 (en) 2013-09-27 2015-04-02 Honessa Development Laboratories Llc Polarized magnetic actuators for haptic response
CN105579928A (zh) * 2013-09-27 2016-05-11 苹果公司 具有触觉致动器的带体
US10126817B2 (en) 2013-09-29 2018-11-13 Apple Inc. Devices and methods for creating haptic effects
WO2015047372A1 (en) 2013-09-30 2015-04-02 Pearl Capital Developments Llc Magnetic actuators for haptic response
US9317118B2 (en) 2013-10-22 2016-04-19 Apple Inc. Touch surface for simulating materials
CN105814510B (zh) 2013-12-10 2019-06-07 苹果公司 具有触觉响应的带体附接机构
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
US9244532B2 (en) * 2013-12-31 2016-01-26 Immersion Corporation Systems and methods for controlling multiple displays with single controller and haptic enabled user interface
US9501912B1 (en) 2014-01-27 2016-11-22 Apple Inc. Haptic feedback device with a rotating mass of variable eccentricity
US10545604B2 (en) 2014-04-21 2020-01-28 Apple Inc. Apportionment of forces for multi-touch input devices of electronic devices
JP6351353B2 (ja) * 2014-05-01 2018-07-04 オリンパス株式会社 操作端末、操作方法およびプログラム
US20150346998A1 (en) * 2014-05-30 2015-12-03 Qualcomm Incorporated Rapid text cursor placement using finger orientation
US9898162B2 (en) 2014-05-30 2018-02-20 Apple Inc. Swiping functions for messaging applications
US9971500B2 (en) 2014-06-01 2018-05-15 Apple Inc. Displaying options, assigning notification, ignoring messages, and simultaneous user interface displays in a messaging application
DE102015209639A1 (de) 2014-06-03 2015-12-03 Apple Inc. Linearer Aktuator
US11023655B2 (en) * 2014-06-11 2021-06-01 Microsoft Technology Licensing, Llc Accessibility detection of content properties through tactile interactions
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
KR102019505B1 (ko) 2014-09-02 2019-09-06 애플 인크. 햅틱 통지
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US20160179765A1 (en) * 2014-12-18 2016-06-23 Kobo Incorporated Method and system for extraneous object notification via digital content repagination
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9785305B2 (en) * 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
AU2016100399B4 (en) 2015-04-17 2017-02-02 Apple Inc. Contracting and elongating materials for providing input and output for an electronic device
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
JP5906344B1 (ja) * 2015-07-06 2016-04-20 ヤフー株式会社 情報処理装置、情報表示プログラムおよび情報表示方法
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
CN107925333B (zh) 2015-09-08 2020-10-23 苹果公司 用于在电子设备中使用的线性致动器
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
US10039080B2 (en) 2016-03-04 2018-07-31 Apple Inc. Situationally-aware alerts
US10268272B2 (en) 2016-03-31 2019-04-23 Apple Inc. Dampening mechanical modes of a haptic actuator using a delay
US10620812B2 (en) 2016-06-10 2020-04-14 Apple Inc. Device, method, and graphical user interface for managing electronic communications
DK179034B1 (en) 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
WO2018001456A1 (en) * 2016-06-28 2018-01-04 Telefonaktiebolaget Lm Ericsson (Publ) Device and method for haptic exploration of a rendered object
US20190332173A1 (en) * 2016-08-10 2019-10-31 Alexander Wellen Method and device for tactilely reading time on a touch screen
US10622538B2 (en) 2017-07-18 2020-04-14 Apple Inc. Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body
KR102337869B1 (ko) * 2017-11-13 2021-12-10 주식회사 씨케이머티리얼즈랩 햅틱 제어 신호 제공 장치 및 방법
KR101899538B1 (ko) 2017-11-13 2018-09-19 주식회사 씨케이머티리얼즈랩 햅틱 제어 신호 제공 장치 및 방법
US10599223B1 (en) 2018-09-28 2020-03-24 Apple Inc. Button providing force sensing and/or haptic output
US10691211B2 (en) 2018-09-28 2020-06-23 Apple Inc. Button providing force sensing and/or haptic output
US11380470B2 (en) 2019-09-24 2022-07-05 Apple Inc. Methods to control force in reluctance actuators based on flux related parameters
WO2021183122A1 (en) * 2020-03-11 2021-09-16 Google Llc Controlling haptic response to contact
TWI811789B (zh) * 2021-09-10 2023-08-11 宏碁股份有限公司 智能放大方法及應用其之電子裝置
US11809631B2 (en) 2021-09-21 2023-11-07 Apple Inc. Reluctance haptic engine for an electronic device

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3408332B2 (ja) * 1994-09-12 2003-05-19 富士通株式会社 ハイパーテキスト読上装置
US6750877B2 (en) * 1995-12-13 2004-06-15 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
US6078308A (en) * 1995-12-13 2000-06-20 Immersion Corporation Graphical click surfaces for force feedback applications to provide user selection using cursor interaction with a trigger position within a boundary of a graphical object
US5663748A (en) * 1995-12-14 1997-09-02 Motorola, Inc. Electronic book having highlighting feature
US6519584B1 (en) * 1996-06-26 2003-02-11 Sun Microsystem, Inc. Dynamic display advertising
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6943778B1 (en) * 2000-11-20 2005-09-13 Nokia Corporation Touch screen input technique
EP2793101A3 (en) 2001-11-01 2015-04-29 Immersion Corporation Method and apparatus for providing tactile feedback sensations
US8232969B2 (en) * 2004-10-08 2012-07-31 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
EP2069893A1 (en) 2006-09-27 2009-06-17 Nokia Corporation Tactile touch screen
US20090102805A1 (en) * 2007-10-18 2009-04-23 Microsoft Corporation Three-dimensional object simulation using audio, visual, and tactile feedback
US8294669B2 (en) * 2007-11-19 2012-10-23 Palo Alto Research Center Incorporated Link target accuracy in touch-screen mobile devices by layout adjustment
US8373549B2 (en) 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
KR101012379B1 (ko) 2008-03-25 2011-02-09 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
KR101985159B1 (ko) * 2009-03-12 2019-05-31 임머숀 코퍼레이션 그래픽 사용자 인터페이스 위젯에서 텍스처를 사용하는 시스템 및 방법
US20100289757A1 (en) * 2009-05-14 2010-11-18 Budelli Joey G Scanner with gesture-based text selection capability

Also Published As

Publication number Publication date
KR101911088B1 (ko) 2018-12-28
JP5991808B2 (ja) 2016-09-14
JP2012118993A (ja) 2012-06-21
EP2461228A2 (en) 2012-06-06
CN102591518A (zh) 2012-07-18
KR20120060763A (ko) 2012-06-12
US10503255B2 (en) 2019-12-10
US20120139844A1 (en) 2012-06-07
EP2461228A3 (en) 2012-10-03

Similar Documents

Publication Publication Date Title
KR101911088B1 (ko) 햅틱 피드백 보조 텍스트 조작
US10102010B2 (en) Layer-based user interface
US11675476B2 (en) User interfaces for widgets
KR102642883B1 (ko) 터치 감응형 디스플레이를 갖는 전자 디바이스 상에 동시에 디스플레이되는 다수의 애플리케이션들과 상호작용하기 위한 시스템들 및 방법들
US8214768B2 (en) Method, system, and graphical user interface for viewing multiple application windows
US20200326839A1 (en) Systems, Methods, and User Interfaces for Interacting with Multiple Application Windows
US20190018562A1 (en) Device, Method, and Graphical User Interface for Scrolling Nested Regions
US9292161B2 (en) Pointer tool with touch-enabled precise placement
JP6342464B2 (ja) キーボードインタフェース機能のためのデバイス、方法及びグラフィカルユーザインタフェース
US20110248939A1 (en) Apparatus and method for sensing touch
US8856674B2 (en) Electronic device and method for character deletion
CN110362245A (zh) 触摸输入光标操控
US20140145945A1 (en) Touch-based input control method
KR102228335B1 (ko) 그래픽 사용자 인터페이스의 일 부분을 선택하는 방법
MX2014002955A (es) Entrada de formula para dispositivos de presentacion limitada.
WO2014058584A2 (en) Media insertion interface
KR20100041150A (ko) 멀티터치를 이용한 사용자 인터페이스 제어방법
WO2022261008A2 (en) Devices, methods, and graphical user interfaces for interacting with a web-browser
CN109656460A (zh) 提供键盘的可选择的键的电子设备和方法

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E601 Decision to refuse application