KR20140128275A - 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법 - Google Patents

햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20140128275A
KR20140128275A KR1020140050655A KR20140050655A KR20140128275A KR 20140128275 A KR20140128275 A KR 20140128275A KR 1020140050655 A KR1020140050655 A KR 1020140050655A KR 20140050655 A KR20140050655 A KR 20140050655A KR 20140128275 A KR20140128275 A KR 20140128275A
Authority
KR
South Korea
Prior art keywords
haptic
display
haptic effect
touch sensitive
user
Prior art date
Application number
KR1020140050655A
Other languages
English (en)
Inventor
데니 그랜트
알리 모다레스
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20140128275A publication Critical patent/KR20140128275A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/045—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102—Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

본 명세서에 개시된 일 예시적인 시스템은 제1 평면 상의 제1 표면; 및 제1 표면에 인접한 제2 표면을 포함하고, 제2 표면은 제1 평면과 상이한 제2 평면 상에 있다. 예시적인 시스템은 또한 햅틱 신호를 수신하고 햅틱 효과를 출력하도록 구성된 햅틱 출력 장치를 포함한다. 또한, 예시적인 시스템은 햅틱 출력 장치 및 터치 감지 표면에 연결된 프로세서를 포함하고, 프로세서는 이벤트를 결정하고; 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정하고; 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정하고; 및 햅틱 효과와 연관된 햅틱 신호를 햅틱 출력 장치로 전송하도록 구성된다.

Description

햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법{SYSTEM AND METHODS FOR HAPTICALLY-ENABLED CONFORMED AND MULTIFACETED DISPLAYS}
관련 출원들
본 출원은 2013년 4월 26일자로 출원된 "굴곡가능(bendable) 디스플레이와의 연속적인 상호작용의 햅틱 증강" 제목의 미합중국 가출원번호 제61/816605호의 우선권을 주장하며, 이 전체는 본 명세서에서 참조한다.
기술 분야
본 발명은 사용자 인터페이스 장치의 분야에 관한 것이다. 더 구체적으로는, 본 발명은 햅틱적으로 사용가능한 합치된 다면적(multifaceted) 디스플레이에 관한 것이다.
컴퓨터 기반 시스템이 더 흔해짐에 따라, 인간이 이러한 시스템과 상호작용하는 인터페이스의 질은 점점 더 중요해졌다. 직관적이고 상호적인 본질 덕분에 인기가 상승한 일 인터페이스는 터치 스크린 디스플레이이다. 터치 스크린 디스플레이를 통해, 사용자는 사용자의 손가락을 터치 스크린의 영역과 접촉함으로써 다양한 작업을 수행할 수 있다. 더 직관적이고 강화된 사용자 경험을 생성하기 위해, 설계자는 종종 물리적 상호작용으로 사용자 경험을 레버리지한다(leverage). 이것은 상호작용의 몇몇의 태양을 시각, 청각 및/또는 햅틱 피드백을 통해 물질적 세계와 함께 복제함으로써 일반적으로 행해진다. 햅틱 피드백은 종종 기계적 진동 또는 마찰 계수의 인지된 변화의 형태를 취한다. 최근에는, 다면적 터치 스크린 디스플레이 및 영구적으로 합치된 터치 스크린 디스플레이(permanently-conformed touch-screen display)가 개발되었다. 이에 따라, 이러한 다면적 및 영구적으로 합치된 터치 스크린 디스플레이에 햅틱 효과를 제공할 필요가 있다.
본 개시의 실시예는 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 포함하는 컴퓨팅 장치를 포함한다. 일 실시예에서, 본 개시의 시스템은 제1 평면 상의 제1 디스플레이 및 제1 표면에 인접한 제2 표면을 포함하고, 상기 제2 표면은 제1 평면과 상이한 제2 평면 상에 있는 터치 감지 표면을 포함할 수 있다. 시스템은 또한 햅틱 신호를 수신하고 햅틱 효과를 출력하도록 구성된 햅틱 출력 장치를 포함할 수 있다. 또한, 시스템은 햅틱 출력 장치 및 터치 감지 표면에 연결된 프로세서를 포함할 수 있고, 프로세서는 이벤트를 결정하고; 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정하고; 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정하고; 햅틱 효과와 연관된 햅틱 신호를 햅틱 출력 장치로 전송하도록 구성된다.
다른 실시예에서, 본 개시의 방법은 이벤트를 결정하는 단계; 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정하는 단계; 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정하는 단계; 및 햅틱 출력 장치로 햅틱 효과와 연관된 햅틱 신호를 전송하는 단계를 포함할 수 있고, 햅틱 출력 장치는 터치 감지 표면에 햅틱 효과를 출력하도록 구성된다. 몇몇 실시예에서, 터치 감지 표면은 제1 평면 상의 제1 표면 및 제1 표면에 인접한 제2 표면을 포함하고, 상기 제2 표면은 제1 평면과 상이한 제2 평면 상에 있다. 또 다른 실시예는 그러한 방법을 실시하기 위한 컴퓨터 판독가능 매체를 포함한다.
이러한 예시적인 실시예는 본 주제의 한계를 제한하거나 한정하지 않도록 언급되고, 단지 그 이해를 보조하기 위한 예시를 제공하기 위한 것이다. 예시적인 실시예는 발명을 실시하기 위한 구체적인 내용에서 논해지고, 거기에 설명이 더 제공된다. 다양한 실시예에 의해 제공되는 이점들은 이러한 명세서를 검토함으로써 및/또는 주장된 주제의 하나 이상의 실시예들을 실시함으로써 더 이해될 수 있다.
전체적이고 사용가능한 개시가 본 명세서의 나머지에 더 구체적으로 기재된다. 명세서는 다음 첨부된 도면을 참조한다.
도 1은 일 실시예에 따른 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템을 도시하는 블록도.
도 2는 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 일 실시예를 도시.
도 3은 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시.
도 4는 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시.
도 5는 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시.
도 6은 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시.
도 7은 일 실시예에 따른 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 방법을 수행하기 위한 단계의 흐름도.
이제 다양하고 다른 예시적인 실시예 및 첨부된 도면이 자세히 참조된다. 각 예시는 한정이 아닌 설명을 위해 제공된다. 수정 및 변경을 할 수 있음이 당해 기술 분야의 숙련자에게 자명하다. 예컨대, 일 실시예의 부분으로 도시되거나 설명된 특징은 또 다른 실시예를 만들기 위해 다른 실시예에서 사용될 수 있다. 따라서, 이러한 개시가 첨부된 청구항 및 그 균등물의 범위 내인 수정 및 변경을 포함하는 것이 의도된다.
햅틱적으로 사용가능한 합치된 다면적 디스플레이의 예시적인 예들
본 개시의 일 예시적인 실시예는 태블릿과 같은 모바일 장치를 포함한다. 모바일 장치는 터치 스크린 디스플레이, 메모리 및 이러한 요소 각각과 통신하는 프로세서를 포함한다.
예시적인 실시예에서, 터치 스크린 디스플레이는 영구적으로 합치된 디스플레이(이후 "합치된 디스플레이")를 포함한다. 합치된 디스플레이는 비평면 형상으로 합치되고 실질적으로 그 형상에 고정된 디스플레이이다. 예컨대, 예시적인 실시예에서, 터치 스크린 디스플레이는 터치 스크린 디스플레이가 모바일 장치의 전면 및 측면 주위를 감싸도록 모바일 장치의 표면 주위에 합치된다. 즉, 예시적인 실시예에서, 터치 스크린 디스플레이는 모바일 장치의 전면 및 측면을 덮는다.
예시적인 실시예에서, 모바일 장치는 예컨대, 가상 커피 컵인 가상 객체를 터치 스크린 디스플레이 상에 출력한다. 합치된 디스플레이의 곡률(curvature) 때문에, 사용자는 가상 객체의 전면 및 측면을 인지할 수 있다(즉, 사용자는 180도의 시야를 인지할 수 있다). 예컨대, 사용자는 모바일 장치의 전면을 덮는 터치 스크린 디스플레이의 부분에서 가상 커피 컵의 상부를 인지할 수 있다. 또한, 사용자는 모바일 장치의 측면 주위에 합치된 터치 스크린 디스플레이 측면 상의 가상 커피 컵의 측면을 인지할 수 있다. 또한, 사용자는 모바일 장치의 전면 및 측면 사이에서 전이하는 터치 스크린 디스플레이 부분의 가상 커피 컵의 립(lip)을 인지할 수 있다.
모바일 장치는 햅틱 출력 장치를 더 포함한다. 햅틱 출력 장치는 모바일 장치로부터 신호를 수신하고 햅틱 효과를 사용자에게 출력한다. 모바일 장치는 이벤트 발생 시에 햅틱 효과를 출력하도록 구성된다. 본 명세서에서 사용된 이벤트는 임의의 상호작용, 동작, 충돌 또는 연관된 햅틱 효과를 잠재적으로 포함할 수 있는 장치가 작동하는 동안 발생하는 다른 이벤트이다. 몇몇 실시예에서, 이벤트는 사용자 입력(예컨대, 실제 또는 가상 버튼의 상호작용; 조이스틱의 조작; 터치 표면과의 상호작용; 또는 컴퓨팅 장치를 기울이거나 배향하는 것), 시스템 상태(예컨대, 낮은 배터리, 낮은 메모리 또는 착신 호출을 수신한 시스템에 기초하여 발생된 알림과 같은 시스템 알림), 데이터 송신, 데이터 수신 또는 프로그램 이벤트(예컨대, 프로그램이 게임인 경우, 프로그램 이벤트는 폭발, 충돌 또는 게임 객체 사이의 상호작용 또는 새로운 레벨로의 진행을 포함할 수 있다)을 포함할 수 있다.
예컨대, 예시적인 실시예에서, 사용자는 모바일 장치의 전면 또는 측면을 덮는 터치 스크린 디스플레이의 일부를 각각 터치함으로써 가상 커피 컵의 상부 또는 측면과 상호작용할 수 있다. 예시적인 실시예에서, 사용자 상호작용에 응답하여, 모바일 장치는 햅틱 효과를 출력한다. 예컨대, 예시적인 실시예에서, 사용자가 가상 커피 컵의 상부와 상호작용할 때, 모바일 장치는 터치 스크린 디스플레이의 표면 상의 인지되는 마찰 계수를 감소시키도록 구성된 햅틱 효과를 출력할 수 있다. 터치 스크린 디스플레이의 표면 상의 인지되는 마찰 계수를 감소시키는 것은 예컨대, 빈 커피 컵 내의 공기 또는 커피 컵 내의 뜨거운 커피로부터 나오는 스팀을 시뮬레이션할 수 있다. 또한, 예시적인 실시예에서, 사용자가 가상 커피 컵의 립과 상호작용할 때, 모바일 장치는 인지된 마찰 계수를 증가시키도록 구성된 햅틱 효과를 출력할 수 있다. 터치 스크린 디스플레이의 표면 상의 인지된 마찰 계수를 증가시키는 것은 자기 커피 컵의 립을 시뮬레이션할 수 있다. 또한, 예시적인 실시예에서, 사용자가 예컨대, 돌출된 그래픽 디자인을 포함할 수 있는 가상 커피 컵의 측면과 상호작용할 때, 모바일 장치는 그래픽 디자인을 시뮬레이션하도록 구성된 하나 이상의 햅틱 효과(예컨대, 진동 또는 시뮬레이션 텍스처(texture))를 출력할 수 있다.
상기 예시적인 실시예의 기재는 단지 예시로서 제공된다. 본 발명의 다양한 다른 실시예가 본 명세서에 기재되고, 그러한 실시예의 변경이 당해 기술 분야의 숙련자에게 이해된다. 다양한 실시예에 의해 제공되는 이점들은 이러한 명세서를 검토함으로써 및/또는 주장된 주제의 하나 이상의 실시예들을 실시함으로써 더 이해될 수 있다.
햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 예시적인 시스템
도 1은 일 실시예에 따른 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템(100)을 도시하는 블록도이다. 도시된 실시예에서, 시스템(100)은 다른 하드웨어와 버스(106)를 통해 통신하는 프로세서(102)를 포함하는 컴퓨팅 장치(101)를 포함한다. 컴퓨팅 장치(101)는 예컨대, 스마트폰, 태블릿, e-리더, 랩탑 컴퓨터, 데스크탑 컴퓨터, 게임 콘솔, 게임 컨트롤러, 의료 기기, 자동차 컴퓨터(automobile computer), 휴대용 게임 장치 또는 시계, 손목 밴드, 반지, 팔찌 또는 발찌 같은 착용가능한 장치를 포함할 수 있다.
RAM, ROM, EEPROM 등 같은 임의의 적절한 유형의(tangible)(및 비일시적인(non-transitory)) 컴퓨터 판독가능 매체를 포함할 수 있는 메모리(104)는 컴퓨팅 장치(101)의 동작을 구성하는 프로그램 구성요소를 구체화한다. 도시된 실시예에서, 컴퓨팅 장치(101)는 하나 이상의 네트워크 인터페이스 장치(110), 입력/출력(I/O) 인터페이스 구성요소(112) 및 저장장치(114)를 더 포함한다.
네트워크 장치(110)는 네트워크 연결을 용이하게 하는 하나 이상의 임의의 구성요소를 대표할 수 있다. 예시는 이더넷(Ethernet), USB, IEEE 1394와 같은 유선 인터페이스 및/또는 IEEE 802.11, 블루투스, 또는 셀룰러 전화 네트워크에 액세스하기 위한 라디오 인터페이스(예컨대, CDMA, GSM, UMTS, 또는 다른 모바일 통신 네트워크에 접근하기 위한 트랜스시버(transceiver)/안테나)와 같은 무선 인터페이스를 포함하지만, 이에 제한되지는 않는다.
I/O 구성요소(112)는 하나 이상의 디스플레이, 게임 컨트롤러, 키보드, 마이스(mice), 조이스틱, 카메라, 버튼, 스피커, 마이크 및/또는 데이터를 입력하거나 데이터를 출력하는 데 사용되는 다른 하드웨어 같은 장치에의 유선 또는 무선 접속을 용이하게 하기 위해 사용될 수 있다. 저장장치(114)는 자기, 광학 또는 다른 저장 매체 같은 비휘발성 저장장치를 대표하며, 이는 장치(101) 내에 포함되거나 프로세서(102)와 연결된다.
시스템(100)은, 본 예시에서 컴퓨팅 장치(101)로 통합되는, 터치 감지 표면(116)을 더 포함한다. 터치 감지 표면(116)은 사용자의 촉각 입력을 감지하도록 구성된 임의의 표면을 포함한다. 터치 감지 표면(116)은 터치 감지 디스플레이를 포함할 수 있다. 예컨대, 터치 감지 표면(116)은 디스플레이 및 실제 디스플레이 구성요소 위에 하나 이상의 재료층을 포함할 수 있다. 하나 이상의 터치 센서(108)는 객체가 터치 감지 표면(116)과 접촉할 때 터치 영역 내의 터치를 검출하고 프로세서(102)에 의한 사용을 위한 적절한 데이터를 제공하도록 구성된다. 센서의 임의의 적절한 개수, 유형 또는 배열이 사용될 수 있다. 예컨대, 저항형(resistive) 및/또는 용량형(capacitive) 센서는 터치 감지 표면(116)에 구체화되고 터치의 위치 및 압력, 속력 및/또는 방향과 같은 다른 정보를 결정하도록 사용될 수 있다. 다른 예시로서, 터치 감지 표면(116)의 뷰(view)를 갖는 광학 센서가 터치 위치를 결정하기 위해 사용될 수 있다.
다른 실시예에서, 터치 센서(108)는 LED 검출기를 포함할 수 있다. 예컨대, 일 실시예에서, 터치 감지 표면(116)은 디스플레이의 측면 상에 장착된 LED 손가락 검출기를 포함할 수 있다. 소정 실시예들에서, 프로세서(102)는 단일 터치 센서(108)와 통신하고, 다른 실시예에서, 프로세서(102)는 예컨대, 제1 터치 스크린 및 제2 터치 스크린 같은 복수의 터치 센서(108)와 통신한다. 터치 센서(108)는 사용자 상호작용을 검출하고, 사용자 상호작용에 기초하여 신호를 프로세서(102)로 전송하도록 구성된다. 소정 실시예들에서, 터치 센서(108)는 사용자 상호작용의 복수의 태양을 검출하도록 구성될 수 있다. 예컨대, 터치 센서(108)는 사용자 상호작용의 속력 및 압력을 검출하고, 이러한 정보를 인터페이스 신호에 통합할 수 있다.
소정 실시예들에서, 터치 감지 표면(116)은 예컨대, 도 2에 도시된 합치된 디스플레이와 같은 합치된 디스플레이를 포함할 수 있다. 도 2에 도시된 실시예에서, 합치된 디스플레이(200)는 제1 디스플레이 표면(202)을 포함한다. 또한, 합치된 디스플레이(200)는 제1 디스플레이 표면(202)과 제2 디스플레이 표면(206) 사이에서 물리적으로 전이하고 연결하는 디스플레이 전이 영역(display transition zone, 204)을 포함한다. 제2 디스플레이 표면(206)은 제1 디스플레이 표면(202)에 인접하고 제1 디스플레이 표면(202)과 다른 평면 상에 있다. 또한, 본 예시에서, 합치된 디스플레이(200)는 제1 디스플레이 표면(202)과 제3 디스플레이 표면(210) 사이에서 물리적으로 전이하고 연결하는 다른 디스플레이 전이 영역(208)을 포함한다. 제3 디스플레이 표면(210)은 제1 디스플레이 표면(202)에 인접하고 제1 디스플레이 표면(202) 및/또는 제2 디스플레이 표면(206)과 다른 평면 상에 있다. 소정 실시예들에서, 디스플레이 표면(예컨대, 제1 디스플레이 표면(202), 제2 디스플레이 표면(206), 제3 디스플레이 표면(210))과 디스플레이 전이 영역(디스플레이 전이 영역(204) 및 디스플레이 전이 영역(208))의 크기는 더 크거나 작을 수 있다. 예컨대, 소정 실시예들에서, 디스플레이 전이 영역(204) 및/또는 디스플레이 전이 영역(208)은 더 클 수 있고, 더 큰 곡률을 가지는 합치된 디스플레이(200)를 포함할 수 있다.
소정 실시예들에서, 사용자가 합치된 디스플레이(200)와 상호작용 시, 컴퓨팅 장치가 하나 이상의 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 사용자가 디스플레이 전이 영역(204) 또는 제2 디스플레이 표면(206)과 상호작용 시, 컴퓨팅 장치는 햅틱 효과를 출력할 수 있다. 예컨대, 컴퓨팅 장치는 사용자에 의해 인지되는 합치된 디스플레이(200) 내의 곡률의 양을 증가시키도록 구성된 햅틱 효과를 출력할 수 있다.
본 예시에서, 제1 디스플레이 표면(202)은 실질적으로 평면 형상을 포함한다. 또한, 제2 디스플레이 표면(206) 및 제3 디스플레이 표면(210)은 각각 곡선 형상을 포함한다. 다른 실시예에서, 각각의 디스플레이 표면(예컨대, 제1 디스플레이 표면(202), 제2 디스플레이 표면(206) 및 제3 디스플레이 표면(210))은 실질적으로 평면 또는 곡선 형상을 포함할 수 있다. 유사하게, 각각의 디스플레이 전이 영역은 실질적으로 평면 형상 또는 곡선 형상을 포함할 수 있다. 합치된 디스플레이(200)는 임의의 개수의 디스플레이 표면 및 디스플레이 전이 영역을 임의의 구성으로 포함할 수 있다.
다른 실시예에서, 터치 감지 표면(116)은 예컨대, 도 3에 도시된 다면적 디스플레이와 같은 다면적 디스플레이를 포함할 수 있다. 다면적 디스플레이(300)는 기계적으로 연결된 복수의 개별 디스플레이(302)를 포함한다. 각각의 개별 디스플레이(302)는 곡선 또는 평면 형상을 가질 수 있다. 소정 실시예들에서, 개별 디스플레이(302)는 예컨대, 힌지(hinge)와 같은 이동가능한 조인트에 의해 연결될 수 있다. 소정 실시예들에서, 개별 디스플레이(302)는 예컨대, 필름 힌지(film hinge)와 같은 굴곡가능하거나 가요성인 부재에 의해 연결될 수 있다. 이러한 실시예에서, 개별 디스플레이(302)는 서로에 대해 굴곡될 수 있다.
소정 실시예들에서, 이벤트 발생 시, 컴퓨팅 장치는 하나 이상의 개별 디스플레이(302) 및/또는 개별 디스플레이(302) 사이의 연결부에 하나 이상의 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 사용자가 개별 디스플레이(302) 사이의 연결부와 상호작용 시, 컴퓨팅 장치는 햅틱 효과를 출력할 수 있다. 예컨대, 컴퓨팅 장치는 진동을 포함하는 햅틱 효과를 출력할 수 있다.
개별 디스플레이(302)는 하나 이상의 가상 객체(304)를 출력할 수 있다. 도 3에 도시된 예에서, 개별 디스플레이(302)는 연결될 때 전체 가상 객체(304)를 만드는 가상 객체(304)의 부분을 출력한다. 다른 실시예에서, 각각의 개별 디스플레이(302)는 가상 객체의 다른 뷰 또는 측면을 출력할 수 있다. 예컨대, 소정 실시예들에서, 다면적 디스플레이(300)는 6면체 대형으로 구성된 개별 디스플레이(302)(예컨대, 여섯 개의 개별 디스플레이(302))를 포함할 수 있다. 소정 실시예들에서, 각각의 개별 디스플레이(302)는 가상 객체(예컨대, 가상 인간 심장)의 다른 뷰(예컨대, 상부, 하부, 우측, 좌측, 전면 및 후면)를 출력할 수 있다. 소정 실시예들에서, 사용자는 가상 객체를 3차원으로 인지할 수 있다.
도 1을 다시 참조하면, 소정 실시예들에서, 터치 감지 표면(116)은 표면 주위에 합치될 수 있다. 소정 실시예들에서, 터치 감지 표면(116)은 컴퓨팅 장치(101)의 표면 주위에 합치될 수 있다. 예컨대, 다면적 디스플레이를 포함하는 소정 실시예들에서, 복수의 개별 디스플레이들은 터치 감지 표면(116)이 컴퓨팅 장치(101)의 표면 주위에 합치하도록 서로에 대해 굴곡될 수 있다. 또한, 터치 감지 표면(116)이 컴퓨팅 장치(101) 내부에 도시되어 있지만, 소정 실시예들에서, 터치 감지 표면(116)은 컴퓨팅 장치(101) 외부에 있을 수 있고 컴퓨팅 장치(101)와 통신할 수 있다. 예컨대, 소정 실시예들에서, 터치 감지 표면(116)은, 예컨대, 책상, 의자, 폴(pole), 사용자의 신체 부위(예컨대, 발목), 또는 키오스크(kiosk)와 같은 외부 장치 주위에 합치될 수 있다.
컴퓨팅 장치(101)는 또한 하나 이상의 추가적인 센서(132)를 포함한다. 센서(132)는 프로세서(102)로 센서 신호를 전송하도록 구성된다. 소정 실시예들에서, 센서(132)는, 예컨대, 자이로스코프, 자력계, 가속도계, 압력 센서, 스트레인 게이지(strain gauge), 위성 위치확인 시스템(GPS) 유닛, 거리 센서(range sensor), 또는 깊이 센서를 포함한다. 소정 실시예들에서, 자이로스코프, 가속도계, 및 GPS 유닛은, 각각, 컴퓨팅 장치(101)의 방향, 가속도, 및 위치를 검출할 수 있다. 소정 실시예들에서, 프로세서(102)는 단일 센서(132)와 통신할 수 있고, 다른 실시예들에서, 프로세서(102)는, 예컨대, 자이로스코프 및 가속도계와 같은 복수의 센서(132)와 통신할 수 있다.
시스템(100)은 프로세서(102)와 통신하는 햅틱 출력 장치(118)를 더 포함한다. 햅틱 출력 장치(118)는 햅틱 신호에 응답하여 햅틱 효과를 출력하도록 구성된다. 소정 실시예들에서, 햅틱 출력 장치(118)는, 예컨대, 진동, 인지되는 마찰 계수의 변화, 시뮬레이션 텍스처, 인지되는 온도의 변화, 또는 표면 변형을 포함하는 햅틱 효과를 출력하도록 구성된다. 도 1에 도시된 실시예에서, 햅틱 출력 장치(118)는 컴퓨팅 장치(101)의 내부에 있다. 다른 실시예들에서, 햅틱 출력 장치(118)는 컴퓨팅 장치(101)로부터 떨어져 있을 수 있지만, 프로세서(102)와 통신하도록 연결될 수 있다. 예컨대, 햅틱 출력 장치(118)는 컴퓨팅 장치(101) 외부에 있을 수 있고 이더넷, USB, IEEE 1394와 같은 유선 인터페이스, 및/또는 IEEE 802.11, 블루투스, 또는 라디오 인터페이스와 같은 무선 인터페이스를 통해 컴퓨팅 장치(101)와 통신할 수 있다. 소정 실시예들에서, 햅틱 출력 장치(118)는 터치 감지 표면(116)에 연결될 수 있다.
소정 실시예들에서, 햅틱 출력 장치(118)는 컴퓨팅 장치(101) 또는 예컨대, 터치 감지 표면(116)과 같은 컴퓨팅 장치(101)의 구성요소를 진동시킴으로써 햅틱 효과를 출력할 수 있다. 이러한 실시예들에서, 햅틱 출력 장치(118)는, 예컨대, 압전 액츄에이터, 전기 모터, 전자기 액츄에이터, 보이스 코일, 형상 기억 합금, 전기 활성 폴리머, 마이크로 섬유 복합체, 솔레노이드, 편심 회전 질량 모터(eccentric rotating mass motor, ERM), 또는 선형 공진 액츄에이터(linear resonant actuator, LRA) 중 하나 이상과 같은, 진동을 출력하도록 구성된 햅틱 출력 장치를 포함할 수 있다.
소정 실시예들에서, 햅틱 출력 장치(118)는 텍스처를 시뮬레이션하거나 햅틱 신호에 응답하여 터치 감지 표면(116) 상의 인지되는 마찰 계수를 변조시키는 햅틱 효과를 출력하도록 구성될 수 있다. 소정 실시예들에서, 햅틱 출력 장치(118)는 초음파 액츄에이터를 포함할 수 있다. 초음파 액츄에이터는 터치 감지 표면(116)의 표면에서의 인지되는 계수를 증가시키거나 감소시키는, 예컨대 20 kHz의 초음파 주파수에서 진동할 수 있다. 또한, 초음파 액츄에이터는 압전 재료를 포함할 수 있다.
다른 실시예들에서, 햅틱 출력 장치(118)는, 텍스처를 시뮬레이션하거나 터치 감지 표면(116) 상의 인지되는 마찰 계수를 변조시키는 햅틱 효과를 출력하기 위해, 예컨대 정전 표면 액츄에이터의 사용에 의해, 정전 인력을 사용할 수 있다. 소정 실시예들에서, 정전 액츄에이터는 도전층 및 절연층을 포함할 수 있다. 도전층은 임의의 반도체 또는 구리, 알루미늄, 금, 또는 은과 같은 기타 도전성 재료를 포함한다. 절연층은 예컨대, 유리, 플라스틱 또는 폴리머와 같은 임의의 절연 물질을 포함한다. 또한, 프로세서(102)는 예컨대 AC 신호와 같은 전기 신호를 도전층에 인가함으로써 정전 액츄에이터를 동작시킬 수 있다. 소정 실시예들에서, AC 신호는 고전압 증폭기에 의해 생성될 수 있다. 전기 신호는, 소정 실시예들에서, 햅틱 출력 장치(118)의 근처 또는 접촉 위치에 있는 객체(예컨대, 사용자의 손가락, 머리, 다리, 팔, 어깨, 다리, 또는 다른 신체 부위, 또는 스타일러스)와 도전층 사이의 용량성 결합을 생성할 수 있다. 소정 실시예들에서, 객체와 도전층 사이의 인력의 정도를 변화시키는 것은 햅틱 출력 장치(118)와 연관된 표면(예컨대, 터치 감지 표면(116))을 가로 질러 이동하는 객체 상의 시뮬레이션 텍스처를 변화시킬 수 있다.
소정 실시예들에서, 햅틱 출력 장치(118)는 터치 감지 표면(116)의 표면 또는 컴퓨팅 장치(101)의 다른 표면을 변형시킴으로써 햅틱 효과를 출력하도록 구성된 변형 장치를 포함할 수 있다. 소정 실시예들에서, 햅틱 출력 장치(118)는, 예컨대, 스마트 겔(smart gel)과 같은 유체를 포함할 수 있다. 스마트 겔은 자극 또는 자극들(예컨대, 전기장, 자기장, 온도, 자외선 광, 쉐이킹(shaking), 또는 pH 변화)에 응답하여 변경되는 기계적 또는 구조적 특성을 갖는 유체를 포함할 수 있다. 예컨대, 소정 실시예들에서, 하나 이상의 와이어(wire)는 스마트 겔에 내장되거나 연결될 수 있다. 와이어를 통해 전류가 흐르는 동안에, 열이 방출되어, 스마트 겔이 확장 또는 축소되게끔 하고, 햅틱 출력 장치(118)를 변형시킨다. 또한, 소정 실시예들에서, 햅틱 출력 장치(118)는 유동학적(rheological)(예컨대, 자기-유동학적 또는 전자-유동학적) 유체를 포함할 수 있다. 유동학적 유체는 유체(예컨대, 기름 또는 물)에 현탁된 금속 입자(예컨대, 철 입자)를 포함할 수 있다. 전기장 또는 자기장에 응답하여, 유체 내 분자의 순서는 스스로 재정렬될 수 있고, 이는 유체의 전체적인 댐핑(damping) 및/또는 점성을 변경할 수 있고, 햅틱 출력 장치(118)를 변형시킨다.
다른 실시예들에서, 햅틱 출력 장치(118)는 변형 구성요소를 회전시키는 팔에 연결된 액츄에이터를 포함할 수 있다. 변형 구성요소는, 예컨대, 타원형, 별 모양, 또는 주름진 형태를 포함할 수 있다. 변형 구성요소는 소정 회전 각도에서 터치 감지 표면(116)을 이동시키고 다른 각도에서는 그러지 않도록 구성될 수 있다. 액츄에이터는 압전 액츄에이터, 회전/선형 액츄에이터, 솔레노이드, 전기 활성 폴리머 액츄에이터, 매크로 섬유 복합(MFC) 액츄에이터, 형상 기억 합금(SMA) 액츄에이터, 및/또는 다른 액츄에이터를 포함할 수 있다. 액츄에이터가 변형 구성요소를 회전시키는 동안, 변형 구성요소는 햅틱 출력 장치(118)의 표면을 이동시킬 수 있고, 햅틱 출력 장치가 변형하게끔 한다. 소정 실시예들에서, 변형 구성요소는 터치 감지 표면(116)이 평평한 것을 특징으로 하는 위치에서 시작할 수 있다. 프로세서(102)로부터 신호를 수신하는 것에 응답하여, 액츄에이터는 변형 구성요소를 회전시킬 수 있다. 소정 실시예들에서, 변형 구성요소를 회전시키는 것은 터치 감지 표면(116)의 하나 이상의 부분을 올리거나 내리게끔 할 수 있다. 변형 구성요소는, 소정 실시예들에서, 프로세서(102)가 그 원래 위치로 변형 구성요소를 회전시키도록 액츄에이터에 신호를 보낼 때까지 이 회전 상태로 유지된다.
소정 실시예들에서, 햅틱 출력 장치(118)는 터치 감지 표면(116)의 하우징(housing)의 일부분일 수 있다. 다른 실시예들에서, 햅틱 출력 장치(118)는 터치 감지 표면(116)에 중첩된 가요성 하우징 내부에 수납될 수 있다. 단일 햅틱 출력 장치(118)가 여기에 도시되어 있지만, 소정 실시예들은 동일 또는 상이한 유형의 다수 햅틱 출력 장치를 사용하여 햅틱 피드백을 제공할 수 있다. 소정 햅틱 효과는 장치의 하우징에 연결된 액츄에이터를 이용할 수 있고, 소정 햅틱 효과는 다수의 액츄에이터를 차례차례 및/또는 일제히 사용할 수 있다. 예컨대, 소정 실시예들에서, 다수의 진동 액츄에이터 및 정전기 표면 액츄에이터는 단독으로 또는 일제히 사용되어 상이한 햅틱 효과를 제공할 수 있다.
메모리(104)를 보면, 프로그램 구성요소(124, 126 및 128)가 도시되어 소정 실시예들에서 장치가 어떻게 햅틱적으로 사용가능한 합치 다면적 디스플레이를 제공하도록 구성되는지를 보여준다. 이 예에서, 햅틱 검출 모듈(124)은 터치의 위치를 결정하기 위해 터치 센서(108)를 통해 터치 감지 표면(116)을 모니터링하도록 프로세서(102)를 구성한다. 예컨대, 햅틱 검출 모듈(124)은 터치의 유무를 추적하기 위해, 만약 터치가 있다면, 위치, 경로, 속도, 가속도, 압력 및/또는 시간에 따른 터치의 다른 특성 중 하나 이상을 추적하기 위해, 터치 센서(108)를 샘플링 할 수 있다.
햅틱 효과 결정 모듈(126)은 이벤트의 발생에 기초하여 햅틱 효과를 결정한다. 햅틱 효과 결정 모듈(126)은 생성하기 위한 햅틱 효과를 결정하기 위한 데이터를 분석하는 프로그램 구성요소를 나타낸다. 예컨대, 햅틱 효과 결정 모듈(126)은, 터치 감지 표면(116)상의 터치의 위치에 기초하여, 출력하기 위한 햅틱 효과를 결정하는 코드 및 효과를 시뮬레이션하기 위해 제공하기 위한 하나 이상의 햅틱 효과를 선택하는 코드를 포함할 수 있다. 예컨대, 터치 표면(116)(예컨대, 터치 디스플레이) 상의 가상 객체(예컨대, 가상 공장, 자동차, 동물, 만화 캐릭터, 버튼, 레버, 로고, 또는 사람)의 존재를 시뮬레이션하기 위해 터치의 위치에 기초하여 여러 햅틱 효과가 선택될 수 있다. 또한, 소정 실시예들에서, 햅틱 효과 결정 모듈(126)은 크기, 색깔, 위치, 텍스처, 움직임 및/또는 가상 객체의 다른 특성들에 기초하여, 출력하기 위한 햅틱 효과를 결정하는 코드 및 효과를 시뮬레이션하기 위해 제공하기 위한 하나 이상의 햅틱 효과를 선택하는 코드를 포함할 수 있다. 예컨대, 햅틱 효과는 가상 객체의 텍스처에 기초하여 선택될 수 있다(예컨대, 가상 객체의 텍스처가 울퉁불퉁하면 강한 진동 발생, 그리고 가상 객체의 텍스처가 매끄러우면 마찰 계수가 인지할 정도로 감소).
소정 실시예들에서, 햅틱 효과 결정 모듈(126)은 프로그램 또는 게임 이벤트에 기초하여 햅틱 효과를 결정할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치(101)는 사용자가 가상 공간을 통해 가상 아바타를 안내시키는 게임을 포함할 수 있다. 소정 실시예들에서, 만약 사용자의 가상 아바타가 다른 가상 객체(예컨대, 가상 벽)를 타격했을 때, 햅틱 효과 결정 모듈(126)은 충돌을 시뮬레이션하도록 구성된 햅틱 효과를 결정할 수 있다. 예컨대, 햅틱 효과 결정 모듈(126)은 아바타와 가상 객체 사이의 충돌 속도에 비례하는 크기를 갖는 진동을 포함하는 햅틱 효과를 결정할 수 있다. 즉, 아바타와 가상 객체 사이의 충돌 속도가 높을수록, 진동의 강도가 높다.
다른 실시예들에서, 햅틱 효과 결정 모듈(126)은, 센서(132)로부터 수신된 센서 신호에 적어도 부분적으로 기초하여 햅틱 효과를 결정할 수 있다. 예컨대, 소정 실시예들에서, 센서(132)는 자이로스코프를 포함할 수 있다. 프로세서(102)는 자이로스코프로부터 센서 신호를 수신하고 컴퓨팅 장치(101)의 방향을 결정할 수 있다. 이 결정에 기초하여, 햅틱 효과 결정 모듈(132)은 햅틱 효과를 결정할 수 있다. 예컨대, 소정 실시예들에서, 프로세서(102)는 컴퓨팅 장치(101)가 90도 기울어져 있다고 결정할 수 있다. 이러한 결정에 기초하여, 햅틱 효과 결정 모듈(126)은, 예컨대, 강한 진동을 포함하는 햅틱 효과를 결정할 수 있다.
햅틱 효과 생성 모듈(128)은 프로세서(102)로 하여금 선택된 햅틱 효과를 생성하기 위해 햅틱 출력 장치(118)로 햅틱 신호를 전송하게끔 하는 프로그래밍을 나타낸다. 예컨대, 햅틱 효과 생성 모듈(128)은 햅틱 출력 장치(118)로 보내기 위한 저장된 파형 또는 명령에 액세스할 수 있다. 다른 예로서, 햅틱 효과 생성 모듈(128)은 햅틱 신호를 결정하기 위한 알고리즘을 포함할 수 있다. 햅틱 효과 생성 모듈(128)은 햅틱 효과에 대한 대상 좌표를 결정하기 위한 알고리즘을 포함할 수 있다. 이들 대상 좌표는, 예컨대, 터치 감지 표면(116) 상의 위치를 포함할 수 있다.
도 4는 햅틱적으로 사용가능한 합치 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시한다. 시스템(400)은 컴퓨팅 장치(402)를 포함한다. 소정 실시예들에서, 컴퓨팅 장치(402)는, 예컨대, 태블릿, e-리더(e-reader), 의료 기기, 랩톱 컴퓨터, 데스크톱 컴퓨터, 키오스크, 경보 시스템, 또는 자동차 시스템을 포함할 수 있다. 이 예에서, 컴퓨팅 장치(402)는 스마트폰을 포함한다.
컴퓨팅 장치(402)는 디스플레이를 더 포함한다. 이 예에서, 디스플레이는 합치된 디스플레이(404)를 포함한다. 합치된 디스플레이(404)는 컴퓨팅 장치(402)의 표면 주위에 합치된다. 즉, 합치된 디스플레이(404)는 컴퓨팅 장치(402)의 전면 및 측면을 덮는다. 소정 실시예들에서, 합치된 디스플레이(404)는 컴퓨팅 장치(402)의 후면, 상면 및/또는 하면 주위를 덮는다. 다른 실시예들에서, 디스플레이는 다면적 디스플레이를 포함할 수 있다. 소정 실시예들에서, 다면적 디스플레이는 컴퓨팅 장치(402)의 표면 주위에 합치될 수 있다.
소정 실시예들에서, 디스플레이는 하나 이상의 가상 객체(406)(예컨대, 가상 자동차, 사람, 집, 가구, 식물, 동물, 버튼, 슬라이더, 또는 메뉴)를 출력할 수 있다. 이 예에서, 합치된 디스플레이(404)는 벽돌을 포함하는 가상 객체(406)를 출력한다. 소정 실시예들에서, 컴퓨팅 장치(402)의 측면 주위의 합치된 디스플레이(404)의 곡선 때문에, 사용자는 가상 객체(406)의 전면(410)뿐만 아니라, 또한 가상 객체(406)의 측면(412, 414)도 인지할 수 있다. 따라서 사용자는 가상 객체(406)와 연관된 180도의 시야를 인지할 수 있다.
소정 실시예들에서, 사용자는 디스플레이의 표면과 상호작용(예컨대, 몸짓, 태핑, 또는 손가락을 가로질러 슬라이딩)함으로써 가상 객체(406)와 상호작용할 수 있다. 예컨대, 사용자는 가상 벽돌과 연관된 합치된 디스플레이(404)의 영역을 터치함으로써 가상 벽돌과 상호작용할 수 있다. 또한, 소정 실시예들에서, 사용자는, 컴퓨팅 장치(402)를 기울이거나, 흔들거나, 또는 이동시킴으로써 가상 객체(406) 및/또는 컴퓨팅 장치(402)와 상호작용할 수 있다.
사용자 입력과 같은 이벤트의 발생 시, 컴퓨팅 장치(402)는 하나 이상의 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 사용자가 가상 벽돌의 전면(410)과 상호작용하는 동안, 컴퓨팅 장치(402)는 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 햅틱 효과는, 예컨대, 벽돌의 텍스처와 같은 시뮬레이션 텍스처를 포함할 수 있다. 소정 실시예들에서, 사용자가 합치된 디스플레이(404)의 전면과 좌측 사이의 전이 영역을 가로 질러 손가락을 슬라이드 하는 동안, 컴퓨팅 장치(402)는 다른 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 이 햅틱 효과는 합치된 디스플레이(404)의 형상 내에 형성된 매끄러운 곡선의 느낌을 다른 햅틱 효과와 조합할 수 있다. 예컨대, 소정 실시예들에서, 합치된 디스플레이(404)의 자연적인 곡선은, 예컨대, 벽돌의 가장자리를 시뮬레이션하도록 구성된 펄스 진동을 포함하는 햅틱 효과와 조합될 수 있다. 소정 실시예들에서, 컴퓨팅 장치(402)는 합치된 디스플레이(404)의 자연적인 곡선의 느낌을 상쇄하기에 충분히 강한 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 벽돌의 더 부드러운 가장자리를 시뮬레이션하기 위해, 컴퓨팅 장치(402)는, 예컨대, 긴 지속시간의 낮은 진폭 진동을 포함하는 햅틱 효과를 출력할 수 있다. 벽돌의 더 날카로운 가장자리를 시뮬레이션하기 위해, 컴퓨팅 장치(402)는 짧은 지속기간의 높은 진폭 진동을 출력할 수 있다. 따라서, 소정 실시예들에서, 사용자가 합치된 디스플레이(404)의 전면과 좌측 사이의 전이 영역과 상호작용하는 동안, 사용자는 벽돌의 가장자리를 인지할 수 있다.
또한, 소정 실시예들에서, 사용자가 합치된 디스플레이(404)의 좌측을 가로질러 손가락을 슬라이드하는 동안, 컴퓨팅 장치(402)는 다른 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치는 사용자가 합치된 디스플레이(404)의 전면과 상호작용할 때 출력되는 시뮬레이션 벽돌 텍스처 출력보다 더 거친 것으로서 사용자가 인식할 수 있는 시뮬레이션 벽돌 텍스처를 출력할 수 있다. 가상 객체, 사용자가 상호작용하고 있는 디스플레이의 영역, 또는 둘 모두의 특성에 기초하여 햅틱 효과를 출력함으로써, 사용자는 더욱 현실적이고 몰입감 있는 사용자 경험을 인지할 수 있다.
소정 실시예들에서, 컴퓨팅 장치(402)는 의료 기기를 포함할 수 있다. 의료 기기는 합치된 디스플레이(404)를 포함할 수 있다. 의료 기기는, 예컨대, 심장 또는 뇌와 연관된 의료상 문제와 같은 의료상 문제를 결정하기 위해 사용될 수 있다. 소정 실시예들에서, 컴퓨팅 장치(402)는 예컨대, 환자의 뇌에 대한 가상 표현과 같은 의료상 문제와 연관된 가상 객체(406)를 출력할 수 있다. 환자의 뇌에 대한 가상 표현의 특징은 예컨대, 자기 공명 영상(MRI) 스캔과 같은 의료 절차를 통해 결정될 수 있다.
소정 실시예들에서, 사용자는 합치된 디스플레이(404)와 상호작용함으로써 환자의 뇌에 대한 가상 표현과 상호작용할 수 있다. 사용자 상호작용에 응답하여, 컴퓨팅 장치(402)는 햅틱 효과를 출력할 수 있다. 예컨대, 컴퓨팅 장치(402)는 예컨대, 거칠거나, 매끄럽거나, 울퉁불퉁한 텍스처와 같은, 텍스처를 포함하는 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 햅틱 효과는 사용자가 상호작용하고 있는 환자의 뇌에 대한 가상 표현의 부분의 특성과 연관될 수 있다. 예컨대, 만약 사용자가 가상 뇌 상의 울퉁불퉁한 영역과 연관된 합치된 디스플레이(404)의 영역(402)과 상호작용한다면, 컴퓨팅 장치(402)는 울퉁불퉁한 텍스처를 출력할 수 있다. 소정 실시예들에서, 사용자가 가상 뇌와 연관된 합치된 디스플레이(404)의 전면 및 측면의 영역과 상호작용하는 동안, 컴퓨팅 장치(402)는 각각 가상 뇌의 전면 및 측면과 연관 있는 햅틱 효과를 출력할 수 있다. 따라서, 소정 실시예들에서, 사용자는 사용자가 보다 현실적으로 뇌의 특징을 인지할 수 있고, 이는 사용자가 더 효과적으로 의료상 문제를 결정하고 진단하도록 하게 할 수 있다.
소정 실시예들에서, 컴퓨팅 장치(402)는 프로그램 이벤트 또는 시스템 상태(예컨대, 낮은 배터리)의 발생 시 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치(402)가 새로운 이메일을 수신할 때, 컴퓨팅 장치(402)는 예컨대, 합치된 디스플레이(404)의 표면의 변형을 포함하는 햅틱 효과를 출력할 수 있다. 또한, 소정 실시예들에서, 햅틱 효과는 프로그램 이벤트의 특징에 기초할 수 있다. 예컨대, 컴퓨팅 장치(402)는 수신된 새로운 이메일 메시지의 개수에 따라 추가적인 또는 상이한 햅틱 효과(예컨대, 표면 변형의 크기 증가)를 출력할 수 있다. 소정 실시예들에서, 햅틱 효과는 디스플레이(404)의 인지된 곡률을 변경하도록 구성될 수 있다. 예컨대, 소정 실시예들에서, 만약 사용자가 새로운 이메일이 없으면, 사용자는 디스플레이(404)의 자연적인 곡률을 인지할 수 있다. 컴퓨팅 장치(402)가 새로운 이메일을 수신하면, 컴퓨팅 장치(402)는 예컨대, 사용자로 하여금 디스플레이(404)의 곡률을 날카롭다고 인지하게끔 하도록 구성된 햅틱 효과를 포함하는 햅틱효과를 출력할 수 있다. 소정 실시예들에서, 컴퓨팅 장치(402)는 사용자가 수신한 이메일의 개수에 비례하여 사용자에 의해 인지된 디스플레이(404)의 날카로움을 증가시키도록(예컨대, 인지되는 곡률을 최소화) 구성된 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 합치된 디스플레이(404)와 사용자 상호작용하면, 컴퓨팅 장치(402)는 수신된 이메일의 개수에, 비례하여 증가하는 진폭, 및/또는 비례하여 감소하는 지속시간을 가지는 진동을 포함하는 햅틱 효과를 출력할 수 있다.
소정 실시예들에서, 햅틱 효과는 디스플레이 상의 특정 영역에 지역화될 수 있고, 예컨대, 햅틱 효과는 합치된 디스플레이(404)의 상부 좌측(408)에 지역화될 수 있다. 소정 실시예들에서, 사용자는 디스플레이를 꼭 보지 않고도 프로그램 이벤트의 발생을 결정하는 것이 가능할 수 있어서, 향상된 사용자 경험을 제공할 수 있다. 예컨대, 사용자는 예컨대, 사용자 주머니 안에 있을 수 있는 컴퓨팅 장치(402)(예컨대, 스마트폰)의 상부 좌측(408)을 느끼는 것이 가능할 수 있어서, 사용자에게 새로운 이메일이 있는지를 결정할 수 있다.
도 5는 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시한다. 이 예에서, 시스템(500)은 합치된 디스플레이(504)를 보는 사용자(502)를 포함한다. 다른 실시예들에서, 사용자(502)는 다면적 디스플레이를 보고 있을 수 있다.
소정 실시예들에서, 컴퓨팅 장치는 사용자(502)가 디스플레이를 보고 있는 각도를 결정할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 하나 이상의 센서로부터의 신호를 통해 사용자(502)의 시야각을 결정할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치는 사용자(502)가 카메라, 자이로스코프, 또는 압력 센서로부터의 신호를 통해 디스플레이를 보고 있을 수 있는 각도를 결정할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치는 카메라(예컨대, 컴퓨팅 장치 내에 위치한 정면 방향 카메라)로부터 신호를 수신하여 컴퓨팅 장치에 대하여 사용자(502)의 머리 또는 눈의 위치를 결정할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 자이로스코프로부터 신호를 수신 하여 컴퓨팅 장치의 방향을 결정할 수 있다. 컴퓨팅 장치는 결정된 방향을 사용하여 사용자(502)가 디스플레이를 보고 있을 수 있는 각도를 결정할 수 있다. 또한, 소정 실시예들에서, 컴퓨팅 장치는 하나 이상의 압력 센서로부터 신호를 수신하여 사용자(502)가 어떻게 컴퓨팅 장치를 유지할 수 있는지를 결정할 수 있다. 예컨대, 컴퓨팅 장치 상의 사용자(502) 손가락의 다른 구성이 다른 압력 센서 측정값과 연관될 수 있다. 사용자(502) 손가락에 대해 결정된 구성에 기초하여, 컴퓨팅 장치는 사용자(502)가 디스플레이를 보고 있을 수 있는 각도를 결정할 수 있다.
소정 실시예들에서, 컴퓨팅 장치는 사용자(502)가 합치된 디스플레이(504) 또는 다면적 디스플레이를 보고 있는 각도에 기초하여 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 가상 객체의 일부분이 사용자(502)에게 보이는지 여부에 기초하여 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 합치된 디스플레이(504) 또는 다면적 디스플레이의 일부분이 사용자에게 보이는지 여부에 기초하여 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 사용자(502)는 컴퓨팅 장치 상에서 게임을 할 수 있다. 사용자(502)는 합치된 디스플레이(504)를 보고 있을 수 있어서 사용자(502)는 합치된 디스플레이(504)의 전면(506) 및 상부면(508)(및 합치된 디스플레이(504) 상에 출력된 가상 객체의 전면 및 상부면)을 인지하게 될 수 있지만, 합치된 디스플레이(504)(또는 가상 객체)의 후면(510)은 그렇지 않다. 소정 실시예들에서, 사용자(502)가 합치된 디스플레이(504)의 전면(506) 또는 상부면(508)과 상호작용하면, 컴퓨팅 장치는 햅틱 효과(예컨대, 합치된 디스플레이(504) 상의 인지되는 마찰 계수의 증가)를 출력할 수 있다. 반대로, 사용자(502)가 합치된 디스플레이(510)의 후면(510)과 상호작용하면, 컴퓨팅 장치는 햅틱 효과를 출력하지 않을 수 있다. 소정 실시예들에서, 가상 객체 또는 합치된 디스플레이(504)의 일부분이 사용자에게 보이는지 여부에 기초하여 햅틱 효과를 출력하는 것은 더 도전적이고 보람있는 게임 환경을 제공할 수 있다.
도 6은 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 시스템의 다른 실시예를 도시한다. 이 예에서, 디스플레이(602)는 원통형 모양이다. 다른 실시예들에서, 디스플레이(602)는, 예컨대, 구, 육면체, 각뿔, 원뿔, 각기둥, 8면체, 4면체와 같은 다른 형상에 합치될 수 있다. 디스플레이(602)는 합치된 또는 다면적 디스플레이를 포함한다.
소정 실시예들에서, 디스플레이(602)는 (예컨대, 도 6에 도시된 바와 같은, 사용자의 손목(604) 주변의 팔찌처럼) 사용자가 착용하도록 구성될 수 있고/있거나 사용자가 착용하도록 구성된 개체와 연관될 수 있다. 예컨대, 소정 실시예들에서, 디스플레이(602)는 사용자의 팔, 손목, 다리, 손, 손가락, 발, 또는 머리에 착용되도록 구성될 수 있다. 예컨대, 디스플레이(602)는 반지, 머리밴드, 팔찌, 발찌, 시계, 또는 손목밴드를 포함하는 개체와 연관될 수 있다.
소정 실시예들에서, 디스플레이(602)는 사용자가 잡도록 구성될 수 있고/있거나 잡을 수 있는(graspable) 장치와 연관될 수 있다. 예컨대, 소정 실시예들에서, 디스플레이(602)(또는 다면적 디스플레이)는 모바일 장치, 모바일 장치 홀더, 태블릿, e-리더, 랩톱, 게임패드, 게임 시스템 컨트롤러, 스티어링 휠, 조이스틱, 장난감, 조각상, 또는 기어 시프터(gear shifter)와 연관될 수 있다.
소정 실시예들에서, 디스플레이(602)는 가상 객체(606)를 출력할 수 있다. 이 예에서, 디스플레이(602)는 아바타를 포함하는 가상 객체(606)를 출력하고 있다. 소정 실시예들에서, 사용자가 디스플레이(602)를 (예컨대, 사용자의 손목 주위에) 회전시키는 동안, 컴퓨팅 장치는 가상 객체(606)의 여러 뷰(예컨대, 측면 및 후면 뷰)를 출력할 수 있다. 다른 실시예들에서, 사용자에게 보여지는 디스플레이(602) 부분은 가상 객체(606)의 한 뷰를 출력할 수 있으면서, 사용자에게 보여지지 않는 디스플레이(602)의 부분은 가상 객체(606)의 다른 뷰를 출력할 수 있다. 예컨대, 도 6에 도시된 실시예에서, 사용자에게 보여지는 디스플레이(602)의 부분은 아바타의 전면을 출력하고 있다. 또한, 소정 실시예들에서, 사용자에게 보이지 않는 디스플레이(602)의 부분(예컨대, 사용자의 손목의 후면 주위를 덮은)은 아바타의 후면을 출력할 수 있다.
소정 실시예들에서, 이벤트의 발생 시(예컨대, 가상 객체(606)와의 사용자 상호작용), 컴퓨팅 장치는 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 아바타의 전면 뷰와 사용자 상호작용할 시, 컴퓨팅 장치는 예컨대, 진동을 포함하는 햅틱 효과를 출력할 수 있다. 또한, 소정 실시예들에서, 아바타의 후면 뷰와 사용자 상호작용할 시, 컴퓨팅 장치는 예컨대, 인지되는 마찰 계수의 증가를 포함하는 햅틱 효과를 출력할 수 있다. 따라서, 소정 실시예들에서, 다른 햅틱 효과는 가상 객체의 다른 면 또는 뷰와 연관될 수 있다. 소정 실시예들에서, 사용자는 (예컨대, 햅틱 효과를 통해) 디스플레이를 꼭 보지 않고도, 가상 객체의 어느 면 또는 뷰 또는 부분이 사용자가 상호작용하고 있을 수 있는 것인지를 결정하는 것이 가능할 수 있다.
소정 실시예들에서, 디스플레이(602)는, 예컨대, 원통형일 수 있다. 예컨대, 소정 실시예들에서, 디스플레이(602)는 원통형 캔의 모양일 수 있다. 소정 실시예들에서, 사용자가 가상 객체(606)를 3차원으로 인지하도록, 디스플레이(602)는 가상 객체(606)의 모든 면을 출력할 수 있다. 소정 실시예들에서, 사용자는 디스플레이(602)를 통해 가상 객체(606)를 제어할 수 있다. 예컨대, 소정 실시예들에서, 사용자가 디스플레이(602)를 조작(예컨대, 기울이거나, 회전하거나, 또는 이동)할 시, 가상 객체(606)의 특징(예컨대, 가상 위치, 방향, 색깔, 크기, 텍스처, 또는 유형)이 변경될 수 있다.
또한, 소정 실시예들에서, 컴퓨팅 장치는 가상 객체의 특징에 적어도 부분적으로 기초하여 하나 이상의 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 디스플레이(602) 상에 출력된 가상 객체의 특성을 모방하도록 구성된 햅틱 효과를 출력할 수 있다. 예컨대, 소정 실시예들에서, 가상 객체는, 예컨대, 조각상을 포함할 수 있다. 소정 실시예들에서, 컴퓨팅 장치는 조각상의 몸체 부위의 위치에 기초하여 햅틱 효과를 출력할 수 있다. 예컨대, 일 실시예에서, 가상 조각상은 그 몸체의 측면에 팔을 가질 수 있다. 사용자가 디스플레이(602)와 상호작용할 시, 컴퓨팅 장치는, 예컨대, 매끄러운 감각을 포함하는 햅틱 효과를 출력할 수 있다. 소정 실시예들에서, 가상 조각상은 뻗은 팔을 가질 수 있다. 사용자가 디스플레이(602)의 전면 또는 후면(이는 예컨대, 가상 조각상의 전면 또는 후면을 출력하고 있을 수 있다)과 상호작용할 시, 컴퓨팅 장치는, 예컨대, 매끄러운 감각을 포함하는 햅틱 효과를 출력할 수 있다. 또한, 사용자가 디스플레이(602)의 측면(이는 예컨대, 가상 조각상의 뻗을 팔을 출력하고 있을 수 있다)과 상호작용할 시, 컴퓨팅 장치는, 예컨대, 시뮬레이션 된 울퉁불퉁한 텍스처를 포함하는 햅틱 효과를 출력할 수 있다.
햅틱적으로 사용가능한 합치된 다면적 디스플레이에 대한 예시적인 방법
도 7은 일 실시예에 따른 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 제공하기 위한 방법을 수행하기 위한 단계의 흐름도이다. 소정 실시예들에서, 도 7의 단계들은, 예컨대, 범용 컴퓨터, 모바일 장치, 또는 서버 내의 프로세서와 같은 프로세서에 의해 실행되는 프로그램 코드로 구현될 수 있다. 소정 실시예들에서, 이러한 단계들은 프로세서의 그룹에 의해 구현될 수 있다. 소정 실시예들에서 도 7에 도시된 하나 이상의 단계들이 생략될 수 있거나 다른 순서로 수행될 수 있다. 마찬가지로, 소정 실시예들에서, 도 7에 도시되지 않은 추가적인 단계들도 수행될 수 있다. 아래의 단계들은 도 1에 도시된 시스템(100)과 관련하여 상술한 구성요소들을 참조하여 설명된다.
방법(700)은 단계(702)에서 시작하고 이때 프로세서(102)는 이벤트를 결정한다. 소정 실시예들에서, 이벤트는, 예컨대, 컴퓨팅 장치(101) 또는 터치 감지 표면(116)과 상호작용하는 것(예컨대, 터치 감지 표면(116)을 가로질러 손가락을 슬라이딩하거나 터치 감지 표면(116) 상에서 제스처를 취함으로써) 또는 프로그램 이벤트(예컨대, 소프트웨어의 실행)를 포함할 수 있다. 예컨대, 소정 실시예들에서, 프로세서(102)는 만약 사용자가 가상 객체(예컨대, 메뉴)와 연관된 위치에서 터치 감지 표면(116)에 손가락을 누른다면 이벤트를 결정할 수 있다. 소정 실시예들에서, 프로세서(102)는 센서(132)로부터의 신호를 통해 이벤트(예컨대, 컴퓨팅 장치를 기울이거나 이동시킴)를 결정할 수 있다.
방법(700)는 단계(704)로 계속되고 이때 프로세서(102)는 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정한다. 소정 실시예들에서, 프로세서(102)는 햅틱 효과 결정 모듈(126) 내에 포함된 프로그램에 의존하여 햅틱 효과를 결정할 수 있다. 소정 실시예들에서, 햅틱 효과 결정 모듈(126)은 룩업 테이블(lookup table)을 포함할 수 있다. 소정 실시예들에서, 프로세서(102)는 룩업 테이블을 사용하여 특정 햅틱 효과(예컨대, 텍스처 )와 이벤트를 연관시킬 수 있다.
예컨대, 일 실시예에서, 이벤트는 게임 활동(예컨대, 발포, 레벨 완료, 또는 폭발)에 기초한다. 소정 실시예들에서, 컴퓨팅 장치(101)는 사용자가 특정 목표(예컨대, 보도(pedestrian) 주위에 자동차를 성공적으로 안내)를 완료하기 위해 제어할 수 있는 가상 객체(예컨대, 가상 자동차)를 출력할 수 있다. 사용자가 목표를 완료하는 대로, 컴퓨팅 장치(101)는 연관된 햅틱 효과를 결정할 수 있다.
소정 실시예들에서, 프로세서(102)는 가상 객체의 특징(예컨대, 크기, 모양, 색깔, 위치, 크기, 방향, 콘텐츠, 또는 텍스처)에 적어도 부분적으로 기초하여 햅틱 효과를 결정할 수 있다. 예컨대, 소정 실시예들에서, 프로세서(102)는 터치 감지 표면(116)를 통해 가상 객체(예컨대, 가상 큐브)와 사용자 상호작용하는 것을 포함하는 이벤트를 결정할 수 있다. 프로세서는 사용자 상호작용 및 예컨대, 가상 객체의 크기 또는 텍스처와 같은 가상 객체의 특징에 기초하여 햅틱 효과를 결정할 수 있다.
소정 실시예들에서, 사용자는 "햅틱 프로필"을 가질 수 있고 이를 통해 사용자는 특정 이벤트와 연관시키고 싶어하는 햅틱 효과의 "프로필"을 결정하여 메모리(104) 내에 저장할 수 있다. 예컨대, 일 실시예에서, 사용자는 사용가능한 햅틱 효과의 리스트로부터 선택할 수 있고 컴퓨팅 장치(101)에 의해 출력된 가상 객체와 이러한 햅틱 효과들 중 하나를 연관시킬 수 있다. 소정 실시예들에서, 목록은, 예컨대, 격렬한 진동, 빛 진동, 표면 변형(예컨대, 터치 감지 표면(116)의 표면의 일부분을 올리거나 내림), 또는 예컨대 울퉁불퉁하거나, 고무 같거나, 매끄러운 텍스처와 같은 햅틱 효과를 포함할 수 있다. 소정 실시예들에서, 프로세서(102)는 사용자의 햅틱 프로필을 검토하여 어떤 햅틱 효과가 생성될지를 결정할 수 있다. 예컨대, 만약 사용자의 햅틱 프로필이 격렬한 진동을 가지는 가상 객체와 상호작용을 연관시키면, 사용자가 가상 객체 너머로 터치 감지 표면(116)에 손가락을 놓은 것에 응답하여, 프로세서(102)는 격렬한 진동을 포함하는 햅틱 효과를 결정할 수 있다.
방법(700)은 단계(706)로 계속되고 이때 프로세서(102)는 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정한다. 소정 실시예들에서, 프로세서(102)는 메모리(104)에 저장된 구동 신호에 액세스하여 특정 햅틱 효과와 연관시킬 수 있다. 일 실시예에서, 신호는 저장된 알고리즘에 액세스하고 효과와 연관된 파라미터를 입력함으로써 생성된다. 예컨대, 이러한 실시예에서, 알고리즘은 진폭 및 주파수 파라미터에 기초하여 구동 신호를 생성하는데 사용하기 위한 데이터를 출력할 수 있다. 다른 예로서, 햅틱 신호는 액츄에이터에 의해 디코딩될 액츄에이터에 보내진 데이터를 포함할 수 있다. 예컨대, 액츄에이터는 자체로 응답하여 진폭, 주파수와 같은 파라미터를 특정하는 명령을 내릴 수 있다.
방법(700)은 단계(708)로 계속되고 이때 프로세서(102)는 햅틱 출력 장치(118)로 햅틱 신호를 전송한다. 햅틱 출력 장치(118)는 햅틱 신호를 수신하고 햅틱 효과를 출력한다. 소정 실시예들에서, 햅틱 효과는 진동, 인지되는 마찰 계수의 변화, 시뮬레이션 텍스처, 또는 표면 변형을 포함한다.
햅틱적으로 사용가능한 합치된 다면적 디스플레이의 장점
햅틱적으로 사용가능한 합치된 다면적 디스플레이에는 수많은 장점이 있다. 이러한 시스템은 사용자가 장치를 보지 않고도 상태 결정(예컨대, 장치가 있는 모드를 결정)을 이루는 것을 가능하게 할 수 있다. 따라서, 사용자는 다른 작업에 초점을 유지하는 것이 가능할 수 있다. 예컨대, 사용자는 디스플레이에 시각적으로 집중하지 않고도, 프로그램 또는 사용자 인터페이스에서의 가능한 작업에 관하여 결정 내리는 것을 가능하게 할 수 있다. 마찬가지로, 햅틱 효과는 동작이 가능하거나, 완료되었거나, 특정 정도로 중요하다는 것을 확인하게 할 수 있다. 또한, 소정 실시예들에서, 사용자는 사용자에게 더 편리하거나 액세스 가능한 장치의 일부와 상호작용함으로써 상태 결정을 이루는 것이 가능할 수 있다. 예컨대, 소정 실시예들에서, 합치된 디스플레이의 곡률(또는 다면적 디스플레이의 구성)로 인해, 사용자는, 예컨대, 사용자의 주머니에 있는 장치의 측면과 상호작용함으로써 상태 결정을 이루는 것이 가능할 수 있다.
소정 실시예들에서, 햅틱적으로 사용가능한 합치된 다면적 디스플레이는 더 현실적이거나 몰입감 있는 사용자 경험을 제공할 수 있다. 예컨대, 소정 실시예들에서, 사용자는 합치된 또는 다면적 디스플레이 상에 출력된 가상 객체의 다른 면(예컨대, 좌측, 우측, 상부)과 상호작용하는 것이 가능할 수 있다. 사용자 상호작용에 응답하여, 소정 실시예들에서, 컴퓨팅 장치는 햅틱을 출력할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치는 사용자가 상호작용하고 있는 가상 객체의 영역에 대한 텍스처를 시뮬레이션하도록 구성된 햅틱 효과를 출력할 수 있다. 그러한 햅틱 효과는 사용자가 보다 현실적으로 가상 객체를 인지하도록 하게 할 수 있다.
소정 실시예들에서, 햅틱 효과는 합치된 다면적 디스플레이의 매끄러운 및/또는 곡선 구성의 느낌을 방지할 수 있다. 예컨대, 소정 실시예들에서, 컴퓨팅 장치는 합치된 디스플레이 상에 가상 객체(예컨대, 벽돌)를 출력할 수 있다. 가상 객체와 상호작용 하는 동안, 사용자는 합치된 디스플레이의 부드러운 곡선 형태를 인지할 수 있고, 이는 가상 객체와 잘 상응하지 않을 수 있는 촉각 감각일 수 있다. 소정 실시예들에서, 햅틱 효과는 매끄러운 곡선 디스플레이 표면의 느낌에 대항할 수 있고, 사용자가 디스플레이 상에 출력된 가상 객체를 보다 현실적으로 인시하게 할 수 있다.
또한, 소정 실시예들에서, 햅틱적으로 사용가능한 합치된 또는 다면적인 디스플레이는 이러한 디스플레이가 종래의 스위치를 대체하게 할 수 있다. 이는 합치된 또는 다면적인 디스플레이가 다기능 컨트롤러로서 동작 및/또는 이전에 사용되지 않는 장소에서 사용되게 할 수 있다. 소정 실시예들에서, 다기능 컨트롤러 또는 이전에 사용되지 않는 장소에서 합치된 또는 다면적 디스플레이를 사용하는 것은 비용을 감소시키고 전반적인 사용자의 만족도를 높일 수 있다.
일반 고려사항
상술한 방법, 시스템 및 장치는 예이다. 다양한 구성은 다양한 절차 또는 구성요소를 적절하게 생략, 대체, 또는 추가할 수 있다. 예컨대, 대안적인 구성에서, 방법은 설명된 것과 다른 순서로 수행될 수 있고/있거나, 다양한 단계가 추가, 생략, 및/또는 조합될 수 있다. 또한, 특정 구성에 관해 설명된 특징은 다양한 다른 구성으로 조합될 수 있다. 구성의 다른 양태 및 구성요소는 유사한 방식으로 조합될 수 있다. 또한, 기술은 진화하므로, 따라서, 많은 구성요소는 예시이고 본 개시 또는 청구항의 범위를 제한하지 않는다.
특정한 세부사항이 구성 예(구현 예를 포함함)의 철저한 이해를 제공하기 위해 설명에서 주어진다. 그러나, 구성은 이들 특정 세부사항 없이 실시될 수 있다. 예컨대, 공지된 회로, 프로세스, 알고리즘, 구조 및 기술은 구성을 불명료하게 하는 것을 피하기 위해 불필요한 세부사항 없이 보여졌다. 이 설명은 단지 예시적인 구성을 제공하며, 청구항의 범위, 적용가능성, 또는 구성을 제한하지 않는다. 오히려, 구성에 대한 앞의 설명은 설명된 기술들을 구현하기 위한 사용가능한 설명을 본 기술분야에서 통상의 지식을 가진 자에게 제공할 것이다. 본 개시의 사상 또는 범위로부터 벗어나지 않는 범위에서 다양한 변경이 구성요소의 기능 및 배열에서 이루어질 수 있다.
또한, 구성은 흐름도 또는 블록도로서 도시되는 프로세스로서 설명될 수 있다. 각각은 순차적인 프로세스로서 동작들을 설명하지만, 많은 동작들은 동시에 또는 함께 수행될 수 있다. 또한, 동작의 순서는 재배열될 수 있다. 프로세스는 도면에 포함되지 않은 추가 단계를 가질 수 있다. 또한, 방법의 예는 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로코드, 하드웨어 설명 언어, 또는 이들의 임의의 조합에 의해 구현될 수 있다. 소프트웨어, 펌웨어, 미들웨어 또는 마이크로코드에서 구현될 때, 필요한 작업을 수행하기 위한 프로그램 코드 또는 코드 세그먼트들은 저장 매체와 같은 비일시적 컴퓨터-판독가능 매체 내에 저장될 수 있다. 프로세서는 설명된 작업을 수행할 수 있다.
몇몇 예시적인 구성들을 기술하였지만, 본 개시 내용의 사상을 벗어나지 않고 다양한 수정, 대안의 구성, 및 등가물이 사용될 수 있다. 예를 들어, 이상의 요소들은 대형 시스템의 구성요소일 수 있고, 다른 규칙들이 본 개시 내용의 적용보다 우선순위를 가지거나 다른 방식으로 그를 수정할 수 있다. 또한, 이상의 요소들이 고려되기 전에, 그 동안에, 또는 그 후에, 다수의 단계들이 취해질 수 있다. 그에 따라, 이상의 설명은 특허청구범위의 범위를 한정하지 않는다.
본 명세서에서 "~하도록 되어 있는" 또는 "~하도록 구성되어 있는"의 사용은 추가적인 작업들 또는 단계들을 수행하도록 되어 있거나 구성되어 있는 장치들을 배제하지 않는 개방적이고 포함적인 표현을 의미한다. 그에 부가하여, "~에 기초하여"의 사용은, 하나 이상의 언급된 조건 또는 값"에 기초한" 프로세스, 단계, 계산 또는 기타 동작이 실제로 언급된 것 이외의 부가적인 조건 또는 값에 기초할 수 있다는 점에서, 개방적이고 포함적인 것을 의미한다. 본 명세서에 포함되어 있는 제목, 목록 및 번호 부여는 단지 설명의 편의를 위한 것이고 제한하기 위한 것이 아니다.
본 발명 요지의 측면들에 따른 실시예들은 디지털 전자 회로로, 컴퓨터 하드웨어, 펌웨어, 소프트웨어로, 또는 이들의 조합으로 구현될 수 있다. 일 실시예에서, 컴퓨터는 프로세서 또는 프로세서들을 포함할 수 있다. 프로세서는 프로세서에 연결된 RAM(random access memory)과 같은 컴퓨터 판독가능 매체를 포함하거나 그에 액세스한다. 프로세서는, 센서 샘플링 루틴, 선택 루틴, 및 앞서 기술된 방법들을 수행하기 위한 다른 루틴을 비롯한 하나 이상의 컴퓨터 프로그램을 실행하는 것과 같이, 메모리에 저장되어 있는 컴퓨터-실행가능 프로그램 명령어를 실행한다.
이러한 프로세서는 마이크로프로세서, DSP(digital signal processor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array), 및 상태 기계를 포함할 수 있다. 이러한 프로세서는 PLC, PIC(programmable interrupt controller), PLD(programmable logic device), PROM(programmable read-only memory), 전자적 프로그램가능 판독 전용 메모리(EPROM 또는 EEPROM)와 같은 프로그램가능 전자 장치, 또는 기타 유사한 장치를 더 포함할 수 있다.
이러한 프로세서는, 프로세서에 의해 실행될 때, 프로세서로 하여금 프로세서에 의해 수행되거나 지원되는 본 명세서에 기술된 단계들을 수행하게 할 수 있는 명령어를 저장할 수 있는 매체(예컨대, 유형의 컴퓨터 판독가능 매체)를 포함할 수 있거나, 그와 통신하고 있을 수 있다. 컴퓨터 판독가능 매체의 실시예들은 웹 서버에 있는 프로세서와 같은 프로세서에 컴퓨터 판독가능 명령어를 제공할 수 있는 모든 전자, 광학, 자기, 또는 기타 저장 장치를 포함할 수 있지만, 이들로 제한되지 않는다. 매체의 다른 예는 플로피 디스크, CD-ROM, 자기 디스크, 메모리 칩, ROM, RAM, ASIC, 구성된 프로세서, 모든 광학 매체, 모든 자기 테이프 또는 기타 자기 매체, 또는 컴퓨터 프로세서가 판독할 수 있는 임의의 다른 매체를 포함하지만, 이들로 제한되지 않는다. 또한, 라우터, 사적 또는 공중 네트워크, 또는 다른 전송 장치 등의 다양한 다른 장치들은 컴퓨터 판독가능 매체를 포함할 수 있다. 프로세서 및 기술된 처리는 하나 이상의 구조로 되어 있을 수 있고, 하나 이상의 구조에 걸쳐 분산되어 있을 수 있다. 프로세서는 본 명세서에 기술된 방법들 중 하나 이상의 방법(또는 방법들의 일부)을 수행하는 코드를 포함할 수 있다.
본 발명 요지가 그의 구체적인 실시예와 관련하여 상세히 기술되어 있지만, 기술 분야의 당업자가, 이상의 내용의 이해할 시에, 이러한 실시예들에 대한 변경, 그의 변동, 및 그의 등가물을 용이하게 생성할 수 있다는 것을 잘 알 것이다. 그에 따라, 본 개시 내용이 제한이라기보다는 예로서 제시되어 있고, 본 기술분야에서 통상의 지식을 가진 자에게 즉각 명백할 것인 바와 같이, 본 발명 요지에 대한 이러한 수정, 변동 및/또는 추가를 포함하는 것을 배제하지 않는다는 것을 잘 알 것이다.

Claims (20)

  1. 제1 평면 상의 제1 표면; 및
    상기 제1 표면에 인접한 제2 표면 - 상기 제2 표면은 상기 제1 평면과 상이한 제2 평면 상에 있음 -;
    을 포함하는 터치 감지 표면;
    햅틱 신호를 수신하고 햅틱 효과를 출력하도록 구성된 햅틱 출력 장치; 및
    상기 햅틱 출력 장치 및 상기 터치 감지 표면에 연결된 프로세서를 포함하고, 상기 프로세서는,
    이벤트를 결정하고;
    상기 이벤트에 적어도 부분적으로 기초하여 상기 햅틱 효과를 결정하고;
    상기 햅틱 효과에 적어도 부분적으로 기초하여 상기 햅틱 신호를 결정하고; 및
    상기 햅틱 효과와 연관된 상기 햅틱 신호를 상기 햅틱 출력 장치로 전송하도록 구성되는 시스템.
  2. 제1항에 있어서, 상기 터치 감지 표면은 합치된(conformed) 디스플레이를 포함하는 시스템.
  3. 제1항에 있어서, 상기 터치 감지 표면은 다면적(multifaceted) 디스플레이를 포함하는 시스템.
  4. 제3항에 있어서, 상기 제1 표면은 이동가능한 조인트(moveable joint)에 의해 상기 제2 표면에 연결되는 시스템.
  5. 제1항에 있어서, 상기 이벤트는 상기 제1 표면과의 사용자 상호작용을 포함하고, 상기 프로세서는,
    상기 제2 표면과의 사용자 상호작용을 포함하는 제2 이벤트를 결정하고;
    상기 제2 이벤트에 적어도 부분적으로 기초하여 제2 햅틱 효과를 결정하고;
    상기 제2 햅틱 효과에 적어도 부분적으로 기초하여 제2 햅틱 신호를 결정하고; 및
    상기 제2 햅틱 효과와 연관된 상기 제2 햅틱 신호를 상기 햅틱 출력 장치로 전송하도록 더 구성되는 시스템.
  6. 제1항에 있어서, 상기 터치 감지 표면은 장치의 적어도 일 표면 주위에 합치되는 시스템.
  7. 제1항에 있어서, 상기 터치 감지 표면은 원통(cylindrical), 구(spherical), 육면체(cubic), 각뿔(pyramid), 각기둥(prism), 8면체(octahedron), 4면체(tetrahedron) 또는 원뿔(cone) 형상을 한정하는 시스템.
  8. 제1항에 있어서, 상기 터치 감지 표면은 웨어러블(wearable) 장치 또는 잡을 수 있는(graspable) 장치와 연관되는 시스템.
  9. 제8항에 있어서, 상기 웨어러블 장치는 반지(ring), 머리띠(headband), 팔찌(bracelet), 발찌(anklet), 시계(watch) 또는 손목밴드(wristband)를 포함하는 시스템.
  10. 제1항에 있어서, 상기 제1 표면에 인접한 제3 표면 - 상기 제3 표면은 상기 제1 평면 및 상기 제2 평면과 상이한 제3 평면 상에 있음 - 을 더 포함하는 시스템.
  11. 제1항에 있어서, 상기 이벤트는 터치 감지 표면과의 사용자 상호작용을 포함하고, 상기 햅틱 효과는 상기 터치 감지 표면 상의 상기 사용자 상호작용의 위치에 적어도 부분적으로 기초하는 시스템.
  12. 이벤트를 결정하는 단계;
    상기 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정하는 단계;
    상기 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정하는 단계; 및
    상기 햅틱 효과와 연관된 상기 햅틱 신호를 햅틱 출력 장치로 전송하는 단계를 포함하고,
    상기 햅틱 출력 장치는 터치 감지 표면에 햅틱 효과를 출력하도록 구성되고,
    상기 터치 감지 표면은,
    제1 평면 상의 제1 표면; 및
    상기 제1 표면에 인접한 제2 표면 - 상기 제2 표면은 상기 제1 평면과 상이한 제2 평면 상에 있음 - 을 포함하는 방법.
  13. 제12항에 있어서, 상기 터치 감지 표면은 합치된 디스플레이를 포함하는 방법.
  14. 제12항에 있어서, 상기 터치 감지 표면은 다면적 디스플레이를 포함하는 방법.
  15. 제12항에 있어서, 상기 제1 표면은 이동가능한 조인트에 의해 상기 제2 표면에 연결되는 방법.
  16. 제12항에 있어서, 상기 터치 감지 표면은 장치의 적어도 일 표면 주위에 합치되는 방법.
  17. 프로세서에 의해 수행될 때 상기 프로세서로 하여금,
    이벤트를 결정하고;
    상기 이벤트에 적어도 부분적으로 기초하여 햅틱 효과를 결정하고;
    상기 햅틱 효과에 적어도 부분적으로 기초하여 햅틱 신호를 결정하고;
    상기 햅틱 효과와 연관된 상기 햅틱 신호를 햅틱 출력 장치로 전송하게 하도록 구성되는 프로그램 코드를 포함하고,
    상기 햅틱 출력 장치는 터치 감지 표면에 햅틱 효과를 출력하도록 구성되고, 상기 터치 감지 표면은,
    제1 평면 상의 제1 표면; 및
    상기 제1 표면에 인접한 제2 표면 - 상기 제2 표면은 상기 제1 평면과 상이한 제2 평면 상에 있음 - 을 포함하는 비일시적 컴퓨터 판독가능 매체.
  18. 제17항에 있어서, 상기 터치 감지 표면은 합치된 디스플레이를 포함하는 비일시적 컴퓨터 판독가능 매체.
  19. 제17항에 있어서, 상기 터치 감지 표면은 다면적 디스플레이를 포함하는 비일시적 컴퓨터 판독가능 매체.
  20. 제17항에 있어서, 상기 터치 감지 표면은 장치의 적어도 일 표면 주위에 합치되는 비일시적 컴퓨터 판독가능 매체.
KR1020140050655A 2013-04-26 2014-04-28 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법 KR20140128275A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201361816605P 2013-04-26 2013-04-26
US61/816,605 2013-04-26

Publications (1)

Publication Number Publication Date
KR20140128275A true KR20140128275A (ko) 2014-11-05

Family

ID=50513838

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020157032818A KR20160002941A (ko) 2013-04-26 2014-04-25 플렉서블 디스플레이를 위한 수동 강성 및 능동 변형 햅틱 출력 장치
KR1020157033334A KR20160003031A (ko) 2013-04-26 2014-04-25 햅틱 셀들의 어레이를 이용한 유형의 사용자 인터페이스 상호작용들 및 제스처들의 시뮬레이션
KR1020140050655A KR20140128275A (ko) 2013-04-26 2014-04-28 햅틱적으로 사용가능한 합치된 다면적 디스플레이를 위한 시스템 및 방법

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020157032818A KR20160002941A (ko) 2013-04-26 2014-04-25 플렉서블 디스플레이를 위한 수동 강성 및 능동 변형 햅틱 출력 장치
KR1020157033334A KR20160003031A (ko) 2013-04-26 2014-04-25 햅틱 셀들의 어레이를 이용한 유형의 사용자 인터페이스 상호작용들 및 제스처들의 시뮬레이션

Country Status (6)

Country Link
US (10) US9335823B2 (ko)
EP (5) EP3575941A1 (ko)
JP (7) JP2016520915A (ko)
KR (3) KR20160002941A (ko)
CN (6) CN105144035B (ko)
WO (2) WO2014176528A1 (ko)

Families Citing this family (254)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD353539S (en) * 1990-07-20 1994-12-20 Norden Pac Development Ab Combined tube and cap
US8405618B2 (en) * 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US10013058B2 (en) 2010-09-21 2018-07-03 Apple Inc. Touch-based user interface with haptic feedback
US10120446B2 (en) 2010-11-19 2018-11-06 Apple Inc. Haptic input device
US9582035B2 (en) 2014-02-25 2017-02-28 Medibotics Llc Wearable computing devices and methods for the wrist and/or forearm
US10314492B2 (en) 2013-05-23 2019-06-11 Medibotics Llc Wearable spectroscopic sensor to measure food consumption based on interaction between light and the human body
US20140029190A1 (en) * 2012-07-25 2014-01-30 Kabushiki Kaisha Toshiba Electronic device
US9178509B2 (en) 2012-09-28 2015-11-03 Apple Inc. Ultra low travel keyboard
US9710069B2 (en) 2012-10-30 2017-07-18 Apple Inc. Flexible printed circuit having flex tails upon which keyboard keycaps are coupled
US9502193B2 (en) 2012-10-30 2016-11-22 Apple Inc. Low-travel key mechanisms using butterfly hinges
US9449772B2 (en) 2012-10-30 2016-09-20 Apple Inc. Low-travel key mechanisms using butterfly hinges
EP2954384B1 (en) 2013-02-06 2023-08-02 Apple Inc. Input/output device with a dynamically adjustable appearance and function
US9939900B2 (en) 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
CN105144035B (zh) 2013-04-26 2019-03-22 意美森公司 利用触觉单元阵列模拟有形用户界面交互和手势
WO2014193850A1 (en) 2013-05-27 2014-12-04 Apple Inc. Low travel switch assembly
US9908310B2 (en) 2013-07-10 2018-03-06 Apple Inc. Electronic device with a reduced friction surface
KR102265083B1 (ko) * 2013-08-22 2021-06-15 삼성전자주식회사 가변강성 필름, 가변강성 유연 디스플레이 및 이의 제조 방법
US9443401B2 (en) * 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
WO2015047343A1 (en) 2013-09-27 2015-04-02 Honessa Development Laboratories Llc Polarized magnetic actuators for haptic response
WO2015047356A1 (en) 2013-09-27 2015-04-02 Bodhi Technology Ventures Llc Band with haptic actuators
US10126817B2 (en) 2013-09-29 2018-11-13 Apple Inc. Devices and methods for creating haptic effects
CN105683865B (zh) 2013-09-30 2018-11-09 苹果公司 用于触觉响应的磁性致动器
EP3014396A1 (en) 2013-09-30 2016-05-04 Apple Inc. Keycaps with reduced thickness
WO2015047606A1 (en) 2013-09-30 2015-04-02 Apple Inc. Keycaps having reduced thickness
WO2015050345A1 (en) * 2013-10-01 2015-04-09 Lg Electronics Inc. Control apparatus for mobile terminal and control method thereof
US9317118B2 (en) * 2013-10-22 2016-04-19 Apple Inc. Touch surface for simulating materials
US10276001B2 (en) 2013-12-10 2019-04-30 Apple Inc. Band attachment mechanism with haptic response
US9501147B2 (en) * 2013-12-29 2016-11-22 Immersion Corporation Haptic device incorporating stretch characteristics
US20170038795A1 (en) * 2014-01-05 2017-02-09 Vorbeck Materials Corp. Coated leather articles and method of preparation
US9793066B1 (en) 2014-01-31 2017-10-17 Apple Inc. Keyboard hinge mechanism
KR102251081B1 (ko) * 2014-02-05 2021-05-13 삼성디스플레이 주식회사 플렉서블 디스플레이 장치
US10429888B2 (en) 2014-02-25 2019-10-01 Medibotics Llc Wearable computer display devices for the forearm, wrist, and/or hand
US9921650B2 (en) 2014-03-21 2018-03-20 Immersion Corporation Systems and methods for haptically-enabled curved devices
US9779889B2 (en) 2014-03-24 2017-10-03 Apple Inc. Scissor mechanism features for a keyboard
WO2015143694A1 (en) * 2014-03-28 2015-10-01 Intel Corporation Rotation sensor device
JP6344006B2 (ja) * 2014-03-28 2018-06-20 カシオ計算機株式会社 携帯情報機器、携帯情報機器におけるオブジェクトの報知方法、及び携帯情報機器のプログラム
US20150286402A1 (en) * 2014-04-08 2015-10-08 Qualcomm Incorporated Live non-visual feedback during predictive text keyboard operation
US10545604B2 (en) 2014-04-21 2020-01-28 Apple Inc. Apportionment of forces for multi-touch input devices of electronic devices
US9704665B2 (en) 2014-05-19 2017-07-11 Apple Inc. Backlit keyboard including reflective component
US9715978B2 (en) 2014-05-27 2017-07-25 Apple Inc. Low travel switch assembly
DE102015209639A1 (de) 2014-06-03 2015-12-03 Apple Inc. Linearer Aktuator
US9400557B2 (en) * 2014-06-25 2016-07-26 Intel Corporation Multimodal haptic effect system
DE202014103215U1 (de) * 2014-07-11 2014-09-30 Christian Stroetmann Elektronisches, visuelles Gerät, das eine flexible beziehungsweise biegbare Vorrichtung zur optischen Signalisierung von veränderlichen Informationen, ein flexibles beziehungsweise biegbares Gehäuse mit mindestens einem Gelenk/Scharnier und ein Regel-/Steuerungssystem besitzt
US9727182B2 (en) 2014-07-18 2017-08-08 Google Technology Holdings LLC Wearable haptic and touch communication device
US9965036B2 (en) * 2014-07-18 2018-05-08 Google Technology Holdings LLC Haptic guides for a touch-sensitive display
US10121335B2 (en) 2014-07-18 2018-11-06 Google Technology Holdings LLC Wearable haptic device for the visually impaired
JP3213039U (ja) 2014-08-15 2017-10-19 アップル インコーポレイテッド 布製キーボード
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
KR20160024605A (ko) * 2014-08-26 2016-03-07 삼성전자주식회사 접철식 기기
KR20160025830A (ko) * 2014-08-28 2016-03-09 삼성전자주식회사 전자 장치
US10082880B1 (en) 2014-08-28 2018-09-25 Apple Inc. System level features of a keyboard
EP3195088A2 (en) 2014-09-02 2017-07-26 Apple Inc. Haptic notifications
CN106575230A (zh) 2014-09-02 2017-04-19 苹果公司 用于可变触觉输出的语义框架
KR102228857B1 (ko) * 2014-09-05 2021-03-17 엘지전자 주식회사 휴대 전자기기
GB2530036A (en) * 2014-09-09 2016-03-16 Ultrahaptics Ltd Method and apparatus for modulating haptic feedback
JP3213042U (ja) 2014-09-30 2017-10-19 アップル インコーポレイテッド キーボードアセンブリ用のキー及びスイッチハウジング
WO2016059514A1 (en) * 2014-10-17 2016-04-21 Semiconductor Energy Laboratory Co., Ltd. Electronic device
JP2016085457A (ja) * 2014-10-24 2016-05-19 株式会社半導体エネルギー研究所 電子機器
US9791929B2 (en) * 2014-10-31 2017-10-17 Elwha Llc Tactile control system
CN105589594B (zh) 2014-11-06 2019-12-31 天马微电子股份有限公司 电子装置和电子装置的操作控制方法
JP6654743B2 (ja) * 2014-11-06 2020-02-26 天馬微電子有限公司 電子機器、電子機器の操作制御方法および操作制御プログラム
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
CN104460089B (zh) * 2014-12-12 2018-02-16 京东方科技集团股份有限公司 一种多面显示器件
US10001837B2 (en) * 2014-12-23 2018-06-19 Intel Corporation Technologies for interacting with computing devices using haptic manipulation
US9466188B2 (en) * 2014-12-24 2016-10-11 Immersion Corporation Systems and methods for haptically-enabled alarms
WO2016101160A1 (en) * 2014-12-24 2016-06-30 Intel Corporation User interface for liquid container
CN105808112B (zh) * 2014-12-30 2019-10-29 联想(北京)有限公司 电子装置、穿戴式设备和信息处理方法
US9763628B2 (en) * 2014-12-31 2017-09-19 Immersion Corporation Systems and methods for providing enhanced haptic feedback
CN112150985B (zh) * 2015-01-07 2023-04-18 三星电子株式会社 可弯曲用户终端装置及其显示方法
KR102341879B1 (ko) * 2015-01-14 2021-12-23 삼성디스플레이 주식회사 폴더블 표시장치
KR20160089164A (ko) * 2015-01-19 2016-07-27 삼성전자주식회사 플렉서블 디바이스의 디스플레이의 형상을 제어하는 방법 및 플렉서블 디바이스
KR20160090981A (ko) * 2015-01-22 2016-08-02 삼성디스플레이 주식회사 표시 장치 및 표시 장치의 윈도우 보호 방법
SG11201706527QA (en) 2015-02-20 2017-09-28 Ultrahaptics Ip Ltd Algorithm improvements in a haptic system
KR102319466B1 (ko) * 2015-02-25 2021-10-29 삼성디스플레이 주식회사 표시장치 및 이를 이용한 표시장치의 구동방법
KR102113201B1 (ko) * 2015-02-27 2020-05-20 삼성전자주식회사 기능 실행 방법 및 이를 지원하는 전자 장치
CN105988577A (zh) 2015-02-28 2016-10-05 北京智谷睿拓技术服务有限公司 基于柔性器件的交互方法、交互装置及用户设备
KR102354505B1 (ko) * 2015-03-03 2022-01-21 삼성디스플레이 주식회사 착용형 표시 장치
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
CA2923867C (en) 2015-03-17 2021-07-27 Roel Vertegaal Haptic rendering for a flexible computing device
KR102287583B1 (ko) * 2015-04-08 2021-08-09 삼성디스플레이 주식회사 표시 장치
KR102367252B1 (ko) * 2015-04-16 2022-02-25 삼성디스플레이 주식회사 표시 장치
AU2016100399B4 (en) 2015-04-17 2017-02-02 Apple Inc. Contracting and elongating materials for providing input and output for an electronic device
KR102274908B1 (ko) * 2015-04-30 2021-07-08 엘지디스플레이 주식회사 햅틱 구동 장치 및 햅틱 기능을 갖는 전자 기기
CN206322622U (zh) 2015-05-13 2017-07-11 苹果公司 电子装置和键机构
CN108064410B (zh) 2015-05-13 2020-05-05 苹果公司 用于电子设备的键盘
US9997304B2 (en) 2015-05-13 2018-06-12 Apple Inc. Uniform illumination of keys
US10424446B2 (en) 2015-05-13 2019-09-24 Apple Inc. Keyboard assemblies having reduced thickness and method of forming keyboard assemblies
US9934915B2 (en) 2015-06-10 2018-04-03 Apple Inc. Reduced layer keyboard stack-up
US11163362B2 (en) 2015-06-26 2021-11-02 Microsoft Technology Licensing, Llc Passive haptics as reference for active haptics
US10268831B2 (en) * 2015-07-08 2019-04-23 International Business Machines Corporation Self-protecting device
KR102378357B1 (ko) * 2015-08-24 2022-03-25 삼성디스플레이 주식회사 폴딩 가능한 디스플레이 장치 및 그 운용방법
US10566888B2 (en) 2015-09-08 2020-02-18 Apple Inc. Linear actuators for use in electronic devices
EP3144774A1 (en) * 2015-09-15 2017-03-22 Thomson Licensing Methods and apparatus of transmitting a rotation angle information to a set of actuators associated with a surface
US10365736B2 (en) * 2015-09-15 2019-07-30 Visteon Global Technologies, Inc. Morphing pad, system and method for implementing a morphing pad
KR102483379B1 (ko) * 2015-09-21 2023-01-02 삼성디스플레이 주식회사 표시장치
US9971084B2 (en) 2015-09-28 2018-05-15 Apple Inc. Illumination structure for uniform illumination of keys
US10664053B2 (en) 2015-09-30 2020-05-26 Apple Inc. Multi-transducer tactile user interface for electronic devices
USD804443S1 (en) * 2015-10-02 2017-12-05 Samsung Electronics Co., Ltd. Mobile terminal
KR102423447B1 (ko) * 2015-10-22 2022-07-21 삼성전자 주식회사 벤디드 디스플레이를 구비한 전자 장치 및 그 제어 방법
US10152125B2 (en) 2015-11-20 2018-12-11 Immersion Corporation Haptically enabled flexible devices
US9849379B2 (en) * 2015-11-25 2017-12-26 Immersion Corporation Haptic peripheral having a deformable substrate configured for amplified deformation
US9895607B2 (en) * 2015-12-15 2018-02-20 Igt Canada Solutions Ulc Haptic feedback on a gaming terminal display
US9875625B2 (en) 2015-12-18 2018-01-23 Immersion Corporation Systems and methods for multifunction haptic output devices
CN107209591B (zh) * 2015-12-29 2020-11-24 深圳市柔宇科技有限公司 中控系统及具有该中控系统的汽车
US20170192457A1 (en) * 2015-12-31 2017-07-06 AAC Technologies Pte. Ltd. Touch panle, haptics touch display using same, and manufacturing method for making same
KR20170081401A (ko) * 2016-01-04 2017-07-12 삼성전자주식회사 전자 장치 및 그의 동작 방법
KR102530469B1 (ko) * 2016-01-08 2023-05-09 삼성전자주식회사 전자 장치 및 이의 제어 방법
KR102422974B1 (ko) * 2016-01-15 2022-07-21 한국전자통신연구원 촉감과 온도를 동시에 제공하는 하이브리드 디스플레이 제어 장치 및 방법
KR102462941B1 (ko) 2016-01-26 2022-11-03 삼성디스플레이 주식회사 표시 장치
US10039080B2 (en) 2016-03-04 2018-07-31 Apple Inc. Situationally-aware alerts
CN105809003B (zh) * 2016-03-10 2018-03-27 广东欧珀移动通信有限公司 一种指纹识别的终端屏幕解锁方法及终端
CN105740689B (zh) 2016-03-14 2017-11-07 广东欧珀移动通信有限公司 一种解锁控制方法及终端设备
US20170269687A1 (en) * 2016-03-17 2017-09-21 Google Inc. Methods and apparatus to provide haptic feedback for computing devices
US10268272B2 (en) 2016-03-31 2019-04-23 Apple Inc. Dampening mechanical modes of a haptic actuator using a delay
EP3242143B1 (en) * 2016-05-02 2023-03-01 Rohde & Schwarz GmbH & Co. KG Measurement apparatus
US10585480B1 (en) 2016-05-10 2020-03-10 Apple Inc. Electronic device with an input device having a haptic engine
KR102492732B1 (ko) * 2016-06-10 2023-01-27 삼성디스플레이 주식회사 표시 장치
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201670737A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
US10401962B2 (en) * 2016-06-21 2019-09-03 Immersion Corporation Haptically enabled overlay for a pressure sensitive surface
KR102460466B1 (ko) * 2016-07-06 2022-10-28 삼성전자주식회사 플렉서블 디스플레이를 포함하는 접철식 전자 장치
KR102359245B1 (ko) * 2016-07-08 2022-02-04 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기
CN106227634B (zh) 2016-07-08 2017-11-14 广东欧珀移动通信有限公司 一种充电提醒的方法、装置以及终端
US10353485B1 (en) 2016-07-27 2019-07-16 Apple Inc. Multifunction input device with an embedded capacitive sensing layer
JP1583195S (ko) * 2016-07-27 2017-08-07
CN106293211A (zh) * 2016-08-01 2017-01-04 京东方科技集团股份有限公司 触控盖板和触控显示装置
US9921609B2 (en) 2016-08-02 2018-03-20 Immersion Corporation Systems and methods for deformation and haptic effects
US10268275B2 (en) 2016-08-03 2019-04-23 Ultrahaptics Ip Ltd Three-dimensional perceptions in haptic systems
US10416771B2 (en) 2016-08-03 2019-09-17 Apple Inc. Haptic output system for user input surface
US10115544B2 (en) 2016-08-08 2018-10-30 Apple Inc. Singulated keyboard assemblies and methods for assembling a keyboard
US10755877B1 (en) 2016-08-29 2020-08-25 Apple Inc. Keyboard for an electronic device
US10109162B2 (en) 2016-09-01 2018-10-23 Immersion Corporation Haptic effect enabled system using fluid
US9916003B1 (en) * 2016-09-02 2018-03-13 Microsoft Technology Licensing, Llc 3D haptics for interactive computer systems
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
US10725544B1 (en) 2016-09-09 2020-07-28 Apple Inc. Pencil haptics
US10268273B1 (en) * 2016-09-09 2019-04-23 Apple Inc. Stylus with multiple inputs
US11500538B2 (en) 2016-09-13 2022-11-15 Apple Inc. Keyless keyboard with force sensing and haptic feedback
US9799279B1 (en) 2016-09-15 2017-10-24 Essential Products, Inc. Electronic display with a relief
US10268288B1 (en) 2016-09-20 2019-04-23 Apple Inc. Stiffness rendering for a pencil
US10261586B2 (en) 2016-10-11 2019-04-16 Immersion Corporation Systems and methods for providing electrostatic haptic effects via a wearable or handheld device
DE102016224838A1 (de) * 2016-12-13 2018-06-14 Zf Friedrichshafen Ag Bedienvorrichtung zum Auswählen zumindest einer Getriebestufe eines Fahrzeugs, Fahrzeug mit einer Bedienvorrichtung und Verfahren zum Betreiben einer Bedienvorrichtung
CN106598391B (zh) * 2016-12-13 2019-02-01 珠海格力电器股份有限公司 一种移动终端的盲操实现方法和装置
EP3564804A1 (en) * 2016-12-29 2019-11-06 Shenzhen Royole Technologies Co., Ltd. Smart terminal and control method therefor
JP6715192B2 (ja) 2017-01-06 2020-07-01 任天堂株式会社 ゲームシステム、ゲームプログラム、情報処理装置およびゲーム制御方法
CN206412029U (zh) 2017-01-25 2017-08-15 合肥鑫晟光电科技有限公司 一种膜状结构及柔性显示装置
JP7043171B2 (ja) * 2017-01-25 2022-03-29 株式会社ジャパンディスプレイ 表示装置
CN106910427B (zh) * 2017-02-23 2019-11-22 武汉华星光电技术有限公司 一种显示器及其柔性显示屏的平展方法
US10437359B1 (en) 2017-02-28 2019-10-08 Apple Inc. Stylus with external magnetic influence
WO2018160199A1 (en) * 2017-03-03 2018-09-07 Google Llc Systems and methods for detecting improper implementation of presentation of content items by applications executing on client devices
CN106843506A (zh) * 2017-03-21 2017-06-13 淮阴师范学院 一种纹理触觉再现接口装置
US10290152B2 (en) * 2017-04-03 2019-05-14 Microsoft Technology Licensing, Llc Virtual object user interface display
US9983678B1 (en) * 2017-05-01 2018-05-29 Immersion Corporation User interface device configured to selectively hide components from tactile perception
US10396272B2 (en) * 2017-05-04 2019-08-27 International Business Machines Corporation Display distortion for alignment with a user gaze direction
CN108874243B (zh) 2017-05-11 2021-11-12 京东方科技集团股份有限公司 触控面板、电子装置及其驱动方法
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
CN107193420B (zh) * 2017-05-25 2020-06-02 京东方科技集团股份有限公司 一种触控器件及制备触控器件的方法
US10627906B2 (en) 2017-06-02 2020-04-21 International Business Machines Corporation Tactile display using microscale electrostatic accelerators
US10353506B2 (en) * 2017-06-16 2019-07-16 Apple Inc. Dual resistive strain and pressure sensor for force touch
EP3825825B1 (en) * 2017-06-28 2023-03-01 Telefonaktiebolaget LM Ericsson (publ) A method for and a communication device adapted to modify the shape of the device
US10572011B2 (en) * 2017-06-30 2020-02-25 Microsoft Technology Licensing, Llc Haptic feedback system
CN107291296A (zh) * 2017-07-03 2017-10-24 京东方科技集团股份有限公司 触控感应结构、工作方法、触控基板、制作方法、触控显示装置
US10622538B2 (en) 2017-07-18 2020-04-14 Apple Inc. Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body
US10775850B2 (en) 2017-07-26 2020-09-15 Apple Inc. Computer with keyboard
US10768747B2 (en) 2017-08-31 2020-09-08 Apple Inc. Haptic realignment cues for touch-input displays
CN107770307B (zh) * 2017-09-06 2019-10-22 深圳市金立通信设备有限公司 一种移动终端
US11054932B2 (en) 2017-09-06 2021-07-06 Apple Inc. Electronic device having a touch sensor, force sensor, and haptic actuator in an integrated module
KR102409993B1 (ko) * 2017-09-13 2022-06-15 엘지디스플레이 주식회사 접촉 감응 소자 및 이를 포함하는 표시 장치
US10509473B2 (en) * 2017-09-21 2019-12-17 Paypal, Inc. Providing haptic feedback on a screen
US10768738B1 (en) 2017-09-27 2020-09-08 Apple Inc. Electronic device having a haptic actuator with magnetic augmentation
CN109584719A (zh) * 2017-09-28 2019-04-05 京东方科技集团股份有限公司 柔性显示模组及制备方法与弯折方法、电子设备
US10871847B2 (en) * 2017-09-29 2020-12-22 Apple Inc. Sensing force and press location in absence of touch information
WO2019070249A1 (en) 2017-10-04 2019-04-11 Hewlett-Packard Development Company, L.P. USER INTERFACES WITH STRAIN SENSORS
USD893475S1 (en) * 2017-10-11 2020-08-18 Samsung Display Co., Ltd. Display device
USD885381S1 (en) * 2017-10-11 2020-05-26 Samsung Display Co., Ltd. Display device
JP7155505B2 (ja) 2017-10-23 2022-10-19 富士フイルムビジネスイノベーション株式会社 情報処理装置、プログラム及び制御方法
US10866697B2 (en) * 2017-10-24 2020-12-15 Microchip Technology Incorporated Touch-sensitive user-interface including configurable virtual widgets
USD891427S1 (en) * 2017-11-13 2020-07-28 Samsung Display Co., Ltd. Display device
WO2019095216A1 (zh) * 2017-11-16 2019-05-23 深圳市柔宇科技有限公司 一种解锁方法、装置、待解锁设备以及终端设备
US11531395B2 (en) 2017-11-26 2022-12-20 Ultrahaptics Ip Ltd Haptic effects from focused acoustic fields
KR102490861B1 (ko) * 2017-12-14 2023-01-19 엘지디스플레이 주식회사 백 플레이트 및 이를 포함하는 폴더블 표시장치
US10440848B2 (en) * 2017-12-20 2019-10-08 Immersion Corporation Conformable display with linear actuator
US10948370B2 (en) * 2018-04-10 2021-03-16 The Boeing Company Haptic pin field sensor and manipulator
US10911861B2 (en) 2018-05-02 2021-02-02 Ultrahaptics Ip Ltd Blocking plate structure for improved acoustic transmission efficiency
JP6765394B2 (ja) * 2018-05-22 2020-10-07 京セラ株式会社 測定装置及び測定装置の制御方法
JP6926029B2 (ja) * 2018-05-23 2021-08-25 京セラ株式会社 構造体及び触感呈示装置
US11353967B2 (en) 2018-05-31 2022-06-07 Arkh Litho Holdings, LLC Interacting with a virtual environment using a pointing controller
KR102255793B1 (ko) * 2018-06-14 2021-05-25 삼성전자주식회사 디스플레이 영역의 크기 변경이 가능한 플렉시블 디스플레이를 포함하는 전자 장치 및 그 제어 방법
US10585483B2 (en) * 2018-06-15 2020-03-10 Immersion Corporation Haptic actuator assembly with a pre-load device
US20190384394A1 (en) * 2018-06-15 2019-12-19 Immersion Corporation Method and apparatus for providing resistive feedback
US10748389B2 (en) * 2018-06-15 2020-08-18 Immersion Corporation Damping for a haptic actuator
US10942571B2 (en) 2018-06-29 2021-03-09 Apple Inc. Laptop computing device with discrete haptic regions
KR102072991B1 (ko) * 2018-07-03 2020-02-04 서울대학교산학협력단 구조색을 이용한 무선 센서 및 그의 제조방법
US10976820B2 (en) * 2018-07-12 2021-04-13 Microsoft Technology Licensing, Llc Natural interactions with virtual objects and data through touch
US11360558B2 (en) * 2018-07-17 2022-06-14 Apple Inc. Computer systems with finger devices
DE102018213384A1 (de) * 2018-08-09 2020-02-13 Robert Bosch Gmbh Berührungsempfindliche Oberfläche mit haptischen Elementen
US10936071B2 (en) 2018-08-30 2021-03-02 Apple Inc. Wearable electronic device with haptic rotatable input
CN109324714A (zh) * 2018-09-13 2019-02-12 武汉华星光电半导体显示技术有限公司 Oled触控显示面板
US10613678B1 (en) 2018-09-17 2020-04-07 Apple Inc. Input device with haptic feedback
JP6472109B1 (ja) * 2018-09-20 2019-02-20 株式会社ネットアプリ タッチパネルシステム及び記録媒体
US10966007B1 (en) 2018-09-25 2021-03-30 Apple Inc. Haptic output system
US10599223B1 (en) 2018-09-28 2020-03-24 Apple Inc. Button providing force sensing and/or haptic output
US10691211B2 (en) 2018-09-28 2020-06-23 Apple Inc. Button providing force sensing and/or haptic output
US20200159326A1 (en) * 2018-11-21 2020-05-21 Immersion Corporation Systems and methods for providing haptic feedback related to lifting or manipulating a virtual object
CN109669612A (zh) * 2018-11-29 2019-04-23 惠州Tcl移动通信有限公司 移动终端控制方法、装置、移动终端及存储介质
JP2020087207A (ja) * 2018-11-29 2020-06-04 株式会社デンソー 入力装置
KR102562126B1 (ko) 2019-01-04 2023-08-02 삼성전자주식회사 폴더블 디스플레이를 갖는 전자 장치 및 그 제어 방법
US11068688B2 (en) * 2019-01-04 2021-07-20 Pierre T. Gandolfo Multi-function ultrasonic sensor controller with fingerprint sensing, haptic feedback, movement recognition, 3D positioning and remote power transfer capabilities
CN113396078B (zh) * 2019-01-31 2024-03-08 贝洱海拉温控系统有限公司 用于车辆的操作装置
AU2020226861A1 (en) 2019-02-18 2021-10-14 Arkh Litho Holdings, LLC Interacting with a smart device using a pointing controller
CN109992189B (zh) * 2019-02-22 2021-05-11 华为技术有限公司 屏幕控制方法、电子设备及存储介质
US10754428B1 (en) * 2019-02-25 2020-08-25 Facebook Technologies, Llc Systems, methods, and devices for audio-tactile mapping
US11027194B2 (en) * 2019-03-01 2021-06-08 Sony Interactive Entertainment Inc. Force feedback to improve gameplay
KR20200109737A (ko) 2019-03-14 2020-09-23 삼성전자주식회사 햅틱 액츄에이터를 포함하는 전자 장치
US10852833B2 (en) * 2019-03-29 2020-12-01 Google Llc Global and local haptic system and mobile devices including the same
US11842517B2 (en) 2019-04-12 2023-12-12 Ultrahaptics Ip Ltd Using iterative 3D-model fitting for domain adaptation of a hand-pose-estimation neural network
KR20200126480A (ko) * 2019-04-29 2020-11-09 삼성디스플레이 주식회사 폴딩 부재 및 이를 포함하는 표시 장치
CN110209302B (zh) * 2019-05-31 2024-02-20 武汉天马微电子有限公司 一种显示面板、显示装置和显示面板的使用方法
DE112020003221T5 (de) * 2019-07-05 2022-04-21 Sony Group Corporation Informationsverarbeitungsvorrichtung, Informationsverarbeitungsverfahren und Programm
US10650163B2 (en) * 2019-08-14 2020-05-12 BehavioSec Inc Bot detection and access grant or denial based on bot identified
US11380470B2 (en) 2019-09-24 2022-07-05 Apple Inc. Methods to control force in reluctance actuators based on flux related parameters
AU2020352826A1 (en) 2019-09-24 2022-05-12 Arkh, Inc. Smart ring
EP4036690A4 (en) * 2019-09-25 2022-11-09 Sony Group Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, SERVER DEVICE AND PROGRAM
KR20210038108A (ko) * 2019-09-30 2021-04-07 삼성전자주식회사 햅틱 액츄에이터를 포함하는 전자 장치
DE102019126754A1 (de) * 2019-10-04 2021-04-08 Audi Ag Gebogenes OLED-Display mit Bedienelement in einem Faltbereich
CN110955368B (zh) * 2019-11-06 2022-04-29 维沃移动通信有限公司 屏幕形变控制方法和电子设备
US12009576B2 (en) 2019-12-03 2024-06-11 Apple Inc. Handheld electronic device
CN110728916B (zh) * 2019-12-05 2022-03-01 京东方科技集团股份有限公司 一种折叠屏及显示装置
US11715453B2 (en) 2019-12-25 2023-08-01 Ultraleap Limited Acoustic transducer structures
CN111176455B (zh) * 2020-01-07 2021-01-19 北京航空航天大学 一种温度和纹理一致性呈现的柔性触觉反馈装置
WO2021154814A1 (en) 2020-01-28 2021-08-05 Immersion Corporation Systems, devices, and methods for providing localized haptic effects
US11755111B2 (en) 2020-03-16 2023-09-12 Arkh, Inc. Spatially aware computing hub and environment
US11093005B1 (en) 2020-05-05 2021-08-17 International Business Machines Corporation Virtual reality rollable display device
KR102324562B1 (ko) 2020-05-07 2021-11-11 삼성전자주식회사 플렉서블 디스플레이를 포함하는 전자 장치
KR20220164055A (ko) * 2020-05-13 2022-12-12 애플 인크. 유리 쉘을 갖는 웨어러블 전자 디바이스
US11024135B1 (en) 2020-06-17 2021-06-01 Apple Inc. Portable electronic device having a haptic button assembly
US11816267B2 (en) 2020-06-23 2023-11-14 Ultraleap Limited Features of airborne ultrasonic fields
US11886639B2 (en) 2020-09-17 2024-01-30 Ultraleap Limited Ultrahapticons
US11455039B2 (en) * 2020-09-17 2022-09-27 Rockwell Collins, Inc. Advanced haptics in touchscreen avionics lower level device simulators
US11460293B2 (en) * 2020-09-25 2022-10-04 Apple Inc. Surface quality sensing using self-mixing interferometry
USD1009861S1 (en) 2020-09-25 2024-01-02 Arkh, Inc. Smart ring
CN112331080A (zh) * 2020-11-10 2021-02-05 四川长虹电器股份有限公司 一种可卷曲柔性屏
US11819999B2 (en) * 2021-01-27 2023-11-21 Toyota Research Institute, Inc. Input devices having a deformable membrane and methods of using the same
US11977683B2 (en) 2021-03-12 2024-05-07 Apple Inc. Modular systems configured to provide localized haptic feedback using inertial actuators
CN113093948B (zh) * 2021-04-28 2024-03-01 东南大学 一种柔性触觉式移动机器人操作输入装置及交互方法
CN113687713B (zh) * 2021-07-14 2023-07-18 北京航空航天大学 一种纹理呈现装置及其制造方法
US11809631B2 (en) 2021-09-21 2023-11-07 Apple Inc. Reluctance haptic engine for an electronic device
DE102021005263A1 (de) 2021-10-21 2023-04-27 Giesecke+Devrient Mobile Security Gmbh Kartenförmiger Datenträger für sehbehinderte Personen und Verfahren zum Betreiben eines kartenförmigen Datenträgers
US11954256B2 (en) 2021-12-17 2024-04-09 Google Llc Haptic interface for computing devices
US11921929B2 (en) * 2022-02-24 2024-03-05 Electronics And Telecommunications Research Institute Stereoscopic surface display device and operation method of the same
WO2023179879A1 (en) * 2022-03-25 2023-09-28 Telefonaktiebolaget Lm Ericsson (Publ) Haptic profiles for electronic devices
CN114706496B (zh) * 2022-04-19 2023-08-01 业成科技（成都）有限公司 触控显示模组、电子设备和监控方法
US11907427B1 (en) * 2022-08-31 2024-02-20 Fca Us Llc Display with localized haptic response

Family Cites Families (144)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4330730A (en) 1980-03-27 1982-05-18 Eastman Kodak Company Wound piezoelectric polymer flexure devices
US5631861A (en) 1990-02-02 1997-05-20 Virtual Technologies, Inc. Force feedback and texture simulating interface device
DE4012267A1 (de) 1990-03-13 1991-11-28 Joerg Fricke Geraet zur tastbaren darstellung von information
US5717423A (en) 1994-12-30 1998-02-10 Merltec Innovative Research Three-dimensional display
US6160540A (en) 1998-01-12 2000-12-12 Xerox Company Zoomorphic computer user interface
US7800592B2 (en) 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
JP2000148393A (ja) 1998-11-06 2000-05-26 Minolta Co Ltd 視触覚情報伝達装置
US20040217877A1 (en) 1999-05-04 2004-11-04 William Kokonaski Flexible electronic display and wireless communication system
CA2271416A1 (en) 1999-05-10 2000-11-10 Vincent Hayward Electro-mechanical transducer suitable for tactile display and article conveyance
US7561142B2 (en) 1999-07-01 2009-07-14 Immersion Corporation Vibrotactile haptic feedback devices
US6337678B1 (en) 1999-07-21 2002-01-08 Tactiva Incorporated Force feedback computer input and output device with coordinated haptic elements
US6496200B1 (en) 1999-11-02 2002-12-17 Interval Research Corp. Flexible variation of haptic interface resolution
US6509892B1 (en) * 1999-12-17 2003-01-21 International Business Machines Corporation Method, system and program for topographical interfacing
AU2001259203A1 (en) * 2000-04-28 2001-11-12 Texas Tech University Haptic virtual environments
JP2003534620A (ja) * 2000-05-24 2003-11-18 イマージョン コーポレイション 電気活性ポリマーを利用する触覚装置及び触覚方法
DE10046099A1 (de) * 2000-09-18 2002-04-04 Siemens Ag Berührungssensitive Anzeige mit taktiler Rückkopplung
US6303008B1 (en) 2000-09-21 2001-10-16 Delphi Technologies, Inc. Rotating film carrier and aperture for precision deposition of sputtered alloy films
JP2002157087A (ja) 2000-11-20 2002-05-31 Sony Corp 入力装置
WO2002047363A2 (en) 2000-12-05 2002-06-13 E Ink Corporation Portable eclectronic apparatus with additional electro-optical display
US20020108439A1 (en) 2001-02-14 2002-08-15 Whitehead Dennis D. Systems and methods for displaying status of consumable resource
US6819316B2 (en) 2001-04-17 2004-11-16 3M Innovative Properties Company Flexible capacitive touch sensor
US7409441B2 (en) * 2001-05-18 2008-08-05 Sony Computer Entertainment Inc. Display apparatus for accessing desired web site
JP4934924B2 (ja) 2001-08-09 2012-05-23 パナソニック株式会社 強誘電体アクチュエータ素子およびその製造方法
US7254775B2 (en) 2001-10-03 2007-08-07 3M Innovative Properties Company Touch panel system and method for distinguishing multiple touch inputs
US6819304B2 (en) 2001-10-11 2004-11-16 International Business Machines Corporation Adjustable display device with display adjustment function and method therefor
AU2002348831A1 (en) 2001-12-12 2003-06-23 Koninklijke Philips Electronics N.V. Display system with tactile guidance
US7352356B2 (en) 2001-12-13 2008-04-01 United States Of America Refreshable scanning tactile graphic display for localized sensory stimulation
JP3824529B2 (ja) 2001-12-21 2006-09-20 アルプス電気株式会社 入力装置
US7009595B2 (en) 2002-01-03 2006-03-07 United States Of America Extended refreshable tactile graphic array for scanned tactile display
JP2003288158A (ja) 2002-01-28 2003-10-10 Sony Corp タクタイル・フィードバック機能を持つ携帯型機器
JP2003280546A (ja) 2002-03-27 2003-10-02 Matsushita Electric Ind Co Ltd 自己変形型フレキシブルディスプレイ及びそれを用いた情報処理端末
JP4447823B2 (ja) * 2002-06-14 2010-04-07 ソニー株式会社 携帯情報機器
JP2004029999A (ja) * 2002-06-24 2004-01-29 Matsushita Electric Ind Co Ltd 力触覚ディスプレイハンドおよびその製造方法
EP1376316A1 (en) 2002-06-26 2004-01-02 BRITISH TELECOMMUNICATIONS public limited company Haptic communications
JP2004071765A (ja) * 2002-08-05 2004-03-04 Sony Corp 電気粘性流体装置及び電子機器
US7161590B2 (en) 2002-09-04 2007-01-09 John James Daniels Thin, lightweight, flexible, bright, wireless display
US7138985B2 (en) 2002-09-25 2006-11-21 Ui Evolution, Inc. Tactilely enhanced visual image display
US6940485B2 (en) 2003-01-15 2005-09-06 Xerox Corporation Flexible micron-thin display device
US6964201B2 (en) 2003-02-25 2005-11-15 Palo Alto Research Center Incorporated Large dimension, flexible piezoelectric ceramic tapes
DE10324579A1 (de) 2003-05-30 2004-12-16 Daimlerchrysler Ag Bedienvorrichtung
WO2005020190A2 (en) 2003-08-11 2005-03-03 Virtualblue, Llc Rectractable flexible digital display apparatus
DE10340188A1 (de) * 2003-09-01 2005-04-07 Siemens Ag Bildschirm mit einer berührungsempfindlichen Bedienoberfläche zur Befehlseingabe
US7245292B1 (en) 2003-09-16 2007-07-17 United States Of America As Represented By The Secretary Of The Navy Apparatus and method for incorporating tactile control and tactile feedback into a human-machine interface
US20080297878A1 (en) 2003-10-01 2008-12-04 Board Of Regents, The University Of Texas System Compositions, methods and systems for making and using electronic paper
JP4341360B2 (ja) 2003-10-03 2009-10-07 日本ビクター株式会社 表示装置
JP2005182687A (ja) * 2003-12-24 2005-07-07 Canon Inc 表示と入力の少なくとも一方を行なうための装置
JP2006011646A (ja) 2004-06-23 2006-01-12 Pioneer Electronic Corp 触覚表示装置及び触覚表示機能付タッチパネル装置
US8589156B2 (en) * 2004-07-12 2013-11-19 Hewlett-Packard Development Company, L.P. Allocation of speech recognition tasks and combination of results thereof
JP2006053678A (ja) * 2004-08-10 2006-02-23 Toshiba Corp ユニバーサルヒューマンインタフェースを有する電子機器
JP2006154380A (ja) 2004-11-30 2006-06-15 Victor Co Of Japan Ltd 表示装置
KR100590576B1 (ko) * 2004-12-28 2006-11-23 삼성전자주식회사 영상의 촉각 제공 장치 및 방법
US7382357B2 (en) 2005-04-25 2008-06-03 Avago Technologies Ecbu Ip Pte Ltd User interface incorporating emulated hard keys
EP1920408A2 (en) 2005-08-02 2008-05-14 Ipifini, Inc. Input device having multifunctional keys
US7625287B2 (en) * 2005-10-05 2009-12-01 Nintendo Co., Ltd. Driving game steering wheel simulation method and apparatus
JP2007121765A (ja) 2005-10-28 2007-05-17 Pioneer Electronic Corp 表示制御装置、表示方法、表示プログラムおよび記録媒体
US7639237B2 (en) 2006-03-03 2009-12-29 Perkins Michael T Roll-out touch screen support system (ROTS3)
US20080035306A1 (en) * 2006-08-08 2008-02-14 White John M Heating and cooling of substrate support
TWI306051B (en) * 2006-12-14 2009-02-11 Ind Tech Res Inst Robotic apparatus with surface information displaying and interaction capability
US7924362B2 (en) 2007-04-20 2011-04-12 Via Optronics, Llc Bezelless display system having a display assembly with an overlay including a transparent section optically bonded to a display region with an optical layer that includes a pre-cured adhesive preform
US20080266273A1 (en) 2007-04-24 2008-10-30 White Electronic Designs Corp. Interactive display system
US9823833B2 (en) 2007-06-05 2017-11-21 Immersion Corporation Method and apparatus for haptic enabled flexible touch sensitive surface
US20090002328A1 (en) * 2007-06-26 2009-01-01 Immersion Corporation, A Delaware Corporation Method and apparatus for multi-touch tactile touch panel actuator mechanisms
US20090015560A1 (en) 2007-07-13 2009-01-15 Motorola, Inc. Method and apparatus for controlling a display of a device
JP2009098899A (ja) * 2007-10-16 2009-05-07 Toyota Motor Corp 情報提示装置
US8232976B2 (en) * 2010-03-25 2012-07-31 Panasonic Corporation Of North America Physically reconfigurable input and output systems and methods
US20090115734A1 (en) * 2007-11-02 2009-05-07 Sony Ericsson Mobile Communications Ab Perceivable feedback
ATE495485T1 (de) 2007-11-16 2011-01-15 Research In Motion Ltd Touchscreen für ein elektronisches gerät
US10488926B2 (en) * 2007-11-21 2019-11-26 Immersion Corporation Method and apparatus for providing a fixed relief touch screen with locating features using deformable haptic surfaces
US8004501B2 (en) * 2008-01-21 2011-08-23 Sony Computer Entertainment America Llc Hand-held device with touchscreen and digital tactile pixels
US20100250071A1 (en) * 2008-03-28 2010-09-30 Denso International America, Inc. Dual function touch switch with haptic feedback
US9829977B2 (en) * 2008-04-02 2017-11-28 Immersion Corporation Method and apparatus for providing multi-point haptic feedback texture systems
US8174372B2 (en) 2008-06-26 2012-05-08 Immersion Corporation Providing haptic feedback on a touch surface
US20100013613A1 (en) * 2008-07-08 2010-01-21 Jonathan Samuel Weston Haptic feedback projection system
EP2723107B1 (en) * 2008-07-15 2019-05-15 Immersion Corporation Systems and methods for transmitting haptic messages
US8947320B2 (en) * 2008-09-08 2015-02-03 Qualcomm Incorporated Method for indicating location and direction of a graphical user interface element
US8836611B2 (en) 2008-09-08 2014-09-16 Qualcomm Incorporated Multi-panel device with configurable interface
US8427433B2 (en) 2008-10-17 2013-04-23 Honeywell International Inc. Tactile-feedback touch screen
KR101521219B1 (ko) * 2008-11-10 2015-05-18 엘지전자 주식회사 플렉서블 디스플레이를 이용하는 휴대 단말기 및 그 제어방법
US20100117809A1 (en) 2008-11-11 2010-05-13 Motorola Inc. Display module with piezoelectric haptics
US8368658B2 (en) * 2008-12-02 2013-02-05 At&T Mobility Ii Llc Automatic soft key adaptation with left-right hand edge sensing
US9600070B2 (en) * 2008-12-22 2017-03-21 Apple Inc. User interface having changeable topography
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US8345013B2 (en) * 2009-01-14 2013-01-01 Immersion Corporation Method and apparatus for generating haptic feedback from plasma actuation
CN102334089A (zh) * 2009-01-21 2012-01-25 拜耳材料科技公司 用于触觉反馈设备的电活性聚合物换能器
US9696803B2 (en) 2009-03-12 2017-07-04 Immersion Corporation Systems and methods for friction displays and additional haptic effects
US9746923B2 (en) 2009-03-12 2017-08-29 Immersion Corporation Systems and methods for providing features in a friction display wherein a haptic effect is configured to vary the coefficient of friction
EP2406701B1 (en) 2009-03-12 2018-08-22 Immersion Corporation System and method for using multiple actuators to realize textures
KR101973918B1 (ko) * 2009-03-12 2019-04-29 임머숀 코퍼레이션 마찰 디스플레이에서 특징부를 제공하는 시스템 및 방법
WO2010105011A1 (en) 2009-03-12 2010-09-16 Immersion Corporation Systems and methods for friction displays and additional haptic effects
CN102349038B (zh) * 2009-03-12 2016-08-24 意美森公司 用于纹理引擎的系统和方法
US9927873B2 (en) 2009-03-12 2018-03-27 Immersion Corporation Systems and methods for using textures in graphical user interface widgets
US8686951B2 (en) 2009-03-18 2014-04-01 HJ Laboratories, LLC Providing an elevated and texturized display in an electronic device
US7864517B2 (en) * 2009-03-30 2011-01-04 Microsoft Corporation Mobile computer device binding feedback
JP5658235B2 (ja) 2009-05-07 2015-01-21 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 触覚フィードバックによる形状変化ディスプレイの形成方法及び装置
JP2010282259A (ja) * 2009-06-02 2010-12-16 Panasonic Corp 収音機器および映像表示機器
TW201101137A (en) * 2009-06-29 2011-01-01 J Touch Corp Touch panel with matrix type tactile feedback
CA2761700C (en) * 2009-07-24 2014-12-02 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP5527797B2 (ja) * 2009-08-06 2014-06-25 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 電子機器
US8390594B2 (en) * 2009-08-18 2013-03-05 Immersion Corporation Haptic feedback using composite piezoelectric actuator
EP2315186B1 (en) * 2009-10-26 2016-09-21 Lg Electronics Inc. Mobile terminal with flexible body for inputting a signal upon bending said body
US8902050B2 (en) 2009-10-29 2014-12-02 Immersion Corporation Systems and methods for haptic augmentation of voice-to-text conversion
WO2011062910A1 (en) 2009-11-17 2011-05-26 Immersion Corporation Systems and methods for a friction rotary device for haptic feedback
WO2011087816A1 (en) * 2009-12-21 2011-07-21 Tactus Technology User interface system
US9436280B2 (en) * 2010-01-07 2016-09-06 Qualcomm Incorporated Simulation of three-dimensional touch sensation using haptics
US20110216013A1 (en) * 2010-03-05 2011-09-08 Sony Ericsson Mobile Communications Ab Touch-sensitive input device, touch screen device, mobile device and method for operating a touch-sensitive input device
JP2011221676A (ja) * 2010-04-07 2011-11-04 Sony Corp 情報提示装置、触覚提示方法及びプログラム
US9417695B2 (en) * 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
JP2011242386A (ja) * 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体
US8552997B2 (en) * 2010-04-23 2013-10-08 Blackberry Limited Portable electronic device including tactile touch-sensitive input device
US20110261002A1 (en) * 2010-04-27 2011-10-27 Microsoft Corporation Displaying images on solid surfaces
US8791800B2 (en) * 2010-05-12 2014-07-29 Nokia Corporation Detecting touch input and generating perceptible touch stimulus
KR101319347B1 (ko) * 2010-06-10 2013-10-16 엘지디스플레이 주식회사 터치 패널 일체형 액정 표시 장치
KR101677631B1 (ko) * 2010-06-21 2016-11-18 엘지전자 주식회사 이동 단말기 및 이에 구비되는 디스플레이 모듈의 제조방법
FR2964761B1 (fr) * 2010-09-14 2012-08-31 Thales Sa Dispositif d'interaction haptique et procede de generation d'effets haptiques et sonores
EP2456175B1 (en) * 2010-11-19 2014-01-15 BlackBerry Limited Portable electronic device including flexible display
US20120133494A1 (en) 2010-11-29 2012-05-31 Immersion Corporation Systems and Methods for Providing Programmable Deformable Surfaces
EP3863265A1 (en) * 2011-03-21 2021-08-11 Apple Inc. Electronic devices with flexible displays
US9448713B2 (en) 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
JP5134706B2 (ja) * 2011-05-16 2013-01-30 日本写真印刷株式会社 曲面タッチパネル、その製造方法及び曲面タッチパネル付表示装置
US9176535B2 (en) * 2011-06-03 2015-11-03 Microsoft Technology Licensing, Llc Flexible display flexure assembly
US9563274B2 (en) * 2011-06-10 2017-02-07 Sri International Adaptable input/output device
US20130009892A1 (en) * 2011-07-07 2013-01-10 Nokia, Inc. Methods and apparatuses for providing haptic feedback
US20130009882A1 (en) 2011-07-07 2013-01-10 Nokia Corporation Methods and apparatuses for providing haptic feedback
US20130016042A1 (en) * 2011-07-12 2013-01-17 Ville Makinen Haptic device with touch gesture interface
CN202205176U (zh) * 2011-07-21 2012-04-25 北京三五九投资有限公司 一种基于压容效应的印刷型柔性触摸显示屏
US9501179B2 (en) * 2011-08-04 2016-11-22 Atmel Corporation Touch sensor for curved or flexible surfaces
US8723824B2 (en) * 2011-09-27 2014-05-13 Apple Inc. Electronic devices with sidewall displays
US8929085B2 (en) * 2011-09-30 2015-01-06 Apple Inc. Flexible electronic devices
WO2013058716A1 (en) * 2011-10-21 2013-04-25 National University Of Singapore An array of elements forming a human-computer interface device
US9411423B2 (en) 2012-02-08 2016-08-09 Immersion Corporation Method and apparatus for haptic flex gesturing
US8711118B2 (en) * 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
JP2013196623A (ja) * 2012-03-22 2013-09-30 Sharp Corp ディスプレイ装置、ディスプレイシステム、およびディスプレイ制御方法、ならびにそのプログラム。
KR20140023066A (ko) * 2012-08-16 2014-02-26 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 피드백 제공 방법
KR102058990B1 (ko) * 2012-09-19 2019-12-24 엘지전자 주식회사 모바일 디바이스 및 그 제어 방법
US20140125471A1 (en) * 2012-11-05 2014-05-08 Advanced Input Devices, Inc. Haptic feedback systems and methods
US20140232679A1 (en) * 2013-02-17 2014-08-21 Microsoft Corporation Systems and methods to protect against inadvertant actuation of virtual buttons on touch surfaces
US9715300B2 (en) * 2013-03-04 2017-07-25 Microsoft Technology Licensing, Llc Touch screen interaction using dynamic haptic feedback
US10628025B2 (en) * 2013-03-15 2020-04-21 Apple Inc. Device, method, and graphical user interface for generating haptic feedback for user interface elements
CN105144035B (zh) 2013-04-26 2019-03-22 意美森公司 利用触觉单元阵列模拟有形用户界面交互和手势
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
KR20160019468A (ko) * 2013-06-11 2016-02-19 임머숀 코퍼레이션 압력 기반 햅틱 효과들을 위한 시스템들 및 방법들
US9729730B2 (en) 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US9639158B2 (en) * 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects

Also Published As

Publication number Publication date
EP2796983A1 (en) 2014-10-29
US9971409B2 (en) 2018-05-15
EP3462297A2 (en) 2019-04-03
CN105144035B (zh) 2019-03-22
EP2989530A4 (en) 2017-01-25
JP2014216026A (ja) 2014-11-17
CN104122996A (zh) 2014-10-29
EP2989525A4 (en) 2016-12-21
US20170285752A1 (en) 2017-10-05
US20160306427A1 (en) 2016-10-20
CN108563326A (zh) 2018-09-21
US20160216767A1 (en) 2016-07-28
EP2989525A1 (en) 2016-03-02
WO2014176528A1 (en) 2014-10-30
US20160306426A1 (en) 2016-10-20
EP3575941A1 (en) 2019-12-04
US20190204924A1 (en) 2019-07-04
US10503262B2 (en) 2019-12-10
US20180224941A1 (en) 2018-08-09
JP6670884B2 (ja) 2020-03-25
EP3462297A3 (en) 2019-07-10
KR20160003031A (ko) 2016-01-08
CN105144052A (zh) 2015-12-09
US10248210B2 (en) 2019-04-02
KR20160002941A (ko) 2016-01-08
EP2989530B1 (en) 2019-08-07
CN104122996B (zh) 2018-04-24
CN109582150A (zh) 2019-04-05
CN110069157A (zh) 2019-07-30
US9405368B2 (en) 2016-08-02
US9715281B2 (en) 2017-07-25
US9405369B2 (en) 2016-08-02
JP2018088264A (ja) 2018-06-07
JP2019197576A (ja) 2019-11-14
JP2018152103A (ja) 2018-09-27
JP6335613B2 (ja) 2018-05-30
EP2796983B1 (en) 2018-11-14
JP2016520914A (ja) 2016-07-14
JP2019050003A (ja) 2019-03-28
CN105144035A (zh) 2015-12-09
WO2014176532A1 (en) 2014-10-30
US20180246574A1 (en) 2018-08-30
CN105144052B (zh) 2019-02-15
US20140320436A1 (en) 2014-10-30
EP2989525B1 (en) 2019-09-25
EP2989530A1 (en) 2016-03-02
US20140320435A1 (en) 2014-10-30
US20140320396A1 (en) 2014-10-30
US9983676B2 (en) 2018-05-29
JP6276385B2 (ja) 2018-02-07
JP2016520915A (ja) 2016-07-14
US9335823B2 (en) 2016-05-10

Similar Documents

Publication Publication Date Title
US10248210B2 (en) Systems and methods for haptically-enabled conformed and multifaceted displays
US11360558B2 (en) Computer systems with finger devices
US10564729B2 (en) Haptic feedback using a field of view
US9878239B2 (en) Systems and methods for performing haptic conversion
US20190018491A1 (en) Systems and Methods for Impedance Coupling for Haptic Devices
KR20170069936A (ko) 위치 기반 햅틱 효과를 위한 시스템 및 방법
US10474238B2 (en) Systems and methods for virtual affective touch
EP3333674A1 (en) Systems and methods for compliance simulation with haptics
US20180011538A1 (en) Multimodal haptic effects
US20190187819A1 (en) Haptically-Enabled Peripheral Usable for Two-Dimensional and Three-Dimensional Tracking
EP3367216A1 (en) Systems and methods for virtual affective touch
US20200286298A1 (en) Systems and methods for a user interaction proxy

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application