CN103246472A - 用于触觉缩放手势的方法和设备 - Google Patents

用于触觉缩放手势的方法和设备 Download PDF

Info

Publication number
CN103246472A
CN103246472A CN2013100488909A CN201310048890A CN103246472A CN 103246472 A CN103246472 A CN 103246472A CN 2013100488909 A CN2013100488909 A CN 2013100488909A CN 201310048890 A CN201310048890 A CN 201310048890A CN 103246472 A CN103246472 A CN 103246472A
Authority
CN
China
Prior art keywords
convergent
action
gesture
sensing
divergent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013100488909A
Other languages
English (en)
Other versions
CN103246472B (zh
Inventor
R·W·休贝尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Priority to CN201810384396.2A priority Critical patent/CN108459721A/zh
Publication of CN103246472A publication Critical patent/CN103246472A/zh
Application granted granted Critical
Publication of CN103246472B publication Critical patent/CN103246472B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A63F13/235—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/24—Constructional details thereof, e.g. game controllers with detachable joystick handles
    • A63F13/245—Constructional details thereof, e.g. game controllers with detachable joystick handles specially adapted to a particular type of game, e.g. steering wheels
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04102—Flexible digitiser, i.e. constructional details for allowing the whole digitising part of a device to be flexed or rolled like a sheet of paper
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本公开涉及用于触觉缩放手势的方法和设备。一种电子交互装置，其包括具有柔性表面的用户界面，配置为感测施加到柔性表面的缩放手势的传感器，配置为响应于缩放手势生成触觉作用的触觉装置，以及与传感器和触觉装置进行信号通信的控制器。所述控制器配置为触发触觉装置以提供缩放手势的触觉确认，并且触发与缩放手势相关联的应用动作。

Description

用于触觉缩放手势的方法和设备
技术领域
本发明涉及用于触觉缩放手势（flex gesturing）的方法和设备。
背景技术
一些已知的电子显示器可以是柔性的并且能够模仿纸张的属性，例如被弯曲或滚动的能力，但是具有与用户接合的方式是有限的。用户输入可以通过耦合到柔性显示器的按钮或按键接收或者通过施加到柔性显示器的缩放手势接收。响应于缩放手势，在显示器上显示的图像的变化可以被提供作为用户输出。
发明内容
根据本发明的一个方面，提供了一种配置为通过电子交互装置提供触觉作用的系统。所述电子交互装置可以包括具有柔性表面的用户界面和配置为感测施加到柔性表面的缩放手势的传感器。所述电子交互装置可以进一步包括触觉装置和控制器。所述触觉装置可以配置为响应于所述缩放手势生成触觉作用。所述控制器可以与传感器和触觉装置进行信号通信，并且可以配置为触发所述触觉装置以提供缩放手势的触觉确认并且触发与所述缩放手势相关联的应用动作。
在一些实施例中，由传感器感测的缩放手势可以包括弯曲所述柔性表面或者扭转所述柔性表面。
在一些实施例中，所述控制器可以配置为响应于所述弯曲触发所述触觉装置以提供第一触觉作用，以及响应于所述扭转触发所述触觉装置以提供第二触觉作用。在一个实施例中，所述传感器可以配置为在第一方向上感测缩放手势并且在相反方向上感测所述缩放手势。所述控制器可以配置为响应于传感器在第一方向上感测到所述缩放手势而触发第一应用动作，并且响应于所述传感器在相反方向上感测到所述缩放手势而触发第二应用动作。例如，所述第一应用动作和第二应用动作可以是以下动作：开关切换动作、选择-取消选择切换动作、上下切换动作、左右切换动作、前向反向切换动作、放大缩小切换动作或其任意组合。
在一些实施例中，所述控制器可以配置为通过将与缩放手势相关联的信号输出到计算装置而触发应用动作，所述计算装置配置为执行与所述应用动作相关联的应用。无线通信装置例如可以是所述电子交互装置的一部分，并且可以配置为将信号传输到计算装置。在一个实施例中，用户界面可以包括柔性显示屏。所述控制器可以配置为通过在所述显示屏上呈现所述应用动作而触发所述应用动作。
在一些实施例中，所述电子交互装置可以包括第二传感器，该第二传感器配置为感测施加到所述柔性表面的触摸手势。所述控制器可以配置为仅在第二传感器感测到所述触摸手势并且所述传感器感测到缩放手势时才触发所述应用动作。
在一些实施例中，所述电子交互装置的柔性表面可以定位在电子交互装置的边缘。在一个实施例中，所述传感器可以包括应变仪、压电变换器、加速计、陀螺仪或其任意组合。
本发明的这些和其他方面、特征和特性以及操作方法和结构的相关元件的功能，以及部件的组合和制造的经济性将在参考附图考虑了以下说明书和所附权利要求后变得更加清楚，全部这些内容构成本说明书的一部分，其中相同参考标记在各个附图中指示相应的部件。然而，将被清楚理解的是，附图仅是用于说明和描述的目的，而不意图作为对本发明的限制的定义。如本说明书和权利要求中所使用的，除非在上下文中明确地规定，否则单数形式“一”、“一个”和“所述”包括复数个指示物。
附图说明
图1示意性地说明了根据本发明的一个实施例的设备。
图2示意性地说明了图1中的设备的组件。
图3示意性地说明了被施加到图1中的设备的缩放手势。
图3A说明了沿线3A-3A取得的图3中的设备的横截面。
图4示意性地说明了被施加到图1中的设备的缩放手势。
图4A说明了沿线4A-4A取得的图4中的设备的横截面。
图4B说明了沿线4B-4B取得的图3中的设备的横截面。
图5示意性地说明了被施加到图1中的设备的缩放手势。
图5A说明了沿线5A-5A取得的图5中的设备的横截面。
图5B说明了沿线5B-5B取得的图5中的设备的横截面。
图6示意性地说明了被施加到图1中的设备的缩放手势。
图6A说明了沿线6A-6A取得的图6中的设备的横截面。
图6B说明了沿线6B-6B取得的图6中的设备的横截面。
图7示意性地说明了被施加到图1中的设备的缩放手势。
图7A说明了沿线7A-7A取得的图7中的设备的横截面。
图7B说明了沿线7B-7B取得的图7中的设备的横截面。
具体实施方式
图1说明了电子交互装置100的一个实施例，其可以提供触觉作用并且可以响应于施加到所述装置的柔性表面110的缩放手势而触发应用动作。缩放手势一般涉及表面的严重变形，与例如触摸屏表面被按压时可能发生的轻微屈曲相对。所述缩放手势可以包括施加到所述表面的弯曲、扭转、滚动或其任意组合。应用动作可以包括应用或其他程序针对用户输入可以具有的任意响应。所述缩放手势可以由此补充或代替其他形式的用户输入，例如按压按钮、拉动触发器或点击鼠标。在一些实施例中，电子交互装置100可以进一步包括用户输入装置122、124、126和128以及屏130。装置100由此提供可以用作游戏控制器或任意其他远程控制（例如TV远程、方向盘游戏远程）的部件的用户界面、电子阅读器（例如电子报纸、杂志、地图或书籍）、交互式玩具、平板游戏（tablet gaming）或移动多媒体装置，或其他任意电子交互装置。
柔性表面110可以由一种或更多种柔性材料构成，例如能够经受因由用户施加的缩放手势导致的严重的弹性形变的塑料。在一些实施例中，柔性表面110可以仅覆盖电子交互装置100的一部分，所述电子交互装置100可以具有一个或更多个刚性部分。例如，装置100的中心部分可以嵌入刚性PCB板，同时装置100的边缘或角落可以包括柔性表面110。在一些实施例中，柔性表面110可以组成装置100的整个表面。在一些实施例中，柔性表面110可以具有可调节的硬度。例如，所述表面可以包括具有受电流或热量影响的硬度的材料。装置100的控制器可以使电流或热量被施加到所述材料，从而控制柔性表面110的硬度。
用户输入装置122、124、126和128可以包括按钮、触发器、操纵杆、旋钮、开关、滑动条、触控板或其他任意用户输入装置。一个或更多个用户输入装置可以耦合到柔性表面110或者可以耦合到装置100的刚性部分，如果存在的话。一个或更多个用户输入装置可以是机械用户输入装置或者可以是触摸感应装置。例如，用户输入装置126可以包括四个机械按钮，而用户输入装置122可以包括配置为模仿机械操纵杆的两个触控板。在本示例或另一个示例中，用户输入装置124可以包括由装置100的触摸感应区域构成的四个按钮，例如柔性表面110的触摸感应区域。用户输入装置128可以包括耦合到装置100的前侧的两个机械触发器，或者可以包括形成在所述前侧上的两个触摸感应按钮。
在一些实施例中，屏130还可以是用户输入装置，例如触摸屏。在一些实施例中，屏130可以仅提供用户输出。屏130可以是电子交互装置100的刚性部分（如果存在的话）的一部分，或者可以可操作地耦合到柔性表面110或构成柔性表面110的一部分。例如，屏130可以嵌入在表面110内或者可以安装在表面110上。在一些实施例中，柔性屏130可以由Gyricon sheet构成，Gyricon sheet是由Xerox
Figure BDA00002828578700041
（帕罗奥图（Palo Alto）研究中心）开发的一种类型的电子纸。除了可以被复写很多次外，Gyricon sheet具有与传统纸张类似的物理属性。Gyricon技术本质上是一种在透明塑料的薄层中操控数百万的小型调色剂粒子的技术，其中所述调色剂粒子响应于应用的电压模式而布置。由Gyricon sheet显示的图像将被维持，直至施加新的电压模式。应该注意的是，可以使用用于制造柔性显示器的其他柔性显示器技术，所述柔性显示器例如有机发光二极管（OLED）、有机/聚合物薄膜晶体管（TFT）或其任意组合。
图2说明了可以是电子交互装置100的部件的其他组件，例如执行器142、144、146和148，静电装置149、无线收发器160、触摸传感器152、缩放手势传感器156、加速计154和控制器170。
执行器142、144、146和148以及静电装置149可以配置为在表面上生成触觉作用，例如电子交互装置100的表面110。所述触觉作用可以包括机械移动，例如装置100的振动或物体的致动，所述物体例如自表面突出以触摸用户的引脚或杆。触觉作用可以包括静电交互，从而在物体上生成力，例如将用户的手指吸引到表面110的力，或者将电信号发送到能够感知所述信号的物体，例如用户的手指的神经或触针中的传感器。一个或更多个执行器可以包括电致动聚合物（EAP）的纤维（或纳米管）、条形压电元件、形状记忆合金（SMA）的纤维、音圈、例如螺线管等磁性执行器、气动执行器、超声能量执行器、偏心质量执行器、或其任意组合。一个或更多个执行器可以是柔性执行器，例如由SMA纤维构成的执行器。所述执行器可以生成振动、横向运动、上下运动、旋转运动、或其任意组合。触觉执行器在2007年6月5日提交的名称为“METHOD AND APPARATUS FORHAPTIC ENABLED FLEXIBLE TOUCH SENSITIVE SURFACE”的共同待决的美国申请No.11/758638中进行了更详细的讨论，该申请的全部内容作为参考并入本文。虽然图2示出了四个执行器，但是装置100的其他实施例可以具有更少（例如0、1、2、3个）的执行器或者可以具有更多（例如5个或更多）的执行器。所述执行器中的每一个可以定位在不同位置，例如定位在电子交互装置100的边缘、角落或中心。所述执行器可以进一步具有不同的尺寸，或者可以具有相同的尺寸。
静电装置149可以包括施加电压和电流而非机械运动以生成触觉作用的任意装置。在一些实施例中，静电装置149可以包括在导电层之上的绝缘层。在一个示例中，所述绝缘层可以包括柔性表面110的一部分。静电装置149可以通过向导电层施加交流电信号而工作。所述信号可以电容性地将导电层与在绝缘层附近或绝缘层上的例如用户的手指或触针等物体耦合。所述电容性耦合可以通过改变所述物体在移动经过绝缘层时所承受的摩擦力而生成触觉作用。触觉静电装置在2011年4月22日提交的名称为“ELECTRO-VIBROTACTILEDISPLAY”的共同待决的美国申请No.13/092,269中进行了更详细的讨论，该申请的全部内容作为参考并入本文。
缩放手势传感器156可以配置为感测施加到例如表面110的柔性表面的缩放手势。在一些实施例中，感测所述缩放手势可以包括感测手势的幅度和手势的方向。例如，传感器156可以配置为不仅感测弯曲手势，还感测柔性表面弯曲的方向（例如向上或向下）以及弯曲的幅度。弯曲的幅度可以包括表面弯曲的速率、表面弯曲的程度、表面弯曲的持续时间、或其任意组合。传感器156可以包括配置为感测表面的严重形变的任意装置。例如，传感器156可以包括应变仪、加速计、陀螺仪、压电变换器、压力传感器、光学纤维、或其任意组合。在一些实施例中，加速计154可以是传感器156的一部分。例如，传感器156可以包括应变仪和感测缩放手势的幅度的加速计。在本示例中，应变仪可以感测形变的程度，而加速计可以感测形变的速率。在本示例中，传感器156可以进一步包括陀螺仪，其可以通过感测形变的方向而感测缩放手势的方向。
在一些实施例中，加速计154可以与传感器156的任意加速计分离。加速计154可以配置为测量例如携带装置100的人的移动速率。在一些实施例中，装置100可以具有与传感器156的任意陀螺仪分离的陀螺仪。所述陀螺仪可以配置为测量例如装置100倾斜的角度。在一些实施例中，执行器142、144、146或148的任意压电变换器可以与传感器156的任意压电变换器分离。在一些实施例中，传感器156的压电变换器还可以是装置100的一个执行器的一部分。
在一些实施例中，例如装置100的压电变换器的一个或更多个变换器可以配置为自手势或所述装置的其他移动获得电力。在一些实施例中，所述装置100可以不具有电池，而由一个或更多个变换器获得的电力可以充分激励装置100的传感器、无线收发器、控制器和触觉装置。
触摸传感器152可以包括一个或更多个传感器，该传感器配置为检测在电子交互装置100的表面附近或接触该表面的物体，例如用户的手指或触针，所述表面例如屏130的表面、用户输入装置122的表面、或其任意组合。在一个示例中，触摸传感器152可以包括嵌入在装置100中的一个或更多个电阻传感器，并且可以配置为感测因用户的触摸引起的电阻的变化，以及感测所述触摸的位置。在一个示例中，触摸传感器152可以包括压力传感器、阻性传感器、表面声波（SAW）传感器、红外传感器、光学传感器、或配置为感测装置100的所述表面处的触摸输入的任意其他传感器。在一些实施例中，触摸传感器152可以是一个或更多个用户输入装置122、124、126、128或屏130的一部分。
无线收发器160可以配置为将感测到的触摸手势和感测到的缩放手势传递到例如游戏控制台、台式计算机、路由器、家庭娱乐系统、或其任意组合。无线收发器可以配置为经由无线协议通信，所述协议例如IEEE802.11红外通信、CDMA协议、或任意其他无线通信协议。
控制器170可以配置为控制装置100的一个或更多个组件的操作，并且响应于缩放手势触发触觉作用和应用动作。在一个示例中，控制器170可以通信地耦合到用户输入装置122、124、126和128，从而接收在所述装置处接收的用户输入。在一个示例中，控制器170可以通信地耦合到屏130以在所述屏上呈现视觉内容，并且在屏130是触摸屏的情况下接收用户输入。在一些实施例中，控制器170可以通过在屏130上呈现所述动作而触发所述应用动作。例如，如果应用动作是伸缩动作，则控制器170可以缩放呈现在屏130上的视觉内容。在一些实施例中，控制器170可以通信地耦合到触摸传感器152、缩放手势传感器156和无线收发器160。响应于由传感器152或156感测的手势，控制器170可以使收发器160传输与手势相关联的信号到游戏控制台，该游戏控制台可以提供与TV屏上的手势相关联的应用动作。在一些实施例中，控制器170可以通信地耦合到执行器142、144、146、148以及静电装置149，从而响应于接收感测到的手势而提供触觉作用。控制器170可以包括逻辑电路、一个或更多个处理器、或者任意其他计算电路。
在一些实施例中，装置100的一个或更多个组件可以是柔性的并且可以构成例如表面110等柔性表面的一部分，或者可以可操作地耦合到所述柔性表面。
图3-7说明了可以施加到电子交互装置100的柔性表面110的示例性的缩放手势。图3示出了可以施加到柔性表面110的弯曲手势。图3A示出了沿线3A-3A的弯曲表面的正视图。如图所示，所述缩放手势可以在第一方向上施加，例如向下或向内，可以在第二方向上施加，例如向上或向外，并且可以在其他方向上施加。在一些实施例中，第二方向可以与第一方向相反。在一些实施例中，第二方向可以与第一方向正交或者与第一方向具有其他一些关系。例如，第一方向可以涉及弯曲装置100的左边缘和右边缘，而正交的第二方向可以涉及弯曲装置100的上边缘和下边缘。在一些实施例中，形变可以具有幅度。所述幅度可以包括形变的程度、表面形变的速率、形变的持续时间或其任意组合。在一些实施例中，将表面110弯曲到等于或小于阈值程度可以构成第一缩放手势，而将表面弯曲超出阈值程度可以构成第二缩放手势。
图4示出了可以施加到柔性表面110的一侧的扭转手势。如图4A所示，其示出了沿线4A-4A的被扭转的表面的正视图，扭转可以仅施加到表面110的左侧。如图4B所示，其示出了沿线4B-4B的被扭转的表面的侧视图，所述缩放手势可以在第一方向上施加，其中左上角被远离用户（假设所述表面面对着用户）向外缩放，或左上角被向下缩放（假设面对着所述表面）。在第一方向上，左下角可以向着用户向内缩放或向上缩放。
如图5所示，缩放手势可以在相反的第二方向上施加。如图5B所示，其示出了沿线5B-5B的被扭转的表面110的侧视图，左上角可以向着用户向内缩放或者向上缩放，而左下角远离用户向外缩放或者向下缩放。图5A示出了扭转的第二方向可以被施加到表面110的左侧。扭转手势可以类似的方式施加到表面110的右侧。在一些实施例中，扭转到等于或小于阈值程度可以构成第一扭转手势，而扭转超出所述阈值程度可以构成第二扭转手势。
图6和图7示出了可以施加到表面110的两个相反侧的扭转缩放手势。如图6A和图6B所示，扭转手势可以在第一方向上施加，其中表面110的左上角被远离用户向外扭转或者向下扭转，而右下角被远离用户向外缩放或向下缩放。如图7A和图7B所示，扭转手势可以在相反的第二方向上施加，其中右上角被向外并且远离用户扭转或者向下扭转，而左下角被向外并且远离用户扭转或者向下扭转。所显示的缩放手势仅是示例性的，并且任意其他缩放手势均可以被施加到电子交互装置的柔性表面。例如，缩放手势可以滚动柔性表面110，可以仅弯曲表面110的角落而不扭转所述表面，或者仅弯曲柔性表面110的一侧。
由电子交互装置100感测的缩放手势可以用作触发应用动作的用户输入。所述动作可以由例如控制器170触发。在一些实施例中，所述应用动作可以涉及在虚拟或模拟环境（例如游戏）中的动作。例如，应用动作可以包括在游戏中向前或向后移动，在游戏中进行武器开火或者加载武器，缩小或放大游戏环境的双目视图，或者在游戏中拖拽或经过卡片。每个应用动作均可以与缩放手势相关联，并且可以进一步与缩放手势的方向、幅度或其组合相关联。例如，在向外的方向上弯曲手势可以与在游戏环境中向前移动相关联，而在向内方向上的弯曲手势可以与在游戏环境中向后移动相关联。在向上方向上缩放右上角的扭转手势可以与游戏中的武器开火相关联，而在向下方向上缩放右上角的扭转手势可以与游戏中再次加载武器相关联。在一些实施例中，缩放手势和游戏中或任意其他应用中的应用动作之间的关联可以由用户定制。该定制可以例如由控制器170执行，或者由与装置100分离的计算装置执行。
在一些实施例中，可以以其他形式的用户输入施加游戏和其他应用中使用的缩放手势。在一个示例中，缩放手势可以与游戏中的车辆的加速或减速动作相关联，而来自加速计154的信号可以与操舵动作相关联。在一个示例中，缩放手势可以与游戏中的移动动作相关联，而按压用户输入装置128可以与游戏中的武器开火动作相关联。在一个示例中，缩放手势可以与武器开火动作相关联，而装置100中的陀螺仪可以测量与游戏中瞄准武器的方向（或车辆的操舵方向）相关联的取向。在一个示例中，弯曲手势可以与游戏中的拉弓相关联，而按压用户输入装置124可以与释放弓以射出箭相关联。
在一些实施例中，应用动作可以涉及导航菜单。在这些实施例中，弯曲手势可以与在菜单中前进或后退、在菜单选项中向上滚动或向下滚动、或者选择或取消选择菜单选项相关联。扭转手势可以与某个动作相关联以在菜单间切换以便呈现在屏上。
在一些实施例中，应用动作可以涉及控制多媒体平台，例如在装置100上运转的电子书、音乐或视频应用，或者与装置100通信的家庭娱乐系统。在这些实施例中，弯曲手势可以与在书页、介质轨迹或信道中向前或向后浏览相关联。扭转手势可以与调高音量或调低音量动作相关联。在另一个示例中，例如弯曲表面110的角落的缩放手势可以与开启或关闭装置100相关联，或者与开启或关闭TV相关联。本文讨论的应用动作仅是示例性的，并且缩放手势可以与任意应用相关联并且与任意用户输入响应相关联。
虽然本文讨论的一些示例示出了在两个相反方向上的缩放手势可以与两个相反的应用动作（例如向前移动和向后移动）相关联，但是在两个相反方向上的缩放手势可以与任意两个应用动作相关联。例如，在向上方向上的弯曲手势可以与呈现电话拨号盘屏幕的应用动作相关联，而在向下方向上的弯曲手势可以与播放音乐的应用动作相关联。
在一些实施例中，缩放手势可以被组合。例如，如将由装置100控制的TV置于睡眠模式的应用动作可以要求在第一方向上的弯曲手势，随后是在第二方向上的扭转手势。扭转手势可以在表面110仍为弯曲时施加，或者可以在表面110被弯曲并且之后被释放后再施加。对于例如TV睡眠动作等与缩放手势的序列相关联的应用动作，例如输出音频确认等其他应用动作可以在所述序列中的一个或更多个手势后提供，从而确认所述序列被正确遵循。在另一个示例中，弯曲手势可以与游戏中的拉弓相关联，而在所述表面弯曲时施加的扭转手势可以与释放弓以射出箭相关联。
在一些实施例中，应用动作可以与具有触摸手势和缩放手势的序列相关联。例如，弯曲手势可以与在装置100上的电话振动模式和电话响铃模式之间的切换相关联，但控制器170可以不选择触发应用动作，除非用户在缩放手势之前的阈值时间量内已施加触摸手势到表面110。例如，用户可能需要在弯曲表面110之前在屏130上的任意方向上施加挥击运动。如果仅检测到弯曲手势，则控制器170可以不作出响应或者可以提供视频或音频输出，从而指示切换应用动作不能被触发，因为未接收到触摸手势。通过将触摸手势并入切换动作中，装置100可以避免从振动模式意外切换到响铃模式。在一些实施例中，触摸手势可以在任意缩放手势能够触发意图的应用动作之前施加。向表面施加触摸手势可以包括触摸所述表面、在所述表面上进行挥击运动、在所述表面上进行收缩或放大运动，或者任意其他触摸手势。
在一些实施例中，应用动作可以与具有基于加速计的手势和缩放手势的序列相关联。例如，例如摆动手势等基于加速计手势可以通过装置100进行并且可以与模拟用于虚拟网球游戏的网球摆动相关联。例如，加速计154和陀螺仪可以检测所述摆动。响应于所述摆动的检测，屏上的网球摆动的动画可以被触发，例如被控制器170触发。在所述示例中，缩放手势可以与例如模拟发球时向上投掷网球相关联。例如，缩放手势传感器156可以检测缩放手势。响应于缩放手势的检测，控制器170可以触发在屏上的网球发球的动画。
触发应用动作可以包括在屏或任意其他用户输出装置（例如扬声器）上呈现应用动作。在一个示例中，控制器170可以在游戏中呈现移动动作或者在屏130上呈现菜单选择动作。呈现所述动作可以包括使控制器170中的视频芯片提供相应于所述动作的视觉内容。在一个示例中，控制器170可以通过使无线收发器160将与所述缩放手势相关联的信号发送到例如游戏控制台等其他计算装置而触发与缩放手势相关联的伸缩动作。所述游戏控制台之后可以在TV屏上呈现所述动作。在所述示例中，控制器170可以使无线收发器160将移动命令发送到游戏控制台，或者控制器170可以使无线收发器160仅发送指示例如发生了在向外方向上的弯曲手势的信号。在后一种情况下，所述游戏控制台可以基于存储在所述控制台上的手势到动作的映射而自弯曲手势生成移动命令。
在一些实施例中，缩放手势可以触发触觉作用。触觉作用涉及激励或力，包括但不限于振动、引力或斥力、电压或电流、其他一些机械或电磁力、加热或冷却、或其他一些激励。所述触觉作用可以包括本文描述的所述力或激励的一个或更多个组合。多个触觉作用可以被组合以形成整体的触觉作用。在一个示例中，控制器170可以感测缩放手势并且激活一个或更多个执行器142、144、146、148以及静电装置149。多个缩放手势之间的触觉作用可以是相同的，或者可以是不同的。例如，控制器170可以响应于在向上方向上弯曲手势而仅激活执行器144，可以响应于在向下方向上弯曲手势而激活执行器142和144，并且可以响应于扭转手势而激活全部四个执行器。在一些实施例中，触觉作用的类型、持续时间或强度同样可以基于施加了何种缩放手势或触发了何种应用动作而变化。例如，响应于增大音乐音量的缩放手势触发的触觉作用可以比响应于减小音乐音量的缩放手势触发的触觉作用更强烈。如果缩放手势稍后与不同的应用动作相关联，例如改变TV频道或滚动经过菜单的动作，则不同类型的触觉作用（例如基于静电或基于热的触觉作用）之后可以与所述缩放手势相关联。在一些实施例中，触觉作用的类型、持续时间或强度可以由缩放手势控制。例如，触觉作用的强度（例如频率和/或振幅）可以基于缩放手势的幅度（例如缩放的速率或程度）。电子交互装置的柔性表面缩放得越多或越快，例如在游戏中触发更大的加速度或在电子文件中更快地滚动，则触觉作用的频率或振幅可以更大。
在一些实施例中，触觉作用可以仅在缩放手势有效时响应于缩放手势而被触发。缩放手势可以是无效的，例如在缩放手势不具有与其相关联的应用动作的情况下。在一些实施例中，默认的触觉作用（例如执行器144在3级强度上振动2秒）可以被触发以指示用户手势无效。
在一些实施例中，触觉作用可以与手势的序列相关联，例如触摸手势和缩放手势的序列。所述序列可以与应用动作相关联，例如如上所述的将TV置于睡眠模式的动作，或者在电话振动模式和电话响铃模式之间切换的动作。在一个示例中，可以仅在手势的序列被正确施加时才提供触觉作用（例如执行器142和144的振动）。不同的触觉作用（例如执行器142的振动）可以在所述序列中的一个或更多个手势之后被触发，从而确认所述序列被正确地遵循。在一个示例中，默认的触觉作用（例如执行器144在3级强度上振动2秒）可以响应于全部无效的手势的序列而被触发。
虽然为了说明的目的而基于目前被视为是最实际并且优选的实施例详细描述的本发明，但应该理解的是，这些细节仅用于该目的，并且本发明不限于所公开的实施例，而是相反，本发明意图覆盖在所附权利要求的精神和范围内的修改和等价布置。例如，应该理解的是，本发明考虑的是在可行的范围内，任意实施例的一个或更多个特征可以与任意其他实施例的一个或更多个特征组合。

Claims (20)

1.一种电子交互装置，包括：
用户界面，包括柔性表面；
传感器，配置为感测施加到所述柔性表面的缩放手势；
触觉装置，配置为响应于所述缩放手势生成触觉作用；以及
控制器，其与所述传感器和所述触觉装置进行信号通信，所述控制器配置为：
触发所述触觉装置以提供所述缩放手势的触觉确认，并且
触发与所述缩放手势相关联的应用动作。
2.如权利要求1所述的电子交互装置，其中触觉装置包括执行器。
3.如权利要求1所述的电子交互装置，其中所述控制器配置为通过将与所述缩放手势相关联的信号输出到计算装置而触发所述应用动作，所述计算装置配置为执行与所述应用动作相关联的应用。
4.如权利要求3所述的电子交互装置，进一步包括配置为发送所述信号到所述计算装置的无线通信装置。
5.如权利要求1所述的电子交互装置，其中所述用户界面包括柔性显示屏，并且其中所述控制器配置为通过在所述显示屏上呈现所述应用动作而触发所述应用动作。
6.如权利要求1所述的电子交互装置，进一步包括配置为感测施加到所述柔性表面的触摸手势的第二传感器。
7.如权利要求6所述的电子交互装置，其中所述控制器配置为仅在所述第二传感器感测到所述触摸手势并且所述传感器感测到所述缩放手势时才触发所述应用动作。
8.如权利要求1所述的电子交互装置，其中所述柔性表面位于所述电子交互装置的边缘。
9.如权利要求1所述的电子交互装置，其中所述传感器包括应变仪、压电变换器、加速计或陀螺仪。
10.如权利要求1所述的电子交互装置，其中由所述传感器感测的所述缩放手势包括弯曲所述柔性表面。
11.如权利要求10所述的电子交互装置，其中由所述传感器感测的所述缩放手势包括扭转所述柔性表面。
12.如权利要求11所述的电子交互装置，其中所述控制器配置为响应于所述弯曲触发所述触觉装置以提供第一触觉作用，并且响应于所述扭转触发所述触觉装置以提供第二触觉作用。
13.如权利要求1所述的电子交互装置，其中所述传感器配置为在第一方向上感测所述缩放手势并且在相反的方向上感测所述缩放手势。
14.如权利要求13所述的电子交互装置，其中所述控制器配置为响应于传感器在所述第一方向上感测所述缩放手势而触发第一应用动作，并且响应于所述传感器在所述相反方向上感测所述缩放手势而触发第二应用动作。
15.如权利要求14所述的电子交互装置，其中所述第一应用动作和所述第二应用动作是以下动作：开关切换动作、选择-取消选择切换动作、上下切换动作、左右切换动作、前向反向切换动作、放大缩小切换动作或其任意组合。
16.如权利要求1所述的电子交互装置，其中所述控制器配置为使所述触觉装置将所述触觉确认的频率或振幅建立在所述缩放手势的幅度的基础上。
17.一种触觉手势识别方法，包括：
感测施加到用户界面的柔性表面的缩放手势；
响应于所述感测缩放手势而生成与所述用户界面的触觉作用；以及
触发与所述缩放手势相关联的应用动作。
18.如权利要求17所述的方法，其中所述触发应用动作包括将与所述缩放手势相关联的信号输出到计算装置，该计算装置执行与所述应用动作相关联的应用或者在所述用户界面的显示屏上呈现所述应用动作。
19.如权利要求17所述的方法，其中所述感测缩放手势包括感测所述柔性表面的弯曲或感测所述柔性表面的扭转。
20.如权利要求17所述的方法，进一步包括在所述感测缩放手势之前感测施加到所述用户界面的触摸手势，其中所述生成触觉作用是响应于所述感测触摸手势和所述感测缩放手势的。
CN201310048890.9A 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备 Expired - Fee Related CN103246472B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810384396.2A CN108459721A (zh) 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/368,828 US9411423B2 (en) 2012-02-08 2012-02-08 Method and apparatus for haptic flex gesturing
US13/368,828 2012-02-08

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201810384396.2A Division CN108459721A (zh) 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备

Publications (2)

Publication Number Publication Date
CN103246472A true CN103246472A (zh) 2013-08-14
CN103246472B CN103246472B (zh) 2018-05-08

Family

ID=47666031

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201310048890.9A Expired - Fee Related CN103246472B (zh) 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备
CN201810384396.2A Pending CN108459721A (zh) 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810384396.2A Pending CN108459721A (zh) 2012-02-08 2013-02-07 用于触觉缩放手势的方法和设备

Country Status (5)

Country Link
US (3) US9411423B2 (zh)
EP (1) EP2626775A3 (zh)
JP (2) JP6442132B2 (zh)
KR (1) KR20130091687A (zh)
CN (2) CN103246472B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104375713A (zh) * 2013-08-14 2015-02-25 华为终端有限公司 数据处理方法和移动设备
CN104679364A (zh) * 2013-11-26 2015-06-03 乐金显示有限公司 触摸和姿势感测系统及其驱动方法
CN105094646A (zh) * 2015-08-24 2015-11-25 联想(北京)有限公司 一种电子设备的控制方法和电子设备
CN105718182A (zh) * 2014-12-02 2016-06-29 天津富纳源创科技有限公司 触控装置
CN105739740A (zh) * 2014-12-29 2016-07-06 大陆汽车系统公司 具有可变触觉反馈的新型旋钮
CN106775351A (zh) * 2016-12-09 2017-05-31 联想(北京)有限公司 一种信息处理方法及装置、电子设备
CN107113497A (zh) * 2014-12-12 2017-08-29 英特尔公司 可佩戴音频混合
CN107209582A (zh) * 2014-12-16 2017-09-26 肖泉 高直观性人机界面的方法和装置
US11543897B2 (en) 2018-11-13 2023-01-03 Yungu (Gu'an) Technology Co., Ltd. Display terminal and display control method

Families Citing this family (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US9672796B2 (en) * 2012-02-17 2017-06-06 Lg Electronics Inc. Electronic device including flexible display
US9851811B2 (en) * 2012-02-20 2017-12-26 Beijing Lenovo Software Ltd. Electronic device and method for controlling the same
US9684382B2 (en) 2012-06-13 2017-06-20 Microsoft Technology Licensing, Llc Input device configuration having capacitive and pressure sensors
US9459160B2 (en) 2012-06-13 2016-10-04 Microsoft Technology Licensing, Llc Input device sensor configuration
KR102052370B1 (ko) 2012-06-14 2020-01-08 엘지전자 주식회사 플렉서블 포터블 디바이스
KR101971200B1 (ko) * 2012-06-19 2019-04-23 삼성디스플레이 주식회사 단말기 시스템 및 플렉시블 단말기
US20140002376A1 (en) * 2012-06-29 2014-01-02 Immersion Corporation Method and apparatus for providing shortcut touch gestures with haptic feedback
KR102145533B1 (ko) * 2012-10-04 2020-08-18 삼성전자주식회사 플렉서블 디스플레이 장치 및 그의 제어 방법
US9046926B2 (en) 2012-12-17 2015-06-02 International Business Machines Corporation System and method of dynamically generating a frequency pattern to realize the sense of touch in a computing device
KR20140095711A (ko) * 2013-01-25 2014-08-04 삼성전자주식회사 전자 장치 및 그 동작 방법
US10578499B2 (en) * 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
US20140232679A1 (en) * 2013-02-17 2014-08-21 Microsoft Corporation Systems and methods to protect against inadvertant actuation of virtual buttons on touch surfaces
US9524633B2 (en) * 2013-03-14 2016-12-20 Lutron Electronics Co., Inc. Remote control having a capacitive touch surface and a mechanism for awakening the remote control
CN105144035B (zh) 2013-04-26 2019-03-22 意美森公司 利用触觉单元阵列模拟有形用户界面交互和手势
US9524030B2 (en) 2013-04-26 2016-12-20 Immersion Corporation Haptic feedback for interactions with foldable-bendable displays
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
KR20150010516A (ko) * 2013-07-19 2015-01-28 삼성전자주식회사 플렉서블 디바이스가 객체를 디스플레이 하는 방법 및 장치
JP2015058127A (ja) 2013-09-18 2015-03-30 株式会社コナミデジタルエンタテインメント ゲーム制御プログラム、ゲームシステム、およびゲーム制御方法
US9207764B2 (en) * 2013-09-18 2015-12-08 Immersion Corporation Orientation adjustable multi-channel haptic device
CN105683865B (zh) 2013-09-30 2018-11-09 苹果公司 用于触觉响应的磁性致动器
US9317118B2 (en) 2013-10-22 2016-04-19 Apple Inc. Touch surface for simulating materials
KR102256677B1 (ko) * 2013-12-02 2021-05-28 삼성디스플레이 주식회사 플렉서블 표시장치 및 이의 영상 표시방법
CN105814510B (zh) 2013-12-10 2019-06-07 苹果公司 具有触觉响应的带体附接机构
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
KR102117526B1 (ko) * 2014-01-02 2020-06-09 삼성전자주식회사 디스플레이 시스템, 플렉서블 리모컨, 플렉서블 디스플레이 장치 및 그 제어 방법
US9575512B2 (en) 2014-04-15 2017-02-21 Lg Electronics Inc. Flexible touch sensitive display device and control method thereof
KR102224478B1 (ko) 2014-04-15 2021-03-08 엘지전자 주식회사 터치 센서티브 플렉서블 디스플레이 디바이스 및 그 제어 방법
WO2015163842A1 (en) 2014-04-21 2015-10-29 Yknots Industries Llc Apportionment of forces for multi-touch input devices of electronic devices
JP6325659B2 (ja) * 2014-05-08 2018-05-16 Ｎｅｃソリューションイノベータ株式会社 操作画面表示装置、操作画面表示方法およびプログラム
KR102262721B1 (ko) 2014-05-12 2021-06-09 엘지전자 주식회사 폴더블 디스플레이 디바이스 및 그 제어 방법
US9507420B2 (en) * 2014-05-13 2016-11-29 Qualcomm Incorporated System and method for providing haptic feedback to assist in capturing images
KR102210632B1 (ko) 2014-06-09 2021-02-02 엘지전자 주식회사 벤딩 오퍼레이션을 실행하는 디스플레이 디바이스 및 그 제어 방법
KR102246554B1 (ko) 2014-06-18 2021-04-30 엘지전자 주식회사 휴대용 디스플레이 디바이스 및 그 제어 방법
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
KR20160024605A (ko) * 2014-08-26 2016-03-07 삼성전자주식회사 접철식 기기
EP3195088A2 (en) 2014-09-02 2017-07-26 Apple Inc. Haptic notifications
JP6538825B2 (ja) 2014-09-02 2019-07-03 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 可変触覚出力のための意味論的フレームワーク
KR102243655B1 (ko) 2014-09-02 2021-04-23 엘지전자 주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR102338003B1 (ko) * 2014-10-07 2021-12-10 삼성전자 주식회사 플렉서블 디스플레이를 포함하는 전자 장치
DE102014016328B3 (de) * 2014-11-03 2016-03-17 Audi Ag Verfahren zum Betreiben einer Anzeigevorrichtung, Anzeigevorrichtung für einen Kraftwagen und Kraftwagen mit einer Anzeigenvorrichtung
CN111651159A (zh) * 2014-11-21 2020-09-11 习得智交互软件开发公司 提供原型设计工具的方法及非暂时性计算机可解读的媒介
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US9851805B2 (en) 2014-12-24 2017-12-26 Immersion Corporation Systems and methods for haptically-enabled holders
KR102277260B1 (ko) 2014-12-29 2021-07-14 엘지전자 주식회사 단말 장치 및 단말 장치의 제어 방법
KR20160080851A (ko) 2014-12-29 2016-07-08 엘지전자 주식회사 디스플레이 장치 및 제어 방법
KR102358110B1 (ko) 2015-03-05 2022-02-07 삼성디스플레이 주식회사 표시 장치
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
KR102287583B1 (ko) * 2015-04-08 2021-08-09 삼성디스플레이 주식회사 표시 장치
WO2016167672A1 (es) * 2015-04-14 2016-10-20 Delmar Lissa Jose Antonio Dispositivo portátil de comunicación para transmitir mensajes táctiles
AU2016100399B4 (en) 2015-04-17 2017-02-02 Apple Inc. Contracting and elongating materials for providing input and output for an electronic device
KR102425824B1 (ko) * 2015-04-24 2022-07-29 삼성디스플레이 주식회사 가요성 디스플레이의 햅틱 구동 방법 및 장치
KR102304311B1 (ko) * 2015-06-01 2021-09-23 삼성디스플레이 주식회사 표시장치
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
CN105138076B (zh) * 2015-08-03 2020-01-31 联想(北京)有限公司 一种电子设备的控制方法及电子设备
CN107925333B (zh) 2015-09-08 2020-10-23 苹果公司 用于在电子设备中使用的线性致动器
US10013060B2 (en) 2015-09-18 2018-07-03 Immersion Corporation Systems and methods for providing haptic effects in response to deformation of a cover for an electronic device
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
US10039080B2 (en) 2016-03-04 2018-07-31 Apple Inc. Situationally-aware alerts
US10268272B2 (en) 2016-03-31 2019-04-23 Apple Inc. Dampening mechanical modes of a haptic actuator using a delay
EP3249909B1 (en) 2016-05-23 2020-01-01 Funai Electric Co., Ltd. Display device
DK180122B1 (en) 2016-06-12 2020-05-19 Apple Inc. Devices, methods and graphical user interfaces for providing haptic feedback
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
CN105997144A (zh) * 2016-06-13 2016-10-12 杭州融超科技有限公司 一种超声系统及其多图成像方法
US10095311B2 (en) 2016-06-15 2018-10-09 Immersion Corporation Systems and methods for providing haptic feedback via a case
DK179802B1 (en) * 2016-09-06 2019-06-26 Apple Inc. Devices, methods and graphical user interfaces for generating tactile outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
US10037660B2 (en) * 2016-12-30 2018-07-31 Immersion Corporation Flexible haptic actuator
KR102343806B1 (ko) 2017-05-16 2021-12-28 삼성디스플레이 주식회사 터치 센서 및 이를 포함하는 표시 장치
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
US10622538B2 (en) 2017-07-18 2020-04-14 Apple Inc. Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body
US10440848B2 (en) 2017-12-20 2019-10-08 Immersion Corporation Conformable display with linear actuator
US11030921B2 (en) 2018-06-08 2021-06-08 Wells Fargo Bank, N.A. Change data driven tactile response
US20190384394A1 (en) 2018-06-15 2019-12-19 Immersion Corporation Method and apparatus for providing resistive feedback
US10599223B1 (en) 2018-09-28 2020-03-24 Apple Inc. Button providing force sensing and/or haptic output
US10691211B2 (en) 2018-09-28 2020-06-23 Apple Inc. Button providing force sensing and/or haptic output
US20200174612A1 (en) * 2018-11-30 2020-06-04 Immersion Corporation Variable curvature interactive devices
US10838544B1 (en) 2019-08-21 2020-11-17 Raytheon Company Determination of a user orientation with respect to a touchscreen device
JP6688425B1 (ja) 2019-08-30 2020-04-28 任天堂株式会社 情報処理システム、情報処理プログラム、情報処理装置、および情報処理方法
JP6688424B1 (ja) 2019-08-30 2020-04-28 任天堂株式会社 情報処理システム、情報処理プログラム、情報処理装置、および情報処理方法
US11380470B2 (en) 2019-09-24 2022-07-05 Apple Inc. Methods to control force in reluctance actuators based on flux related parameters
JP2021145928A (ja) * 2020-03-19 2021-09-27 任天堂株式会社 ゲームシステム、情報処理プログラム、情報処理装置、および情報処理方法
US11175755B1 (en) * 2020-06-08 2021-11-16 Wacom Co., Ltd. Input system and input method
US12090390B2 (en) * 2020-11-30 2024-09-17 Lepton Computing Llc Gaming motion control interface using foldable device mechanics
US11977683B2 (en) 2021-03-12 2024-05-07 Apple Inc. Modular systems configured to provide localized haptic feedback using inertial actuators
CN113066383B (zh) * 2021-03-31 2023-04-07 深圳创维－Rgb电子有限公司 一种显示装置
US11809631B2 (en) 2021-09-21 2023-11-07 Apple Inc. Reluctance haptic engine for an electronic device
WO2023181313A1 (ja) * 2022-03-24 2023-09-28 株式会社ソニー・インタラクティブエンタテインメント コントローラ装置、情報処理システム、コントローラ装置の制御方法、及びプログラム
GB2624463A (en) * 2022-11-21 2024-05-22 Yair Energy Ltd An electronic device

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040008191A1 (en) * 2002-06-14 2004-01-15 Ivan Poupyrev User interface apparatus and portable information apparatus
US20100056223A1 (en) * 2008-09-02 2010-03-04 Choi Kil Soo Mobile terminal equipped with flexible display and controlling method thereof
CN101809526A (zh) * 2007-09-28 2010-08-18 英默森公司 具有动态触觉效应的多触摸装置
CN101933010A (zh) * 2008-01-21 2010-12-29 美国索尼电脑娱乐有限责任公司 具有触摸屏和数字触觉像素的手持装置

Family Cites Families (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4149574B2 (ja) * 1997-08-29 2008-09-10 ゼロックス コーポレイション ユーザインターフェースサポートデバイス、及び情報入力方法
US6297838B1 (en) * 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US6160540A (en) * 1998-01-12 2000-12-12 Xerox Company Zoomorphic computer user interface
US7289121B1 (en) * 2000-03-31 2007-10-30 Autodesk, Inc. System for creating and modifying curves and surfaces
KR100769783B1 (ko) * 2002-03-29 2007-10-24 가부시끼가이샤 도시바 표시 입력 장치 및 표시 입력 시스템
US20030188627A1 (en) * 2002-04-05 2003-10-09 Longo Nicholas C. Interactive performance interface for electronic sound device
JP4135487B2 (ja) * 2002-12-10 2008-08-20 ソニー株式会社 ユーザ・インタフェース装置および携帯情報装置
JP4447823B2 (ja) * 2002-06-14 2010-04-07 ソニー株式会社 携帯情報機器
JP2004362428A (ja) * 2003-06-06 2004-12-24 Denso Corp タッチ操作入力装置、タッチ操作入力装置における振動発生方法
JP2005174006A (ja) * 2003-12-11 2005-06-30 Canon Inc 表示装置
EP1728142B1 (en) * 2004-03-23 2010-08-04 Fujitsu Ltd. Distinguishing tilt and translation motion components in handheld devices
US7629966B2 (en) * 2004-12-21 2009-12-08 Microsoft Corporation Hard tap
WO2006086508A2 (en) * 2005-02-08 2006-08-17 Oblong Industries, Inc. System and method for genture based control system
US20060238494A1 (en) * 2005-04-22 2006-10-26 International Business Machines Corporation Flexible displays as an input device
JP3911515B2 (ja) * 2005-10-13 2007-05-09 パイオニア株式会社 表示制御装置、表示方法、表示プログラムおよび記録媒体
US20100045705A1 (en) * 2006-03-30 2010-02-25 Roel Vertegaal Interaction techniques for flexible displays
US20070247422A1 (en) * 2006-03-30 2007-10-25 Xuuk, Inc. Interaction techniques for flexible displays
GB0611452D0 (en) * 2006-06-12 2006-07-19 Plastic Logic Ltd Page refreshing e-reader
US7725547B2 (en) * 2006-09-06 2010-05-25 International Business Machines Corporation Informing a user of gestures made by others out of the user's line of sight
US9823833B2 (en) 2007-06-05 2017-11-21 Immersion Corporation Method and apparatus for haptic enabled flexible touch sensitive surface
KR101345755B1 (ko) * 2007-09-11 2013-12-27 삼성전자주식회사 휴대용 단말기의 조작제어장치 및 그 방법
DE102007048596A1 (de) * 2007-10-10 2009-04-23 Vodafone Holding Gmbh Flexibles elektronisches Gerät und Verfahren zu dessen Steuerung
JP2009223875A (ja) * 2008-02-18 2009-10-01 Advanced Telecommunication Research Institute International 電子ブック装置、ブックカバー装置、電子ブック処理方法、およびプログラム
JP4909922B2 (ja) * 2008-02-29 2012-04-04 株式会社日立製作所 可撓操作可能な情報表示端末装置、及び情報表示用インタフェース
US20100011291A1 (en) * 2008-07-10 2010-01-14 Nokia Corporation User interface, device and method for a physically flexible device
KR101482125B1 (ko) * 2008-09-09 2015-01-13 엘지전자 주식회사 휴대 단말기 및 그 동작방법
WO2010041227A1 (en) * 2008-10-12 2010-04-15 Barit, Efrat Flexible devices and related methods of use
KR101517082B1 (ko) * 2008-11-10 2015-04-30 엘지전자 주식회사 플렉서블 디스플레이를 이용하는 휴대 단말기 및 그 제어방법
KR101521219B1 (ko) * 2008-11-10 2015-05-18 엘지전자 주식회사 플렉서블 디스플레이를 이용하는 휴대 단말기 및 그 제어방법
KR20100065418A (ko) * 2008-12-08 2010-06-17 삼성전자주식회사 가요성 표시부를 가지는 단말기 및 그의 데이터 표시 방법
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
JP4885938B2 (ja) * 2008-12-25 2012-02-29 京セラ株式会社 入力装置
JP2010157060A (ja) * 2008-12-26 2010-07-15 Sony Corp 表示装置
CA2761700C (en) * 2009-07-24 2014-12-02 Research In Motion Limited Method and apparatus for a touch-sensitive display
US8428368B2 (en) * 2009-07-31 2013-04-23 Echostar Technologies L.L.C. Systems and methods for hand gesture control of an electronic device
KR101602643B1 (ko) * 2009-08-19 2016-03-11 삼성전자주식회사 전자 종이를 위한 사용자 인터페이스 제공 장치 및 방법
EP2315186B1 (en) * 2009-10-26 2016-09-21 Lg Electronics Inc. Mobile terminal with flexible body for inputting a signal upon bending said body
US8305200B2 (en) * 2009-12-02 2012-11-06 Analog Devices, Inc. Reactive networks to reduce acoustic noise and ensure maximum efficiencies in driving piezoelectric elements in haptic applications
JP5440136B2 (ja) * 2009-12-04 2014-03-12 ソニー株式会社 表示装置及び表示装置の制御方法
US8432368B2 (en) * 2010-01-06 2013-04-30 Qualcomm Incorporated User interface methods and systems for providing force-sensitive input
EP2561424B1 (en) * 2010-04-23 2019-02-20 Immersion Corporation Systems and methods for providing haptic effects
JP2011242386A (ja) * 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体
US8462106B2 (en) * 2010-11-09 2013-06-11 Research In Motion Limited Image magnification based on display flexing
KR20120059823A (ko) * 2010-12-01 2012-06-11 삼성전자주식회사 객체 제어 장치 및 방법
US20120169609A1 (en) * 2010-12-29 2012-07-05 Nokia Corporation Methods and apparatuses for facilitating content navigation
US8587539B2 (en) * 2011-01-21 2013-11-19 Blackberry Limited Multi-bend display activation adaptation
US20120260220A1 (en) * 2011-04-06 2012-10-11 Research In Motion Limited Portable electronic device having gesture recognition and a method for controlling the same
US9448713B2 (en) 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
US10684765B2 (en) * 2011-06-17 2020-06-16 Nokia Technologies Oy Causing transmission of a message
US20130009882A1 (en) * 2011-07-07 2013-01-10 Nokia Corporation Methods and apparatuses for providing haptic feedback
US9007300B2 (en) * 2011-10-14 2015-04-14 Blackberry Limited Method and system to control a process with bend movements
US20130100011A1 (en) * 2011-10-21 2013-04-25 Industrial Technology Research Institute Human-machine interface device
US8669956B2 (en) * 2011-12-30 2014-03-11 Lg Electronics Inc. Bending threshold and release for a flexible display device
US8610663B2 (en) * 2012-02-06 2013-12-17 Lg Electronics Inc. Portable device and method for controlling the same
US8854335B2 (en) * 2012-03-22 2014-10-07 Eminent Electronic Technology Corp. Ltd. Electronic apparatus having touch sensing ability and non-touch sensing ability and control method thereof
WO2013169854A2 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
JP2014067291A (ja) * 2012-09-26 2014-04-17 Toshiba Corp 情報処理装置、入力装置及び情報処理方法
KR20140044237A (ko) * 2012-10-04 2014-04-14 삼성전자주식회사 플렉서블 장치 및 그의 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040008191A1 (en) * 2002-06-14 2004-01-15 Ivan Poupyrev User interface apparatus and portable information apparatus
CN101809526A (zh) * 2007-09-28 2010-08-18 英默森公司 具有动态触觉效应的多触摸装置
CN101933010A (zh) * 2008-01-21 2010-12-29 美国索尼电脑娱乐有限责任公司 具有触摸屏和数字触觉像素的手持装置
US20100056223A1 (en) * 2008-09-02 2010-03-04 Choi Kil Soo Mobile terminal equipped with flexible display and controlling method thereof

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104375713B (zh) * 2013-08-14 2017-08-25 华为终端有限公司 数据处理方法和移动设备
CN104375713A (zh) * 2013-08-14 2015-02-25 华为终端有限公司 数据处理方法和移动设备
CN104679364B (zh) * 2013-11-26 2017-10-20 乐金显示有限公司 触摸和姿势感测系统及其驱动方法
CN104679364A (zh) * 2013-11-26 2015-06-03 乐金显示有限公司 触摸和姿势感测系统及其驱动方法
CN105718182A (zh) * 2014-12-02 2016-06-29 天津富纳源创科技有限公司 触控装置
CN107113497A (zh) * 2014-12-12 2017-08-29 英特尔公司 可佩戴音频混合
CN107209582A (zh) * 2014-12-16 2017-09-26 肖泉 高直观性人机界面的方法和装置
CN105739740A (zh) * 2014-12-29 2016-07-06 大陆汽车系统公司 具有可变触觉反馈的新型旋钮
CN105739740B (zh) * 2014-12-29 2019-01-01 大陆汽车系统公司 具有可变触觉反馈的新型旋钮
CN105094646A (zh) * 2015-08-24 2015-11-25 联想(北京)有限公司 一种电子设备的控制方法和电子设备
CN105094646B (zh) * 2015-08-24 2018-06-01 联想(北京)有限公司 一种电子设备的控制方法和电子设备
CN106775351A (zh) * 2016-12-09 2017-05-31 联想(北京)有限公司 一种信息处理方法及装置、电子设备
US11543897B2 (en) 2018-11-13 2023-01-03 Yungu (Gu'an) Technology Co., Ltd. Display terminal and display control method

Also Published As

Publication number Publication date
CN108459721A (zh) 2018-08-28
JP6442132B2 (ja) 2018-12-19
EP2626775A3 (en) 2013-09-04
US9411423B2 (en) 2016-08-09
JP2019050040A (ja) 2019-03-28
US10133401B2 (en) 2018-11-20
US20160334924A1 (en) 2016-11-17
KR20130091687A (ko) 2013-08-19
US20130201115A1 (en) 2013-08-08
EP2626775A2 (en) 2013-08-14
JP2013178759A (ja) 2013-09-09
US20190064996A1 (en) 2019-02-28
CN103246472B (zh) 2018-05-08

Similar Documents

Publication Publication Date Title
CN103246472A (zh) 用于触觉缩放手势的方法和设备
EP3257591B1 (en) Systems for a low profile haptic actuator
CN104679233B (zh) 用于生成摩擦和振动触感效果的系统和方法
US6822635B2 (en) Haptic interface for laptop computers and other portable devices
JP5315448B2 (ja) モバイルデバイス上での共有されたフィードバックのための双方向性モデル
KR101540525B1 (ko) 자동-모핑 적응형 사용자 인터페이스 디바이스 및 방법들
US9134797B2 (en) Systems and methods for providing haptic feedback to touch-sensitive input devices
JP2016081524A (ja) リジッド部品を有し、触覚を利用可能で変形可能な装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: American California

Applicant after: Immersion Corp.

Address before: American California

Applicant before: Immersion Corp.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: IMMERSION CORP. TO: YIMEISEN CO., LTD.

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180508

Termination date: 20220207

CF01 Termination of patent right due to non-payment of annual fee