CN104679323A - 动态触觉转换系统 - Google Patents

动态触觉转换系统 Download PDF

Info

Publication number
CN104679323A
CN104679323A CN201410455472.6A CN201410455472A CN104679323A CN 104679323 A CN104679323 A CN 104679323A CN 201410455472 A CN201410455472 A CN 201410455472A CN 104679323 A CN104679323 A CN 104679323A
Authority
CN
China
Prior art keywords
haptic
signal
input signal
value
effect object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410455472.6A
Other languages
English (en)
Other versions
CN104679323B (zh
Inventor
S·S·巴哈迪亚
J·M·克鲁兹-赫尔南德斯
L·T·番
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Priority to CN201910113398.2A priority Critical patent/CN109857256A/zh
Publication of CN104679323A publication Critical patent/CN104679323A/zh
Application granted granted Critical
Publication of CN104679323B publication Critical patent/CN104679323B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种将输入信号动态地转换成触觉信号的系统。该系统生成效果对象，其中效果对象包括对输入信号执行触觉转换算法以将输入信号转换成输出信号的指令，并且其中效果对象的顺序被限定。系统还接收输入信号。系统还按限定的顺序向输入信号应用效果对象，其中一效果对象的输出信号形成触觉信号。系统还将触觉信号发送到触觉输出设备，其中触觉信号使得触觉输出设备输出触觉效果。

Description

动态触觉转换系统
相关申请的交叉引用
本申请要求2013年9月6日递交的序列号为61/874,920的美国临时专利申请的优先权，特此通过引用并入该申请的公开内容。
技术领域
一个实施例概括而言涉及设备，更具体而言涉及产生触觉效果(haptic effect)的设备。
背景技术
电子设备制造商努力为用户产生丰富的接口。传统的设备使用视觉和听觉线索来向用户提供反馈。在一些接口设备中，还向用户提供动力学反馈(例如作用力和阻力反馈)和/或触感反馈(例如振动、纹理和热量)，它们更概括而言被统称为“触觉反馈”或“触觉效果”。触觉反馈可提供增强和简化用户接口的线索。具体而言，振动效果或者说振动触感触觉效果在向电子设备的用户提供线索以就特定事件提醒用户或者提供逼真的反馈以产生在仿真或虚拟环境内的更强的感官沉浸方面是有用的。
触觉效果开发者可为设备编写触觉效果，并且设备可被配置为输出触觉效果。在此场景中，不同类型的硬件可由于不同的硬件特性而能够生成不同类型的触觉效果。例如，不同类型的致动器，例如偏心旋转质量电机致动器、线性谐振致动器和压电致动器，能够由于不同致动器的不同机电特性而生成不同类型的触觉效果。一般地，希望为特定类型的硬件编写触觉效果的触觉效果开发者需要为该特定硬件定制触觉效果。如果触觉效果开发者希望支持多种硬件类型，则触觉效果开发者一般必须编写不同的触觉效果，以便为每种硬件类型提供最优的触觉体验。这可导致编写触觉效果时涉及额外的设计时间和精力。
发明内容
一个实施例是一种将输入信号动态地转换成触觉信号的系统。该系统生成效果对象，其中效果对象包括对输入信号执行触觉转换算法以将输入信号转换成输出信号的指令，并且其中效果对象的顺序被限定。系统还接收输入信号。系统还按限定的顺序向输入信号应用效果对象，其中一效果对象的输出信号形成触觉信号。系统还将触觉信号发送到触觉输出设备，其中触觉信号使得触觉输出设备输出触觉效果。
附图说明
更多实施例、细节、优点和修改将通过以下要结合附图来理解的对优选实施例的详细描述而变清楚。
图1示出了根据本发明的一个实施例的系统的框图。
图2根据本发明的实施例示出了动态链接效果的示例。
图3根据本发明的实施例示出了动态窗口触觉转换算法的功能的流程图。
图4根据本发明的实施例示出了对于流传输触觉信号的请求，该请求是触觉信号的动态压缩的成分。
图5根据本发明的实施例示出了作为触觉信号的动态压缩的成分的流传输会话的初始化。
图6根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩算法的确定。
图7根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩算法的通信。
图8根据本发明的实施例示出了作为触觉信号的动态压缩的成分的答复通信。
图9根据本发明的实施例示出了作为触觉信号的动态压缩的成分的答复通信。
图10根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩通信。
图11根据本发明的实施例示出了作为触觉信号的动态压缩的成分的触觉信号的压缩和流传输。
图12根据本发明的实施例示出了动态触觉转换模块的功能的流程图。
图13根据本发明的实施例示出了动态触觉转换模块的功能的流程图。
图14根据本发明的实施例示出了动态触觉转换模块的功能的流程图。
具体实施方式
一个实施例是这样的一种系统，该系统通过动态地链接或者链锁各种触觉转换算法(也称为“效果”)来执行输入信号——例如音频信号——到触觉信号的转换，其一个效果的输出信号用作另一效果的输入信号。从而，系统可在运行时按任何顺序对一组效果排序，并且该组效果可被扩展为包括在该组效果的创建之后创建的效果。通过归纳并利用效果，系统可在运行时动态地创建效果的列表，这些效果可共同创建任何触觉转换算法。
在另一实施例中，系统通过如下方式来执行输入信号到触觉信号的转换：动态地创建并更新基于输入信号的最小和最大幅度值限定输入信号的一部分的范围(也称为“窗口”)，并且对输入信号的“落在窗口内”的部分进行按比例缩放。输入信号的没有“落在窗口内”的部分不被系统按比例缩放。在一个实施例中，窗口包括大于或等于最小幅度值并且小于或等于最大值的幅度值的范围。输入信号的包括大于或等于最小幅度值并且小于或等于最大值的幅度值的部分落在窗口内。输入信号的包括小于最小幅度值或者大于最大幅度值的幅度值的部分不落在窗口内。另外，系统可以频繁地更新最小和最大幅度值，并且可基于经更新的最小和最大幅度值来进一步更新窗口。从而，窗口可以是动态窗口。
另外，在另一实施例中，系统可以动态地压缩触觉信号并将动态压缩的触觉信号流传输到触觉输出设备。通过对触觉信号进行动态压缩，系统可以基于系统与客户端之间的往返持续时间、触觉信号的一个或多个特性或者这些的组合来选择压缩算法。从而，系统可以针对许多不同的场景高效地压缩并流传输触觉信号。另外，通过对触觉信号进行流传输，系统可将触觉信号发送或发射到远程设备。
图1示出了根据本发明的一个实施例的系统10的框图。在一个实施例中，系统10是设备(例如移动设备或可穿戴设备)的一部分，并且系统10为该设备提供动态触觉转换功能。可穿戴设备的示例包括手环、头环、眼镜、戒指、脚环、集成到衣物中的阵列或者用户可穿戴在身体上或者可被用户握持的任何其他类型的设备。一些可穿戴设备可以是“触觉使能的”，意思是它们包括生成触觉效果的机制。在另一实施例中，系统10与设备(例如移动设备或可穿戴设备)分离，并且为设备远程地提供上述功能。虽然被示为单个系统，但系统10的功能可实现为分布式系统。系统10包括总线12或用于传达信息的其他通信机制，以及耦合到总线12用于处理信息的处理器22。处理器22可以是任何类型的通用或专用处理器。系统10还包括存储器14，用于存储信息和处理器22要执行的指令。存储器14可包括随机访问存储器(“RAM”)、只读存储器(“ROM”)、诸如磁盘或光盘之类的静态存储装置或者任何其他类型的计算机可读介质的任何组合。
计算机可读介质可以是任何可被处理器22访问的可用介质并且可包括易失性介质和非易失性介质、可移除介质和不可移除介质、通信介质以及存储介质。通信介质可包括计算机可读指令、数据结构、程序模块或者经调制的数据信号(例如载波或其他传输机制)中的其他数据，并且可包括本领域中已知的任何其他形式的信息输送介质。存储介质可包括RAM、闪存、ROM、可擦除可编程只读存储器(“EPROM”)、电可擦除可编程只读存储器(“EEPROM”)、寄存器、硬盘、可移除盘、致密盘只读存储器(“CD-ROM”)或者本领域已知的任何其他形式的存储介质。
在一个实施例中，存储器14存储在被处理器22执行时提供功能的软件模块。这些模块包括为系统10以及在一个实施例中为移动设备的其余部分提供操作系统功能的操作系统15。这些模块还包括将输入信号动态地转换成触觉信号的动态触觉转换模块16，这在下文中更详细公开。在某些实施例中，动态触觉转换模块16可包括多个模块，其中每个模块提供用于将输入信号动态地转换成触觉信号的特定个体功能。系统10通常将包括一个或多个额外的应用模块18来包括额外的功能，例如Immersion Corporation的IntegratorTM软件。
系统10在从远程源发送和/或接收数据的实施例中还包括通信设备20，例如网络接口卡，以提供移动无线网络通信，例如红外、无线电、Wi-Fi或蜂窝网络通信。在其他实施例中，通信设备20提供有线网络连接，例如以太网连接或调制解调器。
处理器22还经由总线12耦合到用于向用户显示图形表示或用户界面的显示器24，例如液晶显示器(“LCD”)。显示器24可以是被配置为从处理器22发送和接收信号的触摸敏感输入设备，例如触摸屏，并且可以是多点触控触摸屏。
系统10在一个实施例中还包括致动器26。处理器22可向致动器26发送与生成的触觉效果相关联的触觉信号，致动器26进而输出诸如振动触感触觉效果、静电摩擦触觉效果或形变触觉效果之类的触觉效果。致动器26包括致动器驱动电路。致动器26可以例如是电机、电磁致动器、音圈、形状记忆合金、螺线管、偏心旋转质量电机(“ERM”)、线性谐振致动器(“LRA”)、压电致动器、高带宽致动器、电活性聚合物(“EAP”)致动器、静电摩擦显示器或者超声振动发生器。在替换实施例中，除了致动器26以外，系统10可包括一个或多个额外的致动器(图1中未示出)。致动器26是触觉输出设备的示例，其中触觉输出设备是被配置为响应于驱动信号而输出触觉效果的设备，例如振动触感触觉效果、静电摩擦触觉效果或者形变触觉效果。在替换实施例中，致动器26可被某种其他类型的触觉输出设备所替代。另外，在其他替换实施例中，系统10可不包括致动器26，并且与系统10分开的设备包括生成触觉效果的致动器，或者其他触觉输出设备，并且系统10通过通信设备20将生成的触觉信号发送到该设备。
系统10在一个实施例中还包括扬声器28。处理器22可将音频信号发送到扬声器28，扬声器28进而输出音频效果。扬声器28可以例如是动态扬声器、电动力扬声器、压电扬声器、磁致伸缩扬声器、静电扬声器、带状和平面状磁性扬声器、弯曲波扬声器、平板扬声器、海耳气动换能器、等离子弧扬声器和数字扬声器。在替换实施例中，除了扬声器28以外，系统10可包括一个或多个额外的扬声器(图1中未示出)。另外，在其他替换实施例中，系统10可不包括扬声器28，并且与系统10分开的设备包括输出音频效果的扬声器，并且系统10通过通信设备20将音频信号发送到该设备。
系统10在一个实施例中还包括传感器30。传感器30可被配置为检测某种形式的能量或者其他物理属性，例如但不限于声音、移动、加速度、生物信号、距离、流动、力/压力/应变/弯曲、湿度、线性位置、取向/倾斜、射频、旋转位置、旋转速度、开关的操纵、温度、振动或者可见光强度。传感器30还可被配置为将检测到的能量或者其他物理属性转换成电信号，或者任何可表示虚拟传感器信息的信号。传感器30可以是任何设备，例如但不限于加速度计、心电图仪、脑电图仪、肌电图仪、眼电图仪、电颚仪、皮肤电反应传感器、电容传感器、霍尔效应传感器、红外传感器、超声传感器、压力传感器、光纤传感器、屈曲传感器(或弯曲传感器)、力敏感电阻器、测压元件、LuSenseCPS2155、微型压力换能器、压电传感器、应变计、湿度计、线性位置触摸传感器、线性电位计(或滑臂)、线性可变差动变压器、罗盘、测斜仪、磁性标签(或者射频识别标签)、旋转编码器、旋转电位计、陀螺仪、通断开关、温度传感器(例如温度计、热电偶、电阻温度检测器、热敏电阻或者温度换能集成电路)、麦克风、光度计、测高仪、生物监视器、相机或者光敏电阻器。在替换实施例中，除了传感器30以外，系统10可包括一个或多个额外的传感器(在图1中未示出)。在这些实施例中的一些之中，传感器30和一个或多个额外的传感器可以是传感器阵列的一部分，或者某种其他类型的传感器的集合。另外，在其他替换实施例中，系统10可不包括传感器30，并且与系统10分开的设备包括检测某种形式的能量或者其他物理属性并且将检测到的能量或其他物理属性转换成电信号或者表示虚拟传感器信息的其他类型的信号的传感器。设备随后可通过通信设备20将经转换的信号发送到系统10。
在一个实施例中，如前所述，系统可通过动态地链接或者链锁各种触觉转换算法(即，效果)来执行输入信号——例如音频信号——到触觉信号的转换。更具体而言，根据该实施例，系统可链接或者链锁可在运行时创建的一个或多个效果对象。效果对象是可包括一个或多个计算机可读指令的对象或者模块，这些指令可使得系统接收信号作为输入，对输入信号执行触觉转换算法以将输入信号转换成输出信号(例如触觉信号)，并且将输出信号输出。系统的用户可确定系统可链接或者链锁哪些效果对象，并且还可确定效果对象的顺序。在示例实施例中，用户可与系统的图形用户界面交互以选择一个或多个效果对象，并且选择效果对象的顺序。这种交互可包括：选择在图形用户界面内显示的一个或多个“单选按钮”或“复选框”，将一个或多个效果对象“拖放”到在图形用户界面内显示的管线中，或者相关领域的普通技术人员已知的与图形用户界面的任何其他交互。另外，每个触觉转换算法或者可被实时(或者接近实时)执行，或者可被离线执行(即，在原始输入信号的重放之前或者独立于原始输入信号的重放来执行)。
以前，大多数触觉转换算法包括了静态的特定处理链。例如，触觉转换算法可被定义为滤波转换算法，例如以500赫兹(“Hz”)的截止频率应用到输入信号的低通滤波算法，提取出低于500Hz的所有相关频率，其后是应用到经滤波的输入信号的峰值检测转换算法。与之不同，根据一实施例，系统可在运行时按任何顺序对一组效果排序，并且该组效果可以扩展来包括在该组效果创建之后创建的效果。通过归纳和利用效果，系统可在运行时动态创建效果的列表，这些效果可共同创建任何触觉转换算法。
在一个实施例中，输入信号可以是包括音频数据的音频信号，或者其他类型的音频输入。在替换实施例中，输入信号可以是包括视频数据的视频信号，或者其他类型的视频输入。在另一替换实施例中，输入信号可以是包括加速度数据的加速度信号，或者其他类型的加速度输入。在另一替换实施例中，输入信号可以是包括触觉数据的触觉信号，或者其他类型的触觉输入。在另一替换实施例中，输入信号可以是包括取向数据的取向信号、包括环境光数据的环境光信号或者可被传感器感测到的另一类型的信号。另外，在其他替换实施例中，输入不是输入信号，而是另一类型的包含数据的输入。
另外，在一个实施例中，效果可以是相关领域普通技术人员已知的将输入信号转换成触觉信号的任何触觉转换算法。例如，效果可以是峰值检测触觉转换算法，其对输入信号的每个部分识别最大振幅值，并且基于所识别的最大振幅值来为输入信号的每个部分生成触觉信号，其中所识别的最大振幅值限定触觉信号的幅度。作为另一示例，效果可以是低通滤波触觉转换算法，其滤除掉输入信号的一部分(例如，输入信号的具有最高频率值的部分)，并且基于输入信号的剩余部分来生成触觉信号。作为另一示例，效果可以是高通滤波触觉转换算法，其滤除掉输入信号的一部分(例如，输入信号的具有最低频率值的部分)，并且基于输入信号的剩余部分来生成触觉信号。作为另一示例，效果可以是间距偏移(pitch shift)触觉转换算法，其偏移输入信号的至少一部分的间距，并且基于经间距偏移的输入信号来生成触觉信号。作为另一示例，效果可以是频率偏移触觉转换算法，其偏移输入信号的至少一部分的频率，并且基于经频率偏移的输入信号来生成触觉信号。作为另一示例，效果可以是动态窗口触觉转换算法，这在下文中结合图3来更详细地进一步描述。
示例触觉转换算法在以下专利或专利申请中描述，特此通过引用将所有这些专利或专利申请全部并入：美国专利号7,979,146；美国专利号8,000,825；美国专利号8,378,964；美国专利申请公布号2011/0202155；美国专利申请公布号2011/0215913；美国专利申请公布号2012/0206246；美国专利申请公布号2012/0206247；美国专利申请公布号2013/0265286；美国专利申请公布号2013/0131851；美国专利申请公布号2013/0207917；美国专利申请公布号2013/0335209；美国专利申请公布号2014/0064516；美国专利申请序列号13/661,140；美国专利申请序列号13/785,166；美国专利申请序列号13/788,487；美国专利申请序列号14/078,438；美国专利申请序列号14/078,442；美国专利申请序列号14/078,445；美国专利申请序列号14/051,933；美国专利申请序列号14/020,461；美国专利申请序列号14/020,502；美国专利申请序列号14/246,817；以及美国专利申请序列号14/277,870。
另外，根据一实施例，触觉信号可包括一个或多个触觉参数，其中触觉参数是可限定用于生成触觉效果的触觉信号并且从而也可限定要生成的触觉效果的参数。更具体而言，触觉参数是触觉效果质量的量，例如幅度、频率、持续时间、振幅、强度、包络、密度或者任何其他种类的可量化的触觉参数。根据该实施例，可至少部分由触觉信号的一个或多个触觉参数来限定，其中该一个或多个触觉参数可限定触觉效果的特性。触觉参数可包括数值，其中数值可限定触觉信号的特性，从而也可限定由触觉信号生成的触觉效果的特性。触觉参数的示例可包括：振幅触觉参数、频率触觉参数、持续时间触觉参数、包络触觉参数、密度触觉参数、幅度触觉参数和强度触觉参数。
根据一实施例，系统可将触觉信号发送到触觉输出设备，例如致动器。进而，触觉输出设备可响应于由系统发送的触觉信号来输出一个或多个触觉效果，例如振动触感触觉效果、静电摩擦触觉效果或者形变触觉效果。
图2根据本发明的实施例示出了动态链接效果的示例。动态链接效果可包括任意数目的效果对象，其中效果对象根据预定的顺序被链接或者链锁。示例1示出了可由系统(例如图1的系统10)产生的动态链接效果，其中该动态链接效果包括间距偏移效果对象201、低通滤波效果对象202和峰值检测效果对象203。间距偏移效果对象201是在运行时创建的效果对象，其接收输入信号204，对输入信号204执行间距偏移触觉转换算法以将输入信号204转换成输出信号205，并且将输出信号205输出到低通滤波效果对象202。低通滤波效果对象202是在运行时创建的效果对象，其从间距偏移效果对象201接收输出信号205，对输出信号205执行低通滤波触觉转换算法(例如，500Hz低通滤波触觉转换算法)以将输出信号205转换成输出信号206，并且将输出信号206输出到峰值检测效果对象203。峰值检测效果对象203是在运行时创建的效果对象，其从低通滤波效果对象202接收输出信号206，对输出信号206执行峰值检测触觉转换算法以将输出信号206转换成输出信号207(其中输出信号207是触觉信号)，并且将输出信号207输出。
根据一实施例，如果系统的用户对输出信号207不满意，则用户可向动态链接效果添加一个或多个效果对象，从动态链接效果中去除一个或多个效果对象，修改动态链接效果的效果对象的顺序，或者这些的组合。用户可在不重编译包含计算机可读指令的任何对象或模块的情况下实现这一点。
例如，示例2示出了与示例1中所示的动态链接效果类似的动态链接效果，但其中峰值检测效果对象203被去除了，并且效果的顺序被修改成使得低通滤波效果对象202在间距偏移效果对象201之前。根据该实施例，低通滤波效果对象202接收输入信号204，对输入信号204执行低通滤波触觉转换算法(例如，500Hz低通滤波触觉转换算法)以将输入信号204转换成输出信号208，并将输出信号208输出到间距偏移效果对象201。示例2中的输出信号208不同于示例1中的输出信号206。这是因为在示例1中，间距偏移触觉转换算法首先被应用到输入信号204，随后低通滤波触觉转换算法被应用到输出信号205。与之不同，在示例2中，只有低通滤波触觉转换算法被应用到输入信号204。
另外，间距偏移效果对象201接收输出信号208，对输出信号208执行间距偏移触觉转换算法以将输出信号208转换成输出信号209(其中输出信号209是触觉信号)，并将输出信号209输出。示例2中的输出信号209不同于示例1中的输出信号207。这是因为，在示例1中，间距偏移触觉转换算法首先被应用到输入信号204，低通滤波触觉转换算法随后被应用到输出信号205，并且峰值检测触觉转换算法随后被应用到输出信号207。与之不同，在示例2中，低通滤波触觉转换算法首先被应用到输入信号204，随后间距偏移触觉转换算法被应用到输出信号208。
从而，为了将输入信号——例如输入音频信号或输入触觉信号——转换成输出信号——例如触觉信号，系统在运行时可应用任意数目的效果。从而，示例3示出了包括N个效果的动态链接效果的一般示例，其中N可以是任意数字(即，效果210、220和230，其中效果220和230之间的椭圆可表示任意数目的效果)。从而，在示例3中，效果210接收输入信号240，对输入信号240执行触觉转换算法以将输入信号240转换成输出信号250，并且将输出信号250输出到效果220。这利用N个效果被执行N次，直到效果230(即，第N个效果)将输出信号260输出为止，其中输出信号260是触觉信号。
在一个实施例中，如果系统确定触觉转换算法太大或者太复杂以至于不能在输入信号的重放期间执行，则系统可提供再现(rendering)选项。更具体而言，系统可离线执行触觉转换算法(即，在输入信号的重放之前或者独立于输入信号的重放)。
如前所述，动态链接效果包括输入信号、多个效果以及通过多个效果生成的输出信号。在一个实施例中，输入信号除了实际信号本身以外还可包括元数据。元数据可被系统用于确定要使用哪些效果，确定效果的顺序，或者这些的组合。根据该实施例，信号本身可顺序地移动经过这些效果，并且诸如致动器之类的触觉输出设备可以使用作为触觉信号的输出信号来生成一个或多个触觉效果。
另外，在一个实施例中，如前所述，系统可通过动态地创建和更新基于输入信号的最小和最大幅度值限定输入信号的一部分的范围(即，窗口)并且通过按比例缩放输入信号的落在窗口内的部分，来执行输入信号——例如音频信号——到触觉信号的转换。输入信号的未落在窗口内的部分不被系统按比例缩放。另外，系统可频繁地更新最小和最大幅度值，并且可基于经更新的最小和最大幅度值来进一步更新窗口。从而，窗口可以是动态窗口。这种触觉转换算法被称为动态窗口触觉转换算法。
先前的触觉转换系统的一个问题是，输入信号(例如，输入音频信号)的幅度可能不会高到足以提供“可感受的”触觉效果，即使在执行了触觉转换之后也是如此。换言之，在输入音频信号的示例中，如果输入音频信号不足够响亮，则基于经转换的触觉信号输出的触觉效果从用户的角度来看可能不会提供适当的触觉体验。根据一实施例，通过动态地创建和更新限定输入信号的要被按比例缩放的部分的窗口，并随后对输入信号的落在窗口内的部分进行按比例缩放，输入信号的该部分可被映射到特定的触觉“可感受窗口”。这样，在输入音频信号的示例中，如果音频比从触觉角度来看比所需要的更温和，则输入音频信号仍可被转换到适当触觉窗口内的适当触觉信号。
另外，根据该实施例，取决于可被频繁(或不频繁)更新的全局最小幅度值和全局最大幅度值，窗口可以是动态的(即，可以频繁地或不频繁地移动)。基于全局最小和最大幅度值，可以确定一个或多个阈值。一个或多个阈值可用于确定输入信号的一部分是否落在窗口内，从而可确定输入信号的该部分是否要被按比例缩放。这可对输入信号的每个部分完成，使得整个输入信号可被转换成触觉信号。根据该实施例，输入信号的一些部分可被按比例缩放，并且输入信号的其他部分可不被按比例缩放。在一个实施例中，可以分析输入信号的一部分的一个或多个幅度值以确定输入信号的该部分所属的“箱格”(bin)，并且输入信号的该部分可被映射到该箱格。在替换实施例中，取代箱格，可以使用其他方法，例如数学公式或者查找表，来解读最小和最大幅度值，确定一个或多个阈值，并且确定输入信号的一部分是否落在窗口内。
根据一实施例，为了实现动态窗口触觉转换算法，可以执行动态范围压缩。动态范围压缩是在指定范围内对输入信号——例如音频信号——的幅度值的压缩。例如，对于输入音频信号，响亮的声音可被降低到一定范围以防止限幅，并且柔和的声音可被放大以落在相同范围内以便它们被听到。动态范围压缩可最终由动态压缩算法的阈值来控制，其中该阈值可由一个或多个阈值来表示。另外，可以有两种动态范围压缩：向下压缩；以及向上压缩。在向下压缩中，超过阈值的信号的幅度值被降低，而等于或低于阈值的信号的幅度值不变。在向上压缩中，低于阈值的信号的幅度值被增大，而等于或高于阈值的信号的幅度值不变。根据一实施例，动态窗口触觉转换算法可对输入信号的每个部分使用全局最小幅度值和全局最大幅度值以确定动态压缩算法对输入信号的每个部分使用的阈值。下面结合图3来更详细地进一步描述动态窗口触觉转换算法。
图3根据本发明的实施例示出了动态窗口触觉转换算法的功能的流程图。在一个实施例中，图3的功能以及下文描述的图12、13和14的功能是由存储在存储器或其他计算机可读或有形介质中并被处理器执行的软件实现的。在其他实施例中，每个功能可由硬件执行(例如通过使用专用集成电路(“ASIC”)、可编程门阵列(“PGA”)、现场可编程门阵列(“FPGA”)等等)，或者由硬件和软件的任何组合执行。在某些实施例中，可以省略一些功能。
流程开始并前进到310，在这里输入信号300的至少一部分被接收作为输入缓冲。在一些实施例中，输入信号300只有一部分被接收为输入缓冲。在其他实施例中，输入信号300全部被接收为输入缓冲。可选地，执行对输入缓冲的任何必要的预处理。流程随后前进到320。
在320，通过分析输入信号300或者输入信号300的包含在输入缓冲内的部分并且确定输入信号300或者输入信号300的该部分的最小幅度值和最大幅度值，来取得输入缓冲的最小幅度值和最大幅度值。取得的最小幅度值随后被与全局最小幅度值相比较，并且取得的最大幅度值被进一步与全局最大幅度值相比较。如果取得的最小幅度值小于全局最小幅度值，取得的最大幅度值大于全局最大幅度值，或者这些的组合，则流程前进到330。否则，流程前进到350。另外，如果没有全局最小和最大幅度值，则全局最小和最大幅度值被设定到取得的最小和最大幅度值，并且流程前进到350。
在330，如果取得的最小幅度值小于全局最小幅度值，则全局最小幅度值被调整为等于取得的最小幅度值。另外，如果取得的最大幅度值大于全局最大幅度值，则全局最大幅度值被调整为等于取得的最大幅度值。随后，解读全局最小和最大幅度值并且基于经解读的全局最小和最大幅度值来确定一个或多个阈值幅度值。可根据许多不同方法之一来确定一个或多个阈值幅度值。例如，在一个实施例中，基于经解读的全局最小和最大幅度值，输入缓冲可被映射到箱格，其中对于该箱格预定了一个或多个阈值幅度值。与映射的箱格相关联的一个或多个预定的阈值幅度值可用作一个或多个阈值幅度值。在另一实施例中，可利用一个或多个数学公式来基于经解读的全局最小和最大幅度值计算一个或多个阈值幅度值。在此实施例中，一个或多个数学公式可被应用到经解读的全局最小和最大幅度值以便计算一个或多个阈值幅度值。在另一实施例中，可以利用经解读的全局最小和最大幅度值来分析一个或多个查找表，并且可基于经解读的全局最小和最大幅度值从一个或多个查找表中选择一个或多个阈值幅度值。在替换实施例中，可利用相关领域普通技术人员已知的任何方法来基于经解读的全局最小和最大幅度值确定一个或多个阈值幅度值。流程前进到340。
在340，动态范围压缩算法的一个或多个阈值幅度值可被调整为等于在330确定的一个或多个阈值幅度值。流程随后前进到350。
在350，动态范围压缩算法被应用到输入缓冲内包含的输入信号300，或者输入信号300的一部分。在一个实施例中，应用向上压缩算法。在此实施例中，输入信号300或者输入信号300的该部分的低于一个或多个阈值幅度值的任何幅度值被按比例放大(即，增大)。输入信号300或者输入信号300的该部分的所有其他幅度值不变。流程随后前进到360。
在360，可选地，执行对输入缓冲的任何必要的后处理。流程随后前进到370。
在370，输入缓冲被输出。更具体而言，输入缓冲内包含的输入信号300或者输入信号300的一部分被输出。如果输入信号300只有一部分被包含在输入缓冲内，则图3所示的流程可对输入信号300的每个部分重复。流程随后结束。
从而，根据该实施例，动态窗口触觉转换算法可通过增大输入信号的低于阈值的部分的幅度值并且通过使输入信号的幅度值等于或高于阈值的其他部分保持不变，来修改输入信号。结果，即使在弱输入信号的情况下，由于对输入信号或输入信号的一些部分的按比例放大，动态窗口触觉转换算法也可将输入信号转换成可用于生成能够被用户实际感受到的一个或多个触觉效果的触觉信号。另外，无论用于生成触觉效果的触觉输出设备的类型如何，动态窗口触觉转换算法都可修改输入信号以使得输入信号可被转换成可用于生成能够被感受到的触觉效果的触觉信号。另外，如前所述，动态窗口触觉转换算法可以是与其他触觉转换算法动态链接或者链锁的触觉转换算法。
另外，在一个实施例中，如前所述，系统可动态压缩触觉信号或者触觉流，并且将动态压缩的触觉信号流传输到触觉输出设备。通过对触觉信号进行动态压缩，系统可基于系统与客户端之间的往返持续时间、触觉信号的一个或多个特征或者这些的组合选择压缩算法来应用到触觉信号。通过压缩触觉信号，系统可使得触觉信号占据介质内的更少空间。
从而，根据一实施例，对于许多种致动器类型，系统可提供多种方式来高效地压缩触觉信号，例如8,000Hz8比特脉冲编码调制(“PCM”)信号。另外，作为压缩的一部分，系统可消除对于存储触觉信号而言不必要的一个或多个频率。另外，触觉信号还可包括n个通道，其中n是任意数目。在此情况下，n个通道内包含的数据可与触觉信号交织。
作为一个示例，压电致动器在其播放包含从50Hz到300Hz的频率范围的触觉信号(或触觉流)时性能最佳。这可意味着触觉信号中的其他频率范围可能不是需要的，并且可能不希望在压电致动器处播放触觉信号的其他频率范围。系统可通过利用具有特定滤波器组的触觉编码算法来消除这些频率范围并且高效地存储经压缩的触觉数据。这些滤波器组可滤除掉任何不想要的频率范围并且可只存储期望的频率范围。系统可进一步量化所得到的触觉数据。量化算法可以是有损或无损的。系统随后可利用触觉编码算法，例如霍夫曼编码算法，来更进一步地压缩触觉数据。在解码侧，系统可逆转上述过程并且取得包括期望的频率范围的触觉数据。触觉数据可被直接发送到压电致动器，在这里触觉数据可被播放以生成触觉效果。
作为另一示例，ERM致动器和LRA致动器的性能可依据类型和驱动电路而有所不同，因此不能假定特定的距离范围对于这些类型的致动器将是合乎需要的。对于此示例，系统可利用以1ms间隔对触觉数据取平均的一种不同的触觉编码算法，其将触觉数据转换成1000Hz、8比特，这是原始的1/8那么小。系统可进一步使用无损量化器和一个或多个触觉编码算法来更加收缩触觉数据。系统随后可利用逆转触觉编码和量化器处理的解码算法，并且以1ms的更新速率利用1000Hz、8比特数据流上的效果调用来重放触觉数据。
在另一示例中，可以接收触觉信号或触觉流的原始触觉数据。理想情况下，这个触觉数据已经经过了设计时转换，其中已对信号执行了触觉转换算法。例如压电致动器之类的触觉输出设备可以仅提供在特定频率范围(例如，150–350Hz)的期望触觉效果。根据一实施例，系统可利用触觉信号或触觉流以双采样率(例如，800Hz的采样率)表示150–350Hz的频率范围中的触觉数据。
为了将触觉信号从44.1/48KHz PCM按比例缩小到800HzPCM，系统可使用去除触觉信号的所有高频成分(例如，大于或等于400Hz的频率成分)的滤波器组，以使得触觉信号只包括小于400Hz的内容。系统随后可将信号重采样到800Hz。这个过程可产生具有800Hz的采样率的触觉信号。滤波器组还可去除所有低频成分(例如，小于50Hz的频率成分)。
在此示例中，如果触觉编码算法是有损编码算法，则系统可量化触觉信号并且使用霍夫曼编码算法来更进一步压缩触觉数据。然而，如果触觉信号要被无损压缩，则触觉信号可使用线性预测编码算法来近似触觉信号的成分并对误差进行压缩。
另外，对于用于LRA致动器或者ERM致动器的触觉信号，触觉数据可以是以200Hz采样的一系列幅度值。系统可应用无损编码算法来向下压缩触觉数据。
下面结合图4-11更详细地进一步描述触觉信号的动态压缩的示例。
图4根据本发明的实施例示出了对于流传输触觉信号的请求，该请求是触觉信号的动态压缩的成分。更具体而言，图4示出了客户端410和服务器420。根据该实施例，客户端410向服务器420发送请求，其中该请求是对于发起会话430(即，“会话X”)来流传输触觉文件440的请求，其中触觉文件440包括触觉信号或者触觉流。作为响应，服务器420发起会话430。
图5根据本发明的实施例示出了作为触觉信号的动态压缩的成分的流传输会话的初始化。根据该实施例，服务器420向客户端410发送确认，确认会话430已被发起。另外，服务器420测量服务器420与服务器420之间的往返持续时间。更具体而言，服务器420测量向客户端410发送数据和从客户端410接收数据所花的时间量。
图6根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩算法的确定。根据该实施例，服务器420基于以下各项来选择压缩算法来应用到触觉文件440：测量到的客户端410与服务器420之间的往返持续时间；存储在触觉文件440内的触觉信号或触觉流的一个或多个特性；或者这些的组合。服务器420除了压缩算法以外还可以可选地选择触觉编码算法450(即，“编码器A”)。触觉信号的示例特性可包括幅度、频率、持续时间、振幅、强度、包络、密度或者触觉信号的任何其他种类的可量化的物理特性。
图7根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩算法的通信。根据该实施例，服务器420向客户端410发送对压缩算法的选择(以及可选地，对触觉编码算法450的选择)的指示.根据该实施例，解压缩算法可对客户端410可用。可选地，触觉解码算法460(即，“解码器A”)也可对客户端410可用。
图8根据本发明的实施例示出了作为触觉信号的动态压缩的成分的答复通信。根据该实施例，客户端410向服务器420发送答复。该答复可指示出服务器420可开始流传输触觉文件440。该答复或者可以请求服务器420终止会话430。客户端410可能因为与服务器420指示的压缩算法匹配的解压缩算法对客户端410不可用而希望终止会话430。客户端410还可能因为与触觉编码算法450匹配的触觉解码算法对客户端410不可用而希望终止会话430。答复或者可以请求服务器420使用与对客户端410可用的解压缩算法匹配的压缩算法。额外地或替换地，答复可以请求服务器420使用与对客户端410可用的触觉解码算法(例如，触觉解码算法460)匹配的触觉编码算法。
图9根据本发明的实施例示出了作为触觉信号的动态压缩的成分的答复通信。根据该实施例，客户端410向服务器420发送答复。如前所述，该答复可请求服务器420使用与对客户端410可用的解压缩算法匹配的压缩算法。额外地或替换地，该答复可以请求服务器420使用与对客户端410可用的触觉解码算法(例如，触觉解码算法460)匹配的触觉编码算法。在此实施例中，答复还可包括：对客户端410可用的一个或多个解压缩算法的列表；对客户端410可用的一个或多个触觉解码算法(例如，触觉解码算法460)的列表；或者这些的组合。
图10根据本发明的实施例示出了作为触觉信号的动态压缩的成分的压缩通信。根据该实施例，服务器420向客户端410发送指示，其中该指示向客户端410指示出服务器420将开始向客户端410发送数据，并且其中该指示还指令客户端410开始接收服务器420发送给客户端410的数据。
图11根据本发明的实施例示出了作为触觉信号的动态压缩的成分的触觉信号的压缩和流传输。根据该实施例，服务器420向触觉文件440应用压缩算法，并且压缩触觉文件440。另外，服务器420可选地应用触觉编码算法450并对触觉文件440编码。服务器420随后将触觉文件440流传输到客户端410。客户端410向触觉文件440应用解压缩算法，并且对触觉文件440进行解压缩。另外，服务器420可选地应用触觉解码算法460并对触觉文件440解码。
图12根据本发明的实施例示出了动态触觉转换模块的功能的流程图。流程开始并前进到1210。在1210，生成效果对象，其中效果对象包括对输入信号执行触觉转换算法以将输入信号转换成输出信号的指令，并且其中效果对象的顺序被限定。在某些实施例中，至少一个效果对象的触觉转换算法可以是如前所述的动态窗口触觉转换算法，这在下文中结合图3进一步描述。流程随后前进到1220。
在1220，接收输入信号。在某些实施例中，输入信号可以是包括音频数据的音频信号，或者其他类型的音频输入。在替换实施例中，输入信号可以是包括视频数据的视频信号，或者其他类型的视频输入。在其他替换实施例中，输入信号可以是包括加速度数据的加速度信号，或者其他类型的加速度输入。在其他替换实施例中，输入信号可以是包括触觉数据的触觉信号，或者其他类型的触觉输入。在其他替换实施例中，输入信号可以是包括取向数据的取向信号、包括环境光数据的环境光信号或者可被传感器感测到的另一类型的信号。另外，在其他替换实施例中，输入不是输入信号，而可以是另一类型的包含数据的输入。在一些实施例中，输入信号可包括限定效果对象和效果对象的顺序的元数据。流程随后前进到1230。
在1230，按限定的顺序向输入信号应用效果对象，其中在先效果对象的输出信号是在后效果对象的输入信号，并且其中最后效果对象的输出信号形成触觉信号。流程随后前进到1240。
在1240，触觉信号被发送到触觉输出设备，其中触觉信号使得触觉输出设备输出触觉效果。在某些实施例中，触觉输出设备可以是致动器。流程随后前进到1250。
在1250，可向这些效果对象中添加效果对象；可从这些效果对象中去除效果对象；可以修改这些效果对象的限定顺序；或者这些的组合。另外，在一些实施例中，可以添加多个效果对象；可以去除多个效果对象；或者这些的组合。此外，1220、1230和1240可被再执行以生成与原触觉信号不同的新触觉信号，并且新的触觉信号可被发送到触觉输出设备。从而，在1250，用户可通过修改效果对象、修改效果对象的顺序或者这些的组合来修改从效果对象产生的整体触觉转换算法。从而，触觉转换算法是动态触觉转换算法。在一些实施例中，可以省略1250。另外，在一些实施例中，在1230之后，并且在1240之前，可以如前所述对触觉信号执行动态压缩算法，这在下文中结合图14来进一步描述。流程随后结束。
图13根据本发明的实施例示出了动态触觉转换模块的功能的流程图。流程开始并前进到1310。在1310，分析输入信号的一部分。在某些实施例中，分析整个输入信号。流程随后前进到1320。在1320，确定输入信号(或者输入信号的该部分)的最小振幅值和最大振幅值。流程随后前进到1330。
在1330，将最小振幅值与全局最小振幅值相比较。流程随后前进到1340。在1340，当最小振幅值小于全局最小振幅值时，将全局最小振幅值调整为等于最小振幅值。在没有全局最小振幅值的实施例中，创建全局最小振幅值并将其设定为等于最小振幅值。流程随后前进到1350。
在1350，将最大振幅值与全局最大振幅值相比较。流程随后前进到1360。在1360，当最大振幅值大于全局最大振幅值时，将全局最大振幅值调整为等于最大振幅值。在没有全局最大振幅值的实施例中，创建全局最大振幅值并将其设定为等于最大振幅值。流程随后前进到1370。
在1370，基于全局最小振幅值和全局最大振幅值来确定阈值幅度值。在某些实施例中，可通过基于全局最小振幅值和全局最大振幅值将输入信号(或者输入信号的该部分)映射到箱格来确定阈值幅度值，其中阈值幅度值是对该箱格预先限定的。在其他实施例中，可通过基于全局最小振幅值和全局最大振幅值从查找表中选择阈值幅度值来确定阈值幅度值。在其他实施例中，可通过向全局最小振幅值和全局最大振幅值应用数学公式以计算阈值幅度值，来确定阈值幅度值。流程随后前进到1380。
在1380，基于所确定的阈值幅度值，向输入信号或者输入信号的该部分应用动态范围压缩算法。在某些实施例中，通过应用动态范围压缩算法，输入信号或者输入信号的该部分的低于所确定的阈值幅度值的一个或多个幅度值被按比例放大。在某些实施例中，可对输入信号的每个部分执行1310-1380。流程随后结束。
图14根据本发明的实施例示出了动态触觉转换模块的功能的流程图。流程开始并前进到1410。在1410，确定服务器与客户端之间的往返持续时间。流程随后前进到1420。在1420，基于以下各项来选择压缩算法：服务器与客户端之间的往返持续时间；触觉信号的一个或多个特性；或者这些的组合。流程随后前进到1430。在1430，通过将所选择的压缩算法应用到触觉信号来压缩触觉信号。流程随后结束。
从而，在一个实施例中，系统可通过动态地链接或者链锁各种触觉转换算法(即，效果)来执行输入信号到触觉信号的转换。这可使得最终用户能够利用其更熟悉的参数来完全定制其触觉效果。最终用户可使用能够访问效果的测试应用以便确定什么触觉转换算法在其设备上“感受”最佳。另外，最终用户在确定在其设备上工作良好的触觉转换算法时可以更快地回头。如果最终用户发现可用作特定触觉转换算法的一部分的新效果，则该效果可被放置在能够被动态链接或者链锁在一起的效果库中，以便一起用于其他转换中。这可增大为最终用户设计触觉效果的自由度。
另外，在另一实施例中，系统可通过动态地创建和更新基于输入信号的最小和最大幅度值限定输入信号的一部分的范围(即，窗口)并且通过对输入信号的落在该窗口内的部分进行按比例缩放，来执行输入信号到触觉信号的转换。这可解决如下问题：即使原始输入音频信号在通过音频输出设备(例如扬声器)播放时被感知为响亮的，转换后的触觉信号也不会太强。
此外，在另一实施例中，系统可动态地压缩触觉信号或者触觉流，并且将动态压缩的触觉信号流传输到触觉输出设备。这对于高效地存储和流传输触觉数据可能是非常重要的，并且可允许触觉使能的媒体对于最终用户来说更有吸引力。
在本说明书各处描述的本发明的特征、结构或特性可在一个或多个实施例中按任何适当的方式被组合。例如，在本说明书各处对“一个实施例”、“一些实施例”、“某个实施例”、“某些实施例”、或其他类似语言的使用指的是如下事实：联系该实施例描述的特定特征、结构或特性可被包括在本发明的至少一个实施例中。从而，在本说明书各处出现的短语“一个实施例”、“一些实施例”、“某个实施例”、“某些实施例”或其他类似语言不一定都指同一组实施例，并且所描述的特征、结构或特性可在一个或多个实施例中按任何方式被组合。
本领域普通技术人员将容易理解，如上所述的本发明可以以具有不同顺序的步骤来实现，和/或以具有与所公开的不同的配置的元素来实现。因此，虽然已基于这些优选实施例描述了本发明，但本领域技术人员将清楚，在维持在本发明的精神和范围内的同时，某些修改、变化和替换构造将是明显的。因此，为了确定本发明的界限和范围，应当参考所附权利要求。

Claims (20)

1.一种计算机可读介质，其上存储有指令，所述指令当被处理器执行时使得该处理器将输入信号动态地转换成触觉信号，所述转换包括：
生成多个效果对象，其中效果对象包括对所述输入信号执行触觉转换算法以将所述输入信号转换成输出信号的指令，并且其中所述多个效果对象的顺序被限定；
接收所述输入信号；
按限定的顺序向所述输入信号应用所述多个效果对象，其中一效果对象的输出信号形成所述触觉信号；以及
将所述触觉信号发送到触觉输出设备，其中所述触觉信号使得所述触觉输出设备输出一个或多个触觉效果。
2.如权利要求1所述的计算机可读介质，所述转换还包括以下各项中的至少一者：向所述多个效果对象添加效果对象；从所述多个效果对象中去除效果对象；或者修改所述多个效果对象的限定顺序。
3.如权利要求1所述的计算机可读介质，其中，所述输入信号包括限定所述多个效果对象和所述多个效果对象的顺序的元数据。
4.如权利要求1所述的计算机可读介质，其中，至少一个效果对象的触觉转换算法包括：
分析所述输入信号的至少一部分；
基于全局最小振幅值和全局最大振幅值来确定阈值幅度值；以及
基于所确定的阈值幅度值来向所述输入信号应用动态范围压缩算法。
5.如权利要求4所述的计算机可读介质，其中，向所述输入信号应用所述动态范围压缩算法还包括对所述输入信号的低于所确定的阈值幅度值的一个或多个幅度值进行按比例放大。
6.如权利要求4所述的计算机可读介质，其中，所述至少一个效果对象的触觉转换算法还包括：
确定所述输入信号的最小振幅值和最大振幅值；
将所述最小振幅值与全局最小振幅值相比较；
当所述最小振幅值小于所述全局最小振幅值时，将所述全局最小振幅值调整为等于所述最小振幅值；
将所述最大振幅值与全局最大振幅值相比较；以及
当所述最大振幅值大于所述全局最大振幅值时，将所述全局最大振幅值调整为等于所述最大振幅值。
7.如权利要求6所述的计算机可读介质，其中，所述至少一个效果对象的触觉转换算法是对所述输入信号的每个部分执行的。
8.如权利要求4所述的计算机可读介质，其中，基于全局最小振幅值和全局最大振幅值确定阈值幅度值还包括：基于所述最小振幅值和所述最大振幅值来将所述输入信号映射到箱格，其中所述阈值幅度值是为所述箱格预先限定的。
9.如权利要求4所述的计算机可读介质，其中，基于全局最小振幅值和全局最大振幅值确定阈值幅度值还包括：基于所述全局最小振幅值和所述全局最大振幅值来从查找表中选择所述阈值幅度值。
10.如权利要求1所述的计算机可读介质，所述转换还包括：
确定服务器与客户端之间的往返持续时间；
基于以下各项中的至少一者来选择压缩算法：所述服务器与所述客户端之间的所述往返持续时间；或者所述触觉信号的一个或多个特性；
通过将所选择的压缩算法应用到所述触觉信号来压缩所述触觉信号。
11.一种用于将输入信号动态地转换成触觉信号的由计算机实现的方法，所述由计算机实现的方法包括：
生成多个效果对象，其中效果对象包括对所述输入信号执行触觉转换算法以将所述输入信号转换成输出信号的指令，并且其中所述多个效果对象的顺序被限定；
接收所述输入信号；
按限定的顺序向所述输入信号应用所述多个效果对象，其中一效果对象的输出信号形成所述触觉信号；以及
将所述触觉信号发送到触觉输出设备，其中所述触觉信号使得所述触觉输出设备输出一个或多个触觉效果。
12.如权利要求11所述的由计算机实现的方法，其中，至少一个效果对象的触觉转换算法包括：
分析所述输入信号的至少一部分；
基于全局最小振幅值和全局最大振幅值来确定阈值幅度值；以及
基于所确定的阈值幅度值来向所述输入信号应用动态范围压缩算法。
13.如权利要求12所述的由计算机实现的方法，其中，向所述输入信号应用动态范围压缩算法还包括：对所述输入信号的低于所确定的阈值幅度值的一个或多个幅度值进行按比例放大。
14.如权利要求12所述的由计算机实现的方法，其中，所述至少一个效果对象的触觉转换算法还包括：
确定所述输入信号的最小振幅值和最大振幅值；
将所述最小振幅值与全局最小振幅值相比较；
当所述最小振幅值小于所述全局最小振幅值时，将所述全局最小振幅值调整为等于所述最小振幅值；
将所述最大振幅值与全局最大振幅值相比较；以及
当所述最大振幅值大于所述全局最大振幅值时，将所述全局最大振幅值调整为等于所述最大振幅值。
15.如权利要求11所述的由计算机实现的方法，还包括：
确定服务器与客户端之间的往返持续时间；
基于以下各项中的至少一者来选择压缩算法：所述服务器与所述客户端之间的所述往返持续时间；或者所述触觉信号的一个或多个特性；
通过将所选择的压缩算法应用到所述触觉信号来压缩所述触觉信号。
16.一种用于将输入信号动态地转换成触觉信号的系统，该系统包括：
存储器，被配置为存储动态触觉转换模块；以及
处理器，被配置为执行存储在所述存储器上的所述动态触觉转换模块；
其中，所述处理器在执行所述动态触觉转换模块时被配置为生成多个效果对象，其中效果对象包括对所述输入信号执行触觉转换算法以将所述输入信号转换成输出信号的指令，并且其中所述多个效果对象的顺序被限定；
其中，所述处理器在执行所述动态触觉转换模块时还被配置为接收所述输入信号；
其中，所述处理器在执行所述动态触觉转换模块时还被配置为按限定的顺序向所述输入信号应用所述多个效果对象，其中一效果对象的输出信号形成所述触觉信号；并且
其中，所述处理器在执行所述动态触觉转换模块时还被配置为将所述触觉信号发送到触觉输出设备，其中所述触觉信号使得所述触觉输出设备输出一个或多个触觉效果。
17.如权利要求16所述的系统，其中，至少一个效果对象的触觉转换算法包括：
分析所述输入信号的至少一部分；
基于全局最小振幅值和全局最大振幅值来确定阈值幅度值；以及
基于所确定的阈值幅度值来向所述输入信号应用动态范围压缩算法。
18.如权利要求17所述的系统，其中，所述处理器在执行所述动态触觉转换模块时还被配置为对所述输入信号的低于所确定的阈值幅度值的一个或多个幅度值进行按比例放大。
19.如权利要求17所述的系统，其中，所述至少一个效果对象的触觉转换算法还包括：
确定所述输入信号的最小振幅值和最大振幅值；
将所述最小振幅值与全局最小振幅值相比较；
当所述最小振幅值小于所述全局最小振幅值时，将所述全局最小振幅值调整为等于所述最小振幅值；
将所述最大振幅值与全局最大振幅值相比较；以及
当所述最大振幅值大于所述全局最大振幅值时，将所述全局最大振幅值调整为等于所述最大振幅值。
20.如权利要求16所述的系统，
其中，所述处理器在执行所述动态触觉转换模块时还被配置为确定服务器与客户端之间的往返持续时间；
其中，所述处理器在执行所述动态触觉转换模块时还被配置为基于以下各项中的至少一者来选择压缩算法：所述服务器与所述客户端之间的所述往返持续时间；或者所述触觉信号的一个或多个特性；
其中，所述处理器在执行所述动态触觉转换模块时还被配置为通过将所选择的压缩算法应用到所述触觉信号来压缩所述触觉信号。
CN201410455472.6A 2013-09-06 2014-09-09 动态触觉转换系统 Expired - Fee Related CN104679323B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910113398.2A CN109857256A (zh) 2013-09-06 2014-09-09 动态触觉转换系统

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361874920P 2013-09-06 2013-09-06
US61/874,920 2013-09-06
US14/469,832 US10162416B2 (en) 2013-09-06 2014-08-27 Dynamic haptic conversion system
US14/469,832 2014-08-27

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910113398.2A Division CN109857256A (zh) 2013-09-06 2014-09-09 动态触觉转换系统

Publications (2)

Publication Number Publication Date
CN104679323A true CN104679323A (zh) 2015-06-03
CN104679323B CN104679323B (zh) 2019-03-08

Family

ID=51429008

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910113398.2A Pending CN109857256A (zh) 2013-09-06 2014-09-09 动态触觉转换系统
CN201410455472.6A Expired - Fee Related CN104679323B (zh) 2013-09-06 2014-09-09 动态触觉转换系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910113398.2A Pending CN109857256A (zh) 2013-09-06 2014-09-09 动态触觉转换系统

Country Status (5)

Country Link
US (2) US10162416B2 (zh)
EP (2) EP3667666A1 (zh)
JP (3) JP2015053047A (zh)
KR (1) KR20150028749A (zh)
CN (2) CN109857256A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105608399A (zh) * 2015-11-13 2016-05-25 深圳市智能体科技有限公司 智能眼镜、智能戒指及通过智能戒指控制智能眼镜的方法
CN109447038A (zh) * 2018-11-27 2019-03-08 南京恩诺网络科技有限公司 触觉信息估算方法及装置、系统
CN109478102A (zh) * 2016-07-22 2019-03-15 哈曼国际工业有限公司 用于向用户递送音频内容的触觉系统
CN109710058A (zh) * 2018-11-27 2019-05-03 南京恩诺网络科技有限公司 触觉信息录制方法及装置、系统
CN111912462A (zh) * 2020-08-12 2020-11-10 东南大学 一种具有滑动觉、压觉和温度觉的多功能柔性触觉传感器

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9519346B2 (en) * 2013-05-17 2016-12-13 Immersion Corporation Low-frequency effects haptic conversion system
JP6361872B2 (ja) * 2014-07-09 2018-07-25 任天堂株式会社 振動生成システム、振動生成装置、振動信号生成プログラム、および振動生成方法
KR101606791B1 (ko) * 2015-09-08 2016-03-28 박재성 주파수 변화에 따라 실시간 진동을 제공하는 진동 제공시스템 및 이것의 진동 제공방법
US9842476B2 (en) * 2015-09-25 2017-12-12 Immersion Corporation Programmable haptic devices and methods for modifying haptic effects to compensate for audio-haptic interference
US10210724B2 (en) 2016-06-29 2019-02-19 Immersion Corporation Real-time patterned haptic effect generation using vibrations
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
US10503261B2 (en) * 2017-12-15 2019-12-10 Google Llc Multi-point feedback control for touchpads
US10455339B2 (en) 2018-01-19 2019-10-22 Cirrus Logic, Inc. Always-on detection systems
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10820100B2 (en) 2018-03-26 2020-10-27 Cirrus Logic, Inc. Methods and apparatus for limiting the excursion of a transducer
US10832537B2 (en) * 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US10684689B2 (en) * 2018-04-20 2020-06-16 Immersion Corporation Cross-platform dynamic haptic effect design tool for augmented or virtual reality environments
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
EP3844597A1 (en) * 2018-08-29 2021-07-07 Ecole Polytechnique Federale De Lausanne (Epfl) Multisensory haptic system and method
US10852830B2 (en) * 2018-09-11 2020-12-01 Apple Inc. Power efficient, dynamic management of haptic module mechanical offset
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US20200313529A1 (en) 2019-03-29 2020-10-01 Cirrus Logic International Semiconductor Ltd. Methods and systems for estimating transducer parameters
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
WO2020254788A1 (en) 2019-06-21 2020-12-24 Cirrus Logic International Semiconductor Limited A method and apparatus for configuring a plurality of virtual buttons on a device
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
CN112596612A (zh) * 2020-12-28 2021-04-02 北京小米移动软件有限公司 触感反馈生成方法、触感反馈生成装置及存储介质
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1200860A (zh) * 1995-10-25 1998-12-02 吉尔伯特·勒内·冈萨雷斯 触觉通信装置和方法
CN1860430A (zh) * 2003-09-30 2006-11-08 英国电讯有限公司 触觉传输系统
US20090231276A1 (en) * 2006-04-13 2009-09-17 Immersion Corporation System And Method For Automatically Producing Haptic Events From A Digital Audio File
CN101714055A (zh) * 2008-10-06 2010-05-26 三星电子株式会社 根据用户的接触模式显示图形用户界面的方法和设备
WO2010148239A1 (en) * 2009-06-19 2010-12-23 Dolby Laboratories Licensing Corporation Hierarchy and processing order control of downloadable and upgradeable media processing applications
CN101424975B (zh) * 2001-10-09 2011-08-17 伊默逊股份有限公司 基于计算机设备的音频输出的触发触觉的方法
CN102576255A (zh) * 2009-09-09 2012-07-11 伊梅森公司 用于触觉增强的文本界面的系统和方法
EP2479643A1 (en) * 2011-01-20 2012-07-25 HTC Corporation Electronic apparatus with haptic feedback and method for providing haptic feedback

Family Cites Families (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5684722A (en) 1994-09-21 1997-11-04 Thorner; Craig Apparatus and method for generating a control signal for a tactile sensation generator
US6882735B2 (en) * 2001-01-11 2005-04-19 Autodesk, Inc. Dynamic range compression of an audio signal
EP1378826A1 (en) * 2002-07-01 2004-01-07 Sun Microsystems, Inc. Filter network for data representation
US7970147B2 (en) * 2004-04-07 2011-06-28 Sony Computer Entertainment Inc. Video game controller with noise canceling logic
KR20060119891A (ko) * 2003-08-28 2006-11-24 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 합성 필터 및 패스밴드 리플 제거 방법
US9948885B2 (en) 2003-12-12 2018-04-17 Kurzweil Technologies, Inc. Virtual encounters
US7979146B2 (en) 2006-04-13 2011-07-12 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US8378964B2 (en) 2006-04-13 2013-02-19 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US9370704B2 (en) 2006-08-21 2016-06-21 Pillar Vision, Inc. Trajectory detection and feedback system for tennis
US7890863B2 (en) * 2006-10-04 2011-02-15 Immersion Corporation Haptic effects with proximity sensing
JP2009020291A (ja) * 2007-07-11 2009-01-29 Yamaha Corp 音声処理装置および通信端末装置
US9019087B2 (en) * 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
GB2468811B (en) 2008-01-17 2012-12-19 Articulate Technologies Inc Methods and devices for intraoral tactile feedback
GB0905692D0 (en) * 2009-04-02 2009-05-20 Tno Touch sensitive device
JP5149991B2 (ja) * 2009-05-29 2013-02-20 シャープ株式会社 音声再生装置、音声再生方法及びプログラム
US9370459B2 (en) 2009-06-19 2016-06-21 Andrew Mahoney System and method for alerting visually impaired users of nearby objects
WO2011127379A2 (en) 2010-04-09 2011-10-13 University Of Florida Research Foundation Inc. Interactive mixed reality system and uses thereof
US8801710B2 (en) * 2010-12-07 2014-08-12 Immersion Corporation Electrosurgical sealing tool having haptic feedback
US8717152B2 (en) 2011-02-11 2014-05-06 Immersion Corporation Sound to haptic effect conversion system using waveform
US9448626B2 (en) 2011-02-11 2016-09-20 Immersion Corporation Sound to haptic effect conversion system using amplitude value
US9083821B2 (en) * 2011-06-03 2015-07-14 Apple Inc. Converting audio to haptic feedback in an electronic device
US8965774B2 (en) * 2011-08-23 2015-02-24 Apple Inc. Automatic detection of audio compression parameters
US9462262B1 (en) 2011-08-29 2016-10-04 Amazon Technologies, Inc. Augmented reality environment with environmental condition control
JP6081705B2 (ja) * 2012-02-03 2017-02-15 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 波形を利用した音響−触覚効果変換システム
EP2629178B1 (en) 2012-02-15 2018-01-10 Immersion Corporation High definition haptic effects generation using primitives
US8711118B2 (en) * 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9715276B2 (en) 2012-04-04 2017-07-25 Immersion Corporation Sound to haptic effect conversion system using multiple actuators
US10852093B2 (en) 2012-05-22 2020-12-01 Haptech, Inc. Methods and apparatuses for haptic systems
US9785236B2 (en) * 2012-05-25 2017-10-10 Immerz, Inc. Haptic interface for portable electronic device
US8860563B2 (en) 2012-06-14 2014-10-14 Immersion Corporation Haptic effect conversion system using granular synthesis
US9368005B2 (en) 2012-08-31 2016-06-14 Immersion Corporation Sound to haptic effect conversion system using mapping
US9092059B2 (en) 2012-10-26 2015-07-28 Immersion Corporation Stream-independent sound to haptic effect conversion system
FR2999741B1 (fr) 2012-12-17 2015-02-06 Centre Nat Rech Scient Systeme haptique pour faire interagir sans contact au moins une partie du corps d'un utilisateur avec un environnement virtuel
US9128523B2 (en) 2012-12-20 2015-09-08 Amazon Technologies, Inc. Dynamically generating haptic effects from audio data
US8754757B1 (en) 2013-03-05 2014-06-17 Immersion Corporation Automatic fitting of haptic effects
KR101666393B1 (ko) * 2013-03-27 2016-10-14 한국전자통신연구원 음향효과를 이용한 촉각효과 재생 장치 및 방법
US9367136B2 (en) 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
US9908048B2 (en) 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
US9811854B2 (en) 2013-07-02 2017-11-07 John A. Lucido 3-D immersion technology in a virtual store
EP4083758A1 (en) 2013-07-05 2022-11-02 Rubin, Jacob A. Whole-body human-computer interface
US9630105B2 (en) 2013-09-30 2017-04-25 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
WO2015107386A1 (en) 2014-01-15 2015-07-23 Sony Corporation Haptic notification on wearables
US9551873B2 (en) 2014-05-30 2017-01-24 Sony Interactive Entertainment America Llc Head mounted device (HMD) system having interface with mobile computing device for rendering virtual reality content
EP3648072A1 (en) 2014-07-28 2020-05-06 CK Materials Lab Co., Ltd. A method for providing haptic information
US9645646B2 (en) 2014-09-04 2017-05-09 Intel Corporation Three dimensional contextual feedback wristband device
US9799177B2 (en) 2014-09-23 2017-10-24 Intel Corporation Apparatus and methods for haptic covert communication
US20160170508A1 (en) 2014-12-11 2016-06-16 Toyota Motor Engineering & Manufacturing North America, Inc. Tactile display devices
US9922518B2 (en) 2014-12-11 2018-03-20 Elwha Llc Notification of incoming projectiles
US9870718B2 (en) 2014-12-11 2018-01-16 Toyota Motor Engineering & Manufacturing North America, Inc. Imaging devices including spacing members and imaging devices including tactile feedback devices
US10166466B2 (en) 2014-12-11 2019-01-01 Elwha Llc Feedback for enhanced situational awareness
US10073516B2 (en) 2014-12-29 2018-09-11 Sony Interactive Entertainment Inc. Methods and systems for user interaction within virtual reality scene using head mounted display
US9746921B2 (en) 2014-12-31 2017-08-29 Sony Interactive Entertainment Inc. Signal generation and detector systems and methods for determining positions of fingers of a user
US9843744B2 (en) 2015-01-13 2017-12-12 Disney Enterprises, Inc. Audience interaction projection system
US10322203B2 (en) 2015-06-26 2019-06-18 Intel Corporation Air flow generation for scent output
WO2017053878A1 (en) 2015-09-25 2017-03-30 Oculus Vr, Llc Haptic surface with damping apparatus
US20170103574A1 (en) 2015-10-13 2017-04-13 Google Inc. System and method for providing continuity between real world movement and movement in a virtual/augmented reality experience
US20170131775A1 (en) 2015-11-10 2017-05-11 Castar, Inc. System and method of haptic feedback by referral of sensation
WO2017095951A1 (en) 2015-11-30 2017-06-08 Nike Innovate C.V. Apparel with ultrasonic position sensing and haptic feedback for activities
US10310804B2 (en) 2015-12-11 2019-06-04 Facebook Technologies, Llc Modifying haptic feedback provided to a user to account for changes in user perception of haptic feedback
US10324530B2 (en) 2015-12-14 2019-06-18 Facebook Technologies, Llc Haptic devices that simulate rigidity of virtual objects
US10096163B2 (en) 2015-12-22 2018-10-09 Intel Corporation Haptic augmented reality to reduce noxious stimuli
US10065124B2 (en) 2016-01-15 2018-09-04 Disney Enterprises, Inc. Interacting with a remote participant through control of the voice of a toy device
US11351472B2 (en) 2016-01-19 2022-06-07 Disney Enterprises, Inc. Systems and methods for using a gyroscope to change the resistance of moving a virtual weapon
US9846971B2 (en) 2016-01-19 2017-12-19 Disney Enterprises, Inc. Systems and methods for augmenting an appearance of a hilt to simulate a bladed weapon
CN106997241B (zh) 2016-01-22 2020-04-21 宏达国际电子股份有限公司 虚拟现实环境中与真实世界互动的方法与虚拟现实系统
US9933851B2 (en) 2016-02-22 2018-04-03 Disney Enterprises, Inc. Systems and methods for interacting with virtual objects using sensory feedback
US10555153B2 (en) 2016-03-01 2020-02-04 Disney Enterprises, Inc. Systems and methods for making non-smart objects smart for internet of things
US20170352185A1 (en) 2016-06-02 2017-12-07 Dennis Rommel BONILLA ACEVEDO System and method for facilitating a vehicle-related virtual reality and/or augmented reality presentation
US10155159B2 (en) 2016-08-18 2018-12-18 Activision Publishing, Inc. Tactile feedback systems and methods for augmented reality and virtual reality systems
US20180053351A1 (en) 2016-08-19 2018-02-22 Intel Corporation Augmented reality experience enhancement method and apparatus
US10779583B2 (en) 2016-09-20 2020-09-22 Facebook Technologies, Llc Actuated tendon pairs in a virtual reality device
US10372213B2 (en) 2016-09-20 2019-08-06 Facebook Technologies, Llc Composite ribbon in a virtual reality device
US10300372B2 (en) 2016-09-30 2019-05-28 Disney Enterprises, Inc. Virtual blaster
US10281982B2 (en) 2016-10-17 2019-05-07 Facebook Technologies, Llc Inflatable actuators in virtual reality
US10088902B2 (en) 2016-11-01 2018-10-02 Oculus Vr, Llc Fiducial rings in virtual reality
US20170102771A1 (en) 2016-12-12 2017-04-13 Leibs Technology Limited Wearable ultrasonic haptic feedback system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1200860A (zh) * 1995-10-25 1998-12-02 吉尔伯特·勒内·冈萨雷斯 触觉通信装置和方法
CN101424975B (zh) * 2001-10-09 2011-08-17 伊默逊股份有限公司 基于计算机设备的音频输出的触发触觉的方法
CN1860430A (zh) * 2003-09-30 2006-11-08 英国电讯有限公司 触觉传输系统
US20090231276A1 (en) * 2006-04-13 2009-09-17 Immersion Corporation System And Method For Automatically Producing Haptic Events From A Digital Audio File
CN101714055A (zh) * 2008-10-06 2010-05-26 三星电子株式会社 根据用户的接触模式显示图形用户界面的方法和设备
WO2010148239A1 (en) * 2009-06-19 2010-12-23 Dolby Laboratories Licensing Corporation Hierarchy and processing order control of downloadable and upgradeable media processing applications
CN102576255A (zh) * 2009-09-09 2012-07-11 伊梅森公司 用于触觉增强的文本界面的系统和方法
EP2479643A1 (en) * 2011-01-20 2012-07-25 HTC Corporation Electronic apparatus with haptic feedback and method for providing haptic feedback

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105608399A (zh) * 2015-11-13 2016-05-25 深圳市智能体科技有限公司 智能眼镜、智能戒指及通过智能戒指控制智能眼镜的方法
CN105608399B (zh) * 2015-11-13 2018-05-08 深圳市智能体科技有限公司 智能眼镜、智能戒指及通过智能戒指控制智能眼镜的方法
CN109478102A (zh) * 2016-07-22 2019-03-15 哈曼国际工业有限公司 用于向用户递送音频内容的触觉系统
CN109478102B (zh) * 2016-07-22 2022-09-23 哈曼国际工业有限公司 用于向用户递送音频内容的触觉系统
CN109447038A (zh) * 2018-11-27 2019-03-08 南京恩诺网络科技有限公司 触觉信息估算方法及装置、系统
CN109710058A (zh) * 2018-11-27 2019-05-03 南京恩诺网络科技有限公司 触觉信息录制方法及装置、系统
CN111912462A (zh) * 2020-08-12 2020-11-10 东南大学 一种具有滑动觉、压觉和温度觉的多功能柔性触觉传感器
CN111912462B (zh) * 2020-08-12 2021-12-24 东南大学 一种具有滑动觉、压觉和温度觉的多功能柔性触觉传感器

Also Published As

Publication number Publication date
US20190073039A1 (en) 2019-03-07
JP2019046505A (ja) 2019-03-22
JP6615307B2 (ja) 2019-12-04
JP2019046506A (ja) 2019-03-22
US10162416B2 (en) 2018-12-25
KR20150028749A (ko) 2015-03-16
CN104679323B (zh) 2019-03-08
JP2015053047A (ja) 2015-03-19
US10409380B2 (en) 2019-09-10
EP3667666A1 (en) 2020-06-17
EP2846329A1 (en) 2015-03-11
CN109857256A (zh) 2019-06-07
US20150070269A1 (en) 2015-03-12

Similar Documents

Publication Publication Date Title
CN104679323A (zh) 动态触觉转换系统
JP6412285B2 (ja) ハプティックワーピングシステム
CN104423586A (zh) 自动远程感测与触觉转换系统
CN104423710A (zh) 将触觉信号变换成振动触知触觉效果模式集合的触觉变形系统
CN104423848A (zh) 使用频移的触觉转换系统
CN103793048A (zh) 独立于流的声音到触觉效应转换系统
CN104423707A (zh) 使用分段和组合的触觉转换系统
JP2020107320A (ja) ハプティック信号変換システム
WO2020008716A1 (ja) 符号化装置、符号化方法、復号装置、復号方法、伝送システム、受信装置、プログラム
EP3462285A1 (en) Haptic pitch control
WO2020044857A1 (ja) 符号化装置、符号化方法、復号装置、復号方法、プログラム
WO2021176842A1 (ja) 復号装置、復号方法、プログラム、符号化装置、符号化方法
KR20210116457A (ko) 복호 장치, 복호 방법 및 프로그램

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190308

Termination date: 20200909