CN110709802B - 触觉装置操作 - Google Patents
触觉装置操作 Download PDFInfo
- Publication number
- CN110709802B CN110709802B CN201780091348.8A CN201780091348A CN110709802B CN 110709802 B CN110709802 B CN 110709802B CN 201780091348 A CN201780091348 A CN 201780091348A CN 110709802 B CN110709802 B CN 110709802B
- Authority
- CN
- China
- Prior art keywords
- audio input
- computer
- haptic
- identifying
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 41
- 230000009471 action Effects 0.000 claims description 18
- 238000013507 mapping Methods 0.000 claims description 11
- 238000004891 communication Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 12
- 230000007246 mechanism Effects 0.000 description 7
- 238000013500 data storage Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000002485 combustion reaction Methods 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003466 anti-cipated effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000009849 deactivation Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000005226 mechanical processes and functions Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/091—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
- G10H2220/101—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters
- G10H2220/116—Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith for graphical creation, edition or control of musical data or parameters for graphical editing of sound parameters or waveforms, e.g. by graphical interactive control of timbre, partials or envelope
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H2220/00—Input/output interfacing specifically adapted for electrophonic musical tools or instruments
- G10H2220/155—User input interfaces for electrophonic musical instruments
- G10H2220/265—Key design details; Special characteristics of individual keys of a keyboard; Key-like musical input devices, e.g. finger sensors, pedals, potentiometers, selectors
- G10H2220/311—Key design details; Special characteristics of individual keys of a keyboard; Key-like musical input devices, e.g. finger sensors, pedals, potentiometers, selectors with controlled tactile or haptic feedback effect; output interfaces therefor
Abstract
一种系统，包括被编程为识别音频输入的多个音频幅度的计算机。所述计算机被编程为识别相应识别的音频幅度之间的音频输入的多个时间间隔。所述计算机被编程为基于识别的音频幅度和所述时间间隔来映射触觉模式。所述计算机被配置为致动马达以输出所述触觉模式。
Description
背景技术
电子装置可以包括触觉装置。触觉装置可以将被编程为生成使电子装置振动以提供触觉输出的振动模式。然而，问题在于当前系统生成各种触觉输出的能力有限。
附图说明
图1是用于致动可穿戴装置的示例性系统的框图。
图2示出了时域中的示例性音频输入。
图3示出了频域中的图2的音频输入。
图4示出了音频输入的多个主频率。
图5示出了基于主频率确定的多个时间间隔。
图6示出了基于时间间隔和主频率映射的触觉模式。
图7示出了安装在可穿戴装置中的示例性马达。
图8是用于确定触觉模式的示例性过程的框图。
具体实施方式
一种系统包括计算机，所述计算机被编程为：识别音频输入的多个音频幅度；识别在相应识别的音频幅度之间的音频输入的多个时间间隔；基于识别的音频幅度和时间间隔来映射触觉模式；以及致动马达以输出触觉模式。
所述计算机还可以被编程为识别用于所述音频输入的频带，并且基于所述频带将滤波器应用于所述音频输入。所述计算机还可以被编程为基于所述经滤波的音频输入来识别所述时间间隔。
所述计算机还可以被编程为识别所述经滤波的音频输入的多个主频率。所述计算机还可以被编程为当所述多个主频率中的两个主频率的相应音频幅度为相同幅度时，基于所识别的时间来识别所述时间间隔。
所述计算机还可以被编程为识别第二频带，并且基于所述第二频带将第二滤波器应用于所述音频输入。所述计算机还可以被编程为基于所述经滤波的音频输入来映射第一触觉模式，并且基于所述第二经滤波的音频输入来映射第二触觉模式。
所述计算机还可以被编程为基于所述触觉模式来调整所述马达的旋转速度。
在确定所述音频输入的持续时间超过持续时间阈值时，所述计算机还可以被编程为接收识别持续时间小于所述持续时间阈值的音频输入的部分的用户输入，并基于所述音频输入的所识别的部分来映射触觉模式。
所述马达可以被设置在便携式装置中，并且所述计算机还可以被编程为指示所述便携式装置致动所述马达以输出所述触觉模式。
一种方法包括：识别音频输入的多个音频幅度；识别在相应识别的音频幅度之间的音频输入的多个时间间隔；基于识别的音频幅度和时间间隔来映射触觉模式；以及致动马达以输出触觉模式。
所述方法还可以包括识别用于所述音频输入的频带，并且基于所述频带将滤波器应用于所述音频输入。所述方法还可以包括基于所述经滤波的音频输入来识别所述时间间隔。
所述方法还可以包括识别所述经滤波的音频输入的多个主频率。所述方法还可以包括当所述多个主频率中的两个主频率的相应音频幅度为相同幅度时，基于识别的时间来识别所述时间间隔。
所述方法还可以包括识别第二频带；以及基于所述第二频带将第二滤波器应用于所述音频输入。所述方法还可以包括基于所述经滤波的音频输入来映射第一触觉模式，以及基于所述第二经滤波的音频输入来映射第二触觉模式。
所述方法还可以包括基于所述触觉模式来调整所述马达的旋转速度。
在确定所述音频输入的持续时间超过持续时间阈值时，所述方法还可以包括：接收识别持续时间小于所述持续时间阈值的所述音频输入的部分的用户输入，并基于所述音频输入的所识别的部分来映射触觉模式。
所述马达可以被设置在便携式装置中，并且所述方法还可以包括指示所述便携式装置致动所述马达以输出所述触觉模式。
还公开了一种被编程来执行上述方法步骤中的任一者的计算装置。还公开了一种包括所述计算装置的车辆。还公开了一种计算机程序产品，其包括计算机可读介质，所述计算机可读介质存储指令，所述指令可由计算机处理器执行，以执行上述方法步骤中的任一者。
图1示出了用于基于音频输入来映射可穿戴装置140的触觉模式的示例性系统100。车辆101中的计算机105被编程为从一个或多个传感器110接收所收集的数据115。例如，车辆101的数据115可以包括车辆101的位置、目标的位置等。位置数据可以为已知形式，例如地理坐标，诸如经由使用全球定位系统(GPS)的已知导航系统来获得的纬度坐标和经度坐标。数据115的另外的示例可以包括车辆101的系统和部件的测量值，例如车辆101的速度、车辆101的轨迹等。
如本文中所使用的，术语“映射”当在映射触觉模式的上下文中用作动词时表示“分配给动作”。计算机105将触觉模式“映射”到动作，使得当识别到动作时，计算机105输出触觉模式。动作可以是事件和/或可能需要用户注意的状况，如下所述。
如已知的，计算机105通常被编程用于用于车辆101网络(例如，包括通信总线)上的通信。经由网络、总线和/或其他有线或无线机制(例如，车辆101中的有线或无线局域网)，计算机105可以向车辆101中的各种装置传输消息和/或从各种装置接收消息，所述各种装置例如控制器、致动器、传感器等，包括传感器110。替代地或另外，在其中计算机105实际上包括多个装置的情况下，车辆网络可以用于在本公开中表示为计算机105的装置之间的通信。另外，计算机105可以被编程为与网络125进行通信，如下所描述，所述网络可以包括各种有线和/或无线联网技术，例如蜂窝、低功耗/>(BLE)、有线和/或无线分组网络等。
数据存储装置106可以是任何已知类型，例如硬盘驱动器、固态驱动器、服务器或任何易失性或非易失性介质。数据存储装置106可以存储从传感器110发送的收集数据115。
传感器110可以包括各种装置。例如，如已知的，车辆101中的各种控制器可以作为传感器110操作以经由车辆101网络或总线提供数据115，例如，与车辆速度、加速度、位置、子系统和/或部件状态等有关的数据115。另外，其他传感器110可以包括相机、运动检测器等，即传感器110用于提供数据115以评估物体的位置、确定用户的存在等。传感器110还可以包括近程雷达、远程雷达和/或超声波换能器。
所收集的数据115可以包括在车辆101中收集的各种数据。以上提供了所收集的数据115的示例，并且此外，数据115通常使用一个或多个传感器110来收集，并且另外可以包括在计算机105中和/或在服务器130处从所收集的数据计算出的数据。通常，所收集的数据115可以包括可以由传感器110采集的和/或从这种数据计算出的任何数据。
车辆101可以包括多个车辆部件120。如本文中所使用的，每个车辆部件120都包括适于执行机械功能或操作(诸如移动车辆、使车辆减速或停止、使车辆转向等)的一个或多个硬件部件。部件120的非限制性示例包括推进部件(其包括例如内燃发动机和/或电动马达等)、变速器部件、转向部件(例如，其可以包括方向盘、转向齿条等中的一者或多者)、制动部件、停放辅助部件、自适应巡航控制部件、自适应转向部件等。
当计算装置105操作车辆101时，车辆101是“自主”车辆101。出于本公开的目的，术语“自主车辆”用于指代以全自主模式操作的车辆101。全自主模式被定义为其中车辆101的推进(通常经由包括电动马达和/或内燃发动机的动力传动系统进行)、制动和转向中的每一者都由计算装置105控制的模式。半自主模式是其中车辆101的推进(通常经由包括电动马达和/或内燃发动机的动力传动系统进行)、制动和转向中的至少一者至少部分地由计算装置105而不是人类操作员控制的模式。
系统100还可以包括连接到服务器130和数据存储装置135的网络125。计算机105还可以被编程为经由网络125与诸如服务器130的一个或多个远程站点进行通信，此类远程站点可以包括数据存储装置135。网络125表示车辆计算机105可以凭其与远程服务器130进行通信的一种或多种机制。因此，网络125可以是各种有线或无线通信机制中的一种或多种，包括有线(例如，电缆和光纤)和/或无线(例如，蜂窝、无线、卫星、微波和射频)通信机制的任何所需组合，以及任何所需网络拓扑(或利用多种通信机制时的拓扑)。示例性通信网络包括提供数据通信服务的无线通信网络(例如，使用低功耗/>(BLE)、IEEE802.11、车辆对车辆(V2V)，诸如专用短程通信(DSRC)等)、局域网(LAN)和/或广域网(WAN)，所述广域网(WAN)包括因特网。
系统100可包括可穿戴装置140。如本文所用，“可穿戴装置”是便携式计算装置，其包括便于可穿戴在人体上的结构(例如，作为手表或手镯、作为吊坠等)，并且包括存储器、处理器、显示器和一个或多个输入机构(诸如触摸屏、按钮等)以及用于诸如本文所述的无线通信的硬件和软件。可穿戴装置140具有适配到或穿戴在人体上的大小和形状(例如，包括手镯带的手表状结构等)，并且因此通常将具有比用户装置150小(例如，是面积的1/3或1/4)的显示器。例如，可穿戴装置140可以是手表、智能手表、振动设备等，其包括用于使用IEEE 802.11、BLE和/或蜂窝通信协议进行无线通信的能力。此外，可穿戴装置140可以使用此类通信能力以经由网络125进行通信并且还例如使用/>直接与车辆计算机105通信。可穿戴装置140包括可穿戴装置处理器145。
系统100可包括用户装置150。如本文所用，“用户装置”是便携式不可穿戴计算装置，其包括存储器、处理器、显示器和一个或多个输入机构(诸如触摸屏、按钮等)以及用于诸如本文所述的无线通信的硬件和软件。用户装置150是“不可穿戴的”意指它未设置有穿戴在人体上的任何结构；例如，智能电话用户装置150不具有适配到人体的大小或形状，并且通常必须在袋或手提包中携带，并且只有在它配有特殊壳体(例如，具有环绕通过人的腰带的附接件)的情况下才可穿戴在人体上，并且因此智能电话用户装置150是不可穿戴的。因此，用户装置150可以是包括处理器和存储器的各种计算装置中的任一者，例如智能电话、平板计算机、个人数字助理等。用户装置150可以使用网络125与车辆计算机105和可穿戴装置140进行通信。例如，用户装置150和可穿戴装置140可利用诸如上文所述的无线技术彼此通信地耦合和/或通信地耦合到车辆计算机105。用户装置150包括用户装置处理器155。
如本文中所使用的，“触觉模式”是用于激活和停用马达(例如，电动偏心旋转马达)以生成特定振动模式的指令集。
图2示出了由用户装置150和/或可穿戴装置140收集的示例性音频输入205的图表200。音频输入205可以是例如预先记录的音频文件、来自用户装置150中的传声器的输入等。计算机105和/或用户装置处理器155可以接收识别音频输入205的一部分210的用户输入。用户可以在用户装置150的屏幕上选择提示以利用用户装置150和/或可穿戴装置140中的传声器记录音频输入(例如，语音输入)。替代地，用户可以选择存储在用户装置150的数据存储装置(未示出)中的预先记录的音频文件。音频输入205在图2中被示为一个图表，该图表在垂直轴上具有公知的以分贝满刻度(dBFS)为单位的幅度，并且在水平轴上具有以秒(s)为单位的时间。音频输入205的一部分210可以被隔离以确定触觉模式。可以基于持续时间阈值t0来确定音频输入205的部分210，计算机105和/或用户装置处理器155先前已经将所述持续时间阈值确定为触觉模式的长度。音频输入200可以具有不同的持续时间，并且可以基于特定的、先前确定的持续时间阈值t0来确定触觉模式。因此，从多个音频输入200中确定的触觉模式可以具有相同的持续时间。例如，触觉模式可以具有500毫秒(ms)的持续时间，并且音频输入205可以具有大于500ms(例如，5000ms)的持续时间。
用户可以提供指示音频输入205的500ms部分210的输入，用户装置处理器155可以从所述部分映射触觉模式。例如，如图2所示，音频输入205可以被显示在用户装置150的触摸屏显示器上，并且指示为部分210的框可以通过在用户装置150的触摸屏显示器上的触觉输入而沿着音频输入205的水平轴移动。用户可以通过将框沿着触摸屏显示器移动到音频输入205的优选部分来选择音频输入205的部分210。此外，用户装置处理器155可以确定多个触觉模式，每个触觉模式的持续时间为t0，其在音频输入205的整个持续时间或较小部分中被连续确定。例如，用户装置处理器155可以确定针对持续时间为5000ms的音频输入205中的3000ms映射触觉模式。用户装置处理器155可以针对音频输入205的每个500ms部分210映射触觉模式，直到所有触觉模式的持续时间是3000ms，即6个触觉模式。然后，用户装置处理器155可以将500ms持续时间的6个触觉模式存储为3000ms持续时间的单个触觉模式。替代地，计算机105和/或用户装置处理器155可以选择音频输入205的部分210，例如，音频输入205的前500ms。
图3示出了音频输入205的示例性部分210的频率的图表300。图3的图表300在垂直轴上具有音频输入的以dBFS为单位的幅度，并且在水平轴上具有音频输入的以千赫兹(kHz)为单位的频率。可以使用已知技术将图2中识别的音频输入205的部分210分解为其分量频率和每个分量频率的幅度，已知技术例如为快速傅里叶变换(FFT)、拉普拉斯变换、Z变换。用户装置处理器155可以识别具有最大幅度的频率，即主频率f′。如本文所使用，“主”频率是在部分210中具有最大幅度的频率。用户装置处理器155可以将主频带确定为[f′-f*，f′+f*]，其中f*是限定主频带宽度的预定偏移量。替代地，用户装置处理器155可以识别另一个频率f0并确定频带[f0-f*，f0+f*]。用户装置处理器155可以基于针对音频输入205的多个部分210所识别的频率f′识别多个主频带。
图4示出了在音频输入205的部分210中的持续时间t0内的频域中的示例性频率f1，f2的幅度的图表400。图4中的图表400在垂直轴上示出以dBFS为单位的幅度并且在水平轴上示出以秒为单位的时间。用户装置处理器155可以通过基于主频带将滤波器(例如，带通滤波器)应用于音频输入205的部分210来隔离频率。当滤波器是带通滤波器时，滤波器从音频输入205的部分210中移除主频带之外的频率。图4所示的频率f1，f2是表示主频带中的多个频率中的两个的示例性频率。用户装置处理器155可以识别不同数量的频率。替代地或另外，计算机105可以基于多个确定的主频带来应用多个带通滤波器以生成多个经滤波的音频输入，例如，生成基于以频率f2、[f2-f*，f2+f*]为基础的第二频带的第二经滤波的音频输入。
图5示出了通过比较主频带中的频率幅度而确定的音频输入205的幅度的绝对值和时间间隔δ的图表500。如图4所示，音频输入205的部分210可以表示为主频带中的两个频率f1，f2。用户装置处理器155可以识别当频率f1的幅度等于次级频率f2的幅度时的多个时间值t。用户装置处理器155可以确定在两个连续时间值t之间，在音频输入的开始和第一个时间值t之间，以及上个时间值t和音频输入205的结束之间经过的多个时间间隔δ。也就是说，当频率f1，f2中的一个频率的幅度开始超过频率f1，f2中的另一个的幅度时，用户装置处理器155可以限定该时间值t作为新时间间隔δ的开始。在图5的示例中，频率f1，f2的幅度在限定七个时间间隔δt1，δt2，δt3，δt4，δt5，δt6，δt7的六个时间值t1，t2，t3，t4，t5，t6，处相交。当用户装置处理器155在主频带中识别出多个频率时(例如，对于n个频率的f1，f2，f3，...fn)，当具有最大幅度的频率不同于前一个时间值t的具有最大幅度的频率时(即，当具有最大幅度的频率改变时)，用户装置处理器155基于时间值t限定下一个时间间隔δt。
在每个时间间隔δ内，计算机105可以识别间隔主频率，即在由特定时间间隔δt限定的部分中具有最高幅度(具有间隔主幅度A)的频率。例如，在时间间隔δt1中，间隔主频率是具有间隔主幅度A1的频率f2。即整个音频输入205的主频率可能不是特定时间间隔δ的间隔主频率。
图6示出了示出计算机105根据频域的所识别的间隔主幅度A1-A7来确定触觉模式605的图表600。触觉模式605被示为一个图表，所述图表在水平轴上具有以ms为单位的时间并且在垂直轴上具有以每分钟转数(rpm)为单位的马达旋转速度ω。对于每个时间间隔δt，计算机105和/或用户装置处理器155基于时间间隔δt的间隔主频率的幅度A分配马达转速ω。在图6的示例中，触觉模式605限定七个马达转速ω1，ω2，ω3，ω4，ω5，ω6，ω7。如下所述，可以根据触觉模式的转速ω来致动偏心马达700。计算机105和/或用户装置处理器155基于间隔主频率确定每个时间间隔δ的间隔模式。间隔主频率可以基于间隔主频率的幅度和值来限定致动马达700启动和关闭的模式。
示例性触觉模式605被示出为方波，其中可穿戴装置处理器145被编程为在方波的每个非零部分的开始处以马达转速ω致动马达700，并在方波的每个非零部分的结束处停用马达700。沿着方波的非零部分的时间轴的长度被定义为“脉冲宽度”。方波的脉冲宽度基于当前时间间隔δ的间隔主频率与主频率的比率：
其中f′δ是间隔主频率，f′δ，max是时间间隔δ的最大间隔主频率，并且f′是音频输入205的主频率。
马达转速ω可以基于音频输入205中的间隔主频率的幅度与间隔主频率的最大幅度的比率：
其中Aδ是特定时间间隔δ的幅度A，Amax是对于音频输入205的部分210确定的幅度A的最大幅度，并且ωmax是马达700可以旋转的最大额定转速。
例如，在时间间隔δt1中，频率f2是间隔主频率。方波的频率可以与间隔主频率成比例，在这种情况下为f2，并且电机转速ω1可以与时间间隔δt1中的幅度A1成比例。在时间间隔δt2中，频率f1是间隔主频率。在触觉模式605中，方波的频率可以与间隔主频率f1成比例，并且马达转速ω2可以与时间间隔δt2中的幅度A2成比例。时间间隔δt1的间隔模式(基于频率f2)因此将比时间间隔δt2的间隔模式更快，因为频率f2大于频率f1。替代地或另外，计算机105和/或用户装置处理器155可以基于从多个识别的频率f生成的多个经滤波的音频输入确定多个触觉模式，例如，基于以第二频带[f2-f*，f2+f*]为基础的第二经滤波的音频输入确定第二触觉模式。
图7示出了可安装在可穿戴装置140和/或用户装置150中并被致动以输出触觉模式605的示例性马达700。马达700可包括轴705和固定至该轴的偏心配重710。偏心配重关于马达轴线715不对称。当轴705使偏心配重710旋转时，偏心配重710可生成向心力，所述向心力使马达700和可穿戴装置140振动。如上所述，可穿戴装置处理器145可被编程为旋转轴705以输出触觉模式605，从而生成可由用户检测到的变化的向心力。
计算机105和/或用户装置处理器155可以将触觉模式605映射到动作。动作可以是可需要用户注意的事件和/或状况。一旦识别出动作，计算机105和/或用户装置处理器155可以通过致动马达700以输出触觉模式605来提示用户。该动作可以是例如超过阈值的车辆部件120的数据115(例如，车辆101的速度、车辆101的加速度等)、存储在日历中的约会的时间、到达数据存储装置106中存储的位置等。因为触觉模式605可以特定于音频输入205，所以用户可以基于触觉模式605识别特定动作。计算机105和/或用户装置处理器155可以将多个触觉模式605映射到多个动作。
图8示出了用于确定可穿戴装置140中的马达700的触觉模式605的示例性过程800。过程800开始于框805，其中计算机105和/或用户装置处理器155接收音频输入205。音频输入205可以是例如预先记录的音频文件、来自用户装置150中的传声器的输入等。计算机105和/或用户装置处理器155可以接收识别音频输入205的部分210的用户输入。如上所述，用户装置处理器155可以提示用户提供音频输入205和/或通过用户装置150的触摸屏显示器上的触觉输入来识别音频输入205的部分210。
接下来，在框810中，计算机105和/或用户装置处理器155基于音频输入205的主频率f′来识别音频输入205的主频率f′和主频带[f′-f*，f′+f*]。计算机105和/或用户装置处理器155可以通过将已知变换技术(例如，FFT)应用于音频输入205并确定幅度最大值的频率来识别主频率f′。
接下来，在框815中，计算机105和/或用户装置处理器155基于主频带利用带通滤波器对音频输入205进行滤波。如上所述，带通滤波器可以从音频输入205移除主频带之外的频率。
接下来，在框820中，计算机105和/或用户装置处理器155基于经滤波的音频输入205的主频率识别一个或多个时间间隔δ。如上所述，当一个主频率的幅度等于另一个主频率的幅度时，时间间隔δ基于时间值t。
接下来，在框825中，计算机105和/或用户装置处理器155识别每个时间间隔δ的间隔主频率并识别每个间隔主频率的幅度A。如上所述，间隔主频率是时间间隔δ期间的主频率。
接下来，在框830中，计算机105和/或用户装置处理器155映射触觉模式605。如上所述，计算机105和/或用户装置处理器155基于幅度、间隔主频率和主频率来映射触觉模式605。每个幅度A可以根据由间隔主频率和幅度限定的方波来限定马达700旋转的触觉模式605中的每个时间间隔δ的马达转速ω和脉冲宽度。
接下来，在框835中，计算机105和/或用户装置处理器155将动作映射到触觉模式605。该动作可以是在被识别时使计算机105和/或用户装置处理器155通过致动马达700以输出触觉模式605来提示用户的事件和/或状况。该动作可以是例如超过阈值的车辆部件120的数据115(例如，车辆101的速度，车辆101的加速度等)、存储在日历中的约会的时间、到达数据存储装置106中存储的位置等。
接下来，在框840中，计算机105和/或用户装置处理器155识别出已经发生了映射到触觉模式605的动作。计算机105和/或用户装置处理器155可以基于收集的数据115(例如，速度数据115、位置数据115、时间数据115等)确定该动作已经发生，例如，车辆101的速度已超过速度阈值，到了约会时间等。计算机105和/或用户装置处理器155可以在网络125上进行通信以确定该动作已经发生。
接下来，在框845中，计算机105和/或用户装置处理器155指示可穿戴装置处理器145致动马达700以输出触觉模式605。计算机105和/或用户装置处理器155可以通过网络125将触觉模式605发送到可穿戴装置处理器145。然后，可穿戴装置处理器145可以根据触觉模式605来致动马达700。在框845之后，过程800结束。
如本文所使用的，修饰形容词的副词“基本上”意味着形状、结构、测量值、值、计算等可能偏离精确描述的几何形状、距离、测量值、值、计算等，因为材料、加工、制造、数据收集器测量值、计算、处理时间、通信时间等存在缺陷。
计算机105通常各自包括可由诸如上面提及的那些计算机的一个或多个计算装置执行的并用于执行上述过程的框或步骤的指令。计算机可执行指令可以由使用各种编程语言和/或技术创建的计算机程序来编译或解译，所述编程语言和/或技术单独地或组合地包括但不限于JavaTM、C、C++、Visual Basic、Java Script、Perl、HTML等。通常，处理器(例如，微处理器)例如从存储器、计算机可读介质等接收指令，并且执行这些指令，由此执行一个或多个过程，其包括本文所述的过程中的一者或多者。可以使用多种计算机可读介质来存储和传输此类指令和其他数据。计算装置105中的文件通常是存储在计算机可读介质(诸如存储介质、随机存取存储器等)上的数据的集合。
计算机可读介质包括参与提供可以由计算机读取的数据(例如，指令)的任何介质。此类介质可以采用许多形式，其包括但不限于非易失性介质、易失性介质等。非易失性介质包括例如光盘或磁盘和其他永久性存储器。非易失性介质包括通常构成主存储器的动态随机存取存储器(DRAM)。常见形式的计算机可读介质包括(例如)软磁盘、软盘、硬盘、磁带、任何其他磁性介质、CD ROM、DVD、任何其他任何光学介质、穿孔卡、纸带、带有穿孔图案的任何其他物理介质、RAM、PROM、EPROM、快闪EEPROM、任何其他存储器芯片或盒式磁带或者计算机可读的任何其他介质。
关于本文所述的介质、过程、系统、方法等，应当理解，尽管已经将此类过程等的步骤描述为按照某个有序序列发生，但是此类过程可以在所描述的步骤以本文所述的顺序之外的顺序执行的情况下来实践。还应当理解，可以同时执行某些步骤、可以添加其他步骤，或者可以省略本文所述的某些步骤。例如，在过程800中，可以省略一个或多个步骤，或者可以与图8中所示不同的顺序执行步骤。换句话说，本文对系统和/或过程的描述是为了示出某些实施例而提供，而决不应当将其理解为对所公开的主题进行限制。
因此，应当理解，包括以上描述和附图以及以下权利要求的本公开意图是说明性的而非限制性的。在阅读了以上描述之后，除了所提供的示例之外的许多实施例和应用对于所属领域技术人员而言将是显而易见的。本发明的范围不应当参考以上描述来确定，而是应当参考所附的和/或基于此包括在非临时专利申请中的权利要求连同此类权利要求所赋予权利的等效物的全部范围来确定。可以设想并预期未来的发展将在本文讨论的技术中发生，并且所公开的系统和方法将结合到此类未来实施例中。总之，应当理解，所公开的主题能够进行修改和变化。
除非另有说明或者上下文另有要求，否则修饰名词的冠词“一个”应当被理解为一个或多个。短语“基于”包含部分地或完全地基于。
Claims (20)
1.一种触觉装置操作系统，其包括计算机，所述计算机被编程为：
识别音频输入的多个音频幅度；
识别相应识别的音频幅度之间的所述音频输入的多个时间间隔；
基于所识别的音频幅度和所识别的时间间隔生成触觉模式；
将所述触觉模式映射到基于车辆部件数据的动作；以及
在基于接收到的车辆部件数据识别所述动作时，致动马达以输出所述触觉模式。
2.如权利要求1所述的系统，其中所述计算机还编程为识别用于所述音频输入的频带，并且基于所述频带将滤波器应用于所述音频输入。
3.如权利要求2所述的系统，其中所述计算机还被编程为基于经滤波的音频输入来识别所述时间间隔。
4.如权利要求2所述的系统，其中所述计算机还被编程为识别经滤波的音频输入的多个主频率。
5.如权利要求4所述的系统，其中所述计算机还被编程为当所述多个主频率中的两个主频率的相应音频幅度为相同幅度时，基于所识别的时间来识别所述时间间隔。
6.如权利要求2所述的系统，其中所述计算机还被编程为识别第二频带，并且基于所述第二频带将第二滤波器应用于所述音频输入。
7.如权利要求6所述的系统，其中所述计算机还被编程为基于经滤波的音频输入来映射第一触觉模式，并且基于第二经滤波的音频输入来映射第二触觉模式。
8.如权利要求1所述的系统，其中所述计算机还被编程为基于所述触觉模式来调整所述马达的旋转速度。
9.如权利要求1所述的系统，其中在确定所述音频输入的持续时间超过持续时间阈值时，所述计算机还被编程为接收识别持续时间小于所述持续时间阈值的音频输入的部分的用户输入，并且基于所述音频输入的所识别的部分来映射触觉模式。
10.如权利要求1所述的系统，其中所述马达被设置在便携式装置中，并且所述计算机还被编程为指示所述便携式装置致动所述马达以输出所述触觉模式。
11.一种触觉装置操作方法，其包括：
识别音频输入的多个音频幅度；
识别相应识别的音频幅度之间的所述音频输入的多个时间间隔；
基于所识别的音频幅度和所识别的时间间隔生成触觉模式；
将所述触觉模式映射到基于车辆部件数据的动作；以及
在基于接收到的车辆部件数据识别所述动作时，致动马达以输出所述触觉模式。
12.如权利要求11所述的方法，其还包括识别用于所述音频输入的频带，并且基于所述频带将滤波器应用于所述音频输入。
13.如权利要求12所述的方法，其还包括基于经滤波的音频输入来识别所述时间间隔。
14.如权利要求12所述的方法，其还包括识别经滤波的音频输入的多个主频率。
15.如权利要求14所述的方法，其还包括当所述多个主频率中的两个主频率的相应音频幅度为相同幅度时，基于识别的时间来识别所述时间间隔。
16.如权利要求12所述的方法，其还包括识别第二频带，以及基于所述第二频带将第二滤波器应用于所述音频输入。
17.如权利要求16所述的方法，其还包括基于经滤波的音频输入来映射第一触觉模式，以及基于第二经滤波的音频输入来映射第二触觉模式。
18.如权利要求11所述的方法，其还包括基于所述触觉模式来调整所述马达的旋转速度。
19.如权利要求11所述的方法，其中在确定所述音频输入的持续时间超过持续时间阈值时，所述方法还包括接收识别持续时间小于所述持续时间阈值的所述音频输入的部分的用户输入，并且基于所述音频输入的所识别的部分来映射触觉模式。
20.如权利要求11所述的方法，其中所述马达被设置在便携式装置中，并且所述方法还包括指示所述便携式装置致动所述马达以输出所述触觉模式。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/US2017/039390 WO2019005003A1 (en) | 2017-06-27 | 2017-06-27 | OPERATION OF HAPTIC DEVICE |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110709802A CN110709802A (zh) | 2020-01-17 |
| CN110709802B true CN110709802B (zh) | 2024-01-30 |
Family
ID=64742101
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201780091348.8A Active CN110709802B (zh) | 2017-06-27 | 2017-06-27 | 触觉装置操作 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US11009957B2 (zh) |
| CN (1) | CN110709802B (zh) |
| DE (1) | DE112017007629T5 (zh) |
| WO (1) | WO2019005003A1 (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1620327A (zh) * | 2001-10-10 | 2005-05-25 | 伊默逊股份有限公司 | 使用触觉反馈的声音数据输出和处理 |
| CN101424975A (zh) * | 2001-10-09 | 2009-05-06 | 伊默逊股份有限公司 | 基于计算机设备的音频输出的触发触觉的方法 |
| DE102013211132A1 (de) * | 2012-06-22 | 2013-12-24 | Gm Global Technology Operations, Llc | Warnsysteme und -verfahren für ein Fahrzeug |
| CN104506114A (zh) * | 2014-12-15 | 2015-04-08 | 青岛海信移动通信技术股份有限公司 | 一种移动终端中的马达控制方法及装置 |
| CN104635921A (zh) * | 2013-11-14 | 2015-05-20 | 意美森公司 | 触觉触发控制系统 |
| CN105035152A (zh) * | 2014-04-23 | 2015-11-11 | 福特全球技术公司 | 触觉方向盘 |
| CN204936945U (zh) * | 2015-08-28 | 2016-01-06 | 北京汽车股份有限公司 | 预警装置及汽车 |
| CN105278355A (zh) * | 2014-06-13 | 2016-01-27 | 中兴通讯股份有限公司 | 一种利用音频控制马达震动的方法及装置 |
| CN105799713A (zh) * | 2015-01-16 | 2016-07-27 | 福特全球技术公司 | 基于可穿戴装置的触觉车辆警告 |
| CN106209138A (zh) * | 2015-05-29 | 2016-12-07 | 福特全球技术公司 | 谨慎紧急响应 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7979146B2 (en) * | 2006-04-13 | 2011-07-12 | Immersion Corporation | System and method for automatically producing haptic events from a digital audio signal |
| US8294557B1 (en) * | 2009-06-09 | 2012-10-23 | University Of Ottawa | Synchronous interpersonal haptic communication system |
| WO2012007860A1 (en) * | 2010-07-16 | 2012-01-19 | Koninklijke Philips Electronics N.V. | Device including a multi-actuator haptic surface for providing haptic effects on said surface. |
| US8712383B1 (en) | 2012-06-21 | 2014-04-29 | Google Inc. | Tactile output device for computing device notifications |
| US9153108B2 (en) * | 2012-06-22 | 2015-10-06 | GM Global Technology Operations LLC | Alert systems and methods for a vehicle |
| KR102204265B1 (ko) | 2014-02-24 | 2021-01-15 | 소니 주식회사 | 다른 디바이스들에서의 기능들을 활성화하기 위해 착용형 디바이스들로부터 감각 정보를 취득하기 위한 스마트 착용형 디바이스 및 방법 |
| WO2015173653A2 (en) | 2014-04-28 | 2015-11-19 | Neptune Computer, Inc. | Systems, apparatus, and methods relating to a wearable electronic hub for personal computing |
| US9283847B2 (en) | 2014-05-05 | 2016-03-15 | State Farm Mutual Automobile Insurance Company | System and method to monitor and alert vehicle operator of impairment |
| KR101630727B1 (ko) | 2014-12-16 | 2016-06-17 | 현대자동차주식회사 | 경보 방법 및 이를 위한 시스템 |
| WO2016166570A1 (en) | 2015-04-14 | 2016-10-20 | Continental Automotive Gmbh | Vibration alert on a wearable for vehicle critical information of 2-wheelers |
| US9542781B2 (en) | 2015-05-15 | 2017-01-10 | Ford Global Technologies, Llc | Vehicle system communicating with a wearable device to provide haptic feedback for driver notifications |
-
2017
- 2017-06-27 CN CN201780091348.8A patent/CN110709802B/zh active Active
- 2017-06-27 WO PCT/US2017/039390 patent/WO2019005003A1/en active Application Filing
- 2017-06-27 US US16/626,700 patent/US11009957B2/en active Active
- 2017-06-27 DE DE112017007629.3T patent/DE112017007629T5/de active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101424975A (zh) * | 2001-10-09 | 2009-05-06 | 伊默逊股份有限公司 | 基于计算机设备的音频输出的触发触觉的方法 |
| CN1620327A (zh) * | 2001-10-10 | 2005-05-25 | 伊默逊股份有限公司 | 使用触觉反馈的声音数据输出和处理 |
| DE102013211132A1 (de) * | 2012-06-22 | 2013-12-24 | Gm Global Technology Operations, Llc | Warnsysteme und -verfahren für ein Fahrzeug |
| CN104635921A (zh) * | 2013-11-14 | 2015-05-20 | 意美森公司 | 触觉触发控制系统 |
| CN105035152A (zh) * | 2014-04-23 | 2015-11-11 | 福特全球技术公司 | 触觉方向盘 |
| CN105278355A (zh) * | 2014-06-13 | 2016-01-27 | 中兴通讯股份有限公司 | 一种利用音频控制马达震动的方法及装置 |
| CN104506114A (zh) * | 2014-12-15 | 2015-04-08 | 青岛海信移动通信技术股份有限公司 | 一种移动终端中的马达控制方法及装置 |
| CN105799713A (zh) * | 2015-01-16 | 2016-07-27 | 福特全球技术公司 | 基于可穿戴装置的触觉车辆警告 |
| CN106209138A (zh) * | 2015-05-29 | 2016-12-07 | 福特全球技术公司 | 谨慎紧急响应 |
| CN204936945U (zh) * | 2015-08-28 | 2016-01-06 | 北京汽车股份有限公司 | 预警装置及汽车 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110709802A (zh) | 2020-01-17 |
| US20200159328A1 (en) | 2020-05-21 |
| DE112017007629T5 (de) | 2020-05-07 |
| US11009957B2 (en) | 2021-05-18 |
| WO2019005003A1 (en) | 2019-01-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6744940B2 (ja) | 音声信号の遷移に関係付けられる触覚効果を生成するためのシステム及び方法 | |
| CN108140294B (zh) | 车辆内部触觉输出 | |
| EP2846330A1 (en) | Haptic warping system that transforms a haptic signal into a collection of vibrotactile haptic effect patterns | |
| US20150307022A1 (en) | Haptic steering wheel | |
| JP5634649B2 (ja) | 車両接近報知音発生装置 | |
| US20190096255A1 (en) | Vehicle detection and avoidance | |
| JP6126043B2 (ja) | 路外逸脱抑制支援装置および路外逸脱抑制支援方法 | |
| US10589741B2 (en) | Enhanced collision avoidance | |
| CN110890091A (zh) | 车辆语言处理 | |
| CN110709802B (zh) | 触觉装置操作 | |
| RU2711403C2 (ru) | Система и способ для улучшенного преодоления изгибов | |
| JP7077781B2 (ja) | 車両の挙動判定方法 | |
| WO2018226220A1 (en) | Vehicle occupant sleep state management | |
| JPWO2020079755A1 (ja) | 情報提供装置及び情報提供方法 | |
| RU2739913C2 (ru) | Улучшенная доставка сообщений | |
| WO2018156101A1 (en) | Vehicle and wearable device operation | |
| US20190354254A1 (en) | Vehicle component actuation | |
| WO2018160192A1 (en) | Vehicle event identification | |
| JP6874456B2 (ja) | 衝突防止装置、通信システム、衝突防止方法、およびコンピュータプログラム | |
| RU2699415C1 (ru) | Система и способ обнаружения портативного устройства | |
| US11694542B2 (en) | Vehicle operation | |
| WO2017052492A1 (en) | Enhanced lane negotiation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |