CN111386510A - 触觉控制信号提供装置及方法 - Google Patents
触觉控制信号提供装置及方法 Download PDFInfo
- Publication number
- CN111386510A CN111386510A CN201780096664.4A CN201780096664A CN111386510A CN 111386510 A CN111386510 A CN 111386510A CN 201780096664 A CN201780096664 A CN 201780096664A CN 111386510 A CN111386510 A CN 111386510A
- Authority
- CN
- China
- Prior art keywords
- haptic
- control signal
- signal
- tactile
- pattern data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title abstract description 38
- 230000005236 sound signal Effects 0.000 claims abstract description 96
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims abstract description 10
- 230000000153 supplemental effect Effects 0.000 claims abstract description 8
- 230000005540 biological transmission Effects 0.000 claims abstract description 7
- 230000000007 visual effect Effects 0.000 claims description 27
- 239000000284 extract Substances 0.000 claims description 20
- 230000000694 effects Effects 0.000 claims description 16
- 230000002730 additional effect Effects 0.000 claims description 11
- 238000004804 winding Methods 0.000 claims description 11
- 238000013075 data extraction Methods 0.000 claims description 7
- 238000012800 visualization Methods 0.000 claims description 7
- 230000015541 sensory perception of touch Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 12
- 230000001276 controlling effect Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 230000035807 sensation Effects 0.000 description 7
- 230000000638 stimulation Effects 0.000 description 6
- 238000009499 grossing Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000007774 longterm Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 229920006227 ethylene-grafted-maleic anhydride Polymers 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 125000003345 AMP group Chemical group 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000005201 scrubbing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. personal calling systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02P—CONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
- H02P25/00—Arrangements or methods for the control of AC motors characterised by the kind of AC motor or by structural details
- H02P25/02—Arrangements or methods for the control of AC motors characterised by the kind of AC motor or by structural details characterised by the kind of motor
- H02P25/032—Reciprocating, oscillating or vibrating motors
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02P—CONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
- H02P6/00—Arrangements for controlling synchronous motors or other dynamo-electric motors using electronic commutation dependent on the rotor position; Electronic commutators therefor
- H02P6/08—Arrangements for controlling the speed or torque of a single motor
- H02P6/085—Arrangements for controlling the speed or torque of a single motor in a bridge configuration
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02P—CONTROL OR REGULATION OF ELECTRIC MOTORS, ELECTRIC GENERATORS OR DYNAMO-ELECTRIC CONVERTERS; CONTROLLING TRANSFORMERS, REACTORS OR CHOKE COILS
- H02P7/00—Arrangements for regulating or controlling the speed or torque of electric DC motors
- H02P7/06—Arrangements for regulating or controlling the speed or torque of electric DC motors for regulating or controlling an individual dc dynamo-electric motor by varying field or armature current
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/013—Force feedback applied to a game
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Power Engineering (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开一种触觉装置的触觉控制信号提供装置及方法。触觉装置的触觉控制信号提供装置可以包括:触觉模式数据确定部,其基于音频信号和附加效果信号中的至少一个来确定触觉模式数据;触觉控制信号生成部,其基于所述触觉模式数据来生成用于控制触觉装置的振动操作的触觉控制信号;以及传输部,其将所述触觉控制信号传输到所述触觉装置。
Description
技术领域
本发明涉及一种触觉控制信号提供装置及方法。
背景技术
随着文化产业的发展,演唱会、视频游戏等消费者可以享受的内容种类也在多样化,消费者对虚拟现实(Virtual Reality,VR)、3D视频等视觉高沉浸式内容提供方式的需求也在增加。此外,想享受更多触觉体验的消费者的需求也不断增加。随着这一趋势,人们对向消费者提供触觉反馈的触觉装置的关注度也与日俱增。触觉装置可以通过调节流经触觉装置的电流量和施加到触觉装置的电压的大小来调节触觉装置提供的触觉刺激。为了对与触觉装置一同提供的内容提供更高水平的沉浸感,需要开发能够传递各种类型的触感(如擦过、紧绷拍打、按压、节拍等)的技术手段。
发明内容
解决问题的技术方法
根据一实施例的触觉控制信号提供装置可以包括:触觉模式数据确定部,其基于音频信号和附加效果信号中的至少一个来确定触觉模式数据;触觉控制信号生成部,其基于所述触觉模式数据来生成用于控制触觉装置的振动操作的触觉控制信号;以及传输部,其将所述触觉控制信号传输到所述触觉装置。
所述触觉模式数据确定部可以从所述音频信号中提取音频位模式,并基于所述提取的音频位模式来确定所述触觉模式数据。
所述触觉模式数据确定部可以将所述音频信号按频带进行划分,并从所述划分的频带信号中选择一个以上的包括目标位模式信息的频带信号,并且,通过对所述选择的一个以上的频带信号执行半波整流来提取所述音频位模式。
所述触觉控制信号生成部可以基于所述触觉模式数据来确定所述触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个。
所述触觉模式数据确定部可以从预先存储在数据库的触觉模式数据中提取对应于所述附加效果信号的触觉模式数据。
触觉控制信号提供装置还可以包括可视化数据生成部,其生成对应于所述触觉模式数据的可视化数据,所述传输部可以将所述可视化数据传输到所述触觉装置。
根据一实施例的触觉装置可以包括:接收部,其从触觉控制信号提供装置接收触觉控制信号;触觉模式数据提取部,其从所述接收的触觉控制信号中提取触觉模式数据;产生振动的执行器;以及执行器控制部,其基于所述提取的触觉模式数据来生成用于控制所述执行器的驱动的执行器控制信号。
所述触觉模式数据提取部可以基于所述触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个来恢复所述触觉模式数据。
所述接收部还从触觉控制信号提供装置接收对应于所述触觉模式数据的可视化数据,还可以包括可视化数据显示部,其基于所述接收的可视化数据来输出所述触觉模式数据的特性信息。
可以基于音频数据和附加效果数据中的至少一个,通过所述触觉控制信号提供装置来生成所示触觉模式数据。
根据一实施例的通过触觉控制信号提供装置的触觉控制信号提供方法可以包括以下步骤:基于音频信号和附加效果信号中的至少一个来确定触觉模式数据;基于所述触觉模式数据来生成用于控制触觉装置的振动操作的触觉控制信号;以及将所述触觉控制信号传输到所述触觉装置。
所述确定触觉模式数据步骤可以包括以下步骤:从所述音频信号中提取音频位模式;以及基于所述提取的音频位模式来确定所述触觉模式数据。
所述确定触觉模式数据步骤可以包括以下步骤:从预先存储在数据库的触觉模式数据中提取对应于所述附加效果信号的触觉模式数据。
所述生成触觉控制信号步骤可以包括以下步骤:基于所述触觉模式数据来确定所述触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个。
根据一实施例的在触觉装置中执行的执行器控制方法可以包括以下步骤:从触觉控制信号提供装置接收触觉控制信号;从所述接收的触觉控制信号中提取触觉模式数据;基于所述提取的触觉模式数据来生成用于控制执行器的驱动的执行器控制信号;以及基于所述执行器控制信号来控制所述执行器的驱动。
根据一实施例的触觉装置可以包括:执行器控制部,其基于触觉模式数据来生成用于控制执行器的驱动的执行器控制信号;以及执行器,其基于所述生成的执行器控制信号来生成触觉刺激。
根据一实施例的触觉装置的执行器控制部包括:DC-DC转换器,其向电路施加直流电源;以及控制电路,其基于触觉模式数据来生成执行器控制信号,所述执行器可以基于所述控制信号来生成所述触觉刺激。
根据一实施例的触觉装置的执行器控制部还可以包括调节部,调节所述生成的控制信号的强度。
附图说明
图1为根据一实施例的触觉刺激提供系统的图。
图2为根据一实施例的触觉控制信号提供装置的配置的图。
图3a为根据一实施例的第一触觉模式数据确定部使用快速傅立叶变换(FastFourier Transform,FFT)从音频信号中提取音频位模式的方法的流程图。
图3b为根据一实施例的第一触觉模式数据确定部使用快速傅立叶变换(FastFourier Transform,FFT)来分离出包括目标位模式信息的频带的音频信号的示例图。
图4a为根据另一实施例的第一触觉模式数据确定部使用离散小波(Wavelet)变换从音频信号中提取音频位模式的方法的流程图。
图4b为根据另一实施例的第一触觉模式数据确定部通过离散小波变换将音频信号按频带进行划分的过程图。
图5为根据一实施例的触觉装置的配置的图。
图6为根据一实施例的执行器控制部的配置的图。
图7a为根据一实施例的执行器控制部的电路的示例的图。
图7b为基于根据另一实施例的控制信号来操作控制电路的电路的示例图。
图7c显示可生成根据另一实施例的各种模式的控制信号的电路图的示例。
图7d显示生成各种触觉刺激的触觉装置的电路的示例。
图8为根据一实施例的通过触觉控制信号提供装置的触觉控制信号提供方法的操作的流程图。
图9为根据一实施例的在触觉装置中执行的执行器控制方法的操作的流程图。
具体实施方式
本公开对于实施例的特定结构或者功能的说明仅出于示例目的,并且,实施例能够变形并实施为多种形态。由此,实施例并非限定于特定公开形态,还应包括本发明的思想及技术范围内的变更、均等物,或替代物。
第一或第二等术语能够用于说明多种构成要素,然而,所述术语仅用于将一个构成要素区别于其他构成要素,例如,第一构成要素能够命名为第二构成要素,类似地,第二构成要素同样能够命名为第一构成要素。
当说明一个构成要素“连接”或者“接触”另一个构成要素时,能够直接连接或接触于其他构成要素,然而,也能够理解为在其中存在其他构成要素。
在内容中没有特别说明的情况下,单数表达包括复数含义。在本说明书中,“包括”或者“具有”等术语用于表达存在说明书中所记载的特征、数字、步骤、操作、构成要素、配件或其组合,并不排除还具有一个或一个以上的其他特征、数字、步骤、操作、构成要素、配件或其组合,或者附加功能的情况。
在没有其他定义的情况下,包括技术或者科学术语在内的在此使用的全部术语,都具有本领域普通技术人员所理解的通常的含义。对于通常使用的词典定义的术语,应理解为与相关技术相一致的含义,在本申请中没有明确言及的情况下,不能理想化或解释为过度的形式上的含义。
另外,当某一实施例得到不同体现时,可以按照不同于流程图的方式来执行在特定块中指定的功能或操作。例如,实际上可以同时执行两个连续的块,或者根据相关的功能或操作,可以反转块的顺序。
下面,将参照附图对实施例进行详细说明。在参照附图进行说明的过程中,与附图标记无关,相同的构成要素赋予相同的附图标记,并省略对此重复说明。
图1为根据一实施例的触觉刺激提供系统的图。
参照图1,触觉刺激提供系统可以包括向用户传输触觉刺激的触觉装置120和向触觉装置120提供触觉控制信号的触觉控制信号提供装置110。触觉刺激提供系统可以通过触觉控制信号提供装置110来控制用户的触觉装置120的操作,从而向用户提供对应于音频等外部输入信号的位模式的各种类型的触觉刺激。触觉刺激提供系统可以向触觉装置120的用户提供各种类型的触觉刺激,由此向用户提供有关内容的更高水平的沉浸感。
触觉装置120是一种通过振动向用户提供触觉刺激的装置。例如,触觉装置120可以通过调节振动强度、振动方向、振动周期等来向用户提供各种触觉刺激(如,擦过触感、紧绷触感、按压触感等)。触觉装置120可以根据使用触觉装置120的环境来对应于各种类型的装置。例如,当用户玩视频游戏时,触觉装置120可以是视频游戏机;当用户参加歌手的演唱会时,触觉装置120可以是一种通过对应于音乐的节拍模式来提供振动功能的助威道具。此外,触觉装置120可以包括任意可穿戴式设备(wearable device),其包含通过与智能手机联动来控制的可穿戴式环带(wearable band)、可穿戴式手表(wearable watch)等。
触觉控制信号提供装置110可以生成可控制由触觉装置120提供的触觉刺激的触觉控制信号,并将生成的触觉控制信号传输到触觉装置120。触觉控制信号提供装置110可以接收输入信号130并基于所接收的输入信号130来生成触觉控制信号。例如,当输入信号130为音频信号时,触觉控制信号提供装置110可以生成对应于音频信号的音频位模式的触觉控制信号。当输入信号130为表示预先规定的特殊效果的附加效果信号时,触觉控制信号提供装置110可以生成对应于预先规定的特殊效果的触觉控制信号。例如,当预先规定的特殊效果对应于下雨的情况时,触觉控制信号提供装置110可以生成用于控制触觉装置120的触觉控制信号,以产生使用户可以通过触觉装置120来感觉到下雨的触感的触觉刺激。
图2为根据一实施例的触觉控制信号提供装置的配置的图。
参照图2,触觉控制信号提供装置200可以包括确定触觉模式数据的触觉模式数据确定部210、基于所确定的触觉模式数据来生成触觉控制信号的触觉控制信号生成部220、生成对应于触觉模式数据的可视化数据的可视化数据生成部230、将生成的触觉控制信号传输到触觉装置的传输部240以及数据库250。
触觉模式数据确定部210可以基于音频信号和附加效果信号中的至少一个来确定触觉模式数据。触觉模式数据确定部210可以包括基于音频信号来确定触觉模式数据的第一触觉模式数据确定部211和基于附加效果信号来确定触觉模式数据的第二触觉模式数据确定部213。
第一触觉模式数据确定部211可以从接收的音频信号中提取音频位模式,并基于所提取的音频位模式来确定触觉模式数据。对于从音频信号确定触觉模式数据的过程,将在以下图3a、图3b、图4a及图4b中进行更详细地描述。
第二触觉模式数据确定部213可以基于接收的附加效果信号来确定触觉模式数据。附加效果信号可以是表示预先规定的特殊效果的信号,并且,可以预先生成对应于附加效果信号的触觉模式数据并将其存储在数据库250。例如,根据所提供的内容,预先确定的特殊效果可以是下雨的效果、被枪击的效果等,并且,可以预先生成提供对应于各个特殊效果的触感的触觉模式数据并将其存储在数据库250。然而,预先确定的特殊效果范围并不限于上述示例。第二触觉模式数据确定部213可以识别接收的附加效果信号,对应于识别出的附加效果信号来提取存储在数据库250的触觉模式数据,并基于所提取的触觉模式数据来确定触觉模式数据。
根据一实施例的触觉控制信号生成部220可以包括生成包括待包括在触觉控制信号的附加信息的数据头的数据头部221、生成触觉控制信号的振幅数据的振幅数据生成部223、生成触觉控制信号的振动方向数据的方向数据生成部225以及生成有关触觉控制信号的信号状态的数据的信号状态数据生成部227。
数据头部221可以生成待包括在触觉控制信号的附加信息。例如,由数据头部221生成的附加信息可以包括有关触觉控制信号的格式(format)的信息、有关信号类型的信息、有关容量的信息等。振幅数据生成部223可以基于触觉模式数据的振幅信息来生成触觉控制信号的振幅数据。触觉控制信号的振幅数据可以用于通过确定触觉装置的振动强度来确定触觉刺激的特性。方向数据生成部225可以基于触觉模式数据的振动方向信息来生成触觉控制信号的振动方向数据。触觉控制信号的振动方向数据可以用于通过确定触觉装置的振动方向来确定触觉刺激的特性。例如,振动方向可以是左右、上下等任意方向。信号状态数据生成部227可以基于触觉模式数据来生成有关触觉控制信号的信号状态的数据。例如,有关信号状态的数据可以包括信号保持最大振幅的时间的数据或保持空闲状态(例如,振幅保持为0)的时间的数据。有关触觉控制信号保持最大振幅的时间或有关保持空闲状态的时间的数据可以用于确定触觉装置的各种类型的触觉刺激模式。
根据另一实施例,触觉控制信号生成部220可以基于根据音频信号和附加效果信号中的至少一个预先生成并存储在数据库250的触觉模式数据来生成触觉控制信号。触觉控制信号生成部220可以基于根据实时接收的音频信号确定的触觉模式数据来生成触觉控制信号,也可以基于预先生成并存储在数据库220的触觉模式数据来生成触觉控制信号。
根据一实施例的可视化数据生成部230可以生成对应于触觉模式数据的可视化数据。例如,可视化数据包括有关与用于显示触觉模式数据的特征信息(例如,振幅数据、振动方向数据等)的触觉刺激模式匹配的字符的数据以及有关待添加到屏幕的表情符号的数据。例如,可视化数据可以包括用于显示有关触觉刺激模式的特征信息的字符的颜色信息、字体信息、包括有关特征信息提供方法的显示界面信息。此外,当触觉刺激对应于附加效果(如,下雨的效果)时,可视化数据可以包括对应于附加效果的表情符号数据(如,雨滴表情符号、雨伞表情符号等)和图像数据(如,下雨背景图像等)。在另一实施例中,可视化数据可以包括用于生成点字的数据和用于将有关触觉模式数据的信息提供为LED模式的数据,其中,所述点字用于向盲人提供有关触觉模式数据特征信息(例如,振幅信息、振动方向信息等)。
传输部240可以将由触觉控制信号生成部220生成的触觉控制信号和由可视化数据生成部230生成的可视化数据中的至少一个传输到触觉装置。例如,传输部240可以通过包括以太网(Ethernet)、蓝牙、紫蜂(ZigBee)、无线网络、长期演进(LTE)的有线/无线通信将触觉控制信号或可视化数据传输到触觉装置。
图3a为根据一实施例的第一触觉模式数据确定部使用快速傅立叶变换(FastFourier Transform,FFT)从音频信号中提取音频位模式的方法的流程图。
根据实施例,在步骤311中,第一触觉模式数据确定部可以对用于进行快速傅里叶变换(FFT)而输入的音频信号进行分段(segmentation)。第一触觉模式数据确定部可以将输入的音频信号分段为任意个数据流的形式,例如,可以将音频信号分段为256个或1024个数据流,以顺利地对音频信号进行快速傅里叶变换(FFT)。在此,分段的数据流的数量并不限于上述示例。
在步骤312中,第一触觉模式数据确定部可以对分段后的音频信号进行快速傅里叶变换(FFT),从而将音频信号从时域变换到频域。在步骤313中,第一触觉模式数据确定部可以将变换成频域的音频信号按频带进行划分。为了获得包括目标音频位模式的频带的音频信号,第一触觉模式数据确定部可以将变换成频域的音频信号划分为多个频带。
在步骤314中,第一触觉模式数据确定部可以在按频带划分后的音频信号中选择包括目标位模式信息的一个以上的频带的信号。例如,第一触觉模式数据确定部可以选择一个以上的频带的信号,该信号包括待提取的位模式信息,如音频信号的噪声以外的有关位模式信息、有关音频信号的特定乐器的位模式信息等。例如,当属于噪声的音频信号包括在高频带时,可以选择高频带以外的信号。此外,当要在与有关各种乐器的音频信号结合的音频信号中提取特定乐器的音频信号时,可以选择性地提取对应于特定乐器的频带的音频信号。当根据应用实施例需要多个频带的音频信号时,可以提取多个所需频带的信号。将音频信号划分为多个频带并进行选择的方法并不限于上述示例,并可以根据应用实施例所要求的音频信号的频带来不同地确定。
在步骤315中,第一触觉模式数据确定部可以对所选的频带的音频信号进行快速傅立叶逆变换(Inverse Fast Fourier Transformation,IFFT)。第一触觉模式数据确定部可以通过快速傅里叶逆变换(IFFT)将所选的频带的音频信号从频域变换到时域。
在步骤316中,第一触觉模式数据确定部可以对快速傅里叶逆变换(IFFT)后的音频信号进行平滑(smoothing)处理。例如,在平滑音频信号的过程中,第一触觉模式数据确定部可以对通过快速傅里叶逆变换(IFFT)变换为时域的音频信号进行全波整流,通过对音频信号进行分段减小快速傅里叶变换(FFT)引起的失真,并通过窗(window)函数对音频信号执行卷积(Convolution)运算,以平滑地校正快速变化的区域。例如,窗函数可以是汉宁(Hanning)、海明(Hamming)、凯撒(Kaiser)窗函数,但并不限于此。此外,由于时域中的卷积运算与频域中的乘法运算相同,因此在频域中执行卷积运算时可以更快地执行卷积运算。
在步骤317中,第一触觉模式数据确定部可以通过对平滑后的音频信号进行半波整流来提取音频位模式。
图3b为根据一实施例的第一触觉模式数据确定部使用快速傅立叶变换(FastFourier Transform,FFT)来分离出包括目标位模式信息的频带的音频信号的示例的图。
根据一实施例,音频信号321通过快速傅里叶变换(FFT)从时域变换到频域,并且,可以按频带分离出音频信号的分量。信号323可以是划分为六个不同频带f1、f2、f3、f4、f5、f6的音频信号。划分频带的方法并不限于上述示例。第一触觉模式数据确定部可以在划分为多个频带的音频信号中选择包括目标位模式信息的频带(f2频带)的音频信号325。第一触觉模式数据确定部可以通过快速傅里叶逆变换(IFFT)将所选的频带的音频信号325从频域变换到时域。第一触觉模式数据确定部可以对变换为时域的音频信号327进行平滑处理及半波整流,从而提取目标位模式信息。第一触觉模式数据确定部可以基于所提取的位模式信息来生成触觉模式数据。
图4a为根据另一实施例的第一触觉模式数据确定部使用离散小波(Wavelet)变换从音频信号中提取音频位模式的方法的流程图。
参照图4a,在步骤411中,第一触觉模式数据确定部可以对输入的音频信号进行分段,以执行离散小波变换。例如,第一触觉模式数据确定部可以将音频信号分段为256个或1024个数据流,以顺利地对音频信号进行离散小波变换。
在步骤413中,第一触觉模式数据确定部可以通过离散小波变换将分段的音频信号按频带进行划分。为了获得包括目标音频位模式的频带的音频信号,第一触觉模式数据确定部可以通过离散小波变换将音频信号按频带进行划分。下面将参照图4b详细描述通过离散小波变换将音频信号按频带进行划分的方法。
在步骤415中,第一触觉模式数据确定部可以在按频带划分的音频信号中选择包括目标模式信息的一个以上的频带的信号。例如,第一触觉模式数据确定部可以选择一个以上的频带的信号,该信号包括待提取的位模式信息,如音频信号的噪声以外的有关音乐的位模式信息、有关音频信号的特定乐器的位模式信息等。
在步骤417中,第一触觉模式数据确定部可以对所选的频带的音频信号进行平滑处理。例如,在平滑音频信号的过程中,可以通过对所选的频带的音频信号进行全波整流,减小音频信号的失真,并通过窗函数对音频信号执行卷积运算,以平滑地校正快速变化的区域。例如,窗函数可以是汉宁(Hanning)、海明(Hamming)、凯撒(Kaiser)窗函数,但并不限于此。
在步骤419中,第一触觉模式数据确定部可以通过对平滑后的音频信号进行半波整流来提取音频位模式。第一触觉模式数据确定部可以基于所提取的音频位模式来确定触觉模式数据。
图4b为根据另一实施例的第一触觉模式数据确定部通过离散小波变换将音频信号按频带进行划分的过程的图。
根据一实施例,输入音频信号可以由高通滤波器421进行滤波,并且,经高通滤波器421进行滤波后的音频信号可以被降采样(down sampling)以划分为第一频带的音频信号。经低通滤波器422进行滤波后的音频信号可以被降采样以用作用于划分第二频带的音频信号的输入音频信号。用于划分第二频带的音频信号的输入音频信号可以由高通滤波器423进行滤波,并被降采样以划分为第二频带的音频信号。由低通滤波器424进行滤波的音频信号可以被降采样以用作用于划分第三频带的音频信号的输入音频信号。此类滤波及降采样处理过程由滤波器425、426、427、428来执行,由此,第一触觉模式数据确定部可以在时域中将音频信号按频带进行划分。例如,如果要将音频信号划分为n个频带的频率,则需要2n次的滤波处理过程。第一触觉模式数据确定部可以在多个频带的信号中选择包括目标位模式信息的一个以上的频带的音频信号,并通过对所选的音频信号进行半波整流来提取音频位模式。
图5为根据一实施例的触觉装置的配置的图。
参照图5,触觉装置500包括控制触觉装置的操作的控制器510、从触觉控制信号提供装置接收触觉控制信号和可视化数据的接收部520、从触觉控制信号中提取触觉模式数据的触觉模式数据提取部530、生成用于控制执行器的驱动的执行器控制信号的执行器控制部540、产生对应于触觉装置所提供的触觉刺激的振动的执行器551、552、553以及显示所接收的可视化数据的可视化据显示部数560。
控制器510可以控制触觉模式数据提取部530、可视化数据显示部560及数据库570的操作。接收部520可以通过有线/无线通信(如,包括以太网(Ethernet)、蓝牙、紫蜂(ZigBee)、无线网络、长期演进(LTE))从控制信号提供装置接收触觉控制信号及对应于触觉模式数据的可视化数据,并将所接收的触觉控制信号及可视化数据存储在数据库570。
触觉模式数据提取部530可以从触觉控制信号中提取触觉模式数据。触觉模式数据提取部530可以从触觉控制信号恢复数据头、触觉模式数据的振幅数据、振动方向数据及信号状态数据,并基于所恢复的结果来提取触觉模式数据。所提取的触觉模式数据可以通过通信模块(未示出)传输到执行器控制部。
执行器控制部540可以基于触觉模式数据来生成用于控制执行器551、552、553的驱动的执行器控制信号。以下将参考图6详细描述执行器控制部的操作。
执行器551、552、553可以基于从执行器控制部540接收的执行器控制信号来产生振动。例如,执行器551、552、553可以基于根据触觉模式数据产生的电流形式的执行器控制信号来产生对应于触觉模式数据的振动。此外,执行器551、552、553可以根据所提供的内容以各种形式配置。例如,以提供到射击游戏的触觉装置为例,执行器551、552、553可以配置在用户穿戴的背心来产生振动,使得用户能够感觉到被击中的效果,还可以配置在射击装置来产生振动,使得用户能够感觉到射击效果。执行器551、552、553的数量不限于图中所示的示例。
可视化数据显示部560可以基于所接收的可视化数据来输出有关触觉模式数据的特征信息(例如,振幅信息、振动方向信息等)。例如,可视化数据可以是有关用于显示有关触觉模式数据的信息的字符的信息、有关待添加到屏幕的表情符号的信息等。数据库570可以存储有关触觉控制信号的信息、有关可视化数据的信息、有关触觉模式数据的信息等。
图6为根据一实施例的执行器控制部的配置的图。
参照图6,执行器控制部620包括基于触觉模式数据来产生电流的控制电路623、变换施加到执行器控制部620的直流电源的电压的DC-DC转换器(converter;621)及调节在控制电路623中产生的电流值的控制部625。在控制电路623中产生的电流或在调节部625中调节电流值的电流可以对应于执行器控制信号。
控制电路623基于从DC-DC转换器621施加的DC直流电压和从触觉模式数据提取部610接收的触觉模式数据来产生电流,并将产生的电流传输到调节部625。例如,控制电路623可以通过H桥(H-bridge)电路来产生对应于触觉模式数据而改变的电流。DC-DC转换器621可以调节施加到控制电路623的直流电源的电压。
调节部625可以使用开关来调节由控制电路623产生的电流的强度,并通过向执行器631、633、635施加所调节的电流来调节执行器631、633、635的振动。例如,调节部625可以包括开关电路。调节部625可以通过开关电路的开关来调节连接到执行器631、633、635的线圈的主绕组与辅助绕组之比,并通过所选的线圈的主绕组与辅助绕组之比来调节流经执行器631、633、635的电流。调节部625可以通过所调节的电流调节执行器631、633、635的振动力;触觉装置可以通过所调节的执行器631、633、635的振动向用户提供各种触觉刺激。在另一实施例中,调节部625可以通过可变电阻来调节施加到执行器631、633、635的电压的大小,并基于调节后的电压的大小来调节流经执行器631、633、635的电流的强度。
图7a显示根据一实施例的执行器控制部的电路的示例。
参照图7a,控制电路713由包括四个金属氧化物半导体场效应晶体管(MOSFET)或晶体管的H桥(H-bridge)电路组成。由DC-DC转换器711调节电压的直流电压将会施加到控制电路713,并且,控制电路713可以基于从DC-DC转换器711施加的电压和触觉模式数据来产生变化的电流。由控制电路713产生的电流可以通过开关电路717来进行调节。开关电路717可以通过开关来调节连接到开关电路717的线圈的主绕组与辅助绕组之比,并基于所调节的线圈的主绕组与辅助绕组之比来调节施加到执行器719的电流。该方法的优点如下:不需要复杂的脉冲宽度调制(PWM)信号的强度变化或脉冲宽度调制(PWM)信号控制时间,即不需要传统方法用于改变电压的对脉冲宽度调制(Pulse width Modulation,PWM)信号的控制,通过简单的开关电路,就可以快速地改变和控制三个电平的电压。可以通过调节后的电流来调整执行器719的振动强度和振动器的移动方向,并且,可以通过调节后的执行器719的振动来产生触觉刺激。
图7b显示基于根据另一实施例的控制信号来操作控制电路的电路的示例。
图7b所示的电路是DC-DC转换器与现有的H桥(H-bridge)电路之间连接有逻辑电路的电路,其中逻辑电路由缓冲器和非门组成。通过与由缓冲器(Buffer)和非门组成的逻辑电路连接的控制电路,可以利用一个控制信号S31 720控制执行器。具体地,通过DC-DC转换器将驱动电机所需的DC电压电平提供到电路,所提供的DC电压电平可以基于包括在触觉模式数据的振动强度变化的信息,通过脉冲宽度调制(PWM)信号控制部700得到控制。
当控制信号S31 720处于高(High)状态时,低(Low)状态的信号被输出到G1 721,连接到G1 721的晶体管727导通并有电流流动,与控制信号720处于相同高状态的信号被输出到G3 723,连接到G3 723的晶体管被关断,因此没有电流流动。当控制信号S31 720处于低状态时,G2 722的输出变为高状态信号,并且,高状态信号将被输出到所连接的G4 724,由此连接的晶体管728被关断。连接到G2 722的输出的G5 725的输出将变成低状态的信号,连接到G5 725的晶体管729导通并有电流流动。综上所述,当控制信号S31 720处于高状态时,晶体管727和晶体管728处于导通状态,由此电流正向i2流动;当控制信号S31 720处于低状态时,晶体管726和晶体管729处于导通状态,由此电流反向i1流动。在所述方法中,可以通过一个控制信号720来确定流经执行器的电流的方向,此时,也可以使用脉冲宽度调制(PWM)信号控制部700的控制信号S31 720的强度变化来调节施加到执行器的电压的强度。当使用多个控制信号时,为了控制一个执行器的操作,必须同步多个控制信号。如果多个控制信号不同步,则难以通过不同步的控制信号来生成目标振动模式。所述方法的优点在于,通过使用一个控制信号720来省略同步过程,因此可以容易地生成振动模式。
图7c显示可生成根据另一实施例的各种模式的控制信号的电路图的示例。
参照图7c,图7c所示的电路通过DC-DC转换器将驱动电机所需的DC电压电平提供到电路,所提供的电压电平可以基于包括在触觉模式数据的振动强度变化的信息,通过脉冲宽度调制(PWM)信号控制部得到控制。执行器735可以基于控制信号S41 731和控制信号S42 732得动控制。当控制信号S41 731处于低状态并控制信号S42 732处于高状态时,电流正向i2流动;相反地,当控制信号S41 731处于高状态并控制信号S42 732处于低状态时,电流反向i1流动。此外,还可以使用控制信号731、732的强度变化来调节施加到执行器735的电压的强度。另外,可以通过正弦波、半正弦波、方波、半方波等各种类型的控制信号731、732来调节执行器。
图7d显示生成各种触觉刺激的触觉装置的电路的示例。
现有的用于线性谐振驱动器(Linear Resonant Actuator,LRA)的驱动器通过触觉驱动集成电路(Haptic Driver Integrated Circuit)生成具有恒定振幅的正弦波,并且,只能改变所生成的正弦波的频率和驱动时间。图7d所示的触觉装置可以通过驱动信号生成部740、包括数字可变电阻器的数字增益控制器(Digital Gain Controller)751、752,以及运算放大器(OP AMP)761、762来生成正弦波、三角波及方波等,并通过改变生成的各个形式的波形的驱动时间、频率及振幅的大小来生成各种触感的触觉刺激。
具体地,可以通过从驱动信号生成部740以高状态输出数字输出S72 742来设置驱动时间;通过以低状态输出数字输出S72 742来设置空闲时间。此外,可以通过驱动信号生成部740将有关相位变化的信号提供到H桥(H-Bridge)753来确定电流的方向i3、i4,并可以基于所确定的电流方向来确定执行器770移动的方向。此外,驱动信号生成部740可以通过数字增益控制部751、752来调节提供到执行器770的电压的强度,并基于所调节的电压的强度来控制流经执行器770的电流的强度,由此,可以确定执行器770的驱动强度。根据通过所述方法以方波形式生成各种强度的驱动信号的一实施例,驱动信号生成部740通过数字输出S72 742生成方波形式的信号,并可以通过由H桥(H-Bridge)753确定的电流的方向来确定执行器770的驱动方向。驱动信号生成部740可以通过数字增益控制部751、752来确定执行器的驱动强度,从而生成方波形式的驱动信号。根据生成正弦波形式的驱动信号的另一实施例,可以通过驱动信号生成部740来确定通过数字输出S72 742输出的正弦波的总时间的长度,并且,在驱动信号生成部740通过信号S71 741及信号S73 743来调节数字增益控制部751、753的增益(gain),由此,通过改变输出信号的大小,可以调节输出信号的形状,使得运算放大器(OP-AMP)761、762的输出信号成为正弦波的半波形状。此外,以正弦波的半波形状调节的输出信号通过H桥(H-Bridge)753改变电流方向并再次输出,从而可以生成完整的正弦波形式的驱动信号。执行器770可以通过生成的正弦波形式的驱动信号来进行驱动。通过类似于生成正弦波形式的驱动信号的方法的方法,控制驱动信号的振幅和相位,从而可以生成半正弦波、方波、半方波、三角波等。所生成的驱动信号的形式并不限于所提供的示例,并且,可以通过调节振幅和相位来生成任意形式的驱动信号。驱动信号可以对应于执行器控制信号。
图8为根据一实施例的通过触觉控制信号提供装置的触觉控制信号提供方法的操作的流程图。
参照图8,在步骤810中,触觉控制信号提供装置可以基于音频信号和附加效果信号中的至少一个来确定触觉模式数据。触觉控制信号提供装置可以从音频信号中提取音频位模式,并基于所提取的音频位模式来确定触觉模式数据。例如,触觉控制信号提供装置可以通过快速傅里叶变换(FFT)或小波变换来对音频信号的频带进行划分,选择包括目标位模式信息的频带的信号,从所选的信号中提取音频位模式,并基于所提取的音频位模式来确定触觉模式数据。触觉控制信号提供装置可以提取对应于附加效果并预先存储在数据库的触觉模式数据,并基于所提取的触觉模式数据来确定触觉模式数据。
在步骤820中,触觉控制信号提供装置可以基于触觉模式数据来生成触觉控制信号。例如,触觉控制信号提供装置可以基于触觉模式数据来确定触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个。
在步骤830中,触觉控制信号提供装置可以将触觉控制信号传输到触觉装置。例如,触觉控制信号提供装置可以通过包括以太网(Ethernet)、蓝牙、紫蜂(ZigBee)、无线网络、长期演进(LTE)的有线/无线通信将触觉控制信号传输到触觉装置。
图9为根据一实施例的在触觉装置中执行的执行器控制方法的操作的流程图。
参照图9,在步骤910中,触觉装置可以从触觉控制信号提供装置接收触觉控制信号。在步骤920中,触觉装置可以从所接收的触觉控制信号中提取触觉模式数据。例如,触觉装置可以基于触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个来恢复触觉模式数据。
在步骤930中,触觉装置可以基于所提取的触觉模式数据来生成执行器控制信号。例如,触觉装置可以通过H桥(H-bridge)电路基于触觉模式数据来生成电流形式的执行器控制信号,并通过开关调节线圈的主绕组及辅助绕组之比,从而调节电流形式的执行器控制信号。在步骤940中,触觉装置可以基于执行器控制信号来控制执行器的驱动。例如,执行器可以基于执行器控制信号来产生对应于触觉模式数据的振动,从而产生触觉刺激。
实施例中描述的构成要素可以由数字信号处理器(digital signal processor,DSP)、处理器、控制器、专用集成电路(application specific integrated circuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)之类的可编程逻辑器件、其他电子设备及其组合中的一个以上的硬件构成要素来实现。实施例中描述的过程或功能中的至少一部分可以由软件来实现,该软件可以被记录在记录介质上。实施例中描述的构成要素、功能及过程可以通过硬件和软件的组合来实现。
根据实施例的方法以能够通过多种计算机手段执行的程序命令的形态体现,并记录在计算机读写媒介。计算机读写媒介能够以单独或者组合的形式包括程序命令、数据文件、数据结构等。记录在所述媒介的程序命令能够是为实现实施例特别设计与构成的,或者是计算机软件负责人公知而能够使用的。计算机读写记录媒介能够包括硬盘、软盘以及磁带等磁性媒介(magnetic media);与CD-ROM、DVD等类似的光学媒介(optical media);与光磁软盘(floptical disk)类似的磁光媒介(magneto-optical media),以及与只读存储器(ROM)、随机存取存储器(RAM)、闪存等类似的为存储并执行程序命令而特别构成的硬件装置。程序命令的例子不仅包括通过编译器生成的机器语言代码,还包括使用解释器等的能够由计算机执行的高级语言代码。为执行实施例的操作,所述硬件装置能够构成为以一个以上的软件模块实现操作的方式。
综上,通过有限的附图对实施例进行了说明,本领域普通技术人员能够基于所述记载进行多种更改与变形。例如,所说明的技术按照与说明的方法不同的顺序执行,和/或所说明的系统、结构、装置、电路等构成要素按照与说明的方法不同的形态进行结合或组合,或者由其他构成要素或者等同物置换或代替,也能得到适当的结果。
Claims (19)
1.一种触觉控制信号提供装置,其特征在于,包括:
触觉模式数据确定部,其基于音频信号和附加效果信号中的至少一个来确定触觉模式数据;
触觉控制信号生成部,其基于所述触觉模式数据来生成用于控制触觉装置的振动操作的触觉控制信号;以及
传输部,其将所述触觉控制信号传输到所述触觉装置。
2.根据权利要求1所述的触觉控制信号提供装置,其特征在于,
所述触觉模式数据确定部,
从所述音频信号中提取音频位模式,并基于提取的所述音频位模式来确定所述触觉模式数据。
3.根据权利要求2所述的触觉控制信号提供装置,其特征在于,
所述触觉模式数据确定部,
将所述音频信号按频带进行划分,并从所划分的频带信号中选择一个以上的包括目标位模式信息的频带信号,并且,通过对选择的所述一个以上的频带信号执行半波整流来提取所述音频位模式。
4.根据权利要求1所述的触觉控制信号提供装置,其特征在于,
所述触觉控制信号生成部,
基于所述触觉模式数据来确定所述触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个。
5.根据权利要求1所述的触觉控制信号提供装置,其特征在于,
所述触觉模式数据确定部,
从预先存储在数据库的触觉模式数据中提取对应于所述附加效果信号的触觉模式数据。
6.根据权利要求1所述的触觉控制信号提供装置,其特征在于,还包括:
数据库,其存储基于所述音频信号和附加效果信号中的至少一个而预先生成的触觉模式数据,
所述触觉控制信号生成部,
基于存储在所述数据库的所述触觉模式数据来生成所述触觉控制信号。
7.根据权利要求1所述的触觉控制信号提供装置,其特征在于,还包括:
可视化数据生成部,其生成对应于所述触觉模式数据的可视化数据,
所述传输部,
将所述可视化数据传输到所述触觉装置。
8.根据权利要求1所述的触觉控制信号提供装置,其特征在于,
所述触觉装置,
从所述触觉控制信号提供装置接收所述触觉控制信号,并基于接收的所述触觉控制信号来生成用于控制执行器的驱动的执行器控制信号。
9.一种触觉装置,其特征在于,包括:
接收部,其从触觉控制信号提供装置接收触觉控制信号;
触觉模式数据提取部,其从接收的所述触觉控制信号中提取触觉模式数据;
产生振动的执行器;以及
执行器控制部,其基于提取的所述触觉模式数据来生成用于控制所述执行器的驱动的执行器控制信号。
10.根据权利要求9所述的触觉装置,其特征在于,
所述触觉模式数据提取部,
基于所述触觉控制信号的信号振幅特性、信号方向特性及信号状态特性中的至少一个来恢复所述触觉模式数据。
11.根据权利要求9所述的触觉装置,其特征在于,
所述接收部还从所述触觉控制信号提供装置接收对应于所述触觉模式数据的可视化数据,
还包括可视化数据显示部,其基于接收的所述可视化数据来输出所述触觉模式数据的特性信息。
12.根据权利要求9所述的触觉装置,其特征在于,
基于音频数据和附加效果数据中的至少一个,通过所述触觉控制信号提供装置来生成所述触觉模式数据。
13.一种触觉装置,其特征在于,包括:
执行器控制部,其基于触觉模式数据来生成用于控制执行器的驱动的执行器控制信号;以及
执行器,其基于生成的所述执行器控制信号来生成触觉刺激。
14.根据权利要求13所述的触觉装置,其特征在于,
所述执行器控制部,包括:
DC-DC转换器,其向电路施加直流电源;以及
控制电路,其基于所述触觉模式数据来生成所述执行器控制信号,
所述执行器,
基于所述控制信号来生成所述触觉刺激。
15.根据权利要求14所述的触觉装置,其特征在于,
所述控制电路,
基于桥接电路来生成所述控制信号。
16.根据权利要求14所述的触觉装置,其特征在于,
所述执行器控制部,还包括:
调节部,其调节生成的所述控制信号的强度。
17.根据权利要求16所述的触觉装置,其特征在于,
所述调节部,
调节通过开关连接到所述执行器的线圈的绕组比,从而调节所述控制信号的强度。
18.根据权利要求16所述的触觉装置,其特征在于,
所述调节部,
通过可变电阻来调节所述控制信号的强度。
19.根据权利要求16所述的触觉装置,其特征在于,
所述执行器控制部,
生成通过调节所述控制信号的振幅和相位来调节所述控制信号的形状的所述执行器控制信号。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170150314A KR101899538B1 (ko) | 2017-11-13 | 2017-11-13 | 햅틱 제어 신호 제공 장치 및 방법 |
KR10-2017-0150314 | 2017-11-13 | ||
PCT/KR2017/012850 WO2019093556A1 (ko) | 2017-11-13 | 2017-11-14 | 햅틱 제어 신호 제공 장치 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111386510A true CN111386510A (zh) | 2020-07-07 |
Family
ID=63719113
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780096664.4A Pending CN111386510A (zh) | 2017-11-13 | 2017-11-14 | 触觉控制信号提供装置及方法 |
Country Status (4)
Country | Link |
---|---|
US (2) | US11847262B2 (zh) |
KR (1) | KR101899538B1 (zh) |
CN (1) | CN111386510A (zh) |
WO (1) | WO2019093556A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102141889B1 (ko) * | 2019-02-19 | 2020-08-06 | 주식회사 동운아나텍 | 적응적 햅틱 신호 발생 장치 및 방법 |
US20210110841A1 (en) * | 2019-10-14 | 2021-04-15 | Lofelt Gmbh | System and method for transforming authored haptic data to fit into haptic bandwidth |
KR20210088371A (ko) | 2020-01-06 | 2021-07-14 | 주식회사 비햅틱스 | 촉각자극 제공 시스템 |
US11862008B2 (en) * | 2021-06-14 | 2024-01-02 | Huawei Technologies Co., Ltd. | Methods, devices, and computer readable media for perceptual closed-loop control and equalization of vibrotactile systems |
TW202326360A (zh) * | 2021-12-28 | 2023-07-01 | 財團法人工業技術研究院 | 嵌入式系統以及振動驅動方法 |
WO2024132070A1 (en) * | 2022-12-20 | 2024-06-27 | Anyware Solutions Aps | Alerting device for warning of anomalies in behavioral patterns |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6027463A (en) * | 1996-12-27 | 2000-02-22 | Moriyasu; Hiro | Music massager |
CN1479602A (zh) * | 2000-12-08 | 2004-03-03 | ������������ʽ���� | 按摩装置、资料存储媒体及程序制作方法 |
CN1800969A (zh) * | 2006-01-10 | 2006-07-12 | 新康电脑科技(苏州)有限公司 | 电影嗅觉、触觉效果发生方法及装置 |
CN101631162A (zh) * | 2008-07-01 | 2010-01-20 | Lg电子株式会社 | 使用接近传感器的移动终端以及控制移动终端的方法 |
KR20100069736A (ko) * | 2008-12-17 | 2010-06-25 | 삼성전자주식회사 | 휴대 단말기의 컨텐츠 재생 장치 및 재생 방법 |
KR20110074333A (ko) * | 2009-12-24 | 2011-06-30 | 삼성전자주식회사 | 휴대 단말의 진동 발생 방법 및 장치 |
JP2011167570A (ja) * | 2007-03-14 | 2011-09-01 | F Hoffmann-La Roche Ag | ランセット装置 |
US20130262634A1 (en) * | 2012-03-29 | 2013-10-03 | Ikala Interactive Media Inc. | Situation command system and operating method thereof |
KR20140009710A (ko) * | 2012-07-12 | 2014-01-23 | 삼성전자주식회사 | 모터 구동 신호 생성 시스템 및 방법, 반도체 장치, 전자 장치 및 그 진동 조절 방법 |
CN104049735A (zh) * | 2013-03-14 | 2014-09-17 | 英默森公司 | 群体事件期间的触觉效果广播 |
CN104182036A (zh) * | 2013-05-24 | 2014-12-03 | 意美森公司 | 基于媒体内容和一个或多个外部参数提供触觉反馈的方法及装置 |
CN105739674A (zh) * | 2014-12-24 | 2016-07-06 | 意美森公司 | 高带宽触觉效果的音频增强仿真 |
KR101641418B1 (ko) * | 2014-07-25 | 2016-07-20 | 포항공과대학교 산학협력단 | 청각 주목도에 기반한 햅틱 신호 생성 방법 및 이를 위한 장치 |
CN105981288A (zh) * | 2013-12-26 | 2016-09-28 | 佳能株式会社 | 振动元件驱动电路、振动型致动器、图像拾取装置、图像生成装置以及除尘装置 |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4779615A (en) * | 1987-05-13 | 1988-10-25 | Frazier Richard K | Tactile stimulator |
JPH09174302A (ja) | 1995-12-21 | 1997-07-08 | Nakamura Tome Precision Ind Co Ltd | ワークピースの突切り排出装置 |
US5951500A (en) * | 1997-01-03 | 1999-09-14 | Jb Research, Inc. | Audio responsive massage system |
CN1618181B (zh) * | 2001-12-05 | 2010-04-28 | 迪斯尼实业公司 | 无线起动便携装置的方法和系统 |
JP3113563U (ja) * | 2005-03-14 | 2005-09-15 | 一郎 亀田 | 携帯リズム体感器具 |
US20070017803A1 (en) | 2005-07-22 | 2007-01-25 | Heraeus, Inc. | Enhanced sputter target manufacturing method |
JP4467601B2 (ja) * | 2007-05-08 | 2010-05-26 | ソニー株式会社 | ビート強調装置、音声出力装置、電子機器、およびビート出力方法 |
US8749495B2 (en) | 2008-09-24 | 2014-06-10 | Immersion Corporation | Multiple actuation handheld device |
KR101622632B1 (ko) | 2009-08-26 | 2016-05-20 | 엘지전자 주식회사 | 이동 단말기 |
CN102025339B (zh) * | 2009-09-18 | 2014-07-16 | 株式会社村田制作所 | 压电致动器驱动电路 |
JP5715759B2 (ja) | 2010-01-28 | 2015-05-13 | セミコンダクター・コンポーネンツ・インダストリーズ・リミテッド・ライアビリティ・カンパニー | リニア振動モータの駆動制御回路 |
KR20110109363A (ko) | 2010-03-31 | 2011-10-06 | 삼성전자주식회사 | 음악재생시 음악 종류에 따라 감성을 연출하는 미디어 시스템 및 방법 |
US20120112894A1 (en) * | 2010-11-08 | 2012-05-10 | Korea Advanced Institute Of Science And Technology | Haptic feedback generator, portable device, haptic feedback providing method using the same and recording medium thereof |
US10503255B2 (en) | 2010-12-02 | 2019-12-10 | Immersion Corporation | Haptic feedback assisted text manipulation |
KR101206351B1 (ko) | 2010-12-07 | 2012-11-29 | 한국기술교육대학교 산학협력단 | 악보인식시스템 및 이를 이용한 악보인식방법 |
US9083821B2 (en) * | 2011-06-03 | 2015-07-14 | Apple Inc. | Converting audio to haptic feedback in an electronic device |
HRP20220392T1 (hr) | 2011-06-10 | 2022-07-22 | Axiflux Holdings Pty Ltd | Električni motor/generator |
JP5840427B2 (ja) * | 2011-09-09 | 2016-01-06 | アルプス電気株式会社 | 振動発生装置 |
KR101869562B1 (ko) * | 2011-12-27 | 2018-07-24 | 삼성전자주식회사 | 이동 단말에서 사운드 특성에 따른 진동 발생 장치 및 방법 |
KR101429559B1 (ko) | 2012-02-23 | 2014-08-14 | 한국원자력연구원 | 질화붕소나노튜브의 정제 및 표면처리 방법 |
JP5474261B1 (ja) | 2012-05-12 | 2014-04-16 | 京セラ株式会社 | 圧電アクチュエータ、圧電振動装置および携帯端末 |
US9891709B2 (en) * | 2012-05-16 | 2018-02-13 | Immersion Corporation | Systems and methods for content- and context specific haptic effects using predefined haptic effects |
US9368005B2 (en) * | 2012-08-31 | 2016-06-14 | Immersion Corporation | Sound to haptic effect conversion system using mapping |
CN104080024B (zh) * | 2013-03-26 | 2019-02-19 | 杜比实验室特许公司 | 音量校平器控制器和控制方法以及音频分类器 |
US9898085B2 (en) * | 2013-09-06 | 2018-02-20 | Immersion Corporation | Haptic conversion system using segmenting and combining |
US9147328B2 (en) * | 2013-11-04 | 2015-09-29 | Disney Enterprises, Inc. | Creating tactile content with sound |
US9972768B2 (en) | 2014-08-15 | 2018-05-15 | Novasentis, Inc. | Actuator structure and method |
US10264551B2 (en) * | 2014-08-27 | 2019-04-16 | Tractouch Mobile Partners, Llc | Mobile vibratory device, system, and method for physiotherapeutic applications |
KR101554289B1 (ko) | 2014-11-13 | 2015-09-18 | 주식회사 씨케이머티리얼즈랩 | 촉각 제공 장치 |
KR20160106239A (ko) | 2015-03-02 | 2016-09-12 | 이신노 | 실시간 조율이 가능한 악보생성 어플리케이션을 구비한 모바일 단말기 |
DE102015215171A1 (de) * | 2015-08-07 | 2017-02-09 | Brose Fahrzeugteile Gmbh & Co. Kommanditgesellschaft, Coburg | Verfahren zur Ansteuerung von Massageeinheiten in einem Sitz und Sitzanordnung zur Durchführung |
KR101971520B1 (ko) | 2016-02-01 | 2019-04-23 | 자화전자(주) | 탄성 부재 및 이를 구비한 선형 진동 모터 |
KR101928550B1 (ko) | 2016-04-21 | 2018-12-12 | 주식회사 씨케이머티리얼즈랩 | 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치 |
US10123937B2 (en) * | 2016-06-06 | 2018-11-13 | Perumala Corporation | Cold/heat-assisted distributed wave vibration therapy |
KR102669181B1 (ko) * | 2016-11-30 | 2024-05-27 | 삼성전자주식회사 | 햅틱 신호 생성 방법 및 이를 지원하는 전자 장치 |
US10609541B1 (en) * | 2018-04-27 | 2020-03-31 | Mbit Wireless, Inc. | Method and apparatus for emergency alert in client devices |
-
2017
- 2017-11-13 KR KR1020170150314A patent/KR101899538B1/ko active IP Right Grant
- 2017-11-14 CN CN201780096664.4A patent/CN111386510A/zh active Pending
- 2017-11-14 US US16/614,491 patent/US11847262B2/en active Active
- 2017-11-14 WO PCT/KR2017/012850 patent/WO2019093556A1/ko active Application Filing
-
2023
- 2023-11-15 US US18/509,484 patent/US20240085984A1/en active Pending
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6027463A (en) * | 1996-12-27 | 2000-02-22 | Moriyasu; Hiro | Music massager |
CN1479602A (zh) * | 2000-12-08 | 2004-03-03 | ������������ʽ���� | 按摩装置、资料存储媒体及程序制作方法 |
CN1800969A (zh) * | 2006-01-10 | 2006-07-12 | 新康电脑科技(苏州)有限公司 | 电影嗅觉、触觉效果发生方法及装置 |
JP2011167570A (ja) * | 2007-03-14 | 2011-09-01 | F Hoffmann-La Roche Ag | ランセット装置 |
CN101631162A (zh) * | 2008-07-01 | 2010-01-20 | Lg电子株式会社 | 使用接近传感器的移动终端以及控制移动终端的方法 |
KR20100069736A (ko) * | 2008-12-17 | 2010-06-25 | 삼성전자주식회사 | 휴대 단말기의 컨텐츠 재생 장치 및 재생 방법 |
KR20110074333A (ko) * | 2009-12-24 | 2011-06-30 | 삼성전자주식회사 | 휴대 단말의 진동 발생 방법 및 장치 |
US20130262634A1 (en) * | 2012-03-29 | 2013-10-03 | Ikala Interactive Media Inc. | Situation command system and operating method thereof |
KR20140009710A (ko) * | 2012-07-12 | 2014-01-23 | 삼성전자주식회사 | 모터 구동 신호 생성 시스템 및 방법, 반도체 장치, 전자 장치 및 그 진동 조절 방법 |
CN104049735A (zh) * | 2013-03-14 | 2014-09-17 | 英默森公司 | 群体事件期间的触觉效果广播 |
CN104182036A (zh) * | 2013-05-24 | 2014-12-03 | 意美森公司 | 基于媒体内容和一个或多个外部参数提供触觉反馈的方法及装置 |
CN105981288A (zh) * | 2013-12-26 | 2016-09-28 | 佳能株式会社 | 振动元件驱动电路、振动型致动器、图像拾取装置、图像生成装置以及除尘装置 |
KR101641418B1 (ko) * | 2014-07-25 | 2016-07-20 | 포항공과대학교 산학협력단 | 청각 주목도에 기반한 햅틱 신호 생성 방법 및 이를 위한 장치 |
CN105739674A (zh) * | 2014-12-24 | 2016-07-06 | 意美森公司 | 高带宽触觉效果的音频增强仿真 |
Also Published As
Publication number | Publication date |
---|---|
WO2019093556A1 (ko) | 2019-05-16 |
US20240085984A1 (en) | 2024-03-14 |
KR101899538B1 (ko) | 2018-09-19 |
US20200150768A1 (en) | 2020-05-14 |
US11847262B2 (en) | 2023-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111386510A (zh) | 触觉控制信号提供装置及方法 | |
CN110011591B (zh) | 马达驱动信号生成方法、电子设备及存储介质 | |
Schneider et al. | Tactile animation by direct manipulation of grid displays | |
US11198059B2 (en) | Vibration control apparatus, vibration control method, and program | |
EP3582085A1 (en) | Multiplexing and demultiplexing haptic signals | |
US8009156B2 (en) | Haptic sense rendering apparatus and haptic sense rendering method | |
TWI471855B (zh) | 語音合成資訊編輯裝置、儲存媒體及方法 | |
US20220159809A1 (en) | Wireless control apparatus and method for haptic device | |
Martínez et al. | Vitaki: a vibrotactile prototyping toolkit for virtual reality and video games | |
JP4214568B2 (ja) | 画像データ逐次表示装置、画像データ逐次表示方法及び記録媒体 | |
US10134374B2 (en) | Signal processing method and signal processing apparatus | |
US10178491B2 (en) | Apparatus and a method for manipulating an input audio signal | |
US20100207746A1 (en) | Drive system of vibration mouse | |
KR102337869B1 (ko) | 햅틱 제어 신호 제공 장치 및 방법 | |
KR102663844B1 (ko) | 햅틱 제어 신호 제공 장치 및 방법 | |
EP1909416A2 (en) | Parameter setting apparatus | |
KR102311660B1 (ko) | 햅틱 장치를 위한 무선 제어 장치 및 방법 | |
KR102346044B1 (ko) | 햅틱 장치를 위한 무선 제어 장치 및 방법 | |
CN114162016A (zh) | 用于产生与音乐同步的车辆座椅的振动的系统和设备 | |
CN113168222B (zh) | 模式数据生成装置及方法、模式数据再现装置及方法 | |
CN112202373B (zh) | 电子设备 | |
KR20190032224A (ko) | 햅틱 장치를 위한 무선 제어 장치 및 방법 | |
JP2006121243A (ja) | 音声信号レベル制御装置及びその方法 | |
JP3147975U (ja) | タイミングパルス発生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200707 |