CN113874815A - 信息处理装置、信息处理方法和程序 - Google Patents
信息处理装置、信息处理方法和程序 Download PDFInfo
- Publication number
- CN113874815A CN113874815A CN202080037716.2A CN202080037716A CN113874815A CN 113874815 A CN113874815 A CN 113874815A CN 202080037716 A CN202080037716 A CN 202080037716A CN 113874815 A CN113874815 A CN 113874815A
- Authority
- CN
- China
- Prior art keywords
- haptic
- signal
- reproduction
- change
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 80
- 238000003672 processing method Methods 0.000 title claims description 10
- 230000000638 stimulation Effects 0.000 claims abstract description 36
- 230000008859 change Effects 0.000 claims description 129
- 238000004891 communication Methods 0.000 claims description 34
- 230000035807 sensation Effects 0.000 claims description 9
- 238000000034 method Methods 0.000 description 58
- 230000008569 process Effects 0.000 description 35
- 238000012545 processing Methods 0.000 description 29
- 238000010586 diagram Methods 0.000 description 16
- 230000005236 sound signal Effects 0.000 description 14
- 230000001133 acceleration Effects 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 7
- 238000004904 shortening Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 2
- 230000009849 deactivation Effects 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001953 sensory effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/014—Force feedback applied to GUI
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明使得能够基于内容再现速度更适当地提供触觉刺激。提供了一种信息处理装置,该信息处理装置包括用于基于向用户提供的内容的再现速度来生成信号的触觉控制单元,该信号用于向用户提供与内容对应的触觉刺激。
Description
技术领域
本公开内容涉及信息处理装置、信息处理方法和程序。
背景技术
近年来,已经开发了能够向用户提供诸如振动刺激的触觉刺激的各种内容和装置。例如,下面的专利文献1公开了能够使用振动刺激来改善功能、可操作性等的信息处理装置。
引用列表
专利文献
专利文献1:JP 2018-64264 A
发明内容
技术问题
然而,利用专利文献1等中公开的技术,可能无法基于内容的再现速度适当地提供触觉刺激。例如,在内容的再现速度比标准低得多的情况下(在再现速度低于预定值的情况下。在下文中,具有较低再现速度的再现可以被称为“超慢速再现”),当简单地降低触觉刺激的再现速度时,用户可能对触觉刺激感到不适,并且可能损害真实感。同时,在执行内容的超慢速再现的同时省略触觉刺激的提供的情况下,也可能损害真实感(注意,以上问题仅是示例,并且根据本公开内容的问题不限于此)。
因此,鉴于以上情况作出本公开内容,并且本公开内容提供能够基于内容的再现速度更适当地提供触觉刺激的新颖且改进的信息处理装置、信息处理方法和程序。
问题的解决方案
为了解决上述问题,根据本公开内容的一个方面的信息处理装置具有触觉控制单元,该触觉控制单元基于向用户提供的内容的再现速度来生成用于向用户提供与内容对应的触觉刺激的信号。
一种由计算机执行的信息处理方法,根据本公开内容的一个方面的信息处理方法包括:基于向用户提供的内容的再现速度来生成用于向用户提供与内容对应的触觉刺激的信号。
根据本公开内容的一个方面的程序使计算机执行以下操作:基于向用户提供的内容的再现速度来生成用于向用户提供与内容对应的触觉刺激的信号。
根据本公开内容的一个方面的信息处理装置具有:通信单元,该通信单元接收基于向用户提供的内容的再现速度而生成的并且用于向用户提供与内容对应的触觉刺激的信号;以及触觉输出单元,该触觉输出单元通过使用该信号输出触觉刺激。
附图说明
图1是示出根据本实施方式的信息处理系统的配置示例的框图。
图2是示出根据本实施方式的分发装置的配置示例的框图。
图3是示出根据本实施方式的再现装置的配置示例的框图。
图4是用于描述基于内容的再现速度的改变来改变触觉信号的再现时段的处理的具体示例的图。
图5是用于描述基于内容的再现速度的改变来改变触觉信号的再现时段的处理的具体示例的图。
图6是用于描述基于内容的再现速度的触觉信号的再现模式的具体示例的图。
图7是示出根据本实施方式的每个部件的处理流程示例的流程图。
图8是示出振动致动器的频率特性的示例的图。
图9是用于描述修改示例中基于内容的再现速度的改变来改变触觉信号的再现时段的处理的具体示例的图。
图10是示出根据修改示例的每个部件的处理流程示例的流程图。
图11是用于描述在通过搜索条(seek bar)改变再现速度的情况下显示的视频的具体示例的图。
图12是示出根据本实施方式和修改示例的每个装置的硬件配置示例的框图。
具体实施方式
在下文中,将参照附图详细描述本公开内容的优选实施方式。在本说明书和附图中,具有基本相同的功能配置的部件将由相同的附图标记表示以省略重复描述。
注意,将按以下顺序提供描述。
1.概述
2.实施方式
2.1.配置示例
2.2.由触觉控制单元执行的控制的示例
2.3.处理流程示例
3.修改示例
4.备注
5.硬件配置示例
6.结论
<1.概述>
首先,将描述本公开内容的概述。
如上所述,近年来,已经开发了能够向用户提供诸如振动刺激的触觉刺激的各种装置,并且存在触觉刺激将作为(媒体)内容的元素与视频和声音一起被更广泛地提供的可能性。
关于内容,已经开发了各种表达和对应的再现技术。具体地,已经开发了在内容的再现速度增加或降低的情况下表达内容的各种方法。例如,已经开发了这样的技术:用于通过将视频的再现速度降低到低于标准来使得能够识别快到难以用肉眼捕捉的动作,并且该技术例如被用在体育广播等中。相反,还开发了用于将视频的再现速度增加到比标准高得多的技术,并且该技术用于在内容中搜索期望的场景等。
关于在改变视频的再现速度的情况下表达声音的方法,当改变再现速度使得声音也对应于视频的再现速度时,用户听到与实际声音相比更低音调的声音或更高音调的声音。因此,可以采用在改变视频的再现速度的同时省略声音的再现或用另一声音代替声音的方法。当然,除了这些表达方法之外,还开发和实现了各种表达方法。
同时,类似于声音,已经开发了在改变视频的再现速度的情况下表达触觉刺激的各种方法。然而,利用根据相关技术(例如,上述专利文献1等中公开的技术)的技术,可能不能基于内容的再现速度适当地提供触觉刺激。例如,在执行视频的超慢速再现的情况下,当简单地降低触觉刺激的再现速度时,用户可能对触觉刺激感到不适,并且可能损害真实感。具体地,在以1/8倍速再现频率为160[Hz]的振动刺激的情况下,振动刺激的频率变为20[Hz],这可能使用户感到很大的不适感。另外,在一些情况下,当再现速度的改变之后的频率偏离输出振动刺激的装置(例如,振动致动器等)的可输出范围时,不输出振动刺激。同时,在执行视频的超慢速再现的同时省略触觉刺激的提供的情况下,可能损害真实感。这些问题同样适用于内容的再现速度增加的情况。
这里,人关于触觉刺激的感官特性与关于声音的感官特性彼此不同。例如,人的感官对触觉刺激的频率改变与对声音的频率改变相比更不敏感。具体地,已知即使在声音的频率的变化率为1[%]以下的情况下,人也很可能感知到该改变,而在振动刺激(触觉刺激的示例)频率的变化率为30[%]以下的情况下,人很有可能感知不到该改变。
鉴于以上情况,本公开内容的发明人创建了根据本公开内容的技术。根据本公开内容的信息处理装置基于向用户提供的内容的再现速度来生成用于向用户提供与内容对应的触觉刺激的信号。具体地,根据本公开内容的信息处理装置基于内容的再现速度的改变来改变信号。例如,根据本公开内容的信息处理装置基于内容的再现速度的改变来改变信号以改变信号的再现时段。
因此,根据本公开内容的信息处理装置可以基于内容的再现速度更适当地提供触觉刺激。更具体地,如上所述,由于人的感官对触觉刺激的频率改变相对不敏感,因此即使在改变信号以改变用于向用户提供触觉刺激的信号的再现时段的情况下,根据本公开内容的信息处理装置也可以向用户提供不会使用户感到不适的触觉刺激。在下文中,将详细描述根据本公开内容的信息处理装置的功能和处理。
<2.实施方式>
(2.1.配置示例)
上面已经描述了本公开内容的概述。接下来,将描述根据本公开内容的实施方式的各种配置示例。
(信息处理系统的配置示例)
图1是示出根据本实施方式的信息处理系统1的配置示例的框图。如图1所示,根据本实施方式的信息处理系统1包括分发装置100和再现装置200。
分发装置100是将内容分发至再现装置200的信息处理装置。例如,分发装置100基于从再现装置200接收的请求信号(请求)将内容分发至再现装置200。注意,分发方式不一定限于此。例如,分发装置100可以在没有来自再现装置200的请求信号的情况下分发内容。
这里,“内容”包括至少触觉刺激并且除了触觉刺激之外还可以包括例如视频或声音就足够了。在本实施方式中,作为示例,将描述内容包括视频、声音和触觉刺激的情况。即,分发装置100生成用于输出视频、声音和触觉刺激的预定格式的信号,并且将该信号发送至再现装置200。注意,由分发装置100执行的信号生成方法和信号分发方法没有特别限制。在下文中,用于输出视频的信号也被称为“视频信号”,用于输出声音的信号也被称为“声音信号”,以及用于输出触觉刺激的信号也被称为“触觉信号”。
另外,“触觉刺激”包括以下中的至少之一:振动刺激、电刺激、由温度改变引起的刺激、与力感有关的刺激(例如,与被对象推动的感觉有关的刺激、与接触对象的感觉有关的刺激、与被收紧的感觉有关的刺激等)、或与皮肤感觉有关的刺激(例如,与粗糙的感觉有关的刺激、与光滑的感觉有关的刺激等),并且可以是其组合。注意,触觉刺激不一定限于此,并且可以是对用户的触觉起作用的任何刺激。在本实施方式中,作为示例,将主要描述触觉刺激为振动刺激的情况。
分发装置100不必由一个装置实现。例如,在内容是诸如棒球的体育的广播的情况下,分发装置100可以由布置在棒球场中并执行拍摄的视频摄像装置、编辑视频摄像装置的视频的装置、分发编辑的视频的装置等实现,并且各个装置的数目没有特别限制。
同时,再现装置200是通过使用从分发装置100接收的各种信号来再现内容的信息处理装置。再现装置200能够提供至少触觉刺激并且可以是例如智能电话、平板个人计算机(PC)、头戴式显示器等就足够了。在本实施方式中,作为示例,将描述再现装置200为智能电话的情况。即,再现装置200通过使用从分发装置100接收的触觉信号使振动致动器等振动来输出振动刺激,使用视频信号在显示器等上显示视频,并且使用声音信号从扬声器等输出声音。
类似于分发装置100,再现装置200不必由一个装置实现。例如,再现装置200可以由能够输出触觉刺激的装置、能够输出视频的装置、能够输出声音的装置等实现,并且各个装置的数目没有特别限制。
根据本实施方式的再现装置200执行改变内容的再现速度的处理以及与其相关联的各种控制。例如,再现装置200基于由用户作出的输入来改变内容的再现速度(换言之,基于由用户作出的输入来确定内容的再现速度)。然后,再现装置200根据内容的再现速度的改变、通过改变从分发装置100接收的各种信号来改变输出。这里,“内容的再现速度”是向用户提供包括视频、声音和触觉刺激的内容的速度,并且可以指用户感受到的速度和再现装置200的处理速度中的任何一个。内容的再现速度的范围没有特别限制。具体地,可以以各种模式执行再现,包括以约0.125倍速的超慢速再现、以约0.5倍速至0.9倍速的再现(也被称为“慢速再现”)、以约2.0倍速至8.0倍速的再现(也被称为“快进再现”)等。此外,通过用于控制内容的再现场景的用户接口的操作(例如,搜索条上的旋钮的移动等)进行的场景改变的速度可以被视为再现速度(稍后将描述细节)。注意,改变内容的再现速度的处理以及与其相关联的各种控制可以由分发装置100实现或者可以由分发装置100和再现装置200以分发的方式实现。
此外,图1中示出的配置仅是示例,并且根据本实施方式的信息处理系统1的配置示例不一定限于图1的示例。例如,可以单独地提供除了分发装置100和再现装置200之外的装置。
(分发装置的配置示例)
图2是示出根据本实施方式的分发装置100的配置示例的框图。如图2所示,根据本实施方式的分发装置100包括控制单元110、通信单元120和存储单元130。然后,控制单元110包括视频控制单元111、声音控制单元112和触觉控制单元113。
控制单元110被配置成全面地控制由分发装置100执行的整体处理。例如,控制单元110基于来自再现装置200的请求信号来控制各个部件(例如,视频控制单元111、声音控制单元112、触觉控制单元113等)的激活和去激活。注意,控制单元110的控制内容没有特别限制。例如,控制单元110可以控制通常在各种服务器、通用计算机、PC、平板PC等中执行的处理(例如,与操作系统(OS)有关的处理等)。
视频控制单元111被配置成控制由再现装置200输出的视频的内容。具体地,视频控制单元111基于来自再现装置200的请求信号来生成视频信号,并且经由通信单元120将视频信号发送至再现装置200。注意,由视频控制单元111提供的视频的内容没有特别限制。例如,由视频控制单元111提供的视频可以是由来自再现装置200的请求信号指定的视频,或者可以是在再现装置200是位置和姿势改变的诸如头戴式显示器的信息处理装置的情况下由再现装置200的位置和姿势确定的视频。此外,由视频控制单元111提供的视频可以包括用于右眼的视频和用于左眼的视频。此外,视频信号可以与声音信号和触觉信号一起作为一组数据提供,或者可以作为单独的数据提供(在任何情况下,期望视频、声音和触觉刺激被同步提供)。
声音控制单元112被配置成控制由再现装置200输出的声音的内容。具体地,声音控制单元112基于来自再现装置200的请求信号来生成声音信号,并且经由通信单元120将声音信号发送至再现装置200。注意,由声音控制单元112提供的声音的内容没有特别限制。例如,由声音控制单元112提供的声音可以是由来自再现装置200的请求信号指定的声音,或者可以是在再现装置200是头戴式显示器等的情况下由再现装置200的位置和姿势确定的声音。此外,由声音控制单元112提供的声音可以包括用于右耳的声音和用于左耳的声音。
触觉控制单元113被配置成控制由再现装置200输出的触觉刺激(例如,振动刺激等)的内容。具体地,触觉控制单元113基于来自再现装置200的请求信号来生成触觉信号,并且经由通信单元120将触觉信号发送至再现装置200。注意,由触觉控制单元113提供的触觉刺激的内容没有特别限制。例如,由触觉控制单元113提供的触觉刺激可以是由来自再现装置200的请求信号指定的触觉刺激,或者可以是在再现装置200是头戴式显示器等的情况下由再现装置200的位置和姿势确定的触觉刺激。
通信单元120被配置成与再现装置200进行通信。例如,通信单元120从再现装置200接收内容请求信号,并且将视频信号、声音信号和触觉信号发送至再现装置200。注意,由通信单元120接收和发送的信息以及通信的情况不限于此。
存储单元130被配置成存储各种类型的信息。例如,存储单元130存储由控制单元110生成的各种信号等,并且存储由分发装置100的每个部件使用的程序、参数等。注意,在存储单元130中存储的信息不限于此。
在上文中,已经描述了分发装置100的配置示例。注意,以上参照图2描述的配置仅是示例,并且分发装置100的配置不限于这样的示例。例如,分发装置100不必包括图2中示出的所有部件,并且可以包括图2中未示出的部件。此外,可以根据说明书和操作来灵活地修改分发装置100的配置。
(再现装置的配置示例)
图3是示出根据本实施方式的再现装置200的配置示例的框图。如图3所示,根据本实施方式的再现装置200包括控制单元210、通信单元220、输入单元230、输出单元240和存储单元250。然后,控制单元210包括速度确定单元211、视频控制单元212、声音控制单元213和触觉控制单元214,并且输出单元240包括视频输出单元241、声音输出单元242和触觉输出单元243。
控制单元210被配置成全面地控制由再现装置200执行的整体处理。例如,控制单元210基于来自分发装置100的各种信号来控制各个部件(例如,速度确定单元211、视频控制单元212、声音控制单元213、触觉控制单元214等)的激活和去激活。注意,控制单元210的控制内容没有特别限制。例如,控制单元210可以控制通常在各种服务器、通用计算机、PC、平板PC等中执行的处理(例如,与OS有关的处理等)。
速度确定单元211被配置成确定内容的再现速度。例如,速度确定单元211基于由用户针对输入单元230作出的输入来确定内容的再现速度。因此,用户可以以期望的速度再现内容。如上所述,内容的再现速度的范围没有特别限制。
视频控制单元212被配置成控制视频的输出。具体地,视频控制单元212将从分发装置100提供的视频信号提供给视频输出单元241,从而控制由视频输出单元241执行的视频的输出。此时,视频控制单元212提供视频信号,使得以速度确定单元211所确定的再现速度输出视频。
声音控制单元213被配置成控制声音的输出。具体地,声音控制单元213将从分发装置100提供的声音信号提供给声音输出单元242,从而控制由声音输出单元242执行的声音的输出。此时,声音控制单元213提供声音信号,使得以速度确定单元211所确定的再现速度输出声音。这里,如上所述,人的感官对声音的频率变化比对触觉刺激的频率变化更敏感。因此,在再现速度的变化率高于预定值的情况下(在声音的改变大到足以被感知的情况下),声音控制单元213使用语速转换处理来改变声音信号并且将改变的声音信号提供给声音输出单元242。“语速转换处理”是在保持声音的质量和音调的同时改变再现时段的处理。因此,声音控制单元213可以在不使用户感到不适的情况下缓慢或快速地输出声音。由于声音控制单元213可以使用现有的语速转换处理,因此将省略语速转换处理的详细描述。注意,声音控制单元213不必在再现速度的改变之前和之后保持声音的质量和音调。
触觉控制单元214被配置成控制触觉刺激的输出。具体地,触觉控制单元214将从分发装置100提供的触觉信号提供给触觉输出单元243,从而控制由触觉输出单元243执行的触觉刺激的输出。此时,触觉控制单元214提供触觉信号,使得以速度确定单元211所确定的再现速度输出触觉刺激。此外,在本实施方式中,触觉控制单元214可以基于内容的再现速度来改变触觉信号(注意,改变触觉信号等同于生成触觉信号)。稍后将描述细节。
通信单元220被配置成与分发装置100进行通信。例如,通信单元220将内容请求信号发送至分发装置100,并且从分发装置100接收视频信号、声音信号和触觉信号。注意,由通信单元220接收和发送的信息以及通信的情况不限于此。
输入单元230被配置成接收由用户作出的输入。例如,输入单元230包括诸如鼠标、键盘、触摸面板、按钮、开关和麦克风的输入装置,并且用户可以通过使用这些输入装置来执行用于请求内容、改变内容的再现速度等的输入操作。注意,输入单元230中包括的输入装置不限于此。
输出单元240被配置成在控制单元210的控制下执行各种输出。具体地,视频输出单元241是能够输出视频的诸如显示器的视频输出装置,声音输出单元242是能够输出声音的诸如扬声器的声音输出装置,以及触觉输出单元243是能够输出振动刺激的诸如振动致动器的触觉输出装置。这些部件通过使用从控制单元210提供的信号(视频信号、声音信号和触觉信号)来执行各种输出。注意,输出单元240的每个部件中包括的输出装置不限于以上装置。例如,尽管触觉刺激不一定限于振动刺激,但不用说,触觉输出单元243的类型根据要提供的触觉刺激而变化。
存储单元250被配置成存储各种类型的信息。例如,存储单元250存储由控制单元210处理的各种信号等,并且存储由再现装置200的每个部件使用的程序、参数等。注意,在存储单元250中存储的信息不限于此。
在上文中,已经描述了再现装置200的配置示例。注意,以上参照图3描述的配置仅是示例,并且再现装置200的配置不限于这样的示例。例如,再现装置200不必包括图3中示出的所有部件,并且可以包括图3中未示出的部件。此外,可以根据说明书和操作来灵活地修改再现装置200的配置。此外,在与内容的再现速度的改变相关联的各种控制由分发装置100而不是再现装置200实现的情况下,再现装置200的通信单元220接收由分发装置100基于再现速度生成的触觉信号,并且触觉输出单元243通过使用触觉信号输出触觉刺激。
(2.2.由触觉控制单元执行的控制的示例)
在上文中,已经描述了根据本实施方式的各种配置示例。接下来,将描述由再现装置200的触觉控制单元214执行的控制的示例。
如上所述,触觉控制单元214基于内容的再现速度来改变触觉信号(用于向用户提供触觉刺激的信号)(注意,改变触觉信号等同于生成触觉信号)。具体地,触觉控制单元214基于内容的再现速度的改变来改变从分发装置100提供的触觉信号。例如,触觉控制单元214基于内容的再现速度的改变来改变触觉信号以改变触觉信号的再现时段。
这里,将参照图4和图5描述基于内容的再现速度的改变来改变触觉信号的再现时段的处理的具体示例。图4示出了在以1.0倍速再现内容的情况下、在以0.8倍速再现内容的情况下、以及在以1.2倍速再现内容的情况下的触觉信号。如图4所示,触觉控制单元214可以基于再现速度的改变来延长或压缩触觉信号以改变触觉信号的频率,从而延长或缩短触觉信号的再现时段。具体地,在再现速度是0.8倍速的情况下,触觉控制单元214可以通过延长触觉信号使得触觉信号的频率低于再现速度是1.0倍速的情况下的频率,来延长触觉信号的再现时段。此外,在再现速度是1.2倍速的情况下,触觉控制单元214可以通过压缩触觉信号使得触觉信号的频率高于再现速度是1.0倍速的情况下的频率,来缩短触觉信号的再现时段。
如上所述,由于人的感官对触觉刺激的频率改变相对不敏感,因此即使在基于再现速度的改变延长或压缩触觉信号以改变触觉信号的频率的情况下,触觉控制单元214也可以向用户提供不使用户感到不适的触觉刺激。另外,与下述改变触觉信号以保持触觉信号的频率的处理相比,可以以更低的负荷来实现延长或压缩触觉信号以改变触觉信号的频率的处理。
此外,在内容的再现速度的变化率高于预定值(例如,约30[%])的情况下,当如图4所示改变触觉信号的频率时,人很有可能感知到触觉刺激的改变。图5示出了在以1倍速再现内容的情况下和在以0.5倍速再现内容的情况下的触觉信号,并且触觉控制单元214可以如图5所示通过基于内容的再现速度的改变来改变触觉信号以保持触觉信号的频率来延长或缩短触觉信号的再现时段。具体地,在内容的再现速度的变化率高于预定值(例如,约30[%])的情况下,触觉控制单元214可以通过基于变化率改变触觉信号以保持触觉信号的频率来延长或缩短触觉信号的再现时段。例如,触觉控制单元214可以通过执行与由声音控制单元213执行的语速转换处理类似的处理来改变触觉信号以保持触觉信号的频率。注意,不一定使用语速转换处理。因此,即使在内容的再现速度的变化率高到触觉刺激的改变被感知到的程度的情况下,触觉控制单元214也可以向用户提供不使用户感到不适的触觉刺激。此外,由于在一些处理中保持触觉信号的频率,因此触觉控制单元214可以提供具有更高准确度的触觉刺激(如创建者所预期的)。
此外,触觉控制单元214可以基于内容的再现速度省略触觉信号的再现,或者可以在不改变触觉信号的情况下再现触觉信号。图6示出了基于内容的再现速度的触觉信号的再现模式的具体示例。例如,在内容的再现速度在预定范围内(例如,在0.5倍速至4.0倍速的范围内)的情况下,如上所述改变触觉信号的再现时段。同时,在内容的再现速度低于预定值(例如,0.5倍速)的情况下,当如上所述延长触觉信号的再现时段时,用户可能由于过长的再现时段而感到不适(或不舒服)。因此,在内容的再现速度低于预定值(例如,0.5倍速)的情况下,如图6所示,触觉控制单元214可以省略触觉信号的再现。注意,尽管未在图6中示出,但是在内容的再现速度高于预定值的情况下,也可以类似地省略触觉信号的再现。
此外,例如,在内容的再现速度高于预定值(例如,4.0倍速)的情况下,当如上所述缩短触觉信号的再现时段时,存在用户由于再现时段过短而不能适当地感知振动刺激的可能性。因此,在内容的再现速度高于预定值(例如,4.0倍速)的情况下,如图6所示,触觉控制单元214可以再现原始触觉信号。注意,尽管未在图6中示出,但是在内容的再现速度低于预定值的情况下,也可以类似地在不改变触觉信号的情况下执行再现。
注意,基于内容的再现速度的触觉信号的再现模式不一定限于图6的示例。例如,在存在由于触觉信号的过长的再现时段或过高的再现频率而导致用户感到不适(或不舒服)的可能性的情况下,触觉控制单元214可以适当地稀疏(thin out)触觉信号。当执行稀疏处理时,要再现的触觉信号的一部分可以被限制为特性部分。作为提取特性部分的方法,例如,可以提取信号量超过特定值的部分、每单位时间的信号强度超过特定值的部分等。替选地,可以通过根据再现速度限制每单位时间要再现的部分的数目——例如,在再现速度是4倍速的情况下8秒场景的一个部分以及在再现速度是8倍速的情况下16秒场景的一个部分——来执行提取。
即使在执行稀疏处理的情况下,当触觉信号的一个部分的长度较长时,多个信号的再现可能取决于再现速度而交叠。在这样的情况下,可以设想将触觉信号的一个部分的再现时段设置为特定值或更小,并且不执行后面部分的再现,或者省略触觉信号的交叠的后面部分的再现。另外,作为人的触感特性,已知当两次触觉(振动)刺激之间的时间间隔等于或小于特定值(据说当振动刺激较强时时间间隔例如约为10[ms],而当振动刺激较弱时时间间隔例如约为50[ms])时,两次刺激相连并且感觉为一次刺激。因此,考虑到该数值,在两个触觉信号之间的时间间隔(第一触觉信号的结束和第二触觉信号的开始)等于或小于特定范围的情况下,类似地,不再现第二信号的处理或者缩短第一信号并且然后在特定时间间隔之后再现第二信号的处理变得有效。
此外,作为基于内容的再现速度的触觉信号的再现模式,还能够设想在根据视频的再现来再现声音的情况下(在再现速度接近1.0倍速的情况下)执行再现触觉信号的处理,以及在不再现声音的情况下执行不再现触觉信号的处理。相反,也能够设想,即使在不再现声音的情况下,出于例如帮助理解内容的场景改变的目的而再现触觉信号。通常,基于从终端输出的声音自动生成触觉信号的算法是已知的并且在商业上被使用。然而,在本实施方式中,处理的特征在于,即使在不再现声音信号时,算法也被操作用于触觉信号的再现。
(2.3.处理流程示例)
在上文中,已经描述了由再现装置200的触觉控制单元214执行的控制的示例。接下来,将描述根据本实施方式的每个部件的处理流程示例。
图7是示出根据本实施方式的每个部件的处理流程示例的流程图。在步骤S1000中,用户例如经由再现装置200的输入单元230作出输入。在步骤S1004中,速度确定单元211基于输入来确定内容的再现速度。注意,在没有由用户作出的输入的情况下,省略步骤S1000和步骤S1004。
在内容的再现速度的变化率不高于预定值(例如,约30[%])的情况下(步骤S1008/否),根据频率改变的触觉刺激的改变很可能不被感知。因此,在步骤S1012中,触觉控制单元214基于再现速度的变化率延长(或压缩)触觉信号以改变触觉信号的频率,从而延长(或缩短)触觉信号的再现时段。注意,如图4所示,当再现速度降低时触觉信号被延长,而当再现速度增加时触觉信号被压缩。
在内容的再现速度的变化率高于预定值(例如,约30[%])的情况下(步骤S1008/是),根据频率改变的触觉刺激的改变很可能被感知。因此,在步骤S1016中,触觉控制单元214基于再现速度的变化率改变触觉信号以保持触觉信号的频率,从而延长(或缩短)触觉信号的再现时段。
在步骤S1020中,触觉输出单元243通过使用从触觉控制单元214提供的触觉信号输出振动刺激。当内容结束时(步骤S1024/是),一系列处理结束。当内容继续时(步骤S1024/否),继续执行步骤S1000至步骤S1020的处理。
针对每个预定单元(例如,针对每个帧)重复图7中示出的流程图的处理。因此,根据本实施方式的信息处理系统1可以基于内容的再现速度更适当地提供振动刺激。具体地,在再现速度的变化率低到根据频率改变的触觉刺激的改变不被感知到的程度的情况下,信息处理系统1可以通过延长或压缩触觉信号以改变频率来向用户提供不使用户感到不适的振动刺激,同时减少处理负荷。此外,即使在再现速度的变化率高到根据频率改变的触觉刺激的改变被感知到的程度的情况下,信息处理系统1也延长或缩短触觉信号的再现时段以保持频率,使得可以向用户提供不使用户感到不适的具有更高准确度的振动刺激(如创建者所预期的)。
注意,图7中描述的流程图中的各个步骤不一定需要按照所描述的顺序以时间序列执行。即,流程图中的各个步骤可以按照与所描述的顺序不同的顺序执行,或者可以并行执行(这同样适用于稍后阶段的流程图)。
<3.修改示例>
在上文中,已经描述了本公开内容的一个实施方式。接下来,将描述本公开内容的修改示例。
可输出范围可以受到输出触觉刺激的触觉输出单元243的特性的限制。例如,在输出振动刺激的振动致动器的情况下,可输出频带与输出声音等的扬声器的频带相比更窄,并且在音圈马达(VCM)中约为80[Hz]至500[Hz]以及在线性谐振致动器(LRA)中约为100[Hz]±5[Hz]。另外,输出强度可以取决于频率改变而改变。例如,在振动致动器的情况下,相同电压输入的加速度输出可以取决于频率改变而改变。
将参照图8提供详细描述。图8是示出振动致动器的频率特性的示例的图。在图8中示出的示例中,当频率为100[Hz]时加速度具有最大值(1A[m/s2]),以及当频率为90[Hz]时加速度减小到最大值的1/3(1/3×A[m/s2])。然后,当频率为80[Hz]或更小时,加速度为0[m/s2]。如上所述,触觉输出单元243的可输出频带受到其特性的限制,并且相同电压输入的加速度输出也根据频率改变而改变。因此,如图4所示,在基于再现速度的改变来延长或压缩触觉信号以改变触觉信号的频率的情况下,相同电压输入的加速度输出也可以根据频率改变而改变,或者在一些情况下不输出振动刺激。
因此,根据修改示例的再现装置200的触觉控制单元214可以基于触觉输出单元243(其输出触觉刺激)的特性来改变触觉信号。将参照图9描述修改示例中基于内容的再现速度的改变来改变触觉信号的再现时段的处理的具体示例。图9示出了在以1.0倍速再现内容的情况下、在以0.9倍速再现内容的情况下、以及在以0.8倍速再现内容的情况下的触觉信号。
在以0.9倍速再现内容的情况下,当通过图4中示出的方法延长触觉信号时,触觉信号的频率(其在1.0倍速下为100[Hz])变为90[Hz](100×0.9=90[Hz]),并且因此,在具有图8中示出的频率特性的振动致动器的情况下,输出加速度从1A[m/s2]降低至1/3×A[m/s2]。因此,振动刺激的输出强度变得比创建者所预期的弱。因此,如图9所示,触觉控制单元214改变触觉信号的幅度以在再现速度的改变之前和之后保持触觉刺激的输出强度(将触觉信号的幅度改变三倍),同时延长触觉信号。因此,触觉控制单元214可以在再现速度的改变之前和之后保持用户感受到的触觉刺激的强度。
此外,在以0.8倍速再现内容的情况下,当通过图4中示出的方法延长触觉信号时,触觉信号的频率(其在1.0倍速下为100[Hz])变为80[Hz](100×0.8=80[Hz])。因此,在具有图8中示出的频率特性的振动致动器的情况下,输出加速度从1A[m/s2]降低至0[m/s2]。因此,不提供振动刺激。因此,在再现速度的改变之后的触觉刺激的输出强度比预定值弱的情况下(例如,在输出强度太弱而无法通过放大触觉信号的幅度来应对的情况下),触觉控制单元214可以限制再现速度的改变之前和之后的频率的变化率。具体地,如图9所示,触觉控制单元214将再现速度的改变之前和之后的频率的变化率限制为0.9(即,频率的下限被设置为90[Hz],其是在0.9倍速下的频率),并且当改变再现速度使得频率为90[Hz]以下时延长触觉信号以保持90[Hz]。例如,触觉控制单元214可以通过执行与由声音控制单元213执行的语速转换处理类似的处理来延长触觉信号以将触觉信号的频率保持在90[Hz](不一定使用语速转换处理)。此时,类似于0.9倍速的情况,触觉控制单元214将触觉信号的幅度改变三倍。因此,即使在再现速度的变化率高到足以偏离触觉输出单元243的可输出范围的情况下,触觉控制单元214也可以适当地输出触觉刺激。
注意,关于用户对触觉刺激的感知特性,在触觉刺激的频率越低,用户感觉触觉刺激越强烈的情况下(在触觉刺激的频率和感知强度具有非线性关系的情况下),触觉控制单元214也可以基于用户的感知特性来改变触觉信号。因此,触觉控制单元214可以在再现速度的改变之前和之后以更高准确度保持用户对触觉刺激的感知强度。
此外,在以上描述中,已经描述了在修改示例中提供触觉刺激的模式。在修改示例中提供视频和声音的模式可以类似于在以上实施方式中描述的模式。例如,声音控制单元213可以在再现速度的改变之前和之后通过语速转换处理来改变再现时段,同时保持声音的质量和音调,或者不必保持声音的质量和音调。
图10是示出根据修改示例的每个部件的处理流程示例的流程图。在步骤S1100中,用户例如经由再现装置200的输入单元230作出输入。在步骤S1104中,速度确定单元211基于输入来确定内容的再现速度。注意,在没有由用户作出的输入的情况下,省略步骤S1100和步骤S1104。
在内容的再现速度的变化率不高于预定值(例如,约30[%])(步骤S1108/否)并且加速度不低于预定值的情况(即,触觉刺激的输出强度不比预定值弱的情况,步骤S1112/否)下,在步骤S1116中,触觉控制单元214基于再现速度的变化率延长(或压缩)触觉信号以改变触觉信号的频率,并且基于触觉输出单元243的频率特性放大(或衰减)触觉信号的幅度。即,触觉控制单元214执行图9中的0.9倍速的情况下的处理。
在步骤S1112中,在加速度低于预定值的情况下(即,在触觉刺激的输出强度比预定值弱的情况下,步骤S1112/是),在步骤S1120中,触觉控制单元214基于再现速度的变化率和触觉输出单元243的频率特性,在限制频率的变化率的同时延长(或压缩)触觉信号,并且放大(或衰减)触觉信号的幅度。即,触觉控制单元214执行图9中的0.8倍速的情况下的处理。
在步骤S1108中,在内容的再现速度的变化率高于预定值(例如,约30[%])(步骤S1108/是)的情况下,根据频率改变的触觉刺激的改变很可能被感知。因此,在步骤S1124中,触觉控制单元214基于再现速度的变化率来改变触觉信号以保持触觉信号的频率,从而延长(或缩短)触觉信号的再现时段。
在步骤S1128中,触觉输出单元243通过使用从触觉控制单元214提供的触觉信号输出振动刺激。当内容结束时(步骤S1132/是),一系列处理结束。当内容继续时(步骤S1132/否),继续执行步骤S1100至步骤S1128的处理。
针对每个预定单元(例如,针对每个帧)重复图10中示出的流程图的处理。因此,根据修改示例的信息处理系统1可以基于触觉输出单元243的特性更适当地提供振动刺激。注意,以上实施方式中描述的技术事项也可以应用于修改示例。
<4.备注>
如上所述,通过用于控制内容的再现场景的用户接口的操作(例如,搜索条上的旋钮的移动等)进行的场景改变的速度可以被视为再现速度。因此,在下文中,作为示例,将描述在通过移动搜索条上的旋钮改变再现速度的情况下的具体示例。
图11是用于描述在通过移动搜索条上的旋钮改变再现速度的情况下显示的视频10的具体示例的图。图11的视频10示出了棒球运动员挥动球棒击球的场景。于是,用于控制再现场景的搜索条20、旋钮21和指示提供触觉刺激的场景的标记22显示在视频10的下侧。
用户可以通过使用再现装置200的输入单元230在搜索条20上移动旋钮21的位置来改变再现场景。此外,当旋钮21的位置到达标记22时,于是提供触觉刺激。以该方式,通过显示指示提供触觉刺激的场景的标记22,用户还可以在搜索期望的场景时将标记22用作导引。
然后,再现装置200的触觉控制单元214将例如搜索条20上的旋钮21的移动速度(场景改变速度)处理为再现速度(不一定限于旋钮21的移动速度)。即,触觉控制单元214基于旋钮21的移动速度的改变来改变触觉信号以改变触觉信号的再现时段。此时,触觉控制单元214可以改变触觉信号以改变触觉信号的频率,或者可以改变触觉信号以保持触觉信号的频率。此外,如在修改示例中那样,触觉控制单元214可以基于触觉输出单元243的特性来改变触觉信号。替选地,不管旋钮的移动速度如何,均可以在保持频率和再现时段的同时再现原始内容的触觉信号。在该情况下,在旋钮到达标记的定时处再现触觉信号。为其提供标记并且当旋钮移动时再现的触觉信号可以被限制为提供给整个内容的触觉信号中的特性部分。作为提取特性部分的方法,例如,可以提取信号量超过特定值的部分、每单位时间的信号强度超过特定值的部分等。替选地,可以通过根据旋钮的移动速度限制每单位时间要再现的部分的数目(例如,“5秒场景的一个部分”)来执行提取。
另外,尽管在图11中示出了标记22的位置,但是可以采用在提取为特性部分的部分处不显示标记的方法。在任一情况下,通过根据搜索条操作再现触觉信号,根据用户对旋钮21执行的操作(例如,向左移动),在旋钮21经过特定部分(例如,球击中球棒的场景)的定时处将触觉刺激呈现给用户的手指,使得可以获得使用户更容易搜索场景并理解场景改变的效果。此时,例如,考虑将一秒的触觉信号给予具有5秒的时间间隔的两个场景中的每一个的情况,在手指的移动速度高并且手指在一秒内经过两个场景的情况下,在第一触觉信号的再现结束之前第二触觉信号的再现开始,并且因此,存在两个触觉信号被混合的可能性。在这样的情况下,可以省略后一触觉信号的再现。另外,作为人的触感特性,已知当两次触觉(振动)刺激之间的时间间隔等于或小于特定值(据说当振动刺激较强时时间间隔例如约为10[ms],而当振动刺激较弱时时间间隔例如约为50[ms])时,两次刺激相连并且感觉为一次刺激。因此,考虑到该数值,在根据搜索条操作再现触觉信号的状况下,在两个触觉信号之间的时间间隔(第一触觉信号的结束和第二触觉信号的开始)等于或小于特定范围的情况下,不再现第二信号的处理或者缩短第一信号并且然后在特定时间间隔之后再现第二信号的处理变得有效。
注意,操作搜索条的方法的示例可以包括触摸面板UI上的触摸操作、在TV屏幕上观看时的远程控制操作、在PC屏幕上观看时的鼠标操作、触摸板操作等。此外,在搜索条操作的情况下,类似于以上描述,还能够设想在根据视频的再现来再现声音的情况下(在搜索条的移动速度接近1.0倍速的情况下)执行再现触觉信号的处理,以及在不再现声音的情况下执行不再现触觉信号的处理。相反,还能够设想,即使在不再现声音的情况下,也出于例如帮助理解上述内容的场景改变的目的而再现触觉信号。通常,基于从终端输出的声音自动生成触觉信号的算法是已知的并且在商业上被使用。然而,在本实施方式中,处理的特征在于,即使在不再现声音信号时,算法也被操作用于触觉信号的再现。注意,用于控制内容的再现场景的用户接口不一定限于搜索条20。
<5.硬件配置示例>
接下来,将参照图12描述根据本实施方式和修改示例的硬件配置示例。图12是示出实现根据本实施方式和修改示例的再现装置200(或分发装置100)的信息处理装置900的硬件配置示例的框图。由根据本实施方式和修改示例的再现装置200(或分发装置100)执行的信息处理通过下述软件和硬件的协作来实现。
如图12所示,信息处理装置900包括中央处理单元(CPU)901、只读存储器(ROM)902、随机存取存储器(RAM)903和主机总线904a。此外,信息处理装置900包括桥接器904、外部总线904b、接口905、输入装置906、输出装置907、存储装置908、驱动器909、连接端口911和通信装置913。代替CPU 901或除了CPU 901之外,信息处理装置900可以包括诸如DSP或ASIC的处理电路。
CPU 901用作操作处理装置和控制装置,并且根据各种程序控制信息处理装置900中的整体操作。此外,CPU 901可以是微处理器。ROM 902存储由CPU 901使用的程序、计算参数等。RAM 903临时存储在CPU 901的执行中使用的程序、在执行中适当地改变的参数等。CPU 901可以实现再现装置200的控制单元210(或分发装置100的控制单元110)。
CPU 901、ROM 902和RAM 903通过包括CPU总线等的主机总线904a相互连接。主机总线904a经由桥接器904连接至诸如外围部件互连/接口(PCI)总线的外部总线904b。注意,主机总线904a、桥接器904和外部总线904b不需要是分开的部件,并且这些功能可以通过一个总线来实现。
输入装置906例如由诸如鼠标、键盘、触摸面板、按钮、麦克风、开关或控制杆的由用户输入信息的装置来实现。此外,输入装置906例如可以是使用红外线或其他无线电波的远程控制装置,或者可以是支持信息处理装置900的操作的诸如移动电话或PDA的外部连接装置。另外,输入装置906可以包括例如输入控制电路,其基于由用户使用上述输入手段输入的信息来生成输入信号并且将输入信号输出至CPU 901。通过操作输入装置906,用户可以将各种数据输入至信息处理装置900并且指示处理操作。输入装置906可以实现再现装置200的输入单元230。
输出装置907通过使用能够在视觉、听觉或触觉上向用户通知获取的信息的装置来配置。这样的装置的示例包括:视频输出装置,例如CRT显示装置、液晶显示装置、等离子显示装置或EL显示装置;声音输出装置,例如扬声器或头戴式耳机;触觉输出装置,例如振动致动器;等等。输出装置907输出例如通过由信息处理装置900执行的各种处理而获得的结果。输出装置907可以实现再现装置200的输出单元240。
存储装置908是被配置为可以被包括在信息处理装置900中的存储单元的示例的数据存储装置。存储装置908例如由诸如硬盘驱动器(HDD)的磁存储装置、半导体存储装置、光学存储装置或磁光存储装置来实现。存储装置908的示例可以包括存储介质、将数据记录在存储介质中的记录装置、从存储介质读取数据的读取装置以及删除记录在存储介质中的数据的删除装置等。存储装置908存储由CPU 901执行的程序、各种数据、从外部获取的各种数据等。存储装置908可以实现再现装置200的存储单元250(或分发装置100的存储单元130)。
驱动器909是用于存储介质的读取器/写入器,并且被内置在信息处理装置900中或从外部附接至信息处理装置900。驱动器909读取记录在诸如安装的磁盘、光盘、磁光盘或半导体存储器的可移除存储介质中的信息,并且将信息输出至RAM 903。此外,驱动器909还可以向可移除存储介质写入信息。
连接端口911是连接至外部装置的接口,并且是用于连接至能够通过例如通用串行总线(USB)等发送数据的外部装置的连接端口。
通信装置913例如是通过使用通信装置等配置的用于连接至网络920的通信接口。通信装置913例如是用于有线或无线局域网(LAN)、长期演进(LTE)、蓝牙(注册商标)、无线USB(WUSB)等的通信卡。此外,通信装置913可以是用于光学通信的路由器、用于非对称数字用户线(ADSL)的路由器、用于各种类型的通信的调制解调器等。通信装置913可以例如根据预定协议例如TCP/IP向因特网和另一通信装置发送信号等以及从因特网和另一通信装置接收信号等。通信装置913可以实现再现装置200的通信单元220(或分发装置100的通信单元120)。
注意,网络920是从连接至网络920的装置发送的信息的有线或无线传输路径。例如,网络920可以包括:公共线路网络,例如因特网、电话线路网络或卫星通信网络;包括以太网(注册商标)的各种局域网(LAN);广域网(WAN)等。另外,网络920可以包括专用线路网络,例如互联网协议-虚拟专用网络(IP-VPN)。
上面已经描述了能够实现根据本实施方式的信息处理装置900的功能的硬件配置示例。上述每个部件可以通过使用通用构件来实现,或者可以由专用于每个部件的功能的硬件来实现。因此,可以根据在实现本实施方式时的技术水平适当地改变要使用的硬件配置。
注意,可以创建用于实现如上所述的根据本实施方式的信息处理装置900的每个功能的计算机程序,并且可以将计算机程序安装在PC等中。此外,可以提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质的示例包括磁盘、光盘、磁光盘、闪速存储器等。此外,上述计算机程序可以在不使用记录介质的情况下经由例如网络来分发。
<6.结论>
如上所述,根据本公开内容的信息处理装置基于向用户提供的内容的再现速度来生成用于向用户提供与内容对应的触觉刺激的触觉信号。具体地,根据本公开内容的信息处理装置基于内容的再现速度的改变来改变触觉信号。例如,根据本公开内容的信息处理装置基于内容的再现速度的改变来改变触觉信号以改变触觉信号的再现时段。
因此,根据本公开内容的信息处理装置可以基于内容的再现速度更适当地提供触觉刺激。由于人的感官对触觉刺激的频率改变相对不敏感,因此,即使在改变触觉信号以改变触觉信号的再现时段的情况下,根据本公开内容的信息处理装置也可以向用户提供不使用户感到不适的触觉刺激。此时,根据本公开内容的信息处理装置可以以各种模式改变触觉信号,例如改变触觉信号以改变频率或者改变触觉信号以保持频率。
如上所述,已经参照附图详细描述了本公开内容的优选实施方式,但是本公开内容的技术范围不限于这样的示例。对于本公开内容所属领域的技术人员将明显的是,可以在权利要求中描述的技术思想的范围内构思各种修改或变更,并且自然地理解的是,这些修改或变更落入本公开内容的技术范围内。
此外,本说明书中描述的效果仅是说明性或示例性的,而不是限制性的。即,除了上述效果之外或代替上述效果,根据本公开内容的技术还可以表现出根据本说明书的描述对于本领域技术人员而言明显的其他效果。
注意,以下配置也落入本公开内容的技术范围内。
(1)一种信息处理装置,包括:
触觉控制单元,所述触觉控制单元基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
(2)根据以上(1)所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号。
(3)根据以上(2)所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号以改变所述信号的再现时段。
(4)根据以上(3)所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来延长或压缩所述信号以改变所述信号的频率。
(5)根据以上(3)所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号以保持所述信号的频率。
(6)根据以上(5)所述的信息处理装置,其中,
在所述再现速度的变化率高于预定值的情况下,所述触觉控制单元基于所述变化率来改变所述信号以保持所述信号的频率。
(7)根据以上(4)所述的信息处理装置,其中,
所述触觉控制单元基于输出所述触觉刺激的触觉输出单元的特性来改变所述信号。
(8)根据以上(7)所述的信息处理装置,其中,
所述触觉控制单元改变所述信号的幅度以在所述再现速度的改变之前和之后保持所述触觉刺激的输出强度。
(9)根据以上(8)所述的信息处理装置,其中,
在所述再现速度的改变之后的所述触觉刺激的输出强度低于预定值的情况下,所述触觉控制单元限制所述再现速度的改变之前和之后的所述频率的变化率。
(10)根据以上(1)至(9)中任一项所述的信息处理装置,其中,
基于由所述用户作出的输入来确定所述再现速度。
(11)根据以上(1)至(10)中任一项所述的信息处理装置,其中,
所述触觉刺激包括以下中的至少一个:振动刺激、电刺激、由温度改变引起的刺激、与力感有关的刺激、或与皮肤感觉有关的刺激。
(12)一种由计算机执行的信息处理方法,所述信息处理方法包括:
基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
(13)一种程序,所述程序用于使计算机执行以下操作:
基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
(14)一种信息处理装置,包括:
通信单元,所述通信单元接收基于向用户提供的内容的再现速度而生成的并且用于向所述用户提供与所述内容对应的触觉刺激的信号;以及
触觉输出单元,所述触觉输出单元通过使用所述信号来输出所述触觉刺激。
附图标记列表
100 分发装置
110 控制单元
111 视频控制单元
112 声音控制单元
113 触觉控制单元
120 通信单元
130 存储单元
200 再现装置
210 控制单元
211 速度确定单元
212 视频控制单元
213 声音控制单元
214 触觉控制单元
220 通信单元
230 输入单元
240 输出单元
241 视频输出单元
242 声音输出单元
243 触觉输出单元
250 存储单元
Claims (14)
1.一种信息处理装置,包括:
触觉控制单元,所述触觉控制单元基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
2.根据权利要求1所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号。
3.根据权利要求2所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号以改变所述信号的再现时段。
4.根据权利要求3所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来延长或压缩所述信号以改变所述信号的频率。
5.根据权利要求3所述的信息处理装置,其中,
所述触觉控制单元基于所述再现速度的改变来改变所述信号以保持所述信号的频率。
6.根据权利要求5所述的信息处理装置,其中,
在所述再现速度的变化率高于预定值的情况下,所述触觉控制单元基于所述变化率来改变所述信号以保持所述信号的频率。
7.根据权利要求4所述的信息处理装置,其中,
所述触觉控制单元基于输出所述触觉刺激的触觉输出单元的特性来改变所述信号。
8.根据权利要求7所述的信息处理装置,其中,
所述触觉控制单元改变所述信号的幅度以在所述再现速度的改变之前和之后保持所述触觉刺激的输出强度。
9.根据权利要求8所述的信息处理装置,其中,
在所述再现速度的改变之后的所述触觉刺激的输出强度低于预定值的情况下,所述触觉控制单元限制所述再现速度的改变之前和之后的所述频率的变化率。
10.根据权利要求1所述的信息处理装置,其中,
基于由所述用户作出的输入来确定所述再现速度。
11.根据权利要求1所述的信息处理装置,其中,
所述触觉刺激包括以下中的至少一个:振动刺激、电刺激、由温度改变引起的刺激、与力感有关的刺激、或与皮肤感觉有关的刺激。
12.一种由计算机执行的信息处理方法,所述信息处理方法包括:
基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
13.一种程序,所述程序用于使计算机执行以下操作:
基于向用户提供的内容的再现速度来生成用于向所述用户提供与所述内容对应的触觉刺激的信号。
14.一种信息处理装置,包括:
通信单元,所述通信单元接收基于向用户提供的内容的再现速度而生成的并且用于向所述用户提供与所述内容对应的触觉刺激的信号;以及
触觉输出单元,所述触觉输出单元通过使用所述信号来输出所述触觉刺激。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-099717 | 2019-05-28 | ||
JP2019099717 | 2019-05-28 | ||
PCT/JP2020/018229 WO2020241170A1 (ja) | 2019-05-28 | 2020-04-30 | 情報処理装置、情報処理方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113874815A true CN113874815A (zh) | 2021-12-31 |
Family
ID=73552895
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080037716.2A Pending CN113874815A (zh) | 2019-05-28 | 2020-04-30 | 信息处理装置、信息处理方法和程序 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220244784A1 (zh) |
EP (1) | EP3979044A4 (zh) |
JP (1) | JP7494848B2 (zh) |
CN (1) | CN113874815A (zh) |
WO (1) | WO2020241170A1 (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005506614A (ja) * | 2001-10-10 | 2005-03-03 | イマージョン コーポレイション | 触覚フィードバックを使用する音声データ出力および操作 |
US20090322695A1 (en) * | 2008-06-25 | 2009-12-31 | Lg Electronics Inc. | Mobile terminal and method of controlling the mobile terminal |
CN106095069A (zh) * | 2015-04-28 | 2016-11-09 | 意美森公司 | 触觉回放调节系统 |
US20170090577A1 (en) * | 2015-09-25 | 2017-03-30 | Immersion Corporation | Haptic effects design system |
CN107106908A (zh) * | 2015-02-25 | 2017-08-29 | 意美森公司 | 为慢动作修改触觉效果 |
WO2018008217A1 (ja) * | 2016-07-07 | 2018-01-11 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019008798A (ja) * | 2017-06-22 | 2019-01-17 | イマージョン コーポレーションImmersion Corporation | 注視方向可変の仮想環境における触覚次元 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9245429B2 (en) * | 2013-09-06 | 2016-01-26 | Immersion Corporation | Haptic warping system |
JP6977312B2 (ja) | 2016-10-07 | 2021-12-08 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
JP6877995B2 (ja) * | 2016-12-27 | 2021-05-26 | 任天堂株式会社 | 振動制御システム、振動制御装置、振動制御プログラムおよび振動制御方法 |
-
2020
- 2020-04-30 US US17/612,752 patent/US20220244784A1/en not_active Abandoned
- 2020-04-30 JP JP2021522737A patent/JP7494848B2/ja active Active
- 2020-04-30 WO PCT/JP2020/018229 patent/WO2020241170A1/ja unknown
- 2020-04-30 EP EP20814953.4A patent/EP3979044A4/en active Pending
- 2020-04-30 CN CN202080037716.2A patent/CN113874815A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005506614A (ja) * | 2001-10-10 | 2005-03-03 | イマージョン コーポレイション | 触覚フィードバックを使用する音声データ出力および操作 |
US20090322695A1 (en) * | 2008-06-25 | 2009-12-31 | Lg Electronics Inc. | Mobile terminal and method of controlling the mobile terminal |
CN107106908A (zh) * | 2015-02-25 | 2017-08-29 | 意美森公司 | 为慢动作修改触觉效果 |
JP2018513430A (ja) * | 2015-02-25 | 2018-05-24 | イマージョン コーポレーションImmersion Corporation | スローモーションのためのハプティック効果の修正 |
CN106095069A (zh) * | 2015-04-28 | 2016-11-09 | 意美森公司 | 触觉回放调节系统 |
US20170090577A1 (en) * | 2015-09-25 | 2017-03-30 | Immersion Corporation | Haptic effects design system |
WO2018008217A1 (ja) * | 2016-07-07 | 2018-01-11 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019008798A (ja) * | 2017-06-22 | 2019-01-17 | イマージョン コーポレーションImmersion Corporation | 注視方向可変の仮想環境における触覚次元 |
Also Published As
Publication number | Publication date |
---|---|
WO2020241170A1 (ja) | 2020-12-03 |
JP7494848B2 (ja) | 2024-06-04 |
EP3979044A4 (en) | 2022-07-06 |
US20220244784A1 (en) | 2022-08-04 |
JPWO2020241170A1 (zh) | 2020-12-03 |
EP3979044A1 (en) | 2022-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9454881B2 (en) | Haptic warping system | |
US10477202B2 (en) | Method and apparatus for encoding and decoding haptic information in multi-media files | |
EP2703951B1 (en) | Sound to haptic effect conversion system using mapping | |
CN107071648B (zh) | 声音播放调节系统、装置及方法 | |
CN112313604B (zh) | 解码设备、解码方法和程序 | |
US11482086B2 (en) | Drive control device, drive control method, and program | |
WO2021176842A1 (ja) | 復号装置、復号方法、プログラム、符号化装置、符号化方法 | |
CN112470104A (zh) | 编码设备、编码方法、解码设备、解码方法、发送系统、接收设备和程序 | |
US11947723B2 (en) | Decoding device, decoding method, and program | |
EP3979044A1 (en) | Information processing device, information processing method, and program | |
US9270245B2 (en) | Sound output system, non-transitory computer-readable storage medium having sound output program stored thereon, sound output control method, and information processing apparatus | |
US20230145547A1 (en) | Decoding device, decoding method, program, encoding device, and encoding method | |
CN110892475A (zh) | 信息处理装置、信息处理方法和程序 | |
CN110621384B (zh) | 信息处理设备、信息处理方法和程序 | |
JP2004033690A (ja) | ビデオゲーム装置、記録媒体およびプログラム | |
CN113453048A (zh) | 音视频的触觉反馈设置方法、播放方法及计算机设备 | |
CN106470314B (zh) | 服务器装置、信息处理系统、终端装置和信息处理方法 | |
CN116456035B (zh) | 一种增强振动提示方法及电子设备 | |
CN114125649A (zh) | 音量调节方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |