CN113196210A - 信息处理装置、信息处理系统、信息处理方法和程序 - Google Patents
信息处理装置、信息处理系统、信息处理方法和程序 Download PDFInfo
- Publication number
- CN113196210A CN113196210A CN201980080700.7A CN201980080700A CN113196210A CN 113196210 A CN113196210 A CN 113196210A CN 201980080700 A CN201980080700 A CN 201980080700A CN 113196210 A CN113196210 A CN 113196210A
- Authority
- CN
- China
- Prior art keywords
- control information
- information processing
- signal
- information
- tactile
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 218
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000004891 communication Methods 0.000 claims abstract description 113
- 238000012545 processing Methods 0.000 claims abstract description 42
- 230000035807 sensation Effects 0.000 claims description 216
- 230000000638 stimulation Effects 0.000 claims description 39
- 239000000284 extract Substances 0.000 claims description 20
- 230000008859 change Effects 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 description 54
- 230000005540 biological transmission Effects 0.000 description 48
- 238000010586 diagram Methods 0.000 description 22
- 230000008878 coupling Effects 0.000 description 14
- 238000010168 coupling process Methods 0.000 description 14
- 238000005859 coupling reaction Methods 0.000 description 14
- 230000009467 reduction Effects 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 230000008676 import Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000009825 accumulation Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000015541 sensory perception of touch Effects 0.000 description 3
- 208000004547 Hallucinations Diseases 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 238000005562 fading Methods 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- VZSRBBMJRBPUNF-UHFFFAOYSA-N 2-(2,3-dihydro-1H-inden-2-ylamino)-N-[3-oxo-3-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)propyl]pyrimidine-5-carboxamide Chemical compound C1C(CC2=CC=CC=C12)NC1=NC=C(C=N1)C(=O)NCCC(N1CC2=C(CC1)NN=N2)=O VZSRBBMJRBPUNF-UHFFFAOYSA-N 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000008194 pharmaceutical composition Substances 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. personal calling systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种信息处理装置,设置有信号处理单元,其用于根据通信状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,呈现触觉刺激的触觉呈现单元基于第二控制信息经由通信被控制。
Description
技术领域
本公开涉及信息处理装置、信息处理系统、信息处理方法和程序。
背景技术
近年来,作为向用户提供各种体验的一种方法,已经提出了用于通过振动等呈现触感和力感(在下文中也将其共同地简称为“触感”)的各种技术。例如,专利文献1公开了如下技术的一个示例,该技术用于通过振动部的振动向穿戴包括振动部的所谓的可穿戴设备的用户呈现触觉刺激。振动部基于控制信号而振动。
另外,已经研究了各种技术,以用于通过经由通信向用于呈现触感的装置(下文中也称为“身体感觉导入装置”)传送控制信息(例如,用于驱动振动部的控制信号),来从外部装置控制身体感觉导入装置的操作。这样的技术的应用使得可以实现例如在远程位置之间的通信中的触感呈现,以及期望向用户提供新体验的效果。另外,无线通信的使用消除了在装置之间使用线缆等进行通信的必要性,这可以增加身体感觉导入装置的使用方法、形状等的灵活性,并且使得可以向用户提供更有价值的体验。
引用列表
专利文献
专利文献1:日本未审查专利申请公开第2018-60313号
发明内容
本发明要解决的问题
同时,在通过通信传送各种类型的信息的情况下,信息的传递可能取决于通信的状态而被延迟。这种延迟的发生引起向用户呈现触觉刺激的时刻的偏差,这可能因此损害随着触觉刺激的呈现而要提供给用户的体验的价值。
因此,本公开提出了一种允许根据通信的状态以更合适的模式向用户呈现触觉刺激的技术。
问题的解决手段
根据本公开,提供了一种信息处理装置,该信息处理装置包括信号处理器,该信号处理器根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,呈现触觉刺激的触觉呈现部基于第二控制信息通过通信被控制。
另外,根据本公开,提供了一种信息处理系统,该信息处理系统包括:身体感觉导入装置,其包括触觉呈现部,该触觉呈现部呈现触觉刺激;以及信息处理装置,其包括信号处理器,该信号处理器根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,触觉呈现部基于第二控制信息通过通信被控制。
另外,根据本公开,提供了一种由计算机执行的信息处理方法,该信息处理方法包括:根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,呈现触觉刺激的触觉呈现部基于第二控制信息通过通信被控制。
另外,根据本公开,提供了一种程序,该程序使得计算机执行以下步骤:根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,呈现触觉刺激的触觉呈现部基于第二控制信息通过通信被控制。
附图说明
图1是描述根据本公开的实施方式的信息处理系统的系统配置的示例的说明图。
图2是示出根据本实施方式的信息处理系统的功能配置的示例的框图。
图3是描述与根据本实施方式的信息处理系统中的传输延迟的减小相关的技术的示例的概要的说明图。
图4是描述与根据本实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。
图5是描述与根据本实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。
图6是描述与根据本实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。
图7是示出根据本实施方式的信息处理系统的处理的流程的示例的流程图。
图8是描述与根据本实施方式的信息处理系统中发生传输延迟的情况下的触觉刺激的呈现相关的技术的示例的概要的说明图。
图9是示出根据本实施方式的身体感觉导入装置中的信号处理器的功能配置的示例的框图。
图10是示出根据本实施方式的信息处理系统的处理的流程的另一示例的流程图。
图11是描述根据本实施方式的信息处理系统的修改示例的说明图。
图12是示出根据本实施方式的信息处理装置的硬件配置的配置示例的功能框图。
图13是描述根据本实施方式的身体感觉导入装置的应用示例1的说明图。
图14是描述根据本实施方式的身体感觉导入装置的应用示例1的说明图。
图15是描述根据本实施方式的身体感觉导入装置的应用示例2的说明图。
图16是描述根据本实施方式的身体感觉导入装置的应用示例2的说明图。
图17是描述根据本实施方式的身体感觉导入装置的应用示例3的说明图。
具体实施方式
在下文中,参照附图详细描述本公开的优选实施方式。应当注意,在本说明书和附图中,通过分配相同的附图标记,省略了对具有基本上相同的功能配置的部件的重复描述。
另外,按照以下顺序给出描述。
1.配置示例
1.1.系统配置
1.2.功能配置
2.对通过网络控制触觉刺激的呈现的研究
3.技术特征
3.1.与减小传输延迟相关的技术
3.2.与在发生延迟的情况下对触觉刺激的呈现的控制相关的技术
4.硬件配置
5.应用示例
5.1.应用示例1:夹克式可穿戴设备
5.2.应用示例2:带式可穿戴设备
5.3.应用示例3:沙发式设备
5.4.补充
6.总结
<<1.配置示例>
在下文中,描述根据本公开的实施方式的信息处理系统的配置的示例。
<1.1.系统配置>
首先,参照图1描述根据本公开的实施方式的信息处理系统的系统配置的示例。图1是描述根据本实施方式的信息处理系统的系统配置的示例的说明图。
如图1所示,根据本实施方式的信息处理系统1包括身体感觉导入装置200和信息处理装置100。身体感觉导入装置200包括触觉呈现部207,并且通过驱动触觉呈现部207向用户呈现触觉刺激。作为具体示例,身体感觉导入装置200在其至少一部分与用户的预定部位接触的状态下由用户使用,并且支承触觉呈现部207以定位在该部分附近。也就是说,身体感觉导入装置200可以包括支承部(例如,壳体等),该支承部用于支承触觉呈现部207以使得触觉呈现部207在用户正在使用的状态(例如,穿戴在预定部位上的状态)下与用户的预定部位接触。在这样的情况下,身体感觉导入装置200通过驱动触觉呈现部207来向上述部位呈现触觉刺激。具体地,在根据本实施方式的信息处理系统1中,身体感觉导入装置200和信息处理装置100通过预定网络N1彼此耦接,并且通过基于从信息处理装置100传送的控制信息而驱动身体感觉导入装置200的触觉呈现部207来向用户呈现触觉刺激。
触觉呈现部207可以被配置成例如通过振动向目标部位呈现触觉刺激。在这种情况下,例如,触觉呈现部207可以通过基于输入的控制信息(例如,控制信号)驱动致动器等来生成振动。不必说,只要可以向目标部位呈现触觉刺激,呈现触觉刺激的方法就不被特别限制,并且可以根据该方法适当地修改触觉呈现部207的配置。
信息处理装置100可以由诸如智能电话、PC(个人计算机)或服务器的装置来实现,该装置被配置成能够通过预定通信路径与另一装置通信。
应当注意,将身体感觉导入装置200和信息处理装置100彼此耦接的网络N1的类型没有特别限定。作为具体示例,网络N1可以由所谓的无线网络(例如基于Wi-Fi(注册商标)标准的网络)配置。另外,作为另一示例,网络N1可以由因特网、专用线路、LAN(局域网)、WAN(广域网)等配置。另外,网络N1可以包括多个网络,并且至少一些网络可以被配置为有线网络。
信息处理系统1还可以包括内容服务器300。内容服务器300通过网络向各种装置分发用于通过向用户呈现图像、声音、触觉刺激等来提供各种体验的数据(换句话说,内容)。信息处理装置100可以将从内容服务器300分发的内容中包括的与触觉刺激的呈现相关的数据(例如,用于驱动触觉呈现部207的控制信号等)作为上述控制信息传送至身体感觉导入装置200,从而控制身体感觉导入装置200的与触觉刺激的呈现相关的操作。
信息处理系统1还可以包括各种类型的输出装置,例如显示装置350和声音输出装置360。显示装置350包括显示器等,并且在预定显示区域上显示诸如图像(例如,运动图像和静止图像)的显示信息,从而向用户呈现各种类型的信息。另外,声音输出装置360包括扬声器等,并且输出诸如歌曲和语音的声音,从而向用户呈现各种类型的信息。这样的配置使得可以通过上述各种类型的输出装置向用户呈现例如与从内容服务器300分发的内容相对应的图像、语音等。
应当注意,上述信息处理系统1的配置仅是示例,并且只要与身体感觉导入装置200相对应的部分以及与信息处理装置100相对应的部分经由网络N1彼此耦接,则其他配置没有特别限制。作为具体示例,信息处理装置100和内容服务器300可以被整体地配置。另外,与诸如显示装置350和声音输出装置360的各种类型的输出装置相对应的部分可以被实现为包括在信息处理装置100中的设备。另外,与信息处理装置100相对应的部分和与内容服务器300相对应的部分可以由彼此协作操作的多个装置(例如,服务器等)来实现。
以上已经描述了根据本公开的实施方式的信息处理系统的系统配置的示例。
<1.2.功能配置>
接下来,参照图2描述本公开的实施方式的信息处理系统1的功能配置的示例,具体地,聚焦于图1所示的身体感觉导入装置200和信息处理装置100的配置。图2是示出根据本实施方式的信息处理系统的功能配置的示例的框图。
首先,描述信息处理装置100的配置的示例。信息处理装置100起到对与通过身体感觉导入装置200的触觉刺激的呈现相关的数据(控制信息)执行各种类型的处理的作用。如图2所示,信息处理装置100包括通信部101、信号处理器103和内容处理器105。应当注意,尽管在图2中未示出,但是信息处理装置100可以根据要提供的功能具有除上述配置以外的配置。
通信部101包括用于使信息处理装置100的每个部件通过网络N1向另一装置(例如,身体感觉导入装置200)传送各种类型的信息并且从另一装置(例如,身体感觉导入装置200)接收各种类型的信息的部件。通信部101的部件可以根据通信方法和通信路径适当地改变。作为具体示例,在网络N1包括无线通信路径的情况下,通信部101可以包括用于实现无线通信的各种类型的部件,例如RF电路。另外,在以下描述中,在信息处理装置100中的部件向另一装置(例如,身体感觉导入装置200)传送信息并且从另一装置(例如,身体感觉导入装置200)接收信息的情况下,除非有另外说明,否则通过通信部101执行信息的传送和接收。
内容处理器105示意性地指示用于对各种类型的数据(换句话说,内容)执行各种类型的处理以用于向用户呈现图像、声音、触觉刺激等(换句话说,提供各种类型的体验)的部件。作为具体示例,内容处理器105可以从存储在预定存储区域中的各种类型的内容的数据中读取要用于向用户呈现各种类型的信息的内容的数据作为处理目标。
例如,存储部151示意性地指示存储有各种类型的内容的数据的存储区域。应当注意,只要内容处理器105能够从存储部151中读取各种类型的数据,存储部151的配置就不被特别限制。作为具体示例,存储部151可以内置于信息处理装置100中。另外,作为另一示例,存储部151可以被配置为与信息处理装置100不同的装置。在这种情况下,例如,存储部151可以从外部附接至信息处理装置100,或者可以通过预定网络耦接至信息处理装置100。
另外,作为另一示例,内容处理器105可以通过预定网络从另一装置(例如,图1中所示的内容服务器300)获取要用于向用户呈现各种类型的信息的内容的数据作为处理目标。
另外,根据本实施方式的内容处理器105从作为处理目标的内容的数据中提取与触觉刺激的呈现相关的控制信息,并且将该控制信息输出至信号处理器103。控制信息的示例包括用于驱动身体感觉导入装置200的触觉呈现部207的控制信号。另外,作为另一示例,内容处理器105可以从作为处理目标的内容的数据中读取与触觉刺激的呈现相关的设置,根据该设置生成与上述触觉刺激的呈现相关的控制信息,并且将控制信息输出至信号处理器103。应当注意,在下文中,为了更容易理解根据本实施方式的技术的特征,假设作为与触觉刺激的呈现相关的控制信息,用于驱动触觉呈现部207的控制信号(例如,用于驱动与振动的呈现相关的致动器的控制信号)被输出至信号处理器103。然而,其中将要在下面描述的控制信号用作上述控制信息的模式仅是示例,并且只要可以基本上实现根据本公开的技术,控制信息就不必然限于控制信号。
信号处理器103通过网络N1将从内容处理器105输出的与触觉刺激的呈现相关的控制信号(换言之,上述控制信息)传送至身体感觉导入装置200。这使得信息处理装置100控制身体感觉导入装置200对用户的触觉刺激的呈现。
另外,信号处理器103可以根据信息处理装置100与身体感觉导入装置200之间通过网络N1的通信状态,对上述控制信号执行各种类型的处理(例如信号处理)。作为具体示例,在由于网络N1的拥塞等而使得通信速率降低的情况下,信号处理器103可以提取从内容处理器105输出的控制信号的一些信号分量(例如,频率分量),并且将与这种提取的结果相对应的信号分量传送至身体感觉导入装置200。这限制了要通过网络N1从信息处理装置100传送至身体感觉导入装置200的控制信号的数据量,这使得即使在通信速率降低的情况下,也可以抑制与控制信号的传递相关的延迟,以使延迟更小。应当注意,稍后详细描述这样的控制。
接下来,描述身体感觉导入装置200的配置的示例。如图2所示,身体感觉导入装置200包括通信部201、信号处理器203、控制器205和触觉呈现部207。应当注意,触觉呈现部207对应于图1中所示的触觉呈现部207,并且因此省略对其的详细描述。身体感觉导入装置200还可以包括存储部251和检测器253中的至少一个。另外,尽管未在图2中示出,但是根据要提供的功能,身体感觉导入装置200也可以具有除上述配置以外的配置。
通信部201包括用于使身体感觉导入装置200的每个部件通过网络N1向另一装置(例如,信息处理装置100)传送各种类型的信息并且从另一装置(例如,信息处理装置100)接收各种类型的信息的部件。应当注意,通信部201基本上类似于上述通信部101,并且因此省略对其的详细描述。
存储部251临时或永久地存储用于供身体感觉导入装置200实现各种功能的程序和数据。作为具体示例,存储部251可以存储用于通过触觉呈现部207呈现触觉刺激的数据(例如,用于驱动触觉呈现部207的控制信号等)。
检测器253示意性地指示检测各种状态的部件。检测器253可以包括例如根据作为检测目标的状态的传感器(例如,加速度传感器、角速度传感器、压力传感器等)。作为具体示例,在假设其中用户在用他的手抓握身体感觉导入装置200的壳体的情形下使用身体感觉导入装置200的使用情况的情况下,检测器253可以检测抓握身体感觉导入装置200的状态(抓握力等)。在这种情况下,检测器253可以包括例如能够检测抓握状态的传感器,例如压力传感器。以这种方式检测抓握身体感觉导入装置200的状态使得可以例如根据抓握状态来控制要通过触觉呈现部207向用户呈现的触觉刺激。
信号处理器203将通过网络N1从信息处理装置100传送的与触觉刺激的呈现相关的控制信号传递至稍后描述的控制器205。此时,信号处理器203可以对从信息处理装置100传送的控制信号执行各种类型的处理(例如,信号处理等),并且将已经经过处理的控制信号传递至控制器205。例如,信号处理器203可以根据通过检测器253对各种状态(例如,抓握身体感觉导入装置200的状态)的检测的结果,对从信息处理装置100传送的控制信号执行诸如音调调整和均衡化的各种类型的信号处理。
作为具体示例,在通过振动呈现触觉刺激的情况下,抓握振动壳体的力越强,所要呈现的触觉刺激的感知强度趋向于越高。因此,例如,信号处理器203可以基于通过检测器253对抓握状态的检测的结果来抑制控制信号的强度,以随着用户抓握身体感觉导入装置200的力的增加而更多地减小通过身体感觉导入装置200呈现的触觉刺激。这样的控制使得还可以控制触觉刺激从而以期望的感知强度呈现,而不管抓握的状态如何。不必说,以上描述仅是示例,并且不限制由信号处理器203对控制信号执行的信号处理的内容。
另外,信号处理器203可以读取存储在存储部251中的与触觉刺激的呈现相关的数据,并且将与该数据相对应的控制信号传递至控制器205。作为具体示例,在网络N1中发生拥塞等而引起来自信息处理装置100的控制信号的传递延迟的情况下,信号处理器203可以将与存储在存储部251中的上述数据相对应的控制信号作为控制信号的替选传送至控制器205。应当注意,稍后还详细描述这样的控制的示例。
控制器205控制身体感觉导入装置200的各个部件的操作。例如,控制器205可以通过基于从信号处理器203输出的控制信号驱动触觉呈现部207,向保持(例如,穿戴)身体感觉导入装置200的用户呈现触觉刺激。另外,尽管未在图2中示出,但是控制器205也可以根据身体感觉导入装置200所提供的功能,控制其他部件的操作。
应当注意,上述描述仅是示例,并且信息处理系统1的配置不必然限于图2中所示的示例,只要信息处理系统1被配置成通过网络将用于驱动触觉呈现部207的控制信息(例如,上述控制信号等)从另一装置传递至身体感觉导入装置200即可。作为具体示例,信息处理装置100和身体感觉导入装置200之间的通信可以由其他装置中继。另外,信息处理装置100的一些功能可以被设置到不同于信息处理装置100的装置。作为具体示例,内容处理器105可以被设置在信息处理装置100的外部。另外,信息处理装置100的功能可以由彼此协作操作的多个装置来实现。这也适用于身体感觉导入装置200。
上面已经参照图2描述了根据本公开的实施方式的信息处理系统1的功能配置的示例,具体地,聚焦于图1所示的身体感觉导入装置200和信息处理装置100的配置。
<<2.对通过网络控制触觉刺激的呈现的研究>>
接下来,下面描述在通过经由图1所示的网络控制由用户保持的身体感觉导入装置200的操作来向用户呈现触觉刺激的情况下可以预期的技术问题的概要。
在通过网络传送信息(数据)的情况下,根据与网络相关的各种条件,可能发生信息的传递的延迟(下文也称为“传输延迟”)。作为具体示例,在采用无线通信路径作为上述网络的情况下,由于无线通信的资源的使用状况、通信路径的状态(例如,障碍物对无线电波的屏蔽或反射等)、无线信号的干扰等的影响,可能发生传输延迟。另外,通信路径的长度也可以是传输延迟的因素。作为具体示例,传输延迟可能与通信路径的增加成比例地增加,这可能使得难以忽略传输延迟的影响。根据通信路径的长度而发生的这样的延迟不仅可能发生在通过无线通信路径的通信中,而且可能发生在通过有线通信计费的通信中。
例如,在通过驱动身体感觉导入装置200的触觉呈现部207来呈现触觉刺激的情况下,由于如上所述的传输延迟的发生,可以预期触觉刺激的呈现滞后于期望时刻的情况。作为更具体的示例,在与图像或语音的输出同步地呈现触觉刺激的情况下,触觉刺激的呈现滞后于图像或语音的输出,并且因此,要提供给用户的体验的价值可能由于触觉刺激的呈现而受损。
可以想到的用以进一步减小如上所述的传输延迟的影响的方法包括压缩要传送的数据的方法。例如,在传送音频信号的情况下,可以通过沿着时间方向或频率方向按每个预定间隔减去信息,来压缩要通过网络传送的音频信号的数据量。然而,已知的是,如果通过与压缩音频信号的方法类似的方法来压缩与触觉刺激的呈现相关的控制信号,则与呈现语音的情况相比,随着这种压缩的触觉刺激的变化倾向于更容易被用户感知到。在这样的情况下,即使传输延迟的影响被减小,也可以预期将提供给用户的体验由于触觉刺激的呈现而受损的情况。
另外,在通过数据量的压缩来减小传输延迟方面存在物理限制,并且根据网络状态,也可以预期难以将传输延迟减小到呈现触觉刺激的时刻的明显延迟变得可忽略的程度的情况。
鉴于上述情况,本公开提出了一种允许根据通信状态以更合适的模式向用户呈现触觉刺激的技术。具体地,本公开提出了一种用于进一步减小与根据网络状态的信息传输的延迟相关联的对触觉刺激的呈现的影响的技术,该技术聚焦于以下两个方面。
(1)减小传输延迟
(2)在发生传输延迟的情况下控制触觉刺激的呈现
<<3.技术特征>>
在下文中,描述根据本公开的实施方式的信息处理系统的技术特征。
<3.1.与减小传输延迟相关的技术>
首先,作为用于减小传输延迟的技术的示例,描述了用于在与触觉刺激的呈现相关的控制信息(例如,用于驱动触觉呈现部207的控制信号)通过网络从信息处理装置100传送至身体感觉导入装置200的情况下、压缩控制信息的数据量的技术的示例。
(基本构思)
根据本实施方式的信息处理装置100(信号处理器103)根据信息处理装置100与身体感觉导入装置200之间的网络N1的状态,从与触觉刺激的呈现相关的控制信号(控制信息)提取至少一些频率分量(信号分量),并且将与这种提取的结果相对应的控制信号传送至身体感觉导入装置200。应当注意,作为从其提取信号分量(频率分量)的源的控制信号对应于“第一控制信息”的一个示例,并且根据这种提取的结果而传送至身体感觉导入装置200的控制信号对应于“第二控制信息”的一个示例。
例如,图3是描述了与根据本公开的实施方式的信息处理系统中的传输延迟的减小相关的技术的示例的概要的说明图。图3中所示的示例示意性地示出了与触觉刺激的呈现相关的控制信号的信号强度的分布,其中横轴指示时间t并且纵轴指示频率f。如图3所示,随着信息处理装置100与身体感觉导入装置200之间通过网络N1的通信速率变慢,信息处理装置100通过限制从要传送的控制信号中提取的频率分量,进一步限制要传送至身体感觉导入装置200的控制信号的数据量。
(控制示例1-1:与触觉呈现部的输出频率特性相对应的控制示例)
作为具体示例,信息处理装置100可以根据通过振动呈现触觉刺激的触觉呈现部207的输出频率特性,确定要从目标控制信号提取的频率分量。作为更具体的示例,信息处理装置100可以执行控制以更优先地提取更接近触觉呈现部207的共振频率(换言之,致动器的共振频率特性)的频率分量。图3的上部所示的示例示意性地指示了根据触觉呈现部207的共振频率从要传送的控制信号中提取频率分量(信号分量)的结果的示例。附图标记F101a至F101c中的每一个示意性地指示根据通信速率提取的频率分量(即,要传送至身体感觉导入装置200的信号分量)。从频率分量F101a至F101c之间的比较可以看出,通信速率越慢,则对要提取的频率分量的限制越多,这更加地限制从信息处理装置100向身体感觉导入装置200传送的控制信号的数据量。
(控制示例1-2:与信号强度相对应的控制示例)
另外,作为另一示例,信息处理装置100可以根据包括在目标控制信号中的每个频率分量的信号强度来确定要从控制信号中提取的频率分量。作为更具体的示例,信息处理装置100可以执行控制以更优先地提取具有较强信号强度的频率分量。图3的下部所示的示例示意性地示出了根据包括在目标控制信号中的每个频率分量的信号强度从控制信号中提取频率分量(信号分量)的结果的示例。附图标记F103a至F103c中的每一个示意性地指示根据通信速率提取的频率分量(即,要传送至身体感觉导入装置200的信号分量)。从频率分量F103a至F103c之间的比较可以看出,通信速率越慢,则对要提取的频率分量的限制越多,这更加地限制从信息处理装置100向身体感觉导入装置200传送的控制信号的数据量。
(控制示例1-3:在存在多个候选的情况下的控制示例)
可以假设目标控制信号中存在具有特征信号强度的频率分量的多个候选的情况。图4是描述与根据本公开的实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。在图4所示的示例中,可以看出,存在具有较强信号强度的多个频率分量。在这样的情况下,如图4所示的示例,信息处理装置100可以提取多个候选中的每一个作为传输目标。另外,作为另一示例,信息处理装置100可以提取多个候选中的一些候选作为传输目标。作为具体示例,信息处理装置100可以优先提取更接近触觉呈现部207的共振频率的候选。另外,作为另一示例,信息处理装置100可以优先从多个候选中提取具有较强信号强度的候选。
(控制示例1-4:与要向其呈现触觉刺激的部位相对应的控制示例)
另外,在已知要由触觉呈现部207向其呈现触觉刺激的部位的情况下,信息处理装置100可以根据该部位的感知特性来控制要从目标控制信号中提取的频率分量。
例如,图5是描述与根据本公开的实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。具体地,图5中所示的示例指示根据手的感知频率特性来控制要从目标控制信号中提取的频率分量的情况下的示例。在这种情况下,例如,可以通过基于指示手的感知频率特性的数据对与触觉刺激的呈现相关的数据(换言之,目标控制信号)执行信号处理,来提取要传送至身体感觉导入装置200的频率分量(信号分量)。
作为具体示例,附图标记D111指示在更优先地提取使手更容易感知触觉刺激的频率(感知的峰值频率)的分量的情况下从目标控制信号中提取与通信速率相对应的频率分量的结果的示例。也就是说,在具有附图标记D111的示例中,随着通信速率变慢,要从其提取频率分量的频带的宽度被限制为相对于感知的峰值频率变窄,从而限制要被传送至身体感觉导入装置200的控制信号的数据量。
另外,作为另一示例,附图标记S113指示根据手的感知频率特性和数据中的信号强度的分布(具体地,频率方向上的分布)之间的关系从与触觉刺激的呈现相关的数据(即,目标控制信号)中提取与通信速率相对应的频率分量的结果的示例。在具有附图标记D113的示例中,例如,基于手的感知频率特性,在频率方向上对包括在与触觉刺激的呈现相关的数据中的每个频率分量进行加权,并且然后更优先地提取具有较高信号强度的频率分量(即,具有由手感知的触觉刺激的较高强度的频率分量)。另外,在具有附图标记D113的示例中,例如,随着通信速率变慢,与要提取的频率分量的确定相关的信号强度(由手感知的触觉刺激的强度)的阈值被控制成变高,从而限制要被传送至身体感觉导入装置200的控制信号的数据量。
(控制示例1-5:由多个条件的组合进行的控制示例)
另外,信息处理装置100可以通过组合上述各种条件中的两个或更多个,控制要从与触觉刺激的呈现相关的数据(换言之,目标控制信号)中提取作为要传送至身体感觉导入装置200的目标的信号分量(频率分量)。
例如,图6是描述与根据本公开的实施方式的信息处理系统中的传输延迟的减小相关的技术的另一示例的概要的说明图。具体地,图6所示的示例指示了在根据触觉呈现部207(例如,致动器)的输出频率特性和要向其呈现触觉刺激的手的感知频率特性来控制要从目标控制信号中提取的频率分量的情况下的示例。具体地,在图6所示的示例中,信息处理装置100基于触觉呈现部207的输出频率特性来对感知频率特性进行加权,从而计算考虑了触觉呈现部207的输出频率特性的手的感知频率特性(换言之,组合频率特性)。然后,信息处理装置100根据手的感知频率特性与触觉呈现部207的输出频率特性之间的关系以及数据中的信号强度分布,控制要从与触觉刺激的呈现相关的数据中提取作为要被传送至身体感觉导入装置200的目标的信号分量(频率分量)。
作为具体示例,附图标记D121指示通过与图5中的具有附图标记D111的示例中的技术类似的技术从目标控制信号中提取信号分量(频率分量)的结果的示例。也就是说,具有附图标记D121的示例指示在更优先地提取允许手更容易感知触觉刺激的频率(感知的峰值频率)的分量的情况下从目标控制信号中提取与通信速率相对应的频率分量的结果的示例。
另外,作为另一示例,附图标记D123指示通过与图5中的具有附图标记D113的示例中的技术类似的技术从目标控制信号中提取信号分量(频率分量)的结果的示例。也就是说,具有附图标记D123的示例指示根据手的感知频率特性与触觉呈现部207的输出频率特性之间的关系和数据中的信号强度分布(具体地,频率方向上的分布)从与触觉刺激的呈现相关的数据(即,目标控制信号)中提取与通信速率相对应的频率分量的结果的示例。
(处理)
此处,参照图7描述根据本公开的实施方式的信息处理系统1的处理流程的示例,具体地,聚焦于与传输延迟的减小相关的控制。图7是示出根据本实施方式的信息处理系统的处理流程的示例的流程图。
如图7所示,信息处理装置100(内容处理器105)从要经受处理的内容的数据中提取与触觉刺激的呈现相关的控制信号(控制信息)(S101)。另外,信息处理装置100(信号处理器103)可以根据信息处理装置100与身体感觉导入装置200之间通过网络N1的通信状态对上述控制信号执行信号处理。例如,在难以确保控制信号的传输所需的通信速率的情况下(S103,否),信息处理装置100可以从控制信号中提取一些频率分量,以限制要传送至身体感觉导入装置200的频率分量(S105)。不必说,在可以确保控制信号的传输所需的通信速率的情况下(S103,是),信息处理装置100可以不执行与要传送的频率分量的限制相关的上述处理(S105)。然后,信息处理装置100通过网络N1将目标控制信号传送至身体感觉导入装置200。
当通过网络N1从信息处理装置100接收到控制信号时,身体感觉导入装置200基于该控制信号驱动触觉呈现部207,以向用户的预定部位呈现触觉刺激。此时,身体感觉导入装置200(信号处理器203)可以基于预定条件对从信息处理装置100接收到的控制信号执行各种类型的信号处理(S109)。作为更具体的示例,身体感觉导入装置200可以根据检测用户抓握身体感觉导入装置200的状态的结果,对上述控制信号执行信号处理。在这种情况下,身体感觉导入装置200(控制器205)可以基于已经经过信号处理的上述控制信号来驱动触觉呈现部207,以向用户的预定部位呈现触觉刺激(S111)。不必说,身体感觉导入装置200可以基于从信息处理装置100接收到的控制信号驱动触觉呈现部207,而不对控制信号执行信号处理,以向用户的预定部位呈现触觉刺激。
上面已经参照图7描述了根据本公开的实施方式的信息处理系统1的处理流程的示例,具体地,聚焦于与传输延迟的减小相关的控制。
(评价)
如上所述,信息处理装置100根据网络N1的状态从目标控制信号(即,与触觉刺激的呈现相关的数据)中提取要传送至身体感觉导入装置200的信号分量(频率分量)。例如,即使在信息处理装置100与身体感觉导入装置200之间的通信速率降低的情况下,这样的控制也使得可以通过限制要通过通信传递的控制信号的数据量来进一步限制传递延迟。另外,如上所述的那样从目标控制信号中提取一些信号分量(频率分量),从而提取允许用户更容易感知触觉刺激的信号分量(频率分量);因此,即使数据量受限,也可以进一步抑制对要提供给用户的体验的影响。
<3.2.与在发生延迟的情况下对触觉刺激的呈现的控制相关的技术>
接下来,作为与在发生延迟的情况下对触觉刺激的呈现的控制相关的技术的示例,描述使得即使在由于传输延迟等而引起呈现触觉刺激的时刻发生延迟的情况下也可以进一步抑制要提供给用户的体验价值的降低的技术的示例。
(基本构思)
首先,描述与在根据本公开的实施方式的信息处理系统中发生传输延迟的情况下的触觉刺激的呈现相关的技术的基本构思。
在信息处理装置100与身体感觉导入装置200之间传递与触觉刺激的呈现相关的数据(例如,与触觉呈现部207的驱动相关的控制信号)时发生传输延迟的情况下,在呈现触觉刺激的时刻之前,数据可能不被传递至身体感觉导入装置200。在这样的情况下,例如,身体感觉导入装置200难以驱动触觉呈现部207直到数据的传递,并且因此,通过触觉呈现部207呈现触觉刺激的时刻被延迟。另外,在传递压缩数据的情况下,需要时间来对数据解压,并且因此,不仅可以预期传输延迟,而且可以预期呈现触觉刺激的时刻被延迟的情况。
因此,在难以在呈现触觉刺激的时刻使用从信息处理装置100传送的与触觉刺激的呈现相关的数据的情况下,根据本实施方式的身体感觉导入装置200基于预先保持的替选数据(即,替选控制信号)来驱动触觉呈现部207以呈现触觉刺激。
例如,图8是描述与在根据本实施方式的信息处理系统中发生传输延迟的情况下的触觉刺激的呈现相关的技术的示例的概要的说明图。在图8中,横轴指示时间。另外,附图标记F13示意性地指示要从信息处理装置100传送至身体感觉导入装置200的控制信号(即,与触觉刺激的呈现相关的数据)的信号波形。另外,附图标记F15示意性地指示要用作控制信号F13的替选以驱动触觉呈现部207的控制信号的信号波形。应当注意,在下面的描述中,为了清楚地在上述各个控制信号(例如,控制信号F13和控制信号F15)之间进行区分,要从信息处理装置100传送至身体感觉导入装置200的控制信号(控制信号F13)也被称为“原始信号”,并且要用作原始信号的替选以驱动触觉呈现部207的控制信号(控制信号F15)也被称为“替选信号”。另外,附图标记t17指示开始呈现触觉刺激的时刻。另外,附图标记t19指示从信息处理装置100传送的原始信号F13在身体感觉导入装置200中可用的时刻(即,原始信号F13的信号波形可以进行再现的时刻)。
在图8所示的示例中,在从时刻t17到时刻t19的时段T11中,传输延迟等使得身体感觉导入装置200难以使用从信息处理装置100传送的原始信号F13。因此,身体感觉导入装置200(信号处理器203)基于代替原始信号F13的替选信号F15驱动触觉呈现部207,以向用户呈现触觉刺激。然后,在原始信号F13在时刻t19处变为可用的情况下,身体感觉导入装置200将用于驱动触觉呈现部207的控制信号从替选信号F15改变为原始信号F13。此时,身体感觉导入装置200(信号处理器203)删除可用原始信号F13的信号波形中的与已经过去的时段T11相对应的部分,并且使用时刻t19处或之后的信号波形来驱动触觉呈现部207。也就是说,在图8所示的示例中,身体感觉导入装置200在难以使用原始信号F13的时段T11中,将要用于驱动触觉呈现部207的控制信号从原始信号F13改变为替选信号F15。在图8中,上侧示出的信号波形示意性地指示在改变控制信号之前的信号波形。另外,在下侧示出的信号波形示意性地指示在时段T11中改变控制信号之后的信号波形。也就是说,在图8中所示的示例中,时刻t17对应于“第一时刻”的一个示例,并且时刻t19对应于“第二时刻”的一个示例。另外,替选信号F15对应于“第三控制信息”的一个示例。另外,在下面的描述中,诸如图8中所示的时段T11的、其中代替原始信号使用替选信号作为驱动触觉呈现部207的控制信号的时段(换言之,其中用替选信号进行替换的时段)也被称为“替换区域”。
通过如上所述的控制来呈现触觉刺激而不会感到延迟。应当注意,如从图8中上侧的信号波形与下侧的信号波形之间的比较可以看出,信号波形在时段T11(替换区域)中是不同的;因此,在时段T11中呈现的触觉刺激并不总是与最初假设输出的触觉刺激一致。然而,向其呈现触觉刺激的用户不必然清楚地逐个单独地认识到所有触觉刺激的感知。例如,在连续呈现触觉刺激的情况下,用户很少仅知道与触觉刺激的呈现相关的初始振动本来应当是什么。在由于传输延迟等而难以使用目标控制信号的情况下,如上面参照图8所描述的,通过替选信号使用与触觉刺激的这种感知相关的特性来呈现触觉刺激,直到控制信号变得可用,这使得可以抑制要提供给用户的体验价值的降低。
应当注意,在实现上述控制的情况下,例如,优选地,信息处理装置100将与开始呈现触觉刺激的时刻(即,时刻t17)相关的信息通知给身体感觉导入装置200。这使得身体感觉导入装置200能够识别开始呈现触觉刺激的时刻。应当注意,提供与上述时刻相关的信息的通知的方法没有特别限制,只要身体感觉导入装置200能够在实际开始呈现触觉刺激的时刻之前识别与上述时刻相关的信息即可。作为具体示例,与上述时刻相关的信息可以与关于触觉刺激的呈现的数据(例如,原始信号F13)的头部相关联。另外,作为另一示例,在传输与触觉刺激的呈现相关的数据之前,可以与数据分开地提供与上述时刻相关的信息的通知。应当注意,与关于触觉刺激的呈现的数据相比,可以将与上述时刻相关的信息的数据量减小到极小量,并且与该数据相比,由于传输延迟而施加的影响趋向于进一步减小(例如,延迟时间的增加趋向于更小)。
上面已经参照图8描述了与在根据本公开的实施方式的信息处理系统中发生传输延迟的情况下的触觉刺激的呈现相关的技术的基本构思。
(信号处理器的配置示例)
接下来,参照图8,描述身体感觉导入装置200的信号处理器203的功能配置的示例作为用于实现上述控制的配置示例。例如,图9是示出根据本实施方式的身体感觉导入装置200的信号处理器203的功能配置的示例的框图。应当注意,图9中所示的控制器205和触觉呈现部207对应于图2中所示的控制器205和触觉呈现部207,并且因此省略对其的详细描述。
如图9所示,信号处理器203包括信号读取部211、替选信号输出部213、信号保持部215、输出信号调节器217和信号选择器219。
信号读取部211顺序地读取要通过网络N1从信息处理装置100传送的各种类型的信息。
具体地,信号读取部211从信息处理装置100获取与开始呈现触觉刺激的时刻(例如,图8中所示的时刻t17)相关的设置信息,并且将该设置信息输出至替选信号输出部213和输出信号调节器217。这使得替选信号输出部213和输出信号调节器217中的每一个可以识别开始呈现触觉刺激的时刻。
另外,信号读取部211顺序地读取已经通过网络N1从信息处理装置100传送的用于驱动触觉呈现部207的控制信号(与触觉刺激的呈现相关的数据),并且使得信号保持部215保持该控制信号。另外,在以压缩状态传送上述控制信号的情况下,信号读取部211可以对控制信号进行解压缩,并且然后使信号保持部215保持解压缩的控制信号。信号保持部215是被配置成能够临时或永久地存储各种类型的数据(例如,上述控制信号)的存储区域。
替选信号输出部213基于从信号读取部211输出的设置信息来识别开始呈现触觉刺激的时刻,并且在该时刻处将可用于驱动触觉呈现部207的替选信号(例如,图8所示的替选信号F15)输出至信号选择器219。应当注意,优选的是,替选信号预先存储在替选信号输出部213能够参考的存储区域中,例如存储部251。
输出信号调节器217基于从信号读取部211输出的设置信息来识别开始呈现触觉刺激的时刻,并且开始测量从该时刻起的累积时间。另外,输出信号调节器217开始监视信号保持部215,并且信号读取部211顺序地读取由信号保持部215保持的控制信号(即,原始信号)。输出信号调节器217将测量累积时间的结果与基于已经从信号保持部215读取的控制信号呈现触觉刺激的预定时刻进行比较,以确定是否完成了对与在经过累积时间之后要呈现的触觉刺激相对应的控制信号的读取。然后,在输出信号调节器217确定完成了对与在经过累积时间之后要呈现的触觉刺激相对应的控制信号的读取的情况下,输出信号调节器271删除所读取的控制信号中的与累积时间相对应的部分(即,根据初始时间表已经用于呈现触觉刺激的部分),并且然后将该控制信号输出至信号选择器219。
应当注意,在开始呈现触觉刺激的时刻之前完成了从信号保持部215读取控制信号的情况下,输出信号调节器217可以在该时刻处将控制信号输出至信号选择器219。
另外,输出信号调节器217可以对从信号保持部215读取的控制信号执行各种类型的信号处理。在这种情况下,输出信号调节器217可以在完成信号处理时确定控制信号变得可用。
信号选择器219将从替选信号输出部213输出的控制信号(即,替选信号)和从输出信号调节器217输出的控制信号(即,原始信号)中的一个输出至控制器205。具体地,信号选择器219在仅从替选信号输出部213输出替选信号的情况下,将替选信号输出至控制器205。此后,在开始从输出信号调节器217输出原始信号时,信号选择部219将要输出至控制器205的控制信号从自替选信号输出部213输出的替选信号改变为从输出信号调节器217输出的原始信号。这使得可以实现如图8所示的控制。
应当注意,在开始从替选信号输出部213输出替选信号之前开始从输出信号调节器217输出原始信号的情况下,如果信号选择器219将从输出信号调节器217输出的原始信号传递至控制器205就足够了。
以上,作为用于实现上面参照图8所描述的控制的配置示例,已经参照图9描述了身体感觉导入装置200的信号处理器203的功能配置的示例。
(处理)
接下来,参照图10描述根据本公开的实施方式的信息处理系统1的处理流程的示例,具体地,聚焦于与在发生传输延迟的情况下的触觉刺激的呈现相关的控制。图10是示出根据本实施方式的信息处理系统的处理流程的另一示例的流程图,并且示出了身体感觉导入装置200基于通过网络从信息处理装置100传送的控制信号呈现触觉刺激的操作。
如图10所示,身体感觉导入装置200(信号读取部211)从信息处理装置100获取与开始呈现触觉刺激的时刻相关的设置信息,从而识别该时刻(S201)。接下来,身体感觉导入装置200(信号读取部211)开始获取通过网络N1从信息处理装置100传送的用于驱动触觉呈现部207的控制信号(即,与触觉刺激的呈现相关的数据)。另外,身体感觉导入装置200(输出信号调节器217)开始测量从基于所获取的上述设置信息的开始呈现触觉刺激的时刻起的累积时间(S203)。
此后,在从信息处理装置100传送的控制信息变得可用之前的时段中(S205,否),身体感觉导入装置200(控制器205)通过基于替选信号驱动触觉呈现部207来向用户呈现触觉刺激。
另外,在从信息处理装置100传送的控制信号(即,原始信号)变得可用的情况下(S205,是),身体感觉导入装置200(输出信号调节器217)从原始信号中删除针对累积时间的信号。因此,从原始信号中删除与其中触觉刺激已经通过替选信号被呈现的时段相对应的部分的信号(S209)。然后,身体感觉导入装置200(控制器205)将用于驱动触觉呈现部207的控制信号从替选信号改变为从其删除了针对累积时间的信号的上述原始信号(即,从信息处理装置100传送的控制信号)。
即使由于传输延迟等而使得从信息处理装置100传送的控制信号变得可用的时刻滞后于开始呈现触觉刺激的时刻,如上所述的控制也使得可以抑制要通过呈现触觉刺激而提供给用户的体验价值的降低。
上面已经参照图10描述了根据本公开的实施方式的信息处理系统的处理流程的示例,具体地,聚焦于与在发生传输延迟的情况下的触觉刺激的呈现相关的控制。
(修改示例)
接下来,描述与在根据本公开的实施方式的信息处理系统1中发生传输延迟的情况下的触觉刺激的呈现相关的技术的修改示例。
.可用作替选信号的信号的示例
首先,描述可用作替选信号的信号的示例。
作为具体示例,所谓的正弦波可以用作替选信号。在这种情况下,作为正弦波,例如,可以使用与触觉呈现部207的共振频率相对应的正弦波。另外,作为另一示例,正弦波的频率可以由信息处理装置100指定。在这种情况下,如果信息处理装置100将与频率相关的信息通知给身体感觉导入装置200就足够了。应当注意,可以将与关于开始呈现触觉刺激的时刻的信息的通知方法类似的通知方法应用于该信息的通知。另外,作为另一示例,可以使用施加DC电平的波形作为替选信号。
另外,身体感觉导入装置200可以保持针对替选信号的具有彼此不同的信号模式的多种候选,并且基于预定条件来选择性地改变要使用的替选信号。作为具体示例,身体感觉导入装置200可以通过从信息处理装置100接收替选信号的指定(例如,识别信息等的指定),来确定要使用的替选信号。在这种情况下,优选的是,与由身体感觉导入装置200保持的替选信号相关的信息预先在身体感觉导入装置200与信息处理装置100之间共享。不必说,以上描述仅是示例,并且不限制确定由身体感觉导入装置200使用的替选信号的方法。另外,即使在由信息处理装置100指定替选信号的情况下,由身体感觉导入装置200本身保持的替选信号的候选的数目也可以是一个。也就是说,身体感觉导入装置200可以保持替选信号的一个或更多个候选,并且根据来自信息处理装置100的指令从一个或更多个候选中确定要使用的替选信号。
上面已经描述了可用作替选信号的信号的示例。应当注意,以上描述仅是示例,并且替选信号的类型没有特别限制,只要可以通过驱动触觉呈现部207来呈现触觉刺激即可。作为具体示例,可以根据用于由触觉呈现部207向用户呈现触觉刺激的配置和方法来适当地改变要用作替选信号的信号。
.与信号的改变相关的控制的示例
接下来,以下描述用于将用于驱动触觉呈现部207的控制信号从替选信号改变为原始信号的控制的示例。
例如,身体感觉导入装置200可以采用各种类型的控制,以在从替选信号改变为原始信号时尽可能地抑制信号波形不连续的部分的生成。作为具体示例,身体感觉导入装置200可以通过以从替选信号改变为原始信号的时刻作为基点,使替选信号淡出并且使原始信号淡入,来从替选信号改变为原始信号。
另外,在原始信号变得可用的时刻或之后,可以控制从替选信号改变为原始信号的时刻。例如,图11是描述根据本公开的实施方式的信息处理系统的修改示例并且示出对从替选信号到原始信号的改变的控制的示例的说明图。在图11中,横轴指示时间。另外,附图标记F23指示原始信号的信号波形,并且附图标记F25指示替选信号的信号波形。另外,附图标记T21指示替换区域。
在图11所示的示例中,在与替换区域T21的末端相对应的时刻处,原始信号F23和替选信号F25在信号强度(幅度)和相位方面彼此不一致。因此,在该时刻处执行从替选信号F25到原始信号F23的改变的情况下,在执行改变的时刻处信号波形可能变得不连续。因此,在图11所示的示例中,在经过替换区域T21之后,在原始信号F23和替选信号F25的信号强度和相位基本上彼此一致的时刻t27处,执行从替选信号F25到原始信号F23的改变。这使得可以执行控制以防止在从替选信号F25改变为原始信号F23时信号波形变得不连续的部分的生成。
上面已经描述了用于将用于驱动触觉呈现部207的控制信号从替选信号改变为原始信号的控制示例。应当注意,以上描述仅是示例,并且与从替选信号到原始信号的改变相关的控制方法不受特别限制,只要可以执行控制以在从替选信号改变为原始信号时尽可能抑制其中信号波形不连续的部分的生成即可。另外,作为用于从替选信号至原始信号的改变的控制,可以采用各种类型的控制的组合。
(评价)
如上所述,在难以使用从信息处理装置100传送的控制信号(即,原始信号)的情况下,身体感觉导入装置200使用替选信号来驱动触觉呈现部207。然后,在原始信号变得可用的情况下,身体感觉导入装置200将用于驱动触觉呈现部207的控制信号从替选信号改变为原始信号。即使由于传输延迟等而使得原始信号变得可用的时刻滞后于开始呈现触觉刺激的时刻,这样的控制也可以抑制要通过呈现触觉刺激向用户提供的体验价值的降低。
<<4.硬件配置>>
接下来,描述包括在根据本实施方式的信息处理系统1中的信息处理装置900(例如,信息处理装置100和身体感觉导入装置200)的硬件配置的示例。图12是示出根据本公开的实施方式的信息处理装置的硬件配置的配置示例的框图。
根据本实施方式的信息处理装置900主要包括CPU 901、ROM 902和RAM 903。信息处理装置900还包括主机总线907、桥接器909、外部总线911、接口913、存储装置919、驱动器921、耦接端口923以及通信装置925。信息处理装置900还可以包括输入装置915和输出装置917中的至少一个。
CPU 901用作例如算术处理装置和控制装置,并且根据记录在ROM 902、RAM 903、存储装置919或可移除记录介质927中的各种类型的程序来控制信息处理装置900中的整体操作或操作的一部分。ROM 902存储要由CPU 901使用的程序、操作参数等。RAM 903临时存储要由CPU 901使用的程序、在执行程序时适当改变的参数等。CPU 901、ROM 902和RAM 903通过包括诸如CPU总线的内部总线的主机总线907彼此耦接。应当注意,在图2所示的示例中,信息处理装置100中的信号处理器103和内容处理器105以及身体感觉导入装置200中的信号处理器203和控制器205可以由CPU 901实现。
主机总线907通过桥接器909耦接至诸如PCI(外围部件互连/接口)总线的外部总线911。另外,外部总线911通过接口913耦接至输入装置915、输出装置917、存储装置919、驱动器921、耦接端口923和通信装置925。
输入装置915是由用户操作的操作装置,例如鼠标、键盘、触摸面板、按钮、开关、操纵杆和踏板。另外,输入装置915可以是例如使用红外线或其他无线电波的远程控制装置(所谓的远程控制器),或者可以是与信息处理装置900的操作兼容的外部耦接装置929,例如移动电话和PDA。此外,输入装置915包括例如基于由用户使用上述操作装置输入的信息来生成输入信号并且将输入信号输出至CPU 901的输入控制电路等。通过操作该输入装置915,信息处理装置900的用户能够向信息处理装置900输入各种类型的数据或给出处理操作的指令。
输出装置917包括能够以视觉方式或听觉方式向用户通知所获取的信息的装置。这样的装置包括诸如CRT显示装置、液晶显示装置、等离子显示装置、EL显示装置和灯的显示装置、诸如扬声器和头戴式耳机的音频输出装置、打印装置等。输出装置917例如输出通过由信息处理装置900执行的各种类型的处理所获得的结果。具体地,显示装置将通过由信息处理装置900执行的各种类型的处理的所获得的结果显示为文本或图像形式。相比之下,音频输出装置将包括再现的语音数据、声音数据等的音频信号转换成模拟信号,并且输出模拟信号。
存储装置919是被配置为信息处理装置900的存储部的示例的、用于存储数据的装置。存储装置919包括例如诸如HDD(硬盘驱动器)的磁存储设备、半导体存储设备、光学存储设备、磁光存储设备等。该存储装置919存储要由CPU 901执行的程序、各种类型的数据等。应当注意,在图2所示的示例中,存储部151和存储部251可以例如由ROM 902、RAM 903和存储装置919中的至少一个或者它们中的两个或更多个的组合来实现。
驱动器921是用于存储介质的读取器/写入器,并且被内置在信息处理装置900中或者从外部附接至信息处理装置900。驱动器921读取在所附接的可移除存储介质927、例如磁盘、光盘、磁光盘或半导体存储器中记录的信息,并且将读取的信息输出至RAM 903。另外,驱动器921还可以将记录写入所附接的可移除存储介质927,例如,磁盘、光盘、磁光盘或半导体存储器。可移除记录介质927的示例包括DVD介质、HD-DVD介质、蓝光(注册商标)介质等。另外,可移除记录介质927可以是压缩闪存(注册商标)(CF)、闪速存储器、SD存储卡(安全数字存储卡)等。另外,可移除记录介质927可以是例如设置有非接触型IC芯片的IC卡(集成电路卡)、电子设备等。
耦接端口923是用于直接耦接至信息处理装置900的端口。耦接端口923的示例包括USB(通用串行总线)端口、IEEE1394端口、SCSI(小型计算机系统接口)端口等。耦接端口923的其他示例包括RS-232C端口、光学音频端子、HDMI(注册商标)(高清晰度多媒体接口)端口等。将外部耦接设备929耦接至耦接端口923允许信息处理装置900直接从外部耦接设备929获取各种类型的数据,并且将各种类型的数据提供给外部耦接设备929。
通信装置925是例如通信接口,该通信接口包括用于耦接至通信网络(网络)931的通信设备等。通信装置925例如是用于有线或无线LAN(局域网)、蓝牙(注册商标)或WUSB(无线USB)的通信卡等。另外,通信装置925可以是用于光通信的路由器、用于ADSL(非对称数字用户线)的路由器、用于各种类型的通信的调制解调器等。例如,通信装置925能够根据例如TCP/IP的预定协议,向因特网或任何其他通信装置传送信号等以及从因特网或任何其他通信装置接收信号等。另外,耦接至通信装置925的通信网络931包括通过线或无线地耦接的网络,并且可以是例如因特网、家用LAN、红外通信、无线电波通信、卫星通信等。应当注意,在图2所示的示例中,信息处理装置100中的通信部101和身体感觉导入装置200中的通信部201可以由通信装置925实现。
上面已经描述了使得可以实现根据本公开的实施方式的信息处理装置900的功能的硬件配置的示例。以上描述的部件中的每一个可以使用通用构件来实现,或者可以通过专用于各个部件的功能的硬件来实现。因此,可以根据在实现本实施方式时的技术水平来适当地改变要利用的硬件配置。另外,尽管图12中未示出,但信息处理装置900可以根据可以实现的功能包括用于实现功能的各种类型的部件。
应当注意,可以创建用于实现如上所述的根据本实施方式的信息处理装置900的每个功能的计算机程序,并且可以将该计算机程序安装在个人计算机等上。另外,还可以提供其中存储有这样的计算机程序的计算机可读记录介质。记录介质例如是磁盘、光盘、磁光盘、闪存等。另外,例如,以上描述的计算机程序可以在不使用记录介质的情况下通过网络来分发。另外,执行计算机程序的计算机的数目不受特别限制。例如,计算机程序可以由彼此协作的多个计算机(例如,多个服务器等)执行。
<<5.应用示例>>
接下来,作为根据本公开的实施方式的技术的应用示例,具体描述可应用为图1所示的示例中的身体感觉导入装置200的装置的示例。
<5.1.应用示例1:夹克式可穿戴设备>
首先,作为应用示例1,参照图13和图14描述在根据本实施方式的身体感觉导入装置200被配置为夹克式可穿戴设备的情况下的示例。图13和图14是描述根据本实施方式的身体感觉导入装置200的应用示例1的说明图。
例如,图13示出了夹克510的外观。如图13所示,夹克510包括夹克510内部的多个触觉呈现部511(即,触觉呈现部511a至511f)和两个声音输出部513(即,声音输出部513a至511f)。例如,可以在夹克510内部,在用户的正面和背面中的每一面上设置预定数目(例如,六个)的触觉呈现部511。作为示例,以其中设置在正面的各个触觉呈现部511与设置在背面的各个触觉呈现部511相对的位置关系来设置各个触觉呈现部511。应当注意,图13示出了其中夹克510是无袖的示例,但是夹克510不限于该示例,并且可以具有袖。在这种情况下,除了用户的胸部和腹部之外,还可以在与用户的双臂相对应的位置处设置一个或更多个触觉呈现部511。
触觉呈现部511各自对应于包括在图1所示的示例中的身体感觉导入装置200中的触觉呈现部207。作为具体示例,触觉呈现部511各自基于输入的控制信号进行振动以呈现触觉刺激。不必说,用于通过触觉呈现部511呈现触觉刺激的配置和方法没有特别限制。另外,上述根据本公开的技术可以应用于触觉呈现部511的控制。
另外,在夹克510中所包括的多个触觉呈现部511彼此独立地生成振动的情况下,所生成的振动中的每一个仅可以在触觉呈现部511中的对应一个的外围上被感知到。也就是说,在单独设置各个触觉呈现部511的情况下,由各个触觉呈现部511单独生成的振动可以被用户的身体离散地感知到。
同时,医学上已经阐明了被称为幻觉的错觉现象。幻觉是如下错觉现象,其中在同时向皮肤上的不同位置呈现刺激的情况下,人仅感知到在呈现刺激的位置之间的一个刺激。例如,已知在用户的身体上设置的两个触觉呈现部511同时输出刺激的情况下,用户感知到的触觉刺激的位置(在下文中,称为“感知位置”)通常是两个触觉呈现部511之间的位置。
声音输出部513各自基于输入的控制信号,输出诸如语音、音乐和电子声音的声音。如图13所示,在夹克510的左侧和右侧可以各自设置有一个声音输出部513。例如,声音输出部513可以被设置成在用户穿着夹克510的情况下位于用户的肩部上或附近。不必说,以上描述仅是示例,并且可以在夹克510中仅设置一个声音输出部513,或者可以在夹克510中设置三个或更多个声音输出部513。另外,作为另一示例,声音输出部513可以作为独立的装置设置在预定空间中,而不是包括在夹克510中。另外,作为另一示例,声音输出部513可以包括在与夹克510不同的可穿戴装置(例如,头戴式耳机、耳机等)或便携式装置(例如,便携式音乐播放器、智能电话、手持式游戏机等)中。
另外,图14示出控制与触觉刺激的呈现相关的夹克510的方法的示例。在图14中,附图标记515a、515b、515c和515f分别示意性地指示触觉呈现部511a、511b、511c和511f的外围。也就是说,触觉呈现部511a、511b、511c和511f分别振动以向外围515a、515b、515c和515f呈现触觉刺激。利用这样的配置,在图14所示的示例中,目标(例如,要伴随内容再现而呈现的对象等)相对于用户身体的移动路径517被设置成将与触觉呈现部511a、511b、511c和511f接触的各个位置按该顺序连接。利用这样的配置,沿着移动路径517顺序地驱动各个触觉呈现部511a、511b、511c和511f使得可以呈现触觉刺激,该触觉刺激被感知到,就好像感知到触觉刺激的位置沿着移动路径517连续地移动一样。另外,作为另一示例,使正面的触觉呈现部511和背面的触觉呈现部511顺序地振动使得可以呈现触觉刺激,该触觉刺激被感知到,就好像触觉刺激穿透用户的身体一样。
作为应用示例1,上面已经参照图13和图14描述了根据本实施方式的身体感觉导入装置200被配置为夹克式可穿戴设备的情况下的示例。
<5.2.应用示例2:带式可穿戴设备>
接下来,作为应用示例2,参照图15和图16描述根据本实施方式的身体感觉导入装置200被配置为带式可穿戴设备的情况下的示例。图15和图16是描述根据本实施方式的身体感觉导入装置200的应用示例2的说明图。
例如,图15是示出带530的外观的图。如图15所示,多个触觉呈现部531(即,触觉呈现部531a至531f)沿着围绕用户的身体(例如,腰部)穿戴的部分延伸的长度方向设置在带530中。利用这样的配置,在穿戴带530的情况下,多个触觉呈现部531被支承以相对于用户的身体位于彼此不同的方向上。应当注意,每个触觉呈现部531的配置基本上类似于图1中所示的触觉呈现部207和图13中所示的触觉呈现部511的配置,并且因此省略对其的详细描述。另外,上述根据本公开的技术可以应用于触觉呈现部531的控制。
另外,图16示出控制与触觉刺激的呈现相关的带530的方法的示例。图16示意性地示出在带530围绕用户的身体周围被穿戴的情况下多个触觉呈现部531(即,触觉呈现部531a至531f)的相对位置关系。也就是说,带550围绕用户的身体被穿戴,这使得多个触觉呈现部531中的每一个沿着围绕作为中心的身体的基本呈圆形的路径被设置。例如,附图标记P533示意性地指示通过设置有多个触觉呈现部531中的每一个的路径形成的圆周的中心。也就是说,穿戴带530的用户的身体位于中心P533处。
利用这样的配置,控制多个触觉呈现部531中要振动的触觉呈现部531和这种振动的强度,这使得可以控制要通过带530向其呈现触觉刺激的位置。例如,图16中所示的示例指示在要向与对象M537相对于中心P533而定位的方向相对应的触觉呈现位置P535呈现触觉刺激的情况下的示例。
具体地,触觉呈现位置P535位于设置有触觉呈现部531a至531f的基本呈圆形的路径上的、设置触觉呈现部531d的位置与设置触觉呈现部531e的位置之间。附图标记L1指示触觉呈现位置P535与触觉呈现部531d之间沿着路径的距离。另外,附图标记L2指示触觉呈现位置P535与触觉呈现部531e之间沿着路径的距离。在这种情况下,例如,基于以下公式来控制使得触觉呈现部531d振动的振动强度Ad和使得触觉呈现部531e振动的振动强度Ae,这使得可以执行控制以在触觉呈现位置P535处感知到触觉刺激。应当注意,常数C指示根据要呈现的触觉刺激的强度确定的常数。
[数学式1]
应当注意,以上已经描述了带式可穿戴设备的示例;然而,不仅可以通过带状可穿戴设备而且可以通过经由围绕用户的身体的一部分缠绕而被穿戴的任何设备来实现参照图16描述的控制。
作为应用示例3,上面已经参照图15和图16描述了根据本实施方式的身体感觉导入装置200被配置为带式可穿戴设备的情况下的示例。
<5.3.应用示例3:沙发式设备>
接下来,作为应用示例3,参照图17描述根据本实施方式的身体感觉导入装置200被配置为在与用户的身体的一部分接触的状态下使用的诸如沙发的物品(例如家具)的情况下的示例。图17是描述根据本实施方式的身体感觉导入装置200的应用示例3的说明图。
具体地,图17示出在根据本实施方式的身体感觉导入装置200被配置为沙发550的情况下的沙发550的示意性配置的示例。如图17所示,触觉呈现部551(例如,触觉呈现部551a至551d)设置在沙发550中且在与坐在沙发550上的用户的身体的一部分接触的位置处。利用这样的配置,驱动触觉呈现部551使得可以向坐在沙发550上的用户呈现触觉刺激。应当注意,上述根据本公开的技术可以应用于触觉呈现部551的控制。
另外,沙发550可以设置有致动器553(例如,致动器553a和致动器553b),以用于使沙发550本身移动(例如,使整个沙发550振动)。利用这样的配置,驱动致动器553以使整个沙发550振动使得还可以向坐在沙发550上的用户呈现力感,应当注意,在图17中所示的示例中,根据本公开的技术还可以应用于致动器553的控制。
另外,沙发550可以被配置为能够通过预定网络向输出图像和语音的电视机557以及再现各种类型的内容以使电视机557输出图像和语音的媒体播放器559传送信息以及从电视机557和媒体播放器559接收信息。利用这样的配置,与通过电视机557输出的图像和语音同步地驱动触觉呈现部551和致动器553,使得可以向用户呈现触觉刺激和力感。
不必说,以上描述仅是示例,并且根据本公开的实施方式的技术可以应用于在与用户的身体的一部分接触的状态下使用的任何物品等。
作为应用示例3,以上已经参照图17描述了根据本实施方式的身体感觉导入装置200被配置为在与用户的身体的一部分接触的状态下使用的诸如沙发的物品的情况下的示例。
<5.4.补充>
不必说,以上描述仅是示例,并且只要可以基于通过网络传递的控制信息(控制信号)向用户呈现触觉刺激,用于呈现触觉刺激的装置就不受特别限制。作为具体示例,只要在被用户的手抓握的情况下使用的诸如所谓的控制器的设备包括向用户的手呈现触觉刺激的部件(例如,致动器等),根据本公开的技术就可以应用于该设备。
<<6.总结>>
如上所述,在根据本公开的实施方式的信息处理系统中,信息处理装置包括信号处理器,该信号处理器根据通信状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息。利用这样的配置,通过上述通信,基于上述第二控制信息来控制呈现触觉刺激的触觉呈现部。另外,上述信号处理器可以根据上述通信的速率来控制从上述第一控制信息中提取作为上述第二控制信息的频率分量。
利用如上所述的配置,即使在例如信息处理装置与触觉呈现部之间的通信速率降低的情况下,限制要通过通信传递的控制信息(控制信号)的数据量使得可以进一步限制传递延迟。另外,如上所述的那样从目标控制信息中提取一些频率分量(信号分量)使得可以提取允许用户更容易感知触觉刺激的频率分量,并且即使数据量有限,也可以进一步抑制要提供给用户的体验价值的降低。也就是说,根据依据本公开的技术,可以根据通信状态以更合适的模式向用户呈现触觉刺激。
上面已经参照附图详细描述了本公开的优选实施方式,但是本公开的技术范围不限于这样的实施方式。明显的是,本公开的技术领域内的普通技术人员可以在所附权利要求中描述的技术构思的范围内做出各种变更和修改,并且应当理解,这样的变更和修改自然地落入本公开的技术范围内。
此外,本文中描述的效果仅是说明性和示例性的,而不是限制性的。也就是说,除了上述效果之外或者代替上述效果,根据本公开的技术还可以发挥根据本文中的描述对本领域技术人员而言明显的其他效果。
应当注意,以下配置也落入本公开的技术范围内。
(1)
一种信息处理装置,包括:
信号处理器,其根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
(2)
根据(1)所述的信息处理装置,其中,所述信号处理器根据所述通信的速率来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
(3)
根据(2)所述的信息处理装置,其中,所述通信的速率越慢,所述信号处理器对要从所述第一控制信息中提取作为所述第二控制信息的频率分量的限制越多。
(4)
根据(1)至(3)中任一项所述的信息处理装置,其中,所述信号处理器根据所述触觉呈现部的共振频率来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
(5)
根据(1)至(4)中任一项所述的信息处理装置,其中,所述信号处理器根据要通过所述触觉呈现部向其呈现触觉刺激的部位,来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
(6)
根据(5)所述的信息处理装置,其中,所述信号处理器优先提取允许所述部位更容易感知触觉刺激的频率分量作为所述第二控制信息。
(7)
根据(1)至(6)中任一项所述的信息处理装置,其中,所述信号处理器根据所述第一控制信息中包括的每个频率分量的信号强度,来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
(8)
根据(7)所述的信息处理装置,其中,所述信号处理器优先提取具有较强信号强度的频率分量作为所述第二控制信息。
(9)
一种信息处理系统,包括:
身体感觉导入装置,其包括触觉呈现部,所述触觉呈现部呈现触觉刺激;以及
信息处理装置,其包括信号处理器,所述信号处理器根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
所述触觉呈现部基于所述第二控制信息通过所述通信被控制。
(10)
根据(9)所述的信息处理系统,其中,
所述身体感觉导入装置包括获取部,所述获取部通过所述通信从所述信息处理装置获取所述第二控制信息以及与第一时刻相关的设置信息,所述第一时刻与基于所述第二控制信息对触觉刺激的呈现的开始相关,并且
在所述第二控制信息可用的第二时刻滞后于所述第一时刻的情况下,所述触觉呈现部至少在所述第一时刻与所述第二时刻之间的时段中,基于不同于所述第二控制信息的第三控制信息来呈现触觉刺激。
(11)
根据(10)所述的信息处理系统,其中,所述第三控制信息是基于所述触觉呈现部的共振频率的信息。
(12)
根据(10)所述的信息处理系统,其中,
所述设置信息与关于频率的信息相关联,并且
使用与所述频率相对应的信息作为所述第三控制信息。
(13)
根据(10)所述的信息处理系统,其中,
所述设置信息与识别信息相关联,所述识别信息与作为所述第三控制信息的候选的一条或更多条控制信息中的至少一条控制信息相关联,并且
使用所述一条或更多条控制信息中的与所述识别信息相对应的信息作为所述第三控制信息。
(14)
根据(10)至(13)中任一项所述的信息处理系统,其中,所述触觉呈现部被控制成:以所述第二时刻作为基点,淡出与所述第三控制信息相对应的触觉刺激的呈现,并且淡入与所述第二控制信息相对应的触觉刺激的呈现。
(15)
根据(10)至(13)中任一项所述的信息处理系统,其中,所述触觉呈现部被控制成:响应于在所述第二时刻处或在所述第二时刻之后的、所述第二控制信息和所述第三控制信息在信号强度和相位上彼此基本一致的时刻,执行从与所述第三控制信息相对应的触觉刺激的呈现到与所述第二控制信息相对应的触觉刺激的呈现的改变。
(16)
根据(9)至(15)中任一项所述的信息处理系统,其中,
所述第二控制信息是用于驱动所述触觉刺激的控制信号,
所述身体感觉导入装置包括信号处理器,所述信号处理器对所获取的所述第二控制信息执行与所述身体感觉导入装置的使用状态相对应的信号处理,并且
所述触觉呈现部基于已经经过所述信号处理的所述第二控制信息来呈现触觉刺激。
(17)
根据(16)所述的信息处理系统,其中,
所述身体感觉导入装置在被用户的手抓握的状态下使用,并且
所述信号处理器根据所述抓握的状态对所获取的所述第二控制信息执行所述信号处理。
(18)
根据(9)至(17)中任一项所述的信息处理系统,其中,所述身体感觉导入装置包括支承部,所述支承部通过将所述身体感觉导入装置穿戴在预定部位上来支承所述触觉呈现部,以使所述预定部位与所述触觉呈现部具有预定位置关系。
(19)
一种由计算机执行的信息处理方法,所述信息处理方法包括:
根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
(20)
一种程序,其使得计算机执行以下步骤:
根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
附图标记列表
1 信息处理系统
100 信息处理装置
101 通信部
103 信号处理器
105 内容处理器
151 存储部
200 身体感觉导入装置
201 通信部
203 信号处理器
205 控制器
207 触觉呈现部
211 部
213 替选信号输出部
215 信号保持部
217 输出信号调节器
219 信号选择器
251 存储部
253 检测器
300 内容服务器
350 显示装置
360 声音输出装置
Claims (20)
1.一种信息处理装置,包括:
信号处理器,根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
2.根据权利要求1所述的信息处理装置,其中,所述信号处理器根据所述通信的速率来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
3.根据权利要求2所述的信息处理装置,其中,所述通信的速率越慢,所述信号处理器对要从所述第一控制信息中提取作为所述第二控制信息的频率分量的限制越多。
4.根据权利要求1所述的信息处理装置,其中,所述信号处理器根据所述触觉呈现部的共振频率来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
5.根据权利要求1所述的信息处理装置,其中,所述信号处理器根据要通过所述触觉呈现部向其呈现触觉刺激的部位,来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
6.根据权利要求5所述的信息处理装置,其中,所述信号处理器优先提取允许所述部位更容易感知触觉刺激的频率分量作为所述第二控制信息。
7.根据权利要求1所述的信息处理装置,其中,所述信号处理器根据所述第一控制信息中包括的每个频率分量的信号强度,来控制要从所述第一控制信息中提取作为所述第二控制信息的频率分量。
8.根据权利要求7所述的信息处理装置,其中,所述信号处理器优先提取具有较强信号强度的频率分量作为所述第二控制信息。
9.一种信息处理系统,包括:
身体感觉导入装置,包括触觉呈现部,所述触觉呈现部呈现触觉刺激;以及
信息处理装置,包括信号处理器,所述信号处理器根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
所述触觉呈现部基于所述第二控制信息通过所述通信被控制。
10.根据权利要求9所述的信息处理系统,其中,
所述身体感觉导入装置包括获取部,所述获取部通过所述通信从所述信息处理装置获取所述第二控制信息以及与第一时刻相关的设置信息,所述第一时刻与基于所述第二控制信息对触觉刺激的呈现的开始相关,并且
在所述第二控制信息可用的第二时刻滞后于所述第一时刻的情况下,所述触觉呈现部至少在所述第一时刻与所述第二时刻之间的时段中,基于不同于所述第二控制信息的第三控制信息来呈现触觉刺激。
11.根据权利要求10所述的信息处理系统,其中,所述第三控制信息是基于所述触觉呈现部的共振频率的信息。
12.根据权利要求10所述的信息处理系统,其中,
所述设置信息与关于频率的信息相关联,并且
使用与所述频率相对应的信息作为所述第三控制信息。
13.根据权利要求10所述的信息处理系统,其中,
所述设置信息与识别信息相关联,所述识别信息与作为所述第三控制信息的候选的一条或更多条控制信息中的至少一条控制信息相关联,并且
使用所述一条或更多条控制信息中的与所述识别信息相对应的信息作为所述第三控制信息。
14.根据权利要求10所述的信息处理系统,其中,所述触觉呈现部被控制成:以所述第二时刻作为基点,淡出与所述第三控制信息相对应的触觉刺激的呈现,并且淡入与所述第二控制信息相对应的触觉刺激的呈现。
15.根据权利要求10所述的信息处理系统,其中,所述触觉呈现部被控制成:响应于在所述第二时刻处或在所述第二时刻之后的、所述第二控制信息和所述第三控制信息在信号强度和相位上彼此基本一致的时刻,执行从与所述第三控制信息相对应的触觉刺激的呈现到与所述第二控制信息相对应的触觉刺激的呈现的改变。
16.根据权利要求9所述的信息处理系统,其中,
所述第二控制信息是用于驱动所述触觉刺激的控制信号,
所述身体感觉导入装置包括信号处理器,所述信号处理器对所获取的所述第二控制信息执行与所述身体感觉导入装置的使用状态相对应的信号处理,并且
所述触觉呈现部基于已经经过所述信号处理的所述第二控制信息来呈现触觉刺激。
17.根据权利要求16所述的信息处理系统,其中,
所述身体感觉导入装置在被用户的手抓握的状态下使用,并且
所述信号处理器根据所述抓握的状态对所获取的所述第二控制信息执行所述信号处理。
18.根据权利要求9所述的信息处理系统,其中,所述身体感觉导入装置包括支承部,所述支承部通过将所述身体感觉导入装置穿戴在预定部位上来支承所述触觉呈现部,以使所述预定部位与所述触觉呈现部具有预定位置关系。
19.一种由计算机执行的信息处理方法,所述信息处理方法包括:
根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
20.一种程序,所述程序使得计算机执行以下步骤:
根据通信的状态从第一控制信息中包括的多个频率分量中提取至少一些频率分量作为第二控制信息,其中,
呈现触觉刺激的触觉呈现部基于所述第二控制信息通过所述通信被控制。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018-233228 | 2018-12-13 | ||
JP2018233228 | 2018-12-13 | ||
PCT/JP2019/042096 WO2020121662A1 (ja) | 2018-12-13 | 2019-10-28 | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113196210A true CN113196210A (zh) | 2021-07-30 |
Family
ID=71077245
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980080700.7A Pending CN113196210A (zh) | 2018-12-13 | 2019-10-28 | 信息处理装置、信息处理系统、信息处理方法和程序 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11568718B2 (zh) |
EP (1) | EP3896555B1 (zh) |
CN (1) | CN113196210A (zh) |
WO (1) | WO2020121662A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023100375A1 (ja) * | 2021-12-03 | 2023-06-08 | 株式会社ソニー・インタラクティブエンタテインメント | 通信システム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003305670A (ja) * | 2002-02-13 | 2003-10-28 | Center For Advanced Science & Technology Incubation Ltd | ロボットフォン |
EP2806353A1 (en) * | 2013-05-24 | 2014-11-26 | Immersion Corporation | Method and system for haptic data encoding |
JP2018064264A (ja) * | 2016-10-07 | 2018-04-19 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007117649A2 (en) | 2006-04-06 | 2007-10-18 | Immersion Corporation | Systems and methods for enhanced haptic effects |
KR100952698B1 (ko) * | 2008-03-10 | 2010-04-13 | 한국표준과학연구원 | 촉감 피드백장치를 이용한 촉감전달방법 및 그 시스템 |
JP2009276970A (ja) * | 2008-05-14 | 2009-11-26 | Nagaoka Univ Of Technology | 触覚の視覚的処理方法および触覚の視覚的処理装置 |
US9317119B2 (en) * | 2012-04-27 | 2016-04-19 | Panasonic Intellectual Property Management Co., Ltd. | Haptic feedback device, haptic feedback method, driving signal generating device and driving signal generation method |
JP6354461B2 (ja) * | 2014-08-28 | 2018-07-11 | ソニー株式会社 | フィードバック提供方法、システム、および解析装置 |
JP2018060313A (ja) | 2016-10-04 | 2018-04-12 | ソニー株式会社 | 受信装置および方法、送信装置および方法、並びにプログラム |
-
2019
- 2019-10-28 EP EP19897096.4A patent/EP3896555B1/en active Active
- 2019-10-28 WO PCT/JP2019/042096 patent/WO2020121662A1/ja unknown
- 2019-10-28 CN CN201980080700.7A patent/CN113196210A/zh active Pending
- 2019-10-28 US US17/292,190 patent/US11568718B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003305670A (ja) * | 2002-02-13 | 2003-10-28 | Center For Advanced Science & Technology Incubation Ltd | ロボットフォン |
EP2806353A1 (en) * | 2013-05-24 | 2014-11-26 | Immersion Corporation | Method and system for haptic data encoding |
JP2018064264A (ja) * | 2016-10-07 | 2018-04-19 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
EP3896555B1 (en) | 2023-09-13 |
WO2020121662A1 (ja) | 2020-06-18 |
EP3896555A4 (en) | 2022-02-09 |
US20210390835A1 (en) | 2021-12-16 |
US11568718B2 (en) | 2023-01-31 |
EP3896555A1 (en) | 2021-10-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2942089B1 (en) | Information processing apparatus, information processing program, information processing system, and information processing method | |
US10286310B2 (en) | Information processing apparatus, storage medium having stored therein information processing program, information processing system, and information processing method | |
EP2949371B1 (en) | Information processing system, information processing apparatus, information processing program, and information processing method | |
US9712910B2 (en) | Glasses apparatus and method for controlling glasses apparatus, audio apparatus and method for providing audio signal and display apparatus | |
US9251805B2 (en) | Method for processing speech of particular speaker, electronic system for the same, and program for electronic system | |
US20150356838A1 (en) | Vibration generation system, storage medium having stored therein vibration generation program, and vibration generation method | |
US11676461B2 (en) | Information processing device, information processing method, and program for controlling haptics based on context information | |
US20240030936A1 (en) | Decoding apparatus, decoding method, and program | |
EP3186599B1 (en) | Feedback provision system | |
US11482086B2 (en) | Drive control device, drive control method, and program | |
US20150263685A1 (en) | Information processing apparatus, storage medium having stored therein information processing program, information processing system, and information processing method | |
WO2017168998A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US20220122333A1 (en) | Information processing apparatus, information processing method, and program | |
CN113196210A (zh) | 信息处理装置、信息处理系统、信息处理方法和程序 | |
US11276282B2 (en) | Information processing apparatus, information processing method, and recording medium | |
EP4358084A1 (en) | Audio cancellation system and method | |
US20240107257A1 (en) | Relocation of sound components in spatial audio content |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |