CN110915231A - 信息处理装置、信息处理方法和程序 - Google Patents

信息处理装置、信息处理方法和程序 Download PDF

Info

Publication number
CN110915231A
CN110915231A CN201880045010.3A CN201880045010A CN110915231A CN 110915231 A CN110915231 A CN 110915231A CN 201880045010 A CN201880045010 A CN 201880045010A CN 110915231 A CN110915231 A CN 110915231A
Authority
CN
China
Prior art keywords
sound
user
data
information processing
haptic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880045010.3A
Other languages
English (en)
Inventor
横山谅
伊藤镇
山野郁男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN110915231A publication Critical patent/CN110915231A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R27/00—Public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A63G31/16—Amusement arrangements creating illusions of travel
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J25/00—Equipment specially adapted for cinemas
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J5/00—Auxiliaries for producing special effects on stages, or in circuses or arenas
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/028—Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/002—Damping circuit arrangements for transducers, e.g. motional feedback circuits
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B06—GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS IN GENERAL
    • B06B—METHODS OR APPARATUS FOR GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS OF INFRASONIC, SONIC, OR ULTRASONIC FREQUENCY, e.g. FOR PERFORMING MECHANICAL WORK IN GENERAL
    • B06B1/00—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency
    • B06B1/02—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy
    • B06B1/04—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy operating with electromagnetism
    • B06B1/045—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy operating with electromagnetism using vibrating magnet, armature or coil system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/02—Details casings, cabinets or mounting therein for transducers covered by H04R1/02 but not provided for in any of its subgroups
    • H04R2201/023—Transducers incorporated in garment, rucksacks or the like
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2400/00—Loudspeakers
    • H04R2400/03—Transducers capable of generating both sound as well as tactile vibration, e.g. as used in cellular phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/05—Noise reduction with a separate noise microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

适当地防止由触觉刺激产生的声音(第二声音)被用户感知。提供了一种信息处理装置，包括：生成单元，该生成单元基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出用户无法感知的第二声音的触觉刺激的触觉数据。

Description

信息处理装置、信息处理方法和程序
技术领域
本公开内容涉及信息处理装置、信息处理方法和程序。
背景技术
过去，例如在下面指定的专利文献1中，提出了用于向用户呈现触觉刺激等的各种技术。
[引用列表]
[专利文献]
[专利文献1]
JP 2018-60313A
发明内容
[技术问题]
在此，例如，与包括戏剧演出、电影、音乐会、现场表演等各种类型的内容的提供一起，还提供从包括致动器等的触觉数据呈现部向用户呈现触觉刺激以改进身临场感等的演出。此时，存在用户可能感知到由触觉刺激发出的声音(第二声音)并且感到不舒服的可能性。根据以上指定的专利文献1中公开的技术，不能适当地防止用户感知到由触觉刺激发出的声音(第二声音)。
因此，本公开内容提出了可以适当地防止由触觉刺激发出的声音(第二声音)被用户感知的新颖且改进的信息处理装置、信息处理方法和程序。
[问题的解决方案]
根据本公开内容，提供了一种信息处理装置，包括：生成部，该生成部基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出用户无法感知的第二声音的触觉刺激的触觉数据。
此外，根据本公开内容，提供了一种由计算机执行的信息处理方法，该方法包括：基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出用户无法感知的第二声音的触觉刺激的触觉数据。
此外，根据本公开内容，提供了一种程序，该程序用于使计算机实现：基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出用户无法感知的第二声音的触觉刺激的触觉数据。
[本发明的有益效果]
如上所述，利用本公开内容，可以适当地防止用户感知到由触觉刺激发出的声音(第二声音)。
要注意的是，上述效果不一定是限制性的，并且可以与上述效果一起或者代替上述效果而表现出本说明书中描述的一些效果或者可以从本说明书中把握的其他效果。
附图说明
图1是描绘感觉呈现装置100的特定示例的图。
图2是描绘感觉呈现装置100的另一特定示例的图。
图3是描绘根据本公开内容的信息处理系统的配置的示例的图。
图4是示出用于生成触觉数据以使得第二声音不被用户感知的方法的图。
图5是示出用于生成触觉数据以使得第二声音不被用户感知的另一方法的图。
图6是描绘信息处理装置200的功能配置的示例的框图。
图7是示出用于生成触觉数据以使得第二声音不被用户感知的方法的图。
图8是示出用于生成触觉数据以使得第二声音不被用户感知的另一方法的图。
图9是示出用于生成触觉数据以使得第二声音不被用户感知的又一方法的图。
图10是描绘感觉呈现装置100的功能配置的示例的框图。
图11是示出触觉数据的生成处理的流程的示例的流程图。
图12是示出外马甲的图。
图13是示出内马甲的图。
图14是示出触觉数据呈现部121的固定模式的图。
图15是示出附加触觉数据呈现部121的穿戴模式的图。
图16是描绘用户在穿戴感觉呈现装置100的状态下坐在座位上的方式的图。
图17是示出操作面板180的图。
图18是示出信息处理装置200的硬件配置的示例的框图。
具体实施方式
在下文中，参照附图描述本公开内容的优选实施方式。要注意的是，在本说明书和附图中，具有基本上相同的功能配置的配置由相同的附图标记表示，并且省略对其的重复描述。
此外，按以下顺序给出描述。
1.信息处理系统的概述
2.装置的功能配置的示例
3.装置的处理流程的示例
4.硬件配置的示例
5.备注
<1.信息处理系统的概述>
首先，描述根据本公开内容的信息处理系统的概述。
根据本公开内容的信息处理系统向用户呈现各种感觉。更具体地描述，如图1所示，信息处理系统包括感觉呈现装置100，该感觉呈现装置由用户穿戴并且通过感觉呈现装置100向用户呈现各种感觉。
如图1所示，感觉呈现装置100包括在其内部设置的多个触觉数据呈现部121(在图1中为触觉数据呈现部121a至触觉数据呈现部121h)。例如，在感觉呈现装置100的内部，在用户的正面，可以部署多个触觉数据呈现部121(例如，如图1所示，六个触觉数据呈现部121(触觉数据呈现部121a至触觉数据呈现部121f))；在肩部区域，可以部署多个触觉数据呈现部121(例如，如图1所示，在每个肩膀上部署一个触觉数据呈现部121(触觉数据呈现部121g和触觉数据呈现部121h))；以及在背面，可以部署多个触觉数据呈现部121(未示出，例如，与正面相似的六个触觉数据呈现部121)。作为示例，各个触觉数据呈现部121可以以使得部署在正面的各个触觉数据呈现部121与部署在背面的各个触觉数据呈现部121彼此相对的位置关系来部署。
感觉呈现装置100包括一个或更多个触觉数据呈现部121，并且可以通过控制所述一个或更多个触觉数据呈现部121的输出的大小和定时或者要用于输出的触觉数据呈现部121的组合来向用户呈现各种触觉刺激。例如，感觉呈现装置100可以呈现用户被切割的感觉、用户击中某些物体的感觉、用户被压住的感觉，等等。要注意的是，尽管图1描绘了其中感觉呈现装置100是无袖服装(马甲)的示例，但是感觉呈现装置100不限于这样的示例，并且可以能够将感觉呈现给身体的有袖子、裤子等的地方的各个区域。另外，设置在感觉呈现装置100上的触觉数据呈现部121的数目没有特别限定。
此外，如图2所示，感觉呈现装置100可以包括呈现声音的声学数据呈现部131(在图2中为声学数据呈现部131a和另一声学数据呈现部131b)。例如，在感觉呈现装置100中，可以在用户的肩部区域中部署多个(例如，如图2所示在每个肩膀上一个)声学数据呈现部131。
感觉呈现装置100包括一个或更多个声学数据呈现部131，并且可以通过控制所述一个或更多个声学数据呈现部131的输出的大小和定时来向用户呈现各种声学效果。例如，感觉呈现装置100可以定位空间中的声音图像，并且可以在从另一个扬声器呈现BGM(背景音乐)的情况下仅向用户呈现音效(例如，当用户被切割时的音效、当用户击中某些物体等时的音效等)。要注意的是，设置在感觉呈现装置100中的声学数据呈现部131的数目不受具体限制。
这里，虽然图1和图2的示例描绘了示例，其中要由感觉呈现装置100向用户呈现的感觉包括触觉(由触觉数据呈现部121呈现的触觉刺激)和听觉(由声学数据呈现部131呈现的声音)，但是要呈现给用户的感觉不限于此。更具体地，感觉呈现装置100可以包括可以呈现视觉、嗅觉或味觉的机构。例如，感觉呈现装置100可以能够像透射型的头戴式显示器等那样呈现视觉(视频)，或者可以像香气呈现装置等那样呈现嗅觉(气味)，或者还可以像电子味觉呈现装置一样呈现味觉。
现在，参照图3描述包括感觉呈现装置100的整个系统的配置的示例。根据本公开内容的信息处理系统是例如可以无论在室内(例如，剧场、电影院、音乐厅、生活馆、展演空间(live house)、主题公园内的室内游乐设施等)还是室外(例如，舞台被设置在户外的剧场、演唱会场地或者现场演唱会、银幕被设置在户外的电影放映场所、主题公园中的户外游乐设施等)都可以使用的系统。此外，如图3所示，根据本公开内容的信息处理系统包括感觉呈现装置100、信息处理装置200、控制器260、音频IF 270、放大器280、前置扬声器290、投影仪300、屏幕310、灯320、烟雾生成器330和风生成器340(要注意的是，图3所示的信息处理系统假设在室内使用的情况)。
用户将穿戴该感觉呈现装置100并且以用户可以观看屏幕310或舞台的模式坐在座位上。信息处理装置200是通常控制整个信息处理系统的装置。更具体地，信息处理装置200通常控制要通过感觉呈现装置100向用户呈现的感觉、要投影到屏幕310的视频、要从前置扬声器290发出的声音、要从灯320照射的光、要从烟雾生成器330生成的烟雾、要从风生成器340生成的风等。在下文中详细描述信息处理装置200的功能。控制器260是当操作者执行向信息处理装置200的输入时使用的装置。
音频IF 270是充当声学数据的接口的装置，该音频数据用于通过感觉呈现装置100呈现声音。放大器280是对输入到音频IF 270的声学数据执行放大或调节、切换输入等的装置。前置扬声器290是充当声学呈现部的装置，并且是向整个场所呈现声音(第一声音)的装置。
投影仪300是将视频投影到屏幕310的装置，并且屏幕310是向其投影视频的面(例如，平面或者曲面)。灯320、烟雾生成器330和风生成器340是分别呈现光、烟雾和风的装置。
已经描述了根据本公开内容的信息处理系统的配置的示例。要注意的是，以上参照图3描述的配置终归是示例，并且根据本公开内容的信息处理系统的配置不限于如上所述的示例。根据本公开内容的信息处理系统的配置可以根据规格或者实际用途来灵活地修改。
这里，如在根据本公开内容的信息处理系统中，在与包括戏剧演出、电影、音乐会、现场表演等各种类型的内容的提供一起从感觉呈现装置100的触觉数据呈现部121向用户呈现触觉刺激的情况下，用户可能会由于感知到由触觉刺激发出的声音(第二声音)而感到不适。更特别地，在由触觉刺激发出的声音(第二声音)被用户感知为噪音的情况下，用户更加难以听到从前置扬声器290呈现的声音(第一声音)或者临场感受到干扰。此外，存在下述情况：不仅被呈现了触觉刺激的用户会感到不适，而且没有被呈现触觉刺激的用户(没有穿戴感觉呈现装置100的用户)可能会与上述情况类似地由于感知到呈现给位于附近的其他人的触觉刺激所发出的声音(第二声音)而感到不适。
考虑到上述情况，本案的公开者已经创造了本公开内容的技术。根据本公开内容的信息处理装置200基于与关于从前置扬声器290(声学呈现部)发出的第一声音的用户的第一感知特性有关的信息(在下文中将该信息称为“第一感知特性信息”)以及与关于从感觉呈现装置100的触觉数据呈现部121呈现的触觉刺激发出的第二声音的用户的第二感知特性有关的信息(在下文中将该信息称为“第二感知特性信息”)，生成用于呈现触觉刺激的触觉数据，上述触觉刺激发出用户无法感知的第二声音。
这里，“第一感知特性信息”是指示用户是否感知到第一声音、感知的程度等的信息，并且包括当第一声音到达用户的耳朵时第一声音的频率特性信息。同时，“第二感知特性信息”是指示用户是否感知到第二声音、感知的程度等的信息，并且包括当第二声音到达用户的耳朵时第二声音的频率特性信息。在下文中描述第一感知特性信息和第二感知特性信息的具体示例。此外，尽管在前面的描述中描述了第一声音是从前置扬声器290发出的声音，但是第一声音不限于此。例如，第一声音还包括从感觉呈现装置100的声学数据呈现部131发出的声音，并且在存在除前置扬声器290和声学数据呈现部131之外的任意扬声器的情况下，第一声音还包括从上述任意扬声器发出的声音。
然后，信息处理装置200将以这种方式生成的触觉数据提供给感觉呈现装置100，使得感觉呈现装置100的触觉数据呈现部121可以使用上述触觉数据来呈现发出用户无法感知的第二声音的触觉刺激。因此，可以防止向其呈现触觉刺激的用户和位于该用户附近并且没有向其呈现触觉刺激的另一用户感知到第二声音并且感到不舒服。特别地，要注意的是，本说明书中的“用户”是不仅包括向其呈现触觉刺激的用户而且还包括没有向其呈现触觉刺激的用户的概念。
描述触觉数据的生成方法，信息处理装置200基于第一感知特性信息和第二感知特性信息，通过调节要到达用户的耳朵的第一声音与第二声音的比率来生成触觉数据。例如，信息处理装置200调节每个频带的比率以生成触觉数据。在此，“第一声音与第二声音之间的比率”可以表示为SN比(信噪比)(要注意的是，这不限于S/N比)。在这种情况下，“S(信号)”代表从前置扬声器290呈现的第一声音的信号，“N(噪音)”代表由触觉刺激发出的第二声音的信号。例如，信息处理装置200基于第一感知特性信息和第二感知特性信息来预先调节第一声音与第二声音之间的比率(SN比)或者实时调节第一声音与第二声音之间的比率。
更具体地描述第一声音与第二声音之间的比率(SN比)的调节方法，例如，信息处理装置200可以生成触觉数据，使得在用户的可听范围内，第二声音的声压水平低于第一声音的声压水平(换言之，在用户的可听范围之外，信息处理装置200可以不使第二声音的声压水平低于第一声音的声压水平)。
例如，考虑如下情况：当第一声音到达用户的耳朵时，包括在第一感知特性信息中的第一声音的频率特性信息具有如图4的A所示的波形1。因此，信息处理装置200针对用户的可听范围之外的每个频带，将第二声音的声压水平调节为低于第一声音的声压水平(图4的B中的波形2指示第二声音的声压水平)。这使得信息处理装置200可以防止第二声音被用户感知。
此外，在第一声音不是从前置扬声器290发出的情况下，或者在与第一声音对应的频带高于预定值的情况下，信息处理装置200可以将与第二声音对应的频带调节到可听范围之外的频带，或者将与第二声音对应的频带调节到低于可听水平的值。这里，要注意的是，“第一声音不是从前置扬声器290发出的情况”是不仅包括第一声音根本不是从前置扬声器290发出的情况而且还包括第一声音非常微弱的情况的概念。此外，要注意的是，“与第一声音对应的频带”是第一声音的声压水平过高以至于对用户的感知有影响的频带(声压水平等于或高于预定值)，而且可以排除其中第一声音的声压水平过低以至于对用户的感知没有影响的频带。此外，在“与第一声音对应的频带高于预定值的情况下”中的“预定值”被假定为至少等于或高于与第二声音对应的频带的频率，而且对于这种情况，难以采取使第二声音的声压水平低于第一声音的声压水平直到用户无法感知到第二声音的措施(注意，这不是限制性的)。
例如，考虑如下情况：当第一声音到达用户的耳朵时，包括在第一感知特性信息中的第一声音的频率特性信息具有如图5的A所示的波形1。在这种情况下，由于与第一声音对应的频带高于预定值(在图5的A中为500Hz)，信息处理装置200将与第二声音对应的频带调节到如图5的B所示的可听范围的外部(在图5的B中为200Hz或更小)。这样，如上所述，即使难以采取这种使第二声音的声压水平低于第一声音的声压水平直到用户无法感知到第二声音的措施，信息处理装置200也可以防止第二声音被用户感知。要注意的是，如果将图4的B的模式与图5的B的模式相互比较，则认为图4的B的模式是优选的，因为图4的B的模式可以为用户提供更多样的触觉刺激。
此外，在与第一声音对应的频带足够大于与第二声音对应的频带的情况下，信息处理装置200可以减小第二声音的比率，使得第二声音不被用户感知(不太可能被感知)。例如，在从前置扬声器290以相当大的音量发出高频带的声音的情况下，信息处理装置200仅通过减小第二声音的比率就可以防止第二声音被用户感知(使第二声音不太可能被感知)。要注意的是，“与第一声音对应的频带足够大于与第二声音对应的频带的情况”可以被改写为“与第一声音对应的频带高于预定值的情况”或改写为“与第一声音的峰值处的声压水平对应的频率和与第二声音的峰值处的声压水平对应的频率之间的差大于预定值的情况”(要注意的是，“预定值”与上文所述的预定值不同)。
<2.装置的功能配置的示例>
前面的描述针对根据本公开内容的信息处理系统的概述。现在，描述根据本公开内容的信息处理系统中的信息处理装置200和感觉呈现装置100的功能配置的示例。
(2.1.信息处理装置200的功能配置的示例)
首先，参照图6描述信息处理装置200的功能配置的示例。如图6所示，信息处理装置200包括控制部210、生成部220、通信部230、显示部240和存储部250，并且通过通信部230连接至外部控制器260。
(控制部210)
控制部210是通常控制信息处理装置200的功能配置的功能配置。例如，控制部210可以基于使用控制器260的输入来控制功能配置的开始和停止，并且指定要由感觉呈现装置100向用户呈现的感觉的内容(例如，要由触觉数据呈现部121呈现的触觉刺激的内容、定时、强度等；要由声学数据呈现部131呈现的声音的内容、定时和音量等)。此外，控制部210可以通过生成各种控制信号来控制信息处理系统中除信息处理装置200之外的装置。要注意的是，控制部210的控制的内容不限于此。例如，控制部210可以实现通常由通用计算机、PC(个人计算机)、平板PC、智能电话等执行的处理(例如，OS(操作系统)等的处理)。
(生成部220)
生成部220是用于生成要由信息处理系统使用的各种数据的功能配置。更具体地，生成部220是生成要用于表示触觉刺激、声音、光、视频、烟雾和风的数据的功能配置。要注意的是，在下文中描述了用于呈现触觉刺激、声音和光的数据的生成。生成部220在控制部210的控制下随时生成用于呈现视频、烟雾和风的数据，并且通过连接投影仪300、烟雾生成器330和风生成器340的网络将生成的数据提供给各个装置。另外，如图6所示，生成部220包括触觉数据生成部221、声学数据生成部222和照明数据生成部223。
(触觉数据生成部221)
触觉数据生成部221是生成要用于由感觉呈现装置100的触觉数据呈现部121呈现触觉刺激的触觉数据的功能配置。更具体地描述，触觉数据生成部221获取关于要提供给用户的内容的第一感知特性信息和第二感知特性信息。要注意的是，这种信息的获取源没有特别限制。例如，第一感知特性信息和第二感知特性信息可以是从过去欣赏内容的用户获取的信息，或者可以是从当前正在欣赏内容的用户获取的信息(到目前为止的内容的部分的信息)。此外，第一感知特性信息和第二感知特性信息可以是从关于与上述内容类似的另一内容获取的信息。例如，可以通过安装在在用户坐在座位上的状态下欣赏了(或当前正在欣赏)内容的每个用户的耳朵上的传感器来获取第一感知特性信息和第二感知特性信息。此外，可以基于用户的位置(或座位)来估计第一感知特性信息和第二感知特性信息。
然后，触觉数据生成部221基于第一感知特性信息和第二感知特性信息来调节到达用户的耳朵的第一声音与第二声音之间的比率(SN比)以生成触觉数据。例如，如上所述，触觉数据生成部221可以生成触觉数据，使得在用户的可听范围内，第二声音的声压水平低于第一声音的声压水平。
参照图7和图8中描绘的更具体的示例给出描述。例如，考虑下述情况：包括在第一感知特性信息中的第一声音的波形1随着时间的流逝按照图7的(1)至(3)的顺序改变，并且包括在第二感知特性信息中的第二声音的波形2随着时间的流逝按照图7的(4)至(6)的顺序改变。在这种情况下，在触觉数据生成部221在呈现触觉刺激时不调节触觉数据而原样使用触觉数据的情况下，到达用户的耳朵的第二声音的声压水平高于第一声音的声压水平的波形带有时出现在用户的可听范围内，如图8的A所示(在图8的A中，描绘了将图7的(3)与(6)相互比较的情况下的曲线图)。因此，用户将感知到第二声音并且感到不舒服。
因此，触觉数据生成部221以图7的(4)'至(6)'中描绘的方式的定时处调节第二声音的波形2。由此，在用户的可听范围内，到达用户的耳朵的第二声音的声压水平变得低于图8的B中描绘的第一声音的声压水平(在图8的B中，描绘了在将图7的(3)与(6)'相互比较的情况下的曲线图)。因此，用户不会感觉到不舒服，因为用户不再感知到第二声音。
此外，在第一声音不是从前置扬声器290发出的情况下，或者在与第一声音对应的频带高于预定值的情况下，触觉数据生成部221可以将与第二声音对应的频带调节到可听范围之外，或者可以将第二声音的声压水平调节到低于可听水平的值。
这里，参照图9中描绘的更详细的具体示例来给出描述。考虑下述情况：第一声音不是从前置扬声器290发出的，并且包括在第二感知特性信息中的第二声音的波形2随着时间的流逝按照图9的(4)至(6)的顺序改变。在这种情况下，在用户的可听范围内，由于第二声音的声压水平等于或高于可听水平(在本示例中为25dB)，所以用户将感知到第二声音并且感觉到不舒服。
因此，触觉数据生成部221在不同的定时处将第二声音的声压水平调节到低于图9的(4)'至(6)'中描绘的可听水平的值。因此，用户不会感觉到不舒服，因为用户不会感知到第二声音。
此外，如上文所述，在与第一声音对应的频带足够大于与第二声音对应的频带的情况下，触觉数据生成部221可以减小第二声音的比率，使得第二声音不被用户感知(不太可能被感知)。
要注意的是，触觉数据生成部221能够使用任意的波形调节技术或声压调节技术(专用软件等)来执行上述调节。要注意的是，要使用的波形调节技术或声压调节技术的类型不受具体限制。
(声学数据生成部222)
声学数据生成部222是用于在控制部210的控制下生成用于通过前置扬声器290和感觉呈现装置100的声学数据呈现部131呈现第一声音的声学数据的功能配置。声学数据生成部222通过预定网络将声学数据提供给前置扬声器290和感觉呈现装置100。
(照明数据生成部223)
照明数据生成部223是用于在控制部210的控制下生成用于由灯320呈现光(照明)的照明数据的功能配置。照明数据生成部223通过预定网络将照明数据提供给灯320。
(通信部230)
通信部230是用于与外部装置进行通信的功能配置。例如，在信息处理装置200的操作者使用控制器260执行输入的情况下，通信部230从控制器260接收输入数据，并且将输入数据提供给控制部210以实现对操作者的输入的反映。此外，通信部230将由生成部220生成的数据(例如，包括触觉数据、声学数据等)发送到预定外部设备，以实现对触觉刺激、声音、视频、照明、烟雾、风等的呈现。要注意的是，由通信部230传达的数据不限于此。例如，通信部230可以从感觉呈现装置100等接收第一感知特性信息和第二感知特性信息。此外，用于通信部230与各个外部设备之间的通信方法和通信线路的类型没有具体限制。例如，通信部230可以通过有线通信或通过无线通信与各个外部设备进行通信。
(显示部240)
显示部240是用于显示要由操作者进行输入的设定画面图像等的功能配置。例如，显示部240可以是诸如液晶显示器(LCD：Liquid Crystal Diaplay)或者有机EL(ElectroLuminescece，电致发光)显示器之类的显示装置。要注意的是，显示部240的类型和显示内容不限于此。
(存储部250)
存储部250是用于存储各种数据的功能配置。例如，存储部250存储要由信息处理装置200的功能配置使用的程序和参数、由功能配置生成的数据(例如，触觉数据、声学数据、照明数据等)等。要注意的是，要存储到存储部250中的数据的内容不限于此。
(控制器260)
控制器260是用于接收操作者的输入并且将输入数据提供给信息处理装置200的装置。控制器260包括各种输入机构，例如键盘、鼠标、按钮、开关、操纵杆、触摸传感器、压力传感器或者接近传感器。要注意的是，设置在控制器260中的输入机构的类型不限于此。此外，控制器260可以不被设置为信息处理装置200的外部装置，而可以被设置在信息处理装置200中。
已经描述了信息处理装置200和控制器260的功能配置的示例。要注意的是，上面参照图6描述的功能配置终归是示例，并且信息处理装置200的功能配置不限于这样的示例。例如，信息处理装置200可以不必包括图6中描绘的所有功能配置。信息处理装置200的所有或部分功能配置可以被设置在诸如感觉呈现装置100的外部设备中。此外，可以根据规格或实际用途灵活地修改信息处理装置200的功能配置。
(2.2.感觉呈现装置100的功能配置的示例)
以上描述是针对信息处理装置200的功能配置的示例。现在，参照图10描述感觉呈现装置100的功能配置的示例。如图10所示，感觉呈现装置100包括控制部110、触觉呈现部120、声音呈现部130、通信部140、传感器部150和存储部160。
(控制部110)
控制部110是通常控制感觉呈现装置100的功能配置的功能配置。例如，控制部110基于从信息处理装置200提供的各种数据(例如，包括触觉数据、声学数据、其他控制信号等)来控制功能配置的开始和停止。要注意的是，控制部110的控制内容不限于此。例如，控制部110可以实现通常在通用计算机、PC、平板PC、智能电话等中执行的处理(例如，OS等的处理)。此外，如图10所示，控制部110包括触觉数据处理部111和声学数据处理部112。
(触觉数据处理部111)
触觉数据处理部111使用从信息处理装置200提供的触觉数据，进行与由触觉数据呈现部121进行的触觉刺激的呈现有关的处理。例如，触觉数据处理部111可以通过以下方法来实现触觉刺激的呈现：基于个体感觉呈现装置100的设定(例如，由用户唯一执行的对感觉呈现装置100的设定(例如，音量的设定、功能的开/关的设定等))对从信息处理装置200提供的触觉数据进行编辑，并且将编辑之后的触觉数据提供给触觉数据呈现部121。
(声学数据处理部112)
声学数据处理部112使用从信息处理装置200提供的声学数据，由声学数据呈现部131执行与第一声音的呈现有关的处理。例如，声学数据处理部112可以通过基于个体感觉呈现装置100的设定(例如，由用户唯一执行的感觉呈现装置100的设定(例如，音量的设定、功能的开/关的设定等))来编辑从信息处理装置200提供的声学数据，并且编辑之后的第一声音提供给声学数据呈现部131来实现第一声音的呈现。
(触觉呈现部120)
触觉呈现部120是包括一个或更多个触觉数据呈现部121并且使用触觉数据呈现部121向用户呈现触觉刺激的功能配置。
(触觉数据呈现部121)
触觉数据呈现部121是用于使用从触觉数据处理部111提供的触觉数据向用户呈现触觉刺激的功能配置。例如，触觉数据呈现部121可以是呈现振动的致动器(例如，ERM(偏心电机)、LRA(线性谐振致动器)、VCM(语音线圈电机)等)，或者可以是呈现力感的电子元件，还可以是呈现温度感的温度变化元件(例如，珀耳帖(Peltier)元件等)。换言之，“触觉刺激”可以包括振动、力感、温度感等。要注意的是，要由触觉数据呈现部121呈现的触觉刺激不限于此。此外，可以将通道分配给每个触觉数据呈现部121(在图10中，至少为触觉数据呈现部121a至触觉数据呈现部121c)，使得执行针对每个通道呈现不同的触觉刺激。
(声音呈现部130)
声音呈现部130包括一个或更多个声学数据呈现部131，并且具有使用声学数据呈现部131向用户呈现第一声音的功能配置。
(声学数据呈现部131)
声学数据呈现部131是使用从声学数据处理部112提供的声学数据向用户呈现第一声音的功能配置。例如，声学数据呈现部131可以包括用于再现声学数据的扬声器、用于扬声器的放大电路，等等。此外，可以设置多个声学数据呈现部131(在图10中，至少为声学数据呈现部131a至声学数据呈现部131c)，使得可以通过调节声学数据呈现部131的输出来实现声音图像的定位。此时，可以通过声学数据呈现部131和设置在声学数据呈现部131周围的扬声器(例如，座位上的扬声器)的协作来定位声音图像。要注意的是，可以将不同的声道分配给各个声学数据呈现部131，使得执行在不同声道之间呈现不同的声音。
(通信部140)
通信部140是与外部设备进行通信的功能配置。例如，通信部140接收由信息处理装置200生成的各种数据(例如，包括触觉数据、声学数据、其他控制信号等)。要注意的是，由通信部140传达的数据不限于此。此外，要用于通信部140与外部设备之间的通信方法和通信线路的类型不受具体限制。例如，通信部140可以执行与外部设备的有线通信，或者可以执行无线通信。
(传感器部150)
传感器部150包括各种传感器，并且具有用于获取由传感器生成的传感器数据的功能配置。例如，传感器部150可以包括位置传感器(可以用于指定用户位置的传感器，包括例如GNSS(全球导航卫星系统)接收器、接近传感器等)，使得传感器部150获取用于指定用户位置的传感器数据。在通过使用传感器数据进行分析来指定用户的位置的情况下，可以基于上述用户的位置来估计第一感知特性信息和第二感知特性信息。要注意的是，设置在传感器部150中的传感器的类型不受具体限制。例如，传感器部150可以包括各种传感器，例如姿势传感器(陀螺仪传感器、加速度传感器等)、温度传感器或压力传感器。
(存储部160)
存储部160具有用于存储各种数据的功能配置。例如，存储部160存储要由感觉呈现装置100的功能配置使用的程序和参数或者从信息处理装置200提供的各种数据(包括例如触觉数据、声学数据、其他控制信号等)，等等。要注意的是，存储在存储部160中的数据的内容不限于此。
上面已经描述了感觉呈现装置100的功能配置的示例。要注意的是，以上参照图10描述的功能配置终归是示例，并且感觉呈现装置100的功能配置不限于如上所述的示例。例如，感觉呈现装置100可以不必包括图10中描绘的所有功能配置。此外，可以根据规格或实际用途灵活地修改感觉呈现装置100的功能配置。
<3.装置的处理流程的示例>
以上描述是针对根据本公开内容的信息处理系统中的信息处理装置200和感觉呈现装置100的功能配置的示例。随后，参照图11描述要用于呈现触觉刺激的触觉数据的生成处理的流程的示例。图11描述了在开始内容之前，基于第一感知特性信息和第二感知特性信息来预先生成(编程)要用于呈现发出用户无法感知到的第二声音的触觉刺激的触觉数据的情况下的处理流程。
首先，在步骤S1000处，信息处理装置200的触觉数据生成部221获取关于要呈现给用户的内容的第一感知特性信息和第二感知特性信息。如上所述，这种信息的获取源不受具体限制。在步骤S1004处，触觉数据生成部221针对内容的每个定时(例如，针对每个片段)，确认是否发出第一声音或者与第一声音对应的频带是否高于预定值(例如，500HZ)。
在没有发出第一声音或者与第一声音对应的频带高于预定值的情况下(步骤S1004/是)，在步骤S1008处，触觉数据生成部221将与第二声音对应的频带调节到可听范围之外(例如，200Hz或更小)(要注意的是，触觉数据生成部221可以将第二声音的声压水平调节到低于可听水平的值)。在发出第一声音并且与第一声音对应的频带等于或低于预定值的情况下(步骤S1004/否)，触觉数据生成部221在步骤S1012处生成触觉数据，使得在用户的可听范围内第二声音的声压水平低于第一声音的声压水平。重复步骤S1004至步骤S1012的处理，直到对全部内容结束上述调节(步骤S1016/否)。
要注意的是，图11的流程图中的步骤不必按照所描述的顺序以时间序列来处理。特别地，流程图中的步骤可以以不同于所描述的顺序来处理，或者可以并行地处理。此外，尽管在图11的流程图中没有描述，但是触觉数据生成部221可以执行与第一声音对应的频带是否充分大于与第二声音对应的频带的决定，并且生成触觉数据，使得在与第一声音对应的频带充分大于与第二声音对应的频带的情况下，第二声音的比率如上文所描述的那样减小。此外，触觉数据生成部221可以不在内容开始之前预先生成(编程)触觉数据，而是在提供内容时实时生成触觉数据。
<4.硬件配置的示例>
以上描述是针对触觉数据的生成处理的流程。现在，描述根据本公开内容的信息处理系统的硬件配置的示例。
(4.1.感觉呈现装置100)
首先，描述感觉呈现装置100的硬件配置。感觉呈现装置100具有将包括不具有尺寸调节功能的外马甲和具有尺寸调节功能的内马甲这两件马甲叠放在一起的结构(外马甲从上方覆盖内马甲的结构)。此外，考虑到用户穿上和脱下的容易性，外马甲和内马甲可以例如在相对的肩部处彼此物理连接。在此，图12描绘了外马甲的示例，图13描绘了内马甲的示例。
图12描绘了(在图2中描绘过的)感觉呈现装置100的外马甲的示例，在外马甲中，声学数据呈现部131被布置在相对的肩部区域处。另外，外马甲(以及图13的A描绘的内马甲)在其前身的中间包括开闭机构10(例如，紧固件、钩环紧固件、纽扣等。要注意的是，开闭机构10不限于此)。因此，用户可以容易且有效地穿上和脱下双层结构的感觉呈现装置100，而无需执行高负荷的移动以将头穿过感觉呈现装置100。此外，在用户感到不舒服的情况下或者类似情况下，用户可以容易且迅速地脱下感觉呈现装置100。此外，外马甲在其前体处包括预定数目的口袋11(在图12的示例中为口袋11a至口袋11d)。因此，由于外马甲可以容纳将要在下文中描述的手腕或脚上穿戴的部件，因此在不使用这些部件的情况下，利于对这些部件的管理。要注意的是，虽然主要是由于用户可以容易地移动手臂而采用马甲型的感觉呈现装置100的情况，但是感觉呈现装置100在透气性方面的优点等也被考虑在内，感觉呈现装置100的形状(特别是外马甲的形状)可以根据其应用(内容的内容)而变成各种设计。
图13的A描绘了内马甲的前身的示例，图13的B描绘了内马甲的后身的示例。如图13的A和B所示，在内马甲的侧面部分上设置有能够无级地调节内马甲的尺寸的调节机构12(在图13的示例中为钩环紧固件)。为了使感觉呈现装置100将触觉刺激传递给用户的身体，期望通过适当的压力将感觉呈现装置100和触觉数据呈现部121按压在身体上。然而，取决于年龄、性别等，用户的身体具有明显的个体差异。因此，内马甲包括调节机构12，使得可以调节触觉数据呈现部121与身体之间的接触压力，并且可以为每个用户呈现最佳的触觉刺激。此外，由于在使用时内马甲被外马甲覆盖，所以调节机构12不暴露于表面。因此，提高了穿着的可设计性，并且通过操作用于安装和拆卸的钩环紧固件以使用户自身使用钩环紧固件对内马甲进行尺寸调节，可以防止产生较大的声音而使用户周围的观众不舒服。注意，假设在内容开始之前用户已经完成了对感觉呈现装置100的穿戴，并且除了休息时间等之外，没有进行尺寸调节或者穿脱。更具体地，假设在与用户要坐的座位不同的位置处设置用于穿戴(穿上和脱下)感觉呈现装置100的空间，并且工作人员负责辅助用户穿上或脱下感觉呈现装置100(自然，这不是限制性的)。
此外，内马甲包括可以固定触觉数据呈现部121的固定机构13(在图13的示例中为钩环紧固件)。当感觉呈现装置100向用户呈现触觉刺激时，期望不受每个用户的个体差异(身体的大小等)的影响而将触觉刺激呈现给相似的位置。特别地，期望响应于每个用户的个体差异来调节触觉数据呈现部121的布置。此外，要呈现触觉刺激的位置(区域)响应于诸如戏曲或电影之类的内容或者内容的演出而改变。例如，要呈现触觉刺激的位置根据内容而改变，使得在戏剧A的情况下，要呈现触觉刺激的位置是身体的正面的四个位置；另一个戏剧B的情况下，要呈现触觉刺激的位置是身体的正面的六个位置；以及在电影A的情况下，除了身体正面的六个位置外，要呈现触觉刺激的位置还是正面的两个位置。因此，内马甲具有在其大致整个面上设置的固定机构13，以允许将触觉数据呈现部121固定在期望的位置处。
这里，参照图14描述触觉数据呈现部121的固定模式的特定示例。基本上不假设下述情况：在内容开始之前由用户进行穿戴时，触觉数据呈现部121的固定位置由用户自己改变(这不是限制性的)。因此，如图14的A所示，内马甲具有两片式结构，并且固定机构13被设置在两片式结构的内侧，使得用户无法触摸该固定机构。触觉数据呈现部121可以通过被固定机构13(钩环紧固件的母件等)和另一固定机构14(钩环紧固件的公件等)这两个分离的部件夹持而固定到内马甲。假设如图14的A所示，固定机构13被设置在两片式结构中的“内马甲的外侧15”(外马甲侧)的内侧面上。换言之，假设固定机构13未被设置在两片式结构的“内马甲的内侧16”(用户身体侧)上。因此，在尺寸调节时，通过调节机构12的紧固压力产生的“内马甲的外侧15”的张力将触觉数据呈现部121精确地按压在用户的身体上。
此外，由于“内马甲的内侧16”作为面存在，因此当用户穿上或脱下感觉呈现装置100时，防止了突出的触觉数据呈现部121干扰这种穿脱。虽然感觉呈现装置100理想地具有如上所述的内马甲和外马甲的双层结构，但是考虑到穿脱的容易性，仅内马甲可以单独使用。同样在这种情况下，由于内马甲具有如上所述的结构，因此可以防止触觉数据呈现部121暴露于表面，从而确保了设计性。
此外，如上所述，用户的身体根据年龄或性别具有很大的个体差异。因此，可以想到下述操作：例如，在提供内容之前，准备包括男性服装(外马甲和内马甲)和女性服装(外马甲和内马甲)在内的两种服装，关于针对女性的内马甲，根据身体而使调节机构12变窄为前提，与男性相比，触觉数据呈现部121的固定位置被设定为相对内侧。类似地，也可以想到这样的操作，即，考虑到男女之间的身高差异，使得触觉数据呈现部121之间在上下方向上的相对距离与男性相比相对较短。另外，关于女性的服装，也可以想到这样的操作：将触觉数据呈现部121布置成远离胸部。同样可以想到这样的操作：不考虑男女之间的差异，响应于身体的尺寸而(针对相同的服装)准备S/M/L三种尺寸，并且使触觉数据呈现部121的固定位置在如上所述的三种尺寸之间不同。替选地，也可以想到这样的操作：响应于内容的内容，在内容开始之前改变触觉数据呈现部121的位置和数目，基于触觉数据呈现部121的位置和数目的设定来执行要输入到触觉数据呈现部121的触觉数据的设计和生成。
此外，感觉呈现装置100可以能够根据马甲部分在未提供触觉刺激的位置处通过使用一些其他部件来呈现触觉刺激。例如，如图15的A所示，感觉呈现装置100包括连接器，使得感觉呈现装置100可以通过连接在连接器上的线路190(在图15的A中为线路190a至线路190f)电连接至附加触觉数据呈现部121(在图15的A中为触觉数据呈现部121k至触觉数据呈现部121p)。要注意的是，类似于图15的A中的触觉数据呈现部121l和触觉数据呈现部121m，附加触觉数据呈现部121中的每一个均包括连接器，使得附加触觉数据呈现部121可以通过连接至连接器的线路190电连接至另外的附加触觉数据呈现部121。要注意的是，在使用长度可以调的电缆(例如，卷曲的电缆或者卷取型电缆)作为线路190时，可以防止线路190不必要地长而使用户的运动受到干扰。此外，在没有通过线路190来添加触觉数据呈现部121的情况下，可以将可用于添加触觉数据呈现部121的通道用于向另一部分(例如，马甲部分)呈现触觉刺激。这使得可以对该部分呈现各种触觉刺激。要注意的是，附加触觉数据呈现部121可以通过无线连接来连接。
此外，附加触觉数据呈现部121通过预定固定机构(例如，钩环紧固件等)以恒定的压力固定在身体的各个部位上。通过这种结构，例如，如图15的A所示，感觉呈现装置100可以向除了马甲部分之外的手腕、膝盖和脚背呈现触觉刺激。要注意的是，要固定附加触觉数据呈现部121的位置没有具体限制，并且可以响应于内容的内容而灵活地改变。
这里，如图15的B所示，假设对于附加触觉数据呈现部121中的每一个，附有指示固定位置的标签17(在图15的B中为标签17a至标签17f：指示表示固定位置的图示、字符等)。这可以防止用户将每个附加触觉数据呈现部121固定到错误的位置。
现在，描述与感觉呈现装置100一起使用的装置。首先，参照图16描述在用户就座并且接收提供的内容的情况下使用的座位的外围装置。图16描绘了用户在穿戴感觉呈现装置100(以及附加触觉数据呈现部121k至触觉数据呈现部121p)的状态下坐在座位上的方式。因此，假设对于每个座位安装了用于用户的预定操作的操作面板180。
这里，参照图17描述操作面板180的特定示例。图17的A中描绘的操作面板180a包括开关181，并且用户可以操作开关181来切换包括触觉刺激的各种感觉的呈现的开/关。此外，为操作面板180a提供了连接器182(母)，并且用户可以通过将为感觉呈现装置100设置的连接器(公)插入连接器182来将感觉呈现装置100置于可操作状态。此外，图17的B所示的操作面板180b还包括音量调节机构183，并且用户可以将要由感觉呈现装置100呈现的触觉刺激或者声音的音量调节至期望的大小。
要注意的是，对于感觉呈现装置100，提供多种类型(S/M/L的尺寸、用于成人/儿童、用于男性/女性、颜色、标记编号)，并且通过将感觉呈现装置100连接至连接器182，可以由信息呈现系统100(特别是信息处理装置200)根据包含在感觉呈现装置100中的用于类型检测的电阻值或者诸如DIP开关之类的用于开/关检测的设计来识别感觉呈现装置100的类型。信息处理系统(特别是信息处理装置200)可以响应于所识别的类型来改变要提供给服装的信号(音量等)。
(4.2.信息处理装置200)
随后，参照图18描述信息处理装置200的硬件配置。
如图18所示，信息处理装置200包括CPU(中央处理单元)901、ROM(只读存储器)902、RAM(随机存取存储器)903、主机总线904、桥接器905、外部总线906、接口907、输入装置908、输出装置909、存储装置(HDD)910、驱动器911和通信装置912。
CPU 901充当算术运算处理装置和控制装置，并且根据各种程序控制信息处理装置200中的总体操作。此外，CPU 901可以是微处理器。ROM902存储要由CPU 901使用的程序、算术运算参数等。RAM 903临时存储要在CPU 901的执行中使用的程序、在这种执行中适当改变的参数等。CPU 901、ROM 902、RAM 903通过由CPU总线等配置而成的主机总线904彼此连接。通过CPU 901、ROM 902和RAM 903的协作来实现控制部210和生成部220的功能。
主机总线904通过桥接器905连接至诸如PCI(外围部件互连/接口)总线之类的外部总线906。要注意的是，主机总线904、桥接器905和外部总线906不需要一定被彼此分开地配置，并且主机总线904、桥接器905和外部总线906的功能可以被包含在一条总线中。
输入装置908由诸如鼠标、键盘、触摸面板、按钮、麦克风、开关和操纵杆之类的允许用户输入信息的输入装置以及基于用户的输入生成输入信号并且将输入信号输出到CPU901的输入控制装置配置而成。使用信息处理装置200的用户可以通过操作输入装置908来输入各种数据并且向各种装置指示处理操作。控制器260的功能由输入装置908实现。
例如，输出装置909包括诸如CRT(阴极射线管)显示装置、液晶显示(LCD)装置、OLED(有机发光二极管)装置和灯之类的显示装置。显示部240的功能由输出装置909实现。
存储装置910是用于数据存储的装置。存储装置910可以包括存储介质、用于将数据记录到存储介质中的记录装置、用于从存储介质中读出数据的读出装置、用于删除记录在存储介质中的数据的删除装置，等等。例如，存储装置910由HDD(硬盘驱动器)配置而成。存储装置910驱动硬盘以存储要由CPU 901执行的程序和各种数据。存储部250的功能由存储装置910实现。
驱动器911是用于存储介质的读取器/写入器，并且被内置在信息处理装置200中或者从外部连接至信息处理装置200。驱动器911读出记录在可移动存储介质913(例如磁盘、光盘、磁光盘、其中加载的半导体存储器)上的信息并且将信息输出到RAM 903。此外，驱动器911还可以将信息写入可移动存储介质913。
通信装置912是由通信装置配置而成的通信接口，通信装置912用于例如连接至通信网络914等。通信部230的功能由通信装置912实现。
<5.备注>
前面的描述是针对根据本公开内容的信息处理系统中的硬件配置的示例。现在，作为备注，描述根据本公开内容的信息处理系统中的操作方面。
(5.1.感觉呈现装置100的操作的确认)
在使用根据本公开内容的信息处理系统的情况下，在内容开始之前，可以在感觉呈现装置100连接至操作面板180的连接器182的状态下执行操作确认工作。
在操作确认工作中，作为第一步骤，以确认导电状态等为目的，从感觉呈现装置100的触觉数据呈现部121(致动器)相继生成可听声音，使得确认者用耳朵执行操作确认。此时，可以针对每个触觉数据呈现部121改变可听声音(例如，诸如“1”、“2”、“3”等的识别信息被分配给各个触觉数据生成部221，使得各个识别信息作为可听声音输出到触觉数据呈现部121)。作为第二步骤，为了确认触觉数据呈现部121的故障状态，将诸如100[Hz]的Sin波之类的低可听性的简单波形相继输入至触觉数据呈现部121。例如，在第二步骤处在确认者听到某些异常声音的情况下，估计触觉数据呈现部121受到损坏等。
通过使感觉呈现装置100一个接一个地工作来执行第一步骤和第二步骤处的工作，以使从感觉呈现装置100发出的声音不会彼此混合。例如，确认者在操作操作面板180的开关181以顺序地打开/关闭感觉呈现装置100的同时，在第一步骤和第二步骤处相继进行工作。
要注意的是，可以在针对每个感觉呈现装置100一点一点地移位的同时执行从感觉呈现装置100等产生可听声音，使得确认者可以在无需从一个座位移位动到另一个座位的情况下执行操作确认工作。此外，可以想到这样的处理方式：将诸如“1”、“2”或“3”的识别信息分配给每个感觉呈现装置100，同时将诸如“1”、“2”或“3”的识别信息分配给每个感觉呈现装置100的每个触觉数据生成部221，并且将诸如“1-1”、“1-2”或“1-3”之类的感觉呈现装置100与触觉数据呈现部121的识别信息的组合作为可听声音输出到触觉数据呈现部121。这使得确认者可以在不从操作者可以听到从所有感觉呈现装置100发出的可听声音的位置移动的情况下执行操作确认工作。此外，可听声音的收听工作可以由专用装置执行。此外，可以在每个触觉数据呈现部121中设置加速度传感器，使得当每个触觉数据呈现部121振动时，通过对加速度数据的分析等来进行操作确认。
(5.2.操作者的处理方式)
操作上述控制器260的操作者将被定位在观众席后面(或中间)的控制室中，使得操作者可以远望舞台和观众席，并且响应于预先确定的进度根据表演者在舞台上的移动定时来操作设置在控制器260上的界面，例如触摸面板和物理开关。
通过对控制器260执行的预定操作，可以实时地共同控制与诸如声学、照明、视频或触觉刺激之类的舞台效果有关的装置。例如，操作者可以通过操作设置在控制器260上的滑动条，实时地共同控制从与诸如声学、照明、视频或触觉刺激之类的舞台效果有关的装置输出的舞台效果的强度。例如，如果操作者降低滑动条，则音量降低，并且由触觉数据呈现部121呈现的触觉刺激的强度减小，或者照明变暗。此外，例如，每当操作者按下预定按钮时，内容中的事件切换，并且可以根据与切换之后的事件相关联的程序实时地共同控制与诸如声学、照明、视频或触觉刺激之类的与舞台效果有关的装置。要注意的是，此时，可以将彼此不同的事件分配给不同的按钮。
此外，不仅用户，而且操作者也可以通过穿戴用于声学呈现的耳机和用于触觉呈现的感觉呈现装置100来接收用户正在经历的舞台效果的反馈。要注意的是，可以将执行进度管理的计时员与操作者分开部署在控制室中，以使操作者和计时员共同执行工作。
尽管已经参照附图详细描述了本公开内容的优选实施方式，但是本公开内容的技术范围不限于这种实施方式。显然，具有本公开内容所属的技术领域中的公知常识的人可以在权利要求书中公开的技术思想的范围内构思出各种改变或修改，并且认识到这些改变或修改本质上属于本公开内容的技术范围。
此外，本说明书中描述的有益效果终归是说明性或示例性而非限制性的。特别地，与上述效果一起或者代替上述效果，根据本公开内容的技术可以根据本说明书的描述展示对于本领域技术人员来说明显的其他有益效果。
要注意的是，以下配置也落入本公开内容的技术范围内：
(1)
一种信息处理装置，包括：
生成部，其基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
(2)
根据以上(1)所述的信息处理装置，其中，
所述生成部基于关于所述第一感知特性的信息和关于所述第二感知特性的信息，通过调节到达所述用户的耳朵的所述第一声音与所述第二声音之间的比率来生成所述触觉数据。
(3)
根据以上(2)所述的信息处理装置，其中，
所述生成部基于关于所述第一感知特性的信息和关于所述第二感知特性的信息，通过针对每个频带调节所述比率来生成所述触觉数据。
(4)
根据以上(3)所述的信息处理装置，其中，
所述生成部在所述用户的可听范围内将所述第二声音的声压水平降到低于所述第一声音的声压水平。
(5)
根据以上(3)所述的信息处理装置，其中，
在没有发出所述第一声音的情况下，或者在与所述第一声音对应的频带高于预定值的情况下，所述生成部将与所述第二声音对应的频带调节到可听范围之外，或者将所述第二声音的声压水平调节到低于可听水平的值。
(6)
根据以上(3)所述的信息处理装置，其中，
在与所述第一声音对应的频带高于预定值的情况下，或者在与作为所述第一声音的峰值的声压水平对应的频率和与作为所述第二声音的峰值的声压水平对应的另一频率之间的差大于预定值的情况下，所述生成部降低所述第二声音的比率。
(7)
一种由计算机执行的信息处理方法，所述方法包括：
基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
(8)
一种程序，用于使计算机实现：
基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
[附图标记列表]
100 感觉呈现装置
110 控制部
111 触觉数据处理部
112 声学数据处理部
120 触觉呈现部
121 触觉数据呈现部
130 声音呈现部
131 声学数据呈现部
140 通信部
150 传感器部
160 存储部
200 信息处理装置
210 控制部
220 生成部
221 触觉数据生成部
222 声学数据生成部
223 照明数据生成部
230 通信部
240 显示部
250 存储部
260 控制器
270 音频IF
280 放大器
290 前置扬声器
300 投影仪
310 屏幕
320 灯
330 烟雾生成器
340 风生成器

Claims (8)

1.一种信息处理装置，包括：
生成部，其基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
2.根据权利要求1所述的信息处理装置，其中，
所述生成部基于关于所述第一感知特性的信息和关于所述第二感知特性的信息，通过调节到达所述用户的耳朵的所述第一声音与所述第二声音之间的比率来生成所述触觉数据。
3.根据权利要求2所述的信息处理装置，其中，
所述生成部基于关于所述第一感知特性的信息和关于所述第二感知特性的信息，通过针对每个频带调节所述比率来生成所述触觉数据。
4.根据权利要求3所述的信息处理装置，其中，
所述生成部在所述用户的可听范围内将所述第二声音的声压水平降到低于所述第一声音的声压水平。
5.根据权利要求3所述的信息处理装置，其中，
在没有发出所述第一声音的情况下，或者在与所述第一声音对应的频带高于预定值的情况下，所述生成部将与所述第二声音对应的频带调节到可听范围之外，或者将所述第二声音的声压水平调节到低于可听水平的值。
6.根据权利要求3所述的信息处理装置，其中，
在与所述第一声音对应的频带高于预定值的情况下，或者在与作为所述第一声音的峰值的声压水平对应的频率和与作为所述第二声音的峰值的声压水平对应的另一频率之间的差大于预定值的情况下，所述生成部降低所述第二声音的比率。
7.一种由计算机执行的信息处理方法，所述方法包括：
基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
8.一种程序，用于使计算机实现：
基于关于用户对从声学呈现部发出的第一声音的第一感知特性的信息以及关于所述用户对从触觉数据呈现部呈现的触觉刺激发出的第二声音的第二感知特性的信息，生成要用于呈现发出所述用户无法感知的所述第二声音的所述触觉刺激的触觉数据。
CN201880045010.3A 2017-07-10 2018-07-03 信息处理装置、信息处理方法和程序 Pending CN110915231A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762530455P 2017-07-10 2017-07-10
US62/530,455 2017-07-10
US201762534879P 2017-07-20 2017-07-20
US62/534,879 2017-07-20
PCT/JP2018/025277 WO2019013056A1 (ja) 2017-07-10 2018-07-03 情報処理装置、情報処理方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN110915231A true CN110915231A (zh) 2020-03-24

Family

ID=70153026

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880045010.3A Pending CN110915231A (zh) 2017-07-10 2018-07-03 信息处理装置、信息处理方法和程序

Country Status (5)

Country Link
US (1) US11190874B2 (zh)
EP (1) EP3654666A4 (zh)
JP (1) JP7040527B2 (zh)
CN (1) CN110915231A (zh)
WO (1) WO2019013056A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11887631B2 (en) 2019-11-12 2024-01-30 Sony Group Corporation Information processing device and information processing method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240019153A (ko) * 2021-06-15 2024-02-14 플렉사운드 시스템즈 오와이 음향 및 진동의 재생 제어

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004233463A (ja) * 2003-01-28 2004-08-19 Nec Viewtechnology Ltd ファン騒音低減装置及びファン騒音低減方法
JP2006222826A (ja) * 2005-02-14 2006-08-24 Fujitsu Ltd 通話機能付き携帯情報端末
WO2010093913A1 (en) * 2009-02-12 2010-08-19 Brock Seiler Multi-channel audio vibratory entertainment system
CN102016759A (zh) * 2008-05-09 2011-04-13 皇家飞利浦电子股份有限公司 用于传送情绪的方法和系统
CN103098123A (zh) * 2010-09-08 2013-05-08 雅马哈株式会社 声音掩蔽装置和声音掩蔽方法
DE102013214201A1 (de) * 2013-07-19 2015-01-22 Volkswagen Aktiengesellschaft Verfahren zur Steuerung einer Kraftfahrzeug-Klimaanlage

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6442599U (zh) * 1987-09-02 1989-03-14
US5553148A (en) 1994-06-20 1996-09-03 Werle; Ben Apparatus and method for producing vibratory sensations to accompany audible sounds in a properly phased relationship
JP3561787B2 (ja) 1994-06-30 2004-09-02 和通 藤原 音響振動体感付与方法ならびにその装置
WO2008117002A1 (en) 2007-03-26 2008-10-02 Nds Limited Active fan control
US9019087B2 (en) 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
US20110080273A1 (en) * 2008-06-13 2011-04-07 Waseda University Sensation Presenting System and Sensation Presenting Device
US8716940B2 (en) 2009-10-01 2014-05-06 Production Resource Group, Llc Sound adaptive cooling system for a stage light
WO2013136133A1 (en) * 2012-03-15 2013-09-19 Nokia Corporation A tactile apparatus link
US9098984B2 (en) 2013-03-14 2015-08-04 Immersion Corporation Haptic effects broadcasting during a group event
JP2015185137A (ja) * 2014-03-26 2015-10-22 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR101641418B1 (ko) * 2014-07-25 2016-07-20 포항공과대학교 산학협력단 청각 주목도에 기반한 햅틱 신호 생성 방법 및 이를 위한 장치
JP2017182496A (ja) * 2016-03-30 2017-10-05 ソニー株式会社 制御装置、制御方法およびプログラム
US10649529B1 (en) * 2016-06-28 2020-05-12 Apple Inc. Modification of user-perceived feedback of an input device using acoustic or haptic output
KR102427212B1 (ko) * 2016-07-07 2022-07-29 소니그룹주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
US10699538B2 (en) * 2016-07-27 2020-06-30 Neosensory, Inc. Method and system for determining and providing sensory experiences
US10713908B2 (en) * 2016-09-30 2020-07-14 Sony Corporation Content providing system, control apparatus, and reception apparatus
JP2018060313A (ja) 2016-10-04 2018-04-12 ソニー株式会社 受信装置および方法、送信装置および方法、並びにプログラム
CN106774891A (zh) 2016-12-15 2017-05-31 北京小鸟看看科技有限公司 虚拟现实场景的音效产生方法、设备及虚拟现实设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004233463A (ja) * 2003-01-28 2004-08-19 Nec Viewtechnology Ltd ファン騒音低減装置及びファン騒音低減方法
JP2006222826A (ja) * 2005-02-14 2006-08-24 Fujitsu Ltd 通話機能付き携帯情報端末
CN102016759A (zh) * 2008-05-09 2011-04-13 皇家飞利浦电子股份有限公司 用于传送情绪的方法和系统
WO2010093913A1 (en) * 2009-02-12 2010-08-19 Brock Seiler Multi-channel audio vibratory entertainment system
CN103098123A (zh) * 2010-09-08 2013-05-08 雅马哈株式会社 声音掩蔽装置和声音掩蔽方法
DE102013214201A1 (de) * 2013-07-19 2015-01-22 Volkswagen Aktiengesellschaft Verfahren zur Steuerung einer Kraftfahrzeug-Klimaanlage

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11887631B2 (en) 2019-11-12 2024-01-30 Sony Group Corporation Information processing device and information processing method

Also Published As

Publication number Publication date
US20210152931A1 (en) 2021-05-20
JPWO2019013056A1 (ja) 2020-05-07
JP7040527B2 (ja) 2022-03-23
EP3654666A1 (en) 2020-05-20
EP3654666A4 (en) 2020-05-27
WO2019013056A1 (ja) 2019-01-17
US11190874B2 (en) 2021-11-30

Similar Documents

Publication Publication Date Title
US20220117350A1 (en) Vibrating footwear device and entertainment system for use therewith
JP6835070B2 (ja) システム、端末装置、方法及び記録媒体
US11334226B2 (en) Information processing device, information processing method, and program
CN110915231A (zh) 信息处理装置、信息处理方法和程序
CN110892734B (zh) 信息处理装置、信息处理方法和存储介质
WO2020235307A1 (ja) コンテンツ提供システム、出力装置、及び情報処理方法
JPWO2018079850A1 (ja) 信号処理装置、信号処理方法およびプログラム
US20210262680A1 (en) Personal environmental control system and method
JP2020103782A (ja) 空間提供システム
JP6523038B2 (ja) 感覚提示装置
JPWO2018190099A1 (ja) 音声提供装置、音声提供方法及びプログラム
Johansen et al. Mapping auditory percepts into visual interfaces for hearing impaired users
WO2019187527A1 (ja) 情報処理装置、情報処理方法、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200324