JP7040527B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP7040527B2
JP7040527B2 JP2019529076A JP2019529076A JP7040527B2 JP 7040527 B2 JP7040527 B2 JP 7040527B2 JP 2019529076 A JP2019529076 A JP 2019529076A JP 2019529076 A JP2019529076 A JP 2019529076A JP 7040527 B2 JP7040527 B2 JP 7040527B2
Authority
JP
Japan
Prior art keywords
sound
user
tactile
information processing
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019529076A
Other languages
English (en)
Other versions
JPWO2019013056A1 (ja
Inventor
諒 横山
鎮 伊藤
郁男 山野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2019013056A1 publication Critical patent/JPWO2019013056A1/ja
Application granted granted Critical
Publication of JP7040527B2 publication Critical patent/JP7040527B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R27/00—Public address systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63G—MERRY-GO-ROUNDS; SWINGS; ROCKING-HORSES; CHUTES; SWITCHBACKS; SIMILAR DEVICES FOR PUBLIC AMUSEMENT
    • A63G31/00—Amusement arrangements
    • A63G31/16—Amusement arrangements creating illusions of travel
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J25/00—Equipment specially adapted for cinemas
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63J—DEVICES FOR THEATRES, CIRCUSES, OR THE LIKE; CONJURING APPLIANCES OR THE LIKE
    • A63J5/00—Auxiliaries for producing special effects on stages, or in circuses or arenas
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
    • H04R1/028—Casings; Cabinets ; Supports therefor; Mountings therein associated with devices performing functions other than acoustics, e.g. electric candles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/002—Damping circuit arrangements for transducers, e.g. motional feedback circuits
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B06—GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS IN GENERAL
    • B06B—METHODS OR APPARATUS FOR GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS OF INFRASONIC, SONIC, OR ULTRASONIC FREQUENCY, e.g. FOR PERFORMING MECHANICAL WORK IN GENERAL
    • B06B1/00—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency
    • B06B1/02—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy
    • B06B1/04—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy operating with electromagnetism
    • B06B1/045—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy operating with electromagnetism using vibrating magnet, armature or coil system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/02—Details casings, cabinets or mounting therein for transducers covered by H04R1/02 but not provided for in any of its subgroups
    • H04R2201/023—Transducers incorporated in garment, rucksacks or the like
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2400/00—Loudspeakers
    • H04R2400/03—Transducers capable of generating both sound as well as tactile vibration, e.g. as used in cellular phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/05—Noise reduction with a separate noise microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Circuit For Audible Band Transducer (AREA)

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関する。
従来、例えば以下の特許文献１のように触覚刺激などをユーザに提示するための技術が各種提案されている。
特開２０１８－６０３１３号公報
ここで例えば、演劇、映画、コンサート、またはライブなどを含む各種コンテンツの提供に伴い、アクチュエータなどを備えた触覚データ提示部から触覚刺激がユーザに提示されることで臨場感などを向上させる演出が行われる場合がある。このとき、ユーザが、触覚刺激によって発せられる音（第２の音）を知覚することで違和感を受ける可能性がある。上記の特許文献１に記載の技術などによっては、触覚刺激によって発せられる音（第２の音）がユーザに知覚されることを適切に防ぐことができなかった。
そこで、本開示では、触覚刺激によって発せられる音（第２の音）がユーザに知覚されることを適切に防ぐことが可能な新規かつ改良された情報処理装置、情報処理方法、およびプログラムを提案する。
本開示によれば、音響提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成する生成部を備える、情報処理装置が提供される。
また、本開示によれば、音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成することを有する、コンピュータにより実行される情報処理方法が提供される。
また、本開示によれば、音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成すること、をコンピュータに実現させるためのプログラムが提供される。
以上説明したように本開示によれば、触覚刺激によって発せられる音（第２の音）がユーザに知覚されることを適切に防ぐことが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
感覚提示デバイス１００の具体例を示す図である。 感覚提示デバイス１００の具体例を示す図である。 本開示に係る情報処理システムの構成例を示す図である。 第２の音がユーザに知覚されないように、触覚データを生成する手法を説明するための図である。 第２の音がユーザに知覚されないように、触覚データを生成する手法を説明するための図である。 情報処理装置２００の機能構成例を示すブロック図である。 第２の音がユーザに知覚されないように、触覚データを生成する手法を説明するための図である。 第２の音がユーザに知覚されないように、触覚データを生成する手法を説明するための図である。 第２の音がユーザに知覚されないように、触覚データを生成する手法を説明するための図である。 感覚提示デバイス１００の機能構成例を示すブロック図である。 触覚データの生成処理の流れの例を示すフローチャートである。 アウターベストについて説明する図である。 インナーベストについて説明する図である。 触覚データ提示部１２１の固定態様について説明する図である。 追加の触覚データ提示部１２１の装着態様について説明する図である。 ユーザが感覚提示デバイス１００を装着した状態で座席に座っている様子を示す図である。 操作パネル１８０について説明する図である。 情報処理装置２００のハードウェア構成例を示すブロック図である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
なお、説明は以下の順序で行うものとする。
１．情報処理システムの概要
２．装置の機能構成例
３．装置の処理フロー例
４．ハードウェア構成例
５．備考
＜１．情報処理システムの概要＞
まず、本開示に係る情報処理システムの概要について説明する。
本開示に係る情報処理システムは、ユーザに様々な感覚を提示するものである。より具体的に説明すると、図１に示すように、情報処理システムは、ユーザに装着される感覚提示デバイス１００を備えており、当該感覚提示デバイス１００を介してユーザに対して様々な感覚を提示する。
図１に示すように、感覚提示デバイス１００は、内部に複数の触覚データ提示部１２１（図中では、触覚データ提示部１２１ａ～触覚データ提示部１２１ｈ）を備える。例えば、感覚提示デバイス１００の内部において、ユーザの正面側に複数個（例えば、図１に示すように６個（触覚データ提示部１２１ａ～触覚データ提示部１２１ｆ））、肩部に複数個（例えば、図１に示すように各肩に１個ずつ（触覚データ提示部１２１ｇおよび触覚データ提示部１２１ｈ））、および背面側に複数個（図示なし。例えば、正面側と同様に６個）触覚データ提示部１２１が配置され得る。一例として、正面側に配置されている個々の触覚データ提示部１２１と、背面側に配置されている個々の触覚データ提示部１２１とが向かい合うような位置関係で、個々の触覚データ提示部１２１は配置され得る。
感覚提示デバイス１００は、１以上の触覚データ提示部１２１を備え、これらの出力の大きさやタイミング、または出力させる触覚データ提示部１２１の組合せを制御することによって様々な触覚刺激をユーザに提示することができる。例えば、感覚提示デバイス１００は、ユーザが切られる感覚、ユーザが何らかの物体に当たる感覚、ユーザが押さえつけられる感覚などを提示することができる。なお、図１では、感覚提示デバイス１００が袖なしの服（ベスト）である例を示しているが、かかる例に限定されず、感覚提示デバイス１００は、袖やズボンも有することで体の各所に感覚を提示できてもよい。また、感覚提示デバイス１００に備えられる触覚データ提示部１２１の数は特に限定されない。
また、図２に示すように、感覚提示デバイス１００は、音を提示する音響データ提示部１３１（図中では、音響データ提示部１３１ａおよび音響データ提示部１３１ｂ）を備えていてもよい。例えば、感覚提示デバイス１００には、ユーザの肩部に複数個（例えば、図２に示すように各肩に１個ずつ）音響データ提示部１３１が配置され得る。
感覚提示デバイス１００は、１以上の音響データ提示部１３１を備え、これらの出力の大きさやタイミングなどを制御することによって様々な音響効果をユーザに対して提示することができる。例えば、感覚提示デバイス１００は、音像を空間に定位させることができたり、別のスピーカからＢＧＭが提示されている状況においてユーザだけに効果音（例えば、ユーザが切られた時の効果音や、ユーザが何らかの物体に当たった時の効果音など）を提示できたりする。なお、感覚提示デバイス１００に備えられる音響データ提示部１３１の数は特に限定されない。
ここで、図１および図２の例では、感覚提示デバイス１００によってユーザに提示される感覚が、触覚（触覚データ提示部１２１によって提示される触覚刺激）または聴覚（音響データ提示部１３１によって提示される音）を含む旨を示したが、ユーザに提示される感覚はこれらに限定されない。より具体的には、感覚提示デバイス１００は、視覚、嗅覚、または味覚を提示可能な機構を備えていてもよい。例えば、感覚提示デバイス１００は、透過型ヘッドマウントディスプレイなどのように視覚（映像）を提示できてもよいし、芳香提示装置などのように嗅覚（匂い）を提示できてもよいし、電気味覚提示装置などのように味覚（味）を提示できてもよい。
続いて、図３を参照して、感覚提示デバイス１００を含むシステム全体の構成例について説明する。本開示に係る情報処理システムは、例えば、屋内（例えば、劇場、映画館、コンサートホール、ライブハウス、またはテーマパーク内の屋内遊戯施設など）、屋外（例えば、屋外にステージが設けられた劇場、コンサート会場やライブ会場、屋外にスクリーンが設けられた映画上映会場、またはテーマパーク内の屋外遊戯施設など）を問わず利用され得るシステムである。そして、図３に示すように、本開示に係る情報処理システムは、感覚提示デバイス１００と、情報処理装置２００と、コントローラ２６０と、オーディオＩＦ２７０と、アンプ２８０と、フロントスピーカ２９０と、プロジェクタ３００と、スクリーン３１０と、ライト３２０と、煙発生器３３０と、風発生器３４０と、を備える（なお、図３に示す情報処理システムは、屋内で利用される場合を想定したものである）。
ユーザは、感覚提示デバイス１００を装着し、スクリーン３１０やステージを視認可能な態様で座席に座る。情報処理装置２００は、情報処理システム全体を統括的に制御する装置である。より具体的には、情報処理装置２００は、感覚提示デバイス１００を介してユーザに提示される感覚、スクリーン３１０に投影される映像、フロントスピーカ２９０から発せられる音、ライト３２０から照射される光、煙発生器３３０から発せられる煙、風発生器３４０から発せられる風などを統括的に制御する。情報処理装置２００の機能については後段にて詳述する。コントローラ２６０は、操作者が情報処理装置２００に対して入力を行う際に使用される装置である。
オーディオＩＦ２７０は、感覚提示デバイス１００を介する音の提示に使用される音響データのインタフェースとして機能する装置である。アンプ２８０は、オーディオＩＦ２７０に入力された音響データの増幅、調整または入力の切り替えなどを行う装置である。フロントスピーカ２９０は、音響提示部として機能する装置であり、会場全体に対して音（第１の音）を提示する装置である。
プロジェクタ３００は、スクリーン３１０に対して映像を投影する装置であり、スクリーン３１０は、映像が投影される面（例えば平面や曲面）である。ライト３２０は光を、煙発生器３３０は煙を、風発生器３４０は風を、それぞれ提示する装置である。
以上、本開示に係る情報処理システムの構成例について説明した。なお、図３を参照して説明した上記の構成はあくまで一例であり、本開示に係る情報処理システムの構成は係る例に限定されない。例えば、情報処理システムを構成する各装置の台数は特に限定されない。本開示に係る情報処理システムの構成は、仕様や運用に応じて柔軟に変形可能である。
ここで、本開示に係る情報処理システムのように、演劇、映画、コンサート、またはライブなどを含む各種コンテンツの提供に伴い、感覚提示デバイス１００の触覚データ提示部１２１から触覚刺激がユーザに提示される場合、ユーザが、触覚刺激によって発せられる音（第２の音）を知覚することで違和感を受ける可能性がある。より具体的には、触覚刺激によって発せられる音（第２の音）が雑音としてユーザに知覚されることで、ユーザがフロントスピーカ２９０から提示される音（第１の音）を聞き取りにくくなったり、臨場感が阻害されたりする。また、触覚刺激を提示されるユーザだけでなく、触覚刺激を提示されないユーザ（感覚提示デバイス１００を装着していないユーザ）も、付近に位置する他人に提示される触覚刺激によって発せられる音（第２の音）を知覚することで上記と同様に違和感を受ける可能性がある。
本件の開示者は、上記事情に鑑みて本開示に係る技術を創作するに至った。本開示に係る情報処理装置２００は、フロントスピーカ２９０（音響提示部）から発せられる第１の音に対するユーザの第１の知覚特性に関する情報（以降、「第１の知覚特性情報」と呼称する）、および感覚提示デバイス１００の触覚データ提示部１２１から提示される触覚刺激によって発せられる第２の音に対するユーザの第２の知覚特性に関する情報（以降、「第２の知覚特性情報」と呼称する）に基づいて、ユーザに知覚されない第２の音を発する触覚刺激の提示に用いられる触覚データを生成する。
ここで、「第１の知覚特性情報」とは、ユーザによる第１の音の知覚の有無または知覚の程度などを示す情報であり、第１の音がユーザの耳に達したときの第１の音の周波数特性情報を含むものである。また、「第２の知覚特性情報」とは、ユーザによる第２の音の知覚の有無または知覚の程度などを示す情報であり、第２の音がユーザの耳に達したときの第２の音の周波数特性情報を含むものである。第１の知覚特性情報および第２の知覚特性情報の具体例については後述する。また、上記では、第１の音がフロントスピーカ２９０から発せられた音である旨を説明したところ、第１の音はこれに限定されない。例えば、第１の音は、感覚提示デバイス１００の音響データ提示部１３１から発せられる音も含まれるし、フロントスピーカ２９０や音響データ提示部１３１以外にも任意のスピーカなどが存在する場合には当該スピーカから発せられる音も含まれる。
そして、情報処理装置２００は、このように生成した触覚データを感覚提示デバイス１００に提供することによって、感覚提示デバイス１００の触覚データ提示部１２１は、当該触覚データを用いて、ユーザに知覚されない第２の音を発する触覚刺激を提示することができる。そのため、触覚刺激を提示されるユーザ、および当該ユーザ付近に位置する触覚刺激を提示されないユーザが第２の音を知覚して違和感を受けることが防止される。すなわち、本書において「ユーザ」とは、触覚刺激を提示されるユーザだけでなく触覚刺激を提示されないユーザをも含む概念である点に留意されたい。
触覚データの生成方法について説明すると、情報処理装置２００は、第１の知覚特性情報および第２の知覚特性情報に基づいて、ユーザの耳に達する第１の音と第２の音の割合を調整することで触覚データを生成する。例えば、情報処理装置２００は、当該割合を周波数帯域ごとに調整することで触覚データを生成する。ここで、「第１の音と第２の音の割合」とはＳＮ比（Signal-Noise ratio）と表現されてもよい（なお、ＳＮ比に限定されるわけではない）。この場合、“Ｓ（Signal）”がフロントスピーカ２９０から提示される第１の音の信号を指し、“Ｎ（Noise）”が触覚刺激によって発せられる第２の音の信号を指す。例えば、情報処理装置２００は、第１の知覚特性情報および第２の知覚特性情報に基づいて、第１の音と第２の音の割合（ＳＮ比）を事前に調整したり、リアルタイムに調整したりする。
第１の音と第２の音の割合（ＳＮ比）の調整方法についてより具体的に説明すると、例えば、情報処理装置２００は、ユーザの可聴領域において、第２の音の音圧レベルを第１の音の音圧レベルよりも小さくするように触覚データを生成することができる（換言するとユーザの可聴領域外においては、情報処理装置２００は、第２の音の音圧レベルを第１の音の音圧レベルよりも小さくしなくてもよい）。
例えば、第１の知覚特性情報に含まれる、第１の音がユーザの耳に達したときの第１の音の周波数特性情報が、図４のＡに示すような波形１を有している場合について考える。そして、情報処理装置２００は、図４のＢに示すように、ユーザの可聴領域における周波数帯域ごとに、第２の音の音圧レベルを第１の音の音圧レベルよりも小さくするよう調整する（図４のＢにおける波形２は、第２の音の音圧レベルを示す）。これによって、情報処理装置２００は、第２の音がユーザに知覚されることを防ぐことができる。
また、フロントスピーカ２９０から第１の音が発せられていない場合、または第１の音に対応する周波数帯域が所定値より高い場合において、情報処理装置２００は、第２の音に対応する周波数帯域を可聴領域外に調整したり、第２の音の音圧レベルを可聴レベルよりも小さい値に調整したりすることができる。ここで、「フロントスピーカ２９０から第１の音が発せられていない場合」とは、フロントスピーカ２９０から第１の音が全く発せられていない場合だけでなく、第１の音が微弱である場合も含む概念である点に留意されたい。また、「第１の音に対応する周波数帯域」とは、第１の音がユーザの知覚に影響を及ぼす程度に高い音圧レベル（所定値以上の音圧レベル）を有している周波数帯域であり、第１の音がユーザの知覚に影響を及ぼさないほどに低い音圧レベルを有している周波数帯域は除外され得る点に留意されたい。さらに「第１の音に対応する周波数帯域が所定値より高い場合」における「所定値」とは、少なくとも第２の音に対応する周波数帯域以上の周波数であり、上記のように第２の音の音圧レベルを第１の音の音圧レベルよりも小さくすることで第２の音がユーザに知覚されないようにするという対応をとることが困難な周波数であることを想定している（なお、これに限定されない）。
例えば、第１の知覚特性情報に含まれる、第１の音がユーザの耳に達したときの第１の音の周波数特性情報が、図５のＡに示すような波形１を有している場合について考える。この場合、第１の音に対応する周波数帯域が所定値（この図では５００［Hz］）より高いため、情報処理装置２００は、図５のＢに示すように、第２の音に対応する周波数帯域を可聴領域外（この図では２００［Hz］以下）に調整する。これによって、上記のように第２の音の音圧レベルを第１の音の音圧レベルよりも小さくすることで第２の音がユーザに知覚されないようにするという対応をとることが困難な場合であっても、情報処理装置２００は、第２の音がユーザに知覚されることを防ぐことができる。なお、図４のＢおよび図５のＢの態様を比較すると、図４のＢの方がより多様な触覚刺激をユーザに提示することができるため、より好ましいと言える。
さらに、第１の音に対応する周波数帯域が第２の音に対応する周波数帯域よりも十分大きい場合、情報処理装置２００は、第２の音の割合を低減させることで第２の音がユーザに知覚されない（知覚されにくい）ようにしてもよい。例えば、フロントスピーカ２９０から高い周波数帯域の音が相当程度の音量で発せられている場合、情報処理装置２００は、第２の音の割合を低減させるだけで第２の音をユーザに知覚されない（知覚されにくい）ようにすることができる。なお、「第１の音に対応する周波数帯域が第２の音に対応する周波数帯域よりも十分大きい場合」とは、「第１の音に対応する周波数帯域が所定値より高い場合」、または「第１の音のピークとなる音圧レベルに対応する周波数と第２の音のピークとなる音圧レベルに対応する周波数の差が所定値より大きい場合」とも換言され得る点に留意されたい（なお、これら「所定値」は上記で説明したものとは異なる）。
＜２．装置の機能構成例＞
上記では、本開示に係る情報処理システムの概要について説明した。続いて、本開示に係る情報処理システムにおける情報処理装置２００および感覚提示デバイス１００の機能構成例について説明する。
（２．１．情報処理装置２００の機能構成例）
まず、図６を参照して、情報処理装置２００の機能構成例について説明する。図６に示すように、情報処理装置２００は、制御部２１０と、生成部２２０と、通信部２３０と、表示部２４０と、記憶部２５０と、を備え、通信部２３０を介して外部のコントローラ２６０と接続されている。
（制御部２１０）
制御部２１０は、情報処理装置２００の各機能構成を統括的に制御する機能構成である。例えば、制御部２１０は、コントローラ２６０からの入力に基づいて各機能構成の起動や停止を制御したり、感覚提示デバイス１００によってユーザに対して提示される感覚の内容など（例えば、触覚データ提示部１２１によって提示される触覚刺激の内容、タイミングおよび強さ、音響データ提示部１３１によって提示される第２の音の内容、タイミングおよびボリュームなど）を指定したりすることができる。また、制御部２１０は、各種制御信号を生成することによって、情報処理システムにおける情報処理装置２００以外の装置を制御することができる。なお、制御部２１０の制御内容はこれらに限定されない。例えば、制御部２１０は、汎用コンピュータ、ＰＣ（Personal Computer）、タブレットＰＣまたはスマートフォンなどにおいて一般的に行われる処理（例えば、ＯＳ（Operating System）の処理など）を実現してもよい。
（生成部２２０）
生成部２２０は、情報処理システムによって使用される各種データを生成する機能構成である。より具体的には、生成部２２０は、触覚刺激、音、光、映像、煙、および風の提示に使用されるデータを生成する機能構成である。なお、触覚刺激、音および光の提示に使用されるデータの生成については後述する。生成部２２０は、制御部２１０による制御に基づいて映像、煙、および風の提示に使用されるデータを随時生成し、プロジェクタ３００、煙発生器３３０、および風発生器３４０が接続されているネットワークを介してそれぞれの装置に対して生成したデータを提供する。また、図６に示すように、生成部２２０は、触覚データ生成部２２１と、音響データ生成部２２２と、照明データ生成部２２３と、を備える。
（触覚データ生成部２２１）
触覚データ生成部２２１は、感覚提示デバイス１００の触覚データ提示部１２１による触覚刺激の提示に使用される触覚データを生成する機能構成である。より具体的に説明すると、触覚データ生成部２２１は、ユーザに提供されるコンテンツについての第１の知覚特性情報および第２の知覚特性情報を取得する。なお、これらの情報の取得元は特に限定されない。例えば、第１の知覚特性情報および第２の知覚特性情報は、過去に当該コンテンツを鑑賞したユーザから取得された情報であってもよいし、現在当該コンテンツを鑑賞中のユーザから取得された情報（コンテンツの終了分についての情報）であってもよい。また、第１の知覚特性情報および第２の知覚特性情報は、当該コンテンツと類似する他のコンテンツについて取得された情報であってもよい。第１の知覚特性情報および第２の知覚特性情報は、例えば、各座席に着席した状態で当該コンテンツを鑑賞した（または現在視聴している）各ユーザの耳に装着されたセンサなどによって取得され得る。また、第１の知覚特性情報および第２の知覚特性情報はユーザの位置（または座席）に基づいて推定されてもよい。
そして、触覚データ生成部２２１は、第１の知覚特性情報および第２の知覚特性情報に基づいて、ユーザの耳に達する第１の音と第２の音の割合（ＳＮ比）を調整することで触覚データを生成する。例えば上記のとおり、触覚データ生成部２２１は、ユーザの可聴領域において、第２の音の音圧レベルを第１の音の音圧レベルよりも小さくするように触覚データを生成することができる。
ここで図７および図８に示す、より詳細な具体例を用いて説明する。例えば、第１の知覚特性情報に含まれる第１の音の波形１が、時間の経過に伴って図７の（１）～（３）の順に変化し、第２の知覚特性情報に含まれる第２の音の波形２が時間の経過に伴って図７の（４）～（６）の順に変化する場合について考える。この場合、触覚データ生成部２２１が触覚データを調整することなくそのまま触覚刺激の提示に使用した場合、図８のＡに示すように、ユーザの可聴領域において、ユーザの耳に達する第２の音の音圧レベルが第１の音の音圧レベルよりも高い波長帯域が発生する場合がある（図８のＡには、図７の（３）と（６）が比較された場合のグラフが示されている）。したがって、ユーザは、第２の音を知覚してしまい違和感を受けることになる。
そこで、触覚データ生成部２２１は、各タイミングにおける第２の音の波形２を図７の（４）’～（６）’のように調整する。これによって、図８のＢに示すように、ユーザの可聴領域において、ユーザの耳に達する第２の音の音圧レベルが第１の音の音圧レベルよりも低くなる（図８のＢには、図７の（３）と（６）’が比較された場合のグラフが示されている）。したがって、ユーザは、第２の音を知覚しなくなるため違和感を受けない。
また、フロントスピーカ２９０から第１の音が発せられていない場合、または第１の音に対応する周波数帯域が所定値より高い場合、上記のとおり触覚データ生成部２２１は、第２の音に対応する周波数帯域を可聴領域外に調整するか、または第２の音の音圧レベルを可聴レベルよりも小さい値に調整することができる。
ここで図９に示す、より詳細な具体例を用いて説明する。フロントスピーカ２９０から第１の音が発せられておらず、第２の知覚特性情報に含まれる第２の音の波形２が時間の経過に伴って図９の（４）～（６）の順に変化する場合について考える。この場合、ユーザの可聴領域において第２の音の音圧レベルが可聴レベル（この例では、２５［dB］）以上であるため、ユーザは、第２の音を知覚してしまい違和感を受けることになる。
そこで、触覚データ生成部２２１は、図９の（４）’～（６）’のように各タイミングにおける第２の音の音圧レベルを可聴レベルよりも小さい値に調整する。これによって、ユーザは、第２の音を知覚しなくなるため違和感を受けない。
また、上記のとおり、第１の音に対応する周波数帯域が第２の音に対応する周波数帯域よりも十分大きい場合、触覚データ生成部２２１は、第２の音の割合を低減させることで第２の音がユーザに知覚されない（知覚されにくい）ようにしてもよい。
なお、触覚データ生成部２２１は、任意の波形調整技術や音圧調整技術（専用のソフトウェアなど）を用いて上記の調整を行うことができる。なお、使用される波形調整技術や音圧調整技術の種類は特に限定されない。
（音響データ生成部２２２）
音響データ生成部２２２は、制御部２１０による制御に基づいて、フロントスピーカ２９０、および感覚提示デバイス１００の音響データ提示部１３１による第１の音の提示に使用される音響データを生成する機能構成である。音響データ生成部２２２は、所定のネットワークを介して音響データをフロントスピーカ２９０および感覚提示デバイス１００に提供する。
（照明データ生成部２２３）
照明データ生成部２２３は、制御部２１０による制御に基づいて、ライト３２０による光（照明）の提示に使用される照明データを生成する機能構成である。照明データ生成部２２３は、所定のネットワークを介して照明データをライト３２０に提供する。
（通信部２３０）
通信部２３０は、外部装置との通信を行う機能構成である。例えば、情報処理装置２００の操作者がコントローラ２６０を用いて入力を行った場合、通信部２３０は、コントローラ２６０から入力データを受信し、当該入力データを制御部２１０に提供することで操作者による入力の反映を実現する。また、通信部２３０は、生成部２２０によって生成されたデータ（例えば、触覚データや音響データなどを含む）を所定の外部装置へ送信することによって、触覚刺激、音、映像、照明、煙、および風などの提示を実現する。なお、通信部２３０によって通信されるデータはこれらに限定されない。例えば、通信部２３０は、第１の知覚特性情報および第２の知覚特性情報を感覚提示デバイス１００などから受信してもよい。また、通信部２３０と各外部装置との通信に用いられる通信方式および通信回線の種類は特に限定されない。例えば、通信部２３０は、各外部装置と有線による通信を行ってもよいし、無線による通信を行ってもよい。
（表示部２４０）
表示部２４０は、操作者による入力に用いられる設定画面などを表示する機能構成である。この表示部２４０は、例えば、液晶ディスプレイ（ＬＣＤ：Liquid Crystal
Display）、有機ＥＬ（Electro Luminescence）ディスプレイなどの表示装置であってもよい。なお、表示部２４０の種類および表示内容はこれらに限定されない。
（記憶部２５０）
記憶部２５０は、各種データを記憶する機能構成である。例えば、記憶部２５０は、情報処理装置２００の各機能構成によって使用されるプログラムやパラメータ、または各機能構成によって生成されたデータなど（例えば、触覚データ、音響データ、または照明データなど）を記憶する。なお、記憶部２５０が記憶するデータの内容はこれらに限定されない。
（コントローラ２６０）
コントローラ２６０は、操作者による入力を受け、入力データを情報処理装置２００に提供する装置である。コントローラ２６０は、キーボード、マウス、ボタン、スイッチ、レバー、タッチセンサ、圧力センサ、または近接センサなどの各種入力機構を備えることで操作者による入力を受けることができる。なお、コントローラ２６０が備える入力機構の種類はこれらに限定されない。また、コントローラ２６０は、情報処理装置２００の外部装置として設けられるのではなく、情報処理装置２００内に備えられてもよい。
以上、情報処理装置２００の機能構成例およびコントローラ２６０について説明した。なお、図６を用いて説明した上記の機能構成はあくまで一例であり、情報処理装置２００の機能構成は係る例に限定されない。例えば、情報処理装置２００は、図６に示す機能構成の全てを必ずしも備えなくてもよく、情報処理装置２００の機能構成の全部または一部は感覚提示デバイス１００などの外部装置に備えられてもよい。また、情報処理装置２００の機能構成は、仕様や運用に応じて柔軟に変形可能である。
（２．２．感覚提示デバイス１００の機能構成例）
上記では、情報処理装置２００の機能構成例について説明した。続いて、図１０を参照して、感覚提示デバイス１００の機能構成例について説明する。図１０に示すように、感覚提示デバイス１００は、制御部１１０と、触覚提示部１２０と、音提示部１３０と、通信部１４０と、センサ部１５０と、記憶部１６０と、を備える。
（制御部１１０）
制御部１１０は、感覚提示デバイス１００の各機能構成を統括的に制御する機能構成である。例えば、制御部１１０は、情報処理装置２００から提供される各種データ（例えば、触覚データ、音響データ、およびその他の制御信号などを含む）に基づいて各機能構成の起動や停止を制御する。なお、制御部１１０の制御内容はこれに限定されない。例えば、制御部１１０は、汎用コンピュータ、ＰＣ、タブレットＰＣまたはスマートフォンなどにおいて一般的に行われる処理（例えば、ＯＳの処理など）を実現してもよい。また、図１０に示すように、制御部１１０は、触覚データ処理部１１１と、音響データ処理部１１２と、を備える。
（触覚データ処理部１１１）
触覚データ処理部１１１は、情報処理装置２００から提供される触覚データを用いて、触覚データ提示部１２１による触覚刺激の提示に関する処理を行う。例えば、触覚データ処理部１１１は、感覚提示デバイス１００個別の設定（例えば、ユーザが独自に行った感覚提示デバイス１００の設定など（例えば、ボリュームの設定や、機能のON／OFFの設定など））に基づいて、情報処理装置２００から提供された触覚データを編集し、編集後の触覚データを触覚データ提示部１２１に提供することで触覚刺激の提示を実現してもよい。
（音響データ処理部１１２）
音響データ処理部１１２は、情報処理装置２００から提供される音響データを用いて、音響データ提示部１３１による第１の音の提示に関する処理を行う。例えば、音響データ処理部１１２は、感覚提示デバイス１００個別の設定（例えば、ユーザが独自に行った感覚提示デバイス１００の設定など（例えば、ボリュームの設定や、機能のON／OFFの設定など））に基づいて、情報処理装置２００から提供された音響データを編集し、編集後の音響データを音響データ提示部１３１に提供することで第１の音の提示を実現してもよい。
（触覚提示部１２０）
触覚提示部１２０は、１以上の触覚データ提示部１２１を備え、触覚データ提示部１２１を用いてユーザに対して触覚刺激を提示する機能構成である。
（触覚データ提示部１２１）
触覚データ提示部１２１は、触覚データ処理部１１１から提供される触覚データを用いてユーザに対して触覚刺激を提示する機能構成である。例えば、触覚データ提示部１２１は、振動を提示するアクチュエータ（例えば、ＥＲＭ（偏心モータ）、ＬＲＡ（リニア共振アクチュエータ）、またはＶＣＭ（ボイスコイルモータ）など）であってもよいし、力覚を提示する電気素子であってもよいし、温度感覚を提示する温度変化素子（例えば、ペルチェ素子等）であってもよい。換言すると「触覚刺激」には、振動、力覚、または温度感覚などが含まれ得る。なお、触覚データ提示部１２１が提示する触覚刺激はこれらに限定されない。また、各触覚データ提示部１２１（図中では、少なくとも触覚データ提示部１２１ａ～触覚データ提示部１２１ｃ）にチャンネルが割り当てられ、チャンネル毎に互いに異なる触覚刺激の提示が行われてもよい。
（音提示部１３０）
音提示部１３０は、１以上の音響データ提示部１３１を備え、音響データ提示部１３１を用いてユーザに対して第１の音を提示する機能構成である。
（音響データ提示部１３１）
音響データ提示部１３１は、音響データ処理部１１２から提供される音響データを用いてユーザに対して第１の音を提示する機能構成である。例えば、音響データ提示部１３１は、音響データを再生するスピーカと、スピーカに対するアンプ回路などを有し得る。また、複数の音響データ提示部１３１（図中では、少なくとも音響データ提示部１３１ａ～音響データ提示部１３１ｃ）が備えられ、各音響データ提示部１３１の出力が調整されることによって音像の定位が実現されてもよい。その際、音響データ提示部１３１と周囲に備えられるスピーカ（例えば、座席に備えられるスピーカなど）との連携が行われることで音像が定位されてもよい。なお、各音響データ提示部１３１にチャンネルが割り当てられ、チャンネル毎に互いに異なる音の提示が行われてもよい。
（通信部１４０）
通信部１４０は、外部装置との通信を行う機能構成である。例えば、通信部１４０は、情報処理装置２００によって生成された各種データ（例えば、触覚データ、音響データ、およびその他の制御信号などを含む）を受信する。なお、通信部１４０によって通信されるデータはこれらに限定されない。また、通信部１４０と外部装置との通信に用いられる通信方式および通信回線の種類は特に限定されない。例えば、通信部１４０は、外部装置と有線による通信を行ってもよいし、無線による通信を行ってもよい。
（センサ部１５０）
センサ部１５０は、各種センサを備えており、これらのセンサによって生成されたセンサデータを取得する機能構成である。例えば、センサ部１５０は、位置センサ（例えば、GNSS（Global Navigation Satellite System）受信機や近接センサなどを含む、ユーザの位置特定に使用され得るセンサ）を備えることで、ユーザの位置特定に使用されるセンサデータを取得してもよい。当該センサデータを用いた解析によりユーザの位置が特定されることで、上記のとおりユーザの位置に基づいて第１の知覚特性情報および第２の知覚特性情報が推定され得る。なお、センサ部１５０が備えるセンサの種類は特に限定されない。例えば、センサ部１５０は、姿勢センサ（ジャイロセンサや加速度センサなど）、温度センサ、または圧力センサなどの各種センサを備えていてもよい。
（記憶部１６０）
記憶部１６０は、各種データを記憶する機能構成である。例えば、記憶部１６０は、感覚提示デバイス１００の各機能構成によって使用されるプログラムやパラメータ、または情報処理装置２００から提供された各種データ（例えば、触覚データ、音響データ、およびその他の制御信号などを含む）などを記憶する。なお、記憶部１６０が記憶するデータの内容はこれらに限定されない。
以上、感覚提示デバイス１００の機能構成例について説明した。なお、図１０を用いて説明した上記の機能構成はあくまで一例であり、感覚提示デバイス１００の機能構成は係る例に限定されない。例えば、感覚提示デバイス１００は、図１０に示す機能構成の全てを必ずしも備えなくてもよい。また、感覚提示デバイス１００の機能構成は、仕様や運用に応じて柔軟に変形可能である。
＜３．装置の処理フロー例＞
上記では、本開示に係る情報処理システムにおける情報処理装置２００および感覚提示デバイス１００の機能構成例について説明した。続いて、図１１を参照して、触覚刺激の提示に用いられる触覚データの生成処理の流れの例について説明する。図１１は、コンテンツの開始前に、第１の知覚特性情報および第２の知覚特性情報に基づいてユーザに知覚されない第２の音を発する触覚刺激の提示に用いられる触覚データが予め生成（プログラム）される場合の処理の流れを示している。
まず、ステップＳ１０００では、情報処理装置２００の触覚データ生成部２２１が、ユーザに提供されるコンテンツについての第１の知覚特性情報および第２の知覚特性情報を取得する。上記のとおり、これらの情報の取得元は特に限定されない。ステップＳ１００４では、触覚データ生成部２２１が、第１の音が発せられていないか否か、または第１の音に対応する周波数帯域が所定値（例えば、５００［Hz］）より高いか否かをコンテンツのタイミング（例えば、各セグメントなど）ごとに確認する。
第１の音が発せられていない、または第１の音に対応する周波数帯域が所定値より高い場合（ステップＳ１００４／Ｙｅｓ）、ステップＳ１００８にて、触覚データ生成部２２１が第２の音に対応する周波数帯域を可聴領域外（例えば、２００［Hz］以下）に調整し触覚データを生成する（なお、触覚データ生成部２２１は、第２の音の音圧レベルを可聴レベルよりも小さい値に調整してもよい）。第１の音が発せられており、かつ第１の音に対応する周波数帯域が所定値以下である場合（ステップＳ１００４／Ｎｏ）、ステップＳ１０１２にて、触覚データ生成部２２１は、ユーザの可聴領域において、第２の音の音圧レベルを第１の音の音圧レベルよりも小さくするように触覚データを生成する。コンテンツ全体にわたって上記の調整が終了するまで（ステップＳ１０１６／Ｎｏ）、ステップＳ１００４～ステップＳ１０１２の処理が継続される。
なお、図１１のフローチャートにおける各ステップは、必ずしも記載された順序に沿って時系列に処理される必要はない。すなわち、フローチャートにおける各ステップは、記載された順序と異なる順序で処理されても、並列的に処理されてもよい。また、図１１のフローチャートには示さなかったが、触覚データ生成部２２１は、第１の音に対応する周波数帯域が第２の音に対応する周波数帯域よりも十分大きいか否かの判断を行い、第１の音に対応する周波数帯域が第２の音に対応する周波数帯域よりも十分大きい場合には上記の通り、第２の音の割合を低減させるように触覚データを生成してもよい。また、触覚データ生成部２２１は、コンテンツの開始前に触覚データを予め生成（プログラム）するのではなく、コンテンツの提供時にリアルタイムに触覚データを生成してもよい。
＜４．ハードウェア構成例＞
上記では、触覚データの生成処理の流れの例について説明した。続いて、本開示に係る情報処理システムにおけるハードウェア構成例について説明する。
（４．１．感覚提示デバイス１００）
まず、感覚提示デバイス１００のハードウェア構成について説明する。感覚提示デバイス１００は、サイズ調整機能を有さないアウターベストと、サイズ調整機能を有するインナーベストの２枚が重なった構造（アウターベストがインナーベストの上から被せられる構造）を有している。また、ユーザによる着脱のし易さを考慮して、アウターベストおよびインナーベストは、例えば両肩部分などで、部分的に物理的に連結されていてもよい。ここで、図１２にはアウターベストの例が示されており、図１３にはインナーベストの例が示されている。
図１２には、両肩部分に音響データ提示部１３１が配置されている感覚提示デバイス１００（図２で示したもの）のアウターベストの例が示されている。また、アウターベスト（および図１３のＡで示すインナーベスト）は、前身頃の中央に開閉機構１０（例えば、ファスナー、面ファスナー、またはボタンなど。なお、開閉機構１０はこれらに限定されない）を備えている。これにより、ユーザは頭を感覚提示デバイス１００に通すなどの負荷の高い動きをすることなく、２層構造の感覚提示デバイス１００を容易に効率良く着脱することができる。また、ユーザは、不快感を覚えた場合などにおいて容易かつ迅速に感覚提示デバイス１００を脱ぐことができる。また、アウターベストは、前身頃に所定の数のポケット１１（図１２の例では、ポケット１１ａ～ポケット１１ｄ）を備えている。これによって、アウターベストは、例えば後述する手首や足に装着されるパーツを収納することができるため、これらのパーツが使用されない場合において各パーツの管理が容易になる。なお、ユーザが腕を容易に可動させることができる点や通気性に優れる点などが考慮されることで、ベスト型の感覚提示デバイス１００が採用される場合を主として説明しているところ、感覚提示デバイス１００の形状（特に、アウターベストの形状）は、その用途（コンテンツの内容）に合わせて様々なデザインに変更され得る。
図１３のＡにはインナーベストの前身頃の例が示されており、図１３のＢにはインナーベストの後ろ身頃の例が示されている。図１３のＡおよびＢに示すように、インナーベストの側面部にはインナーベストのサイズを無段階に調整可能な調整機構１２（図１３の例では、面ファスナー）が備えられている。感覚提示デバイス１００が触覚刺激をユーザの体に伝達するためには、感覚提示デバイス１００および触覚データ提示部１２１が、体に対して適切な圧力で押し付けられることが望ましい。しかし、ユーザの体は年齢や性別などによって個体差が大きい。そこで、インナーベストは、調整機構１２を備えることによって、触覚データ提示部１２１と体の間の接触圧力を調整可能にし、ユーザ毎に最適な触覚刺激を提示可能にする。また、インナーベストが使用時にアウターベストに覆われることによって、調整機構１２が表面に露出されない。これにより、ウェアの意匠性が高められると共に、演劇の観劇や映画の鑑賞中に、ユーザ自身がインナーベストの面ファスナーなどを用いたサイズ調整をするために面ファスナーの着け外しすることで大きな音が発生して周囲の観客に不快感を与えることが防止され得る。なお、ユーザによる感覚提示デバイス１００の装着はコンテンツの開始前に完了し、休憩時間などを除いてサイズ調整や着脱は行われないことを想定している。より具体的には、ユーザが座る座席とは別の位置に、感覚提示デバイス１００の装着（脱着）用のスペースが設けられて、係員がユーザによる感覚提示デバイス１００の脱着を補助することを想定している（もちろん、これに限定されない）。
また、インナーベストは、触覚データ提示部１２１を固定可能な固定機構１３（図１３の例では、面ファスナー）を備えている。感覚提示デバイス１００がユーザに対して触覚刺激を提示する場合、ユーザ毎の個体差（体の大きさなど）に影響されることなく、同様の位置に触覚刺激が提示されることが望ましい。すなわち、触覚データ提示部１２１の配置はユーザ毎の個体差に応じて調整されることが望ましい。また、劇や映画などのコンテンツの内容や演出に応じて、触覚刺激が提示されるべき位置（部位）が変わる。例えば、触覚刺激が提示されるべき位置は、劇Ａでは体の前面４か所、劇Ｂでは体の前面６か所、映画Ａでは体の前面６か所に加えて背面２か所などのようにコンテンツによって変わる。そこで、インナーベストはほぼ全面に固定機構１３を備えることで、所望の位置に触覚データ提示部１２１が固定されることを可能にする。
ここで、図１４を参照して、触覚データ提示部１２１の固定態様の具体例について説明する。コンテンツの開始前のユーザによる装着時にユーザ自身によって触覚データ提示部１２１の固定位置が変更されることは、基本的に想定していない（なお、これに限定されない）。そのため、図１４のＡに示すように、インナーベストは２枚構造を有しており、固定機構１３は、ユーザが触れることができない２枚構造の内側に備えられている。触覚データ提示部１２１は固定機構１３（面ファスナーメスなど）と、別パーツである固定機構１４（面ファスナーオスなど）によって挟まれることによってインナーベストに固定され得る。図１４のＡに示すように、固定機構１３は、２枚構造のうちの“インナーベストの外側１５”（アウターベスト側）の内側の面に備えられることを想定している。換言すると、２枚構造のうちの“インナーベストの内側１６”（ユーザの体側）には、固定機構１３が備えられないことを想定している。これによって、サイズ調整時に調整機構１２の締め付け圧によって生じる“インナーベストの外側１５”の張力によって、触覚データ提示部１２１がユーザの体に的確に押し付けられることになる。
また、“インナーベストの内側１６”が面として存在することにより、ユーザが感覚提示デバイス１００を着脱する際に、突出した触覚データ提示部１２１が着脱の妨げになることが防止される。前述したように、感覚提示デバイス１００はインナーベストとアウターベストの２層構造を有することが望ましいが、着脱の容易さなどに鑑みて、インナーベスト単体が使用されてもよい。その場合にも、インナーベストが上記で説明したような構造を有することで、触覚データ提示部１２１を表面に露出させないようにできるため、意匠性が確保される。
また、前述したように、ユーザの体は年齢や性別などによって個体差が大きい。そのため、例えば、コンテンツの提供前に男性用のウェア（アウターベストやインナーベスト）と女性用のウェア（アウターベストやインナーベスト）の２種類を用意しておき、女性用のインナーベストについては、体に合わせて調整機構１２がより絞り込まれる前提で、触覚データ提示部１２１の固定位置を男性用のものに比べて相対的に内側にしておく、という運用が考えられる。同様に、男女の身長差を考慮して、各触覚データ提示部１２１の上下の相対距離を男性用のものに比べて相対的に近づけておく、という運用も考えられる。また、女性用については、胸部を避けて触覚データ提示部１２１を配置する、という運用も考えられる。また、男女差とは無関係に、体の大きさに応じてS/M/Lの３種類のサイズを（同一のウェアで）用意し、前述したようにそれぞれに触覚データ提示部１２１の固定位置を異なるものとする、という運用も考えらえる。あるいは、前述のように、コンテンツの内容に応じて、コンテンツの開始前に触覚データ提示部１２１の位置および数量を変更しておき、その位置および数量の設定に基づいて各触覚データ提示部１２１に入力する触覚データの設計および生成を行う、といった運用も考えられる。
さらに、感覚提示デバイス１００は、ベスト部分によっては触覚刺激が提示されない部位に対しても他のパーツを用いることによって触覚刺激を提示することができてもよい。例えば、図１５のＡに示すように、感覚提示デバイス１００はコネクタを備えており、当該コネクタに接続された配線１９０（図１５のＡでは、配線１９０ａ～配線１９０ｆ）によって追加の触覚データ提示部１２１（図１５のＡでは、触覚データ提示部１２１ｋ～触覚データ提示部１２１ｐ）と電気的に接続され得る。なお、図中の触覚データ提示部１２１ｌと触覚データ提示部１２１ｍのように、追加された触覚データ提示部１２１は、コネクタを備えており、当該コネクタに接続された配線１９０によってさらに別の追加された触覚データ提示部１２１と電気的に接続され得る。なお、長さを調節可能なケーブル（例えば、カールケーブルや巻取り式のケーブルなど）が配線１９０として使用されることによって、必要以上に長い配線１９０によってユーザの動きが阻害されることが防止され得る。また、配線１９０によって触覚データ提示部１２１が追加されない場合、追加の触覚データ提示部１２１に使用可能なチャンネルが他の部分（例えば、ベスト部分）への触覚刺激の提示に使用されてもよい。これによって、より多様な触覚刺激を当該部分に提示することが可能になる。なお、追加の触覚データ提示部１２１は無線によって接続されてもよい。
そして、追加の触覚データ提示部１２１は、所定の固定機構（例えば、面ファスナーなど）によって体の部位に一定の圧力で固定される。この構造によって、例えば図１５のＡに示すように、感覚提示デバイス１００は、ベスト部分以外の手首、膝、および足の甲などに触覚刺激を提示することができる。なお、追加の触覚データ提示部１２１が固定される位置は特に限定されず、コンテンツの内容などに応じて柔軟に変更され得る。
ここで、図１５のＢに示すように、追加の各触覚データ提示部１２１には固定位置を示すラベル１７（図１５のＢでは、ラベル１７ａ～ラベル１７ｆ。固定位置を示すイラストや文字などが表示される）が付されることを想定している。これによって、ユーザが追加の各触覚データ提示部１２１を間違った位置に固定することが防がれる。
続いて、感覚提示デバイス１００と共に使用される各機器について説明する。まず図１６を参照して、ユーザが着席してコンテンツの提供を受ける場合に使用される座席の周辺機器について説明する。図１６には、ユーザが感覚提示デバイス１００（および追加の触覚データ提示部１２１ｋ～触覚データ提示部１２１ｐ）を装着した状態で座席に座っている様子を示している。そして、各座席にはユーザによる所定の操作に使用される操作パネル１８０が設置されることを想定している。
ここで、図１７を参照して操作パネル１８０の具体例について説明する。図１７のＡに示された操作パネル１８０ａにはスイッチ１８１が備えられており、ユーザは、当該スイッチ１８１を操作することによって触覚刺激などをはじめとする各種感覚の提示のON／OFFを切り替えることができる。また、操作パネル１８０ａにはコネクタ１８２（メス）が備えられており、ユーザは、当該コネクタ１８２に対して感覚提示デバイス１００に備えられたコネクタ（オス）を差し込むことによって感覚提示デバイス１００を動作可能な状態にすることができる。また、図１７のＢに示された操作パネル１８０ｂには、その他にもボリューム調節機構１８３が備えられており、ユーザは、当該ボリューム調節機構１８３を操作することによって感覚提示デバイス１００によって提示される触覚刺激または音のボリュームを所望の大きさに調節することができる。
なお、感覚提示デバイス１００には複数の種類（S／M／Lなどのサイズ、大人用／子供用、男性用／女性用、色、表記番号）が設けられており、感覚提示デバイス１００がコネクタ１８２に接続されることによって、感覚提示デバイス１００内に組み込まれた種類検出用の抵抗値、あるいはDIPスイッチのようなON／OFF検出の仕組みによって、感覚提示デバイス１００の種類が情報処理システム（特に情報処理装置２００）に識別され得る。識別された種類に応じて、情報処理システム（特に情報処理装置２００）は、ウェアに流す信号（ボリューム等）を変化させてもよい。
（４．２．情報処理装置２００）
続いて、図１８を参照して、情報処理装置２００のハードウェア構成について説明する。
図１８に示すように、情報処理装置２００は、ＣＰＵ（Central Processing Unit）９０１と、ＲＯＭ（Read Only
Memory）９０２と、ＲＡＭ（Random Access Memory）９０３と、ホストバス９０４と、ブリッジ９０５と、外部バス９０６と、インタフェース９０７と、入力装置９０８と、出力装置９０９と、ストレージ装置（ＨＤＤ）９１０と、ドライブ９１１と、通信装置９１２とを備える。
ＣＰＵ９０１は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置２００内の動作全般を制御する。また、ＣＰＵ９０１は、マイクロプロセッサであってもよい。ＲＯＭ９０２は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０３は、ＣＰＵ９０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス９０４により相互に接続されている。当該ＣＰＵ９０１、ＲＯＭ９０２およびＲＡＭ９０３の協働により、制御部２１０および生成部２２０の各機能が実現される。
ホストバス９０４は、ブリッジ９０５を介して、ＰＣＩ（Peripheral Component Interconnect/Interface）バスなどの外部バス９０６に接続されている。なお、必ずしもホストバス９０４、ブリッジ９０５および外部バス９０６を分離構成する必要はなく、１つのバスにこれらの機能を実装してもよい。
入力装置９０８は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。情報処理装置２００を使用するユーザは、該入力装置９０８を操作することにより、各装置に対して各種のデータを入力したり処理動作を指示したりすることができる。当該入力装置９０８により、コントローラ２６０の機能が実現される。
出力装置９０９は、例えば、ＣＲＴ（Cathode Ray Tube）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Organic Light Emitting Diode）装置およびランプなどの表示装置を含む。当該出力装置９０９により表示部２４０の機能が実現される。
ストレージ装置９１０は、データ格納用の装置である。ストレージ装置９１０は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置９１０は、例えば、ＨＤＤ（Hard Disk Drive）で構成される。このストレージ装置９１０は、ハードディスクを駆動し、ＣＰＵ９０１が実行するプログラムや各種データを格納する。当該ストレージ装置９１０によって記憶部２５０の機能が実現される。
ドライブ９１１は、記憶媒体用リーダライタであり、情報処理装置２００に内蔵、あるいは外付けされる。ドライブ９１１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体９１３に記録されている情報を読み出して、ＲＡＭ９０３に出力する。また、ドライブ９１１は、リムーバブル記憶媒体９１３に情報を書き込むこともできる。
通信装置９１２は、例えば、通信網９１４に接続するための通信デバイス等で構成された通信インタフェースである。通信装置９１２によって通信部２３０の機能が実現される。
＜５．備考＞
上記では、本開示に係る情報処理システムにおけるハードウェア構成例について説明した。続いて、本開示に係る情報処理システムにおける運用面などを備考として説明する。
（５．１．感覚提示デバイス１００の動作確認について）
本開示に係る情報処理システムが使用される場合、コンテンツの開始前に、感覚提示デバイス１００を操作パネル１８０のコネクタ１８２に接続した状態で動作確認作業が行われ得る。
動作確認作業においては、第１ステップとして通電状態などの確認のために、感覚提示デバイス１００の各触覚データ提示部１２１（アクチュエータ）から可聴音を順次発生させて、確認者が耳で動作確認を行う。その際、触覚データ提示部１２１ごとに可聴音が変更されてもよい（例えば、各感覚提示デバイス１００の触覚データ生成部２２１ごとに「１」、「２」、「３」などの識別情報が割り振られ、触覚データ提示部１２１にそれぞれの識別情報を可聴音として出力させるなど）。第２ステップとして、触覚データ提示部１２１の故障状態の確認のために、各触覚データ提示部１２１に１００［Hz］のSin波のような可聴性の低い単純な波形を順次入力する。例えば、第２ステップにて、確認者に異音が聞こえる場合、触覚データ提示部１２１の破損などが生じていることが予想される。
第１ステップおよび第２ステップの作業は、各感覚提示デバイス１００から発せられる音が混ざらないように、感覚提示デバイス１００を１台ずつ動作させて行われる。例えば、確認者が操作パネル１８０のスイッチ１８１を操作して各感覚提示デバイス１００のON／OFFを切り替えながら第１ステップおよび第２ステップの作業を行っていく。
なお、確認者が各座席を移動することなく上記の動作確認作業を行えるように、各感覚提示デバイス１００からの可聴音の発生などが、感覚提示デバイス１００ごとに少しずつずらされながら行われてもよい。また、感覚提示デバイス１００ごとに「１」、「２」、「３」などの識別情報が割り振られ、さらに各感覚提示デバイス１００の触覚データ生成部２２１ごとに「１」、「２」、「３」などの識別情報が割り振られることによって、触覚データ提示部１２１に「１－１」、「１－２」、「１－３」などのように、それぞれの感覚提示デバイス１００および触覚データ提示部１２１の識別情報の組合せを可聴音として出力させるなどの対応が考えられる。これによって、確認者は、全ての感覚提示デバイス１００から発せられる可聴音を聞き取れる位置から動くことなく動作確認作業を行うことができる。また、可聴音の聞き取り作業が専用装置によって行われてもよい。また、各触覚データ提示部１２１に加速度センサが備えられており、各触覚データ提示部１２１が振動した際の加速度データの解析などによって動作確認が行われてもよい。
（５．２．操作者の対応について）
上記で説明したコントローラ２６０を操作する操作者は、ステージおよび客席が見渡せるよう、客席後方（または中央）のコントロールブースに位置しており、予め決められた進行に応じて、ステージ上の演者の動きのタイミングに合わせ、コントローラ２６０に備えられるタッチパネルや物理スイッチなどインタフェースを操作する。
コントローラ２６０に対して所定の操作が行われることで、音響、照明、映像、触覚刺激などの演出効果に関わる装置が一括してリアルタイムに制御され得る。例えば、操作者は、コントローラ２６０に備えられるスライドバーの操作によって、音響、照明、映像、触覚刺激などの演出効果に関わる装置によって出力される演出効果の強度を、一括してリアルタイムに制御することができる。例えば、操作者がスライドバーを下げると、音響ボリュームが下がるとともに、触覚データ提示部１２１によって提示される触覚刺激の強度が低くなったり、照明が暗くなったりする。また、例えば、操作者が、所定のボタンを押下するたびに、コンテンツにおけるイベントが切り替わり、切り替わった後のイベントに対応付けられたプログラムに従って、音響、照明、映像、触覚刺激などの演出効果に関わる装置が一括してリアルタイムに制御され得る。なお、このときに各ボタンにそれぞれ異なるイベントが割り当てられていてもよい。
また、ユーザだけでなく操作者も、音響提示用のヘッドホンおよび触覚提示用の感覚提示デバイス１００を装着することによって、ユーザが体験している演出効果のフィードバックを受けることができる。なお、コントロールブースには、操作者とは別に進行管理を行うタイムキーパーが配置されることで、操作者とタイムキーパーが互いに協調して作業をしてもよい。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
音響提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成する生成部を備える、
情報処理装置。
（２）
前記生成部は、前記第１の知覚特性に関する情報および前記第２の知覚特性に関する情報に基づいて、前記ユーザの耳に達する前記第１の音と前記第２の音の割合を調整することで前記触覚データを生成する、
前記（１）に記載の情報処理装置。
（３）
前記生成部は、前記第１の知覚特性に関する情報および前記第２の知覚特性に関する情報に基づいて、前記割合を周波数帯域ごとに調整することで前記触覚データを生成する、
前記（２）に記載の情報処理装置。
（４）
前記生成部は、前記ユーザの可聴領域において、前記第２の音の音圧レベルを前記第１の音の音圧レベルよりも小さくする、
前記（３）に記載の情報処理装置。
（５）
前記第１の音が発せられていない場合、または前記第１の音に対応する周波数帯域が所定値より高い場合、前記生成部は、前記第２の音に対応する周波数帯域を可聴領域外に調整するか、または前記第２の音の音圧レベルを可聴レベルよりも小さい値に調整する、
前記（３）に記載の情報処理装置。
（６）
前記第１の音に対応する周波数帯域が所定値より高い場合、または前記第１の音のピークとなる音圧レベルに対応する周波数と前記第２の音のピークとなる音圧レベルに対応する周波数の差が所定値より大きい場合、前記生成部は、前記第２の音の割合を低減させる、
前記（３）に記載の情報処理装置。
（７）
音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成することを有する、
コンピュータにより実行される情報処理方法。
（８）
音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成すること、
をコンピュータに実現させるためのプログラム。
１００ 感覚提示デバイス
１１０ 制御部
１１１ 触覚データ処理部
１１２ 音響データ処理部
１２０ 触覚提示部
１２１ 触覚データ提示部
１３０ 音提示部
１３１ 音響データ提示部
１４０ 通信部
１５０ センサ部
１６０ 記憶部
２００ 情報処理装置
２１０ 制御部
２２０ 生成部
２２１ 触覚データ生成部
２２２ 音響データ生成部
２２３ 照明データ生成部
２３０ 通信部
２４０ 表示部
２５０ 記憶部
２６０ コントローラ
２７０ オーディオＩＦ
２８０ アンプ
２９０ フロントスピーカ
３００ プロジェクタ
３１０ スクリーン
３２０ ライト
３３０ 煙発生器
３４０ 風発生器

Claims (8)

  1. 音響提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成する生成部を備える、
    情報処理装置。
  2. 前記生成部は、前記第１の知覚特性に関する情報および前記第２の知覚特性に関する情報に基づいて、前記ユーザの耳に達する前記第１の音と前記第２の音の割合を調整することで前記触覚データを生成する、
    請求項１に記載の情報処理装置。
  3. 前記生成部は、前記第１の知覚特性に関する情報および前記第２の知覚特性に関する情報に基づいて、前記割合を周波数帯域ごとに調整することで前記触覚データを生成する、
    請求項２に記載の情報処理装置。
  4. 前記生成部は、前記ユーザの可聴領域において、前記第２の音の音圧レベルを前記第１の音の音圧レベルよりも小さくする、
    請求項３に記載の情報処理装置。
  5. 前記第１の音が発せられていない場合、または前記第１の音に対応する周波数帯域が所定値より高い場合、前記生成部は、前記第２の音に対応する周波数帯域を可聴領域外に調整するか、または前記第２の音の音圧レベルを可聴レベルよりも小さい値に調整する、
    請求項３に記載の情報処理装置。
  6. 前記第１の音に対応する周波数帯域が所定値より高い場合、または前記第１の音のピークとなる音圧レベルに対応する周波数と前記第２の音のピークとなる音圧レベルに対応する周波数の差が所定値より大きい場合、前記生成部は、前記第２の音の割合を低減させる、
    請求項３に記載の情報処理装置。
  7. 音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成することを有する、
    コンピュータにより実行される情報処理方法。
  8. 音響データ提示部から発せられる第１の音に対するユーザの第１の知覚特性に関する情報、および触覚データ提示部から提示される触覚刺激によって発せられる第２の音に対する前記ユーザの第２の知覚特性に関する情報に基づいて、前記ユーザに知覚されない前記第２の音を発する前記触覚刺激の提示に用いられる触覚データを生成すること、
    をコンピュータに実現させるためのプログラム。
JP2019529076A 2017-07-10 2018-07-03 情報処理装置、情報処理方法、およびプログラム Active JP7040527B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762530455P 2017-07-10 2017-07-10
US62/530,455 2017-07-10
US201762534879P 2017-07-20 2017-07-20
US62/534,879 2017-07-20
PCT/JP2018/025277 WO2019013056A1 (ja) 2017-07-10 2018-07-03 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2019013056A1 JPWO2019013056A1 (ja) 2020-05-07
JP7040527B2 true JP7040527B2 (ja) 2022-03-23

Family

ID=70153026

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019529076A Active JP7040527B2 (ja) 2017-07-10 2018-07-03 情報処理装置、情報処理方法、およびプログラム

Country Status (5)

Country Link
US (1) US11190874B2 (ja)
EP (1) EP3654666A4 (ja)
JP (1) JP7040527B2 (ja)
CN (1) CN110915231A (ja)
WO (1) WO2019013056A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11887631B2 (en) 2019-11-12 2024-01-30 Sony Group Corporation Information processing device and information processing method
WO2022262950A1 (en) * 2021-06-15 2022-12-22 Flexound Systems Oy Controlling reproduction of sound and vibration

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006222826A (ja) 2005-02-14 2006-08-24 Fujitsu Ltd 通話機能付き携帯情報端末

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6442599U (ja) * 1987-09-02 1989-03-14
US5553148A (en) 1994-06-20 1996-09-03 Werle; Ben Apparatus and method for producing vibratory sensations to accompany audible sounds in a properly phased relationship
JP3561787B2 (ja) 1994-06-30 2004-09-02 和通 藤原 音響振動体感付与方法ならびにその装置
JP2004233463A (ja) 2003-01-28 2004-08-19 Nec Viewtechnology Ltd ファン騒音低減装置及びファン騒音低減方法
WO2008117002A1 (en) 2007-03-26 2008-10-02 Nds Limited Active fan control
US9019087B2 (en) 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
US8952888B2 (en) * 2008-05-09 2015-02-10 Koninklijke Philips N.V. Method and system for conveying an emotion
US20110080273A1 (en) * 2008-06-13 2011-04-07 Waseda University Sensation Presenting System and Sensation Presenting Device
US9402133B2 (en) 2009-02-12 2016-07-26 Brock Maxwell SEILER Multi-channel audio vibratory entertainment system
US8716940B2 (en) 2009-10-01 2014-05-06 Production Resource Group, Llc Sound adaptive cooling system for a stage light
JP5732937B2 (ja) * 2010-09-08 2015-06-10 ヤマハ株式会社 サウンドマスキング装置
WO2013136133A1 (en) * 2012-03-15 2013-09-19 Nokia Corporation A tactile apparatus link
US9098984B2 (en) 2013-03-14 2015-08-04 Immersion Corporation Haptic effects broadcasting during a group event
DE102013214201A1 (de) 2013-07-19 2015-01-22 Volkswagen Aktiengesellschaft Verfahren zur Steuerung einer Kraftfahrzeug-Klimaanlage
JP2015185137A (ja) * 2014-03-26 2015-10-22 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR101641418B1 (ko) * 2014-07-25 2016-07-20 포항공과대학교 산학협력단 청각 주목도에 기반한 햅틱 신호 생성 방법 및 이를 위한 장치
JP2017182496A (ja) * 2016-03-30 2017-10-05 ソニー株式会社 制御装置、制御方法およびプログラム
US10649529B1 (en) * 2016-06-28 2020-05-12 Apple Inc. Modification of user-perceived feedback of an input device using acoustic or haptic output
WO2018008217A1 (ja) * 2016-07-07 2018-01-11 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10699538B2 (en) * 2016-07-27 2020-06-30 Neosensory, Inc. Method and system for determining and providing sensory experiences
EP3522024A4 (en) * 2016-09-30 2019-10-16 Sony Corporation SYSTEM FOR PROVISION OF CONTENT, CONTROL DEVICE AND RECEPTION DEVICE
JP2018060313A (ja) 2016-10-04 2018-04-12 ソニー株式会社 受信装置および方法、送信装置および方法、並びにプログラム
CN106774891A (zh) 2016-12-15 2017-05-31 北京小鸟看看科技有限公司 虚拟现实场景的音效产生方法、设备及虚拟现实设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006222826A (ja) 2005-02-14 2006-08-24 Fujitsu Ltd 通話機能付き携帯情報端末

Also Published As

Publication number Publication date
JPWO2019013056A1 (ja) 2020-05-07
EP3654666A1 (en) 2020-05-20
WO2019013056A1 (ja) 2019-01-17
EP3654666A4 (en) 2020-05-27
US11190874B2 (en) 2021-11-30
CN110915231A (zh) 2020-03-24
US20210152931A1 (en) 2021-05-20

Similar Documents

Publication Publication Date Title
US7732694B2 (en) Portable music player with synchronized transmissive visual overlays
US9763490B2 (en) Vibrating footwear device and entertainment system for use therewith
US20190369725A1 (en) Guided virtual reality system for relaxing body and mind
JP2017033536A (ja) 観衆ベースのハプティック
JP6835070B2 (ja) システム、端末装置、方法及び記録媒体
JP7452430B2 (ja) 情報処理装置、情報処理方法、および、プログラム
JP7040527B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7216394B2 (ja) ライブ演出システム、およびライブ演出方法
US10754428B1 (en) Systems, methods, and devices for audio-tactile mapping
JP7314926B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP7066115B2 (ja) パブリックスピーキング支援装置、及びプログラム
JP7140120B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2019171767A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US11941177B2 (en) Information processing device and information processing terminal
JP2015038820A (ja) 携帯発光装置およびこれを用いた演出方法
WO2018168247A1 (ja) 情報処理装置、情報処理方法およびプログラム
JP6523038B2 (ja) 感覚提示装置
WO2021145454A1 (ja) 情報処理装置、情報処理端末及びプログラム
WO2021145451A1 (ja) 情報処理装置及び情報処理端末
US20220353457A1 (en) Information processing apparatus, information processing method, and program
WO2021145025A1 (ja) 情報処理装置、情報処理端末及びプログラム
JP2021052965A (ja) 上映施設
JP2022134638A (ja) 画像表示システム、表示制御方法、発光制御方法、及びプログラム
JPH10240159A (ja) 頭部装着型表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210520

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220221

R151 Written notification of patent or utility model registration

Ref document number: 7040527

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151