JP2021145373A - Vibration sensory apparatus - Google Patents
Vibration sensory apparatus Download PDFInfo
- Publication number
- JP2021145373A JP2021145373A JP2021095089A JP2021095089A JP2021145373A JP 2021145373 A JP2021145373 A JP 2021145373A JP 2021095089 A JP2021095089 A JP 2021095089A JP 2021095089 A JP2021095089 A JP 2021095089A JP 2021145373 A JP2021145373 A JP 2021145373A
- Authority
- JP
- Japan
- Prior art keywords
- vibration
- user
- unit
- position information
- vibrating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、ユーザに振動を体感させる、振動体感装置に関する。 The present invention relates to a vibration experience device that allows a user to experience vibration.
コンサートやライブ等において、人は、耳に届く音だけでなく音圧を肌で感じることで
、より迫力のある演奏を楽しむことができる。一方、ヘッドホン、イヤホン又は小径のス
ピーカで音を再生する場合においては、音圧まで再現することは困難である。そこで、手
軽に臨場感が高いオーディオ再生環境を構築することが望まれる。
At concerts and live performances, people can enjoy more powerful performances by feeling not only the sound that reaches their ears but also the sound pressure. On the other hand, when the sound is reproduced by headphones, earphones or a speaker having a small diameter, it is difficult to reproduce the sound pressure. Therefore, it is desired to easily construct an audio reproduction environment with a high sense of presence.
下記の特許文献1には、音声信号の波形に沿った振動を発生する、簡易装着型体感振動
装置が記載されている。
The following
しかしながら、昨今のVR(バーチャルリアリティ)等では、オーディオ信号の定位即
ち音源方向も再現したコンテンツが増加しており、単にオーディオ信号に合わせて振動を
発生させるだけでは、かえって臨場感を欠くことになりかねない。
However, in recent VR (Virtual Reality) and the like, the content that reproduces the localization of the audio signal, that is, the sound source direction is increasing, and simply generating vibration in accordance with the audio signal will rather lack the sense of presence. It could be.
本発明は、臨場感を高めることができる、振動体感装置を提供することを目的とする。 An object of the present invention is to provide a vibration experience device capable of enhancing the sense of presence.
本発明は、複数の振動部と、オーディオ信号を取得する、オーディオ信号取得部と、を
備え、音源とユーザとの相対的な位置に基づいて振動させる前記振動部を決定し、前記オ
ーディオ信号で表される音の大きさに応じた大きさの振動信号を、前記決定した振動部に
出力する振動体感装置を提供する。
The present invention includes a plurality of vibrating units, an audio signal acquisition unit that acquires an audio signal, and determines the vibrating unit that vibrates based on a relative position between the sound source and the user, and uses the audio signal. Provided is a vibration experience device that outputs a vibration signal having a magnitude corresponding to the loudness of the represented sound to the determined vibration unit.
本発明によれば、臨場感を高めることができる、振動体感装置が提供される。 According to the present invention, there is provided a vibration experience device that can enhance the sense of presence.
以下、本発明に係る実施形態について図面を参照しながら説明するが、本発明はこれに
限定されない。以下で説明する実施形態の構成要素は、適宜組み合わせることができる。
また、一部の構成要素を用いない場合もある。
<実施形態を用いたシステム>
図1は、実施形態に係る振動体感装置を用いたシステムの一例を模式的に示す図である
。
Hereinafter, embodiments according to the present invention will be described with reference to the drawings, but the present invention is not limited thereto. The components of the embodiments described below can be combined as appropriate.
In addition, some components may not be used.
<System using the embodiment>
FIG. 1 is a diagram schematically showing an example of a system using the vibration experience device according to the embodiment.
システム100は、ユーザUに振動を与える振動体感装置1と、映像及び音声を含むコ
ンテンツを再生するコンテンツ出力装置110と、を含む。
The
コンテンツは、映画、コンサート若しくはライブの映像及び音声、又は、ゲームが例示
されるが、これらに限定されない。映像は、2D又は3Dの動画像又は静止画像が例示さ
れる。
Content includes, but is not limited to, movies, concerts or live video and audio, or games. The video is exemplified by a 2D or 3D moving image or a still image.
実施形態では、コンテンツデータは、音を発するオブジェクト(音源)の位置情報を含
むものとする。一例として、オブジェクトベースオーディオ(オブジェクトオーディオと
も言う)データは、各々のオブジェクトの動き及び音量の変化等のデータを含んでおり、
AVアンプ等は、スピーカの位置や数にあわせて最適なレンダリングを行い、最終的な音
を再生する。
In the embodiment, the content data includes the position information of the object (sound source) that emits sound. As an example, object-based audio (also called object audio) data includes data such as movement and volume change of each object.
The AV amplifier or the like performs optimum rendering according to the position and number of speakers, and reproduces the final sound.
コンテンツ出力装置110は、携帯型の場合には、スマートフォン又はタブレットが例
示されるが、これらに限定されない。
When the
コンテンツ出力装置110は、据置型の場合には、コンテンツプレーヤ、パーソナルコ
ンピュータ又は据置型ゲーム機と、AVアンプと、表示装置と、音声出力装置と、の組み
合わせが例示される。コンテンツプレーヤは、Blu−ray(登録商標)プレーヤが例
示されるが、これに限定されない。表示装置は、VRヘッドマウントディスプレイ(以下
、VRHMDと言う)、テレビジョン装置又はプロジェクタが例示されるが、これらに限
定されない。音声出力装置は、スピーカ、ヘッドホン又はイヤホンが例示されるが、これ
らに限定されない。
When the
コンテンツ出力装置110は、処理部111と、映像出力部112と、音声出力部11
3と、センサ部114と、通信部115と、記録媒体読取部116と、を含む。
The
3, the
通信部115は、ネットワークNを介して、コンテンツデータをサーバ120から受信
して、処理部111に出力する。ネットワークNは、有線であっても良いし、無線であっ
ても良い。
The
記録媒体読取部116は、記録媒体117に記録されているコンテンツデータを読み取
って、処理部111に出力する。記録媒体117は、Blu−ray(登録商標)ディス
クが例示されるが、これに限定されない。
The recording medium reading unit 116 reads the content data recorded on the
センサ部114は、ユーザUの位置及び向いている方向を検出して、処理部111に出
力する。ユーザUの向いている方向は、ユーザUの顔が向いている方向又はユーザUの身
体が向いている方向が例示されるが、これに限定されない。
The
コンテンツ出力装置110が携帯型である場合には、センサ部114は、スマートフォ
ン又はタブレットの画像表示側に搭載された前面カメラ(インカメラ)が例示されるが、
これに限定されない。
When the
Not limited to this.
コンテンツ出力装置110が据置型である場合には、センサ部114は、室内に設置さ
れたカメラ又はビーコンが例示されるが、これに限定されない。
When the
処理部111は、コンテンツデータに含まれる映像データに基づいて、映像を映像出力
部112に表示させる。処理部111は、CPU(Central Processing Unit)が例示
されるが、これに限定されない。
The
コンテンツ出力装置110が携帯型である場合には、映像出力部112は、スマートフ
ォン若しくはタブレットに搭載された表示パネル、又は、スマートフォン若しくはタブレ
ットに接続されたVRHMD、テレビジョン装置若しくはプロジェクタが例示されるが、
これらに限定されない。
When the
Not limited to these.
コンテンツ出力装置110が据置型である場合には、映像出力部112は、VRHMD
、テレビジョン装置又はプロジェクタが例示されるが、これらに限定されない。
When the
, Television devices or projectors, but are not limited thereto.
処理部111は、コンテンツデータに含まれるオーディオデータに基づいて、音声を音
声出力部113に出力させる。
The
コンテンツ出力装置110が携帯型である場合には、音声出力部113は、スマートフ
ォン若しくはタブレットに搭載されたスピーカ、又は、スマートフォン若しくはタブレッ
トに接続されたヘッドホン又はイヤホンが例示されるが、これらに限定されない。
When the
コンテンツ出力装置110が据置型である場合には、音声出力部113は、スピーカ、
ヘッドホン又はイヤホンが例示されるが、これらに限定されない。
When the
Headphones or earphones are exemplified, but are not limited thereto.
処理部111は、オーディオ信号S1を、振動体感装置1に出力する。処理部111は
、コンテンツデータに含まれるオーディオデータをそのままオーディオ信号S1として振
動体感装置1に送信しても良い。
The
なお、人間は、高音よりも低音で音圧を感じる。従って、処理部111は、コンテンツ
データに含まれるオーディオデータの内の低音成分だけをオーディオ信号S1として振動
体感装置1に送信しても良い。
In addition, human beings feel the sound pressure in the bass rather than the treble. Therefore, the
一例として、処理部111は、コンテンツデータに含まれるオーディオデータを、予め
定められたカットオフ周波数を有するローパスフィルタに通過させた後の信号を、オーデ
ィオ信号S1として振動体感装置1に送信しても良い。
As an example, the
或いは、処理部111は、コンテンツデータにオブジェクトベースオーディオデータが
含まれている場合には、予め定められた周波数以下の低音を発するオブジェクトのオーデ
ィオデータだけをオーディオ信号S1として振動体感装置1に送信しても良い。
Alternatively, the
或いは、処理部111は、コンテンツデータにサブウーファーを駆動するためのオーデ
ィオデータが含まれている場合には、サブウーファーを駆動するためのオーディオデータ
をオーディオ信号S1として振動体感装置1に送信しても良い。
Alternatively, the
また、処理部111は、オブジェクトの位置を表す情報である音源位置情報S2を、振
動体感装置1に出力する。音源位置情報S2は、スピーカが音を発する方向の情報を含ん
でも良い。
The
一例として、処理部111は、コンテンツデータにオブジェクトベースオーディオデー
タが含まれている場合には、複数のオブジェクトの位置情報を音源位置情報S2として振
動体感装置1に送信しても良い。
As an example, the
或いは、処理部111は、支配的なオブジェクトの位置情報だけを音源位置情報S2と
して振動体感装置1に送信しても良い。支配的なオブジェクトとは、最も信号レベルが高
いオブジェクトが例示される。
Alternatively,
或いは、処理部111は、複数のオブジェクトの音の信号レベルに基づいて算出した、
複数のオブジェクトの平均的な位置情報を音源位置情報S2として振動体感装置1に送信
しても良い。平均的な位置情報は、複数の物体の質量及び位置関係から重心を算出するよ
うに、質量を信号レベルに置き換えて算出しても良い。信号レベルは、単位時間毎の信号
レベルの平均値を用いても良い。
Alternatively, the
The average position information of the plurality of objects may be transmitted to the
或いは、処理部111は、予め定められた周波数以下の低音を発するオブジェクトの位
置情報だけを音源位置情報S2として振動体感装置1に送信しても良い。
Alternatively,
また、処理部111は、オブジェクトが位置する空間内での、ユーザUの位置及び向い
ている方向を表す情報であるユーザ位置情報S3を、振動体感装置1に出力する。なお、
ユーザUの位置及び向いている方向は、オブジェクトが位置する空間内での絶対的な位置
及び方向であっても良いし、オブジェクトとユーザUとの相対的な位置及び方向であって
も良い。
<実施形態>
[構成]
図2は、実施形態に係る振動体感装置の構成を示す図である。振動体感装置1は、オー
ディオ信号取得部11と、音源位置情報取得部12と、ユーザ位置情報取得部13と、振
動部位算出部14と、振動信号生成部15と、複数の振動部16と、を含む。複数の振動
部16は、ユーザUの身体の複数の部位に夫々装着される。
The
The position and facing direction of the user U may be an absolute position and direction in the space where the object is located, or may be a relative position and direction between the object and the user U.
<Embodiment>
[composition]
FIG. 2 is a diagram showing a configuration of a vibration experience device according to an embodiment. The
図3及び図4は、実施形態に係る振動体感装置の複数の振動部の装着状態を示す図であ
る。図3は、ユーザUを正面から見た図である。図4は、ユーザUを背面から見た図であ
る。
3 and 4 are views showing a mounting state of a plurality of vibrating portions of the vibration experience device according to the embodiment. FIG. 3 is a front view of the user U. FIG. 4 is a view of the user U as viewed from the back.
図3及び図4に示すように、実施形態では、複数の振動部16は、ベスト(vest)20
に取り付けられている。そして、ユーザUが、ベスト20を着用している。これにより、
複数の振動部16は、ユーザUに装着されている。なお、実施形態では、複数の振動部1
6がベスト20に取り付けられていることとしたが、これに限定されない。複数の振動部
16は、バンド、ベルト、腹巻等に取り付けられて、ユーザUに装着されても良い。
As shown in FIGS. 3 and 4, in the embodiment, the plurality of vibrating
It is attached to. Then, the user U is wearing the best 20. This will
The plurality of vibrating
It was decided that 6 was attached to the best 20, but the present invention is not limited to this. The plurality of vibrating
複数の振動部16は、ユーザUの身体の軸21の周りの複数の方向に装着されることが
好ましい。軸21は、ユーザUが直立した場合に、頭頂と両足間とを結ぶ線が例示される
が、これに限定されない。
The plurality of vibrating
例えば、複数の振動部16が2個である場合には、1個の振動部16がユーザUの腹部
に装着され、他の1個の振動部16がユーザUの背部に装着されることが好ましい。或い
は、1個の振動部16がユーザUの右脇腹に装着され、他の1個の振動部16がユーザU
の左脇腹に装着されることが好ましい。
For example, when there are two plurality of vibrating
It is preferably worn on the left flank of the.
また、例えば、複数の振動部16が4個である場合には、4個の振動部16が、ユーザ
Uの腹部と背部と右脇腹と左脇腹とに夫々装着されることが好ましい。
Further, for example, when the plurality of vibrating
また、図3及び図4に示すように、軸21の周りの1つの方向において、軸21の延在
方向に沿って複数の振動部16が配置されることが好ましい。例えば、図3では、ユーザ
Uの身体の中央腹部には、軸21の延在方向に沿って3個の振動部16を含む振動部群1
6aが配置されている。そして、振動体感装置1は、例えば、オブジェクトの位置がユー
ザUの位置よりも高い場合に、振動部群16aの中で最も高い位置に配置されている振動
部16a1を最も強く振動させることが好ましい。例えば、振動体感装置1は、オブジェ
クトが飛行機である場合に、振動部群16aの中で最も高い位置に配置されている振動部
16a1を最も強く振動させることが好ましい。これにより、ユーザUは、臨場感をより
感じることができる。
Further, as shown in FIGS. 3 and 4, it is preferable that a plurality of vibrating
6a is arranged. Then, for example, when the position of the object is higher than the position of the user U, the
複数の振動部16の各々は、モータとバラストとで構成することや、磁石とコイルとで
構成することが例示されるが、これらに限定されない。
It is exemplified, but not limited to, each of the plurality of vibrating
なお、オーディオ信号取得部11、音源位置情報取得部12、ユーザ位置情報取得部1
3、振動部位算出部14及び振動信号生成部15は、ベスト20に取り付けられていても
良いし、ベスト20に取り付けられず、複数の振動部16と分離していても良い。
The audio signal acquisition unit 11, the sound source position
3. The vibration part calculation unit 14 and the vibration
再び図2を参照すると、オーディオ信号取得部11は、オーディオ信号S1をコンテン
ツ出力装置110から取得して、振動信号生成部15に出力する。
Referring again to FIG. 2, the audio signal acquisition unit 11 acquires the audio signals S 1 from the
音源位置情報取得部12は、音源位置情報S2をコンテンツ出力装置110から取得し
て、振動部位算出部14に出力する。
The sound source position
ユーザ位置情報取得部13は、ユーザ位置情報S3をコンテンツ出力装置110から取
得して、振動部位算出部14に出力する。
The user position
振動部位算出部14は、音源位置情報S2及びユーザ位置情報S3に基づいて、振動を
与えるユーザUの部位を表す部位情報S4を算出し、振動信号生成部15に出力する。
Vibrating region calculating unit 14, based on the sound source position information S 2 and the user position information S 3, calculates the part information S 4 representing the site of the user U for vibrating, and outputs the vibration
具体的な一例として、まず、振動部位算出部14は、ユーザUとオブジェクトとの相対
的な位置関係から、オブジェクトが音を発する方向を算出する。次に、振動部位算出部1
4は、ユーザUが向いている方向とオブジェクトが音を発する方向とから、振動が伝わる
べき方向を算出する。
As a specific example, first, the vibration part calculation unit 14 calculates the direction in which the object emits a sound from the relative positional relationship between the user U and the object. Next, the vibration
In 4, the direction in which the vibration should be transmitted is calculated from the direction in which the user U is facing and the direction in which the object emits a sound.
図5は、オブジェクトとユーザとの位置関係の一例を示す図である。図5では、映像出
力部112は、テレビジョン装置である。
FIG. 5 is a diagram showing an example of the positional relationship between the object and the user. In FIG. 5, the
映像出力部112は、Y軸方向と逆の方向に、映像を出力する。ユーザUは、映像出力
部112に正対している。つまり、ユーザUが向いている方向33は、Y軸方向である。
オブジェクト31は、ユーザUから見て、斜め右前の方向に位置している。オブジェクト
31は、Y軸方向と逆の方向32に、音を発する。この場合、振動部位算出部14は、オ
ブジェクト31からユーザUに向かう方向34を、振動が伝わるべき方向として算出する
。そして、振動部位算出部14は、方向33と方向34とがなす角度θに基づいて、ユー
ザUの右腹部35を、振動を与える部位として算出する。再び図3を参照すると、振動体
感装置1は、ユーザUの右腹部に配置された、3個の振動部16を含む振動部群16bを
振動させる。
The
The
なお、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近
い部位を、振動を与える部位として算出しても良い。再び図5を参照すると、ユーザUの
身体の部位の内でオブジェクト31に最も近い部位は、ユーザUの右腹部35である。従
って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近い
、ユーザUの右腹部35を、振動を与える部位として算出しても良い。
The vibration portion calculation unit 14 may calculate the portion of the body of the user U that is closest to the
或いは、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向
する部位を、振動を与える部位として算出しても良い。再び図5を参照すると、ユーザU
の身体の部位の内でオブジェクト31に対向する部位は、ユーザUの右腹部35である。
従って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向す
る、ユーザUの右腹部35を、振動を与える部位として算出しても良い。
Alternatively, the vibration portion calculation unit 14 may calculate a portion of the body portion of the user U that faces the
The part of the body that faces the
Therefore, the vibration portion calculation unit 14 may calculate the
図6は、オブジェクトとユーザとの位置関係の一例を示す図である。図6は、図5に示
す状態から、ユーザUが、方向33をXY平面に垂直な方向を軸として、矢印36で示す
ように180度回転させた状態を示す図である。
FIG. 6 is a diagram showing an example of the positional relationship between the object and the user. FIG. 6 is a diagram showing a state in which the user U has rotated the
ユーザUは、映像出力部112と反対の側を向いている。つまり、ユーザUが向いてい
る方向33は、Y軸方向と逆の方向である。オブジェクト31は、ユーザUから見て、斜
め左後の方向に位置している。オブジェクト31は、Y軸方向と逆の方向32に、音を発
する。この場合、振動部位算出部14は、オブジェクト31からユーザUに向かう方向3
4を、振動が伝わるべき方向として算出する。そして、振動部位算出部14は、方向33
と方向34とがなす角度θに基づいて、ユーザUの左背部37を、振動を与える部位とし
て算出する。再び図4を参照すると、振動体感装置1は、ユーザUの左背部に配置された
、3個の振動部16を含む振動部群16dを振動させる。
The user U faces the side opposite to the
4 is calculated as the direction in which the vibration should be transmitted. Then, the vibration portion calculation unit 14 is in the
Based on the angle θ formed by the
なお、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近
い部位を、振動を与える部位として算出しても良い。再び図6を参照すると、ユーザUの
身体の部位の内でオブジェクト31に最も近い部位は、ユーザUの左背部37である。従
って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近い
、ユーザUの左背部37を、振動を与える部位として算出しても良い。
The vibration portion calculation unit 14 may calculate the portion of the body of the user U that is closest to the
或いは、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向
する部位を、振動を与える部位として算出しても良い。再び図6を参照すると、ユーザU
の身体の部位の内でオブジェクト31に対向する部位は、ユーザUの左背部37である。
従って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向す
る、ユーザUの左背部37を、振動を与える部位として算出しても良い。
Alternatively, the vibration portion calculation unit 14 may calculate a portion of the body portion of the user U that faces the
The part of the body that faces the
Therefore, the vibration portion calculation unit 14 may calculate the
図7は、オブジェクトとユーザとの位置関係の一例を示す図である。ここでは、コンテ
ンツデータは、マルチカメラアングルを有するものとする。そして、図7は、図5に示す
状態から、ユーザUが、コンテンツ出力装置110を操作して、カメラアングルを時計回
りに移動させた状態を示す図である。カメラアングルを時計回りに移動させると、オブジ
ェクト31は、ユーザUから見て、X方向と逆の方向38に移動する。
FIG. 7 is a diagram showing an example of the positional relationship between the object and the user. Here, it is assumed that the content data has a multi-camera angle. FIG. 7 is a diagram showing a state in which the user U operates the
ユーザUは、映像出力部112に正対している。つまり、ユーザUが向いている方向3
3は、Y軸方向である。オブジェクト31は、ユーザUから見て、斜め左前の方向に位置
している。オブジェクト31は、Y軸方向と逆の方向39に、音を発する。この場合、振
動部位算出部14は、オブジェクト31からユーザUに向かう方向40を、振動が伝わる
べき方向として算出する。そして、振動部位算出部14は、方向33と方向40とがなす
角度θに基づいて、ユーザUの左腹部41を、振動を与える部位として算出する。再び図
3を参照すると、振動体感装置1は、ユーザUの左腹部に配置された、3個の振動部16
を含む振動部群16cを振動させる。
The user U faces the
3 is in the Y-axis direction. The
The vibrating part group 16c including the above is vibrated.
なお、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近
い部位を、振動を与える部位として算出しても良い。再び図7を参照すると、ユーザUの
身体の部位の内でオブジェクト31に最も近い部位は、ユーザUの左腹部41である。従
って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近い
、ユーザUの左腹部41を、振動を与える部位として算出しても良い。
The vibration portion calculation unit 14 may calculate the portion of the body of the user U that is closest to the
或いは、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向
する部位を、振動を与える部位として算出しても良い。再び図7を参照すると、ユーザU
の身体の部位の内でオブジェクト31に対向する部位は、ユーザUの左腹部41である。
従って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向す
る、ユーザUの左腹部41を、振動を与える部位として算出しても良い。
Alternatively, the vibration portion calculation unit 14 may calculate a portion of the body portion of the user U that faces the
The part of the body that faces the
Therefore, the vibration portion calculation unit 14 may calculate the
図8は、オブジェクトとユーザとの位置関係の一例を示す図である。図8では、映像出
力部112は、VRHMDである。
FIG. 8 is a diagram showing an example of the positional relationship between the object and the user. In FIG. 8, the
ユーザUが向いている方向33は、Y軸方向である。オブジェクト31は、ユーザUか
ら見て、斜め右前の方向に位置している。オブジェクト31は、Y軸方向と逆の方向32
に、音を発する。この場合、振動部位算出部14は、オブジェクト31からユーザUに向
かう方向34を、振動が伝わるべき方向として算出する。そして、振動部位算出部14は
、方向33と方向34とがなす角度θに基づいて、ユーザUの右腹部35を、振動を与え
る部位として算出する。再び図3を参照すると、振動体感装置1は、ユーザUの右腹部に
配置された、3個の振動部16を含む振動部群16bを振動させる。
The
Makes a sound. In this case, the vibration portion calculation unit 14 calculates the
なお、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近
い部位を、振動を与える部位として算出しても良い。再び図8を参照すると、ユーザUの
身体の部位の内でオブジェクト31に最も近い部位は、ユーザUの右腹部35である。従
って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近い
、ユーザUの右腹部35を、振動を与える部位として算出しても良い。
The vibration portion calculation unit 14 may calculate the portion of the body of the user U that is closest to the
或いは、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向
する部位を、振動を与える部位として算出しても良い。再び図8を参照すると、ユーザU
の身体の部位の内でオブジェクト31に対向する部位は、ユーザUの右腹部35である。
従って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向す
る、ユーザUの右腹部35を、振動を与える部位として算出しても良い。
Alternatively, the vibration portion calculation unit 14 may calculate a portion of the body portion of the user U that faces the
The part of the body that faces the
Therefore, the vibration portion calculation unit 14 may calculate the
図9は、オブジェクトとユーザとの位置関係の一例を示す図である。図9は、図8に示
す状態から、ユーザUが、方向33をXY平面に垂直な方向を軸として、矢印36で示す
ように180度回転させた状態を示す図である。
FIG. 9 is a diagram showing an example of the positional relationship between the object and the user. FIG. 9 is a diagram showing a state in which the user U has rotated the
ユーザUが向いている方向33は、Y軸方向と逆の方向である。オブジェクト31は、
ユーザUから見て、斜め左後の方向に位置している。オブジェクト31は、Y軸方向と逆
の方向32に、音を発する。この場合、振動部位算出部14は、オブジェクト31からユ
ーザUに向かう方向34を、振動が伝わるべき方向として算出する。そして、振動部位算
出部14は、方向33と方向34とがなす角度θに基づいて、ユーザUの左背部37を、
振動を与える部位として算出する。再び図4を参照すると、振動体感装置1は、ユーザU
の左背部に配置された、3個の振動部16を含む振動部群16dを振動させる。
The
It is located diagonally to the left and rear when viewed from user U. The
Calculated as the part that gives vibration. Referring to FIG. 4 again, the
The vibrating
なお、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近
い部位を、振動を与える部位として算出しても良い。再び図9を参照すると、ユーザUの
身体の部位の内でオブジェクト31に最も近い部位は、ユーザUの左背部37である。従
って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に最も近い
、ユーザUの左背部37を、振動を与える部位として算出しても良い。
The vibration portion calculation unit 14 may calculate the portion of the body of the user U that is closest to the
或いは、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向
する部位を、振動を与える部位として算出しても良い。再び図9を参照すると、ユーザU
の身体の部位の内でオブジェクト31に対向する部位は、ユーザUの左背部37である。
従って、振動部位算出部14は、ユーザUの身体の部位の内でオブジェクト31に対向す
る、ユーザUの左背部37を、振動を与える部位として算出しても良い。
Alternatively, the vibration portion calculation unit 14 may calculate a portion of the body portion of the user U that faces the
The part of the body that faces the
Therefore, the vibration portion calculation unit 14 may calculate the
図8及び図9では、映像出力部112がVRHMDである場合について説明したが、映
像出力部112がスマートフォン又はタブレットに搭載された表示パネルの場合も、同様
である。
8 and 9 have described the case where the
再び図2を参照すると、振動信号生成部15は、オーディオ信号S1で表される音の大
きさに応じた大きさの振動信号S5を、部位情報S4で表される部位に装着されている1
つ又は複数の振動部16に、出力する。
Referring to FIG. 2 again, the vibration
Output to one or a plurality of vibrating
図10は、実施形態のオーディオ信号及び振動信号の一例を示す図である。 FIG. 10 is a diagram showing an example of an audio signal and a vibration signal of the embodiment.
振動信号生成部15は、オーディオ信号S1の複数の極値50を算出する。次に、振動
信号生成部15は、複数の極値50の複数の絶対値51を算出する。そして、振動信号生
成部15は、複数の絶対値51に予め定められたゲインを乗じることにより、パルス状の
振動信号S5を生成する。従って、振動信号S5のパルスのタイミングは、オーディオ信
号S1の複数の極値50のタイミングと同じになる。振動信号生成部15は、振動信号S
5を、部位情報S4で表される部位に装着されている1つ又は複数の振動部16に、出力
する。振動信号S5が供給された1つ又は複数の振動部16は、振動信号S5の大きさに
応じた強さで振動する。
Vibration
5, in one or more of the vibrating
これにより、部位情報S4で表される部位に装着されている1つ又は複数の振動部16
は、音の大きさに応じた強さの振動をユーザUに与えることができる。従って、ユーザU
は、臨場感をより感じることができる。
Thus, one is mounted to the moiety represented by the site information S 4 or more of the vibrating
Can give the user U a strong vibration according to the loudness of the sound. Therefore, user U
Can feel more realistic.
なお、振動信号生成部15は、オーディオ信号S1の包絡線を算出し、包絡線から極値
50を算出しても良い。振動信号生成部15は、オーディオ信号S1にヒルベルト変換を
実施することにより、包絡線を算出しても良い。
Incidentally, the vibration
また、振動信号生成部15は、処理部111がオーディオ信号S1をローパスフィルタ
に通過させないで出力した場合には、オーディオ信号S1を、予め定められたカットオフ
周波数を有するローパスフィルタに通過させても良い。
The
また、振動信号生成部15は、極値50と極値50との間の時間長に応じて、振動信号
S5を出力する時間を変更することで、振動部16を振動させる時間を変更しても良い。
例えば、振動信号生成部15は、極値50と極値50との間の時間長が長い場合は、振動
信号S5を出力する時間を長く変更することで、振動部16を振動させる時間を長く変更
しても良い。また、振動信号生成部15は、極値50と極値50との間の時間長が短い場
合は、振動信号S5を出力する時間を短く変更することで、振動部16を振動させる時間
を短く変更しても良い。
The
For example, when the time length between the
これにより、例えば、キレがあるバスドラムによる振動時間は短くなり、伸びやかなベ
ースによる振動時間は長くなる。従って、ユーザUは、再現性の高い音圧を体感すること
ができ、臨場感をより感じることができる。
As a result, for example, the vibration time due to the sharp bass drum becomes short, and the vibration time due to the relaxed base becomes long. Therefore, the user U can experience the sound pressure with high reproducibility and can feel the presence more.
なお、振動信号生成部15は、部位情報S4で表される部位と異なる部位に装着されて
いる1つ又は複数の振動部16にも、振動信号S5を出力しても良い。この場合、振動信
号生成部15は、部位情報S4で表される部位からの距離に応じて、振動信号S5の振幅
を小さくすると好適である。
The vibration
再び図3を参照すると、部位情報S4で表される部位が正面腹部部である場合には、振
動信号生成部15は、オーディオ信号S1で表される音の大きさに応じた大きさの振動信
号S5を、振動部群16aに出力する。加えて、振動信号生成部15は、部位情報S4で
表される部位からの距離に応じて振幅を小さくした振動信号S5を、右腹部に装着された
振動部群16b及び左腹部に装着された振動部群16cにも出力すると良い。
Referring again to Figure 3, when moiety represented by the site information S 4 is a front abdominal section, the
更に加えて、振動信号生成部15は、部位情報S4で表される正面腹部からの距離に応
じて振幅を小さくした振動信号S5を、右脇部、左脇部、右背面部、左背面部及び中央背
面部に装着された振動部群に出力しても良い。
Furthermore, the vibration
これにより、部位情報S4で表される部位と異なる部位に装着されている1つ又は複数
の振動部16は、部位情報S4で表される部位に装着されている1つ又は複数の振動部1
6からの距離に応じて、部位情報S4で表される部位に装着されている1つ又は複数の振
動部16よりも弱い振動をユーザUに与える。従って、ユーザUは、複数の部位で異なる
大きさの振動を与えられるので、臨場感をより感じることができる。
Thus, one or more of the vibrating
Depending on the distance from 6 gives one mounted on the moiety represented by the site information S 4 or more weak vibration than the
再び図2を参照すると、複数の振動部16は、振動信号S5のタイミングで、振動信号
S5の振幅に応じた強さの振動を発生する。
[動作]
図11は、実施形態の振動体感装置の動作を示すフローチャートである。振動体感装置
1は、予め定められた周期で、図11に示す処理を実行する。
Referring again to Figure 2, a plurality of vibrating
[motion]
FIG. 11 is a flowchart showing the operation of the vibration experience device of the embodiment. The
オーディオ信号取得部11は、ステップS100において、オーディオ信号S1を処理
部111から取得し、振動信号生成部15に出力する。
Audio signal acquisition unit 11, at step S100, acquires the audio signals S 1 from the
音源位置情報取得部12は、ステップS102において、音源位置情報S2を処理部1
11から取得し、振動部位算出部14に出力する。
Sound source position
It is acquired from 11 and output to the vibration part calculation unit 14.
ユーザ位置情報取得部13は、ステップS104において、ユーザ位置情報S3を処理
部111から取得し、振動部位算出部14に出力する。
User location
振動部位算出部14は、ステップS106において、音源位置情報S2及びユーザ位置
情報S3に基づいて、振動を与えるユーザUの部位を表す部位情報S4を算出し、振動信
号生成部15に出力する。
Vibrating region calculating unit 14 in step S106, based on the sound source position information S 2 and the user position information S 3, calculates the part information S 4 representing the site of the user U for vibrating, output the vibration
振動信号生成部15は、ステップS108において、オーディオ信号S1で表される音
の大きさに応じた大きさの振動信号S5を、1つ又は複数の振動部16に、出力する。
In step S108, the vibration
1つ又は複数の振動部16は、ステップS110において、振動信号S5のタイミング
で、振動信号S5の振幅に応じた強さの振動を発生する。
In step S110, one or a plurality of
なお、振動している1つ又は複数の振動部16は、ユーザUと異なる人からの接触があ
った場合に、振動を中止しても良い。これにより、ユーザUと異なる人に振動が伝わらな
いようにすることができる。
The vibrating one or more vibrating
また、振動信号生成部15が、1つ又は複数の振動部16に振動信号S5を供給してか
ら、1つ又は複数の振動部16が振動を開始し、ユーザUが振動を体感するまでの遅延時
間を処理部111に出力しても良い。そして、処理部111が、音声出力部113からの
音声の出力を遅延時間だけ遅らせると良い。これにより、音声出力部113から出力され
る音声と、1つ又は複数の振動部16で発生される振動と、を同期させることができる。
これにより、ユーザUは、臨場感をより感じることができる。
[効果]
以上説明したように、本実施形態によれば、オブジェクト31とユーザUとの位置関係
に応じたユーザUの身体の部位に、振動を与えることができる。これにより、ユーザUの
臨場感を高めることができる。
The
As a result, the user U can feel more realistic.
[effect]
As described above, according to the present embodiment, it is possible to apply vibration to a part of the body of the user U according to the positional relationship between the
1 振動体感装置、11 オーディオ信号取得部、12 音源位置情報取得部、13
ユーザ位置情報取得部、14 振動部位算出部、15 振動信号生成部、16 振動部、
16a,16b,16c,16d 振動部群、20 ベスト、31 オブジェクト、10
0 システム、110 コンテンツ出力装置、111 処理部、112 映像出力部、1
13 音声出力部、114 センサ部、115 通信部、116 記録媒体読取部、11
7 記録媒体、120 サーバ。
1 Vibration experience device, 11 Audio signal acquisition unit, 12 Sound source position information acquisition unit, 13
User position information acquisition unit, 14 vibration part calculation unit, 15 vibration signal generation unit, 16 vibration unit,
16a, 16b, 16c, 16d Vibration group, 20 vests, 31 objects, 10
0 system, 110 content output device, 111 processing unit, 112 video output unit, 1
13 Audio output unit, 114 sensor unit, 115 communication unit, 116 recording medium reader, 11
7 Recording medium, 120 servers.
Claims (1)
オーディオ信号を取得する、オーディオ信号取得部と、
を備え、
音源とユーザとの相対的な位置に基づいて振動させる前記振動部を決定し、
前記オーディオ信号で表される音の大きさに応じた大きさの振動信号を、前記決定した
振動部に出力する
振動体感装置。 With multiple vibrating parts,
An audio signal acquisition unit that acquires an audio signal,
With
The vibrating part to be vibrated is determined based on the relative position between the sound source and the user.
A vibration sensation device that outputs a vibration signal having a magnitude corresponding to the loudness of the sound represented by the audio signal to the determined vibration unit.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021095089A JP7140237B2 (en) | 2017-12-28 | 2021-06-07 | Vibration sensation device |
JP2022142034A JP2022172315A (en) | 2017-12-28 | 2022-09-07 | Vibration sensation device |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017252982A JP6927029B2 (en) | 2017-12-28 | 2017-12-28 | Vibration experience device |
JP2021095089A JP7140237B2 (en) | 2017-12-28 | 2021-06-07 | Vibration sensation device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017252982A Division JP6927029B2 (en) | 2017-12-28 | 2017-12-28 | Vibration experience device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022142034A Division JP2022172315A (en) | 2017-12-28 | 2022-09-07 | Vibration sensation device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021145373A true JP2021145373A (en) | 2021-09-24 |
JP7140237B2 JP7140237B2 (en) | 2022-09-21 |
Family
ID=67307432
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017252982A Active JP6927029B2 (en) | 2017-12-28 | 2017-12-28 | Vibration experience device |
JP2021095089A Active JP7140237B2 (en) | 2017-12-28 | 2021-06-07 | Vibration sensation device |
JP2022142034A Pending JP2022172315A (en) | 2017-12-28 | 2022-09-07 | Vibration sensation device |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017252982A Active JP6927029B2 (en) | 2017-12-28 | 2017-12-28 | Vibration experience device |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022142034A Pending JP2022172315A (en) | 2017-12-28 | 2022-09-07 | Vibration sensation device |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP6927029B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7192813B2 (en) * | 2020-03-12 | 2022-12-20 | 株式会社豊田中央研究所 | User interface device |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08116581A (en) * | 1994-02-28 | 1996-05-07 | Bodeisonitsuku Kk | Mount type body sensing vibrator |
JP2005349155A (en) * | 2004-06-09 | 2005-12-22 | Sds:Kk | Sound source direction detecting and transmitting device |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4484570B2 (en) * | 2004-04-14 | 2010-06-16 | 富士ゼロックス株式会社 | Acoustic information processing apparatus and acoustic information providing method |
US9786201B2 (en) * | 2014-05-16 | 2017-10-10 | Not Impossible LLC | Wearable sound |
EP3037918A1 (en) * | 2014-12-23 | 2016-06-29 | Thomson Licensing | System and method for localizing haptic effects on a body |
JP6571701B2 (en) * | 2017-02-02 | 2019-09-04 | 日本電信電話株式会社 | EXPERIENCE DEVICE AND METHOD |
-
2017
- 2017-12-28 JP JP2017252982A patent/JP6927029B2/en active Active
-
2021
- 2021-06-07 JP JP2021095089A patent/JP7140237B2/en active Active
-
2022
- 2022-09-07 JP JP2022142034A patent/JP2022172315A/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08116581A (en) * | 1994-02-28 | 1996-05-07 | Bodeisonitsuku Kk | Mount type body sensing vibrator |
JP2005349155A (en) * | 2004-06-09 | 2005-12-22 | Sds:Kk | Sound source direction detecting and transmitting device |
Also Published As
Publication number | Publication date |
---|---|
JP7140237B2 (en) | 2022-09-21 |
JP2022172315A (en) | 2022-11-15 |
JP6927029B2 (en) | 2021-08-25 |
JP2019121813A (en) | 2019-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7270820B2 (en) | Mixed reality system using spatialized audio | |
US10390139B2 (en) | Apparatus and methods for audio-tactile spatialization of sound and perception of bass | |
JP5992210B2 (en) | Information processing program, information processing apparatus, information processing system, and information processing method | |
CN109691141B (en) | Spatialization audio system and method for rendering spatialization audio | |
JP6246922B2 (en) | Acoustic signal processing method | |
CN107277736B (en) | Simulation system, sound processing method, and information storage medium | |
JP5647138B2 (en) | Method and apparatus for providing a user interface to an information processing system | |
JP2009177574A (en) | Headphone | |
JP7140237B2 (en) | Vibration sensation device | |
US20210014615A1 (en) | Combined Near-Field and Far-Field Audio Rendering and Playback | |
KR102036021B1 (en) | Speaker apparatus providing stereo sound | |
WO2021261085A1 (en) | Information processing device, information processing method, program, and recording reproduction system | |
JP6506486B2 (en) | Apparatus for providing virtual reality image and program for providing virtual reality image | |
WO2023199815A1 (en) | Acoustic processing device, program, and acoustic processing system | |
WO2019150800A1 (en) | Information processing device, information processing method, and program | |
US20100135509A1 (en) | Zeleny sonosphere | |
JP2022173870A (en) | Appreciation system, appreciation device, and program | |
JP2020020966A (en) | Virtual space and sound providing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210630 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210630 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220422 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220623 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220822 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7140237 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |