JP4789145B2 - Content reproduction apparatus and content reproduction program - Google Patents
Content reproduction apparatus and content reproduction program Download PDFInfo
- Publication number
- JP4789145B2 JP4789145B2 JP2006001785A JP2006001785A JP4789145B2 JP 4789145 B2 JP4789145 B2 JP 4789145B2 JP 2006001785 A JP2006001785 A JP 2006001785A JP 2006001785 A JP2006001785 A JP 2006001785A JP 4789145 B2 JP4789145 B2 JP 4789145B2
- Authority
- JP
- Japan
- Prior art keywords
- sound source
- coordinates
- audio output
- value related
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Stereophonic System (AREA)
Description
本発明は、仮想空間に構築された仮想モデルに基づいてコンテンツの再生を行うコンテンツ再生装置及びコンテンツ再生プログラムに関し、特に音源の位置に応じた音声出力の調整を行うことにより、コンテンツに対する没入感を高めることができるコンテンツ再生装置及びコンテンツ再生プログラムに関する。 The present invention relates to a content playback apparatus and a content playback program that play back content based on a virtual model built in a virtual space, and in particular, by adjusting audio output according to the position of a sound source, an immersive feeling to the content is provided. The present invention relates to a content playback apparatus and a content playback program that can be enhanced.
パチンコ、パチスロ、家庭用ゲーム機、PC用ゲーム、CG動画等において、バーチャルリアリティを用いたコンテンツが広く使用されている。このようなコンテンツは、仮想三次元空間に構築された仮想モデルを仮想カメラで撮影した映像と、この映像に合わせて制作された音声とにより構成されることが一般であるが、仮想空間上の一人称視点をより明確に感じてもらい、映像の現実感をアップさせ、さらに仮想現実への没入感を上昇させるためには、音声の要素が特に重要となる。 Content using virtual reality is widely used in pachinko machines, pachislot machines, home game machines, PC games, CG movies, and the like. Such content is generally composed of a video captured by a virtual camera of a virtual model constructed in a virtual three-dimensional space, and audio produced according to this video. The voice element is particularly important in order to make the first person viewpoint more clear, to improve the reality of the video, and to further increase the sense of immersion in virtual reality.
しかし、従来、音声については、視野映像の従属物という観点しかなく(例えば、下記特許文献1)、このため没入感が十分に得られないという問題があった。特に、仮想カメラ位置を連続的に移動するなど変更しても仮想空間に配置された音源(例えば「焚き火」のオブジェクト)から発せられる音声がリアルタイムに変化せずに均一にしか聞こえず、仮想カメラから映しだされる映像のもつ現実感が低くなり没入感が十分でないという問題があった。
本発明は、コンテンツの視聴者(ゲームの遊戯者やCG動画の視聴者)に、仮想空間における仮想カメラの位置や方向(一人称視点)を明確に感じてもらい、映像の現実感をアップさせ、結果的に映像への没入感を上昇させることができるコンテンツ再生装置及びコンテンツ再生プログラムを提供することをその目的とする。 The present invention allows content viewers (game players and CG video viewers) to clearly feel the position and direction of the virtual camera in the virtual space (first-person viewpoint), and improves the reality of the video, As a result, it is an object of the present invention to provide a content playback apparatus and a content playback program that can increase the immersion in video.
また本発明は、コンテンツが映像の表示を行うものであるか否かに拘わらず、仮想空間における所定の位置や方向に対する音源の相対的位置の変化を音声により表現することで、コンテンツの視聴者により高い現実感を与えることができるコンテンツ再生装置及びコンテンツ再生プログラムを提供することをもその目的とする。 In addition, the present invention expresses a change in the relative position of the sound source with respect to a predetermined position and direction in the virtual space, regardless of whether or not the content is to display a video, thereby enabling the viewer of the content. Another object of the present invention is to provide a content reproduction apparatus and a content reproduction program that can give a higher sense of reality.
また本発明は、かかる音声を通じた没入感の上昇を、簡易で高速な処理方式により実現することをその課題とする。 Another object of the present invention is to realize an increase in immersive feeling through the voice by a simple and high-speed processing method.
本発明は、仮想空間に存在する音を発するオブジェクト(音源)の座標と、仮想カメラ等の基準座標や基準方向との配置関係を計算し、その計算結果に応じてスピーカーなどの音声出力手段から出力する音声をリアルタイムに変化させる方針により上記課題を解決したものであり、
仮想空間における仮想モデルの状態に応じた音声を出力するコンテンツ再生装置であって、
第一及び第二の音声出力手段と、
仮想空間における基準座標に関する値を記憶する基準座標記憶手段と、
仮想空間における基準方向に関する値を記憶する基準方向記憶手段と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶手段と、
前記基準座標記憶手段に記憶した基準座標に関する値と、前記基準方向記憶手段に記憶した基準方向に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値に基づいて、前記音源についての相対的指向性に関する値を計算し、当該相対的指向性に関する値に応じて前記第一、第二の音声出力手段に与える音声出力を調整する音声出力調整手段と、
を備えることを特徴とするコンテンツ再生装置である。
The present invention calculates the positional relationship between the coordinates of an object (sound source) that emits sound in a virtual space and the reference coordinates and reference direction of a virtual camera, etc., and from the sound output means such as a speaker according to the calculation result This is a solution to the above problem by changing the output voice in real time.
A content playback device that outputs sound according to the state of a virtual model in a virtual space,
First and second audio output means;
Reference coordinate storage means for storing values relating to reference coordinates in virtual space;
Reference direction storage means for storing a value related to the reference direction in the virtual space;
Sound source coordinate storage means for storing values relating to the coordinates of the sound source in the virtual space;
Based on the value related to the reference coordinates stored in the reference coordinate storage means, the value related to the reference direction stored in the reference direction storage means, and the value related to the coordinates of the sound source stored in the sound source coordinate storage means, A sound output adjusting means for calculating a value related to relative directivity and adjusting a sound output given to the first and second sound output means according to the value related to the relative directivity;
A content playback apparatus comprising:
また本発明では、前記第一の音声出力手段が右側ステレオシステムであり、前記第二の音声出力手段が左側ステレオシステムであることが好ましい。 In the present invention, it is preferable that the first audio output means is a right stereo system and the second audio output means is a left stereo system.
また本発明では、仮想空間に配置された仮想カメラにより撮影した前記仮想モデルの映像を出力する映像出力手段を更に備え、
前記基準座標が前記仮想カメラの座標であり、前記基準方向が前記仮想カメラの撮影方向であることが好ましい。
The present invention further includes video output means for outputting the video of the virtual model taken by the virtual camera arranged in the virtual space,
Preferably, the reference coordinates are coordinates of the virtual camera, and the reference direction is a shooting direction of the virtual camera.
また本発明では、基準方向を回転軸とした基準ロールに関する値を記憶する基準ロール記憶手段を更に備え、
前記相対的指向性に関する値が、前記基準座標記憶手段に記憶した基準座標に関する値と、前記基準方向記憶手段に記憶した基準方向に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値と、前記基準ロール記憶手段に記憶した基準ロールに関する値に基づいて計算されることが好ましい。
The present invention further includes a reference roll storage means for storing a value related to the reference roll with the reference direction as the rotation axis.
The relative directivity value relates to the value related to the reference coordinate stored in the reference coordinate storage means, the value related to the reference direction stored in the reference direction storage means, and the coordinates of the sound source stored in the sound source coordinate storage means. It is preferable to calculate based on the value and the value related to the reference roll stored in the reference roll storage means.
また本発明では、前記仮想空間が仮想三次元空間であり、
前記音声出力調整手段が、前記仮想三次元空間における前記音源の座標を、前記基準座標を通り、前記基準方向に水平であり、前記基準ロールに対応する平面の二次元座標に変換して、前記相対的指向性に関する値を計算することが好ましい。
In the present invention, the virtual space is a virtual three-dimensional space,
The sound output adjustment means converts the coordinates of the sound source in the virtual three-dimensional space into two-dimensional coordinates of a plane that passes through the reference coordinates, is horizontal in the reference direction, and corresponds to the reference roll, and It is preferred to calculate a value for the relative directivity.
また本発明では、前記音声出力調整手段は、前記相対的指向性に関する値を、前記基準方向に平行な基準方向軸における前記音源の座標と前記基準座標の変位であるZ軸変位及び前記基準方向の垂直な垂直方向軸における前記音源の座標と前記基準座標の変位であるX軸変位として求め、前記X軸変位がプラスの場合には第一又は第二の音声出力手段のいずれか一方の音声出力手段に他方の音声出力手段よりも大きい音声出力を与え、前記X軸変位がマイナスの場合には前記他方の音声出力手段に前記一方の音声出力手段よりも大きい音声出力を与えることが好ましい。 In the present invention, the sound output adjusting means may determine the relative directivity value as a Z-axis displacement which is a displacement of the sound source coordinate and the reference coordinate on a reference direction axis parallel to the reference direction, and the reference direction. Is obtained as an X-axis displacement which is a displacement of the coordinate of the sound source and the reference coordinate on the vertical axis of the sound, and when the X-axis displacement is positive, the sound of either the first or second sound output means It is preferable to give a larger sound output to the output means than the other sound output means, and to give a larger sound output to the other sound output means than the one sound output means when the X-axis displacement is negative.
また本発明では、前記音声出力調整手段は、前記Z軸変位及び/又は前記X軸変位がそれぞれの対応する所定の閾値より大きい前記音源についての前記第一及び第二の音声出力手段の音声出力がゼロとなるよう制御することが好ましい。 In the present invention, the audio output adjusting means may output the audio output of the first and second audio output means for the sound source in which the Z-axis displacement and / or the X-axis displacement is greater than a corresponding predetermined threshold value. Is preferably controlled to be zero.
また本発明では、基準座標の基準方向の反対側に前記音源が存在することを前記Z軸変位が示す場合に、前記音声出力調整手段は、前記第一及び第二の音声出力手段の音声出力が小さくなるように制御することが好ましい。 In the present invention, when the Z-axis displacement indicates that the sound source exists on the opposite side of the reference direction of the reference coordinates, the sound output adjusting means outputs the sound output of the first and second sound output means. It is preferable to control so that becomes small.
また本発明では、前記第一又は第二の音声出力手段のうちのより大きい音声出力が与えられた音声出力手段の音声出力を、前記それぞれの対応する閾値とX軸変位及び/又はZ軸変位の差に比例して大きくなるように制御することが好ましい。 In the present invention, the audio output of the audio output means to which the larger audio output of the first or second audio output means is given is converted into the corresponding threshold value, the X-axis displacement and / or the Z-axis displacement. It is preferable to control so as to increase in proportion to the difference.
また本発明では、前記音声出力調整手段は、前記第一又は第二の音声出力手段のうちのより小さい音声出力が与えられた音声出力手段の音声出力が、前記第一又は第二の音声出力手段のうちのより大きい音声出力が与えられた音声出力手段の音声出力の所定割合となるよう制御することが好ましい。 In the present invention, the audio output adjusting means may be configured such that the audio output of the audio output means provided with a smaller audio output of the first or second audio output means is the first or second audio output. It is preferable to control so as to be a predetermined ratio of the sound output of the sound output means to which the larger sound output of the means is given.
また本発明は、仮想空間における仮想モデルの状態に応じた音声を出力するコンテンツ再生装置であって、
仮想空間における基準座標に関する値を記憶する基準座標記憶手段と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶手段と、
前記基準座標記憶手段に記憶した基準座標に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値に基づいて、前記基準座標から前記音源の座標までの距離に関する値を計算し、この値が小さい場合により大きい音声出力を与える音声出力調整手段と、
を備えることを特徴とするコンテンツ再生装置とすることが可能である。
Further, the present invention is a content playback device that outputs sound according to the state of a virtual model in a virtual space,
Reference coordinate storage means for storing values relating to reference coordinates in virtual space;
Sound source coordinate storage means for storing values relating to the coordinates of the sound source in the virtual space;
Based on the value related to the reference coordinates stored in the reference coordinate storage means and the value related to the coordinates of the sound source stored in the sound source coordinate storage means, a value related to the distance from the reference coordinates to the coordinates of the sound source is calculated. Audio output adjustment means for providing a larger audio output when the value is small;
It is possible to provide a content reproduction device characterized by comprising:
また本発明では、前記音源を仮想空間上の不可視のオブジェクトとすることが好ましい。 In the present invention, it is preferable that the sound source is an invisible object in a virtual space.
本発明はまた、仮想空間における仮想モデルの状態に応じた音声を出力するコンテンツ再生プログラムであって、
コンピュータに、
仮想空間における基準座標に関する値を記憶する基準座標記憶制御と、
仮想空間における基準方向に関する値を記憶する基準方向記憶制御と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶制御と、
前記基準座標記憶制御により記憶された前記基準座標に関する値と、前記基準方向記憶制御により記憶された前記基準方向に関する値と、前記音源座標記憶制御により記憶された前記音源の座標に関する値に基づいて、前記音源についての相対的指向性に関する値を計算し、当該相対的指向性に関する値に応じて第一、第二の音声出力手段に与える音声出力を調整する音声出力調整制御とを実行させることを特徴とするコンテンツ再生プログラムとすることが可能である。
The present invention is also a content reproduction program for outputting sound according to the state of the virtual model in the virtual space,
On the computer,
Reference coordinate storage control for storing values related to reference coordinates in the virtual space;
Reference direction storage control for storing values related to the reference direction in the virtual space;
Sound source coordinate storage control for storing values related to the coordinates of the sound source in the virtual space;
Based on the value related to the reference coordinate stored by the reference coordinate storage control, the value related to the reference direction stored by the reference direction storage control, and the value related to the coordinate of the sound source stored by the sound source coordinate storage control. Calculating a value related to the relative directivity of the sound source, and executing sound output adjustment control for adjusting the sound output given to the first and second sound output means according to the value related to the relative directivity. It is possible to provide a content reproduction program characterized by
本発明はまた、仮想空間における仮想モデルの状態に応じた音声を出力するコンテンツ再生プログラムであって、
コンピュータに、
仮想空間における基準座標に関する値を記憶する基準座標記憶制御と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶制御と、
前記基準座標記憶制御により記憶された前記基準座標に関する値と、前記音源座標記憶制御により記憶された前記音源の座標に関する値に基づいて、前記基準座標から前記音源の座標までの距離に関する値を計算し、この値が小さい場合により大きい音声出力を与える音声出力調整制御とを実行させることを特徴とするコンテンツ再生プログラムとすることが可能である。
The present invention is also a content reproduction program for outputting sound according to the state of the virtual model in the virtual space,
On the computer,
Reference coordinate storage control for storing values related to reference coordinates in the virtual space;
Sound source coordinate storage control for storing values related to the coordinates of the sound source in the virtual space;
Based on the value related to the reference coordinates stored by the reference coordinate storage control and the value related to the coordinates of the sound source stored by the sound source coordinate storage control, a value related to the distance from the reference coordinates to the coordinates of the sound source is calculated. Then, it is possible to provide a content reproduction program characterized by executing audio output adjustment control that gives a larger audio output when this value is small.
請求項1、11、13又は14の発明は、特定の座標及び方向(基準座標及び基準方向)と音源の座標との相対的な位置関係を表す指標として相対的指向性に関する値を計算し、その計算結果をスピーカー等の音声出力手段から出力される音量やバランスに反映させることで、仮想空間における上記相対的な位置関係を音声によって認識することを可能とし、これにより、視聴者のコンテンツへの没入度を上昇させるものである。また音声に加えて映像(例えば、仮想空間内の仮想モデルを仮想カメラにより撮影した映像)の出力が行われるコンテンツの場合であれば、その映像の現実感を高め、結果として映像を視聴している人の没入感を上昇させることができる。
The invention of
請求項2の発明によれば、既存のステレオシステム用のハードウエアを活用することが可能である。
According to the invention of
請求項3の発明によれば、音声及び映像の出力が行われる映像コンテンツに本発明を適用することが可能となる。
According to the invention of
請求項4の発明によれば、仮想カメラのロールに変化を加えることで迫力のある映像が出力されるフライトシミュレータや映画などへの本発明の適用が可能となり、仮想空間における仮想カメラの座標や方向の変化に加え、仮想カメラのロールの変化に伴う音声のバランス、大小等のあるべき変化を忠実に再現することが可能になる。
According to the invention of
請求項5の発明では、スピーカーなどの音声出力手段により再現できる次元数にまで次元数を圧縮した計算に基づいて第一、第二の音声出力手段に与える音声出力を調整することが可能となり、音声出力の調整の高速化を達成することができる。
In the invention of
請求項6の発明によれば、相対的指向性に関する値として、それぞれ相互に垂直の成分よりなる2つのパラメータ(X軸変位及びZ軸変位)が導出され、X軸変位を用いた簡易かつ効率的な音声出力の調整を行うことが可能となる。 According to the sixth aspect of the present invention, two parameters (X-axis displacement and Z-axis displacement) each having a mutually perpendicular component are derived as values relating to relative directivity, and simple and efficient using the X-axis displacement. It is possible to adjust the sound output in a typical manner.
請求項7の発明によれば、ある特定の音源のZ軸変位及び/又はX軸変位がそれぞれについて定められた所定の閾値を越えた場合には、その音源についての音声出力がゼロに調整されるため、仮想モデル中に多数の音源が配置されている場合などにおける音声出力の調整を合理的な基準に基づいて高速化することが可能になる。 According to the seventh aspect of the present invention, when the Z-axis displacement and / or the X-axis displacement of a specific sound source exceeds a predetermined threshold value determined for each, the sound output for the sound source is adjusted to zero. Therefore, it is possible to speed up the adjustment of the audio output based on a reasonable standard when a large number of sound sources are arranged in the virtual model.
請求項8の発明によれば、前からの音のほうが聞こえやすいという人間の耳の集音の指向性をも加味し、より没入感を高めることが可能になる。 According to the eighth aspect of the present invention, it is possible to further enhance the sense of immersion by taking into consideration the directivity of the collected sound of the human ear that the sound from the front is easier to hear.
請求項9の発明によれば、音源とのあらゆる位置関係について出力値の不連続性がなく、リアリティの観点からも十分妥当で計算も容易な出力特性を得ることが可能になる。 According to the ninth aspect of the present invention, it is possible to obtain output characteristics that are free from discontinuities in output values for any positional relationship with the sound source, and that are sufficiently valid and easy to calculate from the viewpoint of reality.
請求項10の発明によれば、出力バランスを小さくしたい側の音声出力手段の出力値として妥当な値を簡易かつ高速に計算することが可能になる。 According to the tenth aspect of the present invention, it is possible to easily and quickly calculate a reasonable value as the output value of the audio output means on the side where the output balance is desired to be reduced.
請求項12の発明によれば、音源オブジェクトを不可視にできるため、どのような環境にも対応することが可能になる。ハードウェア、ソフトウエアまたは世界観等の制約上、近似的にしか音源座標や音源数を設定できない場合でも違和感なく本発明を適用することが可能になる。また、不可視の音源オブジェクトを自由に配置することができるため、エフェクトその他の演出やヒント提供等の自由度も広げることが可能になる。また、音声のみからなる演出やゲームも無駄なく作成することが可能になる。
According to the invention of
以下、ステレオシステムを備えた家庭用ゲーム機上で実行されるフライトシミュレータゲームにおいて映像及び音声の出力が行われるコンテンツを例にとり、本発明の実施形態を説明する。この実施形態では、遊技者により操作されるプレイヤキャラクタ(飛行機)に設定された仮想カメラと各音源との位置関係に基づいて相対的指向性に関する値を導出し、当該値に基づいて左右のスピーカーにおける音声出力の調整が行われる。 Hereinafter, an embodiment of the present invention will be described with reference to an example of content in which video and audio are output in a flight simulator game executed on a consumer game machine equipped with a stereo system. In this embodiment, a value related to relative directivity is derived based on a positional relationship between a virtual camera set on a player character (airplane) operated by a player and each sound source, and left and right speakers are based on the value. The audio output is adjusted at.
図1は、本発明によるコンテンツ再生装置全体の外観構成を示す説明図である。 FIG. 1 is an explanatory diagram showing the external configuration of the entire content reproduction apparatus according to the present invention.
図示されるように、本発明によるコンテンツ再生装置は、ゲーム機本体1、これにケーブル4で接続されたアンプ付モニター2、さらにこのアンプの出力端子にケーブル接続され、ステレオ形式の音声出力手段として動作する左右のラウドスピーカ(3L,3R)によって主に構成される。
As shown in the figure, the content playback apparatus according to the present invention includes a
また、ゲーム機本体1は、電源スイッチ11、リセットスイッチ12、コントローラ部13、メモリポート14、媒体挿入口15等を備えている。本実施形態では、この本体に、本発明によるコンテンツ再生プログラムを含むゲームソフトウエア媒体(DVD−ROM)16を組み込み、全体として、本発明によるコンテンツ再生装置を構成している。
In addition, the game machine
図2には、ゲーム機本体1に内蔵されるハードウェアの概略的な構成が示されている。
FIG. 2 shows a schematic configuration of hardware built in the game machine
図2では、ゲーム用コンピュータとしての一般的な構成として、CPU21、ROM22、RAM23、ハートディスク24、記録媒体ドライブ25、画像合成IC26、音声合成IC27、その他のI/Oポート28、バス29を備える。特に、音声合成IC27は、本発明によるステレオ出力を実施するため左右の出力ポート27L及び27Rを備え、それぞれから右側用と左側用の音声データをアナログ出力するように構成されており、前記アンプ付モニタ−2のアンプを介してそれぞれ左と右のラウドスピーカ(3L,3R)から音声を出力できるように構成されている。
In FIG. 2, a general configuration as a game computer includes a CPU 21, a ROM 22, a
また、RAM(揮発メモリ)23内には、本発明の最良の形態を実施するために必要ないくつかの要素を備えている。 In addition, the RAM (volatile memory) 23 includes some elements necessary for implementing the best mode of the present invention.
すなわち、RAM23には、遊戯者により操作されるプレイヤキャラクタである飛行機のオブジェクトに設定された仮想カメラの座標、向き及びロールを、それぞれ基準座標、基準方向及び基準ロールとして記憶するための基準座標記憶部23a、基準方向記憶部23b及び基準ロール記憶部23dが、それぞれ静的領域やスタック領域としてアドレスを指定して確保されている。また、各音源の座標等を記憶するための音源座標記憶部23cが、音源の数分だけヒープ領域等に確保されている。
That is, the
さらに、RAM23内には、本発明により音声出力調整を行うためのプログラムである音声出力調整部23eが記憶媒体ドライブ25等から読み込まれて記憶されるほか、基準座標の遷移などゲーム状態自体の制御や最終的な音声出力も含めた演出関係の入出力制御等、全体的な制御を行うプログラムである全体制御部23fも同様に読み込まれて記憶されている。
Furthermore, in the
図3は、これらの記憶領域及びプログラムに関して、本発明によるデータの流れを示した機能ブロックの主要部分である。 FIG. 3 is a main part of the functional block showing the flow of data according to the present invention regarding these storage areas and programs.
全体制御部23fは、ゲームの進行制御や映像並びに音声の出力のための入出力制御等、全体的な制御を行うプログラムである。即ち、全体制御部23fは、仮想空間内に音源(音を発するオブジェクト。例えば、火山、敵機、ヘリコプター等のオブジェクト)を含む複数のオブジェクトを配置することで仮想モデルを構築し、仮想カメラから見たこの仮想モデルの映像を描画することにより動画像を生成するとともに、音声出力調整部23eから受信した各音源についての音量及び左右バランスを図示しない各音源のサウンド情報(火山の爆発音やジェット音、ヘリコプターの音等)と組み合わせて音声合成IC27に与え、音声合成IC27が左(L)と右(R)のラウドスピーカに対し遊戯者の没入感を高める音声合成を行えるようにする。また全体制御部23fは、各音源に設定された音量や座標を更新して音源座標記憶部23cに格納し、遊戯者のコントローラ操作に応じて仮想カメラの基準座標、基準方向及び基準ロールを更新して基準座標記憶部23a、基準方向記憶部23b及び基準ロール記憶部23dに格納するなどの処理を実行する。
The
音声出力調整部23eは、基準座標記憶部23a、基準方向記憶部23b、音源座標記憶部23c、基準ロール記憶部23dが格納している値を参照して、後述する計算方式により、各音源についての音量及び左右バランス(LとRの出力値)を算出し、全体制御部23fに与えることになる。
The audio output adjustment unit 23e refers to the values stored in the reference coordinate storage unit 23a, the reference
図4は、メモリ23内の基準座標記憶部23a、基準方向記憶部23b、音源座標記憶部23c、基準ロール記憶部23dに、本実施形態に対応する具体的な値が格納されている様子を示している。
FIG. 4 shows a state in which specific values corresponding to the present embodiment are stored in the reference coordinate storage unit 23a, the reference
基準座標記憶部23aには、基準座標としての仮想カメラのワールド座標が格納されている。このゲームは仮想モデルや仮想カメラの状態の変化に伴う映像及び音声の変化を楽しむものであり、仮想カメラから見た仮想モデルが描画され、同時に、仮想カメラに対して届く各音源からの音の聞こえ方を忠実に再現することにより没入感を高めるようにする。 The reference coordinate storage unit 23a stores world coordinates of the virtual camera as reference coordinates. This game enjoys changes in video and audio accompanying changes in the state of the virtual model and virtual camera. The virtual model viewed from the virtual camera is drawn, and at the same time, the sound from each sound source that reaches the virtual camera is drawn. Improve the sense of immersion by faithfully reproducing the way you hear.
基準方向記憶部23bには、基準方向としての仮想カメラのワールド座標における方向が格納されている。この例では、水平が+60度、垂直が+30度であるため、仮想カメラの設置された飛行機が、ワールド座標のY軸からZ軸を中心に60度だけ時計回りに回転し、かつ、Z軸のプラス方向に30度回転した方向に上昇して飛んでいる状態を記憶している。仮想カメラの位置に遊技者(視聴者)が居るとするならば、音源から遊技者に届く音声は、その遊技者の居る座標だけでなく、その遊技者の向きによっても異なることは明らかである。本発明では、こうしたリアリティを忠実に再現するために、仮想カメラの向きをも反映させて音源の音量及び左右バランスを算出する。
The reference
基準ロール記憶部23dには、基準ロールとして仮想カメラのワールド座標のXY平面(水平線)に対する傾きを記憶している。この場合−30度であるため、反時計回りに30度傾いた状態を記憶している。基準方向の場合と同様、仮想カメラの位置に居る遊技者が傾斜した状態であるとするならば、その傾斜が音源からの音声の聞こえ方に影響することは明らかであり、本発明では、このリアリティも反映できるようにするために、仮想カメラの基準ロールをも反映させて音源の音量及び左右バランスを算出する。
The reference
図中、23c(1)から23c(3)までは、それぞれ、火山(1)、敵ジェット機(2)、味方ヘリコプター(3)である各音源オブジェクトの座標を中心とした属性を格納するものである。座標はワールド座標であり、上記基準座標との距離が大きいほど音量が少なくなるように計算する。また、XrとZrの値は音源固有の音量(例えば、火山やジェット機は大きく、ヘリコプターは少ない等)を反映した閾値であり、固有の音量が大きければ離れていても聞こえるというリアリティを反映している。 In the figure, 23c (1) to 23c (3) store attributes centered on the coordinates of each sound source object which is a volcano (1), an enemy jet (2), and a friendly helicopter (3), respectively. is there. The coordinates are world coordinates, and the volume is calculated so as to decrease as the distance from the reference coordinates increases. Also, the values of Xr and Zr are threshold values reflecting the sound volume specific to the sound source (for example, volcanoes and jet planes are large, helicopters are small, etc.), and reflect the reality that the sound can be heard even if they are far apart. Yes.
なお、この実施形態では、基準方向及び基準ロールを基準としたXZ平面(以降、主観的XZ平面と呼ぶ)に各音源を投影して各音源の相対的指向性を求めるため、上記閾値としては主観的XZ平面におけるX軸方向(横方向)及びZ軸方向(縦方向)の閾値Xr、Zrの二つのみを用いている。 In this embodiment, since each sound source is projected on an XZ plane (hereinafter referred to as a subjective XZ plane) based on the reference direction and the reference roll to obtain the relative directivity of each sound source, Only two threshold values Xr and Zr in the X-axis direction (lateral direction) and the Z-axis direction (vertical direction) in the subjective XZ plane are used.
図5は、火山オブジェクト(1)を、主観的XZ平面に投影して相対的指向性を算出する様子を示したものである。図の主観的XZ平面のZ軸は、カメラのZ軸であり、ワールド座標における基準方向に対応する。また、図の主観的XZ平面のX軸は、カメラのX軸をカメラの傾き(基準ロール)分だけカメラのZ軸を中心に回転した新しいX軸であり、ワールド座標のX軸ともカメラのX軸そのものとも異なる。 FIG. 5 shows how the relative directivity is calculated by projecting the volcano object (1) onto the subjective XZ plane. The Z axis of the subjective XZ plane in the figure is the Z axis of the camera and corresponds to the reference direction in world coordinates. The X-axis of the subjective XZ plane in the figure is a new X-axis obtained by rotating the camera's X-axis around the camera's Z-axis by the camera tilt (reference roll). Also different from the X axis itself.
仮想カメラ51は、フライトシミュレータにおいて飛行機からの視野を捕らえるためのものであり、主観的XZ平面上の原点座標に位置する。なお、この主観的XZ平面の原点座標は、客観的なワールド座標では上述のとおり(X=120、Y=60、Z=40)に対応する。 The virtual camera 51 is for capturing a field of view from an airplane in a flight simulator, and is located at an origin coordinate on a subjective XZ plane. The origin coordinates of the subjective XZ plane correspond to the objective world coordinates as described above (X = 120, Y = 60, Z = 40).
図中52は、火山の噴火口のワールド座標(X=180、Y=60、Z=40)を、主観的XZ平面に垂直に投影したものである。 In the figure, 52 is a projection of the world coordinates (X = 180, Y = 60, Z = 40) of the volcanic crater perpendicular to the subjective XZ plane.
本実施形態では、音源の仮想カメラに対する相対的指向性を、仮想カメラから主観的XZ平面に投影された音源の座標への変位(X方向における変位Xp及びZ方向におけるZp)によって近似的に把握し、この相対的指向性を用いて音源からの音量に関する忠実なリアリティの再現と、高速な左右バランスの調整とを可能にしている。 In this embodiment, the relative directivity of the sound source with respect to the virtual camera is approximately grasped by the displacement from the virtual camera to the coordinates of the sound source projected on the subjective XZ plane (displacement Xp in the X direction and Zp in the Z direction). The relative directivity is used to reproduce faithful reality regarding the sound volume from the sound source and to adjust the left / right balance at high speed.
以下、例の値に従って、Xp及びZpの値を実際に計算してみる。 Hereinafter, the values of Xp and Zp are actually calculated according to the example values.
火山のワールド座標(X=180、Y=60、Z=40)を仮想カメラの基準座標(X=120、Y=60、Z=40)を原点とするように平行移動すると(X0=60、Y0=0、Z0=0)となる。以降以下のような順序で計算する。 When the world coordinates (X = 180, Y = 60, Z = 40) of the volcano are translated with the reference coordinates (X = 120, Y = 60, Z = 40) of the virtual camera as the origin, (X 0 = 60) , Y 0 = 0, Z 0 = 0). Thereafter, calculation is performed in the following order.
まず、以下のように平行移動した値を座標変数に代入する。
X0=60
Y0=0
Z0=0
First, the translated value is substituted into the coordinate variable as follows.
X 0 = 60
Y 0 = 0
Z 0 = 0
ついで、基準方向がZ軸を中心に時計回りに60度回転するので、音源座標は、以下のようにXYの値のみを反時計回りに60度回転する。
X1=X0cos60°−Y0sin60°=30
Y1=X0sin60°+Y0cos60°=30×√3
Z1=Z0=0
Next, since the reference direction is rotated 60 degrees clockwise around the Z axis, the sound source coordinates are rotated 60 degrees counterclockwise only for the value of XY as follows.
X 1 = X 0 cos 60 ° −Y 0 sin 60 ° = 30
Y 1 = X 0 sin 60 ° + Y 0 cos 60 ° = 30 × √3
Z 1 = Z 0 = 0
ついで、基準方向がX軸を中心に見上げるように30度回転するので、音源座標は、以下のようにYZの値を時計回りに30度回転する。
X2=X1=30
Y2=Y1cos(−30°)−Z1sin(−30°)=45
Z2=Y1sin(−30°)+Z1cos(−30°)=−15×√3
Next, since the reference direction is rotated 30 degrees so that the reference direction is looked up around the X axis, the sound source coordinates are rotated 30 degrees clockwise in the YZ value as follows.
X 2 = X 1 = 30
Y 2 = Y 1 cos (−30 °) −Z 1 sin (−30 °) = 45
Z 2 = Y 1 sin (−30 °) + Z 1 cos (−30 °) = − 15 × √3
ついで、基準ロールがY軸を中心に反時計回りに30度回転するので、音源座標は、以下のようにXZの値を時計回りに30度回転する。
X3=X2cos(−30°)−Z2sin(−30°)=7.5×√3=12.99
Y3=Y2=45
Z3=X2sin(−30°)+Z2cos(−30°)=−37.5
Next, since the reference roll rotates 30 degrees counterclockwise around the Y axis, the sound source coordinates rotate the value of XZ 30 degrees clockwise as follows.
X 3 = X 2 cos (−30 °) −Z 2 sin (−30 °) = 7.5 × √3 = 12.99
Y 3 = Y 2 = 45
Z 3 = X 2 sin (−30 °) + Z 2 cos (−30 °) = − 37.5
最後に、最初にデフォルト(回転0、ロール0)の基準方向としたワールド座標のY軸が主観的XZ平面(ローカル座標)のZ軸となるように交換し、かつ、音源オブジェクトの座標を主観的XZ平面に垂直に投影するためYpのための座標(Z3)を捨象する結果、図中の求めるべきXp及びZpの値は以下のようになる。
Xp=X3=13(小数点以下四捨五入)
Zp=Y3=45
Finally, the world coordinate Y axis, which is the default (
Xp = X 3 = 13 (rounded off after the decimal point)
Zp = Y 3 = 45
以下、図6に示すフローチャートに従って、音声出力調整部23eにより実行される処理を説明する。 Hereinafter, the process executed by the audio output adjustment unit 23e will be described with reference to the flowchart shown in FIG.
図6に示すように、ステップS0において、全体制御部23fが、音源からの音量やバランスの更新をもたらす原因となるイベントを検出し、音声出力調整部23eを起動する。このようなイベントとしては、遊技者のコントローラ操作に基づく仮想カメラの基準座標、基準方向、基準ロールの変更のほか、経時的な火山の爆発、敵ジェット機や味方ヘリコプターの出現や移動など音源オブジェクト自体の更新、さらには、所定のタイマー割り込みの発生等がある。
As shown in FIG. 6, in step S0, the
これを受けた音声出力調整部23eが起動し、各音源オブジェクトについてステップS1以降の処理を行う。このとき、音声出力調整部23eは、各音源オブジェクトについて、音源座標記憶部23cに記憶された音源座標のほか縦方向及び横方向における変位の閾値Xr,Zrも取得する。
Receiving this, the audio output adjustment unit 23e is activated, and performs the processing from step S1 onward for each sound source object. At this time, for each sound source object, the sound output adjustment unit 23e also acquires displacement threshold values Xr and Zr in the vertical and horizontal directions in addition to the sound source coordinates stored in the sound source coordinate
まず、ステップS1において、上述した方式により、基準座標、基準方向、基準ロールを基準とした各音源オブジェクトの相対的指向性を、縦方向及び横方向における変位Xp及びZpとして求める。 First, in step S1, the relative directivity of each sound source object with reference to the reference coordinates, reference direction, and reference roll is obtained as displacements Xp and Zp in the vertical and horizontal directions by the method described above.
ついでステップS2に遷移し、その音源オブジェクトが基準方向の反対側にないかどうか、すなわちZpが負でないかどうかが検査される。 Next, the process proceeds to step S2, where it is checked whether the sound source object is not on the opposite side of the reference direction, that is, whether Zp is not negative.
Zpが負である場合は、ステップS3に遷移して、Zpを大きさが2倍の正の値にする処理が挿入される。これは、仮想カメラの位置に居る遊技者が仮想カメラと同じ方向(基準方向)を向いているとするならば、その遊技者の後ろ側にある音源からの音は小さくなるというリアリティを追求し没入感をより高めたものである。 If Zp is negative, the process proceeds to step S3, and a process of making Zp a positive value that is twice as large is inserted. This is because if the player at the virtual camera is facing the same direction (reference direction) as the virtual camera, the reality is that the sound from the sound source behind the player is reduced. A more immersive feeling.
ついで、ステップS4で、主観的XZ平面の縦(Z)方向の変位Zpが閾値Zr未満であるかを検査し、閾値Zr以上である場合は、可聴範囲外とみなし、ステップS5に遷移して、以降の計算処理を終了する。この結果、その音源オブジェクトからの音声出力はゼロになるように制御される。 Next, in step S4, whether or not the displacement Zp in the longitudinal (Z) direction of the subjective XZ plane is less than the threshold value Zr is determined to be outside the audible range, and the process proceeds to step S5. The subsequent calculation process is terminated. As a result, the sound output from the sound source object is controlled to be zero.
Zpが閾値Zr未満である場合は、ステップS6に遷移し、縦(Z)方向と同様横(X)方向についても、Xpが閾値Xr未満であるかが検査され、閾値Xr以上のときは、縦方向と同様に可聴範囲外とみなされて、以降の計算処理を終了し、音声出力がゼロになるように制御される。 If Zp is less than the threshold value Zr, the process proceeds to step S6, and it is checked whether Xp is less than the threshold value Xr in the horizontal (X) direction as well as the vertical (Z) direction. Similar to the vertical direction, it is regarded as being out of the audible range, and the subsequent calculation processing is terminated, and the sound output is controlled to be zero.
ついで、ステップS7では、左右バランスを判断するため変位Xpの正負が判断される。 In step S7, whether the displacement Xp is positive or negative is determined to determine the left / right balance.
ここで、Xpが正の場合は、ステップS10に遷移してまずは右バランスRvが以下の式(1)により決定される。
Rv ← 1−(Xp/Xr) 式(1)
Here, when Xp is positive, the process proceeds to step S10, and the right balance Rv is first determined by the following equation (1).
Rv ← 1- (Xp / Xr) Formula (1)
右辺を変形すると、(Xr−Xp)/Xrとなり、X軸変位Xpと閾値Xrの差に比例して出力が大きくなることを意味し、Xpの小さな変化を捉えて忠実にリアリティを再現することを可能にしている。 When the right side is deformed, it becomes (Xr-Xp) / Xr, which means that the output increases in proportion to the difference between the X-axis displacement Xp and the threshold value Xr, and faithfully reproduces reality by capturing small changes in Xp. Is possible.
Xpが正の場合はついでステップS11に遷移し、左バランスLvが以下の式(2)により決定される。
Lv ← Rv/2 式(2)
If Xp is positive, the process proceeds to step S11, and the left balance Lv is determined by the following equation (2).
Lv ← Rv / 2 Formula (2)
これにより、左側の出力(Lv)についても、Xpの小さな変化を確実に反映し、かつ、右側の出力(Rv)よりも小さな出力を得ることができるので、リアリティを反映した左右バランスを導出することができる。 As a result, a small change in Xp can be reliably reflected in the left output (Lv) and an output smaller than that in the right output (Rv) can be obtained. Therefore, a left / right balance reflecting reality is derived. be able to.
ステップS7で横方向変位Xpが0以下の場合は、ステップS8に遷移して以下の式(3)により左側の出力(Lv)を先に求める。
Lv ← 1−(−Xp/Xr) 式(3)
If the lateral displacement Xp is equal to or smaller than 0 in step S7, the process proceeds to step S8, and the left output (Lv) is obtained first by the following equation (3).
Lv <-1-(-Xp / Xr) Formula (3)
ついで、Xpが0でないときは、以下の式(4)により、右側の出力(Rv)を求める。
Rv ← Lv/2 式(4)
Next, when Xp is not 0, the right output (Rv) is obtained by the following equation (4).
Rv ← Lv / 2 Formula (4)
ただし、ステップS9では、Xpが0のときは、左右のバランスを等しくするためRvに定数1を格納し、Lvとバランスレベルが等しくなるようにする。 However, in step S9, when Xp is 0, a constant 1 is stored in Rv to equalize the left and right balance so that the balance level is equal to Lv.
このようにして、Xpが正の場合も負の場合も、それぞれの左右バランスをリアリティを反映させて計算し、ついでステップS12に遷移する。 In this way, whether Xp is positive or negative, the respective left and right balances are calculated by reflecting the reality, and then the process proceeds to step S12.
ステップS12では、既に定義したLv及びRvについて、縦方向変位Zpの値を以下の式(5)、式(6)により反映させる。
Lv ← Lv×(1−(Zp/Zr)) 式(5)
Rv ← Rv×(1−(Zp/Zr)) 式(6)
In step S12, the value of the longitudinal displacement Zp is reflected by the following formulas (5) and (6) for the previously defined Lv and Rv.
Lv ← Lv × (1- (Zp / Zr)) Formula (5)
Rv ← Rv × (1- (Zp / Zr)) Formula (6)
Xpの場合と同様、左辺を展開するとLv×((Zr−Zp)/Zr)等となり、Z軸変位Zpと閾値Zrの差に比例して出力が大きくなることを意味し、縦方向変位Zpの小さな変化を捉えて忠実にリアリティを再現することを可能にしている。 As in the case of Xp, when the left side is expanded, it becomes Lv × ((Zr−Zp) / Zr) etc., which means that the output increases in proportion to the difference between the Z-axis displacement Zp and the threshold value Zr, and the longitudinal displacement Zp It is possible to reproduce the reality faithfully by capturing small changes in
ついで、ステップS13で音声出力調整部23eの処理が終了し、音源オブジェクト毎のLv及びRvの値が全体制御部23fに与えられ、現在のリアリティを反映する値として、左右のラウドスピーカの音量及びバランスが決定される。
Next, in step S13, the processing of the audio output adjustment unit 23e is completed, and the values of Lv and Rv for each sound source object are given to the
以上、好ましい実施形態に基づいて本発明の説明を行ったが、本発明はこの実施形態により限定されるものではなく、特許請求の範囲の記載内において種々の改変が可能である。 The present invention has been described above based on the preferred embodiment, but the present invention is not limited to this embodiment, and various modifications can be made within the scope of the claims.
例えば、上記実施形態では本発明のコンテンツ再生装置が家庭用ゲーム機により構成される場合について説明したが、アーケードセンターに設置される業務用のゲーム機やパチンコ機、スロットマシンなどの他のハードウェアにより本発明のコンテンツ再生装置を構成することも可能である。 For example, in the above embodiment, the case where the content reproduction apparatus of the present invention is configured by a home game machine has been described, but other hardware such as a commercial game machine, a pachinko machine, a slot machine, etc. installed in an arcade center Thus, the content reproduction apparatus of the present invention can be configured.
また上記実施形態では、左右2つのスピーカが使用される場合を例として説明したが、上下に2組のステレオスピーカを設置し、4つのラウドスピーカに対応する4つの方向の範囲を関連づけて本発明を実施することもできる。この場合は主観的XZ平面に投影してからその変位により場合分けしてバランスを決定するのではなく、基準座標、基準方向、基準ロールを基準とした主観的なXYZ空間での変位を直接分析してバランスを決定することになる。 In the above embodiment, the case where two left and right speakers are used has been described as an example, but two sets of stereo speakers are installed at the top and bottom, and the ranges of four directions corresponding to the four loudspeakers are associated with each other. Can also be implemented. In this case, instead of projecting onto the subjective XZ plane and then determining the balance according to the displacement, the displacement in the subjective XYZ space based on the reference coordinates, reference direction, and reference roll is directly analyzed. Will determine the balance.
また上記実施形態では、プレイヤーの操作によって仮想空間を移動する仮想カメラの座標、方向、ロールに基づいて映像及び音声が変化するゲームに本発明を適用する場合を例として説明したが、予め定められた経路を移動する仮想カメラの座標、方向、ロールに基づいて映像及び音声が変化する映画などのコンテンツにも本発明は同様に適用することができる。 In the above embodiment, the case where the present invention is applied to a game in which video and audio change based on the coordinates, direction, and roll of a virtual camera that moves in a virtual space by a player's operation has been described as an example. The present invention can be similarly applied to content such as a movie in which video and audio change based on the coordinates, direction, and roll of a virtual camera moving along the route.
また上記実施形態では、スピーカから音声が出力されることに加え、モニタから仮想カメラにより撮影された仮想モデルの映像が出力されるコンテンツを例として説明したが、映像の出力を伴わない音声のみにより構成されるコンテンツにも本発明を適用することが可能である。この場合における本発明は、仮想カメラに代えて、音源との相対的位置関係を特定することを目的に設定された基準座標、基準方向及び/又は基準ロールを用い、上記実施形態と同様の態様により調整された出力の音声を各スピーカから出力するよう構成することができる。 Further, in the above-described embodiment, in addition to outputting sound from the speaker, description has been made by taking as an example the content in which the video of the virtual model shot by the virtual camera is output from the monitor. However, only the sound without video output is described. The present invention can also be applied to configured content. In this case, the present invention uses a reference coordinate, a reference direction, and / or a reference roll set for the purpose of specifying the relative positional relationship with the sound source instead of the virtual camera, and is similar to the above embodiment. It is possible to configure so that the output sound adjusted by the above is output from each speaker.
1 ゲーム機本体
2 アンプ付モニター
3L、3R ステレオ形式のラウドスピーカ
4 ケーブル
21 CPU
22 ROM
23 RAM
23a 基準座標記憶部
23b 基準方向記憶部
23c 音源座標記憶部
23c(1) 火山の音源オブジェクト
23c(2) 敵ジェット機の音源オブジェクト
23c(3) 味方ヘリコプターの音源オブジェクト
23d 基準ロール記憶部
23e 音声出力調整部(プログラム)
23f 全体制御部(プログラム)
24 ハードディスク
25 記憶媒体ドライブ
26 画像合成IC
27 音声合成IC
27L 左側用音声出力ポート
27R 右側用音声出力ポート
28 I/Oポート
51 仮想カメラ
52 音源オブジェクトの投影後の座標
1
22 ROM
23 RAM
23a reference coordinate
23f Overall control unit (program)
24 hard disk 25 storage medium drive 26 image composition IC
27 Speech synthesis IC
27L Left audio output port 27R Right audio output port 28 I / O port 51 Virtual camera 52 Coordinates after projection of sound source object
Claims (13)
仮想空間に配置された仮想カメラにより撮影した前記仮想モデルの映像を出力する映像出力手段と、
第一及び第二の音声出力手段と、
仮想空間における基準座標に関する値を記憶する基準座標記憶手段と、
仮想空間における基準方向に関する値を記憶する基準方向記憶手段と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶手段と、
前記基準座標記憶手段に記憶した前記基準座標に関する値と、前記基準方向記憶手段に記憶した前記基準方向に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値に基づいて、前記音源についての相対的指向性に関する値を計算し、当該相対的指向性に関する値に応じて前記第一、第二の音声出力手段に与える音声出力を調整する音声出力調整手段とを備え、
前記基準座標が前記仮想カメラの座標であり、前記基準方向が前記仮想カメラの撮影方向であることを特徴とするコンテンツ再生装置。 A content playback device that outputs video and audio in accordance with the state of a virtual model in a virtual space,
Video output means for outputting video of the virtual model taken by a virtual camera arranged in a virtual space ;
First and second audio output means;
Reference coordinate storage means for storing values relating to reference coordinates in virtual space;
Reference direction storage means for storing a value related to the reference direction in the virtual space;
Sound source coordinate storage means for storing values relating to the coordinates of the sound source in the virtual space;
The sound source based on the value related to the reference coordinate stored in the reference coordinate storage means, the value related to the reference direction stored in the reference direction storage means, and the value related to the coordinates of the sound source stored in the sound source coordinate storage means. A sound output adjusting means for calculating a value related to relative directivity and adjusting sound output given to the first and second sound output means according to the value related to the relative directivity ;
The reference coordinates of the coordinates of the virtual camera, the content reproducing apparatus in which the reference direction and wherein the photographing direction der Rukoto of the virtual camera.
前記相対的指向性に関する値が、前記基準座標記憶手段に記憶した前記基準座標に関する値と、前記基準方向記憶手段に記憶した前記基準方向に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値と、前記基準ロール記憶手段に記憶した前記基準ロールに関する値に基づいて計算されることを特徴とする請求項1又は2に記載のコンテンツ再生装置。 Reference roll storage means for storing a value related to the reference roll with the reference direction as the rotation axis,
A value related to the relative directivity includes a value related to the reference coordinate stored in the reference coordinate storage unit, a value related to the reference direction stored in the reference direction storage unit, and a value of the sound source stored in the sound source coordinate storage unit. The content reproduction apparatus according to claim 1 , wherein the content reproduction apparatus is calculated based on a value related to coordinates and a value related to the reference roll stored in the reference roll storage unit.
前記音声出力調整手段が、前記仮想三次元空間における前記音源の座標を、前記基準座標を通り、前記基準方向に水平であり、前記基準ロールに対応する平面の二次元座標に変換して、前記相対的指向性に関する値を計算することを特徴とする請求項3に記載のコンテンツ再生装置。 The virtual space is a virtual three-dimensional space;
The sound output adjustment means converts the coordinates of the sound source in the virtual three-dimensional space into two-dimensional coordinates of a plane that passes through the reference coordinates, is horizontal in the reference direction, and corresponds to the reference roll, and 4. The content reproduction apparatus according to claim 3 , wherein a value related to relative directivity is calculated.
前記基準座標記憶手段に記憶した前記基準座標に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値に基づいて、前記基準座標から前記音源の座標までの距離に関する値を計算し、この値が小さい場合により大きい音声出力を与えることを特徴とする請求項1〜9のいずれか一項に記載のコンテンツ再生装置。 The audio output adjusting means is
Based on the value related to the reference coordinates stored in the reference coordinate storage means and the value related to the coordinates of the sound source stored in the sound source coordinate storage means, a value related to the distance from the reference coordinates to the coordinates of the sound source is calculated. The content reproduction apparatus according to claim 1 , wherein a larger audio output is provided when the value is small.
コンピュータに、
仮想空間に配置された仮想カメラにより撮影した前記仮想モデルの映像を出力する映像出力制御と、
仮想空間における基準座標に関する値を記憶する基準座標記憶制御と、
仮想空間における基準方向に関する値を記憶する基準方向記憶制御と、
仮想空間における音源の座標に関する値を記憶する音源座標記憶制御と、
前記基準座標記憶制御により記憶された前記基準座標に関する値と、前記基準方向記憶制御により記憶された前記基準方向に関する値と、前記音源座標記憶制御により記憶された前記音源の座標に関する値に基づいて、前記音源についての相対的指向性に関する値を計算し、当該相対的指向性に関する値に応じて第一、第二の音声出力手段に与える音声出力を調整する音声出力調整制御とを実行させ、
前記基準座標が前記仮想カメラの座標であり、前記基準方向が前記仮想カメラの撮影方向であることを特徴とするコンテンツ再生プログラム。 A content playback program that outputs video and audio in accordance with the state of a virtual model in a virtual space,
On the computer,
Video output control for outputting video of the virtual model taken by a virtual camera arranged in a virtual space ;
Reference coordinate storage control for storing values related to reference coordinates in the virtual space;
Reference direction storage control for storing values related to the reference direction in the virtual space;
Sound source coordinate storage control for storing values related to the coordinates of the sound source in the virtual space;
Based on the value related to the reference coordinate stored by the reference coordinate storage control, the value related to the reference direction stored by the reference direction storage control, and the value related to the coordinate of the sound source stored by the sound source coordinate storage control. , Calculating a value related to the relative directivity of the sound source, and executing sound output adjustment control for adjusting the sound output given to the first and second sound output means according to the value related to the relative directivity ;
The reference coordinates of the coordinates of the virtual camera, the content playback program the reference direction and wherein the photographing direction der Rukoto of the virtual camera.
前記基準座標記憶手段に記憶した前記基準座標に関する値と、前記音源座標記憶手段に記憶した前記音源の座標に関する値に基づいて、前記基準座標から前記音源の座標までの距離に関する値を計算し、この値が小さい場合により大きい音声出力を与える処理が実行されることを特徴とする請求項12に記載のコンテンツ再生プログラム。 In the audio output adjustment control,
Based on the value related to the reference coordinates stored in the reference coordinate storage means and the value related to the coordinates of the sound source stored in the sound source coordinate storage means, a value related to the distance from the reference coordinates to the coordinates of the sound source is calculated. 13. The content reproduction program according to claim 12, wherein a process for giving a larger audio output is executed when the value is small.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006001785A JP4789145B2 (en) | 2006-01-06 | 2006-01-06 | Content reproduction apparatus and content reproduction program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006001785A JP4789145B2 (en) | 2006-01-06 | 2006-01-06 | Content reproduction apparatus and content reproduction program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007184792A JP2007184792A (en) | 2007-07-19 |
JP4789145B2 true JP4789145B2 (en) | 2011-10-12 |
Family
ID=38340489
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006001785A Expired - Fee Related JP4789145B2 (en) | 2006-01-06 | 2006-01-06 | Content reproduction apparatus and content reproduction program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4789145B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5437317B2 (en) | 2011-06-10 | 2014-03-12 | 株式会社スクウェア・エニックス | Game sound field generator |
JP7236914B2 (en) * | 2019-03-29 | 2023-03-10 | 日本放送協会 | Receiving device, distribution server and receiving program |
CN111922785B (en) * | 2020-07-09 | 2022-08-26 | 山西汾西重工有限责任公司 | Correction tool, machine tool virtual rotating shaft compensation method and system and five-axis machine tool |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08279055A (en) * | 1995-04-07 | 1996-10-22 | Hitachi Ltd | Video generation and display system |
FI116505B (en) * | 1998-03-23 | 2005-11-30 | Nokia Corp | Method and apparatus for processing directed sound in an acoustic virtual environment |
JP3583995B2 (en) * | 2000-01-21 | 2004-11-04 | 株式会社ソニー・コンピュータエンタテインメント | Entertainment device, storage medium, and object display method |
JP2004514359A (en) * | 2000-11-16 | 2004-05-13 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Automatic tuning sound system |
EP1274279B1 (en) * | 2001-02-14 | 2014-06-18 | Sony Corporation | Sound image localization signal processor |
US7492915B2 (en) * | 2004-02-13 | 2009-02-17 | Texas Instruments Incorporated | Dynamic sound source and listener position based audio rendering |
-
2006
- 2006-01-06 JP JP2006001785A patent/JP4789145B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2007184792A (en) | 2007-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6461850B2 (en) | Simulation system and program | |
JP6147486B2 (en) | GAME SYSTEM, GAME PROCESSING CONTROL METHOD, GAME DEVICE, AND GAME PROGRAM | |
JP3068205B2 (en) | Image processing apparatus, game machine using this processing apparatus, image processing method, and medium | |
US9219961B2 (en) | Information processing system, computer-readable non-transitory storage medium having stored therein information processing program, information processing control method, and information processing apparatus | |
JP6055657B2 (en) | GAME SYSTEM, GAME PROCESSING CONTROL METHOD, GAME DEVICE, AND GAME PROGRAM | |
US7697015B2 (en) | Storage medium and game device storing image generating program | |
JP6055651B2 (en) | Information processing system, information processing program, information processing control method, and information processing apparatus | |
JP2013250838A (en) | Information processing program, information processing device, information processing system and information processing method | |
JP2017119032A (en) | Game device and program | |
JP2019175323A (en) | Simulation system and program | |
JP4688267B2 (en) | GAME DEVICE AND INFORMATION STORAGE MEDIUM | |
JP3740518B2 (en) | GAME DEVICE, COMPUTER CONTROL METHOD, AND PROGRAM | |
CN108379842A (en) | Gaming audio processing method, device, electronic equipment and storage medium | |
JP2020031303A (en) | Voice generating program and voice generating apparatus in virtual space | |
US20100303265A1 (en) | Enhancing user experience in audio-visual systems employing stereoscopic display and directional audio | |
JP4789145B2 (en) | Content reproduction apparatus and content reproduction program | |
WO2019230567A1 (en) | Information processing device and sound generation method | |
JP2023168544A (en) | Low-frequency interchannel coherence control | |
JP5352628B2 (en) | Proximity passing sound generator | |
KR20210056414A (en) | System for controlling audio-enabled connected devices in mixed reality environments | |
JP7053074B1 (en) | Appreciation system, appreciation device and program | |
JP2020188435A (en) | Audio effect control device, audio effect control system, audio effect control method, and program | |
JP2020028419A (en) | Game program and game device | |
JP6737842B2 (en) | Game program and game device | |
WO2024189726A1 (en) | Calibration device and calibration method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101026 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101213 |
|
TRDD | Decision of grant or rejection written | ||
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20110620 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110621 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110713 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140729 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |