JP2003348699A - ゲーム機及びゲーム機用プログラム並びに送信受信装置 - Google Patents
ゲーム機及びゲーム機用プログラム並びに送信受信装置Info
- Publication number
- JP2003348699A JP2003348699A JP2002152744A JP2002152744A JP2003348699A JP 2003348699 A JP2003348699 A JP 2003348699A JP 2002152744 A JP2002152744 A JP 2002152744A JP 2002152744 A JP2002152744 A JP 2002152744A JP 2003348699 A JP2003348699 A JP 2003348699A
- Authority
- JP
- Japan
- Prior art keywords
- viewpoint
- game machine
- sound
- image
- localization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/6063—Methods for processing data by generating or executing the game program for sound processing
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/60—Methods for processing data by generating or executing the game program
- A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
- A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
Landscapes
- Stereophonic System (AREA)
Abstract
(57)【要約】
【課題】 視点の動きに連動した正確な音像定位を再生
させることができるゲーム機及びゲーム機用プログラム
並びに送信受信装置を提供する。 【解決手段】 視点の動きに連動して画像を変更すると
ともに、仮想空間内の音源と視点との相対位置を算出
し、算出された相対位置に応じた定位パラメータで視点
の動きに連動した音像定位処理を施し、仮想空間内での
音源が一対の再生スピーカ（１９０，１９１）を用いて
視点の存在する方向から発音しているように再生制御す
る制御手段（ＣＰＵブロック１００内のメインＣＰＵ１
０１）を備えた。
させることができるゲーム機及びゲーム機用プログラム
並びに送信受信装置を提供する。 【解決手段】 視点の動きに連動して画像を変更すると
ともに、仮想空間内の音源と視点との相対位置を算出
し、算出された相対位置に応じた定位パラメータで視点
の動きに連動した音像定位処理を施し、仮想空間内での
音源が一対の再生スピーカ（１９０，１９１）を用いて
視点の存在する方向から発音しているように再生制御す
る制御手段（ＣＰＵブロック１００内のメインＣＰＵ１
０１）を備えた。
Description
【０００１】
【発明の属する技術分野】本発明は、映像の動きを伴う
視聴環境での動きに応じた画像の変更方法、音像定位方
法及びそれらの方法を有するゲーム機及びゲーム機用プ
ログラム並びに送信受信装置に関する。
視聴環境での動きに応じた画像の変更方法、音像定位方
法及びそれらの方法を有するゲーム機及びゲーム機用プ
ログラム並びに送信受信装置に関する。
【０００２】
【従来の技術】従来、ゲーム機において、視点が固定し
た場面で音源の位置を定位させたり移動の方向がわかる
ように２つのスピーカを用いた音像定位処理が行われて
いる（例えば本出願人の特許第２８８２４４９号）。
た場面で音源の位置を定位させたり移動の方向がわかる
ように２つのスピーカを用いた音像定位処理が行われて
いる（例えば本出願人の特許第２８８２４４９号）。
【０００３】しかし、ハードウェアの処理能力の向上及
び画像処理技術が進むに従って視点の移動や回転が行わ
れるようになり（例えば、特開平６−２０５８７９号公
報、特開平９−１６７２５８号公報、特開平９−８３６
２６１号公報）、視点の変化により音響が不自然になら
ないように処理することが考えられるようになった（例
えば、特開平１０−１３７４４５号公報）。
び画像処理技術が進むに従って視点の移動や回転が行わ
れるようになり（例えば、特開平６−２０５８７９号公
報、特開平９−１６７２５８号公報、特開平９−８３６
２６１号公報）、視点の変化により音響が不自然になら
ないように処理することが考えられるようになった（例
えば、特開平１０−１３７４４５号公報）。
【０００４】ところが、この特開平１０−１３７４４５
号公報記載の技術では、複数の視点のうちいずれかの１
つの視点から空間を観察することにより得られる仮想画
像に対応させた音響を生成することができるが、その音
響は波形データの選択と加工、あるいは左右音声のバラ
ンスによるものであるから、個々の音源をきめ細かく定
位させることはできなかった。また、画面中を自由に移
動させる操作部の操作に応じて個々のキャラクタが発す
る複数の音源をそれぞれ独立してきめ細かく定位させる
ことはできなかった。
号公報記載の技術では、複数の視点のうちいずれかの１
つの視点から空間を観察することにより得られる仮想画
像に対応させた音響を生成することができるが、その音
響は波形データの選択と加工、あるいは左右音声のバラ
ンスによるものであるから、個々の音源をきめ細かく定
位させることはできなかった。また、画面中を自由に移
動させる操作部の操作に応じて個々のキャラクタが発す
る複数の音源をそれぞれ独立してきめ細かく定位させる
ことはできなかった。
【０００５】
【発明が解決しようとする課題】前述したように、従来
では、ゲームなどにおいて、固定された映像シーンに対
して移動物体が発する音の音像を任意に定位させること
が行われていた。近年のゲームなどでは、画面の移動や
回転をリアルタイムに自由に制御することが可能となっ
ており、従来の音像定位方法では不十分である。そこ
で、映像の視点の動きに連動して、音源（発音体）との
相対位置（方向、距離など）を検出し、音像定位におけ
るパラメータを逐次変更することによって、視点の動き
に連動した正確な音像定位を再生させることが求められ
るようになった。
では、ゲームなどにおいて、固定された映像シーンに対
して移動物体が発する音の音像を任意に定位させること
が行われていた。近年のゲームなどでは、画面の移動や
回転をリアルタイムに自由に制御することが可能となっ
ており、従来の音像定位方法では不十分である。そこ
で、映像の視点の動きに連動して、音源（発音体）との
相対位置（方向、距離など）を検出し、音像定位におけ
るパラメータを逐次変更することによって、視点の動き
に連動した正確な音像定位を再生させることが求められ
るようになった。
【０００６】本発明は上述した点に鑑みてなされたもの
で、視点の動きに連動した正確な音像定位を再生させる
ことができるゲーム機及びゲーム機用プログラム並びに
送信受信装置を提供することを目的とするものである。
で、視点の動きに連動した正確な音像定位を再生させる
ことができるゲーム機及びゲーム機用プログラム並びに
送信受信装置を提供することを目的とするものである。
【０００７】
【課題を解決するための手段】前記目的を達成するため
に、本発明に係るゲーム機は、視点の動きに連動して画
像を変更するとともに、仮想空間内の音源と視点との相
対位置を算出し、算出された相対位置に応じた定位パラ
メータで視点の動きに連動した音像定位処理を施し、仮
想空間内での音源が一対の再生スピーカを用いて視点の
動きに連動した仮想空間内の方向から発音しているよう
に再生制御する制御手段を備えたものである。
に、本発明に係るゲーム機は、視点の動きに連動して画
像を変更するとともに、仮想空間内の音源と視点との相
対位置を算出し、算出された相対位置に応じた定位パラ
メータで視点の動きに連動した音像定位処理を施し、仮
想空間内での音源が一対の再生スピーカを用いて視点の
動きに連動した仮想空間内の方向から発音しているよう
に再生制御する制御手段を備えたものである。
【０００８】また、本発明に係るゲーム機は、ゲーム機
用プログラムを供給するプログラム供給手段と、ゲーム
遊技者によりゲームをコントロールするためのコントロ
ーラと、前記プログラム供給手段により供給されたゲー
ム機用プログラムを制御するものであって、前記コント
ローラからの制御信号に基づいて画像の視点を変更する
制御部と、前記制御部による視点変更に応じた画像処理
を行う画像処理部と、前記画像処理部からの画像を表示
する表示部と、視点と音源との相対位置に応じた定位パ
ラメータで視点の動きに連動した音像定位処理を行う音
声処理部と、前記音声処理部からの音像定位処理された
結果を再生する一対のスピーカとを備えたものである。
用プログラムを供給するプログラム供給手段と、ゲーム
遊技者によりゲームをコントロールするためのコントロ
ーラと、前記プログラム供給手段により供給されたゲー
ム機用プログラムを制御するものであって、前記コント
ローラからの制御信号に基づいて画像の視点を変更する
制御部と、前記制御部による視点変更に応じた画像処理
を行う画像処理部と、前記画像処理部からの画像を表示
する表示部と、視点と音源との相対位置に応じた定位パ
ラメータで視点の動きに連動した音像定位処理を行う音
声処理部と、前記音声処理部からの音像定位処理された
結果を再生する一対のスピーカとを備えたものである。
【０００９】また、エンコードされたゲーム機用プログ
ラムを受信しデコードする通信インターフェースをさら
に有することを特徴とするものである。
ラムを受信しデコードする通信インターフェースをさら
に有することを特徴とするものである。
【００１０】また、本発明に係るゲーム機における前記
音像定位処理は、ＦＩＲフィルタ又はＩＩＲフィルタを
用いて処理されることを特徴とするものである。
音像定位処理は、ＦＩＲフィルタ又はＩＩＲフィルタを
用いて処理されることを特徴とするものである。
【００１１】また、本発明に係るゲーム機用プログラム
は、ゲーム機の制御手段としてのコンピュータに、視点
変更に応じた表示映像処理を行う手順と、視点と音源と
の相対位置を算出する手順と、算出された相対位置に応
じた定位パラメータで音像定位処理を行う手順とを実行
させるものである。
は、ゲーム機の制御手段としてのコンピュータに、視点
変更に応じた表示映像処理を行う手順と、視点と音源と
の相対位置を算出する手順と、算出された相対位置に応
じた定位パラメータで音像定位処理を行う手順とを実行
させるものである。
【００１２】さらに、本発明に係る送信受信装置は、前
記ゲーム機用プログラムを送信し又は受信することを特
徴とするものである。
記ゲーム機用プログラムを送信し又は受信することを特
徴とするものである。
【００１３】
【発明の実施の形態】図１は、本発明を適用した実施の
形態に係るゲーム機のブロック図を示す。図１に示すよ
うに、本実施の形態に係るゲーム機は、ＣＰＵブロック
１００、サウンドブロック１１０、遊技者がゲームを制
御するためのコントローラ（ジョイスティック、パッド
など）１２０、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどのデ
ィスク読み出しを行うディスク（ＤＩＳＫ）ドライブ１
３０、ゲーム画面の表示制御を行うビデオブロック１４
０、通信インターフェース１５０などがバスにより結合
されて構成される。
形態に係るゲーム機のブロック図を示す。図１に示すよ
うに、本実施の形態に係るゲーム機は、ＣＰＵブロック
１００、サウンドブロック１１０、遊技者がゲームを制
御するためのコントローラ（ジョイスティック、パッド
など）１２０、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭなどのデ
ィスク読み出しを行うディスク（ＤＩＳＫ）ドライブ１
３０、ゲーム画面の表示制御を行うビデオブロック１４
０、通信インターフェース１５０などがバスにより結合
されて構成される。
【００１４】コントローラ１２０により視点の変更や画
面の移動が指示されると、サブＣＰＵ１０２を経由して
メインＣＰＵ１０１のＲＡＭ１０３にロードされたプロ
グラムが視点変更を検出し、ビデオブロック１４０で視
点変更に応じた仮想画像を生成する。生成された仮想画
像は、映像出力端子１６０より映像信号としてディスプ
レイ１８０に供給され、画像が表示される。
面の移動が指示されると、サブＣＰＵ１０２を経由して
メインＣＰＵ１０１のＲＡＭ１０３にロードされたプロ
グラムが視点変更を検出し、ビデオブロック１４０で視
点変更に応じた仮想画像を生成する。生成された仮想画
像は、映像出力端子１６０より映像信号としてディスプ
レイ１８０に供給され、画像が表示される。
【００１５】メインＣＰＵ１０１は、視点と音源との相
対位置（方向、距離など）を逐次算出し、メインＣＰＵ
用のＲＡＭ１０４にロードされた定位パラメータ（定位
フィルタなど）を算出された相対位置に応じて設定し音
像定位処理を行う。このような概念で、視点の動きに連
動した正確な音像定位が可能となる。
対位置（方向、距離など）を逐次算出し、メインＣＰＵ
用のＲＡＭ１０４にロードされた定位パラメータ（定位
フィルタなど）を算出された相対位置に応じて設定し音
像定位処理を行う。このような概念で、視点の動きに連
動した正確な音像定位が可能となる。
【００１６】通信インターフェース１５０は、インター
ネットなどのネットワークから図示しない送信受信装置
を介して、例えばスクランブル付きエンコードされてい
るゲーム機用プログラムを受信しスクランブル解除しデ
コードして、他の構成要素に供給するために設けられて
おり、通信インターフェース１５０から供給されたゲー
ム機用プログラム及びデータは、ＲＡＭ１０３、ＲＡＭ
１０４にロードされる。また、通信インターフェース１
５０を介して図示しない送信受信装置によりネットワー
クに接続された他のユーザにゲーム機用プログラム及び
データを供給することもできる。なお、ここでは、ゲー
ム機としての各ブロックの機能について特に述べない。
ネットなどのネットワークから図示しない送信受信装置
を介して、例えばスクランブル付きエンコードされてい
るゲーム機用プログラムを受信しスクランブル解除しデ
コードして、他の構成要素に供給するために設けられて
おり、通信インターフェース１５０から供給されたゲー
ム機用プログラム及びデータは、ＲＡＭ１０３、ＲＡＭ
１０４にロードされる。また、通信インターフェース１
５０を介して図示しない送信受信装置によりネットワー
クに接続された他のユーザにゲーム機用プログラム及び
データを供給することもできる。なお、ここでは、ゲー
ム機としての各ブロックの機能について特に述べない。
【００１７】次に、音像定位処理の具体例を説明する。
図２は、一般的な２チャンネル再生フィルタのブロック
図である。図２の下に示す一対のスピーカＬ1，Ｌ2の再
生システムにおいて、聴取者の左右の耳までのインパル
ス応答をそれぞれｈl1,r1（ｔ）、ｈl2,r2（ｔ）、スピ
ーカヘの入力信号をｘ1（ｔ），ｘ2（ｔ）とすると、両
耳で再生される音圧ｐl（ｔ），ｐr（ｔ）は次式（１）
で表わされる。
図２は、一般的な２チャンネル再生フィルタのブロック
図である。図２の下に示す一対のスピーカＬ1，Ｌ2の再
生システムにおいて、聴取者の左右の耳までのインパル
ス応答をそれぞれｈl1,r1（ｔ）、ｈl2,r2（ｔ）、スピ
ーカヘの入力信号をｘ1（ｔ），ｘ2（ｔ）とすると、両
耳で再生される音圧ｐl（ｔ），ｐr（ｔ）は次式（１）
で表わされる。
【数１】
【００１８】今、図２に示すように、自由音場内の任意
の位置Ｐの単一音源と両耳とのインパルス応答をそれぞ
れｆl（ｔ），ｆr（ｔ）とし、図２の再生システムでこ
のｆ l（ｔ），ｆr（ｔ）を再現することを考えると、ｐ
l（ｔ）＝ｆl（ｔ）、ｐr（ｔ）＝ｆr（ｔ）となるの
で、式（１）は、下式（２）となる。
の位置Ｐの単一音源と両耳とのインパルス応答をそれぞ
れｆl（ｔ），ｆr（ｔ）とし、図２の再生システムでこ
のｆ l（ｔ），ｆr（ｔ）を再現することを考えると、ｐ
l（ｔ）＝ｆl（ｔ）、ｐr（ｔ）＝ｆr（ｔ）となるの
で、式（１）は、下式（２）となる。
【数２】
【００１９】式（２）の両辺をフーリエ変換すると、次
式（３）が得られる。
式（３）が得られる。
【数３】
【００２０】スピーカヘの入力信号は周波数領域で次式
（４）のようになる。
（４）のようになる。
【数４】
ここで、
【数５】
【００２１】したがって、時間領域の信号はその逆フー
リエ変換で得られ、次式（６）で表される。
リエ変換で得られ、次式（６）で表される。
【数６】
ここで、ｄ（ｔ）はＤ（ω）を逆フーリエ変換したもの
である。また、解が１つに決まるためには、すべての周
波数領域にわたってＤ（ω）≠０となることが必要十分
な条件である。式（６）から２チャンネル再生フィルタ
のブロック図を書くことができ、図２のようになる。
である。また、解が１つに決まるためには、すべての周
波数領域にわたってＤ（ω）≠０となることが必要十分
な条件である。式（６）から２チャンネル再生フィルタ
のブロック図を書くことができ、図２のようになる。
【００２２】このように定位させたい位置のインパルス
応答ｆl（ｔ），ｆr（ｔ）及び再生系のインパルス応答
ｈl1,r1，ｈl2,r2をあらかじめ用意しておけば、図２に
示すブロック図により音源の定位が可能となる。図２に
示すブロック図において、定位させたい方向の数だけｆ
l（ｔ），ｆr（ｔ）の対を用意しておき（ｆl0（ｔ）、
・・・、ｆlm（ｔ）、ｆr0（ｔ）、・・・、ｆ
rm（ｔ））、方向によってｆlm（ｔ），ｆrm（ｔ）を切
り替えるようにすれば、定位を任意の位置に変更するこ
とが可能となり、また、ｆlm（ｔ），ｆrm（ｔ）を連続
的に変更すれば音源の移動も可能となる。図３は、定位
位置を変更可能にしたブロック図を示す。
応答ｆl（ｔ），ｆr（ｔ）及び再生系のインパルス応答
ｈl1,r1，ｈl2,r2をあらかじめ用意しておけば、図２に
示すブロック図により音源の定位が可能となる。図２に
示すブロック図において、定位させたい方向の数だけｆ
l（ｔ），ｆr（ｔ）の対を用意しておき（ｆl0（ｔ）、
・・・、ｆlm（ｔ）、ｆr0（ｔ）、・・・、ｆ
rm（ｔ））、方向によってｆlm（ｔ），ｆrm（ｔ）を切
り替えるようにすれば、定位を任意の位置に変更するこ
とが可能となり、また、ｆlm（ｔ），ｆrm（ｔ）を連続
的に変更すれば音源の移動も可能となる。図３は、定位
位置を変更可能にしたブロック図を示す。
【００２３】図３に示すブロックを複数個用意すれば、
複数の音源を任意の位置に定位及び移動させることがで
きる。このブロック図を図４に示す。図４は、図３を複
数個（ｍ個）用意したものであるが、ｆlm（ｔ），ｆrm
（ｔ）を切り替えるときに発生する信号の不連続による
ノイズを軽減するためにクロスフェード処理を付加して
ある。クロスフェード処理は、現在の定位位置の処理と
前回の定位位置の処理を並列に行い、この２つの結果を
クロスフェードすることによって実現している。この原
理を図５に示す。したがって、図４のブロックでは、ク
ロスフェード処理のために、ｆlm（ｔ），ｆrm（ｔ）を
処理する部分をそれぞれ２組用意している。この図４が
本発明の音像定位処理の具体例となる。図４に示すよう
に、各再生フィルタの出力に残響処理などの処理を組み
込み、音場を拡大するようにしてもよい。
複数の音源を任意の位置に定位及び移動させることがで
きる。このブロック図を図４に示す。図４は、図３を複
数個（ｍ個）用意したものであるが、ｆlm（ｔ），ｆrm
（ｔ）を切り替えるときに発生する信号の不連続による
ノイズを軽減するためにクロスフェード処理を付加して
ある。クロスフェード処理は、現在の定位位置の処理と
前回の定位位置の処理を並列に行い、この２つの結果を
クロスフェードすることによって実現している。この原
理を図５に示す。したがって、図４のブロックでは、ク
ロスフェード処理のために、ｆlm（ｔ），ｆrm（ｔ）を
処理する部分をそれぞれ２組用意している。この図４が
本発明の音像定位処理の具体例となる。図４に示すよう
に、各再生フィルタの出力に残響処理などの処理を組み
込み、音場を拡大するようにしてもよい。
【００２４】図６は、本発明のゲーム機用プログラムの
内容を説明するためのフローチャートを示す。図６にお
いて、視点変更をポーリングし（Ｓ１）、視点変更があ
れば（Ｓ２のＹｅｓ）、視点変更に応じた表示映像を処
理し（Ｓ３）、視点と音源の相対位置（方向、距離な
ど）を算出し（Ｓ４）、算出された相対位置に応じた定
位パラメータで音像定位処理を行う（Ｓ５）。この部分
が、視点が移動した場合の処理にあたり、この処理のイ
メージ図を図７に示す。
内容を説明するためのフローチャートを示す。図６にお
いて、視点変更をポーリングし（Ｓ１）、視点変更があ
れば（Ｓ２のＹｅｓ）、視点変更に応じた表示映像を処
理し（Ｓ３）、視点と音源の相対位置（方向、距離な
ど）を算出し（Ｓ４）、算出された相対位置に応じた定
位パラメータで音像定位処理を行う（Ｓ５）。この部分
が、視点が移動した場合の処理にあたり、この処理のイ
メージ図を図７に示す。
【００２５】次に、Ｓ２において、Ｎｏであった場合を
含めて、移動すべき音源があれば（Ｓ６のＹｅｓ）、音
源の移動に応じた表示映像を処理し（Ｓ７）、視点と音
源との相対位置（方向、距離など）を算出し（Ｓ８）、
算出された相対位置に応じた定位パラメータで音像定位
処理を行う（Ｓ９）。この部分が、音源が移動した場合
の処理にあたり、この処理のイメージ図を図８に示す。
含めて、移動すべき音源があれば（Ｓ６のＹｅｓ）、音
源の移動に応じた表示映像を処理し（Ｓ７）、視点と音
源との相対位置（方向、距離など）を算出し（Ｓ８）、
算出された相対位置に応じた定位パラメータで音像定位
処理を行う（Ｓ９）。この部分が、音源が移動した場合
の処理にあたり、この処理のイメージ図を図８に示す。
【００２６】次に、終了か否かを判断する（Ｓ１０）。
なお、上記音像定位処理は、式（６）のようにＦＩＲフ
ィルタの畳み込み処理を時間領域で実現しているが、Ｆ
ＦＴ（高速フーリエ変換）を利用した周波数領域での畳
み込み処理にすることにより演算量を低減させることも
可能である。ＦＦＴを利用した周波数領域での処理の概
念図を図９に示す。ＮサンプルのＦＩＲフィルタの畳み
込み処理でＮサンプルの出力結果を得るにはＮ2回の乗
算が必要であるが、ＦＩＲフィルタと音源信号をフーリ
エ変換し、乗算し、それを逆フーリエ変換することによ
って、３回のＦＦＴにおける乗算回数は（３Ｎ／２）ｌ
ｏｇ2Ｎ回となり、乗算回数を減らすことが出来る。ま
た、ＦＦＴを利用する場合には、ＦＩＲフィルタを幾つ
かのブロックに分割し、個々のブロックでＦＦＴを用い
た畳み込み処理を行うことにより、出力の遅延を減少さ
せることが出来る。また、IＩＲフィルタを用いてＦＩ
Ｒフィルタの特性を近似することが出来ることから、こ
れを基にＩＩＲフィルタを用いても良く、ＦＩＲフィル
タに限るものではない。ＩＩＲフィルタによって音像定
位処理をよりコンパクトな規模で行うことが可能とな
る。また、音像定位処理は、本実施の形態では、メイン
ＣＰＵ１０１で行っているが、サブＣＰＵ１０２、サウ
ンドプロセッサのＤＳＰ１１１で行っても構わない。
なお、上記音像定位処理は、式（６）のようにＦＩＲフ
ィルタの畳み込み処理を時間領域で実現しているが、Ｆ
ＦＴ（高速フーリエ変換）を利用した周波数領域での畳
み込み処理にすることにより演算量を低減させることも
可能である。ＦＦＴを利用した周波数領域での処理の概
念図を図９に示す。ＮサンプルのＦＩＲフィルタの畳み
込み処理でＮサンプルの出力結果を得るにはＮ2回の乗
算が必要であるが、ＦＩＲフィルタと音源信号をフーリ
エ変換し、乗算し、それを逆フーリエ変換することによ
って、３回のＦＦＴにおける乗算回数は（３Ｎ／２）ｌ
ｏｇ2Ｎ回となり、乗算回数を減らすことが出来る。ま
た、ＦＦＴを利用する場合には、ＦＩＲフィルタを幾つ
かのブロックに分割し、個々のブロックでＦＦＴを用い
た畳み込み処理を行うことにより、出力の遅延を減少さ
せることが出来る。また、IＩＲフィルタを用いてＦＩ
Ｒフィルタの特性を近似することが出来ることから、こ
れを基にＩＩＲフィルタを用いても良く、ＦＩＲフィル
タに限るものではない。ＩＩＲフィルタによって音像定
位処理をよりコンパクトな規模で行うことが可能とな
る。また、音像定位処理は、本実施の形態では、メイン
ＣＰＵ１０１で行っているが、サブＣＰＵ１０２、サウ
ンドプロセッサのＤＳＰ１１１で行っても構わない。
【００２７】図７に、視点変更時の仮想空間と再生環境
のイメージ図を示す。視点を変更した場合、視点と音源
の相対位置を検出して、定位パラメータを決定するの
で、再生環境では、画面の移動に伴って音源の定位が移
動し、実世界で視点を移動したときと同様の音響の変化
を知覚することができる。
のイメージ図を示す。視点を変更した場合、視点と音源
の相対位置を検出して、定位パラメータを決定するの
で、再生環境では、画面の移動に伴って音源の定位が移
動し、実世界で視点を移動したときと同様の音響の変化
を知覚することができる。
【００２８】また、図８に示すように、視点は固定され
ており、音源が移動する場合も、音源との相対位置を検
出して、定位パラメータを決定するので、再生環境でも
音源の移動を知覚することができる。また、これら視点
の移動、音源の移動は、同時に行うことも可能である。
また、図９に示すようにＦＦＴ（高速フーリエ変換）を
利用して畳み込み処理を行うこともできる。
ており、音源が移動する場合も、音源との相対位置を検
出して、定位パラメータを決定するので、再生環境でも
音源の移動を知覚することができる。また、これら視点
の移動、音源の移動は、同時に行うことも可能である。
また、図９に示すようにＦＦＴ（高速フーリエ変換）を
利用して畳み込み処理を行うこともできる。
【００２９】さらに、本発明のゲーム機用コンピュータ
プログラムをパケット化して伝送することにより、遠方
にいるユーザにコンピュータプログラムを伝送すること
ができる。また、複数の対戦相手と行うゲーム機のプロ
グラムを複数の対戦相手に送信（伝送）することができ
る。さらに、それを受信することができる。
プログラムをパケット化して伝送することにより、遠方
にいるユーザにコンピュータプログラムを伝送すること
ができる。また、複数の対戦相手と行うゲーム機のプロ
グラムを複数の対戦相手に送信（伝送）することができ
る。さらに、それを受信することができる。
【００３０】したがって、本発明の実施の形態によれ
ば、あたかも仮想空間にいるかのような画像を観察し、
それに対応する音響も聴くことができるので、臨場感溢
れる体感を得ることができる。
ば、あたかも仮想空間にいるかのような画像を観察し、
それに対応する音響も聴くことができるので、臨場感溢
れる体感を得ることができる。
【００３１】
【発明の効果】以上のように、本発明によれば、視点の
動き及び音源の移動に連動して音源定位パラメータを決
定し、このパラメータに基づいた音像定位及び移動が可
能となる。また、パンポットなどの音量制御ではなく、
頭部伝達関数を用いて定位を実現しているので、正確な
音像定位及び移動が可能である。
動き及び音源の移動に連動して音源定位パラメータを決
定し、このパラメータに基づいた音像定位及び移動が可
能となる。また、パンポットなどの音量制御ではなく、
頭部伝達関数を用いて定位を実現しているので、正確な
音像定位及び移動が可能である。
【図１】本発明の実施の形態におけるゲーム機の全体ブ
ロック図である。
ロック図である。
【図２】本発明の実施の形態における２チャンネル再生
フィルタのブロック図である。
フィルタのブロック図である。
【図３】本発明の実施の形態を説明するもので、図２を
定位位置変更可能としたフィルタのブロック図である。
定位位置変更可能としたフィルタのブロック図である。
【図４】本発明の実施の形態を説明するもので、音像定
位処理部のブロック図である。
位処理部のブロック図である。
【図５】本発明の実施の形態を説明するもので、クロス
フェード処理概念図である。
フェード処理概念図である。
【図６】本発明のゲーム機用プログラムの内容を示すフ
ローチャートである。
ローチャートである。
【図７】本発明の実施の形態を説明するもので、視点変
更時のイメージ図である。
更時のイメージ図である。
【図８】本発明の実施の形態を説明するもので、音源移
動時のイメージ図である。
動時のイメージ図である。
【図９】本発明を実施する上でＦＦＴを利用した場合の
畳み込み処理の概念を示す図である。
畳み込み処理の概念を示す図である。
１００ ＣＰＵブロック
１０１ メインＣＰＵ
１０２ サブＣＰＵ
１０３、１０４、１１２ ＲＡＭ
１０５ ＲＯＭ
１１０ サウンドブロック
１１１ ＤＳＰ
１１３ 音源部
１１４ ミキサ
１２０ コントローラ
１３０ ディスク（ＤＩＳＫ）ドライブ
１４０ ビデオブロック
１５０ 通信インターフェース
１６０ 映像出力端子
１７０ 音声出力端子
１８０ ディスプレイ
１９０、１９１ スピーカ
Claims (6)
- 【請求項１】 視点の動きに連動して画像を変更すると
ともに、仮想空間内の音源と視点との相対位置を算出
し、算出された相対位置に応じた定位パラメータで視点
の動きに連動した音像定位処理を施し、仮想空間内での
音源が一対の再生スピーカを用いて視点の動きに連動し
た仮想空間内の方向から発音しているように再生制御す
る制御手段を備えたゲーム機。 - 【請求項２】 ゲーム機用プログラムを供給するプログ
ラム供給手段と、 ゲーム遊技者によりゲームをコントロールするためのコ
ントローラと、 前記プログラム供給手段により供給されたゲーム機用プ
ログラムを制御するものであって、前記コントローラか
らの制御信号に基づいて画像の視点を変更する制御部
と、 前記制御部による視点変更に応じた画像処理を行う画像
処理部と、 前記画像処理部からの画像を表示する表示部と、 視点と音源との相対位置に応じた定位パラメータで視点
の動きに連動した音像定位処理を行う音声処理部と、 前記音声処理部からの音像定位処理された結果を再生す
る一対のスピーカとを、 備えたゲーム機。 - 【請求項３】 請求項２に記載のゲーム機において、 エンコードされたゲーム機用プログラムを受信しデコー
ドする通信インターフェースをさらに有することを特徴
とするゲーム機。 - 【請求項４】 請求項１から３のいずれか１つに記載の
ゲーム機であって、前記音像定位処理は、ＦＩＲフィル
タ又はＩＩＲフィルタを用いて処理されることを特徴と
するゲーム機。 - 【請求項５】 ゲーム機の制御手段としてのコンピュー
タに、 視点変更に応じた表示映像処理を行う手順と、 視点と音源との相対位置を算出する手順と、 算出された相対位置に応じた定位パラメータで音像定位
処理を行う手順とを、 実行させるためのゲーム機用プログラム。 - 【請求項６】 請求項５に記載のゲーム機用プログラム
を送信し又は受信する送信受信装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002152744A JP2003348699A (ja) | 2002-05-27 | 2002-05-27 | ゲーム機及びゲーム機用プログラム並びに送信受信装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002152744A JP2003348699A (ja) | 2002-05-27 | 2002-05-27 | ゲーム機及びゲーム機用プログラム並びに送信受信装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003348699A true JP2003348699A (ja) | 2003-12-05 |
Family
ID=29770010
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002152744A Pending JP2003348699A (ja) | 2002-05-27 | 2002-05-27 | ゲーム機及びゲーム機用プログラム並びに送信受信装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003348699A (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005184041A (ja) * | 2003-12-15 | 2005-07-07 | Sony Corp | 音声信号処理装置及び音声信号再生システム |
| JP2007043442A (ja) * | 2005-08-03 | 2007-02-15 | Sony Corp | 音場計測装置及び音場計測方法 |
| JP6058855B1 (ja) * | 2016-07-07 | 2017-01-11 | 株式会社コロプラ | 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム |
-
2002
- 2002-05-27 JP JP2002152744A patent/JP2003348699A/ja active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005184041A (ja) * | 2003-12-15 | 2005-07-07 | Sony Corp | 音声信号処理装置及び音声信号再生システム |
| JP4617668B2 (ja) * | 2003-12-15 | 2011-01-26 | ソニー株式会社 | 音声信号処理装置及び音声信号再生システム |
| JP2007043442A (ja) * | 2005-08-03 | 2007-02-15 | Sony Corp | 音場計測装置及び音場計測方法 |
| US7769184B2 (en) | 2005-08-03 | 2010-08-03 | Sony Corporation | Apparatus and method for measuring sound field |
| JP6058855B1 (ja) * | 2016-07-07 | 2017-01-11 | 株式会社コロプラ | 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム |
| JP2018007175A (ja) * | 2016-07-07 | 2018-01-11 | 株式会社コロプラ | 情報処理方法及び当該情報処理方法をコンピュータに実行させるためのプログラム |
| US9875079B1 (en) | 2016-07-07 | 2018-01-23 | Colopl, Inc. | Information processing method and system for executing the information processing method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101512992B1 (ko) | 오디오 데이터를 처리하기 위한 디바이스 및 방법 | |
| US5598478A (en) | Sound image localization control apparatus | |
| US7113610B1 (en) | Virtual sound source positioning | |
| CN103329571B (zh) | 沉浸式音频呈现系统 | |
| US9967693B1 (en) | Advanced binaural sound imaging | |
| JP2000081886A (ja) | 音声／映像シミュレ―タ | |
| JP2001503581A (ja) | 音源をスピーカへ投射する方法及び装置 | |
| CN108476367A (zh) | 用于沉浸式音频回放的信号的合成 | |
| JP2021513261A (ja) | サラウンドサウンドの定位を改善する方法 | |
| KR20200087130A (ko) | 신호 처리 장치 및 방법, 그리고 프로그램 | |
| JP2004007211A (ja) | 臨場感信号の送受信システム、臨場感信号伝送装置、臨場感信号受信装置、及び臨場感信号受信用プログラム | |
| JPH0430700A (ja) | 音像定位装置 | |
| JP2003009296A (ja) | 音響処理装置および音響処理方法 | |
| JP4348886B2 (ja) | 音響付加装置及び音響付加方法 | |
| JP2007050267A (ja) | 音像定位技術を利用したゲーム装置び音像定位プログラムの記録された記録媒体 | |
| JP2003348699A (ja) | ゲーム機及びゲーム機用プログラム並びに送信受信装置 | |
| JP2001186599A (ja) | 音場創出装置 | |
| JPH1146400A (ja) | 音像定位装置 | |
| Blommer et al. | Realistic 3d sound simulation in the virttex driving simulator | |
| JPH06285258A (ja) | ビデオゲーム機 | |
| JP2000078700A (ja) | オーディオ再生方法及びオーディオ信号処理装置 | |
| JP2004128669A (ja) | 立体音再生用小型スピーカユニット及びそれを備えたゲーム用コントローラ | |
| JP6503752B2 (ja) | オーディオ信号処理装置、オーディオ信号処理方法、プログラム、およびオーディオシステム | |
| JP2002199498A (ja) | 音源の音像定位方法及び音像定位を行うゲーム装置並びに音像定位プログラムの記録された記録媒体並びにかかるプログラムの伝送方法 | |
| JP3573797B2 (ja) | ステレオ音声再生装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041129 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060616 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060809 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20060829 |