JPH06198074A - テレビゲーム機 - Google Patents

テレビゲーム機

Info

Publication number
JPH06198074A
JPH06198074A JP4361642A JP36164292A JPH06198074A JP H06198074 A JPH06198074 A JP H06198074A JP 4361642 A JP4361642 A JP 4361642A JP 36164292 A JP36164292 A JP 36164292A JP H06198074 A JPH06198074 A JP H06198074A
Authority
JP
Japan
Prior art keywords
sound
sound image
game machine
sound source
television game
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP4361642A
Other languages
English (en)
Inventor
Yoshiaki Tanaka
美昭 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP4361642A priority Critical patent/JPH06198074A/ja
Priority to US08/169,198 priority patent/US5598478A/en
Publication of JPH06198074A publication Critical patent/JPH06198074A/ja
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6063Methods for processing data by generating or executing the game program for sound processing

Landscapes

  • Diaphragms For Electromechanical Transducers (AREA)
  • Stereophonic System (AREA)

Abstract

(57)【要約】 【目的】 現実音にそくした音場効果が得られるテレビ
ゲ−ム機を得る。 【構成】 ゲ−ム用カセット50等からサブ中央処理装
置61に音源情報、音程変化情報等が夫々供給されて、
これらの情報に基づき音像定位情報及び音量変化情報が
検出され、これにより第三中央処理ユニット67からは
所定の係数が読み出されて、音量変化情報と共にコンボ
ルバ71a,71bの一方の入力側に供給される。ま
た、他方の入力側には、MIDI音源66から前記音源
情報及び音程変化情報に基づいて音程変更された音声信
号が供給され、この信号が前記係数によって演算処理さ
れると共に、各コンボルバのゲインが前記音量変化情報
に基づいて変更される。その結果、一対のスピ−カから
は、180度以上に亘って移動する音像が、ドップラ−
効果を伴って、より現実感にそくした音として再生され
る。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、テレビゲ−ム機に関
し、特に、再生画像と共に、再生のための一対のトラン
スジューサ(スピーカ)を用いて聴取者が前記トランス
ジューサの位置とは異なる180度以上の所望の位置に
音像が定位しているように感じさせるテレビゲ−ム機に
関するものである。
【0002】
【従来の技術】従来より、両耳における信号のレベル差
と位相差(時間差)によって特定な位置(方向)に音源
を感じさせる、バイノーラル技術を利用した音像定位方
法がある。アナログ回路を用いた音像定位方法として
は、例えば本出願人に係る特開昭53-140001 号(特公昭
58-3638号)公報記載の音像定位方式などがある。これ
は、アナログフィルタにより特定の周波数帯域のレベル
を強調・減衰させて(振幅制御して)音源の前後感を出
し、アナログディレイにより左右の音に時間差を生じさ
せて(位相制御して)音源の左右感を出すようにしたも
のであった。
【0003】さらに、最近のデジタル処理技術の進展に
伴って、デジタル回路により実現した音像定位方法があ
り、例えば、特開平2-298200号公報記載の「音像形成方
法及びその装置」がある。このデジタル回路を用いた音
像定位方法は、音源からの信号をFFT(Fast Fourier
Transform)変換して、周波数軸上で処理し、左右の両
チャンネル信号に周波数に依存したレベル差と位相差と
を与えて音像の定位をデジタル的に制御するものであ
る。この方法の各音像定位位置における、周波数に依存
したレベル差と位相差とは、実際の聴取者を利用した実
験的なデータとして収集されたものである。しかし、こ
のような回路を用いた音像定位方法では、正確・精密に
音像を定位させようとすると、回路規模が極めて大きく
なるという難点があり、特殊な業務用のレコーディング
システムとして利用されるにすぎなかった。
【0004】
【発明が解決しようとする課題】ところで、最近では、
バーチャルリアリティ(仮想現実感)を利用したアミュ
ーズメントゲーム機やコンピュータ端末機が出現してい
る。これらゲーム機や端末機においても、画像と共によ
り現実感のある音像定位が要求され始めている。しか
も、例えば、ゲーム機(や端末機)においては、操作者
の操作に応じて、飛行機の飛ぶコース(位置)が異なる
ことになり、操作に応じてリアルタイムで操作者の操作
に合わせて音像の移動処理をして、それを再生する必要
が生じる。この点が、前述したレコード用の音像定位処
理と大幅に異なる。
【0005】そこで、本発明はかかる従来の上記問題点
に鑑みてなされたもので、回路規模が小さく、低価格で
あると共に、画像と共に180 度の範囲を越える広範囲な
空間に音像を定位させることが可能なテレビゲ−ム機を
提供するものである。
【0006】
【課題を解決するための手段】本発明は上記課題を解決
するために、以下の1)〜10)より成る構成のテレビ
ゲ−ム機を提供しようというものである。即ち、 1)入来するビデオ・ディスプレイ・デ−タに基づいて
所定の画像が再生されると共に、離間した一対のトラン
スジュ−サから、モノラル音源が供給された音像定位処
理手段で音像処理をした信号を再生し、聴取者に前記一
対のトランスジューサとは異なる任意の移動位置に音像
を定位させるように感じさせるテレビゲ−ム機におい
て、前記モノラル音源は、音像の移動されるべき速度に
応じて発生されると共に、想定された移動速度とは異な
る移動速度に対応すべく音程変更されて、前記音像定位
処理手段に供給される構成にしたことを特徴とするテレ
ビゲ−ム機。
【0007】2)請求項1記載のテレビゲ−ム機におい
て、モノラル音源の発生と、音程変更とは、ゲ−ムソフ
ト供給手段から供給される音源情報と、この音源情報の
音程変化情報と、音像位置情報とに少なくとも基づいて
行なわれることを特徴とするテレビゲ−ム機。
【0008】3)請求項2記載のテレビゲ−ム機におい
て、音像の移動距離に応じて音量変更を行わせるための
音量変化情報をゲ−ムソフト供給手段から供給するよう
にしたことを特徴とするテレビゲ−ム機。
【0009】4)請求項1記載のテレビゲ−ム機におい
て、ゲ−ムソフト供給手段から音源情報と音像位置情報
とが供給されて、モノラル音源が前記音源情報に基づい
て供給されると共に、音程変更は前記音像位置情報に基
づいて検出された音像の移動速度に応じて行なわれるこ
とを特徴とするテレビゲ−ム機。
【0010】5)請求項4記載のテレビゲ−ム機におい
て、音像位置情報に基づいて音像の移動距離を検出し、
これにより音量変更を行わせることを特徴としたテレビ
ゲ−ム機。
【0011】6)請求項1乃至5記載のいずれかのテレ
ビゲ−ム機において、音像定位処理手段をコンボルバで
構成したことを特徴とするテレビゲ−ム機。
【0012】7)請求項1記載のテレビゲ−ム機におい
て、音像定位処理手段は音像の移動に応じて所定係数が
供給されて、これに基づき所定の演算処理が施されるコ
ンボルバであり、前記音像の移動距離に応じて前記コン
ボルバのゲインが変更されて音量変更が行われることを
特徴とするテレビゲ−ム機。
【0013】8)請求項2記載のテレビゲ−ム機におい
て、音源はMIDI音源であることを特徴とするテレビ
ゲ−ム機。
【0014】9)請求項3記載のテレビゲ−ム機におい
て、音源は記憶手段に格納されるPCM信号であり、こ
のPCM信号の読み出し速度を変更するか、又は、予め
読み出し速度の変更による音程変更が行なわれたPCM
信号を選択して音程変更が行われることを特徴とするテ
レビゲ−ム機。
【0015】10)請求項1乃至9記載のいずれかのテ
レビゲ−ム機において、音源を複数設け、これら音源が
ゲ−ムソフト供給手段に応じて切り換えられる構成にし
たことを特徴とするテレビゲ−ム機。
【0016】
【実施例】本発明になるテレビゲ−ム機の一実施例につ
いて、以下図面と共に説明する。まず最初に、本ゲ−ム
機が採用する音像定位制御方法の基本原理について説明
する。これは、離間して配設された一対のトランスジュ
ーサ(以下、スピーカを例として説明する)を使用し、
空間の任意の位置に音像を定位させる技術である。
【0017】図6は音像定位の原理図である。sp1,
sp2は受聴者(実施例の中では、聴取者と称すること
もある)の前方左右に配置されるスピーカであり、sp
1から聴取者左耳までの頭部伝達特性(インパルス応
答)をh1L、右耳までの頭部伝達特性をh1R、sp
2から左右耳までの頭部伝達特性をh2L,h2Rとす
る。また、目的とする定位位置xに実際のスピーカを配
置したときの受聴者左右耳までの頭部伝達特性をpL
x,pRxとする。ここで各伝達特性は音響空間にスピ
ーカと、ダミーヘッド(または人頭)の両耳位置にマイ
クを配置して実際に測定したものに、適切な波形処理な
どを施したものである。
【0017】次に、定位させたい音源ソースXを信号変
換装置cfLx,cfRx(コンボルバなどによる伝達
特性)に通して得られる信号を、それぞれsp1,sp
2で再生することを考える。このとき受聴者左右耳に得
られる信号をeL,eRとすると、 eL=h1L・cfLx・X+h2L・cfRx・X (式1) eR=h1R・cfLx・X+h2R・cfRx・X (〃 )
【0018】一方、ソースXを目的の定位位置から再生
したときに受聴者左右耳に得られる信号をdL,dRと
すると、 dL=pLx・X (式2) dR=pRx・X (〃 )
【0019】ここで、sp1,sp2の再生により受聴
者左右耳に得られる信号が、目的位置からソースを再生
したときの信号に一致すれば、受聴者はあたかも目的位
置にスピーカが存在するように音像を認識することとな
る。この条件eL=dL,eR=dRと(式1),(式
2)より、Xを消去して h1L・cfLx+h2L・cfRx=pLx (式3) h1R・cfLx+h2R・cfRx=pRx (〃 ) (式3)からcfLx,cfRxを求めると cfLx=(h2R・pLx−h2L・pRx)/H (式4a) cfRx=(−h1R・pLx+h1L・pRx)/H (〃 ) ただし、 H=h1L・h2R−h2L・h1R (式4b)
【0020】したがって、(式4a),(式4b)によ
り算出した伝達特性cfLx,cfRxを用いてコンボ
ルバ(畳み込み演算処理回路)等により定位させたい信
号を処理すれば、目的の位置xに音像を定位させること
ができる。具体的な信号変換装置の実現方法は様々考え
られるが、非対称なFIRデジタルフィルタ(コンボル
バ)を用いて実現すれば良い。なお、FIRデジタルフ
ィルタで用いる場合の最終の伝達特性は、時間応答関数
である。
【0021】つまり、必要な定位位置xにおける伝達特
性cfLx,cfRxとして、(式4a),(式4b)
で求めたものを、1回のFIRフィルタ処理により実現
するための係数として、cfLx,cfRxの係数をあ
らかじめ作成し、ROMのデータとして準備しておく。
ROMから必要な音像定位置の係数をFIRデジタルフ
ィルタに転送し、音源からの信号を畳み込み演算処理し
て一対のスピーカから再生すれば、所望の任意の位置に
音像が定位されることになる。
【0022】次に、このような原理に基づく本音像定位
制御の方法について図7を参照して詳述する。図7は音
像定位制御の方法のステップを示すものである。 頭部伝達関数(Head Related Transfer Function;以
下、HRTFと称する)の測定(ステップ101)
【0023】これを図8及び図10をもって説明する。
図8は、HRTFの測定システムを示すものである。ダ
ミーヘッド(または人頭)DMの両耳に一対マイクロホ
ンML,MRを設置し、スピーカSPからの測定音を受
け、録音器DATにソース音(リファレンスデータ)r
efL,refRと被測定音(測定データ)L,Rを同
期して記録する。
【0024】ソース音XHとしては、インパルス音,ホ
ワイトノイズ,その他のノイズ等を用いることができ
る。特に、統計処理の観点からは、ホワイトノイズは、
連続音でかつオーディオ帯域にわたってエネルギー分布
が一定なので、ホワイトノイズを用いることによりSN
比が向上する。上記スピーカSPの位置を、正面を0度
(°)として取決めた空間内の複数の角度θ(例えば、
図10に示すように、30度ごとに12ポイント)に設
置し、それぞれ所定の時間だけ、連続的に記録する。
【0025】HRTFのインパルス応答(Impulse Re
sponse;以下、IRと称する)の算出(ステップ10
2) ステップ101で、同期して記録されたソース音(リフ
ァレンスデータ)refL,refRと被測定音(測定
データ)L,Rとを、ワークステーション(図示せず)
上で処理する。
【0026】ソース音(リファレンスデータ)の周波数
応答をX(S)、被測定音(測定データ)の周波数応答
をY(S)、測定位置におけるHRTFの周波数応答を
IR(S)とすると、(式5)に示す、入出力の関係が
ある。 Y(S)=IR(S)・X(S) (式5) したがって、HRTFの周波数応答をIR(S)は、 IR(S)=Y(S)/X(S) (式6) である。よって、リファレンスの周波数応答X(S)、
測定データの周波数応答Y(S)は、前記ステップ10
1で求めたデータを時間同期した窓で切り出し、それぞ
れFFT変換により有限のフーリエ級数展開して離散周
波数として計算し、(式6)より、HRTFの周波数応
答IR(S)が、周知の計算方法で求められる。
【0027】この場合、IR(S)の精度をあげる(S
N比の向上)ために時間的に異なる数百個の窓に対して
それぞれIR(S)を計算し、それらを平均化すると良
い。そして、計算したHRTFの周波数応答IR(S)
を逆FFT変換して、HRTFの時間軸応答(インパル
ス応答)IR(第1のIR)とする。
【0028】IR(インパルス応答)の整形処理(ス
テップ103) ここで、ステップ102で求めたIRを整形する。まず
例えばFFT変換により、ステップ102で求めた第1
のIRをオーディオスペクトラムにわたる離散周波数で
展開し、不要な帯域(高域には大きなディップが生じる
が、これは音像定位にあまり影響しない不要なものであ
る)を、BPF(バンドパスフィルタ)で除去する。こ
のように帯域制限すると、周波数軸上での不要なピーク
やディップが除去されて、キャンセルフィルタに不要な
係数が生じなくなるので、収束性がよくなり、係数を短
くすることができる。
【0029】そして、帯域制限されたIR(S)を逆F
FT変換して、IR(インパルス応答)を時間軸上で切
り出し窓(例えば、コサイン関数の窓)を掛けて、ウィ
ンド処理する(第2のIRとなる)。ウィンド処理する
ことにより、IRの有効長が長くなくなり、キャンセル
フィルタの収束性が向上して、音質の劣化が生じないよ
うになる。
【0030】キャンセルフィルタcfLx、cfRx
の算出(ステップ104) コンボルバ(たたみ込み積分回路)であるキャンセルフ
ィルタcfLx、cfRxは、前述した(式4a)及び
(式4b)に示したように、 cfLx=(h2R・pLx−h2L・pRx)/H (式4a) cfRx=(−h1R・pLx+h1L・pRx)/H (〃 ) ただし、H=h1L・h2R−h2L・h1R (式4b) である。
【0031】ここで、配置されるスピーカsp1,sp
2による頭部伝達特性h1L,h1R,h2L,h2R
及び、目的とする定位位置xに実際のスピーカを配置し
たときの頭部伝達特性pLx,pRxとして、上記ステ
ップ101〜103によって求められた、各角度θごと
の整形処理された第2のIR(インパルス応答)を代入
する。
【0032】頭部伝達特性h1L,h1Rは、図11の
Lチャンネルスピーカの位置に対応するもので、正面か
ら左に例えば30度(θ=330度)に設置されるとす
れば、θ=330度のIRを用いる。頭部伝達特性h2
R,h2Lは、同図のRチャンネルスピーカの位置に対
応するもので、正面から右に例えば30度(θ=30
度)に設置されるとすれば、θ=30度のIRを用いる
(すなわち、実際の音像再生時のシステム(例えば図9
に示す)に近いものを選ぶ)。
【0033】そして、頭部伝達特性pLx、pRxとし
ては、目的とする音源定位位置である正面から左右90
度の180度の範囲はもちろんのこと、それを越える広
範囲な空間(全空間)における、30度ごとのIRを代
入することにより、それに対応した全空間のcfLx、
cfRx、すなわち30度ごとに12組のキャンセルフ
ィルタcfLx、cfRx群が求められる(図11で
は、240度の位置を例としている)。キャンセルフィ
ルタcfLx、cfRx群は、最終的には、時間軸上の
応答であるIR(インパルス応答)として求められる。
なお、(式4a)によるキャンセルフィルタcfLx、
cfRxの計算は、次のようである。まず(式4b)の
Hに対する一種の逆フィルタであるH-1を最小2乗法に
より求め、これを逆FFT変換して時間関数h(t) とす
る。また(式4a)の各項h1L,h1R,h2L,p
Rx,pLx,h2Rをそれぞれ時間関数で表すことに
より、次式が成り立つ。
【0034】 cfLx(t) =(h2R・pLx−h2L・pRx)・h(t) (式7) cfRx(t) =(−h1R・pLx+h1L・pRx)・h(t) (〃 )
【0035】したがって、これらの(式7)からキャン
セルフィルタcfLx、cfRxの係数が求められるこ
とになる。(式7)から明らかなように、キャンセルフ
ィルタcfLx、cfRxの係数を短くするには、各頭
部伝達特性h1L,h1R,h2L,pRx,pLx,
h2Rをそれぞれ短くすることが極めて大切である。こ
のため、前述したように、ステップ101〜103でウ
ィンド処理,整形処理などの各種の処理をして、各頭部
伝達特性h1L,h1R,h2L,pRx,pLx,h
2Rを短くしている。
【0036】各定位ポイントxのキャンセルフィルタ
のスケーリング(ステップ105) また、実際にコンボルバ(キャンセルフィルタ)で音像
処理される音源(ソース音)のスペクトラム分布は、統
計的にみるとピンクノイズのように分布するもの、ある
いは高域でなだらかに下がるものなどがあり、いずれに
しても音源は単一音とは異なるために、畳み込み演算
(積分)を行ったときオーバーフローして、歪が発生す
る危険がある。 そこで、オーバーフローを防止するた
め、キャンセルフィルタcfLx、cfRxの係数の中
で最大のゲイン(例えば、キャンセルフィルタcfL
x、cfRxの各サンプル値の2乗和)のものを見つ
け、その係数と0dbのホワイトノイズを畳込んだとき
に、オーバーフローが生じないように、全係数をスケー
リングする。
【0037】このようにしてスケーリング処理されて、
最終的にコンボルバに係数として供給されるデータ群
(この例では、30度ごとに音像定位が可能な12組の
コンボルバの係数群)cfLx、cfRxが求まる。
【0038】音源からの信号を畳み込み演算して再生
(ステップ106) 例えば、ゲーム機の音響再生装置として、図9に示すよ
うに、ゲーム操作者(聴取者)Mを中心として左右30
度づづ離間して一対のスピーカsp1,sp2を配設
し、これら一対のスピーカsp1,sp2には、一対の
コンボルバ(畳み込み演算処理回路)で処理された音響
信号が再生されるように構成する。
【0039】一対のコンボルバには、同一の音源X(例
えば、ゲーム用シンセサイザからの飛行音などのモノラ
ル音)からの信号が供給されると共に、前記ステップ1
05で作成されたIRの係数cfLx、cfRx(例え
ば、飛行音を左後方120度(θ=240度)の位置に
音像定位させたい時は、θ=240度の係数)が、選択
されてコンボルバに設定される。例えば、ゲーム機など
のメインCPU(中央演算装置)からの音像定位命令に
もとづいてコントロール用サブCPUが係数ROMか
ら、所望の定位位置の係数を一対のコンボルバに転送す
る。
【0040】このようにして、一対のコンボルバにより
音源Xからの信号は時間軸上で畳み込み演算処理がなさ
れて、離間して配設された一対のスピーカsp1,sp
2から再生される。一対のスピーカsp1,sp2から
再生された音は、両耳へのクロストークがキャンセルさ
れて、所望の位置に音源があるように音像定位して、ゲ
ーム操作者(聴取者)Mに聞かれ、極めて現実感に満ち
た音として再生される。 コンボルバの係数は、操作者
の操作に応じた飛行機の動きの推移と共に、最適な音像
位置が順次選択され、切換えられる。また、飛行音か
ら、例えばミサイル音に変更する時は、音源Xからのソ
ース音が飛行音からミサイル音に変更される。このよう
にして、任意の位置を音像を自由に定位させることがで
きる制御方法である。
【0041】更に、本発明では、上述の音像定位に加え
て、音像の移動に伴うドップラ−効果による音程(ピッ
チ)の変化及び音量の変化を考慮して、より一層の現実
音に近づけるようにしたものである。次に、より一層の
現実音に近づけるために、何ゆえに音程(ピッチ)の変
化及び音量の変化を考慮する必要性があるかにつき、図
2を参照して説明する。ここで、聴取者Mの側方(距離
d)を等速(速度v)で音源が通過していく場合を考え
てみる。まず、方向定位の変化に対しては聴取者Mの真
横に近づくほど変化が早くなる。真横の通過時刻をt=
0とし、方向定位θを聴取者Mの真横を基準とする反時
計回りで表せば、方向定位θと時刻tとには、 θ=−arctan(vt/d) (式8) の関係が成り立つ。
【0042】また、音程(ピッチ)の変化に対しては、
ドップラ−効果の影響を受け、実際にでている音の周波
数をf、耳に聞こえる周波数をFとすれば、 F=fc/(c−v・sinθ) (式9) となる(但し、cは音速)。即ち、音程(ピッチ)比N
は、 N=c/(c−v・sinθ) (式10) となる。さらに、音量に関しては、真横通過時の音量を
gとすれば、耳に聞こえる音量Gは、G=g・cosθ
となる。
【0043】そこで、図2に示すように音源が移動する
に従い方向定位θを、例えば、22.5度ごとのとびと
びの値で代表し、線分A,B,C,D,E,F,G等に
対し、それぞれの中で同じピッチの変換を施すようにす
る。このピッチ変換の比は(式10)で与えられる。各
線分の長さはピッチ変換が施される時間長さに対応す
る。このように移動する音像を、より一層現実音に近づ
けるためには上述した点を考慮する必要がある。
【0044】次に、前記基本原理構成を基に前述の点を
考慮したテレビゲーム機の具体例につき順次説明する。
図1はそのテレビゲ−ム機の第1の実施例を示す概略ブ
ロック図である。51は中央処理ユニット(CPU)
で、この中央処理ユニット51には、これをコントロ−
ルするコントロ−ラ55と、ゲ−ム用カセット50がデ
−タバスを通じて接続される。また、この中央処理ユニ
ット51には、デ−タバスを通じてインタ−フェ−ス
(IF)52、所望のグラフィック映像を表現するため
のグラフィック・システム・プロセッサ(GSP)54
及びシンセサイザ57が夫々接続される。また、更に、
グラフィック・システム・プロセッサ54には出力端子
56を介してテレビモニタ60が接続され、シンセサイ
ザ57には、加算器80,82が夫々接続される。
【0045】また一方、中央処理ユニット51は、イン
タ−フェ−ス(IF)52を介して、サブ中央処理ユニ
ット(SUB CPU)61に接続される。このサブ中
央処理ユニット61は、移動する音像の定位の決定や音
像からの距離を検出するための音像定位決定手段61a
と、音源、音程(ピッチ)の高さ及び音源の発生時間を
決定するための音源情報決定手段61bとから構成され
る。そして、この中央処理ユニット51の出力は、MI
DI音源66に接続され、その一方の出力が第3中央処
理ユニット(第3CPU)67に接続されて、この第3
中央処理ユニットの出力が音像変換手段71に接続され
ると共に、この音像変換手段71の他方の入力には前記
MIDI音源66の他方の出力が接続される。 この音
像変換手段71には、左右の音声信号を夫々畳み込み演
算処理を行わせるためのコンボルバ71a,71bが設
けられている。そして、この音像変換手段71からの出
力が、前記加算器80,82に接続される構成となって
いる。81,83はそれらの出力端子である。
【0046】このテレビゲ−ム機は以上の構成より成
り、次に、この動作につき説明する。今、ここで、コン
トロ−ラ55が操作されると、中央処理ユニット51に
コントロ−ラ55の操作情報と、ゲ−ム用カセット50
からビデオ・ディスプレイ・デ−タ、オ−ディオ・デ−
タ、オ−ディオ・デ−タ変換情報及び音像位置情報とが
夫々供給される。この結果、グラフィック・システム・
プロセッサ54には画像生成のための指示信号が供給さ
れ、ここで、例えば、複数の部分画像より成るモザイク
状の画像を形成するような画像信号が生成されて、出力
端子56よりテレビモニタ60に出力される。
【0047】一方、サブ中央処理ユニット61には、前
記中央処理ユニット51を介して、コントロ−ラ55か
らの操作信号とオ−ディオ・デ−タ、オ−ディオ・デ−
タ変換情報及び音像位置情報がインタ−フェ−ス52を
通じて供給される。このサブ中央処理ユニット61の音
像定位決定手段61aにおいては、前記操作情報及び音
像位置情報を検出し、これらの情報により音像の定位θ
と音像の移動速度とを算出して、各コンボルバ71a,
71bへの係数の切替え時間を決定すると共に、音量G
に対応したコンボルバ71a,71bのゲインを決定す
る。
【0048】また、音源情報決定手段61bでは、前記
オ−ディオ・デ−タにより音源を検出し、前記操作情
報、音像位置情報、及びオ−ディオ・デ−タ変換情報か
ら音程(ピッチ)Fと音源発生時間を決定する。即ち、
距離dが変わると、それに対応し、(式8)から方向定
位θが計算され、それにより音程(ピッチ)比Nが(式
10)により計算される。しかし、もともと変化前の距
離dに対し音程(ピッチ)比N0 が求められ、オ−ディ
オ・デ−タ変換情報として供給されている。そこで、実
際に変換される音程(ピッチ)比は、N/N0 として計
算される。そして、これが音程(ピッチ)比変換情報と
してMIDI音源66に供給される。
【0049】また、そのうち、前記音像の定位情報及び
音量設定のためのゲイン設定情報がMIDI音源66を
介して第3中央処理ユニット67に供給される。この第
3中央処理ユニット67では、例えば、前記したステッ
プ〜により算出される22.5度ごとの16組のコ
ンボルバの係数群cfLx,cfRxが記憶されおり、
この係数が前記定位情報に基き読み出され、この係数が
音像の移動速度に応じた速度で切り換えられて、前記ゲ
イン情報と共にコンボルバ71a,71bに供給され
る。
【0050】したがって、これと共に、音源情報、音程
(ピッチ)F及び音源発生時間とオーデオデータ変換情
報とがMIDI音源66にシリアルに供給されて、これ
により所定の音源が所定タイミングで発生され、指示さ
れる音程の音声信号とされて音像変換器71の一方の入
力側に供給される。この音像変換器71のコンボルバ7
1a,71bでは、入来する音声信号を前記タイミング
で供給される係数により畳み込み演算が行われる。そし
て、この音像変換器71で音像変換された信号は、加算
器80,82に夫々供給されて、シンセサイザ57から
入来するシンセサイザ音を表現するような音声信号と加
算されて、出力端子81,83から一対のスピ−カへ出
力されることになる。
【0051】従って、これにより一対のスピ−カから
は、一対のコンボルバ71a,71bにおいて、ドップ
ラ−効果による音程が考慮された音声信号に対して所定
タイミングで畳み込み演算処理が施され、しかも、コン
ボルバ71a,71bのゲインにより音量が変更される
ために、音の遠近間が表現されつつ、あたかも、一対の
スピ−カの位置とは異なる180度以上の亘って音像が
定位しているように再生される。
【0052】図3は、第2実施例に係るゲ−ム機の概略
ブロック図で、これにつき説明する。尚、これ以降の説
明において前記第1実施例と同一構成要素には同一符号
を付して説明を省略し、相違点のみ説明する。この実施
例の場合には、ゲ−ム用カセット50の代わりCD−R
OM53をインターフェース52接続し、MIDI音源
66の代わりにPCM音源及び音源RAM63を直列に
設け、しかも、音像定位情報をサブ中央処理ユニット6
1から直接第3中央処理ユニット67に供給するように
構成したものである。この場合には、コントロ−ラ55
が操作されると、CD−ROM53からビデオ・ディス
プレイ・デ−タ、オ−ディオ・デ−タ及び音像位置情報
が、そして、コントロ−ラ55から操作信号が中央処理
ユニット51に夫々供給される。この結果、グラフィッ
ク・システム・プロセッサ54には前記と同様に画像作
成のための指示信号が供給されて、ここで、所定の画像
信号が生成されて、出力端子56よりテレビモニタ60
に出力される。
【0053】また、一方、サブ中央処理ユニット61に
はオ−ディオ・データと音像位置情報とが供給されてお
り、このサブ中央処理ユニット61内の音像定位決定手
段61aにおいては、前記操作情報及び音像位置情報を
検出し、これらの情報により音像の定位θと音像の移動
速度を算出して、各コンボルバ71a,71bへの係数
の切替え時間を決定すると共に、音量Gに対応した各コ
ンボルバ71a,71bのゲインを決定する。また、音
源情報決定手段61bでは、前記オ−ディオ・デ−タに
より音源を検出し、前記操作情報び音像位置情報から音
像移動速度を検出し、これに対応した音源RAM63の
音程(ピッチ)と音源の長さが決定される。そのうち、
前記音像の定位情報及び音量設定のためのゲイン設定情
報が第3中央処理ユニット67に供給される。この第3
中央処理ユニット67では、前述の場合と同様に、入来
する定位情報に基づき所定の係数が記憶部から読み出さ
れ、この係数が音像の移動速度に応じた速度で、ゲイン
設定情報と共にコンボルバ71a,71bに供給され
る。
【0054】また一方、PCM音源62には音程(ピッ
チ)及び音源の長さを変更するための変換情報が供給さ
れており、これに基づき、CD−ROM53から供給さ
れて、一旦、音源RAM63に記憶された音源が音像の
移動速度に応じた速度で読み出される。例えば、図5
(A)に示すような音源情報を、音像の移動速度に応じ
て図5(B)に示すように速く読み出したり、図5
(C)に示すように遅い速度で読み出したりする。ま
た、この場合、補間して速度を変更するようにしても良
い。また、CD−ROM53から予め考えられる音程変
更を盛り込んだ複数の音源を音源RAM63に記憶させ
ておき、その中から適切なものを選択するようにするこ
ともできる。
【0055】このようにして読み出される音源は、PC
M音源62において音源情報決定手段61bにより決定
された所定の音程(ピッチ)に変更されて、新たな音声
信号として音像変換器71に供給される。そして、この
音像変換器71内のコンボルバ71a,71bにおい
て、前記と同様にして、ここに入来する音声信号が音像
の移動タイミングに合わせて供給される係数により畳み
込み演算が行われ、出力端子84,85から左右の音声
信号が出力されることになる。従って、この第2実施例
によれば、CD−ROM53に記録されたPCM音声信
号に対し、シンセサイザ(MIDI音源)が無い場合で
もドップラ−効果を与えることができる。
【0056】次に、図4は第3実施例に係るゲ−ム機の
概略ブロック図で、これにつき説明する。この場合に
は、ゲーム用カセット50とデイスク再生器91からの
データを中央処理ユニット51に供給できるようにし、
サブ中央処理ユニット61の一方の出力にMIDI変換
手段64とMIDI音源66とを直列に設けると共に、
他方の出力にPCM音源62と音源RAM63とを直列
に設ける。更に、前記三つの音源62,66,90の出
力をスイッチ93の端子a,b,Cにそれぞれ接続した
構成としたものである。
【0057】この構成によれば、音源情報決定手段61
bにおいて、ゲームソフトに応じた音源を決定して、切
り換え信号をスイッチ93に供給する。これにより端子
a側に切り換えられた場合には、音像の定位情報及び音
量設定のためのゲイン設定情報がMIDI音源66を介
して第3中央処理ユニット67に供給される。前述と同
様にして、第3中央処理ユニット67において、音源定
位情報に基き所定の係数が読み出され、この係数が音像
の移動速度に応じた速度で切り換えられて、ゲイン情報
と共にコンボルバ71a,71bに供給される。
【0058】また一方、これと共に、MIDI変換手段
64を介して、音源情報、音程(ピッチ)FがMIDI
音源66にシリアルに供給され、これにより所定の音源
が音像移動に合わせて発生されて、その音源が指示され
る音程の音声信号とされた後、音像変換器71の一方の
入力側に供給され、この音声信号が音像変換器71にお
いて前記係数により畳み込み演算が行われる。また、端
子bに切り換えられる場合には、FM音源90が選ば
れ、端子cに切り換えられる場合には、PCM音源62
が選ばれ、これらから供給される音声信号が前記の演算
処理を施されることになる。従って、第3実施例の実施
例によれば、ディスクに記録された音声デ−タがMID
I信号である場合、PCM信号である場合、あるいは両
者の複合であった場合のいずれでもドップラ−効果を与
えることができる。
【0059】尚、上述のいずれの実施例も、左右音声用
のコンボルバを一つづつ用意しているが、これに限ら
ず、遅延回路との組み合わせにより一つのコンボルバを
共用しても良い。この場合にも、コンボルバは実質的に
一対用意されていることになる。 また、コンボルバ
は、複数の音源を想定する場合や、補助用に使用する場
合には二つ以上のコンボルバを設けても良い。更に、上
述のいずれの実施例も、音量変更をコンボルバのゲイン
を変更することにより行っているが、これに限らず、音
量変更を施した音声信号そのものをコンボルバに入力し
ても良い。
【0060】
【発明の効果】以上詳述したように、本発明になるテレ
ビゲーム機によれば、特に、音像の移動に応じて音源の
音程(ピッチ)、或いは、これに加えて音量が変更され
るので、いわゆるドップラー効果に相当する音響効果が
得られ、より現実に近いバ−チャルリアリテイが楽しめ
る。また、単一チャンネル(モノラル)のオ−ディオ・
データを用いて音像定位をきめ細かく行い得るため2チ
ャンネルのオ−ディオ・データは不用であるのはもちろ
ん音の移動の場合、音像定位毎のオ−ディオ・データは
不用となり、少ないデータでそれが可能となる。更に、
音像定位処理手段をコンボルバにより構成した場合に
は、音源からの信号を時間軸上で処理して音像を定位さ
せるので、実際に音像処理をする回路としては、時間軸
上での畳み込み演算処理回路が必要となるだけであり、
回路規模が非常に小さく安価なものとなる。
【図面の簡単な説明】
【図1】本発明に係るテレビゲ−ム用の音像定位制御装
置の第1の実施例を示す概略ブロック図である。
【図2】ドップラー効果を説明するための図である。
【図3】第2の実施例を示す概略ブロック図である。
【図4】第3の実施例を示す概略ブロック図である。
【図5】音源情報の読み出し速度を説明するための図で
ある。
【図6】音像定位制御の原理を説明するための構成図で
ある。
【図7】本発明のテレビゲーム用の音像定位制御装置の
音像定位制御の方法のステップを示すチャートである。
【図8】HRTF(頭部伝達関数)の測定システムを示
す構成図である。
【図9】音像定位制御装置の基本構成図である。
【図10】HRTF測定のポイントを説明するための図
である。
【図11】キャンセルフィルタの算出例を説明するため
の図である。
【符号の説明】
50 ゲ−ム用カセット 51 中央処理ユニット(CPU) 52 インタ−フェ−ス(IF) 53 CD−ROM 54 グラフィック・システム・プロセッサ(GS
P) 55 コントロ−ラ 60 テレビモニタ 61 サブ中央処理ユニット(SUB CPU) 62 PCM音源 63 音源RAM 66 MIDI音源 67 第三中央処理ユニット 71 音像変換器 71a,72b コンボルバ(第3CPU) 91 デイスク再生器 93 スイッチ 101 頭部伝達関数(HRTF)を測定するステッ
プ 102 HRTFのインパルス応答を算出するステッ
プ 103 IR(インパルス応答)を整形処理するステ
ップ 104 キャンセルフィルタcfLx、cfRxを算
出するステップ 105 キャンセルフィルタのスケーリングをするス
テップ 106 音源からの信号を畳み込み演算して再生する
ステップ sp1,sp2 スピーカ h1L,h1R スピーカsp1から受聴者左右耳ま
での頭部伝達特性 h2L,h2R スピーカsp2から受聴者左右耳ま
での頭部伝達特性 pLx,pRx 目的とする定位位置xに実際のスピ
ーカを配置したときの受聴者左右耳までの頭部伝達特性 cfLx,cfRx キャンセルフィルタ(コンボル
バ)及びその係数 DM ダミーヘッド(または人頭) M 聴取者(ゲーム操作者、受聴者) X 音源 x 目的とする音像定位位置

Claims (10)

    【特許請求の範囲】
  1. 【請求項1】入来するビデオ・ディスプレイ・デ−タに
    基づいて所定の画像が再生されると共に、離間した一対
    のトランスジュ−サから、モノラル音源が供給された音
    像定位処理手段で音像処理をした信号を再生し、聴取者
    に前記一対のトランスジューサとは異なる任意の移動位
    置に音像を定位させるように感じさせるテレビゲ−ム機
    において、 前記モノラル音源は、音像の移動されるべき速度に応じ
    て発生されると共に、想定された移動速度とは異なる移
    動速度に対応すべく音程変更されて、前記音像定位処理
    手段に供給される構成にしたことを特徴とするテレビゲ
    −ム機。
  2. 【請求項2】請求項1記載のテレビゲ−ム機において、
    モノラル音源の発生と、音程変更とは、ゲ−ムソフト供
    給手段から供給される音源情報と、この音源情報の音程
    変化情報と、音像位置情報とに少なくとも基づいて行な
    われることを特徴とするテレビゲ−ム機。
  3. 【請求項3】請求項2記載のテレビゲ−ム機において、
    音像の移動距離に応じて音量変更を行わせるための音量
    変化情報をゲ−ムソフト供給手段から供給するようにし
    たことを特徴とするテレビゲ−ム機。
  4. 【請求項4】請求項1記載のテレビゲ−ム機において、
    ゲ−ムソフト供給手段から音源情報と音像位置情報とが
    供給されて、モノラル音源が前記音源情報に基づいて供
    給されると共に、音程変更は前記音像位置情報に基づい
    て検出された音像の移動速度に応じて行なわれることを
    特徴とするテレビゲ−ム機。
  5. 【請求項5】請求項4記載のテレビゲ−ム機において、
    音像位置情報に基づいて音像の移動距離を検出し、これ
    により音量変更を行わせることを特徴とするテレビゲ−
    ム機。
  6. 【請求項6】請求項1乃至5記載のいずれかのテレビゲ
    −ム機において、音像定位処理手段をコンボルバで構成
    したことを特徴とするテレビゲ−ム機。
  7. 【請求項7】請求項1記載のテレビゲ−ム機において、
    音像定位処理手段は音像の移動に応じて所定係数が供給
    されて、これに基づき所定の演算処理が施されるコンボ
    ルバであり、前記音像の移動距離に応じて前記コンボル
    バのゲインが変更されて音量変更が行われることを特徴
    とするテレビゲ−ム機。
  8. 【請求項8】請求項2記載のテレビゲ−ム機において、
    音源はMIDI音源であることを特徴とするテレビゲ−
    ム機。
  9. 【請求項9】請求項3記載のテレビゲ−ム機において、
    音源は記憶手段に格納されるPCM信号であり、このP
    CM信号の読み出し速度を変更するか、又は、予め読み
    出し速度の変更による音程変更が行なわれたPCM信号
    を選択して音程変更が行われることを特徴とするテレビ
    ゲ−ム機。
  10. 【請求項10】請求項1乃至9記載のいずれかのテレビ
    ゲ−ム機において、音源を複数設け、これら音源がゲ−
    ムソフト供給手段に応じて切り換えられる構成にしたこ
    とを特徴とするテレビゲ−ム機。
JP4361642A 1992-12-18 1992-12-28 テレビゲーム機 Pending JPH06198074A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP4361642A JPH06198074A (ja) 1992-12-28 1992-12-28 テレビゲーム機
US08/169,198 US5598478A (en) 1992-12-18 1993-12-20 Sound image localization control apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP4361642A JPH06198074A (ja) 1992-12-28 1992-12-28 テレビゲーム機

Publications (1)

Publication Number Publication Date
JPH06198074A true JPH06198074A (ja) 1994-07-19

Family

ID=18474390

Family Applications (1)

Application Number Title Priority Date Filing Date
JP4361642A Pending JPH06198074A (ja) 1992-12-18 1992-12-28 テレビゲーム機

Country Status (1)

Country Link
JP (1) JPH06198074A (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5556107A (en) * 1995-06-15 1996-09-17 Apple Computer, Inc. Computer game apparatus for providing independent audio in multiple player game systems
JP2001292500A (ja) * 2000-04-10 2001-10-19 Dimagic:Kk アナログ・デジタル音響信号の合成及び再生装置
JP2008194208A (ja) * 2007-02-13 2008-08-28 Copcom Co Ltd ゲーム装置、ゲームプログラムおよび記憶媒体
JP2012055452A (ja) * 2010-09-08 2012-03-22 Copcom Co Ltd ゲームプログラム及びゲーム装置
JP2013102843A (ja) * 2011-11-11 2013-05-30 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5556107A (en) * 1995-06-15 1996-09-17 Apple Computer, Inc. Computer game apparatus for providing independent audio in multiple player game systems
JP2001292500A (ja) * 2000-04-10 2001-10-19 Dimagic:Kk アナログ・デジタル音響信号の合成及び再生装置
JP2008194208A (ja) * 2007-02-13 2008-08-28 Copcom Co Ltd ゲーム装置、ゲームプログラムおよび記憶媒体
JP2012055452A (ja) * 2010-09-08 2012-03-22 Copcom Co Ltd ゲームプログラム及びゲーム装置
JP2013102843A (ja) * 2011-11-11 2013-05-30 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法

Similar Documents

Publication Publication Date Title
US5598478A (en) Sound image localization control apparatus
US5386082A (en) Method of detecting localization of acoustic image and acoustic image localizing system
US6850621B2 (en) Three-dimensional sound reproducing apparatus and a three-dimensional sound reproduction method
JP5285626B2 (ja) 音声空間化及び環境シミュレーション
US6611603B1 (en) Steering of monaural sources of sound using head related transfer functions
CN101009953B (zh) 音效校正装置
US5404406A (en) Method for controlling localization of sound image
JPH06245300A (ja) 音像定位制御装置
JP2827777B2 (ja) 音像定位制御における中間伝達特性の算出方法並びにこれを利用した音像定位制御方法及び装置
JP2005157278A (ja) 全周囲音場創生装置、全周囲音場創生方法、及び全周囲音場創生プログラム
JPH06198074A (ja) テレビゲーム機
JP3367625B2 (ja) 音像定位制御装置
JPH06285258A (ja) ビデオゲーム機
US20240163624A1 (en) Information processing device, information processing method, and program
JP2882449B2 (ja) テレビゲーム用の音像定位制御装置
JPH09191500A (ja) 仮想音像定位用伝達関数表作成方法、その伝達関数表を記録した記憶媒体及びそれを用いた音響信号編集方法
JP2924539B2 (ja) 音像定位制御方法
JP2755081B2 (ja) 音像定位制御方法
JPH09182200A (ja) 音像制御装置及び音像制御方法
JPH06246064A (ja) テレビゲーム機用付加装置
JP2985557B2 (ja) サラウンド信号処理装置
JPH07203597A (ja) ヘッドホン再生装置
JP2870562B2 (ja) 音像定位制御の方法
JP2985919B2 (ja) 音像定位制御装置
JPH09327100A (ja) ヘッドホン再生装置