JP2005295416A - Stereo sound processing apparatus and stereo sound processing method - Google Patents
Stereo sound processing apparatus and stereo sound processing method Download PDFInfo
- Publication number
- JP2005295416A JP2005295416A JP2004110682A JP2004110682A JP2005295416A JP 2005295416 A JP2005295416 A JP 2005295416A JP 2004110682 A JP2004110682 A JP 2004110682A JP 2004110682 A JP2004110682 A JP 2004110682A JP 2005295416 A JP2005295416 A JP 2005295416A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- sound signal
- coordinate
- sound source
- fluctuation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Stereophonic System (AREA)
Abstract
【課題】音信号読み出し装置5から入力される音情報に立体的な定位感を効果的に与える。
【解決手段】音源座標コントローラ1は音源を定位させるべき空間的な座標を時系列情報として出力し、座標ゆらぎ付加装置2は音源座標コントローラから出力された音源座標に「ゆらぎ」を付加し、音信号特徴量演算装置3は座標ゆらぎ付加装置から入力された音源座標の方向から音が聴こえてくるように定位感をもたらす音信号特徴量を演算し、音信号特徴量調節装置4は音信号特徴量演算装置によって演算された音信号特徴量にしたがって音信号読み出し装置から入力された音信号の特徴量を調節する。
【選択図】 図1An object of the present invention is to effectively give a three-dimensional orientation to sound information inputted from a sound signal reading device.
A sound source coordinate controller 1 outputs spatial coordinates for locating a sound source as time-series information, and a coordinate fluctuation adding device 2 adds “fluctuation” to the sound source coordinates output from the sound source coordinate controller. The signal feature quantity computing device 3 computes a sound signal feature quantity that gives a sense of localization so that sound can be heard from the direction of the sound source coordinates input from the coordinate fluctuation adding device, and the sound signal feature quantity adjusting device 4 is a sound signal feature. The feature amount of the sound signal input from the sound signal reading device is adjusted according to the sound signal feature amount calculated by the amount calculation device.
[Selection] Figure 1
Description
本発明は、音楽や音声などの音情報に立体的な定位感を与える立体音響処理とその再生を行う立体音響処理装置および方法に関するものである。 The present invention relates to a stereophonic sound processing apparatus and a method for performing stereophonic sound processing that gives a three-dimensional orientation to sound information such as music and voice, and reproduction thereof.
音響信号に立体的な定位感を与える技術として、頭部伝達関数による音信号処理を加えることによって、ヘッドホン再生における立体的な定位感を実現していることをはじめ、多くのサラウンド音響効果処理技術が開発されている(例えば、非特許文献1参照)。
しかし、音の定位感は、前方でも20度程度と精度が低く、感じ方の個人差も大きいため、立体的な音像定位に気づかない場合も少なくない。 However, the sound localization feeling is as low as about 20 degrees even in the forward direction, and there are many individual differences in the way of feeling, so there are many cases where the three-dimensional sound image localization is not noticed.
従来技術によって定位させている音像に効果的に気づかせる新しい技術の開発が要望されている。 There is a demand for the development of a new technology that effectively recognizes the sound image localized by the conventional technology.
本発明の目的は、音響に立体的な定位感を効果的に与えることができる立体音響処理装置および立体音響処理方法を提供することにある。 An object of the present invention is to provide a three-dimensional sound processing apparatus and a three-dimensional sound processing method that can effectively give a three-dimensional orientation to sound.
音響に立体的な定位感を人に与えることは、音像の定位そのものを人が気づく(音刺激が人の意識にのぼる)ことであり、音刺激が人の意識にのぼるためには、太脳皮質まで刺激が到達することが必要となる。人の聴覚は音刺激の変化をFMニューロンなどの働きによりフィルタリングしており、変化分のみが太脳皮質に到達する。したがって、音刺激を人に気づかせるためには、常に変化しつづける非定常刺激を与えることが有効である。 Giving a person a three-dimensional sense of sound acoustically means that the person is aware of the localization of the sound image itself (sound stimulation rises to human consciousness). Stimulation needs to reach the cortex. In human hearing, changes in sound stimulation are filtered by the action of FM neurons or the like, and only the change reaches the cerebral cortex. Therefore, in order to make a sound stimulus notice to a person, it is effective to give a non-stationary stimulus that constantly changes.
本発明は、上記のことに着目し、音像を定位させる空間座標上で、音像の定位をゆらがせることによって定位感の微小な変化を生ぜしめ、それによって音像の立体的な定位そのものを人が気づき易くすることで前記の課題を解決するもので、以下の装置および方法を特徴とする。 The present invention pays attention to the above, and causes a slight change in the sense of localization by distorting the localization of the sound image on the spatial coordinates where the sound image is localized, thereby making the stereo image localization of the sound image itself human. The above-mentioned problem is solved by making it easy to notice, and is characterized by the following apparatus and method.
(1)音信号読み出し装置から入力される音情報に立体的な音響効果を与える立体音響処理装置であって、
音源を定位させるべき空間的な座標を時系列情報として出力する音源座標コントローラと、
前記音源座標コントローラから出力された音源座標に「ゆらぎ」を付加する座標ゆらぎ付加装置と、
前記座標ゆらぎ付加装置から入力された音源座標の方向から音が聴こえてくるように定位感をもたらす音信号特徴量を演算する音信号特徴量演算装置と、
前記音信号特徴量演算装置によって演算された音信号特徴量にしたがって前記音信号読み出し装置から入力された音信号の特徴量を調節する音信号特徴量調節装置とを具備することを特徴とする。
(1) A stereophonic sound processing device that provides a three-dimensional sound effect to sound information input from a sound signal reading device,
A sound source coordinate controller that outputs the spatial coordinates to which the sound source should be localized as time series information,
A coordinate fluctuation adding device for adding "fluctuation" to the sound source coordinates output from the sound source coordinate controller;
A sound signal feature quantity computing device that computes a sound signal feature quantity that provides a sense of localization so that sound can be heard from the direction of the sound source coordinates input from the coordinate fluctuation adding device;
And a sound signal feature amount adjusting device for adjusting a feature amount of the sound signal input from the sound signal reading device in accordance with the sound signal feature amount calculated by the sound signal feature amount calculating device.
(2)上記(1)において、音信号と音源座標と付加する座標ゆらぎ量とのいずれか、あるいはそれらの組み合わせを保存するメモリーと、
前記メモリーからそれぞれの情報を前記音源座標コントローラ、座標ゆらぎ付加装置および音信号読み出し装置に同期させて読み出すタイマーとを具備することを特徴とする。
(2) In the above (1), a memory for storing any one of a sound signal, a sound source coordinate, and a coordinate fluctuation amount to be added, or a combination thereof;
And a timer for reading out each information from the memory in synchronization with the sound source coordinate controller, a coordinate fluctuation adding device, and a sound signal reading device.
(3)上記(1)において、音信号と音源座標と付加する座標ゆらぎ量とのいずれか、あるいはそれらの組み合わせを、前記音信号読み出し装置、音源座標コントローラおよび座標ゆらぎ付加装置に入力設定できる入力デバイスを具備することを特徴とする。 (3) In the above (1), any one of the sound signal, the sound source coordinates and the coordinate fluctuation amount to be added, or a combination thereof, can be input to the sound signal reading device, the sound source coordinate controller, and the coordinate fluctuation adding device. A device is provided.
(4)上記(1)において、音信号と音源座標と付加する座標ゆらぎ量とのいずれか、あるいはそれらの組み合わせをネットワークを介して受け取り、前記音信号読み出し装置、音源座標コントローラおよび座標ゆらぎ付加装置に入力するネットワークデバイスを具備することを特徴とする。 (4) In the above (1), any one of a sound signal, a sound source coordinate and a coordinate fluctuation amount to be added or a combination thereof is received via a network, and the sound signal reading device, the sound source coordinate controller, and the coordinate fluctuation adding device are received. And a network device for inputting to the network.
(5)上記(1)において、音信号と音源座標と付加する座標ゆらぎ量とのいずれか、あるいはそれらの組み合わせをネットワークを介して受け取り、前記音信号読み出し装置に入力する音信号に同期させて、前記音源座標コントローラおよび座標ゆらぎ付加装置に入力するネットワークデバイスを具備することを特徴とする。 (5) In the above (1), any one of a sound signal, a sound source coordinate and a coordinate fluctuation amount to be added, or a combination thereof is received via a network and synchronized with a sound signal input to the sound signal reading device. And a network device for inputting to the sound source coordinate controller and the coordinate fluctuation adding device.
(6)上記(1)〜(5)のいずれか1の立体音響処理装置において、前記音信号特徴量調節装置からの出力を音として再生する発音装置を具備することを特徴とする。 (6) The stereophonic sound processing device according to any one of (1) to (5) above, further comprising a sounding device that reproduces an output from the sound signal feature amount adjusting device as sound.
(7)音信号読み出し装置から入力される音情報に立体的な音響効果を与える立体音響処理方法であって、
音源座標コントローラは、音源を定位させるべき空間的な座標を時系列情報として出力し、
座標ゆらぎ付加装置は、前記音源座標コントローラから出力された音源座標に「ゆらぎ」を付加し、
音信号特徴量演算装置は、前記座標ゆらぎ付加装置から入力された音源座標の方向から音が聴こえてくるように定位感をもたらす音信号特徴量を演算し、
音信号特徴量調節装置は、前記音信号特徴量演算装置によって演算された音信号特徴量にしたがって前記音信号読み出し装置から入力された音信号の特徴量を調節することを特徴とする。
(7) A stereophonic sound processing method for providing a three-dimensional sound effect to sound information input from a sound signal reading device,
The sound source coordinate controller outputs the spatial coordinates where the sound source should be localized as time series information,
The coordinate fluctuation adding device adds “fluctuation” to the sound source coordinates output from the sound source coordinate controller,
The sound signal feature quantity computing device computes a sound signal feature quantity that provides a sense of localization so that sound can be heard from the direction of the sound source coordinates input from the coordinate fluctuation adding device,
The sound signal feature value adjusting device adjusts the feature value of the sound signal input from the sound signal reading device according to the sound signal feature value calculated by the sound signal feature value calculating device.
以上のとおり、本発明によれば、音像を定位させる空間座標上で、音像の定位をゆらがせることによって定位感の微小な変化を生ぜしめ、それによって音像の立体的な定位そのものを人が気づき易くするため、音響に立体的な定位感を効果的に与えることができる。 As described above, according to the present invention, on the spatial coordinates where the sound image is localized, the localization of the sound image is fluctuated to cause a minute change in the localization feeling, thereby allowing the person to change the three-dimensional localization of the sound image itself. In order to make it easy to notice, it is possible to effectively give a three-dimensional orientation to the sound.
図1は、本発明の請求項1に対応する装置構成例を示す。音源座標コントローラ1は音源を定位させるべき空間的な座標を時系列情報として出力する。 FIG. 1 shows an apparatus configuration example corresponding to claim 1 of the present invention. The sound source coordinate controller 1 outputs the spatial coordinates where the sound source should be localized as time series information.
この音源座標コントローラ1から出力された音源座標をそのまま音信号特徴量演算装置3に入力して演算するのが従来の技術であるが、本実施形態においては、従来技術によって定位された音像の位置を前後左右にあるいは円弧を描いてなどゆらがせることによって、音像定位に変化を与え、聴覚刺激が大脳皮質まで達して音像定位情報の存在が意識にのぼることを効果的に実現する。
In the conventional technique, the sound source coordinates output from the sound source coordinate controller 1 are directly input to the sound signal feature
座標ゆらぎ付加装置2は入力される座標情報に「ゆらぎ」を加える。この「ゆらぎ」の付加は上記のように音像の位置を水平方向に単振動あるいは円弧させるが、他のベクトルでもよいし、複雑に変化させてもよい。
The coordinate
音信号特徴量演算装置3は、ゆらぎを付加された音源座標に基づき、音信号特徴量を演算し、音信号特徴量調節装置4に対して出力する。音信号特徴量調節装置4は、入力された音信号特徴量にしたがい、音信号読み出し装置5から別途入力されている音信号に対して特徴量を調節する。
The sound signal feature
以上の機能構成により、音像定位座標がゆらぐ音信号が生成され、従来よりも定位感を強調した立体音響処理を実現することができる。 With the above-described functional configuration, a sound signal in which the sound image localization coordinates fluctuate is generated, and stereophonic sound processing that emphasizes a sense of localization compared to the conventional art can be realized.
図2は、本発明の請求項2に対応する装置構成例を示す。同図が図1と異なる部分は、音信号、音源座標、座標ゆらぎを内部メモリー6からタイマー7によって同期させて読み出す点にある。
FIG. 2 shows an apparatus configuration example corresponding to
この機能構成により、楽曲などの進行と音信号の定位とをマッチさせ、従来よりも楽曲の定位感を強調した空間演出コンテンツを編集することができる。 With this functional configuration, it is possible to match the progress of music and the localization of the sound signal, and edit the spatial performance content that emphasizes the localization feeling of the music than before.
図3は、本発明の請求項3に対応する装置構成例を示す。同図が図1と異なる部分は、音源座標、座標ゆらぎを入力デバイス8によって人が入力できるようにした点にある。 FIG. 3 shows an apparatus configuration example corresponding to claim 3 of the present invention. 1 is different from FIG. 1 in that a sound source coordinate and coordinate fluctuation can be input by a person using the input device 8.
この機能構成により、楽曲などの進行にしたがって、ほぼリアルタイムに音像の定位のデザインを行っていくことができる。 With this functional configuration, it is possible to design the localization of the sound image almost in real time as the music progresses.
図4は、本発明の請求項5に対応する装置構成例を示す。同図が図1と異なる部分は、音信号、音源座標、座標ゆらぎを外部ネットワークからネットワークデバイス9を介して受け取り、同期させて読み出す。
FIG. 4 shows an apparatus configuration example corresponding to claim 5 of the present invention. 1 is different from FIG. 1 in that sound signals, sound source coordinates, and coordinate fluctuations are received from an external network via the
この機能構成により、楽曲などの進行と音信号の定位とをマッチさせ、従来よりも楽曲の定位感を強調した空間演出コンテンツをネットワーク環境下で編集することができる。 With this functional configuration, it is possible to edit the spatial performance content that matches the progress of the music and the localization of the sound signal and emphasizes the localization feeling of the music in the network environment.
なおネットワークからの入力を同期させないことも可能であり、その場合は本発明の請求項4に対応した装置になる。 It is also possible not to synchronize the input from the network, in which case the apparatus corresponds to claim 4 of the present invention.
また、図1〜図4の機能構成は排他的なものではなく、音楽をネットワークから取り込みつつ、定位座標を入力デバイス8で操作し、座標ゆらぎはメモリー6内に蓄積されていたものを用いるといった組み合わせ構成も可能である。
Also, the functional configurations of FIGS. 1 to 4 are not exclusive, and the coordinate coordinates are manipulated by the input device 8 while taking in music from the network, and the coordinate fluctuations stored in the
図5は、本発明の請求項6に対応する装置構成例を示す。同図が図4と異なる部分は、処理され出力された音信号を発音装置10によって音として再生する点にある。
FIG. 5 shows an apparatus configuration example corresponding to claim 6 of the present invention. 4 is different from FIG. 4 in that the processed and output sound signal is reproduced as sound by the
この機能構成により、楽曲などの進行と音信号の定位とをマッチさせ、従来よりも楽曲の定位感を強調した空間演出コンテンツをネットワーク環境下で生演奏することが可能になる。 With this functional configuration, it becomes possible to perform live performance in a network environment in a network environment that matches the progress of music and the localization of sound signals, and emphasizes the localization feeling of the music than before.
なお、以上までの図1〜図5の機能構成は、簡単のために単一チャンネルの事例を述べている。いずれもステレオ2チャンネル、サラウンド5.1チャンネルなど、多チャンネルの場合も同様に構成することが可能である。 Note that the functional configurations of FIGS. 1 to 5 described above are examples of a single channel for simplicity. In either case, a multi-channel configuration such as two stereo channels or 5.1 surround channels can be configured in the same manner.
1 音源座標コントローラ
2 座標ゆらぎ付加装置
3 音信号特徴量演算装置
4 音信号特徴量調節装置
5 音信号読み出し装置
6 メモリー
7 タイマー
8 入力デバイス
9 ネットワークデバイス
10 発音装置
DESCRIPTION OF SYMBOLS 1 Sound source coordinate
Claims (7)
音源を定位させるべき空間的な座標を時系列情報として出力する音源座標コントローラと、
前記音源座標コントローラから出力された音源座標に「ゆらぎ」を付加する座標ゆらぎ付加装置と、
前記座標ゆらぎ付加装置から入力された音源座標の方向から音が聴こえてくるように定位感をもたらす音信号特徴量を演算する音信号特徴量演算装置と、
前記音信号特徴量演算装置によって演算された音信号特徴量にしたがって前記音信号読み出し装置から入力された音信号の特徴量を調節する音信号特徴量調節装置と、
を具備することを特徴とする立体音響処理装置。 A stereophonic sound processing device that gives a three-dimensional sound effect to a sound signal input from a sound signal reading device,
A sound source coordinate controller that outputs the spatial coordinates to which the sound source should be localized as time series information,
A coordinate fluctuation adding device for adding "fluctuation" to the sound source coordinates output from the sound source coordinate controller;
A sound signal feature quantity computing device that computes a sound signal feature quantity that provides a sense of localization so that sound can be heard from the direction of the sound source coordinates input from the coordinate fluctuation adding device;
A sound signal feature amount adjusting device for adjusting a feature amount of a sound signal input from the sound signal reading device according to the sound signal feature amount calculated by the sound signal feature amount calculating device;
A stereophonic sound processing apparatus comprising:
前記メモリーからそれぞれの情報を前記音源座標コントローラ、座標ゆらぎ付加装置および音信号読み出し装置に同期させて読み出すタイマーと、
を具備することを特徴とする立体音響処理装置。 The memory according to claim 1, wherein any one of a sound signal, a sound source coordinate, and a coordinate fluctuation amount to be added, or a combination thereof, is stored.
A timer for reading out each information from the memory in synchronization with the sound source coordinate controller, a coordinate fluctuation adding device, and a sound signal reading device;
A stereophonic sound processing apparatus comprising:
音源座標コントローラは、音源を定位させるべき空間的な座標を時系列情報として出力し、
座標ゆらぎ付加装置は、前記音源座標コントローラから出力された音源座標に「ゆらぎ」を付加し、
音信号特徴量演算装置は、前記座標ゆらぎ付加装置から入力された音源座標の方向から音が聴こえてくるように定位感をもたらす音信号特徴量を演算し、
音信号特徴量調節装置は、前記音信号特徴量演算装置によって演算された音信号特徴量にしたがって前記音信号読み出し装置から入力された音信号の特徴量を調節する、
ことを特徴とする立体音響処理方法。 A stereophonic sound processing method for providing a three-dimensional sound effect to a sound signal input from a sound signal reading device,
The sound source coordinate controller outputs the spatial coordinates where the sound source should be localized as time series information,
The coordinate fluctuation adding device adds “fluctuation” to the sound source coordinates output from the sound source coordinate controller,
The sound signal feature quantity computing device computes a sound signal feature quantity that provides a sense of localization so that sound can be heard from the direction of the sound source coordinates input from the coordinate fluctuation adding device,
The sound signal feature amount adjusting device adjusts the feature amount of the sound signal input from the sound signal reading device according to the sound signal feature amount calculated by the sound signal feature amount calculating device.
A stereophonic sound processing method characterized by the above.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004110682A JP2005295416A (en) | 2004-04-05 | 2004-04-05 | Stereo sound processing apparatus and stereo sound processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004110682A JP2005295416A (en) | 2004-04-05 | 2004-04-05 | Stereo sound processing apparatus and stereo sound processing method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2005295416A true JP2005295416A (en) | 2005-10-20 |
Family
ID=35327826
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004110682A Pending JP2005295416A (en) | 2004-04-05 | 2004-04-05 | Stereo sound processing apparatus and stereo sound processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2005295416A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023199818A1 (en) | 2022-04-14 | 2023-10-19 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Acoustic signal processing device, acoustic signal processing method, and program |
| WO2024084920A1 (en) | 2022-10-19 | 2024-04-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Sound processing method, sound processing device, and program |
-
2004
- 2004-04-05 JP JP2004110682A patent/JP2005295416A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023199818A1 (en) | 2022-04-14 | 2023-10-19 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Acoustic signal processing device, acoustic signal processing method, and program |
| EP4510633A4 (en) * | 2022-04-14 | 2025-08-06 | Panasonic Ip Corp America | DEVICE FOR PROCESSING ACOUSTIC SIGNALS, METHOD FOR PROCESSING ACOUSTIC SIGNALS AND PROGRAM |
| WO2024084920A1 (en) | 2022-10-19 | 2024-04-25 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Sound processing method, sound processing device, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4364326B2 (en) | 3D sound reproducing apparatus and method for a plurality of listeners | |
| JP3521900B2 (en) | Virtual speaker amplifier | |
| US7536021B2 (en) | Utilization of filtering effects in stereo headphone devices to enhance spatialization of source around a listener | |
| US6766028B1 (en) | Headtracked processing for headtracked playback of audio signals | |
| KR101764175B1 (en) | Method and apparatus for reproducing stereophonic sound | |
| Ranjan et al. | Natural listening over headphones in augmented reality using adaptive filtering techniques | |
| US9967693B1 (en) | Advanced binaural sound imaging | |
| US9769585B1 (en) | Positioning surround sound for virtual acoustic presence | |
| CN105163242B (en) | A kind of multi-angle 3D sound back method and device | |
| KR100954385B1 (en) | 3D audio signal processing apparatus and method using personalized head transfer function, and high-reality multimedia playback system using the same | |
| EP3837863B1 (en) | Methods for obtaining and reproducing a binaural recording | |
| US20190170533A1 (en) | Navigation by spatial placement of sound | |
| US20220122630A1 (en) | Real-time augmented hearing platform | |
| JPWO2012144227A1 (en) | Audio signal reproduction apparatus and audio signal reproduction method | |
| JP2017143469A (en) | Information processing apparatus and information processing method | |
| US20190394596A1 (en) | Transaural synthesis method for sound spatialization | |
| Gan et al. | Personalized HRTF measurement and 3D audio rendering for AR/VR headsets | |
| US9843883B1 (en) | Source independent sound field rotation for virtual and augmented reality applications | |
| ATE503354T1 (en) | AUDIO-BASED DATA REPRESENTATION APPARATUS AND METHOD | |
| Jenny et al. | Can I trust my ears in VR? Literature review of head-related transfer functions and valuation methods with descriptive attributes in virtual reality | |
| WO2023173285A1 (en) | Audio processing method and apparatus, electronic device, and computer-readable storage medium | |
| CN116193350A (en) | Audio signal processing method, device, device and storage medium | |
| JP2005295416A (en) | Stereo sound processing apparatus and stereo sound processing method | |
| US20240284137A1 (en) | Location Based Audio Rendering | |
| JP2010193105A (en) | Sound field creating apparatus |