JP2003518891A - 音声信号処理装置 - Google Patents
音声信号処理装置Info
- Publication number
- JP2003518891A JP2003518891A JP2001549055A JP2001549055A JP2003518891A JP 2003518891 A JP2003518891 A JP 2003518891A JP 2001549055 A JP2001549055 A JP 2001549055A JP 2001549055 A JP2001549055 A JP 2001549055A JP 2003518891 A JP2003518891 A JP 2003518891A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- music
- speech
- voice
- processing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
- Electrophonic Musical Instruments (AREA)
Abstract
(57)【要約】
音声信号処理装置は１又はそれ以上の入力チャネルを介して話声及び音楽信号を供給する信号供給手段を含む。更にこの装置は話声音楽信号に分離する分離手段を含む、第１の変換手段は１又はそれ以上の入力チャネルからの音楽信号を所望の仮想の拡がりに変換するのに用いられる。結合手段は話声信号を変換された音楽信号と結合するのに用いられる。
Description
【０００１】
本発明は話声及び音楽信号用の音声信号処理装置に係る。
【０００２】
話声及び音響信号はスピーカの配置により決まるある方向から到来するが、そ
れにも拘わらず、聴取者により知覚されるように、話声及び音楽信号は異なる方
向から到来するようでなければならないとの要求がある。
れにも拘わらず、聴取者により知覚されるように、話声及び音楽信号は異なる方
向から到来するようでなければならないとの要求がある。
【０００３】
この目的を達成するため、本発明による音声信号処理装置は、1又は複数（ｎ
）の異なる入力チャネルに亘る話声及び音楽信号を供給する信号供給手段と、話
声及び音楽信号を実質的に分離する分離手段と、音楽信号が１又は複数（ｍ）の
異なる出力チャネルで聴取されうる所望の仮想空間拡がりに応じて音楽信号を変
換する第1の変換手段と、話声信号を変換された音楽信号と結合する結合手段と
を備える。
）の異なる入力チャネルに亘る話声及び音楽信号を供給する信号供給手段と、話
声及び音楽信号を実質的に分離する分離手段と、音楽信号が１又は複数（ｍ）の
異なる出力チャネルで聴取されうる所望の仮想空間拡がりに応じて音楽信号を変
換する第1の変換手段と、話声信号を変換された音楽信号と結合する結合手段と
を備える。
【０００４】
例えばヘッドホンを用いる従来のステレオ音響再生装置に対し、ｎ＝２、ｍ＝
２の場合に、音楽は本発明による音声信号処理装置を用いて仮想的空間的拡がり
をもって聴取され得、話声はモノラル信号として２つのチャネル（左及び右）に
亘って等分に分配され得、２つのうちの１つ（左又は右）で聴取されうる。より
広い空間的仮想的拡がりで聴取される音楽を以下簡単のため“拡がった”音楽と
いう。本発明による装置は話声ではなく音楽を拡げることを可能にし、話声及び
音楽信号に対し、また話声及び音楽の同時再生に対し、双方に有効である。
２の場合に、音楽は本発明による音声信号処理装置を用いて仮想的空間的拡がり
をもって聴取され得、話声はモノラル信号として２つのチャネル（左及び右）に
亘って等分に分配され得、２つのうちの１つ（左又は右）で聴取されうる。より
広い空間的仮想的拡がりで聴取される音楽を以下簡単のため“拡がった”音楽と
いう。本発明による装置は話声ではなく音楽を拡げることを可能にし、話声及び
音楽信号に対し、また話声及び音楽の同時再生に対し、双方に有効である。
【０００５】
ある環境では話声を所望の他の方向から現われる様にすることが望ましい場合
があるので、話声信号が発する方向を認識する信号方向検出手段と、話声信号が
聴取されうる方向の所望の仮想変化に応じて話声信号を変換する第2の変換手段
とを設け、変換された話声信号及び変換された音楽信号を結合手段で互いに結合
することが本発明により更に可能である。
があるので、話声信号が発する方向を認識する信号方向検出手段と、話声信号が
聴取されうる方向の所望の仮想変化に応じて話声信号を変換する第2の変換手段
とを設け、変換された話声信号及び変換された音楽信号を結合手段で互いに結合
することが本発明により更に可能である。
【０００６】
この手段によれば、話し手が静止していようが、動き廻ろうが、また異なる空
間的角度から連続的に聴衆席に話しかける幾人かの話し手が存在するとしても、
話声は話し手の方向からヘッドホンを介して聴取されることが可能になる。本発
明による手段は、ビデオ会議にとって重要であり、ここでは話声は映像及び音が
記録された方向からではなく、表示された映像上の話し手の方向から発せられる
。映像及び音の知覚される方向が一致しない時、話声の理解の容易さに対し特に
不快な悪い影響をもたらす。
間的角度から連続的に聴衆席に話しかける幾人かの話し手が存在するとしても、
話声は話し手の方向からヘッドホンを介して聴取されることが可能になる。本発
明による手段は、ビデオ会議にとって重要であり、ここでは話声は映像及び音が
記録された方向からではなく、表示された映像上の話し手の方向から発せられる
。映像及び音の知覚される方向が一致しない時、話声の理解の容易さに対し特に
不快な悪い影響をもたらす。
【０００７】
前記第2の変換手段は、話声及び位置信号が位置記録手段を有するマイクロホ
ンから供給されうる１又は複数の付加的入力チャネルを設けられる。更なる話し
手からの話声信号はこの様に入力され得、あたかもこの話し手の方向から到来す
るかの様に再生される。
ンから供給されうる１又は複数の付加的入力チャネルを設けられる。更なる話し
手からの話声信号はこの様に入力され得、あたかもこの話し手の方向から到来す
るかの様に再生される。
【０００８】
本発明は更に上記の様な音声信号処理装置と、増幅された話声及び音楽信号を
再生する、個々の出力チャネルに対する音響再生手段とを有する音声再生システ
ムに係る。
再生する、個々の出力チャネルに対する音響再生手段とを有する音声再生システ
ムに係る。
【０００９】
本発明は上記の音声信号処理装置を備えたオーディオビジュアル再生システム
に係り、映像スクリーン及び音響再生手段が組み込まれたユニットに係る。
に係り、映像スクリーン及び音響再生手段が組み込まれたユニットに係る。
【００１０】
本発明を図面を参照して以下詳細に説明する。
【００１１】
図中、話声フィルタ１でｎ個の入力信号Ｓｎ（Ｍ＋Ｓ）がフィルタされ、話声
（スピーチ）信号Ｓｎ（Ｓ）だけが出力に現われる。差分手段２により入力信号
と話声信号とから音声信号Ｓｎ（Ｍ）が得られる。実際に、話声フィルタと差分
手段は互いに話声信号を音楽信号と実質的に分離する分離手段を形成する。かか
る分離手段はそれ自体カラオケ技術より公知であり、例えば、話声はある周波数
帯域に存在するが、一定の或いは話し手の動きと共に変化する重み付けで入力チ
ャネルに亘って分散して存在するという効果に基づいている。
（スピーチ）信号Ｓｎ（Ｓ）だけが出力に現われる。差分手段２により入力信号
と話声信号とから音声信号Ｓｎ（Ｍ）が得られる。実際に、話声フィルタと差分
手段は互いに話声信号を音楽信号と実質的に分離する分離手段を形成する。かか
る分離手段はそれ自体カラオケ技術より公知であり、例えば、話声はある周波数
帯域に存在するが、一定の或いは話し手の動きと共に変化する重み付けで入力チ
ャネルに亘って分散して存在するという効果に基づいている。
【００１２】
音楽信号Ｓｎ（Ｍ）は（第１の）変換手段３で、音楽信号が個々のチャネルを
介して聴取されうる所望の仮想的空間の拡がりに応じて、いわゆる拡げられた音
楽信号Ｓｍ’（Ｍ）に変換される。入力チャネルの数には明らかに出力チャネル
の数ｍに等しい必要はない。かかる音楽拡げ技術はそれ自体例えば米国特許明細
書５７４２６８７より公知である。話声信号Ｓｎ（Ｓ）は結合手段４で拡げられ
た音楽信号と再び結合される、音楽信号はこの様に拡げられ、一方話声信号は元
の方向から到来するとして知覚される。２つのチャネルが存在する場合、音楽及
び話声は増幅され、２つのスピーカＬ（左）、Ｒ（右）を介して再生され、音楽
は２つの仮想スピーカから到来するとして知覚され、一方話声は２つのスピーカ
の両方又は一方から到来するとして知覚されることが、本シスムで達成される。
介して聴取されうる所望の仮想的空間の拡がりに応じて、いわゆる拡げられた音
楽信号Ｓｍ’（Ｍ）に変換される。入力チャネルの数には明らかに出力チャネル
の数ｍに等しい必要はない。かかる音楽拡げ技術はそれ自体例えば米国特許明細
書５７４２６８７より公知である。話声信号Ｓｎ（Ｓ）は結合手段４で拡げられ
た音楽信号と再び結合される、音楽信号はこの様に拡げられ、一方話声信号は元
の方向から到来するとして知覚される。２つのチャネルが存在する場合、音楽及
び話声は増幅され、２つのスピーカＬ（左）、Ｒ（右）を介して再生され、音楽
は２つの仮想スピーカから到来するとして知覚され、一方話声は２つのスピーカ
の両方又は一方から到来するとして知覚されることが、本シスムで達成される。
【００１３】
話声信号が調節可能な方向から到来するとして知覚されることが望ましいので
、図示の音声信号処理装置には信号方向検出手段５及び第２の変換手段６が追加
的に設けられる。話声信号が発せられる方向は、例えば公知のＰＣＡ（プリンシ
パル コンポーネント アナリシス）技術を用いて、信号方向検出手段で確かめ
られる。話声信号は、話声信号が聴取されうる方向での所望の仮想的変化に応じ
て、変換手段６で話声信号Ｓｍ’（Ｓ）に変換される。信号は公知の方法でマト
リックス乗法を受ける。ここで、所望の仮想チャネルに対するマトリックス係数
は、実際のチャネルを介して伝送される信号が仮想チャネルを介して到来すると
して知覚されるように、較正により決定される。２つのチャネルが存在し、話声
が２つのスピーカＬ（左）、Ｒ（右）を介して例えば両方等しく強く増幅されて
伝送される場合、かかるマトリックス乗法は、より強い信号が他のスピーカから
よりも一のスピーカから到来するとして知覚されることを達成し、これは話声が
、スピーカにより決まる元の方向と比較して、マトリックス係数により決まる異
なる（仮想の）方向から到来するとして知覚されることを意味する。
、図示の音声信号処理装置には信号方向検出手段５及び第２の変換手段６が追加
的に設けられる。話声信号が発せられる方向は、例えば公知のＰＣＡ（プリンシ
パル コンポーネント アナリシス）技術を用いて、信号方向検出手段で確かめ
られる。話声信号は、話声信号が聴取されうる方向での所望の仮想的変化に応じ
て、変換手段６で話声信号Ｓｍ’（Ｓ）に変換される。信号は公知の方法でマト
リックス乗法を受ける。ここで、所望の仮想チャネルに対するマトリックス係数
は、実際のチャネルを介して伝送される信号が仮想チャネルを介して到来すると
して知覚されるように、較正により決定される。２つのチャネルが存在し、話声
が２つのスピーカＬ（左）、Ｒ（右）を介して例えば両方等しく強く増幅されて
伝送される場合、かかるマトリックス乗法は、より強い信号が他のスピーカから
よりも一のスピーカから到来するとして知覚されることを達成し、これは話声が
、スピーカにより決まる元の方向と比較して、マトリックス係数により決まる異
なる（仮想の）方向から到来するとして知覚されることを意味する。
【００１４】
上記第２の変換手段は、話声及び位置信号が位置検出手段を有するマイクロホ
ンから供給されうる１又は複数の追加的入力チャネル７を追加的に設けられうる
。更なる話し手からの話声信号は、あたかもこの話し手の方向から到来するかの
様に入力され再生されうる。
ンから供給されうる１又は複数の追加的入力チャネル７を追加的に設けられうる
。更なる話し手からの話声信号は、あたかもこの話し手の方向から到来するかの
様に入力され再生されうる。
【００１５】
変換された話声及び音楽信号は結合手段４により再び互いに結合され信号Ｓｍ
’（Ｍ＋Ｓ）にされる。音楽信号はかくして拡げられ、一方話声信号は調整され
る方向から到来するとして知覚される。２つのチャネルが存在し、音楽及び話声
が２つのスピーカＬ（左）、Ｒ（右）を介して増幅された形で伝送されるなら、
音楽が２つの仮想スピーカから到来するとして知覚され、一方話声はある選択さ
れた方向から到来するとして知覚されることが本システムにより達成可能である
。
’（Ｍ＋Ｓ）にされる。音楽信号はかくして拡げられ、一方話声信号は調整され
る方向から到来するとして知覚される。２つのチャネルが存在し、音楽及び話声
が２つのスピーカＬ（左）、Ｒ（右）を介して増幅された形で伝送されるなら、
音楽が２つの仮想スピーカから到来するとして知覚され、一方話声はある選択さ
れた方向から到来するとして知覚されることが本システムにより達成可能である
。
【００１６】
本発明は２つの入力及び出力チャネルだけが存在することに適用される限らな
いことは明らかであろう。実際に所望の適宜の数の入力及び出力チャネルが可能
である。かくてモノラル信号Ｓ１（Ｍ＋Ｓ）が入力チャネルを介して音楽処理装
置に供給され、また特定の話声信号が付加的入力チャネルを介して供給されても
よく、一方出力信号は例えば、ビデオ会議の場合にモノラル又はステレオで再生
される。かかる状態は信号Ｓ２（Ｍ＋Ｓ）が２つの別個の入力チャネルを介して
音声信号処理装置に供給される場合に匹敵する。
いことは明らかであろう。実際に所望の適宜の数の入力及び出力チャネルが可能
である。かくてモノラル信号Ｓ１（Ｍ＋Ｓ）が入力チャネルを介して音楽処理装
置に供給され、また特定の話声信号が付加的入力チャネルを介して供給されても
よく、一方出力信号は例えば、ビデオ会議の場合にモノラル又はステレオで再生
される。かかる状態は信号Ｓ２（Ｍ＋Ｓ）が２つの別個の入力チャネルを介して
音声信号処理装置に供給される場合に匹敵する。
【図１】
本発明による音声信号処理装置の機能を表わすブロック系統図である。
─────────────────────────────────────────────────────
フロントページの続き
(72)発明者 トーネン，デケルス ロベルトス テー
イェー
オランダ国，5656 アーアー アインドー
フェン，プロフ・ホルストラーン ６
(72)発明者 ロコフ，ヘラルドゥス セー ペー
オランダ国，5656 アーアー アインドー
フェン，プロフ・ホルストラーン ６
Ｆターム(参考） 5D062 AA11 AA14
5D108 AA08
Claims (5)
- 【請求項１】 1又は複数（ｎ）の異なる入力チャネルに亘る話声及び音楽
信号を供給する信号供給手段と、 話声及び音楽信号を実質的に分離する分離手段と、 音楽信号が１又は複数（ｍ）の異なる出力チャネルで聴取されうる所望の仮想空
間拡がりに応じて音楽信号を変換する第1の変換手段と、 話声信号を変換された音楽信号と結合する結合手段とを備えた音声信号処理装置
。 - 【請求項２】 話声信号が発する方向を認識する信号方向検出手段と、 話声信号が聴取されうる方向の所望の仮想変化に応じて話声信号を変換する第2
の変換手段とを有し、 変換された話声信号及び変換された音楽信号は結合手段で互いに結合されること
を特徴とする、 請求項１記載の音声信号処理装置。 - 【請求項３】 前記第2の変換手段は、話声及び位置信号が位置記録手段を
有するマイクロホンから供給されうる１又は複数の付加的入力チャネルを設けら
れていることを特徴とする請求項２記載の音声信号処理装置。 - 【請求項４】 増幅された話声及び音楽信号を再生する、個々の出力チャネ
ルに対する音響再生手段を有する、請求項１乃至３のうちいずれか１項記載の音
声信号処理装置。 - 【請求項５】 映像スクリーン及び音響再生手段が組み込まれたユニットを
有する、請求項１乃至３記載の音声信号処理装置。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP99204543.5 | 1999-12-24 | ||
| EP99204543 | 1999-12-24 | ||
| PCT/EP2000/012626 WO2001049074A2 (en) | 1999-12-24 | 2000-12-13 | Audio signal processing device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003518891A true JP2003518891A (ja) | 2003-06-10 |
Family
ID=8241099
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001549055A Pending JP2003518891A (ja) | 1999-12-24 | 2000-12-13 | 音声信号処理装置 |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US7054816B2 (ja) |
| EP (1) | EP1208724B1 (ja) |
| JP (1) | JP2003518891A (ja) |
| KR (1) | KR20020010576A (ja) |
| CN (1) | CN1478371A (ja) |
| DE (1) | DE60027170T2 (ja) |
| WO (1) | WO2001049074A2 (ja) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7660424B2 (en) | 2001-02-07 | 2010-02-09 | Dolby Laboratories Licensing Corporation | Audio channel spatial translation |
| KR100952400B1 (ko) * | 2001-10-03 | 2010-04-14 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 원하지 않는 라우드 스피커 신호들을 제거하는 방법 |
| KR100492819B1 (ko) * | 2002-04-17 | 2005-05-31 | 주식회사 아이티매직 | 소음 제거 방법 및 그 시스템 |
| US8208646B2 (en) * | 2006-11-22 | 2012-06-26 | Verizon Patent And Licensing Inc. | Audio filtration for content processing systems and methods |
| US20090060208A1 (en) * | 2007-08-27 | 2009-03-05 | Pan Davis Y | Manipulating Spatial Processing in a Audio System |
| JP6013918B2 (ja) | 2010-02-02 | 2016-10-25 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 空間音声再生 |
| CN106128472A (zh) * | 2016-07-12 | 2016-11-16 | 乐视控股（北京）有限公司 | 演唱者声音的处理方法及装置 |
| CN107146630B (zh) * | 2017-04-27 | 2020-02-14 | 同济大学 | 一种基于stft的双通道语声分离方法 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2714708B2 (ja) * | 1990-04-27 | 1998-02-16 | 日本電信電話株式会社 | 会議通話端末装置 |
| JP3391050B2 (ja) * | 1993-06-30 | 2003-03-31 | 株式会社セガ | 音声仮想定位システム |
| BE1008027A3 (nl) | 1994-01-17 | 1995-12-12 | Philips Electronics Nv | Signaalcombinatieschakeling, signaalbewerkingsschakeling voorzien van de signaalcombinatieschakeling, stereofonische audioweergave-inrichting voorzien de signaalbewerkingsschakeling, alsmede een audio-visuele weergave-inrichting voorzien van de stereofonische audioweergave-inrichting. |
| JPH07222298A (ja) * | 1994-01-27 | 1995-08-18 | Matsushita Electric Ind Co Ltd | サラウンドステレオ |
| JP3560087B2 (ja) * | 1995-09-13 | 2004-09-02 | 株式会社デノン | 音信号処理装置およびサラウンド再生方法 |
| JPH09114479A (ja) * | 1995-10-23 | 1997-05-02 | Matsushita Electric Ind Co Ltd | 音場再生装置 |
| US6198826B1 (en) * | 1997-05-19 | 2001-03-06 | Qsound Labs, Inc. | Qsound surround synthesis from stereo |
| US6928168B2 (en) * | 2001-01-19 | 2005-08-09 | Nokia Corporation | Transparent stereo widening algorithm for loudspeakers |
-
2000
- 2000-12-13 JP JP2001549055A patent/JP2003518891A/ja active Pending
- 2000-12-13 EP EP00990728A patent/EP1208724B1/en not_active Expired - Lifetime
- 2000-12-13 KR KR1020017010816A patent/KR20020010576A/ko active IP Right Grant
- 2000-12-13 CN CNA008041725A patent/CN1478371A/zh active Pending
- 2000-12-13 DE DE60027170T patent/DE60027170T2/de not_active Expired - Fee Related
- 2000-12-13 WO PCT/EP2000/012626 patent/WO2001049074A2/en active IP Right Grant
- 2000-12-20 US US09/741,917 patent/US7054816B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| WO2001049074A3 (en) | 2002-03-21 |
| CN1478371A (zh) | 2004-02-25 |
| US7054816B2 (en) | 2006-05-30 |
| WO2001049074A2 (en) | 2001-07-05 |
| KR20020010576A (ko) | 2002-02-04 |
| EP1208724A2 (en) | 2002-05-29 |
| US20010037194A1 (en) | 2001-11-01 |
| EP1208724B1 (en) | 2006-04-05 |
| DE60027170D1 (de) | 2006-05-18 |
| DE60027170T2 (de) | 2007-03-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4657452B2 (ja) | 擬似立体音響出力をモノラル入力から合成する装置および方法 | |
| JPH03236691A (ja) | テレビジョン受信機用音声回路 | |
| US20090094375A1 (en) | Method And System For Presenting An Event Using An Electronic Device | |
| US20040013271A1 (en) | Method and system for recording and reproduction of binaural sound | |
| JP2645731B2 (ja) | 音像定位再生方式 | |
| US20050244010A1 (en) | Stereophonic sound reproducing system and stereophonic sound reproducing apparatus | |
| JP2003518891A (ja) | 音声信号処理装置 | |
| JP2523367B2 (ja) | 音声再生方式 | |
| JP2007028065A (ja) | サラウンド再生装置 | |
| JP2523366B2 (ja) | 音声再生方式 | |
| KR101526014B1 (ko) | 다채널 서라운드 스피커 시스템 | |
| JPH0638300A (ja) | 音響再生装置 | |
| Robjohns | Surround sound explained: Part 2 | |
| KR20130063906A (ko) | 오디오 시스템 및 그 제어방법 | |
| JPH09252500A (ja) | 音響機器におけるステレオ再生方式 | |
| Farina et al. | Listening tests performed inside a virtual room acoustic simulator | |
| JPH07236199A (ja) | 立体音場形成方法 | |
| JP4430105B2 (ja) | 音響再生装置 | |
| TWI262738B (en) | Expansion method of multi-channel panoramic audio effect | |
| JPH05268700A (ja) | ステレオ聴覚補助装置 | |
| JP3401926B2 (ja) | 音声信号再生装置 | |
| Gerzon | Surround-sound from 2-channel stereo | |
| JPH11113084A (ja) | 立体音響記録機能を有する音響記録装置及びその方法 | |
| JPH07212893A (ja) | 音響再生装置 | |
| AU751831C (en) | Method and system for recording and reproduction of binaural sound |