JPWO2005084077A1 - 音響処理装置 - Google Patents

音響処理装置

Info

Publication number
JPWO2005084077A1
JPWO2005084077A1 JP2006519373A JP2006519373A JPWO2005084077A1 JP WO2005084077 A1 JPWO2005084077 A1 JP WO2005084077A1 JP 2006519373 A JP2006519373 A JP 2006519373A JP 2006519373 A JP2006519373 A JP 2006519373A JP WO2005084077 A1 JPWO2005084077 A1 JP WO2005084077A1
Authority
JP
Japan
Prior art keywords
output
audio signal
channel
signal
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006519373A
Other languages
English (en)
Other versions
JP4504981B2 (ja
Inventor
剛史 藤田
剛史 藤田
僚子 榊原
僚子 榊原
恵理子 神吉
恵理子 神吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Publication of JPWO2005084077A1 publication Critical patent/JPWO2005084077A1/ja
Application granted granted Critical
Publication of JP4504981B2 publication Critical patent/JP4504981B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S5/00Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/005Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo five- or more-channel type, e.g. virtual surround

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現するために、バーチャルサラウンド信号と前方チャンネル用オーディオ信号とを加算器1300で加算する場合には、加算を行う前に音量正規化処理部1200で音量正規化処理を行い、加算しない場合には、音量正規化処理部1200で音量正規化処理を行わずにバーチャルサラウンド信号と前方チャンネル用オーディオ信号とをそれぞれ独立して出力する。

Description

本発明は、受聴者の前方に配置された前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置に関するものである。
DVD(Digital Versatile Disc)やBSデジタル放送などをはじめとするマルチチャンネルオーディオ再生対応の音源が出現したため、2チャンネルのスピーカシステムしか持ち合わせないユーザーにもマルチチャンネル再生を楽しめることができるように、後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に、受聴者に認識される音像位置が受聴者の後方になる音像定位処理(バーチャルサラウンド処理)を施し、前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置が数多く開発されてきている。
そのような音響処理装置としては、例えば図12に示すように、後方チャンネル用オーディオ信号に対し前記バーチャルサラウンド処理を施した信号(バーチャルサラウンド信号)と前方チャンネル用オーディオ信号とを加算して、前方スピーカ用のオーディオPCM信号として出力する音響処理装置4000が知られている(例えば、特許文献1、および特許文献2を参照。)。
音響処理装置4000は、バーチャルサラウンド処理部4100と、音量正規化処理部4200と、加算器4300とから構成される。
バーチャルサラウンド処理部4100は、外部から入力された前方左右再生用の前方チャンネル用オーディオ信号(左右2チャンネル)、および後方左右再生用の後方チャンネル用オーディオ信号(左右2チャンネル)の合計4チャンネルのオーディオPCM信号のうちの後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を施したバーチャルサラウンド信号を出力するようになっている。
音量正規化処理部4200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号に対して、音量レベルが所定のレベル範囲に収まるように処理(音量正規化処理)を行うようになっている。音量正規化処理を行うのは前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのを防ぐためである。
加算器4300は、音量正規化処理部4200によって音量正規化処理が施された前方チャンネル用オーディオ信号とバーチャルサラウンド信号とを加算するようになっている。
このように構成された、音響処理装置4000では、音響処理装置の外部から前記前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号が入力されるとバーチャルサラウンド処理部4100は、前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を施し、バーチャルサラウンド信号を音量正規化処理部4200に出力する。そして、音量正規化処理部4200が前記前方チャンネル用オーディオ信号とバーチャルサラウンド信号とに音量正規化処理を行った後、これらの信号は、加算器4300によって加算され、前方スピーカ用のオーディオPCM信号として出力される。
上記のように、音響処理装置4000では、後方チャンネル用オーディオ信号に対しバーチャルサラウンド処理が施されることによって、前方スピーカのみで擬似的にマルチチャンネル再生が実現される。
また、音響処理装置の外部から入力される前方左右再生用の2チャンネルのオーディオPCM信号(2チャンネルのステレオオーディオ信号)に対し、反射音を擬似的に求める反射音生成処理を施すことによって、後方チャンネル用オーディオ信号を擬似的に生成し、擬似的にマルチチャンネル再生を実現する音響処理装置5000も知られている(例えば、特許文献3を参照。)。
音響処理装置5000は、図13に示すようにバーチャルサラウンド処理部4100と、音量正規化処理部4200と、加算器4300と、反射音処理部5400とから構成される。
反射音処理部5400は、2チャンネルステレオオーディオ信号に対し、反射音を擬似的に求める処理(反射音生成処理)を施し、後方チャンネル用オーディオ信号として出力するようになっている。
このように構成された、音響処理装置5000では、反射音処理部5400によって、前記2チャンネルステレオオーディオ信号に対し、反射音生成処理が行われて擬似的な後方チャンネル用オーディオ信号として出力されると、この後方チャンネル用オーディオ信号は、バーチャルサラウンド処理部4100によって前記バーチャルサラウンド処理が行われる。そして、バーチャルサラウンド処理が行われた信号と、前記チャンネルのステレオオーディオ信号とが音量正規化処理部4200による音量正規化処理を経た後、加算器4300で加算されて出力される。
すなわち、音響処理装置5000では、2チャンネルステレオオーディオ信号に対し、音像拡大処理を施して原信号に加算することで、擬似的に立体音響効果がえられるマルチチャンネル再生が実現される。
特開平6−233394号公報 特開平10−174197号公報 特開平8−116597号公報
しかしながら、近年急速に普及しているDVDなどをターゲットとした音響処理装置(または、映像信号の処理も行う映像音響処理装置)の傾向の1つとして、ハイファイユーザーをターゲットとした高性能化や高音質化が求められているが、バーチャルサラウンド信号と前方チャンネル用オーディオ信号とが加算される場合に、加算時のオーバーフローを避けるため正規化処理が行われることによって、SN比が悪化してしまう場合がある。
また、バーチャルサラウンド処理の有無(ON/OFF)を切り替えできるように構成された音響処理装置では、バーチャルサラウンド処理がONの場合とOFFの場合との音量感を合わせるため、バーチャルサラウンド処理がONの場合のみならず、OFFの場合にも音量正規化処理によって再生音量が下げられて、システム全体としてSN比が悪くなってしまうという問題を有していた。
また、マルチチャンネルを再生できるシステムでありながら、ユーザーの都合で、例えば後方再生用スピーカを受聴者の前面に配置せざるを得ない場合には、後方用スピーカの出力をOFFとして再生せざるを得ず、結果として2チャンネル再生システムの場合と同様、オーバーフローを避けるための正規化処理を行う分SN比が悪くなってしまう。
本発明は、上記の問題に着目してなされたものであり、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能な音響処理装置を提供することを課題とする。
前記の課題を解決するため、請求項1の発明は、
受聴者の後方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になる後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になるように、所定の音像定位処理を行って、音像定位処理済みオーディオ信号を生成する音響処理部を備え、
受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の前方になる前方チャンネル用オーディオ信号と、前記音像定位処理済みオーディオ信号と、をそれぞれ独立して出力することを特徴とする。
また、請求項2の発明は、
請求項1の音響処理装置であって、
さらに、入力された前方チャンネル用オーディオ信号に対し、反射音生成処理を行って、前記後方チャンネル用オーディオ信号を生成する反射音生成処理部を備えたことを特徴とする。
また、請求項3の発明は、
請求項1の音響処理装置であって、
さらに、入力された前方チャンネル用オーディオ信号および入力された後方チャンネル用オーディオ信号のそれぞれの信号に反射音信号を付加して、前記前方チャンネル用オーディオ信号および前記後方チャンネル用オーディオ信号を生成する反射音付加処理部を備えたことを特徴とする。
これらにより、前方チャンネル用オーディオ信号と音像定位処理済みオーディオ信号とが、それぞれ独立して出力されるので、例えば前方チャンネル用信号と音像定位処理済みオーディオ信号とを外部のアナログ回路にて加算処理を行えば、SN比を悪化させずに、バーチャルサラウンド再生が可能になる。
また、請求項4の発明は、
請求項1の音響処理装置であって、さらに、
前記前方チャンネル用オーディオ信号および音像定位処理済みオーディオ信号の音量レベルを所定のレベル範囲に収まるように制御する音量正規化処理部と、
前記音量正規化処理部によって音量レベルが制御された前方チャンネル用オーディオ信号と前記音量正規化処理部によって音量レベルが制御された音像定位処理済みオーディオ信号とを加算した加算オーディオ信号を生成する加算器と、
出力制御情報を示す制御信号に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、および前記加算オーディオ信号を出力する出力動作の何れかの出力動作を選択的に行う切り替え部とを備えことを特徴とする。
これにより、入力された制御信号に応じて、出力動作が切り替えられる。
また、請求項5の発明は、
請求項4の音響処理装置であって、
前記出力制御情報は、出力チャンネル構成を示す出力チャンネル構成情報を含んだものであり、
前記切り替え部は、前記出力チャンネル構成情報に応じて、前記切り替えを行うことを特徴とする。
これにより、出力チャンネル構成に応じて、出力動作が切り替えられる。
また、請求項6の発明は、
請求項5の音響処理装置であって、
さらに、前記出力チャンネル構成情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする。
これにより、出力チャンネル構成に応じて、出力するオーディオ信号のレベルが制御され、より最適な音量制御が可能になる。
また、請求項7の発明は、
請求項4の音響処理装置であって、
前記出力制御情報は、受聴者に認識される音像位置が受聴者の後方になるオーディオ信号を出力するための後方音像用スピーカが、受聴者の前方に配置された状態、後方に配置された状態、および配置されていない状態のうちの何れの配置状態であるかを示す後方スピーカ配置情報を含んだものであり、
前記音響処理部は、前記後方スピーカ配置情報が示す配置状態に応じて、前記音像定位処理済みオーディオ信号の生成の有無が制御されるように構成され、
前記切り替え部は、前記後方スピーカ配置情報に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、前記加算オーディオ信号を出力する出力動作、および入力されたオーディオ信号をそのまま出力する出力動作のうちの何れかの出力動作を選択的に行うように構成されていることを特徴とする。
これにより、出力を行うスピーカの配置に応じて、音像定位処理の有無や出力動作が切り替えられる。
また、請求項8の発明は、
請求項7の音響処理装置であって、
さらに、前記後方スピーカ配置情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする。
これにより、出力を行うスピーカの配置に応じて、出力するオーディオ信号のレベルが制御され、より最適な音量制御が可能になる。
本発明によれば、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能になる。
[図1]図1は、本発明の実施形態1に係る音響処理装置の構成を示すブロック図である。
[図2]図2は、本発明の実施形態1に係る音響処理装置の動作を示すフローチャートである。
[図3]図3は、本発明の実施形態2に係る音響処理装置の構成を示すブロック図である。
[図4]図4は、本発明の実施形態2に係る音響処理装置の動作を示すフローチャートである。
[図5]図5は、本発明の実施形態3に係る音響処理装置の構成を示すブロック図である。
[図6]図6は、本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。
[図7]図7は、本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。
[図8]図8は、本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。
[図9]図9は、本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。
[図10]図10は、本発明の実施形態3に係る音響処理装置の後方スピーカ配置情報に対する各処理動作の有無を示す一覧表である。
[図11]図11は、本発明の実施形態3に係る音響処理装置の動作を示すフローチャートである。
[図12]図12は、従来の音響処理装置の構成を示すブロック図である。
[図13]図13は、従来の音響処理装置の構成を示すブロック図である。
符号の説明
1000 音響処理装置
1100 バーチャルサラウンド処理部
1200 音量正規化処理部
1300 加算器
1400 出力切り替え部
1500 外部インターフェース
1700 自動音量制御部
2000 音響処理装置
2500 外部インターフェース
2600 反射音処理部
2700 自動音量制御部
3000 音響処理装置
3100 バーチャルサラウンド処理部
3200 音量正規化処理部
3400 出力切り替え部
3500 外部インターフェース
3600 反射音処理部
3700 自動音量制御部
4000 音響処理装置
4100 バーチャルサラウンド処理部
4200 音量正規化処理部
4300 加算器
5000 音響処理装置
5400 反射音処理部
以下、本発明の実施形態について図面を参照しながら説明する。
《発明の実施形態1》
図1は、本発明の実施形態1に係る音響処理装置1000の構成を示すブロック図である。音響処理装置1000は、同図に示すようにバーチャルサラウンド処理部1100、音量正規化処理部1200、加算器1300、出力切り替え部1400、および外部インターフェース1500を備えて構成されている。
音響処理装置1000は、具体的には、例えばDSP(Digital Signal Processor)等によって構成され、外部から入力された前方左右再生用の前方チャンネル用オーディオ信号および後方左右再生用の後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号に対して所定の処理を行うことによって、以下の2種類の出力動作を行うようになっている。
1種類目の出力動作は、前記後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に、受聴者に認識される音像位置が受聴者の後方になる音像定位処理(バーチャルサラウンド処理)を施したうえ、前記前方チャンネル用オーディオ信号と加算して前方スピーカ用の2チャンネル分の信号として出力する動作である。出力された信号により、前方スピーカのみで擬似的なマルチチャンネル再生(バーチャルサラウンド再生)を実現することが可能になる。
また、2種類目の出力動作は、前記前方チャンネル用オーディオ信号、および前記バーチャルサラウンド処理が行われた信号(バーチャルサラウンド信号)の合計4チャンネル分の信号を出力する動作である。例えば出力された前方チャンネル用信号と前記バーチャルサラウンド信号とを外部のアナログ回路にて加算処理して前方スピーカから出力したり、ユーザーの都合で後方スピーカを受聴者の前面に配置したような場合にバーチャルサラウンド信号を前面に配置した後方スピーカから出力したりすれば、やはりバーチャルサラウンド再生を実現することが可能になる。
何れの出力動作を行うかは、音響処理装置1000の外部から入力される出力制御情報(後述)に基づいて制御されるようになっている。
この出力制御情報は、本実施形態では、外部へ出力されるオーディオPCM信号のチャンネル構成が2チャンネル分の信号である2チャンネル出力設定であるか、4チャンネル分である4チャンネル出力設定であるかを示す出力チャンネル構成情報である。
バーチャルサラウンド処理部1100は、前記後方チャンネル用オーディオ信号に前記バーチャルサラウンド処理を施し、前記バーチャルサラウンド信号を出力するようになっている。
音量正規化処理部1200は、前記出力チャンネル構成情報が2チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量を6dB下げる音量正規化処理を行って出力し、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、および前記バーチャルサラウンド信号のスルー出力を行うようになっている。2チャンネル出力設定の場合に音量正規化処理を行うのは、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのを防ぐためである。
加算器1300は、音量正規化処理部1200によって音量正規化処理が施された前方チャンネル用オーディオ信号と出力切り替え部1400が出力した前記バーチャルサラウンド信号とを加算して出力するようになっている。
出力切り替え部1400は、前記出力チャンネル構成情報が2チャンネル出力設定の場合には、音量正規化処理部1200が出力したバーチャルサラウンド信号を加算器1300に出力し、4チャンネル出力設定の場合には、音響処理装置1000の外部に後方スピーカ用出力を行うようになっている。
外部インターフェース1500は、外部から入力された前記出力制御情報を音量正規化処理部1200と出力切り替え部1400とに出力するようになっている。
上記のように構成された音響処理装置1000は、図2のフローチャートに示す各ステップの処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。各ステップでは、以下の処理が行われる。
[S101]前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号をバーチャルサラウンド処理部1100に入力する。
[S102]バーチャルサラウンド処理部1100は、前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行い、バーチャルサラウンド信号として音量正規化処理部1200に出力する。
[S103]音量正規化処理部1200は、オーディオ信号の音量正規化の要否を決定するため、外部インターフェース1500が出力した出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、S104の処理に移行し、また、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S105の処理に移行する。
[S104]音量正規化処理部1200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量正規化処理を行う。具体的には、両信号の音量を6dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S105]出力切り替え部1400は、バーチャルサラウンド信号の出力先を決定するために、出力チャンネル構成情報が、2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、バーチャルサラウンド信号を加算器1300に出力してS106の処理に移行し、4チャンネル出力設定の場合には、S107の処理に移行する。
[S106]加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S107の処理に移行する。
[S107]加算器1300の出力を前方スピーカ用として出力し、出力切り替え部1400の出力を後方スピーカ用として出力する。
上記のST101〜S107の処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。
例えば出力チャンネル構成情報が2チャンネル出力設定の場合(出力チャンネル構成が2チャンネル出力)には、バーチャルサラウンド処理部1100が前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行うことによって、バーチャルサラウンド信号が生成される。このバーチャルサラウンド信号は、音量正規化処理部1200で音量が6dB下げられた後、出力切り替え部1400を介して加算器1300に出力され、加算器1300で前記前方チャンネル用オーディオ信号と加算されて、前方スピーカ用出力として出力される。加算処理が行われる場合、音量正規化処理部1200において、各々のオーディオ信号に正規化処理が施されているので、加算処理によるオーバーフローは発生しない。
また、出力チャンネル構成情報が4チャンネル出力設定の場合(出力チャンネル構成が4チャンネル出力)には、2チャンネル出力設定の場合と同様にして前記バーチャルサラウンド信号が生成された後、音量正規化処理部1200による音量正規化処理、および加算器1300での加算処理は行われずに、前方チャンネル用オーディオ信号は、前方スピーカ用出力として出力され、バーチャルサラウンド信号は、後方スピーカ用出力として出力される。ここでは、音量正規化処理部1200において各々のオーディオ信号に正規化処理が施されていないが、加算処理が行われないため、当然ながらオーバーフローは発生しない。
上記のように、本実施形態によれば、出力切り替え部1400を備えたことで、バーチャルサラウンド信号と前方チャンネル用オーディオ信号とを加算せず独立して出力することが可能になるので、例えば前方チャンネル用信号とバーチャルサラウンド信号とを外部のアナログ回路にて加算処理を行えば、再生システム全体としてSN比を悪化させずに、2チャンネルのスピーカシステムでバーチャルサラウンド再生が可能になる。
しかも、前記出力チャンネル構成情報が入力されることによって、外部の出力チャンネル構成に応じて、自動的に音量正規化処理の有無、および前記バーチャルサラウンド信号と前方チャンネル用オーディオ信号との加算処理の有無が切り替えられるので、本装置が実装される再生システムの形態に応じた最適音量設定が行われ、再生システム全体として自動的にSN比を最適な状態にすることができるようになる。
《発明の実施形態2》
入力されるオーディオ信号は、前方再生用左右2チャンネル(ステレオ)のオーディオPCM信号であるが、実施形態1の装置と同様に、前記2チャンネル出力設定、および4チャンネル出力設定の2種類の出力設定を行うことができる装置の例を説明する。
図3は、本発明の実施形態2に係る音響処理装置2000の構成を示すブロック図である。なお、以下の実施形態において前記実施形態1等と同様の機能を有する構成要素については、同一の符号を付して説明を省略する。
同図に示すように、音響処理装置2000は、実施形態1の装置の外部インターフェース1500に代えて外部インターフェース2500を備え、さらに反射音処理部2600と自動音量制御部2700とを追加して構成され、前記出力制御情報に基づいて、前記2チャンネル出力設定、および4チャンネル出力設定のいずれかが選択されるようになっている。本装置も具体的には、例えばDSP等によって構成される。
外部インターフェース2500は、音量正規化処理部1200、出力切り替え部1400、および自動音量制御部2700に前記出力チャンネル構成情報を出力するようになっている。
反射音処理部2600は、外部より入力されたステレオのオーディオPCM信号(前方チャンネル用オーディオ信号)に対して反射音を擬似的に求めて付加する処理(反射音生成処理)を施すことによって、擬似的に後方チャンネル用信号を生成するようになっている。
自動音量制御部2700は、前記出力チャンネル構成情報が2チャンネル出力設定の場合にのみ、入力された信号の音量レベルに応じて、音量制御を行うようになっている。例えば、入力された信号の音量レベルが過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行う。複数のオーディオ信号が加算される場合には、オーバーフローが発生しやすくなるが、自動音量制御部2700で自動音量制御が行われることによって、オーバーフロー状態を緩和することが可能となる。
なお、実施形態1の装置では音量正規化処理部1200は、入力された信号のレベルを6dB下げる例を説明したが、本実施形態では、入力された信号のレベルを3dB下げるようになっている。本実施形態で音量正規化処理部1200における信号の減衰量を3dBとしたのは、本装置が自動音量制御部2700を備えているため、ある程度のオーバーフローは回避することが可能であるためである。
上記のように構成された音響処理装置2000は、図4のフローチャートに示す各ステップの処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。各ステップで行われる処理は、以下の通りである。
[S201]オーディオPCM信号をバーチャルサラウンド処理部1100、および反射音処理部2600に入力する。
[S202]反射音処理部2600は、前方チャンネル用オーディオ信号に対し、前記反射音処理を行うことによって、擬似的に後方チャンネル用オーディオ信号を生成する。
[S203]バーチャルサラウンド処理部1100は、擬似的に生成された後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行い、バーチャルサラウンド信号として音量正規化処理部1200に出力する。
[S204]音量正規化処理部1200は、オーディオ信号の音量正規化の要否を決定するため、外部インターフェース2500が出力した出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、S205の処理に移行し、また、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S206の処理に移行する。
[S205]音量正規化処理部1200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量正規化処理を行う。具体的には、両信号の音量を3dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S206]出力切り替え部1400は、バーチャルサラウンド信号の出力先を決定するために、出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、バーチャルサラウンド信号を加算器1300に出力してS106の処理に移行し、4チャンネル出力設定S107の処理に移行する。
[S207]加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S107の処理に移行する。
[S208]自動音量制御処理の要否を決定するため、自動音量制御部2700は、前記出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、音量を調整するためにS209の処理に移行し、また、4チャンネル出力設定の場合(すなわち、音量調整が不要の場合)には、S210の処理に移行する。
[S209]自動音量制御部2700は、音量レベルの平滑処理や圧縮処理を行うことによって、前方チャンネル用オーディオ信号とバーチャルサラウンド信号の音量調整を行う。
[S210]自動音量制御部2700の出力を前方スピーカ用、および後方スピーカ用として出力する。
上記のST201〜S210の処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。
例えば前記出力チャンネル構成情報が2チャンネル出力設定の場合には、反射音処理部2600で反射音処理が行われて、擬似的に後方チャンネル用オーディオ信号を生成される。この後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理部1100が前記バーチャルサラウンド処理を行うことによって、バーチャルサラウンド信号が生成される。このバーチャルサラウンド信号は、音量正規化処理部1200で音量が3dB下げられた後、出力切り替え部1400を介して加算器1300に出力され、加算器1300で前記前方チャンネル用オーディオ信号と加算されて、前方スピーカ用出力として出力される。加算処理が行われる場合、音量正規化処理部1200において、後方チャンネル用オーディオ信号とバーチャルサラウンド信号とは正規化処理が施されているので、加算処理によるオーバーフローは発生しない。自動音量制御部2700は、加算器1300の出力する信号の音量が過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行うことでオーバーフロー状態を緩和する。
そして、自動音量制御部1700によって音量制御処理が実施された信号は、前方スピーカ出力側へ出力される。
また、前記出力チャンネル構成情報が4チャンネル出力設定の場合には、2チャンネル出力設定の場合と同様にして前記バーチャルサラウンド信号が生成された後、音量正規化処理部1200での音量正規化処理、加算器1300での加算処理、および自動音量制御部2700での音量制御は行われずに、前方チャンネル用オーディオ信号は前方スピーカ用出力として出力され、バーチャルサラウンド信号は後方スピーカ用出力として出力される。ここでは、音量正規化処理部1200、および自動音量制御部2700において各々のオーディオ信号に音量正規化処理や自動音量制御処理が施されていないが、加算処理が行われないため、当然ながらオーバーフローは発生しない。
上記のように、本実施形態によれば、前方チャンネル用オーディオ信号から擬似的に後方チャンネル用信号を生成するので、入力される信号が前方チャンネル用オーディオ信号のみであっても、実施形態1の装置と同様に、再生システム全体としてSN比を最適な状態に維持しつつ、本装置が実装される再生システムの出力チャンネル構成に応じたオーディオ信号を出力できる。
しかも、前記出力チャンネル構成情報に応じて、音量レベルの調整を行う自動音量制御部を備えているので、出力チャンネル構成に応じて音量制御処理を切り替えることが可能になり、より最適な音量制御処理が実現できる。
《発明の実施形態3》
図5は、本発明の実施形態3に係る音響処理装置3000の構成を示すブロック図である。音響処理装置3000は、加算器1300、自動音量制御部2700、バーチャルサラウンド処理部3100、音量正規化処理部3200、出力切り替え部3400、外部インターフェース3500、反射音処理部3600、および自動音量制御部3700を備えて構成され、後方スピーカの配置に応じたオーディオPCM信号が出力されるようになっている。
本実施形態では、出力制御情報は、音響処理装置3000を実装した再生システムにおける後方スピーカの配置を表す情報(後方スピーカ配置情報)である。後方スピーカ配置情報は、後方スピーカが受聴者の後方に配置される「後方配置」、前方に配置される「前方配置」、および後方スピーカが配置されない「なし」のいずれかを示す情報である。
「後方配置」とは、図6に示すように、後方スピーカを通常のマルチチャンネルシステム通り再生システムの受聴者の後方に配置される場合である。
また、「前方配置」とは、図7に示すように、後方スピーカを前方に配置する場合、または図8に示すように、音響処理装置3000の外部のアナログ回路上で後方スピーカ出力と前方スピーカ出力を加算する場合である。
また、「なし」とは、図9に示すように、音響処理装置3000内部でバーチャルサラウンド信号と前方チャンネル用オーディオ信号とを加算して、前方スピーカ用の出力を行う場合を示す。
バーチャルサラウンド処理部3100は、外部インターフェース3500から前記後方スピーカ配置情報が入力され、前記後方スピーカ配置情報が「前方配置」、および「なし」のうちのいずれかの場合には、前記後方チャンネル用オーディオ信号に前記バーチャルサラウンド処理を施してバーチャルサラウンド信号を出力し、「後方配置」の場合は、バーチャルサラウンド処理を行わずにスルー出力を行うようになっている。
外部インターフェース3500は、バーチャルサラウンド処理部3100、音量正規化処理部1200、出力切り替え部1400、および自動音量制御部2700に前記後方スピー力配置情報を出力するようになっている。
音量正規化処理部3200は、外部インターフェース3500が出力した後方スピーカ配置情報が「なし」の場合に、前方チャンネル用オーディオ信号、およびバーチャルサラウンド処理部3100が生成するバーチャルサラウンド信号のレベルを3dB下げるようになっている。本実施形態で音量正規化処理部3200における信号の減衰量を実施形態1の装置のように6dBではなく3dBとしたのは、本装置が自動音量制御部2700を備えているため、ある程度のオーバーフローは回避することが可能であるためである。
出力切り替え部3400は、外部インターフェース3500が出力した後方スピーカ配置情報が、「なし」の場合にのみバーチャルサラウンド信号を加算器1300に出力し、「前方配置」、および「後方配置」の場合は、バーチャルサラウンド信号を後方スピーカ用出力側に出力するようになっている。
反射音処理部3600は、外部から前方左右再生用の前方チャンネル用オーディオ信号、および後方左右再生用の後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号が入力され、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対して前記反射音生成処理を施すようになっている。本実施形態では、全チャンネルのオーディオ信号に対して、反射音を付加することが可能になる。また、例えば後方チャンネル用オーディオ信号が入力されない場合にも、前方チャンネル用オーディオ信号に対して前記反射音生成処理を施すことによって、擬似的に後方チャンネル用信号を生成することが可能になる。
また、反射音処理部3600では、入力時に既に存在しているチャンネルに反射音を付加する場合には、予めの音量正規化処理を行うようになっている。
自動音量制御部3700は、後方スピーカ配置情報に応じて、入力された信号の音量レベル制御(例えば平滑処理や圧縮処理)を行うようになっている。具体的には、外部インターフェース3500が出力した後方スピーカ配置情報が、「なし」の場合にのみ、入力された信号の音量レベルに応じて音量制御を行い、後方スピーカ配置情報が「前方配置」および「後方配置」の場合には、スルー出力を行うようになっている。これにより、例えば、入力された信号の音量レベルが過大レベルの場合に、音量レベルの平滑処理や圧縮処理を行うことによって、オーバーフロー状態を緩和することが可能となる。
図10は、各後方スピーカ配置情報ごとのバーチャルサラウンド処理部3100、音量正規化処理部3200、出力切り替え部3400、および自動音量制御部3700の動作をまとめたものである。
上記のように構成された音響処理装置3000は、図11のフローチャートに示す各ステップの処理が行われることによって、後方スピーカが受聴者の後方に配置される場合、前方に配置される場合、および後方スピーカが配置されない場合のそれぞれの場合に応じた出力動作が行われる。各ステップで行われる処理は、以下の通りである。
[S301]オーディオPCM信号を反射音処理部3600に入力する。
[S302]反射音処理部3600は、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対し、前記反射音処理を行うことによって、反射音を付加する。
[S303]バーチャルサラウンド処理部3100は、外部インターフェース3500が出力した後方スピーカ配置情報を解析し、後方スピーカ配置情報が「前方配置」、または「なし」の場合には、前記バーチャルサラウンド処理を行うためS304の処理に移行し、後方スピーカ配置情報が「後方配置」の場合には、後方チャンネル用オーディオ信号のスルー出力を行い、S305の処理に移行する。
[S304]バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行って、バーチャルサラウンド信号を音量正規化処理部3200に出力する。
[S305]音量正規化処理部3200は、外部インターフェース3500が出力した後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、音量正規化を行うためS306の処理に移行し、「前方配置」、または後方配置」の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S307の処理に移行する。
[S306]反射音処理部3600は、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対し、音量正規化処理を行う。具体的には、両信号の音量を3dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S307]出力切り替え部3400は、バーチャルサラウンド信号の出力先を決定するために、後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、バーチャルサラウンド信号を加算器1300に出力してS308の処理に移行し、「前方配置」、または「後方配置」の場合には、後方チャンネル用オーディオ信号のスルー出力を行い、S309の処理に移行する。
[S308]加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S309の処理に移行する。
[S309]自動音量制御処理の要否を決定するため、自動音量制御部3700は、後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、音量を調整するためにS310の処理に移行し、また、「前方配置」、または「後方配置」の場合(すなわち、音量調整が不要の場合)には、S311の処理に移行する。
[S310]自動音量制御部3700は、音量レベルの平滑処理や圧縮処理を行うことによって、前方チャンネル用オーディオ信号とバーチャルサラウンド信号の音量調整を行う。
[S311]自動音量制御部3700の出力を前方スピーカ用、および後方スピーカ用として出力する。
上記のS301〜S311の処理が行われることによって、後方スピーカが受聴者の後方に配置される場合、前方に配置される場合、および後方スピーカが配置されない場合のそれぞれの場合に応じた出力動作が行われる。
例えば図6に示すように後方スピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「後方配置」が入力されると、反射音処理部3600は、入力された4チャンネルのオーディオPCM信号に対し、音量正規化処理を行うとともに、反射音を付加する。バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理を実行せずスルー出力を行う。
音量正規化処理部3200は、反射音処理部3600が出力した前方チャンネル用オーディオ信号、およびバーチャルサラウンド処理部3100が出力した後方チャンネル用オーディオ信号に対し、音量正規化処理を実行せずスルー出力を行う。
出力切り替え部3400は、音量正規化処理部3200から入力された後方チャンネル用オーディオ信号を自動音量制御部3700に出力するので、加算器1300での加算は行われず、前方チャンネル用オーディオ信号は、独立して自動音量制御部3700に入力される。そして、自動音量制御部3700においてもスルー出力が行われ、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号は、前方スピーカ用、および後方スピーカ用としてそれぞれ出力される。
上記のように、後方スピーカ配置情報として「後方配置」が入力されると、入力された4チャンネルのオーディオPCM信号は、音量正規化処理部3200の音量正規化処理、および自動音量制御部3700の自動音量制御処理が施されることなく外部へ出力されるので、例えば図6のように構成されている再生システムでは、SN比を悪化させることなくサラウンド再生を実現することが可能になる。
また、例えば図7、または図8に示すようにスピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「前方配置」が入力されると、バーチャルサラウンド処理部3100が「後方配置」の場合とは異なる動作を行う。すなわち、バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対して前記バーチャルサラウンド処理を実行し、バーチャルサラウンド信号を生成する。
上記のように、音量正規化処理部3200の音量正規化処理、および自動音量制御部3700の自動音量制御処理が施されないで前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号が外部へ出力されるので、例えば図7のように構成された再生システムでは、前方スピーカからは、前方チャンネル用オーディオ信号が出力され、受聴者の前方に配置された後方スピーカからは、バーチャルサラウンド信号が出力されるので、SN比を悪化させることなくバーチャルサラウンド再生を実現することが可能になる。また、例えば図8のように構成された再生システムでは、前方スピーカ用出力と前方スピーカ用出力とを外部のアナログ回路にて加算処理を行えば、やはりバーチャルサラウンド再生を実現することが可能になる。
また、例えば図9で示されるようにスピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「なし」が入力されると、反射音処理部3600は、入力された4チャンネルのオーディオPCM信号に対し、音量正規化処理を行うとともに、反射音を付加する。バーチャルサラウンド処理部3100では、反射音処理部3600で生成された後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理を実行してバーチャルサラウンド信号を生成する。
音量正規化処理部3200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号に対し音量正規化処理を行う。具体的には、各々の入力信号の音量を3dB下げる処理を行う。
出力切り替え部3400は、音量正規化処理部3200から入力されたバーチャルサラウンド信号を加算器1300に出力するので、加算器1300では、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算が行われ、自動音量制御部3700に入力される。そして、自動音量制御部3700は、加算器1300の出力に対し、信号の音量レベルに応じた音量制御処理を行い、前方スピーカ用に出力する。自動音量制御部3700における音量制御は、実施形態2の装置と同様、例えば入力信号の音量レベルが過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行うことでオーバーフロー状態を緩和する働きがある。
このように、音量正規化処理部3200の音量正規化処理が行われた後に加算処理が行われ、さらに自動音量制御部3700で自動音量制御処理が施された後に外部へ出力されるので、加算処理や外部出力の際のオーバーフローは発生せず、例えば図9のように構成された再生システムでバーチャルサラウンド再生を実現することが可能になる。
上記のように、本実施形態によれば、出力切り替え部3400を備えたことで、バーチャルサラウンド処理の有無(ON/OFF)に係わらずバーチャルサラウンド信号と前方再生用の2チャンネル信号とを加算せず独立に出力することが可能になるので、バーチャルサラウンド処理がONの場合とOFFの場合との音量感を合わせるために、OFFの場合に再生音量を下げる必要がなくなり、再生システム全体としてSN比を維持することが可能となる。
また、前記後方スピーカ配置情報が入力されることによって、外部の出力チャンネル構成に応じて、自動的に音量正規化処理部での音量正規化処理の有無、自動音量制御部での音量レベルの調整の有無、および前記バーチャルサラウンド信号と前方チャンネル用オーディオ信号との加算処理の有無が切り替えられるので、本装置が実装される再生システムの形態に応じた最適音量設定が行われ、システム全体として自動的にSN比を最適な状態にすることができるようになる。
しかも、本実施形態では、前記出力チャンネル構成情報が入力されることによって、後方再生用スピーカの配置や出力方法に応じて、バーチャルサラウンド処理の有無の制御を行うことができる。
なお、実施形態3の装置では、前記後方スピーカ配置情報は、例えば本実施形態の音響処理装置を搭載した再生システムを構築する場合に、音響処理装置とのインターフェースとして後方のスピーカに位置情報の受け渡し機能を追加し、バーチャルサラウンド処理の有無、出力チャンネル構成、音量レベル制御等の処理を自動的に行わせるようにしてもよい。これにより、最適な状態での再生を自動的に実現することが可能になる。
また、実施形態1、および実施形態3の装置では、説明を容易とするため、外部から入力される信号が前方2チャンネルと後方2チャンネルとの合計4チャンネルのオーディオPCM信号である場合の例を説明したが、前方中央再生用(センター)チャンネルやサブウーハーなどのチャンネルを含む場合や、後方再生用チャンネルがモノラルの場合に適用してもよい。
また、実施形態3の装置における、自動音量制御部の出力チャンネル構成情報に基づいた処理は、音量制御の有無(ON/OFF)が切り替えられる例を説明したが、反射音処理部や音量正規化処理部の設定に応じて音量制御処理の効果を可変にすることも可能である。
また、実施形態3の装置でも、外部から入力されるオーディオ信号が前方再生用左右2チャンネル(ステレオ)のオーディオPCM信号の場合に、反射音処理部3600で擬似的に後方チャンネル用オーディオ信号を生成し、これに対して前記バーチャルサラウンド処理を行うようにしてもよい。
本発明にかかる音響処理装置は、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能になるという効果を有し、受聴者の前方に配置された前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置等として有用である。
本発明は、受聴者の前方に配置された前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置に関するものである。
DVD(Digital Versatile Disc)やBSデジタル放送などをはじめとするマルチチャンネルオーディオ再生対応の音源が出現したため、2チャンネルのスピーカシステムしか持ち合わせないユーザーにもマルチチャンネル再生を楽しめることができるように、後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に、受聴者に認識される音像位置が受聴者の後方になる音像定位処理(バーチャルサラウンド処理)を施し、前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置が数多く開発されてきている。
そのような音響処理装置としては、例えば図12に示すように、後方チャンネル用オーディオ信号に対し前記バーチャルサラウンド処理を施した信号(バーチャルサラウンド信号)と前方チャンネル用オーディオ信号とを加算して、前方スピーカ用のオーディオPCM信号として出力する音響処理装置4000が知られている(例えば、特許文献1、および特許文献2を参照。)。
音響処理装置4000は、バーチャルサラウンド処理部4100と、音量正規化処理部4200と、加算器4300とから構成される。
バーチャルサラウンド処理部4100は、外部から入力された前方左右再生用の前方チャンネル用オーディオ信号(左右2チャンネル)、および後方左右再生用の後方チャンネル用オーディオ信号(左右2チャンネル)の合計4チャンネルのオーディオPCM信号のうちの後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を施したバーチャルサラウンド信号を出力するようになっている。
音量正規化処理部4200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号に対して、音量レベルが所定のレベル範囲に収まるように処理(音量正規化処理)を行うようになっている。音量正規化処理を行うのは前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのを防ぐためである。
加算器4300は、音量正規化処理部4200によって音量正規化処理が施された前方チャンネル用オーディオ信号とバーチャルサラウンド信号とを加算するようになっている。
このように構成された、音響処理装置4000では、音響処理装置の外部から前記前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号が入力されるとバーチャルサラウンド処理部4100は、前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を施し、バーチャルサラウンド信号を音量正規化処理部4200に出力する。そして、音量正規化処理部4200が前記前方チャンネル用オーディオ信号とバーチャルサラウンド信号とに音量正規化処理を行った後、これらの信号は、加算器4300によって加算され、前方スピーカ用のオーディオPCM信号として出力される。
上記のように、音響処理装置4000では、後方チャンネル用オーディオ信号に対しバーチャルサラウンド処理が施されることによって、前方スピーカのみで擬似的にマルチチャンネル再生が実現される。
また、音響処理装置の外部から入力される前方左右再生用の2チャンネルのオーディオPCM信号(2チャンネルのステレオオーディオ信号)に対し、反射音を擬似的に求める反射音生成処理を施すことによって、後方チャンネル用オーディオ信号を擬似的に生成し、擬似的にマルチチャンネル再生を実現する音響処理装置5000も知られている(例えば、特許文献3を参照。)。
音響処理装置5000は、図13に示すようにバーチャルサラウンド処理部4100と、音量正規化処理部4200と、加算器4300と、反射音処理部5400とから構成される。
反射音処理部5400は、2チャンネルステレオオーディオ信号に対し、反射音を擬似的に求める処理(反射音生成処理)を施し、後方チャンネル用オーディオ信号として出力するようになっている。
このように構成された、音響処理装置5000では、反射音処理部5400によって、前記2チャンネルステレオオーディオ信号に対し、反射音生成処理が行われて擬似的な後方チャンネル用オーディオ信号として出力されると、この後方チャンネル用オーディオ信号は、バーチャルサラウンド処理部4100によって前記バーチャルサラウンド処理が行われる。そして、バーチャルサラウンド処理が行われた信号と、前記チャンネルのステレオオーディオ信号とが音量正規化処理部4200による音量正規化処理を経た後、加算器4300で加算されて出力される。
すなわち、音響処理装置5000では、2チャンネルステレオオーディオ信号に対し、音像拡大処理を施して原信号に加算することで、擬似的に立体音響効果がえられるマルチチャンネル再生が実現される。
特開平6−233394号公報 特開平10−174197号公報 特開平8−116597号公報
しかしながら、近年急速に普及しているDVDなどをターゲットとした音響処理装置(または、映像信号の処理も行う映像音響処理装置)の傾向の1つとして、ハイファイユーザーをターゲットとした高性能化や高音質化が求められているが、バーチャルサラウンド信号と前方チャンネル用オーディオ信号とが加算される場合に、加算時のオーバーフローを避けるため正規化処理が行われることによって、SN比が悪化してしまう場合がある。
また、バーチャルサラウンド処理の有無(ON/OFF)を切り替えできるように構成された音響処理装置では、バーチャルサラウンド処理がONの場合とOFFの場合との音量感を合わせるため、バーチャルサラウンド処理がONの場合のみならず、OFFの場合にも音量正規化処理によって再生音量が下げられて、システム全体としてSN比が悪くなってしまうという問題を有していた。
また、マルチチャンネルを再生できるシステムでありながら、ユーザーの都合で、例えば後方再生用スピーカを受聴者の前面に配置せざるを得ない場合には、後方用スピーカの出力をOFFとして再生せざるを得ず、結果として2チャンネル再生システムの場合と同様、オーバーフローを避けるための正規化処理を行う分SN比が悪くなってしまう。
本発明は、上記の問題に着目してなされたものであり、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能な音響処理装置を提供することを課題とする。
前記の課題を解決するため、請求項1の発明は、
受聴者の後方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になる後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になるように、所定の音像定位処理を行って、音像定位処理済みオーディオ信号を生成する音響処理部を備え、
受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の前方になる前方チャンネル用オーディオ信号と、前記音像定位処理済みオーディオ信号と、をそれぞれ独立して出力することを特徴とする。
また、請求項2の発明は、
請求項1の音響処理装置であって、
さらに、入力された前方チャンネル用オーディオ信号に対し、反射音生成処理を行って、前記後方チャンネル用オーディオ信号を生成する反射音生成処理部を備えたことを特徴とする。
また、請求項3の発明は、
請求項1の音響処理装置であって、
さらに、入力された前方チャンネル用オーディオ信号および入力された後方チャンネル用オーディオ信号のそれぞれの信号に反射音信号を付加して、前記前方チャンネル用オーディオ信号および前記後方チャンネル用オーディオ信号を生成する反射音付加処理部を備えたことを特徴とする。
これらにより、前方チャンネル用オーディオ信号と音像定位処理済みオーディオ信号とが、それぞれ独立して出力されるので、例えば前方チャンネル用信号と音像定位処理済みオーディオ信号とを外部のアナログ回路にて加算処理を行えば、SN比を悪化させずに、バーチャルサラウンド再生が可能になる。
また、請求項4の発明は、
請求項1の音響処理装置であって、さらに、
前記前方チャンネル用オーディオ信号および音像定位処理済みオーディオ信号の音量レベルを所定のレベル範囲に収まるように制御する音量正規化処理部と、
前記音量正規化処理部によって音量レベルが制御された前方チャンネル用オーディオ信号と前記音量正規化処理部によって音量レベルが制御された音像定位処理済みオーディオ信号とを加算した加算オーディオ信号を生成する加算器と、
出力制御情報を示す制御信号に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、および前記加算オーディオ信号を出力する出力動作の何れかの出力動作を選択的に行う切り替え部とを備えことを特徴とする。
これにより、入力された制御信号に応じて、出力動作が切り替えられる。
また、請求項5の発明は、
請求項4の音響処理装置であって、
前記出力制御情報は、出力チャンネル構成を示す出力チャンネル構成情報を含んだものであり、
前記切り替え部は、前記出力チャンネル構成情報に応じて、前記切り替えを行うことを特徴とする。
これにより、出力チャンネル構成に応じて、出力動作が切り替えられる。
また、請求項6の発明は、
請求項5の音響処理装置であって、
さらに、前記出力チャンネル構成情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする。
これにより、出力チャンネル構成に応じて、出力するオーディオ信号のレベルが制御され、より最適な音量制御が可能になる。
また、請求項7の発明は、
請求項4の音響処理装置であって、
前記出力制御情報は、受聴者に認識される音像位置が受聴者の後方になるオーディオ信号を出力するための後方音像用スピーカが、受聴者の前方に配置された状態、後方に配置された状態、および配置されていない状態のうちの何れの配置状態であるかを示す後方スピーカ配置情報を含んだものであり、
前記音響処理部は、前記後方スピーカ配置情報が示す配置状態に応じて、前記音像定位処理済みオーディオ信号の生成の有無が制御されるように構成され、
前記切り替え部は、前記後方スピーカ配置情報に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、前記加算オーディオ信号を出力する出力動作、および入力されたオーディオ信号をそのまま出力する出力動作のうちの何れかの出力動作を選択的に行うように構成されていることを特徴とする。
これにより、出力を行うスピーカの配置に応じて、音像定位処理の有無や出力動作が切り替えられる。
また、請求項8の発明は、
請求項7の音響処理装置であって、
さらに、前記後方スピーカ配置情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする。
これにより、出力を行うスピーカの配置に応じて、出力するオーディオ信号のレベルが制御され、より最適な音量制御が可能になる。
本発明によれば、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能になる。
以下、本発明の実施形態について図面を参照しながら説明する。
《発明の実施形態1》
図1は、本発明の実施形態1に係る音響処理装置1000の構成を示すブロック図である。音響処理装置1000は、同図に示すようにバーチャルサラウンド処理部1100、音量正規化処理部1200、加算器1300、出力切り替え部1400、および外部インターフェース1500を備えて構成されている。
音響処理装置1000は、具体的には、例えばDSP(Digital Signal Processor)等によって構成され、外部から入力された前方左右再生用の前方チャンネル用オーディオ信号および後方左右再生用の後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号に対して所定の処理を行うことによって、以下の2種類の出力動作を行うようになっている。
1種類目の出力動作は、前記後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に、受聴者に認識される音像位置が受聴者の後方になる音像定位処理(バーチャルサラウンド処理)を施したうえ、前記前方チャンネル用オーディオ信号と加算して前方スピーカ用の2チャンネル分の信号として出力する動作である。出力された信号により、前方スピーカのみで擬似的なマルチチャンネル再生(バーチャルサラウンド再生)を実現することが可能になる。
また、2種類目の出力動作は、前記前方チャンネル用オーディオ信号、および前記バーチャルサラウンド処理が行われた信号(バーチャルサラウンド信号)の合計4チャンネル分の信号を出力する動作である。例えば出力された前方チャンネル用信号と前記バーチャルサラウンド信号とを外部のアナログ回路にて加算処理して前方スピーカから出力したり、ユーザーの都合で後方スピーカを受聴者の前面に配置したような場合にバーチャルサラウンド信号を前面に配置した後方スピーカから出力したりすれば、やはりバーチャルサラウンド再生を実現することが可能になる。
何れの出力動作を行うかは、音響処理装置1000の外部から入力される出力制御情報(後述)に基づいて制御されるようになっている。
この出力制御情報は、本実施形態では、外部へ出力されるオーディオPCM信号のチャンネル構成が2チャンネル分の信号である2チャンネル出力設定であるか、4チャンネル分である4チャンネル出力設定であるかを示す出力チャンネル構成情報である。
バーチャルサラウンド処理部1100は、前記後方チャンネル用オーディオ信号に前記バーチャルサラウンド処理を施し、前記バーチャルサラウンド信号を出力するようになっている。
音量正規化処理部1200は、前記出力チャンネル構成情報が2チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量を6dB下げる音量正規化処理を行って出力し、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、および前記バーチャルサラウンド信号のスルー出力を行うようになっている。2チャンネル出力設定の場合に音量正規化処理を行うのは、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのを防ぐためである。
加算器1300は、音量正規化処理部1200によって音量正規化処理が施された前方チャンネル用オーディオ信号と出力切り替え部1400が出力した前記バーチャルサラウンド信号とを加算して出力するようになっている。
出力切り替え部1400は、前記出力チャンネル構成情報が2チャンネル出力設定の場合には、音量正規化処理部1200が出力したバーチャルサラウンド信号を加算器1300に出力し、4チャンネル出力設定の場合には、音響処理装置1000の外部に後方スピーカ用出力を行うようになっている。
外部インターフェース1500は、外部から入力された前記出力制御情報を音量正規化処理部1200と出力切り替え部1400とに出力するようになっている。
上記のように構成された音響処理装置1000は、図2のフローチャートに示す各ステップの処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。各ステップでは、以下の処理が行われる。
[S101] 前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号をバーチャルサラウンド処理部1100に入力する。
[S102] バーチャルサラウンド処理部1100は、前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行い、バーチャルサラウンド信号として音量正規化処理部1200に出力する。
[S103] 音量正規化処理部1200は、オーディオ信号の音量正規化の要否を決定するため、外部インターフェース1500が出力した出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、S104の処理に移行し、また、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S105の処理に移行する。
[S104] 音量正規化処理部1200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量正規化処理を行う。具体的には、両信号の音量を6dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S105] 出力切り替え部1400は、バーチャルサラウンド信号の出力先を決定するために、出力チャンネル構成情報が、2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、バーチャルサラウンド信号を加算器1300に出力してS106の処理に移行し、4チャンネル出力設定の場合には、S107の処理に移行する。
[S106] 加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S107の処理に移行する。
[S107] 加算器1300の出力を前方スピーカ用として出力し、出力切り替え部1400の出力を後方スピーカ用として出力する。
上記のST101〜S107の処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。
例えば出力チャンネル構成情報が2チャンネル出力設定の場合(出力チャンネル構成が2チャンネル出力)には、バーチャルサラウンド処理部1100が前記後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行うことによって、バーチャルサラウンド信号が生成される。このバーチャルサラウンド信号は、音量正規化処理部1200で音量が6dB下げられた後、出力切り替え部1400を介して加算器1300に出力され、加算器1300で前記前方チャンネル用オーディオ信号と加算されて、前方スピーカ用出力として出力される。加算処理が行われる場合、音量正規化処理部1200において、各々のオーディオ信号に正規化処理が施されているので、加算処理によるオーバーフローは発生しない。
また、出力チャンネル構成情報が4チャンネル出力設定の場合(出力チャンネル構成が4チャンネル出力)には、2チャンネル出力設定の場合と同様にして前記バーチャルサラウンド信号が生成された後、音量正規化処理部1200による音量正規化処理、および加算器1300での加算処理は行われずに、前方チャンネル用オーディオ信号は、前方スピーカ用出力として出力され、バーチャルサラウンド信号は、後方スピーカ用出力として出力される。ここでは、音量正規化処理部1200において各々のオーディオ信号に正規化処理が施されていないが、加算処理が行われないため、当然ながらオーバーフローは発生しない。
上記のように、本実施形態によれば、出力切り替え部1400を備えたことで、バーチャルサラウンド信号と前方チャンネル用オーディオ信号とを加算せず独立して出力することが可能になるので、例えば前方チャンネル用信号とバーチャルサラウンド信号とを外部のアナログ回路にて加算処理を行えば、再生システム全体としてSN比を悪化させずに、2チャンネルのスピーカシステムでバーチャルサラウンド再生が可能になる。
しかも、前記出力チャンネル構成情報が入力されることによって、外部の出力チャンネル構成に応じて、自動的に音量正規化処理の有無、および前記バーチャルサラウンド信号と前方チャンネル用オーディオ信号との加算処理の有無が切り替えられるので、本装置が実装される再生システムの形態に応じた最適音量設定が行われ、再生システム全体として自動的にSN比を最適な状態にすることができるようになる。
《発明の実施形態2》
入力されるオーディオ信号は、前方再生用左右2チャンネル(ステレオ)のオーディオPCM信号であるが、実施形態1の装置と同様に、前記2チャンネル出力設定、および4チャンネル出力設定の2種類の出力設定を行うことができる装置の例を説明する。
図3は、本発明の実施形態2に係る音響処理装置2000の構成を示すブロック図である。なお、以下の実施形態において前記実施形態1等と同様の機能を有する構成要素については、同一の符号を付して説明を省略する。
同図に示すように、音響処理装置2000は、実施形態1の装置の外部インターフェース1500に代えて外部インターフェース2500を備え、さらに反射音処理部2600と自動音量制御部2700とを追加して構成され、前記出力制御情報に基づいて、前記2チャンネル出力設定、および4チャンネル出力設定のいずれかが選択されるようになっている。本装置も具体的には、例えばDSP等によって構成される。
外部インターフェース2500は、音量正規化処理部1200、出力切り替え部1400、および自動音量制御部2700に前記出力チャンネル構成情報を出力するようになっている。
反射音処理部2600は、外部より入力されたステレオのオーディオPCM信号(前方チャンネル用オーディオ信号)に対して反射音を擬似的に求めて付加する処理(反射音生成処理)を施すことによって、擬似的に後方チャンネル用信号を生成するようになっている。
自動音量制御部2700は、前記出力チャンネル構成情報が2チャンネル出力設定の場合にのみ、入力された信号の音量レベルに応じて、音量制御を行うようになっている。例えば、入力された信号の音量レベルが過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行う。複数のオーディオ信号が加算される場合には、オーバーフローが発生しやすくなるが、自動音量制御部2700で自動音量制御が行われることによって、オーバーフロー状態を緩和することが可能となる。
なお、実施形態1の装置では音量正規化処理部1200は、入力された信号のレベルを6dB下げる例を説明したが、本実施形態では、入力された信号のレベルを3dB下げるようになっている。本実施形態で音量正規化処理部1200における信号の減衰量を3dBとしたのは、本装置が自動音量制御部2700を備えているため、ある程度のオーバーフローは回避することが可能であるためである。
上記のように構成された音響処理装置2000は、図4のフローチャートに示す各ステップの処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。各ステップで行われる処理は、以下の通りである。
[S201] オーディオPCM信号をバーチャルサラウンド処理部1100、および反射音処理部2600に入力する。
[S202] 反射音処理部2600は、前方チャンネル用オーディオ信号に対し、前記反射音処理を行うことによって、擬似的に後方チャンネル用オーディオ信号を生成する。
[S203] バーチャルサラウンド処理部1100は、擬似的に生成された後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行い、バーチャルサラウンド信号として音量正規化処理部1200に出力する。
[S204] 音量正規化処理部1200は、オーディオ信号の音量正規化の要否を決定するため、外部インターフェース2500が出力した出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、S205の処理に移行し、また、4チャンネル出力設定の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S206の処理に移行する。
[S205] 音量正規化処理部1200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の音量正規化処理を行う。具体的には、両信号の音量を3dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S206] 出力切り替え部1400は、バーチャルサラウンド信号の出力先を決定するために、出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、バーチャルサラウンド信号を加算器1300に出力してS106の処理に移行し、4チャンネル出力設定S107の処理に移行する。
[S207] 加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S107の処理に移行する。
[S208] 自動音量制御処理の要否を決定するため、自動音量制御部2700は、前記出力チャンネル構成情報が2チャンネル出力設定か、または4チャンネル出力設定かを判断し、2チャンネル出力設定の場合には、音量を調整するためにS209の処理に移行し、また、4チャンネル出力設定の場合(すなわち、音量調整が不要の場合)には、S210の処理に移行する。
[S209] 自動音量制御部2700は、音量レベルの平滑処理や圧縮処理を行うことによって、前方チャンネル用オーディオ信号とバーチャルサラウンド信号の音量調整を行う。
[S210] 自動音量制御部2700の出力を前方スピーカ用、および後方スピーカ用として出力する。
上記のST201〜S210の処理が行われることによって、前記出力制御情報に応じて、4チャンネル出力、および2チャンネル出力のうちの何れかの出力が行われる。
例えば前記出力チャンネル構成情報が2チャンネル出力設定の場合には、反射音処理部2600で反射音処理が行われて、擬似的に後方チャンネル用オーディオ信号を生成される。この後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理部1100が前記バーチャルサラウンド処理を行うことによって、バーチャルサラウンド信号が生成される。このバーチャルサラウンド信号は、音量正規化処理部1200で音量が3dB下げられた後、出力切り替え部1400を介して加算器1300に出力され、加算器1300で前記前方チャンネル用オーディオ信号と加算されて、前方スピーカ用出力として出力される。加算処理が行われる場合、音量正規化処理部1200において、後方チャンネル用オーディオ信号とバーチャルサラウンド信号とは正規化処理が施されているので、加算処理によるオーバーフローは発生しない。自動音量制御部2700は、加算器1300の出力する信号の音量が過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行うことでオーバーフロー状態を緩和する。そして、自動音量制御部1700によって音量制御処理が実施された信号は、前方スピーカ出力側へ出力される。
また、前記出力チャンネル構成情報が4チャンネル出力設定の場合には、2チャンネル出力設定の場合と同様にして前記バーチャルサラウンド信号が生成された後、音量正規化処理部1200での音量正規化処理、加算器1300での加算処理、および自動音量制御部2700での音量制御は行われずに、前方チャンネル用オーディオ信号は前方スピーカ用出力として出力され、バーチャルサラウンド信号は後方スピーカ用出力として出力される。ここでは、音量正規化処理部1200、および自動音量制御部2700において各々のオーディオ信号に音量正規化処理や自動音量制御処理が施されていないが、加算処理が行われないため、当然ながらオーバーフローは発生しない。
上記のように、本実施形態によれば、前方チャンネル用オーディオ信号から擬似的に後方チャンネル用信号を生成するので、入力される信号が前方チャンネル用オーディオ信号のみであっても、実施形態1の装置と同様に、再生システム全体としてSN比を最適な状態に維持しつつ、本装置が実装される再生システムの出力チャンネル構成に応じたオーディオ信号を出力できる。
しかも、前記出力チャンネル構成情報に応じて、音量レベルの調整を行う自動音量制御部を備えているので、出力チャンネル構成に応じて音量制御処理を切り替えることが可能になり、より最適な音量制御処理が実現できる。
《発明の実施形態3》
図5は、本発明の実施形態3に係る音響処理装置3000の構成を示すブロック図である。音響処理装置3000は、加算器1300、自動音量制御部2700、バーチャルサラウンド処理部3100、音量正規化処理部3200、出力切り替え部3400、外部インターフェース3500、反射音処理部3600、および自動音量制御部3700を備えて構成され、後方スピーカの配置に応じたオーディオPCM信号が出力されるようになっている。
本実施形態では、出力制御情報は、音響処理装置3000を実装した再生システムにおける後方スピーカの配置を表す情報(後方スピーカ配置情報)である。後方スピーカ配置情報は、後方スピーカが受聴者の後方に配置される「後方配置」、前方に配置される「前方配置」、および後方スピーカが配置されない「なし」のいずれかを示す情報である。
「後方配置」とは、図6に示すように、後方スピーカを通常のマルチチャンネルシステム通り再生システムの受聴者の後方に配置される場合である。
また、「前方配置」とは、図7に示すように、後方スピーカを前方に配置する場合、または図8に示すように、音響処理装置3000の外部のアナログ回路上で後方スピーカ出力と前方スピーカ出力を加算する場合である。
また、「なし」とは、図9に示すように、音響処理装置3000内部でバーチャルサラウンド信号と前方チャンネル用オーディオ信号とを加算して、前方スピーカ用の出力を行う場合を示す。
バーチャルサラウンド処理部3100は、外部インターフェース3500から前記後方スピーカ配置情報が入力され、前記後方スピーカ配置情報が「前方配置」、および「なし」のうちのいずれかの場合には、前記後方チャンネル用オーディオ信号に前記バーチャルサラウンド処理を施してバーチャルサラウンド信号を出力し、「後方配置」の場合は、バーチャルサラウンド処理を行わずにスルー出力を行うようになっている。
外部インターフェース3500は、バーチャルサラウンド処理部3100、音量正規化処理部1200、出力切り替え部1400、および自動音量制御部2700に前記後方スピーカ配置情報を出力するようになっている。
音量正規化処理部3200は、外部インターフェース3500が出力した後方スピーカ配置情報が「なし」の場合に、前方チャンネル用オーディオ信号、およびバーチャルサラウンド処理部3100が生成するバーチャルサラウンド信号のレベルを3dB下げるようになっている。本実施形態で音量正規化処理部3200における信号の減衰量を実施形態1の装置のように6dBではなく3dBとしたのは、本装置が自動音量制御部2700を備えているため、ある程度のオーバーフローは回避することが可能であるためである。
出力切り替え部3400は、外部インターフェース3500が出力した後方スピーカ配置情報が、「なし」の場合にのみバーチャルサラウンド信号を加算器1300に出力し、「前方配置」、および「後方配置」の場合は、バーチャルサラウンド信号を後方スピーカ用出力側に出力するようになっている。
反射音処理部3600は、外部から前方左右再生用の前方チャンネル用オーディオ信号、および後方左右再生用の後方チャンネル用オーディオ信号の合計4チャンネルのオーディオPCM信号が入力され、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対して前記反射音生成処理を施すようになっている。本実施形態では、全チャンネルのオーディオ信号に対して、反射音を付加することが可能になる。また、例えば後方チャンネル用オーディオ信号が入力されない場合にも、前方チャンネル用オーディオ信号に対して前記反射音生成処理を施すことによって、擬似的に後方チャンネル用信号を生成することが可能になる。
また、反射音処理部3600では、入力時に既に存在しているチャンネルに反射音を付加する場合には、予めの音量正規化処理を行うようになっている。
自動音量制御部3700は、後方スピーカ配置情報に応じて、入力された信号の音量レベル制御(例えば平滑処理や圧縮処理)を行うようになっている。具体的には、外部インターフェース3500が出力した後方スピーカ配置情報が、「なし」の場合にのみ、入力された信号の音量レベルに応じて音量制御を行い、後方スピーカ配置情報が「前方配置」および「後方配置」の場合には、スルー出力を行うようになっている。これにより、例えば、入力された信号の音量レベルが過大レベルの場合に、音量レベルの平滑処理や圧縮処理を行うことによって、オーバーフロー状態を緩和することが可能となる。
図10は、各後方スピーカ配置情報ごとのバーチャルサラウンド処理部3100、音量正規化処理部3200、出力切り替え部3400、および自動音量制御部3700の動作をまとめたものである。
上記のように構成された音響処理装置3000は、図11のフローチャートに示す各ステップの処理が行われることによって、後方スピーカが受聴者の後方に配置される場合、前方に配置される場合、および後方スピーカが配置されない場合のそれぞれの場合に応じた出力動作が行われる。各ステップで行われる処理は、以下の通りである。
[S301] オーディオPCM信号を反射音処理部3600に入力する。
[S302] 反射音処理部3600は、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対し、前記反射音処理を行うことによって、反射音を付加する。
[S303] バーチャルサラウンド処理部3100は、外部インターフェース3500が出力した後方スピーカ配置情報を解析し、後方スピーカ配置情報が「前方配置」、または「なし」の場合には、前記バーチャルサラウンド処理を行うためS304の処理に移行し、後方スピーカ配置情報が「後方配置」の場合には、後方チャンネル用オーディオ信号のスルー出力を行い、S305の処理に移行する。
[S304] バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対し、前記バーチャルサラウンド処理を行って、バーチャルサラウンド信号を音量正規化処理部3200に出力する。
[S305] 音量正規化処理部3200は、外部インターフェース3500が出力した後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、音量正規化を行うためS306の処理に移行し、「前方配置」、または後方配置」の場合には、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号のスルー出力を行い、S307の処理に移行する。
[S306] 反射音処理部3600は、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号に対し、音量正規化処理を行う。具体的には、両信号の音量を3dB下げて出力する。
これにより、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算の際にオーバーフローが発生するのが防止される。
[S307] 出力切り替え部3400は、バーチャルサラウンド信号の出力先を決定するために、後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、バーチャルサラウンド信号を加算器1300に出力してS308の処理に移行し、「前方配置」、または「後方配置」の場合には、後方チャンネル用オーディオ信号のスルー出力を行い、S309の処理に移行する。
[S308] 加算器1300は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号の加算を行い、S309の処理に移行する。
[S309] 自動音量制御処理の要否を決定するため、自動音量制御部3700は、後方スピーカ配置情報を解析し、後方スピーカ配置情報が「なし」の場合には、音量を調整するためにS310の処理に移行し、また、「前方配置」、または「後方配置」の場合(すなわち、音量調整が不要の場合)には、S311の処理に移行する。
[S310] 自動音量制御部3700は、音量レベルの平滑処理や圧縮処理を行うことによって、前方チャンネル用オーディオ信号とバーチャルサラウンド信号の音量調整を行う。
[S311] 自動音量制御部3700の出力を前方スピーカ用、および後方スピーカ用として出力する。
上記のS301〜S311の処理が行われることによって、後方スピーカが受聴者の後方に配置される場合、前方に配置される場合、および後方スピーカが配置されない場合のそれぞれの場合に応じた出力動作が行われる。
例えば図6に示すように後方スピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「後方配置」が入力されると、反射音処理部3600は、入力された4チャンネルのオーディオPCM信号に対し、音量正規化処理を行うとともに、反射音を付加する。バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理を実行せずスルー出力を行う。
音量正規化処理部3200は、反射音処理部3600が出力した前方チャンネル用オーディオ信号、およびバーチャルサラウンド処理部3100が出力した後方チャンネル用オーディオ信号に対し、音量正規化処理を実行せずスルー出力を行う。
出力切り替え部3400は、音量正規化処理部3200から入力された後方チャンネル用オーディオ信号を自動音量制御部3700に出力するので、加算器1300での加算は行われず、前方チャンネル用オーディオ信号は、独立して自動音量制御部3700に入力される。そして、自動音量制御部3700においてもスルー出力が行われ、前方チャンネル用オーディオ信号、および後方チャンネル用オーディオ信号は、前方スピーカ用、および後方スピーカ用としてそれぞれ出力される。
上記のように、後方スピーカ配置情報として「後方配置」が入力されると、入力された4チャンネルのオーディオPCM信号は、音量正規化処理部3200の音量正規化処理、および自動音量制御部3700の自動音量制御処理が施されることなく外部へ出力されるので、例えば図6のように構成されている再生システムでは、SN比を悪化させることなくサラウンド再生を実現することが可能になる。
また、例えば図7、または図8に示すようにスピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「前方配置」が入力されると、バーチャルサラウンド処理部3100が「後方配置」の場合とは異なる動作を行う。すなわち、バーチャルサラウンド処理部3100は、反射音処理部3600が出力した後方チャンネル用オーディオ信号に対して前記バーチャルサラウンド処理を実行し、バーチャルサラウンド信号を生成する。
上記のように、音量正規化処理部3200の音量正規化処理、および自動音量制御部3700の自動音量制御処理が施されないで前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号が外部へ出力されるので、例えば図7のように構成された再生システムでは、前方スピーカからは、前方チャンネル用オーディオ信号が出力され、受聴者の前方に配置された後方スピーカからは、バーチャルサラウンド信号が出力されるので、SN比を悪化させることなくバーチャルサラウンド再生を実現することが可能になる。また、例えば図8のように構成された再生システムでは、前方スピーカ用出力と前方スピーカ用出力とを外部のアナログ回路にて加算処理を行えば、やはりバーチャルサラウンド再生を実現することが可能になる。
また、例えば図9で示されるようにスピーカが配置されて再生システムが構成されている場合に、後方スピーカ配置情報として「なし」が入力されると、反射音処理部3600は、入力された4チャンネルのオーディオPCM信号に対し、音量正規化処理を行うとともに、反射音を付加する。バーチャルサラウンド処理部3100では、反射音処理部3600で生成された後方チャンネル用オーディオ信号に対し、バーチャルサラウンド処理を実行してバーチャルサラウンド信号を生成する。
音量正規化処理部3200は、前方チャンネル用オーディオ信号、およびバーチャルサラウンド信号に対し音量正規化処理を行う。具体的には、各々の入力信号の音量を3dB下げる処理を行う。
出力切り替え部3400は、音量正規化処理部3200から入力されたバーチャルサラウンド信号を加算器1300に出力するので、加算器1300では、前方チャンネル用オーディオ信号とバーチャルサラウンド信号との加算が行われ、自動音量制御部3700に入力される。そして、自動音量制御部3700は、加算器1300の出力に対し、信号の音量レベルに応じた音量制御処理を行い、前方スピーカ用に出力する。自動音量制御部3700における音量制御は、実施形態2の装置と同様、例えば入力信号の音量レベルが過大レベルの場合には、自動的に音量レベルの平滑処理や圧縮処理を行うことでオーバーフロー状態を緩和する働きがある。
このように、音量正規化処理部3200の音量正規化処理が行われた後に加算処理が行われ、さらに自動音量制御部3700で自動音量制御処理が施された後に外部へ出力されるので、加算処理や外部出力の際のオーバーフローは発生せず、例えば図9のように構成された再生システムでバーチャルサラウンド再生を実現することが可能になる。
上記のように、本実施形態によれば、出力切り替え部3400を備えたことで、バーチャルサラウンド処理の有無(ON/OFF)に係わらずバーチャルサラウンド信号と前方再生用の2チャンネル信号とを加算せず独立に出力することが可能になるので、バーチャルサラウンド処理がONの場合とOFFの場合との音量感を合わせるために、OFFの場合に再生音量を下げる必要がなくなり、再生システム全体としてSN比を維持することが可能となる。
また、前記後方スピーカ配置情報が入力されることによって、外部の出力チャンネル構成に応じて、自動的に音量正規化処理部での音量正規化処理の有無、自動音量制御部での音量レベルの調整の有無、および前記バーチャルサラウンド信号と前方チャンネル用オーディオ信号との加算処理の有無が切り替えられるので、本装置が実装される再生システムの形態に応じた最適音量設定が行われ、システム全体として自動的にSN比を最適な状態にすることができるようになる。
しかも、本実施形態では、前記出力チャンネル構成情報が入力されることによって、後方再生用スピーカの配置や出力方法に応じて、バーチャルサラウンド処理の有無の制御を行うことができる。
なお、実施形態3の装置では、前記後方スピーカ配置情報は、例えば本実施形態の音響処理装置を搭載した再生システムを構築する場合に、音響処理装置とのインターフェースとして後方のスピーカに位置情報の受け渡し機能を追加し、バーチャルサラウンド処理の有無、出力チャンネル構成、音量レベル制御等の処理を自動的に行わせるようにしてもよい。これにより、最適な状態での再生を自動的に実現することが可能になる。
また、実施形態1、および実施形態3の装置では、説明を容易とするため、外部から入力される信号が前方2チャンネルと後方2チャンネルとの合計4チャンネルのオーディオPCM信号である場合の例を説明したが、前方中央再生用(センター)チャンネルやサブウーハーなどのチャンネルを含む場合や、後方再生用チャンネルがモノラルの場合に適用してもよい。
また、実施形態3の装置における、自動音量制御部の出力チャンネル構成情報に基づいた処理は、音量制御の有無(ON/OFF)が切り替えられる例を説明したが、反射音処理部や音量正規化処理部の設定に応じて音量制御処理の効果を可変にすることも可能である。
また、実施形態3の装置でも、外部から入力されるオーディオ信号が前方再生用左右2チャンネル(ステレオ)のオーディオPCM信号の場合に、反射音処理部3600で擬似的に後方チャンネル用オーディオ信号を生成し、これに対して前記バーチャルサラウンド処理を行うようにしてもよい。
本発明にかかる音響処理装置は、再生システム全体としてSN比の劣化が少ないバーチャルサラウンド再生を実現することが可能になるという効果を有し、受聴者の前方に配置された前方スピーカのみで擬似的にマルチチャンネル再生を実現する音響処理装置等として有用である。
本発明の実施形態1に係る音響処理装置の構成を示すブロック図である。 本発明の実施形態1に係る音響処理装置の動作を示すフローチャートである。 本発明の実施形態2に係る音響処理装置の構成を示すブロック図である。 本発明の実施形態2に係る音響処理装置の動作を示すフローチャートである。 本発明の実施形態3に係る音響処理装置の構成を示すブロック図である。 本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。 本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。 本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。 本発明の実施形態3に係る音響処理装置を実装した再生システムの一構成例を示す図である。 本発明の実施形態3に係る音響処理装置の後方スピーカ配置情報に対する各処理動作の有無を示す一覧表である。 本発明の実施形態3に係る音響処理装置の動作を示すフローチャートである。 従来の音響処理装置の構成を示すブロック図である。 従来の音響処理装置の構成を示すブロック図である。
符号の説明
1000 音響処理装置
1100 バーチャルサラウンド処理部
1200 音量正規化処理部
1300 加算器
1400 出力切り替え部
1500 外部インターフェース
1700 自動音量制御部
2000 音響処理装置
2500 外部インターフェース
2600 反射音処理部
2700 自動音量制御部
3000 音響処理装置
3100 バーチャルサラウンド処理部
3200 音量正規化処理部
3400 出力切り替え部
3500 外部インターフェース
3600 反射音処理部
3700 自動音量制御部
4000 音響処理装置
4100 バーチャルサラウンド処理部
4200 音量正規化処理部
4300 加算器
5000 音響処理装置
5400 反射音処理部

Claims (8)

  1. 受聴者の後方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になる後方チャンネル用オーディオ信号に対し、受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の後方になるように、所定の音像定位処理を行って、音像定位処理済みオーディオ信号を生成する音響処理部を備え、
    受聴者の前方に配置されたスピーカで再生された場合に受聴者に認識される音像位置が受聴者の前方になる前方チャンネル用オーディオ信号と、前記音像定位処理済みオーディオ信号と、をそれぞれ独立して出力することを特徴とする音響処理装置。
  2. 請求項1の音響処理装置であって、
    さらに、入力された前方チャンネル用オーディオ信号に対し、反射音生成処理を行って、前記後方チャンネル用オーディオ信号を生成する反射音生成処理部を備えたことを特徴とする音響処理装置。
  3. 請求項1の音響処理装置であって、
    さらに、入力された前方チャンネル用オーディオ信号および入力された後方チャンネル用オーディオ信号のそれぞれの信号に反射音信号を付加して、前記前方チャンネル用オーディオ信号および前記後方チャンネル用オーディオ信号を生成する反射音付加処理部を備えたことを特徴とする音響処理装置。
  4. 請求項1の音響処理装置であって、さらに、
    前記前方チャンネル用オーディオ信号および音像定位処理済みオーディオ信号の音量レベルを所定のレベル範囲に収まるように制御する音量正規化処理部と、
    前記音量正規化処理部によって音量レベルが制御された前方チャンネル用オーディオ信号と前記音量正規化処理部によって音量レベルが制御された音像定位処理済みオーディオ信号とを加算した加算オーディオ信号を生成する加算器と、
    出力制御情報を示す制御信号に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、および前記加算オーディオ信号を出力する出力動作の何れかの出力動作を選択的に行う切り替え部とを備えことを特徴とする音響処理装置。
  5. 請求項4の音響処理装置であって、
    前記出力制御情報は、出力チャンネル構成を示す出力チャンネル構成情報を含んだものであり、
    前記切り替え部は、前記出力チャンネル構成情報に応じて、前記切り替えを行うことを特徴とする音響処理装置。
  6. 請求項5の音響処理装置であって、
    さらに、前記出力チャンネル構成情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする音響処理装置。
  7. 請求項4の音響処理装置であって、
    前記出力制御情報は、受聴者に認識される音像位置が受聴者の後方になるオーディオ信号を出力するための後方音像用スピーカが、受聴者の前方に配置された状態、後方に配置された状態、および配置されていない状態のうちの何れの配置状態であるかを示す後方スピーカ配置情報を含んだものであり、
    前記音響処理部は、前記後方スピーカ配置情報が示す配置状態に応じて、前記音像定位処理済みオーディオ信号の生成の有無が制御されるように構成され、
    前記切り替え部は、前記後方スピーカ配置情報に応じて、前記前方チャンネル用オーディオ信号と前記音像定位処理済みオーディオ信号とをそれぞれ独立して出力する出力動作、前記加算オーディオ信号を出力する出力動作、および入力されたオーディオ信号をそのまま出力する出力動作のうちの何れかの出力動作を選択的に行うように構成されていることを特徴とする音響処理装置。
  8. 請求項7の音響処理装置であって、
    さらに、前記後方スピーカ配置情報、および入力音量レベルに応じて、出力するオーディオ信号の音量レベルを制御する音量制御部を備えたことを特徴とする音響処理装置。
JP2006519373A 2004-02-26 2005-02-24 音響処理装置 Active JP4504981B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2004051106 2004-02-26
JP2004051106 2004-02-26
PCT/JP2005/003044 WO2005084077A1 (ja) 2004-02-26 2005-02-24 音響処理装置

Publications (2)

Publication Number Publication Date
JPWO2005084077A1 true JPWO2005084077A1 (ja) 2007-11-29
JP4504981B2 JP4504981B2 (ja) 2010-07-14

Family

ID=34908619

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006519373A Active JP4504981B2 (ja) 2004-02-26 2005-02-24 音響処理装置

Country Status (4)

Country Link
US (1) US7856110B2 (ja)
JP (1) JP4504981B2 (ja)
CN (1) CN1765154B (ja)
WO (1) WO2005084077A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4558672B2 (ja) * 2006-04-07 2010-10-06 シャープ株式会社 スピーカ装置
JP4825044B2 (ja) * 2006-04-24 2011-11-30 パイオニア株式会社 音声処理装置、その方法、そのプログラム、そのプログラムを記録した記録媒体、および再生装置
US8180067B2 (en) * 2006-04-28 2012-05-15 Harman International Industries, Incorporated System for selectively extracting components of an audio input signal
US8036767B2 (en) * 2006-09-20 2011-10-11 Harman International Industries, Incorporated System for extracting and changing the reverberant content of an audio input signal
JP4946305B2 (ja) * 2006-09-22 2012-06-06 ソニー株式会社 音響再生システム、音響再生装置および音響再生方法
US8705748B2 (en) 2007-05-04 2014-04-22 Creative Technology Ltd Method for spatially processing multichannel signals, processing module, and virtual surround-sound systems
KR101387195B1 (ko) * 2009-10-05 2014-04-21 하만인터내셔날인더스트리스인코포레이티드 오디오 신호의 공간 추출 시스템
US20120148075A1 (en) * 2010-12-08 2012-06-14 Creative Technology Ltd Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
US10395889B2 (en) 2016-09-07 2019-08-27 Axcelis Technologies, Inc. In situ beam current monitoring and control in scanned ion implantation systems
US11563708B1 (en) * 2017-03-30 2023-01-24 Amazon Technologies, Inc. Message grouping
US9820073B1 (en) 2017-05-10 2017-11-14 Tls Corp. Extracting a common signal from multiple audio signals

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08275300A (ja) * 1995-03-30 1996-10-18 Yamaha Corp 音場制御装置
JPH09322300A (ja) * 1996-05-31 1997-12-12 Victor Co Of Japan Ltd 映像音声再生装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4030121C2 (de) * 1989-10-11 1999-05-12 Mitsubishi Electric Corp Mehrkanal-Audiowiedergabevorrichtung
DE69028394T2 (de) * 1989-12-29 1997-01-16 Fujitsu Ten Ltd Tonwiedergabevorrichtung
JP2985557B2 (ja) 1993-01-29 1999-12-06 日本ビクター株式会社 サラウンド信号処理装置
DE4303386A1 (de) * 1993-02-05 1994-08-11 Blaupunkt Werke Gmbh Schaltungsanordnung zur digitalen Verarbeitung von Audiosignalen
JP3276528B2 (ja) 1994-08-24 2002-04-22 シャープ株式会社 音像拡大装置
JPH08130797A (ja) 1994-10-31 1996-05-21 Matsushita Electric Ind Co Ltd 音響再生装置
JP3498888B2 (ja) 1996-10-11 2004-02-23 日本ビクター株式会社 サラウンド信号処理装置と方法及び映像音声再生方法、記録媒体への記録方法及び記録装置、記録媒体、処理プログラムの伝送方法及び受信方法、並びに記録データの伝送方法及び受信方法
JP3900208B2 (ja) 1997-02-06 2007-04-04 ソニー株式会社 音響再生方式および音声信号処理装置
DE69823228T2 (de) * 1997-12-19 2005-04-14 Daewoo Electronics Corp. Raumklangsignalverarbeitungsvorriehtung und -verfahren
JP2000324600A (ja) 1999-05-07 2000-11-24 Matsushita Electric Ind Co Ltd 音像定位装置
KR100922910B1 (ko) * 2001-03-27 2009-10-22 캠브리지 메카트로닉스 리미티드 사운드 필드를 생성하는 방법 및 장치
US6990210B2 (en) * 2001-11-28 2006-01-24 C-Media Electronics, Inc. System for headphone-like rear channel speaker and the method of the same
JP3994788B2 (ja) 2002-04-30 2007-10-24 ソニー株式会社 伝達特性測定装置、伝達特性測定方法、及び伝達特性測定プログラム、並びに増幅装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08275300A (ja) * 1995-03-30 1996-10-18 Yamaha Corp 音場制御装置
JPH09322300A (ja) * 1996-05-31 1997-12-12 Victor Co Of Japan Ltd 映像音声再生装置

Also Published As

Publication number Publication date
US7856110B2 (en) 2010-12-21
JP4504981B2 (ja) 2010-07-14
US20070014417A1 (en) 2007-01-18
WO2005084077A1 (ja) 2005-09-09
CN1765154B (zh) 2010-07-14
CN1765154A (zh) 2006-04-26

Similar Documents

Publication Publication Date Title
JP4504981B2 (ja) 音響処理装置
US6067361A (en) Method and apparatus for two channels of sound having directional cues
JP5266995B2 (ja) 放音装置
US6009179A (en) Method and apparatus for electronically embedding directional cues in two channels of sound
JP2002191099A (ja) 信号処理装置
JP2001268700A (ja) 音響装置
US7697695B2 (en) Stereophonic sound reproducing system and stereophonic sound reproducing apparatus
US20150341738A1 (en) Acoustic surround immersion control system and method
JP2000059897A (ja) 音声再生装置および音声再生方法
JP5892043B2 (ja) 音声処理装置
JPWO2007108301A1 (ja) 立体音響再生装置及び立体音響再生用プログラム
JP2007067463A (ja) オーディオ装置
JP5671686B2 (ja) 音響再生装置
JP5067240B2 (ja) 遅延制御装置
JP2004364239A (ja) 音響装置
JP2006319804A (ja) デジタルバスブースト装置及びバーチャルサラウンドデコーダ装置
JP2004364240A (ja) 音場調整装置
JP2008103883A (ja) 音響装置、その方法、そのプログラム及びその記録媒体
JPH08152895A (ja) オーディオ装置
KR200240707Y1 (ko) 입체음향 출력음 조절장치
JP2004364238A (ja) サラウンド装置
KR200401419Y1 (ko) 스테레오 헤드폰 시스템
JP2004040625A (ja) 音声制御手段及び音声制御プログラム
JP2006319802A (ja) バーチャルサラウンドデコーダ装置
JP2001008300A (ja) マルチ音声ステレオ再生方法及び装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100209

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100302

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100330

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100423

R150 Certificate of patent or registration of utility model

Ref document number: 4504981

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130430

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140430

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250