JP5549319B2 - Sound equipment and sound system - Google Patents

Sound equipment and sound system Download PDF

Info

Publication number
JP5549319B2
JP5549319B2 JP2010078817A JP2010078817A JP5549319B2 JP 5549319 B2 JP5549319 B2 JP 5549319B2 JP 2010078817 A JP2010078817 A JP 2010078817A JP 2010078817 A JP2010078817 A JP 2010078817A JP 5549319 B2 JP5549319 B2 JP 5549319B2
Authority
JP
Japan
Prior art keywords
volume
sound
unit
playback device
modulation component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010078817A
Other languages
Japanese (ja)
Other versions
JP2011211603A (en
Inventor
卓朗 曽根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2010078817A priority Critical patent/JP5549319B2/en
Publication of JP2011211603A publication Critical patent/JP2011211603A/en
Application granted granted Critical
Publication of JP5549319B2 publication Critical patent/JP5549319B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

この発明は、再生する音声の音量制御を行う音響機器に関する。   The present invention relates to an acoustic device that performs volume control of sound to be reproduced.

一般に、自動演奏装置(例えば自動演奏ピアノ)の伴奏楽音は、自動演奏ピアノと一体のオーディオ再生装置(オーディオ再生機能)を使って再生している。この場合、自動演奏ピアノの音量と伴奏楽音の音量は一体で管理されるため、音量バランスを自動調整することが容易である。   In general, accompaniment sounds of an automatic performance device (for example, an automatic performance piano) are reproduced using an audio reproduction device (audio reproduction function) integrated with the automatic performance piano. In this case, since the volume of the automatic performance piano and the volume of the accompaniment music are managed together, it is easy to automatically adjust the volume balance.

一方で、近年、伴奏楽音を自動演奏装置とは別の再生装置で同期再生をすることが提案されている(特許文献1を参照)。   On the other hand, in recent years, it has been proposed that the accompaniment music sound be played back synchronously by a playback device different from the automatic performance device (see Patent Document 1).

特開2010−55076号公報JP 2010-55076 A

しかし、伴奏楽音を別の再生装置で再生すると、各再生装置のスピーカの配置、聴取位置、部屋の構造等、再生環境によって適切な音量バランスが異なるものとなり、自動調整することが困難であった。   However, when accompaniment sounds are played on different playback devices, the appropriate volume balance differs depending on the playback environment, such as speaker placement, listening position, room structure, etc., and it is difficult to adjust automatically. .

そこで、この発明は、機器間の音量バランスを自動調整する機能を簡便に実現する音響機器を提供することを目的とする。   Accordingly, an object of the present invention is to provide an audio device that easily realizes a function of automatically adjusting the volume balance between devices.

この発明の音響機器は、音声を再生する再生手段と、変調成分が含まれた音声信号を収音する収音手段と、前記音声信号に含まれる変調成分に基づいて、他の機器の音量を推定する音量推定手段と、前記音量推定手段で推定した音量に応じて、前記再生手段の音量を制御する音量制御手段と、を備えたことを特徴とする。   The acoustic device according to the present invention includes a reproducing unit that reproduces sound, a sound collecting unit that collects an audio signal including a modulation component, and a volume of another device based on the modulation component included in the audio signal. Volume estimation means for estimation and volume control means for controlling the volume of the playback means according to the volume estimated by the volume estimation means are provided.

この場合、音声信号に他の機器の音量を推定するための変調成分が含まれていれば、この変調成分を復調することで他の機器の音量を推定することができ、音量バランスを自動調整することができる。   In this case, if the audio signal contains a modulation component for estimating the volume of another device, the volume of the other device can be estimated by demodulating the modulation component, and the volume balance is automatically adjusted. can do.

例えば、変調成分として拡散符号が含まれている場合、相関値(ピーク強度)の変化により音量を推定することができる。他の機器の音量が大きくなると、拡散符号のSN比が高くなるため、相関値のピーク強度が高くなる。したがって、ピーク強度が高くなれば、他の機器の音量が大きくなったと推定し、自装置の音量を大きくする。この様にして音量バランスを自動調整することができる。   For example, when a spread code is included as a modulation component, the volume can be estimated from a change in correlation value (peak intensity). When the volume of the other device is increased, the SN ratio of the spread code is increased, so that the peak intensity of the correlation value is increased. Therefore, if the peak intensity increases, it is estimated that the volume of the other device has increased, and the volume of the device itself is increased. In this way, the volume balance can be automatically adjusted.

また、変調成分に音量情報が含まれている場合には、この音量情報を復号することで、音量制御を行うこともできる。例えば音量情報のビットデータ(0,1)で拡散符号を位相変調(正負反転)したものである場合、復調側では、相関値のピークの正負判定を行うことでビットデータを復号することができる。   If the modulation component includes volume information, the volume control can be performed by decoding the volume information. For example, when the bit code (0, 1) of the volume information is obtained by phase modulation (positive / negative inversion) of the spread code, the demodulation side can decode the bit data by determining whether the peak of the correlation value is positive or negative. .

なお、変調成分には、コンテンツの再生タイミングを示す同期情報が含まれていてもよい。例えば、MIDIに準じた基準クロックを同期情報として重畳しておけば、再生側では、復号した基準クロックでシーケンサを作動させることにより自動演奏を行うことができ、収音した音声信号と自装置で再生する音声とを同期させることができる。   The modulation component may include synchronization information indicating the content reproduction timing. For example, if a reference clock conforming to MIDI is superimposed as synchronization information, the playback side can perform an automatic performance by operating a sequencer with the decoded reference clock, and the collected audio signal and the own device can be used. The audio to be played can be synchronized.

また、上記音響機器において、自装置が再生する音声に新たな変調成分を重畳する重畳手段を備えている態様も可能である。この場合、収音手段は、自装置が再生した音声をさらに収音し、音量推定手段は、重畳した新たな変調成分を復調して自装置の音量をさらに推定し、音量制御手段は、推定した各音量に基づいて音量バランスを決定する。つまり、他の装置の音量に加え、自装置の音量も考慮して音量制御を行うため、より正確な音量バランスに調整することができる。   Moreover, the aspect provided with the superimposition means which superimposes a new modulation component on the audio | voice which an own apparatus reproduces in the said audio equipment is also possible. In this case, the sound collecting means further picks up the sound reproduced by the own apparatus, the sound volume estimating means demodulates the superimposed new modulation component to further estimate the sound volume of the own apparatus, and the sound volume control means The volume balance is determined based on each volume. That is, since the volume control is performed in consideration of the volume of the own apparatus in addition to the volume of the other apparatus, it is possible to adjust to a more accurate volume balance.

また、音響機器を複数備えた音響システムを構成し、各音響機器が自装置の再生する音声に新たな変調成分を重畳する重畳手段を備えている態様も可能である。この場合、収音手段は、他の音響機器が再生した音声を収音し、音量推定手段は、収音した音声信号に含まれる変調成分に基づいて、他の音響機器の音量を推定することで、複数の機器間で相互に音量調整を行うことができる。   Further, an aspect in which an acoustic system including a plurality of acoustic devices is configured, and each acoustic device includes a superimposing unit that superimposes a new modulation component on the sound reproduced by the own device is also possible. In this case, the sound collection means collects the sound reproduced by the other acoustic equipment, and the volume estimation means estimates the volume of the other acoustic equipment based on the modulation component included in the collected sound signal. Thus, the volume can be adjusted between a plurality of devices.

この発明によれば、伴奏楽音を別の装置で再生する場合でも、音量バランスを自動調整する機能を簡便に実現することができる。   According to the present invention, the function of automatically adjusting the volume balance can be easily realized even when the accompaniment music sound is reproduced by another device.

音響システムの主要構成を示すブロック図である。It is a block diagram which shows the main structures of an acoustic system. 再生装置1の構成を示すブロック図である。2 is a block diagram showing a configuration of a playback device 1. FIG. 再生装置2の構成を示すブロック図である。3 is a block diagram showing a configuration of a playback device 2. FIG. 他の例に係る再生装置1の構成を示すブロック図である。It is a block diagram which shows the structure of the reproducing | regenerating apparatus 1 which concerns on another example. さらに変調成分を重畳する場合の再生装置2の構成を示すブロック図である。Furthermore, it is a block diagram which shows the structure of the reproducing | regenerating apparatus 2 in the case of superimposing a modulation component. スピーカを複数設ける場合の音響システムの主要構成を示すブロック図である。It is a block diagram which shows the main structures of the acoustic system in the case of providing two or more speakers. スピーカを複数設ける場合の再生装置2の構成を示すブロック図である。It is a block diagram which shows the structure of the reproducing | regenerating apparatus 2 in the case of providing a plurality of speakers. 再生装置2を複数設け、相互に音量調整を行う場合の音響システムの主要構成を示すブロック図である。It is a block diagram which shows the main structures of the acoustic system in the case of providing the reproducing | regenerating apparatus 2 and performing volume adjustment mutually. リモコンを用いて自動音量調整を行う場合の音響システムの構成を示すブロック図である。It is a block diagram which shows the structure of the acoustic system in the case of performing automatic volume adjustment using a remote control. リモコンを用いて自動音量調整を行う場合の再生装置2およびリモコン5の構成を示すブロック図である。It is a block diagram which shows the structure of the reproducing | regenerating apparatus 2 and the remote control 5 in the case of performing automatic volume adjustment using a remote control. 分析サーバを用いる場合の音響システムの構成を示すブロック図である。It is a block diagram which shows the structure of the acoustic system in the case of using an analysis server. 分析サーバを用いる場合の再生装置2および分析サーバ9の構成を示すブロック図である。It is a block diagram which shows the structure of the reproducing | regenerating apparatus 2 and the analysis server 9 in the case of using an analysis server. 分析サーバを用い、コンテンツを特定する場合の再生装置2および分析サーバ9の構成を示すブロック図である。It is a block diagram which shows the structure of the reproducing | regenerating apparatus 2 and the analysis server 9 when an analysis server is used and a content is specified.

図1は、本発明の実施形態に係る音響システムの構成を示す図である。音響システムは、複数の再生装置からなり、同図の例では、再生装置1および再生装置2からなる。再生装置1には、スピーカ10が接続され、再生装置2には、スピーカ20が接続されている。再生装置1および再生装置2は、それぞれ所定のコンテンツを再生してスピーカ10およびスピーカ20から音声を放音する。   FIG. 1 is a diagram illustrating a configuration of an acoustic system according to an embodiment of the present invention. The acoustic system is composed of a plurality of playback devices, and in the example of FIG. A speaker 10 is connected to the playback device 1, and a speaker 20 is connected to the playback device 2. The playback device 1 and the playback device 2 play predetermined content and emit sound from the speaker 10 and the speaker 20, respectively.

マイク30は、聴取位置(聴取者の近傍)に設置されている。マイク30は、聴取位置における聴取音(スピーカ10およびスピーカ20の放音音声)を収音し、収音した音声信号を再生装置2に出力する。再生装置2は、マイク30の収音した音声信号に含まれている変調成分に基づいて再生装置1の音量を推定し、自装置の再生音量を制御して再生装置1との音量バランスを自動調整するものである。   The microphone 30 is installed at a listening position (near the listener). The microphone 30 collects the listening sound (sound emitted from the speaker 10 and the speaker 20) at the listening position and outputs the collected sound signal to the playback device 2. The playback device 2 estimates the volume of the playback device 1 based on the modulation component included in the audio signal picked up by the microphone 30, and controls the playback volume of the device itself to automatically adjust the volume balance with the playback device 1. To be adjusted.

なお、同図の例では、再生装置2の設置位置から離れた聴取位置にマイク30が設置されている例を示しているが、マイク30は再生装置2に内蔵されている態様であってもよい。音圧は、距離の2乗に反比例するため、再生装置1、再生装置2、および聴取位置の位置関係を把握している場合、聴取位置における音量を推定することができる。例えば、再生装置1と再生装置2の間隔が3mであり、聴取者が各装置の中間位置(再生装置1および再生装置2から1.5m離れた位置)で聴取する場合、聴取位置においては再生装置2で収音した音量の約4倍の音量の音声が到達していると判断することができる。   In the example shown in the figure, an example in which the microphone 30 is installed at a listening position away from the installation position of the playback device 2 is shown. However, the microphone 30 may be built in the playback device 2. Good. Since the sound pressure is inversely proportional to the square of the distance, the volume at the listening position can be estimated when the positional relationship between the playback device 1, the playback device 2, and the listening position is known. For example, when the interval between the playback device 1 and the playback device 2 is 3 m and the listener listens at an intermediate position between the devices (a position 1.5 m away from the playback device 1 and the playback device 2), playback is performed at the listening position. It can be determined that the sound having a volume approximately four times the sound volume picked up by the device 2 has arrived.

図2(A)は、再生装置1の構成を示すブロック図である。再生装置1は、制御部11、コンテンツデータ格納部12、再生部13、重畳部14、操作部15、および音量調整部16を備えている。   FIG. 2A is a block diagram showing the configuration of the playback apparatus 1. The playback device 1 includes a control unit 11, a content data storage unit 12, a playback unit 13, a superimposition unit 14, an operation unit 15, and a volume adjustment unit 16.

コンテンツデータ格納部12は、例えばMP3等の圧縮オーディオや楽曲データ(MIDIデータ)等のコンテンツデータを記憶している。   The content data storage unit 12 stores content data such as compressed audio such as MP3 and music data (MIDI data).

再生部13は、コンテンツデータ格納部12からコンテンツデータを読み出し、音声を再生する。コンテンツデータが圧縮オーディオである場合、再生部13は、音声信号にデコードし、重畳部14に出力する。コンテンツデータがMIDIデータである場合、再生部13は、音源(不図示)を制御して楽音(音声信号)を発生し、重畳部14に出力する。   The reproduction unit 13 reads content data from the content data storage unit 12 and reproduces sound. When the content data is compressed audio, the playback unit 13 decodes the audio data and outputs the audio signal to the superimposition unit 14. When the content data is MIDI data, the playback unit 13 controls a sound source (not shown) to generate a musical sound (sound signal) and outputs it to the superimposing unit 14.

重畳部14は、再生部13から入力される音声信号に、変調成分を重畳する。変調成分が重畳された音声信号は、音量調整部16で音量調整され、スピーカ10から放音される。音量調整部16の音量調整量は、制御部11により制御される。制御部11は、操作部15の操作に応じた音量調整量を音量調整部16に設定する。   The superimposing unit 14 superimposes the modulation component on the audio signal input from the reproducing unit 13. The audio signal on which the modulation component is superimposed is adjusted in volume by the volume adjustment unit 16 and emitted from the speaker 10. The volume adjustment amount of the volume adjustment unit 16 is controlled by the control unit 11. The control unit 11 sets the volume adjustment amount according to the operation of the operation unit 15 in the volume adjustment unit 16.

重畳部14の重畳方式は、変調成分が聴取し難いような手法を用いる。例えば、M系列やGold系列等の拡散符号(PN符号)を、聴感上違和感のない微弱なレベルで高帯域に重畳する。なお、コンテンツデータに予め拡散符号等の変調成分が重畳されている場合、再生装置1の構成としては、図4(A)に示すように、重畳部14が不要となる。   The superimposing method of the superimposing unit 14 uses a technique that makes it difficult to hear the modulation component. For example, a spreading code (PN code) such as an M sequence or a Gold sequence is superimposed on a high band at a weak level that does not cause a sense of discomfort. When a modulation component such as a spread code is preliminarily superimposed on the content data, the configuration of the playback device 1 does not require the superimposing unit 14 as shown in FIG.

図2(B)は、重畳部14の構成の一例を示すブロック図である。重畳部14は、LPF140、加算器141、拡散符号発生部142、およびHPF143を備えている。   FIG. 2B is a block diagram illustrating an example of the configuration of the superimposing unit 14. The superimposing unit 14 includes an LPF 140, an adder 141, a spread code generating unit 142, and an HPF 143.

拡散符号発生部142は、制御部11の指示に従って、定期的にM系列の拡散符号を発生し、HPF143に出力する。HPF143で帯域制限された拡散符号は、加算器141でコンテンツの音声信号と合成される。コンテンツの音声信号は、LPF140で拡散符号の周波数成分と異なる帯域に制限されている。   The spreading code generation unit 142 periodically generates an M-sequence spreading code in accordance with an instruction from the control unit 11 and outputs it to the HPF 143. The spreading code band-limited by the HPF 143 is combined with the content audio signal by the adder 141. The audio signal of the content is limited to a band different from the frequency component of the spread code by the LPF 140.

なお、HPF143の通過帯域は、20kHz以上の非可聴域にすることが望ましいが、D/A変換や圧縮オーディオのエンコード等により非可聴域が使えない構成の場合、例えば10〜15kHz程度の帯域であっても、聴感上の影響は少なくすることができる。また、この例では、LPF140でコンテンツの音声信号と拡散符号の帯域を完全に分割する態様としているが、コンテンツの音声信号と疑似ノイズの周波数成分が若干重複していたとしても、聴取者に変調信号が聞こえにくく、かつ収音側で変調成分を復調する程度のSN比を確保することは可能である。   Note that the pass band of the HPF 143 is desirably a non-audible range of 20 kHz or more. However, in a configuration where the non-audible range cannot be used due to D / A conversion, compression audio encoding, or the like, for example, a band of about 10 to 15 kHz Even if it exists, the influence on audibility can be reduced. Also, in this example, the LPF 140 completely divides the content audio signal and the spread code band, but even if the content audio signal and the pseudo noise frequency component are slightly overlapped, it is modulated by the listener. It is possible to ensure an S / N ratio that makes it difficult to hear the signal and demodulates the modulation component on the sound collection side.

再生装置2は、以上の様な拡散符号が重畳された音声をマイク30で収音し、収音した音声信号と、重畳側と同じ拡散符号と、の相関値を算出し、算出した相関値のピーク強度に応じて再生装置1の音量を推定する。図3(A)は、再生装置2の構成を示すブロック図である。再生装置2は、操作部21、制御部22、復調部24、コンテンツデータ格納部25、再生部26、および音量調整部27を備えている。   The playback device 2 picks up the sound on which the spread code as described above is superimposed by the microphone 30, calculates a correlation value between the collected sound signal and the same spread code on the superimposition side, and calculates the calculated correlation value The volume of the playback device 1 is estimated according to the peak intensity. FIG. 3A is a block diagram illustrating a configuration of the playback device 2. The playback device 2 includes an operation unit 21, a control unit 22, a demodulation unit 24, a content data storage unit 25, a playback unit 26, and a volume adjustment unit 27.

コンテンツデータ格納部25は、MP3等の圧縮オーディオや楽曲データ(MIDIデータ)等のコンテンツデータを記憶している。再生部26は、コンテンツデータ格納部25からコンテンツデータを読み出し、音声を再生する。再生するコンテンツは、操作部21の操作に応じて制御部22が指示する。   The content data storage unit 25 stores content data such as compressed audio such as MP3 and music data (MIDI data). The reproduction unit 26 reads content data from the content data storage unit 25 and reproduces sound. The content to be reproduced is instructed by the control unit 22 according to the operation of the operation unit 21.

再生部26から出力された音声信号は、音量調整部27で音量調整され、スピーカ20から放音される。音量調整部27の調整量は、制御部22により制御される。制御部22は、復調部24における復調結果に基づいて再生装置1の音量を推定し、音量調整部27の音量調整量を決定する。   The sound signal output from the reproduction unit 26 is adjusted in volume by the volume adjustment unit 27 and emitted from the speaker 20. The adjustment amount of the volume adjustment unit 27 is controlled by the control unit 22. The control unit 22 estimates the volume of the playback device 1 based on the demodulation result in the demodulation unit 24 and determines the volume adjustment amount of the volume adjustment unit 27.

図3(B)は、復調部24の構成、および制御部22における音量推定を行うための機能構成を示すブロック図である。復調部24は、HPF241および相関器245を備えている。マイク30が収音した音声は、HPF241に入力される。HPF241は、コンテンツの音声信号成分を除去するためのフィルタであり、上記HPF143の通過帯域と同じ通過帯域が設定されている。HPF241の出力信号は、相関器245に入力される。   FIG. 3B is a block diagram illustrating a configuration of the demodulator 24 and a functional configuration for performing sound volume estimation in the controller 22. The demodulator 24 includes an HPF 241 and a correlator 245. The sound collected by the microphone 30 is input to the HPF 241. The HPF 241 is a filter for removing the audio signal component of the content, and the same pass band as the pass band of the HPF 143 is set. The output signal of the HPF 241 is input to the correlator 245.

相関器245は、フィルタ係数として拡散符号発生部142で発生する拡散符号が設定されたFIRフィルタ(マッチドフィルタ)からなり、入力された音声信号と拡散符号との相関値を求める。拡散符号は、M系列やGord系列等の自己相関性が高い符号を用いているため、相関器245が出力する相関値は、拡散符号の周期でピーク成分が抽出される。抽出されたピークにおける相関値(ピーク強度)は、制御部22に出力される。制御部22は、機能的に音量推定部221および音量値記憶部222を備えており、音量推定部221は、相関器245から入力されたピーク強度で音量値記憶部222を参照することにより、再生装置1の音量を推定する。すなわち、音量値記憶部222には、ピーク強度に対する再生装置1の推定音量値が記憶されており、音量推定部221は、抽出されたピーク強度に対応する推定音量値を読み出すことで、音量値を推定することができる。制御部22は、推定した音量値に応じて音量調整部27の調整量を設定する。   The correlator 245 includes an FIR filter (matched filter) in which the spreading code generated by the spreading code generator 142 is set as a filter coefficient, and obtains a correlation value between the input speech signal and the spreading code. Since the spreading code uses a code having a high autocorrelation such as an M sequence or a Gord sequence, a peak component is extracted from the correlation value output from the correlator 245 at the cycle of the spreading code. The correlation value (peak intensity) at the extracted peak is output to the control unit 22. The control unit 22 functionally includes a volume estimation unit 221 and a volume value storage unit 222, and the volume estimation unit 221 refers to the volume value storage unit 222 with the peak intensity input from the correlator 245. The volume of the playback device 1 is estimated. That is, the volume value storage unit 222 stores the estimated volume value of the playback device 1 with respect to the peak intensity, and the volume estimation unit 221 reads the estimated volume value corresponding to the extracted peak intensity, thereby Can be estimated. The control unit 22 sets the adjustment amount of the volume adjustment unit 27 according to the estimated volume value.

ピーク強度に対する音量値は、最初に各装置を設置したとき(初期設定時)に再生装置1の音量を変化させて、それぞれの音量におけるピーク強度を測定してデータベース化しておいてもよいし、1または数点のデータを記憶しておき、都度音量値を算出するようにしてもよい。マイク30が固定されている場合、再生装置1の制御部11が音量調整部16の音量調整量を変更すると、拡散符号の音量も変化し、SN比が変化するため、ピーク強度の変化は、聴取位置における音量変化に相当する。例えば、再生装置1の操作部15の操作に応じて制御部11が音量調整部16の音量調整量を大きく設定すると、拡散符号のSN比が高くなり、ピーク強度が高くなる。したがって、音量推定部221は、ピーク強度が高くなれば、再生装置1の音量が大きくなったと推定し、自装置の音量を大きくする。   The volume value with respect to the peak intensity may be stored in a database by changing the volume of the playback device 1 when each apparatus is first installed (initial setting), measuring the peak intensity at each volume, One or several points of data may be stored, and the volume value may be calculated each time. When the microphone 30 is fixed, when the control unit 11 of the playback device 1 changes the volume adjustment amount of the volume adjustment unit 16, the volume of the spread code also changes and the SN ratio changes. This corresponds to a change in volume at the listening position. For example, when the control unit 11 sets the volume adjustment amount of the volume adjustment unit 16 large in accordance with the operation of the operation unit 15 of the playback device 1, the SN ratio of the spread code increases and the peak intensity increases. Therefore, the volume estimation unit 221 estimates that the volume of the playback apparatus 1 has increased when the peak intensity increases, and increases the volume of the own apparatus.

この様にして再生装置2は、再生装置1の音量を推定し、再生装置1との音量バランスを自動調整することができる。例えば、再生装置1がピアノ音を再生し、再生装置2が伴奏音を再生する場合であっても、再生装置2が再生装置1の音量にあわせて音量を変化させるため、常に適切な音量バランスで再生されることになる。   In this way, the playback device 2 can estimate the volume of the playback device 1 and automatically adjust the volume balance with the playback device 1. For example, even when the playback device 1 plays back a piano sound and the playback device 2 plays back an accompaniment sound, the playback device 2 changes the volume in accordance with the volume of the playback device 1, so that an appropriate volume balance is always maintained. Will be played.

また、再生装置1が自身の音量調整量を音量情報として音声信号に重畳し、再生装置2が重畳されている音量情報を復調して音量調整を行うように構成することも可能である。音量情報の重畳方式は、どの様な方式であってもよいが、例えば、拡散符号を音量情報(0,1のデータ符号列とする。)で位相変調することにより行う。   In addition, the playback device 1 may be configured to superimpose its own volume adjustment amount on the audio signal as volume information, and the playback device 2 may perform volume adjustment by demodulating the superimposed volume information. The volume information superimposing method may be any method, for example, by phase-modulating the spreading code with volume information (0, 1 data code string).

図2(C)は、スペクトラム拡散を用いる場合の重畳部14の構成の一例を示すブロック図である。この例では、拡散符号発生部142が出力するM系列の拡散符号と音量情報(−1,1に2値化した符号列)を乗算器144で乗算することにより、拡散符号を位相変調する。すなわち、データ符号が1の場合には位相が正転、ビットデータが0の場合には位相が反転した拡散符号となる。   FIG. 2C is a block diagram illustrating an example of the configuration of the superimposing unit 14 when using spread spectrum. In this example, the multiplier 144 multiplies the M-sequence spread code output from the spread code generator 142 and the volume information (a code string binarized into −1 and 1) by the multiplier 144, thereby phase-modulating the spread code. That is, when the data code is 1, the phase is normal and when the bit data is 0, the phase is inverted.

位相変調後の拡散符号は、XOR回路145に入力される。XOR回路145は、乗算器144から入力された符号と遅延器146を経て入力された1サンプル前の出力符号の排他的論理和を出力する。差動符号化後の信号は、−1,1で2値化しておくものとする。−1,1に2値化した差動符号を出力することで、復調側では、連続する2サンプルの差動符号を乗算することにより差動符号化前の拡散符号を抽出することができる。   The spread code after phase modulation is input to the XOR circuit 145. The XOR circuit 145 outputs an exclusive OR of the code input from the multiplier 144 and the output code one sample before input via the delay unit 146. The signal after differential encoding is binarized by -1,1. By outputting the differential code binarized to −1 and 1, the demodulation side can extract the spreading code before differential encoding by multiplying the differential code of two consecutive samples.

そして、差動符号化した拡散符号は、LPF147においてベースバンド内で帯域制限され、乗算器148に入力される。乗算器148は、キャリア信号発生器149が出力するキャリア信号(コンテンツの音声信号より高域のキャリア信号)とLPF147の出力信号を乗算し、差動符号化後の拡散符号をパスバンドに周波数シフトする。なお、差動符号化後の拡散符号は、アップサンプリングしてから周波数シフトしてもよい。周波数シフトされた後の拡散符号は、加算器141で音声信号と合成される。   Then, the differentially encoded spreading code is band-limited within the baseband by the LPF 147 and input to the multiplier 148. The multiplier 148 multiplies the carrier signal output from the carrier signal generator 149 (carrier signal higher in frequency than the audio signal of the content) and the output signal of the LPF 147, and frequency-shifts the spread code after differential encoding to the passband. To do. The spread code after differential encoding may be frequency shifted after up-sampling. The spread code after the frequency shift is combined with the audio signal by the adder 141.

以上のようにして、データ符号列(音量情報)が重畳された音声が放音される。   As described above, the sound on which the data code string (volume information) is superimposed is emitted.

図3(C)は、音量情報を復号する場合の復調部24の構成を示すブロック図である。復調部24に入力された音声信号は、HPF241に入力される。HPF241の出力信号は、遅延器242および乗算器243に入力される。遅延器242の遅延量は、差動符号の1サンプル分の時間に設定される。差動符号をアップサンプリングしている場合、アップサンプリング後の1サンプル分の時間に設定される。乗算器243は、HPF241から入力される信号と、遅延器242から出力される1サンプル前の信号とを乗算し、遅延検波処理を行う。差動符号化された信号は、−1,1に2値化されており、1サンプル前の符号からの位相変化を示したものであるため、1サンプル前の信号と乗算することにより、差動符号化前の音量情報(拡散符号)が抽出される。   FIG. 3C is a block diagram showing the configuration of the demodulator 24 when decoding volume information. The audio signal input to the demodulator 24 is input to the HPF 241. The output signal of the HPF 241 is input to the delay unit 242 and the multiplier 243. The delay amount of the delay unit 242 is set to a time corresponding to one sample of the differential code. When the differential code is upsampled, it is set to the time for one sample after the upsampling. The multiplier 243 multiplies the signal input from the HPF 241 by the signal one sample before output from the delay unit 242, and performs delay detection processing. The differentially encoded signal is binarized to −1 and 1, and indicates the phase change from the code one sample before. Therefore, by multiplying the signal one sample before, the difference is obtained. Volume information (spread code) before moving encoding is extracted.

そして、乗算器243の出力信号は、LPF244を経てベースバンド信号として抽出され、相関器245に入力される。相関器245が出力する相関値は、ピーク検出部246で拡散符号の周期(データ符号の周期)で正負のピーク成分が抽出される。符号判定部247は、各ピーク成分を音量情報のデータ符号(0,1)として復号する。   The output signal of the multiplier 243 is extracted as a baseband signal via the LPF 244 and input to the correlator 245. From the correlation value output by the correlator 245, the peak detector 246 extracts positive and negative peak components in the spreading code period (data code period). The code determination unit 247 decodes each peak component as a data code (0, 1) of the volume information.

制御部22は、復調部24が復号した音量情報に応じて再生装置1の音量を推定し、音量調整部27の音量を調整する。以上のようにして、再生装置1との音量バランスを自動調整することができる。   The control unit 22 estimates the volume of the playback device 1 according to the volume information decoded by the demodulation unit 24 and adjusts the volume of the volume adjustment unit 27. As described above, the volume balance with the playback device 1 can be automatically adjusted.

なお、重畳部14は、音量情報に限らず、他の情報を重畳してもよい。例えば、再生するコンテンツを特定するための情報やコンテンツの再生タイミングを示す同期情報を重畳し、再生装置1と再生装置2でコンテンツの同期再生を行ってもよい。   In addition, the superimposition part 14 may superimpose not only volume information but other information. For example, the playback device 1 and the playback device 2 may perform synchronized playback of content by superimposing information for specifying the content to be played back and synchronization information indicating the playback timing of the content.

同期再生を行う場合、再生装置1が再生開始からの時間経過を示す情報を同期情報として重畳し、再生装置2がこの時間経過を示す情報に応じて音声を再生するように構成してもよいが、コンテンツデータがMIDIデータに準じた形式である場合、上記拡散符号のピーク抽出タイミングを基準クロックとして用い、同期再生を行うことも可能である。この場合、制御部11は、基準クロックの時間間隔で拡散符号を出力するように重畳部14に設定する。再生装置2の再生部26は、定期的に算出される相関値のピークを基準クロックとしてシーケンサを作動させ、自動演奏を行うことが可能である。   When performing synchronized playback, the playback device 1 may superimpose information indicating the passage of time from the start of playback as synchronization information, and the playback device 2 may play back sound according to the information indicating the passage of time. However, when the content data is in a format conforming to MIDI data, it is also possible to perform synchronous reproduction using the peak extraction timing of the spread code as a reference clock. In this case, the control unit 11 sets the superimposition unit 14 to output the spread code at the time interval of the reference clock. The playback unit 26 of the playback apparatus 2 can perform an automatic performance by operating a sequencer using a peak of a correlation value calculated periodically as a reference clock.

なお、楽音発生タイミングと基準クロックとの時間差に関する情報を重畳しておけば、復調側でさらに高精度な同期再生を行うことができる。また、ノートナンバやベロシティ等の演奏情報も重畳しておけば、復調側でMIDIデータを記憶していなくとも、自動演奏を行うことができる。   If information on the time difference between the musical sound generation timing and the reference clock is superimposed, it is possible to perform synchronized reproduction with higher accuracy on the demodulation side. If performance information such as note number and velocity is also superimposed, automatic performance can be performed without storing MIDI data on the demodulation side.

なお、ピーク強度による音量の推定と、位相変調による各種情報の復号は、同時に行うことも可能である。例えば、ピーク強度で音量を推定しながら、同期情報を復号して同期再生を行う。   Note that the estimation of the volume based on the peak intensity and the decoding of various kinds of information based on the phase modulation can be performed simultaneously. For example, the synchronization information is decoded and the synchronized reproduction is performed while estimating the volume by the peak intensity.

なお、上述の例では、再生装置1がコンテンツを再生してスピーカ10から音声として放音する構成を示したが、再生装置1に接続される自動演奏楽器(例えば自動演奏ピアノ)を用いて楽音を発生させる態様とすることも可能である。自動演奏ピアノは、入力されたMIDIデータに応じて、ピアノ内部のキーアクションに取り付けられたソレノイドを作動させて打鍵を行うアコースティック楽器である。   In the above-described example, the configuration is shown in which the playback device 1 plays back the content and emits the sound as sound from the speaker 10. However, the musical sound using an automatic musical instrument (for example, an automatic performance piano) connected to the playback device 1 is shown. It is also possible to adopt a mode for generating. The automatic performance piano is an acoustic musical instrument that performs keystrokes by operating a solenoid attached to a key action inside the piano according to input MIDI data.

この場合、再生装置1は、図4(B)に示すように、制御部11、コンテンツデータ格納部12、操作部15、音量調整部16、再生制御部17および変調音声生成部18を備えた構成となる。再生制御部17は、コンテンツデータ格納部12に記憶されているMIDIデータを読み出してベロシティ等の音量パラメータを調整した後、自動演奏楽器19に出力する。再生制御部17の音量パラメータの調整量は、制御部11によって調整される。   In this case, the playback apparatus 1 includes a control unit 11, a content data storage unit 12, an operation unit 15, a volume adjustment unit 16, a playback control unit 17, and a modulated audio generation unit 18, as shown in FIG. It becomes composition. The reproduction control unit 17 reads the MIDI data stored in the content data storage unit 12 and adjusts the volume parameter such as velocity, and then outputs it to the automatic musical instrument 19. The adjustment amount of the volume parameter of the reproduction control unit 17 is adjusted by the control unit 11.

変調音声生成部18は、図2(B)や図2(C)に示した重畳部14と同様の構成であるが、図4(C)または図4(D)に示すように、コンテンツの音声信号が入力される系統であるLPF140や加算器141の構成が省略され、拡散符号がスピーカ10に直接出力されるものである。すなわち、この例では、スピーカ10からは変調音声だけが出力される。   The modulated audio generation unit 18 has the same configuration as the superposition unit 14 shown in FIGS. 2B and 2C, but as shown in FIG. 4C or FIG. The configuration of the LPF 140 and the adder 141 that are systems to which the audio signal is input is omitted, and the spread code is directly output to the speaker 10. That is, in this example, only the modulated sound is output from the speaker 10.

図4(C)に示す例の場合も、操作部15の操作によって制御部11が再生制御部17の音量パラメータを調整すると、制御部11は、音量調整部16の音量調整量を変更し、自動演奏楽器19の音量変化に応じて変調音声の音量を変化させる。または、自動演奏楽器19の音量パラメータに相当する音量情報が重畳された変調音声を放音する。これにより、再生装置2は、自動演奏楽器19の音量を推定し、自動演奏楽器19との音量バランスを自動調整することができる。   4C, when the control unit 11 adjusts the volume parameter of the playback control unit 17 by operating the operation unit 15, the control unit 11 changes the volume adjustment amount of the volume adjustment unit 16, The volume of the modulated sound is changed according to the volume change of the automatic musical instrument 19. Alternatively, the modulated sound on which the volume information corresponding to the volume parameter of the automatic musical instrument 19 is superimposed is emitted. Thus, the playback device 2 can estimate the volume of the automatic musical instrument 19 and automatically adjust the volume balance with the automatic musical instrument 19.

<<応用例1>>
図5(A)は、応用例1に係る再生装置2の構成を示すブロック図である。この場合、再生装置2は、図3(A)に示した構成に加え、再生部26の再生した音声に変調成分を重畳する重畳部28を備えている。
<< Application Example 1 >>
FIG. 5A is a block diagram illustrating a configuration of the playback device 2 according to the application example 1. In this case, the playback apparatus 2 includes a superimposition unit 28 that superimposes the modulation component on the audio reproduced by the playback unit 26 in addition to the configuration shown in FIG.

重畳部28の構成は、図2(B)または図2(C)に示した重畳部14の構成と同様である。この場合、再生装置2は、聴取位置(マイク30が設置された位置)における自身の音量を推定するための変調成分を重畳した音声をスピーカ20から放音する。ただし、再生装置2で重畳する拡散符号は、再生装置1で重畳する拡散符号とは異なる符号を用いる。   The configuration of the superposition unit 28 is the same as the configuration of the superposition unit 14 illustrated in FIG. 2B or 2C. In this case, the playback device 2 emits sound from the speaker 20 on which the modulation component for estimating the sound volume at the listening position (position where the microphone 30 is installed) is superimposed. However, the spreading code to be superimposed by the reproduction apparatus 2 uses a code different from the spreading code to be superimposed by the reproduction apparatus 1.

この場合、復調部24は、図5(B)に示すように、収音した音声信号は、複数の相関器245に入力され、再生装置1で重畳する拡散符号との相関値と、再生装置2で重畳する拡散符号との相関値と、が別々に算出される。音量推定部221は、それぞれの相関器245から入力されるピーク強度に基づいて、再生装置1の音量および再生装置2の音量(聴取位置における音量)を推定し、予め設定された音量バランスとなるように音量調整部27の音量を設定する。   In this case, as shown in FIG. 5B, the demodulator 24 inputs the collected audio signals to the plurality of correlators 245 and correlates the spread value with the spreading code superimposed by the reproducing apparatus 1 and the reproducing apparatus. 2 and the correlation value with the spreading code superimposed at 2 are calculated separately. The volume estimation unit 221 estimates the volume of the playback device 1 and the volume of the playback device 2 (volume at the listening position) based on the peak intensities input from the correlators 245, and has a preset volume balance. Thus, the volume of the volume adjustment unit 27 is set.

以上の構成により、各再生装置のスピーカの配置、聴取位置、部屋の構造等、再生環境が変更された場合であっても、より正確な音量バランスに調整することができる。   With the above configuration, it is possible to adjust to a more accurate volume balance even when the reproduction environment such as the speaker arrangement, listening position, and room structure of each reproduction apparatus is changed.

<<応用例2>>
図6は、応用例2に係る音響システムの構成を示すブロック図である。この例では、再生装置2に複数のスピーカ20A、スピーカ20Bが接続されている。この場合、再生装置2は、図7に示すように、スピーカ20Aの出力系統に重畳部28Aおよび音量調整部27Aを備え、スピーカ20Bの出力系統に重畳部28Bおよび音量調整部27Bを備えている。
<< Application Example 2 >>
FIG. 6 is a block diagram illustrating a configuration of an acoustic system according to Application Example 2. In this example, a plurality of speakers 20 </ b> A and 20 </ b> B are connected to the playback device 2. In this case, as shown in FIG. 7, the playback device 2 includes a superimposing unit 28A and a volume adjusting unit 27A in the output system of the speaker 20A, and includes a superimposing unit 28B and a volume adjusting unit 27B in the output system of the speaker 20B. .

この場合、スピーカ毎に異なる拡散符号が重畳される。つまり、再生装置1のスピーカ10の放音音声に重畳される拡散符号、スピーカ20Aの放音音声に重畳される拡散符号、およびスピーカ20Bの放音音声に重畳される拡散符号がそれぞれ異なるものとなる。復調部24は、スピーカの数だけ相関器を備え、それぞれ異なる拡散符号との相関値を求め、復調を行う。   In this case, a different spreading code is superimposed for each speaker. That is, the spreading code superimposed on the sound emitted from the speaker 10 of the playback apparatus 1, the spreading code superimposed on the sound emitted from the speaker 20A, and the spreading code superimposed on the sound emitted from the speaker 20B are different. Become. The demodulator 24 includes as many correlators as the number of speakers, obtains correlation values with different spreading codes, and performs demodulation.

以上のように、再生装置1および再生装置2に接続されるスピーカの数は1つに限らず、複数であってもスピーカ毎に異なる拡散符号を用いることで、音量を推定することができ、音量バランスを自動調整することができる。   As described above, the number of speakers connected to the playback device 1 and the playback device 2 is not limited to one, and even if there are a plurality of speakers, the volume can be estimated by using different spreading codes for each speaker. Volume balance can be adjusted automatically.

<<応用例3>>
次に、図8は、応用例3に係る音響システムの構成を示すブロック図である。この例では、再生装置2を複数設け、それぞれにスピーカ20を接続する。この例における再生装置2の構成は、図5(A)に示したように、再生部26の再生した音声に変調成分を重畳する重畳部28を備えているものである。
<< Application Example 3 >>
Next, FIG. 8 is a block diagram illustrating a configuration of an acoustic system according to Application Example 3. In this example, a plurality of playback devices 2 are provided, and a speaker 20 is connected to each. The configuration of the reproduction apparatus 2 in this example includes a superimposition unit 28 that superimposes a modulation component on the audio reproduced by the reproduction unit 26, as shown in FIG.

この場合、各再生装置2は、他の装置のスピーカから放音された音声の変調成分を復調し、他の装置の音量を推定して音量調整量を変更する構成となり、双方向に音量を推定する構成となる。この場合、いずれか一方の再生装置2の音量調整量が基準となり、他方の再生装置2が音量調整量を変更する構成とすればよい。   In this case, each playback device 2 is configured to demodulate the modulation component of the sound emitted from the speaker of the other device, estimate the volume of the other device, and change the volume adjustment amount. The configuration is to be estimated. In this case, the volume adjustment amount of one of the playback devices 2 may be used as a reference, and the other playback device 2 may be configured to change the volume adjustment amount.

<<応用例4>>
図9は、応用例4に係る音響システムの構成を示すブロック図である。この例では、図1の音響システムに対し、マイク30に代えて、マイク51を内蔵したリモコン5を備えている。リモコン5は、専用の機器であってもよいが、デジタルオーディオプレーヤ等、マイクおよびCPU等のプロセッサを備えた装置により実現することも可能である。この例では、リモコン5と再生装置2は、無線LANや赤外線通信などの無線通信を行う。
<< Application Example 4 >>
FIG. 9 is a block diagram illustrating a configuration of an acoustic system according to Application Example 4. In this example, a remote controller 5 having a built-in microphone 51 is provided instead of the microphone 30 with respect to the acoustic system of FIG. The remote controller 5 may be a dedicated device, but can also be realized by a device such as a digital audio player or the like that includes a microphone and a processor such as a CPU. In this example, the remote controller 5 and the playback device 2 perform wireless communication such as wireless LAN and infrared communication.

図10は、応用例4に係る再生装置2およびリモコン5の構成を示すブロック図である。この場合、再生装置2は、図3(A)に示した再生装置2に対して、操作部21および復調部24が省略された構成となっている。操作部21の機能は、リモコン5の操作部53により実現され、復調部24の機能は、リモコン5の復調部54により実現される。   FIG. 10 is a block diagram illustrating configurations of the playback device 2 and the remote controller 5 according to the application example 4. In this case, the playback device 2 has a configuration in which the operation unit 21 and the demodulation unit 24 are omitted from the playback device 2 illustrated in FIG. The function of the operation unit 21 is realized by the operation unit 53 of the remote controller 5, and the function of the demodulation unit 24 is realized by the demodulation unit 54 of the remote controller 5.

すなわち、リモコン5は、マイク51で収音した音声信号を復調部54に入力し、相関値のピーク強度を算出し、制御部55に出力する。または、リモコン5は、復調部54で復号した音量情報を制御部55に出力する。制御部55は、相関値のピーク強度から算出した音量推定値や、入力された音量情報を、無線通信を介して再生装置2の制御部22に出力する。制御部22は、無線通信を介して受信した音量推定値や音量情報に基づいて音量調整部27の音量調整量を変更する。   That is, the remote controller 5 inputs the audio signal collected by the microphone 51 to the demodulator 54, calculates the peak intensity of the correlation value, and outputs it to the controller 55. Alternatively, the remote controller 5 outputs the volume information decoded by the demodulator 54 to the controller 55. The control unit 55 outputs the estimated volume value calculated from the peak intensity of the correlation value and the input volume information to the control unit 22 of the playback apparatus 2 via wireless communication. The control unit 22 changes the volume adjustment amount of the volume adjustment unit 27 based on the estimated volume value and volume information received via wireless communication.

<<応用例5>>
図11は、応用例5に係る音響システムの構成を示すブロック図である。この例では、再生装置2がインターネット等のネットワーク7を介して分析サーバ9に接続されている。
<< Application Example 5 >>
FIG. 11 is a block diagram illustrating a configuration of an acoustic system according to Application Example 5. In this example, the playback device 2 is connected to the analysis server 9 via a network 7 such as the Internet.

図12は、応用例5に係る再生装置2および分析サーバ9の構成を示すブロック図である。分析サーバ9は、制御部92、および復調部94を備えている。この例における再生装置2は、図3(A)に示した再生装置2に対して、復調部24が省略された構成となっている。   FIG. 12 is a block diagram illustrating configurations of the playback device 2 and the analysis server 9 according to the application example 5. The analysis server 9 includes a control unit 92 and a demodulation unit 94. The playback apparatus 2 in this example has a configuration in which the demodulator 24 is omitted from the playback apparatus 2 shown in FIG.

この例では、制御部22は、マイク30で収音した音声信号を、ネットワーク7を介して分析サーバ9の制御部92に送信する。制御部92は、受信した音声信号を復調部94に入力する。復調部94は、図3(A)で示した復調部24と同一の構成、機能を有し、相関値のピーク強度や音量情報を復調する。制御部92は、復調した相関値のピーク強度に基づいて再生装置1の音量調整量を推定した音量推定値を算出し、再生装置2の制御部22に送信する。または、制御部92は、復調した音量情報を再生装置2の制御部22に送信する。再生装置2の制御部22は、受信した音量推定値や音量情報に基づいて、音量調整部27の音量調整量を変更する。   In this example, the control unit 22 transmits the audio signal collected by the microphone 30 to the control unit 92 of the analysis server 9 via the network 7. The control unit 92 inputs the received audio signal to the demodulation unit 94. The demodulator 94 has the same configuration and function as the demodulator 24 shown in FIG. 3A, and demodulates the peak intensity and volume information of the correlation value. The control unit 92 calculates a sound volume estimated value obtained by estimating the sound volume adjustment amount of the playback device 1 based on the demodulated peak value of the correlation value, and transmits the sound volume estimated value to the control unit 22 of the playback device 2. Alternatively, the control unit 92 transmits the demodulated volume information to the control unit 22 of the playback device 2. The control unit 22 of the playback device 2 changes the volume adjustment amount of the volume adjustment unit 27 based on the received volume estimation value and volume information.

このように、マイクで収音した音声信号は、分析サーバで分析し、再生装置2は、収音した音声信号を送信し、分析結果を受信して動作を行う態様とすることも可能である。   As described above, the sound signal collected by the microphone is analyzed by the analysis server, and the playback device 2 can transmit the collected sound signal and receive the analysis result to perform the operation. .

<<応用例6>>
図13は、応用例6に係る再生装置2および分析サーバ9の構成を示すブロック図である。分析サーバ9は、図12に示した構成に加え、コンテンツ情報格納部95を備えている。また、この例における再生装置2は、図3(A)に示した例と同様の構成を有する。
<< Application Example 6 >>
FIG. 13 is a block diagram illustrating configurations of the playback device 2 and the analysis server 9 according to the application example 6. The analysis server 9 includes a content information storage unit 95 in addition to the configuration shown in FIG. In addition, the playback device 2 in this example has the same configuration as the example shown in FIG.

この例では、再生装置2の復調部24は、音量情報に加えて、上記コンテンツを特定するための情報を復調する。すなわち、再生装置1の重畳部14は、音量情報に加えて、自装置が再生しているコンテンツを特定するための情報(曲名、歌手名等の曲情報や、曲毎に固有の曲ID等)を音声信号に重畳する。再生装置2の制御部22は、復調した再生装置1の音量情報とコンテンツ特定情報をネットワーク7を介して分析サーバ9の制御部92に送信する。   In this example, the demodulator 24 of the playback device 2 demodulates information for specifying the content in addition to the volume information. That is, in addition to the volume information, the superimposing unit 14 of the playback apparatus 1 includes information for specifying the content being played back by the own apparatus (song information such as a song name and singer name, a song ID unique to each song, etc. ) Is superimposed on the audio signal. The control unit 22 of the playback device 2 transmits the demodulated volume information and content specifying information of the playback device 1 to the control unit 92 of the analysis server 9 via the network 7.

制御部92は、受信したコンテンツ特定情報でコンテンツ情報格納部95を参照する。図13(B)に示すように、コンテンツ情報格納部95は、コンテンツ毎に基準音量が記載されており、制御部92は、受信したコンテンツ特定情報に該当するコンテンツの基準音量を読み出す。そして、制御部92は、基準音量と、受信した再生装置1の音量情報に基づいて、再生装置2が再生すべき音量を算出する。例えば、再生装置2が再生装置1と同じコンテンツを再生する場合、聴取位置において基準音量となるように、基準音量に対する再生装置1の音量不足分を再生装置2の音量とする。再生装置2が再生装置1と異なるコンテンツを再生する場合(例えば同一曲のピアノ音のコンテンツに関連する伴奏音のコンテンツを再生する場合)、コンテンツ情報格納部95は、図13(C)に示すように、コンテンツ毎(パート毎)の基準音量を記憶しておく。そして、制御部92は、再生装置1と再生装置2の音量比がパート間の基準音量の比となるように、再生装置2の音量を算出する。   The control unit 92 refers to the content information storage unit 95 with the received content specifying information. As shown in FIG. 13B, the content information storage unit 95 describes the reference volume for each content, and the control unit 92 reads the reference volume of the content corresponding to the received content specifying information. Then, the control unit 92 calculates the volume to be played by the playback device 2 based on the reference volume and the received volume information of the playback device 1. For example, when the playback device 2 plays back the same content as the playback device 1, the volume shortage of the playback device 1 with respect to the reference volume is set as the volume of the playback device 2 so that the reference volume is reached at the listening position. When the playback device 2 plays back content different from that of the playback device 1 (for example, when playing back accompaniment sound content related to piano sound content of the same song), the content information storage unit 95 is shown in FIG. Thus, the reference volume for each content (each part) is stored. Then, the control unit 92 calculates the volume of the playback device 2 so that the volume ratio between the playback device 1 and the playback device 2 becomes the ratio of the reference volume between parts.

このとき、再生装置2が自身の再生するコンテンツ(パート)を特定するための情報を分析サーバ9に送信してもよい。また、再生装置2が自装置の再生機能(オーディオ再生機能、自動演奏機能等)を示す情報を分析サーバ9に送信し、分析サーバ9において、再生装置2が再生すべきコンテンツ(パート)を特定し、そのコンテンツの再生音量を算出する態様としてもよい。この場合、再生装置2は、分析サーバ9で特定されたコンテンツを示す情報を受信し、受信した情報に示されるコンテンツを再生する。   At this time, the playback device 2 may transmit information for specifying the content (part) to be played back to the analysis server 9. Further, the playback device 2 transmits information indicating the playback function (audio playback function, automatic performance function, etc.) of the own device to the analysis server 9, and the analysis server 9 specifies the content (part) to be played back by the playback device 2. The reproduction volume of the content may be calculated. In this case, the playback device 2 receives information indicating the content specified by the analysis server 9 and plays back the content indicated by the received information.

分析サーバ9の制御部92は、以上のようにして算出した音量等の各種情報を再生装置2の制御部22に送信する。再生装置2の制御部22は、受信した情報に基づいて、コンテンツを再生し、音量調整部27の音量調整量を変更する。このようにして、再生装置2は、再生装置1が再生しているコンテンツを特定する動作を行い、音量情報はサーバからダウンロードする態様とすることも可能である。   The control unit 92 of the analysis server 9 transmits various information such as the volume calculated as described above to the control unit 22 of the playback device 2. Based on the received information, the control unit 22 of the playback device 2 plays back the content and changes the volume adjustment amount of the volume adjustment unit 27. In this way, the playback device 2 can perform an operation of specifying the content being played back by the playback device 1, and the volume information can be downloaded from the server.

1…再生装置
2…再生装置
10…スピーカ
11…制御部
12…コンテンツデータ格納部
13…再生部
14…重畳部
15…操作部
16…音量調整部
17…再生制御部
18…変調音声生成部
19…自動演奏楽器
20…スピーカ
21…操作部
22…制御部
24…復調部
25…コンテンツデータ格納部
26…再生部
27…音量調整部
28…重畳部
30…マイク
DESCRIPTION OF SYMBOLS 1 ... Playback apparatus 2 ... Playback apparatus 10 ... Speaker 11 ... Control part 12 ... Content data storage part 13 ... Playback part 14 ... Superimposition part 15 ... Operation part 16 ... Volume adjustment part 17 ... Playback control part 18 ... Modulation sound generation part 19 ... automatic musical instrument 20 ... speaker 21 ... operation unit 22 ... control unit 24 ... demodulation unit 25 ... content data storage unit 26 ... reproduction unit 27 ... volume adjustment unit 28 ... superimposition unit 30 ... microphone

Claims (5)

音声を再生する再生手段と、
変調成分が含まれた音声信号を収音する収音手段と、
前記音声信号に含まれる変調成分に基づいて、他の機器の音量を推定する音量推定手段と、
前記音量推定手段で推定した音量に応じて、前記再生手段の音量を制御する音量制御手段と、
を備え
前記音声信号に含まれる変調成分は、所定の拡散符号を含み、
前記音量推定手段は、収音した音声信号と前記所定の拡散符号との相関値を算出し、算出した相関値の強度に基づいて他の機器の音量を推定することを特徴とする音響機器。
Playback means for playing back audio;
Sound collection means for collecting an audio signal including a modulation component;
Volume estimation means for estimating the volume of another device based on the modulation component included in the audio signal;
Volume control means for controlling the volume of the playback means according to the volume estimated by the volume estimation means;
Equipped with a,
The modulation component included in the audio signal includes a predetermined spreading code,
The sound volume estimation unit calculates a correlation value between the collected sound signal and the predetermined spreading code, and estimates a volume of another device based on the calculated intensity of the correlation value .
前記音声信号に含まれる変調成分は、当該音声信号を出力した機器の音量情報を含み、
前記音量推定手段は、前記音量情報を復調し、復調した音量情報に基づいて他の機器の音量を推定することを特徴とする請求項1に記載の音響機器。
The modulation component included in the audio signal includes volume information of a device that has output the audio signal,
Acoustic device according to claim 1 wherein the volume estimating means, for demodulating the sound volume information, and estimates the volume of other devices based on the volume information obtained by demodulating.
前記音声信号に含まれる変調成分は、コンテンツの再生タイミングを示す同期情報を含み、
前記同期情報に基づいて、他の機器の音声と前記再生手段が再生する音声を同期させる同期手段を備えた請求項1または請求項2に記載の音響機器。
The modulation component included in the audio signal includes synchronization information indicating the reproduction timing of the content,
On the basis of the synchronization information, the acoustic apparatus according to claim 1 or claim 2 comprising a synchronizing means for audio and the reproduction means of another device synchronizes the playback audio.
前記再生手段が再生する音声に新たな変調成分を重畳する重畳手段を備え、
前記収音手段は、前記再生手段が再生した音声をさらに収音し、
前記音量推定手段は、前記新たな変調成分に基づいて自装置の音量をさらに推定し、
前記音量制御手段は、推定した各音量に基づいて音量バランスを決定し、前記再生手段の音量を制御することを特徴とする請求項1乃至請求項のいずれかに記載の音響機器。
Comprising superimposing means for superimposing a new modulation component on the sound reproduced by the reproducing means;
The sound collection means further collects the sound reproduced by the reproduction means,
The sound volume estimation means further estimates the sound volume of the device based on the new modulation component,
The audio device according to any one of claims 1 to 3 , wherein the volume control unit determines a volume balance based on each estimated volume and controls the volume of the reproduction unit.
請求項1乃至請求項のいずれかに記載の音響機器を複数備えた音響システムであって、
各音響機器は、前記再生手段が再生する音声に新たな変調成分を重畳する重畳手段を備え、
前記収音手段は、他の音響機器の再生手段が再生した音声を前記音声信号として収音し、
音量推定手段は、前記音声信号に含まれる変調成分に基づいて、他の音響機器の音量を推定することを特徴とする音響システム。
An acoustic system comprising a plurality of the acoustic devices according to any one of claims 1 to 3 ,
Each acoustic device includes superimposing means for superimposing a new modulation component on the sound reproduced by the reproducing means,
The sound collecting means picks up the sound reproduced by the reproducing means of another acoustic device as the sound signal,
The sound volume estimation means estimates a sound volume of another sound device based on a modulation component included in the sound signal.
JP2010078817A 2010-03-30 2010-03-30 Sound equipment and sound system Expired - Fee Related JP5549319B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010078817A JP5549319B2 (en) 2010-03-30 2010-03-30 Sound equipment and sound system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010078817A JP5549319B2 (en) 2010-03-30 2010-03-30 Sound equipment and sound system

Publications (2)

Publication Number Publication Date
JP2011211603A JP2011211603A (en) 2011-10-20
JP5549319B2 true JP5549319B2 (en) 2014-07-16

Family

ID=44942178

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010078817A Expired - Fee Related JP5549319B2 (en) 2010-03-30 2010-03-30 Sound equipment and sound system

Country Status (1)

Country Link
JP (1) JP5549319B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106981279B (en) * 2016-01-15 2020-02-07 森兰信息科技(上海)有限公司 Piano sound compensation method and system
WO2017121049A1 (en) 2016-01-15 2017-07-20 Findpiano Information Technology (Shanghai) Co., Ltd. Piano system and operating method thereof
CN107071648B (en) * 2017-06-19 2020-01-10 深圳市泰衡诺科技有限公司上海分公司 Sound playing adjusting system, device and method
JP7417478B2 (en) 2020-06-17 2024-01-18 Toa株式会社 Acoustic communication system, acoustic transmitting device, acoustic receiving device, program, and method for setting embedding strength of audio digital watermark

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4780375B2 (en) * 2005-05-19 2011-09-28 大日本印刷株式会社 Device for embedding control code in acoustic signal, and control system for time-series driving device using acoustic signal
JP4826508B2 (en) * 2007-02-27 2011-11-30 ヤマハ株式会社 Playback device and automatic performance device

Also Published As

Publication number Publication date
JP2011211603A (en) 2011-10-20

Similar Documents

Publication Publication Date Title
JP5782677B2 (en) Content reproduction apparatus and audio processing system
CN102169705B (en) tone reproduction apparatus and method
JP4398416B2 (en) Modulation device, modulation method, demodulation device, and demodulation method
WO2010016589A1 (en) Modulation device and demodulation device
JP5556074B2 (en) Control device
JP5665887B2 (en) Watermark generator, watermark decoder, method of providing watermark signal, method of providing binary message data based on watermarked signal and computer program using improved synchronization concept
JP5567150B2 (en) Watermark generator using differential encoding, watermark decoder, method for providing watermark signal based on binary message data, method for providing binary message data based on watermarked signal, and computer program
JP2007104598A5 (en)
JP5953687B2 (en) Information processing apparatus and program
JP5556075B2 (en) Performance information output device and performance system
JP5549319B2 (en) Sound equipment and sound system
JP5665885B2 (en) Watermark generator using two-dimensional bit diffusion, watermark decoder, method for providing watermark signal based on binary message data, method for providing binary message data based on watermarked signal, and computer program
JP5665886B2 (en) Watermark decoder and method for providing binary message data
JP5604824B2 (en) Tempo information output device, sound processing system, and electronic musical instrument
JP5447072B2 (en) Echo canceller and speech processing system
JP5556076B2 (en) Sequence data output device, sound processing system, and electronic musical instrument
JP2010204499A (en) Data superposing device, communication system and sound communication method
JP5664419B2 (en) Acoustic communication system
JP6683236B2 (en) Information transmission method and information transmission system
JP6631005B2 (en) Information transmitting apparatus, acoustic communication system, and acoustic watermark superimposing method
JP2009271149A (en) Modulation device, information transmission system, audio signal processor, and modulation method
JP5568999B2 (en) Playback device, musical sound signal output device, playback system, and program
JP2009296617A (en) Modulation apparatus, modulation method, demodulation apparatus, and demodulation method
JP2009246788A (en) Modulation apparatus, demodulation apparatus, information transfer system, modulation method ,and demodulation method
JP2010081248A (en) Modulation apparatus, demodulation apparatus, communication system, and communication method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130121

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131022

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131217

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140422

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140505

R150 Certificate of patent or registration of utility model

Ref document number: 5549319

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees