JP2007013707A - Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program - Google Patents

Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program Download PDF

Info

Publication number
JP2007013707A
JP2007013707A JP2005192875A JP2005192875A JP2007013707A JP 2007013707 A JP2007013707 A JP 2007013707A JP 2005192875 A JP2005192875 A JP 2005192875A JP 2005192875 A JP2005192875 A JP 2005192875A JP 2007013707 A JP2007013707 A JP 2007013707A
Authority
JP
Japan
Prior art keywords
wireless speaker
wireless
speaker devices
audio signal
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005192875A
Other languages
Japanese (ja)
Inventor
Nobuyoshi Tomita
展由 富田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005192875A priority Critical patent/JP2007013707A/en
Publication of JP2007013707A publication Critical patent/JP2007013707A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To realize a wireless speaker system capable of easily synchronize phases of reproduced sounds from respective speaker devices. <P>SOLUTION: A wireless speaker system to be used to transmit an audio signal is used to measure distances to a plurality of wireless speaker devices 3, and the respective audio signals are delayed on the basis of the measured distances so that the respective reproduced sounds of the plurality of wireless speaker devices 3 may be synchronized at a listening position to thereby be able to easily synchronize phases of the reproduced sounds from the plurality of wireless speaker devices in a simple configuration. <P>COPYRIGHT: (C)2007,JPO&amp;INPIT

Description

本発明は、ワイヤレススピーカシステム、音声信号送信装置、再生音位相同期装置、再生音位相同期方法並びに再生音位相同期プログラムに関し、音声信号を無線を介して複数のスピーカ装置に送信して再生する場合に適用して好適なものである。   The present invention relates to a wireless speaker system, an audio signal transmission device, a reproduction sound phase synchronization device, a reproduction sound phase synchronization method, and a reproduction sound phase synchronization program, in which an audio signal is transmitted to a plurality of speaker devices via radio and reproduced. It is suitable for application to.

近年、アンプ等から出力される音声信号を電波や赤外線を介してワイヤレススピーカ装置に送信するようになされたワイヤレススピーカシステムが実用化されている(例えば、特許文献1参照)。
特開2004−336252公報
In recent years, a wireless speaker system configured to transmit an audio signal output from an amplifier or the like to a wireless speaker device via radio waves or infrared rays has been put into practical use (see, for example, Patent Document 1).
JP 2004-336252 A

かかるワイヤレススピーカシステムではスピーカケーブルが不要であることから、非使用時にはワイヤレススピーカ装置を押入等に収納しておき、使用時にのみワイヤレススピーカ装置を適当な場所に設置することが考えられる。また、各自が持参したワイヤレススピーカ装置を用いて一時的なワイヤレススピーカシステムを構築することも考えられる。   Since such a wireless speaker system does not require a speaker cable, it is conceivable that the wireless speaker device is housed in a press-in space when not in use, and the wireless speaker device is installed at an appropriate location only during use. It is also conceivable to construct a temporary wireless speaker system using the wireless speaker device brought by each person.

ところがこのような場合、各ワイヤレススピーカ装置の設置位置が定まらないため、聴取位置における各ワイヤレススピーカ装置からの再生音の位相が揃わなくなるという問題があった。   However, in such a case, since the installation position of each wireless speaker device is not fixed, there is a problem that the phase of the reproduced sound from each wireless speaker device at the listening position is not aligned.

このような複数のスピーカ装置からの再生音位相を同期させるため、ユーザの聴取位置にマイクロホン等の集音手段を配置するとともに特定の音声を各スピーカ装置から順次再生させ、当該音声が集音手段に到達する時間差に応じて各スピーカ装置からの再生音を遅延させることにより、聴取位置における再生音位相を同期させる方法が提案されている。   In order to synchronize the reproduction sound phases from such a plurality of speaker devices, sound collecting means such as a microphone is arranged at the listening position of the user and specific sound is sequentially reproduced from each speaker device, and the sound is collected by the sound collecting means. There has been proposed a method of synchronizing the reproduced sound phase at the listening position by delaying the reproduced sound from each speaker device in accordance with the time difference to reach.

ところがこのような再生音位相の同期方法では、別途集音手段が必要となって構成が複雑になるとともに、遅延時間を算出する際には上述した特定の音声を再生する必要があるため、ユーザは音楽等の聴取を中断しなければならないという問題があった。   However, in such a reproduction sound phase synchronization method, a separate sound collecting means is required and the configuration becomes complicated, and when calculating the delay time, it is necessary to reproduce the specific sound described above. Had the problem of having to stop listening to music.

本発明は以上の点を考慮してなされたもので、各スピーカ装置からの再生音の位相を容易に同期させることのできるワイヤレススピーカシステムを提案しようとするものである。   The present invention has been made in consideration of the above points, and an object of the present invention is to propose a wireless speaker system that can easily synchronize the phase of reproduced sound from each speaker device.

かかる課題を解決するため本発明においては、所定の無線方式を用いて音声信号を受信し、当該受信した音声信号を再生音として出力する複数のワイヤレススピーカ装置と、複数のワイヤレススピーカ装置それぞれに対して、無線方式を用いて音声信号を送信する音声信号送信装置と、無線方式を用いて音声信号送信装置を遠隔制御するとともに、複数のワイヤレススピーカ装置それぞれに対する距離を無線方式を用いて測定する測距手段を有するリモートコントローラと、複数のワイヤレススピーカ装置それぞれについての音声信号を、個別の遅延時間だけ遅延させる遅延手段と、測定された複数のワイヤレススピーカ装置それぞれに対する距離に基づいて、当該ワイヤレススピーカ装置それぞれから出力される再生音の位相がリモートコントローラの位置において同期するように、複数のワイヤレススピーカ装置についての上記遅延時間をそれぞれ算出する遅延時間算出手段とをワイヤレススピーカシステムに設けた。   In order to solve such a problem, in the present invention, a plurality of wireless speaker devices that receive a sound signal using a predetermined wireless method and output the received sound signal as a reproduced sound, and a plurality of wireless speaker devices respectively. In addition, an audio signal transmission device that transmits an audio signal using a wireless method and a remote control of the audio signal transmission device using a wireless method, and a distance measurement for each of a plurality of wireless speaker devices is measured using the wireless method. Based on a remote controller having a distance means, a delay means for delaying an audio signal for each of the plurality of wireless speaker devices by an individual delay time, and the measured distance to each of the plurality of wireless speaker devices, the wireless speaker device The phase of the playback sound output from each So as to synchronize the position of the controller, provided the delay time calculating means for calculating the delay time for a plurality of wireless speaker devices respectively to the wireless speaker system.

複数のワイヤレススピーカ装置それぞれに対する距離を、音声信号の送信に用いられる無線方式を用いて測定し、当該測定した距離に基づいて、複数のワイヤレススピーカ装置それぞれの再生音が聴取位置において同期するように各音声信号を遅延させることにより、簡易な構成で、複数のワイヤレススピーカ装置からの再生音の位相を容易に同期させることができる。   The distance to each of the plurality of wireless speaker devices is measured using a wireless method used for transmitting an audio signal, and the reproduced sound of each of the plurality of wireless speaker devices is synchronized at the listening position based on the measured distance. By delaying each audio signal, it is possible to easily synchronize the phases of reproduced sounds from a plurality of wireless speaker devices with a simple configuration.

本発明によれば、複数のワイヤレススピーカ装置それぞれに対する距離を、音声信号の送信に用いられる無線方式を用いて測定し、当該測定した距離に基づいて、複数のワイヤレススピーカ装置それぞれの再生音が聴取位置において同期するように各音声信号を遅延させることにより、簡易な構成で、複数のワイヤレススピーカ装置からの再生音の位相を容易に同期させ得るワイヤレススピーカシステムを実現することができる。   According to the present invention, the distance to each of the plurality of wireless speaker devices is measured using a wireless method used for transmitting the audio signal, and the reproduced sound of each of the plurality of wireless speaker devices is listened to based on the measured distance. By delaying each audio signal so as to be synchronized in position, it is possible to realize a wireless speaker system that can easily synchronize the phases of reproduced sounds from a plurality of wireless speaker devices with a simple configuration.

以下図面について、本発明の一実施の形態を詳述する。   Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.

(1)ワイヤレススピーカシステムの全体構成
図1において、1は全体として本発明を適用したワイヤレススピーカシステムを示し、ワイヤレスアンプ2と、複数のワイヤレススピーカ装置3と、リモートコントローラ(リモコン)4とで構成される。ワイヤレスアンプ2、ワイヤレススピーカ装置3及びリモコン4はそれぞれIEEE802.15.3a規格に基づくUWB(Ultra Wideband)方式の無線波を用いてアドホックネットワークを形成し、相互に通信を行う。UWB方式は1[ns]以下のパルス波を用いて非常に広範囲の周波数帯を使用する無線通信システムであり、10[m]程度の距離での高速通信を行い得るともに、パルス波の到達時間に基づいて、UWBデバイス同士の距離を数[cm]単位で測距することができる。
(1) Overall Configuration of Wireless Speaker System In FIG. 1, reference numeral 1 denotes a wireless speaker system to which the present invention is applied as a whole, and includes a wireless amplifier 2, a plurality of wireless speaker devices 3, and a remote controller (remote controller) 4. Is done. The wireless amplifier 2, the wireless speaker device 3, and the remote controller 4 form an ad hoc network using UWB (Ultra Wideband) radio waves based on the IEEE 802.15.3a standard, and communicate with each other. The UWB system is a wireless communication system that uses a very wide frequency band using a pulse wave of 1 [ns] or less, and can perform high-speed communication at a distance of about 10 [m], and the arrival time of the pulse wave. Based on the above, the distance between UWB devices can be measured in units of several [cm].

音声信号送信装置としてのワイヤレスアンプ2は、リモコン4から送信されるユーザ操作に応じた制御命令に従って動作し、外部のオーディオ機器(図示せず)から供給される音声信号を、UWB波を介して対応するワイヤレススピーカ装置3に送信する。各ワイヤレススピーカ装置3は、それぞれワイヤレスアンプ2から受信した音声信号を再生する。   The wireless amplifier 2 as an audio signal transmitting device operates in accordance with a control command according to a user operation transmitted from the remote controller 4, and transmits an audio signal supplied from an external audio device (not shown) via a UWB wave. The data is transmitted to the corresponding wireless speaker device 3. Each wireless speaker device 3 reproduces an audio signal received from the wireless amplifier 2.

上述したようにワイヤレススピーカシステム1では、ワイヤレスアンプ2とワイヤレススピーカ装置3との間で無線(UWB波)を介して音声信号を送信するようになされていることから、従来の有線式スピーカ装置に比べ、より容易にスピーカの移動や追加を行うことができる。   As described above, in the wireless speaker system 1, an audio signal is transmitted between the wireless amplifier 2 and the wireless speaker device 3 via radio (UWB wave), so that the conventional wired speaker device is used. In comparison, it is possible to move and add speakers more easily.

図2はワイヤレスアンプ2の構成を示し、制御部10は、操作部11を介して入力されたユーザ操作、及び送受信部13を介して受信したワイヤレススピーカ装置3からの制御信号に従ってワイヤレスアンプ2全体を制御する。   FIG. 2 shows the configuration of the wireless amplifier 2, and the control unit 10 controls the entire wireless amplifier 2 in accordance with a user operation input through the operation unit 11 and a control signal received from the wireless speaker device 3 through the transmission / reception unit 13. To control.

信号処理部12は制御部10の制御に応じて、外部のオーディオ機器から供給される1または複数チャンネルの音声信号に対して音量調整や音質調整等の各種処理を施し、送受信部13に供給する。   The signal processing unit 12 performs various processes such as volume adjustment and sound quality adjustment on one or a plurality of channels of audio signals supplied from an external audio device in accordance with control of the control unit 10 and supplies the processed signals to the transmission / reception unit 13. .

送受信部13はIEEE802.15.3a規格に基づくUWBデバイスでなり、各ワイヤレススピーカ装置3及びリモコン4との間で、UWB方式による1[ns]以下のパルス波を用いた広帯域高速無線通信を行う。ワイヤレスアンプ2の送受信部13は、信号処理部12から供給1または複数チャンネルの音声信号を、UWB波を介して対応するワイヤレススピーカ装置3に送信する。   The transmission / reception unit 13 is a UWB device based on the IEEE802.15.3a standard, and performs broadband high-speed wireless communication using a pulse wave of 1 [ns] or less according to the UWB method between each wireless speaker device 3 and the remote controller 4. . The transmission / reception unit 13 of the wireless amplifier 2 transmits the audio signal of one channel or a plurality of channels supplied from the signal processing unit 12 to the corresponding wireless speaker device 3 via the UWB wave.

図3はワイヤレススピーカ装置3の構成を示し、制御部20に対して送受信部21、信号処理部22、信号遅延部23が接続されている。送受信部21はIEEE802.15.3a規格に基づくUWBデバイスでなり、ワイヤレスアンプ2及びリモコン4との間でUWB方式による無線通信を行い、ワイヤレスアンプ2からUWB波を介して送信される音声信号を受信し、信号処理部22に供給する。   FIG. 3 shows a configuration of the wireless speaker device 3, and a transmission / reception unit 21, a signal processing unit 22, and a signal delay unit 23 are connected to the control unit 20. The transmission / reception unit 21 is a UWB device based on the IEEE802.15.3a standard, performs wireless communication by the UWB method between the wireless amplifier 2 and the remote controller 4, and transmits an audio signal transmitted from the wireless amplifier 2 via the UWB wave. Received and supplied to the signal processing unit 22.

信号処理部22は受信した音声信号を増幅し、信号遅延部23を介してスピーカ24から音声として出力する。   The signal processing unit 22 amplifies the received audio signal and outputs it as audio from the speaker 24 via the signal delay unit 23.

図4はリモコン4の構成を示し、制御部30は操作部31を介して入力されるユーザ操作に応じて制御信号を生成し、送受信部32に供給する。送受信部32はIEEE802.15.3a規格に基づくUWBデバイスでなり、制御部30から供給される制御信号をUWB波を介してワイヤレスアンプ2に送信する。   FIG. 4 shows a configuration of the remote controller 4, and the control unit 30 generates a control signal according to a user operation input via the operation unit 31 and supplies the control signal to the transmission / reception unit 32. The transmission / reception unit 32 is a UWB device based on the IEEE 802.15.3a standard, and transmits a control signal supplied from the control unit 30 to the wireless amplifier 2 via a UWB wave.

かかる構成に加えてリモコン4には、本発明の特徴である測距部33が設けられている。測距部33はUWBデバイスでなる送受信部32の測距機能を利用し、送受信部32から送信されたUWB波のパルスが各ワイヤレススピーカ装置3で受信された時間に基づいて、リモコン4から各ワイヤレススピーカ装置3までの距離をそれぞれ測定し、距離情報として制御部30に供給する。   In addition to this configuration, the remote controller 4 is provided with a distance measuring unit 33 that is a feature of the present invention. The distance measurement unit 33 uses the distance measurement function of the transmission / reception unit 32 formed of a UWB device, and based on the time when the pulse of the UWB wave transmitted from the transmission / reception unit 32 is received by each wireless speaker device 3, Each distance to the wireless speaker device 3 is measured and supplied to the control unit 30 as distance information.

ここで、リモコン4はワイヤレススピーカシステム1のユーザがその手元で使用するものであるから、当該リモコン4の位置とユーザの位置とは略合致する。このためワイヤレススピーカシステム1では、測距部33で測定した各ワイヤレススピーカ装置3それぞれの距離情報に基づいて、各ワイヤレススピーカ装置3から再生される再生音を個別に遅延させることにより、ユーザの聴取位置における各ワイヤレススピーカ装置3からの再生音の位相を同期させるようになされている。   Here, since the remote controller 4 is used by the user of the wireless speaker system 1 at hand, the position of the remote controller 4 and the position of the user substantially coincide. For this reason, in the wireless speaker system 1, the reproduction sound reproduced from each wireless speaker device 3 is individually delayed based on the distance information of each wireless speaker device 3 measured by the distance measuring unit 33, thereby listening to the user. The phase of the reproduced sound from each wireless speaker device 3 at the position is synchronized.

すなわち制御部30は、測距部33で測定された各ワイヤレススピーカ装置3についての距離情報に基づき、リモコン4から最も遠いワイヤレススピーカ装置3(これを基準スピーカ装置3Xと呼ぶ)を基準とし、当該基準スピーカ装置3xの距離情報Lxと、その他のワイヤレススピーカ装置3(これを遅延スピーカ装置3dと呼ぶ)それぞれの距離情報Ldとの距離差に基づき、次式を用いて、各遅延スピーカ装置3dにおける再生遅延時間tdを算出する。但し、音速をvとする。   That is, the control unit 30 uses the wireless speaker device 3 farthest from the remote controller 4 (referred to as a reference speaker device 3X) as a reference based on the distance information about each wireless speaker device 3 measured by the distance measuring unit 33. Based on the distance difference between the distance information Lx of the reference speaker device 3x and the distance information Ld of each of the other wireless speaker devices 3 (referred to as delay speaker devices 3d), each delay speaker device 3d A reproduction delay time td is calculated. Here, the speed of sound is v.

td=(Ld−Lx)/v ……(1)   td = (Ld−Lx) / v (1)

制御部30は、このようにして算出した再生遅延時間tdを、遅延時間情報として送受信部32を介して対応するワイヤレススピーカ装置3にそれぞれ送信する。なお制御部30は、基準スピーカ装置3Xに対しては、再生遅延時間tdを「0」として送信する。   The control unit 30 transmits the reproduction delay time td calculated as described above to the corresponding wireless speaker device 3 via the transmission / reception unit 32 as delay time information. The control unit 30 transmits the reproduction delay time td as “0” to the reference speaker device 3X.

各ワイヤレススピーカ装置3の制御部20(図3)は、リモコン4から送信された遅延時間情報に基づいて信号遅延部23を制御し、信号処理部22からスピーカ24へ供給される音声信号を再生遅延時間tdだけ遅延させる。   The control unit 20 (FIG. 3) of each wireless speaker device 3 controls the signal delay unit 23 based on the delay time information transmitted from the remote controller 4, and reproduces the audio signal supplied from the signal processing unit 22 to the speaker 24. Delay by the delay time td.

ワイヤレススピーカシステム1では、上述した各ワイヤレススピーカ装置3に対する測距を所定時間毎に繰り返す(リアルタイム測距)ことにより、ユーザが移動して聴取位置が変更されたり、ワイヤレススピーカ装置3の設置位置が変更されたりした場合でも、各ワイヤレススピーカ装置3についての再生遅延時間tdを迅速に変更して、聴取位置における再生音の位相を常に一致させることができる。   In the wireless speaker system 1, by repeating the distance measurement for each wireless speaker device 3 described above every predetermined time (real-time distance measurement), the user moves and the listening position is changed, or the installation position of the wireless speaker device 3 is changed. Even if it is changed, the reproduction delay time td for each wireless speaker device 3 can be changed quickly, and the phase of the reproduced sound at the listening position can always be matched.

(2)再生音位相同期処理手順
次に、上述した再生音位相の同期を行うための、リモコン4及びワイヤレススピーカ装置3における処理手順を、図5に示すフローチャートを用いて詳細に説明する。
(2) Reproduction Sound Phase Synchronization Processing Procedure Next, a processing procedure in the remote controller 4 and the wireless speaker device 3 for performing the above-described reproduction sound phase synchronization will be described in detail with reference to the flowchart shown in FIG.

リモコン4の制御部30(図4)は、再生音位相同期処理手順RT1の開始ステップから入ってステップSP1に移り、各ワイヤレススピーカ3との間の距離を測定し、次のステップSP2に移る。   The control unit 30 (FIG. 4) of the remote controller 4 enters from the start step of the reproduction sound phase synchronization processing procedure RT1, moves to step SP1, measures the distance to each wireless speaker 3, and moves to the next step SP2.

ステップSP2において制御部30は、各ワイヤレススピーカ3それぞれについての距離情報Ldが変化したかを判定する。ステップSP2において、全てのワイヤレススピーカ3についての距離情報Ldが変化していないと判定された場合、制御部30はステップSP1に戻って再度測距を行う。   In step SP2, the control unit 30 determines whether the distance information Ld for each wireless speaker 3 has changed. If it is determined in step SP2 that the distance information Ld for all the wireless speakers 3 has not changed, the control unit 30 returns to step SP1 and performs distance measurement again.

これに対して、ステップSP2においてワイヤレススピーカ3の距離情報Ldに変化があったと判定された場合、制御部30は次のステップSP3に移る。なお、再生音位相同期処理手順RT1の開始直後においては各ワイヤレススピーカ3の距離情報Ldが初めて算出されることから、この場合全ての距離情報Ldに変化があったものとして制御部30は必ずステップSP3に移る。   On the other hand, when it is determined in step SP2 that the distance information Ld of the wireless speaker 3 has changed, the control unit 30 proceeds to next step SP3. Since the distance information Ld of each wireless speaker 3 is calculated for the first time immediately after the start of the reproduction sound phase synchronization processing procedure RT1, in this case, the control unit 30 always assumes that all the distance information Ld has changed. Move to SP3.

ステップSP3において制御部30は、変化のあった距離情報Ldに基づいて再生遅延時間tdを算出し、次のステップSP4に移る。ステップSP4において制御部30は、算出した再生遅延時間tdを遅延時間情報として対応するワイヤレススピーカ装置3に送信し、ステップSP1に戻る   In step SP3, the control unit 30 calculates the reproduction delay time td based on the changed distance information Ld, and proceeds to the next step SP4. In step SP4, the control unit 30 transmits the calculated reproduction delay time td to the corresponding wireless speaker device 3 as delay time information, and returns to step SP1.

一方、ワイヤレススピーカ装置3の制御部20(図3)は、再生音位相同期処理手順RT2の開始ステップから入ってステップSP11に移り、リモコン4からの遅延時間情報を待ち受け、当該遅延時間情報を受信すると次のステップSP12に移る。   On the other hand, the control unit 20 (FIG. 3) of the wireless speaker device 3 enters from the start step of the reproduction sound phase synchronization processing procedure RT2, moves to step SP11, waits for delay time information from the remote controller 4, and receives the delay time information. Then, the process proceeds to the next step SP12.

ステップSP12において制御部20は、スピーカ24に供給される音声信号を遅延時間情報で示される再生遅延時間tdだけ遅延させ、ステップSP11に戻って次の遅延時間情報を待ち受ける。   In step SP12, the control unit 20 delays the audio signal supplied to the speaker 24 by the reproduction delay time td indicated by the delay time information, returns to step SP11, and waits for the next delay time information.

リモコン4の制御部30及びワイヤレススピーカ装置3の制御部20は、上述した処理を常に繰り返すことにより、聴取位置における再生音の位相をリアルタイムで同期させる。   The control unit 30 of the remote controller 4 and the control unit 20 of the wireless speaker device 3 synchronize the phase of the reproduced sound at the listening position in real time by always repeating the above-described processing.

(3)動作及び効果
以上の構成において、このワイヤレススピーカシステム1では、ワイヤレスアンプ2、ワイヤレススピーカ装置3及びリモコン4にそれぞれUWB方式の送受信部を設け、ワイヤレスアンプ2からワイヤレススピーカ装置3への音声信号やリモコン4からワイヤレスアンプ2への制御信号をUWB波を介して送受するとともに、リモコン4と各ワイヤレススピーカ装置3との距離を、当該UWB波を用いて随時測定するようにした。
(3) Operation and Effect In the above configuration, in the wireless speaker system 1, a UWB transmission / reception unit is provided in each of the wireless amplifier 2, the wireless speaker device 3, and the remote controller 4, and audio from the wireless amplifier 2 to the wireless speaker device 3 is provided. Signals and control signals from the remote controller 4 to the wireless amplifier 2 are transmitted and received via UWB waves, and the distance between the remote controller 4 and each wireless speaker device 3 is measured at any time using the UWB waves.

そしてワイヤレススピーカシステム1では、測定した各ワイヤレススピーカ装置3についての距離情報Ldに基づいて再生遅延時間tdをそれぞれ算出し、各ワイヤレススピーカ装置3において音声信号をそれぞれ再生遅延時間tdだけ遅延して再生することにより、リモコン4の位置すなわちユーザの聴取位置における各ワイヤレススピーカ3からの再生音位相を、常に同期させることができる。   In the wireless speaker system 1, the reproduction delay time td is calculated based on the measured distance information Ld for each wireless speaker device 3, and the audio signal is delayed and reproduced by the reproduction delay time td in each wireless speaker device 3. By doing so, it is possible to always synchronize the reproduced sound phase from each wireless speaker 3 at the position of the remote controller 4, that is, the listening position of the user.

ここでワイヤレススピーカシステム1では、音声信号や制御信号を送受するためのUWB方式の送受信部を用いて、各ワイヤレススピーカ装置3の距離を測定するようにしたことにより、従来のマイクロホンを用いた再生音位相の同期方法のような集音手段が不要になるとともに、ユーザ任意の音声を再生しながらリアルタイムに再生音位相を同期させることができる。   Here, in the wireless speaker system 1, the distance between each wireless speaker device 3 is measured using a UWB transmission / reception unit for transmitting and receiving audio signals and control signals, so that reproduction using a conventional microphone is performed. Sound collecting means such as the sound phase synchronization method is not required, and the reproduction sound phase can be synchronized in real time while reproducing the user's arbitrary sound.

そしてワイヤレススピーカシステム1では、ユーザが移動して聴取位置が変更された場合や、ワイヤレススピーカ装置3の設置位置が変更された場合、さらには新たなワイヤレススピーカ装置3が加えられた場合でも、随時各ワイヤレススピーカ装置3の再生遅延時間tdを更新して、常に聴取位置における再生音位相を同期させることができる。   In the wireless speaker system 1, even when the user moves and the listening position is changed, the installation position of the wireless speaker device 3 is changed, or even when a new wireless speaker device 3 is added, the wireless speaker system 1 is changed as needed. The playback delay time td of each wireless speaker device 3 can be updated to always synchronize the playback sound phase at the listening position.

以上の構成によれば、ワイヤレスアンプ2、ワイヤレススピーカ装置3及びリモコン4に設けたUWB方式の送受信部によって、音声信号や制御信号を送受するとともに、リモコン4と各ワイヤレススピーカ装置3との距離を随時測距し、この距離に応じて各ワイヤレススピーカ装置3それぞれの再生遅延時間を制御するようにしたことにより、簡易な構成で、各ワイヤレススピーカ装置3からの再生音の位相を容易に同期させることができる。   According to the above configuration, the UWB transmission / reception unit provided in the wireless amplifier 2, the wireless speaker device 3, and the remote controller 4 transmits and receives audio signals and control signals, and the distance between the remote controller 4 and each wireless speaker device 3 is set. By measuring the distance at any time and controlling the reproduction delay time of each wireless speaker device 3 according to this distance, the phase of the reproduced sound from each wireless speaker device 3 can be easily synchronized with a simple configuration. be able to.

(4)他の実施の形態
なお上述の実施の形態においては、リモコン4が各ワイヤレススピーカ装置3についての距離情報を測定するとともに再生遅延時間tdを算出して各ワイヤレススピーカ装置3に送信し、各ワイヤレススピーカ装置3それぞれが音声信号を遅延して出力するようにしたが、本発明はこれに限らず、リモコン4で測定した各距離情報をワイヤレスアンプに送信し、ワイヤレスアンプ側で再生遅延時間の算出及び音声信号の遅延を行うようにしてもよい。
(4) Other Embodiments In the above-described embodiment, the remote controller 4 measures the distance information about each wireless speaker device 3, calculates the reproduction delay time td, and transmits it to each wireless speaker device 3, Each wireless speaker device 3 outputs the audio signal with a delay, but the present invention is not limited to this, and each distance information measured by the remote controller 4 is transmitted to the wireless amplifier, and the reproduction delay time is transmitted on the wireless amplifier side. May be calculated and the audio signal may be delayed.

図6は、このような場合のワイヤレスアンプ52を示し、信号処理部12と送受信部13の間に信号遅延部53が設けられている以外は、図2に示すワイヤレスアンプ2と同一の構成を有している。なお、リモコン4については、構成に変更が無いので説明を省略する。   FIG. 6 shows the wireless amplifier 52 in such a case, and has the same configuration as the wireless amplifier 2 shown in FIG. 2 except that a signal delay unit 53 is provided between the signal processing unit 12 and the transmission / reception unit 13. Have. The remote controller 4 will not be described because there is no change in configuration.

制御部13は、リモコン4から送信された各ワイヤレススピーカ装置3についての距離情報を送受信部13から受け取り、当該距離情報に基づいて、各ワイヤレススピーカ装置3それぞれについての再生遅延時間tdを算出する。   The control unit 13 receives distance information about each wireless speaker device 3 transmitted from the remote controller 4 from the transmission / reception unit 13 and calculates a reproduction delay time td for each wireless speaker device 3 based on the distance information.

そして制御部13は、算出した再生遅延時間tdに基づいて信号遅延部53を制御し、各ワイヤレススピーカ装置3に対する音声信号をそれぞれ再生遅延時間tdだけ遅延させ、送受信部13を介して送信する。なおこの場合、音声信号はワイヤレスアンプ52から送信される時点で既に遅延が施されているため、ワイヤレススピーカ装置3の信号遅延部が不要となる。   Then, the control unit 13 controls the signal delay unit 53 based on the calculated reproduction delay time td, delays the audio signal for each wireless speaker device 3 by the reproduction delay time td, and transmits it via the transmission / reception unit 13. In this case, since the audio signal is already delayed when it is transmitted from the wireless amplifier 52, the signal delay unit of the wireless speaker device 3 is not necessary.

また上述の実施の形態においては、IEEE802.15.3a規格に基づくUWBデバイスを各送受信部に適用した場合について述べたが、本発明はこれに限らず、データ通信及び測距を行う他の種々の無線通信方式を各送受信部に適用してもよい。   In the above-described embodiment, the case where the UWB device based on the IEEE802.15.3a standard is applied to each transmission / reception unit has been described. However, the present invention is not limited to this, and other various types for performing data communication and distance measurement. The wireless communication method may be applied to each transmission / reception unit.

本発明の一実施の形態によるワイヤレススピーカシステムの構成を示すブロック図である。It is a block diagram which shows the structure of the wireless speaker system by one embodiment of this invention. ワイヤレスアンプの構成を示すブロック図である。It is a block diagram which shows the structure of a wireless amplifier. ワイヤレススピーカ装置の構成を示すブロック図である。It is a block diagram which shows the structure of a wireless speaker apparatus. リモコンの構成を示すブロック図である。It is a block diagram which shows the structure of a remote control. 再生音位相同期処理手順を示すフローチャートである。It is a flowchart which shows the reproduction | regeneration sound phase synchronization process sequence. 他の実施の形態のワイヤレスアンプの構成を示すブロック図である。It is a block diagram which shows the structure of the wireless amplifier of other embodiment.

符号の説明Explanation of symbols

1……ワイヤレススピーカシステム、2……ワイヤレスアンプ、3……ワイヤレススピーカ装置、4……リモコン、10、20、30……制御部、11、31……操作部、12、22……信号処理部、13、21、32……送受信部、23……信号遅延部、24……スピーカ、33……測距部。
DESCRIPTION OF SYMBOLS 1 ... Wireless speaker system, 2 ... Wireless amplifier, 3 ... Wireless speaker apparatus, 4 ... Remote control, 10, 20, 30 ... Control part, 11, 31 ... Operation part, 12, 22 ... Signal processing , 13, 21, 32 ... transmission / reception unit, 23 ... signal delay unit, 24 ... speaker, 33 ... ranging unit.

Claims (8)

所定の無線方式を用いて音声信号を受信し、当該受信した音声信号を再生音として出力する複数のワイヤレススピーカ装置と、
上記複数のワイヤレススピーカ装置それぞれに対して、上記無線方式を用いて上記音声信号を送信する音声信号送信装置と、
上記無線方式を用いて上記音声信号送信装置を遠隔制御するとともに、上記複数のワイヤレススピーカ装置それぞれに対する距離を上記無線方式を用いて測定する測距手段を有するリモートコントローラと、
上記複数のワイヤレススピーカ装置それぞれについての上記音声信号を、個別の遅延時間だけ遅延させる遅延手段と、
上記測定された複数のワイヤレススピーカ装置それぞれに対する距離に基づいて、当該ワイヤレススピーカ装置それぞれから出力される上記再生音の位相が上記リモートコントローラの位置において同期するように、上記複数のワイヤレススピーカ装置についての上記遅延時間をそれぞれ算出する遅延時間算出手段と
を具えることを特徴とするワイヤレススピーカシステム。
A plurality of wireless speaker devices for receiving a sound signal using a predetermined wireless method and outputting the received sound signal as a reproduction sound;
For each of the plurality of wireless speaker devices, an audio signal transmitting device that transmits the audio signal using the wireless method;
A remote controller having a distance measuring means for remotely controlling the audio signal transmitting device using the wireless method and measuring a distance to each of the plurality of wireless speaker devices using the wireless method;
Delay means for delaying the audio signal for each of the plurality of wireless speaker devices by an individual delay time;
Based on the measured distance to each of the plurality of wireless speaker devices, the phase of the reproduced sound output from each of the wireless speaker devices is synchronized at the position of the remote controller. A wireless speaker system comprising: delay time calculating means for calculating each of the delay times.
上記遅延時間算出手段は、上記リモートコントローラに設けられている
ことを特徴とする請求項1に記載のワイヤレススピーカシステム。
The wireless speaker system according to claim 1, wherein the delay time calculation means is provided in the remote controller.
上記遅延手段は、上記複数のワイヤレススピーカ装置それぞれに設けられている
ことを特徴とする請求項1に記載のワイヤレススピーカシステム。
The wireless speaker system according to claim 1, wherein the delay unit is provided in each of the plurality of wireless speaker devices.
上記遅延時間算出手段及び上記遅延手段は、上記音声信号送信装置に設けられている
ことを特徴とする請求項1に記載のワイヤレススピーカシステム。
The wireless speaker system according to claim 1, wherein the delay time calculation unit and the delay unit are provided in the audio signal transmission device.
所定の無線方式を用いて複数のワイヤレススピーカ装置それぞれに対して音声信号を送信する送信手段と、
上記複数のワイヤレススピーカ装置それぞれに対する距離情報に基づいて、当該ワイヤレススピーカ装置それぞれから出力される上記再生音の位相が同期するように、上記複数のワイヤレススピーカ装置に送信する上記音声信号をそれぞれ遅延させる遅延手段と
を具えることを特徴とする音声信号送信装置。
Transmitting means for transmitting an audio signal to each of a plurality of wireless speaker devices using a predetermined wireless method;
Based on the distance information for each of the plurality of wireless speaker devices, the audio signals transmitted to the plurality of wireless speaker devices are respectively delayed so that the phases of the reproduced sound output from the wireless speaker devices are synchronized. An audio signal transmitting apparatus comprising: delay means.
複数のワイヤレススピーカ装置それぞれに対する距離を、当該ワイヤレススピーカ装置が用いる無線方式を用いて測定する測距手段と、
上記測定した複数のワイヤレススピーカ装置それぞれに対する距離に基づいて、当該ワイヤレススピーカ装置それぞれから出力される上記再生音の位相が上記測距手段の位置において同期するように、上記複数のワイヤレススピーカ装置それぞれについての音声信号の遅延時間をそれぞれ算出する遅延時間算出手段と
を具えることを特徴とする再生音位相同期装置。
Ranging means for measuring the distance to each of the plurality of wireless speaker devices using a wireless method used by the wireless speaker device;
For each of the plurality of wireless speaker devices, based on the measured distance to each of the plurality of wireless speaker devices, the phase of the reproduced sound output from each of the wireless speaker devices is synchronized at the position of the distance measuring means. A reproduction sound phase synchronization device comprising: delay time calculation means for calculating the delay time of each audio signal.
複数のワイヤレススピーカ装置それぞれに対する距離を測定する測距ステップと、
上記測定された複数のワイヤレススピーカ装置それぞれに対する距離に基づいて、当該ワイヤレススピーカ装置それぞれから出力される再生音の位相が測距位置において同期するように、上記複数のワイヤレススピーカ装置それぞれについての音声信号の遅延時間をそれぞれ算出する遅延時間算出ステップと、
上記複数のワイヤレススピーカ装置それぞれについての上記音声信号を、上記遅延時間だけ遅延させる遅延ステップと
を具えることを特徴とする再生音位相同期方法。
A distance measuring step for measuring a distance to each of the plurality of wireless speaker devices;
Based on the measured distance to each of the plurality of wireless speaker devices, the audio signal for each of the plurality of wireless speaker devices is synchronized so that the phase of the reproduced sound output from each of the wireless speaker devices is synchronized at the distance measurement position. A delay time calculating step for calculating each of the delay times,
A reproduction sound phase synchronization method comprising: a delay step of delaying the audio signal for each of the plurality of wireless speaker devices by the delay time.
複数のワイヤレススピーカ装置それぞれに対する距離を測定する測距ステップと、
上記測定された複数のワイヤレススピーカ装置それぞれに対する距離に基づいて、当該ワイヤレススピーカ装置それぞれから出力される再生音の位相が測距位置において同期するように、上記複数のワイヤレススピーカ装置それぞれについての音声信号の遅延時間をそれぞれ算出する遅延時間算出ステップと、
上記複数のワイヤレススピーカ装置それぞれについての上記音声信号を、上記遅延時間だけ遅延させる遅延ステップと
を具えることを特徴とする再生音位相同期プログラム。
A distance measuring step for measuring a distance to each of the plurality of wireless speaker devices;
Based on the measured distance to each of the plurality of wireless speaker devices, the audio signal for each of the plurality of wireless speaker devices is synchronized so that the phase of the reproduced sound output from each of the wireless speaker devices is synchronized at the distance measurement position. A delay time calculating step for calculating each of the delay times,
A reproduction sound phase synchronization program comprising: a delay step for delaying the audio signal for each of the plurality of wireless speaker devices by the delay time.
JP2005192875A 2005-06-30 2005-06-30 Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program Pending JP2007013707A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005192875A JP2007013707A (en) 2005-06-30 2005-06-30 Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005192875A JP2007013707A (en) 2005-06-30 2005-06-30 Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program

Publications (1)

Publication Number Publication Date
JP2007013707A true JP2007013707A (en) 2007-01-18

Family

ID=37751568

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005192875A Pending JP2007013707A (en) 2005-06-30 2005-06-30 Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program

Country Status (1)

Country Link
JP (1) JP2007013707A (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010219783A (en) * 2009-03-16 2010-09-30 Toshiba Corp Communication terminal, communication method, and computer program
KR101073664B1 (en) 2009-12-10 2011-10-14 전자부품연구원 A Pre-Compensation Technique for Synchronization between Wireless Speakers in Multichannel Wireless Speaker Systems
CN102891657A (en) * 2011-07-22 2013-01-23 宏达国际电子股份有限公司 Multimedia control method and multimedia control system
US8503362B2 (en) 2009-12-10 2013-08-06 Korea Electronics Technology Institute Speaker synchronization technique for wireless multichannel sound data transmission system
CN106101375A (en) * 2016-05-26 2016-11-09 努比亚技术有限公司 A kind of method and mobile terminal being controlled audio-frequence player device volume by mobile terminal
WO2017029947A1 (en) * 2015-08-19 2017-02-23 ヤマハ株式会社 Audio system, audio device, and audio signal playback method
WO2017029946A1 (en) * 2015-08-19 2017-02-23 ヤマハ株式会社 Audio system, audio device, and audio device setting method
WO2017138182A1 (en) * 2016-02-08 2017-08-17 株式会社ディーアンドエムホールディングス Wireless audio system, controller, wireless speaker, and computer readable program
JP2017143515A (en) * 2016-02-08 2017-08-17 ソニー株式会社 Automatically configurable speaker system
WO2018211988A1 (en) 2017-05-17 2018-11-22 ソニー株式会社 Sound output control device, sound output control method, and program
KR20200040531A (en) * 2018-10-10 2020-04-20 엔에이치엔 주식회사 Device and method to control plurality of speakers through short range wireless communication
US10809969B2 (en) 2016-03-25 2020-10-20 Semiconductor Components Industries, Llc Systems and methods for audio playback
EP3726850A1 (en) * 2019-04-17 2020-10-21 LG Electronics Inc. Audio device and method for providing a multi-channel audio signal to a plurality of speakers
CN113423039A (en) * 2021-06-18 2021-09-21 恒玄科技(上海)股份有限公司 Wireless loudspeaker assembly, intelligent equipment and intelligent system thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01235884A (en) * 1988-03-16 1989-09-20 Mitsubishi Electric Corp Distance measuring instrument
JPH0316798A (en) * 1989-06-15 1991-01-24 Yoshida Denki:Kk Name card and postcard
JP2001054200A (en) * 1999-08-04 2001-02-23 Mitsubishi Electric Inf Technol Center America Inc Sound delivery adjustment system and method to loudspeaker
JP2004336252A (en) * 2003-05-02 2004-11-25 Sony Corp Wireless receiver, wireless speaker and wireless audio signal transceiver system
JP2004343569A (en) * 2003-05-16 2004-12-02 Casio Comput Co Ltd Transmitter, radio communication system, acoustic device, acoustic system, transmitting method, radio communication method, channel setting method and sound reproducing method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01235884A (en) * 1988-03-16 1989-09-20 Mitsubishi Electric Corp Distance measuring instrument
JPH0316798A (en) * 1989-06-15 1991-01-24 Yoshida Denki:Kk Name card and postcard
JP2001054200A (en) * 1999-08-04 2001-02-23 Mitsubishi Electric Inf Technol Center America Inc Sound delivery adjustment system and method to loudspeaker
JP2004336252A (en) * 2003-05-02 2004-11-25 Sony Corp Wireless receiver, wireless speaker and wireless audio signal transceiver system
JP2004343569A (en) * 2003-05-16 2004-12-02 Casio Comput Co Ltd Transmitter, radio communication system, acoustic device, acoustic system, transmitting method, radio communication method, channel setting method and sound reproducing method

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010219783A (en) * 2009-03-16 2010-09-30 Toshiba Corp Communication terminal, communication method, and computer program
KR101073664B1 (en) 2009-12-10 2011-10-14 전자부품연구원 A Pre-Compensation Technique for Synchronization between Wireless Speakers in Multichannel Wireless Speaker Systems
US8503362B2 (en) 2009-12-10 2013-08-06 Korea Electronics Technology Institute Speaker synchronization technique for wireless multichannel sound data transmission system
CN102891657A (en) * 2011-07-22 2013-01-23 宏达国际电子股份有限公司 Multimedia control method and multimedia control system
DE102012014570A1 (en) * 2011-07-22 2013-01-24 Htc Corporation MULTIMEDIA CONTROL METHOD AND MULTIMEDIA CONTROL SYSTEM
WO2017029947A1 (en) * 2015-08-19 2017-02-23 ヤマハ株式会社 Audio system, audio device, and audio signal playback method
WO2017029946A1 (en) * 2015-08-19 2017-02-23 ヤマハ株式会社 Audio system, audio device, and audio device setting method
US10306366B2 (en) 2015-08-19 2019-05-28 Yamaha Corporation Audio system, audio device, and audio signal playback method
US10567900B2 (en) 2015-08-19 2020-02-18 Yamaha Corporation Audio system, audio device, and audio device setting method
US10587968B2 (en) 2016-02-08 2020-03-10 D&M Holdings, Inc. Wireless audio system, controller, wireless speaker, and computer readable system
WO2017138182A1 (en) * 2016-02-08 2017-08-17 株式会社ディーアンドエムホールディングス Wireless audio system, controller, wireless speaker, and computer readable program
JP2017143515A (en) * 2016-02-08 2017-08-17 ソニー株式会社 Automatically configurable speaker system
US10809969B2 (en) 2016-03-25 2020-10-20 Semiconductor Components Industries, Llc Systems and methods for audio playback
CN106101375A (en) * 2016-05-26 2016-11-09 努比亚技术有限公司 A kind of method and mobile terminal being controlled audio-frequence player device volume by mobile terminal
WO2018211988A1 (en) 2017-05-17 2018-11-22 ソニー株式会社 Sound output control device, sound output control method, and program
KR20200007793A (en) 2017-05-17 2020-01-22 소니 주식회사 Voice output control device, voice output control method, and program
KR20200040531A (en) * 2018-10-10 2020-04-20 엔에이치엔 주식회사 Device and method to control plurality of speakers through short range wireless communication
KR102222912B1 (en) * 2018-10-10 2021-03-04 엔에이치엔 주식회사 Device and method to control plurality of speakers through short range wireless communication
EP3726850A1 (en) * 2019-04-17 2020-10-21 LG Electronics Inc. Audio device and method for providing a multi-channel audio signal to a plurality of speakers
US10999692B2 (en) 2019-04-17 2021-05-04 Lg Electronics Inc. Audio device, audio system, and method for providing multi-channel audio signal to plurality of speakers
CN113423039A (en) * 2021-06-18 2021-09-21 恒玄科技(上海)股份有限公司 Wireless loudspeaker assembly, intelligent equipment and intelligent system thereof

Similar Documents

Publication Publication Date Title
JP2007013707A (en) Wireless speaker system, audio signal transmitter, reproduced sound phase synchronizing device, reproduced sound phase synchronizing method and reproduced sound phase synchronization program
JP4232775B2 (en) Sound field correction device
KR102393798B1 (en) Method and apparatus for processing audio signal
EP2365704B1 (en) Transmission device and transmission method
CN101257740B (en) Method and apparatus to reproduce multi-channel audio signal in multi-channel speaker system
US5822440A (en) Enhanced concert audio process utilizing a synchronized headgear system
US10347234B2 (en) Selective suppression of audio emitted from an audio source
US20090298420A1 (en) Apparatus and methods for time synchronization of wireless audio data streams
US20130051572A1 (en) Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
US20120148075A1 (en) Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
CN106375902A (en) Audio enhancement via opportunistic use of microphones
US9991862B2 (en) Audio system equalizing
WO2001095669A3 (en) A remote control apparatus and a receiver and an audio system
CN104299632A (en) Audio synchronization method and device and corresponding systems
JP2004193868A (en) Wireless transmission and reception system and wireless transmission and reception method
KR20140126788A (en) Position estimation system using an audio-embedded time-synchronization signal and position estimation method using thereof
US20220038769A1 (en) Synchronizing bluetooth data capture to data playback
US11727950B2 (en) Systems, devices, and methods for synchronizing audio
US11809782B2 (en) Audio parameter adjustment based on playback device separation distance
JP2011066544A (en) Network speaker system, transmitting apparatus, reproduction control method, and network speaker program
US11218825B2 (en) Sound system for tunnels, corridors and other long and narrow confined spaces
JP2000295698A (en) Virtual surround system
KR101804179B1 (en) Public address system and method using internet protocol network
CN113099355A (en) Connected speaker including LAN interface and WPAN interface
AU2017310081A1 (en) A method and a system for presenting media

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080617

A977 Report on retrieval

Effective date: 20100630

Free format text: JAPANESE INTERMEDIATE CODE: A971007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100715

A521 Written amendment

Effective date: 20100906

Free format text: JAPANESE INTERMEDIATE CODE: A523

A02 Decision of refusal

Effective date: 20110324

Free format text: JAPANESE INTERMEDIATE CODE: A02