JP2008147860A - Audio reproducing system - Google Patents

Audio reproducing system Download PDF

Info

Publication number
JP2008147860A
JP2008147860A JP2006330763A JP2006330763A JP2008147860A JP 2008147860 A JP2008147860 A JP 2008147860A JP 2006330763 A JP2006330763 A JP 2006330763A JP 2006330763 A JP2006330763 A JP 2006330763A JP 2008147860 A JP2008147860 A JP 2008147860A
Authority
JP
Japan
Prior art keywords
terminal
audio
reproduction
sound
rule information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006330763A
Other languages
Japanese (ja)
Other versions
JP5098036B2 (en
Inventor
Motoyasu Tanaka
基康 田中
Yusuke Nara
裕介 奈良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MegaChips Corp
Original Assignee
MegaChips Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MegaChips Corp filed Critical MegaChips Corp
Priority to JP2006330763A priority Critical patent/JP5098036B2/en
Priority to PCT/JP2007/072793 priority patent/WO2008069038A1/en
Publication of JP2008147860A publication Critical patent/JP2008147860A/en
Application granted granted Critical
Publication of JP5098036B2 publication Critical patent/JP5098036B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/53Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers
    • H04H20/61Arrangements specially adapted for specific applications, e.g. for traffic information or for mobile receivers for local area broadcast, e.g. instore broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • H04H60/73Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/78Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by source locations or destination locations
    • H04H60/80Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by source locations or destination locations characterised by transmission among terminal devices

Abstract

<P>PROBLEM TO BE SOLVED: To provide an audio reproduction system for synchronizing audio reproduction with LED light emitting among a plurality of terminals connected without wire. <P>SOLUTION: A scenario program 20C1, 20C2, 20C3 is wireless-transmitted from a host terminal device 10H selected arbitrarily from a plurality of terminal devices 10 to a client terminal 10C1, 10C2, 10C3 not selected as the host terminal device 10H, so that audio reproduction can be synchronized with LED light emitting at each terminal device 10 between a plurality of terminal devices 10. Further, in accordance with places of a plurality of terminal devices or fluctuations of the number of them, a role each terminal device plays in the audio reproduction and the LED light emitting can be mutually changed among terminal devices on a real time basis. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、複数端末を利用する音声再生システムに関する。   The present invention relates to an audio reproduction system using a plurality of terminals.

無線送信機から複数スピーカーに音声信号が送信され、各スピーカーが異なる音声を再生する音声再生システムが存在する。この音声再生システムは、立体音響空間を提供することが可能である。   There is an audio reproduction system in which audio signals are transmitted from a wireless transmitter to a plurality of speakers, and each speaker reproduces different audio. This sound reproduction system can provide a three-dimensional acoustic space.

下記非特許文献1では、無線送信機とフルレンジおよびウーファースピーカーが無線接続された、小規模の音声再生システムが開示されている。この音声再生システムは小規模であるため、部屋の模様替えなどの際に、各スピーカーの配置を容易に変更することが可能である。   Non-Patent Document 1 below discloses a small-scale audio reproduction system in which a wireless transmitter, a full range, and a woofer speaker are wirelessly connected. Since this audio reproduction system is small, it is possible to easily change the arrangement of the speakers when the room is redesigned.

また、音声再生システムとは異なるシステムとして、端末が追加されるほどに、複数端末が連携する面白さが倍増するシステムが存在する。   Further, as a system different from the audio reproduction system, there is a system in which the fun of cooperation of a plurality of terminals doubles as the terminals are added.

下記非特許文献2では、各端末は人間の生活を表示する液晶画面を有し、各端末を電気的に接続することにより、各端末の液晶画面間を往来する人間が交流を深めるというシステムが開示されている。   In the following Non-Patent Document 2, each terminal has a liquid crystal screen that displays a person's life, and by connecting each terminal electrically, a person who travels between the liquid crystal screens of each terminal deepens the exchange. It is disclosed.

“Rio LIVE air”、[online]、Rio Japan、[平成18年11月17日検索]、インターネット<URL:http://www.rioaudio.jp/product/accessories/LIVEair/>“Rio LIVE air”, [online], Rio Japan, [searched on November 17, 2006], Internet <URL: http://www.rioaudio.jp/product/accessories/LIVEair/> 竹村 譲、“人間のコミュニケーション性を1辺47ミリのキューブで体験する「Cube World」”、[online]、平成18年1月30日、アイティーメディア株式会社、[平成18年11月17日検索]、インターネット<URL:http://plusd.itmedia.co.jp/lifestyle/articles/0601/30/news006.html>Joe Takemura, “Cube World to Experience Human Communication with a 47mm Cube”, [online], January 30, 2006, IT Media Corporation, [November 17, 2006] Search], Internet <URL: http://plusd.itmedia.co.jp/lifestyle/articles/0601/30/news006.html>

上記非特許文献1では、各スピーカーの配置を容易に変更することが可能である。しかし、各スピーカーが再生する各音声領域を、各スピーカー間で相互に変更することは不可能である。そのため、各音声領域が再生される場所を変更するためには、各スピーカーの配置を変更する必要がある。   In the said nonpatent literature 1, it is possible to change the arrangement | positioning of each speaker easily. However, it is impossible to change each sound area reproduced by each speaker between the speakers. Therefore, in order to change the location where each audio area is reproduced, it is necessary to change the arrangement of the speakers.

また、上記非特許文献1に開示された音声再生システムは、上記非特許文献2に開示されたような、端末が追加されるほどに、複数端末が連携する面白さが倍増するシステムとは言えない。スピーカーを追加することは可能であるが、そのスピーカーが再生する音声領域を変更することは不可能だからである。   In addition, the sound reproduction system disclosed in Non-Patent Document 1 can be said to be a system that doubles the fun of cooperation of multiple terminals as more terminals are added, as disclosed in Non-Patent Document 2. Absent. This is because it is possible to add a speaker, but it is impossible to change the audio area that the speaker plays.

さらに、上記非特許文献1に開示された音声再生システムは、聴覚に訴えるものは存在するが、視覚に訴えるものは存在しない。そのため、視聴覚に同時に訴えることにより、臨場感あふれる癒し空間を提供するシステムとは言えない。   Furthermore, the audio reproduction system disclosed in Non-Patent Document 1 has something that appeals to hearing but does not appeal to vision. Therefore, it cannot be said that it is a system that provides a healing space full of realism by appealing to the audiovisual simultaneously.

そこで、本発明は前記問題点に鑑み、無線接続された複数端末間で、各端末が担う役割を相互に変更し、また、癒し空間を提供する音声再生システムを提供することを目的とする。   In view of the above problems, an object of the present invention is to provide an audio reproduction system that changes the roles of each terminal among wirelessly connected terminals and provides a healing space.

上記課題を解決するため、請求項1記載の発明は、無線接続された複数端末においてそれぞれ再生される再生音声を同期させる手段と、各端末で再生される前記再生音声を規定した再生音声規則情報を、各端末に設定する規則情報設定手段と、を備え、前記再生音声規則情報は、各端末の位置に応じて、各端末で再生される前記再生音声を規定した情報、
を含むことを特徴とする。
In order to solve the above-mentioned problem, the invention according to claim 1 is characterized in that means for synchronizing the reproduced sound reproduced in each of a plurality of wirelessly connected terminals and the reproduced sound rule information defining the reproduced sound reproduced in each terminal A rule information setting means for setting to each terminal, and the playback voice rule information is information specifying the playback voice played back by each terminal according to the position of each terminal,
It is characterized by including.

請求項2記載の発明は、無線接続された複数端末においてそれぞれ再生される再生音声を同期させる手段と、各端末で再生される前記再生音声を規定した再生音声規則情報を、各端末に設定する規則情報設定手段と、を備え、前記再生音声規則情報は、前記複数端末の個数に応じて、各端末で再生される前記再生音声を規定した情報、を含むことを特徴とする。   The invention according to claim 2 sets, in each terminal, means for synchronizing the reproduced sound reproduced in each of the plurality of wirelessly connected terminals and the reproduced sound rule information defining the reproduced sound reproduced in each terminal. Rule information setting means, wherein the playback voice rule information includes information defining the playback voice played back by each terminal according to the number of the plurality of terminals.

請求項3記載の発明は、請求項1または請求項2に記載の音声再生システムにおいて、前記再生音声規則情報は、前記再生音声の音源情報を指定する情報、を含むことを特徴とする。   According to a third aspect of the present invention, in the audio reproduction system according to the first or second aspect, the reproduction audio rule information includes information designating sound source information of the reproduction audio.

請求項4記載の発明は、請求項1ないし請求項3のいずれかに記載の音声再生システムにおいて、前記再生音声規則情報は、前記再生音声の発音タイミングを指定する情報、を含むことを特徴とする。   According to a fourth aspect of the present invention, in the audio reproduction system according to any one of the first to third aspects, the reproduction audio rule information includes information for designating a sounding timing of the reproduction audio. To do.

請求項5記載の発明は、請求項1ないし請求項4のいずれかに記載の音声再生システムにおいて、前記再生音声規則情報は、前記再生音声に対する時間経過に伴う音量変化を指定する情報、を含むことを特徴とする。   According to a fifth aspect of the present invention, in the audio reproduction system according to any one of the first to fourth aspects, the reproduction audio rule information includes information for designating a change in volume over time with respect to the reproduction audio. It is characterized by that.

請求項6記載の発明は、請求項1ないし請求項5のいずれかに記載の音声再生システムにおいて、前記再生音声規則情報は、前記再生音声に対する時間経過に伴う高周波成分量変化を指定する情報、を含むことを特徴とする。   According to a sixth aspect of the present invention, in the audio reproduction system according to any one of the first to fifth aspects, the reproduction audio rule information is information specifying a high-frequency component amount change with time for the reproduction audio, It is characterized by including.

請求項7記載の発明は、請求項1ないし請求項6のいずれかに記載の音声再生システムにおいて、前記再生音声規則情報は、前記再生音声による立体音響効果に関するパラメータを指定する情報、を含むことを特徴とする。   A seventh aspect of the present invention is the sound reproduction system according to any one of the first to sixth aspects, wherein the reproduction sound rule information includes information for designating a parameter relating to a stereophonic effect by the reproduction sound. It is characterized by.

請求項8記載の発明は、請求項1ないし請求項7のいずれかに記載の音声再生システムにおいて、さらに、前記複数端末からホスト端末を選択する端末選択手段と、前記ホスト端末以外の各端末をクライアント端末に設定する端末設定手段と、各クライアント端末にクライアントIDを設定するID設定手段と、を備え、前記再生音声規則情報は、各端末で再生される前記再生音声を各クライアントIDに基づいて規定した情報、を含むことを特徴とする。   According to an eighth aspect of the present invention, there is provided the audio reproduction system according to any one of the first to seventh aspects, further comprising: a terminal selection unit that selects a host terminal from the plurality of terminals; and each terminal other than the host terminal. Terminal setting means for setting the client terminal, and ID setting means for setting a client ID for each client terminal, and the playback voice rule information is based on each client ID for the playback voice played back by each terminal. It includes the specified information.

請求項9記載の発明は、請求項8に記載の音声再生システムにおいて、前記ID設定手段は、前記ホスト端末からの無線送信による各クライアント端末での受信強度信号値をもとに、各クライアントIDを設定する手段、を含むことを特徴とする。   According to a ninth aspect of the present invention, in the audio reproduction system according to the eighth aspect, the ID setting means is configured to determine each client ID based on a reception strength signal value at each client terminal by wireless transmission from the host terminal. Means for setting.

請求項10記載の発明は、請求項8または請求項9に記載の音声再生システムにおいて、前記規則情報設定手段は、前記ホスト端末が保有する前記再生音声規則情報を各クライアント端末に無線送信することにより、各端末に前記再生音声規則情報を設定する手段、を含むことを特徴とする。   According to a tenth aspect of the present invention, in the audio reproduction system according to the eighth or ninth aspect, the rule information setting means wirelessly transmits the reproduction audio rule information held by the host terminal to each client terminal. And means for setting the reproduction voice rule information in each terminal.

請求項11記載の発明は、請求項1ないし請求項10のいずれかに記載の音声再生システムにおいて、さらに、前記再生音声と連携して、発光装置を動作制御する手段、を備えることを特徴とする。   The invention according to claim 11 is the sound reproduction system according to any one of claims 1 to 10, further comprising means for controlling operation of the light emitting device in cooperation with the reproduced sound. To do.

請求項1記載の発明は、複数端末に設定される、再生音声を規定する再生音声規則情報に基づいて、各端末の位置の変動に応じて、各端末が担う役割を各端末間で相互に変更することが可能である。   According to the first aspect of the present invention, each terminal plays the role of each terminal according to the variation of the position of each terminal based on the reproduction voice rule information that defines the reproduction voice set in a plurality of terminals. It is possible to change.

請求項2記載の発明は、複数端末に設定される、再生音声を規定する再生音声規則情報に基づいて、複数端末の個数の変動に応じて、各端末が担う役割を各端末間で相互に変更することが可能である。   According to the second aspect of the present invention, each terminal plays a role between the terminals in accordance with the variation of the number of the plurality of terminals based on the reproduction voice rule information that defines the reproduction voice set in the plurality of terminals. It is possible to change.

請求項3記載の発明は、再生音声規則情報に基づいて、複数端末がいずれの音源データを再生するかが規定されることになる。   According to the third aspect of the present invention, which sound source data is to be reproduced by a plurality of terminals is defined based on the reproduction voice rule information.

請求項4記載の発明は、再生音声規則情報に基づいて、複数端末がどのような発音タイミングで再生するかが規定されることになる。   According to the fourth aspect of the invention, based on the reproduction voice rule information, it is defined at what tone generation timing a plurality of terminals reproduce.

請求項5記載の発明は、再生音声規則情報が、再生音声のみならず、再生音量をも設定することにより、さらに臨場感あふれる立体音響空間を提供することが可能である。   According to the fifth aspect of the present invention, the reproduction sound rule information sets not only the reproduction sound but also the reproduction sound volume, so that it is possible to provide a stereoscopic sound space full of realism.

請求項6記載の発明は、再生音声規則情報が、再生音声のみならず、高周波成分量をも設定することにより、さらに臨場感あふれる立体音響空間を提供することが可能である。   According to the sixth aspect of the present invention, the reproduction sound rule information sets not only the reproduction sound but also the high-frequency component amount, so that it is possible to provide a stereoscopic sound space full of presence.

請求項7記載の発明は、再生音声規則情報が、立体音響効果に関するパラメータを指定することにより、エコー効果やハーモナイズ効果などの立体音響効果を実現することが可能である。   According to the seventh aspect of the present invention, it is possible to realize a stereophonic effect such as an echo effect or a harmony effect by specifying the parameter relating to the stereophonic effect in the reproduction voice rule information.

請求項8記載の発明は、複数端末に対して、ホスト端末またはクライアントIDが設定されたクライアント端末と名付けることにより、各端末が担う役割を付与することが可能である。   According to the eighth aspect of the present invention, a role played by each terminal can be given to a plurality of terminals by naming them as a host terminal or a client terminal in which a client ID is set.

請求項9記載の発明は、ホスト端末からの無線送信によるクライアント端末での受信強度信号値に基づいて、クライアントIDを設定することにより、複数端末の位置または個数の変動に応じて、各端末が担う役割を各端末間で相互にリアルタイムに変更することが容易となる。   According to the ninth aspect of the present invention, by setting the client ID based on the reception strength signal value at the client terminal by wireless transmission from the host terminal, each terminal can be set according to the change in the position or number of the plurality of terminals. It becomes easy to change the roles to be played between the terminals in real time.

請求項10記載の発明は、複数端末に再生音声規則情報が設定されるためには、すべての複数端末が再生音声規則情報を記憶する必要はなく、ホスト端末がクライアント端末に再生音声規則情報を無線送信するのみで足りることを可能とする。   According to the tenth aspect of the present invention, it is not necessary for all the plurality of terminals to store the reproduction voice rule information in order for the reproduction voice rule information to be set in the plurality of terminals, and the host terminal stores the reproduction voice rule information in the client terminal. It is possible to suffice only by wireless transmission.

請求項11記載の発明は、再生音声とLED発光を連携させることにより、さらに臨場感あふれる癒し空間を提供することが可能である。   According to the eleventh aspect of the present invention, it is possible to provide a healing space full of a sense of reality by linking reproduced sound and LED light emission.

<音声再生システムの概要>
以下、図面を参照しつつ本発明の実施の形態について説明する。まず、本発明に係る音声再生システムの概要について説明する。図1は、本実施の形態に係る無線接続された複数端末の配置図である。
<Outline of audio playback system>
Hereinafter, embodiments of the present invention will be described with reference to the drawings. First, an outline of an audio reproduction system according to the present invention will be described. FIG. 1 is a layout diagram of a plurality of wirelessly connected terminals according to the present embodiment.

ホスト端末10Hは、複数端末から任意に選択される、通常は単一の端末である。クライアント端末10C1,10C2,10C3は、複数端末から任意にホスト端末10Hに選択されなかった、単一または複数の端末である。ホスト端末10Hおよびクライアント端末10C1,10C2,10C3は、音声再生およびLED発光を行う点で共通する。しかし、ホスト端末10Hのみが音声再生システムを統括する点で相違する。   The host terminal 10H is normally a single terminal that is arbitrarily selected from a plurality of terminals. The client terminals 10C1, 10C2, and 10C3 are single or multiple terminals that are not arbitrarily selected from the multiple terminals by the host terminal 10H. The host terminal 10H and the client terminals 10C1, 10C2, and 10C3 are common in that sound reproduction and LED light emission are performed. However, it is different in that only the host terminal 10H controls the audio reproduction system.

ホスト端末10Hからクライアント端末10C1,10C2,10C3に対して、音声再生タイミングを設定する再生音声規則情報60およびLED発光タイミングを設定するLED発光規則情報70が記載されたシナリオプログラム20C1,20C2,20C3が無線送信される。複数端末は、再生音声規則情報60およびLED発光規則情報70に基づいて、各端末での音声再生およびLED発光を同期させることが可能である。   Scenario programs 20C1, 20C2, and 20C3 in which reproduction audio rule information 60 for setting audio reproduction timing and LED light emission rule information 70 for setting LED light emission timing are described from the host terminal 10H to the client terminals 10C1, 10C2, and 10C3. Wirelessly transmitted. The plurality of terminals can synchronize the sound reproduction and LED light emission at each terminal based on the reproduction sound rule information 60 and the LED light emission rule information 70.

ホスト端末10H、クライアント端末10C1,10C2,10C3は、それぞれ、うぐいすの鳴き声、和琴の音色、ししおどしの音、笙の音色を同期して再生している。   The host terminal 10H and the client terminals 10C1, 10C2, and 10C3 respectively reproduce the squealing voice, the tone of Japanese koto, the sound of shioshido, and the tone of the frog.

また、ホスト端末10H、クライアント端末10C1,10C2,10C3は、それぞれ、LED発光部30H、30C1,30C2,30C3を有しており、上述した音声再生と連携して、各端末での発光タイミングで同期してLED発光している。   Further, the host terminal 10H and the client terminals 10C1, 10C2, and 10C3 have LED light emitting units 30H, 30C1, 30C2, and 30C3, respectively, and are synchronized with the light emission timing at each terminal in cooperation with the above-described audio reproduction. LED light is emitted.

以上のように、複数端末が各端末での音声再生およびLED発光を同期させることにより、本発明に係る音声再生システムは、臨場感あふれる立体音響空間や癒し空間を提供することが可能となっている。   As described above, a plurality of terminals synchronize sound reproduction and LED light emission at each terminal, so that the sound reproduction system according to the present invention can provide a stereoscopic sound space and a healing space full of realism. Yes.

<音声再生システム中の個別端末の構成要素>
次に、図1で示した音声再生システム中の個別端末の構成要素について説明する。図2は、本実施の形態に係る端末のブロック図である。端末10は、ホスト端末選択スイッチ40、無線通信部50、音声処理部80、音声出力部81、LED発光部30、制御部100、第一記憶部110、第二記憶部120を備えている。
<Components of individual terminals in the audio playback system>
Next, components of the individual terminal in the audio reproduction system shown in FIG. 1 will be described. FIG. 2 is a block diagram of the terminal according to the present embodiment. The terminal 10 includes a host terminal selection switch 40, a wireless communication unit 50, an audio processing unit 80, an audio output unit 81, an LED light emitting unit 30, a control unit 100, a first storage unit 110, and a second storage unit 120.

ホスト端末選択スイッチ40は、これをオンにした端末はホスト端末10Hに選択され、これをオフにした端末はクライアント端末10C1,10C2,10C3に選択されるスイッチである。端末10の電源そのものをオン・オフにするスイッチとは異なるスイッチである。   The host terminal selection switch 40 is a switch in which a terminal that is turned on is selected as the host terminal 10H, and a terminal that is turned off is selected as the client terminals 10C1, 10C2, and 10C3. This switch is different from the switch for turning on / off the power supply itself of the terminal 10.

無線通信部50は、第二記憶部120に格納されている無線プロトコルコード121、アプリケーションコード122により、動作制御されている。   The operation of the wireless communication unit 50 is controlled by the wireless protocol code 121 and the application code 122 stored in the second storage unit 120.

音声処理部80、音声出力部81は、音声データ90、シナリオプログラム20に記載された再生音声規則情報60に基づいて、音声再生することが可能である。また、LED発光部30は、シナリオプログラム20に記載されたLED発光規則情報70に基づいて、LED発光することが可能である。音声処理部80、LED発光部30は、制御部100により、動作制御されている。音声データ90、シナリオプログラム20は、第一記憶部110に格納されている。   The audio processing unit 80 and the audio output unit 81 can perform audio reproduction based on the audio data 90 and the reproduction audio rule information 60 described in the scenario program 20. Further, the LED light emitting unit 30 can emit LEDs based on the LED light emission rule information 70 described in the scenario program 20. The operation of the sound processing unit 80 and the LED light emitting unit 30 is controlled by the control unit 100. The voice data 90 and the scenario program 20 are stored in the first storage unit 110.

本実施の形態においては、第二記憶部120、音声処理部80、制御部100について、それぞれ、ファームウェア用のフラッシュメモリ、Audio LSI、マイコンまたはCPUを利用している。   In the present embodiment, a firmware flash memory, an audio LSI, a microcomputer, or a CPU is used for the second storage unit 120, the audio processing unit 80, and the control unit 100, respectively.

上述した構成要素をワンチップに包含することにより、電力消費量と製造コストを削減することが可能である。例えば、本実施の形態においては、シナリオプログラム20、音声データ90は、第一記憶部110に格納されているが、マイコンが内蔵するファームウェア用のエンベディッドメモリに格納されることもできる。   By including the above-described components in one chip, it is possible to reduce power consumption and manufacturing cost. For example, in the present embodiment, the scenario program 20 and the audio data 90 are stored in the first storage unit 110, but may be stored in an embedded memory for firmware built in the microcomputer.

<シナリオプログラムの内容>
図1、図2の説明において現れたシナリオプログラム20の内容について説明する。図3は、本実施の形態に係るシナリオプログラム20の内容を示す図である。シナリオプログラム20は、トラックT1,T2,T3,T4ごとに、再生音声規則情報60T1,60T2,60T3,60T4、LED発光規則情報70T1,70T2,70T3,70T4、音声再生およびLED発光を行うべき端末名を記載している。
<Contents of scenario program>
The contents of the scenario program 20 that appears in the description of FIGS. 1 and 2 will be described. FIG. 3 is a diagram showing the contents of the scenario program 20 according to the present embodiment. The scenario program 20 includes, for each track T1, T2, T3, T4, reproduction sound rule information 60T1, 60T2, 60T3, 60T4, LED light emission rule information 70T1, 70T2, 70T3, 70T4, terminal names for sound reproduction and LED light emission. Is described.

再生音声規則情報60は、各端末での音声再生タイミングを設定している。図3では、再生音声規則情報60は、直線上を左側から右側に進行するに従って、時間が経過していることを示す時系列直線により表現されている。四角形は音声再生中、四角形以外の直線は音声再生停止を表している。四角形の直線方向の長さは、音声の長さを表している。例えば、和琴の一音は持続音ではないため、再生音声規則情報60T2において、四角形の直線方向の長さは短くなっている。一方、笙の一音は持続音であるため、再生音声規則情報60T4において、四角形の直線方向の長さは長くなっている。また、再生音声規則情報60は、再生音量変化を表すことが可能である。   The reproduction voice rule information 60 sets the voice reproduction timing at each terminal. In FIG. 3, the reproduction voice rule information 60 is represented by a time-series straight line indicating that time has passed as it progresses on the straight line from the left side to the right side. A square represents sound reproduction, and a straight line other than the square represents sound reproduction stop. The length of the square in the straight line direction represents the length of the voice. For example, since a single tone of Japanese koto is not a continuous tone, the length of the quadrangular linear direction in the reproduction sound rule information 60T2 is short. On the other hand, since a single note is a continuous sound, the length of the quadrangular linear direction is long in the reproduction sound rule information 60T4. Further, the reproduction sound rule information 60 can represent a change in reproduction volume.

再生音声規則情報60は、再生音声の高周波成分量を表すことも可能である。例えば、和琴を強く爪弾かせたり、笙を強く吹かせたりする設定を、再生音声規則情報60において行うことにより、和琴や笙の再生音声の倍音成分を多くすることができる。   The reproduced sound rule information 60 can also represent the amount of high frequency components of the reproduced sound. For example, by making settings in the playback voice rule information 60 to strongly slam the Japanese koto or to play the kite strongly, it is possible to increase the harmonic components of the playback sound of the Japanese koto and koto.

再生音声規則情報60は、さらに、立体音響効果を実現することも可能である。立体音響効果とは、複数端末が連携して音声再生することにより、空間的な奥行きを演出する効果をいい、例えば、エコー効果やハーモナイズ効果などが挙げられる。ここで、エコー効果とは、直接音に見立てたある端末での再生音声と、反射音に見立てた他の端末での再生音声を重ね合わせることなどをいう。また、ハーモナイズ効果とは、ピッチをわずかにずらした複数端末からの再生音声を重ね合わせることなどをいう。   The reproduction sound rule information 60 can further realize a three-dimensional sound effect. The stereophonic effect refers to an effect of producing a spatial depth by sound reproduction in cooperation with a plurality of terminals. Examples thereof include an echo effect and a harmonic effect. Here, the echo effect refers to, for example, superimposing reproduced sound at a certain terminal that looks like a direct sound and reproduced sound at another terminal that looks like a reflected sound. Further, the harmonization effect refers to superimposing reproduced audio from a plurality of terminals with slightly shifted pitches.

エコー効果を実現するためには、再生音声規則情報60において、直接音と反射音の音声再生タイミングのずれ、反射回数、反射時における再生音声と高周波成分の減衰率などを、パラメータとして設定することなどが考えられる。   In order to realize the echo effect, in the reproduction sound rule information 60, the difference between the sound reproduction timing of the direct sound and the reflected sound, the number of reflections, the attenuation rate of the reproduction sound and the high frequency component at the time of reflection, etc. are set as parameters. And so on.

ハーモナイズ効果を実現するためには、再生音声規則情報60において、後述する音声データ90で表現される音声ピッチを、複数端末間でどの程度わずかにずらすかを、パラメータとして設定することなどが考えられる。このことにより、複数の楽器などが合奏する状態を再現することが可能である。   In order to realize the harmonization effect, it is conceivable to set, as a parameter, how much the audio pitch expressed by the audio data 90 (to be described later) is shifted between a plurality of terminals in the reproduction audio rule information 60. . As a result, it is possible to reproduce a state in which a plurality of musical instruments are performed.

LED発光規則情報70は、各端末でのLED発光タイミングを設定している。図3では、LED発光規則情報70も、時系列直線により表現されている。ランプの図柄はLED発光中、ランプの図柄以外の直線はLED発光停止を表している。また、LED発光規則情報70は、LED発光量変化を表すことが可能である。さらに、再生音声規則情報60、LED発光規則情報70を連携させることが可能である。   The LED emission rule information 70 sets the LED emission timing at each terminal. In FIG. 3, the LED light emission rule information 70 is also expressed by a time series straight line. The lamp symbol indicates that the LED is emitting light, and the straight line other than the lamp symbol indicates that the LED emission is stopped. Further, the LED light emission rule information 70 can represent a change in LED light emission amount. Furthermore, the reproduction sound rule information 60 and the LED light emission rule information 70 can be linked.

再生音声規則情報60は、各端末での音声再生タイミングを設定しているテキストデータに過ぎず、音声再生波形をも設定しているわけではない。そこで、音声再生波形を設定する音声データ90が必要となる。   The reproduction voice rule information 60 is merely text data for setting the voice reproduction timing at each terminal, and does not set the voice reproduction waveform. Therefore, audio data 90 for setting the audio reproduction waveform is required.

<音声データの内容>
図2、図3の説明において現れた音声データ90の内容について説明する。図4は、本実施の形態に係る音声データ90の内容を示す図である。音声データ90は、本実施の形態においては、PCM(Pulsed-Code Modulation)データ、MIDI音源データから構成されている。
<Contents of audio data>
The contents of the audio data 90 appearing in the description of FIGS. 2 and 3 will be described. FIG. 4 is a diagram showing the contents of the audio data 90 according to the present embodiment. In this embodiment, the audio data 90 is composed of PCM (Pulsed-Code Modulation) data and MIDI sound source data.

うぐいすの鳴き声とししおどしの音は、楽譜では表現が困難であるため、音声データ90として、PCMデータを利用している。それぞれについて、ホーホケキョとチョロチョロ・・・カタンというアナログ音声信号がパルス列に変換されることにより、PCMデータが生成される。これらのPCMデータの再生タイミングを設定するものが、図3で示したトラックT1,T3に記載された再生音声規則情報60T1,60T3である。   PCM data is used as the voice data 90 because it is difficult to express the squeak and the squeaky sound with a score. PCM data is generated by converting analog audio signals such as Hoho Kyo, Choro Choro,. Reproduction voice rule information 60T1 and 60T3 described in tracks T1 and T3 shown in FIG. 3 set the reproduction timing of these PCM data.

一方、和琴の演奏と笙の演奏は、楽譜で表現が容易であるため、音声データ90として、MIDI音源データを利用している。それぞれについて、MIDI音源データは、和琴の各音階と笙の各音階に相当する。これらのMIDI音源データの再生タイミングを設定するものが、MIDIデータであり、図3で示したトラックT2,T4に記載された再生音声規則情報60T2,60T4である。   On the other hand, the performance of the Japanese koto and the performance of the samurai are easy to express with a musical score, so MIDI sound source data is used as the audio data 90. For each, the MIDI sound source data corresponds to each scale of Japanese koto and each scale of koto. It is the MIDI data that sets the reproduction timing of these MIDI sound source data, and the reproduction audio rule information 60T2 and 60T4 described in the tracks T2 and T4 shown in FIG.

<無線通信手段>
図1の説明において上述したように、ホスト端末10Hからクライアント端末10C1,10C2,10C3に対して、音声再生タイミングを設定する再生音声規則情報60およびLED発光タイミングを設定するLED発光規則情報70が記載されたシナリオプログラム20C1,20C2,20C3が無線送信される。
<Wireless communication means>
As described above in the description of FIG. 1, the reproduction audio rule information 60 for setting the audio reproduction timing and the LED emission rule information 70 for setting the LED emission timing are described from the host terminal 10H to the client terminals 10C1, 10C2, and 10C3. The scenario programs 20C1, 20C2, and 20C3 are wirelessly transmitted.

ここで、無線通信部50は、本実施の形態においては、ZigBee(登録商標)を利用している。その他の無線通信手段として、無線LAN、Bluetooth(登録商標)、300MHz帯電波などを利用することも可能である。しかし、乾電池で駆動する携帯型端末として、電力消費量を抑制するため、ZigBeeを利用する音声再生システムを実施している。   Here, the wireless communication unit 50 uses ZigBee (registered trademark) in the present embodiment. As other wireless communication means, a wireless LAN, Bluetooth (registered trademark), a 300 MHz charged wave, or the like can be used. However, as a portable terminal driven by a dry battery, an audio reproduction system using ZigBee is implemented in order to reduce power consumption.

ここで、ZigBeeにおける伝送速度(〜250Kbps)は、無線LAN、Bluetoothにおける伝送速度(それぞれ、〜54Mbps,〜1Mbps)と比較して遅いため、伝送速度とデータ容量の関係が問題となるとも考えられる。   Here, since the transmission speed in ZigBee (up to 250 Kbps) is slower than the transmission speed in wireless LAN and Bluetooth (up to 54 Mbps and -1 Mbps, respectively), the relationship between the transmission speed and the data capacity may be a problem. .

しかし、ホスト端末10Hからクライアント端末10C1,10C2,10C3に無線送信されるシナリオプログラム20C1,20C2,20C3は、音声再生タイミングとLED発光タイミングを設定する、再生音声規則情報60とLED発光規則情報70から構成されており、これらの規則情報はテキストデータに過ぎない。   However, the scenario programs 20C1, 20C2, and 20C3 wirelessly transmitted from the host terminal 10H to the client terminals 10C1, 10C2, and 10C3 are based on the reproduction sound rule information 60 and the LED light emission rule information 70 that set the sound reproduction timing and the LED light emission timing. The rule information is only text data.

また、音声データ90は、音声再生波形を設定するため、シナリオプログラム20と比較して、データ容量が圧倒的に大きい。そのため、音声データ90は、ホスト端末10Hからクライアント端末10C1,10C2,10C3に無線送信されず、各端末の第一記憶部110に格納されるべきものである。以上のことから、本実施の形態においては、伝送速度とデータ容量の関係は問題とならない。   Further, since the audio data 90 sets an audio reproduction waveform, the data volume is overwhelmingly larger than that of the scenario program 20. Therefore, the audio data 90 is not wirelessly transmitted from the host terminal 10H to the client terminals 10C1, 10C2, and 10C3, and should be stored in the first storage unit 110 of each terminal. From the above, in this embodiment, the relationship between the transmission rate and the data capacity does not matter.

<音声再生システムの処理の流れ>
[複数端末の配置およびホスト端末の選択]
まず、複数端末を購入する。その後に端末を新たに購入することにより、複数端末が連携して、音声再生およびLED発光を行う面白さが倍増する。
<Flow of audio playback system processing>
[Multi-terminal placement and host terminal selection]
First, purchase multiple terminals. By purchasing a new terminal after that, the fun of performing sound reproduction and LED light emission in cooperation with a plurality of terminals is doubled.

図1において、複数端末4個を部屋1に配置する。部屋1は、一辺の長さが10m程度の四角形の形状を有している。この四角形よりさらに複雑な形状を有する部屋においても、本発明に係る音声再生システムを実施することが可能である。図1のように、各端末をランダムに配置することも、<本実施の形態における特別な実施例>(後述)のように、各端末を直線状などに配置することも可能である。   In FIG. 1, four terminals are arranged in a room 1. The room 1 has a quadrangular shape with a side length of about 10 m. Even in a room having a more complicated shape than this quadrangle, the sound reproduction system according to the present invention can be implemented. As shown in FIG. 1, it is possible to arrange each terminal at random, or to arrange each terminal in a straight line or the like as described in <a special example in this embodiment> (described later).

複数端末4個の中から、任意に単一のホスト端末10Hを選択する。この選択は、ホスト端末10Hのホスト端末スイッチ40をオンにすることにより行う。ホスト端末10Hに選択されなかった端末は、クライアント端末10C1,10C2,10C3に自動的に選択される。   A single host terminal 10H is arbitrarily selected from the plurality of four terminals. This selection is performed by turning on the host terminal switch 40 of the host terminal 10H. The terminals that are not selected as the host terminal 10H are automatically selected as the client terminals 10C1, 10C2, and 10C3.

ここで、各クライアント端末を相互に区別する必要がある。各クライアント端末が、図3で示したシナリオプログラム20の中で、いずれの再生音声規則情報60およびLED発光規則情報70に基づいて、音声再生およびLED発光を行うかを決定する必要があるからである。本実施の形態においては、各クライアント端末に対して、クライアントIDを設定することにより、各クライアント端末を相互に区別している。   Here, it is necessary to distinguish each client terminal from each other. This is because each client terminal needs to determine which sound reproduction and LED light emission should be performed based on which reproduction sound rule information 60 and LED light emission rule information 70 in the scenario program 20 shown in FIG. is there. In this embodiment, each client terminal is distinguished from each other by setting a client ID for each client terminal.

[クライアントID設定手段]
次に、各クライアント端末に対して、クライアントIDを設定する手段について説明する。図5は、本実施の形態に係るクライアントIDを設定する手段を示す図である。図1で示した複数端末の配置図とは、端末数と端末配置が異なる。しかし、図1で示した複数端末の配置図においても、以下に説明するようなクライアントIDを設定する手段を利用している。
[Client ID setting means]
Next, means for setting a client ID for each client terminal will be described. FIG. 5 is a diagram showing a means for setting the client ID according to the present embodiment. The number of terminals and the terminal arrangement are different from the multiple terminal arrangement shown in FIG. However, the multiple terminal arrangement shown in FIG. 1 also uses means for setting a client ID as described below.

図5において、端末11Hのホスト端末選択スイッチ40をオンにしているため、端末11Hはホスト端末に選択されている。ホスト端末選択スイッチ40をオフにしている端末11C1,11C2,11C3,11C4,11C5,11C6は、クライアント端末に選択されている。   In FIG. 5, since the host terminal selection switch 40 of the terminal 11H is turned on, the terminal 11H is selected as the host terminal. The terminals 11C1, 11C2, 11C3, 11C4, 11C5, and 11C6 for which the host terminal selection switch 40 is turned off are selected as client terminals.

本実施の形態においては、各クライアント端末での受信強度信号値をもとに、各クライアントIDを設定している。具体的には、受信強度信号値が大きい順に、小さいクライアントIDを設定している。部屋1において、パーティションなどの障害物が存在しなければ、通常は、ホスト端末11Hから各クライアント端末までの距離が長くなるに従って、各クライアント端末での受信強度信号値は小さくなる。図5における同心円状の破線は、ホスト端末11Hから各クライアント端末までの距離を測る目安である。   In the present embodiment, each client ID is set based on the received intensity signal value at each client terminal. Specifically, the smaller client IDs are set in descending order of the received strength signal value. If there is no obstacle such as a partition in the room 1, normally, the received intensity signal value at each client terminal decreases as the distance from the host terminal 11H to each client terminal increases. The concentric broken line in FIG. 5 is a measure for measuring the distance from the host terminal 11H to each client terminal.

図6は、クライアントIDを設定する手段における、各クライアント端末での受信強度信号値を示す図である。部屋1の一辺の長さは10m程度でしかない。しかし、本実施の形態においては、無線通信手段として無線強度が小さいZigBee(登録商標)を利用している。そのため、部屋1の中であっても、ホスト端末11Hから各クライアント端末までの距離が長くなるに従って、各クライアント端末での受信強度信号値は急速に減衰している。よって、ホスト端末11Hからの距離に大差がないクライアント端末11C4,11C5,11C6に対しても、精度良くクライアントID4,5,6を設定することが可能である。   FIG. 6 is a diagram showing reception strength signal values at each client terminal in the means for setting the client ID. The length of one side of room 1 is only about 10m. However, in the present embodiment, ZigBee (registered trademark) having a low wireless strength is used as the wireless communication means. Therefore, even in the room 1, as the distance from the host terminal 11H to each client terminal becomes longer, the received intensity signal value at each client terminal rapidly attenuates. Therefore, it is possible to set the client IDs 4, 5, and 6 with high accuracy even for the client terminals 11C4, 11C5, and 11C6 that are not greatly different in distance from the host terminal 11H.

[シナリオプログラムおよび音声データの記憶手段]
上述したような過程を経過することにより、図1において、ホスト端末10Hからクライアント端末10C1,10C2,10C3に対して、シナリオプログラム20C1,20C2,20C3を無線送信する準備が整う。無線送信について説明する前に、シナリオプログラム20、音声データ90を第一記憶部110に格納する手段について説明する。
[Scenario program and voice data storage means]
By going through the process as described above, in FIG. 1, the host terminal 10H is ready to wirelessly transmit the scenario programs 20C1, 20C2, and 20C3 to the client terminals 10C1, 10C2, and 10C3. Before describing the wireless transmission, means for storing the scenario program 20 and the audio data 90 in the first storage unit 110 will be described.

第一記憶部110は、内部メモリまたは外部メモリのいずれであってもよい。外部メモリである場合は、ダウンロードしたシナリオプログラム20、音声データ90を、外部メモリカードに保存することにより、利用者によるカスタマイズがより容易になる。   The first storage unit 110 may be either an internal memory or an external memory. In the case of an external memory, the downloaded scenario program 20 and audio data 90 are stored in an external memory card, so that customization by the user becomes easier.

また、<無線通信手段>において説明したように、シナリオプログラム20は無線送信されるが、音声データ90は無線送信されない。そのため、音声データ90はすべての複数端末の第一記憶部110に格納しなければならない。しかし、シナリオプログラム20は、複数端末の中から特定端末のみをホスト端末に選択するならば、そのホスト端末の第一記憶部110のみに格納すれば足りる。   Further, as described in <Wireless communication means>, the scenario program 20 is wirelessly transmitted, but the audio data 90 is not wirelessly transmitted. Therefore, the audio data 90 must be stored in the first storage unit 110 of all the plurality of terminals. However, if only the specific terminal is selected as the host terminal from the plurality of terminals, the scenario program 20 need only be stored in the first storage unit 110 of the host terminal.

[シナリオプログラムの無線送信]
次に、ホスト端末10Hからクライアント端末10C1,10C2,10C3に対して、シナリオプログラム20C1,20C2,20C3を無線送信する。この際に、各クライアント端末に対して、図3で示したシナリオプログラム20のすべての内容を無線送信してもよい。しかし、例えば、クライアント端末10C1に対しては、再生音声規則情報60T2、LED発光規則情報70T2のみを無線送信することも可能である。
[Scenario program wireless transmission]
Next, scenario programs 20C1, 20C2, and 20C3 are wirelessly transmitted from the host terminal 10H to the client terminals 10C1, 10C2, and 10C3. At this time, all the contents of the scenario program 20 shown in FIG. 3 may be wirelessly transmitted to each client terminal. However, for example, only the reproduction audio rule information 60T2 and the LED light emission rule information 70T2 can be wirelessly transmitted to the client terminal 10C1.

ここで、図3で示した各時系列直線の最左端から、同時刻にすべての音声再生およびLED発光が開始しなければならない。特に、和琴の演奏と笙の演奏がかみ合わなければ、楽曲が完成されないからである。そこで、複数端末は、各端末での音声再生およびLED発光を同期させる必要があり、以下にその手段について説明する。   Here, from the leftmost end of each time-series line shown in FIG. 3, all audio reproduction and LED emission must start at the same time. In particular, the music is not completed unless the performance of the koto and the performance of the koto are engaged. Therefore, it is necessary for a plurality of terminals to synchronize sound reproduction and LED light emission at each terminal, and the means will be described below.

ホスト端末10Hは、クライアント端末10C1,10C2,10C3に対して、同期オフセット確認信号を送信する。各クライアント端末は、ホスト端末10Hに対して、同期オフセット確認信号に対する応答信号を返信する。ホスト端末10Hは、同期オフセット確認信号に対する応答信号の遅延時間から、各クライアント端末の同期オフセット情報を設定し、各クライアント端末に対して、各同期オフセット情報を送信する。   The host terminal 10H transmits a synchronization offset confirmation signal to the client terminals 10C1, 10C2, and 10C3. Each client terminal returns a response signal to the synchronization offset confirmation signal to the host terminal 10H. The host terminal 10H sets the synchronization offset information of each client terminal from the delay time of the response signal with respect to the synchronization offset confirmation signal, and transmits each synchronization offset information to each client terminal.

次に、ホスト端末10Hは、各クライアント端末に対して、同期信号の送信を開始する。この同期信号は、本発明に係る音声再生システムが動作している間、継続して各クライアント端末に送信される。各クライアント端末の制御部100は、各同期オフセット情報に基づいて、同期信号を調整する。このようにして、複数端末間で同期がとられる。   Next, the host terminal 10H starts transmission of a synchronization signal to each client terminal. This synchronization signal is continuously transmitted to each client terminal while the audio reproduction system according to the present invention is operating. The control unit 100 of each client terminal adjusts the synchronization signal based on each synchronization offset information. In this way, synchronization is achieved among a plurality of terminals.

なお、複数端末が電波時計を内蔵するなど、正確な絶対時間情報を保持できる場合には、上述したオフセット調整プロセスは不要である。複数端末は、保持している絶対時間に基づいて、音声再生およびLED発光を行えばよい。   Note that the above-described offset adjustment process is not required when accurate absolute time information can be held, such as when a plurality of terminals have built-in radio clocks. The plurality of terminals may perform sound reproduction and LED light emission based on the absolute time held.

[音声再生およびLED発光]
上述した無線送信により送信されたシナリオプログラム20に記載された再生音声規則情報60およびLED発光規則情報70に基づいて、複数端末での音声再生およびLED発光を同期させることが可能である。
[Audio playback and LED emission]
Based on the reproduction sound rule information 60 and the LED light emission rule information 70 described in the scenario program 20 transmitted by wireless transmission, it is possible to synchronize sound reproduction and LED light emission at a plurality of terminals.

例えば、ホスト端末10Hでは、再生音声規則情報60T1に基づいて、うぐいすの鳴き声の再生が行われる。再生音声規則情報60T1の中の四角形において、ホーホケキョをデータ内容とするPCMデータが再生される。また、LED発光規則情報70T1に基づいて、うぐいすの鳴き声の開始時と終了時に、LED発光が行われる。   For example, the host terminal 10H reproduces the cry of the lure based on the reproduction voice rule information 60T1. In the square in the reproduction voice rule information 60T1, the PCM data having the data content of Hohokekyo is reproduced. Further, based on the LED light emission rule information 70T1, LED light emission is performed at the start and end of the squealing of the lure.

さらに、クライアント端末10C3では、再生音声規則情報60T4に基づいて、笙の音色の再生が行われる。再生音声規則情報60T4の中の四角形において、笙の各音階をデータ内容とするMIDI音源データが再生される。また、LED発光規則情報70T4に基づいて、笙の音色の鳴り始めに、LED発光が行われる。   Further, in the client terminal 10C3, the timbre tone is reproduced based on the reproduction voice rule information 60T4. In the square in the reproduction sound rule information 60T4, the MIDI sound source data having the data content of each scale of the frog is reproduced. Also, based on the LED light emission rule information 70T4, LED light emission is performed at the beginning of the sound of the sword.

以上のように、複数端末が各端末での音声再生およびLED発光を同期させることにより、本発明に係る音声再生システムは、臨場感あふれる立体音響空間や癒し空間を提供することが可能となっている。また、エコー効果やハーモナイズ効果などの立体音響効果により、さらなる臨場感を演出することも可能である。   As described above, a plurality of terminals synchronize sound reproduction and LED light emission at each terminal, so that the sound reproduction system according to the present invention can provide a stereoscopic sound space and a healing space full of realism. Yes. Further, it is possible to produce a more realistic sensation by a stereophonic effect such as an echo effect or a harmony effect.

[複数端末間の役割変更手段]
ここで、本発明に係る音声再生システムは、複数端末間で各端末が担う役割を相互に変更することが可能である。例えば、ホスト端末10Hの近傍でくつろいでいる利用者が、うぐいすの鳴き声よりも、ししおどしの音を際立たせたいと思えば、ホスト端末10Hとクライアント端末10C2の役割を相互に変更することができる。このことにより、複数端末が連携して、音声再生およびLED発光を行う面白さがさらに倍増することになる。
[Role changing means between multiple terminals]
Here, the audio reproduction system according to the present invention can mutually change the role of each terminal among a plurality of terminals. For example, if a user relaxing in the vicinity of the host terminal 10H wants to make a squeaky sound stand out from the squeak, a role of the host terminal 10H and the client terminal 10C2 can be mutually changed. As a result, the fun of performing voice reproduction and LED light emission in cooperation with a plurality of terminals is further doubled.

複数端末間で各端末が担う役割を相互に変更する手段として、(1)ホスト端末とクライアント端末の役割を交換すること、(2)複数端末の位置を変更すること、(3)複数端末の個数を変更すること、を提案する。それらの手段について、以下に説明する。   As means for mutually changing the roles of each terminal among a plurality of terminals, (1) exchanging the roles of the host terminal and the client terminal, (2) changing the position of the plurality of terminals, (3) Propose to change the number. These means will be described below.

まず、ホスト端末とクライアント端末の役割を交換することについて説明する。役割交換前の初期状態を示す図5において、ホスト端末11Hのホスト端末選択スイッチ40をオフにして、各クライアント端末から任意に選択した端末11C6のホスト端末選択スイッチ40をオンにする。この場合、新たなクライアント端末11H,11C1,11C2,11C3,11C4,11C5での受信強度信号値をもとに、新たなクライアントIDが設定されることになる。   First, the exchange of the roles of the host terminal and the client terminal will be described. In FIG. 5 showing the initial state before role exchange, the host terminal selection switch 40 of the host terminal 11H is turned off, and the host terminal selection switch 40 of the terminal 11C6 arbitrarily selected from each client terminal is turned on. In this case, a new client ID is set based on the reception intensity signal values at the new client terminals 11H, 11C1, 11C2, 11C3, 11C4, and 11C5.

新たなクライアントIDの設定に伴って、図3で示したようなシナリオプログラム20が変更されることはない。しかし、シナリオプログラム20に記載された、音声再生およびLED発光を行うべき端末名に基づいて、複数端末の役割を変更することができる。   With the setting of a new client ID, the scenario program 20 as shown in FIG. 3 is not changed. However, the roles of a plurality of terminals can be changed based on the names of terminals that should perform voice reproduction and LED light emission described in the scenario program 20.

次に、複数端末の位置を変更することについて説明する。図7は、複数端末の位置の変動に応じて、クライアントIDをリアルタイムに変更する手段を示す図である。図5、図7で示した複数端末の配置図の相違点は、図7でのホスト端末11Hからクライアント端末11C3までの距離が、図5での距離と比較して長いことである。   Next, changing the positions of a plurality of terminals will be described. FIG. 7 is a diagram showing a means for changing the client ID in real time in accordance with a change in the position of a plurality of terminals. 5 and FIG. 7 is that the distance from the host terminal 11H to the client terminal 11C3 in FIG. 7 is longer than the distance in FIG.

そのため、例えば、クライアント端末11C3について、図5で示した配置図では、クライアントIDとして3が設定されていたが、図7で示した配置図では、クライアントIDとして6が設定されることになる。そして、図3で示したようなシナリオプログラム20に基づいて、複数端末の役割を、演奏前または演奏中に関わらず、リアルタイムに変更することが可能である。   Therefore, for example, for the client terminal 11C3, 3 is set as the client ID in the layout shown in FIG. 5, but 6 is set as the client ID in the layout shown in FIG. Based on the scenario program 20 as shown in FIG. 3, the roles of a plurality of terminals can be changed in real time regardless of before or during the performance.

最後に、複数端末の個数を変更することについて説明する。図8は、複数端末の個数の増減に応じて、クライアントIDをリアルタイムに変更する手段を示す図である。図5、図8で示した複数端末の配置図の相違点は、図8において、端末11C7を新たに追加したことである。   Finally, changing the number of multiple terminals will be described. FIG. 8 is a diagram showing a means for changing the client ID in real time according to the increase / decrease in the number of terminals. The difference between the layout diagrams of the plurality of terminals shown in FIGS. 5 and 8 is that a terminal 11C7 is newly added in FIG.

そのため、例えば、端末11C7について、クライアントIDとして1が設定されることになる。そして、図3で示したようなシナリオプログラム20に基づいて、複数端末の役割を、演奏前または演奏中に関わらず、リアルタイムに変更することが可能である。複数端末を購入した後であっても、新たに端末を購入することにより、複数端末が連携して、音声再生およびLED発光を行う面白さがさらに倍増することになる。   Therefore, for example, 1 is set as the client ID for the terminal 11C7. Based on the scenario program 20 as shown in FIG. 3, the roles of a plurality of terminals can be changed in real time regardless of before or during the performance. Even after purchasing a plurality of terminals, purchasing a new terminal further doubles the fun of performing voice reproduction and LED light emission in cooperation with the plurality of terminals.

<本実施の形態における特別な実施例>
本実施の形態についての最後の説明として、本発明の効果が顕著に現れる特別な実施例について説明する。図1、図5、図7、図8で示した複数端末の配置図では、複数端末は部屋1でランダムに配置されていた。しかし、複数端末を直線状や円状などに配置する場合も考えられる。この場合においても、各クライアント端末に対して、クライアントIDを設定または変更する手段は、図5、図7、図8の説明における手段と同様である。
<Special Example in this Embodiment>
As a final description of the present embodiment, a special example in which the effect of the present invention is noticeable will be described. In the layout diagrams of the plurality of terminals shown in FIGS. 1, 5, 7, and 8, the plurality of terminals are randomly arranged in the room 1. However, there may be a case where a plurality of terminals are arranged in a straight line or a circle. Even in this case, the means for setting or changing the client ID for each client terminal is the same as the means in the description of FIGS.

例えば、複数端末を直線状に配置する場合を考える。利用者は直線の片端でくつろいでおり、直線のその片端にある端末をホスト端末に選択する。すると、直線の別の片端にあるクライアント端末が、フレーズ演奏とLED発光をする。この演奏と発光が終了すると、直線の別の片端にあるクライアント端末に隣接する、利用者により近い位置にあるクライアント端末が、同様のフレーズ演奏とLED発光をする。以上のリレー演奏と発光を繰り返すことにより、演奏と発光が利用者に徐々に迫ってくる臨場感を楽しむことが可能である。   For example, consider a case where a plurality of terminals are arranged in a straight line. The user is relaxing at one end of the straight line, and selects the terminal at that end of the straight line as the host terminal. Then, the client terminal at another end of the straight line emits the phrase performance and LED light emission. When the performance and the light emission are completed, the client terminal adjacent to the client terminal at the other end of the straight line and closer to the user emits the same phrase performance and LED light emission. By repeating the above-described relay performance and light emission, it is possible to enjoy a sense of reality in which performance and light emission gradually approach the user.

その逆のパターンとして、直線の別の片端にある端末をホスト端末に選択すると、演奏と発光が利用者から徐々に遠ざかる臨場感を楽しむことが可能である。   As a reverse pattern, when a terminal at another end of a straight line is selected as the host terminal, it is possible to enjoy a sense of realism where performance and light emission gradually move away from the user.

また、図1、図5、図7、図8で示した複数端末の配置図では、複数端末は部屋1で床面に配置されていた。しかし、複数端末を3次元的に配置する場合も考えられる。このような配置により、例えば、利用者の上方から神々しい演奏が聞こえるという楽しさも実現できる。   In the layout diagrams of the plurality of terminals shown in FIGS. 1, 5, 7, and 8, the plurality of terminals are arranged on the floor in the room 1. However, there may be a case where a plurality of terminals are arranged three-dimensionally. With such an arrangement, for example, it is possible to realize the joy of hearing a divine performance from above the user.

<MP3データを無線送信する変形例>
本実施例と一部が異なる変形例として、MP3データを無線送信する変形例について説明する。MP3データは、PCMデータなどの音声波形データを、約10分の1程度にまで圧縮したデータである。
<Modified example of wirelessly transmitting MP3 data>
As a modified example that is partially different from the present example, a modified example in which MP3 data is wirelessly transmitted will be described. The MP3 data is data obtained by compressing voice waveform data such as PCM data to about 1/10.

本実施の形態においては、無線送信手段として、ZigBee(登録商標)を利用している。しかし、ZigBeeにおける伝送速度(〜250Kbps)を考慮しても,MP3データの容量は小さいため、伝送速度とデータ容量の関係についての問題は生じない。もっとも、この問題が解決できれば、PCMデータを無線送信するようにしてもよい。   In the present embodiment, ZigBee (registered trademark) is used as the wireless transmission means. However, even if the transmission speed (up to 250 Kbps) in ZigBee is taken into account, the MP3 data capacity is small, so that there is no problem with the relationship between the transmission speed and the data capacity. However, if this problem can be solved, the PCM data may be transmitted wirelessly.

本変形例においては、MP3データは、図2で示した音声データ90に相当するものである。また、MP3データの再生タイミングを設定するものが、図3で示したシナリオプログラム20における再生音声規則情報60である。本実施の形態と本変形例の相違点は、音声データ90は無線送信されないが、MP3データは無線送信されることである。   In the present modification, the MP3 data corresponds to the audio data 90 shown in FIG. Also, the playback timing information 60 in the scenario program 20 shown in FIG. 3 sets the playback timing of the MP3 data. The difference between this embodiment and this modification is that audio data 90 is not transmitted wirelessly, but MP3 data is transmitted wirelessly.

本実施の形態に係る無線接続された複数端末の配置図である。It is an arrangement view of a plurality of wirelessly connected terminals according to the present embodiment. 本実施の形態に係る端末のブロック図である。It is a block diagram of the terminal which concerns on this Embodiment. 本実施の形態に係るシナリオプログラムの内容を示す図である。It is a figure which shows the content of the scenario program which concerns on this Embodiment. 本実施の形態に係る音声データの内容を示す図である。It is a figure which shows the content of the audio | voice data which concern on this Embodiment. 本実施の形態に係るクライアントIDを設定する手段を示す図である。It is a figure which shows the means to set the client ID which concerns on this Embodiment. クライアントIDを設定する手段における、各クライアント端末での受信強度信号値を示す図である。It is a figure which shows the receiving strength signal value in each client terminal in the means to set client ID. 複数端末の位置の変動に応じて、クライアントIDをリアルタイムに変更する手段を示す図である。It is a figure which shows the means to change client ID in real time according to the fluctuation | variation of the position of several terminals. 複数端末の個数の増減に応じて、クライアントIDをリアルタイムに変更する手段を示す図である。It is a figure which shows the means to change client ID in real time according to increase / decrease in the number of several terminals.

符号の説明Explanation of symbols

1 部屋
10 端末
10H ホスト端末
10C1,10C2,10C3 クライアント端末
11H ホスト端末
11C1,11C2,11C3,11C4,11C5,11C6,11C7 クライアント端末
20C1,20C2,20C3 シナリオプログラム
30H,30C1,30C2,30C3 LED発光部
60T1,60T2,60T3,60T4 再生音声規則情報
70T1,70T2,70T3,70T4 LED発光規則情報
1 room 10 terminal 10H host terminal 10C1, 10C2, 10C3 client terminal 11H host terminal 11C1, 11C2, 11C3, 11C4, 11C5, 11C6, 11C7 client terminal 20C1, 20C2, 20C3 scenario program 30H, 30C1, 30C2, 30C3 LED light emitting unit 60T1 , 60T2, 60T3, 60T4 reproduction sound rule information 70T1, 70T2, 70T3, 70T4 LED light emission rule information

Claims (11)

無線接続された複数端末においてそれぞれ再生される再生音声を同期させる手段と、
各端末で再生される前記再生音声を規定した再生音声規則情報を、各端末に設定する規則情報設定手段と、
を備え、
前記再生音声規則情報は、
各端末の位置に応じて、各端末で再生される前記再生音声を規定した情報、
を含むことを特徴とする音声再生システム。
Means for synchronizing reproduced audio reproduced in each of a plurality of wirelessly connected terminals;
Rule information setting means for setting, in each terminal, playback voice rule information defining the playback voice played back in each terminal;
With
The reproduction voice rule information is
Information defining the playback audio played back on each terminal according to the position of each terminal,
An audio reproduction system comprising:
無線接続された複数端末においてそれぞれ再生される再生音声を同期させる手段と、
各端末で再生される前記再生音声を規定した再生音声規則情報を、各端末に設定する規則情報設定手段と、
を備え、
前記再生音声規則情報は、
前記複数端末の個数に応じて、各端末で再生される前記再生音声を規定した情報、
を含むことを特徴とする音声再生システム。
Means for synchronizing reproduced audio reproduced in each of a plurality of wirelessly connected terminals;
Rule information setting means for setting, in each terminal, playback voice rule information defining the playback voice played back in each terminal;
With
The reproduction voice rule information is
Information defining the playback sound played back by each terminal according to the number of the plurality of terminals,
An audio reproduction system comprising:
請求項1または請求項2に記載の音声再生システムにおいて、
前記再生音声規則情報は、
前記再生音声の音源情報を指定する情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to claim 1 or 2,
The reproduction voice rule information is
Information specifying the sound source information of the playback audio;
An audio reproduction system comprising:
請求項1ないし請求項3のいずれかに記載の音声再生システムにおいて、
前記再生音声規則情報は、
前記再生音声の発音タイミングを指定する情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 3,
The reproduction voice rule information is
Information for designating the sounding timing of the reproduced sound;
An audio reproduction system comprising:
請求項1ないし請求項4のいずれかに記載の音声再生システムにおいて、
前記再生音声規則情報は、
前記再生音声に対する時間経過に伴う音量変化を指定する情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 4,
The reproduction voice rule information is
Information specifying volume change over time for the playback audio;
An audio reproduction system comprising:
請求項1ないし請求項5のいずれかに記載の音声再生システムにおいて、
前記再生音声規則情報は、
前記再生音声に対する時間経過に伴う高周波成分量変化を指定する情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 5,
The reproduction voice rule information is
Information specifying a high-frequency component amount change over time for the reproduced sound,
An audio reproduction system comprising:
請求項1ないし請求項6のいずれかに記載の音声再生システムにおいて、
前記再生音声規則情報は、
前記再生音声による立体音響効果に関するパラメータを指定する情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 6,
The reproduction voice rule information is
Information for specifying parameters relating to the stereophonic sound effect by the reproduced sound,
An audio reproduction system comprising:
請求項1ないし請求項7のいずれかに記載の音声再生システムにおいて、さらに、
前記複数端末からホスト端末を選択する端末選択手段と、
前記ホスト端末以外の各端末をクライアント端末に設定する端末設定手段と、
各クライアント端末にクライアントIDを設定するID設定手段と、
を備え、
前記再生音声規則情報は、
各端末で再生される前記再生音声を各クライアントIDに基づいて規定した情報、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 7, further comprising:
Terminal selection means for selecting a host terminal from the plurality of terminals;
Terminal setting means for setting each terminal other than the host terminal as a client terminal;
ID setting means for setting a client ID in each client terminal;
With
The reproduction voice rule information is
Information defining the playback audio played back on each terminal based on each client ID;
An audio reproduction system comprising:
請求項8に記載の音声再生システムにおいて、
前記ID設定手段は、
前記ホスト端末からの無線送信による各クライアント端末での受信強度信号値をもとに、各クライアントIDを設定する手段、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to claim 8, wherein
The ID setting means includes
Means for setting each client ID based on a reception intensity signal value at each client terminal by wireless transmission from the host terminal;
An audio reproduction system comprising:
請求項8または請求項9に記載の音声再生システムにおいて、
前記規則情報設定手段は、
前記ホスト端末が保有する前記再生音声規則情報を各クライアント端末に無線送信することにより、各端末に前記再生音声規則情報を設定する手段、
を含むことを特徴とする音声再生システム。
The sound reproduction system according to claim 8 or 9,
The rule information setting means includes:
Means for setting the reproduction voice rule information in each terminal by wirelessly transmitting the reproduction voice rule information held by the host terminal to each client terminal;
An audio reproduction system comprising:
請求項1ないし請求項10のいずれかに記載の音声再生システムにおいて、さらに、
前記再生音声と連携して、発光装置を動作制御する手段、
を備えることを特徴とする音声再生システム。
The sound reproduction system according to any one of claims 1 to 10, further comprising:
Means for controlling the operation of the light emitting device in cooperation with the reproduced sound;
An audio playback system comprising:
JP2006330763A 2006-12-07 2006-12-07 Audio playback system Expired - Fee Related JP5098036B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006330763A JP5098036B2 (en) 2006-12-07 2006-12-07 Audio playback system
PCT/JP2007/072793 WO2008069038A1 (en) 2006-12-07 2007-11-26 Audio reproducing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006330763A JP5098036B2 (en) 2006-12-07 2006-12-07 Audio playback system

Publications (2)

Publication Number Publication Date
JP2008147860A true JP2008147860A (en) 2008-06-26
JP5098036B2 JP5098036B2 (en) 2012-12-12

Family

ID=39491941

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006330763A Expired - Fee Related JP5098036B2 (en) 2006-12-07 2006-12-07 Audio playback system

Country Status (2)

Country Link
JP (1) JP5098036B2 (en)
WO (1) WO2008069038A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018055959A1 (en) * 2016-09-23 2018-03-29 ソニー株式会社 Reproduction device, reproduction method, program, and reproduction system
CN110100450A (en) * 2017-02-24 2019-08-06 索尼公司 Main reproduction equipment, from reproduction equipment and its light emitting method
JP2020526161A (en) * 2018-02-22 2020-08-27 エルジー・ケム・リミテッド Wireless battery control system, method and battery pack for assigning IDs to multiple slave management modules

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003047098A (en) * 2001-07-27 2003-02-14 Nec Corp Portable terminal device and sound reproduction system therefor
JP2003316368A (en) * 2002-04-26 2003-11-07 Yamaha Corp Method for delivering content data, content server, method for controlling content server, control program for content server, and recording medium
JP2004348143A (en) * 2004-06-04 2004-12-09 Namco Ltd Information providing system, portable terminal device, program, and information storage medium
JP2005017777A (en) * 2003-06-26 2005-01-20 Sharp Corp Voice output system and musical performance system
JP2006148448A (en) * 2004-11-18 2006-06-08 Nintendo Co Ltd Radio network system and radio communication program
JP2006217337A (en) * 2005-02-04 2006-08-17 Mitsubishi Electric Corp Facility device management method and its system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007124380A (en) * 2005-10-28 2007-05-17 Nec Corp Stereophonic output system, stereophonic output method, and program for stereophonic output

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003047098A (en) * 2001-07-27 2003-02-14 Nec Corp Portable terminal device and sound reproduction system therefor
JP2003316368A (en) * 2002-04-26 2003-11-07 Yamaha Corp Method for delivering content data, content server, method for controlling content server, control program for content server, and recording medium
JP2005017777A (en) * 2003-06-26 2005-01-20 Sharp Corp Voice output system and musical performance system
JP2004348143A (en) * 2004-06-04 2004-12-09 Namco Ltd Information providing system, portable terminal device, program, and information storage medium
JP2006148448A (en) * 2004-11-18 2006-06-08 Nintendo Co Ltd Radio network system and radio communication program
JP2006217337A (en) * 2005-02-04 2006-08-17 Mitsubishi Electric Corp Facility device management method and its system

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018055959A1 (en) * 2016-09-23 2018-03-29 ソニー株式会社 Reproduction device, reproduction method, program, and reproduction system
CN109716783A (en) * 2016-09-23 2019-05-03 索尼公司 Transcriber, reproducting method, program and playback system
JPWO2018055959A1 (en) * 2016-09-23 2019-07-25 ソニー株式会社 Reproducing apparatus, reproducing method, program, and reproducing system
CN109716783B (en) * 2016-09-23 2020-12-01 索尼公司 Reproduction device, reproduction method, program, and reproduction system
JP7095597B2 (en) 2016-09-23 2022-07-05 ソニーグループ株式会社 Playback device, playback method, program, and playback system
CN110100450A (en) * 2017-02-24 2019-08-06 索尼公司 Main reproduction equipment, from reproduction equipment and its light emitting method
CN110100450B (en) * 2017-02-24 2021-08-03 索尼公司 Master reproducing apparatus, slave reproducing apparatus, and light emitting method thereof
US11420134B2 (en) 2017-02-24 2022-08-23 Sony Corporation Master reproduction apparatus, slave reproduction apparatus, and emission methods thereof
JP2020526161A (en) * 2018-02-22 2020-08-27 エルジー・ケム・リミテッド Wireless battery control system, method and battery pack for assigning IDs to multiple slave management modules

Also Published As

Publication number Publication date
JP5098036B2 (en) 2012-12-12
WO2008069038A1 (en) 2008-06-12

Similar Documents

Publication Publication Date Title
US20190280478A1 (en) Sequentially operated modules
US9378717B2 (en) Synchronized multiple device audio playback and interaction
US10258761B2 (en) Children&#39;s product with synchronized sound and non-sound output
US8354918B2 (en) Light, sound, and motion receiver devices
TW201544365A (en) Electronic device for presenting perceivable content
JP5098036B2 (en) Audio playback system
JP7095597B2 (en) Playback device, playback method, program, and playback system
JP4700351B2 (en) Multi-user environment control
CN203812192U (en) Fly mouse with musical instrument playing function
JP2008134295A (en) Concert system
JP2015049262A (en) Communication karaoke system
JP4182781B2 (en) Karaoke equipment
JP2017168961A (en) Simultaneous playback program, simultaneous playback system, portable terminal and luminous body
JP5109127B2 (en) Ensemble system
JP2020058632A (en) Performance presenting device, program, and performance presentation system
CN202652499U (en) Dual-mode resonance portable sound box
CN110384913B (en) Kara OK broadcast control equipment-based sports entertainment system for health and use method
JP6171148B2 (en) Game equipment
JP2004178928A (en) Lighting equipment
TW201134231A (en) Synchronous audio or light playback system
JP2021109031A (en) Toy and toy system
KR20200056637A (en) Accompaniment Machine
KR101222711B1 (en) Sever, game apparatus, and systmem for providing ensemble game
JP5981095B2 (en) Karaoke device, terminal and main unit
JP2004219870A (en) Melody toy device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110906

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120515

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120807

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120831

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151005

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5098036

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees