JP2012161088A - Data distribution system and relay device - Google Patents
Data distribution system and relay device Download PDFInfo
- Publication number
- JP2012161088A JP2012161088A JP2012084745A JP2012084745A JP2012161088A JP 2012161088 A JP2012161088 A JP 2012161088A JP 2012084745 A JP2012084745 A JP 2012084745A JP 2012084745 A JP2012084745 A JP 2012084745A JP 2012161088 A JP2012161088 A JP 2012161088A
- Authority
- JP
- Japan
- Prior art keywords
- data
- sound emission
- speaker
- terminal
- speaker device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
Description
本発明は、複数の端末装置によるコンテンツの再生タイミングを制御する技術に関する。 The present invention relates to a technique for controlling the playback timing of content by a plurality of terminal devices.
マルチチャネルフォーマットのオーディオ信号を再生して視聴するには、多数のスピーカが必要になる。例えば5.1チャネルフォーマットのオーディオ信号を忠実に再生するには、フロントL、フロントR、センタ、サラウンドL、サラウンドRといった5本のスピーカと、サブウーハと呼ばれる超低域音声成分(LFE)の再生のための専用スピーカが必要になる。なお、マルチチャネルオーディオ再生に関する技術文献として、例えば特許文献1がある。
In order to reproduce and view an audio signal in a multi-channel format, a large number of speakers are required. For example, in order to faithfully reproduce an audio signal in 5.1 channel format, reproduction of five speakers such as front L, front R, center, surround L, and surround R and an ultra-low frequency sound component (LFE) called a subwoofer. A dedicated speaker is required. For example,
ところで、複数チャネルからなるオーディオデータをストリーミング配信して再生する場合に、各チャネルに対応付けられたスピーカから放音される音声においては、理想的なタイミングがあるが、そのタイミングがずれてしまうことがある。これは各チャネルのオーディオデータがシリアルに配信され、さらに各種処理が行われるために、各チャネルにおける再生タイミングにずれが生じてしまうからである。なお、各チャネルにおける本来的な再生タイミングは、基本的には同時に放音されるように行われるが、受音位置とスピーカとの距離の関係を考慮した場合は適宜遅延時間が調整される。
本発明は、このような事情に鑑みてなされたものであり、複数の端末装置によるコンテンツの再生タイミングを制御するための技術を提供することを目的とする。
By the way, when audio data consisting of a plurality of channels is streamed and reproduced, there is an ideal timing for the sound emitted from the speaker associated with each channel, but the timing is shifted. There is. This is because the audio data of each channel is serially distributed and various processes are performed, resulting in a deviation in the reproduction timing of each channel. The original playback timing in each channel is basically performed so that sound is emitted at the same time, but the delay time is appropriately adjusted in consideration of the relationship between the sound receiving position and the distance between the speakers.
The present invention has been made in view of such circumstances, and an object of the present invention is to provide a technique for controlling the playback timing of content by a plurality of terminal devices.
上述した課題を解決するため、本発明に係る端末装置は、ネットワークから取得したデータが自端末宛の情報であるか否かを判定し、自端末宛の情報である場合には当該データを取り込むデータ取得手段と、前記データ取得手段が取り込んだデータが放音用データである場合には、当該放音用データを順次蓄積するバッファ手段と、前記バッファ手段内の放音用データを順次読み出してオーディオ信号を生成して放音する放音手段と、前記データ取得手段が取り込んだデータに代表端末か子端末かを指定する指定情報が含まれていた場合に、当該指定情報に従い代表端末モードと子端末モードを設定するモード設定手段と、代表端末モードが設定された場合は、前記放音手段に対し所定時間待機させた後に放音を開始させ、かつ、子端末宛に放音開始を指示する放音開始指示を出力し、子端末モードが設定された場合は、前記データ取得手段が代表端末からの放音開始指示を取得したときに、前記放音手段による放音を開始させる制御手段とを具備することを特徴とする。 In order to solve the above-described problem, the terminal device according to the present invention determines whether or not the data acquired from the network is information addressed to the own terminal, and takes in the data if the data is information addressed to the own terminal. When the data acquisition means and the data acquired by the data acquisition means are sound emission data, the buffer means for sequentially storing the sound emission data, and the sound emission data in the buffer means are sequentially read out. A sound emitting means for generating and emitting an audio signal; and when the data fetched by the data acquisition means includes designation information for designating a representative terminal or a child terminal, the representative terminal mode is set according to the designation information. If the mode setting means for setting the child terminal mode and the representative terminal mode are set, the sound emitting means is made to wait for a predetermined time and then start sound emission, and addressed to the child terminal. When a sound emission start instruction for instructing sound start is output and the child terminal mode is set, when the data acquisition means acquires the sound emission start instruction from the representative terminal, sound emission by the sound emission means is performed. And control means for starting.
本発明によれば、複数の端末装置によるコンテンツの再生タイミングを制御することができる。 According to the present invention, it is possible to control the playback timing of content by a plurality of terminal devices.
<A:実施形態の構成>
まず、図1を参照して、本発明に係る配信システムについて説明する。図において、配信システム100は、例えば、店舗やスタジオあるいは住居に設置される。配信システム100は、管理装置10と、スピーカ装置20−1,20−2,20−3,20−4,20−5および20−6と、PLC専用アダプタ40とを備えている。以下では、スピーカ装置20のそれぞれを特に区別する必要の無い場合には、「スピーカ装置20」(第1の端末装置)と総称する。管理装置10とPLC専用アダプタ40とは、専用回線等のネットワーク1を介して通信可能に接続されている。PLC専用アダプタ40とスピーカ装置20とは電力線2を介して接続されている。
<A: Configuration of Embodiment>
First, a distribution system according to the present invention will be described with reference to FIG. In the figure, a
管理装置10は、配信システム100を管理するためコンピュータ装置(CPU、メモリ、インタフェースなどから構成される)を有しており、スピーカ装置20に放音用データ等を配信する。管理装置10は、ネットワーク1、PLC専用アダプタ40及び電力線2を介して、スピーカ装置20のそれぞれにデータを送信する。PLC専用アダプタ40は、電力線2を介してPLC(Power Line Communications)方式でデータを伝送するためのアダプタである。具体的には、PLC専用アダプタ40は、管理装置10からネットワーク1を介して受信される信号を、電力線2を流れる給電電流に重畳させることによって、電力線2を介してスピーカ装置20に送信する。また、PLC専用アダプタ40は、電力線2を流れる給電電流に重畳された信号を抽出し、この信号を、ネットワーク1を介して管理装置10に送信する。スピーカ装置20は、放音用データを受信すると、それに応じて放音する機能を有する。
The
次に、部屋3内におけるスピーカ装置20の設置態様の一例について、図2を参照しつつ説明する。図2において、部屋3にはスピーカ装置20−1〜20−6が設置されている。スピーカ装置20−1〜20−6は、電力を供給する給電レール200に取り付けられており、この給電レール200には図1に示す電力線2が設けられている。この給電レール200から供給される電力によりスピーカ装置20−1〜20−6の各部に電力が供給される。
Next, an example of an installation mode of the
次に、スピーカ装置20の構成の一例について、図3を参照しつつ説明する。図3は、スピーカ装置20の構成の一例を示すブロック図である。制御部22は、CPU(Central Processing Unit)やROM(Read Only Memory)、RAM(Random Access Memory)、記憶手段であるメモリを備え、ROMに記憶されているコンピュータプログラムを読み出して実行することにより、バスを介してスピーカ装置20の各部を制御する。PLC専用アダプタ23は、上述したPLC専用アダプタ40と同等の機能を有する。電源部24は、スピーカ装置20を駆動させるために、給電レール200から供給される電力を電力線21から受け取り、各部に供給する。通信インタフェース(以下、「通信IF部」という)25は、例えばモデム等を備える通信手段である。制御部22は、電力線21からPLC専用アダプタ23によって抽出されたデータを、通信IF部25を介して受信する。アドレス検出部26は、電力線2を流れる給電電流に重畳されて送信されてくるデータ(信号)を抽出し、抽出したデータの宛先アドレスを検出する。アドレス検出部26は、制御部22の制御の下、電力線2を介して伝送されてくるデータの宛先アドレスが自端末に割り当てられ、ROMに記憶されたIPアドレスと一致するか否かを判定し、一致した場合に当該データ(データストリーム)を取り込む。
Next, an example of the configuration of the
時計部32は、図示せぬクロックジェネレータから供給されるクロックに同期して作動するリアルタイムクロックであり、予め定められた時点からの経過時間(すなわち、時刻)を計測するとともに、その時刻を表す時刻情報を制御部22へ供給する。また、時計部32は、制御部22からの指示に応じて、計測する時刻をリセットする。
The
第1データバッファ27および第2データバッファ28は、電力線2を介して伝送されてくるデータを一時的に記憶するための記憶手段である。第1データバッファ27には、アドレス検出部26が取り込んだデータが転送されて蓄積されていく。第2データバッファ28には、第1データバッファ27から転送され、音声の再生に用いられるオーディオデータが記憶される。このオーディオデータは、放音用データに挿入されている。本実施形態においては、第1データバッファ27は、外部装置から供給されるデータをある程度の時間長で記憶することができるようにその記憶容量は比較的大きく設定されている。一方で、第2データバッファ28は、放音処理に必要な分のオーディオデータを記憶すればよい容量に設定されている。D/A(Digital / Analog)変換部29は、第2データバッファ28に記憶されたデジタルデータをアナログ信号に変換する。オーディオ信号再生部30は、D/A変換部29から出力されるアナログ信号を増幅してオーディオ信号を生成(再生)し、スピーカ31に放音させる。
The
また、制御部22のROMには、転送速度テーブル221が記憶されている。
図4は、転送速度テーブル221の一例を示した図である。この転送速度テーブル221においては、スピーカ装置20によって音声が再生された時刻が、基準となる時刻に対してどの程度遅れているか示す「遅延時間」と、データの転送速度(転送レート)である「転送速度」とが対応付けられている。「遅延時間」のフィールドには、「0ミリ秒〜50ミリ秒」」「51ミリ秒〜60ミリ秒」、「61ミリ秒〜70ミリ秒」、「71ミリ秒〜80ミリ秒」、「80ミリ秒〜100ミリ秒」「100ミリ秒以上」という具合に、所定の遅延時間の範囲を示す値が書き込まれている。「転送速度」には、それぞれの遅延時間に対応付けて、「T」(基本速度)、「T1」、「T2」、「T3」、「T4」、「T5」という転送速度が書き込まれている。ただし、各転送速度の関係は、基本速度T>T1>T2>T3>T4>T5であり、遅延時間が大きいほど転送速度は小さく、各転送速度は遅延時間の値に応じて適切に決められている。
In addition, a transfer rate table 221 is stored in the ROM of the
FIG. 4 is a diagram illustrating an example of the transfer rate table 221. In the transfer speed table 221, the “delay time” indicating how much the time when the sound is reproduced by the
制御部22は、この転送速度テーブル221に応じた転送速度で、第1データバッファ27から放音用データを読み出し、これに含まれるオーディオデータを第2データバッファ28へ書き込むことにより、オーディオデータの転送を行う。また、制御部22は、これと同じ転送速度(読出速度)で第2データバッファ28からオーディオデータを読み出し、D/A変換部29、オーディオ信号再生部30を介してスピーカ31へ転送して再生・放音させる。ただし、初期状態では、転送速度を基本速度Tとする。これらの転送速度(読出速度)において、第2データバッファ28からの読出速度を大きくすると、第2データバッファ28に格納されるデータ量よりも読み出されるデータ量の方が大きくなるから、オーディオデータが第2データバッファ28に記憶されていない状態になり、放音されるべき音声が途切れてしまう虞がある。一方で、第1データバッファ27から第2データバッファ28への転送速度を大きくすると、上述したように第2データバッファ28の記憶容量は比較的小さいから、記憶容量を超えるオーディオデータが供給されてしまうと、データが消失してしまい、放音されない音声が生じる虞がある。よって、本実施形態ではこれらの転送速度(読出速度)を等しくしている。このような問題が起こらないのであれば、必ずしも転送速度を一致させる必要はない。
The
このようにして制御部22が転送速度を制御することにより、再生タイミングを制御する。また、制御部22は、この転送速度テーブル221に書き込まれた転送速度で、他のスピーカ装置20にオーディオデータを転送させるよう指示する。
また、この実施形態では、スピーカ装置20を識別するための識別情報としてIPアドレスを用いるが、識別情報はIPアドレスに限らず、スピーカ装置20を識別するものであればどのようなものであってもよい。
In this way, the
In this embodiment, an IP address is used as identification information for identifying the
次に、管理装置10の構成について、図5を参照しつつ説明する。管理装置10は、各スピーカ装置20に対し、放音すべきオーディオ信号を生成するための放音用データをパケットによりストリーム配信する。
図5は、管理装置10の構成を示すブロック図である。図において、制御部11は、CPUやROM、RAMを備え、ROM又は記憶部12に記憶されているコンピュータプログラムを読み出して実行することにより、バスを介して管理装置10の各部を制御する。記憶部12は、制御部11によって実行されるコンピュータプログラムやその実行時に使用されるデータを記憶するための記憶手段であり、例えばハードディスク装置である。表示部13は、液晶ディスプレイなどを備え、制御部11の制御の下で、管理装置10を操作するためのメニュー画面等を表示する。操作部14は、利用者による操作に応じた操作信号を制御部11に出力する。読取部15は、放音用データを配信するための各種データが格納された記憶媒体(例えば、DVD(Digital Versatile Disc))からデータを読み出すデータ読み出し手段である。本実施形態では、この放音用データに含まれるオーディオデータは、マルチチャネルのデータを分割した内容である。通信IF部16は、例えばモデム等を備える通信手段であり、スピーカ装置20との間でネットワーク1、PLC専用アダプタ40及び電力線2を介して通信を行う。時計部17は、スピーカ装置20の時計部32と同等の機能を有し、制御部11の指示に応じて時刻の計測を開始する。例えば、放音用データの配信の開始時に、制御部11が読取部16に記憶媒体の読み取りを開始させるタイミングで、この指示を行う。
記憶部12には、スピーカ装置20を識別するために、スピーカ装置20−1〜20−6のそれぞれに割り当てられたIPアドレスが記憶されている。
Next, the configuration of the
FIG. 5 is a block diagram illustrating a configuration of the
The
管理装置10とスピーカ装置20との間では所定の通信プロトコルに従って行われるデータ通信が行われる。本実施形態で用いられている通信プロトコルは、アプリケーション層の通信プロトコルとしては、RTP(Real-time Transport Protocol)が用いられており、トランスポート層の通信プロトコルとしては、UDP(User Datagram Protocol)が用いられており、ネットワーク層の通信プロトコルとしてはIP(Internet Protocol)が用いられている。RTPとは、オーディオデータや映像データをリアルタイムに送受信する通信サービスを提供するための通信プロトコルである。本実施形態において放音用データとして供給されるRTPパケットデータは、IPにおけるデータ転送単位であるパケットデータやTCPにおけるデータ転送単位であるセグメントと同様に、ヘッダ部とペイロード部とで構成されている。
Data communication performed according to a predetermined communication protocol is performed between the
<B:実施形態の動作>
次に、この実施形態の動作の一例について、図6および図7に示すシーケンス図を参照しつつ説明する。管理装置10の利用者は、管理装置10の操作部14を介してオーディオデータの配信を開始することを指示する。制御部11は、操作部14から供給される操作内容に応じた操作信号に従い、読取部15にオーディオデータを格納した記録媒体を読み取らせ、配信のための処理を開始する。
<B: Operation of Embodiment>
Next, an example of the operation of this embodiment will be described with reference to the sequence diagrams shown in FIGS. A user of the
まず、管理装置10の制御部11は、記憶部12の所定領域に記憶されている属性情報を読み取る(ステップS1)。この属性情報には、複数チャネルのそれぞれについて、どのチャネルをどのスピーカ装置に割り当てるかを指定する情報が含まれている。制御部11は、この属性情報に基づいて各チャネルとスピーカ装置20とを対応付ける(ステップS2)。ここでは、楽曲のチャンネル数は「6」であるとし、配信システム100のスピーカ装置20の数も「6」である。以降においては、制御部11は、対応付けたスピーカ装置20へ各チャンネルのデータを送信する。
First, the
続いて、制御部11は、各スピーカ装置20に所定のパケットデータ(以下、「先頭パケットデータ」という)を送信する(ステップS3)。この「先頭パケットデータ」の送信はオーディオデータの配信に先立って行われ、各スピーカ装置20が従うべき指示が含まれている。この楽曲の再生においては、各スピーカ装置20は先頭パケットデータの内容に基づいて制御を行う。
Subsequently, the
図8は、先頭パケットデータのデータ構造を示す図である。図8に示したように、先頭パケットデータはヘッダ部とペイロード部とからなる。ヘッダ部には「送信先情報」、「データ種別情報」および「曲番号識別情報(以下、「楽曲ID」という)」が書き込まれている。「送信先情報」は、先頭パケットデータの送信先である各スピーカ装置20に割り当てられた宛先アドレス(IPアドレス)のことである。この内容によってパケットデータの送信先が特定される。「データ種別情報」は、管理装置10からスピーカ装置20に配信されるデータの種別を示す情報のことで、本実施形態ではオーディオデータを示す情報が書き込まれる。「楽曲ID」は、楽曲毎に割り当てられ、各楽曲を識別するための識別情報のことである。
FIG. 8 is a diagram illustrating a data structure of head packet data. As shown in FIG. 8, the head packet data is composed of a header part and a payload part. In the header portion, “transmission destination information”, “data type information”, and “song number identification information (hereinafter referred to as“ song ID ”)” are written. “Destination information” is a destination address (IP address) assigned to each
先頭パケットデータのペイロード部には「端末情報」、「チャネル情報」おょび「子端末情報」が書き込まれている。「端末情報」は、スピーカ装置20の動作モードを「代表端末モード」および「子端末モード」のいずれかに指定するための指定情報のことである。代表端末モードに設定されたスピーカ装置20は、自端末および子端末モードに設定されたスピーカ装置20の各種動作を制御する。本実施形態では、「端末情報」において、スピーカ装置20−1は代表端末モードに指定され、スピーカ装置20−2〜20−6は子端末モードに指定される。もちろん、「端末情報」による指定によって、スピーカ装置20−2等の他のスピーカ装置を代表端末モードに指定することもできる。「チャネル情報」は、楽曲のチャネル数のことである。本実施形態では、上述したようにチャネル数は「6」である。「子端末情報」は、子端末モードに割り当てられたスピーカ装置(スピーカ装置20−2〜20−6)の宛先アドレスのことである。
“Terminal information”, “channel information” and “child terminal information” are written in the payload portion of the head packet data. “Terminal information” is designation information for designating the operation mode of the
各スピーカ装置20の制御部22は、アドレス検出部26を介して自端末宛の先頭パケットデータを受信すると、この内容をメモリ内の所定領域に記憶しておく。これに応じて、スピーカ装置20−1は代表端末モードとして制御を行い、スピーカ装置20−2〜20−6は子端末モードとして制御を行う。
When the
先頭パケットデータを送信した管理装置10の制御部11は、読取部15に記憶媒体を読み取らせ、読み取ったデータに基づいてRTPパケットデータを生成して、各チャネルに対応するスピーカ装置20に送信する(ステップS4)。
図9は、RTPパケットデータのデータ構造を示す図である。図9に示したように、RTPパケットデータのヘッダ部には、「送信先情報」、「データ種別情報」および「楽曲ID」が書き込まれている。これらの情報については先頭パケットデータと同じであり、その説明を省略する。RTPパケットデータのペイロード部には所定時間(本実施形態では、20ミリ秒)分のオーディオデータが書き込まれている。
The
FIG. 9 is a diagram illustrating a data structure of RTP packet data. As shown in FIG. 9, “transmission destination information”, “data type information”, and “music ID” are written in the header of the RTP packet data. Since these pieces of information are the same as the head packet data, the description thereof is omitted. Audio data for a predetermined time (in this embodiment, 20 milliseconds) is written in the payload portion of the RTP packet data.
各スピーカ装置20の制御部22はRTPパケットデータを受信したら、これを第1データバッファ27に記憶させて待機する(ステップS5)。そして、代表端末モードのスピーカ装置20−1の制御部22は、子端末モードのスピーカ装置20−2〜20−6に、放音を開始させるための指示を含むパケットデータ(以下、「放音開始指示」という)を送信する(ステップS6)。この放音開始指示を送信するタイミングは、例えばスピーカ装置20−1が最初のRTPパケットデータを受信してから所定時間経過した後であり、データ配信の速度にバラツキがあっても、全てのスピーカ装置20−1〜20−6にある程度のデータが蓄積できる時間が設定されている。なお、この所定時間を設定するデータを、管理装置10から配信するように構成してもよい。
When receiving the RTP packet data, the
上述した放音開始指示には、送信元の情報であるスピーカ装置20−1に割り当てられたIPアドレスが含まれており、これを受信したスピーカ装置20−2〜20−6の制御部22は、どのスピーカ装置20が代表端末モードに設定されているかを知るとともに、このIPアドレスをメモリに記憶する(ステップS7)。そして、子端末モードのスピーカ装置20−2〜20−6の制御部22は、放音開始指示を取得したら、第1データバッファからオーディオデータを読み出して第2データバッファ28に転送し、音声の放音を開始する。
一方、スピーカ装置20−1の制御部22においては、放音開始指示を送信するとともに自端末においても放音を開始する。
The sound emission start instruction described above includes the IP address assigned to the speaker device 20-1, which is information of the transmission source, and the
On the other hand, in the
以上のように、子端末モードのスピーカ装置20−2〜20−6は、代表端末モードのスピーカ装置20−1からの放音開始指示を待って再生を開始し、代表端末モードのスピーカ装置20−1は、放音開始指示を送信したタイミングで再生を開始する。この結果、全てのスピーカ装置20−1〜20−6によって同時に各チャネルのオーディオ信号が再生されて放音される。
また、代表端末モードのスピーカ装置20−1の制御部22は、最初のRTPパケットデータに応じたオーディオ信号の再生を開始する際に、時計部32が計測する時刻をリセットし(ステップS8)、これを再生開始時刻としてメモリの所定の領域に記憶する。ここで時刻をリセットすることにより、時計部32が計時する時刻は「0分00秒00」となり、時計部32が計測する時刻は、楽曲の再生開始時からの経過時間を示すこととなる。
As described above, the speaker device 20-2 to 20-6 in the child terminal mode starts reproduction after waiting for the sound emission start instruction from the speaker device 20-1 in the representative terminal mode, and then the
Further, the
放音を開始すると、各スピーカ装置20の制御部22は、第1データバッファ27から順次RTPパケットデータを読み出す(ステップS9)。そして、制御部22は、このRTPパケットデータのヘッダ部にタイムスタンプデータが挿入されているか否かを判断する(ステップS10)。
ここで、図10は、ヘッダ部にタイムスタンプデータが挿入されたRTPパケットデータのデータ構造を示した図である。図10に示した「タイムスタンプ」には、管理装置10の時計部17が計測する時刻を表す時刻情報が書き込まれる。管理装置10の制御部11は、各チャネルで同時に放音されるべき音声に対応するRTPパケットデータに、時計部17から取得した同時刻を表す時刻情報を書き込み、各スピーカ装置20に所定のタイミング(例えば、10秒間隔)で送信する。このタイムスタンプデータは、各スピーカ装置20による再生タイミングを一致させるための同期信号としての機能を有することになるが、その詳細については後述する。
When sound emission is started, the
Here, FIG. 10 is a diagram illustrating a data structure of RTP packet data in which time stamp data is inserted in the header portion. In the “time stamp” illustrated in FIG. 10, time information indicating the time measured by the
図9に示したようなタイムスタンプデータが挿入されていないパケットデータを読み出しているときは、ステップS10の判定結果は「N」となり、ステップS11へ進む。
ステップS11において、各スピーカ装置20の制御部22は、RTPパケットデータに含まれているオーディオデータを第2データバッファ28へ転送する。このとき、制御部22は、転送速度テーブル221の内容に基づいて基本速度Tで転送する。そして、制御部22は、第2データバッファ28に記憶されたオーディオデータを、基本速度Tで順次読み出して転送して、再生した音声をスピーカ31に放音させる(ステップS12)。
When packet data into which time stamp data is not inserted as shown in FIG. 9 is read, the determination result of step S10 is “N”, and the process proceeds to step S11.
In step S <b> 11, the
一方、上述のステップS10において「Y」となり、各スピーカ装置20の制御部22がRTPパケットデータにタイムスタンプデータが含まれていると判断すると、各スピーカ装置20は以下の処理を行う。
On the other hand, if “Y” is determined in step S10 described above and the
まず、子端末モードのスピーカ装置20−2〜20−6の制御部22は、タイムスタンプデータを含むRTPパケットデータを受信すると、このタイムスタンプデータをスピーカ装置20−1に送信する(ステップS101)。代表端末モードのスピーカ装置20−1の制御部22は、スピーカ装置20−2〜20−6から受信したタイムスタンプデータの受信時刻を、時計部32の計時時刻を参照して特定し、自端末についてもタイムスタンプデータを受信した時刻を確認する(ステップS102)。
First, when the RTP packet data including time stamp data is received, the
続いて、スピーカ装置20−1の制御部22は、自端末を含めた各スピーカ装置20から取得したタイムスタンプデータを受信した受信時刻と、タイムスタンプデータが表す時刻との時間差を算出する(ステップS103)。そして、制御部22は、これらのうち最も小さい時間差であるΔtminとそれぞれ求めた時間差との差分を、各スピーカ装置20の遅延時間として算出する。
例えば、制御部22が、時計部32から取得した時刻情報が表す時刻がTAで、スピーカ装置20−1〜20〜6から時刻TBを表すタイムスタンプデータを受信(取得)した受信時刻が、それぞれTB1,TB2,TB3,・・・,TB6であったとする。この場合、制御部22は、TB1−TA,TB2−TA,TB3−TA,・・・,TB6−TAという演算を行って、タイムスタンプデータの受信時刻と、そのタイムスタンプデータが表す時刻との時間差を算出する。ここで、TB1−TA=Δtminとすると、制御部22はスピーカ装置20−1〜20−6の遅延時間Δt1,Δt2,Δt3,・・・,Δt6を、それぞれ0(=TB1−TA−Δtmin),TB2−TA−Δtmin,TB3−TA−Δtmin,・・・TB6−TA−Δtminと算出する。このように、再生の遅れが最も小さいスピーカ装置20(この場合、スピーカ装置20−1)を基準としたときの、再生の遅れ時間が、本実施形態における「遅延時間」である。
Subsequently, the
For example, the time indicated by the time information acquired from the
スピーカ装置20−1の制御部22は、この遅延時間と、図4に図示した転送速度テーブル221とに基づいて、各スピーカ装置20のオーディオデータの転送速度を変更する制御を行う。例えば、スピーカ装置20−2による再生が遅れており、遅延時間Δt2が「62ミリ秒」であるとし、スピーカ装置20−1、20−3〜20−6の遅延時間が「0ミリ秒」であるとする。このとき、スピーカ装置20−1の制御部22は、この遅延時間Δt2と転送速度テーブル221とに基づいて、自端末のオーディオデータの転送速度を基本速度TからT2へ小さくするよう制御する(ステップS104)。また、スピーカ装置20−1の制御部22は、スピーカ装置20−3〜20−6に対しても、同様にオーディオデータの転送速度を、基本速度TからT2へ小さくするよう指示する遅延指示データを送信する(ステップS105)。この遅延指示データは、送信速度そのものを示すものであってもよいし、転送速度テーブル221に基づいて送信速度を特定できるから、遅延時間を示すものであってもよい。一方、スピーカ装置20−1の制御部22は、スピーカ装置20−2に対しては転送速度を指示する遅延指示データを送信しないか、または基本速度Tを維持するよう指示するデータを送信する。タイムスタンプデータの応答として受信した遅延指示データに応じて、スピーカ装置20−2〜20−6の制御部22は、オーディオデータの転送速度を基本速度TからT2へ変更する制御を行う(ステップS106)。
なお、代表端末モードのスピーカ装置20−1の再生タイミングが遅れている場合には、ステップS104は省略されるか、基本速度Tを維持するよう制御されることになる。
The
When the reproduction timing of the speaker device 20-1 in the representative terminal mode is delayed, step S104 is omitted or the basic speed T is controlled to be maintained.
以上のように、遅延が生じているスピーカ装置20−2以外は、遅延時間Δt2に応じて再生速度を小さくして楽曲を再生する。つまり、1のRTPパケットデータに応じた再生時間を20ミリ秒よりも大きくすることによって、次第に遅延時間Δt2を小さくする。 As described above, except for the speaker device 20-2 in which the delay occurs, the music is played at a reduced playback speed in accordance with the delay time Δt2. That is, the delay time Δt2 is gradually reduced by setting the reproduction time corresponding to one RTP packet data to be longer than 20 milliseconds.
この再生タイミング一致させる制御する処理について、図11に示す、配信システム100による再生タイミングの制御の様子を示すタイミングチャートを参照しつつ、より具体的に説明する。
図11(a)は、管理装置10による各RTPパケットデータの配信の様子を示すタイミングチャートで、同図(b)は、各スピーカ装置20によるオーディオデータの転送速度の様子を示すタイムチャートである。なお、同図においては、図が煩雑になることを防ぐために、スピーカ装置20−1,20−2,20−3のみについて図示しているが、ここでは、スピーカ装置20−4〜20−6に対する配信の様子や転送速度は、スピーカ装置20−3と同じである。
The process for controlling the reproduction timing to be matched will be described more specifically with reference to a timing chart showing the state of reproduction timing control by the
FIG. 11A is a timing chart showing how each RTP packet data is distributed by the
同図(a)に示したように、管理装置10によってRTPパケットデータ「#A1」,「#B1」,「#C1」,・・・、「#A,n」,「#B,n」,「#C,n」,・・・,「#A,m」,「#B,m」,「#C,m」(n,m;自然数、m>n)という順で配信される。同図(a)において、代表端末モードのスピーカ装置20−1に配信されるパケットデータを「A」とし、再生の遅延が生じている子端末モードのスピーカ装置20−2に配信されるパケットデータを「B」とし、再生の遅延が生じていない子端末モードのスピーカ装置20−3に配信されるパケットデータを「C」とする。また、末尾の数字は各スピーカ装置20に配信されるパケットデータの順番を表す値であり、この値が一致するRTPパケットデータにおいては、理想的にはこれに応じた再生・放音が同時になされるべきものであることを意味する。
As shown in FIG. 6A, the
同図(b)に示したように、スピーカ装置20−1の時計部32によって計測される時刻をtとする。また、各チャネルでn番目に配信されるRTPパケットデータ「#A,n」、「#B,n」、「#C,n」においては、それぞれ同じ時刻を表す時刻TIME0を表すタイムスタンプデータが挿入されている。各スピーカ装置20は、このRTPパケットデータ「#A,n」、「#B,n」、「#C,n」を受信すると、上記で説明したような転送速度を制御するための処理を行う。ここでは、スピーカ装置20−2によって転送されるRTPパケットデータ「#B,n」に応じた再生は、他のスピーカ装置20に対してΔt2=62ミリ秒だけ遅延しているから、上述のようにスピーカ装置20−1および20−3のオーディオデータの転送速度はT2とされ、スピーカ装置20−2については基本速度Tのままとされる。
As shown in FIG. 5B, the time measured by the
転送速度を変更するよう制御されると、RTPパケットデータ「#A,n+1」、「#B,n+1」、「#C,n+1」の転送速度も、図11(b)に示したように、それぞれT2、T、T2となる。さらに後で配信されるRTPパケットデータにおいても同様である。このようにすれば、スピーカ装置20−2によるオーディオデータの転送速度Tが、その他のスピーカ装置20の転送速度T2よりも相対的に大きくなるから、この転送速度の差分に応じて、次第に遅延時間Δt2は小さくなっていく。そして、RTPパケットデータ「#A,m」、「#B,m」、「#C,m」では、遅延時間Δt2=0ミリ秒となり、これらに応じた音声が再生されるタイミングは一致する。
When controlled to change the transfer rate, the transfer rates of the RTP packet data “#A, n + 1”, “#B, n + 1”, “#C, n + 1” are also as shown in FIG. T2, T, and T2 respectively. The same applies to RTP packet data distributed later. In this way, the transfer rate T of the audio data by the speaker device 20-2 becomes relatively higher than the transfer rate T2 of the
そして、スピーカ装置20−1の制御部22は、遅延時間Δt2が予め決められた所定量以下(例えば、10ミリ秒以下)になったと判断したら、スピーカ装置20−2に転送速度を小さくする前の速度に戻す(基本速度Tにする)よう指示する指示データを送信する。図11においては、時刻TIME1を表すタイムスタンプデータが挿入されたRTPパケットデータ「#A,m」、「#B,m」、「#C,m」が配信されたときに実行される。このように、再生の遅れが解消されたら、転送速度を基本速度Tに戻して各スピーカ装置20の転送速度を一致させることで、スピーカ装置20−2の再生タイミングが早い方にずれてしまうことを回避する。
When the
そして、各スピーカ装置20の制御部22は、上記で説明したステップS11以降の処理を行う。以降、各スピーカ装置20がRTPパケットデータを受信したら、上記処理ステップS5,S9〜S12を実行する。そして、各スピーカ装置20の制御部22は、タイムスタンプデータを検出するたびに遅延時間を算出して、上記の処理を実行する。そして、管理装置10から楽曲の再生の終了が通知されると、各スピーカ装置20の制御部22は、メモリに記憶しておいた先頭パケットデータに基づく情報をクリアして、楽曲の再生を終了する。
And the
以上の処理により、各スピーカ装置20がタイムスタンプデータを取得したタイミングに基づいて、遅れが最も大きいスピーカ装置20との相対的な再生タイミングを一致させる。配信システム100においては、タイムスタンプデータに基づいて各スピーカ装置20による再生タイミングが一致するよう制御を行うから、タイムスタンプデータは同期信号として機能すると言える。また、複数のスピーカ装置20の再生が遅延した場合にも、同じ方法で遅延時間を算出し、それに基づいて転送速度を制御することによって、再生タイミングを一致させることができる。
この構成によると、再生タイミングの遅延が検出されると、楽曲の再生速度(転送速度)を小さくするように制御するが、その速度の変化は僅かであり、かつ、そのような制御が行われる時間も短いから、放音された音声の聴取者にとっての聴取性は問題とならない。また、子端末モードのスピーカ装置20がタイムスタンプデータを受信してから送信するまでに要する時間や、代表端末モードのスピーカ装置20が遅延時間を検出して、転送速度を制御・指示するまでに要する時間は、聴取者の聴取性に影響を与えるような遅延時間に対して十分に小さく、再生タイミングの制御には影響を与えない。
Through the above processing, based on the timing at which each
According to this configuration, when a delay in playback timing is detected, control is performed to reduce the playback speed (transfer speed) of the music, but the speed changes little and such control is performed. Since the time is short, the listening ability for the listener of the emitted sound is not a problem. In addition, the time required for the slave terminal
ところで、上述のステップS2において、スピーカ装置20の数と、楽曲のチャネル数とが一致しない場合には、管理装置10はこれらの数の関係に応じて各チャネルを割り当てるスピーカ装置20を決定する。
By the way, when the number of
オーディオデータのチャネル数がスピーカ装置20の数よりも多い場合で、例えば配信システム100を用いて6.1chサラウンドからなるオーディオデータを配信する場合を想定する。このとき、各チャネルに対してそれぞれ1ずつスピーカ装置20を割り当てると、スピーカ装置20が1だけ不足してしまう。よって、この場合、制御部11は、ある1チャネルのオーディオデータを配信しないようにする。例えば重要度の低いチャネルの音声を再生しないようにするべく、このチャネルを利用者に指定させればよい。利用者が不要と判断したチャネルを、操作部14を介して指定すると、この操作に応じて管理装置10の制御部11は、ステップS2において、この不要なチャネル除いたオーディオデータをそれぞれのスピーカ装置20に対応付けて、ステップS3以降の処理を行う。
また、上述の処理に代えて、スピーカ装置20の数に併せてダウンミキシング処理を行い、ダウンミキシングした後のデータを各スピーカ装置20に配信してもよい。
It is assumed that the number of channels of audio data is greater than the number of
Further, instead of the above-described processing, down-mixing processing may be performed in accordance with the number of
一方、オーディオデータのチャネル数がスピーカ装置20の数よりも少ない場合、管理装置10の制御部11は、重要度の高いチャネルのオーディオデータを複数のスピーカ装置20に配信する。例えば、「6」のスピーカ装置に対して、「4」チャネルからなるオーディオデータを配信するのであれば、制御部11は、最も重要度の高いチャネルと、次に重要度の高いチャネルのオーディオデータを、複数のスピーカ装置20に対応付けて配信するようにして、ステップS3以降の処理を行う。このときの重要度においても、利用者に指定させればよい。
On the other hand, when the number of channels of audio data is smaller than the number of
また、オーディオデータが単数チャネル(モノラル)の場合、すべてのスピーカ装置20から同じチャネルの音声が放音される。この場合も、上記と同じようにして、各スピーカ装置20の再生タイミングを一致させるよう制御するが、1のスピーカ装置20のみを用いる場合には、このような制御を行わなくてもよい。後者の場合、管理装置10は代表端末モードや子端末モードを指定せずに、チャネル数が「1」であることを示す先頭パケットデータをスピーカ装置20に送信する。そして、この先頭パケットデータを受信したスピーカ装置20は、受信したオーディオデータを、順次第1データバッファ27から第2データバッファ28へと転送して、再生した音声をスピーカ31に放音させる。
When the audio data is a single channel (monaural), the sound of the same channel is emitted from all the
以上説明した実施形態によれば、複数のスピーカ装置20のうち、代表端末モードのスピーカ装置20−1は、遅延時間に応じた転送速度で自端末のオーディオデータを転送するよう制御し、かつ、子端末モードのスピーカ装置20に対しても遅延時間に応じた転送速度にするよう指示する。子端末モードのスピーカ装置20はこの指示に応じて転送速度を制御する。この構成によれば、遅延時間に応じて楽曲の再生速度を変化させることによって、複数のスピーカ装置20から放音される各チャネルの音声の再生タイミングを一致させることができる。
According to the embodiment described above, among the plurality of
<C:変形例>
上述した実施形態を以下のように変形してもよい。これらの変形は、各々を適宜に組み合わせることも可能である。
<C: Modification>
The embodiment described above may be modified as follows. These modifications can be appropriately combined with each other.
(1)上述した実施形態では、代表端末モードのスピーカ装置20が、各スピーカ装置20の再生タイミングを制御していたが、これをルータ等の中継装置300(CPU、メモリ、通信インタフェース、時計部などから構成される)が実現してもよい。この中継装置300においても、上記所定の通信プロトコルにしたがって通信が行われる。この場合の配信システムの構成は図12に示したようになる。図12に示したように、配信システム100aにおいて、PLC専用アダプタ40はネットワーク4、中継装置300および電力線2を介して各スピーカ装置20と接続される。中継装置300は、上述したスピーカ装置20の制御部22と同等の機能を有する。具体的には、中継装置300は、管理装置10からネットワーク4および通信インタフェースを介して受信したデータを、通信インタフェースおよびネットワーク1を介して各スピーカ装置20へ配信する。スピーカ装置20−1〜20−6は、タイムスタンプデータを受信すると、これを中継装置300に送信する。中継装置300は、スピーカ装置20−1〜20−6からタイムスタンプデータを受信(取得)すると、これらを受信した受信時刻と、タイムスタンプデータが表す時刻とを比較する。そして、中継装置300は、遅延時間と転送速度テーブルに応じて転送速度決定し、これを指示するための遅延指示データを各スピーカ装置20へ送信する。各スピーカ装置20はこれに応じてオーディオデータの転送速度を制御する。この構成においても、各スピーカ装置20の遅延時間に応じて、再生タイミングの遅延を解消することができる。また、この場合、スピーカ装置20の時計部32に相当する構成は不要である。
(1) In the above-described embodiment, the
(2)また、聴取者の聴取(受音)位置に応じて、スピーカ装置20は再生タイミングを制御してもよい。例えば、コンサートホールなどの比較的大きな空間に配信システム100を適用する場合、空間における聴取者の位置によって各スピーカ装置20からの距離が大きく異なることがある。この場合、各スピーカ装置20による再生タイミングが一致していても、聴取位置では、各チャネルの音声のタイミングがずれて聴こえてしまう。
この具体的な実現方法として、管理装置10が聴取者の位置から各スピーカ装置20までの距離を、代表端末モードのスピーカ装置20−1に通知する。聴取者の位置からスピーカまでの距離は、例えば管理装置10の利用者によって操作部14を介して入力されるとよい。スピーカ装置20−1は、この距離と音声(音波)の伝搬速度との演算によって、聴取位置に音声が伝わるのに要する時間を算出する。そして、スピーカ装置20−1は、この時間分だけタイミングをずらすように遅延時間を発生させて再生する。つまり、聴取位置に近いスピーカ装置20ほど、遅延時間を大きくして再生させる。このようにすれば、聴取位置において各チャネルの音声が聴こえるタイミングを一致させることができる。
(2) Further, the
As a specific implementation method, the
(3)上述した実施形態では、音声の再生タイミングを制御していたが、映像と音声との再生タイミングや、複数の映像どうしの再生タイミングを制御する場合にも、本発明を適用することができる。この配信システムが音声とは違うコンテンツである映像を扱う場合であっても、配信したコンテンツを再生することができる構成を採ればよいだけで、その他の構成および動作は上述の実施形態と同じでよい。
具体的には、放映用の端末装置として、スピーカ装置20に代えてモニタ装置(第2の端末装置)を採用する。このモニタ装置は、スピーカ装置20のD/A変換部29、オーディオ信号再生部30およびスピーカ31の代わりに、放映するためのモニタや、映像データに応じて映像信号を生成(再生)し、モニタに映像を表示させるための表示制御手段を備える構成を有する。動作においては、代表端末モードに設定された端末装置が、子端末モードに設定されたモニタ装置に放映を開始させる放映開始指示を出力して放映を開始させたり、子端末モードのスピーカ装置20に放音開始指示を出力して放音を開始させたりする。以降、実施形態と同様にして、タイムスタンプデータを取得するたびに再生タイミングを制御すればよい。もちろん、モニタ装置が代表端末モードに設定されてもよく、この場合も、モニタ装置が、最初のRTPパケットデータを受信してから所定時間待機した後に放映を開始したり、子端末モードの端末装置に放音開始指示や放映開始指示を出力して、放音・放映を開始させればよい。この構成によれば、複数の映像の再生タイミングや、映像と音声との再生タイミングを一致させることができる。
(3) In the embodiment described above, the audio reproduction timing is controlled. However, the present invention can also be applied to the case where the reproduction timing of video and audio and the reproduction timing of a plurality of videos are controlled. it can. Even if this distribution system handles video that is content different from audio, it is only necessary to adopt a configuration capable of reproducing the distributed content. Other configurations and operations are the same as those in the above-described embodiment. Good.
Specifically, a monitor device (second terminal device) is employed instead of the
(4)上述した実施形態において、管理装置10が、楽曲の配信状況を記憶部12に記憶しておき、その配信実績に基づいて、楽曲に対する使用料を算出してもよい。具体的には、管理装置10は、楽曲を再生するたびにその楽曲に対応する楽曲IDを配信実績として記憶部12に記憶する。そして、管理装置10は、予め定められた日時(例えば、月末、週末、等)になったことを検知すると、配信実績に基づいて、予め決められた楽曲に対する使用料を算出する。管理装置10は、算出した使用料を示すデータを、例えば通信IF部16を介して図示せぬサーバ装置へ出力する。サーバ装置の管理者は、管理装置10から送信されてくる使用料情報を確認することで、楽曲の使用料を確認することができる。すなわち、この態様によれば、管理装置10が使用料の算出処理を行うから、システムの管理者は、コンテンツの使用料をそれぞれ算出する必要がなく、煩雑な作業を行う必要がない。
(4) In the above-described embodiment, the
(5)上述した実施形態では、代表端末モードのスピーカ装置20−1が、タイムスタンプデータの受信時刻とそのタイムスタンプデータが表す時刻との時間差に基づいて、各スピーカ装置20の遅延時間を算出していた。これに代えて、各スピーカ装置20は時計部32を有するから、子端末の各スピーカ装置20がこの時間差を算出してスピーカ装置20−1に送信してもよい。この場合、代表端末のスピーカ装置20−1は、受信した時間差に基づいて遅延時間を算出する。ただし、この場合、各スピーカ装置20の時計部32が計測する時刻が一致している必要があるため、スピーカ装置20−1又は管理装置10が、時計部32が計測する時刻を同期させる同期信号を、楽曲の再生開始前や再生中のあるタイミングで送信することが好ましい。
(5) In the above-described embodiment, the speaker device 20-1 in the representative terminal mode calculates the delay time of each
(6)上述した実施形態では、管理装置10が先頭パケットデータを送信することによって各スピーカ装置20の動作モードを設定していたが、各スピーカ装置20の動作モードが予め決められていてもよい。例えば、スピーカ装置20−1が代表端末モードに固定されている場合、子端末モードのスピーカ装置20−2〜20−6は、時刻を計測する必要がないから、時計部32を有さなくてよい。また、この場合、スピーカ装置20−1は、子端末モードのスピーカ装置20−2〜20−6のIPアドレスを予めROMに記憶しておいてもよい。
(6) In the above-described embodiment, the
(7)上述した実施形態では、スピーカ装置20の数は「6」であったが、これよりも少なくてもよいし、さらに多くしてもよい。
(7) In the above-described embodiment, the number of
(8)上述した実施形態では、管理装置10は、読取部15が記憶媒体を読み取って取得したオーディオデータに基づいて配信を行っていたが、データの取得方法はこれ以外の方法であってもよい。例えば、ネットワークを介して接続された外部装置から取得してもよい。
(8) In the embodiment described above, the
(9)上述した実施形態では、スピーカ装置20の数は「6」であったが、さらに多くしてもよく、少なくてもよく、「2」以上のスピーカ装置20を備えていれば本発明を適用することができる。
(9) In the above-described embodiment, the number of the
1…ネットワーク、10…管理装置、100,100a…配信システム、11…制御部、12…記憶部、13…表示部、14…操作部、15…読取部、16…通信IF部、17,32…時計部、2,21…電力線、20…スピーカ装置、200…給電レール、300…中継装置、22…制御部、221…転送速度テーブル、23,40…PLC専用アダプタ、24…電源部、25…通信IF部、26…アドレス検出部、27…第1データバッファ、28…第2データバッファ、29…D/A変換部、3…部屋、30…オーディオ信号再生部、31…スピーカ、4…ネットワーク
DESCRIPTION OF
上述した課題を解決するため、本発明に係る第1のデータ通信システムは、管理装置と、中継装置と、複数の端末装置とを備え、前記管理装置は、前記中継装置に対し、放音すべきオーディオ信号を生成するための放音用データをストリーム配信するとともに、所定のタイミングでタイムスタンプデータを挿入して前記放音用データを配信し、前記中継装置は、前記管理装置から取得したデータを、前記複数の端末装置のいずれかの前記端末装置を指定して配信する配信手段と、前記配信手段により配信された前記放音用データを前記端末装置が受信してから所定時間待機した後に放音開始するように、前記端末装置に放音開始指示を出力するとともに、前記端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放音用データの読み出しを、当該端末装置に指示する指示手段とを有し、前記端末装置は、前記配信手段により配信されたデータが自端末宛の情報であるか否かを判定し、自端末宛の情報である場合には当該データを取り込むデータ取得手段と、前記データ取得手段が取り込んだデータが放音用データである場合には、当該放音用データを順次蓄積するバッファ手段と、前記バッファ手段内の放音用データを順次読み出してオーディオ信号を生成して放音する放音手段と、前記指示手段により出力された前記放音開始指示を前記データ取得手段が取得したときに、当該放音開始指示に応じて前記放音手段による放音を開始させる一方、前記データ取得手段により前記タイムスタンプデータが挿入された前記放音用データが取得されると、当該タイムスタンプデータを前記中継装置に送信するとともに、当該タイムスタンプデータの応答として前記指示手段により指示された読出速度で前記バッファ手段内の放音用データを読み出すよう、前記放音手段を制御する制御手段とを有することを特徴とする。
また、本発明に係る第2のデータ通信システムは、管理装置と、中継装置と、複数の端末装置とを備え、前記管理装置は、前記中継装置に対し、放映すべき映像信号を生成するための放映用データをストリーム配信するとともに、所定のタイミングでタイムスタンプデータを挿入して前記放映用データを配信し、前記中継装置は、前記管理装置から取得したデータを、前記複数の端末装置のいずれかの前記端末装置を指定して配信する配信手段と、前記配信手段により配信された前記放映用データを前記端末装置が受信してから所定時間待機した後に放映開始するように、前記端末装置に放映開始指示を出力するとともに、前記端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放映用データの読み出しを、当該端末装置に指示する指示手段とを有し、前記端末装置は、前記配信手段により配信されたデータが自端末宛の情報であるか否かを判定し、自端末宛の情報である場合には当該データを取り込むデータ取得手段と、前記データ取得手段が取り込んだデータが放映用データである場合には、当該放映用データを順次蓄積するバッファ手段と、前記バッファ手段内の放映用データを順次読み出して映像信号を生成して放映する放映手段と、前記指示手段により出力された前記放映開始指示を前記データ取得手段が取得したときに、当該放映開始指示に応じて前記放映手段による放映を開始させる一方、前記データ取得手段により前記タイムスタンプデータが挿入された前記放映用データが取得されると、当該タイムスタンプデータを前記中継装置に送信するとともに、当該タイムスタンプデータの応答として前記指示手段により指示された読出速度で前記バッファ手段内の放映用データを読み出すよう、前記放映手段を制御する制御手段とを有することを特徴とする。
また、本発明に係る第3のデータ通信システムは、管理装置と、中継装置と、第1の端末装置と、第2の端末装置とを備え、前記管理装置は、前記中継装置に対し、放音すべきオーディオ信号を生成するための放音用データ及び放映すべき映像信号を生成するための放映用データをストリーム配信するとともに、所定のタイミングでタイムスタンプデータを挿入して前記放音用データ及び前記放映用データを配信し、前記中継装置は、前記管理装置から取得したデータを、前記第1の端末装置および前記第2の端末装置のいずれかを指定して配信する配信手段と、前記配信手段により配信された前記放音用データを前記第1の端末装置が受信してから所定時間待機した後に放音開始するように、前記第1の端末装置に放音開始指示を出力し、かつ、前記配信手段により配信された前記放映用データを前記第2の端末装置が受信してから所定時間待機した後に放映開始するように、前記第2の端末装置に放映開始指示を出力するとともに、前記第1の端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放音用データの読み出しを、当該第1の端末装置に指示し、前記第2の端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放映用データの読み出しを、当該第2の端末装置に指示する指示手段とを有し、前記第1の端末装置は、前記配信手段により配信されたデータが自端末宛の情報であるか否かを判定し、自端末宛の情報である場合には当該データを取り込むデータ取得手段と、自端末の前記データ取得手段が取り込んだデータが放音用データである場合には、当該放音用データを順次蓄積するバッファ手段と、自端末の前記バッファ手段内の放音用データを順次読み出してオーディオ信号を生成して放音する放音手段と、前記指示手段により出力された前記放音開始指示を自端末の前記データ取得手段が取得したときに、当該放音開始指示に応じて前記放音手段による放音を開始させる一方、自端末の前記データ取得手段により前記タイムスタンプデータが挿入された前記放音用データが取得されると、当該タイムスタンプデータを前記中継装置に送信するとともに、当該タイムスタンプデータの応答として前記指示手段により指示された読出速度で前記バッファ手段内の放音用データを読み出すよう、前記放音手段を制御する制御手段とを有し、前記第2の端末装置は、前記配信手段により配信されたデータが自端末宛の情報であるか否かを判定し、自端末宛の情報である場合には当該データを取り込むデータ取得手段と、自端末の前記データ取得手段が取り込んだデータが放映用データである場合には、当該放映用データを順次蓄積するバッファ手段と、自端末の前記バッファ手段内の放映用データを順次読み出して映像信号を生成して放映する放映手段と、前記指示手段により出力された前記放映開始指示を自端末の前記データ取得手段が取得したときに、当該放映開始指示に応じて前記放映手段による放映を開始させる一方、自端末の前記データ取得手段により前記タイムスタンプデータが挿入された前記放映用データが取得されると、当該タイムスタンプデータを前記中継装置に送信するとともに、当該タイムスタンプデータの応答として前記指示手段により指示された読出速度で前記バッファ手段内の放映用データを読み出すよう、前記放映手段を制御する制御手段とを有することを特徴とする。
また、本発明に係る第1の中継装置は、自中継装置から取得した放音すべきオーディオ信号を生成するための放音用データを順次蓄積するバッファ手段と、前記バッファ手段内の放音用データを順次読み出してオーディオ信号を生成して放音する放音手段と、放音開始を指示する放音開始指示を自中継装置から取得したときに、当該放音開始指示に応じて前記放音手段による放音を開始させる一方、タイムスタンプデータが挿入された前記放音用データが取得されると、当該タイムスタンプデータを自中継装置に送信するとともに、当該タイムスタンプデータの応答として自中継装置に指示された読出速度で前記バッファ手段内の放音用データを読み出すよう、前記放音手段を制御する制御手段とを有する端末装置と通信するための通信インタフェースと、ストリーム配信された前記放音用データであって、所定のタイミングでタイムスタンプデータが挿入された前記放音用データを、前記端末装置を指定して前記通信インタフェースにより配信する配信手段と、前記配信手段により配信された前記放音用データを前記端末装置が受信してから所定時間待機した後に放音開始するように、前記通信インタフェースにより前記端末装置に前記放音開始指示を出力するとともに、前記端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放音用データの読み出しを、当該端末装置に指示する指示手段とを備えることを特徴とする。
また、本発明に係る第2の中継装置は、自中継装置から取得した放映すべき映像信号を生成するための放映用データを順次蓄積するバッファ手段と、前記バッファ手段内の放映用データを順次読み出して映像信を生成して放映する放映手段と、放映開始を指示する放映開始指示を自中継装置から取得したときに、当該放映開始指示に応じて前記放映手段による放映を開始させる一方、タイムスタンプデータが挿入された前記放映用データが取得されると、当該タイムスタンプデータを自中継装置に送信するとともに、当該タイムスタンプデータの応答として自中継装置に指示された読出速度で前記バッファ手段内の放映用データを読み出すよう、前記放映手段を制御する制御手段とを有する端末装置と通信するための通信インタフェースと、ストリーム配信された前記放映用データであって、所定のタイミングでタイムスタンプデータが挿入された前記放映用データを、前記端末装置を指定して前記通信インタフェースにより配信する配信手段と、前記配信手段により配信された前記放映用データを前記端末装置が受信してから所定時間待機した後に放映開始するように、前記通信インタフェースにより前記端末装置に前記放映開始指示を出力するとともに、前記端末装置からタイムスタンプデータを取得すると、当該タイムスタンプデータと、その受信時刻とに応じた読出速度での前記放映用データの読み出しを、当該端末装置に指示する指示手段とを備えることを特徴とする。
In order to solve the above-described problem, a first data communication system according to the present invention includes a management device, a relay device, and a plurality of terminal devices, and the management device emits sound to the relay device. The sound emission data for generating the audio signal to be streamed is distributed, the time stamp data is inserted at a predetermined timing to distribute the sound emission data, and the relay device receives the data acquired from the management device A distribution unit that designates and distributes one of the plurality of terminal devices, and after waiting for a predetermined time after the terminal device receives the sound emission data distributed by the distribution unit Output a sound emission start instruction to the terminal device so as to start sound emission, and when obtaining time stamp data from the terminal device, the time stamp data, An instruction means for instructing the terminal device to read out the sound emission data at a reading speed according to the reception time of the data, and the terminal device sends the data distributed by the distribution means to the own terminal. If the information is addressed to the terminal itself, the data acquisition means for capturing the data, and the data acquired by the data acquisition means are sound emission data, Buffer means for sequentially storing sound emission data, sound emission means for sequentially reading out the sound emission data in the buffer means to generate an audio signal and emitting the sound, and the sound emission start output by the instruction means When the instruction is acquired by the data acquisition means, sound emission by the sound emission means is started in response to the sound emission start instruction, while the time stamp data is inserted by the data acquisition means. When the sound emission data is acquired, the time stamp data is transmitted to the relay device, and the sound emission data in the buffer means is read at a reading speed instructed by the instruction means as a response to the time stamp data. Control means for controlling the sound emitting means so as to read out the sound.
In addition, a second data communication system according to the present invention includes a management device, a relay device, and a plurality of terminal devices, and the management device generates a video signal to be broadcast to the relay device. The broadcast data is streamed and the time-stamp data is inserted at a predetermined timing to distribute the broadcast data. The relay device transmits the data acquired from the management device to any of the plurality of terminal devices. A distribution unit that designates and distributes the terminal device, and the terminal device is configured to start broadcasting after waiting for a predetermined time after the terminal device receives the data for broadcasting distributed by the distribution unit. When the broadcast start instruction is output and the time stamp data is acquired from the terminal device, the reading speed corresponding to the time stamp data and the reception time is obtained. Instruction means for instructing the terminal device to read out the broadcast data at the terminal, and the terminal device determines whether the data distributed by the distribution means is information addressed to the terminal itself. A data acquisition unit that captures the data when the data is addressed to the terminal; a buffer unit that sequentially stores the data for broadcasting when the data acquired by the data acquisition unit is data for broadcasting; Broadcasting means for sequentially reading out the broadcasting data in the buffer means to generate a video signal and broadcasting, and when the data acquisition means acquires the broadcasting start instruction output by the instruction means, the broadcasting start instruction In response to the start of the broadcast by the broadcast unit, the data acquisition unit acquires the broadcast data into which the time stamp data is inserted, Control means for transmitting the time stamp data to the relay device and for controlling the broadcast means so as to read the data for broadcast in the buffer means at a reading speed designated by the instruction means as a response to the time stamp data It is characterized by having.
A third data communication system according to the present invention includes a management device, a relay device, a first terminal device, and a second terminal device, and the management device releases the relay device. The sound emission data for generating an audio signal to be sounded and the data for air release for generating a video signal to be aired are stream-distributed, and time stamp data is inserted at a predetermined timing to generate the sound emission data. The broadcasting device, and the relay device distributes the data acquired from the management device by designating either the first terminal device or the second terminal device; Outputting a sound emission start instruction to the first terminal device so as to start sound emission after waiting for a predetermined time after the first terminal device receives the sound emission data distributed by the distribution means; And outputting a broadcast start instruction to the second terminal apparatus so that the second terminal apparatus starts broadcasting after waiting for a predetermined time after the second terminal apparatus receives the broadcast data distributed by the distribution means. When the time stamp data is acquired from the first terminal device, the first terminal device is instructed to read out the sound emission data at a reading speed according to the time stamp data and the reception time. When the time stamp data is obtained from the second terminal device, an instruction to instruct the second terminal device to read the data for broadcasting at a reading speed according to the time stamp data and the reception time. And the first terminal device determines whether or not the data distributed by the distribution unit is information addressed to the own terminal. A data acquisition means for capturing the data; a buffer means for sequentially storing the sound emission data when the data acquired by the data acquisition means of the own terminal is data for sound emission; and the buffer means of the own terminal. When the data acquisition means of the terminal obtains the sound emission start instruction output by the instruction means, and the sound emission means for sequentially reading out the sound emission data in the audio signal to emit sound, In response to the sound emission start instruction, sound emission by the sound emission means is started, and when the sound emission data into which the time stamp data is inserted is acquired by the data acquisition means of the terminal itself, the time stamp The data is transmitted to the relay device, and released in the buffer means at a reading speed instructed by the instructing means as a response to the time stamp data. Control means for controlling the sound emission means so as to read out the sound data, and the second terminal device determines whether or not the data distributed by the distribution means is information addressed to the terminal itself. If the data is addressed to the terminal itself, the data acquisition means for acquiring the data, and if the data acquired by the data acquisition means of the terminal is the data for broadcasting, the data for broadcasting is sequentially stored. Buffer means, broadcast means for sequentially reading out the broadcast data in the buffer means of the terminal itself to generate a video signal, and broadcasting the broadcast start instruction output by the instruction means for the data acquisition means of the terminal itself Is acquired, the time stamp data is inserted by the data acquisition means of its own terminal while the broadcast means starts broadcasting in response to the broadcast start instruction When the projection data is acquired, the time stamp data is transmitted to the relay device, and the broadcast data in the buffer unit is read at a reading speed instructed by the instruction unit as a response to the time stamp data. And control means for controlling the broadcasting means.
The first repeater according to the present invention includes a buffer means for sequentially storing sound emission data for generating an audio signal to be emitted, acquired from the own repeater apparatus, and a sound release sound in the buffer means. When a sound emitting unit that sequentially reads data to generate and emit an audio signal and a sound emission start instruction that instructs the start of sound emission are acquired from the own relay device, the sound emission according to the sound emission start instruction When the sound emission data into which the time stamp data is inserted is acquired, the time stamp data is transmitted to the own relay device and the own relay device is used as a response to the time stamp data. A communication interface for communicating with a terminal device having control means for controlling the sound emission means so as to read out the sound emission data in the buffer means at a reading speed instructed by And a delivery means for delivering the sound emission data stream-distributed and having the time stamp data inserted at a predetermined timing via the communication interface by designating the terminal device And outputting the sound emission start instruction to the terminal device by the communication interface so that sound emission is started after waiting for a predetermined time after the terminal device receives the sound emission data distributed by the distribution means. In addition, when the time stamp data is acquired from the terminal device, the time stamp data and an instruction means for instructing the terminal device to read the sound emission data at a reading speed according to the reception time. It is characterized by that.
Further, the second relay apparatus according to the present invention sequentially stores the broadcast data for generating the video signal to be broadcast obtained from the own relay apparatus, and the broadcast data in the buffer means in order. When the broadcast means for reading out and generating the video signal and the broadcast start instruction for instructing the start of broadcast are acquired from the own relay device, the broadcast means starts the broadcast according to the broadcast start instruction, while the time When the broadcast data into which the stamp data is inserted is acquired, the time stamp data is transmitted to the own relay device, and at the reading speed instructed to the own relay device as a response to the time stamp data, A communication interface for communicating with a terminal device having control means for controlling the broadcast means so as to read out the broadcast data; A delivery means for delivering the broadcast data, which has been stream-delivered and has time stamp data inserted at a predetermined timing, by the communication interface by designating the terminal device; The communication interface outputs the broadcasting start instruction to the terminal device so that the terminal device starts broadcasting after waiting for a predetermined time after the terminal device receives the distributed data for broadcasting, and a time stamp from the terminal device. When the data is acquired, there is provided an instruction means for instructing the terminal device to read the broadcast data at a reading speed according to the time stamp data and the reception time.
Claims (1)
前記データ取得手段が取り込んだデータが放音用データである場合には、当該放音用データを順次蓄積するバッファ手段と、
前記バッファ手段内の放音用データを順次読み出してオーディオ信号を生成して放音する放音手段と、
前記データ取得手段が取り込んだデータに代表端末か子端末かを指定する指定情報が含まれていた場合に、当該指定情報に従い代表端末モードと子端末モードを設定するモード設定手段と、
代表端末モードが設定された場合は、前記放音手段に対し所定時間待機させた後に放音を開始させ、かつ、子端末宛に放音開始を指示する放音開始指示を出力し、子端末モードが設定された場合は、前記データ取得手段が代表端末からの放音開始指示を取得したときに、前記放音手段による放音を開始させる制御手段と
を具備することを特徴とする端末装置。 It is determined whether or not the data acquired from the network is information addressed to the own terminal. If the information is addressed to the own terminal, data acquisition means for capturing the data,
When the data acquired by the data acquisition means is sound emission data, buffer means for sequentially storing the sound emission data;
Sound emission means for sequentially reading out the sound emission data in the buffer means to generate and emit an audio signal;
A mode setting means for setting the representative terminal mode and the slave terminal mode according to the designation information when the data acquired by the data acquisition means includes designation information for designating the representative terminal or the slave terminal;
When the representative terminal mode is set, the sound emission means is made to wait for a predetermined time, and then sound emission is started, and a sound emission start instruction is issued to instruct the child terminal to start sound emission. And a control unit that, when the mode is set, starts the sound emission by the sound emission unit when the data acquisition unit acquires the sound emission start instruction from the representative terminal. .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012084745A JP5397495B2 (en) | 2012-04-03 | 2012-04-03 | Data distribution system and relay device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012084745A JP5397495B2 (en) | 2012-04-03 | 2012-04-03 | Data distribution system and relay device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007238431A Division JP4967945B2 (en) | 2007-09-13 | 2007-09-13 | Terminal device and data distribution system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012161088A true JP2012161088A (en) | 2012-08-23 |
JP5397495B2 JP5397495B2 (en) | 2014-01-22 |
Family
ID=46841205
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012084745A Expired - Fee Related JP5397495B2 (en) | 2012-04-03 | 2012-04-03 | Data distribution system and relay device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5397495B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018012041A1 (en) * | 2016-07-13 | 2018-01-18 | 株式会社ディーアンドエムホールディングス | Wireless audio system, wireless speaker, and computer readable program |
WO2019049245A1 (en) * | 2017-09-06 | 2019-03-14 | ヤマハ株式会社 | Audio system, audio device, and method for controlling audio device |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003258894A (en) * | 2002-03-05 | 2003-09-12 | Matsushita Electric Ind Co Ltd | Method for receiving and reproducing data and data communication equipment |
JP2004193868A (en) * | 2002-12-10 | 2004-07-08 | Alps Electric Co Ltd | Wireless transmission and reception system and wireless transmission and reception method |
JP2004208308A (en) * | 2002-12-20 | 2004-07-22 | Stmicroelectronics Sa | Method and apparatus for synchronizing reproduction of audio frame and/or video frame, video driver circuit, and decoder box |
JP2004235747A (en) * | 2003-01-28 | 2004-08-19 | Alpine Electronics Inc | Data transmission method, data transmission device and data transmission system |
JP2005148565A (en) * | 2003-11-18 | 2005-06-09 | Yamaha Corp | Audio reproduction device and audio distribution system |
JP2007501428A (en) * | 2003-08-05 | 2007-01-25 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Buffer management system, digital audio receiver, headphones, speaker, buffer management method |
JP2008508791A (en) * | 2004-07-27 | 2008-03-21 | ソニー株式会社 | Home entertainment system, playback method, and television receiver |
-
2012
- 2012-04-03 JP JP2012084745A patent/JP5397495B2/en not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003258894A (en) * | 2002-03-05 | 2003-09-12 | Matsushita Electric Ind Co Ltd | Method for receiving and reproducing data and data communication equipment |
JP2004193868A (en) * | 2002-12-10 | 2004-07-08 | Alps Electric Co Ltd | Wireless transmission and reception system and wireless transmission and reception method |
JP2004208308A (en) * | 2002-12-20 | 2004-07-22 | Stmicroelectronics Sa | Method and apparatus for synchronizing reproduction of audio frame and/or video frame, video driver circuit, and decoder box |
JP2004235747A (en) * | 2003-01-28 | 2004-08-19 | Alpine Electronics Inc | Data transmission method, data transmission device and data transmission system |
JP2007501428A (en) * | 2003-08-05 | 2007-01-25 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Buffer management system, digital audio receiver, headphones, speaker, buffer management method |
JP2005148565A (en) * | 2003-11-18 | 2005-06-09 | Yamaha Corp | Audio reproduction device and audio distribution system |
JP2008508791A (en) * | 2004-07-27 | 2008-03-21 | ソニー株式会社 | Home entertainment system, playback method, and television receiver |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018012041A1 (en) * | 2016-07-13 | 2018-01-18 | 株式会社ディーアンドエムホールディングス | Wireless audio system, wireless speaker, and computer readable program |
WO2019049245A1 (en) * | 2017-09-06 | 2019-03-14 | ヤマハ株式会社 | Audio system, audio device, and method for controlling audio device |
US10390138B2 (en) | 2017-09-06 | 2019-08-20 | Yamaha Corporation | Audio system, audio apparatus, and control method for audio apparatus |
JPWO2019049245A1 (en) * | 2017-09-06 | 2019-12-12 | ヤマハ株式会社 | Audio system, audio device, and control method of audio device |
JP7024794B2 (en) | 2017-09-06 | 2022-02-24 | ヤマハ株式会社 | Audio systems, audio equipment, and how to control audio equipment |
Also Published As
Publication number | Publication date |
---|---|
JP5397495B2 (en) | 2014-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7805210B2 (en) | Synchronizing multi-channel speakers over a network | |
US10454604B2 (en) | Encoded audio synchronization | |
US7434154B2 (en) | Systems and methods for synchronizing media rendering | |
US8677002B2 (en) | Streaming media system and method | |
JP4559050B2 (en) | Synchronous playback of media data packets | |
US11678005B2 (en) | Latency negotiation in a heterogeneous network of synchronized speakers | |
JP6290915B2 (en) | Common event-based multi-device media playback | |
WO2015000328A1 (en) | Method and system for simultaneously outputting audio | |
EP3868043B1 (en) | Wireless audio synchronization | |
US8224147B2 (en) | Interconnected multimedia systems with synchronized playback | |
JP4967945B2 (en) | Terminal device and data distribution system | |
JP2017050609A (en) | Video processing system, video processing apparatus, video processing program, and video processing method | |
JP5397495B2 (en) | Data distribution system and relay device | |
JP7024794B2 (en) | Audio systems, audio equipment, and how to control audio equipment | |
JP2015501018A5 (en) | ||
KR101873675B1 (en) | Method for Transmitting Audio Content Information in Network-based Audio Video Bridging System | |
US10209952B2 (en) | Content reproduction device, content reproduction system, and control method for a content reproduction device | |
JP4543586B2 (en) | Audio reproduction apparatus and audio reproduction method | |
KR102091905B1 (en) | AVB based SR Speaker System with Adjustable Presentation Time | |
JP2008016905A (en) | Content transmission apparatus, content receiving apparatus, and content distribution method | |
CA2629156A1 (en) | Interconnected multimedia systems with synchronized playback |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130911 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130924 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20131007 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |