WO2017221433A1 - 同期設定装置、配信システム、同期設定方法、及びプログラム - Google Patents
同期設定装置、配信システム、同期設定方法、及びプログラム Download PDFInfo
- Publication number
- WO2017221433A1 WO2017221433A1 PCT/JP2016/075437 JP2016075437W WO2017221433A1 WO 2017221433 A1 WO2017221433 A1 WO 2017221433A1 JP 2016075437 W JP2016075437 W JP 2016075437W WO 2017221433 A1 WO2017221433 A1 WO 2017221433A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- distribution
- delay time
- content data
- synchronization setting
- synchronization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L7/00—Arrangements for synchronising receiver with transmitter
Definitions
- a distribution system that distributes content data from a distribution device to a plurality of distribution destinations (output devices such as speakers) through a digital communication system network such as a LAN (Local Area Network) is known.
- a digital communication system network such as a LAN (Local Area Network)
- data processing including encoding and decoding is required, which causes a problem in that the distribution is delayed and the delay time is different for each distribution destination. Therefore, a synchronous distribution system that outputs contents such as audio at the same timing by synchronizing a plurality of distribution destinations has been proposed (for example, see Patent Document 1).
- the content is output at the same timing, so the delay that occurs during distribution hardly poses a problem.
- an object of an embodiment of the present invention is to provide a synchronization setting device, a distribution system, a synchronization setting method, and a program that can be synchronized among a plurality of distribution devices.
- the synchronization setting device includes an acquisition unit and an output unit.
- the acquisition unit has a first delay time set when distributing the first content data in the first distribution device, and a second delay time set when distributing the second content data in the second distribution device; To get.
- An output unit that gives the first content data to the first delivery device, the second delivery device, or the first delivery device and gives the second content data to the second delivery device; On the other hand, the first delay time and the second delay time are output.
- the first embodiment solves the following problems. That is, in recent years, a playback device that is a distribution source of content data is connected to the distribution device, and the playback device gives the content data to the distribution device and plays back another content data related to the content data on its own device. A new distribution system has been proposed.
- the new distribution system has the following problems.
- the reproduction apparatus that is the distribution source reproduces the content data and outputs content such as audio with little delay.
- contents output from a delivery destination (such as an output device such as a speaker) are synchronized with each other, but there is a delay until output as described above. For this reason, the output timing of the content is shifted between the distribution source (reproduction device) and the distribution destination. In this way, in a new distribution system, a delay that occurs during distribution becomes a big problem.
- an object of the first embodiment is to provide a synchronization setting device, a distribution system, a synchronization setting method, and a program capable of synchronizing the output timing of content between a distribution source and a distribution destination.
- the synchronization setting device includes an acquisition unit that acquires a delay time set in the distribution device in order to synchronize the distribution of the first content data through the network, and a first related to the first content data.
- An output unit that outputs the delay time toward a playback device that plays back two content data.
- the distribution device has a plurality of distribution modes that can be set as a distribution method of the first content data, and the acquisition unit is set in the distribution mode for each of the distribution modes set in the distribution device. To get the delay time.
- the plurality of delivery modes include a synchronization mode for synchronizing a plurality of delivery destinations to which the first content data is delivered, and a release mode for releasing the synchronization of the plurality of delivery destinations.
- the delay time acquired by the acquisition unit when setting to the release mode is set to zero.
- the acquisition unit reacquires the delay time according to a change in the delay time
- the output unit re-outputs the delay time reacquired by the acquisition unit toward the playback device.
- first content data and the second content data are data to be reproduced in synchronization with each other.
- the playback device is a device connected externally to a network audio system including the delivery device, and the delay time is a time required for synchronized playback in the network audio system.
- the first content data is data including content reproduced by the network audio system
- the second content data is data including content generated by the reproduction device itself.
- the distribution device which is the parent device of the network audio system.
- a distribution system includes a distribution device that distributes first content data through a network, a reproduction device that reproduces second content data related to the first content data, and the first content data.
- the synchronization setting device according to any one of claims 1 to 8, which is used for acquiring and outputting a delay time set in the distribution device in order to synchronize distribution.
- the reproduction timing of the second content data is adjusted according to the delay time output from the synchronization setting device.
- the playback device is an automatic performance device, and adjusts the performance timing based on the second content data according to the delay time output from the synchronization setting device.
- the synchronization setting device is included in the distribution device or a controller of the distribution device.
- FIG. 1 is a conceptual diagram showing a distribution system according to the first embodiment. As shown in FIG. 1, the distribution system includes a distribution device 1, an automatic performance device 2, and a synchronization setting device 3.
- Such a system for distributing audio contents through a network is generally called a network audio system.
- the network audio system distributes audio content from the parent device (distribution device 1) to the child device (distribution destination 11 such as a speaker), and reproduces the audio content by synchronizing the parent device and the child device, and also a plurality of child devices. (Synchronized playback) Then, in consideration of a delay that occurs during distribution, a delay time Td necessary for synchronous reproduction is set in the master unit (distribution apparatus 1).
- the first content data d1 may be data including content reproduced by such a network audio system, for example.
- the distribution apparatus 1 has a plurality of distribution modes that can be set as a distribution method of the first content data d1.
- a delay time Td for synchronizing the distribution of the first content data d1 through the network is set in advance for each distribution mode.
- the delivery mode includes at least a synchronization mode for synchronizing a plurality of delivery destinations 11 during delivery of the first content data d1, and a release mode for releasing the synchronization of the delivery destinations 11.
- the control unit 23 is a control processing device such as a microcomputer, and assigns the first content data d1 to the distribution device 1 and executes automatic performance processing based on the second content data d2 related to the first content data d1. . Specifically, the control unit 23 generates a control signal Sc for controlling the drive unit 22 from the second content data d2, and outputs the control signal Sc to the drive unit 22. Then, the drive unit 22 operates the performance mechanism unit 21 based on the control signal Sc from the control unit 23. As a result, the second content data d2 is reproduced in the automatic performance device 2 and output as a piano performance sound.
- the second content data d2 is MIDI (Musical Instrument Digital Interface) data including content (piano performance sound) generated by the automatic performance device 2 itself.
- the second content data d2 is not limited to MIDI data.
- the second content data may be audio data related to Japanese speech
- the first content data may be audio data related to English speech.
- the MIDI data is input to the control unit 23.
- the control unit 23 generates the control signal Sc using the data of the performance part (piano part) of the automatic performance device 2 included in the MIDI data as the second content data d2. Further, the control unit 23 drives a sound source (not shown) based on data of other performance parts (for example, accompaniment part) included in the MIDI data, and converts the digital audio signal obtained from the sound source into the first content.
- the data d1 is given to the distribution apparatus 1.
- the first content data d1 and the second content data d2 are related to each other. That is, the first content data d1 and the second content data d2 are data to be reproduced in synchronization with each other.
- FIG. 2B is a block diagram illustrating a hardware configuration of the distribution apparatus 1.
- the distribution apparatus 1 includes a communication interface 101, an input interface 102, a CPU (Central Processing Unit) 103, a RAM (Random Access Memory) 104, as its hardware configuration. ROM (Read Only Memory) 105.
- the CPU 103 executes a program stored in the RAM 104 or the ROM 105, whereby the synchronization setting device 3 is realized by software.
- a program for realizing the synchronization setting device 3 by software may be recorded on a recording medium (flash memory, optical disk, magnetic disk, or the like) that can be read by the distribution device 1.
- a recording medium flash memory, optical disk, magnetic disk, or the like
- the acquisition unit 31 acquires a delay time Td set in the distribution device 1 in order to synchronize the distribution of the first content data d1 (that is, in order to perform synchronous reproduction). Specifically, the delay time Td is set for each delivery mode (synchronous mode and release mode) described above. Then, the acquisition unit 31 acquires a corresponding delay time Td for each distribution mode set in the distribution apparatus 1.
- the delay time Td is set as follows. That is, in distribution through a wireless network, the delay time Td is set to 500 ms in correspondence with the synchronous mode. In distribution through a wired network, the delay time Td is set to 100 ms in correspondence with the synchronous mode. Further, the delay time Td is set to 0 (zero) ms in correspondence with the release mode.
- the delay time Td is not limited to these, and can be changed as appropriate according to the communication environment.
- the synchronization setting device 3 determines which distribution mode is set in the distribution device 1 (step S31).
- the distribution mode is set by the user using the distribution device 1 or the controller 12 that remotely controls the distribution device 1.
- the synchronization setting device 3 determines whether the distribution mode is the synchronization mode or the release mode. The same applies to the case where the distribution apparatus 1 has three or more distribution modes that can be set.
- the acquisition unit 31 of the synchronization setting device 3 acquires the delay time Td corresponding to the distribution mode set in the distribution device 1 (steps S32 and S33).
- the various methods mentioned above acquisition from the delivery apparatus 1 or a memory
- the output unit 32 of the synchronization setting device 3 After obtaining the delay time Td, the output unit 32 of the synchronization setting device 3 outputs the delay time Td to the automatic performance device 2 (step 34).
- the synchronization setting device 3 has destination information regarding the output destination of the delay time Td such as an IP (Internet Protocol) address, and outputs the delay time Td based on the destination information.
- the synchronization setting device 3 may acquire the destination information by searching for the automatic performance device 2 existing on the network.
- step S21 If it is determined in step S21 that the automatic performance device 2 has received the delay time Td, the automatic performance device 2 adjusts the performance timing based on the second content data d2 in accordance with the received delay time Td (step S22). ). That is, the automatic performance device 2 adjusts the reproduction timing of the second content data d2 in accordance with the delay time Td, thereby synchronizing the content output timing between the automatic performance device 2 (distribution source) and the distribution destination 11.
- a method for adjusting the reproduction timing the above-described various methods (delay of the output timing of the control signal Sc or mechanical delay) can be used.
- the automatic performance device 2 repeatedly executes steps S21 and S22 until it is determined in step S23 that the automatic performance has been completed.
- the content output timing can be synchronized between the automatic performance device 2 (distribution source) and the distribution destination 11, so that the user staying at the distribution destination 11 Can provide a comfortable performance without any deviation.
- the delay time Td is set for each distribution mode set in the distribution apparatus 1, the degree of freedom of adjustment regarding the reproduction timing in the automatic performance apparatus 2 is increased.
- the delay time Td may change during the performance by the automatic performance device 2 or at the start of the next performance.
- the acquisition unit 31 preferably acquires the delay time Td again according to the change in the delay time Td. That is, it is preferable that the acquisition unit 31 dynamically acquires the delay time Td according to a change in the delay time Td.
- the output unit 32 preferably re-outputs the delay time Td acquired again by the acquisition unit 31 toward the automatic performance device 2.
- the same method as that of the first embodiment can be used for the acquisition method and the output method of the delay time Td.
- the hardware configuration of the controller 12 may be the same as that of the distribution device 1, but may be a mode including a mobile phone (information processing device) such as a smartphone as shown in FIG. 5, for example.
- the controller 12 includes a touch panel 301, a control unit 302, a ROM 303, a RAM 304, a display unit 305, and a communication I / F 306.
- the distribution apparatus 1 distributes only the first content data d1 (digital audio signal of the accompaniment part) to the distribution destination 11 installed in the same space (such as a room) as the automatic performance apparatus 2, and is installed in another space.
- a digital audio signal obtained from a sound source (not shown) based on all data of the melody part and the accompaniment part may be distributed to the distributed destination 11.
- the digital audio signal of the accompaniment part is the first in the distribution device (first distribution device) 1A installed in the same space as the automatic performance device 2 as described above.
- Digital audio signals (second content data d2) of all parts (melody part and accompaniment part) are assigned to the distribution device (second distribution device) 1B provided as content data d1 and installed in another space.
- the automatic performance device 2 performs automatic performance based on the MIDI data (third content data d3) of the melody part.
- the second content data d2 includes both first content data that is an accompaniment part and third content data that is a melody part.
- FIG. 7 is a flowchart showing the control performed by the automatic performance device 2 and the synchronization setting device 3.
- performance data such as MIDI data
- the automatic performance device 2 starts automatic performance processing.
- the synchronization setting device 3 starts the synchronization setting process.
- the synchronization setting device 3 monitors which distribution mode is set for all the distribution devices (S41). As shown in FIG. 6, when the own device serves as both the synchronization setting device 3 and the distribution device, the synchronization setting device 3 determines the distribution mode of the own device (first distribution device 1 ⁇ / b> A). Further, the synchronization setting device 3 determines the distribution mode of the second distribution device 1B via a network or the like. As described above, the synchronization setting device 3 has identification information of other devices connected to the network, such as an IP (Internet Protocol) address or a MAC address.
- IP Internet Protocol
- the delay time is set to 500 ms in the distribution through the wireless network, and the delay time is set to 100 ms in the distribution through the wired network. Further, the delay time Td is set to 0 (zero) ms in correspondence with the release mode.
- the first delay time Td1 is acquired as 100 ms.
- the second delay time Td2 is acquired as 500 ms.
- the automatic performance device 2 can synchronize the output timing of all the contents even when content data is given to a plurality of distribution devices.
- the distribution system described above adjusts the timing at which the automatic performance device 2 as a playback device gives the first content data d1 to the first distribution device 1A based on the first delay time Td1 and the second delay time Td2.
- the first distribution device 1A may perform the synchronization process by adjusting the delay time of the first distribution device 1A in consideration of the delay time of the second distribution device 1B.
- any one of the plurality of distribution devices may perform the synchronization process by adjusting the delay time of the own device with reference to the distribution device having the longest delay time in the distribution system. For example, if the delay time of the first distribution device 1A is the largest, the second distribution device 1B takes into account the delay time of the first distribution device 1A, and the delay time of its own device (second distribution device 1B). May be adjusted.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Automation & Control Theory (AREA)
- Electrophonic Musical Instruments (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Computer And Data Communications (AREA)
- Synchronisation In Digital Transmission Systems (AREA)
Abstract
同期設定装置(3)は、取得部(31)と、出力部(32)と、を備える。取得部(31)は、第1配信装置(1A)において第1コンテンツデータを配信する場合に設定される第1遅延時間と、第2配信装置(1B)において第2コンテンツデータを配信する場合に設定される第2遅延時間と、を取得する。出力部(32)は、前記第1配信装置(1A)、前記第2配信装置(1B)、または、前記第1配信装置(1A)に前記第1コンテンツデータを付与しかつ前記第2配信装置(1B)に前記第2コンテンツデータを付与する再生装置(2)、に対して、前記第1遅延時間および前記第2遅延時間を出力する。
Description
本発明の一実施形態は、コンテンツデータの同期配信に使用される同期設定装置、配信システム、同期設定方法、及びプログラムに関する。
従来、LAN(Local Area Network)等のデジタル通信方式のネットワークを通じて、コンテンツデータを、配信装置から複数の配信先(スピーカ等の出力装置など)に配信する配信システムが知られている。デジタル通信方式のネットワークを通じてコンテンツデータを配信する場合、エンコードやデコードを含むデータ処理が必要であるため、配信に遅延が生じると共に配信先ごとに遅延時間が異なるという問題が生じていた。そこで、複数の配信先を同期させることにより、同じタイミングで音声等のコンテンツを出力させる同期配信システムが提案されている(例えば、特許文献1参照)。この様な同期配信システムでは、同じタイミングでコンテンツが出力されるため、配信時に生じる遅延は殆ど問題とならない。
近年、コンテンツデータを再生する再生装置から、複数の配信装置に対して、それぞれコンテンツデータが付与される場合がある。この場合、それぞれの配信装置においては、付与されたコンテンツデータの配信先と、配信装置とのコンテンツ出力タイミングが同期される。しかし、複数の配信装置の間では、同期が取れていない場合がある。例えば、ある配信装置(第1配信装置)において、配信先との同期を取るために500msの遅延時間を設定したとしても、別の配信装置(第2配信装置)において、配信先との同期を取るために100msの遅延時間を設定した場合、第1配信装置と第2配信装置との間で同期を取ることができない。
そこで本発明の一実施形態における目的は、複数の配信装置の間でも同期させることが可能な同期設定装置、配信システム、同期設定方法、及びプログラムを提供することである。
同期設定装置は、取得部と、出力部と、を備える。取得部は、第1配信装置において第1コンテンツデータを配信する場合に設定される第1遅延時間と、第2配信装置において第2コンテンツデータを配信する場合に設定される第2遅延時間と、を取得する。出力部は、前記第1配信装置、前記第2配信装置、または、前記第1配信装置に前記第1コンテンツデータを付与しかつ前記第2配信装置に前記第2コンテンツデータを付与する再生装置、に対して、前記第1遅延時間および前記第2遅延時間を出力する。
本発明の一実施形態によれば、複数の配信装置の間でもコンテンツの出力タイミングを同期させることが可能となる。
[1]第1実施形態
第1実施形態は、以下の課題を解決する。すなわち、近年、コンテンツデータの配信元となる再生装置を配信装置に接続し、再生装置が、コンテンツデータを配信装置に付与すると共に、そのコンテンツデータに関連した別のコンテンツデータを自装置で再生する新たな配信システムが提案されている。
第1実施形態は、以下の課題を解決する。すなわち、近年、コンテンツデータの配信元となる再生装置を配信装置に接続し、再生装置が、コンテンツデータを配信装置に付与すると共に、そのコンテンツデータに関連した別のコンテンツデータを自装置で再生する新たな配信システムが提案されている。
しかしながら、新たな配信システムでは、次の様な問題がある。即ち、新たな配信システムでは、配信元の再生装置は、殆ど遅延を生じることなくコンテンツデータを再生して音声等のコンテンツを出力する。一方、配信先(スピーカ等の出力装置など)から出力されるコンテンツについては、互いに同期してはいるものの、上述した様に出力までに遅延が生じる。このため、コンテンツの出力タイミングが配信元(再生装置)と配信先とでずれることになる。この様に、新たな配信システムでは、配信時に生じる遅延が大きな問題となってしまう。
そこで第1実施形態の目的は、コンテンツの出力タイミングを配信元と配信先とで同期させることが可能な同期設定装置、配信システム、同期設定方法、及びプログラムを提供することである。
第1の実施形態に係る同期設定装置は、ネットワークを通じた第1コンテンツデータの配信を同期させるために配信装置に設定される遅延時間を取得する取得部と、前記第1コンテンツデータに関連する第2コンテンツデータを再生する再生装置に向けて、前記遅延時間を出力する出力部と、を備える。
また、前記配信装置は、前記第1コンテンツデータの配信方法として設定可能な複数の配信モードを有し、前記取得部は、前記配信装置に設定される前記配信モードごとに、その配信モードで設定される遅延時間を取得する。
また、前記複数の配信モードには、前記第1コンテンツデータが配信される複数の配信先を同期させる同期モードと、前記複数の配信先の同期を解除する解除モードと、が含まれており、前記解除モードへの設定時に前記取得部が取得する遅延時間が、ゼロに設定される。
また、前記取得部は、前記遅延時間の変化に応じて当該遅延時間を取得し直し、前記出力部は、前記取得部が取得し直した前記遅延時間を、前記再生装置に向けて再出力する。
また、前記第1コンテンツデータと前記第2コンテンツデータとは互いに同期して再生されるべきデータである。
また、前記再生装置は、前記配信装置を含むネットワークオーディオシステムに対して外部に接続される装置であり、前記遅延時間は、前記ネットワークオーディオシステムでの同期再生のために必要な時間である。
また、前記第1コンテンツデータは、前記ネットワークオーディオシステムで再生されるコンテンツを含んだデータであり、前記第2コンテンツデータは、前記再生装置自体が発するコンテンツを含んだデータである。
また、前記ネットワークオーディオシステムの親機である前記配信装置に含まれる。
また、第1実施形態に係る配信システムは、ネットワークを通じて第1コンテンツデータを配信する配信装置と、前記第1コンテンツデータに関連する第2コンテンツデータを再生する再生装置と、前記第1コンテンツデータの配信を同期させるために前記配信装置に設定される遅延時間の取得及び出力に使用される、請求項1~8の何れか1つに記載の同期設定装置と、を備え、前記再生装置は、前記同期設定装置から出力される前記遅延時間に応じて、前記第2コンテンツデータの再生のタイミングを調整する。
また、前記再生装置は、自動演奏装置であり、前記同期設定装置から出力される前記遅延時間に応じて、前記第2コンテンツデータに基づく演奏のタイミングを調整する。
また、前記同期設定装置は、前記配信装置又は当該配信装置のコントローラに含まれている。
[1-1]配信システムの構成
図1は、第1実施形態に係る配信システムを示した概念図である。図1に示される様に、配信システムは、配信装置1と、自動演奏装置2と、同期設定装置3と、を備える。
図1は、第1実施形態に係る配信システムを示した概念図である。図1に示される様に、配信システムは、配信装置1と、自動演奏装置2と、同期設定装置3と、を備える。
配信装置1は、例えばAV(Audio-Visual)レシーバであり、複数の配信先11(スピーカ等の出力装置など)に対し、LAN(Local Area Network)等のデジタル通信方式のネットワークを通じて第1コンテンツデータd1を配信することが可能である。本実施形態では、第1コンテンツデータd1は、自動演奏装置2が演奏する楽曲の伴奏パートをコンテンツとするものであり、後述する様に自動演奏装置2から付与される。尚、配信装置1には、AVレシーバに限らず、コンテンツデータの配信が可能な種々の装置を用いることができる。又、ネットワークは、有線又は無線の何れで構築されていてもよい。
この様にネットワークを通じてオーディオコンテンツを配信するシステムは、通常、ネットワークオーディオシステムと呼ばれている。ネットワークオーディオシステムは、親機(配信装置1)から子機(スピーカ等の配信先11)へオーディオコンテンツを配信し、親機と子機、更には複数の子機を同期させてオーディオコンテンツを再生させる(同期再生)。そして、配信時に生じる遅延を考慮して、親機(配信装置1)には、同期再生に必要な遅延時間Tdが設定される。尚、第1コンテンツデータd1は、一例として、この様なネットワークオーディオシステムで再生されるコンテンツを含んだデータであってもよい。
配信装置1は、第1コンテンツデータd1の配信方法として設定可能な複数の配信モードを有している。そして、配信装置1には、配信モードごとに、ネットワークを通じた第1コンテンツデータd1の配信を同期させるための(即ち、同期再生のための)遅延時間Tdが予め設定されている。配信モードには、第1コンテンツデータd1の配信時に複数の配信先11を同期させる同期モードと、配信先11の同期を解除する解除モードと、が少なくとも含まれている。
自動演奏装置2は、自動演奏が可能なピアノ等の楽器であり、「再生装置」に相当するものである。図1においては、再生装置は、自装置がコンテンツを出力する(演奏する)とともに、別系統でコンテンツを出力する態様である。ただし、再生装置は、自装置がコンテンツを出力しないで、他装置にコンテンツを出力するだけであってもよい。
自動演奏装置2は、演奏を行う演奏機構部21と、演奏機構部21を動作させる駆動部22と、駆動部22を制御する制御部23とを有する。一例として、自動演奏装置2がピアノである場合、鍵盤の動きをハンマーに伝える伝達機構が演奏機構部21に相当し、鍵盤の動きを機械的に実現してハンマーを駆動させるものが駆動部22に相当する。
制御部23は、マイクロコンピュータ等の制御処理装置であり、第1コンテンツデータd1を配信装置1に付与すると共に、第1コンテンツデータd1に関連する第2コンテンツデータd2に基づく自動演奏処理を実行する。具体的には、制御部23は、駆動部22を制御するための制御信号Scを第2コンテンツデータd2から生成し、その制御信号Scを駆動部22に出力する。そして、駆動部22は、制御部23からの制御信号Scに基づき、演奏機構部21を動作させる。これにより、自動演奏装置2において第2コンテンツデータd2が再生され、ピアノ演奏音として出力される。この場合、第2コンテンツデータd2は、自動演奏装置2自体が発するコンテンツ(ピアノ演奏音)を含んだMIDI(Musical Instrument Digital Interface)データである。尚、第2コンテンツデータd2は、MIDIデータに限定されるものではない。例えば、第2コンテンツデータが日本語音声に係るオーディオデータであり、第1コンテンツデータが英語音声に係るオーディオデータであってもよい。
制御部23には、上記MIDIデータが入力される。制御部23は、MIDIデータに含まれる自動演奏装置2の演奏パート(ピアノパート)のデータを第2コンテンツデータd2として、制御信号Scを生成する。更に、制御部23は、MIDIデータに含まれる他の演奏パート(例えば、伴奏パート)のデータに基づいて音源(不図示)を駆動させ、当該音源から得られたデジタルオーディオ信号を、第1コンテンツデータd1として配信装置1に付与する。
この様に、第1コンテンツデータd1と第2コンテンツデータd2とは、それらのコンテンツが互いに関連したものである。即ち、第1コンテンツデータd1と第2コンテンツデータd2とは互いに同期して再生されるべきデータである。
自動演奏装置2は、ケーブルやネットワークを介して配信装置1に接続されている。即ち、自動演奏装置2は、上述したネットワークオーディオシステムに対して外部に接続されている。そして、制御部23は、自動演奏処理を実行する際、第1コンテンツデータd1を配信装置1に付与する。このとき、第1コンテンツデータd1は、デジタルオーディオ信号のままで配信装置1に付与されてもよいし、アナログオーディオ信号に変換されて配信装置1に付与されてもよい。何れの場合であっても、自動演奏装置2と配信装置1との間では、エンコードやデコードを含むデータ処理が不要であるため遅延は殆ど生じない。
図2(A)は、同期設定装置3を示したブロック図である。図2(A)に示される様に、同期設定装置3は、取得部31と、出力部32と、を含む。本実施形態では、同期設定装置3は、図1に示される様に配信装置1にて実現されている。具体的には、以下の通りである。
図2(B)は、配信装置1のハードウェア構成を示したブロック図である。図2(B)に示される様に、配信装置1は、そのハードウェア構成として、通信インターフェース101と、入力インターフェース102と、CPU(Central Processing Unit)103と、RAM(Random Access Memory)104と、ROM(Read Only Memory)105と、を有する。そして、RAM104やROM105に記憶されるプログラムをCPU103が実行することにより、同期設定装置3がソフトウェアで実現される。同期設定装置3をソフトウェアで実現するためのプログラムは、配信装置1での読取りが可能な記録媒体(フラッシュメモリ、光学ディスク、磁気ディスク等)に記録されていてもよい。
取得部31は、第1コンテンツデータd1の配信を同期させるために(即ち、同期再生させるために)配信装置1に設定される遅延時間Tdを取得する。具体的には、遅延時間Tdは、上述した配信モード(同期モード及び解除モード)ごとに設定されている。そして、取得部31は、配信装置1に設定される配信モードごとに、対応する遅延時間Tdを取得する。
本実施形態では、遅延時間Tdは、配信装置1において配信モードごとに予め設定されており、取得部31は、対応する遅延時間Tdを配信装置1から取得する。尚、遅延時間Tdは、同期設定装置3内の記憶部(不図示)に記憶されていてもよい。この場合、取得部31は、対応する遅延時間Tdを記憶部から取得することになる。又、取得部31は、遅延時間Tdの取得時に遅延時間Tdを実際に測定してもよい。遅延時間Tdの測定は、配信装置1が行ってもよいし、別に設けられた計測部で行われてもよい。
一例として、遅延時間Tdは、次の様に設定される。即ち、無線のネットワークを通じた配信では、同期モードに対応させて、遅延時間Tdが500msに設定される。有線のネットワークを通じた配信では、同期モードに対応させて、遅延時間Tdが100msに設定される。又、解除モードに対応させて、遅延時間Tdが0(ゼロ)msに設定される。尚、遅延時間Tdは、これらに限定されるものではなく、通信環境に応じて適宜変更することが可能である。
出力部32は、取得部31が取得した遅延時間Tdを出力する。具体的には、出力部32は、自動演奏装置2に向けて遅延時間Tdを出力する。このとき、同期設定装置3は、IP(Internet Protocol)アドレス等、遅延時間Tdの出力先に関する宛先情報を有しており、出力部32は、宛先情報に基づいて遅延時間Tdを出力する。尚、同期設定装置3は、ネットワーク上に存在する自動演奏装置2を検索することによりその宛先情報を取得してもよい。
自動演奏装置2は、出力部32から出力される遅延時間Tdに応じて、第2コンテンツデータd2に基づく演奏のタイミングを調整する。即ち、自動演奏装置2は、遅延時間Tdに応じて、第2コンテンツデータd2の再生のタイミングを調整する。具体的には、遅延時間Tdが0(ゼロ)msでない場合、自動演奏装置2は、遅延時間Tdに応じて第2コンテンツデータd2の再生を遅延させ、これにより、コンテンツの出力タイミングを自動演奏装置2(配信元)と配信先11とで同期させる。一方、遅延時間Tdが0(ゼロ)msである場合、自動演奏装置2は、遅延させることなく第2コンテンツデータd2を再生する。これにより、自動演奏装置2における再生のタイミングが、元に(遅延のない状態に)戻る。
具体的には、自動演奏装置2において、制御部23が、駆動部22に向けて制御信号Scを出力するタイミングを調整する。第2コンテンツデータd2の再生を遅延させる場合、制御部23は、制御信号Scの出力タイミングを遅らせる。このとき、自動演奏装置2での再生を遅らせる時間は、遅延時間Tdと同じであってもよいし、配信先11と同期させるべく補正されてもよい。
尚、第2コンテンツデータd2の再生を遅らせる方法として、制御信号Scの出力タイミングを遅らせることに代えて、制御部23がMIDIデータをシーケンスするタイミングを遅らせてもよし、自動演奏装置2の演奏のタイミング(駆動部22が駆動してから演奏機構部21による演奏が実行されるまで時間)を機械的に遅らせてもよい。
[1-2]配信システムの制御
図3は、自動演奏装置2及び同期設定装置3が行う制御を示したフローチャートである。先ず、MIDIデータ等の演奏データが自動演奏装置2に入力されると、自動演奏装置2は、自動演奏処理を開始する。これに伴って、同期設定装置3は、同期設定処理を開始する。ただし、同期設定処理の開始タイミングは、自動演奏が開始される時ではなく、配信装置1の遅延時間が変化するタイミングであってもよい。
図3は、自動演奏装置2及び同期設定装置3が行う制御を示したフローチャートである。先ず、MIDIデータ等の演奏データが自動演奏装置2に入力されると、自動演奏装置2は、自動演奏処理を開始する。これに伴って、同期設定装置3は、同期設定処理を開始する。ただし、同期設定処理の開始タイミングは、自動演奏が開始される時ではなく、配信装置1の遅延時間が変化するタイミングであってもよい。
同期設定処理が開始されると、同期設定装置3は、配信装置1にどの配信モードが設定されているかを判断する(ステップS31)。配信モードの設定は、ユーザにより、配信装置1又は当該配信装置1をリモートで制御するコントローラ12で行われる。本実施形態では、同期設定装置3は、配信モードが同期モード及び解除モードの何れであるかを判断する。尚、配信装置1が、設定可能な配信モードを3つ以上有する場合であっても、同様である。
ステップS31での判断の後、同期設定装置3の取得部31が、配信装置1に設定されている配信モードに対応する遅延時間Tdを取得する(ステップS32及びS33)。尚、遅延時間Tdの取得方法には、上述した様々な方法(配信装置1や記憶部からの取得、或いは計測など)を用いることができる。
遅延時間Tdの取得後、同期設定装置3の出力部32が、自動演奏装置2に向けて遅延時間Tdを出力する(ステップ34)。このとき、同期設定装置3は、IP(Internet Protocol)アドレス等、遅延時間Tdの出力先に関する宛先情報を有しており、その宛先情報に基づいて遅延時間Tdを出力する。尚、同期設定装置3は、ネットワーク上に存在する自動演奏装置2を検索することによりその宛先情報を取得してもよい。
自動演奏装置2は、自動演奏処理の開始後、遅延時間Tdを受け取ったか否かを判断する(ステップS21)。この判断は、例えば、制御部23で実行される。そして、ステップS21にて自動演奏装置2が遅延時間Tdを受け取ったと判断するまで、ステップS22が繰り返し実行される。
ステップS21にて自動演奏装置2が遅延時間Tdを受け取ったと判断した場合、自動演奏装置2は、受け取った遅延時間Tdに応じて、第2コンテンツデータd2に基づく演奏のタイミングを調整する(ステップS22)。即ち、自動演奏装置2は、遅延時間Tdに応じて第2コンテンツデータd2の再生のタイミングを調整し、これにより、コンテンツの出力タイミングを自動演奏装置2(配信元)と配信先11とで同期させる。尚、再生のタイミングを調整する方法には、上述した様々な方法(制御信号Scの出力タイミングの遅延や機械的な遅延)を用いることができる。
その後、自動演奏装置2は、ステップS23にて自動演奏が完了したと判断するまで、ステップS21及びS22を繰り返し実行する。
第1実施形態に係る配信システム及びその制御によれば、コンテンツの出力タイミングを自動演奏装置2(配信元)と配信先11とで同期させることができるので、配信先11に滞在するユーザに対し、ずれのない快適な演奏を提供することができる。又、配信装置1に設定される配信モードごとに遅延時間Tdが設定されているので、自動演奏装置2での再生のタイミングに関する調整の自由度が大きくなる。
(変形例1)
上述した配信システムは、自動演奏装置2による演奏の途中又は次の演奏の開始時において、遅延時間Tdに変化が生じるものであってもよい。この場合、同期設定装置3において、取得部31は、遅延時間Tdの変化に応じて当該遅延時間Tdを取得し直すことが好ましい。即ち、取得部31は、遅延時間Tdの変化に応じて当該遅延時間Tdを動的に取得することが好ましい。又、出力部32は、取得部31が取得し直した遅延時間Tdを、自動演奏装置2に向けて再出力することが好ましい。遅延時間Tdの取得方法及び出力方法には、第1実施形態と同様の方法を用いることができる。
上述した配信システムは、自動演奏装置2による演奏の途中又は次の演奏の開始時において、遅延時間Tdに変化が生じるものであってもよい。この場合、同期設定装置3において、取得部31は、遅延時間Tdの変化に応じて当該遅延時間Tdを取得し直すことが好ましい。即ち、取得部31は、遅延時間Tdの変化に応じて当該遅延時間Tdを動的に取得することが好ましい。又、出力部32は、取得部31が取得し直した遅延時間Tdを、自動演奏装置2に向けて再出力することが好ましい。遅延時間Tdの取得方法及び出力方法には、第1実施形態と同様の方法を用いることができる。
変形例1に係る配信システム及びその制御によれば、自動演奏装置2における演奏の全期間を通じて、コンテンツの出力タイミングを自動演奏装置2(配信元)と配信先11とで同期させることができる。よって、配信先11に滞在するユーザに対し、より快適な演奏を提供することができる。又、同期設定装置3において遅延時間Tdの取得及び出力がリアルタイムで実行されることにより、更なる快適な演奏が実現される。
(変形例2)
図4は、変形例2に係る配信システムを示した概念図である。図4に示される様に、第1実施形態で説明した配信システムにおいて、同期設定装置3は、配信装置1をリモートで制御するコントローラ12にて実現されてもよい。
図4は、変形例2に係る配信システムを示した概念図である。図4に示される様に、第1実施形態で説明した配信システムにおいて、同期設定装置3は、配信装置1をリモートで制御するコントローラ12にて実現されてもよい。
コントローラ12のハードウェア構成は、配信装置1と同様であってもよいが、例えば図5に示すような、スマートフォン等の携帯電話機(情報処理装置)からなる態様であってもよい。コントローラ12は、タッチパネル301、制御部302、ROM303、RAM304、表示部305、および通信I/F306を備えている。
タッチパネル301は、利用者からの操作を受け付ける。表示部305は、利用者に各種情報を提示する。制御部302は、ROM303に記憶されているOSおよびアプリケーションプログラムをRAM304に読み出すことで、各種の動作を行なう。例えば、制御部302は、ユーザからタッチパネル301を介してアプリケーションプログラムの起動を指示されると、指示されたアプリケーションプログラムを起動し、表示部305に該アプリケーションプログラムの画面を表示する。この場合、配信システムの制御は、アプリケーションプログラムを通じて実行される。
応用例2に係る配信システムにおいても、第1実施形態及び第2実施形態と同様の制御を実行することができる。
尚、第1コンテンツデータd1と第2コンテンツデータd2とは、同じコンテンツに係るデータであってもよいし、それらのコンテンツが互いに関連したものであれば、上述したピアノパート(旋律パート)と伴奏パートの様にコンテンツが異なるものであってもよい。
又、配信装置1は、自動演奏装置2と同じ空間(部屋など)に設置された配信先11には第1コンテンツデータd1(伴奏パートのデジタルオーディオ信号)のみを配信し、別の空間に設置された配信先11には、旋律パートと伴奏パートの全てのデータに基づいて音源(不図示)から得られるデジタルオーディオ信号を配信してもよい。
[2]第2実施形態
第2実施形態は、上述のように、自動演奏装置2と同じ空間に設置された配信装置(第1配信装置)1Aには、伴奏パートのデジタルオーディオ信号が第1コンテンツデータd1として付与され、別の空間に設置された配信装置(第2配信装置)1Bには、全パート(旋律パートと伴奏パート)のデジタルオーディオ信号(第2コンテンツデータd2)が付与される。自動演奏装置2は、旋律パートのMIDIデータ(第3コンテンツデータd3)に基づいて、自動演奏を行なう。第2コンテンツデータd2は、伴奏パートである第1コンテンツデータと、旋律パートである第3コンテンツデータと、の両方が含まれている。
第2実施形態は、上述のように、自動演奏装置2と同じ空間に設置された配信装置(第1配信装置)1Aには、伴奏パートのデジタルオーディオ信号が第1コンテンツデータd1として付与され、別の空間に設置された配信装置(第2配信装置)1Bには、全パート(旋律パートと伴奏パート)のデジタルオーディオ信号(第2コンテンツデータd2)が付与される。自動演奏装置2は、旋律パートのMIDIデータ(第3コンテンツデータd3)に基づいて、自動演奏を行なう。第2コンテンツデータd2は、伴奏パートである第1コンテンツデータと、旋律パートである第3コンテンツデータと、の両方が含まれている。
図6は、第2実施形態に係る配信システムの構成を示した図である。図1と共通する構成は、同一の符号を付し、説明を省略する。第1配信装置1Aおよび第2配信装置1Bは、いずれも図1で示した配信装置1と同じ構成を有する。図6の例では、第1コンテンツデータが付与される第1配信装置1Aに、同期設定装置3が内蔵されている。
図7は、自動演奏装置2及び同期設定装置3が行う制御を示したフローチャートである。先ず、MIDIデータ等の演奏データが自動演奏装置2に入力されると、自動演奏装置2は、自動演奏処理を開始する。これに伴って、同期設定装置3は、同期設定処理を開始する。
同期設定処理が開始されると、同期設定装置3は、全ての配信装置について、どの配信モードが設定されているか、監視する(S41)。図6の様に自装置が、同期設定装置3と配信装置とを兼ねている場合には、同期設定装置3は、自装置(第1配信装置1A)の配信モードを判断する。また、同期設定装置3は、ネットワーク等を介して、第2配信装置1Bの配信モードを判断する。上述したように、同期設定装置3は、IP(Internet Protocol)アドレスまたはMACアドレス等、ネットワーク接続されている他装置の識別情報を有している。
同期設定装置3は、自装置または他装置の配信状態が変化した場合、または初期設定時には(S42のYES)、第1遅延時間Td1および第2遅延時間Td2を取得する。
遅延時間は、各装置から直接取得してもよいが、各装置からは配信モードを示す情報を取得して、取得した配信モードから、各装置の遅延時間を推定してもよい。各配信装置から各子機へ配信を行なう場合、子機では、親機からの配信および再生等の処理により、親機よりも音が出力されるタイミングが遅れることになる。特に、無線ネットワークにおける配信では、フレームが正しく受信されない場合のフレーム再送等の処理を行う場合や、パケット欠損によるデータ再送等の処理を行なう場合等があり、子機における音の出力タイミングの遅れがより大きくなる。そこで、親機である第1配信装置1Aおよび第2配信装置1Bは、それぞれ子機との同期再生を行なうために、オーディオコンテンツを所定時間分だけバッファして、音の出力を遅らせる。したがって、遅延時間は、子機との同期再生を行なうために必要なバッファ容量に応じて設定される。また、配信装置1Aまたは配信装置1Bは、親機と子機とのネットワーク遅延を考慮して、配信の開始タイミングおよび親機の再生開始タイミングを調整することで、同期再生を行なってもよい。この場合、遅延時間は、配信の開始タイミングおよび親機の再生開始タイミングの時間差に相当する。上述のように、無線ネットワークを通じた配信では、遅延時間が500msに設定され、有線のネットワークを通じた配信では、遅延時間が100msに設定される。又、解除モードに対応させて、遅延時間Tdが0(ゼロ)msに設定される。図6の例では、第1配信装置1Aは、有線による配信が行なわれるため、第1遅延時間Td1は、100msとして取得される。第2配信装置1Bは、無線による配信が行なわれるため、第2遅延時間Td2は、500msとして取得される。
同期設定装置3は、取得した第1遅延時間Td1および第2遅延時間Td2を自動演奏装置2(再生装置)に出力して、自動演奏装置2に対して同期処理を実行させる(S44)。すなわち、自動演奏装置2は、遅延時間を取得した場合に(S21)、第1遅延時間および第2遅延時間に基づいて、同期処理を行なう(s22)。
自動演奏装置2は、第1遅延時間Td1および第2遅延時間Td2に基づいて、第3コンテンツデータd3の再生のタイミングを調整する。この例では、最も遅延時間の大きい、第2配信装置1Bにおける500msに合わせて、ピアノパートの再生を、制御信号Scの出力タイミングを遅らせるまたはハンマーを動かすタイミングを機械的に遅らせることにより、500ms遅らせる。さらに、自動演奏装置2は、第1遅延時間Td1および第2遅延時間Td2に基づいて、第1コンテンツデータd1を第1配信装置1Aに付与するタイミングを調整する。第1配信装置1Aの第1遅延時間Td1は、第2遅延時間Td2よりも400ms短い(第2遅延時間Td2-第1遅延時間Td1)。したがって、自動演奏装置2は、第1コンテンツデータd1を400ms遅らせて付与する。一方で、自動演奏装置2は、第2配信装置に対しては、遅延時間ゼロで第2コンテンツデータ(d1+d3)を付与する。ただし、第3コンテンツデータd3は、旋律パートのMIDIデータである。したがって、実際に第2配信装置に対して付与される第2コンテンツデータは、MIDIデータである第3コンテンツデータd3がピアノ音のデジタルオーディオ信号に変換されたものと、伴奏パートのデジタルオーディオ信号である第1コンテンツデータd1とが合成されたものである。
これにより、自動演奏装置2は、複数の配信装置に対してコンテンツデータを付与する場合であっても、全コンテンツの出力タイミングを同期させることができる。
尚、同期設定装置3は、図8に示すように、コントローラ12で実現されてもよい。この場合、コントローラ12は、第1配信装置1Aおよび第2配信装置1Bから、それぞれ第1遅延時間Td1および第2遅延時間Td2を取得して、自動演奏装置2に対して、第1遅延時間Td1および第2遅延時間Td2を出力して同期処理を実行させる。
又、同期設定装置3は、図9に示すように、自動演奏装置2に内蔵されていてもよい。この場合、自動演奏装置2は、第1配信装置1Aおよび第2配信装置1Bから、それぞれ第1遅延時間Td1および第2遅延時間Td2を取得して、自装置に対して、第1遅延時間Td1および第2遅延時間Td2を出力して同期処理を実行させる。
尚、上述した配信システムは、再生装置である自動演奏装置2が、第1遅延時間Td1および第2遅延時間Td2に基づいて、第1コンテンツデータd1を第1配信装置1Aに付与するタイミングを調整することで同期処理を行う態様であった。しかし、第1配信装置1Aが、第2配信装置1Bの遅延時間を考慮して、第1配信装置1Aの遅延時間を調整することで同期処理を行なってもよい。すなわち、複数の配信装置のうちいずれか1つの配信装置が、配信システムのうち最も遅延時間が大きい配信装置を基準として、自装置の遅延時間を調整することで同期処理を行なってもよい。例えば、仮に第1配信装置1Aの遅延時間が最も大きい場合には、第2配信装置1Bが、第1配信装置1Aの遅延時間を考慮して、自装置(第2配信装置1B)の遅延時間を調整してもよい。
尚、上述した実施形態では、再生装置が自動演奏装置2である場合について説明したが、再生装置は、自動演奏装置2に限らず、CD(Compact Disk)プレーヤ、DVD(Digital Versatile Disc)プレーヤ、テレビジョンなどの装置であってもよい。第1実施形態においては、再生装置は、再生したコンテンツデータを配信装置1に付与する。第2実施形態においては、再生装置は、再生したコンテンツデータのうち、第1コンテンツデータ(例えば英語音声)を第1配信装置1Aに付与し、第2コンテンツデータ(例えば日本語音声)を第2配信装置1Bに付与する。
更に、上述した実施形態では、自動演奏装置2にMIDIデータ等の演奏データが入力される場合について説明したが、演奏データは、配信装置に入力されてもよい。第1実施形態においては、演奏データに含まれる自動演奏装置2の旋律パートのデータが、第2コンテンツデータd2として、配信装置1から自動演奏装置2に付与されることになる。この場合、伴奏パートの第1コンテンツデータd1は、配信装置1に設けられた音源(不図示)でデジタルオーディオ信号に変換されて、配信される。第2実施形態においては、例えば第2配信装置1Bに演奏データが入力された場合、伴奏パートのデータが、第1コンテンツデータd1として、第2配信装置1Bから第1配信装置1Aに付与される。あるいは、伴奏パートのデータは、第2配信装置1Bに設けられた音源(不図示)でデジタルオーディオ信号に変換されて、第1配信装置1Aに付与される。旋律パートのデータは、第3コンテンツデータd3として、第2配信装置1Bから自動演奏装置2に付与される。旋律パートおよび伴奏パートのデータは、第2配信装置1Bに設けられた音源(不図示)でデジタルオーディオ信号に変換された第2コンテンツデータとして、配信される。
上述の実施形態の説明は、すべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上述の実施形態ではなく、請求の範囲によって示される。更に、本発明の範囲には、請求の範囲と均等の意味及び範囲内での全ての変更が含まれることが意図される。例えば、配信装置の数は、3つ以上であってもよい。この場合、同期設定装置は、第3配信装置の第3遅延時間をさらに取得して、第1配信装置、第2配信装置、再生装置、または第3配信装置に対して、前記第1遅延時間、前記第2遅延時間、および第3遅延時間を出力する。同期処理は、第1配信装置、第2配信装置、再生装置、または第3配信装置のいずれかにおいて実行される。
1…配信装置
1A…第1配信装置
1B…第2配信装置
2…自動演奏装置
3…同期設定装置
11…配信先
12…コントローラ
21…演奏機構部
22…駆動部
23…制御部
31…取得部
32…出力部
101…通信インターフェース
102…入力インターフェース
103…CPU
104…RAM
105…ROM
301…タッチパネル
302…制御部
303…ROM
304…RAM
305…表示部
306…通信インタフェース
1A…第1配信装置
1B…第2配信装置
2…自動演奏装置
3…同期設定装置
11…配信先
12…コントローラ
21…演奏機構部
22…駆動部
23…制御部
31…取得部
32…出力部
101…通信インターフェース
102…入力インターフェース
103…CPU
104…RAM
105…ROM
301…タッチパネル
302…制御部
303…ROM
304…RAM
305…表示部
306…通信インタフェース
Claims (15)
- 第1配信装置において第1コンテンツデータを配信する場合に設定される第1遅延時間と、第2配信装置において第2コンテンツデータを配信する場合に設定される第2遅延時間と、を取得する取得部と、
前記第1配信装置、前記第2配信装置、または、前記第1配信装置に前記第1コンテンツデータを付与しかつ前記第2配信装置に前記第2コンテンツデータを付与する再生装置、に対して、前記第1遅延時間および前記第2遅延時間を出力する出力部と、
を備えた同期設定装置。 - 前記出力部は、前記再生装置に対して前記同期処理を実行させる、
請求項1に記載の同期設定装置。 - 前記第1コンテンツデータおよび前記第2コンテンツデータは、互いに関連するコンテンツである、
請求項1または請求項2に記載の同期設定装置。 - 前記再生装置は、前記第1コンテンツデータまたは前記第2コンテンツデータに関連する第3コンテンツデータを再生する、
請求項1乃至請求項3のいずれか1項に記載の同期設定装置。 - 前記第1コンテンツデータまたは前記第2コンテンツデータは、伴奏情報を含み、
前記第3コンテンツデータは、旋律情報を含む、
請求項4に記載の同期設定装置。 - 前記第1コンテンツデータは、前記伴奏情報から生成されたオーディオデータであり、
前記第2コンテンツデータは、前記旋律情報および前記伴奏情報から生成されたオーディオデータである、
請求項5に記載の同期設定装置。 - 前記第1配信装置および前記第2配信装置は、それぞれ、前記第1コンテンツデータおよび前記第2コンテンツデータの配信方法として設定可能な複数の配信モードを有し、
前記取得部は、前記第1配信装置および前記第2配信装置に設定される前記配信モードごとに、その配信モードで設定される第1遅延時間および第2遅延時間を取得する、請求項1乃至請求項6のいずれか1項に記載の同期設定装置。 - 前記複数の配信モードには、前記第1コンテンツデータおよび前記第2コンテンツデータが配信される複数の配信先を同期させる同期モードと、前記複数の配信先の同期を解除する解除モードと、が含まれており、
前記解除モードへの設定時に前記取得部が取得する前記第1遅延時間または前記第2遅延時間が、ゼロに設定される、請求項7に記載の同期設定装置。 - 前記取得部は、前記第1遅延時間または前記第2遅延時間の変化に応じて前記第1遅延時間または前記第2遅延時間を取得し直す、
請求項1乃至請求項8のいずれか1項に記載の同期設定装置。 - 前記第1配信装置または前記第2配信装置に含まれる、請求項1乃至請求項9のいずれか1項に記載の同期設定装置。
- 前記第1遅延時間は、前記第1配信装置において、該第1配信装置と配信先の子機との同期再生を行なうために必要な時間に応じて設定され、
前記第2遅延時間は、前記第2配信装置において、該第2配信装置と配信先の子機との同期再生を行なうために必要な時間に応じて設定される、
請求項1乃至請求項10のいずれか1項に記載の同期設定装置。 - 請求項1乃至請求項11のいずれかに記載の同期設定装置と、
前記第1配信装置と、
前記第2配信装置と、
前記再生装置と、
からなり、
前記第1配信装置、前記第2配信装置、または前記再生装置は、前記同期設定装置から出力された前記第1遅延時間および前記第2遅延時間を入力し、該第1遅延時間および該第2遅延時間に基づいて、前記第1コンテンツデータおよび前記第2コンテンツデータに係るコンテンツの出力タイミングを同期させる同期処理を行なう、配信システム。 - 前記第1配信装置および前記第2配信装置は、それぞれネットワークを介してオーディオコンテンツを配信するネットワークオーディオシステムの親機であり、
前記再生装置は、自動演奏装置である、
請求項12に記載の配信システム。 - 第1配信装置において第1コンテンツデータを配信する場合に設定される第1遅延時間と、第2配信装置において第2コンテンツデータを配信する場合に設定される第2遅延時間と、を取得し、
前記第1配信装置、前記第2配信装置、または、前記第1配信装置に前記第1コンテンツデータを付与しかつ前記第2配信装置に前記第2コンテンツデータを付与する再生装置、に対して、前記第1遅延時間および前記第2遅延時間を出力する、
同期設定方法。 - 情報処理装置に対して、
第1配信装置において第1コンテンツデータを配信する場合に設定される第1遅延時間と、第2配信装置において第2コンテンツデータを配信する場合に設定される第2遅延時間と、を取得する取得処理と、
前記第1配信装置、前記第2配信装置、または、前記第1配信装置に前記第1コンテンツデータを付与しかつ前記第2配信装置に前記第2コンテンツデータを付与する再生装置、に対して、前記第1遅延時間および前記第2遅延時間を出力する出力処理と、
を実行させる、プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018523276A JP6575684B2 (ja) | 2016-06-24 | 2016-08-31 | 同期設定装置、配信システム、同期設定方法、及びプログラム |
| US15/904,653 US10917465B2 (en) | 2016-06-24 | 2018-02-26 | Synchronization setting device and distribution system |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2016/068835 WO2017221407A1 (ja) | 2016-06-24 | 2016-06-24 | 同期設定装置、配信システム、同期設定方法、及びプログラム |
| JPPCT/JP2016/068835 | 2016-06-24 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| US15/904,653 Continuation US10917465B2 (en) | 2016-06-24 | 2018-02-26 | Synchronization setting device and distribution system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2017221433A1 true WO2017221433A1 (ja) | 2017-12-28 |
Family
ID=60784264
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2016/068835 Ceased WO2017221407A1 (ja) | 2016-06-24 | 2016-06-24 | 同期設定装置、配信システム、同期設定方法、及びプログラム |
| PCT/JP2016/075437 Ceased WO2017221433A1 (ja) | 2016-06-24 | 2016-08-31 | 同期設定装置、配信システム、同期設定方法、及びプログラム |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2016/068835 Ceased WO2017221407A1 (ja) | 2016-06-24 | 2016-06-24 | 同期設定装置、配信システム、同期設定方法、及びプログラム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US10917465B2 (ja) |
| EP (1) | EP3477887A4 (ja) |
| JP (1) | JP6575684B2 (ja) |
| CN (1) | CN109314631B (ja) |
| WO (2) | WO2017221407A1 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109845249B (zh) * | 2016-10-14 | 2022-01-25 | 森兰信息科技(上海)有限公司 | 用外部信息同步midi文件的方法和系统 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002215143A (ja) * | 2001-01-18 | 2002-07-31 | Yamaha Corp | 楽曲データ出力装置及び楽曲データ出力方法 |
| JP2004282667A (ja) * | 2003-03-19 | 2004-10-07 | Matsushita Electric Ind Co Ltd | 再生同期ずれ補正機能を備えた送信機及び受信機、並びにそれらを有する伝送装置 |
| JP2006339856A (ja) * | 2005-05-31 | 2006-12-14 | Toshiba Corp | テレビ装置および音声データの出力制御方法 |
| JP2010011274A (ja) * | 2008-06-30 | 2010-01-14 | Toshiba Corp | 映像音声出力装置及び映像音声出力方法 |
| JP2015018384A (ja) * | 2013-07-10 | 2015-01-29 | 船井電機株式会社 | 音声入出力装置 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001324980A (ja) * | 2000-05-17 | 2001-11-22 | Rhythm Watch Co Ltd | 音同期演奏制御装置およびこれを含む音同期演奏装置ならびに音同期演奏制御方法 |
| JP2001356767A (ja) * | 2000-06-16 | 2001-12-26 | Yamaha Corp | 同期再生装置、同期再生方法および同期再生用プログラムを記録した記録媒体 |
| JP3591493B2 (ja) * | 2001-07-25 | 2004-11-17 | ソニー株式会社 | ネットワークシステム、およびネットワークシステムの同期方法 |
| US8086752B2 (en) * | 2006-11-22 | 2011-12-27 | Sonos, Inc. | Systems and methods for synchronizing operations among a plurality of independently clocked digital data processing devices that independently source digital data |
| US8234395B2 (en) * | 2003-07-28 | 2012-07-31 | Sonos, Inc. | System and method for synchronizing operations among a plurality of independently clocked digital data processing devices |
| JP4912296B2 (ja) * | 2005-04-28 | 2012-04-11 | パナソニック株式会社 | リップシンク補正システム、リップシンク補正装置及びリップシンク補正方法 |
| JP2008032637A (ja) * | 2006-07-31 | 2008-02-14 | Seiko Epson Corp | 時刻修正装置、時刻修正装置付き計時装置及び時刻修正方法 |
| JP2008131589A (ja) * | 2006-11-24 | 2008-06-05 | Pioneer Electronic Corp | コンテンツ再生装置、その方法、そのプログラム及びそのプログラムを記録した記録媒体 |
| JP5040356B2 (ja) * | 2007-02-26 | 2012-10-03 | ヤマハ株式会社 | 自動演奏装置、再生システム、配信システム及びプログラム |
| CN101304351A (zh) * | 2008-06-30 | 2008-11-12 | 湖南创智数码科技股份有限公司 | 基于点对点传输的流媒体直播系统同步播放方法 |
| KR101276200B1 (ko) * | 2009-09-22 | 2013-06-18 | 한국전자통신연구원 | Emf 모델의 동기화 방법 및 시스템 |
| JP5782677B2 (ja) * | 2010-03-31 | 2015-09-24 | ヤマハ株式会社 | コンテンツ再生装置および音声処理システム |
| US20120093056A1 (en) * | 2010-10-13 | 2012-04-19 | Electronics And Telecommunications Research Institute | Apparatus and method for managing slot |
| JP5494677B2 (ja) * | 2012-01-06 | 2014-05-21 | ヤマハ株式会社 | 演奏装置及び演奏プログラム |
| CN104185040A (zh) * | 2013-05-25 | 2014-12-03 | 中兴通讯股份有限公司 | 应用同步方法、应用服务器及终端 |
| FR3007602B1 (fr) * | 2013-06-20 | 2015-06-19 | Highlands Technologies Solutions | Procede de communication pour une application interactive entre terminaux dans une salle de projection sur ecran |
| KR20150026069A (ko) * | 2013-08-30 | 2015-03-11 | 삼성전자주식회사 | 컨텐츠 재생 방법 및 그 방법을 처리하는 전자 장치 |
| CN103905878A (zh) * | 2014-03-13 | 2014-07-02 | 北京奇艺世纪科技有限公司 | 一种视频数据和音频数据同步播放的方法、装置和设备 |
| CN105451056B (zh) * | 2015-11-20 | 2018-10-02 | 小米科技有限责任公司 | 音视频同步方法及装置 |
-
2016
- 2016-06-24 WO PCT/JP2016/068835 patent/WO2017221407A1/ja not_active Ceased
- 2016-06-24 EP EP16906324.5A patent/EP3477887A4/en not_active Withdrawn
- 2016-06-24 CN CN201680086626.6A patent/CN109314631B/zh active Active
- 2016-08-31 WO PCT/JP2016/075437 patent/WO2017221433A1/ja not_active Ceased
- 2016-08-31 JP JP2018523276A patent/JP6575684B2/ja active Active
-
2018
- 2018-02-26 US US15/904,653 patent/US10917465B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002215143A (ja) * | 2001-01-18 | 2002-07-31 | Yamaha Corp | 楽曲データ出力装置及び楽曲データ出力方法 |
| JP2004282667A (ja) * | 2003-03-19 | 2004-10-07 | Matsushita Electric Ind Co Ltd | 再生同期ずれ補正機能を備えた送信機及び受信機、並びにそれらを有する伝送装置 |
| JP2006339856A (ja) * | 2005-05-31 | 2006-12-14 | Toshiba Corp | テレビ装置および音声データの出力制御方法 |
| JP2010011274A (ja) * | 2008-06-30 | 2010-01-14 | Toshiba Corp | 映像音声出力装置及び映像音声出力方法 |
| JP2015018384A (ja) * | 2013-07-10 | 2015-01-29 | 船井電機株式会社 | 音声入出力装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2017221433A1 (ja) | 2019-01-31 |
| EP3477887A4 (en) | 2020-02-26 |
| CN109314631A (zh) | 2019-02-05 |
| WO2017221407A1 (ja) | 2017-12-28 |
| CN109314631B (zh) | 2021-08-27 |
| EP3477887A1 (en) | 2019-05-01 |
| JP6575684B2 (ja) | 2019-09-18 |
| US20180183870A1 (en) | 2018-06-28 |
| US10917465B2 (en) | 2021-02-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1957604B (zh) | 放大器、校正处理时间差的校正方法以及校正系统 | |
| JP4441874B2 (ja) | 情報処理システム、再生端末装置および再生方法、情報処理装置および方法、並びにプログラム | |
| JP2011066544A (ja) | ネットワーク・スピーカシステム、送信装置、再生制御方法、およびネットワーク・スピーカプログラム | |
| JP7024794B2 (ja) | オーディオシステム、オーディオ機器、及びオーディオ機器の制御方法 | |
| JP6720566B2 (ja) | オーディオ機器 | |
| JP5109496B2 (ja) | データ配信装置、データ配信方法およびプログラム | |
| JP6575684B2 (ja) | 同期設定装置、配信システム、同期設定方法、及びプログラム | |
| JP2003255935A (ja) | 再生切替装置及びプログラム | |
| US10209952B2 (en) | Content reproduction device, content reproduction system, and control method for a content reproduction device | |
| WO2017148178A1 (zh) | 一种音视频处理方法以及相关设备 | |
| JP4968109B2 (ja) | オーディオデータ変換再生システム、オーディオデータ変換装置、オーディオデータ再生装置 | |
| JP6733990B2 (ja) | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム | |
| JP6451098B2 (ja) | コンテンツ再生装置、及びコンテンツ再生システム | |
| US10666838B2 (en) | Control method of operation apparatus configured to control a plurality of content reproduction apparatus to set a preset synchronous state, control method of command processing apparatus, and control method of content reproduction system | |
| US11418883B2 (en) | Audio interface apparatus and recording system | |
| JP2007081780A (ja) | 再生制御装置、表示装置および再生システム | |
| WO2021255831A1 (ja) | 送信装置、コミュニケーション方法、及びプログラム | |
| JP2003085068A (ja) | ライブ情報提供サーバ、情報通信端末、ライブ情報提供システムおよびライブ情報提供方法 | |
| WO2024212122A1 (en) | Audio synchronization in an audio distribution system | |
| JP2003009298A (ja) | 音声再生装置及び音声再生方法 | |
| JP6170738B2 (ja) | 通信デュエット時の通信方式に特徴を有する通信カラオケシステム | |
| WO2025229876A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| WO2024218975A1 (ja) | 非同期再生装置および非同期再生方法 | |
| JP6140533B2 (ja) | 通信デュエット時の演奏開始に特徴を有する通信カラオケシステム | |
| JP2002271758A (ja) | 送信装置、送信方法、受信装置、受信方法および送受信システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| WWE | Wipo information: entry into national phase |
Ref document number: 2018523276 Country of ref document: JP |
|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 16906349 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 16906349 Country of ref document: EP Kind code of ref document: A1 |