CN102394860A - 信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 - Google Patents
信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 Download PDFInfo
- Publication number
- CN102394860A CN102394860A CN2011102544514A CN201110254451A CN102394860A CN 102394860 A CN102394860 A CN 102394860A CN 2011102544514 A CN2011102544514 A CN 2011102544514A CN 201110254451 A CN201110254451 A CN 201110254451A CN 102394860 A CN102394860 A CN 102394860A
- Authority
- CN
- China
- Prior art keywords
- client
- signal
- local
- audio signal
- clients
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Electrophonic Musical Instruments (AREA)
Abstract
本发明提供一种信号传送系统、方法、电脑程序产品及电脑可读取储存媒体,其通过客户端接收到起始信号后,解码来自服务器的编码文件以获得乐谱数据与字幕原始数据、采集本地音频信号、以及接收来自其他客户端的非本地音频信号,并在将乐谱数据、字幕原始数据、本地音频信号与非本地音频信号分别转换为伴奏音乐信号、字幕信号、本地合成音频信号与非本地合成音频信号后,提供同步播放伴奏音频信号、本地合成音频信号、非本地合成音频信号、以及字幕信号的技术手段,可以同步歌曲的旋律与字幕、以及多个跟唱的人声,并达成提供合唱的技术功效。
Description
技术领域
本发明涉及一种信号传送系统、方法、电脑程序产品及电脑可读取储存媒体,尤其是一种有助于声文同步的信号传送系统、方法、电脑程序产品及电脑可读取储存媒体。
背景技术
唱歌已经成为现代人的休闲活动之一,因此目前除了可以到KTV唱歌之外,也越来越多家庭购买了卡拉OK的设备。而家庭式的卡拉OK设备最大的缺点在于伴唱歌曲无法即时更新,或者需要由使用者手动的更新伴唱歌曲,这样的状况对使用者而言并不理想。
随着网络的蓬勃发展,数位电视以及机顶盒也开始提供类似卡拉OK的网络伴唱服务,其将包含歌曲的旋律以及字幕的多媒体档案储存在服务器上,提供使用者操作数位电视或机顶盒,通过网络对服务器点播歌曲,在使用者点歌后,数位电视或机顶盒便会到服务器下载被点播的歌曲的多媒体档案,并播放给使用者跟唱。
不过,目前数位电视或机顶盒所提供的网络伴唱服务仅能让一位使用者独唱,或让在同一台数位电视或机顶盒前的多位使用者跟随该数位电视或机顶盒所播放的旋律与字幕进行合唱,而无法让不同数位电视或机顶盒同步播放被点播的歌曲的旋律与字幕以及多位使用者跟随该数位电视或机顶盒所播放的旋律或字幕所发出的歌声,也就是说,在不同数位电视或机顶盒前的多位使用者无法同步合唱。
综上所述,可知先前技术中长期以来一直存在具有网络伴唱服务的不同数位电视或机顶盒无法提供使用者合唱的问题,因此有必要提出改进的技术手段,解决此问题。
发明内容
本发明为解决背景技术中存在的上述技术问题,而提出信号传送系统、方法、电脑程序产品及电脑可读取储存媒体。
本发明的技术解决方案是本发明为一种信号传送方法,适用于多个客户端间进行网络合唱,其特殊之处在于:该方法包含以下步骤:
1)利用客户端的接收器接收来自服务器的编码文件;
2)利用客户端的传送器传送第一起始信号给客户端中的其他客户端,或利用接收器接收来自其他客户端的第二起始信号;
3)利用客户端的解码器解码编码文件以获得乐谱数据及字幕原始数据,及利用客户端的音频转换模块根据乐谱数据提供伴奏音频信号及字幕提供模块根据字幕原始数据提供字幕信号;
4)利用客户端的音频接收模块采集本地音频信号;
5)利用传送器传送本地音频信号至其他客户端;
6)利用客户端的合成器将本地音频信号转换为本地合成音频信号供客户端的音频提供模块播放;
7)利用接收器接收来自其他客户端的非本地音频信号,并利用合成器将非本地音频信号转换为非本地合成音频信号供音频提供模块播放。
上述方法包含利用网络状态侦测模块计算客户端与其他客户端间的封包传递时间是否低于预定值,当封包传递时间低于预定值时,才利用接收器接收非本地音频信号。
上述传送器传送第二起始信号至其他客户端是传送器通过服务器转送第二起始信号至其他客户端,或传送器直接传送一次或多次第二起始信号至其他客户端,利用接收器接收来自其他客户端的第一起始信号是接收器接收其他客户端直接传送一次或多次第一起始信号,或接收器接收第二客户端通过服务器转送的第一起始信号。
上述信号传送方法在传送器传送第一起始信号给客户端中其他客户端前,包含接收器接收服务器所传送的播放控制信号。
上述合成器将本地音频信号转换为本地合成音频信号是合成器持续在间隔时间内获取暂存在暂存器中的本地音频信号,并转换本地音频信号为本地合成音频信号。
一种电脑程序产品,其特殊之处在于:该产品包含:程序码,当客户端电脑载入程序码后,可执行如权利要求1所述的信号传送方法。
一种电脑可读取储存媒体,其特殊之处在于:该储存媒体包含:程序码,当客户端电脑载入并执行程序码后,可执行如权利要求1所述的信号传送方法。
一种信号传送系统,适用于多个客户端中的客户端,供客户端间进行网络合唱,其特殊之处在于:该系统包含:接收器,用来接收来自服务器的编码文件、来自客户端中其他客户端的第一起始信号、来自其他客户端的非本地音频信号;解码器,耦合至接收器,用来解码编码文件以获得乐谱数据及字幕原始数据;音频接收模块,用来采集本地音频信号;传送器,耦合至音频接收模块,用来传送第二起始信号给其他客户端、传送本地音频信号至其他客户端;字幕提供模块,耦合至解码器,用来根据字幕原始数据提供字幕信号;音频转换模块,耦合至解码器,用来根据乐谱数据提供伴奏音频信号;合成器,耦合至音频接收模块及接收器,用来将本地音频信号转换为本地合成音频信号,及将非本地音频信号转换为非本地合成音频信号;音频提供模块,耦合至合成器,用来提供伴奏音频信号、本地音频信号、本地合成音频信号、非本地合成音频信号。
上述系统包含网络状态侦测模块,用来计算客户端与其他客户端间的封包传递时间是否低于预定值,且接收器设置为封包传递时间低于预定值时,才接收非本地音频信号。
上述合成器耦合至音频转换模块,并用来合成本地音频信号、非本地音频信号、伴奏音频信号为歌曲信号,音频提供模块用来提供输出歌曲信号。
本发明提供一种信号传送系统、方法、电脑程序产品及电脑可读取储存媒体,其通过客户端接收到起始信号后,解码来自服务器的编码文件以获得乐谱数据与字幕原始数据、采集本地音频信号、以及接收来自其他客户端的非本地音频信号,并在将乐谱数据、字幕原始数据、本地音频信号与非本地音频信号分别转换为伴奏音乐信号、字幕信号、本地合成音频信号与非本地合成音频信号后,提供同步播放伴奏音频信号、本地合成音频信号、非本地合成音频信号、以及字幕信号的技术手段,可以同步歌曲的旋律与字幕、以及多个跟唱的人声,并达成提供合唱的技术功效。
附图说明
图1为本发明信号传送的网络架构图;
图2为本发明信号传送系统的系统架构图;
图3.1为本发明信号传送方法的流程图;
图3.2为本发明信号传送方法的附加方法流程图;
图3.3为本发明侦测网络状态的方法流程图。
其中,100-服务端,200-客户端,200a-客户端,200b-客户端,200c-客户端,210-接收器,222-控制模块,228-网络状态侦测模块,230-解码器,240-音频接收模块,250-音频转换模块,260-合成器,270-音频提供模块,280-字幕提供模块,290-传送器;
具体实施方式
本发明可利用包含服务器100的网络架构加以实施,参见图1,不同客户端(例如200a、200b、200c)的使用者可以使用服务器100所提供的网络伴唱服务合唱。
服务器100可储存多首歌曲的编码文件,服务器100所储存的编码文件中可包含比如乐谱数据(或可称伴奏数据)及字幕原始数据,且可包含时间数据。其中,乐谱数据、字幕原始数据以及时间数据都是数据量小的数据。在实施例中,上述编码文件的档案格式可相似于标准MIDI格式,并且将字幕原始数据储存到标准MIDI格式的一个通道中,也就是将字幕原始数据视为一个MIDI格式的声音通道,因此,相较于一般多媒体档案,编码文件可大幅节省档案大小。
服务器100也提供各个客户端连线。不同客户端在连线到服务器100后,可以建立如点对点(Peer-to-Peer,P2P)等直接连线,或是建立通过服务器100转送数据给对方的间接连线。以下方便说明,建立连线的两客户端将以图1的200a及200b为例说明。
服务器100可负责接收客户端200a在客户端200a点歌后所传送的点歌资料,并负责依据所接收的点歌资料,将客户端200a所点的歌曲加入与点歌的客户端200a对应得点歌清单中。一般各客户端可分别点播多首歌曲,而服务器100则可代为排序及筛选相同的歌曲,并形成一列表,该列表通常为点歌清单。
服务器100还提供客户端200a以及与客户端200a合唱得其他客户端(例如客户端200b)下载点歌清单中的歌曲的编码文件。一般服务器100可以在判断点歌清单中的歌曲将被客户端200a点播时,传送下载与被点播的歌曲对应得文件下载信息至客户端200a以及与客户端200a合唱的客户端200b,使客户端200a以及客户端200b依据所接收到的与被点播歌曲对应得文件下载信息至服务器100下载被播放的歌曲的编码文件,但客户端至服务器100下载被点播的歌曲的编码文件的方式并以此为限。
服务器100也可以在判断客户端200a可以播放点歌清单中的歌曲后,传送与可播放的歌曲对应得播放控制信号之客户端200a,使得客户端200a在传送起始信号至客户端200b后,客户端200a与客户端200b同步播放被点播的歌曲。
参见图2,本发明系统包含接收器210、解码器230、音频接收模块240、音频转换模块250、合成器260、音频提供模块270、字幕提供模块280及传送器290。
接收器210负责接收其他客户端所传送的起始信号(第一起始信号或第二起始信号,从客户端200a或客户端200b的不同观点看)。若客户端与合唱得其他客户端以传输控制协定(Transmission Control Protocol,TCP)建立直接连线,则接收器210会接收到一次其他客户端所传送的起始信号,或客户端与合唱得其他客户端以使用者数据包协定(User Datagram Protocol,UDP)建立直接连线,则其他客户端可连续传送多次起始信号,即接收器210可能接收到一次以上由同一其他客户端所传送的起始信号,而若客户端与合唱得其他客户端通过服务器100建立间接连线,则接收器210会接收到服务器100所传送的由其他客户端传送的起始信号。
接收器210也负责接收其他客户端所传送的非本地音频信号,在实施例中,接收器210所接收的非本地音频信号中并没有包含时间数据,所以进一步节省档案大小及处理时间。在本发明中,以客户端200a为例,客户端200a的音频接收模块240所采集的音频信号对客户端200a而言为“本地音频信号”,比如采集到客户端200a的人声语音信号。而不是“本地音频信号”对应其他客户端(比如客户端200b)而言,则为“非本地音频信号”。
接收器210还负责接收来自服务器100的编码文件。由于所述编码文件的档案并不包含多媒体档案,其关于音乐部分是提供演奏的乐谱数据(比如MIDI乐谱),以供音频转换模块250(比如MIDI演奏器)自行转换成音频信号(比如MIDI音乐),所以编码文件的档案并不大,适合利用接收器210快速地从服务器100下载整份编码文件。而并不需要像先前技术一样,在提供使用者合唱时使用串流的技术来下载多媒体档案,如此,可以节省客户端的频宽、减少数据传送时间,可避免因为串流所造成的延迟或错误。另外,接收器210也可以接收服务器100所传送的播放控制信号。
解码器230耦合接收器210,负责将接收器210所接收的编码文件解码,并在解码编码文件后获得时间节奏同步的乐谱数据与字幕原始数据。由于编码文件的档案格式与标准MIDI格式相似,因此,解码器230也可以使用与解码标准MIDI格式相似的方式解码编码文件。一般,解码器230会在接收器210接收到其他客户端所传送的起始信号后才解码编码文件。
音频接收模块240负责采集本地音频信号。音频接收模块240包含输入界面,供连接音频输入装置,比如麦克风或其他收音装置。其中,声音输入装置接收使用者所发出的声音并将其转换为音频信号的方式可以使用“高阶Linux声音体系(Advanced Linux Sound Architecture,ALSA)”或“开放声音系统(OpenSound System,OSS)”等技术,而声音输入装置转换出的音频信号的取样频率可以为44kHz。
音频转换模块250耦合解码器230,负责将解码器230所获得的乐谱数据转换为伴奏音频信号。
合成器260耦合接收器、解码器230以及音频提供模块270,负责将解码器230所获得的乐谱数据提供给音频提供模块270。合成器260在接收器210接收到其他客户端所传送的起始信号才会将乐谱数据提供给音频提供模块270。其中,音频提供模块270可包含输出界面,供连接扬声器。
合成器260中可包含计时器及暂存器,其中,计时器可以计算时间,暂存器可以储存伴奏音频信号,合成器260会在计时器计算的时间达到后,由暂存器中读出演奏时间与计时器所计算的时间的长度相同的伴奏音频信号。在本发明中,计时器每一次计算的时间被称为“间隔时间”。如上所述,可利用音频转换模块250先根据乐谱数据得到伴奏音频信号,并储存在上述暂存器中,可选择性的利用上述暂存器暂存乐谱数据,并在需要伴奏音频信号时利用音频转换模块250得到。
值得一提的是,为了要让被点播的歌曲可以持续不断的被完整输出,合成器260中的计时器会不断地计算间隔时间,在间隔时间一次次被达到后,合成器260可以持续地由暂存器中读出长度与间隔时间相同的乐谱信号。
合成器260也耦合音频接收模块240,负责将音频信号转换为合成音频信号,从而将合成音频信号提供给音频提供模块270供输出。合成器260会将音频接收模块240所采集的本地音频信号转换成本地合成音频信号,及将接收器210所接收的非本地音频信号转换为非本地合成音频信号,例如,将本地音频信号/非本地音频信号加上回音效果(Echo)。
在实施例中,音频提供模块270会先提供本地音频信号,让使用者可快速听到自己的歌声。并在即时合成本地合成音频信号及非本地合成音频信号后,接着提供本地合成音频信号及非本地合成音频信号。因为使用者可先听到本地音频信号,接着才听到本地合成音频信号,因此,不会明显感受到处理本地合成音频信号所造成的延迟。类似地,当接收到非本地音频信号时,也可以先提供非本地音频信号,再即时合成后提供非本地合成音频信号。在实施例中,设置为会将本地音频信号的音量相对大于本地合成音频信号。类似地,也设置为将非本地音频信号的音量相对大于非本地合成音频信号。
合成器260中除了上述暂存器外,还包含两个暂存器(第二及第三暂存器),分别用来储存接收器210所接收的非本地音频信号、及储存音频接收模块240所采集的本地音频信号。合成器260会在计时器计算的间隔时间达到后,分别从储存本地音频信号及储存非本地音频信号的两个暂存器中获取出在这一段间隔时间内被暂存的本地音频信号及非本地音频信号,并分别将所获取的本地音频信号及非本地音频信号转换为本地合成音频信号及非本地合成音频信号。
合成器260也可以将本地音频信号、非本地音频信号、及伴奏音乐信号合成,合成后产生的新信号在本发明中被称为“歌曲信号”。由于合成器260会持续的从储存伴奏音乐信号的暂存器中读出演奏长度与间隔时间相同的伴奏音乐信号,因此,合成器260也会分别从储存本地音频信号及非本地音频信号的两个暂存器中获取在这段间隔时间内被暂存的本地音频信号及非本地音频信号,并将所读出的伴奏音频信号、本地音频信号、及非本地音频信号合成为歌曲信号,提供给音频提供模块270。
字幕提供模块280耦合解码器230,负责根据解码器230所获得的字幕原始数据提供字幕信号。由于解码器230解码所获得的字幕原始数据与乐谱数据的时间节奏同步对应。因此,字幕提供模块280所提供的字幕信号大体上也会与伴奏音频信号的时间节奏同步对应。
一般,客户端200还包含一个视频输出界面,使字幕提供模块280可以提供影像输出以显示字幕信号输出于比如电视、电脑屏幕等影像输出装置。
传送器290耦合接收器210,可以在接收器210接收到服务器100所传送的播放控制信号后,传送第一起始信号至与客户端合唱的其他客户端,传送器290也负责在接收器210接收到其他客户端所传送的第一起始信号后,传回第二起始信号至传送第一起始信号的其他客户端。其中,若客户端与合唱的其他客户端以TCP建立直接连线,则因为TCP大体上可以确保封包一定会被传送到目的地的特性,所以传送器290只需要传送一次第二起始信号至与客户端合唱的其他客户端,即可确定与客户端合唱的其他客户端一定会收到第二起始信号,若客户端与合唱的其他客户端以UDP建立直接连线,则因为UDP无法确定封包一定会被传送到目的地,因此传送器290会连续传送多次第二起始信号至与客户端合唱的其他客户端,从而提高让与客户端合唱的其他客户端接收到第二起始信号的机率,避免因为封包遗失而造成与客户端合唱的其他客户端无法接收到第二起始信号,而若客户端与合唱的其他客户端通过服务器100建立间接连线,则传送器290会传送第二起始信号至服务器100,使服务器100转送所接收到的第二起始信号至与客户端合唱得其他客户端,其中,由于客户端与服务器100间都会以TCP建立连线,因此,传送器290只需要传送一次第二起始信号给服务器100。
传送器290也耦合音频接收模块240,负责传送音频接收模块240所采集的本地音频信号至与客户端合唱得其他客户端。其中,由于播放音频信号并不一定需要接收到所有封包的特性,再加上网络状态在正常状态下,封包并不容易被丢弃,因此,传送器290可使用P2P或UDP等方式,将本地音频信号直接传送给与客户端合唱得其他客户端,而与客户端合唱的其他客户端可以不进行包含本地音频信号的封包遗失的额外处理动作,使得客户端及与其合唱的其他客户端播放客户端的音频接收模块240所采集的本地音频信号的时间差缩短,以达到两客户端同步播放的功效。
在实施例中,传送器290所传送的本地音频信号与音频接收模块240所采集的本地音频信号相同,即在传送器290传送音频接收模块240所采集的本地音频信号前,音频接收模块240所采集的本地音频信号不会经过任何处理,从而更进一步缩短了本地音频信号被传送到合唱得其他客户端的时间,使得客户端及与其合唱的其他客户端可以同步播放客户端的音频接收模块240所采集的本地音频信号,即同步播放客户端的使用者所发出的声音。
同一客户端中的接收器210与传送器290可以使用不同的数据传输通道(频道)接收来自其他客户端的数据及传送数据至其他客户端。
此外,本发明客户端中,还可以包含控制模块222及网络状态侦测模块228。
控制模块222可以选择性的与接收器210、解码器230、合成器260、及传送器290耦合,负责在接收器210接收到与客户端合唱的其他客户端所传送的起始信号后,致能(enable)解码器230解码编码文件,致能合成器260合成本地音频信号、非本地音频信号、或歌曲信号,及/或致能传送器290传送本地音频信号至与客户端合唱的其他客户端。
控制模块222也可以在接收器210接收到服务器100所传送的播放控制信号后,致能传送器290传送第一起始信号至与客户端合唱的其他客户端。
网络状态侦测模块228耦合接收器210及传送器290,负责侦测客户端与合唱的其他客户端间的网络状态。一般,网络状态侦测模块228会计算客户端与合唱的其他客户端间的封包传递时间是否高于预定值,当网络状态侦测模块228所计算出的封包传递时间高于预定值时,表示客户端与合唱的其他客户端间的网络状态不佳,不容易让不同客户端的使用者的声音同步的在其他客户端上播放,即此时两客户端不适合合唱,但网络状态侦测模块228负责侦测客户端与合唱的其他客户端间的网络状态的方式不限于此。
接收器210可以在网络状态侦测模块228侦测网络状态正常时,例如,封包传递时间低于或等于预定值时,才接收其他客户端传来的非本地音频信号,传送器290也可以在网络状态侦测模块228侦测网络状态正常时,才传送本地音频信号至其他客户端。
参见图3.1,在本实施例中,各个客户端(200a、200b、200c)中执行有本发明所提的电脑程序产品或电脑可读取储存媒体所包含的程序码。
当客户端200a的使用者欲使用服务器100所提供的网络伴唱服务与客户端200b的使用者合唱时,客户端200a及客户端200b的使用者需要分别操作客户端200a及客户端200b连线到服务器100,客户端200a的使用者需要在服务器100所提供的使用者界面进行操作,比如在服务器100所提供的使用者界面中选择客户端200b的使用者,让客户端200a与客户端200b建立连线。
在客户端200a与客户端200b建立连线后,客户端200a及客户端200b的使用者可以在服务器100所提供的使用者界面上点播歌曲。
在客户端200a/客户端200b的使用者点歌后,客户端200a/客户端200b可以传送与被点播的歌曲对应的点歌数据至服务器100,服务器100在接收到客户端200a或客户端200b所传送的点歌数据后,可以记录传送点歌数据的客户端,并依据接收到的点歌数据,将与点歌数据对应得被点播的歌曲加入点歌清单中,使得被点播的歌曲被显示在使用者界面的点歌清单中。
在服务器100将被点播的歌曲加入点歌清单后,服务器100可以依据点歌清单中所记录的被点播歌曲的顺序,依序传送与被点播的歌曲对应的文件下载信息至客户端200a及客户端200b,从而通知客户端200a及客户端200b下载被点播的歌曲的编码文件。
客户端200a及客户端200b在接收到服务器100所传送的文件下载信息后,可以从服务器100下载被点播的歌曲的编码文件,即客户端200a及客户端200b的接收器210可以接收来自服务器100的编码文件(步骤310)。
在本实施例中,假设被下载的编码文件所代表的歌曲是由客户端200a的使用者点播,在客户端200a完成被点播的歌曲的编码文件的下载后,客户端200a的传送器290可以传送第一起始信号至客户端200b(步骤325),而在客户端200b的接收器210接收到客户端200a所传送的第一起始信号后,且客户端200b也完成被点播的歌曲的编码文件的下载时,客户端200b的传送器290可以传送第二起始信号至客户端200a(步骤325)。本实施例中,假设客户端200a的传送器290会通过服务器100传送第一起始信号至客户端200b,确保第一起始信号可以被传送到客户端200b,而客户端200b的传送器290会直接传送第二起始信号至客户端200a,从而缩短第二起始信号被传送到客户端200a的时间,但为了避免客户端200a没有收到第二起始信号,客户端200b的传送器290可以传送三次第二起始信号。
参见图3.2,在服务器100将被点播的歌曲加入点歌清单后,服务器100也可以根据被点播的歌曲在点歌清单中的顺序,依序传送与将被播放的被点播歌曲对应的播放控制信号至点播歌曲的客户端。即,若在点歌清单中,第一首歌曲是由客户端200a的使用者所点播,则服务器100会传送第一首歌曲的播放控制信号至点播第一首歌曲的客户端200a,而不会传送第一首歌曲的播放控制信号至客户端200b。
在客户端200a接收到服务器所传送的第一首歌曲的播放控制信号(步骤321)后,且客户端200a完成第一首歌曲的编码文件的下载时,客户端200a的传送器290可以传送第一起始信号至客户端200b(步骤325),如此,客户端200b的传送器290也会在客户端200b完成第一首歌曲的编码文件的下载时,传回第二起始信号至客户端200a(步骤325)。
参见图3.1,客户端200a的接收器210在接收到客户端200b所传送的第二起始信号或客户端200b的传送器290在传送第二起始信号至客户端200a(步骤325)后,客户端200a/客户端200b的解码器230便可以开始解码接收器210所接收的第一首被点播歌曲的编码文件,由编码文件中获得第一首被点播歌曲的乐谱数据及字幕原始数据(步骤330)。其中,客户端200a及客户端200b的解码器230开始解码编码文件的时间差非常的小,可以视为客户端200a及客户端200b的解码器230同时开始解码编码文件。
在客户端200a及客户端200b的解码器230解码编码文件(步骤330)后,客户端200a及客户端200b的音频提供模块270可以将解码器230所获得的乐谱数据转换为伴奏音乐信号,并提供转换后的伴奏音乐信号给音频提供模块270(步骤381),使得与音频提供模块270连接的喇叭等声音输出装置播放出第一首被点播歌曲的旋律。同时,在客户端200a及客户端200b的解码器230解码编码文件(步骤330)后,客户端200a及客户端200b的字幕提供模块280也可以根据解码器230所获得的与乐谱数据对应得字幕原始数据提供字幕信号(步骤383),使得与字幕提供模块280连接的电视等影像输出装置显示出与被播放出的旋律同步对应得字幕。
而在客户端200a及客户端200b的音频提供模块270提供伴奏音乐信号(步骤381)、及客户端200a及客户端200b的字幕提供模块280提供字幕信号(步骤383)的同时,与客户端200a及客户端200b的音频接收模块240连接的麦克风等声音输入装置可以接收客户端200a及客户端200b的使用者跟随与音频提供模块270连接的喇叭播放出的旋律及/或与字幕提供模块280连接的电视显示出的字幕所唱出的歌声,并将所接收到的歌声转换成音频信号,以提供客户端200a及客户端200b的音频接收模块240采集音频信号(本地音频信号)(步骤340)。
客户端200a及客户端200b的传送器290可以在客户端200a及客户端200b的音频接收模块240所采集的音频信号(本地音频信号)未经处理前,将音频接收模块240所采集的本地音频信号传送至客户端200b及客户端200a(步骤360),从而减少本地音频信号被传送至客户端200b及客户端200a的时间。
在客户端200a及客户端200b的传送器290将客户端200a及客户端200b的音频接收模块240所采集的音频信号(本地音频信号)传送至客户端200a及客户端200b(步骤360)后,客户端200a及客户端200b的合成器260可以将本地音频信号转换为本地合成音频信号,并提供给客户端200a及客户端200b的音频提供模块270(步骤385),使得与音频提供模块270连接的声音输出装置播放出合成器260所转换出的本地合成音频信号。其中,当合成器260将本地音频信号转换为本地合成音频信号的处理时间及声音输出装置播放出本地合成音频信号的处理时间的总和在一定值以下,例如,在10ms以下时,本地合成音频信号与伴奏音频信号无法感受到播放时间有差异,因而会被认为是同步被播放的。
而在客户端200a及客户端200b的接收器210接收到客户端200b及客户端200a所传送的音频信号(非本地音频信号)(步骤370)后,客户端200a及客户端200b的合成器260也可以将非本地音频信号转换为非本地合成音频信号,并提供给客户端200a及客户端200b的音频提供模块270(步骤387),使得与音频提供模块270连接的声音输出装置播放出合成器260所转换出的非本地合成音频信号。其中,与本地音频信号被播放的情况相似,当非本地音频信号被传送至客户端200a及客户端200b的传送时间在100毫秒以下,且合成器260将非本地音频信号转换为非本地合成音频信号的处理时间、及声音输出装置播放出非本地合成音频信号的处理时间的总和在10ms以下时,非本地合成音频信号与伴奏音频信号会被认为是同步被播放的。
在与客户端200a及客户端200b的音频提供模块270连接的声音输出装置同步播放出本地合成音频信号、非本地合成音频信号、及伴奏音乐信号,且在与客户端200a及客户端200b的字幕提供模块280连接的影像输出装置显示与伴奏的旋律同步对应得字幕后,客户端200a及客户端200b将可以在无法察觉的短暂时间内同步提供第一首被点播的歌曲的旋律与字幕、及客户端200a及客户端200b的使用者跟唱的歌声,使得客户端200a及客户端200b达成声文同步而能够让客户端200a及客户端200b进行合唱。
综上,本发明与先前技术之间的差异在于具有客户端接收到起始信号后,解码来自服务器的编码文件以获得乐谱数据与字幕原始数据、采集本地音频信号、及接收来自其他客户端的非本地音频信号,并在将乐谱数据、字幕原始数据、本地音频信号与非本地音频信号分别转换为伴奏音乐信号、字幕信号、本地合成音频信号与非本地合成音频信号后,提供同步播放伴奏音频信号、本地合成音频信号、非本地合成音频信号、及字幕信号的技术手段,通过此技术手段可以解决先前技术所存在具有网络伴唱服务的不同数位电视或机顶盒无法提供使用者合唱的问题,进而达成同步歌曲的旋律与字幕、及多个跟唱得人声,并提供合唱得技术功效。
在上述实施例中,客户端200a及客户端200b的合成器260也可以在客户端200a及客户端200b的音频转换模块250根据乐谱数据提供伴奏音乐信号(步骤381)、在客户端200a及客户端200b的音频接收模块240采集音频信号(本地音频信号)(步骤340)、及在客户端200a及客户端200b的接收器210接收到音频信号(非本地音频信号)(步骤370)后,将伴奏音乐信号、本地音频信号、及非本地音频信号合成为歌曲信号,并将合成后的歌曲信号提供给客户端200a及客户端200b的音频提供模块270连接的声音输出装置,在与客户端200a及客户端200b的音频提供模块270连接的声音输出装置播放歌曲信号的同时,与客户端200a及客户端200b的字幕提供模块280连接的影像输出装置也可以显示出同步对应的字幕,同样可以达成声文同步的功效。
在本实施例中,客户端200a及客户端200b还包含网络状态侦测模块228,则在客户端200a及客户端200b的传送器290将客户端200a及客户端200b的音频接收模块240所采集的音频信号(本地音频信号)传送至客户端200b及客户端200a(步骤360)前,网络状态侦测模块228可以先侦测客户端200a及客户端200b间的网络状态。客户端200a及客户端200b的网络状态侦测模块228可以如图3.3所示,通过客户端200a及客户端200b的传送器290传送封包至客户端200b及客户端200a,使得客户端200b及客户端200a传回封包,并在客户端200a及客户端200b的接收器210接收到客户端200b及客户端200a所传回的封包后,计算传送器290传送封包至接收器接收到封包所经过的时间(步骤352),此时间也是客户端200a及客户端200b间的封包传递时间,并在计算出封包传递时间后,判断计算出的封包传递时间是否低于预定值(步骤356),例如100毫秒,若网络状态侦测模块228计算出的封包传递时间低于预定值,则传送器290将可以传送音频接收模块240所采集的本地音频信号至客户端200b及客户端200a(步骤360),而若网络状态侦测模块228计算出的封包传递时间高于或等于预定值,则传送器290将不会传送音频接收模块240所采集的本地音频信号,而是直接让客户端200a及客户端200b的合成器260将本地音频信号转换为本地合成音频信号,从而提供与客户端200a及客户端200b的音频提供模块270连接的声音输出装置播放(步骤385)。类似的,若网络状态侦测模块228计算出的封包传递时间低于预定值,则接收器210才会接收来自客户端200b及客户端200a的音频信号(非本地音频信号)(步骤370),而若网络状态侦测模块228计算出的封包传递时间高于预定值,则接收器210将不会接收来自客户端200b及客户端200a的非本地音频信号。
Claims (10)
1.一种信号传送方法,适用于多个客户端间进行网络合唱,其特征在于:该方法包含以下步骤:
1)利用客户端的接收器接收来自服务器的编码文件;
2)利用客户端的传送器传送第一起始信号给客户端中的其他客户端,或利用接收器接收来自其他客户端的第二起始信号;
3)利用客户端的解码器解码编码文件以获得乐谱数据及字幕原始数据,及利用客户端的音频转换模块根据乐谱数据提供伴奏音频信号及字幕提供模块根据字幕原始数据提供字幕信号;
4)利用客户端的音频接收模块采集本地音频信号;
5)利用传送器传送本地音频信号至其他客户端;
6)利用客户端的合成器将本地音频信号转换为本地合成音频信号供客户端的音频提供模块播放;
7)利用接收器接收来自其他客户端的非本地音频信号,并利用合成器将非本地音频信号转换为非本地合成音频信号供音频提供模块播放。
2.根据权利要求1所述的一种信号传送方法,其特征在于:所述方法包含利用网络状态侦测模块计算客户端与其他客户端间的封包传递时间是否低于预定值,当封包传递时间低于预定值时,才利用接收器接收非本地音频信号。
3.根据权利要求1所述的一种信号传送方法,其特征在于:所述传送器传送第二起始信号至其他客户端是传送器通过服务器转送第二起始信号至其他客户端,或传送器直接传送一次或多次第二起始信号至其他客户端,利用接收器接收来自其他客户端的第一起始信号是接收器接收其他客户端直接传送一次或多次第一起始信号,或接收器接收第二客户端通过服务器转送的第一起始信号。
4.根据权利要求1所述的一种信号传送方法,其特征在于:所述信号传送方法在传送器传送第一起始信号给客户端中其他客户端前,包含接收器接收服务器所传送的播放控制信号。
5.根据权利要求1所述的一种信号传送方法,其特征在于:所述合成器将本地音频信号转换为本地合成音频信号是合成器持续在间隔时间内获取暂存在暂存器中的本地音频信号,并转换本地音频信号为本地合成音频信号。
6.一种电脑程序产品,其特征在于:该产品包含:程序码,当客户端电脑载入程序码后,可执行如权利要求1所述的信号传送方法。
7.一种电脑可读取储存媒体,其特征在于:该储存媒体包含:程序码,当客户端电脑载入并执行程序码后,可执行如权利要求1所述的信号传送方法。
8.一种信号传送系统,适用于多个客户端中的客户端,供客户端间进行网络合唱,其特征在于:该系统包含:接收器,用来接收来自服务器的编码文件、来自客户端中其他客户端的第一起始信号、来自其他客户端的非本地音频信号;解码器,耦合至接收器,用来解码编码文件以获得乐谱数据及字幕原始数据;音频接收模块,用来采集本地音频信号;传送器,耦合至音频接收模块,用来传送第二起始信号给其他客户端、传送本地音频信号至其他客户端;字幕提供模块,耦合至解码器,用来根据字幕原始数据提供字幕信号;音频转换模块,耦合至解码器,用来根据乐谱数据提供伴奏音频信号;合成器,耦合至音频接收模块及接收器,用来将本地音频信号转换为本地合成音频信号,及将非本地音频信号转换为非本地合成音频信号;音频提供模块,耦合至合成器,用来提供伴奏音频信号、本地音频信号、本地合成音频信号、非本地合成音频信号。
9.根据权利要求8所述的信号传送系统,其特征在于:所述系统包含网络状态侦测模块,用来计算客户端与其他客户端间的封包传递时间是否低于预定值,且接收器设置为封包传递时间低于预定值时,才接收非本地音频信号。
10.根据权利要求8所述的信号传送系统,其特征在于:所述合成器耦合至音频转换模块,并用来合成本地音频信号、非本地音频信号、伴奏音频信号为歌曲信号,音频提供模块用来提供输出歌曲信号。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011102544514A CN102394860A (zh) | 2011-08-31 | 2011-08-31 | 信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2011102544514A CN102394860A (zh) | 2011-08-31 | 2011-08-31 | 信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102394860A true CN102394860A (zh) | 2012-03-28 |
Family
ID=45862069
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2011102544514A Pending CN102394860A (zh) | 2011-08-31 | 2011-08-31 | 信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102394860A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108564936A (zh) * | 2018-03-30 | 2018-09-21 | 联想(北京)有限公司 | 音频设备、音频处理方法及音频处理系统 |
CN109327731A (zh) * | 2018-11-20 | 2019-02-12 | 福建海媚数码科技有限公司 | 一种基于卡拉ok的diy视频实时合成方法及系统 |
CN111028818A (zh) * | 2019-11-14 | 2020-04-17 | 北京达佳互联信息技术有限公司 | 合唱方法、装置、电子设备和存储介质 |
CN112073826A (zh) * | 2019-06-10 | 2020-12-11 | 聚好看科技股份有限公司 | 合录音视频作品状态显示方法、服务器及终端设备 |
CN115942066A (zh) * | 2022-12-06 | 2023-04-07 | 腾讯音乐娱乐科技(深圳)有限公司 | 一种音频直播方法、电子设备及计算机可读存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101764994A (zh) * | 2010-01-11 | 2010-06-30 | 中国联合网络通信集团有限公司 | 基于因特网协议电视网络的远程卡拉ok实现方法及系统 |
CN102158745A (zh) * | 2011-02-18 | 2011-08-17 | 深圳创维数字技术股份有限公司 | 卡拉ok业务的实现方法、终端、服务器端及系统 |
-
2011
- 2011-08-31 CN CN2011102544514A patent/CN102394860A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101764994A (zh) * | 2010-01-11 | 2010-06-30 | 中国联合网络通信集团有限公司 | 基于因特网协议电视网络的远程卡拉ok实现方法及系统 |
CN102158745A (zh) * | 2011-02-18 | 2011-08-17 | 深圳创维数字技术股份有限公司 | 卡拉ok业务的实现方法、终端、服务器端及系统 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108564936A (zh) * | 2018-03-30 | 2018-09-21 | 联想(北京)有限公司 | 音频设备、音频处理方法及音频处理系统 |
CN109327731A (zh) * | 2018-11-20 | 2019-02-12 | 福建海媚数码科技有限公司 | 一种基于卡拉ok的diy视频实时合成方法及系统 |
CN109327731B (zh) * | 2018-11-20 | 2021-05-11 | 福建海媚数码科技有限公司 | 一种基于卡拉ok的diy视频实时合成方法及系统 |
CN112073826A (zh) * | 2019-06-10 | 2020-12-11 | 聚好看科技股份有限公司 | 合录音视频作品状态显示方法、服务器及终端设备 |
CN111028818A (zh) * | 2019-11-14 | 2020-04-17 | 北京达佳互联信息技术有限公司 | 合唱方法、装置、电子设备和存储介质 |
CN111028818B (zh) * | 2019-11-14 | 2022-11-22 | 北京达佳互联信息技术有限公司 | 合唱方法、装置、电子设备和存储介质 |
CN115942066A (zh) * | 2022-12-06 | 2023-04-07 | 腾讯音乐娱乐科技(深圳)有限公司 | 一种音频直播方法、电子设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2000054249A1 (fr) | Dispositif de reproduction de donnees, procede de reproduction de donnees et terminal d'informations | |
CN110390925B (zh) | 人声与伴奏同步方法、终端、蓝牙设备及存储介质 | |
CN102394860A (zh) | 信号传送系统、方法、电脑程序产品及电脑可读取储存媒体 | |
US8633369B2 (en) | Method and system for remote concert using the communication network | |
JP2006215460A (ja) | カラオケ音声送受信システムおよびその方法 | |
KR102050785B1 (ko) | 노래 가사 출력 방법, 노래 반주기 및 노래 반주 시스템 | |
JP2003255935A (ja) | 再生切替装置及びプログラム | |
JP5544961B2 (ja) | サーバ | |
KR20210108715A (ko) | 네트워크에 기반한 합동 공연을 제공하는 장치 및 그 방법 | |
US6525253B1 (en) | Transmission of musical tone information | |
JP5109496B2 (ja) | データ配信装置、データ配信方法およびプログラム | |
JP6051075B2 (ja) | 通信障害時にデュエット歌唱を継続可能な通信カラオケシステム | |
KR100928152B1 (ko) | 진동기능을 갖는 노래방 마이크를 이용한 노래반주시스템및 그 시스템의 진동기능 제공 방법 | |
US20210125594A1 (en) | Wireless midi headset | |
JPH11284588A (ja) | 通信装置、通信方法及びプログラムを記録した媒体 | |
JP7226920B2 (ja) | 曲提供システム及び携帯端末 | |
JP2016081039A (ja) | 音響システム | |
JP2009205039A (ja) | オーディオデータ変換再生システム、オーディオデータ変換装置、オーディオデータ再生装置 | |
JP2008097096A (ja) | サーバ装置及び通信セッション確立方法 | |
JP5614554B2 (ja) | 音楽再生システム、音楽再生装置、及び音楽再生用プログラム | |
CN211670947U (zh) | 一种卡拉ok投屏设备 | |
WO2022264537A1 (ja) | 触覚信号生成装置、触覚信号生成方法、プログラム | |
JP2003085068A (ja) | ライブ情報提供サーバ、情報通信端末、ライブ情報提供システムおよびライブ情報提供方法 | |
JP2004093975A (ja) | 通信端末及びプログラム | |
CN102411928A (zh) | 一种声音信号的筛选系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120328 |