CN108600815A - 一种在线实时合唱的方法及系统 - Google Patents

一种在线实时合唱的方法及系统 Download PDF

Info

Publication number
CN108600815A
CN108600815A CN201810437629.0A CN201810437629A CN108600815A CN 108600815 A CN108600815 A CN 108600815A CN 201810437629 A CN201810437629 A CN 201810437629A CN 108600815 A CN108600815 A CN 108600815A
Authority
CN
China
Prior art keywords
terminals
song
terminal
video
real time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810437629.0A
Other languages
English (en)
Other versions
CN108600815B (zh
Inventor
林智雄
曹春雷
林鎏娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Star Net eVideo Information Systems Co Ltd
Original Assignee
Fujian Star Net eVideo Information Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Star Net eVideo Information Systems Co Ltd filed Critical Fujian Star Net eVideo Information Systems Co Ltd
Priority to CN201810437629.0A priority Critical patent/CN108600815B/zh
Publication of CN108600815A publication Critical patent/CN108600815A/zh
Application granted granted Critical
Publication of CN108600815B publication Critical patent/CN108600815B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home

Abstract

本发明提供一种在线实时合唱的方法及系统,在线实时合唱对应的多个终端之间建立连接;所述多个终端选择合唱的歌曲,并同步播放所述合唱的歌曲;所述多个终端根据所述同步播放的合唱的歌曲实时同步演唱,各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示,实现多人在线同时视频合唱,在演唱过程中,用户可以基于音频、视频进行实时互动,提高了异地合唱的趣味性,增强了用户体验。

Description

一种在线实时合唱的方法及系统
技术领域
本发明涉及音视频领域,尤其涉及一种在线实时合唱的方法及系统。
背景技术
多人在线合唱一般指两个以上的歌唱者在同一个平台上,按照各自负责的歌曲部分演唱同一首歌,以达到合作演唱的效果。目前的多人在线合唱的实现方式一般是异步的,以两个用户A、B为例:用户A根据系统指定的演唱部分a,提前演唱歌曲,并将演唱过程通过音视频录制后上传云端,用户B在演唱时根据系统指定的演唱部分b演唱,在演唱过程中播放之前在云端的用户A演唱的内容,通过这种异步的方式达到用户A和用户B合唱的目的。
但是,以上异步的在线合唱方式无法满足用户在合唱过程中实时互动的需求,趣味性较低。
发明内容
本发明所要解决的技术问题是:提供一种在线实时合唱的方法及系统,实现多用户在线实时合唱,用户在合唱过程中能够实时互动。
为了解决上述技术问题,本发明采用的一种技术方案为:
一种在线实时合唱的方法,包括步骤:
S1、在线实时合唱对应的多个终端之间建立连接;
S2、所述多个终端选择合唱的歌曲,并同步播放所述合唱的歌曲;
S3、所述多个终端根据所述同步播放的合唱的歌曲实时同步演唱,各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
为了解决上述技术问题,本发明采用的另一种技术方案为:
一种在线实时合唱的系统,包括多个终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
S1、与在线实时合唱对应的其它终端建立连接;
S2、选择合唱的歌曲,并与在线实时合唱对应的其它终端同步播放所述合唱的歌曲;
S3、根据所述同步播放的合唱的歌曲与在线实时合唱对应的其它终端实时同步演唱,采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
本发明的有益效果在于:在线实时合唱对应的多个终端建立连接,并同步播放要合唱的歌曲,根据所述同步播放的合唱的歌曲实时同步演唱,演唱的音视频实时同步至其它终端,实现多人在线同时视频合唱,在演唱过程中,用户可以基于音频、视频进行实时互动,提高了异地合唱的趣味性,增强了用户体验。
附图说明
图1为本发明实施例的一种在线实时合唱的方法的流程图;
图2为本发明实施例的一种在线实时合唱的系统的结构示意图;
标号说明:
1、一种在线实时合唱的系统;2、终端;3、存储器;4、处理器。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果,以下结合实施方式并配合附图予以说明。
本发明最关键的构思在于:在线实时合唱对应的多个终端建立连接,并同步播放要合唱的歌曲,根据所述同步播放的合唱的歌曲实时同步演唱,演唱的音视频实时同步至其它终端。
请参照图1,一种在线实时合唱的方法,包括步骤:
S1、在线实时合唱对应的多个终端之间建立连接;
S2、所述多个终端选择合唱的歌曲,并同步播放所述合唱的歌曲;
S3、所述多个终端根据所述同步播放的合唱的歌曲实时同步演唱,各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
由上述描述可知,本发明的有益效果在于:在线实时合唱对应的多个终端建立连接,并同步播放要合唱的歌曲,根据所述同步播放的合唱的歌曲实时同步演唱,演唱的音视频实时同步至其它终端,实现多人在线同时视频合唱,在演唱过程中,用户可以基于音频、视频进行实时互动,提高了异地合唱的趣味性,增强了用户体验。
进一步的,所述步骤S1包括:
S11、所述在线实时合唱对应的多个终端分别将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、所述在线实时合唱对应的多个终端接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、所述在线实时合唱对应的多个终端根据所述匹配结果以及其它终端的设备信息与其它终端建立连接。
由上述描述可知,基于云端服务器实现在线实时合唱对应的多个终端之间的匹配并建立连接,方便快捷,效率高。
进一步的,所述步骤S2包括:
S21、所述多个终端中的任意一个选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端;
S22、所述多个终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、所述多个终端根据音视频同步信息同步所述合唱的歌曲的播放进度。
由上述描述可知,通过歌曲的唯一标识,其它终端能够快速获知合唱的歌曲,并基于音视频同步信息实现合唱歌曲的播放进度的快速同步。
进一步的,所述步骤S23包括:
第一播放终端计算其与其它各终端的通信延时,所述第一播放终端为最先播放合唱歌曲视频的终端;
第一播放终端播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
第一播放终端将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端;
其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频。
由上述描述可知,后播放合唱歌曲的其它各终端通过其与最先播放合唱歌曲的终端的通信延时时间以及当前播放歌曲视频流的时间戳生成第一播放时间戳,基于第一播放时间戳播放合唱歌曲视频,能够实现多个终端之间快速准确地同步。
进一步,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
由上述描述可知,通过上述操作,可不断同步各终端对合唱歌曲的播放进度,这样即使某个终端出现卡顿后,还可以快速实现与其它终端的同步。
进一步的,所述步骤S3中所述各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
所述各终端分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端并播放显示。
由上述描述可知,通过对采集的演唱的声音和画面分别进行编码、封装,并进行独立传输,保证了音频、视频各自的传输速率,特别是确保合唱中比较重要的音频数据的及时传输、解码和播放。
请参照图2,一种在线实时合唱的系统,包括多个终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
S1、与在线实时合唱对应的其它终端建立连接;
S2、选择合唱的歌曲,并与在线实时合唱对应的其它终端同步播放所述合唱的歌曲;
S3、根据所述同步播放的合唱的歌曲与在线实时合唱对应的其它终端实时同步演唱,采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
由上述描述可知,本发明的有益效果在于:在线实时合唱对应的多个终端建立连接,并同步播放要合唱的歌曲,根据所述同步播放的合唱的歌曲实时同步演唱,演唱的音视频实时同步至其它终端,实现多人在线同时视频合唱,在演唱过程中,用户可以基于音频、视频进行实时互动,提高了异地合唱的趣味性,增强了用户体验。
进一步的,所述步骤S1包括:
S11、将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、根据所述匹配结果以及其它终端的设备信息与其它终端建立连接。
由上述描述可知,基于云端服务器实现在线实时合唱对应的多个终端之间的匹配并建立连接,方便快捷,效率高。
进一步的,所述步骤S2包括:
S21、选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端,使得其它终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S22、根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、根据音视频同步信息与其它终端同步所述合唱的歌曲的播放进度。
由上述描述可知,通过歌曲的唯一标识,其它终端能够快速获知合唱的歌曲,并基于音视频同步信息实现合唱歌曲的播放进度的快速同步。
进一步的,所述步骤S23包括:
最先播放合唱歌曲视频的终端的处理器执行所述计算机程序时实现以下步骤:
播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端,以使得其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频。
由上述描述可知,后播放合唱歌曲的其它各终端通过其与最先播放合唱歌曲的终端的通信延时时间以及当前播放歌曲视频流的时间戳生成第一播放时间戳,基于第一播放时间戳播放合唱歌曲视频,能够实现多个终端之间快速准确地同步。
进一步,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
由上述描述可知,通过上述操作,可不断同步各终端对合唱歌曲的播放进度,这样即使某个终端出现卡顿后,还可以快速实现与其他终端的同步。
进一步的,所述步骤S3中所述采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端并播放显示。
由上述描述可知,通过对采集的演唱的声音和画面分别进行编码、封装,并进行独立传输,保证了音频、视频各自的传输速率,特别是确保合唱中比较重要的音频数据的及时传输、解码和播放。
实施例一
请参照图1,一种在线实时合唱的方法,包括步骤:
S1、在线实时合唱对应的多个终端之间建立连接;
具体的,包括如下步骤:
S11、所述在线实时合唱对应的多个终端分别将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、所述在线实时合唱对应的多个终端接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、所述在线实时合唱对应的多个终端根据所述匹配结果以及其它终端的设备信息与其它终端建立连接;
在一些应用场景中,终端可直接连接网络,其中一个终端获得其它终端的设备信息,例如设备IP等信息,即可与其它终端建立连接,在其他一些应用场景中,若终端设置在局域网中,无法直接联网,则终端还可以通过局域网的网关连接到云端,由云端将各终端建立连接;
S2、所述多个终端选择合唱的歌曲,并同步播放所述合唱的歌曲;
具体的,包括如下步骤:
S21、所述多个终端中的任意一个选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端;
S22、所述多个终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、所述多个终端根据音视频同步信息同步所述合唱的歌曲的播放进度;
其中,所述步骤S23包括:
第一播放终端计算其与其它各终端的通信延时,所述第一播放终端为最先播放合唱歌曲视频的终端;
第一播放终端播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
第一播放终端将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端;
其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频;
进一步,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
S3、所述多个终端根据所述同步播放的合唱的歌曲实时同步演唱,各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
实施例二
本实施例与实施例一的不同在于:步骤S3中所述各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
所述各终端分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端并进行播放显示。
实施例三
请参照图2,一种在线实时合唱的系统1,包括多个终端2,所述终端包括存储器3、处理器4以及存储在所述存储器3上并可在所述处理器4上运行的计算机程序,所述处理器4执行所述计算机程序时实现以下步骤:
S1、与在线实时合唱对应的其它终端建立连接;
具体的,包括如下步骤:
S11、将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、根据所述匹配结果以及其它终端的设备信息与其它终端建立连接;
S2、选择合唱的歌曲,并与在线实时合唱对应的其它终端同步播放所述合唱的歌曲;
具体的,包括如下步骤:
S21、选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端,使得其它终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放,其中,可以是由所述多个终端中的任意一个来选择合唱的歌曲;
S22、根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、根据音视频同步信息与其它终端同步所述合唱的歌曲的播放进度;
所述步骤S23包括:
最先播放合唱歌曲视频的终端的处理器执行所述计算机程序时实现以下步骤:
计算其与其它各终端的通信延时;
播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端,以使得其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频;
进一步,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
S3、根据所述同步播放的合唱的歌曲与在线实时合唱对应的其它终端实时同步演唱,采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
实施例四
本实施例与实施例三的不同在于:所述步骤S3中采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端并播放显示。
实施例五
将上述在线实时合唱的方法应用于实际的场景中,可应用于多个数字视听场所之间的不同包厢进行合唱,还可以是同个数字视听场所的不同包厢之间的合唱,所述终端可以为数字视听终端,具体可以为加载有点歌软件的机顶盒,本实施例的应用场景是两个终端设备A和B进行在线实时合唱,包括如下步骤:
1、终端建立连接
终端设备A、B将各自的设备信息,比如通信IP、端口等上传至云端服务器;
云端服务器通过一定的匹配机制,完成终端设备A和B的匹配,并通知对应设备匹配结果及对方的设备信息,具体的,将匹配结果为可以匹配以及终端设备A的设备信息发送至终端设备B,将匹配结果为可以匹配以及终端设备B的设备信息发送至终端设备A,其中,所述匹配机制可以由云服务器根据实际的业务需求进行配置,比如基于设备对应的用户信息,异性优先匹配,同城优先匹配;
终端设备A和终端设备B基于获取到的匹配结果和对方的设备信息完成通信连接,其中,终端设备A和终端设备B建立连接的机制可以根据实际应用交互的不同有所差异,包含但不限于以上的机制;
如果是对于三个或者三个以上的终端设备进行在线实时合唱,采用的也是上述的连接建立流程;
2、选择歌曲,同步播放,同步演唱
终端设备A、B之间建立连接后,终端设备A和终端设备B任意一方主动选择将要合唱的歌曲,并通知对方歌曲信息,可以将所选择的合唱的歌曲的唯一标识发送至与之建立连接的对方终端设备;
终端设备A和终端设备B基于歌曲唯一标识向各自的视频服务器获取视频流并开始播放,其中,如果终端设备A和终端设备B播放的视频流存在在同一个视频服务器的同一个歌曲文件中,则终端设备A、B直接播放同一个网络视频流即可;
第一播放终端(假设为终端设备A)计算其与终端设备B的通信延时,所述第一播放终端为最早开始播放歌曲视频的终端;
终端设备A播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
终端设备将当前播放歌曲视频流的时间戳及与终端设备B的通信延时信息发送给终端设备B;
终端设备B根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频;
进一步,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度,具体的,例如,可设置同步频率为1分钟一次,则每隔1分钟,重复一次上述第一播放终端与其他终端的播放视频同步操作,通过该操作,可不断同步各终端对合唱歌曲的播放进度,这样即使某个终端出现卡顿后,还可以快速实现与其他终端的同步。
基于同步播放的歌曲视频,用户可以通过终端设备A和B实现异地实时同步演唱;
3、音视频传输,实时合唱
演唱过程中,进行演唱的对应的终端设备通过录音模块采集用户的演唱声音,对所述演唱声音进行编码、封装成音频信号,并传输给云端流媒体服务器,由流媒体服务器通知对方设备点播、编码对应的音频信号,即在业务效果上,用户听到了对方的演唱声音;
同理,对于用户的演唱画面,终端设备通过摄像头采集、编码、封装并传输至云端流媒体服务器,由流媒体服务器通知对方设备点播、编码对应的视频信号,即在业务效果上,用户看到了对方的演唱画面;
上述音频信号和视频信号是分别独立地实时同步至其它终端,并在其他终端上播放显示;
在演唱过程中,用户通过声音、视频能够进行实时互动。
综上所述,本发明提供的一种在线实时合唱的方法及系统,在线实时合唱对应的多个终端建立连接,并同步播放要合唱的歌曲,根据所述同步播放的合唱的歌曲实时同步演唱,演唱的音视频实时同步至其它终端,实现多人在线同时视频合唱,通过异地音视频同步及时,保证了合唱的多方设备的音视频播放同步,在演唱过程中,用户可以基于音频、视频进行实时互动,提高了异地合唱的趣味性,增强了用户体验,并且演唱过程中的音频信号和视频信号独立传输,保证了音频、视频各自的传输速率,特别是确保合唱中比较重要的音频数据的及时传输、解码和播放。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等同变换,或直接或间接运用在相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (12)

1.一种在线实时合唱的方法,其特征在于,包括步骤:
S1、在线实时合唱对应的多个终端之间建立连接;
S2、所述多个终端选择合唱的歌曲,并同步播放所述合唱的歌曲;
S3、所述多个终端根据所述同步播放的合唱的歌曲实时同步演唱,各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
2.根据权利要求1所述的一种在线实时合唱的方法,其特征在于,所述步骤S1包括:
S11、所述在线实时合唱对应的多个终端分别将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、所述在线实时合唱对应的多个终端接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、所述在线实时合唱对应的多个终端根据所述匹配结果以及其它终端的设备信息与其它终端建立连接。
3.根据权利要求1所述的一种在线实时合唱的方法,其特征在于,所述步骤S2包括:
S21、所述多个终端中的任意一个选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端;
S22、所述多个终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、所述多个终端根据音视频同步信息同步所述合唱的歌曲的播放进度。
4.根据权利要求3所述的一种在线实时合唱的方法,其特征在于,所述步骤S23包括:
第一播放终端计算其与其它各终端的通信延时,所述第一播放终端为最先播放合唱歌曲视频的终端;
第一播放终端播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
第一播放终端将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端;
其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频。
5.根据权利要求4所述的一种在线实时合唱的方法,其特征在于,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
6.根据权利要求1所述的一种在线实时合唱的方法,其特征在于,所述步骤S3中所述各终端采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
所述各终端分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端并播放显示。
7.一种在线实时合唱的系统,包括多个终端,所述终端包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现以下步骤:
S1、与在线实时合唱对应的其它终端建立连接;
S2、选择合唱的歌曲,并与在线实时合唱对应的其它终端同步播放所述合唱的歌曲;
S3、根据所述同步播放的合唱的歌曲与在线实时合唱对应的其它终端实时同步演唱,采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示。
8.根据权利要求7所述的一种在线实时合唱的系统,其特征在于,所述步骤S1包括:
S11、将各自的设备信息上传至云端服务器,使得云端服务器根据所述设备信息匹配所述在线实时合唱对应的多个终端;
S12、接收云端服务器发送的匹配结果以及除自身之外的其它终端的设备信息;
S13、根据所述匹配结果以及其它终端的设备信息与其它终端建立连接。
9.根据权利要求7所述的一种在线实时合唱的系统,其特征在于,所述步骤S2包括:
S21、选择合唱的歌曲,并将所述歌曲的唯一标识发送至其它终端,使得其它终端根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S22、根据所述唯一标识获取所述合唱歌曲对应的视频流并播放;
S23、根据音视频同步信息与其它终端同步所述合唱的歌曲的播放进度。
10.根据权利要求9所述的一种在线实时合唱的系统,其特征在于,所述步骤S23包括:
最先播放合唱歌曲视频的终端的处理器执行所述计算机程序时实现以下步骤:
计算其与其它各终端的通信延时;
播放所述合唱歌曲视频,并获取当前播放歌曲视频流的时间戳;
将当前播放歌曲视频流的时间戳及与其它各终端的通信延时信息发送给对应的其它各终端,以使得其它各终端根据通信延时信息和当前播放歌曲视频流的时间戳生成第一播放时间戳,并从第一播放时间戳开始播放合唱歌曲视频。
11.根据权利要求10所述的一种在线实时合唱的系统,其特征在于,预设各终端对所述合唱歌曲的同步频率,根据同步频率重复步骤S23,使各终端不断同步所述合唱歌曲的播放进度。
12.根据权利要求7所述的一种在线实时合唱的系统,其特征在于,所述步骤S3中所述采集对应演唱的音频和视频,将所述音频和视频实时同步至其它终端并播放显示包括:
分别采集对应演唱的声音和画面,对所述声音和画面分别进行编码、封装,形成音频信号和视频信号,将所述音频信号和视频信号分别独立地实时同步至其它终端。
CN201810437629.0A 2018-05-09 2018-05-09 一种在线实时合唱的方法及系统 Active CN108600815B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810437629.0A CN108600815B (zh) 2018-05-09 2018-05-09 一种在线实时合唱的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810437629.0A CN108600815B (zh) 2018-05-09 2018-05-09 一种在线实时合唱的方法及系统

Publications (2)

Publication Number Publication Date
CN108600815A true CN108600815A (zh) 2018-09-28
CN108600815B CN108600815B (zh) 2020-12-29

Family

ID=63636666

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810437629.0A Active CN108600815B (zh) 2018-05-09 2018-05-09 一种在线实时合唱的方法及系统

Country Status (1)

Country Link
CN (1) CN108600815B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109361887A (zh) * 2018-10-30 2019-02-19 维沃移动通信有限公司 一种录像方法和终端
CN110418182A (zh) * 2019-07-19 2019-11-05 福建星网视易信息系统有限公司 联网合唱方法及计算机可读存储介质
CN110992920A (zh) * 2019-11-29 2020-04-10 北京达佳互联信息技术有限公司 直播合唱方法、装置、电子设备及存储介质
CN111402844A (zh) * 2020-03-26 2020-07-10 广州酷狗计算机科技有限公司 歌曲合唱的方法、装置及系统
CN111726670A (zh) * 2020-06-30 2020-09-29 广州繁星互娱信息科技有限公司 信息交互方法、装置、终端、服务器及存储介质
CN111741370A (zh) * 2020-08-12 2020-10-02 腾讯科技(深圳)有限公司 一种多媒体互动的方法、相关装置、设备及存储介质
CN112489611A (zh) * 2020-11-27 2021-03-12 腾讯音乐娱乐科技(深圳)有限公司 线上歌房实现方法及电子设备和计算机可读存储介质
CN112584180A (zh) * 2019-09-27 2021-03-30 广州艾美网络科技有限公司 基于点唱终端设备的直播方法、装置和点唱终端设备
CN112752142A (zh) * 2020-08-26 2021-05-04 腾讯科技(深圳)有限公司 配音数据处理方法、装置及电子设备
CN113747217A (zh) * 2020-05-29 2021-12-03 聚好看科技股份有限公司 显示设备及提升合唱速度的方法
CN114125480A (zh) * 2021-11-17 2022-03-01 广州方硅信息技术有限公司 直播合唱互动方法、系统、装置及计算机设备
CN114157888A (zh) * 2021-12-06 2022-03-08 成都音悦创想科技有限公司 一种ktv实现线上连麦互动的方法、系统及存储介质
CN114401432A (zh) * 2022-01-27 2022-04-26 广州艾美网络科技有限公司 Mv播放方法、播放终端、服务器设备及娱乐设备系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200741644A (en) * 2006-04-25 2007-11-01 Xiao-Ming Wang Remote sing-in-chorus system and method of a vocal accompaniment device
CN102158745A (zh) * 2011-02-18 2011-08-17 深圳创维数字技术股份有限公司 卡拉ok业务的实现方法、终端、服务器端及系统
CN103648010A (zh) * 2013-11-28 2014-03-19 陕西千山航空电子有限责任公司 一种飞行数据及多路音视频数据同步回放方法
CN106847246A (zh) * 2017-03-01 2017-06-13 华东交通大学 一种歌曲合唱方法、装置及系统
CN107396137A (zh) * 2017-07-14 2017-11-24 腾讯音乐娱乐(深圳)有限公司 在线互动的方法、装置及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200741644A (en) * 2006-04-25 2007-11-01 Xiao-Ming Wang Remote sing-in-chorus system and method of a vocal accompaniment device
CN102158745A (zh) * 2011-02-18 2011-08-17 深圳创维数字技术股份有限公司 卡拉ok业务的实现方法、终端、服务器端及系统
CN103648010A (zh) * 2013-11-28 2014-03-19 陕西千山航空电子有限责任公司 一种飞行数据及多路音视频数据同步回放方法
CN106847246A (zh) * 2017-03-01 2017-06-13 华东交通大学 一种歌曲合唱方法、装置及系统
CN107396137A (zh) * 2017-07-14 2017-11-24 腾讯音乐娱乐(深圳)有限公司 在线互动的方法、装置及系统

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109361887A (zh) * 2018-10-30 2019-02-19 维沃移动通信有限公司 一种录像方法和终端
CN109361887B (zh) * 2018-10-30 2021-03-30 维沃移动通信有限公司 一种录像方法和终端
CN110418182A (zh) * 2019-07-19 2019-11-05 福建星网视易信息系统有限公司 联网合唱方法及计算机可读存储介质
CN110418182B (zh) * 2019-07-19 2022-05-03 福建星网视易信息系统有限公司 联网合唱方法及计算机可读存储介质
CN112584180B (zh) * 2019-09-27 2023-06-06 广州艾美网络科技有限公司 基于点唱终端设备的直播方法、装置和点唱终端设备
CN112584180A (zh) * 2019-09-27 2021-03-30 广州艾美网络科技有限公司 基于点唱终端设备的直播方法、装置和点唱终端设备
CN110992920B (zh) * 2019-11-29 2022-04-29 北京达佳互联信息技术有限公司 直播合唱方法、装置、电子设备及存储介质
CN110992920A (zh) * 2019-11-29 2020-04-10 北京达佳互联信息技术有限公司 直播合唱方法、装置、电子设备及存储介质
CN111402844A (zh) * 2020-03-26 2020-07-10 广州酷狗计算机科技有限公司 歌曲合唱的方法、装置及系统
CN111402844B (zh) * 2020-03-26 2024-04-09 广州酷狗计算机科技有限公司 歌曲合唱的方法、装置及系统
CN113747217A (zh) * 2020-05-29 2021-12-03 聚好看科技股份有限公司 显示设备及提升合唱速度的方法
CN111726670A (zh) * 2020-06-30 2020-09-29 广州繁星互娱信息科技有限公司 信息交互方法、装置、终端、服务器及存储介质
CN111741370A (zh) * 2020-08-12 2020-10-02 腾讯科技(深圳)有限公司 一种多媒体互动的方法、相关装置、设备及存储介质
CN112752142A (zh) * 2020-08-26 2021-05-04 腾讯科技(深圳)有限公司 配音数据处理方法、装置及电子设备
CN112489611A (zh) * 2020-11-27 2021-03-12 腾讯音乐娱乐科技(深圳)有限公司 线上歌房实现方法及电子设备和计算机可读存储介质
CN114125480A (zh) * 2021-11-17 2022-03-01 广州方硅信息技术有限公司 直播合唱互动方法、系统、装置及计算机设备
CN114157888A (zh) * 2021-12-06 2022-03-08 成都音悦创想科技有限公司 一种ktv实现线上连麦互动的方法、系统及存储介质
CN114401432A (zh) * 2022-01-27 2022-04-26 广州艾美网络科技有限公司 Mv播放方法、播放终端、服务器设备及娱乐设备系统
CN114401432B (zh) * 2022-01-27 2024-01-26 广州艾美网络科技有限公司 Mv播放方法、播放终端、服务器设备及娱乐设备系统

Also Published As

Publication number Publication date
CN108600815B (zh) 2020-12-29

Similar Documents

Publication Publication Date Title
CN108600815A (zh) 一种在线实时合唱的方法及系统
CN108566558B (zh) 视频流处理方法、装置、计算机设备及存储介质
CN107027050B (zh) 辅助直播的音视频处理方法及装置
CN110798697B (zh) 视频显示方法、装置、系统以及电子设备
TW589892B (en) Instant video conferencing method, system and storage medium implemented in web game using A/V synchronization technology
CN111818004B (zh) 云游戏直播方法、系统及计算机可读存储介质
CN104883516B (zh) 一种制作实时演唱视频的方法及系统
CN106303289B (zh) 一种将真实对象与虚拟场景融合显示的方法、装置及系统
CN110692252A (zh) 具有用于广域广播的延迟管理的视听协作方法
US6580756B1 (en) Data transmission method, data transmission system, data receiving method, and data receiving apparatus
CN107027045A (zh) 视频流推送控制方法、装置及视频流导播端
CN108495152A (zh) 一种视频直播方法、装置、电子设备及介质
CN104882151A (zh) 在歌曲演唱中展示多媒体资源的方法、装置及系统
CN101193200A (zh) 用于关联基本装置和扩展装置的设备和方法
TW589891B (en) Real-time video conferencing method, system and storage medium in web game
WO2022257480A1 (zh) 直播数据的生成方法、装置、存储介质及电子设备
Patoli et al. Real time online motion capture for entertainment applications
WO2024001661A1 (zh) 视频合成方法、装置、设备和存储介质
KR102090070B1 (ko) 스트리밍 서버, 클라이언트 단말 및 이를 이용한 av 라이브 스트리밍 시스템
CN107635131B (zh) 一种虚拟现实的实现方法及系统
US20140205261A1 (en) Interactive audio/video system and method
US20210227005A1 (en) Multi-user instant messaging method, system, apparatus, and electronic device
CN107135407B (zh) 一种钢琴视频教学中的同步方法及系统
CN114697712B (zh) 一种媒体流的下载方法、装置、设备及存储介质
CN104717190A (zh) 一种无线的增强现实传输方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant