CN108449632A - 一种演唱视频实时合成的方法及终端 - Google Patents

一种演唱视频实时合成的方法及终端 Download PDF

Info

Publication number
CN108449632A
CN108449632A CN201810438583.4A CN201810438583A CN108449632A CN 108449632 A CN108449632 A CN 108449632A CN 201810438583 A CN201810438583 A CN 201810438583A CN 108449632 A CN108449632 A CN 108449632A
Authority
CN
China
Prior art keywords
video
display
highlighted
video flowing
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810438583.4A
Other languages
English (en)
Other versions
CN108449632B (zh
Inventor
刘新生
林鎏娟
林智雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Star Net eVideo Information Systems Co Ltd
Original Assignee
Fujian Star Net eVideo Information Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Star Net eVideo Information Systems Co Ltd filed Critical Fujian Star Net eVideo Information Systems Co Ltd
Priority to CN201810438583.4A priority Critical patent/CN108449632B/zh
Publication of CN108449632A publication Critical patent/CN108449632A/zh
Application granted granted Critical
Publication of CN108449632B publication Critical patent/CN108449632B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

本发明提供一种演唱视频实时合成的方法及终端，制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，不仅能够实现视频的实时合成，而且能够以预设视频流为参考，对合成的视频流进行突出显示，所述需要突出显示的视频流包括预设视频流和实时视频流，对于用户演唱歌曲的应用场景而言，通过对视频流的突出显示，使得用户与预设视频流中的人物有真实互动的感觉，提高了用户体验。

Description

一种演唱视频实时合成的方法及终端
技术领域
本发明涉及视频合成领域，尤其涉及一种演唱视频实时合成的方法及终端。
背景技术
当前视频合成技术已经广泛应用于自媒体录播节目的播放以及多路交通监控的天眼中，但是这些应用中，对于自媒体录播节目的播放，视频无法实现实时地合成，而对于多路交通监控的天眼，仅仅是将几个实时视频流分别显示在同一个屏幕，无法根据播放时间对不同的实时视频流进行突出显示，灵活度低，用户体验差。
发明内容
本发明所要解决的技术问题是：提供一种演唱视频实时合成的方法及终端，能够对合成的不同的实时视频流进行突出显示，提高用户体验。
为了解决上述技术问题，本发明采用的一种技术方案为：
一种演唱视频实时合成的方法，包括步骤：
S1、获取预设视频流及多个实时视频流，所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
为了解决上述技术问题，本发明采用的另一种技术方案为：
一种演唱视频实时合成的终端，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
S1、获取预设视频流及多个实时视频流，所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
本发明的有益效果在于：制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，不仅能够实现视频的实时合成，而且能够以预设视频流为参考，对合成的视频流进行突出显示，所述需要突出显示的视频流包括预设视频流和实时视频流，对于用户演唱歌曲的应用场景而言，通过对视频流的突出显示，使得用户与预设视频流中的人物有真实互动的感觉，提高了用户体验。
附图说明
图1为本发明实施例的一种演唱视频实时合成的方法的流程图；
图2为本发明实施例的一种演唱视频实时合成的终端的结构示意图；
标号说明：
1、一种演唱视频实时合成的终端；2、存储器；3、处理器。
具体实施方式
为详细说明本发明的技术内容、所实现目的及效果，以下结合实施方式并配合附图予以说明。
本发明最关键的构思在于：制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流。
请参照图1，一种演唱视频实时合成的方法，包括步骤：
S1、获取预设视频流及多个实时视频流，所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
由上述描述可知，本发明的有益效果在于：制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，不仅能够实现视频的实时合成，而且能够以预设视频流为参考，对合成的视频流进行突出显示，所述需要突出显示的视频流包括预设视频流和实时视频流，对于用户演唱歌曲的应用场景而言，通过对视频流的突出显示，使得用户与预设视频流中的人物有真实互动的感觉，提高了用户体验。
进一步的，所述步骤S3包括：
预设视频流开始播放时，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合；
根据所述计时，在到达所述配置文件中的演唱时间段时，调整需要突出显示的视频流的显示层级和显示位置，并进行突出显示。
进一步的，所述步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
将需要突出显示的视频流的显示层级提高，并将其显示位置变大。
由上述描述可知，通过调整视频流的显示层级和显示位置实现对相应视频流的突出显示，将需要突出显示的视频的位置变大，显示层级提高，实现对视频流的动态改变，增加了互动的真实感觉。
进一步的，步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示。
由上述描述可知，在需要突出显示的视频流包括预设视频流时，其显示区域与实时视频流的显示区域等大，如果不包括，则其显示区域小于实时视频流的显示区域，并且设置需要突出显示的实时视频流的显示层级高于不需要突出显示的实时视频流的显示层级，层级高的覆盖层级低的视频流，使得用户在演唱过程中与预设视频中的人物有很好的互动效果，进一步提高用户体验。
进一步的，所述配置文件还包括对应所述演唱时间段播放的预设的文字、图片或音频。
由上述描述可知，可预先获知预设的文字、图片或音频的保存路径，然后通过在配置文件中设置在具体演唱时间段播放对应的文字、图片或音频，在合成后的视频流上进行同步播放，能够起到活跃气氛的效果，给予用户更高的视听感受，极大提高用户体验。
进一步的，还包括步骤：
接收移动终端发送的文字、图片或视频；
在显示所述预设视频流和实时视频流的屏幕上实时显示所述移动终端发送的文字、图片或视频，并设置所述移动终端发送的文字、图片或视频的显示层级为最高。
由上述描述可知，通过在合成的视频流上实时显示移动终端发送的文字、图片或视频，并设置所述文字、图片或视频的显示层级最高，用户可以根据需要发送自己想要发送的文字、图片或视频，进一步起到活跃气氛的效果，给予用户更高的视听感受。
进一步的，还包括步骤：
S4、同步录制显示的实时合成后的视频流图像和输入的音频，将所述视频流图像和音频合成视频，并生成与所述视频对应的二维码或将所述视频上传至云端。
由上述描述可知，在显示实时合成后的视频流的同时对所述视频流图像及对应的输入的音频进行录制，并合成视频，生成与所述视频对应的二维码，所述二维码可供用户分享使用，用于用户展示自我，其他用户扫描一下所述二维码即可看到对应的视频，能够对用户的演唱进行保存并分享，进一步提高了用户体验，另外，通过将所述视频上传至云端，用户通过个人账号可从云端获取合成的视频，再进行进一步分享。
请参照图2，一种演唱视频实时合成的终端，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
S1、获取预设视频流及多个实时视频流，所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
由上述描述可知，本发明的有益效果在于：制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，不仅能够实现视频的实时合成，而且能够以预设视频流为参考，对合成的视频流进行突出显示，所述需要突出显示的视频流包括预设视频流和实时视频流，对于用户演唱歌曲的应用场景而言，通过对视频流的突出显示，使得用户与预设视频流中的人物有真实互动的感觉，提高了用户体验。
进一步的，所述步骤S3包括：
预设视频流开始播放时，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合；
根据所述计时，在到达所述配置文件中的演唱时间段时，调整需要突出显示的视频流的显示层级和显示位置，并进行突出显示。
进一步的，所述步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
将需要突出显示的视频流的显示层级提高，并将其显示位置变大。
由上述描述可知，通过调整视频流的显示层级和显示位置实现对相应视频流的突出显示，将需要突出显示的视频的位置变大，显示层级提高，实现对视频流的动态改变，增加了互动的真实感觉。
进一步的，步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示。
由上述描述可知，在需要突出显示的视频流包括预设视频流时，其显示区域与实时视频流的显示区域等大，如果不包括，则其显示区域小于实时视频流的显示区域，并且设置需要突出显示的实时视频流的显示层级高于不需要突出显示的实时视频流的显示层级，层级高的覆盖层级低的视频流，使得用户在演唱过程中与预设视频中的人物有很好的互动效果，进一步提高用户体验。
进一步的，所述配置文件还包括对应所述演唱时间段播放的预设的文字、图片或音频。
由上述描述可知，可预先获知预设的文字、图片或音频的保存路径，然后通过在配置文件中设置在具体演唱时间段播放对应的文字、图片或音频，在合成后的视频流上进行同步播放，能够起到活跃气氛的效果，给予用户更高的视听感受，极大提高用户体验。
进一步的，所述处理器执行所述计算机程序时还实现以下步骤：
接收移动终端发送的文字、图片或视频；
在显示所述预设视频流和实时视频流的屏幕上实时显示所述移动终端发送的文字、图片或视频，并设置所述移动终端发送的文字、图片或视频的显示层级为最高。
由上述描述可知，通过在合成的视频流上实时显示移动终端发送的文字、图片或视频，并设置所述文字、图片或视频的显示层级最高，用户可以根据需要发送自己想要发送的文字、图片或视频，进一步起到活跃气氛的效果，给予用户更高的视听感受。
进一步的，所述处理器执行所述计算机程序时还实现以下步骤：
S4、同步录制显示的实时合成后的视频流图像和输入的音频，将所述视频流图像和音频合成视频，并生成与所述视频对应的二维码或将所述视频上传至云端。
由上述描述可知，在显示实时合成后的视频流的同时对所述视频流图像及对应的输入的音频进行录制，并合成视频，生成与所述视频对应的二维码，所述二维码可供用户分享使用，用于用户展示自我，其他用户扫描一下所述二维码即可看到对应的视频，能够对用户的演唱进行保存并分享，进一步提高了用户体验，另外，通过将所述视频上传至云端，用户通过个人账号可从云端获取合成的视频，再进行进一步分享。
实施例一
请参照图1，一种演唱视频实时合成的方法，包括步骤：
S1、获取预设视频流及多个实时视频流，所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
具体的包括如下步骤：
预设视频流开始播放时，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合；
根据所述计时，在到达所述配置文件中的演唱时间段时，调整需要突出显示的视频流的显示层级和显示位置，并进行突出显示；
其中，所述调整需要突出显示的视频流的显示层级和显示位置包括：
将需要突出显示的视频流的显示层级提高，并将其显示位置变大；
具体的，判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
S4、同步录制显示的实时合成后的视频流图像和输入的音频，将所述视频流图像和音频合成视频，并生成与所述视频对应的二维码。
实施例二
本实施例与实施例一的不同在于：所述配置文件还包括对应所述演唱时间段播放的预设的文字、图片或音频，通过在合成后的视频流中同步显示配置文件中的文字、图片或音频，能够活跃气氛；
还包括步骤：
接收移动终端发送的文字、图片或视频以及所述移动终端发送的文字、图片或视频的显示位置；
根据所述显示位置，在显示所述预设视频流和实时视频流的屏幕上实时显示所述移动终端发送的文字、图片或视频，并设置所述移动终端发送的文字、图片或视频的显示层级为最高。
实施例三
请参照图2，一种演唱视频实时合成的终端1，包括存储器2、处理器3以及存储在所述存储器2上并可在所述处理器3上运行的计算机程序，所述处理器2执行所述计算机程序时实现实施例一的步骤。
实施例四
请参照图2，一种演唱视频实时合成的终端1，包括存储器2、处理器3以及存储在所述存储器2上并可在所述处理器3上运行的计算机程序，所述处理器2执行所述计算机程序时实现实施例二的步骤。
实施例五
将上述演唱视频实时合成的方法应用于具体的场景：
数据中心推送预设的视频文件以及含有视频ID(预设视频唯一识别码)的信息文件至http服务器；机顶盒解析所述含有视频ID的第二配置文件，点歌屏界面显示可供用户选择的预设的视频列表界面；
用户选择相应的预设的视频文件后，机顶盒获取对应的预设视频流；所述预设视频流可以是含有歌星人像的歌曲MV视频。
机顶盒获取多个实时视频流，所述多个实时视频流是通过各路的实时摄像头实时获取，每个实时摄像头实时获取的视频具有对应的实时视频流地址，所述实时视频地址保存于配置地址列表中。
制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；在预设的演唱时间段中，对应的用户参与演唱，获取各用户参与演唱的实时视频流；
用户点击确认合成，则机顶盒就会根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，在合成过程中，根据配置文件，突出显示用户参与合唱的实时视频流，所述实时合成工作由机顶盒的视频合成控制单元实现；
具体的包括如下步骤：
预设视频流开始播放时，生成一个计时器，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合，例如，所述第一显示区域与第二显示区域可以是将显示屏分成的左右两个显示区域，还可以是将显示屏分成的上下两个显示区域，优选的，视频合成控制单元将机顶盒电视显示区域分为左右两个部分，左边部分供预设视频流显示，右边部分显示多个实时视频流，多个实时视频流具有层级关系，层级高的会覆盖层级低的；
所述计时器不断检测所述配置文件，所述配置文件的组成格式如中括号所示：【演唱时间段：流1|流2|流3|……】，其中，流1|流2|流3……为在所述演唱时间段内需要突出显示的视频流，若是实时视频流，则流1、流2代表的是对应实时摄像头实时获取的实时视频流，即是通过实时摄像头来确定需要突出显示的视频流，根据所述计时，在到达所述配置文件中的演唱时间段时，所述视频合成控制单元调整需要突出显示的视频流的显示层级和显示位置，将需要突出显示的视频流的显示层级提高，并将其显示位置变大，并进行突出显示；
具体的，判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，其中，在第二显示区域显示实时视频流时，如果需要显示的实时视频流为两路以上，则所述需要显示的实时视频流在所述第二显示区域平分显示，若为一路，则该路实时视频流在整个第二显示区域显示；若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，优选地，可以设置需要突出显示的实时视频流的显示层级为1，不需要突出显示的实时视频流的显示层级为0，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，优选的，为3:5，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，优选的，可以设置需要突出显示的实时视频流的显示层级为1，不需要突出显示的实时视频流的显示层级为0，所述需要突出显示的实时视频流在所述第二显示区域显示，其中，在第二显示区域突出显示实时视频流时，如果需要突出显示的实时视频流为两路以上，则所述需要突出显示的实时视频流在所述第二显示区域平分显示，若为一路，则该路实时视频流在整个第二显示区域显示；
所述配置文件还可以设置对应所述演唱时间段播放的预设的含有活跃气氛的文字、图片或音频等消息，计时器不断检测所述配置文件，当在对应的演唱时间段具有对应的文字、图片或音频时，不断发送显示的事件给视频合成控制单元，使其在实时合成后的视频流上对所述文字、图片或视频进行同步播放，所述文字、图片或音频可预先存储于http服务器中，机顶盒预先获取文字、图片或音频的保存路径，然后在配置文件中设置对应演唱时间段进行播放；
所述视频合成控制单元除了实时合成预设视频流和多路实时视频流外，还可以接收用户通过手机端发送的文字、图片或视频，将预设视频流、多路实时视频流以及用户通过手机端发送的文字、图片或视频进行实时合成；
其中，用户可以通过手机扫码与机顶盒进行绑定，绑定后用户可以通过手机实时传输要播放的文字、图片或视频给机顶盒，机顶盒可以将所述通过手机传输的文字、图片或视频实时地合成到其显示的视频中，接收到用户通过手机发送的文字、图片或视频后，视频合成控制单元设置所述手机发送的文字、图片或视频的显示层级为最高，并且其显示位置可以根据用户需要进行设置，不分左右部分，用户可以在手机上设置其在全屏中的位置，然后发送至机顶盒；
在机顶盒显示实时合成后的视频流时，机顶盒通过录制模块同步录制显示的实时合成后的视频流图像和用户输入的声音，将所述视频流图像和音频合成一个完整的视频，音视频合成后，生成与所述视频对应的分享二维码，用户通过该分享二维码分享其演唱的视频文件，或者将所述视频上传至云端，用户通过个人账号可从云端获取合成视频，再进行进一步分享，所述云端可以是http服务器。
综上所述，本发明提供的一种演唱视频实时合成的方法及终端，制作配置文件，根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，不仅能够实现视频的实时合成，而且能够以预设视频流的时间点为参考，对合成的视频流进行突出显示，所述需要突出显示的视频流包括预设视频流和实时视频流，对于用户演唱歌曲的应用场景而言，能够根据配置文件动态改变屏幕中左右两边的大小以及右边的实时视频流的层级及大小位置，使得用户与预设视频流中的人物有真实互动的感觉，提高了用户体验，并且通过合成用户发送的文字、图片或视频以及配置文件中的预设的含有活跃气氛的文字、图片或音频等消息可以极大提高用户使用的氛围，给予用户极高的视听享受，此外，在进行实时合成的视频流的显示的同时对视频流图像和用户输入的声音进行录制，并合成完整的视频，并生成对应的分享二维码或将所述视频上传至云端，实现对实时合成的视频流的保存及分享。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等同变换，或直接或间接运用在相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (13)

1.一种演唱视频实时合成的方法，其特征在于，包括步骤：
S1、获取预设视频流及多个实时视频流；所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
2.根据权利要求1所述的一种演唱视频实时合成的方法，其特征在于，所述步骤S3包括：
预设视频流开始播放时，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合；
根据所述计时，在到达所述配置文件中的演唱时间段时，调整需要突出显示的视频流的显示层级和显示位置，并进行突出显示。
3.根据权利要求2所述的一种演唱视频实时合成的方法，其特征在于，所述步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
将需要突出显示的视频流的显示层级提高，并将其显示位置变大。
4.根据权利要求3所述的一种演唱视频实时合成的方法，其特征在于，步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示。
5.根据权利要求1所述的一种演唱视频实时合成的方法，其特征在于，所述配置文件还包括对应所述演唱时间段播放的预设的文字、图片或音频。
6.根据权利要求2所述的一种演唱视频实时合成的方法，其特征在于，还包括步骤：
接收移动终端发送的文字、图片或视频；
在显示所述预设视频流和实时视频流的屏幕上实时显示所述移动终端发送的文字、图片或视频，并设置所述移动终端发送的文字、图片或视频的显示层级为最高。
7.根据权利要求1至6任意一项所述的一种演唱视频实时合成的方法，其特征在于，还包括步骤：
S4、同步录制显示的实时合成后的视频流图像和输入的音频，将所述视频流图像和音频合成视频，并生成与所述视频对应的二维码或将所述视频上传至云端。
8.一种演唱视频实时合成的终端，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：
S1、获取预设视频流及多个实时视频流；所述预设视频流为歌曲视频流，所述实时视频流为用户演唱视频流；
S2、制作配置文件，所述配置文件包括演唱时间段以及对应所述演唱时间段需要突出显示的视频流，所述需要突出显示的视频流为用户在演唱时间段参与合唱的视频流；
S3、根据所述配置文件，实时合成所述预设视频流和所述多个实时视频流。
9.根据权利要求8所述的一种演唱视频实时合成的终端，其特征在于，所述步骤S3包括：
预设视频流开始播放时，开始计时，并在第一显示区域显示所述预设视频流，同时在第二显示区域同步显示所述多个实时视频流，所述第一显示区域与第二显示区域在同一屏幕上，并且不重合；
根据所述计时，在到达所述配置文件中的演唱时间段时，调整需要突出显示的视频流的显示层级和显示位置，并进行突出显示。
10.根据权利要求9所述的一种演唱视频实时合成的终端，其特征在于，步骤S3中调整需要突出显示的视频流的显示层级和显示位置包括：
判断所述需要突出显示的视频流是否包括有所述预设视频流，若是，则设置第一显示区域的大小等于第二显示区域的大小；再判断所述需要突出显示的视频流是否还包括有实时视频流，若否，则所有实时视频流在所述第二显示区域显示，若是，则设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示；
若否，则设置第一显示区域与第二显示区域的大小之比为m:n，m小于n，并设置需要突出显示的实时视频流的显示层级为高显示层级，不需要突出显示的实时视频流的显示层级为低显示层级，所述需要突出显示的实时视频流在所述第二显示区域显示。
11.根据权利要求8所述的一种演唱视频实时合成的终端，其特征在于，所述配置文件还包括对应所述演唱时间段播放的预设的文字、图片或音频。
12.根据权利要求9所述的一种演唱视频实时合成的终端，其特征在于，所述处理器执行所述计算机程序时还实现以下步骤：
接收移动终端发送的文字、图片或视频；
在显示所述预设视频流和实时视频流的屏幕上实时显示所述移动终端发送的文字、图片或视频，并设置所述移动终端发送的文字、图片或视频的显示层级为最高。
13.根据权利要求8至12任意一项所述的一种演唱视频实时合成的终端，其特征在于，所述处理器执行所述计算机程序时还实现以下步骤：
S4、同步录制显示的实时合成后的视频流图像和输入的音频，将所述视频流图像和音频合成视频，并生成与所述视频对应的二维码或将所述视频上传至云端。
CN201810438583.4A 2018-05-09 2018-05-09 一种演唱视频实时合成的方法及终端 Active CN108449632B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810438583.4A CN108449632B (zh) 2018-05-09 2018-05-09 一种演唱视频实时合成的方法及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810438583.4A CN108449632B (zh) 2018-05-09 2018-05-09 一种演唱视频实时合成的方法及终端

Publications (2)

Publication Number Publication Date
CN108449632A true CN108449632A (zh) 2018-08-24
CN108449632B CN108449632B (zh) 2021-04-02

Family

ID=63202644

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810438583.4A Active CN108449632B (zh) 2018-05-09 2018-05-09 一种演唱视频实时合成的方法及终端

Country Status (1)

Country Link
CN (1) CN108449632B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109327731A (zh) * 2018-11-20 2019-02-12 福建海媚数码科技有限公司 一种基于卡拉ok的diy视频实时合成方法及系统
CN109361885A (zh) * 2018-09-19 2019-02-19 北京文香信息技术有限公司 一种将多流视频保存为单视频文件的方法
CN109461430A (zh) * 2018-11-20 2019-03-12 福建海媚数码科技有限公司 一种基于卡拉ok对唱的智能角色伴唱方法及系统
CN110164242A (zh) * 2019-06-04 2019-08-23 平顶山学院 一种声乐演唱模拟训练平台
CN114866687A (zh) * 2022-03-28 2022-08-05 北京达佳互联信息技术有限公司 同框视频拍摄方法、装置、电子设备及介质
CN115484466A (zh) * 2021-05-31 2022-12-16 海信集团控股股份有限公司 在线演唱视频的显示方法和服务器

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202034042U (zh) * 2010-12-10 2011-11-09 深圳市同洲电子股份有限公司 一种应用于即时点播系统的多媒体信息处理系统
CN105094957A (zh) * 2015-06-10 2015-11-25 小米科技有限责任公司 视频会话窗口控制方法及装置
CN105306468A (zh) * 2015-10-30 2016-02-03 广州华多网络科技有限公司 一种合成视频数据实时共享的方法及其主播客户端
CN106162221A (zh) * 2015-03-23 2016-11-23 阿里巴巴集团控股有限公司 直播视频的合成方法、装置及系统
CN106792155A (zh) * 2016-12-06 2017-05-31 天脉聚源(北京)传媒科技有限公司 一种多视频流的视频直播的方法及装置
CN106921866A (zh) * 2017-05-03 2017-07-04 广州华多网络科技有限公司 辅助直播的多视频导播方法和设备
US20170280098A1 (en) * 2014-09-26 2017-09-28 Intel Corporation Techniques for enhancing user experience in video conferencing

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202034042U (zh) * 2010-12-10 2011-11-09 深圳市同洲电子股份有限公司 一种应用于即时点播系统的多媒体信息处理系统
US20170280098A1 (en) * 2014-09-26 2017-09-28 Intel Corporation Techniques for enhancing user experience in video conferencing
CN106162221A (zh) * 2015-03-23 2016-11-23 阿里巴巴集团控股有限公司 直播视频的合成方法、装置及系统
CN105094957A (zh) * 2015-06-10 2015-11-25 小米科技有限责任公司 视频会话窗口控制方法及装置
CN105306468A (zh) * 2015-10-30 2016-02-03 广州华多网络科技有限公司 一种合成视频数据实时共享的方法及其主播客户端
CN106792155A (zh) * 2016-12-06 2017-05-31 天脉聚源(北京)传媒科技有限公司 一种多视频流的视频直播的方法及装置
CN106921866A (zh) * 2017-05-03 2017-07-04 广州华多网络科技有限公司 辅助直播的多视频导播方法和设备

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109361885A (zh) * 2018-09-19 2019-02-19 北京文香信息技术有限公司 一种将多流视频保存为单视频文件的方法
CN109327731A (zh) * 2018-11-20 2019-02-12 福建海媚数码科技有限公司 一种基于卡拉ok的diy视频实时合成方法及系统
CN109461430A (zh) * 2018-11-20 2019-03-12 福建海媚数码科技有限公司 一种基于卡拉ok对唱的智能角色伴唱方法及系统
CN109327731B (zh) * 2018-11-20 2021-05-11 福建海媚数码科技有限公司 一种基于卡拉ok的diy视频实时合成方法及系统
CN110164242A (zh) * 2019-06-04 2019-08-23 平顶山学院 一种声乐演唱模拟训练平台
CN115484466A (zh) * 2021-05-31 2022-12-16 海信集团控股股份有限公司 在线演唱视频的显示方法和服务器
CN114866687A (zh) * 2022-03-28 2022-08-05 北京达佳互联信息技术有限公司 同框视频拍摄方法、装置、电子设备及介质

Also Published As

Publication number Publication date
CN108449632B (zh) 2021-04-02

Similar Documents

Publication Publication Date Title
CN108449632A (zh) 一种演唱视频实时合成的方法及终端
CN109327741B (zh) 游戏直播方法、装置和系统
CN102905170B (zh) 视频的弹幕方法及系统
JP4655190B2 (ja) 情報処理装置および方法、記録媒体、並びにプログラム
US8760573B2 (en) System and methods for the simultaneous display of multiple video signals in high definition format
KR101326739B1 (ko) 정보처리 시스템 및 정보처리 장치
US20110214141A1 (en) Content playing device
US20080291218A1 (en) System And Method For Generating Interactive Video Images
US20070122786A1 (en) Video karaoke system
US20200186887A1 (en) Real-time broadcast editing system and method
KR20170015938A (ko) 콘텐트를 전달 및/또는 콘텐트를 재생하기 위한 방법들 및 장치
GB2447736A (en) Content delivery system having trick play modes
JP2005051703A (ja) ライブストリーミング放送方法、ライブストリーミング放送装置、ライブストリーミング放送システム、プログラム、記録媒体、放送方法及び放送装置
KR20080048308A (ko) 기본 장치와 확장 장치의 연동 장치 및 방법
JP6024002B2 (ja) 動画配信システム
JP3789854B2 (ja) ライブ配信サーバ、及びライブ配信方法
JP2006041886A (ja) 情報処理装置および方法、記録媒体、並びにプログラム
KR102163695B1 (ko) 인터넷을 통한 실시간 참여형 스트리밍 서비스 제공 방법 및 그 장치
JP2006041888A (ja) 情報処理装置および方法、記録媒体、並びにプログラム
KR20130050464A (ko) 증강 콘텐츠 생성 장치 및 방법, 증강 방송 송신 장치 및 방법, 및 증강 방송 수신 장치 및 방법
JP7438486B2 (ja) 情報処理装置、情報処理方法及びプログラム
KR102542070B1 (ko) Iptv 망 기반 가상현실 콘텐츠 제공 시스템 및 방법
KR100828297B1 (ko) 화면인식을 이용한 방송 컨텐츠와 통신 컨텐츠간 동기화시스템 및 그 방법
KR101587442B1 (ko) 타겟팅 증강 콘텐츠 제공 시스템, 증강 콘텐츠 제공 방법 및 장치, 증강 콘텐츠 등록 방법 및 장치
WO2020044875A1 (ja) コンテンツ配信サーバ、コンテンツ配信システム、コンテンツ配信方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant