CN114374858A - 多播放端系统及其视频拼接方法和装置 - Google Patents

多播放端系统及其视频拼接方法和装置 Download PDF

Info

Publication number
CN114374858A
CN114374858A CN202210046303.1A CN202210046303A CN114374858A CN 114374858 A CN114374858 A CN 114374858A CN 202210046303 A CN202210046303 A CN 202210046303A CN 114374858 A CN114374858 A CN 114374858A
Authority
CN
China
Prior art keywords
playing
controller
video
video frame
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210046303.1A
Other languages
English (en)
Other versions
CN114374858B (zh
Inventor
舒龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN202210046303.1A priority Critical patent/CN114374858B/zh
Publication of CN114374858A publication Critical patent/CN114374858A/zh
Application granted granted Critical
Publication of CN114374858B publication Critical patent/CN114374858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23602Multiplexing isochronously with the video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种多播放端系统及其视频拼接方法和装置,多播放端系统包括控制器和至少两个播放端,所述控制器和所述至少两个播放端通过有线局域网相连,所述方法包括:所述控制器接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;所述控制器根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;所述控制器根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧,能够有效降低多屏播放时的同步误差。

Description

多播放端系统及其视频拼接方法和装置
技术领域
本公开一般涉及同步控制技术领域,具体涉及一种多播放端系统及其视频拼接方法和装置。
背景技术
目前针对大的拼接屏视频同步方案基本上以硬件拼接同步方式为主,但硬件实现成本远高于软件实现,且不灵活,安装部署复杂。另一种方向是软件拼来实现超高清视频的多屏同步,视频软同步能极大的降低硬件成本。但实现视频的软件同步,现在市场上的效果并不理想。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种多播放端系统及其视频拼接方法和装置,能够有效降低多屏播放时的同步误差。
第一方面,本申请实施例提供了一种基于多播放端系统的视频处理方法,多播放端系统包括控制器和至少两个播放端,所述控制器和所述至少两个播放端通过有线局域网相连,所述方法包括:
所述控制器接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;
所述控制器根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;
所述控制器根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧。
在一些实施例中,所述控制器根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间,包括:
所述控制器统计所述第一标识信息相同的每个所述第一播放时间对应的所述第一视频帧的数量,将所述第一视频帧的数量最多的所述第一播放时间,作为所述目标播放时间。
在一些实施例中,所述控制器接收每个所述播放端发送的播放状态信息,所述播放状态信息包括当前播放的第二视频帧对应的第二标识信息和第二播放时间;
所述控制器根据所述第二标识信息相同的多个所述第二播放时间,确定每个所述播放端的播放对齐策略;
所述控制器将所述播放对齐策略发送至每个所述播放端,以使所述播放端执行所述播放对齐策略使所述多个播放端的播放状态相同。
在一些实施例中,所述控制器根据所述第二标识信息相同的多个所述第二播放时间,确定每个所述播放端的播放对齐策略,包括:
所述控制器在第二标识信息相同的多个所述第二播放时间相同时,确定所述播放对齐策略为无操作;
所述控制器在第二标识信息相同的多个所述第二播放时间不相同时,根据所述第二播放时间的偏移情况确定所述播放对齐策略。
在一些实施例中,所述在第二标识信息相同的多个所述第二播放时间不相同时,根据所述第二播放时间的偏移情况确定所述播放对齐策略,包括:
所述控制器统计每个所述第二播放时间对应的所述第二视频帧的个数;
所述控制器将对应的所述第二视频帧的个数最多的所述第二播放时间,确定为标准播放时间;
所述控制器针对每个其他第二播放时间,根据所述标准播放时间,确定所述其他第二播放时间对应的偏移量;
根据所述偏移量,确定所述播放对齐策略。
在一些实施例中,所述播放对齐策略包括跳转策略和等待策略,所述方法还包括:
在所述播放对齐策略为所述跳转策略时,则所述播放器执行所述跳转策略时播放所述跳转策略中包含的目标播放帧;
在所述播放对齐策略为所述等待策略时,则所述播放器执行所述等待策略时停止播放所述等待策略中记载的等待时长。
第二方面,本申请实施例提供了一种基于多播放端系统的控制器,多播放端系统还包括至少两个播放端,控制器和所述至少两个播放端通过有线局域网相连,所述控制器包括:
第一接收模块,用于接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;
第一确定模块,用于根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;
第一发送模块,用于根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧。
第三方便,本申请实施例提供了一种多播放端系统,所述多播放端系统包括控制器和至少两个播放端,所述控制器和所述至少两个播放端通过有线局域网相连,所述控制器通过所述有线局域网接收每个所述播放端发送的第一视频信息以及向每个所述播放端发送播放指令,任一所述播放端通过所述有线局域网接收所述播放指令,并根据所述播放指令播放第一视频信息对应的第一视频帧。
第四方面,本申请实施例提供了一种电子设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,该处理器执行该程序时实现如本申请实施例描述的方法。
第五方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本申请实施例描述的方法。
本申请通过根据服务器下发的多个第一视频帧的第一播放时间确定第一视频帧的目标播放时间,能够有效使得第一播放帧在多播放端系统中的播放时间相同,减少基于同一高分辨率图像切分的多个视频帧之间播放的同步误差,提高用户的观看体验。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1为本申请实施例提供的多播放端系统的架构图;
图2为本申请实施例提出的一种基于多播放端系统的视频处理方法的流程图;
图3为本申请实施例提出的另一种基于多播放端系统的视频处理方法的流程图;
图4为本申请实施例提出的又一种基于多播放端系统的视频处理方法的流程图;
图5为本申请实施例提出的一种基于多播放端系统的控制器的方框示意图;
图6为本申请实施例提出的另一种基于多播放端系统的控制器的方框示意图;
图7示出了适于用来实现本申请实施例的电子设备或服务器的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
本申请提出的多播放端系统的结构示意图。图1为本申请实施例提供的多播放端系统的架构图。
如图1所示,该多播放端系统包括:控制器101和至少两个播放端102,控制器101和至少两个播放端102通过有线局域网103相连。
其中,有线局域网可由带组播功能的交换机或路由器提供,组播又称多目标广播、多播,是网络中使用的一种传输方式,它允许把所发消息传送给所有可能目的地中的一个经过选择的子集,即向明确指出的多种地址输送信息。
在本申请实施例中,控制器101通过有线局域网103接收每个播放端102发送的第一视频信息以及向每个播放端102发送播放指令,任一播放端102通过有线局域网103接收播放指令,并根据播放指令播放第一视频信息对应的第一视频帧。
应当理解的是,以交换机为例,和集线器每个端口共享同样带宽不同的是,交换机的数据带宽具有独享性。在这样的前提下,在同一个时间段内,交换机就可以将数据传输到多个节点之间,并且每个节点都可以当做独立网段而独自享有固定的部分带宽,这样就没有和其他设备进行竞争实用的必要,从而降低多个节点之间的同步误差。在本申请实施例中,可将同步误差降低到500us以内。
由此,本申请实施例提出的多播放端系统,通过有线局域网连接控制器和多个播放端,相对于硬件拼接的同步方式,有效降低了控制指令传输过程中的同步误差,提高多端播放的可视效果。
图2为本申请实施例提出的一种基于多播放端系统的视频处理方法的流程图。
如图2所示,本申请实施例提出的基于多播放端系统的视频处理方法,包括以下步骤:
步骤201,控制器接收每个播放端发送的第一视频信息,第一视频信息包括第一视频帧的第一标识信息和第一播放时间。
其中,第一视频信息是播放端通过待播放的视频数据解析到的视频信息,待播放视频可由远程服务器通过有线网络或无线网络发送至播放端,也可由控制器通过有线局域网进行下发,本申请对播放端获取待播放视频的方式不做具体限定。
可选的,本申请实施例中,第一视频信息可以是对原始视频信息进行超分处理后得到的高分辨率和/或高帧率的视频的分割图像。举例来说,将1080P的原始图像超分成4K、8K或16K等分辨率的高分辨率图像,以及将30fp插帧成60fps、120fps或者25fps插帧成50fps、100fpg等高帧率的视频图像。然后,将超分得到的高分辨率和/或高帧率的视频图像,按照组播网络中播放端的个数和布局结构,将经超分得到的视频图像切分成与每个播放端对应的第一视频。例如,可将4K视频切分成2×2的1080P视频图像,或4×4的720P视频图像,将8K视频切分成2×2的4k视频图像,或4×4的1080P视频图像,将16k切分成2×2的8k视频图像,或4×4的4P视频图像,或8×8的1080P视频图像。
进一步地,第一视频帧的第一标识信息用于标识该帧视频数据在整个视频段中的位置信息,例如视频段中的帧序号等,第一视频帧的第一播放时间用于标识服务器下发的该视频帧距离视频段中初始帧的播放时间,例如,距离视频段中第一帧的时间距离等。
步骤202,控制器根据第一标识信息相同的多个第一播放时间,确定第一视频帧对应的目标播放时间。
需要说明的是,在将超分得到的高分辨率和/或高帧率的视频图像进行切分时,可能依次分配播放时间,或因数据传输、处理卡顿等原因,使得多个切分得到的第一视频帧被分配了不同的播放时间,此时,为了确保组播的播放效果,需要对第一视频帧的播放时间进行统一,即,确定第一视频帧对应的目标播放时间。
应当理解的是,服务器下发的一个数据包中可能包含多个第一视频帧,例如连续5秒的视频段中包含的多个视频帧,因此,需要根据每个第一视频帧对应的第一标识信息分别确定每个第一视频帧的目标播放时间。
在一个或多个实施例中,控制器根据第一标识信息相同的多个第一播放时间,确定第一视频帧对应的目标播放时间,包括:控制器统计第一标识信息相同的每个第一播放时间对应的第一视频帧的数量,将第一视频帧的数量最多的第一播放时间,作为目标播放时间。
也就是说,将第一标识信息相同的多个第一视频帧按照第一播放时间进行统计,即,统计每个第一播放时间对应的第一视频帧的数量,然后将对应的视频帧数量最多的第一播放时间,确定为当前第一视频帧对应的目标播放时间。
步骤203,控制器根据目标播放时间,向每个播放端发送第一视频帧的播放指令,以使每个播放端按照目标播放时间播放第一视频帧。
具体而言,播放端接收服务器下发的待播放的视频数据,并对待播放的视频数据进行解析,得到待播放的每个第一视频帧对应的第一标识信息和第一播放时间,然后,播放端将第一视频帧对应的第一标识信息和第一播放时间发送至控制器,以使控制器统计第一标识信息相同的多个视频帧的第一播放时间对应的视频帧数量,并将视频帧数量最多的第一播放时间确定为该第一视频帧的目标播放时间,进而控制器根据目标播放时间向每个播放端发送第一视频帧的播放指令,以使每个播放端按照目标播放时间播放第一视频帧。
由此,本申请通过根据服务器下发的多个第一视频帧的第一播放时间确定第一视频帧的目标播放时间,能够有效使得第一播放帧在多播放端系统中的播放时间相同,减少基于同一高分辨率图像切分的多个视频帧之间播放的同步误差,提高用户的观看体验。
进一步地,如图3所示,本申请实施例提出的方法还包括:
步骤301,控制器接收每个播放端发送的播放状态信息,播放状态信息包括当前播放的第二视频帧对应的第二标识信息和第二播放时间。
需要说明的是,第二视频帧为播放端当前播放的视频帧,第二标识信息为播放端当前播放的第二视频帧的标识信息,例如当前视频帧相对视频段初始帧的位置,第二播放时间为播放端当前播放的第二视频帧的播放时间,例如,当前播放时间距视频段初始帧的时间距离。
步骤302,控制器根据第二标识信息相同的多个第二播放时间,确定每个播放端的播放对齐策略。
需要理解的是,由于控制指令的传输速度、网络情况以及播放端的播放异常状态等原因,会导致播放产生差异,即,基于相同的目标播放时间的播放指令进行播放的多个第一视频帧,在播放时,产生多个第二播放时间,因此,为了确保后续的播放能够保证用户的观看体验,需要对播放端进行播放对齐,例如将播放进度较慢的播放端进行提速播放或者将播放较快的播放端进行暂停播放等。
在一个或多个实施例中,控制器根据第二标识信息相同的多个第二播放时间,确定每个播放端的播放对齐策略,包括:控制器在第二标识信息相同的多个第二播放时间相同时,确定播放对齐策略为无操作;控制器在第二标识信息相同的多个第二播放时间不相同时,根据第二播放时间的偏移情况确定播放对齐策略。
也就是说,当第二标识信息相同的多个第二播放时间相同,则说明该第二视频帧是被同时播放的,播放该多个第二视频帧的多个播放端播放状态正常,无需进行对齐调整;当第二标识信息相同的多个第二播放时间不相同,则说明该第二视频帧不是被同时播放的,播放该多个第二视频帧的多个播放端存在异常播放端,需要对异常播放端进行对齐调整。
可选的,播放对齐策略包括跳转策略和等待策略,在播放对齐策略为跳转策略时,则播放器执行跳转策略时播放跳转策略中包含的目标播放帧,在播放对齐策略为等待策略时,则播放器执行等待策略时停止播放等待策略中记载的等待时长。
具体而言,当播放端当前的播放速度慢于其他播放端时,例如,该播放端播放的第二视频帧对应的第二标识信息小于其他播放端播放的第二视频帧对应的第二标识信息,即,该播放帧的播放量(播放帧数)小于其他播放端,此时,确定该播放端对应的对齐策略为跳转策略,跳转策略中包含在下一时刻播放的目标播放帧,其中,目标播放帧与其他播放端在下一时刻播放的播放帧的标识相同。
当播放端当前的播放速度快于其他播放端时,例如,该播放端播放的第二视频帧对应的第二标识信息大于其他播放端播放的第二视频帧对应的第二标识信息,即,该播放帧的播放量(播放帧数)大于其他播放端,此时,确定该播放端对应的对齐策略为等待策略,等待策略中包含等待播放下一帧的时间,即,暂停播放保持等待状态,当等待时间达到等待时长时,播放下一帧播放帧。
进一步地,在第二标识信息相同的多个第二播放时间不相同时,根据第二播放时间的便宜情况确定播放对齐策略,包括:控制器统计每个第二播放时间对应的第二播放帧的个数,控制器将对应的第二视频帧的个数最多的第二播放时间确定为标准播放时间,控制器针对其他每个第二播放时间,根据标准时间确定其他第二播放时间对应的偏移量;根据偏移量,确定播放对齐策略。
也就是说,对第二标识信息相同的第二播放时间需要进行统计,然后将获取每个第二播放时间对应的第二视频帧的数量,将对应的第二视频帧的数量最多的第二播放时间作为第二视频帧的标准播放时间,即,应当播放的时间,若任一播放端播放第二视频帧的时间早于标准播放时间,则确定该播放端播放速度快于大多数播放端,需要通过等待播放策略使其降低播放速度,即,等待偏移量对应的时长,以使该播放端的播放下一帧的播放时间降低到与其他播放端相同。若任一播放端播放第二视频帧的时间晚于标准播放时间,则确定该播放端播放速度慢于大多数播放端,需要通过跳转播放策略使其提高播放速度,即,跳过偏移量对应的播放时长对应的多个视频帧,以使该播放端的播放下一帧的播放时间提高到与其他播放端相同。
步骤303,控制器将播放对齐策略发送至每个播放端,以使播放端执行播放对齐策略使多个播放端的播放状态相同。
具体而言,控制器可通过接收播放端的播放状态信息对播放端进行监控,控制器接收各播放端当前播放的第二视频帧对应的第二标识信息和第二播放时间,然后针对相同的播放帧对其进行第二播放时间的统计,并根据第二播放时间的统计结果,确定该第二视频帧对应的标准播放时间,并将其他播放帧的播放时间基于标准播放时间进行加快播放或延后播放。
由此,本申请实施例提出的方法,能够在多播放端系统播放时进行播放速度的调节,使得多播放端整体能够处于相同的播放状态,有效提高多播放端的播放效果,提高用户观看体验。
在一个具体实施例中,如图4所示,基于多播放端系统的视频处理方法,包括以下步骤:
步骤401,服务器将待播放的视频数据进行视频处理,得到高分辨率和/或高帧率的视频数据。
步骤402,服务器将高分辨和/或高帧率的视频数据切分后,通过带组播功能的有线局域网发送至多播放端系统中的每个播放端。
步骤403,多播放端系统中的播放端通过有线局域网接收待播放的视频数据,并解析得到第一视频帧信息。
步骤404,每个播放端将第一视频帧信息发送至控制器。
步骤405,控制器接收每个播放端发送的第一视频信息,并根据第一视频信息中的第一标识信息和第一播放时间确定每个第一标识信息对应的第一视频帧的目标播放时间。
步骤406,控制器根据目标播放时间,向每个播放端发送第一视频帧的播放指令。
步骤407,播放端根据播放指令对第一视频帧进行渲染播放。
步骤408,播放端获取当前播放的第二视频帧对应的第二标识信息和第二播放时间,并发送至控制器。
步骤409,控制器接收播放端发送的第二视频帧对应的第二标识信息和第二播放时间。
步骤410,控制器根据第二标识信息和第二播放时间确定每个播放端的播放对齐策略。
步骤411,控制器将播放对其策略发送至每个播放端,以使播放端执行播放对齐策略使毒功而播放端的播放状态相同。
综上所述,本申请通过根据服务器下发的多个第一视频帧的第一播放时间确定第一视频帧的目标播放时间,能够有效使得第一播放帧在多播放端系统中的播放时间相同,减少基于同一高分辨率图像切分的多个视频帧之间播放的同步误差,提高用户的观看体验。
应当注意,尽管在附图中以特定顺序描述了本发明方法的操作,但是,这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。
图5为本申请实施例提出的一种基于多播放端系统的控制器的方框示意图。其中,多播放端系统还包括至少两个播放端,控制器和所述至少两个播放端通过有线局域网相连。
如图5所示,本申请实施例提出的基于多播放端系统的控制器10,包括:
第一接收模块11,用于接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;
第一确定模块12,用于根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;
第一发送模块13,用于根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧。
在一些实施例中,第一确定模块12,还用于:
统计所述第一标识信息相同的每个所述第一播放时间对应的所述第一视频帧的数量,将所述第一视频帧的数量最多的所述第一播放时间,作为所述目标播放时间。
在一些实施例中,如图6所示,本申请实施例提出的基于多播放端系统的控制器10,还包括:
第二接收模块21,用于接收每个所述播放端发送的播放状态信息,所述播放状态信息包括当前播放的第二视频帧对应的第二标识信息和第二播放时间;
第二确定模块22,用于根据所述第二标识信息相同的多个所述第二播放时间,确定每个所述播放端的播放对齐策略;
第二发送模块23,用于将所述播放对齐策略发送至每个所述播放端,以使所述播放端执行所述播放对齐策略使所述多个播放端的播放状态相同。
在一些实施例中,第二确定模块22,还用于:
在第二标识信息相同的多个所述第二播放时间相同时,确定所述播放对齐策略为无操作;
在第二标识信息相同的多个所述第二播放时间不相同时,根据所述第二播放时间的偏移情况确定所述播放对齐策略。
在一些实施例中,第二确定模块22,还用于:
统计每个所述第二播放时间对应的所述第二视频帧的个数;
将对应的所述第二视频帧的个数最多的所述第二播放时间,确定为标准播放时间;
针对每个其他第二播放时间,根据所述标准播放时间,确定所述其他第二播放时间对应的偏移量;
根据所述偏移量,确定所述播放对齐策略。
在一些实施例中,播放对齐策略包括跳转策略和等待策略,第二确定模块22,还用于:
在所述播放对齐策略为所述跳转策略时,则所述播放器执行所述跳转策略时播放所述跳转策略中包含的目标播放帧;
在所述播放对齐策略为所述等待策略时,则所述播放器执行所述等待策略时停止播放所述等待策略中记载的等待时长。
综上所述,本申请通过根据服务器下发的多个第一视频帧的第一播放时间确定第一视频帧的目标播放时间,能够有效使得第一播放帧在多播放端系统中的播放时间相同,减少基于同一高分辨率图像切分的多个视频帧之间播放的同步误差,提高用户的观看体验。
应当理解,装置10中记载的诸单元或模块与参考图2描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作和特征同样适用于装置10及其中包含的单元,在此不再赘述。装置10可以预先实现在电子设备的浏览器或其他安全应用中,也可以通过下载等方式而加载到电子设备的浏览器或其安全应用中。装置10中的相应单元可以与电子设备中的单元相互配合以实现本申请实施例的方案。
在上文详细描述中提及的若干模块或者单元,这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
下面参考图7,图7示出了适于用来实现本申请实施例的电子设备或服务器的计算机系统的结构示意图,
如图7所示,计算机系统包括中央处理单元(CPU)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM703中,还存储有系统的操作指令所需的各种程序和数据。CPU701、ROM702以及RAM703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
以下部件连接至I/O接口705;包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
特别地,根据本申请的实施例,上文参考流程图图2描述的过程可以被实现为计算机软件程序。例如,本申请的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元(CPU)701执行时,执行本申请的系统中限定的上述功能。
需要说明的是,本申请所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以为的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作指令。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,前述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以不同于附图中所标注的顺序发生。例如,两个连接表示的方框实际上可以基本并行地执行,他们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作指令的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,例如,可以描述为:一种处理器包括第一接收模块、第一确定模块和第一发送模块。其中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定,例如,第一接收模块,还可以被描述为“接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间”。
作为另一方面,本申请还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的电子设备中所包含的,也可以是单独存在,而未装配入该电子设备中的。上述计算机可读存储介质存储有一个或多个程序,当上述程序被一个或者一个以上的处理器用来执行描述于本申请的基于多播放端系统的视频处理方法。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离前述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其他技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种基于多播放端系统的视频处理方法,其特征在于,多播放端系统包括控制器和至少两个播放端,所述控制器和所述至少两个播放端通过有线局域网相连,所述方法包括:
所述控制器接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;
所述控制器根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;
所述控制器根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧。
2.根据权利要求1所述的方法,其特征在于,所述控制器根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间,包括:
所述控制器统计所述第一标识信息相同的每个所述第一播放时间对应的所述第一视频帧的数量,将所述第一视频帧的数量最多的所述第一播放时间,作为所述目标播放时间。
3.根据权利要求1所述的方法,其特征在于,还包括:
所述控制器接收每个所述播放端发送的播放状态信息,所述播放状态信息包括当前播放的第二视频帧对应的第二标识信息和第二播放时间;
所述控制器根据所述第二标识信息相同的多个所述第二播放时间,确定每个所述播放端的播放对齐策略;
所述控制器将所述播放对齐策略发送至每个所述播放端,以使所述播放端执行所述播放对齐策略使所述多个播放端的播放状态相同。
4.根据权利要求3所述的方法,其特征在于,所述控制器根据所述第二标识信息相同的多个所述第二播放时间,确定每个所述播放端的播放对齐策略,包括:
所述控制器在第二标识信息相同的多个所述第二播放时间相同时,确定所述播放对齐策略为无操作;
所述控制器在第二标识信息相同的多个所述第二播放时间不相同时,根据所述第二播放时间的偏移情况确定所述播放对齐策略。
5.根据权利要求4所述的方法,其特征在于,所述在第二标识信息相同的多个所述第二播放时间不相同时,根据所述第二播放时间的偏移情况确定所述播放对齐策略,包括:
所述控制器统计每个所述第二播放时间对应的所述第二视频帧的个数;
所述控制器将对应的所述第二视频帧的个数最多的所述第二播放时间,确定为标准播放时间;
所述控制器针对每个其他第二播放时间,根据所述标准播放时间,确定所述其他第二播放时间对应的偏移量;
根据所述偏移量,确定所述播放对齐策略。
6.根据权利要求4或5所述的方法,其特征在于,所述播放对齐策略包括跳转策略和等待策略,所述方法还包括:
在所述播放对齐策略为所述跳转策略时,则所述播放器执行所述跳转策略时播放所述跳转策略中包含的目标播放帧;
在所述播放对齐策略为所述等待策略时,则所述播放器执行所述等待策略时停止播放所述等待策略中记载的等待时长。
7.一种基于多播放端系统的控制器,其特征在于,多播放端系统还包括至少两个播放端,控制器和所述至少两个播放端通过有线局域网相连,所述控制器包括:
第一接收模块,用于接收每个所述播放端发送的第一视频帧信息,所述第一视频帧信息包括所述第一视频帧的第一标识信息和第一播放时间;
第一确定模块,用于根据所述第一标识信息相同的多个所述第一播放时间,确定所述第一视频帧对应的目标播放时间;
第一发送模块,用于根据所述目标播放时间,向每个所述播放端发送所述第一视频帧的播放指令,以使每个所述播放端按照所述目标播放时间播放所述第一视频帧。
8.一种多播放端系统,其特征在于,所述多播放端系统包括控制器和至少两个播放端,所述控制器和所述至少两个播放端通过有线局域网相连,所述控制器通过所述有线局域网接收每个所述播放端发送的第一视频信息以及向每个所述播放端发送播放指令,任一所述播放端通过所述有线局域网接收所述播放指令,并根据所述播放指令播放第一视频信息对应的第一视频帧。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时,实现如权利要求1-7中任一所述的基于多播放端系统的视频拼接处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的基于多播放端系统的视频拼接处理方法。
CN202210046303.1A 2022-01-14 2022-01-14 多播放端系统及其视频拼接方法和装置 Active CN114374858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210046303.1A CN114374858B (zh) 2022-01-14 2022-01-14 多播放端系统及其视频拼接方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210046303.1A CN114374858B (zh) 2022-01-14 2022-01-14 多播放端系统及其视频拼接方法和装置

Publications (2)

Publication Number Publication Date
CN114374858A true CN114374858A (zh) 2022-04-19
CN114374858B CN114374858B (zh) 2024-08-02

Family

ID=81143682

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210046303.1A Active CN114374858B (zh) 2022-01-14 2022-01-14 多播放端系统及其视频拼接方法和装置

Country Status (1)

Country Link
CN (1) CN114374858B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115022959A (zh) * 2022-08-04 2022-09-06 绵阳优森科技有限公司 无线通讯中统一控制和计时系统、方法及体测穿戴设备
CN115426515A (zh) * 2022-08-03 2022-12-02 西安诺瓦星云科技股份有限公司 多设备同步校准的方法、设备、系统和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018125590A1 (en) * 2016-12-30 2018-07-05 Tivo Solutions Inc. Advanced trick-play modes for streaming video
CN110300314A (zh) * 2019-08-02 2019-10-01 北京海辰亿华科技有限公司 一种视频播放方法、装置及系统
US20190347915A1 (en) * 2018-05-11 2019-11-14 Ching-Ming Lai Large-scale Video Monitoring and Recording System
CN111225263A (zh) * 2020-01-17 2020-06-02 广州虎牙科技有限公司 视频播放控制方法和装置、电子设备及存储介质
CN111277800A (zh) * 2020-03-02 2020-06-12 成都国科微电子有限公司 监控视频编码及播放方法、装置、电子设备及存储介质
CN112653903A (zh) * 2020-10-13 2021-04-13 江苏亚楠电子科技有限公司 一种lcd多屏异显方法及系统
CN113271487A (zh) * 2021-05-11 2021-08-17 深圳创维-Rgb电子有限公司 音视频同步播放方法、装置、系统、程序产品及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018125590A1 (en) * 2016-12-30 2018-07-05 Tivo Solutions Inc. Advanced trick-play modes for streaming video
US20190347915A1 (en) * 2018-05-11 2019-11-14 Ching-Ming Lai Large-scale Video Monitoring and Recording System
CN110300314A (zh) * 2019-08-02 2019-10-01 北京海辰亿华科技有限公司 一种视频播放方法、装置及系统
CN111225263A (zh) * 2020-01-17 2020-06-02 广州虎牙科技有限公司 视频播放控制方法和装置、电子设备及存储介质
CN111277800A (zh) * 2020-03-02 2020-06-12 成都国科微电子有限公司 监控视频编码及播放方法、装置、电子设备及存储介质
CN112653903A (zh) * 2020-10-13 2021-04-13 江苏亚楠电子科技有限公司 一种lcd多屏异显方法及系统
CN113271487A (zh) * 2021-05-11 2021-08-17 深圳创维-Rgb电子有限公司 音视频同步播放方法、装置、系统、程序产品及存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115426515A (zh) * 2022-08-03 2022-12-02 西安诺瓦星云科技股份有限公司 多设备同步校准的方法、设备、系统和存储介质
CN115426515B (zh) * 2022-08-03 2024-05-10 西安诺瓦星云科技股份有限公司 多设备同步校准的方法、设备、系统和存储介质
CN115022959A (zh) * 2022-08-04 2022-09-06 绵阳优森科技有限公司 无线通讯中统一控制和计时系统、方法及体测穿戴设备

Also Published As

Publication number Publication date
CN114374858B (zh) 2024-08-02

Similar Documents

Publication Publication Date Title
US11039203B2 (en) Channel changing method and apparatus thereof
EP1867163B1 (en) Fast channel change with conditional return to multicasting
US8001575B2 (en) Method of distributing video-on-demand over an internet protocol network infrastructure
CN114374858A (zh) 多播放端系统及其视频拼接方法和装置
CN101917391B (zh) 一种网络视频的播放方法及一种网络视频播放系统
JP4534997B2 (ja) 送受信システム、受信装置、受信方法
CN108696772B (zh) 一种实时视频的传输方法及装置
US20080120389A1 (en) Hybrid buffer management
US20060200576A1 (en) Switching a client from unicasting to multicasting by simultaneously providing unicast and multicast streams to the client
US9473549B2 (en) Method of playing internet video and related electronic device
CN110049361B (zh) 显示控制方法、装置、投屏设备及计算机可读介质
US8176195B2 (en) Media distribution with service continuity
CN104918137A (zh) 一种拼接屏系统播放视频的方法
CN110582012B (zh) 视频切换方法、视频处理方法、装置及存储介质
CN110324654A (zh) 主播端直播视频帧处理方法、装置、设备、系统及介质
CN107566855A (zh) 频道快速切换的方法、服务器和机顶盒
CN113905257A (zh) 视频码率切换方法、装置、电子设备及存储介质
CN115297274A (zh) 多屏视频显示方法、系统、播放端及存储介质
CN111866526B (zh) 一种直播业务处理方法和装置
CN114245153A (zh) 切片方法、装置、设备及可读存储介质
WO2024082561A1 (zh) 视频处理方法、装置、计算机、可读存储介质及程序产品
CN113923530B (zh) 一种互动信息展示方法、装置、电子设备及存储介质
CN110798713B (zh) 时移电视点播方法、终端、服务器及系统
CN115174965A (zh) 视频预览方法、装置、电子设备及计算机可读存储介质
US11172238B1 (en) Multiple view streaming

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant