CN117061717B - 投影拼接视频有效控制方法、系统及其应用 - Google Patents
投影拼接视频有效控制方法、系统及其应用 Download PDFInfo
- Publication number
- CN117061717B CN117061717B CN202311318493.9A CN202311318493A CN117061717B CN 117061717 B CN117061717 B CN 117061717B CN 202311318493 A CN202311318493 A CN 202311318493A CN 117061717 B CN117061717 B CN 117061717B
- Authority
- CN
- China
- Prior art keywords
- frame
- video
- sub
- projection
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000011218 segmentation Effects 0.000 claims abstract description 43
- 239000000872 buffer Substances 0.000 claims abstract description 19
- 230000005540 biological transmission Effects 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 6
- 230000001360 synchronised effect Effects 0.000 claims description 6
- 238000004891 communication Methods 0.000 claims description 5
- 230000036578 sleeping time Effects 0.000 claims description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 7
- 230000004622 sleep time Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000000903 blocking effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3141—Constructional details thereof
- H04N9/3147—Multi-projection systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04J—MULTIPLEX COMMUNICATION
- H04J3/00—Time-division multiplex systems
- H04J3/02—Details
- H04J3/06—Synchronising arrangements
- H04J3/0635—Clock or time synchronisation in a network
- H04J3/0638—Clock or time synchronisation among nodes; Internode synchronisation
- H04J3/0644—External master-clock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本申请提出了投影拼接视频有效控制方法、系统及其应用,包括响应于视频分割设置以及视频文件,对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;投影设备将接收的子视频存储在本地并进行播放;主设备播放时,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;主设备分析帧信息缓存,计算帧调节信息并发送给所有子设备;设备实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备。本申请可降低成本、解除投影设备的拼接数量限制以及提高播放效果。
Description
技术领域
本申请涉及投影技术领域,特别是一种涉及投影拼接视频有效控制方法、系统及其应用。
背景技术
视频拼接是指将多个视频片段组合在一起,形成一个完整的视频作品。在投影视频拼接中,通常使用以下技术来实现:
硬件拼接:通过使用多台投影仪,分别投影不同的视频片段,然后将多个投影画面拼接在一起,形成一个大的投影画面。这种方法的优点是能够实现大屏幕投影,但需要多个投影仪和精确的拼接调整,成本较高。
软件拼接:使用视频编辑软件将多个视频片段编辑在一起,然后将编辑好的视频输出到投影仪进行投影。这种方法的优点是简单易用,但需要耗费大量时间和精力进行编辑和调整。
无缝拼接:通过使用特定的投影幕布和投影仪,将多个视频片段无缝拼接到一起,形成一个完整的大屏幕画面。这种方法的优点是不需要繁琐的拼接调整,但需要购买特定的拼接幕布和投影仪。
目前主要以硬件拼接和软件拼接结合的手段作为主流技术手段,通过软件将视频分割成多个画面,利用多个投影仪硬件拼接的方式形成一个大的投影画面,很好地解决了硬件拼接和软件拼接的部分问题,可大幅度降低投影仪的调试繁琐程度,但还存在以下缺点:
1.多个投影在播放视频时,因为在播放时因为视频播放位置不一,致使图像画面混乱,播放画面无法统一完整。严重影响视频观看效果。
2.视频信号同步的时间过于长久,视频调节间隔太久,由于同步信号帧间隔过大,视频画面经常卡顿,甚至停止无法继续播放。
3.拼接设备数量少(分割为高清32块),网络占用资源巨大,易造成网络阻塞,延时久。(每个视频投影占用的网络12Mbit/s,32*12=384Mbit/s)。用户投入基础设备过多,资源过于浪费。
4.拼接的视频画面变化小,视频同帧效果差。
5.设备的性能要求过高,价格昂贵,增加客户基础建设成本。视频分发占用网络资源,网络数据易丢包,视频数据丢包后,易出现屏幕花屏,卡顿。
因此,亟待投影拼接视频有效控制方法、系统及其应用,以解决现有技术存在的问题。
发明内容
本申请实施例提供了投影拼接视频有效控制方法、系统及其应用,针对目前技术存在的拼接效果差,成本高等问题。
本发明核心技术主要是通过视频分割软件分割视频,以分布式模式作为投影拼接方案,确定其中一台投影为主设备,通过主设备同步其余设备,以实现视频的高效同步和拼接数量的限制解除。
第一方面,本申请提供了投影拼接视频有效控制方法,所述方法包括以下步骤:
S000、以多个投影设备分别接入系统服务器,并经其中一个投影设备作为主设备,其余投影设备作为子设备;
S100、每个投影设备登录系统服务器后,通过系统服务器的系统时间进行校准同步,且该系统时间与客户端的时间保持同步;
S200、响应于客户端的视频分割设置以及接收客户端发送的视频文件,系统服务器对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;
其中,视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备;
S300、投影设备将接收的子视频存储在本地并进行播放;
S400、主设备播放时,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;
S500、主设备分析帧信息缓存,计算帧调节信息并发送给所有子设备;
其中,帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
S600、子设备实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备。
进一步地,S200步骤中,具体步骤包括:
S240、系统服务器读取视频分割设置开始分割或客户端响应于视频分割设置开始分割;
S250、实时判断视频是否完成分割;
S251、若是,则完成视频分割;若否,则读取待分割的视频文件并初始化解码器和视频编码器;
S260、读取视频文件中的视频帧数据,并判断视频帧是否结束;
S261、若是,则释放资源并回到S250步骤;若否,则解码视频数据并对视频数据进行数据转换,根据视频分割参数对视频文件进行分割和编码,得到多个分割后的子视频并回到S260步骤。
进一步地,S200步骤中,视频分割参数包括子视频起始坐标、子视频图像宽度和高度。
进一步地,S200步骤中,响应于客户端的视频分割设置以及接收客户端发送的视频文件的具体步骤包括:
S210、读取视频文件并计算发送包数量,将包序号置零;
S220、将视频文件的数据包发生给对应投影设备,读取投影设备的应答包;
S230、判断上一个应答包是否收到;
S231、若是,则判断数据包是否发送完成;若否,则回到S220步骤;
S232、若数据包发送完成,则结束数据传输;若数据包发送未完成,则将包序号加一并回到S220步骤。
进一步地,S500步骤的具体步骤包括:
S510、接收子设备的当前帧信息;
S520、判断帧信息缓存是否继续使用;
S521、若是,则将接收当前帧信息添加到帧缓存中并回到S510步骤;若否,则更换帧信息缓存,重新计算当前缓存播放曲目的最小帧数、当前时段的平均帧位置,并将计算结果作为帧调节信息发送给子设备和主设备,回到S510步骤。
进一步地,S520步骤中,每隔设定时间判断帧信息缓存是否继续使用,该设定时间为1~42毫秒。
进一步地,S600步骤的具体步骤包括:
S610、接收主设备发送的帧调节信息;
S620、判断帧调节信息的当前播放曲目的最小帧数是否小于当前播放曲目的帧数量;
S621、若是,则重新计算播放时间并将帧调节信息的当前播放曲目的最小帧数赋值给当前播放曲目的帧数量;若否,则回到S620步骤;
S630、判断当前播放帧位置是否小于帧调节信息的当前时段的平均帧位置;
S631、若是,则计算帧差并判断帧差是否大于设定阈值;若否,则计算帧差并判断帧差是否大于设定阈值;
S640、若小于平均帧位置且帧差大于设定阈值,则判断是否大于跳帧值;若小于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;若大于平均帧位置且帧差大于设定阈值,则根据每帧睡眠次数进行睡眠并设置睡眠标记,再执行S650步骤;若大于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;
S641、若大于跳帧值,则计算跳帧数并设置跳帧标记,并执行S650步骤;若小于等于跳帧值,则设置跳过睡眠次数和跳过睡眠标记并按跳过后的次数逐次睡眠,执行S650步骤;
S650、播放视频并将当前帧信息发送给主设备。
第二方面,本申请提供了一种投影拼接视频有效控制系统,包括:
系统服务器,分别与主设备和子设备通信连接,并通过系统时间对主设备和子设备以及客户端进行时间同步;响应于客户端的视频分割设置以及接收客户端发送的视频文件,系统服务器对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;
其中,投影设备将接收的子视频存储在本地并进行播放,以其中一个投影设备作为主设备,以除主设备外的所有被选中的投影设备为子设备;
主设备,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;分析帧信息缓存,计算帧调节信息并发送给所有子设备;其中,帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
子设备,实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备;
客户端,用于供用户进行视频分割设置的设置;其中,视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备。
第三方面,本申请提供了一种电子装置,包括存储器和处理器,存储器中存储有计算机程序,处理器被设置为运行计算机程序以执行上述的投影拼接视频有效控制方法。
第四方面,本申请提供了一种可读存储介质,可读存储介质中存储有计算机程序,计算机程序包括用于控制过程以执行过程的程序代码,过程包括根据上述的投影拼接视频有效控制方法。
本发明的主要贡献和创新点如下:1、与现有技术相比,本申请首先有效地结合了软件拼接和硬件拼接的方式,且不再是现有以服务器为主要视频同步设备,通过任一投影设备作为主设备进行与其他子设备的视频同步,可调节各投影设备的播放速度并自动将所有投影设备播放的播放位置一致化,使得整体画面达到整体统一。具有视频画面稳定,不会出现花屏,卡顿现象的效果。
2、与现有技术相比,本申请任一投影设备作为主设备,其余为子设备的分布式拼接方式,理论上拼接设备可以任意增加,同时将视频数据放在了投影设备本地,视频同步时只需要发送几十个字节大小的控制命令(帧调节信息等)可达到控制效果,从而大幅度降低了网络带宽需求,因此理论上可以任意增加投影设备进行拼接,极大地避免了网络阻塞情况的发生,起到了延时短,客户网络设备投入低的效果。
3、与现有技术相比,用户在客户端只需要通过分割软件对视频进行分割得到视频分割设置以及视频文件,对客户端设备的要求较低,而如果有高性能的客户端设备,可在客户端上进行视频文件的分割,从而减少系统服务器的负担。
本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请实施例的系统框架图;
图2是根据本申请实施例的设备与子设备架构图;
图3是根据本申请实施例的视频分发处理流程图;
图4是根据本申请实施例的视频切割处理流程;
图5是根据本申请实施例的主设备采集子设备帧信息算法处理流程;
图6是根据本申请实施例的子设备帧调节算法处理流程;
图7是根据本申请实施例的电子装置的硬件结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书一个或多个实施例相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本说明书一个或多个实施例的一些方面相一致的装置和方法的例子。
需要说明的是:在其他实施例中并不一定按照本说明书示出和描述的顺序来执行相应方法的步骤。在一些其他实施例中,其方法所包括的步骤可以比本说明书所描述的更多或更少。此外,本说明书中所描述的单个步骤,在其他实施例中可能被分解为多个步骤进行描述;而本说明书中所描述的多个步骤,在其他实施例中也可能被合并为单个步骤进行描述。
实施例一
本申请旨在提出投影拼接视频有效控制方法,具体地,参考图1,所述方法包括以下步骤:
S000、以多个投影设备分别接入系统服务器,并经其中一个投影设备作为主设备,其余投影设备作为子设备;
在本实施例中,如图1和图2所示,在众多播放设备(投影设备)中,设置一台主设备,通过主设备,实时统计各子设备播放位置,然后对播放设备播放调节,以求达到视频画面一致。
S100、每个投影设备登录系统服务器后,通过系统服务器的系统时间进行校准同步,且该系统时间与客户端的时间保持同步;
在本实施例中,以通用时间为基准,每台投影设备登录系统服务器后,系统服务器都会对投影设备的系统时间校准,以保证每台投影设备时间一致。
在其他实施例中,当主设备确定后,其余子设备连接到主设备后,以通用时间为基准,通过主设备对其余子设备进行系统时间校准,以保证每台投影设备时间一致。
S200、响应于客户端的视频分割设置以及接收客户端发送的视频文件,系统服务器对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;其中,视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备;
在本实施例中,通过客户端的视频分割工具输入原视频并接收用户需求设定,用户只需输入视频的起始坐标(视频画面对角坐标,如左上角坐标和右下角坐标),子视频的图像宽度与高度即可(结合起始坐标就可以得到每个子视频的大小和位置),用户可以一次性将子视频的坐标信息逐一输入或者一次性输入要分割成几个子视频,然后系统服务器或客户端根据输入子视频的参数,将视频分割成若干个子视频,如将一个整体的大屏幕均分为阵列设置的多个小屏幕,每个小屏幕对应一个子视频。同时还可设置投影设备拼接项目。设置参与播放项目的投影设备,播放项目拼接行数与拼接列数。
其中,既可以系统服务器进行分割,也可以客户端进行分割,优选为系统服务器分割,可以降低客户端电脑的硬件要求,当然如果接入的客户端较多时,也可以客户端分割与系统服务器分割结合使用,降低系统服务器的负担和排队时间。
如图3和图4所示,本步骤的具体步骤包括:
S210、读取视频文件并计算发送包数量,将包序号置零;
在本实施例中,发送包是以视频文件读取后得到的数据包。
S220、将视频文件的数据包发生给对应投影设备,读取投影设备的应答包;
S230、判断上一个应答包是否收到;
S231、若是,则判断数据包是否发送完成;若否,则回到S220步骤;
S232、若数据包发送完成,则结束数据传输;若数据包发送未完成,则将包序号加一并回到S220步骤;
S240、系统服务器读取视频分割设置开始分割或客户端响应于视频分割设置开始分割;
S250、实时判断视频是否完成分割;
S251、若是,则完成视频分割;若否,则读取待分割的视频文件并初始化解码器和视频编码器;
S260、读取视频文件中的视频帧数据,并判断视频帧是否结束;
S261、若是,则释放资源并回到S250步骤;若否,则解码视频数据并对视频数据进行数据转换,根据视频分割参数对视频文件进行分割和编码,得到多个分割后的子视频并回到S260步骤;
S300、投影设备将接收的子视频存储在本地并进行播放;
S400、主设备播放时,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;
其中,由于主设备和子设备一开始播放时都是同时播放的,播放过程中主设备和子设备之间的信息是实时互传的。
S500、主设备分析帧信息缓存,计算帧调节信息并发送给所有子设备;其中,帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
如图5所示,本步骤的具体步骤包括:
S510、接收子设备的当前帧信息;
在本实施例中,主设备启动自身的网络模块接收子设备的网络模块的连接和当前帧信息的发送。优选地,主设备采用双缓存机制存储子设备发来的播放信息数据(当前帧信息和其余数据),主设备启动后,实时接收来自子设备发送的播放信息数据,并将数据暂时缓存起来。以供主设备统计分析。
其中,子设备启动播放后,定时向主设备发送当前播放的帧位置信息,时间间隔与播放帧率有关。发送信息:
时间:T当前时间=Ts+1*1000/frames;
帧位置信息:Fpos;
S520、判断帧信息缓存是否继续使用;每隔设定时间判断帧信息缓存是否继续使用,该设定时间为1~42毫秒;这里设定时间的取值由视频帧率决定,如一般视频的帧率为24帧/秒,因此一帧的时长就是1秒除以24,约为42毫秒,设置为42毫秒即可。如果视频的帧率小于24帧/秒,人眼就会感觉到明显的卡顿感,观感极差,因此绝大多数视频都是24帧/秒以上的标准,目前主流为24帧/秒、60帧/秒以及120帧/秒。
在本实施例中,每隔40毫秒,主设备根据当前双缓存状态,设置要处理缓存为不可写,自由缓存区为可写状态,对当前缓存数据进行数据统计。
S521、若是,则将接收当前帧信息添加到帧缓存中并回到S510步骤;若否,则更换帧信息缓存,重新计算当前缓存播放曲目(播放视频中的某一段曲目)的最小帧数、当前时段的平均帧位置,并将计算结果作为帧调节信息发送给子设备和主设备,回到S510步骤;
其中,遍历缓存,检索当前曲目帧数最小值:Fmin(x)=fmin(x),其中x为当前设备连接数,fmin(x)为查找当前设备列表中最小帧位置值,对应的,检索当前曲目帧数最大值:Fmax(x)=fmax(x),fmax(x)为查找当前设备列表中最大帧位置值。计算帧位置平均值:
f(n)=∑f(n),其中n=1,2,...,T,即为求F1+F2+ ... +FT的和;
当n>3:
Va=(f(n)--Fmin-Fmax)/n-2
当n<3:
Va=(f(n))/n;
其中,f(n)为帧位置求和,T为设备数量值,FT为第T台设备的帧位置值,即Fn为第n台设备的帧位置值;Va表示帧平均值,Fmin为当前设备列表中最小帧位置值,Fmax为当前设备列表中最大帧位置值,n为当前设备列表数量;
S600、子设备实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备。
如图6所示,本步骤的具体步骤包括:
S610、接收主设备发送的帧调节信息;
在本实施例中,子设备启动自身的网络模块,连接主设备的网络模块,并启动视频播放模块。这一步在主设备和子设备接收视频后就开始了,和主设备同时运行。
S620、判断帧调节信息的当前播放曲目的最小帧数是否小于当前播放曲目的帧数量;
S621、若是,则重新计算播放时间并将帧调节信息的当前播放曲目的最小帧数赋值给当前播放曲目的帧数量;若否,则回到S620步骤;
S630、判断当前播放帧位置是否小于帧调节信息的当前时段的平均帧位置;
S631、若是,则计算帧差并判断帧差是否大于设定阈值;若否,则计算帧差并判断帧差是否大于设定阈值;
S640、若小于平均帧位置且帧差大于设定阈值,则判断是否大于跳帧值;若小于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;若大于平均帧位置且帧差大于设定阈值,则根据每帧睡眠次数进行睡眠并设置睡眠标记,再执行S650步骤;若大于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;
S641、若大于跳帧值,则计算跳帧数并设置跳帧标记,并执行S650步骤;若小于等于跳帧值,则设置跳过睡眠次数和跳过睡眠标记并按跳过后的次数逐次睡眠,执行S650步骤;
在本实施例中,如图5所示,子设备接收主设备发送的帧调节信息后,根据当前播放帧位置,与主设备发来的平均帧位置做如下判断调节:
如果当前帧位置Fc大于平均帧位置Fa,则作增加播放睡眠时间处理。计算帧差值Ft=Fc-Fa。如果帧差值Ft>2,为了防止一次睡眠过久,将睡眠总时Tframe*Ft分成若干个小等分逐次睡眠并设置睡眠标记(睡眠标记置1,Ft<2的时候睡眠标记置0)。计算每帧睡眠次数:
Fn=(Tframe*Ft)/T一帧睡眠时间
其中,Tframe是正常播放时一帧所需的时间,T一帧睡眠时间为预设睡眠时间。
如果当前帧位置Fc小于平均帧位置Fa,则作跳过播放睡眠时间处理,目的在于减少睡眠。计算帧差值Ft=Fc-Fa。
如果帧差值Ft>2,并且Ft<6(跳帧值),将睡眠总时间Tframe*Ft分成若干个小等分逐次睡眠并设置睡眠标记(睡眠标记置1,Ft<2的时候睡眠标记置0);计算需要跳过睡眠次数:
Numsleep=(Tframe*Ft)/T一帧睡眠时间
如果Ft>6(跳帧值),直接跳下一个关键帧。
S650、播放视频并将当前帧信息发送给主设备;
在本实施例中,这里的当前帧信息基本上只有一些简单的指令数据,基本就几十个字节,因此就算每隔40毫秒一个子设备发送几十字节的数据包,也不会造成网络堵塞,可显著降低网络建设成本。
实施例二
基于相同的构思,如图1和如图2所示,本申请还提出了一种投影拼接视频有效控制系统,包括:
系统服务器,分别与主设备和子设备通信连接,并通过系统时间对主设备和子设备以及客户端进行时间同步;响应于客户端的视频分割设置以及接收客户端发送的视频文件,系统服务器对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;
其中,投影设备将接收的子视频存储在本地并进行播放,以其中一个投影设备作为主设备,以除主设备外的所有被选中的投影设备为子设备;
主设备,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;分析帧信息缓存,计算帧调节信息并发送给所有子设备;其中,帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
子设备,实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备;
客户端,用于供用户进行视频分割设置的设置;其中,视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备。
实施例三
本实施例还提供了一种电子装置,参考图7,包括存储器404和处理器402,该存储器404中存储有计算机程序,该处理器402被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
具体地,上述处理器402可以包括中央处理器(CPU),或者特定集成电路(ApplicationSpecificIntegratedCircuit,简称为ASIC),或者可以被配置成实施本申请实施例的一个或多个集成电路。
其中,存储器404可以包括用于数据或指令的大容量存储器404。举例来说而非限制,存储器404可包括硬盘驱动器(HardDiskDrive,简称为HDD)、软盘驱动器、固态驱动器(SolidStateDrive,简称为SSD)、闪存、光盘、磁光盘、磁带或通用串行总线(UniversalSerialBus,简称为USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器404可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器404可在数据处理装置的内部或外部。在特定实施例中,存储器404是非易失性(Non-Volatile)存储器。在特定实施例中,存储器404包括只读存储器(Read-OnlyMemory,简称为ROM)和随机存取存储器(RandomAccessMemory,简称为RAM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(ProgrammableRead-OnlyMemory,简称为PROM)、可擦除PROM(ErasableProgrammableRead-OnlyMemory,简称为EPROM)、电可擦除PROM(ElectricallyErasableProgrammableRead-OnlyMemory,简称为EEPROM)、电可改写ROM(ElectricallyAlterableRead-OnlyMemory,简称为EAROM)或闪存(FLASH)或者两个或更多个以上这些的组合。在合适的情况下,该RAM可以是静态随机存取存储器(StaticRandom-AccessMemory,简称为SRAM)或动态随机存取存储器(DynamicRandomAccessMemory,简称为DRAM),其中,DRAM可以是快速页模式动态随机存取存储器404(FastPageModeDynamicRandomAccessMemory,简称为FPMDRAM)、扩展数据输出动态随机存取存储器(ExtendedDateOutDynamicRandomAccessMemory,简称为EDODRAM)、同步动态随机存取内存(SynchronousDynamicRandom-AccessMemory,简称SDRAM)等。
存储器404可以用来存储或者缓存需要处理和/或通信使用的各种数据文件,以及处理器402所执行的可能的计算机程序指令。
处理器402通过读取并执行存储器404中存储的计算机程序指令,以实现上述实施例中的任意投影拼接视频有效控制方法。
可选地,上述电子装置还可以包括传输设备406以及输入输出设备408,其中,该传输设备406和上述处理器402连接,该输入输出设备408和上述处理器402连接。
传输设备406可以用来经由一个网络接收或者发送数据。上述的网络具体实例可包括电子装置的通信供应商提供的有线或无线网络。在一个实例中,传输设备包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输设备406可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
输入输出设备408用于输入或输出信息。在本实施例中,输入的信息可以是视频分割设置以及接收客户端发送的视频文件等,输出的信息可以是输出画面等。
实施例四
本实施例还提供了一种可读存储介质,可读存储介质中存储有计算机程序,计算机程序包括用于控制过程以执行过程的程序代码,过程包括根据实施例一的投影拼接视频有效控制方法。
需要说明的是,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
通常,各种实施例可以以硬件或专用电路、软件、逻辑或其任何组合来实现。本发明的一些方面可以以硬件来实现,而其他方面可以由控制器、微处理器或其他计算设备执行的固件或软件来实现,但是本发明不限于此。尽管本发明的各个方面可以被示出和描述为框图、流程图或使用一些其他图形表示,但是应当理解,作为非限制性示例,本文中描述的这些框、装置、系统、技术或方法可以以硬件、软件、固件、专用电路或逻辑、通用硬件或控制器或其他计算设备或其某种组合来实现。
本发明的实施例可以由计算机软件来实现,该计算机软件由移动设备的数据处理器诸如在处理器实体中可执行,或者由硬件来实现,或者由软件和硬件的组合来实现。包括软件例程、小程序和/或宏的计算机软件或程序(也称为程序产品)可以存储在任何装置可读数据存储介质中,并且它们包括用于执行特定任务的程序指令。计算机程序产品可以包括当程序运行时被配置为执行实施例的一个或多个计算机可执行组件。一个或多个计算机可执行组件可以是至少一个软件代码或其一部分。另外,在这一点上,应当注意,如图中的逻辑流程的任何框可以表示程序步骤,或者互连的逻辑电路、框和功能,或者程序步骤和逻辑电路、框和功能的组合。软件可以存储在诸如存储器芯片或在处理器内实现的存储块等物理介质、诸如硬盘或软盘等磁性介质,以及诸如例如DVD及其数据变体、CD等光学介质上。物理介质是非瞬态介质。
本领域的技术人员应该明白,以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以作出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (10)
1.投影拼接视频有效控制方法,其特征在于,包括以下步骤:
S000、以多个投影设备分别接入系统服务器,并经其中一个投影设备作为主设备,其余投影设备作为子设备;
S100、每个投影设备登录所述系统服务器后,通过所述系统服务器的系统时间进行校准同步,且该系统时间与客户端的时间保持同步;
S200、响应于客户端的视频分割设置以及接收客户端发送的视频文件,所述系统服务器对所述视频文件分割成子视频并将所有子视频分发到对应的投影设备或所述系统服务器将所述视频文件中已分割完成的子视频分发到对应的投影设备;
其中,所述视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备;
S300、投影设备将接收的子视频存储在本地并进行播放;
S400、主设备播放时,持续接收所述子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;
S500、主设备分析所述帧信息缓存,计算帧调节信息并发送给所有子设备;
其中,所述帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
S600、子设备实时接收所述帧调节信息,并根据所述帧调节信息进行视频同步,同时将当前帧信息发送给主设备。
2.如权利要求1所述的投影拼接视频有效控制方法,其特征在于,S200步骤中,具体步骤包括:
S240、所述系统服务器读取所述视频分割设置开始分割或所述客户端响应于所述视频分割设置开始分割;
S250、实时判断视频是否完成分割;
S251、若是,则完成视频分割;若否,则读取待分割的所述视频文件并初始化解码器和视频编码器;
S260、读取所述视频文件中的视频帧数据,并判断视频帧是否结束;
S261、若是,则释放资源并回到S250步骤;若否,则解码视频数据并对视频数据进行数据转换,根据所述视频分割参数对所述视频文件进行分割和编码,得到多个分割后的子视频并回到S260步骤。
3.如权利要求2所述的投影拼接视频有效控制方法,其特征在于,S200步骤中,所述视频分割参数包括子视频起始坐标、子视频图像宽度和高度。
4.如权利要求1所述的投影拼接视频有效控制方法,其特征在于,S200步骤中,响应于客户端的视频分割设置以及接收客户端发送的视频文件的具体步骤包括:
S210、读取所述视频文件并计算发送包数量,将包序号置零;
S220、将所述视频文件的数据包发生给对应投影设备,读取投影设备的应答包;
S230、判断上一个应答包是否收到;
S231、若是,则判断数据包是否发送完成;若否,则回到S220步骤;
S232、若数据包发送完成,则结束数据传输;若数据包发送未完成,则将包序号加一并回到S220步骤。
5.如权利要求1所述的投影拼接视频有效控制方法,其特征在于,S500步骤的具体步骤包括:
S510、接收所述子设备的当前帧信息;
S520、判断帧信息缓存是否继续使用;
S521、若是,则将接收当前帧信息添加到帧缓存中并回到S510步骤;若否,则更换帧信息缓存,重新计算当前缓存播放曲目的最小帧数、当前时段的平均帧位置,并将计算结果作为所述帧调节信息发送给子设备和主设备,回到S510步骤。
6.如权利要求5所述的投影拼接视频有效控制方法,其特征在于,S520步骤中,每隔设定时间判断帧信息缓存是否继续使用,该设定时间为1~42毫秒。
7.如权利要求1-6任意一项所述的投影拼接视频有效控制方法,其特征在于,S600步骤的具体步骤包括:
S610、接收所述主设备发送的所述帧调节信息;
S620、判断所述帧调节信息的当前播放曲目的最小帧数是否小于当前播放曲目的帧数量;
S621、若是,则重新计算播放时间并将所述帧调节信息的当前播放曲目的最小帧数赋值给当前播放曲目的帧数量;若否,则回到S620步骤;
S630、判断当前播放帧位置是否小于所述帧调节信息的当前时段的平均帧位置;
S631、若是,则计算帧差并判断帧差是否大于设定阈值;若否,则计算帧差并判断帧差是否大于设定阈值;
S640、若小于平均帧位置且帧差大于设定阈值,则判断是否大于跳帧值;若小于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;若大于平均帧位置且帧差大于设定阈值,则根据每帧睡眠次数进行睡眠并设置睡眠标记,再执行S650步骤;若大于平均帧位置且帧差小于等于设定阈值,则执行S650步骤;
S641、若大于跳帧值,则计算跳帧数并设置跳帧标记,并执行S650步骤;若小于等于跳帧值,则设置跳过睡眠次数和跳过睡眠标记并按跳过后的次数逐次睡眠,执行S650步骤;
S650、播放视频并将当前帧信息发送给主设备。
8.一种投影拼接视频有效控制系统,其特征在于,包括:
系统服务器,分别与主设备和子设备通信连接,并通过系统时间对主设备和子设备以及客户端进行时间同步;响应于客户端的视频分割设置以及接收客户端发送的视频文件,系统服务器对视频文件分割成子视频并将所有子视频分发到对应的投影设备或系统服务器将视频文件中已分割完成的子视频分发到对应的投影设备;
其中,投影设备将接收的子视频存储在本地并进行播放,以其中一个投影设备作为主设备,以除主设备外的所有被选中的投影设备为子设备;
主设备,持续接收子设备定时发放的当前帧信息并作为帧信息缓存储于帧缓存中;分析帧信息缓存,计算帧调节信息并发送给所有子设备;其中,帧调节信息包括当前播放曲目的最小帧数和当前时段的平均帧位置;
子设备,实时接收帧调节信息,并根据帧调节信息进行视频同步,同时将当前帧信息发送给主设备;
客户端,用于供用户进行视频分割设置的设置;其中,视频分割设置至少包括播放节目的时间、播放模式、视频分割参数、选中的投影设备。
9.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至7任一项所述的投影拼接视频有效控制方法。
10.一种可读存储介质,其特征在于,所述可读存储介质中存储有计算机程序,所述计算机程序包括用于控制过程以执行过程的程序代码,所述过程包括根据权利要求1至7任一项所述的投影拼接视频有效控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311318493.9A CN117061717B (zh) | 2023-10-12 | 2023-10-12 | 投影拼接视频有效控制方法、系统及其应用 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311318493.9A CN117061717B (zh) | 2023-10-12 | 2023-10-12 | 投影拼接视频有效控制方法、系统及其应用 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117061717A CN117061717A (zh) | 2023-11-14 |
CN117061717B true CN117061717B (zh) | 2024-01-09 |
Family
ID=88669597
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311318493.9A Active CN117061717B (zh) | 2023-10-12 | 2023-10-12 | 投影拼接视频有效控制方法、系统及其应用 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117061717B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117061717B (zh) * | 2023-10-12 | 2024-01-09 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101426126A (zh) * | 2007-11-01 | 2009-05-06 | 上海宝信软件股份有限公司 | 大屏幕监控系统的投影墙窗口调整方法 |
CN102109972A (zh) * | 2011-02-14 | 2011-06-29 | 深圳雅图数字视频技术有限公司 | 投影机电视墙显示方法及系统 |
CN102929572A (zh) * | 2012-10-29 | 2013-02-13 | 浙江大学 | 一种实现大屏幕多投影无缝拼接的方法及其拼接融合器 |
CN105262969A (zh) * | 2015-11-20 | 2016-01-20 | 广景视睿科技(深圳)有限公司 | 一种组合投影的方法以及系统 |
CN106162021A (zh) * | 2015-04-27 | 2016-11-23 | 上海分众软件技术有限公司 | 一种多面投影系统 |
CN106604042A (zh) * | 2016-12-22 | 2017-04-26 | Tcl集团股份有限公司 | 一种基于云端服务器的全景直播系统及全景直播方法 |
CN106791272A (zh) * | 2016-12-22 | 2017-05-31 | 努比亚技术有限公司 | 基于多个移动终端的同步投影装置及方法 |
CN110278457A (zh) * | 2019-05-27 | 2019-09-24 | 深圳市启辰展览展示策划有限公司 | 多主机多视频同步播放方法和系统 |
CN110769228A (zh) * | 2019-04-30 | 2020-02-07 | 成都极米科技股份有限公司 | 实现投影画面拼接的方法、装置及投影系统 |
WO2020103326A1 (zh) * | 2018-11-23 | 2020-05-28 | 深圳市鹰硕技术有限公司 | 一种一对多同屏方法、装置和系统、同屏设备及存储介质 |
CN111294628A (zh) * | 2020-02-21 | 2020-06-16 | 深圳市铭濠光文化发展有限公司 | 一种多通道沉浸式影音视频控制系统 |
CN113079383A (zh) * | 2021-03-25 | 2021-07-06 | 北京市商汤科技开发有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN114827517A (zh) * | 2021-01-27 | 2022-07-29 | 安普拉公司 | 一种投影视频会议系统及视频投影方法 |
CN115297274A (zh) * | 2022-08-04 | 2022-11-04 | 京东方科技集团股份有限公司 | 多屏视频显示方法、系统、播放端及存储介质 |
CN117061717A (zh) * | 2023-10-12 | 2023-11-14 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
-
2023
- 2023-10-12 CN CN202311318493.9A patent/CN117061717B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101426126A (zh) * | 2007-11-01 | 2009-05-06 | 上海宝信软件股份有限公司 | 大屏幕监控系统的投影墙窗口调整方法 |
CN102109972A (zh) * | 2011-02-14 | 2011-06-29 | 深圳雅图数字视频技术有限公司 | 投影机电视墙显示方法及系统 |
CN102929572A (zh) * | 2012-10-29 | 2013-02-13 | 浙江大学 | 一种实现大屏幕多投影无缝拼接的方法及其拼接融合器 |
CN106162021A (zh) * | 2015-04-27 | 2016-11-23 | 上海分众软件技术有限公司 | 一种多面投影系统 |
CN105262969A (zh) * | 2015-11-20 | 2016-01-20 | 广景视睿科技(深圳)有限公司 | 一种组合投影的方法以及系统 |
CN106791272A (zh) * | 2016-12-22 | 2017-05-31 | 努比亚技术有限公司 | 基于多个移动终端的同步投影装置及方法 |
CN106604042A (zh) * | 2016-12-22 | 2017-04-26 | Tcl集团股份有限公司 | 一种基于云端服务器的全景直播系统及全景直播方法 |
WO2020103326A1 (zh) * | 2018-11-23 | 2020-05-28 | 深圳市鹰硕技术有限公司 | 一种一对多同屏方法、装置和系统、同屏设备及存储介质 |
CN110769228A (zh) * | 2019-04-30 | 2020-02-07 | 成都极米科技股份有限公司 | 实现投影画面拼接的方法、装置及投影系统 |
CN110278457A (zh) * | 2019-05-27 | 2019-09-24 | 深圳市启辰展览展示策划有限公司 | 多主机多视频同步播放方法和系统 |
CN111294628A (zh) * | 2020-02-21 | 2020-06-16 | 深圳市铭濠光文化发展有限公司 | 一种多通道沉浸式影音视频控制系统 |
CN114827517A (zh) * | 2021-01-27 | 2022-07-29 | 安普拉公司 | 一种投影视频会议系统及视频投影方法 |
CN113079383A (zh) * | 2021-03-25 | 2021-07-06 | 北京市商汤科技开发有限公司 | 视频处理方法、装置、电子设备及存储介质 |
CN115297274A (zh) * | 2022-08-04 | 2022-11-04 | 京东方科技集团股份有限公司 | 多屏视频显示方法、系统、播放端及存储介质 |
CN117061717A (zh) * | 2023-10-12 | 2023-11-14 | 杭州罗莱迪思科技股份有限公司 | 投影拼接视频有效控制方法、系统及其应用 |
Also Published As
Publication number | Publication date |
---|---|
CN117061717A (zh) | 2023-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN117061717B (zh) | 投影拼接视频有效控制方法、系统及其应用 | |
WO2021114708A1 (zh) | 多人视频直播业务实现方法、装置、计算机设备 | |
CN107371061A (zh) | 一种视频流播放方法、装置及设备 | |
CN108924582A (zh) | 视频录制方法、计算机可读存储介质及录播系统 | |
WO2021082642A1 (zh) | 视频播放控制方法和系统 | |
CN112188225A (zh) | 用于直播回放的弹幕下发方法和直播视频弹幕回放方法 | |
CN110581973A (zh) | 数据回放方法、装置、终端设备及存储介质 | |
US20150113582A1 (en) | Communication System, Terminal Device, Video Display Method, and Storage Medium | |
CN110913278B (zh) | 视频播放方法、显示终端及存储介质 | |
US20150110469A1 (en) | Communication System, Terminal Device, Registration Method, and Storage Medium | |
WO2024212738A1 (zh) | 一种振动处理方法及相关设备 | |
US6081264A (en) | Optimal frame rate selection user interface | |
CN108521604A (zh) | 重定向视频的多屏显示方法及装置 | |
JP4325194B2 (ja) | 記憶媒体へのアクセスを管理する装置及び方法 | |
CN114866829A (zh) | 同步播放的控制方法及装置 | |
US11210261B2 (en) | Systems and methods for synchronizing frame processing within a multi-stage modular architecture | |
CN114217762A (zh) | 用于多个设备联屏显示的方法、服务器及设备 | |
CN113542890A (zh) | 视频编辑方法及相关装置 | |
US20040062516A1 (en) | Moving picture experts group phase 2 transport stream data editing method | |
JP2003134342A (ja) | 画像処理装置、その処理方法及びそのプログラム | |
JP6635381B2 (ja) | 再生装置、再生指示装置、再生システム、再生装置の制御方法、再生指示装置の制御方法、及び、再生システムの制御方法 | |
CN115499673B (zh) | 一种直播方法及装置 | |
JP2006080735A (ja) | 複数映像同期再生方法、複数映像同期再生装置、複数映像同期再生プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
US8229277B2 (en) | Video processing apparatus, method, and storage medium | |
CN112073752B (zh) | 一种多线路流量分配的方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |