CN116418939A - 一种视频输出画面的配置方法、电子设备和存储介质 - Google Patents
一种视频输出画面的配置方法、电子设备和存储介质 Download PDFInfo
- Publication number
- CN116418939A CN116418939A CN202111639278.XA CN202111639278A CN116418939A CN 116418939 A CN116418939 A CN 116418939A CN 202111639278 A CN202111639278 A CN 202111639278A CN 116418939 A CN116418939 A CN 116418939A
- Authority
- CN
- China
- Prior art keywords
- code stream
- output
- window
- windows
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000003044 adaptive effect Effects 0.000 claims description 34
- 238000004590 computer program Methods 0.000 claims description 3
- 230000008859 change Effects 0.000 abstract description 7
- 238000012369 In process control Methods 0.000 description 18
- 210000004544 dc2 Anatomy 0.000 description 18
- 238000004190 ion pair chromatography Methods 0.000 description 18
- 238000012544 monitoring process Methods 0.000 description 14
- 230000000694 effects Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000012806 monitoring device Methods 0.000 description 3
- 230000006872 improvement Effects 0.000 description 2
- 238000013468 resource allocation Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明实施例公开了一种视频输出画面的配置方法、电子设备和存储介质。所述方法,包括:获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型;根据输出窗口数量、各输出窗口的码流配置类型和VO口的最大主码流路数,确定各输出窗口的解码码流类型;控制VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口;其中,所述码流配置类型包括:自适应码流;解码码流类型指示编码码流的分辨率。本公开实施例提出的方案自动适应视频输出系统中输出窗口的数量/配置变化,最大化利用解码资源,提升了视频输出系统的智能配置水平,在满足基本的输出窗口数量需求的同时,提升了视频输出的画面质量。
Description
技术领域
本发明涉及但不限于视频监控领域,尤其涉及一种视频输出画面的配置方法、电子设备和存储介质。
背景技术
随着视频监控技术的不断发展,大屏画面由1080P发展到4K或更高分辨率,大屏窗口也支持更多的数量。但由于监控领域产品解码资源的有限性,客户使用监控产品的过程中,当大屏窗口较多且实况分辨率较高时,会出现解码资源不足导致大屏部分实况无法正常观看的问题,影响产品使用效果。
在系统使用过程中,如何自动适应应用场景的变化,在满足窗口数量需求的前提下,最大化利用解码资源,确保业务功能的可用性并提升画面质量,是提升视频监控系统方案智能化水平的研究方向。
发明内容
本公开实施例提供一种视频输出画面的配置方法、电子设备和存储介质,自动适应视频输出系统中输出窗口的数量/配置变化,最大化利用解码资源,提升了视频输出系统的智能配置水平,在满足基本的输出窗口数量需求的同时,提升了视频输出的画面质量。
一方面,本公开实施例提供一种视频输出画面的配置方法,包括:
获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型;
根据所述输出窗口数量、所述各输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型;
控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口;
其中,所述码流配置类型包括:自适应码流;所述解码码流类型指示编码码流的分辨率。
另一方面,本公开实施例还提供一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开任一实施例所述的视频输出画面的配置方法。
另一方面,本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本公开任一实施例所述的视频输出画面的配置方法。
在阅读并理解了附图和详细描述后,可以明白其他方面。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1是本发明实施例提供的一种视频输出画面的配置方法的流程图;
图2是本发明实施例提供的一种视频输出画面配置情况示意图;
图3是本发明实施例提供的另一种视频输出画面配置情况示意图;
图4是本发明实施例提供的另一种视频输出画面配置情况示意图;
图5是本发明实施例提供的另一种视频输出画面配置情况示意图;
图6是本发明实施例提供的另一种视频输出画面配置情况示意图;
图7是本发明实施例提供的另一种视频输出画面的配置方法的流程图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明,本发明实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等,如果该特定姿态发生改变时,则该方向性指示也相应地随之改变。
另外,在本发明中如涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“连接”、“固定”等应做广义理解,例如,“固定”可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系,除非另有明确的限定。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
另外,本发明各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
视频监控领域相关应用中,随着视频输出画面的要求的提升,越来越多的大屏画面被引入,其对应的显示分辨率也从1080P发展到4K或更高,随着监控的完善,大屏窗口的数量也越来越多。在此过程中,由于视频解码资源的有限,在监控系统运行过程中,当大屏窗口较多且实况视频分辨率较高的情况下,会出现解码资源不足导致部分窗口无法正常观看的问题,严重影响的产品使用效果。对于涉及视频数据源较多,视频解码资源较多,对应输出窗口也较多的情况,虽然可以采取预先计算并匹配配置的方案,固定相关解码资源的分配,但是,由于业务场景的灵活多变性,固定的解码资源分配方案并不能在多种情况下充分利用视频解码资源。因此,为了有效提升视频输出系统中对视频解码资源的充分利用,本公开实施例提出了自适应视频资源分配方案,根据应用场景的实际视频输出需要,自适应确定视频输出VO口的解码码流类型,以使得在满足窗口数量需要的前提下,最大化利用VO口的解码资源,整体提升视频输出画面质量和系统智能化水平。
在本公开记载相关实施例之前,介绍相关概念:
IPC:IP camera网络摄像机;
NVR:Network Video Record,即网络视频录像机,是网络视频监控系统的存储转发部分,NVR与视频编码器或网络摄像机协同工作,完成视频的录像、存储及转发功能。
主码流:指IPC/NVR能显示效果最好的码流,但占用带宽比较大在带宽充足的情况下,是用这个监看和上墙效果最好,也称为主流。
辅码流:指IPC/NVR能显示效果一般的码流,但占用带宽比较小,如果带宽较小,用辅码流效果会流畅点,也称为辅流。
第三码流:指IPC/NVR能显示效果更一般的码流,比辅码流对应的编解码分辨率更低,也称为第三流。
从编码角度来说,IPC/NVR一般支持多个码流类型,码流类型指示编码码流的分辨率。一些示例性实施例中,码流类型包括:主码流、辅码流和/或第三码流,也称为:主流、辅流和第三流。主码流、辅码流和第三码流分别指示不同的分辨率。不同设备的主码流/辅码流/第三码流对应的分辨率由各设备独立确定。例如,某型号IPC的主码流对应的分辨率为1080P,辅码流对应的分辨率为720P,第三码流对应的分辨率为480P;另一型号IPC的主码流对应的分辨率为720P,辅码流对应的分辨率为600P,第三码流对应的分辨率为480P。一些示例性实施例中,码流类型还可以包括其他类型,各类型指示的分辨率与视频数据源的编码分辨率对应即可,不限于本公开实施例所示例的方面。
VO:视频输出,也称为VO口,接入视频数据源(IPC/NVR)完成视频码流的解码并输出到显示设备上。一个VO口的解码能力可以用最多支持的解码路数和每一路的解码码流分辨率表示。例如,一个VO口最多支持4路1080P,即表明该VO口最多能够同时支持4路分辨率为1080P的视频码流的解码,该VO口的最大解码能力描述为:4*1080P,如果每一路码流分辨率为540P,则该VO口最多能够同时支持8路分辨率为540P的视频码流的解码。视频监控/显示系统中,解码器包括一个或多个VO口,例如,一个解码器包括6、9、12或18个VO口。
需要说明的是,视频输出系统进行实况视频数据输出时,VO口的解码码流类型和视频数据源的编码码流类型对应一致,在码流编码传输前双方协商后确定。具体配置或协商过程根据相关视频编解码方案实施,具体方面不在本申请中讨论。
视频输出窗口,也称为视频输出画面,在无特别说明的情况下,本申请中一个输出画面视为一个输出窗口。输出窗口的数量也称为上墙数量,视频输出到显示窗口中显示,也称为上墙。其中,本领域技术人员可以理解,上墙是本领域对于在屏幕上显示实况图像的通俗说法,并不限于设置在墙壁上的显示设备,也可以包括桌面显示设备或手持显示设备等。
本公开实施例提供一种视频输出画面配置方案,根据最大化利用VO口的解码资源的原则,根据视频输出窗口数量的变化自适应调整各输出窗口的解码码流类型,在满足用户实况上墙数量的情况下最大程度利用设备解码资源,提高画面分辨率,从而提升产品体验。
本公开实施例提供一种视频输出画面的配置方法,如图1所示,包括:
步骤110,获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型;
步骤120,根据所述输出窗口数量、所述各输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型;
步骤130,控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口;
其中,所述码流配置类型包括:自适应码流;所述解码码流类型指示编码码流的分辨率。
一些示例性实施例中,所述解码码流类型包括:主码流、辅码流和/或第三码流。即对应指示主流编码分辨率、辅流编码分辨率和/或第三流编码分辨率。
可以理解,执行步骤130后,所述VO口就按照各窗口的新的码流配置参数运行。
一些示例性实施例中,所述码流配置类型还包括:指定主码流、指定辅码流或指定第三码流。
需要说明的是,一个窗口的码流配置类型为指定主码流、指定辅码流或指定第三码流时,在本公开实施中也称为非自适应码流,表明该窗口对应的解码码流类型不能被自适应调整,只能按照被指定的主码流、辅助码流或第三码流进行视频数据源的接入和对应的解码并输出。一个窗口的码流配置类型为自适应码流,表明该窗口对应的解码码流类型可以自适应调整,与对应接入的视频数据源一致地动态变化,可以采用主码流,也可以采用辅码流;一些示例性实施例中还可以采用第三码流。其中,主码流\辅码流\第三码流具体的编解码分辨率由接入的视频数据源(IPC/NVR)确定。
一些示例性实施例中,所述VO口的最大主码流路数=所述VO口的最大解码能力/接入的视频数据源的主码流分辨率。
例如,一VO口的最大解码能力为:4*1080P,接入的IPC的主码流分辨率为1080P(1920*1080),对应的主码流解码分辨率为1080P,则该VO口的最大主码流路数=(4*1080P)/1080P,等于4,即该VO口的最大主码流路数=4;如果的IPC的主码流分辨率为720P,对应的主码流解码分辨率为720P,则该VO口的最大主码流路数=(4*1080P)/720P,等于6,即该VO口的最大主码流路数=6。“/”表示除法向下取整,8/3=2,16/5=3;最大主码流路数,表示该VO最大可支持多少路主码流解码。
一些示例性实施例中,所述获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型,包括:
在重配置触发事件发生时,获取视频输出VO口对应的目标输出窗口数量和各输出窗口的码流配置类型;
其中,所述重配置触发事件至少包括以下之一:
(1)所述VO口对应的输出窗口数量发生变化;
(2)所述VO口对应的输出窗口中码流配置类型为自适应码流的输出窗口的数量发生变化;
(3)所述VO口对应的任一个输出窗口的码流配置参数发生变化,所述码流配置参数包括:码流配置类型和/或对应的解码码流类型所指示的分辨率;
(4)所述VO口接入的视频数据源的主码流分辨率发生变化。
一些示例性实施例中,所述方法还包括:
步骤100,判定重配置触发事件是否发生,如果发生则执行步骤110。
可以理解,在上述(1)-(4)任一事件发生时,触发执行步骤110-130对视频输出/监控系统中的VO视频解码资源进行重新分配,以使得最大化利用所述VO口的解码资源。
一些示例性实施例中,所述VO口对应的输出窗口增多,例如,从3个变到5个,或者减少,例如,从5个变成2个,则第(1)类重配置触发事件发生,触发执行后续步骤,对所述VO口的解码资源进行重新分配。
一些示例性实施例中,所述VO口对应的输出窗口为5个,其中,4个输出窗口的码流配置类型为自适应码流,1个输出窗口的码流配置类型为辅码流,变化后,总的输出窗口仍为5个,但是自适应码流窗口关闭了一个,变为3个,辅码流窗口新增了1个,变为2个,则第(2)类重配置触发事件发生,触发执行后续步骤,对所述VO口的解码资源进行重新分配。
一些示例性实施例中,操作员的开窗、关窗、分屏切换和窗口漫游等操作会引起第(1)或(2)类重配置触发事件发生。
一些示例性实施例中,所述VO口对应的输出窗口为3个,其码流配置类型均为主码流,更改其中一个窗口的码流配置类型为自适应码流,则第(3)类重配置触发事件发生,触发执行后续步骤,对所述VO口的解码资源进行重新分配。
一些示例性实施例中,操作员修改已开打开窗口的配置参数,可能会引起第(3)类重配置触发事件发生。
一些示例性实施例中,所述VO口对应的2个输出窗口对应的IPC更换,更换前的IPC的主码流分辨率为1080P,更换后的IPC的主码流分辨率为720P,则第(4)类重配置触发事件发生,触发执行后续步骤,对所述VO口的解码资源进行重新分配。
一些示例性实施例中,所述VO口对应的输出窗口所对应的IPC包括多个,如果多个IPC的主码流分辨率不同,可以选择数量占比多的主码流分辨率,或者,选择最低或最高的主码流分辨率,以在步骤120中确定所述VO口的最大主码流路数。
根据上述示例,本领域技术人员可以推定其他多种具体的重配置触发事件,在此不一一示例。
一些示例性实施例中,步骤120包括:
在所述输出窗口数量大于所述VO口的最大主码流路数的情况下,将码流配置类型为自适应码流的各输出窗口的解码码流类型确定为辅码流;
在所述输出窗口数量小于或等于所述VO口的最大主码流路数的情况下,将码流配置类型为自适应码流的各输出窗口的解码码流类型确定为主码流。
需要说明的是,一些示例性实施例中,步骤110中所获取的输出窗口数量和各输出窗口的码流配置类型,是在所述重配置触发事件发生时(后)获取,为相关变化发生后的输出窗口数量和各输出窗口的码流配置类型。相应地,步骤120中所述VO口的最大码流路数也是根据所述VO口的最大解码能力和变化后的主码流分辨率确定的。
一些示例性实施例中,如图2所示,2个VO口VO1和VO2,各自的最大解码能力为4*1080P,主码流解码分辨率对应IPC的主码流1080P分辨率,此时VO1和VO2各自的最大主码流路数=(4*1080)/1080=4。获取VO1的输出窗口数量为2,2个输出窗口的码流配置类型为自适应码流,则步骤120中,2小于4,则确定这2个输出窗口的解码码流类型需配置为主码流。获取VO2的输出窗口数量为5,5个输出窗口的码流配置类型为自适应码流,则步骤120中,5大于4,则确定这5个输出窗口的解码码流类型需配置为辅码流。
例如,如图3所示,VO1原先对应2个自适应码流的输出窗口,均配置为主码流,如果在VO1上增加3个自适应码流的输出窗口,共5个自适应码流的输出窗口,窗口数量发生变化,5大于4,确定这5个输出窗口需配置为辅码流,其中,原有的2个输出窗口自适应变为辅码流。可以理解,为了满足上墙窗口数量5,在VO1有限的解码资源约束下,自适应调低了输出窗口的分辨率。
例如,如图3所示,VO2原先对应5个自适应码流的输出窗口,均配置为辅码流,如果在VO2上关闭了输出窗口,还剩2个自适应码流的输出窗口,窗口数量发生变化,2小于4,确定这2个输出窗口需配置为主码流,其中,原有的未关闭的2个剩余的输出窗口自适应变为主码流。可以理解,在VO2对应的输出窗口减少后,被关闭的输出窗口原先占用的解码资源被释放,为了充分利用VO2的解码资源,进行重新配置后,保留下的未关闭的2个输出窗口将自适应地提高分辨率,可以提升这2个输出窗口的画面质量。
一些示例性实施例中,步骤120中所述根据所述输出窗口数量、所述各目标输出窗口的码流配置类型和所述VO口的最大主码流路数,重新配置各输出窗口的解码码流类型,还包括:
对码流配置类型为非自适应码流的各输出窗口,保持各码流配置类型设定的解码码流类型不变。
可以看到,一些示例性实施例中,对于VO口对应的码流配置类型为指定主码流、指定辅码流或指定第三码流这些非自适应码流的输出窗口而言,重新分配VO口的解码资源时,保持其对应的主码流\辅码流\第三码流不变。即该实施例方案中,根据输出窗口的码流配置类型,可以有效地控制自适应码流配置方案所影响的窗口范围。例如,在某输出窗口重要性较高的情况下,设置为指定主码流的配置类型,则根据步骤120进行整体解码资源重配置时,该窗口仍保持码流类型为主码流,只对其他自适应码流类型的输出窗口进行自适应调整。可以理解,这种自适应码流+指定码流相结合的方案,能够充分满足了实际业务中的灵活需求。
例如,如图4所示,VO口初始对应2个输出窗口,码流配置类型为:自适应码流和指定主码流,切换为5个输出窗口(新增3个自适应码流类型的输出窗口)后,5大于4,4个自适应码流的输出窗口的解码码流类型需配置为辅码流,指定主码流的输出窗口保持主码流。
例如,如图5所示,VO口初始对应5个输出窗口,码流配置类型为:自适应码流和指定辅码流,关闭一个自适应码流的输出窗口后,重新配置3个自适应码流的输出窗口为主码流,指定辅码流的输出窗口的码流类型(分辨率)保持不变。
一些示例性实施例中,步骤110中所述获取VO口对应的输出窗口数量,包括:
(a)在所述VO口对应的输出窗口均为单VO窗口的情况下,以所对应的单VO窗口的总数量作为所述VO口对应的输出窗口数量;
(b)在所述VO口对应的输出窗口包括至少一个跨VO窗口的情况下,确定各跨VO窗口所关联的多个VO口,以所述多个VO口对应的输出窗口数量中的最大数量,作为所述VO口对应的输出窗口数量。
其中,单VO窗口指该输出窗口的输出画面中只包括一个VO口的解码码流,如图2-5所示,各VO口对应的输出窗口的码流都只来自一个VO口,这些输出窗口均为单VO窗口。跨VO窗口指该输出窗口的输出画面中至少包括两个VO口的解码码流。例如,图6所示,3*3的电视墙,包括3*3=9个VO口1-9,当前显示7个输出窗口1-11;输出窗口1,只输出来自VO1的码流,为单VO窗口;输出窗口2,输出了来自VO2和VO3的码流,为跨VO窗口;输出窗口3,只输出了来自VO3的码流,为单VO窗口;输出窗口4,只输出来自VO4的码流,为单VO窗口;输出窗口5,输出了来自VO4和VO5的码流,为跨VO窗口;输出窗口6,只输出来自VO5的码流,为单VO窗口;输出窗口7,输出了来自VO5和VO8的码流,为跨VO窗口;输出窗口8,输出了来自VO6和VO9的码流,为跨VO窗口;输出窗口9-11,只输出来自VO9的码流,为单VO窗口。
例如,图2中VO1对应的输出窗口1-1,1-2均为单VO窗口,则VO1对应的输出窗口数量等于2,VO2对应的输出窗口2-1,2-2,2-3,2-4,2-5均为单VO窗口,则VO2对应的输出窗口数量等于5。
例如,图6中,VO1对应的输出窗口为窗口1;VO2对应的输出窗口为窗口2;VO3对应的输出窗口为窗口2和窗口3。窗口1为单VO窗口,窗口2为跨VO窗口(关联了两个VO——VO2和VO3),窗口3为单VO窗口。
VO1对应的窗口1为单VO窗口,则确定VO1对应的输出窗口数量等于1。VO2对应的窗口2为跨VO窗口(即VO2对应的输出窗口包括一个跨VO窗口),确定窗口2所关联的两个VO——VO2和VO3,VO2对应的输出窗口数量为1,VO3输出窗口数量为2,则以最大的窗口数量2作为VO2的输出窗口数量。VO3对应2个窗口——窗口2,窗口3,包括了一个跨VO窗口2,因此,进一步确定这个跨VO2窗口2关联的两个VO——VO2和VO3,VO2对应的输出窗口数量为1,VO3输出窗口数量为2,则以最大的窗口数量2作为VO3的输出窗口数量。
又例如,图6中,VO4对应的输出窗口为窗口4、5,共2个;VO5对应的输出窗口为窗口5、6、7,共3个;VO8对应的输出窗口为窗口7,共1个。窗口4、6为单VO窗口,窗口5、7为跨VO窗口,其中,窗口5关联了VO4、5,窗口7关联了VO5、8。
则,对于VO4来说,其对应的窗口包括了一个跨VO窗口5,按(b)的方案,确定窗口5所关联的2个VO口VO4、5,以最大数量3作为VO4对应的输出窗口数量。对VO5来说,对应的窗口包括了两个跨VO窗口5、7,确定窗口5、7关联的VO口VO4、5、8,以最大数量3作为VO5对应的输出窗口数量。对于VO8来说,对应的窗口包括了一个跨VO窗口7,确定窗口7关联的VO口VO5、8,以最大数量3作为VO8对应的输出窗口数量。即最终确定的VO4、5、8的输出窗口数量均为3。
又例如,图6中,VO6对应的输出窗口为窗口8,共1个;VO9对应的输出窗口为窗口8、9、10、11,共4个。窗口9-11为单VO窗口,窗口8为跨VO窗口,其中,窗口8关联了VO6、9。
则,对于VO6来说,其对应的窗口包括了一个跨VO窗口8,按(b)的方案,确定窗口8所关联的2个VO口VO6、9,以最大数量4作为VO6对应的输出窗口数量。对VO9来说,对应的窗口包括了一个跨VO窗口8,确定窗口8关联的VO口VO6、9,以最大数量4作为VO9对应的输出窗口数量。
可以看到,在(b)的情况下,一个VO确定自身输出窗口数量时以所包括的各跨VO窗口所关联的多个VO口中包含窗口数量最大的数值作为自身对应的输出窗口数量,基于此数量进行后续的解码资源重配置,可以避免仅依据自身窗口数量进行自适应码流类型调整引起的各关联VO对于同一窗口的解码码流类型配置不一致。同时,也可以避免在自适应码流方式下,输出窗口数量较多的VO口上被超负荷配置解码资源需求,以确保输出窗口数量较多的VO口上能够正常解码输出视频画面。
例如,如果仅考虑自身对应窗口的总数量,VO4的窗口数量为2,VO5的窗口数量3。在VO4和VO5的最大主码流路数为2,全部窗口都是自适应码流的情况下,确定VO4对应的窗口4、5为自适应主码流窗口(2=2),确定VO5对应的窗口5、6、7为自适应辅码流窗口(3>2)。这样,对于窗口5来说,存在不一致。根据本公开实施例(b)的方案,确定VO4、5对应的窗口数量均为3,确定VO4对应的窗口4、5为自适应辅码流窗口(3>2),确定VO5对应的窗口5、6、7为自适应辅码流窗口(3>2);可以看到根据本公开实施例方案所重新配置的各窗口的自适应码流能够保持一致。
一些示例性实施例中,步骤130包括:
所述VO口的最大主码流路数=所述VO口的最大解码能力/接入的视频数据源的主码流分辨率。
本公开实施例还提供一种视频输出画面的配置方法,如图7所示,包括:
步骤710,记录VO口对应的各输出窗口标识、各输出窗口的码流配置类型和各输出窗口的解码码流类型,记为初始窗口信息;
步骤720,在重配置触发事件发生时,获取所述VO口的窗口信息,记为目标窗口信息;
步骤730,根据目标窗口信息获取输出窗口数量;
步骤740,根据输出窗口数量、各输出窗口的码流配置类型和所述VO口的最大主码流路数,确定目标窗口信息中各输出窗口的解码码流类型;
步骤750,控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口。
一些示例性实施例中,步骤750包括:
对于目标窗口信息中包括的每一个窗口分别执行以下步骤:
在该窗口为重配置触发事件发生前已有窗口的情况下,判断该窗口的新确定的解码码流类型是否发生了变化,如果发生了变化,则与对应的视频数据源按照新确定的解码码流类型重新建立码流连接,进行解码并输出解码码流到该窗口;如果未发生变化,则不重新建立码流连接;
在该窗口为重配置触发事件发生后的新增窗口的情况下,与对应的视频数据源按照该窗口新确定的解码码流类型建立码流连接,进行解码并输出解码码流到该窗口。
其中,相关变化的判断根据步骤710和步骤720中所记录的初始窗口信息和目标窗口信息进行。初始窗口信息和目标窗口信息包括:各输出窗口标识、各输出窗口的码流配置类型和各输出窗口的解码码流类型。
需要说明的是,步骤740中各窗口新确定的解码码流类型所指示的分辨率,可以是码流配置类型为自适应码流的窗口根据本公开提出的自适应方案进行主、辅流切换所确定新的解码码流类型所指示的分辨率,也可以是根据操作员在第(3)类重配置触发事件中指定的码流配置类型所对应的码流类型对应的分辨率,或解码码流类型重新设置的分辨率。
本公开实施例还提供一种视频输出画面的配置装置,包括:
获取模块,设置为获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型;
参数确定模块,设置为根据所述输出窗口数量、所述各输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型;
控制模块,设置为控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口;
其中,所述码流配置类型包括:自适应码流;所述解码码流类型指示编码码流的分辨率。
本公开实施例还提供一种监控设备,包括:
本公开任一实施例所述的视频输出画面的配置装置和视频解码器;
所述视频解码器包括一个或多个VO口。
本公开实施例还提供一种监控系统,包括:
监控设备、视频数据源设备和显示设备;
所述监控设备设置为,与所述视频数据源设备建立连接,获取视频流;
所述监控设备还设置为,执行本公开任一实施例所述的视频输出画面的配置方法,将所获取的视频流输出到所示显示设备上一个或多个窗口。
本公开实施例还提供一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开任一实施例所述的视频输出画面的配置方法。
本公开实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器实现如本公开任一实施例所述的视频输出画面的配置方法。
可以看到,本公开实施例提供的视频输出画面的配置方法,引入了自适应码流的窗口解码码流配置类型,基于输出窗口的数量进行自适应码流窗口的主/辅流控制,在监控设备解码资源有限的情况下,极大提高解码资源利用率,保证用户实况上墙数量和实况上墙画面质量。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器,如数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是在本发明的构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接/间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。
Claims (10)
1.一种视频输出画面的配置方法,其特征在于,包括:
获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型;
根据所述输出窗口数量、所述各输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型;
控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口;
其中,所述码流配置类型包括:自适应码流;所述解码码流类型指示编码码流的分辨率。
2.如权利要求1所述的方法,其特征在于,
所述码流配置类型还包括:指定主码流、指定辅码流或指定第三码流。
3.如权利要求1或2所述的方法,其特征在于,
所述获取视频输出VO口对应的输出窗口数量和各输出窗口的码流配置类型,包括:
在重配置触发事件发生时,获取视频输出VO口对应的目标输出窗口数量和各输出窗口的码流配置类型;
其中,所述重配置触发事件至少包括以下之一:
所述VO口对应的输出窗口数量发生变化;
所述VO口对应的输出窗口中码流配置类型为自适应码流的输出窗口的数量发生变化;
所述VO口对应的任一个输出窗口的码流配置参数发生变化,所述码流配置参数包括:码流配置类型和/或对应的解码码流类型所指示的分辨率;
所述VO口接入的视频数据源的主码流分辨率发生变化。
4.如权利要求1或2所述的方法,其特征在于,
所述VO口的最大主码流路数=所述VO口的最大解码能力/接入的视频数据源的主码流分辨率。
5.如权利要求1或2所述的方法,其特征在于,
所述根据所述输出窗口数量、所述各目标输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型,包括:
在所述输出窗口数量大于所述VO口的最大主码流路数的情况下,将码流配置类型为自适应码流的各输出窗口的解码码流类型确定为辅码流;
在所述输出窗口数量小于或等于所述VO口的最大主码流路数的情况下,将码流配置类型为自适应码流的各输出窗口的解码码流类型确定为主码流。
6.如权利要求2所述的方法,其特征在于,
所述根据所述输出窗口数量、所述各目标输出窗口的码流配置类型和所述VO口的最大主码流路数,确定各输出窗口的解码码流类型,包括:
对码流配置类型为非自适应码流的各输出窗口,保持各码流配置类型设定的解码码流类型不变。
7.如权利要求1或2所述的方法,其特征在于,
所述获取VO口对应的输出窗口数量,包括:
在所述VO口对应的输出窗口均为单VO窗口的情况下,以所对应的单VO窗口的总数量作为所述VO口对应的输出窗口数量;
在所述VO口对应的输出窗口包括至少一个跨VO窗口的情况下,确定各跨VO窗口所关联的多个VO口,以所述多个VO口对应的输出窗口数量中的最大数量,作为所述VO口对应的输出窗口数量。
8.如权利要求1或2所述的方法,其特征在于,
所述控制所述VO口按照所确定的各输出窗口的解码码流类型,对应解码并输出解码码流到各输出窗口,包括:
按照所述VO口各输出窗口的解码码流类型与对应接入的视频数据源进行媒体流协商,并解码输出到对应窗口。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-8中任一项所述的视频输出画面的配置方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-8中任一项所述的视频输出画面的配置方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111639278.XA CN116418939A (zh) | 2021-12-29 | 2021-12-29 | 一种视频输出画面的配置方法、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111639278.XA CN116418939A (zh) | 2021-12-29 | 2021-12-29 | 一种视频输出画面的配置方法、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116418939A true CN116418939A (zh) | 2023-07-11 |
Family
ID=87049716
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111639278.XA Pending CN116418939A (zh) | 2021-12-29 | 2021-12-29 | 一种视频输出画面的配置方法、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116418939A (zh) |
-
2021
- 2021-12-29 CN CN202111639278.XA patent/CN116418939A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10148860B2 (en) | Imaging apparatus, external apparatus, imaging system, control method for imaging apparatus, control method for external apparatus, control method for imaging system, and program | |
US10051202B2 (en) | Method and apparatus for adaptively mixing video source signals | |
US10692465B2 (en) | Transitioning between video priority and graphics priority | |
CN106068495B (zh) | 将使用不同编码参数编码的多个编码成流 | |
CA2655672C (en) | Filling blank spaces of a display screen | |
US10102878B2 (en) | Method, apparatus and system for displaying images | |
US8934016B2 (en) | Video display apparatus and video display method | |
US20070024705A1 (en) | Systems and methods for video stream selection | |
KR20200003715A (ko) | 오버레이로 비디오를 인코딩하기 위한 방법 및 시스템 | |
CN111432251B (zh) | 视频处理方法、装置、电子设备及介质 | |
RU2557470C2 (ru) | Устройство обработки сигнала изображения, передающее устройство, способ обработки сигнала изображения, программа и система обработки сигнала изображения | |
US20090219391A1 (en) | On-camera summarisation of object relationships | |
JP6463041B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
CN104639951A (zh) | 视频码流的抽帧处理方法及装置 | |
WO2017101350A1 (zh) | 变分辨率的编码模式预测方法及装置 | |
US10530990B2 (en) | Method for controlling a video-surveillance and corresponding video-surveillance system | |
CN110300278A (zh) | 视频传输方法和设备 | |
US20240107093A1 (en) | Media session management | |
CN116418939A (zh) | 一种视频输出画面的配置方法、电子设备和存储介质 | |
EP3522525B1 (en) | Method and apparatus for processing video playing | |
CN115278319A (zh) | 一种投屏数据传输方法、装置、电子设备和存储介质 | |
US11323730B2 (en) | Temporally-overlapped video encoding, video decoding and video rendering techniques therefor | |
US10129551B2 (en) | Image processing apparatus, image processing method, and storage medium | |
EP4319156A1 (en) | Image processing method and apparatus, and storage medium and electronic device | |
CN117896558A (zh) | 云游戏场景的网络拥塞控制方法、装置、存储介质及处理器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |