CN116916071A - 视频画面显示方法、系统、装置、电子设备以及存储介质 - Google Patents

视频画面显示方法、系统、装置、电子设备以及存储介质 Download PDF

Info

Publication number
CN116916071A
CN116916071A CN202310693204.7A CN202310693204A CN116916071A CN 116916071 A CN116916071 A CN 116916071A CN 202310693204 A CN202310693204 A CN 202310693204A CN 116916071 A CN116916071 A CN 116916071A
Authority
CN
China
Prior art keywords
video
display platform
coding
multimedia display
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310693204.7A
Other languages
English (en)
Inventor
黄浩成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kaidelian Software Technology Co ltd
Original Assignee
Guangzhou Kaidelian Software Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kaidelian Software Technology Co ltd filed Critical Guangzhou Kaidelian Software Technology Co ltd
Priority to CN202310693204.7A priority Critical patent/CN116916071A/zh
Publication of CN116916071A publication Critical patent/CN116916071A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请涉及一种视频画面显示方法、系统、装置、电子设备以及存储介质,该方法包括:获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面,避免了视频画面出现卡顿现象,提高了视频画面显示的质量。

Description

视频画面显示方法、系统、装置、电子设备以及存储介质
技术领域
本申请涉及视频监控技术领域,特别是涉及一种视频画面显示方法、系统、装置、电子设备以及存储介质。
背景技术
在视频监控中,往往需要显示多个视频画面,对每个视频画面对应的原始视频数据进行编解码,需要占用网络带宽资源。随着显示的视频画面数量不断增加,会使得网络带宽占用越来越大,造成整体负载过大,导致视频画面出现卡顿、抖动现象,影响视频画面显示的质量。
发明内容
基于此,本申请的目的在于,提供一种视频画面显示方法、系统、装置、电子设备以及存储介质,其具有提高视频画面显示质量的优点。
根据本申请实施例的第一方面,提供一种视频画面显示方法,包括如下步骤:
获取若干个视频源设备发送的原始视频数据;
根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;
将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;
根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;
根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;
将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。
根据本申请实施例的第二方面,提供一种视频画面显示系统,包括:
若干个视频源设备、录播主机和多媒体显示平台,若干个视频源设备与录播主机连接,录播主机与多媒体显示平台连接;
录播主机获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台;
多媒体显示平台根据若干个第二视频流,显示若干个视频画面。
根据本申请实施例的第三方面,提供一种视频画面显示装置,包括:
视频数据获取模块,用于获取若干个视频源设备发送的原始视频数据;
第一视频流获得模块,用于根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;
传输速度监测模块,用于将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;
编码参数调整模块,用于根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;
第二视频流获得模块,用于根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;
视频画面显示模块,用于将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。
根据本申请实施例的第四方面,提供一种电子设备,包括:处理器和存储器;其中,存储器存储有计算机程序,计算机程序适于由处理器加载并执行如上述任意一项的视频画面显示方法。
根据本申请实施例的第五方面,提供一种计算机可读存储介质,其上储存有计算机程序,该计算机程序被处理器执行时实现如上述任意一项的视频画面显示方法。
本申请实施例通过获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。本申请通过实时监测编码后的第一视频流的传输速度以及视频编码性能值,对第一视频编码参数进行调整,从而动态调整原始视频数据在编码过程中占用的网络带宽资源,避免了视频画面出现卡顿现象,提高了视频画面显示的质量。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
为了更好地理解和实施,下面结合附图详细说明本发明。
附图说明
图1为本申请一个实施例提供的视频画面显示方法的流程示意图;
图2为本申请一个实施例提供的视频画面显示方法中步骤S40的流程示意图;
图3为本申请一个实施例提供的视频画面显示方法中步骤S50的流程示意图;
图4为本申请另一个实施例提供的视频画面显示方法的流程示意图;
图5为本申请第二实施例提供的视频画面显示系统的结构框图;
图6为本申请第三实施例提供的视频画面显示装置的结构框图;
图7为本申请第四实施例提供的电子设备的结构示意框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施例方式作进一步地详细描述。
应当明确,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在本申请实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请实施例。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。在本申请的描述中,需要理解的是,术语“第一”、“第二”、“第三”等仅用于区别类似的对象,而不必用于描述特定的顺序或先后次序,也不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本申请中的具体含义。
此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
为了更好的理解本申请的设计方案,下面结合具体应用场景进行说明。
本申请提供的视频画面显示方法可以用于视频会议、视频广告投放、教学巡课等应用场景,本申请实施例以应用于教学巡课为例进行说明。
在教学巡课场景中,每个教室内配置有若干个视频源设备,包括但不限于教师摄像机、学生摄像机、智慧黑板、板书设备以及录播主机。教师摄像机用于拍摄教师全景画面以及教师特写画面,学生摄像机用于拍摄学生全景画面以及学生特写画面,智慧黑板用于输出电脑画面,板书设备用于输出板书画面,录播主机用于合成录播画面。每个视频源设备均与录播主机连接,每个视频源设备将各自的视频画面传输到录播主机。录播主机从多个视频画面中选取一个或几个视频画面进行合成,获得录播画面。录播主机包括视频处理子系统(Video Process Sub-System,简称VPSS)、视频编码模块(Videoencoder,VENC模块)以及RTSP服务器。VPSS对每个视频画面进行预处理,VENC模块对预处理后的各个视频画面进行视频编码,RTSP服务器将编码后的视频流封装成RTSP数据包发送至多媒体显示平台,多媒体显示平台对RTSP数据包进行解码渲染,显示教室的多个视频画面,以供巡课人员对各个教室的视频画面进行查看。
然而,对所有教室的所有教学画面进行编解码,需要占用大量的网络带宽资源,造成整体负载过大,导致视频画面出现卡顿、抖动现象,影响视频画面显示的质量。
为此,本申请实施例提出了一种视频画面显示方法。
实施例1
请参阅图1,图1为本申请一个实施例提供的一种视频画面显示方法的流程示意图,该方法包括的步骤如下:
S10:获取若干个视频源设备发送的原始视频数据。
其中,视频源设备包括教师摄像机、学生摄像机、智慧黑板、板书设备以及录播主机。原始视频数据包括教师摄像机发送的教师全景画面以及教师特写画面、学生摄像机发送的学生全景画面以及学生特写画面、智慧黑板发送的电脑画面、板书设备发送的板书画面、录播主机发送的录播画面。其中,录播画面为录播主机从上述几个画面中,选取其中一个或多个画面作为画面来源的合成画面。
在本申请实施例中,录播主机与若干个视频源设备连接,录播主机获取若干个视频源设备发送的原始视频数据。具体地,教师摄像机、学生摄像机与录播主机进行有线或无线连接,有线连接可以是电缆连接,无线连接可以是wifi连接或者蓝牙连接。智慧黑板、板书设备均通过高清多媒体接口输入HDMI IN方式连接到录播主机。
S20:根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流。
在本申请实施例中,录播主机包括若干个视频编码模块,每个视频编码模块用于对一个视频源设备发送的原始视频数据进行视频编码。具体地,每个视频编码模块存储有各自的第一视频编码参数,将每个视频源设备发送的原始视频数据输入至相应的视频编码模块,获得若干个第一视频流。其中,每个视频编码模块存储的第一视频编码参数可以相同,也可以不同。
S30:将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值。
其中,多媒体显示平台可以是显示多个视频画面的平台,包括但不限于视频画面监控平台以及巡课平台。视频编码性能值包括但不限于原始视频数据在编码过程中占用的网络带宽资源、CPU计算资源以及内存存储资源。
在本申请实施例中,录播主机内置有RTSP服务器,视频编码模块将第一视频流发送给RTSP服务器,RTSP服务器将第一视频流封装成RTSP数据包,并将RTSP数据包发送给多媒体显示平台,录播主机实时监测RTSP数据包的发送速度以及自身的视频编码性能值。
S40:根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数。
其中,传输速度越大,占用的网络带宽资源越大。视频编码性能值越大,表示录播主机的整体负载越大。
在本申请实施例中,将传输速度与预设速度阈值比较,将视频编码性能值与预设性能值进行比较,获得比较结果,根据比较结果,调整第一视频编码参数,获得第二视频编码参数。
S50:根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流。
在本申请实施例中,根据第二视频编码参数,可以对一个或多个原始视频数据进行重新编码,也可以对所有原始视频数据进行重新编码,获得若干个第二视频流。
S60:将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。
在本申请实施例中,将重新编码后的若干个第二视频流传输至多媒体显示平台,多媒体显示平台对每个第二视频流进行解码渲染,显示每个第二视频流对应的视频画面。
应用本申请实施例,通过获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。本申请通过实时监测编码后的第一视频流的传输速度以及视频编码性能值,对第一视频编码参数进行调整,从而动态调整原始视频数据在编码过程中占用的网络带宽资源,避免了视频画面出现卡顿现象,提高了视频画面显示的质量。
在一个可选的实施例中,步骤S20之前,包括步骤S21,具体如下:
S21:对每个原始视频数据进行预处理;其中,预处理包括但不限于去噪、去隔行、通道缩放以及通道锐化处理。
在本申请实施例中,录播主机包括视频处理子系统(Video Process Sub-System,简称VPSS),VPSS支持对一幅输入图像进行统一预处理,如去噪、去隔行等,然后再对各输入图像的通道分别进行缩放、锐化等处理,最后输出多种不同分辨率的图像。
通过VPSS对每个原始视频数据进行预处理,提高每个原始视频数据的质量。
在一个可选的实施例中,请参阅图2,第一视频编码参数包括编码帧率以及GOP长度,步骤S40,包括步骤S41~S43,具体如下:
S41:将每个第一视频流的传输速度进行求和,获得第一传输速度;
S42:若第一传输速度大于或等于第一预设速度阈值,且视频编码性能值大于或等于第一预设性能值,降低编码帧率或者增加GOP长度,获得第二视频编码参数;
S43:若第一传输速度小于第二预设速度阈值,且视频编码性能值小于第二预设性能值,提高编码帧率或者减少GOP长度,获得第二视频编码参数。
其中,编码帧率指每秒显示的视频帧数,编码帧率越大,编码后的视频流的数据量越大。GOP长度是两个相邻I帧之间的帧数,GOP长度越大,编码后的视频流的数据量越小。
在本申请实施例中,若第一传输速度大于或等于第一预设速度阈值,表示第一视频流的数据量大,占用的网络带宽资源大。进一步地,若监测到视频编码性能值大于或等于第一预设性能值,则降低编码帧率或者增加GOP长度,来降低第一视频流的数据量。若监测到视频编码性能值小于第一预设性能值,则可以不做处理。
若第一传输速度小于第一预设速度阈值,表示第一视频流的数据量小,占用的网络带宽资源小。进一步地,若监测到视频编码性能值小于第一预设性能值,则可以提高编码帧率或者减少GOP长度,来提高第一视频流的数据量。若监测到视频编码性能值大于或等于第一预设性能值,则可以不做处理。
通过综合考虑第一传输速度以及视频编码性能值,来动态调整第一视频编码参数,可以自动快捷地获得第二视频编码参数。
在一个可选的实施例中,请参阅图3,步骤S50,包括步骤S51~S53,具体如下:
S51:根据第二视频编码参数,对若干个视频源设备中指定视频源设备发送的原始视频数据进行重新编码,获得第一编码结果;
S52:根据第一视频编码参数,对若干个视频源设备中非指定视频源设备发送的原始视频数据进行重新编码,获得第二编码结果;
S53:根据第一编码结果以及第二编码结果,获得若干个第二视频流。
其中,指定视频源设备可以是固定不变的一个或多个视频源设备,例如,指定视频源设备为教师摄像机或学生摄像机;指定视频源设备也可以是不固定的一个或多个视频源设备,是在所有视频源设备中进行轮次指定的视频源设备,例如,在当前次的第一视频编码参数调整时,指定视频源设备为教师摄像机和录播主机,在下一次的第一视频编码参数调整时,指定视频源设备为学生摄像机。非指定视频源设备可以是所有视频源设备中除指定视频源设备之外的视频源设备。
在本申请实施例中,通过第二视频编码参数对指定视频源设备发送的原始视频数据进行重新编码,第一视频编码参数对非指定视频源设备发送的原始视频数据进行重新编码,可以对不同的视频画面进行编码参数调整,自动快捷地获得第二视频流。
在一个可选的实施例中,请参阅图4,视频画面显示方法,包括步骤S61~S63,具体如下:
S61:接收多媒体显示平台发送的触发指令,根据触发指令,确定与目标视频画面对应的目标原始视频数据;其中,目标视频画面为在多媒体显示平台中对若干个视频画面中触发的一个或多个视频画面;目标原始视频数据为目标视频画面对应的原始视频数据;触发指令为多媒体显示平台响应于目标视频画面的触发操作而生成;
S62:根据第一视频编码参数,对目标原始视频数据进行编码,获得第三视频流;
S63:将第三视频流发送至多媒体显示平台,以使多媒体显示平台根据第三视频流,显示第三视频流对应的视频画面。
在本申请实施例中,多媒体显示平台上显示有多个视频画面,包括教师全景画面、教师特写画面、学生全景画面、学生特写画面、电脑画面、板书画面以及录播画面。学校管理员通过触控多个视频画面中的一个或几个视频画面进行查看,触控的视频画面为目标视频画面。例如,点击学生特写画面。多媒体显示平台响应于目标视频画面的触发操作,生成触发指令,将触发指令发送给录播主机,录播主机根据触发指令,确定目标视频画面的目标原始视频数据。视频编码模块按照第一视频编码参数,对目标原始视频数据进行编码,获得第三视频流,将第三视频流发送RTSP服务器,RTSP服务器将第三视频流封装成RTSP数据包发送给多媒体显示平台,多媒体显示平台对第三视频流进行解码渲染,显示第三视频流对应的视频画面。
由于目标视频画面可能是降低了编码帧率或者增加了GOP长度的视频画面,根据第一视频编码参数,对目标视频画面的目标原始视频数据进行重新编码,可以刷新多媒体显示平台上的目标视频画面,使得目标视频画面的编码帧率相对提高或者GOP长度相对减小,提高了目标视频画面的质量。
实施例2
下述为本申请系统实施例,可以用于执行本申请实施例1中方法的内容。对于本申请装置实施例中未披露的细节,请参照本申请实施例1中方法的内容。
请参见图5,其示出了本申请一个实施例提供的视频画面显示系统的结构示意图。本申请实施例提供的视频画面显示系统100,包括:
若干个视频源设备110、录播主机120和多媒体显示平台130,若干个视频源设备100与录播主机120连接,录播主机120与多媒体显示平台130连接;
录播主机120获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台130;
多媒体显示平台130根据若干个第二视频流,显示若干个视频画面。
上述实施例2提供的视频画面显示系统与实施例1提供的视频画面显示方法属于同一构思,其实现过程详见方法实施例步骤S10~S60,在此不再赘述。
在本申请一个实施例中,多媒体显示平台130响应于若干个视频画面中目标视频画面的触发操作,向录播主机120发送触发指令;其中,目标视频画面为在多媒体显示平台200中对若干个视频画面中触发的一个或多个视频画面;触发指令为多媒体显示平台130响应于目标视频画面的触发操作而生成;
录播主机120根据触发指令,确定与目标视频画面对应的目标原始视频数据,根据第一视频编码参数,对目标原始视频数据进行编码,获得第三视频流;将第三视频流发送至多媒体显示平台130;其中,目标原始视频数据为目标视频画面对应的原始视频数据;
多媒体显示平台130根据第三视频流,显示第三视频流对应的视频画面。
上述实施例2提供的视频画面显示系统与实施例1提供的视频画面显示方法属于同一构思,其实现过程详见方法实施例步骤S61~S63,在此不再赘述。
在一个可选的实施例中,多媒体显示平台130根据第三视频流,显示第三视频流对应的视频画面的步骤,包括:多媒体显示平台130对第三视频流中的关键帧进行解码渲染,显示关键帧对应的视频画面。
其中,关键帧(I帧)是一种特殊的帧类型,包含有一个视频帧的完整画面,它不依赖于其它帧进行解码。
录播主机120根据第一视频编码参数,对目标视频画面的目标原始视频数据进行编码,获得第三视频流,可以将第三视频流中的关键帧发送给多媒体显示平台130,多媒体显示平台130对关键帧进行解码渲染,可以自动快捷地显示关键帧对应的视频画面。
可选的,关键帧可以是IDR(Instantaneous Decoder Refresh,瞬时解码器刷新)帧,用于在视频序列中定期插入一个可靠的同步点,以确保解码器可以正确地解码视频流并恢复图像质量。通过将第三视频流中的IDR帧发送给多媒体显示平台130,多媒体显示平台130对IDR帧进行解码渲染,可以自动快捷地显示IDR帧对应的视频画面,并且提高了视频画面显示的效率。
在一个可选的实施例中,多媒体显示平台130根据第三视频流,显示第三视频流对应的视频画面的步骤,包括:多媒体显示平台130对第三视频流进行解码渲染,获得第三视频画面,多媒体显示平台130获取屏幕显示分辨率,根据屏幕显示分辨率,对第三视频画面进行缩放,显示缩放后的第三视频画面。
具体地,学校管理员在多媒体显示平台130上触控目标视频画面,对目标视频画面可以放大查看。具体地,获取第三视频画面的图像分辨率以及多媒体显示平台上显示设备的屏幕显示分辨率,根据图像分辨率以及屏幕显示分辨率,确定缩放比例,按照缩放比例,将第三视频画面进行缩放,可以自动快捷地显示缩放后的第三视频画面。
实施例3
下述为本申请装置实施例,可以用于执行本申请实施例1中方法的内容。对于本申请装置实施例中未披露的细节,请参照本申请实施例1中方法的内容。
请参见图6,其示出了本申请一个实施例提供的视频画面显示装置的结构示意图。本申请实施例提供的视频画面显示装置7,包括:
视频数据获取模块71,用于获取若干个视频源设备发送的原始视频数据;
第一视频流获得模块72,用于根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;
传输速度监测模块73,用于将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;
编码参数调整模块74,用于根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;
第二视频流获得模块75,用于根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;
视频画面显示模块76,用于将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。
可选的,编码参数调整模块,包括:
第一传输速度获得单元,用于将每个第一视频流的传输速度进行求和,获得第一传输速度;
第一比较单元,用于若第一传输速度大于或等于第一预设速度阈值,且视频编码性能值大于或等于第一预设性能值,降低编码帧率或者增加GOP长度,获得第二视频编码参数;
第二比较单元,用于若第一传输速度小于第二预设速度阈值,且视频编码性能值小于第二预设性能值,提高编码帧率或者减少GOP长度,获得第二视频编码参数。
可选的,第二视频流获得模块,包括:
第一编码结果获得单元,用于根据第二视频编码参数,对若干个视频源设备中指定视频源设备发送的原始视频数据进行重新编码,获得第一编码结果;
第二编码结果获得单元,用于根据第一视频编码参数,对若干个视频源设备中非指定视频源设备发送的原始视频数据进行重新编码,获得第二编码结果;
第二视频流获得单元,用于根据第一编码结果以及第二编码结果,获得若干个第二视频流。
可选的,视频画面显示装置,包括:
触发指令接收模块,用于接收多媒体显示平台发送的触发指令,根据触发指令,确定与目标视频画面对应的目标原始视频数据;其中,目标视频画面为在多媒体显示平台中对若干个视频画面中触发的一个或多个视频画面;目标原始视频数据为目标视频画面对应的原始视频数据;触发指令为多媒体显示平台响应于目标视频画面的触发操作而生成;
第三视频流获得模块,用于根据第一视频编码参数,对目标原始视频数据进行编码,获得第三视频流;
视频流发送模块,用于将第三视频流发送至多媒体显示平台,以使多媒体显示平台根据第三视频流,显示第三视频流对应的视频画面。
应用本申请实施例,通过获取若干个视频源设备发送的原始视频数据;根据第一视频编码参数,对每个原始视频数据进行编码,获得若干个第一视频流;将每个第一视频流传输至多媒体显示平台,并监测每个第一视频流的传输速度以及视频编码性能值;根据传输速度以及视频编码性能值,调整第一视频编码参数,获得第二视频编码参数;根据第二视频编码参数,对至少一个原始视频数据进行编码,获得若干个第二视频流;将若干个第二视频流传输至多媒体显示平台,以使多媒体显示平台根据若干个第二视频流,显示若干个视频画面。本申请通过实时监测编码后的第一视频流的传输速度以及视频编码性能值,对第一视频编码参数进行调整,从而动态调整原始视频数据在编码过程中占用的网络带宽资源,避免了视频画面出现卡顿现象,提高了视频画面显示的质量。
实施例4
下述为本申请设备实施例,可以用于执行本申请实施例1中方法的内容。对于本申请设备实施例中未披露的细节,请参照本申请实施例1中方法的内容。
请参阅图7,本申请还提供一种电子设备300,电子设备可以具体为计算机、手机、平板电脑、视频画面显示设备等,在本申请的示例性实施例中,电子设备300为视频画面显示设备,视频显示设备包括:至少一个处理器301、至少一个存储器302,至少一个显示器,至少一个网络接口303,用户接口304以及至少一个通信总线305。
其中,用户接口304主要用于为用户提供输入的接口,获取用户输入的数据。可选的,用户接口还可以包括标准的有线接口、无线接口。
其中,网络接口303可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中,通信总线305用于实现这些组件之间的连接通信。
其中,处理器301可以包括一个或者多个处理核心。处理器利用各种接口和线路连接整个电子设备内的各个部分,通过运行或执行存储在存储器内的指令、程序、代码集或指令集,以及调用存储在存储器内的数据,执行电子设备的各种功能和处理数据。可选的,处理器可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器可集成中央处理器(Central ProcessingUnit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示层所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器中,单独通过一块芯片进行实现。
其中,存储器302可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器可用于存储指令、程序、代码、代码集或指令集。存储器可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器可选的还可以是至少一个位于远离前述处理器的存储装置。如图7所示,作为一种计算机存储介质的存储器中可以包括操作系统、网络通信模块、用户接口模块、操作应用程序。
处理器可以用于调用存储器中存储的视频画面显示方法的应用程序,并具体执行上述所示实施例1的方法步骤,具体执行过程可以参见实施例1所示的具体说明,在此不进行赘述。
实施例5
本申请还提供一种计算机可读存储介质,其上储存有计算机程序,指令适于由处理器加载并执行上述所示实施例1的方法步骤,具体执行过程可以参见实施例所示的具体说明,在此不进行赘述。存储介质所在设备可以是个人计算机、笔记本电脑、智能手机、平板电脑等电子设备。
对于设备实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的设备实施例仅仅是示意性的,其中作为分离部件说明的组件可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中选定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中选定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中选定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种视频画面显示方法,其特征在于,包括如下步骤:
获取若干个视频源设备发送的原始视频数据;
根据第一视频编码参数,对每个所述原始视频数据进行编码,获得若干个第一视频流;
将每个所述第一视频流传输至多媒体显示平台,并监测每个所述第一视频流的传输速度以及视频编码性能值;
根据所述传输速度以及所述视频编码性能值,调整所述第一视频编码参数,获得第二视频编码参数;
根据所述第二视频编码参数,对至少一个所述原始视频数据进行编码,获得若干个第二视频流;
将若干个所述第二视频流传输至所述多媒体显示平台,以使所述多媒体显示平台根据若干个所述第二视频流,显示若干个视频画面。
2.根据权利要求1所述的视频画面显示方法,其特征在于:
所述第一视频编码参数包括编码帧率以及GOP长度;
所述根据所述传输速度以及所述视频编码性能值,调整所述第一视频编码参数,获得第二视频编码参数的步骤,包括:
将每个所述第一视频流的传输速度进行求和,获得第一传输速度;
若所述第一传输速度大于或等于第一预设速度阈值,且所述视频编码性能值大于或等于第一预设性能值,降低所述编码帧率或者增加所述GOP长度,获得第二视频编码参数;
若所述第一传输速度小于第二预设速度阈值,且所述视频编码性能值小于第二预设性能值,提高所述编码帧率或者减少所述GOP长度,获得第二视频编码参数。
3.根据权利要求1所述的视频画面显示方法,其特征在于:
所述根据所述第二视频编码参数,对至少一个所述原始视频数据进行编码,获得若干个第二视频流的步骤,包括:
根据所述第二视频编码参数,对若干个所述视频源设备中指定视频源设备发送的原始视频数据进行重新编码,获得第一编码结果;
根据所述第一视频编码参数,对若干个所述视频源设备中非指定视频源设备发送的原始视频数据进行重新编码,获得第二编码结果;
根据所述第一编码结果以及所述第二编码结果,获得若干个第二视频流。
4.根据权利要求1至3任意一项所述的视频画面显示方法,其特征在于,还包括:
接收所述多媒体显示平台发送的触发指令,根据所述触发指令,确定与目标视频画面对应的目标原始视频数据;其中,所述目标视频画面为在所述多媒体显示平台中对若干个所述视频画面中触发的一个或多个视频画面;所述目标原始视频数据为所述目标视频画面对应的原始视频数据;所述触发指令为所述多媒体显示平台响应于所述目标视频画面的触发操作而生成;
根据所述第一视频编码参数,对所述目标原始视频数据进行编码,获得第三视频流;
将所述第三视频流发送至所述多媒体显示平台,以使所述多媒体显示平台根据所述第三视频流,显示所述第三视频流对应的视频画面。
5.根据权利要求1至3任意一项所述的视频画面显示方法,其特征在于,还包括:
所述根据第一视频编码参数,对每个所述原始视频数据进行编码,获得若干个第一视频流的步骤之前,包括:
对每个所述原始视频数据进行预处理;其中,所述预处理包括但不限于去噪、去隔行、通道缩放以及通道锐化处理。
6.一种视频画面显示系统,其特征在于,还包括:
若干个视频源设备、录播主机和多媒体显示平台,若干个视频源设备与所述录播主机连接,所述录播主机与所述多媒体显示平台连接;
所述录播主机获取若干个所述视频源设备发送的原始视频数据;根据第一视频编码参数,对每个所述原始视频数据进行编码,获得若干个第一视频流;将每个所述第一视频流传输至多媒体显示平台,并监测每个所述第一视频流的传输速度以及视频编码性能值;根据所述传输速度以及所述视频编码性能值,调整所述第一视频编码参数,获得第二视频编码参数;根据所述第二视频编码参数,对至少一个所述原始视频数据进行编码,获得若干个第二视频流;将若干个所述第二视频流传输至所述多媒体显示平台;
所述多媒体显示平台根据若干个所述第二视频流,显示若干个视频画面。
7.根据权利要求6所述的视频画面显示系统,其特征在于:
所述多媒体显示平台响应于若干个所述视频画面中目标视频画面的触发操作,向所述录播主机发送触发指令;其中,所述目标视频画面为在所述多媒体显示平台中对若干个所述视频画面中触发的一个或多个视频画面;所述触发指令为所述多媒体显示平台响应于所述目标视频画面的触发操作而生成;;
所述录播主机根据所述触发指令,确定与所述目标视频画面对应的目标原始视频数据,根据所述第一视频编码参数,对所述目标原始视频数据进行编码,获得第三视频流;将所述第三视频流发送至所述多媒体显示平台;其中,所述目标原始视频数据为所述目标视频画面对应的原始视频数据;
所述多媒体显示平台根据所述第三视频流,显示所述第三视频流对应的视频画面。
8.一种视频画面显示装置,其特征在于,包括:
视频数据获取模块,用于获取若干个视频源设备发送的原始视频数据;
第一视频流获得模块,用于根据第一视频编码参数,对每个所述原始视频数据进行编码,获得若干个第一视频流;
传输速度监测模块,用于将每个所述第一视频流传输至多媒体显示平台,并监测每个所述第一视频流的传输速度以及视频编码性能值;
编码参数调整模块,用于根据所述传输速度以及所述视频编码性能值,调整所述第一视频编码参数,获得第二视频编码参数;
第二视频流获得模块,用于根据所述第二视频编码参数,对至少一个所述原始视频数据进行编码,获得若干个第二视频流;
视频画面显示模块,用于将若干个所述第二视频流传输至所述多媒体显示平台,以使所述多媒体显示平台根据若干个所述第二视频流,显示若干个视频画面。
9.一种电子设备,其特征在于,包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行如权利要求1至5中任意一项所述的视频画面显示方法。
10.一种计算机可读存储介质,其上储存有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至5中任意一项所述的视频画面显示方法。
CN202310693204.7A 2023-06-12 2023-06-12 视频画面显示方法、系统、装置、电子设备以及存储介质 Pending CN116916071A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310693204.7A CN116916071A (zh) 2023-06-12 2023-06-12 视频画面显示方法、系统、装置、电子设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310693204.7A CN116916071A (zh) 2023-06-12 2023-06-12 视频画面显示方法、系统、装置、电子设备以及存储介质

Publications (1)

Publication Number Publication Date
CN116916071A true CN116916071A (zh) 2023-10-20

Family

ID=88365802

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310693204.7A Pending CN116916071A (zh) 2023-06-12 2023-06-12 视频画面显示方法、系统、装置、电子设备以及存储介质

Country Status (1)

Country Link
CN (1) CN116916071A (zh)

Similar Documents

Publication Publication Date Title
US9930308B2 (en) Platform-agnostic video player for mobile computing devices and desktop computers
US20080101455A1 (en) Apparatus and method for multiple format encoding
CN108063976B (zh) 一种视频处理方法及装置
CN110868625A (zh) 一种视频播放方法、装置、电子设备及存储介质
US20200092600A1 (en) Method and apparatus for presenting video information
WO2018010662A1 (zh) 视频文件的转码方法,装置及存储介质
Shi et al. Freedom: Fast recovery enhanced vr delivery over mobile networks
US11178377B2 (en) Methods and apparatus for spherical region presentation
US20170103577A1 (en) Method and apparatus for optimizing video streaming for virtual reality
US20150156557A1 (en) Display apparatus, method of displaying image thereof, and computer-readable recording medium
EP4300985A2 (en) Adaptive panoramic video streaming using composite pictures
US10805570B2 (en) System and method for streaming multimedia data
JP6672327B2 (ja) ユーザヘッドセットへの球状ビデオ帯域幅を減少させる方法および装置
CN106162232A (zh) 视频播放控制方法及装置
CN111343503B (zh) 视频的转码方法、装置、电子设备及存储介质
US20150117515A1 (en) Layered Encoding Using Spatial and Temporal Analysis
CN111885346A (zh) 画面码流合成方法、终端、电子设备和存储介质
EP3657316A1 (en) Method and system for displaying virtual desktop data
KR20210029746A (ko) 클라우드 스트리밍 서비스 시스템, 스틸 이미지 압축 기법을 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
CN114339412A (zh) 视频质量增强方法、移动终端、存储介质及装置
CN112261408B (zh) 用于头戴显示设备的图像处理方法、装置及电子设备
CN116450149B (zh) 一种硬件解码方法、设备及存储介质
US10049424B2 (en) Method and device for post processing of a video stream
CN114466228B (zh) 一种提高投屏显示流畅度的方法、设备及存储介质
CN116916071A (zh) 视频画面显示方法、系统、装置、电子设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination