CN105871916A - 视频流送显处理方法、装置及系统 - Google Patents

Abstract

本发明实施例提供一种视频流送显处理方法、装置及系统，预设水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；该方法包括：视频显示装置从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据并送显至第一显示区；视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间。本发明能提高视频流送显处理效率。

Description

视频流送显处理方法、装置及系统

技术领域

本发明涉及视频处理技术领域，具体涉及一种视频流送显处理方法、装置及系统。

背景技术

摄像机对现场场景进行连续图像捕捉得到视频图像，视频图像经编码后形成视频流文件。视频播放装置，读取来自网络或者本地的视频流文件，对其进行解码、渲染后，传送给显示屏，在显示屏的显示区将视频图像连续显示出来，以满足人们影音娱乐、现场直播、现场管控、远程会议、学习培训的需要。

对于视频流场景，帧率往往较低，如30帧/秒，但显示屏的显示频率如果是60帧/秒，在帧显示方式下，视频流送显处理时，为了使视频流的帧率与显示屏的显示频率匹配，需要对送显的视频帧进行重复渲染，再送显，重复渲染会造成视频流送显处理质量和处理效率下降。

为了提升视频流送显处理效率，本领域的研究人员，一直致力于视频显示装置频流送显处理能力的提升。因此，改进视频流送显处理方法及装置，是视频处理技术领域所期望解决的技术问题。

发明内容

本发明的目的在于提供一种具有良好帧显示效果的视频流送显处理方法，以提升视频流送显处理效率，及提高显示屏所显示的视频图像的质量。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明实施例提供了一种视频流送显处理方法，应用于与显示屏相关联的视频显示装置，显示屏预设有水平分界线，水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；第二显示区的面积大于或者等于0，第一显示区的面积大于0；方法包括：

视频显示装置从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

视频显示装置将读取的渲染完成的第一视频帧数据送显至第一显示区；

视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间。

第二方面，本发明实施例还提供了一种视频流送显处理装置，应用于与显示屏相关联的视频显示装置，显示屏预设有水平分界线，水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；第二显示区的面积大于或者等于0，第一显示区的面积大于0；

视频流送显处理装置包括：

第一视频帧数据送显读取单元，用于从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元，用于将读取的渲染完成的第一视频帧数据送显至第一显示区；

第二视频帧数据渲染控制单元，用于在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间。

第三方面，本发明实施例还提供了一种视频流送显处理系统，包括视频播放装置、与视频播放装置电连接的显示屏,视频播放装置包括处理器，与处理器关联的解码器，与处理器总线连接的存储器、视频显示装置；

显示屏预设有水平分界线，水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；第二显示区的面积大于或者等于0，第一显示区的面积大于0；

视频播放装置还包括视频流送显处理装置，视频流送显处理装置安装于存储器中并包括一个或多个由处理器执行的软件功能模块，视频流送显处理装置包括：

第一视频帧数据送显读取单元，用于从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元，用于将读取的渲染完成的第一视频帧数据送显至第一显示区；

第二视频帧数据渲染控制单元，用于在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间。

本发明实施例提供的视频流送显处理方法、装置及系统，在第一视频帧数据重复送显完成后，视频显示装置利用第二显示区所在第二显示屏扫描显示过程，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。在第一视频帧数据送显期间，帧缓存地址不发生改变，且第一视频帧数据一直保存在帧缓存中，重新送显第一视频帧数据时，视频显示装置直接从帧缓存读取即可。由于第一视频帧数据重复送显时，不再对第一视频帧数据重复渲染，从而节省了帧缓存资源，提升了视频流送显处理效率。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

图1示出了本发明实施例应用环境的结构示意图。

图2示出了针对视频图像显示区位于水平分界线一侧的情况本发明实施例应用于监控系统的结构示意图。

图3示出了针对视频图像显示区位于水平分界线一侧的情况本发明实施例提供的一种视频流送显处理方法的流程图。

图4示出了针对视频图像显示区横跨水平分界线的情况本发明实施例应用于监控系统的结构示意图。

图5示出了视频流送显后对应的视频图像显示区被水平分界线分割第一显示区和第二显示区的情况。

图6示出了针对视频图像显示区横跨水平分界线的情况本发明实施例提供的一种视频流送显处理方法的流程图。

图7示出了本发明实施例提供的一种应用于基于智能终端设备的监控系统的视频流送显处理方法的流程图。

图8示出了本发明实施例提供的一种视频流送显处理装置的结构示意图。

图9示出了本发明实施例提供的一种视频流送显处理系统的结构示意图。

其中，附图标记与部件名称之间的对应关系如下：

显示屏100，第一显示屏区110,第一显示区1110，第二显示屏区120,第二显示区1210，水平分界线130，视频播放装置200，视频显示装置210，图像显示运算处理模块2100，帧缓存2110，处理器220，系统内存230,存储器240,视频流送显处理装置250,第一视频帧数据送显读取单元2510,第一视频帧数据送显单元2520,第二视频帧数据渲染控制单元2530,第三视频帧数据渲染控制单元2540,第三视频帧数据送显读取单元2550，第三视频帧数据送显单元2560,视频流260。

具体实施方式

在帧显示方式下，要将视频流的视频帧数据在显示屏上完整显示出来，现有技术是，在帧消隐期开始前，就在帧缓存内完成下一视频帧数据渲染，在帧消隐期结束后，视频显示装置读取帧缓存内渲染完成的视频帧数据，将其作为当前视频帧数据传送给显示屏，即可在显示屏上将视频流的视频帧数据以完整的视频图像显示出来。

上述帧消隐期，是指帧显示方式下显示屏完成一帧扫描回到另一帧起点的逆程时间。

在帧消隐期开始前，就完成下一视频帧数据渲染，那么，下一视频帧数据渲染时间区间和当前视屏帧数据送显时间区间会重叠。但，如果下一视频帧数据渲染和当前视屏帧数据送显，在同一帧缓存进行，下一视频帧数据渲染会将当前视屏帧数据覆盖。

现有的视频流送显处理方法，正是基于上述技术事实，采用两个帧缓存，一个用作渲染帧缓存时，另一个用作送显帧缓存，视频显示装置读取送显帧缓存中的当前视频帧数据传送给显示屏显示时，渲染帧缓存按顺序读取帧缓存队列中的下一视频帧数据渲染。在帧消隐期，通过缓存页面翻转(PageFlip)技术,将渲染帧缓存地址替换为送显帧帧缓存地址，也即将原来的渲染帧缓存转换成新的送显帧缓存，将原来的送显帧缓存转换成新的渲染帧缓存。相应地，渲染完成的下一视频帧数据也就作为当前视频帧数据，帧消隐期结束后，从新的送显帧缓存中读取当前视频帧数据传送给显示屏显示，同时，新的渲染帧缓存从帧缓存队列中读取新的下一视频帧数据渲染。

显示屏的显示频率，通常大于或者等于为60帧/秒，而要进行送显的视频流的帧率通常在30帧/秒左右。因此，每一视频帧数据第一次送显完成后，需要从帧缓存队列中再次读取当前视频帧数据所对应的视频帧数据进行重复渲染，然后再送显，从而确保视频流以连续且流畅的视频图像序列显示出来。

但，重复渲染会消耗大量本应该用于视频帧缩放、后处理的帧缓存资源，及消耗大量帧缓存带宽资源。

发明人在实现本发明的过程中发现，现有的视频流送显处理方法，之所以采用两个帧缓存分别进行当前视频帧数据送显和下一视频帧数据渲染，其根本原因并非在于只有采用两个帧缓存才实现，真实的原因是，整帧渲染和整帧送显同时进行，必须使用两个帧缓存。

发明人研究发现，之所以采用整帧渲染和整帧送显同时进行，其根本原因并非在于只有采用整帧渲染和整帧送显同时进行，所有扫描格式的视频帧数据送显后在显示屏显示的视频图像才完整，真实的原因是，隔行扫描视频帧数据送显后，在显示屏上扫描显示时，是先扫描显示奇数行，奇数行扫描完成后再扫描显示偶数行，因此，要确保隔行扫描视频帧数据送显后在显示屏显示的视频图像的完整性，必须采用整帧渲染和整帧送显同时进行的方式送显处理隔行扫描视频帧数据。而逐行扫描视频帧数据送显后，在显示屏上显示时是逐行扫描显示，因此，逐行扫描视频帧数据，可不采用整帧渲染和整帧送显的方式，也能在显示屏上完整显示出来。

隔行扫描技术先于逐行扫描技术产生，但，在同一视频图像尺寸，就所包含的信息量而言，与隔行扫描视频帧相比逐行扫描视频帧要大得多，对视频帧数据传送带宽的要求也要高得多，对摄像机硬件及视频播放装置的硬件要求要高得多，导致隔行扫描技术先得到普及。

现有的视频播放装置，如Pc，平板电脑，播放视频时，显示屏的扫描显示过程包括视频图像显示区的扫描显示和视频图像显示区以外的显示区的扫描显示。也即在系统界面扫描显示的基础上，叠加视频图像的扫描显示。

视频流播放显示的过程包括：视频流解码，解码后视频流的视频帧数据逐帧渲染和逐帧送显，及送显后的视频帧数据在显示屏扫描显示。其中，视频流的视频帧数据逐帧渲染和逐帧送显，也即视频流送显处理。

视频播放装置的帧缓存资源紧张，通过扩展显示内存容量，或者更换新升级的视频显示装置，就可减缓显示内存紧张。

但是，随着分辨率为1920*1080的高清摄像机的普及，及分辨率为3840*2160的超高清摄像机的投入使用，采用现有的视频流送显处理方法对上述摄像机录制得到的逐行扫描视频帧数据进行送显处理，对帧缓存容量及带宽要求也要提高好几倍，重复渲染当前视频帧所造成的帧缓存资源及帧缓存带宽消耗也要高好几倍。因此，必须对现有的视频流送显处理方法进行改进。

本发明实施例提供一种视频流送显处理方法、装置及系统。该方法、装置及系统,按顺序从帧缓存队列中读取逐行扫描视频帧数据进行渲染，渲染完成的逐行扫描视频帧数据被视频显示装置读取并传送给显示屏显示。在本发明实施例中，逐行扫描视频帧为逐行扫描视频流的视频帧，逐行扫描视频流为逐行扫描摄像机录制得到的视频文件解码后的视频流；逐行扫描视频流，可以是标清视频流，也可以是高清视频流，还可以是超高清视频流。

该方法、装置及系统可应用于如图1所示的应用环境中。如图1所示，该应用环境包括显示屏100、与显示屏100连接的视频播放装置200；视频播放装置200包括处理器220、与处理器220总线连接的视频显示装置210；视频显示装置210包括图像显示运算处理模块2100、与图像显示运算处理模块2100总线连接的帧缓存2110；视频显示装置210电连接显示屏100。该应用环境还包括与视频播放装置200的处理器220相关联的解码器(图未示)。

于本发明实施例中，视频播放装置200，可以是数字电视设备、智能电视设备；也可以是计算机相关设备，如视频服务器、数字视频录像机DVR、网络硬盘录像机NVR、图形工作站、PC机、笔记本电脑、及其他视频监控输出设备；还可以是智能终端设备，如平板电脑、智能手机、可播放视频的游戏机。视频播放装置200可以具有显示屏100，也可以具有与显示器电连接的显示接口。

如果视频播放装置200为数字电视设备、智能电视设备，那么视频播放装置200还包括视频信号输入接口，视频信号输入接口用于连接视频信号输出装置或系统。视频信号输出装置可以是摄像机，也可以是机顶盒，也可以基于存储器的播放器，如DVD播放器、硬盘视频播放器。视频信号输出系统，可以是广电网络、也可以是有线网络。

于本发明实施例中，与视频播放装置200的处理器220相关联的解码器，既可以是硬件解码器，也可以是软件解码器。硬件解码器，可以集成在视频播放装置200中，也可以外置于视频播放装置200。对于数据电视、智能电视，该解码器为集成在数据电视、智能电视内的硬件解码器。

于本发明实施例中，视频显示装置210，对于数据电视，是图像显示运算处理电路；对于智能电视，是具有图形加速芯片的图像显示运算处理电路；对于计算机相关设备和智能终端设备，视频显示装置210可以是显卡，显卡可以是独立显卡，也可以是集成在设备母板电路上的集成显卡。

于本发明实施例中，帧缓存2110，为用于渲染视频帧数据的物理内存区，其可以是整块物理内存，也可以是将整块物理内存分区得到的物理内存区。对于数据电视、智能电视，用于渲染视频帧数据的物理内存区为显示内存；对于计算机相关设备和智能终端设备，如果视频显示装置210只采用其上集成的显示内存进行图像显示，用于渲染视频帧数据的物理内存区为视频显示装置210的显示内存；如果视频显示装置210与系统共享部分系统内存，用于渲染视频帧数据的物理内存区可以是视频显示装置210的显示内存，也可以是共享的系统内存。

于本发明实施例中，在视频流送显处理前，视频播放装置200，读取来自网络或者本地的视频流文件，将解码后视频流260的视频帧数据传送给视频显示装置210，在视频显示装置210的图像显示运算处理模块2100的控制下视频显示装置210在获取解码后的一视频帧数据后，将该视频帧数据存入帧缓存队列；视频流送显处理时，帧缓存2110按顺序读取视频帧数据进行渲染，在送显时间到来时，视频显示装置210读取渲染完成的视频帧数据，传送给显示屏100显示。

于本发明实施例中，图1所示的本发明实施例应用环境，可以是视频监控系统、视频会议系统、视频直播系统、视频点播系统、广播电视系统中涉及视频流播放显示的子系统部分，也可以是主要由视频播放装置和显示屏构成的视频播放系统。本发明实施例提供的一种视频流送显处理方法、装置及系统，均可应用于上述应用环境。

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例，仅仅是本发明实施例的一部分，而不是全部。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

第一实施例

所述第一实施例以数字电视监控系统为例，对本发明的视频流送显处理方法进行说明。

参见图1所示的本发明实施例应用环境的结构示意图和图2所示的针对视频图像显示区位于水平分界线一侧的情况本发明实施例应用于监控系统的结构示意图，数字电视监控系统包括：以数字摄像机录制的视频流为待送显处理视频流，以具有硬件解码器的数字电视机或者智能电视机为视频播放装置，以数字电视机或者智能电视机的图像显示运算处理电路为视频显示装置，以数字电视机或者智能电视机的显示屏为视频流送显后对应的视频图像的显示装置。其中，图像显示运算处理电路包括至少一块帧缓存。

数字电视监控系统工作时，显示屏中有至少一个预设尺寸的视频图像显示区，每个视频图像显示区对应显示一个数字摄像机录制的现场视频图像。数字电视监控系统工作期间，视频图像显示区的尺寸大小和位置基本不改变。

图2对应的实施例中，视频图像显示区位于水平分界线一侧的情况。请参阅图2所示，在预设水平分界线时，在视频图像显示区行与视频图像显示区行之间的间隔处预设水平分界线。该水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；第二显示区的面积大于或者等于0，第一显示区的面积大于0。

需要说明的是，该水平分界线为虚拟分界线，水平分界线的位置可根据实际需要作出调整，并非在显示屏上预设的不能调整的实线条。

图3示出了针对视频图像显示区位于水平分界线一侧的情况本发明实施例提供的一种视频流送显处理方法的流程图。请参阅图3，该方法包括：

S110,视频显示装置从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

S120,视频显示装置将读取的渲染完成的第一视频帧数据送显至第一显示区；

S130,视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；其中，第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间。

在本发明第一实施例中，第一视频帧数据为向第一显示区送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据。

在本发明第一实施例中，第一视频帧数据、第二视频帧数据均为逐行扫描视频帧数据

在本第一实施例中，视频图像显示区为第一显示区，第一显示区显示的视频图像为第一视频帧数据和第二视频帧数据送显后扫描显示的视频图像。

在本发明第一实施例中，视频显示装置为数字电视机或者智能电视机的图像显示运算处理电路，帧缓存为数字电视机图像显示运算处理电路中的显示内存，该帧缓存与第一显示区相对应，第一显示区显示的视频图像所对应的视频帧数据存储在该帧缓存中。

上述帧缓存，可以是一整块帧缓存，也可以是将一整块帧缓存划分成两个帧缓存区中的一个。

本发明第一实施例工作时，在显示屏扫描显示过程中，当扫描显示到第一显示区的开始行时，图像显示运算处理电路从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，将读取的渲染完成的第一视频帧数据传送给第一显示区，通过扫描显示，在第一显示区将第一视频帧数据对应的视频图像完整显示出来。

为了使视频流帧率与显示屏显示频率匹配，在步骤S130前，也即在第二视频帧数据被读取到与第一显示区对应的帧缓存前，步骤S120后，还包括：当第一显示区显示的视频图像需要重复送显时，视频显示装置再次从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，送显至第一显示区。渲染完成的第一视频帧数据的重复送显次数，依视频流的帧率与显示屏的显示频率匹配需要而定，例如视频流帧率为30帧/秒，显示屏显示频率为60帧/秒，那么需要重复送显一次。

第一视频帧数据传送给第一显示区扫描显示完成后，图像显示运算处理电路在第二显示区所在第二显示屏区扫描显示过程中，从帧缓存队列中按顺序读取第二视频帧数据，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。

在本发明第一实施例中，如果第一显示区在水平分界线的上方，那么在第二显示屏扫描显示开始到帧消隐区结束的时间内，图像显示运算处理电路控制与第一显示区对应的帧缓存，从帧缓存队列中读取第二视频帧数据并完成渲染；如果第一显示区在水平分界线的下方，那么在上次帧消隐区开始到第二显示屏扫描显示结束的时间内，图像显示运算处理电路控制与第一显示区对应的帧缓存从帧缓存队列中读取第二视频帧数据并完成渲染。上述两种情况均是在第一显示区扫描显示完成后才进行。

当然，本发明第一实施例，不局限于以数字电视机和智能电视机为视频播放装置的数字电视监控系统，也适用于计算机相关设备为视频播放装置的数字电视监控系统，还适用于智能终端设备为视频播放装置的监控系统。在采用计算机相关设备或者智能终端设备为视频播放装置时，视频显示装置为显卡，帧缓存可以是显卡的显示内存，也可以是系统内存。

当然，本发明第一实施例，还适用于视频会议系统、视频直播系统、视频点播系统、广播电视系统，相应地，视频显示装置、帧缓存随着上述系统所采用的视频播放装置作适应性调整。

本发明第一实施例，还适用于采用计算机相关设备、智能终端设备、数字电视、智能电视播放来自网络或者本地视频文件的情况。

本发明第一实施例，不局限于对一路视频流进行送显处理，只要视频显示装置具有的帧缓存块数大于或者等于需要送显的视频流路数，就能对多路数的视频流进行送显处理。

本第一实施例提供的视频流送显处理方法，在第一视频帧数据重复送显完成后，视频显示装置利用第二显示区所在第二显示屏扫描显示过程，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。在第一视频帧数据送显期间，帧缓存地址不发生改变，且第一视频帧数据一直保存在帧缓存中，重新送显第一视频帧数据时，视频显示装置直接从帧缓存读取即可。由于第一视频帧数据重复送显时，不再对第一视频帧数据重复渲染，从而节省了帧缓存资源，提升了视频流送显处理效率。

第二实施例

所述第二实施例以基于视频服务器的监控系统为例，对本发明的视频流送显处理方法进行说明。

所述基于视频服务器的监控系统，为采用视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种作为视频播放装置的监控系统。上述视频服务器不仅包括传统意义上的视频服务器，还包括可用于视频播放的其他计算机设备，如图形工作站、PC机、笔记本电脑、及视频处理能力较强的平板电脑。

参见图1所示的本发明实施例应用场景的结构示意图，基于视频服务器的监控系统包括：以摄像机录制的视频流为待送显处理视频流，以视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种为视频播放装置，以它们对应的显卡为视频显示装置，显卡具有至少一块帧缓存；以显示器的显示屏为视频流送显后对应的视频图像的显示装置；显示器，可以是为视频服务器配置的显示器，也可以是大屏幕显示器，还可以是电视墙。

基于视频服务器的监控系统，和数字电视监控系统一样，显示屏中有至少一个预设尺寸的视频图像显示区，一个视频图像显示区可以是一个视频图像显示窗口，也可以是一个视频图像显示窗口包含多个显示控件，本发明实施例不对视频图像显示区具体形式做限定。每个视频图像显示区对应显示一个摄像机录制的现场视频图像。通常多个视频图像显示区成行成列布置在显示屏上，行与行之间有间隔。当然，多个视频图像显示区也可以成不规则形式排列在显示屏上，本发明对具体排列形式不做限定。在监控现场处于正常状态时，视频图像显示区的位置确定，其大小和位置基本不改变；但当监控现场出现异常状态时，需要对监控现场异常所对应的视频图像显示区进行放大处理。

监控现场处于正常状态，也即图1所示本发明实施例应用环境及图2所示的针对视频图像显示区位于水平分界线一侧的情况本发明实施例应用于监控系统。针对监控现场处于正常状态，本发明第二实施例提供视频流送显处理方法，与本发明第一实施例提供视频流送显处理方法相同。

需要说明的是，本发明第二实施例中的水平分界线与本发明第一实施例中的水平分界线一样，为虚拟分界线，水平分界线的位置可根据实际需要作出调整，并非在显示屏上预设的不能调整的实线条。

本发明第二实施例提供视频流送显处理方法与本发明第一实施例提供视频流送显处理方法在实施上还是存在一点差异。在本发明第二实施例中，为了配合监控现场出现异常状态的视频流送显处理时对视频图像显示区进行放大处理，需要采用两个帧缓存，该两个帧缓存可以是两个帧缓存，也可以是将一整块帧缓存划分得到的两个帧缓存区，本发明第二实施例针对视频图像显示区位于水平分界线一侧的情况提供的视频流送显处理方法采用两个帧缓存中的一个来渲染第二视频帧数据。

当监控现场出现异常状态时，需要对监控现场异常所对应的视频图像显示区进行放大处理。视频图像显示区放大处理包括放大后的视频图像显示区位于水平分界线的一侧，放大后的视频图像显示区横跨水平分界线的情况。

针对放大后的视频图像显示区位于水平分界线的一侧，也即图1所示的本发明实施例应用环境的结构示意图和图2所示的针对视频图像显示区位于水平分界线一侧的情况本发明实施例应用于监控系统的结构示意图所示意的情况。针对放大后的视频图像显示区位于水平分界线的一侧，本发明第二实施例提供视频流送显处理方法，与本发明第二实施例针对监控现场处于正常状态提供视频流送显处理方法相同。

针对放大后的视频图像显示区横跨水平分界线的情况，参见图4所示的针对视频图像显示区横跨水平分界线的情况本发明实施例应用于监控系统的结构示意图，水平分界线将显示屏划分为第一显示屏区和第二显示屏区，在第一显示屏区中的视频图像显示区为第一显示区，在第二显示屏区中的视频图像显示区为第二显示区；第二显示区的面积大于0，第一显示区的面积大于0。

参见图5所示的视频流送显后对应的视频图像显示区被水平分界线分割第一显示区和第二显示区的情况。请参阅图5所示，要对横跨水平分界线的视频图像显示区进行视频流送显处理，需要按照第一显示区与第二显示区的面积比，将帧缓存队列中的每一视频帧数据分割成与第一显示区显示的视频图像所对应的视频帧数据和与第二显示区显示的视频图像所对应的视频帧数据。这时，帧缓存队列包括与第一显示区显示的视频图像所对应的视频帧数据队列和与第二显示区显示的视频图像所对应的视频帧数据队列，上述两个队列在时序上属于并行关系。

同时，两个帧缓存中的一个与第一显示区对应，另一个与第二显示区对应。第一显示区显示的视频图像所对应的视频帧数据存储在与第一显示区对应的帧缓存中。第二显示区显示的视频图像所对应的视频帧数据存储在与第二显示区对应的帧缓存中。

图6示出了针对视频图像显示区横跨水平分界线的情况本发明实施例提供的一种视频流送显处理方法的流程图。请参阅图6，该方法包括：

S210,视频显示装置从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

S220,视频显示装置将读取的渲染完成的第一视频帧数据送显至第一显示区；

S230,视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；其中，第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区对应的帧缓存完成渲染所需时间；

S240,视频显示装置从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据；

S250,视频显示装置将读取的渲染完成的第三视频帧数据送显至第二显示区；

S260,视频显示装置在第一显示区所在第一显示屏区扫描显示过程中，对被读取到与第二显示区对应的帧缓存中的第四视频帧数据进行渲染。其中，第三视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第四视频帧数据；其中，第一显示区所在第一显示屏区扫描显示时间，大于或等于第四视频帧数据在与第二显示区对应的帧缓存完成渲染所需时间。

在本发明第二实施例中，第一视频帧数据为向第一显示区送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据；第三视频帧数据为向第二显示区送显的当前视频帧数据，并非是排在帧缓存队列第三的视频帧数据；第四视频帧数据，为第三视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第四的视频帧数据。

在本发明第二实施例中，第一视频帧数据、第二视频帧数据、第三视频帧数据、第四视频帧数据均为逐行扫描视频帧数据。其中，第一视频帧数据和第三视频帧数据为同一视频帧数据分割成的两个视频帧块数据，第二视频帧数据和第四视频帧数据为同一视频帧数据分割成的两个视频帧块数据。

在本第二实施例中，视频图像显示区横跨水平分界线时，视频图像显示区包括第一显示区和第二显示区，第一显示区，是指将第一视频帧数据和第二视频帧数据送显到的显示区；第二显示区，是指将第三视频帧数据和第四视频帧数据送显到的显示区。

在本发明第二实施例中，视频显示装置为视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种的显卡，帧缓存可以是显卡的显示内存，也可以是上述系统的系统内存。

本发明第二实施例工作时，当显示屏扫描显示到第一显示区开始行时，显卡从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，将读取的渲染完成的第一视频帧数据传送给第一显示区，显示屏通过扫描显示，在第一显示区将第一视频帧数据对应的视频图像完整显示出来。

为了使视频流帧率与显示屏显示频率匹配，在步骤S230前，也即在第二视频帧数据被读取到与第一显示区对应的帧缓存前，步骤S220后，还包括：当第一显示区显示的视频图像需要重复送显时，视频显示装置再次从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，送显至第一显示区。渲染完成的第一视频帧数据的重复送显次数，依视频流的帧率与显示屏的显示频率匹配需要而定，例如视频流帧率为30帧/秒，显示屏显示频率为120帧/秒，那么需要重复送显三次。

第一视频帧数据传送给第一显示区扫描显示完成后，显卡在第二显示区所在第二显示屏区扫描显示过程中，从帧缓存队列中按顺序读取第二视频帧数据，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。

当显示屏扫描显示到第二显示区开始行时，显卡从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据，将读取的渲染完成的第三视频帧数据传送给第二显示区，显示屏通过扫描显示，在第二显示区将第三视频帧数据对应的视频图像完整显示出来。

为了使视频流帧率与显示屏显示频率匹配，在步骤S260前，也即在第四视频帧数据被读取到与第二显示区对应的帧缓存前，步骤S250后，还包括：当第二显示区显示的视频图像需要重复送显时，视频显示装置再次从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据，送显至第二显示区。渲染完成的第三视频帧数据的重复送显次数，与渲染完成的第一视频帧数据的重复送显次数相同。

第三视频帧数据传送给第二显示区扫描显示完成后，显卡在第一显示区所在第一显示屏区扫描显示过程中，从帧缓存队列中按顺序读取第四视频帧数据，对被读取到与第二显示区对应的帧缓存中的第四视频帧数据进行渲染。

在本发明第二实施例中，如果第一显示区在水平分界线的上方，那么在第二显示屏扫描显示开始到帧消隐区结束的时间内，显卡控制与第一显示区对应的帧缓存，从帧缓存队列中读取第二视频帧数据完成渲染；相应地，在第一显示屏扫描显示结束的时间内，显卡控制与第二显示区对应的帧缓存从帧缓存队列中读取第四视频帧数据完成渲染。如果第一显示区在水平分界线的下方，那么在第二显示屏扫描显示结束的时间内，显卡控制与第一显示区对应的帧缓存从帧缓存队列中读取第二视频帧数据完成渲染。相应地，在第一显示屏扫描显示开始到帧消隐区结束的时间内，显卡控制与第二显示区对应的帧缓存，从帧缓存队列中读取第四视频帧数据完成渲染。

无论哪种情况，第二视频帧数据渲染是在第一视频帧数据送显完成后进行，第四视频帧数据渲染是在第三视频帧数据送显完成后进行。因此，送显的第一视频帧数据和第二视频帧数据不需要重复渲染。

为了将第一视频帧数据对应的视频图像和第三视频帧数据对应的视频图像组成完整的视频图像，优选的方案是，与第一显示区对应的帧缓存和与第二显示区对应的帧缓存为通过一整块帧缓存划分得到的不同的帧缓存区；在第一视频帧数据、第三视频帧数据中在先送显的视频帧数据送显完成时，开始第一视频帧数据、第三视频帧数据中在后送显的视频帧数据送显；从而第一视频帧数据对应的视频图像和第三视频帧数据对应的视频图像组成完整的视频图像。

为了精确控制在后送显的视频帧数据的送显时间点，优选的方案是，在第一视频帧数据、第三视频帧数据中在先送显的视频帧数据开始送显时，启动与视频显示装置相关联的定时器，以在先送显的视频帧数据送显至的显示区扫描显示所需时间为定时时间设置定时器，依据定时器在定时时间到来时产生的中断信号，对在后送显视的视频帧数据进行送显。

如果第一显示区在水平分界线上方，那么第一视频帧数据为在先送显的视频帧数据，第三视频帧数据为在后送显的视频帧数据。这时，第一视频帧数据送显的同时，启动与显卡相关联的定时器，以第一显示区扫描显示所需时间为定时时间设置定时器，依据定时器在定时时间到来时产生的中断信号对第三视频帧数据进行送显。

如果第一显示区在水平分界线下方，那么第三视频帧数据为在先送显的视频帧数据，第一视频帧数据为在后送显的视频帧数据。这时，第三视频帧数据送显的同时，启动与显卡相关联的定时器，以第二显示区扫描显示所需时间为定时时间设置定时器，依据定时器在定时时间到来时产生的中断信号对第三视频帧数据进行送显。

在本发明第二实施例中，定时器,为多任务定时提醒装置。在视频流送显处理时，通过软件开启并设置定时器的中断输出时间点。定时器,可以采用CPLD复杂可编程逻辑器件模拟得到，也可以采用FPGA现场可编程门阵列模拟得到，还可以直接采用视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种的处理器的定时器。

如果视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种的处理器有空闲定时器，则直接采用该空闲定时器作为与显卡件相关联的定时器；直接采用视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种的处理器的空闲定时器，其与显卡关联操作简单，定时效果好。

如果视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种的处理器没有空闲定时器，那么采用CPLD复杂可编程逻辑器件或者FPGA现场可编程门阵列模拟定时器。这时需要将CPLD复杂可编程逻辑器件或者FPGA现场可编程门阵列电连接显卡。

为了提高定时器的使用方便性，优先的方案是，定时器为CPLD复杂可编程逻辑器件，相较于FPGA现场可编程门阵列，CPLD复杂可编程逻辑器件的中断输出更快、更精准，使用起来更方便，更易于获得，使用成本更低。

虚拟的水平分界线将显示屏划分为第一显示屏区和第二显示屏区，也即将显示屏的扫描显示过程分为第一显示屏区扫描显示过程和第二显示屏区扫描显示过程。因此，才能做到在第一显示区显示的视频图像所对应的第一视频帧数据送显完成后，利用第二显示屏区扫描显示过程，对第一显示区下一个时间点要显示的视频图像所对应第二视频帧数据进行渲染；在第二显示区显示的视频图像所对应的第三视频帧数据送显完成后，利用第一显示屏区扫描显示过程，对第二显示区下一个时间点要显示的视频图像所对应第四视频帧数据进行渲染。

水平分界线预设位置，关系到第一显示区和第二显示区的面积大小，也相应影响到将同一视频帧数据分割成第一显示区显示的视频图像所对应的视频帧数据和第二显示区显示的视频图像所对应的视频帧数据的分割比例。该分割比例又直接关系到第二视频帧数据和第四视频帧数据的渲染效率和渲染质量。

为了提高第二视频帧数据和第四视频帧数据的渲染效率和渲染质量，优选的方案是，第一显示屏区和第二显示屏区之间的面积比为1:1。

第一显示屏区和第二显示屏区之间的面积比为1:1，也即，水平分界线位于显示屏的中间位置，这样，不论视频图像显示区处于显示屏中哪个位置，均具有足够的时间完成第二视频帧数据及第四视频帧数据渲染，从而提高视频流的送显处理质量。同时，水平分界线位于显示屏的中间位置，绝大多数时候第一显示区面积和第二显示区面积差异较小，以定时器产生一个中断事件作为在后送显的视频帧数据送显的触发事件，实现起来也容易很多。

上述第一显示屏区和第二显示屏区之间的面积比为1:1，并非绝对的1:1，是指第一显示屏区面积与第二显示屏区面积相同或者相近。

将一整块帧缓存划分成两个帧缓存区，与第一显示区对应的帧缓存和与第二显示区对应的帧缓存。如果一个帧缓存区容量过大，另一个帧缓存区容量就会过小。容量过小的帧缓存区，用于渲染数据信息较大的视频帧数据时，可能出现无法渲染，即使能渲染，渲染质量和渲染效率也会较低。

为了提高整块帧缓存划分成两个帧缓存区的通用性，优选的方案是，与第一显示区对应的帧缓存和与第二显示区对应的帧缓存的容量比为1:1。

与第一显示区对应的帧缓存和与第二显示区对应的帧缓存的容量比为1:1，那么，视频流送显处理时，无论单独使用哪个帧缓存区来渲染下一个时间点要显示的视频图像所对应视频帧数据，均能实现有效渲染，且保持较高的渲染质量和渲染效率。当两个帧缓存区同时使用时，两个帧缓存区工作负载均衡，从而整体上提高视频流送显处理能力。

当然，本发明第一实施例，不局限于以视频服务器、数字视频录像机DVR、网络硬盘录像机NVR中的一种为视频播放装置的监控系统，也适用于以数字电视机和智能电视机为视频播放装置的数字电视监控系统，及适用于智能终端设备为视频播放装置的监控系统。在采用智能终端设备为视频播放装置时，视频显示装置为显卡，帧缓存可以是显卡的显示内存，也可以是系统内存；在采用数字电视机和智能电视机为视频播放装置时，视频显示装置为数字电视机或者智能电视机的图像显示运算处理电路，帧缓存为数字电视机图像显示运算处理电路中的显示内存。

当然，本发明第二实施例，还适用于视频会议系统、视频直播系统、视频点播系统、广播电视系统，相应地，视频显示装置、帧缓存随着上述系统所采用的视频播放装置作适应性调整。

本发明第二实施例，还适用于采用计算机相关设备、智能终端设备、数字电视、智能电视播放来自网络或者本地视频文件的情况。

本发明第二实施例，不局限于对一路视频流进行送显处理，只要视频显示装置具有的帧缓存块数大于或者等于需要送显的视频流路数，就能对多路数的视频流进行送显处理。

本第二实施例提供的视频流送显处理方法，与第一显示区对应的帧缓存中的第二视频帧数据渲染，是在第一视频帧数据重复送显完成后进行与第二显示区对应的帧缓存中的第四视频帧数据渲染，是在第二视频帧数据重复送显完成后进行。在第一视频帧数据、第三视频帧数据重复送显期间，帧缓存地址不发生改变，因此，重复送显时，不需要对第一视频帧数据、第三视频帧数据重复渲染，从而节省了帧缓存资源，提升了视频流送显处理效率。

第三实施例

所述第三实施例以基于智能终端设备的监控系统为例，对本发明的视频流送显处理方法进行说明。

参见图1所示的本发明实施例应用场景的结构示意图，基于智能终端设备的监控系统，以数字摄像机录制的视频流为待送显处理视频流，以智能终端设备，如平板电脑、智能手机为视频播放装置，以智能终端设备的显卡为视频显示装置，以智能终端设备的显示屏为为视频流送显后对应的视频图像的显示装置。智能终端的显卡，具有至少一块帧缓存。

基于智能终端设备的监控系统，主要用于对局部空间环境进行视频监控，例如采用基于智能手机的APP查看门禁处的现场情况，或者采用基于平板电脑的APP远程查看住宅内的现场情况；还用于通过智能手机或者平板电脑登陆基于视频服务器的监控系统的管理服务器，远程查看异常现场情况。

由于智能终端设备的显示屏尺寸较小，视频播放时多为满屏显示，因此，可将水平分界线预设在显示屏的中间部位，可以将水平分界线两侧的任意一个显示屏区作为第一显示屏区，第一显示屏区的视频图像显示区为第一显示区，第一显示屏区确定后，第二显示屏区及相应的第二显示区也就确定。满屏显示时，第一显示区的面积大于0，第二显示区的面积大于0。

需要说明的是，本发明第三实施例中的水平分界线与本发明第一实施例中的水平分界线及本发明第二实施例中的水平分界线一样，为虚拟分界线，水平分界线的位置可根据实际需要作出调整，并非在显示屏上预设的不能调整的实线条。

为了便于清楚阐述在本发明第三实施例的技术方案，在本发明第三实施例中，假定第一显示区先于第二显示区扫描显示，但需要注意的是，本发明第三实施例也包括第二显示区先于第一显示区扫描显示的情况。

上述水平分界线在显示屏的中间部位，是指水平分界线划分成的第一显示屏区面积和第二显示屏区面积相同或者相近。显然，第一显示屏区或者第二显示屏区的扫描显示时间和帧消隐期时间之和均大于相对侧显示屏区显示的视频图像对应的一视频帧数据在帧缓存完成渲染所需时间。

由于水平分界线预设在显示屏的中间部位，为了确保与第一显示区对应的帧缓存和与第二显示区对应的帧缓存工作负载均衡，在本发明第三实施例中，采用内存分区工具将一整块帧缓存划分成两个帧缓存区，两个帧缓存区的容量相同或者相近。一个帧缓存区与第一显示区对应，另一个帧缓存区与第二显示区对应。第一显示区显示的视频图像所对应的视频帧数据存储在与第一显示区对应的帧缓存区中。第二显示区显示的视频图像所对应的视频帧数据存储在与第二显示区对应的帧缓存区中。

图7示出了本发明实施例提供的一种应用于基于智能终端设备的监控系统的视频流送显处理方法的流程图。请参照图7所示，该方法包括：

S310,视频显示装置从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

S320,视频显示装置将读取的渲染完成的第一视频帧数据送显至第一显示区；同时，启动与视频显示装置相关联的定时器，以第一显示区扫描显示所需时间为定时时间设置定时器；

S330,视频显示装置在第一显示区所在第一显示屏区扫描显示过程中，对被读取到与第二显示区对应的帧缓存中的第三视频帧数据进行渲染；

S340,视频显示装置从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据；

S350,视频显示装置依据定时器在定时时间到来时产生的中断信号，将读取的渲染完成的第三视频帧数据送显至第二显示区；

S360,视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据。

在本发明第三实施例中，第一视频帧数据、第二视频帧数据、第三视频帧数据均为逐行扫描视频帧数据。其中，第一视频帧数据和第三视频帧数据为同一视频帧数据分割成的两个视频帧块数据，第二视频帧数据和第三视频帧数据送显后需要送显的对应下一个时间点视频图像的视频帧数据为同一视频帧数据分割成的两个视频帧块数据。第一视频帧数据为向第一显示区送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据；第三视频帧数据为向第二显示区送显的当前视频帧数据，并非是排在帧缓存队列第三的视频帧数据。

在本发明第三实施例中，视频图像显示区包括第一显示区和第二显示区，第一显示区，是指将第一视频帧数据和第二视频帧数据送显到的显示区；第二显示区，是指将第三视频帧数据送显到的显示区。

在本发明第三实施例中，视频显示装置为智能终端设备的显卡帧缓存可以是显卡的显示内存，也可以是智能终端设备的系统内存。定时器的实施方式与本发明第二实施例中的定时器的实施方式相同。

本发明第三实施例工作时，当显示屏扫描显示到第一显示区开始行时，显卡从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，将读取的渲染完成的第一视频帧数据传送给第一显示区，同时，启动与视频显示装置相关联的定时器，以第一显示区扫描显示所需时间为定时时间设置定时器；显示屏通过逐行扫描显示，在第一显示区将第一视频帧数据对应的视频图像完整显示出来。

视频显示装置在第一显示区所在第一显示屏区扫描显示过程中，对被读取到与第二显示区对应的帧缓存中的第三视频帧数据进行渲染；视频显示装置从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据；当第一显示区扫描显示完成时，定时时间到来，视频显示装置依据定时器在定时时间到来时产生的中断信号，将读取的渲染完成的第三视频帧数据送显至第二显示区。

为了使视频流帧率与显示屏显示频率匹配，在步骤S360前，也即在第二视频帧数据被读取到与第一显示区对应的帧缓存前，步骤S320后，还包括：当第一显示区显示的视频图像需要重复送显时，视频显示装置再次从与第一显示区对应的帧缓存读取渲染完成的第一视频帧数据，送显至第一显示区。渲染完成的第一视频帧数据的重复送显次数，依视频流的帧率与显示屏的显示频率匹配需要而定，例如视频流帧率为25帧/秒，显示屏显示频率为75帧/秒，那么需要重复送显两次。

视频显示装置在第二显示区所在第二显示屏区扫描显示过程中，对被读取到与第一显示区对应的帧缓存中的第二视频帧数据进行渲染。

同样，为了使视频流帧率与显示屏显示频率匹配，在第三视频帧数据送显后需要送显的对应下一个时间点视频图像的视频帧数据被读取到与第一显示区对应的帧缓存前，步骤S350后，还包括：当第二显示区显示的视频图像需要重复送显时，视频显示装置再次从与第二显示区对应的帧缓存读取渲染完成的第三视频帧数据，送显至第二显示区。渲染完成的第三视频帧数据的重复送显次数，与渲染完成的第一视频帧数据的重复送显次数相同。

由于第二视频帧数据渲染，是在第一视频帧数据送显完成后进行的，第三视频帧数据送显后需要送显的对应下一个时间点视频图像的视频帧数据渲染，是在第三视频帧数据送显完成后进行的，第二视频帧数据、第三视频帧数据送显后需要送显的对应下一个时间点视频图像的视频帧数据渲染前，对应的第一视频帧数据、第三视频帧数据一直保持在帧缓存中，它们需要重复送显时直接读取送显即可。因此，不需要对第一视频帧数据、第三视频帧数据进行重复渲染。

当然，本发明第三实施例，不局限于以智能终端设备为视频播放装置的监控系统，也适用于本发明第一实施例中的以数字电视机和智能电视机为视频播放装置的监控系统，还适用于发明第二实施例中的视频服务器及计算机相关设备为视频播放装置的监控系统。在采用数字电视机和智能电视机为视频播放装置时，视频显示装置为数字电视机或者智能电视机的图像显示运算处理电路，帧缓存为数字电视机图像显示运算处理电路中的显示内存。

当然，本发明第三实施例，还适用于视频会议系统、视频直播系统、视频点播系统、广播电视系统，相应地，视频显示装置、帧缓存随着上述系统所采用的视频播放装置作适应性调整。

本发明第三实施例，还适用于采用计算机相关设备、智能终端设备、数字电视、智能电视播放来自网络或者本地视频文件的情况。

本发明第三实施例，不局限于对一路视频流进行送显处理，只要视频显示装置具有的帧缓存块数大于或者等于需要送显的视频流路数，就能对多路数的视频流进行送显处理。

第四实施例

所述第四实施例提供的一种视频流送显处理装置250。该装置可应用于第一实施例、第二实施例、第三实施例中的应用环境。

参见图8所示的本发明的视频流送显处理装置250的结构示意图。该视频流送显处理装置250应用于与显示屏100相关联的视频显示装置210，显示屏100预设有水平分界线130，水平分界线130将显示屏100划分为第一显示屏区110和第二显示屏区120，在第一显示屏区110中的视频图像显示区为第一显示区1110，在第二显示屏区120中的视频图像显示区为第二显示区1210；第二显示区1210的面积大于或者等于0，第一显示区1110的面积大于0；

需要说明的是，该水平分界线130为虚拟分界线，水平分界线130的位置可根据实际需要作出调整，并非在显示屏100上预设的不能调整的实线条。

本发明实施例提供的一种该视频流送显处理装置250。请参阅图8，处理器220通过总线连接存储器240和系统内存230，该视频流送显处理装置250安装于存储器240中并包括一个或多个由处理器220执行的软件功能模块，该视频流送显处理装置250，包括第一视频帧数据送显读取单元2510、第一视频帧数据送显单元2520、第二视频帧数据渲染控制单元2530。

第一视频帧数据送显读取单元2510，用于从与第一显示区1110对应的帧缓存2110读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元2520，用于将读取的渲染完成的第一视频帧数据送显至第一显示区1110；

第二视频帧数据渲染控制单元2530，用于在第二显示区1210所在第二显示屏区120扫描显示过程中，对被读取到与第一显示区1110对应的帧缓存2110中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，第二显示区1210所在第二显示屏区120扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区1110对应的帧缓存2110完成渲染所需时间。

在本发明第四实施例中，第一视频帧数据、第二视频帧数据均为逐行扫描视频帧数据。第一视频帧数据为向第一显示区1110送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据。

当然实施时，该视频流送显处理装置250的应用环境，还包括解码器、网卡。

本发明第四实施例的视频流送显处理装置250工作时，处理器220与解码器、系统内存230协同配合，对来自网络的视频流260数据或者本地视频文件进行解码，将解码后的视频流260数据传递给视频流送显处理装置250，视频流送显处理装置250在获取解码后的一视频帧数据后，将该视频帧数据存入帧缓存队列。

在第一视频帧数据送显时刻到来时，第一视频帧数据送显读取单元2510从与第一显示区1110对应的帧缓存2110读取渲染完成的第一视频帧数据；第一视频帧数据送显单元2520将读取的渲染完成的第一视频帧数据送显至第一显示区1110；在第二显示区1210所在第二显示屏区120扫描显示过程中，第二视频帧数据渲染控制单元2530对被读取到与第一显示区1110对应的帧缓存2110中的第二视频帧数据进行渲染。具体实现过程，可参照本发明第一实施例。

与本发明第一实施例一样，本发明第四实施例不需要对第一视频帧数据进行重复渲染。

第五实施例

所述第五实施例为针对视频图像显示区横跨水平分界线130的情况提供的一种视频流送显处理装置250。该装置可用于第二实施例和第三实施例中的应用环境。

与本发明第四实施例不同的是，如图8所示，本发明第五实施例提供的一种视频流送显处理装置250，还包括第三视频帧数据渲染控制单元2540，第三视频帧数据送显读取单元2550，第三视频帧数据送显单元2560，及定时时间设置单元(图未示)。

第三视频帧数据渲染控制单元2540，用于在第一显示区1110所在第一显示屏区110扫描显示过程中，对被读取到与第二显示区1210对应的帧缓存2110中的第三视频帧数据进行渲染；

第三视频帧数据送显读取单元2550，用于从与第二显示区1210对应的帧缓存2110读取渲染完成的第三视频帧数据；

第三视频帧数据送显单元2560，用于将读取的渲染完成的第三视频帧数据送显至第二显示区1210；以及

定时时间设置单元，在第一视频帧数据、第三视频帧数据中在先送显的视频帧数据开始送显时，用于以在先送显的视频帧数据送显至的显示区扫描显示所需时间为定时时间设置定时器；在后送显的视频帧数据所对应的送显单元，依据定时器在定时时间到来时产生的中断信号对在后送显视的视频帧数据进行送显。

其中，第一视频帧数据对应的视频图像和第三视频帧数据对应的视频图像组成完整的视频图像；与第一显示区1110对应的帧缓存2110和与第二显示区1210对应的帧缓存2110为通过一整块帧缓存2110划分得到的不同的帧缓存区。

为了便于清楚阐述在本发明第五实施例的技术方案，在本发明第五实施例中，假定第一显示区1110先于第二显示区1210扫描显示，但需要注意的是，本发明第五实施例也包括第二显示区1210先于第一显示区1110扫描显示的情况。

本发明第五实施例的视频流送显处理装置250工作时，当显示屏100扫描显示到第一显示区1110开始行时，第一视频帧数据送显读取单元2510从与第一显示区1110对应的帧缓存2110读取渲染完成的第一视频帧数据，第一视频帧数据送显单元2520将读取的渲染完成的第一视频帧数据传送给第一显示区1110，同时，定时时间设置单元以第一显示区1110扫描显示所需时间为定时时间设置定时器；显示屏100通过逐行扫描显示，在第一显示区1110将第一视频帧数据对应的视频图像完整显示出来；在第一显示区1110所在第一显示屏区110扫描显示过程中，第三视频帧数据渲染控制单元2540对被读取到与第二显示区1210对应的帧缓存2110中的第三视频帧数据进行渲染；第三视频帧数据送显读取单元2550从与第二显示区1210对应的帧缓存2110读取渲染完成的第三视频帧数据；当第一显示区1110扫描显示完成时，定时时间到来，定时器产生中断信号，第三视频帧数据送显单元2560依据定时器在定时时间到来时产生的中断信号，将读取的渲染完成的第三视频帧数据送显至第二显示区1210。具体实现过程，可参照本发明第三实施例，及本发明第二实施例。

在本发明第五实施例中，第一视频帧数据、第二视频帧数据、第三视频帧数据均为逐行扫描视频帧数据。第一视频帧数据为向第一显示区1110送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据；第三视频帧数据为向第二显示区1210送显的当前视频帧数据，并非是排在帧缓存队列第三的视频帧数据。

与本发明第三实施例一样，本发明第五实施例不需要对第一视频帧数据、第三视频帧数据进行重复渲染。

在本发明第五实施例中，第一视频帧数据、第二视频帧数据、第三视频帧数据均为逐行扫描视频帧数据。其中，第一视频帧数据和第三视频帧数据为同一视频帧数据分割成的两个视频帧块数据，第二视频帧数据和第三视频帧数据送显后需要送显的对应下一个时间点视频图像的视频帧数据为同一视频帧数据分割成的两个视频帧块数据。第一视频帧数据为向第一显示区1110送显的当前视频帧数据，并非是排在帧缓存队列第一的视频帧数据；第二视频帧数据，为第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据，并非是排在帧缓存队列第二的视频帧数据；第三视频帧数据为向第二显示区1210送显的当前视频帧数据，并非是排在帧缓存队列第三的视频帧数据。

本发明的第四实施例和第五实施例中的各模块可以是由软件代码实现，此时，上述的各模块安装于存储器240内。以上各单元同样可以由硬件例如集成电路芯片实现。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的功能模块的具体描述，可以参考前述的对应方法步骤的具体描述，在此不再一一赘述。

第六实施例

所述第六实施例提供的一种视频流送显处理系统。该装置可应用于第一实施例、第二实施例、第三实施例中的应用环境

参见图9所示的本发明实施例提供的一种视频流送显处理系统的结构示意图。该视频流送显处理系统包括：视频播放装置200、显示屏100。

该显示屏100电连接视频播放装置200，例如通过显示信号线缆连接视频播放装置200的显示信号输出接口；

该显示屏100预设有水平分界线130，水平分界线130将显示屏100划分为第一显示屏区110和第二显示屏区120，在第一显示屏区110中的视频图像显示区为第一显示区1110，在第二显示屏区120中的视频图像显示区为第二显示区1210；第二显示区1210的面积大于或者等于0，第一显示区1110的面积大于0；

需要说明的是，该水平分界线130为虚拟分界线，水平分界线130的位置可根据实际需要作出调整，并非在显示屏100上预设的不能调整的实线条。

该视频播放装置200包括:处理器220、解码器(图未示)、存储器240、视频流送显处理装置250、视频显示装置210；

该视频流送显处理装置250安装于存储器240中并包括一个或多个由处理器220执行的软件功能模块，视频流送显处理装置250包括：

第一视频帧数据送显读取单元2510，用于从与第一显示区1110对应的帧缓存2110读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元2520，用于将读取的渲染完成的第一视频帧数据送显至第一显示区1110；

第二视频帧数据渲染控制单元2530，用于在第二显示区1210所在第二显示屏区120扫描显示过程中，对被读取到与第一显示区1110对应的帧缓存2110中的第二视频帧数据进行渲染；其中，第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，第二显示区1210所在第二显示屏区120扫描显示时间和帧消隐期时间之和，大于或等于第二视频帧数据在与第一显示区1110对应的帧缓存2110完成渲染所需时间。

上述处理器220,为视频播放装置200的运算核心和控制核心；

上述解码器，与处理器220关联，其可以是硬件解码器，也可以是软件解码器；

上述存储器240，通过总线与处理器220连接；

上述视频显示装置210，通过总线与处理器220连接；

当然实施时，该视频流送显处理系统，还可包括网卡、输入输出装置，例如键盘、鼠标。

本发明第六实施例的视频流送显处理系统，工作时，视频流送显处理系统的处理器220与解码器、系统内存230协同配合，对来自网络的视频流260数据或者本地视频文件进行解码，将解码后的视频流260传递给视频显示装置210，视频显示装置210在获取解码后的一视频帧数据后，将该视频帧数据存入帧缓存队列。

处理器220从存储器240中调用视频流送显处理装置250，在第一视频帧数据送显时刻到来时，第一视频帧数据送显读取单元2510从与第一显示区1110对应的帧缓存2110读取渲染完成的第一视频帧数据；第一视频帧数据送显单元2520将读取的渲染完成的第一视频帧数据送显至第一显示区1110；在第二显示区1210所在第二显示屏区120扫描显示过程中，第二视频帧数据渲染控制单元2530对被读取到与第一显示区1110对应的帧缓存2110中的第二视频帧数据进行渲染。具体实现过程，可参照本发明第一实施例及第四实施例。

与本发明第一实施例、第四实施例一样，本发明第六实施例不需要对第一视频帧数据进行重复渲染。

综上所述，本发明实施例提供的视频流送显处理方法、装置及系统，是在第一显示区1110显示的视频图像所对应的第一视频帧数据送显完成后，利用第二显示屏区120扫描显示过程，对第一显示区1110下一个时间点要显示的视频图像所对应第二视频帧数据进行渲染，在第二显示区1210显示的视频图像所对应的第三视频帧数据送显完成后，利用第一显示屏区110扫描显示过程，对第二显示区1210下一个时间点要显示的视频图像所对应第四视频帧数据进行渲染，因此，不需要对送显的第一视频帧数据或者第三视频帧数据进行重复渲染。如此，也就解决了现有视频流送显处理方法及装置重复送显当前视频帧会消耗大量本应该用于视频帧缩放、后处理的帧缓存资源，及消耗大量帧缓存带宽资源的技术问题。且能大幅提升视频流送显的质量和效率。

Claims (13)

1.视频流送显处理方法，应用于与显示屏相关联的视频显示装置，其特征在于,显示屏预设有水平分界线，所述水平分界线将所述显示屏划分为第一显示屏区和第二显示屏区，在所述第一显示屏区中的视频图像显示区为第一显示区，在所述第二显示屏区中的视频图像显示区为第二显示区；所述第二显示区的面积大于或者等于0，所述第一显示区的面积大于0；所述方法包括：

视频显示装置从与所述第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

所述视频显示装置将读取的所述渲染完成的第一视频帧数据送显至所述第一显示区；

所述视频显示装置在所述第二显示区所在第二显示屏区扫描显示过程中，对被读取到与所述第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，所述第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为所述第二视频帧数据；

其中，所述第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于所述第二视频帧数据在与所述第一显示区对应的帧缓存完成渲染所需时间。

2.根据权利要求1所述的视频流送显处理方法，其特征在于，当所述第二显示区的面积大于0时，所述方法还包括：

所述视频显示装置从与所述第二显示区对应的帧缓存读取渲染完成的第三视频帧数据；

所述视频显示装置将读取的所述渲染完成的第三视频帧数据送显至所述第二显示区；

所述视频显示装置在所述第一显示区所在第一显示屏区扫描显示过程中，对被读取到与所述第二显示区对应的帧缓存中的第四视频帧数据进行渲染；其中，所述第三视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为所述第四视频帧数据；

其中，所述第一显示区所在第一显示屏区扫描显示时间，大于或等于所述第四视频帧数据在与所述第二显示区对应的帧缓存完成渲染所需时间。

3.根据权利要求2所述的视频流送显处理方法，其特征在于，

在所述第一视频帧数据、第三视频帧数据中在先送显的视频帧数据送显完成时，开始所述第一视频帧数据、第三视频帧数据中在后送显的视频帧数据送显；

其中，所述第一视频帧数据对应的视频图像和所述第三视频帧数据对应的视频图像组成完整的视频图像；与所述第一显示区对应的帧缓存和与所述第二显示区对应的帧缓存为通过一整块帧缓存划分得到的不同的帧缓存区。

4.根据权利要求3所述的视频流送显处理方法，其特征在于，

在所述第一视频帧数据、第三视频帧数据中所述在先送显的视频帧数据开始送显时，启动与所述视频显示装置相关联的定时器，以在先送显的视频帧数据送显至的显示区扫描显示所需时间为定时时间设置定时器，依据定时器在所述定时时间到来时产生的中断信号，对所述在后送显视的视频帧数据进行送显。

5.根据权利要求1至4中任意一项所述的视频流送显处理方法，其特征在于，所述第一显示屏区和所述第二显示屏区之间的面积比为1:1。

6.根据权利要求2至4中任意一项所述的视频流送显处理方法，其特征在于，与所述第一显示区对应的帧缓存和与所述第二显示区对应的帧缓存的容量比为1:1。

7.视频流送显处理装置，应用于与显示屏相关联的视频显示装置，其特征在于,所述显示屏预设有水平分界线，所述水平分界线将所述显示屏划分为第一显示屏区和第二显示屏区，在所述第一显示屏区中的视频图像显示区为第一显示区，在所述第二显示屏区中的视频图像显示区为第二显示区；所述第二显示区的面积大于或者等于0，所述第一显示区的面积大于0；

所述视频流送显处理装置包括：

第一视频帧数据送显读取单元，用于从与所述第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元，用于将读取的所述渲染完成的第一视频帧数据送显至所述第一显示区；

第二视频帧数据渲染控制单元，用于在所述第二显示区所在第二显示屏区扫描显示过程中，对被读取到与所述第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，所述第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，所述第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于所述第二视频帧数据在与所述第一显示区对应的帧缓存完成渲染所需时间。

8.根据权利要求7所述的视频流送显处理装置，其特征在于，当所述第二显示区的面积大于0时，所述装置还包括：

第三视频帧数据送显读取单元，用于从与所述第二显示区对应的帧缓存读取渲染完成的第三视频帧数据；

第三视频帧数据送显单元，用于将读取的所述渲染完成的第三视频帧数据送显至所述第二显示区；

第四视频帧数据渲染控制单元，用于在所述第一显示区所在第一显示屏区扫描显示过程中，对被读取到与所述第二显示区对应的帧缓存中的第四视频帧数据进行渲染；其中，所述第三视频帧数据后,需要送显的对应下一个时间点视频图像的视频帧数据为所述第四视频帧数据；

其中，所述第一显示区所在第一显示屏区扫描显示时间，大于或等于所述第四视频帧数据在与所述第二显示区对应的帧缓存完成渲染所需时间。

9.根据权利要求8所述的视频流送显处理装置，其特征在于，

在所述第一视频帧数据送显单元、第三视频帧数据送显单元中在先送显的送显单元完成在先送显的视频帧数据送显时，在后送显的送显单元开始在后送显的视频帧数据送显；

其中，所述第一视频帧数据对应的视频图像和所述第三视频帧数据对应的视频图像组成完整的视频图像；与所述第一显示区对应的帧缓存和与所述第二显示区对应的帧缓存为通过一整块帧缓存划分得到的不同的帧缓存区。

10.根据权利要求9所述的视频流送显处理装置，其特征在于，

还包括定时时间设置单元，所述定时时间设置单元，在所述第一视频帧数据、第三视频帧数据中所述在先送显的视频帧数据开始送显时，用于以所述在先送显的视频帧数据送显至的显示区扫描显示所需时间为定时时间设置定时器；所述在后送显的视频帧数据所对应的送显单元，依据定时器在定时时间到来时产生的中断信号对所述在后送显视的视频帧数据进行送显。

11.根据权利要求7至10中任意一项所述的视频流送显处理装置，其特征在于，所述第一显示屏区和所述第二显示屏区之间的面积比为1:1。

12.根据权利要求8至10中任意一项所述的视频流送显处理装置，其特征在于，与所述第一显示区对应的帧缓存和与所述第二显示区对应的帧缓存的容量比为1:1。

13.视频流送显处理系统，包括视频播放装置、与视频播放装置电连接的显示屏,所述视频播放装置包括处理器，与处理器关联的解码器，与处理器总线连接的存储器、视频显示装置；其特征在于，

所述显示屏预设有水平分界线，所述水平分界线将所述显示屏划分为第一显示屏区和第二显示屏区，在所述第一显示屏区中的视频图像显示区为第一显示区，在所述第二显示屏区中的视频图像显示区为第二显示区；所述第二显示区的面积大于或者等于0，所述第一显示区的面积大于0；

所述视频播放装置还包括视频流送显处理装置，所述视频流送显处理装置安装于所述存储器中并包括一个或多个由所述处理器执行的软件功能模块，所述视频流送显处理装置包括：

第一视频帧数据送显读取单元，用于从与所述第一显示区对应的帧缓存读取渲染完成的第一视频帧数据；

第一视频帧数据送显单元，用于将读取的所述渲染完成的第一视频帧数据送显至所述第一显示区；

第二视频帧数据渲染控制单元，用于在所述第二显示区所在第二显示屏区扫描显示过程中，对被读取到与所述第一显示区对应的帧缓存中的第二视频帧数据进行渲染；其中，所述第一视频帧数据送显后，需要送显的对应下一个时间点视频图像的视频帧数据为第二视频帧数据；

其中，所述第二显示区所在第二显示屏区扫描显示时间和帧消隐期时间之和，大于或等于所述第二视频帧数据在与所述第一显示区对应的帧缓存完成渲染所需时间。