CN109963191A - 一种视频信息的处理方法、装置及存储介质 - Google Patents
一种视频信息的处理方法、装置及存储介质 Download PDFInfo
- Publication number
- CN109963191A CN109963191A CN201711342899.5A CN201711342899A CN109963191A CN 109963191 A CN109963191 A CN 109963191A CN 201711342899 A CN201711342899 A CN 201711342899A CN 109963191 A CN109963191 A CN 109963191A
- Authority
- CN
- China
- Prior art keywords
- api
- hard decoding
- stream data
- video stream
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000003672 processing method Methods 0.000 title abstract description 15
- 238000009877 rendering Methods 0.000 claims description 68
- 238000000034 method Methods 0.000 claims description 64
- 238000012545 processing Methods 0.000 claims description 55
- 238000006243 chemical reaction Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 238000005538 encapsulation Methods 0.000 abstract description 3
- 230000006978 adaptation Effects 0.000 description 36
- 239000010410 layer Substances 0.000 description 27
- 230000010365 information processing Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 5
- 230000003139 buffering effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 239000002344 surface layer Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例公开了一种视频信息的处理方法、装置及存储介质，所述方法包括：获取视频流数据，确定采用第一接口规范封装的第一硬解码API；调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。通过本发明实施例的方案，可以有效地降低终端设备的CPU占用率，提升终端设备的在线视频播放性能。
Description
技术领域
本发明涉及视频解码技术，尤其涉及一种视频信息的处理方法、装置及存储介质。
背景技术
随着云计算的不断发展，越来越多的基于云计算的产品应运而生，如面向企业客户的网盘或面向个人的网盘等云客户端，用户通过终端设备中的云客户端可以观赏在线视频。云客户端播放在线视频时，需要对视频进行解码，目前常用的对视频进行解码的方式是基于交互式矢量图与网络动画标准的解决方案，即Flash解决方案。
实际的应用中，由于终端设备的多样化，采用不同操作系统软件和硬件的终端设备对于视频解码的支持有不同的局限性。如Linux系统的终端设备，特别是采用因特尔显卡的Linux系统的终端设备，只支持视频加速应用程序编程接口(VAAPI，Video accelerationApplication Programming Interface)规范的硬解码API，而目前的Flash插件只支持基于Unix系统的视频解码与显示应用程序编程接口(VDPAU，Video Decode and PresentationAPI for Unix)规范的硬解码API。因此，针对仅VAAPI规范进行硬解码的终端设备，Flash插件无法启用硬解码，而只能使用软件解码的方式对在线视频进行解码，而采用软件解码的方式会导致终端设备的中央处理器(CPU，Central Processing Unit)占用率高的问题，严重影响终端设备的在线视频播放性能。
发明内容
有鉴于此，本发明实施例期望提供一种视频信息的处理方法、装置及存储介质，有效地提升终端设备的在线视频播放性能。
为达到上述目的，本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种视频信息的处理方法，所述方法包括：
获取视频流数据，确定采用第一接口规范封装的第一硬解码API；
调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API封装于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
上述方案中，所述调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API之后，还包括：
调用所述第二硬解码API，基于所述第二硬解码API对应的硬解码库，控制所述显卡解码所述视频流数据；
将解码后的视频流数据进行格式转换。
上述方案中，所述将解码后的视频流数据进行格式转换之后，还包括：
确定采用第三接口规范封装的用于渲染的渲染API，所述渲染API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的图形处理库对视频流数据进行渲染；
调用所述渲染API，获取显卡驱动内的图形处理库；
基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据。
上述方案中，所述获取视频流数据之后，还包括：
获取与所述视频流数据匹配的至少一个媒介信息；
所述调用所述渲染API，基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据之后，还包括：
基于所述图形处理库，控制所述显卡渲染所述至少一个媒介信息；
将渲染后的至少一个媒介信息，添加于渲染后的所述视频流数据的相应位置。
上述方案中，所述获取视频流数据之后，还包括：
获取与所述视频流数据匹配的至少一个媒介信息；
将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置；
所述基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据，包括：
调用所述渲染API，基于所述图形处理库，控制所述显卡对添加有所述至少一个媒介信息的视频流数据进行渲染。
上述方案中，所述将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置之前，还包括：
基于所述图形处理库，控制所述显卡对所述至少一个媒介信息进行渲染。
上述方案中，所述确定采用第一接口规范封装的第一解码应用程序接口API之后，还包括：
调用采用第一接口规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
上述方案中，所述第一接口规范包括VDPAU规范；所述第二接口规范包括VAAPI规范；所述确定采用第一接口规范封装的第一解码应用程序接口API之后，还包括：
调用采用VDPAU规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
本发明实施例还提供了视频解码的装置，所述装置包括：
获取模块，用于获取视频流数据；
确定模块，用于在获取到所述视频流数据后，确定采用第一接口规范封装的第一硬解码API；
调用模块，用于调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
本发明实施例还提供了一种视频解码的装置，所述装置包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；
其中，所述处理器用于运行所述计算机程序时，实现上述的视频解码的方法。
本发明实施例还提供了一种存储介质，存储有计算机程序，所述计算机程序被处理器执行时，实现上述的视频解码的方法。
通过实施本发明实施例提供的技术方案，可以具有以下有益效果：
由于第一接口规范封装的第一硬解码API无法调用显卡硬件资源支持的硬解码库，而将第一接口规范封装的第一硬解码API转换为第二接口规范封装的第二硬解码API后，可以通过第二硬解码API调用显卡硬件资源支持的硬解码库，采用该硬件硬解码库实现对视频流数据的硬解码，与传统方案相比，避免了因软解码而造成终端设备的CPU占用率高的问题，降低了终端设备的发热量，提高了视频播放的流畅性。
附图说明
图1为本发明实施例提供的一种视频信息的处理系统的结构示意图；
图2为本发明实施例提供的利用VDPAU接口库实现视频解码、转码和渲染的示意图；
图3为本发明实施例提供的利用接口适配库实现视频解码、转码和渲染的示意图；
图4为本发明实施例提供的一种视频信息的处理方法的流程示意图；
图5为本发明实施例提供的另一种视频信息的处理方法的流程示意图；
图6为本发明实施例提供的一种视频信息的处理装置的结构示意图；
图7为本发明实施例提供的另一种视频信息的处理装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。
对本发明进行进一步详细说明之前，对本发明实施例中涉及的名词和术语进行说明，本发明实施例中涉及的名词和术语适用于如下的解释。
1)Unix系统的视频解码与显示应用程序编程接口(VDPAU，Video Decode andPresentation API for Unix)，是基于UNIX和类UNIX系统(包括Linux、FreeBSD和Solaris)下的视频硬件解码技术，可用于视频解码、视频后期处理、图像合成和解码后视频图像的显示等。
2)视频加速应用程序编程接口(VAAPI，Video acceleration ApplicationProgramming Interface)，是基于UNIX和类UNIX系统(包括Linux、FreeBSD和Solaris)下的视频硬件解码技术。其中，VAAPI和VDPAU为两种不同的接口规范。
3)Xlib库，是以位图显示的网络化视窗系统协议的客户端库，可用于在Unix、类Unix和其它操作系统上创建用户图形界面。
4)浏览器，是指可以显示网页服务器或者文件系统的超级文本标记语言(HTML，Hyper Text Markup Language)文件内容、并让用户与这些文件内容进行交互的一种软件，其中，文件内容可以是万维网或局域网等内的文字、图像、视频、音乐及其它信息。
这里，浏览器可以是独立的应用软件，也可以是内置于客户端内。
5)Flash插件，是指安装于浏览器上，且能播放swf格式文件的插件。
6)操作系统，可以是UNIX或类UNIX系统(包括Linux、FreeBSD和Solaris)，在操作系统中包含有视频的硬解码库，如VAAPI规范的硬解码库。
请参阅图1，为本发明实施例提供的视频信息的处理系统的结构图，所述系统包括Flash插件、接口适配库、操作系统和显卡；其中，接口适配库包括VDPAU硬解码库和接口适配层；操作系统中包括VAAPI硬解码库、Xlib库和Linux显卡驱动。其中，该接口适配库在播放在线视频的过程中被Flash插件以应用程序接口(API，Application ProgrammingInterface)的形式进行调用。
在传统方案中，Flash插件调用硬解码库的实现方式主要包括如下步骤S1和步骤S2。步骤S1，在视频网站对应的HTML网页代码中，嵌入一个类型(Type)为“application/x-shockwave-flash”的对象(Object)元素，如此，当用户使用终端设备登录云客户端，云客户端通过内置的浏览器浏览某个在线视频对应的视频HTML网页时，内置的浏览器解析该Object元素，并检测内置的浏览器是否安装了相应的Flash插件，如果没有安装Flash插件则提示用户进行安装。如果已经安装Flash插件，则启动Flash插件，调用Flash插件对Object元素中统一资源定位符(URL，Uniform Resource Locator)对应的swf格式的文件进行解析。需要说明的是，云客户端安装于终端设备。
步骤S2，Flash插件启动后，根据设定的目录查找对应的硬解码库，例如Flash插件根据硬解码头文件的文件名查找目录中对应的硬解码库，举例来说，假设编程语言为C++，产生的文件主要包括头文件和实现文件，其中，头文件为.h文件，实现文件为.cpp文件，根据.h文件中定义的文件名查找目录中对应的硬解码库，其中，.h文件中定义的文件名为函数库的名称。根据查找对应硬解码库的结果对视频进行解码的方式包括如下三种：1)若无法查找到硬解码库，那么，Flash插件将使用自带的软解码方法对视频进行解码和显示；2)若查找到对应的硬解码库，那么，对硬解码库的API进行分析，并按照终端设备所支持的规范，如基于Unix系统终端设备所支持的VDPAU规范，调用硬解码库的初始化API对硬解码库进行初始化；3)若查找到硬解码库，但不符合该终端设备所支持的规范，如基于Unix系统的终端设备所支持的VDPAU规范，将无法进行初始化，那么，Flash插件将使用自带的软解码方法进行视频的解码和显示。
在传统方案中，由于Flash插件只能调用以VDPAU规范的硬解码库，从而对于很多终端设备，Flash插件无法启用硬解码。
在本发明实施例中，设置了接口适配库，且调用接口适配库的API是以VDPAU规范进行封装的，参考上述步骤S2，Flash插件根据文件名查找到接口适配库，并调用初始化API对接口适配库进行初始化。通过初始化，使得接口适配库中包含多个API的具体实现方法，如采用VAAPI规范的硬解码API，通过该VAAPI规范的硬解码API获得对应的硬解码方法，根据该硬解码方法实现视频解码；又如采用Xlib规范的API，通过该Xlib的API获得渲染和显示方法，根据该渲染和显示方法以实现视频解码后相应图像的渲染和显示，从而实现了视频流数据的硬解码、渲染和显示。
因此，在本发明实施例中，通过设置接口适配库，该接口适配库内包含采用VAAPI规范的硬解码API，针对采用因特尔显卡的Linux系统从而只支持VAAPI规范的硬解码API的终端设备，可以通过该接口适配库将VAAPI适配成VDPAU，使得Flash插件能够正常调用采用VAAPI规范的硬解码API，利用显卡进行解码和转码等操作，可以实现VDPAU硬解码的功能。
在配置Intel显卡、安装Linux操作系统的终端设备中，由于Intel显卡的显卡驱动中包含VAAPI规范的硬解码库及包含Xlib库，其中，Xlib库用于渲染和显示视频流数据，因此，Linux操作系统中均包含有VAAPI规范的硬解码库和Xlib库，硬解码库中的硬解码方法可以通过调用显卡的驱动，控制显卡对视频流数据进行解码；Xlib库中的显示方法可以通过调用显卡的驱动，控制显卡对视频流数据进行显示，从而提升了处理的效率。
对于支持VDPAU规范的终端设备，可以采用VDPAU接口库实现视频硬解码、转码和渲染，请参阅图2，为本发明实施例提供的利用VDPAU接口库实现视频解码、转码和渲染的示意图；所述VDPAU接口库可以实现以下功能：视频解码、视频转码、获得RGB图层、渲染、图层混合和视频显示。
其中，Flash插件在调用VDPAU接口库的API，实现视频解码、视频转码、获得RGB图层和图层混合功能时，主要涉及如下内容：
1)视频解码。
Flash插件将从云客户端内置的浏览器获取到视频流数据，然后通过解码API传给VDPAU的硬解码库进行视频解码。
2)视频转码(YUV转RGB)。
通过转码API将解码后的YUV数据转换成RGB数据。
3)渲染。
Flash插件将从浏览器获取到的至少一个媒介信息(如广告，弹幕信息等)，该媒介信息的图层形式可以包括图2中的RGB图层1和RGB图层2，通过渲染API传给VDPAU接口库进行渲染，渲染操作包括缩放等。
4)图层混合。
Flash插件通过混合API，将转码后的视频流数据和媒介信息(如RGB图层1和RGB图层2)进行混合，即将媒介信息添加至视频流数据的相应位置，最后形成可以输出显示的图层数据。
5)视频显示。
获得可以输出显示的图层数据之后，通过Flash插件所创建的视频显示窗口将混合后的视频流数据进行显示。
对于不支持VDPAU规范的终端设备，可以采用接口适配库实现视频硬解码、转码和渲染，请参阅图3，为本发明实施例提供的利用接口适配库实现视频解码、转码和渲染的示意图；所述接口适配库可以实现以下功能：视频解码、视频转码、获得RGB图层、渲染、图层混合和视频显示。
由于调用接口适配库的API以VDPAU规范进行封装，且接口适配库中包含了采用VAAPI规范的硬解码API、转码API，以及Xlib规范的渲染API、混合API，因此，Flash插件在调用接口适配库进行视频解码时，可以使用VAAPI规范的API，利用显卡进行解码和转码等操作；以及使用Xlib规范的API，利用显卡进行渲染和混合。
因此，对于采用因特尔显卡的Linux系统从而只支持VAAPI规范的硬解码API的终端设备，可以通过该接口适配库将VAAPI适配成VDPAU，使得Flash插件能够正常调用采用VAAPI规范的硬解码API，利用显卡进行解码和转码等操作，可以实现VDPAU硬解码的功能。
其中，Flash插件在调用接口适配库的API，实现视频解码、视频转码、获得RGB图层和图层混合功能时，所涉及的内容包括：
1)视频解码(VAAPI硬解码)。
Flash插件将从云客户端内置的浏览器获取到视频流数据，然后通过调用VDPAU规范的硬解码API，获得接口适配库中的VAAPI规范的硬解码API，从而实现VAAPI硬解码。
2)视频转码(YUV转RGB)。
通过调用VDPAU规范的转码API，获得接口适配库中的VAAPI规范的转码API，从而实现VAAPI硬件转码。
3)渲染。
Flash插件将从浏览器获取到的媒介信息(如广告，弹幕信息等)和转码后的视频，通过Xlib规范的渲染API传给接口适配库进行渲染，渲染操作包括缩放等，从而实现Xlib图像渲染。
4)图层混合。
Flash插件通过Xlib规范的混合API，将转码后的视频流数据和媒介信息(如图3中的RGB图层1和RGB图层2)进行混合处理，即将媒介信息添加至视频流数据的相应位置，最后形成可以输出显示的图层数据，从而实现Xlib图层混合。
5)视频显示。
获得可以输出显示的图层数据之后，通过Xlib窗口将叠加混合后的视频流数据进行显示，实现Xlib视频显示。
为了能够更加具体的理解本发明实施例所提供的通过接口适配库实现视频硬解码、转码和渲染，以下对实现视频硬解码、转码和渲染的流程进行进一步具体的说明，请参阅图4，为本发明实施例提供的一种视频信息的处理方法的流程示意图，所述方法应用于视频信息的处理装置，在实际应用中，该装置可以实施为如安装有云客户端的笔记本电脑、台式电脑等终端设备，其中，该云客户端具有在线播放视频的功能，所述方法包括以下步骤：
步骤401：获取视频流数据，确定采用第一接口规范封装的第一硬解码API。
这里，所述第一接口规范包括VDPAU规范；所述第一硬解码API包括采用VDPAU规范封装的解码应用程序接口。
在本发明实施例中，用户欲在云客户端上观看在线视频时，发出一个在线观看的操作；云客户端检测到该在线观看的操作时，根据该操作对应的观看指令获取视频流数据，其中，获取的方式包括：云客户端向存储在线视频提供商的服务器发送观看指令，服务器接收到该观看指令后，将对应的视频流数据发送至云客户端，从而，云客户端获得视频流数据。当云客户端获得视频流数据后，根据该视频流数据确定采用VDPAU规范封装的解码应用程序接口。
这里，所述云客户端可以内置浏览器，在内置的浏览器中安装Flash插件，通过该Flash插件调用相应的应用程序接口，以实现对视频流数据的处理与播放。
步骤402：调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
这里，所述第二接口规范包括VAAPI规范；所述第二硬解码API包括采用VAAPI规范封装的解码应用程序接口。
在本发明实施例中，调用采用第一接口规范封装的第一硬解码API获得采用第二接口规范封装的第二硬解码API，实现支持不同接口规范的解码应用程序之间可以被调用。云客户端利用VDPAU规范封装接口适配库的API，在接口适配库的具体实现中，接口适配库中封装了VAAPI规范的API，因此，云客户端通过调用VDPAU规范的解码API，获得VAAPI规范的解码API，以便通过VAAPI规范封装的解码API调用显卡驱动内的硬解码库，硬解码库中有相应的硬解码方法，通过该硬解码方法控制显卡对视频流数据进行解码。
在可选的实施例中，步骤402之后，还包括：调用所述第二硬解码API，基于所述第二硬解码API对应的硬解码库，控制所述显卡解码所述视频流数据；将解码后的视频流数据进行格式转换。
具体而言，第二硬解码API为VAAPI规范封装的解码API，云客户端通过VAAPI规范封装的解码API，调用显卡驱动内的硬解码库中的硬解码方法，使用该硬解码方法控制显卡对视频流数据进行解码，获得YUV格式的视频流数据；当解码完成后，云客户端将YUV格式的数据转换成红绿蓝(RGB，Red Green Blue)色彩模式的视频流数据。其中，将YUV格式的视频流数据转换成RGB格式的视频流数据的方法包括：云客户端根据YUV格式的视频流数据确定采用VDPAU规范封装的第一转码API，调用所述第一转码API获得采用VAAPI规范封装的第二转码API，从而通过VAAPI规范封装的转码API调用显卡驱动内的转码库对视频流数据进行解码。
在可选的实施例中，所述将解码后的视频流数据进行格式转换之后，还包括：确定采用第三接口规范封装的用于渲染的渲染API，所述渲染API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的图形处理库对视频流数据进行渲染；调用所述渲染API，获取显卡驱动内的图形处理库；基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据。
这里，所述第三接口规范包括Xlib规范。
视频流数据经过解码和转码之后，云客户端需要进行相应的渲染操作，然后进行输出显示。例如，云客户端根据转码后的视频流数据确定采用Xlib规范封装的用于渲染的渲染API，然后调用该渲染API获得显卡驱动内的Xlib图形处理库，基于该Xlib图形处理库控制显卡渲染格式转换后的视频流数据。
在实际应用过程中，可能会需要在视频流数据中添加关于广告、弹幕或视频的缩略图像等媒介信息，此时，云客户端获取与视频流数据匹配的至少一个媒介信息，然后将该至少一个媒介信息添加入视频流数据的相应位置，在显示媒介信息与视频流数据的混合视频之前，需要对视频流数据和媒介信息进行渲染，渲染的方式主要包括以下两种：
方式一：媒介信息与视频流数据分开渲染。
在可选的实施例中，所述获取视频流数据之后，还包括：获取与所述视频流数据匹配的至少一个媒介信息；所述调用所述渲染API，基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据之后，还包括：基于所述图形处理库，控制所述显卡渲染所述至少一个媒介信息；将渲染后的至少一个媒介信息，添加于渲染后的所述视频流数据的相应位置。
云客户端获得视频流数据之后，获取与视频流数据匹配的广告、弹幕或视频缩略图像等媒介信息；然后根据Xlib图形处理库控制显卡对获取到的媒介信息进行渲染；将渲染后的媒介信息添加于渲染后的视频流数据的相应位置，以便输出显示。
方式二：媒介信息与视频流数据组合渲染。
在可选的实施例中，所述获取视频流数据之后，还包括：获取与所述视频流数据匹配的至少一个媒介信息；将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置；所述基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据，包括：调用所述渲染API，基于所述图形处理库，控制所述显卡对添加有所述至少一个媒介信息的视频流数据进行渲染。
云客户端获得视频流数据之后，获取与视频流数据匹配的广告、弹幕或视频缩略图像等媒介信息；然后将媒介信息添加于渲染后的视频流数据的相应位置；根据Xlib图形处理库控制显卡对添加有至少一个媒介信息的视频流数据的组合进行渲染，以便输出显示。
在可选的实施例中，所述将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置之前，还包括：基于所述图形处理库，控制所述显卡对所述至少一个媒介信息进行渲染。
例如，在广告、弹幕或视频缩略图像等媒介信息添加至渲染后的视频流数据的相应位置之前，云客户端对媒介信息进行渲染，如渲染广告在视频中的显示方式，该显示方式包括：以全屏显示的方式插入视频中，或者将广告以缩放的方式显示在视频的某个位置，如视频的左上角、右上角、左下角、右下角或中间位置，此外，对于广告在视频的表层的情况，还可以将广告渲染为半透明或不透明的形式。
在步骤401之后，还包括：调用采用第一接口规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
这里，云客户端调用初始化API对第一硬解码API对应的硬解码库进行初始化，也即把硬解码库中的程序加载到内存，并为变量赋初值、分配存储空间。
在可选的实施例中，所述第一接口规范包括VDPAU规范；所述第二接口规范包括VAAPI规范；所述确定采用第一接口规范封装的第一解码应用程序接口API之后，还包括：调用采用VDPAU规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
这里，所述采用VAAPI规范封装的所述第二硬解码API包含于所述第一硬解码API对应的硬解码库内。
由于采用VAAPI规范封装的第二硬解码API包含于第一硬解码API对应的硬解码库内，因此，云客户端在调用VDPAU规范封装的初始化API，对第一硬解码API对应的硬解码库初始化的过程中，对第二硬解码API对应的硬解码库进行初始化，即把第二硬解码API对应硬解码库中的程序加载到内存，并为变量赋初值、分配存储空间。
请参阅图5，为本发明实施例提供的另一种视频信息的处理方法的流程示意图，所述方法应用于视频信息的处理装置，在实际应用中，该装置可以实施为如安装有云客户端的笔记本电脑、台式电脑等终端设备，其中，该云客户端具有在线播放视频的功能。
本发明实施例中，位图数据和视频流数据分别通过不同的API进入接口适配库，通过VAAPI规范的硬解码API对视频流数据进行解码，此外，通过Xlib对应的渲染API对位图数据进行渲染。视频流数据经过转码后的输出表面数据与图层数据渲染后的输出表面数据进行叠加混合，然后，利用Xlib的窗口显示的API进行视频的显示。具体地，所述视频信息的处理方法包括以下步骤：
步骤501：获取压缩的视频流数据。
步骤502：对视频流数据进行解码。
对于视频流数据，Flash插件在接收到一帧数据之后，调用接口适配库的基于VDPAU规范封装的硬解码API；然后，基于该VDPAU规范封装的硬解码API，确定可调用硬解码库对视频流进行解码的对应硬解码API，其中，该对应硬解码API基于VAAPI规范封装；通过调用基于VAAPI规范封装的硬解码API，获得相应的硬解码方法，从而实现对视频流数据的硬解码，当视频流数据进行硬解码后，将解码后的视频流数据返回给Flash插件。
此外，当Flash插件调用接口适配库的转码API，将解码后的数据再次交给接口适配库的转码API，以进行转码，得到转码后的格式为RGB的数据。Flash插件对转码后的数据进行同步处理，然后执行步骤503。
步骤503：缓存转码后的视频流数据。
在在线视频播放的场景中，Flash插件根据swf文件中所指定的视频服务器地址下载对应的视频，采用实时流传输协议(RTSP，Real Time Streaming Protocol)的方式，边缓冲边解码播放。其中，Flash插件安装于云客户端内置的浏览器，用于对视频流数据的处理与播放。
步骤504：获取位图数据。
这里，所述位图数据指的是媒介信息，如广告、商标(LOGO)和/或弹幕等。
除了视频流数据外，Flash插件还会从swf文件所指定的服务器地址下载一些位图数据，用于叠加在视频之上，如在视频中添加广告、LOGO和/或弹幕等。
步骤505：缓存位图数据。
步骤506：对位图数据进行渲染。
当进行播放时，调用接口适配库中的渲染API对位图数据进行渲染。
具体地，对于位图数据，Flash插件在完成数据的下载之后，调用接口适配库对应的渲染API，对相应的位图数据进行缩放、位移等渲染操作，使其能够在Flash插件所预设的范围进行显示，或对应swf文件中指定的显示区域中显示。
步骤507：将位图数据与视频流数据混合。
通过混合API将位图数据添加于视频流数据的相应位置，以将位图数据与视频流数据进行混合，然后将混合后的数据返回给Flash插件。
具体地，渲染后的位图数据以Flash插件所规定的数据结构返回给Flash插件，在Flash插件对相应的时间戳进行同步后，由Flash插件调用相应的混合API，将位图数据和处理后的视频流数据进行混合叠加，然后返回给Flash插件，在播放的时候，由Flash插件将其传递至接口适配库的显示方法进行显示。
步骤508：输出表面。
这里，所述输出表面主要用于缓存渲染后的位图数据，以及缓存添加位图数据后的视频流数据。
步骤509：显示队列。
在视频播放过程中，根据时间播放顺序对视频流数据中的视频帧进行排队，以进行输出显示。
步骤510：显示。
本发明实施例中，通过设置接口适配库将VAAPI适配成VDPAU，使Flash插件能够启用硬解码，以利用显卡对视频进行解码、转码、视频混合、渲染和显示等操作，极大的提升在线视频的播放效率，实现了视频的流畅播放，且能使终端设备的CPU占用率降低50％；此外，在播放在线视频时，在云客户端上的能流畅的进行其他操作。
以某型号的终端设备为例，该终端设备采用的是Intel芯片集成显卡，操作系统为Linux系统，不支持OpenGL。在传统方法中，用户通过该终端设备登陆云客户端看在线视频网站A上的视频时，云客户端通过在线视频重定向技术，使得线视频网站A中的视频在云客户端内置的浏览器中播放。由于Intel显卡采用的VAAPI的硬解码方式，Flash插件不支持VAAPI的硬解码方式，因此，无法启用硬解码播放，这样，在观看线视频网站A上的高清视频时，出现CPU占用率达到几乎100％，此时，如果对云客户端进行其它操作，则出现卡顿的问题，影响用户体验。而在本发明实施例的视频信息处理方法中，通过设置接口适配库将VAAPI适配成VDPAU，使得Flash插件能够启用显卡驱动内硬解码库进行硬解码，可以大大降低终端设备的CPU占用率降低50％。
为实现上述方法，本发明实施例还提供了一种视频信息的处理装置，请参阅图6所示，所述装置包括：
获取模块601，用于获取视频流数据；
确定模块602，用于在获取到所述视频流数据后，确定采用第一接口规范封装的第一硬解码API；
调用模块603，用于调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
这里，所述装置还包括：
控制模块604，用于调用所述第二硬解码API，基于所述第二硬解码API对应的硬解码库，控制所述显卡解码所述视频流数据；
转换模块605，用于将解码后的视频流数据进行格式转换。
这里，确定模块602，还用于确定采用第三接口规范封装的用于渲染的渲染API，所述渲染API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的图形处理库对视频流数据进行渲染；
调用模块603，还用于调用所述渲染API，获取显卡驱动内的图形处理库；
控制模块604，还用于基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据。
这里，所述装置还包括：添加模块606；其中，
获取模块601，还用于获取与所述视频流数据匹配的至少一个媒介信息；
控制模块604，还用于基于所述图形处理库，控制所述显卡渲染所述至少一个媒介信息；
添加模块606，用于将渲染后的至少一个媒介信息，添加于渲染后的所述视频流数据的相应位置。
这里，获取模块601，还用于获取与所述视频流数据匹配的至少一个媒介信息；
添加模块606，还用于将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置；
控制模块604，具体用于：
调用所述渲染API，基于所述图形处理库，控制所述显卡对添加有所述至少一个媒介信息的视频流数据进行渲染。
这里，控制模块604，还用于基于所述图形处理库，控制所述显卡对所述至少一个媒介信息进行渲染。
这里，初始化模块607，还用于调用采用第一接口规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
这里，所述第一接口规范包括VDPAU规范；所述第二接口规范包括VAAPI规范；
初始化模块607，还用于调用采用所述VDPAU规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化，所述采用VAAPI规范封装的所述第二硬解码API包含于所述第一硬解码API对应的硬解码库内。
请参阅图7，为本发明实施例提供的一种视频信息的处理装置的结构示意图，视频信息的处理装置700可以是笔记本电脑、台式电脑等终端设备，其结构可以包括：至少一个处理器710、存储器720、至少一个网络接口730和至少一个用户接口740。视频信息的处理装置700中的各个组件通过总线系统750耦合在一起。可理解，总线系统750用于实现这些组件之间的连接通信总线系统750除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图7中将各种总线都标为总线系统750。
其中，用户接口740可以是显示器、鼠标或键盘等，其中，该显示器可以是触摸屏显示器。
存储器720可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者，本发明实施例描述的存储器720旨在包括但不限于这些和任意其它适合类型的存储器。
本发明实施例中的存储器720用于存储各种类型的数据以支持视频信息的处理装置700的操作。这些数据的示例包括：用于在视频信息的处理装置700上操作的任何计算机程序，如操作系统721和应用程序722。
其中，操作系统721包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序722可以包含各种应用程序，实现本发明实施例提供的视频信息的处理方法的程序可以包含在应用程序722中作为一个功能模块，当然也可以提供为专门用于视频信息的处理方法的应用程序。
本发明实施例提供的视频信息的处理方法可以应用于处理器710中，或者由处理器710实现，基于纯硬件的方式实施，或者基于软件和硬件结合的方式实施。
就纯硬件的实施方式来说，处理器710可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，本发明实施例提供的视频信息的处理方法的各步骤可以通过处理器710中的硬件的集成逻辑电路完成，例如在示例性实施例中，视频信息的处理装置700可以内建有用于实现本发明实施例提供的视频信息的处理方法的硬件译码处理器实施，例如，专用集成电路(ASIC，Application Specific Integrated Circuit)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)等实现。
就软硬件结合的实施方式来说，上述的处理器710可以是通用处理器及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器720，其中，存储介质存储能够在处理器710上运行的计算机程序，处理器710在读取并运行储器720中的计算机程序时，完成本发明实施例提供的视频信息的处理方法。
本发明实施例还提供一种存储介质，存储有计算机程序，所述计算机程序被处理器执行时用于实现本发明任一实施例提供的视频信息的处理方法，例如，如图4和图5中所示实施例的视频信息的处理方法；存储介质包括易挥发性随机存取存储器(RAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、闪存或其他存储器技术、只读光盘(CD-ROM)、数字通用盘(DVD)或其它被访问的介质。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本发明的保护范围之内。
Claims (11)
1.一种视频信息的处理方法，其特征在于，包括：
获取视频流数据，确定采用第一接口规范封装的第一硬解码API；
调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
2.根据权利要求1所述的方法，其特征在于，所述调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API之后，还包括：
调用所述第二硬解码API，基于所述第二硬解码API对应的硬解码库，控制所述显卡解码所述视频流数据；
将解码后的视频流数据进行格式转换。
3.根据权利要求2所述的方法，其特征在于，所述将解码后的视频流数据进行格式转换之后，还包括：
确定采用第三接口规范封装的用于渲染的渲染API，所述渲染API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的图形处理库对视频流数据进行渲染；
调用所述渲染API，基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据。
4.根据权利要求3所述的方法，其特征在于，所述获取视频流数据之后，还包括：
获取与所述视频流数据匹配的至少一个媒介信息；
所述调用所述渲染API，基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据之后，还包括：
基于所述图形处理库，控制所述显卡渲染所述至少一个媒介信息；
将渲染后的至少一个媒介信息，添加于渲染后的所述视频流数据的相应位置。
5.根据权利要求3所述的方法，其特征在于，所述获取视频流数据之后，还包括：
获取与所述视频流数据匹配的至少一个媒介信息；
将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置；
所述调用所述渲染API，基于所述图形处理库，控制所述显卡渲染格式转换后的所述视频流数据，包括：
调用所述渲染API，基于所述图形处理库，控制所述显卡对添加有所述至少一个媒介信息的视频流数据进行渲染。
6.根据权利要求5所述的方法，其特征在于，所述将所述至少一个媒介信息添加至渲染后的所述视频流数据的相应位置之前，还包括：
基于所述图形处理库，控制所述显卡对所述至少一个媒介信息进行渲染。
7.根据权利要求1至6任一项所述的方法，其特征在于，所述确定采用第一接口规范封装的第一硬解码API之后，还包括：
调用采用第一接口规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
8.根据权利要求1至6任一项所述的方法，其特征在于，所述第一接口规范包括VDPAU规范；所述第二接口规范包括VAAPI规范；所述确定采用第一接口规范封装的第一硬解码API之后，还包括：
调用采用VDPAU规范封装的初始化API，对所述第一硬解码API对应的硬解码库初始化。
9.一种视频信息的处理装置，其特征在于，包括：
获取模块，用于获取视频流数据；
确定模块，用于在获取到所述视频流数据后，确定采用第一接口规范封装的第一硬解码API；
调用模块，用于调用所述第一硬解码API获得采用第二接口规范封装的第二硬解码API，所述第二硬解码API包含于所述第一硬解码API对应的硬解码库，用于调用显卡驱动内的硬解码库对所述视频流数据进行解码。
10.一种视频信息的处理装置，其特征在于，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；
其中，所述处理器用于运行所述计算机程序时，实现权利要求1至8任一项所述方法。
11.一种存储介质，其特征在于，存储有计算机程序，所述计算机程序被处理器执行时，实现权利要求1至8任一项所述方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711342899.5A CN109963191A (zh) | 2017-12-14 | 2017-12-14 | 一种视频信息的处理方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711342899.5A CN109963191A (zh) | 2017-12-14 | 2017-12-14 | 一种视频信息的处理方法、装置及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109963191A true CN109963191A (zh) | 2019-07-02 |
Family
ID=67018513
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711342899.5A Withdrawn CN109963191A (zh) | 2017-12-14 | 2017-12-14 | 一种视频信息的处理方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109963191A (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111263173A (zh) * | 2020-01-09 | 2020-06-09 | 安徽文香信息技术有限公司 | 一种数据资源添加方法及装置 |
| CN112162715A (zh) * | 2020-09-22 | 2021-01-01 | 苏州科达科技股份有限公司 | 图像处理方法、装置及存储介质 |
| CN112689150A (zh) * | 2020-12-15 | 2021-04-20 | 北京计算机技术及应用研究所 | 一种高性能视频转服务器的设计 |
| CN114079823A (zh) * | 2021-11-17 | 2022-02-22 | 天翼数字生活科技有限公司 | 基于Flutter的视频渲染方法、装置、设备及介质 |
| CN114222073A (zh) * | 2021-12-13 | 2022-03-22 | 北京百度网讯科技有限公司 | 视频输出方法、装置、电子设备和存储介质 |
| CN114268796A (zh) * | 2021-12-22 | 2022-04-01 | 天翼云科技有限公司 | 视频流处理的方法及装置 |
| CN114489882A (zh) * | 2021-12-16 | 2022-05-13 | 成都鲁易科技有限公司 | 浏览器动态皮肤的实现方法及装置、存储介质 |
| CN114760495A (zh) * | 2022-03-21 | 2022-07-15 | 南京芯驰半导体科技有限公司 | 一种基于视频处理单元的视频硬件解码方法及系统 |
| WO2023024370A1 (zh) * | 2021-08-25 | 2023-03-02 | 上海擎感智能科技有限公司 | 视频数据的处理方法及视频播放系统 |
| CN116193201A (zh) * | 2023-02-27 | 2023-05-30 | 深圳数拓科技有限公司 | 一种视频数据处理方法 |
| CN116761032A (zh) * | 2023-08-18 | 2023-09-15 | 荣耀终端有限公司 | 视频播放方法、可读介质和电子设备 |
| CN116828198A (zh) * | 2023-08-29 | 2023-09-29 | 麒麟软件有限公司 | 在nvidia gpu上支持va-api硬件视频加速接口的方法 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102404624A (zh) * | 2011-11-07 | 2012-04-04 | 深圳市佳创视讯技术股份有限公司 | 一种数字机顶盒用支持硬件解码的全格式媒体播放器 |
| US20130156101A1 (en) * | 2011-12-16 | 2013-06-20 | Microsoft Corporation | Hardware-accelerated decoding of scalable video bitstreams |
| CN103428582A (zh) * | 2013-09-02 | 2013-12-04 | 贝壳网际（北京）安全技术有限公司 | 播放视频的方法、装置和客户端 |
| CN104023260A (zh) * | 2013-02-28 | 2014-09-03 | 腾讯科技（深圳）有限公司 | 硬件解码实现方法、装置及播放器 |
| CN104333808A (zh) * | 2014-11-14 | 2015-02-04 | 复旦大学 | 用于Android及Linux智能电视机上的通用播放器 |
| CN104780378A (zh) * | 2015-04-16 | 2015-07-15 | 腾讯科技（北京）有限公司 | 一种用于解码视频的方法、装置和播放器 |
| CN105430408A (zh) * | 2015-12-04 | 2016-03-23 | 武汉斗鱼网络科技有限公司 | 一种基于Intel、AMD和Nvidia三平台的H264硬件解码系统 |
| CN106713937A (zh) * | 2016-12-30 | 2017-05-24 | 广州虎牙信息科技有限公司 | 视频播放控制方法、装置及终端设备 |
-
2017
- 2017-12-14 CN CN201711342899.5A patent/CN109963191A/zh not_active Withdrawn
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102404624A (zh) * | 2011-11-07 | 2012-04-04 | 深圳市佳创视讯技术股份有限公司 | 一种数字机顶盒用支持硬件解码的全格式媒体播放器 |
| US20130156101A1 (en) * | 2011-12-16 | 2013-06-20 | Microsoft Corporation | Hardware-accelerated decoding of scalable video bitstreams |
| CN104023260A (zh) * | 2013-02-28 | 2014-09-03 | 腾讯科技（深圳）有限公司 | 硬件解码实现方法、装置及播放器 |
| CN103428582A (zh) * | 2013-09-02 | 2013-12-04 | 贝壳网际（北京）安全技术有限公司 | 播放视频的方法、装置和客户端 |
| CN104333808A (zh) * | 2014-11-14 | 2015-02-04 | 复旦大学 | 用于Android及Linux智能电视机上的通用播放器 |
| CN104780378A (zh) * | 2015-04-16 | 2015-07-15 | 腾讯科技（北京）有限公司 | 一种用于解码视频的方法、装置和播放器 |
| CN105430408A (zh) * | 2015-12-04 | 2016-03-23 | 武汉斗鱼网络科技有限公司 | 一种基于Intel、AMD和Nvidia三平台的H264硬件解码系统 |
| CN106713937A (zh) * | 2016-12-30 | 2017-05-24 | 广州虎牙信息科技有限公司 | 视频播放控制方法、装置及终端设备 |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111263173B (zh) * | 2020-01-09 | 2021-10-19 | 安徽文香信息技术有限公司 | 一种数据资源添加方法及装置 |
| CN111263173A (zh) * | 2020-01-09 | 2020-06-09 | 安徽文香信息技术有限公司 | 一种数据资源添加方法及装置 |
| CN112162715A (zh) * | 2020-09-22 | 2021-01-01 | 苏州科达科技股份有限公司 | 图像处理方法、装置及存储介质 |
| CN112689150A (zh) * | 2020-12-15 | 2021-04-20 | 北京计算机技术及应用研究所 | 一种高性能视频转服务器的设计 |
| WO2023024370A1 (zh) * | 2021-08-25 | 2023-03-02 | 上海擎感智能科技有限公司 | 视频数据的处理方法及视频播放系统 |
| CN114079823A (zh) * | 2021-11-17 | 2022-02-22 | 天翼数字生活科技有限公司 | 基于Flutter的视频渲染方法、装置、设备及介质 |
| CN114222073A (zh) * | 2021-12-13 | 2022-03-22 | 北京百度网讯科技有限公司 | 视频输出方法、装置、电子设备和存储介质 |
| CN114489882B (zh) * | 2021-12-16 | 2023-05-19 | 成都鲁易科技有限公司 | 浏览器动态皮肤的实现方法及装置、存储介质 |
| CN114489882A (zh) * | 2021-12-16 | 2022-05-13 | 成都鲁易科技有限公司 | 浏览器动态皮肤的实现方法及装置、存储介质 |
| CN114268796A (zh) * | 2021-12-22 | 2022-04-01 | 天翼云科技有限公司 | 视频流处理的方法及装置 |
| CN114760495A (zh) * | 2022-03-21 | 2022-07-15 | 南京芯驰半导体科技有限公司 | 一种基于视频处理单元的视频硬件解码方法及系统 |
| CN116193201A (zh) * | 2023-02-27 | 2023-05-30 | 深圳数拓科技有限公司 | 一种视频数据处理方法 |
| CN116761032A (zh) * | 2023-08-18 | 2023-09-15 | 荣耀终端有限公司 | 视频播放方法、可读介质和电子设备 |
| CN116761032B (zh) * | 2023-08-18 | 2024-04-23 | 荣耀终端有限公司 | 视频播放方法、可读介质和电子设备 |
| CN116828198A (zh) * | 2023-08-29 | 2023-09-29 | 麒麟软件有限公司 | 在nvidia gpu上支持va-api硬件视频加速接口的方法 |
| CN116828198B (zh) * | 2023-08-29 | 2023-11-28 | 麒麟软件有限公司 | 在nvidia gpu上支持va-api硬件视频加速接口的方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109963191A (zh) | 一种视频信息的处理方法、装置及存储介质 | |
| US11422779B2 (en) | Application support for network devices | |
| US9836437B2 (en) | Screencasting for multi-screen applications | |
| EP1914640B1 (en) | Multiple screen size render-engine | |
| US9922007B1 (en) | Split browser architecture capable of determining whether to combine or split content layers based on the encoding of content within each layer | |
| US20100217884A2 (en) | Method and system of providing multimedia content | |
| US10573274B2 (en) | Method and apparatus for transmission and reception of media data | |
| WO2022127890A1 (zh) | 一种基于云服务的渲染方法及其相关设备 | |
| CN107169147B (zh) | 数据处理方法、装置和电子设备 | |
| US20190014063A1 (en) | System and Methods for Dynamically Generating Animated GIF Files for Delivery Via the Network | |
| CN114302176A (zh) | 视频播放方法及装置 | |
| CN111818279A (zh) | 字幕的生成方法、展示方法及交互方法 | |
| CN112995711B (zh) | 一种web前端视频的分帧与图片处理合成方法及系统 | |
| EP3229478B1 (en) | Cloud streaming service system, image cloud streaming service method using application code, and device therefor | |
| CN110569460B (zh) | 推送信息展示方法、装置及存储介质 | |
| CN116261003A (zh) | 一种显示设备及基于浏览器的流媒体播放控制方法 | |
| KR102271721B1 (ko) | 클라우드 스트리밍 서비스 시스템, 단말 성능을 고려한 이미지 클라우드 스트리밍 서비스 방법 및 이를 위한 장치 | |
| KR102078576B1 (ko) | 알파 데이터 압축을 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치 | |
| RU2690888C2 (ru) | Способ, устройство и вычислительное устройство для получения широковещательного контента | |
| CN107707930B (zh) | 视频处理方法、装置及系统 | |
| EP0841610A2 (en) | Hot areas in interactive movies | |
| CN111935492A (zh) | 一种基于视频文件的直播礼物展示及构建方法 | |
| CN111813969A (zh) | 多媒体数据处理方法、装置、电子设备及计算机存储介质 | |
| WO2017061434A1 (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
| Lee et al. | Simultaneously accelerating OpenVG and SVG tiny with multimedia hardware |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20190702 |