CN115801747B - 一种基于arm架构的云服务器及音视频数据传输方法 - Google Patents

一种基于arm架构的云服务器及音视频数据传输方法 Download PDF

Info

Publication number
CN115801747B
CN115801747B CN202310039489.2A CN202310039489A CN115801747B CN 115801747 B CN115801747 B CN 115801747B CN 202310039489 A CN202310039489 A CN 202310039489A CN 115801747 B CN115801747 B CN 115801747B
Authority
CN
China
Prior art keywords
audio
video data
video
memory
transmits
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310039489.2A
Other languages
English (en)
Other versions
CN115801747A (zh
Inventor
连寿哲
陈建铭
郑源斌
郭志斌
林瀚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiamen Jiansuan Technology Co ltd
Original Assignee
Xiamen Jiansuan Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiamen Jiansuan Technology Co ltd filed Critical Xiamen Jiansuan Technology Co ltd
Priority to CN202310039489.2A priority Critical patent/CN115801747B/zh
Publication of CN115801747A publication Critical patent/CN115801747A/zh
Application granted granted Critical
Publication of CN115801747B publication Critical patent/CN115801747B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种基于ARM架构的云服务器及音视频数据传输方法,其云服务器包括存储器、处理器及存储在存储器上并可在处理器上运行的程序,程序可实现如下步骤:接收部署在一终端设备的客户端发送的音视频请求;FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供终端设备的客户端与云服务器建立连接,用于传输相关音视频数据;Surfaceflinger获取云服务器产生相应的音视频信息,将音视频信息生成句柄并输出;编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对信息进行编码与加密,形成加密数据源;客户端接收加密数据源,对加密数据源进行解密,客户端接收云服务器输出的相应音视频数据,配合用户使用情景,音视频数据传输效率较高。

Description

一种基于ARM架构的云服务器及音视频数据传输方法
技术领域
本发明属于云服务器技术领域,特别涉及一种基于ARM架构的云服务器及音视频数据传输方法。
背景技术
在现有技术中为满足移动应用不断增长的性能需求,同时兼顾放缓增长的个人电脑计算能力,学术界和工业界通过不断升级移动模拟器的核心架构来提升模拟效率。但对于重型移动应用、特别是图形渲染计算量巨大的三维游戏应用,以及高质量的音视频的流媒体播放需求,容易导致移动应用的运行流畅度过低、困扰用户的卡顿现象频繁出现,导致传输效率较低。现有技术中常见的云端的模拟器核心架构都是基于X86架构的服务器,而模拟的是操作系统,比如安卓核心的却是基于ARM架构的运行的操作系统。ARM架构的服务器具有较为精简的指令集,能够实现服务器运算性能最大化,但是目前现有技术中暂未有利用ARM架构CPU,结合GPU实现由云端服务器对音视频流媒体处理的优化方案。
发明内容
本发明提供一种基于ARM架构的云服务器及音视频数据传输方法,旨在解决X86指令集架构较为复杂,对于不同系统情况没有机动的传输方式配合使用,导致传输效率较低的问题。
为解决上述技术问题,本发明提供如下技术方案:
一种基于ARM架构的云服务器,所述云服务器包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现如下步骤:
S1:接收部署在一终端设备的客户端发送的音视频请求;
S2:部署在所述云服务器中为应用层的客户端提供一虚拟的显示设备FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供所述终端设备的客户端与所述云服务器建立连接,用于传输相关音视频数据;
S3:所述云服务器中的专有进程Surfaceflinger根据FrameBuffer提供的API,获取所述云服务器产生相应的音视频信息,将所述音视频信息生成仅包含标识音视频信息的句柄并输出;
S4:部署在所述云服务器中的编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对所述信息进行编码与加密,形成加密数据源;
S5:部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,所述客户端接收所述云服务器输出的相应音视频数据。
优选地,所述步骤S3中,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
优选地,所述S4步骤中,其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由音视频数据出流模块接收该音视频数据,所述音视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。
优选地,所述S4步骤中对所述编码数据进行加密具体为:使用RSA的加密方式进行非对称加密。
优选地,所述S4步骤中,对所述信息进行编码具体为采用H.265编码器进行编码。
一种基于ARM架构的云服务器音视频数据传输方法,包含以下步骤:
接收部署在一终端设备的客户端发送的音视频请求;
部署在所述云服务器中为应用层的客户端提供一虚拟的显示设备FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供所述终端设备的客户端与所述云服务器建立连接,用于传输相关音视频数据;
所述云服务器中的专有进程Surfaceflinger根据FrameBuffer提供的API,获取所述云服务器产生相应的音视频信息,将所述音视频信息生成仅包含标识音视频信息的句柄并输出;
部署在所述云服务器中的编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对所述信息进行编码与加密,形成加密数据源;
部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,所述客户端接收所述云服务器输出的相应音视频数据。
优选地,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
优选地,其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由音视频数据出流模块接收该音视频数据,所述音视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。
优选地,所述S4步骤中对所述编码数据进行加密具体为:使用RSA的加密方式进行非对称加密。
优选地,对所述信息进行编码具体为采用H.265编码器进行编码。
与现有技术相比,本发明具有以下技术效果:
1.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,可以根据实时情况选择采用不同的编码方式,将客户所需的音视频数据以更高的效率传输至客户端,解决了传统音视频传输难以满足客户实时性要求。
2.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,传统方法中大多将生成的内容转存到内存或者磁盘中进行发送进程间通讯。而音视频的信息将会消耗大量的的空间进行存储。而在本发明中,一个句柄只描述一个具体信息存放的位置,相对而言所占用的资源较小,可减少一些资源传输带来的消耗。
3.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,根据不同情况提供了三种音视频数据传输方式:在CPU空闲时,系统采用内部编码模块对音视频数据进行编码,方式处理更精细,兼容性好,能解码所有的视频格式文件,画质清晰、画面精致;在CPU被占用较多资源时,系统采用硬件编码设备对音视频进行编码,可分离出音视频编解码的工作,无需占用CPU资源;性能高,同等条件下编解码的速率更快,功耗较低;系统采用外部编码主机,避免了CPU负载重的问题,同时传输效率较高,音视频画质更为清晰。
4.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,对编码数据使用RSA的加密方式进行非对称加密,其安全性与质因数分解的难度相关,所以安全性较好。
5.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,其中采用H.265编码器对信息进行编码进行编码,有效降低码流,提升编码效率,降低延时,更高效快捷。
6.本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法,结合不同应用场景,通过内外部灵活配合,为不同实施况状下的音视频数据传输提供效率更高,更为优质的方式。
附图说明
图1是本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法的流程示意图;
图2是本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法采用内部编码模块编码的流程示意图;
图3是本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法采用硬件编码设备编码的流程示意图;
图4是本发明所述的一种基于ARM架构的云服务器及音视频数据传输方法采用外部编码主机编码的流程示意图。
实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本申请具体实施例,并参照附图,对本发明技术方案进行清楚、完整地描述。
一种基于ARM架构的云服务器,所述云服务器包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现如下步骤:
S1:接收部署在一终端设备的客户端发送的音视频请求。
S2:FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API。帧缓冲(framebuffer)是为显示设备提供的一个接口,把显存抽象后的一种设备,他允许上层应用程序在图形模式下直接对显示缓冲区进行读写操作。
S3:Surfaceflinger根据FrameBuffer提供的API,获取相应的音视频信息,将所述音视频信息转化成句柄传出。Surfacerflinger是一个独立的Service,它接收所有Window(窗口内容,主要是内容的层次和布局)的Surface(记录window的内容)作为输入,根据ZOrder,透明度,大小,位置等参数,计算出每个Surface在最终合成图像中的位置,然后交由HWComposer或OpenGL生成最终的显示Buffer,然后显示到特定的显示设备上。
S4:编码服务器接收Surfaceflinger传出的句柄(FileDescriptor,简称FD),获取获取相应的信息,对所述信息进行编码与加密,形成加密数据源。
S5:部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,输出相应的音视频数据。
可以根据实时情况选择采用不同的编码方式,将客户所需的音视频数据以更高的效率传输至客户端,解决了传统音视频传输难以满足客户实时性要求。
优选地,所述步骤S3中,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
以生成图像信息为例:生成图像的进程,获取到设备需要生成的信息;生成图像的进程生成图像后,记录本次生成图像的在内存中的位置信息;通过进程间信息的传输将其传输给进行图像信息压缩的程序;图像处理程序通过句柄直接在内存中找到生成的图像信息;图像处理程序通过资源调度、硬件存在等方式处理图像;从图像处理程序处理完毕后通过网络传输的方式传输给图像传输程序。
传统方法中大多将生成的内容转存到内存或者磁盘中进行发送进程间通讯。而音视频的信息将会消耗大量的的空间进行存储。而在本发明中,一个句柄只描述一个具体信息存放的位置,相对而言所占用的资源较小,可减少一些资源传输带来的消耗。
优选地,所述S4步骤中,其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。在CPU空闲时,系统采用内部软件对音视频数据进行编码,方式处理更精细,兼容性好,能解码所有的视频格式文件,画质清晰、画面精致。
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。在CPU被占用较多资源时,系统采用内部硬件编码设备对音视频进行编码,可分离出音视频编解码的工作,无需占用CPU资源;性能高,同等条件下编解码的速率更快,功耗较低。
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由音视频数据出流模块接收该音视频数据,所述音视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。系统采用外部编码主机,避免了CPU负载重的问题,同时传输效率较高,音视频画质更为清晰。
优选地,所述S4步骤中对所述编码数据进行加密具体为:使用RSA的加密方式进行非对称加密,其安全性与质因数分解的难度相关,所以安全性较好。
优选地,所述S4步骤中,对所述信息进行编码具体为采用H.265编码器进行编码,有效降低码流,提升编码效率,降低延时,更高效快捷。
一种基于ARM架构的云服务器音视频数据传输方法,包含以下步骤:
接收部署在一终端设备的客户端发送的音视频请求;
部署在所述云服务器中为应用层的客户端提供一虚拟的显示设备FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供所述终端设备的客户端与所述云服务器建立连接,用于传输相关音视频数据;
所述云服务器中的专有进程Surfaceflinger根据FrameBuffer提供的API,获取所述云服务器产生相应的音视频信息,将所述音视频信息生成仅包含标识音视频信息的句柄并输出;
部署在所述云服务器中的编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对所述信息进行编码与加密,形成加密数据源;
部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,所述客户端接收所述云服务器输出的相应音视频数据。结合不同应用场景,通过内外部灵活配合,为不同实施况状下的音视频数据传输提供效率更高,更为优质的方式。
优选地,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
优选地,其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由音视频数据出流模块接收该音视频数据,所述音视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至音视频数据出流模块;
所述音视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端。
优选地,所述S4步骤中对所述编码数据进行加密具体为:使用RSA的加密方式进行非对称加密。
优选地,对所述信息进行编码具体为采用H.265编码器进行编码。
以上所述的仅是本发明的优选实施方式,应当指出,对于本领域的普通技术人员来说,在不脱离本发明创造构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。

Claims (8)

1.一种基于ARM架构的云服务器,其特征在于,所述云服务器包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序,所述程序被所述处理器执行时实现如下步骤:
S1:接收部署在一终端设备的客户端发送的音视频请求;
S2:部署在所述云服务器中为应用层的客户端提供一虚拟的显示设备FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供所述终端设备的客户端与所述云服务器建立连接,用于传输相关音视频数据;
S3:所述云服务器中的专有进程Surfaceflinger根据FrameBuffer提供的API,获取所述云服务器产生相应的音视频信息,将所述音视频信息生成仅包含标识音视频信息的句柄并输出;
S4:部署在所述云服务器中的编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对所述信息进行编码与加密,形成加密数据源;
其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由视频数据出流模块接收该音视频数据,所述视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
S5:部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,所述客户端接收所述云服务器输出的相应音视频数据。
2.根据权利要求1所述的一种基于ARM架构的云服务器,其特征在于,所述步骤S3中,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
3.根据权利要求1所述的一种基于ARM架构的云服务器,其特征在于,所述S4步骤中对编码数据进行加密具体为:使用RSA 的加密方式进行非对称加密。
4.根据权利要求1所述的一种基于ARM架构的云服务器,其特征在于,所述S4步骤中,对所述信息进行编码具体为采用H.265编码器进行编码。
5.一种基于ARM架构的云服务器音视频数据传输方法,其特征在于,包含以下步骤:
接收部署在一终端设备的客户端发送的音视频请求;
部署在所述云服务器中为应用层的客户端提供一虚拟的显示设备FrameBuffer根据客户端发送的音视频请求生成对应的音视频信息,提供相应的API接口,供所述终端设备的客户端与所述云服务器建立连接,用于传输相关音视频数据;
所述云服务器中的专有进程Surfaceflinger根据FrameBuffer提供的API,获取所述云服务器产生相应的音视频信息,将所述音视频信息生成仅包含标识音视频信息的句柄并输出;
部署在所述云服务器中的编码单元接收Surfaceflinger传输的句柄,解析并获取相应的信息,对所述信息进行编码与加密,形成加密数据源;
其中所述编码单元包括内部编码模块、GPU显存、内存、音视频数据出流模块,对所述信息进行编码的方式包括:
内部软件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块对音视频数据进行编码,后将编码数据传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
内部硬件编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块根据获取的音视频数据,将其传输至硬件编码设备;
所述硬件编码设备对音视频数据进行编码,后将编码数据传输回内部编码模块,所述内部编码模块将其传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
外部编码:内部编码模块接收所述句柄,将所述句柄传输至GPU显存;
所述GPU显存将所述句柄与内存进行映射,所述内存根据映射获取音视频数据,将其传输至所述内部编码模块;
所述内部编码模块将其传输至外部编码主机,由视频数据出流模块接收该音视频数据,所述视频数据出流模块将音视频数据传输至编码硬件,编码硬件对音视频数据进行编码,后将编码数据传输至视频数据出流模块;
所述视频数据出流模块对所述编码数据进行加密,然后传输至所述客户端;
部署在一终端设备的客户端接收所述加密数据源,对所述加密数据源进行解密,所述客户端接收所述云服务器输出的相应音视频数据。
6.根据权利要求5所述的一种基于ARM架构的云服务器音视频数据传输方法,其特征在于,将所述音视频信息生成仅包含标识音视频信息的句柄并输出具体为:所述句柄仅标识音视频信息在内存中的位置信息。
7.根据权利要求5所述的一种基于ARM架构的云服务器音视频数据传输方法,其特征在于,对所述编码数据进行加密具体为:使用RSA 的加密方式进行非对称加密。
8.根据权利要求5所述的一种基于ARM架构的云服务器音视频数据传输方法,其特征在于,对所述信息进行编码具体为采用H.265编码器进行编码。
CN202310039489.2A 2023-01-11 2023-01-11 一种基于arm架构的云服务器及音视频数据传输方法 Active CN115801747B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310039489.2A CN115801747B (zh) 2023-01-11 2023-01-11 一种基于arm架构的云服务器及音视频数据传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310039489.2A CN115801747B (zh) 2023-01-11 2023-01-11 一种基于arm架构的云服务器及音视频数据传输方法

Publications (2)

Publication Number Publication Date
CN115801747A CN115801747A (zh) 2023-03-14
CN115801747B true CN115801747B (zh) 2023-06-02

Family

ID=85428958

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310039489.2A Active CN115801747B (zh) 2023-01-11 2023-01-11 一种基于arm架构的云服务器及音视频数据传输方法

Country Status (1)

Country Link
CN (1) CN115801747B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103023872A (zh) * 2012-11-16 2013-04-03 杭州顺网科技股份有限公司 一种云游戏服务平台
CN115037944A (zh) * 2022-08-10 2022-09-09 中诚华隆计算机技术有限公司 一种云端流媒体硬解码方法、装置及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4122624B2 (ja) * 1999-04-16 2008-07-23 ソニー株式会社 データ受信方法およびデータ受信装置
CN101894150B (zh) * 2010-07-05 2012-03-28 优视科技有限公司 移动通讯设备终端的互联网网页音视频采集方法及系统
CN104333762B (zh) * 2014-11-24 2017-10-10 成都瑞博慧窗信息技术有限公司 一种视频解码方法
US10554992B2 (en) * 2015-06-03 2020-02-04 Avago Technologies International Sales Pte. Limited Inline codec switching
US9832476B2 (en) * 2015-06-15 2017-11-28 Microsoft Technology Licensing, Llc Multiple bit rate video decoding
CN115278304A (zh) * 2021-04-14 2022-11-01 腾讯云计算(长沙)有限责任公司 云音视频处理方法、系统、电子设备及存储介质
CN115547367A (zh) * 2022-09-23 2022-12-30 天翼数字生活科技有限公司 一种音视频缓冲区读取处理方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103023872A (zh) * 2012-11-16 2013-04-03 杭州顺网科技股份有限公司 一种云游戏服务平台
CN115037944A (zh) * 2022-08-10 2022-09-09 中诚华隆计算机技术有限公司 一种云端流媒体硬解码方法、装置及存储介质

Also Published As

Publication number Publication date
CN115801747A (zh) 2023-03-14

Similar Documents

Publication Publication Date Title
EP3264370B1 (en) Media content rendering method, user equipment, and system
Lamberti et al. A streaming-based solution for remote visualization of 3D graphics on mobile devices
US9075560B2 (en) Real-time compression with GPU/CPU
CA2814809C (en) Composite video streaming using stateless compression
US10560698B2 (en) Graphics server and method for streaming rendered content via a remote graphics processing service
WO2021231016A1 (en) Methods and apparatus for atlas management of augmented reality content
CN108881916A (zh) 远程桌面的视频优化处理方法及装置
US9235452B2 (en) Graphics remoting using augmentation data
KR102562877B1 (ko) 애플리케이션 계산들의 분배를 위한 방법들 및 장치들
CN104660687A (zh) 虚拟桌面显示的实现方法和系统
US20090323799A1 (en) System and method for rendering a high-performance virtual desktop using compression technology
WO2022257699A1 (zh) 图像画面显示方法、装置、设备、存储介质及程序产品
CN110891084A (zh) 一种基于自主hvdp协议的瘦客户端远程桌面控制系统
KR20140006778A (ko) 이미지 압축을 위한 엔트로피 코더
CN113946402A (zh) 基于渲染分离的云手机加速方法、系统、设备及存储介质
CN111901414A (zh) 基于虚拟化环境的安全桌面传输协议的实现方法及实现系统
CN111464828A (zh) 虚拟特效显示方法、装置、终端及存储介质
CN114567784B (zh) 一种用于飞腾显卡的vpu视频解码输出方法及系统
CN110807111A (zh) 三维图形的处理方法及装置、存储介质、电子设备
CN115801747B (zh) 一种基于arm架构的云服务器及音视频数据传输方法
US20140327698A1 (en) System and method for hybrid graphics and text rendering and client computer and graphics processing unit incorporating the same
CN111629228A (zh) 数据传输方法及服务器
CN116400998A (zh) 一种适用于虚拟显卡的视频硬件加速装置和方法
CN115174917A (zh) 一种基于h264的视频显示方法及装置
CN113301438A (zh) 一种基于底层虚拟化技术的云桌面视频播放方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant