CN112383775A - 一种基于云手机的视频数据传输方法 - Google Patents
一种基于云手机的视频数据传输方法 Download PDFInfo
- Publication number
- CN112383775A CN112383775A CN202011247311.XA CN202011247311A CN112383775A CN 112383775 A CN112383775 A CN 112383775A CN 202011247311 A CN202011247311 A CN 202011247311A CN 112383775 A CN112383775 A CN 112383775A
- Authority
- CN
- China
- Prior art keywords
- video data
- mobile phone
- cloud mobile
- cloud
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开的基于云手机的视频数据传输方法,涉及云手机领域,云手机通过其内部组件virtualdisplay进行视频数据的采集,云手机对采集到的视频数据进行压缩并通过内网,将视频数据传输到指定的编码服务器,根据云手机当前的网络环境,动态控制编码服务器调整码率并对所述视频数据进行编码,编码服务器将编码后的视频数据传输给客户端,提升了云手机的可视化效果和用户的体验,降低了设备的成本。
Description
技术领域
本发明涉及云手机领域,具体涉及一种基于云手机的视频数据传输方法。
背景技术
目前,云手机领域中主要使用的编码方案为H264,传输协议为TCP协议。但由于云手机的用户会在不同硬件和网络环境下使用服务,同时对云手机会有不同的可视化需求如清晰度、延迟、流量带宽等,但目前市面上的方案,很难兼顾这些要求,导致用户体验不好。
现有的音视频数据传输方案主要采用本地编码的模式。这种模式的优点是高效、时延低,但是也存在着弊端,本地编码需要耗费较高的CPU或者GPU资源,意味着一台服务器能够承载的手机路数就会大大减少了,设备的成本相对较高。
发明内容
为解决现有技术的不足,本发明实施例提供了一种基于云手机的视频数据传输方法,该方法包括以下步骤:
云手机通过其内部组件virtualdisplay进行视频数据的采集;
云手机对采集到的视频数据进行压缩并通过内网,将所述视频数据传输到指定的编码服务器;
根据云手机当前的网络环境,动态控制所述编码服务器调整码率并对所述视频数据进行编码;
所述编码服务器将编码后的视频数据传输给客户端。
优选地,编码服务器将编码后的视频数据传输给客户端包括:
分别判断所述视频数据中的各帧图像是否为I帧图像,若是,则将所述视频数据分割为多段数据并分别为各段数据设置标记。
优选地,所述编码服务器根据云手机当前的网络环境,动态调整码率包括:
判断云手机当前的网络环境的ping值是否小于设定的阈值,若是,则提高当前的码率,若否,则降低当前的码率。
优选地,云手机对采集到的视频数据进行压缩包括:
采用YUA格式,将所述视频数据压缩为RGB格式24位的数据。
本发明实施例提供的基于云手机的视频数据传输方法,具有以下有益效果:
(1)基于H264或H265的编码方案及可靠性UDP传输协议,提升了云手机的可视化效果和用户的体验;
(2)采用分离编码的原则,以一定的时延损耗来提升设备的性能,同时通过编码服务器的复用,降低了设备的成本。
具体实施方式
以下结合具体实施例对本发明作具体的介绍。
本发明提供的实施例提供的基于云手机的视频数据传输方法,包括以下步骤:
S101,云手机通过其内部组件virtualdisplay进行视频数据的采集。
S102,云手机对采集到的视频数据进行压缩并通过内网,将视频数据传输到指定的编码服务器。
其中,由于是内网传输,所以传输效率很高,尽管如此,由于视频数据相对较大,所以需要对采集到的视频数据进行压缩。
S103,根据云手机当前的网络环境,动态控制编码服务器调整码率并对所述视频数据进行编码。
其中,采用独立的编码服务器有几个好处:
(1)编码服务器独立后,便可实现1对n的编码,达到编码的复用(用户不是实时需要连接云手机,所以一个编码服务端在服务完一个云手机用户后,资源可被回收重复利用,为其他的云手机用户服务,实现了1个编码服务端服务于多台云机设备)。
(2)编码服务器独立搭建,便和云手机解耦,编码端可以根据用户的使用场景,采用H264或H265(编码对性能的要求极高,需要用到GPU资源,这个在云手机上是一个很珍贵的资源,如果云手机上的GPU也被用来做编码,那么一组服务器能够虚拟出的云手机设备将大量减少,大大提高了设备成本)的编码模式。
S104,编码服务器将编码后的视频数据传输给客户端。
可选地,编码服务器将编码后的视频数据传输给客户端包括:
分别判断所述视频数据中的各帧图像是否为I帧图像,若是,则将所述视频数据分割为多段数据并分别为各段数据设置标记。
其中,基于UDP传输协议之上进行优化,在视频流数据上,I帧是关键数据帧,遇到I帧时,会校验I帧数据的完整性,保证在用户端能够收到完整的i帧数据,保证视频数据的显示。P帧时与i帧的差异数据,这部分数据非显示关键数据,在传输过程种如果有丢失,则直接丢弃,基本上不会影响显示,避免因为弱网络环境下因为丢帧重传带来的时间损耗。
可选地,所述编码服务器根据云手机当前的网络环境,动态调整码率包括:
判断云手机当前的网络环境的ping值是否小于设定的阈值,若是,则提高当前的码率,若否,则降低当前的码率。
其中,客户端在网络环境好的情况下,ping值较低,数据传输快,此时会像编码服务器发起请求,编码服务器会提升码率(数据量变大,同时视频流数据也更清晰,用户体验更好)。而当网络一般或者较差时,此时编码服务器也会收到请求,降低码率,减少传输帧率,这样子可以保障把关键视频数据传输到位,在客户端上能够较为流畅的播放视频流。而不会引起因为数据流量大,导致网络延迟逐步扩大的问题。
可选地,云手机对采集到的视频数据进行压缩包括:
采用YUA格式,将所述视频数据压缩为RGB格式24位的数据。
本发明实施例提供的基于云手机的视频数据传输方法,云手机通过其内部组件virtualdisplay进行视频数据的采集,云手机对采集到的视频数据进行压缩并通过内网,将视频数据传输到指定的编码服务器,根据云手机当前的网络环境,动态控制编码服务器调整码率并对所述视频数据进行编码,编码服务器将编码后的视频数据传输给客户端,提升了云手机的可视化效果和用户的体验,降低了设备的成本。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
可以理解的是,上述方法及装置中的相关特征可以相互参考。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
此外,存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。
Claims (6)
1.一种基于云手机的视频数据传输方法,其特征在于,包括:
云手机通过其内部组件virtualdisplay进行视频数据的采集;
云手机对采集到的视频数据进行压缩并通过内网,将所述视频数据传输到指定的编码服务器;
根据云手机当前的网络环境,动态控制所述编码服务器调整码率并对所述视频数据进行编码;
所述编码服务器将编码后的视频数据传输给客户端。
2.根据权利要求1所述的基于云手机的视频数据传输方法,其特征在于,编码服务器将编码后的视频数据传输给客户端包括:
分别判断所述视频数据中的各帧图像是否为I帧图像,若是,则将所述视频数据分割为多段数据并分别为各段数据设置标记。
3.根据权利要求1所述的基于云手机的视频数据传输方法,其特征在于,所述编码服务器根据云手机当前的网络环境,动态调整码率包括:
判断云手机当前的网络环境的ping值是否小于设定的阈值,若是,则提高当前的码率,若否,则降低当前的码率。
4.根据权利要求1所述的基于云手机的视频数据传输方法,其特征在于,云手机对采集到的视频数据进行压缩包括:
采用YUA格式,将所述视频数据压缩为RGB格式24位的数据。
5.一种计算机程序产品,其特征在于,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行如权利要求1-4所述的方法。
6.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1-4所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011247311.XA CN112383775A (zh) | 2020-11-10 | 2020-11-10 | 一种基于云手机的视频数据传输方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011247311.XA CN112383775A (zh) | 2020-11-10 | 2020-11-10 | 一种基于云手机的视频数据传输方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112383775A true CN112383775A (zh) | 2021-02-19 |
Family
ID=74579094
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011247311.XA Pending CN112383775A (zh) | 2020-11-10 | 2020-11-10 | 一种基于云手机的视频数据传输方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112383775A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113709708A (zh) * | 2021-08-20 | 2021-11-26 | 北京百度网讯科技有限公司 | 数据传输方法、装置、设备和存储介质 |
CN114025083A (zh) * | 2021-10-28 | 2022-02-08 | 北京百度网讯科技有限公司 | 云设备的视频采集方法、装置、电子设备和介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101520056B1 (ko) * | 2014-08-24 | 2015-05-20 | 주식회사 큐랩 | 클라우드 기반 모바일/온라인 게임 서버 부하 테스트 자동화 서비스 방법 |
US20180241488A1 (en) * | 2015-11-18 | 2018-08-23 | PB, Inc | Radiobeacon Data Sharing by Forwarding Low Energy Transmissions to a Cloud Host |
CN109640116A (zh) * | 2018-12-24 | 2019-04-16 | 广州微算互联信息技术有限公司 | 云手机网络视频编码方法与服务器 |
CN110290402A (zh) * | 2019-07-31 | 2019-09-27 | 腾讯科技(深圳)有限公司 | 一种视频码率调整方法、装置、服务器及存储介质 |
CN110430441A (zh) * | 2019-07-31 | 2019-11-08 | 湖南微算互联信息技术有限公司 | 一种云手机视频采集方法、系统、装置及存储介质 |
CN110430467A (zh) * | 2019-07-11 | 2019-11-08 | 阿里巴巴集团控股有限公司 | 远程设备访问方法和装置 |
CN110825394A (zh) * | 2019-10-14 | 2020-02-21 | 广州微算互联信息技术有限公司 | 用于云手机的应用程序自动初始化方法、系统及存储介质 |
CN110933514A (zh) * | 2019-12-06 | 2020-03-27 | 广州微算互联信息技术有限公司 | 视频质量控制方法、装置及计算机设备 |
CN111371954A (zh) * | 2020-03-11 | 2020-07-03 | 广州微算互联信息技术有限公司 | 一种对云手机资源配置进行动态调整的方法及装置 |
CN111694660A (zh) * | 2020-05-08 | 2020-09-22 | 广州微算互联信息技术有限公司 | 云手机数据发送方法、计算机装置和存储介质 |
CN111696591A (zh) * | 2020-05-08 | 2020-09-22 | 广州微算互联信息技术有限公司 | 一种云手机音频数据处理方法和系统 |
CN111884905A (zh) * | 2020-06-09 | 2020-11-03 | 广州速启科技有限责任公司 | 一种消息管理方法及系统 |
CN113556584A (zh) * | 2021-07-21 | 2021-10-26 | 北京百度网讯科技有限公司 | 云手机的截图传输方法、装置、电子设备和存储介质 |
-
2020
- 2020-11-10 CN CN202011247311.XA patent/CN112383775A/zh active Pending
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101520056B1 (ko) * | 2014-08-24 | 2015-05-20 | 주식회사 큐랩 | 클라우드 기반 모바일/온라인 게임 서버 부하 테스트 자동화 서비스 방법 |
US20180241488A1 (en) * | 2015-11-18 | 2018-08-23 | PB, Inc | Radiobeacon Data Sharing by Forwarding Low Energy Transmissions to a Cloud Host |
CN109640116A (zh) * | 2018-12-24 | 2019-04-16 | 广州微算互联信息技术有限公司 | 云手机网络视频编码方法与服务器 |
CN110430467A (zh) * | 2019-07-11 | 2019-11-08 | 阿里巴巴集团控股有限公司 | 远程设备访问方法和装置 |
CN110290402A (zh) * | 2019-07-31 | 2019-09-27 | 腾讯科技(深圳)有限公司 | 一种视频码率调整方法、装置、服务器及存储介质 |
CN110430441A (zh) * | 2019-07-31 | 2019-11-08 | 湖南微算互联信息技术有限公司 | 一种云手机视频采集方法、系统、装置及存储介质 |
CN110825394A (zh) * | 2019-10-14 | 2020-02-21 | 广州微算互联信息技术有限公司 | 用于云手机的应用程序自动初始化方法、系统及存储介质 |
CN110933514A (zh) * | 2019-12-06 | 2020-03-27 | 广州微算互联信息技术有限公司 | 视频质量控制方法、装置及计算机设备 |
CN111371954A (zh) * | 2020-03-11 | 2020-07-03 | 广州微算互联信息技术有限公司 | 一种对云手机资源配置进行动态调整的方法及装置 |
CN111694660A (zh) * | 2020-05-08 | 2020-09-22 | 广州微算互联信息技术有限公司 | 云手机数据发送方法、计算机装置和存储介质 |
CN111696591A (zh) * | 2020-05-08 | 2020-09-22 | 广州微算互联信息技术有限公司 | 一种云手机音频数据处理方法和系统 |
CN111884905A (zh) * | 2020-06-09 | 2020-11-03 | 广州速启科技有限责任公司 | 一种消息管理方法及系统 |
CN113556584A (zh) * | 2021-07-21 | 2021-10-26 | 北京百度网讯科技有限公司 | 云手机的截图传输方法、装置、电子设备和存储介质 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113709708A (zh) * | 2021-08-20 | 2021-11-26 | 北京百度网讯科技有限公司 | 数据传输方法、装置、设备和存储介质 |
CN113709708B (zh) * | 2021-08-20 | 2024-03-22 | 北京百度网讯科技有限公司 | 数据传输方法、装置、设备和存储介质 |
CN114025083A (zh) * | 2021-10-28 | 2022-02-08 | 北京百度网讯科技有限公司 | 云设备的视频采集方法、装置、电子设备和介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9628531B2 (en) | Systems and methods for controlling client behavior in adaptive streaming | |
US20140165119A1 (en) | Offline download method, multimedia file download method and system thereof | |
CN102752669B (zh) | 多通道实时流媒体文件的传送处理方法与系统、接收装置 | |
US9420022B2 (en) | Media requests to counter latency and minimize network bursts | |
CN112383775A (zh) | 一种基于云手机的视频数据传输方法 | |
CN114666225B (zh) | 带宽调整方法、数据传输方法、设备及计算机存储介质 | |
WO2017066346A1 (en) | Method and apparatus for optimizing video streaming for virtual reality | |
CN105635751A (zh) | 一种视频云平台播放视频的方法及装置 | |
US11863841B2 (en) | Video playing control method and system | |
CN102148747A (zh) | 媒体流的发送方法及装置 | |
CN110602338B (zh) | 音频处理方法、装置、系统、存储介质以及设备 | |
US20240080487A1 (en) | Method, apparatus for processing media data, computer device and storage medium | |
US11356722B2 (en) | System for distributing an audiovisual content | |
US10666381B2 (en) | Dynamically partitioning media streams | |
CN116980662A (zh) | 流媒体播放方法、装置、电子设备、存储介质及程序产品 | |
US20150149593A1 (en) | Virtual desktop infrastructure server, computer implemented video streaming method, and non-transitory computer readable storage medium thereof | |
CN112737971B (zh) | 数据处理方法、装置、存储介质及网络设备 | |
CN114945097A (zh) | 视频流处理方法及装置 | |
US10504482B2 (en) | Smart small form-factor pluggable (SFP) transceiver | |
CN114363645B (zh) | 超高清视频直播的码率控制方法、装置、设备及存储介质 | |
CN116033235B (zh) | 数据传输方法、数字人生产设备以及数字人显示设备 | |
US11523156B2 (en) | Method and system for distributing an audiovisual content | |
CN111147952B (zh) | 一种监控资源数据发送方法、装置及存储介质 | |
CN112887742B (zh) | 直播流处理方法、装置、设备及存储介质 | |
JP2017143475A (ja) | 配信管理装置、受信装置、分散処理システム、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |