CN110881046A - 一种云手机对接WebRTC协议的方法、装置、介质及终端设备 - Google Patents

一种云手机对接WebRTC协议的方法、装置、介质及终端设备 Download PDF

Info

Publication number
CN110881046A
CN110881046A CN201911243798.1A CN201911243798A CN110881046A CN 110881046 A CN110881046 A CN 110881046A CN 201911243798 A CN201911243798 A CN 201911243798A CN 110881046 A CN110881046 A CN 110881046A
Authority
CN
China
Prior art keywords
webrtc
module
cloud
mobile phone
protocol
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911243798.1A
Other languages
English (en)
Inventor
陈思民
黄坚
黄小勇
雷磊
廖松青
杨凯
何振杰
王自辉
施海参
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Microcomputer Interconnection Information Technology Co Ltd
Original Assignee
Guangzhou Microcomputer Interconnection Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Microcomputer Interconnection Information Technology Co Ltd filed Critical Guangzhou Microcomputer Interconnection Information Technology Co Ltd
Priority to CN201911243798.1A priority Critical patent/CN110881046A/zh
Publication of CN110881046A publication Critical patent/CN110881046A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling

Abstract

本发明属于云技术领域，具体涉及一种云手机对接WebRTC协议的方法、装置、介质及终端设备。本发明自行编写一个叫WebRTC‑redfinger‑gw的模块，它是在服务器运行的程序，其中包括一个client的模块，负责接收云手机的视频数据。另外一个模块是janus框架里对接WebRTC协议的模块，负责对接用户浏览器的数据交互。WebRTC‑redfinger‑gw的功能是将云手机的视频流通过WebRTC协议来进行传输，从而达到了WebRTC协议中的低延时响应的特点。

Description

一种云手机对接WebRTC协议的方法、装置、介质及终端设备
技术领域
本发明属于云技术领域，具体涉及一种云手机对接WebRTC协议的方法、装置、介质及终端设备。
背景技术
目前市场上网页直播类视频传输大多数采用HLS、RTMP协议传输。关于这些协议的介绍可参考此链接：https://blog.csdn.net/livelone/article/details/84336902。现有技术方案在网页端表现来看存在巨大的延时，其中HSL协议延时在10s以上、RTMP协议在1s以上。而且浏览器在解码方面也存在一定的瓶颈，非常依赖浏览器的性能。这种延时级别的方案在云游戏、云手机应用场景中是不可接受的。用户在进行云游戏操作中必须在毫秒级别的响应才能达到比较高质量的体验。
而WebRTC方案协议在浏览器层解决关于传输实时性的问题，能做到毫秒级的响应。实际测试中，主流支持WebRTC协议的浏览器720p分辨率的视频数据能实时解码达到30fps。近年来在各大平台对WebRTC都在推广并支持，其中包括IOS系统11版本以上的Safari浏览器也支持了WebRTC协议。对于网页云游戏而言，采用WebRTC协议是降低传输演示、解码延时的不二之选。
发明内容
针对上述的不足，本发明提供一种云手机对接WebRTC协议的方法、装置、介质及终端设备。
本发明通过以下技术方案实现：
一种云手机对接WebRTC协议的装置，包括：WebRTC-redfinger-gw模块，其基于WebRTC协议实现云手机与用户浏览器的数据对接；所述的WebRTC-redfinger-gw模块包括client模块和janus模块，所述的client模块，用于接收云手机的数据；所述的janus模块，用于对接WebRTC协议，实现与用户浏览器的数据交互。
优选的，所述的数据为视频流。
优选的，所述的janus模块具有开放接口。
优选的，所述的WebRTC-redfinger-gw的模块是在服务器运行的程序。
一种云手机对接WebRTC协议的方法，基于WebRTC协议实现云手机与用户浏览器的数据对接；所述的方法包括步骤：
S1：云手机与WebRTC-redfinger-gw模块中的client模块进行数据交互；
S2：用户浏览器与WebRTC-redfinger-gw模块中的janus模块进行数据交互。
优选的，所述的数据为视频流。
优选的，所述的janus模块具有开放接口。
优选的，所述的WebRTC-redfinger-gw的模块是在服务器运行的程序。
一种计算机可读存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现云手机对接WebRTC协议的方法的步骤。
一种终端设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中所述处理器执行所述程序时实现云手机对接WebRTC协议的方法的步骤。
与现有技术相比，本发明至少具有下述的有益效果或优点：
1、采用WebRTC协议传输视频流，能够大大降低视频传输延时，提升用户操作云游戏的流畅性。
2、解决了浏览器视频解码慢的技术瓶颈，视频解码的操作全部交付给浏览器内核完成，提升网页端控制的视频帧率，用户体验流畅性大大提升。
附图说明
以下将结合附图对本发明做进一步详细说明；
图1是WebRTC官方示例数据模型图；
图2是WebRTC协议对接云手机系统模型图；
图3是WebRTC-redfinger-gw模块框架图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明涉及到云手机中的云游戏应用，云游戏是以云计算为基础的游戏方式，在云游戏的运行模式下，所有游戏都在服务器端运行，并将渲染完毕后的游戏画面压缩后通过网络传送给用户。在客户端，用户的游戏设备不需要任何高端处理器和显卡，只需要基本的视频解压能力就可以了。
WebRTC官方给出的示例是浏览器之间进行点对点通讯，通常用于实时视频通话会议。浏览器之间通过WebRTC服务器进行数据的交互，WebRTC服务器包括NAT穿透服务器，信令服务器。可参考以下网站https://www.cnblogs.com/yubaolee/p/webrtc.html。官方示例数据模型如图1所示。
针对云手机系统而言，云手机系统相当于是WebRTC官方示例模型中的一个浏览器。而云手机推送的视频流信息需要对接WebRTC协议再推送给用户端浏览器中，从而实现了用户网页观看操控云手机的操作。云手机与用户浏览器之间需要一个WebRTC-gw的模块来衔接之间的视频数据。WebRTC协议对接云手机系统模型如图2所示。
云手机对接WebRTC协议的核心在于云手机的视频流要严格按照WebRTC协议的规范来传输。而在行业内有一个叫janus的框架实现了WebRTC协议与浏览器对接。而另外一端则需要自行开发把云手机的视频流对接到janus开放接口上。
在一个实施例中，自行编写一个叫WebRTC-redfinger-gw的模块，它是在服务器运行的程序，其中包括一个client的模块，负责接收云手机的视频数据。另外一个模块是janus框架里对接WebRTC协议的模块，负责对接用户浏览器的数据交互。WebRTC-redfinger-gw的功能是将云手机的视频流通过WebRTC协议来进行传输，从而达到了WebRTC协议中的低延时响应的特点。WebRTC-redfinger-gw模块框架图如图3所示。
在另一实施例中，还可以采用其他一些视频传输协议，如基于UDP的视频传输协议。
本发明还提供一种计算机可读存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现云手机对接WebRTC协议的方法的步骤。
本发明还提供一种终端设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中所述处理器执行所述程序时实现云手机对接WebRTC协议的方法的步骤。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围。在不脱离本发明之精神和范围内，所做的任何修改、等同替换、改进等，同样属于本发明的保护范围之内。

Claims (10)

1.一种云手机对接WebRTC协议的装置，其特征在于，包括：WebRTC-redfinger-gw模块，其基于WebRTC协议实现云手机与用户浏览器的数据对接；所述的WebRTC-redfinger-gw模块包括client模块和janus模块，所述的client模块，用于接收云手机的数据；所述的janus模块，用于对接WebRTC协议，实现与用户浏览器的数据交互。
2.根据权利要求1所述的云手机对接WebRTC协议的装置，其特征在于，所述的数据为视频流。
3.根据权利要求1所述的云手机对接WebRTC协议的装置，其特征在于，所述的janus模块具有开放接口。
4.根据权利要求1所述的云手机对接WebRTC协议的装置，其特征在于，所述的WebRTC-redfinger-gw的模块是在服务器运行的程序。
5.一种云手机对接WebRTC协议的方法，其特征在于，基于WebRTC协议实现云手机与用户浏览器的数据对接；所述的方法包括步骤：
S1：云手机与WebRTC-redfinger-gw模块中的client模块进行数据交互；
S2：用户浏览器与WebRTC-redfinger-gw模块中的janus模块进行数据交互。
6.根据权利要求5所述的云手机对接WebRTC协议的方法，其特征在于，所述的数据为视频流。
7.根据权利要求5所述的云手机对接WebRTC协议的方法，其特征在于，所述的janus模块具有开放接口。
8.根据权利要求5所述的云手机对接WebRTC协议的方法，其特征在于，所述的WebRTC-redfinger-gw的模块是在服务器运行的程序。
9.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，其中，该程序被处理器执行时实现权利要求5-8任一所述的云手机对接WebRTC协议的方法的步骤。
10.一种终端设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中所述处理器执行所述程序时实现权利要求5-8任一所述的云手机对接WebRTC协议的方法的步骤。
CN201911243798.1A 2019-12-06 2019-12-06 一种云手机对接WebRTC协议的方法、装置、介质及终端设备 Pending CN110881046A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911243798.1A CN110881046A (zh) 2019-12-06 2019-12-06 一种云手机对接WebRTC协议的方法、装置、介质及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911243798.1A CN110881046A (zh) 2019-12-06 2019-12-06 一种云手机对接WebRTC协议的方法、装置、介质及终端设备

Publications (1)

Publication Number Publication Date
CN110881046A true CN110881046A (zh) 2020-03-13

Family

ID=69730346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911243798.1A Pending CN110881046A (zh) 2019-12-06 2019-12-06 一种云手机对接WebRTC协议的方法、装置、介质及终端设备

Country Status (1)

Country Link
CN (1) CN110881046A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112354177A (zh) * 2020-09-30 2021-02-12 江苏视博云信息技术有限公司 基于webrtc的云游戏即时启动方法、装置及系统
CN113709185A (zh) * 2021-10-22 2021-11-26 浙江云针信息科技有限公司 一种实现Android云串流的方法和系统
CN113766061A (zh) * 2021-08-31 2021-12-07 北京百度网讯科技有限公司 一种图像获取方法、装置、设备以及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180014147A1 (en) * 2016-07-11 2018-01-11 KAV Enterprise, Inc. Real-time data acquisition using peer-to-peer technologies
CN109906107A (zh) * 2016-06-13 2019-06-18 索尼互动娱乐有限责任公司 基于浏览器的云游戏

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109906107A (zh) * 2016-06-13 2019-06-18 索尼互动娱乐有限责任公司 基于浏览器的云游戏
US20190282897A1 (en) * 2016-06-13 2019-09-19 Sony Interactive Entertainment America Llc Browser-based cloud gaming
US20180014147A1 (en) * 2016-07-11 2018-01-11 KAV Enterprise, Inc. Real-time data acquisition using peer-to-peer technologies

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112354177A (zh) * 2020-09-30 2021-02-12 江苏视博云信息技术有限公司 基于webrtc的云游戏即时启动方法、装置及系统
CN113766061A (zh) * 2021-08-31 2021-12-07 北京百度网讯科技有限公司 一种图像获取方法、装置、设备以及存储介质
CN113709185A (zh) * 2021-10-22 2021-11-26 浙江云针信息科技有限公司 一种实现Android云串流的方法和系统

Similar Documents

Publication Publication Date Title
CN110881046A (zh) 一种云手机对接WebRTC协议的方法、装置、介质及终端设备
CN102761564B (zh) 图形共享方法、系统与终端
CN102457544B (zh) 基于互联网的屏幕共享系统中用于采集屏幕图像的方法和系统
CN111135569A (zh) 云游戏处理方法、装置、存储介质与电子设备
US20170195617A1 (en) Image processing method and electronic device
CN109085950B (zh) 基于电子白板的多屏互动方法、装置及电子白板
CN106210753B (zh) 一种视频直播方法及装置
CN107566346B (zh) 3d游戏数据的传输方法、装置以及存储介质、电子装置
CN112653700A (zh) 一种基于webrtc网页视频通信的方法
US20210409737A1 (en) Video encoding method, video decoding method, and related apparatuses
CN104794111A (zh) 交互方法和装置
CN108966006A (zh) 视频的播放方法、浏览器设备及可读存储介质
US20170171508A1 (en) Method and Device for Inputting Audio and Video Information
CN113766270A (zh) 视频播放方法、系统、服务器、终端设备、以及电子设备
CN112653898A (zh) 用户形象生成方法、相关装置及计算机程序产品
JP2015035996A (ja) ゲームを提供するサーバ及び方法
CN109587118B (zh) Android网游的分布式支持多终端和多网络的系统
CN112929704B (zh) 数据传输方法、装置、电子设备以及存储介质
CN104639501A (zh) 一种数据流传输的方法、设备及系统
EP3920537A1 (en) Video decoding method and apparatus, video encoding method and apparatus, storage medium and electronic device
CN112584228A (zh) 一种基于web的低延迟投屏方法及系统
CN114938408B (zh) 一种云手机的数据传输方法、系统、设备及介质
CN111954041A (zh) 一种视频加载方法、计算机设备及可读存储介质
WO2015117383A1 (zh) 通话的方法、终端和计算机存储介质
CN110798700B (zh) 视频处理方法、视频处理装置、存储介质与电子设备

Legal Events

Date Code Title Description
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200313

RJ01 Rejection of invention patent application after publication