CN113691822A - 一种WebRTC Simulcast的自适应调节方法和装置 - Google Patents

一种WebRTC Simulcast的自适应调节方法和装置 Download PDF

Info

Publication number
CN113691822A
CN113691822A CN202110889618.8A CN202110889618A CN113691822A CN 113691822 A CN113691822 A CN 113691822A CN 202110889618 A CN202110889618 A CN 202110889618A CN 113691822 A CN113691822 A CN 113691822A
Authority
CN
China
Prior art keywords
webrtc
simultast
webrtc client
simulcast
code stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110889618.8A
Other languages
English (en)
Other versions
CN113691822B (zh
Inventor
颜海洋
刘聘
巫进
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Huaiye Information Technology Co ltd
Original Assignee
Jiangsu Huaiye Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Huaiye Information Technology Co ltd filed Critical Jiangsu Huaiye Information Technology Co ltd
Priority to CN202110889618.8A priority Critical patent/CN113691822B/zh
Publication of CN113691822A publication Critical patent/CN113691822A/zh
Application granted granted Critical
Publication of CN113691822B publication Critical patent/CN113691822B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/55—Push-based network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种WebRTC Simulcast的自适应调节方法和装置，其中，所述方法包括以下步骤：获取WebRtc客户端发布方的SDP信息和RTP数据包；根据SDP信息得到WebRtc客户端发布方的Simulcast层数，并对应每层Simulcast建立Session；根据RTP数据包对Session进行排序；获取WebRtc客户端接收方的请求码流信息；根据请求码流信息和排序后的Session向WebRtc客户端接收方发送对应码流。本发明能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。

Description

一种WebRTC Simulcast的自适应调节方法和装置
技术领域
本发明涉及计算机通信技术领域，具体涉及一种WebRTC Simulcast的自适应调节方法和一种WebRTC Simulcast的自适应调节装置。
背景技术
在一个或多个WebRTC(Web Real-Time Communication，网页即时通信)用户参与的视频直播系统中，往往存在少部分用户网络质量较差的情况。通常，为保证该部分用户仍能播放观看，一般会降低发布方的视频码流，由此，无论用户网络的好坏都可以流畅观看视频，但是该方案会导致大部分网络好的用户观看到的视频质量被少数网络差的用户给拖累。
针对这种情况，目前一般采用如下三种方案：其一，使用服务端降码，针对这个网络较差的用户在服务端进行降码处理，但该方案会增加复杂度，增加时延；其二，采用SVC(Scalable Video CODEC，可伸缩视频编解码)技术，该技术在服务器上根据客户端网络情况进行分层转发，但该技术较为复杂，很难做到各终端统一使用；其三，采用Simulcast(联播)技术，所谓Simulcast技术就是发布方同时发布几路不同码流的视频到服务器，服务器根据接收方的网络状态转发相应的码流给接收用户，但该方案存在明显的缺陷，具体为播放端会受到上行客户端的影响，对于上行客户端来说，因为某种原因，Simulcast层数减少为一层时，如果没有相应处理，此时播放端就接收不到视频流，需要用户手工切换，或者在播放端进行对码流监控，当码流丢失的时候，重新去服务器请求码流，但这样会明显感觉到码流的卡顿，影响用户体验。
发明内容
本发明旨在至少在一定程度上解决上述技术中的技术问题之一。为此，本发明的一个目的在于提出一种WebRTC Simulcast的自适应调节方法，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
本发明的第二个目的在于提出一种WebRTC Simulcast的自适应调节装置。
为达到上述目的，本发明第一方面实施例提出了一种WebRTC Simulcast的自适应调节方法，包括以下步骤：获取WebRtc客户端发布方的SDP(Session DescriptionProtocol，会话描述协议)信息和RTP(Real-time Transport Protocol，实时传输协议)数据包；根据所述SDP信息得到所述WebRtc客户端发布方的Simulcast层数，并对应每层所述Simulcast建立Session(时域)；根据所述RTP数据包对所述Session进行排序；获取所述WebRtc客户端接收方的请求码流信息；根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流。
根据本发明实施例提出的WebRTC Simulcast的自适应调节方法，通过获取获取WebRtc客户端发布方的SDP信息，得到WebRtc客户端发布方的Simulcast层数，并对应每层Simulcast建立Session，并可根据RTP数据包对Session进行排序，最后可获取WebRtc客户端接收方的请求码流信息，以结合排序后的Session向WebRtc客户端接收方发送对应码流，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
另外，根据本发明上述实施例提出的WebRTC Simulcast的自适应调节方法还可以具有如下附加的技术特征：
根据本发明的一个实施例，所述SDP信息包括音视频信息和Simulcast层数。
根据本发明的一个实施例，还根据所述SDP信息得到每层所述Simulcast的SSRC(同步信源)。
根据本发明的一个实施例，所述Session包括每层所述Simulcast的SSRC，以及所述RTP数据包的数量和包信息。
根据本发明的一个实施例，根据所述RTP数据包对所述Session进行排序，包括以下步骤：根据所述RTP数据包的SSRC确定其所在的Simulcast层，并对所在Simulcast层的Session进行更新；判断每层所述Simulcast的RTP数据包的传输时间是否超过阈值；若超过所述阈值，则根据更新后的所述Session对每层所述Simulcast进行排序。
根据本发明的一个实施例，根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流，包括以下步骤：若所述Simulcast的排序发生变化，则向所述WebRtc客户端接收方发送信息帧请求；在所述信息帧请求到达所述WebRtc客户端接收方发时，根据更新后的所述Session对每层所述Simulcast中的RTP数据包的时间戳进行更新，以自动切换发送至所述WebRtc客户端接收方的码流。
为达到上述目的，本发明第二方面实施例提出了一种WebRTC Simulcast的自适应调节装置，包括：第一获取模块，所述第一获取模块用于获取WebRtc客户端发布方的SDP信息和RTP数据包；第一处理模块，所述第一处理模块用于根据所述SDP信息得到所述WebRtc客户端发布方的Simulcast层数，并对应每层所述Simulcast建立Session；第二处理模块，所述第二处理模块用于根据所述RTP数据包对所述Session进行排序；第二获取模块，所述第二获取模块用于获取所述WebRtc客户端接收方的请求码流信息；第三处理模块，所述第三处理模块用于根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流。
根据本发明实施例提出的WebRTC Simulcast的自适应调节装置，通过第一获取模块获取获取WebRtc客户端发布方的SDP信息，并通过第一处理模块得到WebRtc客户端发布方的Simulcast层数，并通过第二处理模块对应每层Simulcast建立Session，并可根据RTP数据包对Session进行排序，最后可通过第二获取模块获取WebRtc客户端接收方的请求码流信息，以通过第三处理模块结合排序后的Session向WebRtc客户端接收方发送对应码流，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
为达到上述目的，本发明第三方面实施例提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现根据第一方面实施例中任一项所述的WebRTC Simulcast的自适应调节方法。
根据本发明实施例提出的计算机设备，通过处理器执行计算机程序时，实现第一方面实施例中任一项的WebRTC Simulcast的自适应调节方法，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
为达到上述目的，本发明第四方面实施例提出了一种非临时性计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现根据第一方面实施例中任一项所述的WebRTC Simulcast的自适应调节方法。
根据本发明实施例提出的非临时性计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现第一方面实施例中任一项的WebRTC Simulcast的自适应调节方法，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
附图说明
图1为本发明实施例的WebRTC Simulcast的自适应调节方法的流程图；
图2为本发明一个实施例的Simulcast的自适应调节场景示意图；
图3为本发明实施例的WebRTC Simulcast的自适应调节装置的方框示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明实施例的WebRTC Simulcast的自适应调节方法的流程图。
如图1所示，本发明实施例的WebRTC Simulcast的自适应调节方法，包括以下步骤：
S1，获取WebRtc客户端发布方的SDP信息和RTP数据包。
具体地，可与WebRtc客户端发布方建立peerConnection，以与WebRtc客户端发布方交换SDP信息。其中，SDP信息包括音视频信息和Simulcast层数，具体地，音视频信息包括声道、格式、采样率、视频格式等信息。
S2，根据SDP信息得到WebRtc客户端发布方的Simulcast层数，并对应每层Simulcast建立Session。
具体地，可先根据SDP信息判断WebRtc客户端发布方是否具有Simulcast功能，若有，则根据SDP信息提取WebRtc客户端发布方的Simulcast层数，并可根据SDP信息得到每层Simulcast的SSRC，最后可对应每层Simulcast建立Session。其中，Session可包括每层Simulcast的SSRC，以及接收到的RTP数据包的数量和包信息，具体地，RTP数据包的包信息包括RTP数据包的Seq(序号)、Timesteamp(时间戳)。
S3，根据RTP数据包对Session进行排序。
具体地，可根据RTP数据包的SSRC确定其所在的Simulcast层，并对所在Simulcast层的Session进行更新，并可判断每层Simulcast的RTP数据包的传输时间是否超过阈值，若超过阈值，则根据更新后的Session对每层Simulcast进行排序。
更具体地，可对所在Simulcast层Session中接收到的RTP数据包的数量，以及RTP数据包的包信息，即RTP数据包的Seq(序号)、Timestamp(时间戳)进行更新；进一步地，可判断每层Simulcast的RTP数据包的传输时间是否超过阈值，若超过阈值，则可根据每层Simulcast接收到的RTP数据包的数量对Simulcast进行排序，例如可按照每层Simulcast接收到的RTP数据包的数量从大到小依次排序，其中，接收到的RTP数据包的数量最大的Simulcast可作为主码流，其次可为辅码流，再次可为第三码流，依次类推。
S4，获取WebRtc客户端接收方的请求码流信息。
具体地，WebRtc客户端接收方发送请求码流信息，包括请求码流的ID(IdentityDocument，身份标识)，以及请求码流的类别，即主码流、辅码流或第三码流等。
S5，根据请求码流信息和排序后的Session向WebRtc客户端接收方发送对应码流。
具体地，若Simulcast的排序发生变化，则向WebRtc客户端接收方发送信息帧请求，并在信息帧请求到达WebRtc客户端接收方发时，根据更新后的Session对每层Simulcast中的RTP数据包的Timestamp(时间戳)和Seq(序号)进行更新，以自动切换发送至WebRtc客户端接收方的码流。
更具体地，当WebRtc客户端发布方因网络或自身编码处理能力等方面导致发布码流层数，即Simulcast层数发生变化的时候，可根据步骤S3判断Simulcast的排序是否发生变化，并可在Simulcast的排序发生变化时，向WebRtc客户端接收方发送信息帧请求，即I帧请求，并可在信息帧请求，即I帧请求到达WebRtc客户端接收方发时，可根据更新后的Session对每层Simulcast中的RTP数据包的Timestamp(时间戳)和Seq(序号)进行更新，以自动切换发送至WebRtc客户端接收方的码流，并保证发送至WebRtc客户端接收方的码流的Timestamp(时间戳)和Seq(序号)的连续性。
其中，需要说明的是，WebRtc客户端发布方和WebRtc客户端接收方是可以相互转换的，下面将结合图2对其进行阐述。
如图2所示，可设定四个WebRtc客户端，即Webrtc Client A、Webrtc Client B、Webrtc Client C、Webrtc Client D，其中，当Webrtc Client A和Webrtc Client B按照Webrtc协议使用Simulcast方式向服务器，即Webrtc Server发送视频流时，Webrtc ClientA和Webrtc Client B可作为WebRtc客户端发布方，并且每个推送的视频流可根据网络变化，Simulcast层数进行动态变化，Webrtc Client C和Webrtc Client D可订阅接收WebrtcClient A和Webrtc Client B发送的视频流，Webrtc Client C和Webrtc Client D可作为WebRtc客户端接收方；反之，当Webrtc Client C和Webrtc Client D发送视频流时，WebrtcClient C和Webrtc Client D可作为WebRtc客户端发布方，当Webrtc Client A和WebrtcClient B订阅接收视频流时，Webrtc Client A和Webrtc Client B可作为WebRtc客户端接收方。其中，服务器，即Webrtc Server可采用SFU进行码流动态调节。
根据本发明实施例提出的WebRTC Simulcast的自适应调节方法，通过获取获取WebRtc客户端发布方的SDP信息，得到WebRtc客户端发布方的Simulcast层数，并对应每层Simulcast建立Session，并可根据RTP数据包对Session进行排序，最后可获取WebRtc客户端接收方的请求码流信息，以结合排序后的Session向WebRtc客户端接收方发送对应码流，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
对应上述实施例，本发明还提出了一种WebRTC Simulcast的自适应调节装置。
如图3所示，本发明实施例的WebRTC Simulcast的自适应调节装置，包括第一获取模块10、第一处理模块20、第二处理模块30、第二获取模块40和第三处理模块50。其中，第一获取模块10用于获取WebRtc客户端发布方的SDP信息和RTP数据包；第一处理模块20用于根据SDP信息得到WebRtc客户端发布方的Simulcast层数，并对应每层Simulcast建立Session；第二处理模块30用于根据RTP数据包对Session进行排序；第二获取模块40用于获取WebRtc客户端接收方的请求码流信息；第三处理模块50用于根据请求码流信息和排序后的Session向WebRtc客户端接收方发送对应码流。
在本发明的一个实施例中，第一获取模块10可与WebRtc客户端发布方建立peerConnection，以与WebRtc客户端发布方交换SDP信息。其中，SDP信息包括音视频信息和Simulcast层数，具体地，音视频信息包括声道、格式、采样率、视频格式等信息。
在本发明的一个实施例中，第一处理模块20可先根据SDP信息判断WebRtc客户端发布方是否具有Simulcast功能，若有，则根据SDP信息提取WebRtc客户端发布方的Simulcast层数，并可根据SDP信息得到每层Simulcast的SSRC，最后可对应每层Simulcast建立Session。其中，Session可包括每层Simulcast的SSRC，以及接收到的RTP数据包的数量和包信息，具体地，RTP数据包的包信息包括RTP数据包的Seq(序号)、Timesteamp(时间戳)。
在本发明的一个实施例中，第二处理模块30可根据RTP数据包的SSRC确定其所在的Simulcast层，并对所在Simulcast层的Session进行更新，并可判断每层Simulcast的RTP数据包的传输时间是否超过阈值，若超过阈值，则根据更新后的Session对每层Simulcast进行排序。
更具体地，第二处理模块30可对所在Simulcast层Session中接收到的RTP数据包的数量，以及RTP数据包的包信息，即RTP数据包的Seq(序号)、Timesteamp(时间戳)进行更新；进一步地，可判断每层Simulcast的RTP数据包的传输时间是否超过阈值，若超过阈值，则可根据每层Simulcast接收到的RTP数据包的数量对Simulcast进行排序，例如可按照每层Simulcast接收到的RTP数据包的数量从大到小依次排序，其中，接收到的RTP数据包的数量最大的Simulcast可作为主码流，其次可为辅码流，再次可为第三码流，依次类推。
在本发明的一个实施例中，第二获取模块40可接收WebRtc客户端接收方发送请求码流信息，包括请求码流的ID，以及请求码流的类别，即主码流、辅码流或第三码流等。
在本发明的一个实施例中，第三处理模块50可用于，若Simulcast的排序发生变化，则向WebRtc客户端接收方发送信息帧请求，并在信息帧请求到达WebRtc客户端接收方发时，根据更新后的Session对每层Simulcast中的RTP数据包的Timestamp(时间戳)和Seq(序号)进行更新，以自动切换发送至WebRtc客户端接收方的码流。
更具体地，第三处理模块50可用于，当WebRtc客户端发布方因网络或自身编码处理能力等方面导致发布码流层数，即Simulcast层数发生变化的时候，可根据步骤S3判断Simulcast的排序是否发生变化，并可在Simulcast的排序发生变化时，向WebRtc客户端接收方发送信息帧请求，即I帧请求，并可在信息帧请求，即I帧请求到达WebRtc客户端接收方发时，可根据更新后的Session对每层Simulcast中的RTP数据包的Timestamp(时间戳)和Seq(序号)进行更新，以自动切换发送至WebRtc客户端接收方的码流，并保证发送至WebRtc客户端接收方的码流的Timestamp(时间戳)和Seq(序号)的连续性。
其中，需要说明的是，WebRtc客户端发布方和WebRtc客户端接收方是可以相互转换的，下面将结合图2对其进行阐述。
如图2所示，可设定四个WebRtc客户端，即Webrtc Client A、Webrtc Client B、Webrtc Client C、Webrtc Client D，其中，当Webrtc Client A和Webrtc Client B按照Webrtc协议使用Simulcast方式向服务器，即Webrtc Server发送视频流时，Webrtc ClientA和Webrtc Client B可作为WebRtc客户端发布方，并且每个推送的视频流可根据网络变化，Simulcast层数进行动态变化，Webrtc Client C和Webrtc Client D可订阅接收WebrtcClient A和Webrtc Client B发送的视频流，Webrtc Client C和Webrtc Client D可作为WebRtc客户端接收方；反之，当Webrtc Client C和Webrtc Client D发送视频流时，WebrtcClient C和Webrtc Client D可作为WebRtc客户端发布方，当Webrtc Client A和WebrtcClient B订阅接收视频流时，Webrtc Client A和Webrtc Client B可作为WebRtc客户端接收方。其中，服务器，即Webrtc Server可采用SFU进行码流动态调节。
根据本发明实施例提出的WebRTC Simulcast的自适应调节装置，通过第一获取模块获取获取WebRtc客户端发布方的SDP信息，并通过第一处理模块得到WebRtc客户端发布方的Simulcast层数，并通过第二处理模块对应每层Simulcast建立Session，并可根据RTP数据包对Session进行排序，最后可通过第二获取模块获取WebRtc客户端接收方的请求码流信息，以通过第三处理模块结合排序后的Session向WebRtc客户端接收方发送对应码流，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
对应上述实施例，本发明还提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时，实现上述实施例的WebRTC Simulcast的自适应调节方法。
根据本发明实施例提出的计算机设备，通过处理器执行计算机程序时，实现上述实施例的WebRTC Simulcast的自适应调节方法，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
为达到上述目的，本发明还提出了一种非临时性计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述实施例的WebRTC Simulcast的自适应调节方法。
根据本发明实施例提出的非临时性计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现上述实施例的WebRTC Simulcast的自适应调节方法，由此，能够兼顾上行推流用户和下行播放用户，能够在网络波动的情况下保证播放用户无感知的切换码流，从而提高播放用户的观看体验。
在本发明的描述中，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必针对相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，“计算机可读介质”可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (9)

1.一种WebRTC Simulcast的自适应调节方法，其特征在于，包括以下步骤：
获取WebRtc客户端发布方的SDP信息和RTP数据包；
根据所述SDP信息得到所述WebRtc客户端发布方的Simulcast层数，并对应每层所述Simulcast建立Session；
根据所述RTP数据包对所述Session进行排序；
获取所述WebRtc客户端接收方的请求码流信息；
根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流。
2.根据权利要求1所述的WebRTC Simulcast的自适应调节方法，其特征在于，所述SDP信息包括音视频信息和Simulcast层数。
3.根据权利要求2所述的WebRTC Simulcast的自适应调节方法，其特征在于，其中，还根据所述SDP信息得到每层所述Simulcast的SSRC。
4.根据权利要求3所述的WebRTC Simulcast的自适应调节方法，其特征在于，其中，所述Session包括每层所述Simulcast的SSRC，以及所述RTP数据包的数量和包信息。
5.根据权利要求4所述的WebRTC Simulcast的自适应调节方法，其特征在于，根据所述RTP数据包对所述Session进行排序，包括以下步骤：
根据所述RTP数据包的SSRC确定其所在的Simulcast层，并对所在Simulcast层的Session进行更新；
判断每层所述Simulcast的RTP数据包的传输时间是否超过阈值；
若超过所述阈值，则根据更新后的所述Session对每层所述Simulcast进行排序。
6.根据权利要求5所述的WebRTC Simulcast的自适应调节方法，其特征在于，根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流，包括以下步骤：
若所述Simulcast的排序发生变化，则向所述WebRtc客户端接收方发送信息帧请求；
在所述信息帧请求到达所述WebRtc客户端接收方发时，根据更新后的所述Session对每层所述Simulcast中的RTP数据包的时间戳进行更新，以自动切换发送至所述WebRtc客户端接收方的码流。
7.一种WebRTC Simulcast的自适应调节装置，其特征在于，包括：
第一获取模块，所述第一获取模块用于获取WebRtc客户端发布方的SDP信息和RTP数据包；
第一处理模块，所述第一处理模块用于根据所述SDP信息得到所述WebRtc客户端发布方的Simulcast层数，并对应每层所述Simulcast建立Session；
第二处理模块，所述第二处理模块用于根据所述RTP数据包对所述Session进行排序；
第二获取模块，所述第二获取模块用于获取所述WebRtc客户端接收方的请求码流信息；
第三处理模块，所述第三处理模块用于根据所述请求码流信息和排序后的所述Session向所述WebRtc客户端接收方发送对应码流。
8.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时，实现根据权利要求1-6中任一项所述的WebRTC Simulcast的自适应调节方法。
9.一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现根据权利要求1-6中任一项所述的WebRTC Simulcast的自适应调节方法。
CN202110889618.8A 2021-08-04 2021-08-04 一种WebRTC Simulcast的自适应调节方法和装置 Active CN113691822B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110889618.8A CN113691822B (zh) 2021-08-04 2021-08-04 一种WebRTC Simulcast的自适应调节方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110889618.8A CN113691822B (zh) 2021-08-04 2021-08-04 一种WebRTC Simulcast的自适应调节方法和装置

Publications (2)

Publication Number Publication Date
CN113691822A true CN113691822A (zh) 2021-11-23
CN113691822B CN113691822B (zh) 2023-11-07

Family

ID=78578747

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110889618.8A Active CN113691822B (zh) 2021-08-04 2021-08-04 一种WebRTC Simulcast的自适应调节方法和装置

Country Status (1)

Country Link
CN (1) CN113691822B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101889425A (zh) * 2007-12-14 2010-11-17 汤姆逊许可公司 通过可变带宽信道进行同播的设备和方法
CN103873948A (zh) * 2012-12-10 2014-06-18 中国电信股份有限公司 流媒体自适应匹配传输方法、系统和服务器
CN106559396A (zh) * 2015-09-30 2017-04-05 中国电信股份有限公司 基于Web实时通信的媒体多播方法和系统
US10250921B1 (en) * 2017-12-22 2019-04-02 Dialogic Corporation Systems and methods of video forwarding with adaptive video transcoding capabilities
CN112073423A (zh) * 2020-09-15 2020-12-11 杭州二更网络科技有限公司 基于WebRTC进行浏览器推流的方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101889425A (zh) * 2007-12-14 2010-11-17 汤姆逊许可公司 通过可变带宽信道进行同播的设备和方法
CN103873948A (zh) * 2012-12-10 2014-06-18 中国电信股份有限公司 流媒体自适应匹配传输方法、系统和服务器
CN106559396A (zh) * 2015-09-30 2017-04-05 中国电信股份有限公司 基于Web实时通信的媒体多播方法和系统
US10250921B1 (en) * 2017-12-22 2019-04-02 Dialogic Corporation Systems and methods of video forwarding with adaptive video transcoding capabilities
CN112073423A (zh) * 2020-09-15 2020-12-11 杭州二更网络科技有限公司 基于WebRTC进行浏览器推流的方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
AGNIESZKA CHODOREK; ROBERT R. CHODOREK; KRZYSZTOF WAJDA: "Comparison Study of the Adaptability of Layered and Stream Replication Variants of the WebRTC Simulcast", 2019 INTERNATIONAL CONFERENCE ON SOFTWARE, TELECOMMUNICATIONS AND COMPUTER NETWORKS (SOFTCOM), pages 1 - 6 *
周旭辉: "媒体融合环境下的电视直播技术创新应用", 现代电视技术, vol. 238, no. 4, pages 113 - 118 *

Also Published As

Publication number Publication date
CN113691822B (zh) 2023-11-07

Similar Documents

Publication Publication Date Title
US8132218B2 (en) Access/edge node supporting multiple video streaming services using a single request protocol
JP3788260B2 (ja) 配信システムとその配信方法、及び配信プログラム
CN100429901C (zh) 音视频广播网络直播频道切换的方法及结构
US9344682B2 (en) Multi-media management
US8214870B2 (en) Method and arrangement for improved channel switching
CN107241564B (zh) 基于ims网络架构的多流视频会议方法、装置及系统
KR20100037659A (ko) 디지털 방송에서 계층적인 전송/수신을 위한 방법 및 장치
US20150012929A1 (en) Network controlled streaming
WO2007005194A1 (en) Apparatuses and methods for delivering data stream content to consumer devices
WO2008148333A1 (fr) Système et procédé de traitement d'un flux vidéo
CN101521583A (zh) 一种资源接纳控制方法、系统和装置
US11343590B2 (en) Event notification in a network environment
US20170180778A1 (en) Broadcast transmission apparatus, broadcast reception apparatus, broadcast transmission apparatus operating method, and broadcast reception apparatus operating method
Gürler et al. Peer-to-peer system design for adaptive 3D video streaming
CN101610394A (zh) Iptv系统、数字电视接收机及电视频道切换方法
CN109756774A (zh) 一种ott组播频道切换的方法及装置
CN113691822B (zh) 一种WebRTC Simulcast的自适应调节方法和装置
Marfil et al. IDMS solution for hybrid broadcast broadband delivery within the context of HbbTV standard
RU2663187C2 (ru) Устройство и способ подачи содержания, программа, устройство терминала и система подачи содержания
CN101938324B (zh) 一种网络媒体流播放方法与装置
WO2009095081A1 (en) Method and apparatus for obtaining media over a communications network
WO2009080114A1 (en) Method and apparatus for distributing media over a communications network
CN102026024B (zh) 一种ppv业务的实时控制方法、系统和设备
KR101244551B1 (ko) Ｄｍｂ에서 ｈｔｔｐ 스트리밍 비디오 서비스를 제공하기 위한 방송 시스템
JP6444013B1 (ja) 映像コンテンツを視聴状況に応じた配信方式で配信する映像配信サーバ、プログラム及び方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant