CN109982023B - 一种视频会话中的分辨率调整方法 - Google Patents

一种视频会话中的分辨率调整方法 Download PDF

Info

Publication number
CN109982023B
CN109982023B CN201711456182.3A CN201711456182A CN109982023B CN 109982023 B CN109982023 B CN 109982023B CN 201711456182 A CN201711456182 A CN 201711456182A CN 109982023 B CN109982023 B CN 109982023B
Authority
CN
China
Prior art keywords
video
resolution
adjustment
session
sending end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711456182.3A
Other languages
English (en)
Other versions
CN109982023A (zh
Inventor
方伟
王亮
汪远
张亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu TD Tech Ltd
Original Assignee
Chengdu TD Tech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu TD Tech Ltd filed Critical Chengdu TD Tech Ltd
Priority to CN201711456182.3A priority Critical patent/CN109982023B/zh
Publication of CN109982023A publication Critical patent/CN109982023A/zh
Application granted granted Critical
Publication of CN109982023B publication Critical patent/CN109982023B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Abstract

本申请公开了一种视频会话中的分辨率调整方法，包括：视频会话建立时，视频发送端在会话建立消息中携带视频原始流的2个SSRC；当进行分辨率调整时，所述视频发送端将当前SSRC值修改为所述2个SSRC中的另一个SSRC值；各视频接收端在检测到SSRC发生变化时，确定分辨率发生调整，启动SPS/PPS检测。通过上述方法，能够及时检测到分辨率调整，保证业务正常进行。

Description

一种视频会话中的分辨率调整方法
技术领域
本申请涉及视频通信技术，特别涉及一种视频会话中的分辨率调整方法。
背景技术
实时移动视频通过无线或有线环境进行传输时，如果传输管道出现拥塞，目前一般采用降低码率的方式来缓解，但码率下降到一定程度时会导致视频小方块效应明显，而通过调整分辨率可以既达到降低带宽消耗又改善视频质量的目的。
现有视频会话过程中，视频源可能是一对多的场景，也可能是一对一的场景。当视频源是一对多的场景时，由视频源将视频发送给服务器，再由服务器分发给各个视频接收端。本申请主要是针对一对多的场景的。
在一对多的场景中，如果视频源分辨率发生调整，一般通过信令面消息实时通知接收端，接收端根据收到的变更消息来适配发送端的分辨率调整。
在视频会话过程中，视频源分辨率发生变更，如果接收端未及时识别出来，可能会导致业务中断。
分辨率变更时编码器会产生新的序列参数集(SPS)和图像参数集(PPS)，而不同的解码器对于SPS/PPS变更的兼容性有差异，如果采用老的SPS/PPS信息解析新的视频流，解码器可能会出错，在极端情况下解码器会发生崩溃，导致业务中断。
如何在解析变更后的视频码流时及时获取对应的SPS/PPS信息是亟需解决的问题。采用信令消息通知的方式，虽然能及时获取分辨率变更情况，但是需要服务器和接收端配合，用户面处理流程复杂，而且消息交互会消耗一定的时延(预估在100～200ms)，影响用户感知。
另外，在一对多的视频会话过程中，发送端的视频回传到服务器后，会同时分发给多个接收端，因此，发送端调整分辨率可能会导致接收端视频业务异常。另外，接收端是实时动态加入的，后续加入的部分接收端可能不支持分辨率自适应调整能力。
发明内容
本申请提供一种视频会话中的分辨率调整方法，能够及时检测到分辨率调整，保证业务正常进行。
为实现上述目的，本申请采用如下技术方案：
一种视频会话中的分辨率调整方法，包括：
视频会话建立时，视频发送端在会话建立消息中携带视频原始流的2个SSRC；
当进行分辨率调整时，所述视频发送端将当前SSRC值修改为所述2个SSRC中的另一个SSRC值；
各视频接收端在检测到SSRC发生变化时，确定分辨率发生调整，启动SPS/PPS检测。
较佳地，在一对多的视频会话场景中，
在发送会话建立消息前，该方法还包括：各视频接收端向服务器上报分辨率自适应调整能力；
在进行分辨率调整前，该方法还包括：当视频发送端确定需要进行分辨率调整时，所述视频发送端向所述服务器请求进行分辨率调整；若所述服务器根据当前会话的各个视频接收端上报的分辨率自适应调整能力确定所述各个视频接收端都支持分辨率自适应调整，则所述服务器通知视频发送端允许分辨率调整，所述视频发送端进行分辨率调整；若所述服务器根据所述各个视频接收端上报的分辨率自适应调整能力确定所述各个视频接收端不都支持分辨率自适应调整，则所述服务器通知视频发送端拒绝分辨率调整，所述视频发送端不进行分辨率调整。
较佳地，当视频发送端检测到满足分辨率自适应调整的条件时，执行所述在会话建立消息中携带视频原始流的2个SSRC的处理。
由上述技术方案可见，本申请中，视频会话建立时，视频发送端在会话建立消息中携带视频原始流的2个同步源(SSRC)；当进行分辨率调整时，视频发送端将当前SSRC值修改为2个SSRC中的另一个SSRC值；各视频接收端在检测到SSRC发生变化时，确定分辨率发生调整，启动SPS/PPS检测。通过上述方式，能够使视频接收端及时识别发送端分辨率发生了调整，处理简单，降低延时，避免业务中断。
附图说明
图1为本申请中分辨率调整方法的基本流程示意图；
图2a为SIP流程中接收视频端上报分辨率自适应调整能力的示意图；
图2b为SIP流程中携带2个SSRC的示意图；
图2c为SIP流程中分辨率自适应调整的实时能力协商和调整操作示意图。
具体实施方式
为了使本申请的目的、技术手段和优点更加清楚明白，以下结合附图对本申请做进一步详细说明。
图1为本申请中分辨率调整方法的基本流程示意图。如图1所示，该方法包括：
步骤110，视频会话建立时，视频发送端在会话建立消息中携带视频原始流的2个SSRC。
视频会话建立时，如果发送端检测到满足分辨率自适应的条件，则在会话建立消息的中使用SSRC Mulitiplexing方式携带视频原始流的2个SSRC，分辨率变更时SSRC在这两个值之间来回切换。这样，当视频接收端发现SSRC值变化时，即确定发生了分辨率的调整。
步骤120，当进行分辨率调整时，视频发送端将当前SSRC值修改为步骤101中2个SSRC中的另一个SSRC值。
在发送的视频RTP包中都会携带SSRC值，如果分辨率不发生变化，那么每次携带的SSRC值都相同；当分辨率发生变化时，修改携带的SSRC值，以指示分辨率发生了调整。具体SSRC值在步骤101中携带的2个SSRC值间来回切换。
步骤130，各视频接收端在检测到SSRC发生变化时，确定分辨率发生调整，启动SPS/PPS检测。
如前所述，当视频接收端检测到SSRC发生变化时，即确定分辨率发生调整，这时，启动SPS/PPS检测，以适应新的分辨率。当新的SSRC流的SPS/PPS检测成功时，说明该流是个有效视频流，将它切换为当前“激活流”，并释放旧流。
至此，本申请中分辨率调整方法的基本流程结束。上述基本流程既适用于一对一的视频会话场景，也适用于一对多的视频会话场景。
在上述基本流程的基础上，为解决接收端可能不支持分辨率自适应调整的问题，优选地，对于一对多的视频会话场景，还可以继续包括如下处理：
在步骤110之前包括步骤100：各视频接收端向服务器上报分辨率自适应调整能力。
一般地，视频接收端可以在注册时向服务器上报分辨率自适应调整能力，即是否支持分辨率自适应调整。具体地，视频接收端可以根据自身解码器以及软件版本是否支持分辨率自适应调整能力，在注册到网络时即上报给服务器。
在步骤120之前还包括步骤112～115：
步骤112，当视频发送端确定需要进行分辨率调整时，视频发送端向服务器请求进行分辨率调整。
步骤113，服务器根据当前会话的各个视频接收端上报的分辨率自适应调整能力判断各个视频接收端是否都支持分辨率自适应调整，若是，则执行步骤114，否则，执行步骤115。
步骤114，服务器通知视频发送端允许分辨率调整，视频发送端接收通知后执行步骤120。
步骤115，服务器通知视频发送端拒绝分辨率调整，视频发送端接收通知后不再执行后续步骤。
下面通过一个具体实例说明上述分辨率调整方法。
1、视频接收端上报分辨率自适应调整能力；以SIP流程为例，如图2a，视频接收端(包括UE、DC、解码器网关、摄像头)在SIP注册阶段，需要在SIP注册中携带分辨率动态调整的适应能力。通过在注册请求和响应消息中增加能力值，服务器需要登记该能力值，并向视频接收端反馈响应消息。
2、视频发送端在会话建立过程中通过SSRC Multiplexing携带2个SSRC；以SIP流程为例，实际不局限于SIP流程，通过其它方式的信令交互也可适用。
具体地，如图2b所示，视频源在INVITE/200OK消息的会话描述协议(SDP)中增加SSRC-group，用于携带分辨率自适应备用的SSRC。格式如下：
m＝video 30000RTP/AVP 102 103
a＝tcap:1RTP/AVPF
a＝pcfg:1t＝1
a＝rtpmap:102H264/90000
a＝fmtp:102profile-level-id＝42C00C；packetization-mode＝1；
a＝rtcp-fb:102nack
a＝rtpmap:103rtx/90000
a＝fmtp:103apt＝102；rtx-time＝1000
a＝ssrc-group:FID 11111 22222 33333
a＝ssrc:11111cname:user3@example.com
a＝ssrc:22222cname:user3@example.com
a＝ssrc:33333cname:user3@example.com//分辨率自适应使用的备用SSRC
3、分辨率自适应调整的实时能力协商处理流程；仍然以SIP流程为例，实际不局限于SIP方式。
如图2c所示，具体包括：
1)当视频源满足分辨率调整条件时，向服务器发送INFO请求，使用带内INFO发送分辨率调整请求，其中携带目标分辨率；
2)服务器判断当前会话所有成员是否都支持分辨率自适应调整，如果是则通过200OK消息返回成功给视频源，视频源开始执行调整动作；其中，所有成员指所有视频接收端；
3)由于分辨率调整需要消耗一定的时间，会导致接收端出现定屏显示，所以，分辨率调整协商成功后，服务器还要把“分辨率调整通知”发给接收端，以便接收端给出提示；
4)视频接收端一旦检测到SSRC变化，立即启动SPS/PPS检测，当新的SSRC流的SPS/PPS检测成功时，说明该流是个有效视频流，将它切换为当前“激活流”，并释放旧流。
通过上述本申请的分辨率调整方法，能够减少分辨率调整过程中的信令交互消息，同时保证分辨率自适应调整不影响正常业务，不导致业务异常。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (3)

1.一种视频会话中的分辨率调整方法，其特征在于，包括：
视频会话建立时，视频发送端在会话建立过程中通过SSRC Multiplexing携带视频原始流的2个SSRC；
当进行分辨率调整时，所述视频发送端将当前SSRC值修改为所述2个SSRC中的另一个SSRC值；
各视频接收端在检测到SSRC发生变化时，确定分辨率发生调整，启动SPS/PPS检测。
2.根据权利要求1所述的方法，其特征在于，在一对多的视频会话场景中，
在发送会话建立消息前，该方法还包括：各视频接收端向服务器上报分辨率自适应调整能力；
在进行分辨率调整前，该方法还包括：当视频发送端确定需要进行分辨率调整时，所述视频发送端向所述服务器请求进行分辨率调整；若所述服务器根据当前会话的各个视频接收端上报的分辨率自适应调整能力确定所述各个视频接收端都支持分辨率自适应调整，则所述服务器通知视频发送端允许分辨率调整，所述视频发送端进行分辨率调整；若所述服务器根据所述各个视频接收端上报的分辨率自适应调整能力确定所述各个视频接收端不都支持分辨率自适应调整，则所述服务器通知视频发送端拒绝分辨率调整，所述视频发送端不进行分辨率调整。
3.根据权利要求1或2所述的方法，其特征在于，当视频发送端检测到满足分辨率自适应调整的条件时，执行所述在会话建立消息中携带视频原始流的2个SSRC的处理。
CN201711456182.3A 2017-12-28 2017-12-28 一种视频会话中的分辨率调整方法 Active CN109982023B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711456182.3A CN109982023B (zh) 2017-12-28 2017-12-28 一种视频会话中的分辨率调整方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711456182.3A CN109982023B (zh) 2017-12-28 2017-12-28 一种视频会话中的分辨率调整方法

Publications (2)

Publication Number Publication Date
CN109982023A CN109982023A (zh) 2019-07-05
CN109982023B true CN109982023B (zh) 2020-11-13

Family

ID=67074262

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711456182.3A Active CN109982023B (zh) 2017-12-28 2017-12-28 一种视频会话中的分辨率调整方法

Country Status (1)

Country Link
CN (1) CN109982023B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112423245B (zh) * 2019-08-23 2021-10-22 成都鼎桥通信技术有限公司 数据传输方法、装置、服务器及终端设备
CN116193163A (zh) * 2021-11-29 2023-05-30 广州迈聆信息科技有限公司 视频流分辨率动态切换的方法及装置、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1741610A (zh) * 2004-08-25 2006-03-01 日本电气株式会社 图像编码数据的转换方法以及装置、系统和程序
JP2013048356A (ja) * 2011-08-29 2013-03-07 Ricoh Co Ltd Ｔｖ会議システム、映像配信装置、及びデータ処理方法
CN103873812A (zh) * 2014-04-03 2014-06-18 哈尔滨工业大学 宽带多媒体集群系统调度台的自适应分辨率h.264视频编码方法
KR101462222B1 (ko) * 2013-07-29 2014-11-17 삼성에스디에스 주식회사 비디오 포맷이 다른 이종 단말기간 영상통화 연결방법
CN107079132A (zh) * 2014-10-29 2017-08-18 高通股份有限公司 在视频电话中的端口重配置之后馈送经帧内译码的视频帧

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1741610A (zh) * 2004-08-25 2006-03-01 日本电气株式会社 图像编码数据的转换方法以及装置、系统和程序
JP2013048356A (ja) * 2011-08-29 2013-03-07 Ricoh Co Ltd Ｔｖ会議システム、映像配信装置、及びデータ処理方法
KR101462222B1 (ko) * 2013-07-29 2014-11-17 삼성에스디에스 주식회사 비디오 포맷이 다른 이종 단말기간 영상통화 연결방법
CN103873812A (zh) * 2014-04-03 2014-06-18 哈尔滨工业大学 宽带多媒体集群系统调度台的自适应分辨率h.264视频编码方法
CN107079132A (zh) * 2014-10-29 2017-08-18 高通股份有限公司 在视频电话中的端口重配置之后馈送经帧内译码的视频帧

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SIP视频会议的自适应采集与动态码流提取技术研究;蔺朝冲;《中国优秀硕士学位论文全文数据库》;20170228;全文 *
Video communication system based on hybrid packetization scheme;Xin Zhao等;《 IEEE 10th International Conference on Industrial Informatics》;20120727;全文 *

Also Published As

Publication number Publication date
CN109982023A (zh) 2019-07-05

Similar Documents

Publication Publication Date Title
US9986003B2 (en) Mediating content delivery via one or more services
RU2363111C2 (ru) Передача информации, относящейся к качеству обслуживания
JP4676534B2 (ja) 非アクティブユーザプレーン中のトラフィック生成
JP4763800B2 (ja) マルチメディア通信セッションを確立するための方法および装置
US20160119395A1 (en) Method for supporting multicast of streaming media, and related apparatus and system
US20060256748A1 (en) System and method for interworking between IMS network and H.323 network
US10200519B2 (en) Systems and methods for dynamic switching of codec modes of operation used by a terminal
KR20090079977A (ko) 채널 스위칭 방법, 장치 및 컴퓨터 판독가능 매체
CN109982023B (zh) 一种视频会话中的分辨率调整方法
CN107770473B (zh) 一种音视频数据传输控制方法和装置
SG185678A1 (en) Method and apparatus for changing the configuration of an ongoing streaming session
EP2264959B1 (en) Media gateway, media gateway controller, method and system for communication of multimedia phones
CN101552771B (zh) 媒体网关、媒体网关控制器、多媒体电话互通方法和系统
US10560505B2 (en) ROI video implementation method and apparatus
EP3560161B1 (en) H.248 control for multistream multimedia conferences
CN106953834B (zh) 一种实现终端媒体能力协商的方法、终端及网络设备
US20110128967A1 (en) System, method, program element and computer-accessible medium for forwarding media control messages
KR101462222B1 (ko) 비디오 포맷이 다른 이종 단말기간 영상통화 연결방법
WO2009145294A1 (ja) サーバ装置と通信方法ならびにプログラム
US20140195224A1 (en) Method and device for identifying and obtaining ambe encoding and decoding rate information in sdp
CN101741509A (zh) 速率适配方法、装置及系统
KR20060128574A (ko) 동영상 통신의 에러 프레임 재전송 방법
JP2015095777A (ja) 移動通信システム及び方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant