CN117859313A - 支持用于媒体通信的服务质量 - Google Patents
支持用于媒体通信的服务质量 Download PDFInfo
- Publication number
- CN117859313A CN117859313A CN202280054909.8A CN202280054909A CN117859313A CN 117859313 A CN117859313 A CN 117859313A CN 202280054909 A CN202280054909 A CN 202280054909A CN 117859313 A CN117859313 A CN 117859313A
- Authority
- CN
- China
- Prior art keywords
- client device
- qos
- communication session
- ice
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 title claims abstract description 235
- 230000002452 interceptive effect Effects 0.000 claims abstract description 37
- 238000013519 translation Methods 0.000 claims abstract description 14
- 238000000034 method Methods 0.000 claims description 113
- 230000006870 function Effects 0.000 claims description 62
- 238000010586 diagram Methods 0.000 description 22
- 239000003795 chemical substances by application Substances 0.000 description 20
- 230000011664 signaling Effects 0.000 description 20
- 230000004044 response Effects 0.000 description 17
- 230000008569 process Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 8
- 239000000872 buffer Substances 0.000 description 8
- 230000007704 transition Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000012092 media component Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Landscapes
- Computer And Data Communications (AREA)
Abstract
客户端设备(例如,用户装备或“UE”)可被配置成参与与另一客户端设备的媒体通信会话,诸如WebRTC会话。该客户端设备可将服务质量(QoS)规范与QoS流定义分开,以实现单独的交互式连接建立(ICE)协商。该QoS规范可覆盖用于该媒体通信会话的连接的所有分段。例如,对于服务器(例如,使用中继网络地址转换的遍历(TURN)服务器)由移动网络运营商(MNO)托管的情况,可请求QoS。可以链接该QoS规范和该QoS流描述。
Description
本申请要求于2022年8月9日提交的美国专利申请17/818,566号以及于2021年8月11日提交的美国临时申请63/232,005号的优先权,这些申请的全部内容通过引用的方式并入本文。2022年8月9日提交的美国专利申请17/818,566号要求于2021年8月11日提交的美国临时申请63/232,005号的权益。
技术领域
本公开涉及经由计算机网络实时传输媒体数据。
背景技术
客户端设备(也称为“用户装备”或“UE”)可被配置成通过计算机网络彼此交换音频和/或视频数据。网络可包括例如路由器、集线器、网桥、交换机、服务器、安全设备等,用于在客户端设备之间传送数据。客户端设备可是智能电话、平板电脑、个人计算机、膝上型计算机等。客户端设备之间的音频和/或视频数据可实时地交换,例如作为语音或视频呼叫。
发明内容
一般来说,本公开描述了用于将服务质量(QoS)应用于客户端设备之间的媒体通信的技术。例如,QoS可应用于两个客户端设备之间的Web实时通信(WebRTC)会话。本公开的技术可包括将QoS规范与QoS流定义分开,以实现单独的交互式连接建立(ICE)协商。该QoS规范可覆盖用于该媒体通信会话的连接的所有分段。例如,对于服务器(例如,使用中继网络地址转换的遍历(TURN)服务器)由移动网络运营商(MNO)托管的情况,可请求QoS。可以链接该QoS规范和该QoS流描述。
在一个示例中,一种将服务质量应用于媒体通信会话的方法包括:由第一客户端设备确定用于第二客户端设备的交互式连接建立(ICE)候选列表;由该第一客户端设备确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,由该第一客户端设备向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;由该第一客户端设备确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;由该第一客户端设备使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;由该第一客户端设备确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及由该第一客户端设备向应用功能提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,一种用于将服务质量应用于媒体通信会话的第一客户端设备包括:存储器,该存储器被配置成存储媒体数据;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,一种计算机可读存储介质在其上存储有指令,该指令在被执行时使第一客户端设备的处理器:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,用于将服务质量应用于媒体通信会话的第一客户端设备包括:用于确定用于第二客户端设备的交互式连接建立(ICE)候选列表的构件;用于确定该ICE候选列表中的有效ICE候选的构件;用于针对该有效ICE候选中的一个或多个有效ICE候选向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据的构件,该AF为该媒体通信会话提供媒体控制;用于确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流的构件;用于使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话的构件;用于确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联的构件;和用于向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话的构件。
在另一示例中,一种将服务质量应用于媒体通信会话的方法包括:由执行应用功能(AF)的服务器设备从第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据,该AF为该第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;由该服务器设备从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及由该服务器设备根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,一种用于将服务质量应用于媒体通信会话的服务器设备包括:存储器,该存储器被配置成存储服务质量(QoS)流与用于第一客户端设备的一个或多个有效交互式连接建立(ICE)候选之间的关联;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:执行应用功能(AF),该AF为该第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;从该第一客户端设备接收表示QoS流与用于该第一客户端设备的该一个或多个有效ICE候选之间的所述关联的数据;从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及由该服务器设备根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,一种计算机可读存储介质在其上存储有指令,该指令使服务器设备的处理器:执行应用功能(AF),该AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;从该第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据;从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
在另一示例中,一种用于将服务质量应用于媒体通信会话的服务器设备包括:用于执行应用功能(AF)的构件,该AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;用于从该第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据的构件;用于从该第一客户端设备接收表示所述QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据的构件;和用于根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话的构件。
在附图和以下描述中阐述一个或多个示例的细节。根据描述、附图以及权利要求书,其它特征、目的和优点将是显而易见的。
附图说明
图1是例示客户端设备在其中彼此交换媒体数据的示例网络的框图。
图2是例示根据本公开的技术的示例客户端设备的框图。
图3是例示示例Web实时通信(WebRTC)应用编程接口(API)架构的框图。
图4是例示示例WebRTC协议栈的概念图。
图5是例示用于经由WebRTC发起媒体通信会话的示例过程250的状态转换图。
图6是例示用于创建用于管理服务质量(QoS)流的新应用会话上下文的示例过程的流程图。
图7是例示可应用本公开的技术来建立用于客户端设备之间的媒体通信会话的服务质量(QoS)流的示例网络的框图。
图8是例示其中可使用本公开的技术的示例协作场景的框图。
图9是例示其中可使用本公开的技术的另一示例协作场景的框图。
图10是例示其中可使用本公开的技术的另一示例协作场景的框图。
图11是例示其中可使用本公开的技术的另一示例协作场景的框图。
图12是例示用于执行本公开的技术的示例方法的流程图。
具体实施方式
图1是例示示例网络100的框图,其中客户端设备110A和客户端设备110B(客户端设备110)彼此交换媒体数据。在该示例中,网络100包括客户端设备110和服务器设备102。服务器设备102包括应用服务器106并执行应用功能104。一般而言,应用功能104提供媒体控制,而应用服务器106提供媒体内容流量,例如用于客户端设备110之间的通信会话114。
客户端设备110包括相应的代理112A和代理112B(代理112)。代理112可表示Web实时通信(WebRTC)代理。代理112可包括相应的WebRTC应用编程接口(API)。一般而言,WebRTC表示用于实时通信(例如,用于通信会话114)的API和一组协议。例如,客户端设备110A可使用代理112A经由WebRTC的API和协议执行与客户端设备110B的通信会话114。
客户端设备110A最初可生成请求,诸如会话描述协议(SDP)提议。例如,客户端设备110A可经由代理112A调用RTCPeerConnection对象上的“createOffer”。SDP提议可包括关于代理112A的信息,例如,所支持的编码器/解码器、通信会话114是否将包括音频和/或视频以及其他连接相关信息。另外,SDP提议可包括一个或多个交互式连接建立(ICE)候选列表,包括客户端设备110B可用来建立与客户端设备110A的通信会话114的端口和IP对。
为了构建ICE候选列表,客户端设备110A可向UDP的会话遍历(STUN)服务器(例如,服务器设备102)发送一个或多个请求。STUN服务器可向客户端设备110A提供到客户端设备110A的公共端口和IP地址。然后,客户端设备110A可将每个端口/IP地址对添加到ICE候选列表。在构建ICE候选列表之后,客户端设备110A可(例如使用WebRTC)经由代理112A与代理112B之间的信令信道向客户端设备110B发送SDP提议。
在接收到SDP提议之后,客户端设备110B可生成SDP应答。客户端设备110B可为其自身收集ICE候选列表,并且生成SDP应答以包括ICE候选列表,然后向客户端设备110A发送SDP应答。然后,客户端设备110可检查从彼此处接收的列表中的各种端口/IP地址对,并且向每一对发送STUN请求。如果从客户端设备110中的另一个客户端设备接收到响应,则发送该响应的客户端设备110中的该一个客户端设备可确定该请求的对应端口和IP对是有效的ICE候选。
在客户端设备110完成对端口/IP对的测试之后,客户端设备110可确定使用哪个有效对。然后,客户端设备110可经由所选择的有效对来交换媒体数据。
另外,服务器设备102可向客户端设备110A和客户端设备110B请求关于通信会话114的服务质量(QoS)数据。根据本公开的技术,服务器设备102可在客户端设备110之间的ICE协商之后,提交QoS请求以请求QoS参考数据。QoS请求可包括将QoS流描述与QoS规范相关联的数据、描述为其提供所请求的QoS的服务数据流的数据以及表示对QoS规范的引用的数据。
在客户端设备110中的一个客户端设备(例如,客户端设备110A)识别出有效的ICE候选之后,客户端设备110A可关联与该ICE候选相关联的新QoS流,并且确定是否更新与服务器设备102(并且具体地,应用功能104)的QoS关联。作为响应,服务器设备102可确定是否标识到远程对的对应QoS流且请求也将QoS应用于它。
图2是例示根据本公开的技术的示例客户端设备120的框图。在该示例中,客户端设备120包括用户接口122、5G媒体流(5GMS)感知应用124、媒体会话处理程序(MSH)126、接入客户端128、代理130、网络接口136、存储器140、解码器132、渲染器134、显示器136和扬声器138。
用户界面122可表示多种用户接口,诸如触摸屏、按钮、操纵杆、麦克风、相机、诸如耳塞、外部麦克风、外部相机、游戏控制器、键盘、鼠标等外围设备。一般而言,用户接口122允许客户端设备120的用户与客户端设备120交互并向该客户端设备提供输入。例如,用户可使用客户端设备120来参与和不同客户端设备的另一用户的媒体通信会话,诸如Web实时通信(WebRTC)会话。作为WebRTC会话的一部分,用户可发送和接收语音数据、声音数据、视频数据、静止图像数据、诸如增强现实(AR)数据、虚拟现实(VR)数据、混合现实(MR)数据等扩展现实(XR)数据。
用户接口122可将接收到的用于媒体通信会话的媒体数据传递给编码器142以进行编码。编码器142可包括音频、图像、视频或用于编码媒体数据以供网络传输的其他此类编码器。编码器142可向5GMS感知应用124提供所编码的媒体数据。
5GMSd感知应用124可从用户接口122接收用户输入数据和/或从编码器142接收所编码的媒体数据。5GMS感知应用124可将表示用户输入数据和所编码的媒体数据的信息传递给MSH 126,该MSH还可从由单独的服务器设备(图2中未示出)执行的5GMS应用功能(AF)(诸如图1的AF 104)接收信息。
MSH 126可向接入客户端128提供该信息,该接入客户端还可从由单独的服务器设备(图2中未示出)执行的5GMS应用服务器(AS)(诸如图1的AS106)接收一个或多个媒体流。
接入客户端128可初始化媒体通信会话,诸如WebRTC会话,如下文所述。根据本公开的技术,媒体通信会话可具有相关联的服务质量(QoS)配置。例如,QoS配置可取决于媒体通信会话是否包括音频数据、视频数据、XR数据或它们的组合、是否需要准确的用户位置信息、媒体通信会话所需的带宽量等。接入客户端128可接收用于媒体通信会话的媒体数据并将该媒体数据提供给解码器132。该媒体数据也可存储(例如,缓冲)在存储器140中。存储器140还可存储用于由一个或多个处理器执行的指令,例如用于客户端设备120的各种组件中的任何组件的软件或固件指令,诸如5GMS感知应用124、MSH 126、接入客户端128、代理130、解码器132和/或渲染器134。
代理130可对应于图1的代理112中的一个代理。代理130可表示充当用于媒体通信会话的实时通信的API和一组协议的WebRTC代理。如上所述,代理130可构建交互式连接建立(ICE)候选列表。代理130可经由网络接口136发送和接收数据,该网络接口可表示无线或有线网络接口,诸如WiFi接口、802.11接口、以太网接口等。
代理130可确定用于另一客户端设备以及该代理自身的ICE候选列表。例如,代理130可查询STUN服务器以确定该STUN服务器的各种公共IP地址和端口。然后,代理130可形成ICE候选列表,以包括从STUN服务器接收到的数据中指示的一个或多个ICE候选。代理130还可在查询STUN和/或TURN服务器之前接收表示一个或多个STUN和/或TURN服务器的数据。在一些示例中,服务器设备102可执行AF 104以充当STUN服务器和TURN服务器两者。
代理130可使用TURN服务器来建立与另一客户端设备的媒体通信会话。例如,客户端设备120的代理130可向另一客户端设备发送邀请并且接收响应于该邀请的接受。邀请可包括用于客户端设备120的ICE候选列表,并且接受可包括用于另一客户端设备的ICE候选列表。该另一客户端设备也可称为对等客户端设备。
然后,代理130可验证该列表中用于另一客户端设备的每个ICE候选。例如,代理130可向用于另一客户端设备的特定ICE候选的IP地址和端口发送STUN请求。如果接收到针对STUN请求的响应,则代理130可确定对应的ICE候选是有效的。在确定有效ICE候选之后,代理130可与另一客户端设备协商以确定每个设备的哪些ICE候选将用于媒体通信会话。
根据本公开的技术,代理130可向服务器设备102(图1)指定与有效ICE候选中的每个有效ICE候选相关联的一个或多个服务质量(QoS)流。因此,服务器设备102可使用该信息来确定用于ICE候选中的一个特定ICE候选的适当QoS流。以这种方式,作为媒体通信会话的一部分发送到另一客户端设备(即,定向到另一客户端设备的公共IP地址和端口)的数据可经由对应的QoS流来发送。以这种方式,QoS可应用于媒体通信会话。
解码器132可包括音频解码器、视频解码器等。解码器132可接收经由媒体通信会话交换的媒体数据并对所接收的媒体数据进行解码。解码器132可将所解码的媒体数据提供给渲染器134,该渲染器可渲染媒体数据。例如,渲染器134可将单独解码的媒体数据的各种片段组合在一起以供同时播放,且将所渲染的图像或视频数据提供给显示器136,将所渲染的音频数据提供给扬声器138。
以这种方式,客户端设备120表示用于将服务质量应用于媒体通信会话的第一客户端设备的示例,该第一客户端设备包括:存储器,该存储器被配置成存储媒体数据;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
图3是例示示例Web实时通信(WebRTC)架构156的框图。图1的代理112和图2的代理130可包括与图3的WebRTC架构156中示出的组件类似的组件。WebRTC架构156形成用于执行WebRTC的系统150的一部分。
在该示例中,WebRTC架构156包括WebRTC应用编程接口(API)158和启用实时通信的一组协议。WebRTC协议使得任何两个WebRTC代理均能够协商并建立双向且安全的实时通信信道。在一个示例中,WebRTC API 156展示了基于JavaScript的API,以使得能够开发利用客户端设备的现有多媒体能力来建立实时通信会话的应用。虽然JavaScript是一个示例,但是也可通过其他编程语言来访问WebRTC协议集。
互联网工程任务组(IETF)的RTCWeb小组开发并维护WebRTC协议。万维网联盟(W3C)开发了WebRTC API。
如图3所示,WebRTC API 158可分解为三层:第一层,该第一层包括用于Web开发者的API,该API包括MediaStream对象、RTCPeerConnection对象和RTCDataChannel对象;第二层,该第二层包括用于Web浏览器以及用户代理实现者和提供者的API;和第三层,该第三层包括用于音频/视频捕获和渲染以及用于网络输入/输出的可覆盖API,浏览器实施者可将实现连接该可覆盖API。
在图3的示例中,系统150包括Web应用编程接口(API)154和WebRTC架构156。WebAPI 154从一个或多个Web应用152A-152N(Web应用152)接收数据。Web API 154可向WebRTC架构156提供来自Web应用152的数据。在该示例中,WebRTC架构156包括WebRTC API 158、会话管理和抽象信令单元160、语音引擎170、视频引擎180、传输单元190、音频捕获162、视频捕获164和网络输入/输出(I/O)166。
语音引擎170包括编码器/解码器(CODEC)172、抖动缓冲器174和增强引擎176。例如,CODEC 172可包括互联网语音音频编解码器(iSAC)和/或互联网低比特率编解码器(iLBC)。抖动缓冲器174可包括抖动缓冲器和错误隐藏单元两者。在一些示例中,抖动缓冲器174可对应于抖动缓冲器的NetEQ实现。增强引擎176可包括回声消除单元和/或降噪单元。
视频引擎180包括CODEC 182、抖动缓冲器184和增强引擎186。CODEC 182可符合多种视频编码标准中的一个或多个标准,诸如ITU-TH.264/高级视频编码(AVC)、ITU-TH.265/高效率视频编码(HEVC)、ITU-T H.266/通用视频编码(VVC)、VP8、VP9等。抖动缓冲器184缓冲所接收的视频数据,直到视频数据准备好解码为止。增强引擎186可将所解码的视频数据增强为环后处理,例如,通过内插以将图像上取样到较高显示分辨率、帧速率上转换(FRUC)、环后滤波(例如,基于人工智能的滤波)等。
传输单元190包括协议192、复用单元194和对等(P2P)STUN/TURN/ICE单元196。协议192可包括多种传输协议中的一种或多种协议,诸如实时传输协议(RTP)、安全RTP(SRTP)等。复用单元194可将多种流复用在一起,诸如一个或多个音频流、一个或多个视频流及其他媒体(例如,定时文本/隐藏式字幕)。PTP STUN/TURN/ICE单元196通常发出STUN和/或TURN请求作为ICE协商的一部分,以与另一客户端设备建立P2P连接。P2P STUN/TURN/ICE单元196还可执行本公开的技术,例如,当向执行AF的服务器设备发送ICE候选数据时纳入QoS流数据与ICE候选,使得服务器设备可将ICE候选与适当的QoS流相关联。
音频捕获162可以是用于捕获用户语音数据或其他声音数据的麦克风。视频捕获164可包括用于捕获图像或视频数据的一个或多个相机。网络I/O单元166可包括一个或多个网络接口,诸如有线或无线接口,例如802.11接口、WiFi接口、以太网接口等。
图4是例示示例WebRTC协议栈200的概念图。WebRTC栈200包括诸如语音引擎、视频引擎和传输组件之类的组件。传输组件为双方(例如,图1的客户端设备110)提供安全传输信道以进行通信。传输组件可使用在数据报传输层安全(DTLS)上运行并且利用安全实时传输协议(SRTP)简档的实时传输协议(RTP)栈。
在图4的示例中,WebRTC栈200包括媒体路径组件202和信令路径组件204。媒体路径组件202包括时间关键组件206和非时间关键组件208。时间关键组件包括CODEC 210、SRTP 212和安全RTP控制协议(SRTCP)214。非时间关键组件包括流控制传输协议(SCTP)216。数据报传输层安全(DTLS)协议218支持协议栈中DTLS协议218之上的各种媒体路径组件中的每个媒体路径组件。类似地,ICE/STUN/TURN协议220支持该栈中ICE/STUN/TURN协议220之上的各种组件。媒体路径组件202中的每个媒体路径组件的数据可根据用户数据报协议(UDP)222来封装且根据互联网协议(IP)224来封装和传输。IP 224可以是IPv4、IPv6或其他IP层协议。
该示例中的信令路径组件204包括会话发起协议(SIP)226、短消息对等(SMPP)协议228、会话描述协议232以及其他协议230。这些协议可使用WebSocket 234、服务器发送事件(SSE)、XML HTTP请求(XHR)238以及其他240此类服务。这些各种服务可经由超文本传输协议(HTTP)242运行。HTTP 242可经由传输层安全(TLS)协议244运行以提供安全性,例如加密。受TLS保护的HTTP数据可根据传输控制协议(TCP)246进行传输,该传输控制协议可根据IP 224进行传送。
图5是例示用于经由WebRTC发起媒体通信会话的示例过程250的状态转换图。一旦发起了WebRTC会话,WebRTC客户端就可在稳定状态256中启动。在稳定状态256中,假设不存在当前正在进行的提议和应答交换。为了发起每个媒体通信会话(诸如音频通信会话或视频通信会话),WebRTC客户端可发送或接收表示SDP数据的提议,例如包括支持的CODEC、格式化等。
在稳定状态256中,WebRTC客户端可从包括WebRTC客户端的客户端设备的本地元件接收本地提议。响应于接收到本地提议(setLocal(OFFER)),WebRTC客户端可转换到具有本地提议(have-local-offer)状态258。然后,WebRTC客户端可将提议发送到对等WebRTC客户端。响应于从对等WebRTC客户端(setRemote(PRANSWER))接收到应答,WebRTC客户端可转换到具有远程提前应答(have-remote-pranswer)状态260。然后,WebRTC客户端可执行与对等WebRTC客户端的ICE协商,包括(根据本公开的技术)将QoS流数据提供给执行用于ICE候选的AF的服务器设备。然后,WebRTC客户端可转换回稳定状态256。
另一方面,在稳定状态256中,WebRTC客户端可从对等WebRTC客户端接收远程提议。响应于接收到远程提议(setRemote(OFFER)),WebRTC客户端可转换到具有远程提议(have-remote-offer)状态252。远程提议可包括表示由对等WebRTC客户端提出的新媒体通信会话的受支持CODEC、格式化等的SDP数据。WebRTC客户端可确定执行WebRTC客户端的主机客户端设备支持所提供的元素中的哪些元素,并且制定响应。在向对等WebRTC客户端(setLocal(PRANSWER))发送响应之后,WebRTC客户端可转换到具有本地提前应答(have-local-pranswer)状态254。WebRTC客户端可再次执行ICE协商,包括根据本公开的技术将QoS流数据发送到执行AF的服务器,然后转换回稳定状态256。
图6是例示用于创建用于管理服务质量(QoS)流的新应用会话上下文的示例服务280的流程图。网络功能(NF)服务消费者282和策略控制功能(PCF)284参与服务280。PCF284向NF服务消费者282提供服务,诸如代理呼叫会话控制功能(P-CSCF)或应用功能(AF),以请求为它们管理的特定QoS流分配QoS。NF服务消费者282(例如,由客户端设备/UE执行的WebRTC客户端或其他应用)可向PCF 284发送指定一个或多个应用会话286的HTTP POST消息,并且PCF 284可通过HTTP 201“已创建”成功消息来响应NF服务消费者282。服务280可用于创建用于管理QoS流的新应用会话上下文。
对于实时媒体,应用会话上下文可提供QoS流和所请求QoS参数的每个媒体组件的描述。下表描述了包括在请求中的参数的子集。
为每个媒体子组件提供FlowDescription,其包括精确地描述QoS流的5元组。例如,5元组可包括源IP地址、源端口、目标IP地址、目标端口和用于QoS流的协议。QoS要求由组件指示,并且包括带宽、延迟和丢包指示。
为了请求将策略应用于流会话,用户设备(UE)使用由5G媒体流(5GMS)应用功能(AF)公开的动态策略API来向5GMS AF提供关于会话和所请求的QoS的信息。UE中的媒体会话处理程序(MSH)从应用收集该信息。下表示出了作为对5GMS AF的请求的一部分包括在内的某些示例参数:
可提供QoS信息作为对在调配步骤期间设置的预定义QoS模板的参考或者作为一组QoS参数。
图7是例示可应用本公开的技术来建立用于客户端设备之间的媒体通信会话的服务质量(QoS)流的示例网络300的框图。具体而言,诸如P-CSCF或AF之类的网络功能(NF)消费者可被配置成应用这些技术来请求QoS参数并定义用于客户端设备(例如,UE)之间的通信会话的QoS流。在图7的示例中,网络300包括用户设备(UE)302A和用户设备302B(UE302)、使用中继网络地址转换(NAT)的遍历(TURN)服务器308和5GMS AF 306。UE 302可对应于图1的客户端设备110,并且5GMS AF 306可对应于图1的服务器设备102。在该示例中,UE302A还包括媒体会话处理程序304。
5GMS AF 306可向用户装备(UE)提供TURN服务器308、UDP的会话遍历(STUN)服务器和/或多点控制单元(MCU)(在图7的示例中未示出STUN服务器和MCU)。具体而言,5GMS AF306可将信息作为服务访问信息API的一部分发送到MSH 304。该信息可作为RTCPeerConnection配置的一部分来传递,以允许进行适当的交互式连接建立(ICE)协商。
在该示例中,UE 302A可向5GMS AF 306发送updateCandidate消息。UE 302A可在updateCandidate消息中包括qosReference。当在成功的ICE协商后更新QoS流描述时,在updateCandidate消息中包括qosReference可能导致在QoS流描述与QoS规范之间形成关联。UE 302A可在请求中包括以下信息:
每次标识新的ICE候选时,向应用发送通知。该应用标识与该新候选相关联的新QoS流,并决定是否更新与AF的QoS关联。如果ICE候选类型是“中继”,则这指示将部署TURN服务器308。在这种情况下,5GMS AF 306将标识到远程端口/IP地址对的对应QoS流,并且请求也将QoS应用于该5GMS AF。
这适用于托管在可信域中的TURN服务器,诸如TURN服务器308。移动网络运营商(MNO)网络外部的TURN服务器不受QoS分配的影响。可信域中的TURN服务器(诸如TURN服务器308)可被增强,以具有直接向5GMS AF 306发送QoS流描述的更新的能力。另选地,这可由MNO托管的信令服务器来完成。
由于TURN服务器308不包括指示5GMS AF 306的位置的信息,因此5GMS AF 306探测TURN服务器308以检测对5G增强功能的支持。如果TURN服务器308确实支持此增强功能,则该TURN服务器将通过到UE 302A的QoS流与到UE 302B的QoS流之间的实际映射来进行响应。5GMS AF 306随后可将QoS规范应用于该连接的第二段。该关联可通过向UE 302A提供QoS流的描述来建立。
图8是例示其中可使用本公开的技术的示例协作场景的框图。图8的示例包括网络320、移动网络运营商(MNO)330A和移动网络运营商330B(MNO 330)。网络320包括STUN服务器322、TURN/MCU服务器324和WebRTC信令服务器326。MNO 330包括相应的5GMS AF 332A和5GMS AF 332B(5GMS AF 332)、PCF/会话管理功能(SMF)/网络暴露功能(NEF)334A和PCF/会话管理功能(SMF)/网络暴露功能(NEF)334B(PCF/SMF/NEF 334)以及用户设备(UE)336A和用户设备(UE)336B(UE 336)。
UE 336可包括与图2的客户端设备120的组件类似的组件。UE 336可执行本公开的技术以发起媒体通信会话338。在该示例中,UE 336耦接到不同的相应MNO 330。即,UE 336A耦接到MNO 330A且UE 336B耦接到MNO 330B。UE 336A可发起与UE 336B的媒体通信会话338。最初,UE 336A可向STUN服务器322发送STUN请求,以确定其自身的公共IP地址和端口值。然后,UE 336A可构建表示从STUN服务器322接收的IP地址和端口值对的ICE候选列表。然后,UE 336A可向UE 336B发送ICE候选列表。
作为响应,UE 336B可从STUN服务器322请求其公共IP地址和端口值。然后,UE336B可生成包括其自身的IP地址和端口值对的ICE候选列表,并且将该ICE候选列表发送回UE 336A。
UE 336A可从UE 336B接收ICE候选列表,然后验证该列表中的ICE候选。例如,UE336A可向ICE候选的每个IP地址和端口发送STUN请求,并且确定哪些STUN请求导致响应。对于接收到对STUN请求的响应的每个IP地址和端口对,UE 336A可确定对应的ICE候选是有效的。UE 336B可通过类似方式确定从UE 336A接收到的ICE候选中的哪些ICE候选是有效的。
在确定有效ICE候选之后,UE 336A可向5GMS AF 332A发送表示有效ICE候选和服务质量(QoS)流的数据。5GMS AF 332A可为媒体通信会话338提供媒体控制。类似地,UE336B可向5GMS AF 332B发送表示有效ICE候选和QoS流的数据,该5GMS AF可附加地或另选地为媒体通信会话338提供媒体控制。UE 336可为UE 336A和UE 336B中的每个UE协商一对有效IP ICE候选,以建立媒体通信会话338。此外,UE 336可确定QoS规范与用于媒体通信会话的QoS流中的该一个QoS流之间的关联,并且根据该QoS规范将QoS应用于媒体通信会话338。
图8的示例提供了具有5G支持的过顶(over-the-top,OTT)WebRTC。WebRTC功能可由WebRTC信令服务器326托管,该WebRTC信令服务器可是应用服务提供商。MNO 330可向UE336提供网络辅助和QoS。具体而言,UE 336可执行相应的WebRTC应用,该WebRTC应用可将信息传递到UE 336的相应MSH。MSH可使用基于服务的架构(SBA)程序来调用网络辅助和QoS。在一个另选的示例中,WebRTC信令服务器326可与PCF/SMF/NEF 334通信。
图9是例示其中可使用本公开的技术的另一示例协作场景的框图。图9的示例描绘了包括WebRTC信令服务器342、MNO 350A和MNO 350B(MNO 350)的网络340。MNO 350包括相应的5GMS AF 352A和5GMS AF 352B(5GMS AF 352)、PCF/SMF/NEF 354A和PCF/SMF/NEF354B(PCF/SMF/NEF 354)、STUN服务器358A和STUN服务器358B(STUN服务器358)、TURN/MCU服务器360A和TURN/MCU服务器360B(TURN/MCU服务器360)以及UE 356A和UE 356B(UE356)。
一般而言,由图9的UE 356执行的过程可基本上类似于由图8的UE 336执行的用于建立和参与媒体通信会话362的过程。然而,在该示例中,MNO 350提供相应的STUN服务器358和TURN/MCU服务器360,而不是单独提供STUN和TURN/MCU服务器。因此,在该示例中,WebRTC功能由可信MNO(即,MNO 350)提供。MNO 350可向客户(诸如UE 356的用户)提供WebRTC功能。由UE 356执行的WebRTC应用可通过相应的MNO 350发现STUN服务器358和TURN/MCU服务器360,并且将它们包括在ICE协商中。STUN服务器358和TURN/MCU服务器360可提取诸如网络5元组(源IP地址、目标IP地址、源端口、目标端口和协议)的信息,并且将该信息传递给5GMS AF 352和/或PCF/SMF/NEF 354。在各种示例中,STUN服务器358和TURN/MCU服务器360可实现为5G应用功能或5G应用服务器。
图10是例示其中可使用本公开的技术的另一示例协作场景的框图。图10的示例描绘了MNO 370,该MNO包括5GMS AF 372、PCF/SMF/NEF 374、UE 376A和UE 376B(UE 376)、STUN服务器378、TURN/MCU服务器380和WebRTC信令服务器382。
一般而言,由图10的UE 376执行的过程可基本上类似于由图8的UE 336执行的用于建立和参与媒体通信会话384的过程。然而,在该示例中,UE 376各自耦接到相同的MNO,即MNO 370。同样,在该示例中,MNO 370提供用于WebRTC的各种网络组件和服务中的每一者。即,在该示例中,存在MNO促进的WebRTC服务。MNO 370可代表应用提供商拥有或提供WebRTC服务。当UE 376执行渲染过程的不同部分(例如,针对XR、MR、AR、VR等)时,此示例可用于拆分渲染。该示例可实现标准化的WebRTC信令协议。
在该示例中,WebRTC信令服务器382可接收SDP提议并提供SDP应答。WebRTC信令服务器382可提取媒体和5元组信息,并将该信息传递给5GMS AF 372和/或PCF/SMF/NEF 374。在一些示例中,WebRTC信令服务器382可实现为5G应用功能或5G应用服务器。
图11是例示其中可使用本公开的技术的另一示例协作场景的框图。图11的示例描绘了MNO 390A和MNO 390B(MNO 390)。MNO 390中的每个MNO均包括相应的WebRTC信令服务器402A和WebRTC信令服务器402B(WebRTC信令服务器402)、5GMS AF 392A和5GMS AF 392B(5GMS AF 392)、PCF/SMF/NEF 394A和PCF/SMF/NEF 394B(PCF/SMF/NEF 394)、UE 396A和UE396B(UE 396)、STUN服务器398A和STUN服务器398B(STUN服务器398)以及TURN/MCU服务器400A和TURN/MCU服务器400B(TURN/MCU服务器400)。在该示例中,UE 396A和396B执行本公开的技术以建立媒体通信会话404。
一般而言,由图11的UE 396执行的过程可基本上类似于由图8的UE 336执行的用于建立和参与媒体通信会话404的过程。然而,在该示例中,MNO 390包括相应的WebRTC信令服务器402。以这种方式,图11的示例提供了可互操作的WebRTC服务。即,WebRTC服务是MNO促进的并且跨MNO 390操作。WebRTC信令服务器402可使用用于IOP的标准化WebRTC信令来建立分布式会话控制协议。在该示例中,WebRTC信令服务器402、STUN服务器398和TURN/MCU服务器400可跨MNO 390交换会话参数。
本公开的技术可实现某些优点。例如,这些技术将QoS规范与QoS流定义分开,这可实现单独的ICE协商。这些技术的执行还可扩展QoS规范以覆盖连接的所有分段。具体而言,这些技术支持在TURN服务器由MNO托管的情况下请求QoS。这些技术还允许在QoS规范和QoS流描述之间建立链接。
图12是例示用于执行本公开的技术的示例方法的流程图。图11的方法是关于图2的客户端设备120来进行说明的,但应当理解的是,诸如图1的客户端设备110、图7的UE302、图8的UE 336、图9的UE 356、图10的UE 376或图11的UE 396之类的其他设备也可被配置成执行此方法或类似方法。
最初,客户端设备120可确定与之发起媒体通信会话的对等客户端设备的ICE候选列表(420)。例如,客户端设备120可向对等客户端设备发送请求,并且响应于该请求从对等客户端设备接收ICE候选列表。ICE候选列表可包括可通过其到达对等客户端设备的IP地址和端口对的列表。客户端设备120和对等客户端设备中的每个客户端设备均可连接到网络设备,该网络设备执行网络地址转换(NAT),以在公共IP地址与客户端设备通信地耦接到的私有网络(例如,由移动网络运营商(MNO)提供的网络)的私有IP地址之间转换。
然后,客户端设备120可验证ICE候选列表中的ICE候选(422)。例如,客户端设备120可向从对等客户端设备接收到的列表中的每个IP地址和端口发送STUN请求,并且确定接收到对STUN请求的响应的ICE候选是有效的。客户端设备120可向5GMS应用功能(AF)发送表示用于有效ICE候选的QoS流的数据,该5GMS应用功能可由形成客户端设备120所连接的MNO或其他私有网络的一部分的服务器设备来执行(424)。
然后,客户端设备120可确定用于媒体通信会话的有效ICE候选中的一个或多个有效ICE候选(426)。例如,客户端设备120可与对等网络设备协商,以确定用于特定媒体通信会话的客户端设备120和对等客户端设备中的每个客户端设备的相应IP地址和端口对。然后,客户端设备120可建立媒体通信会话(428)。例如,客户端设备120可执行关于图5所讨论的技术以建立特定媒体通信会话,例如通过向对等客户端设备发送SDP提议并从对等客户端设备接收SDP应答,或者通过从对等客户端设备接收SDP提议并通过SDP应答向对等客户端设备做出响应。
此外,客户端设备120可确定用于媒体通信会话的QoS规范和QoS流(430)。客户端设备120可向应用功能(例如,图1的应用功能104)提供数据以使得应用功能使用QoS规范(432)以及与所确定的用于媒体通信会话的ICE候选相关联的QoS流来将QoS应用于媒体通信会话。例如,客户端设备102可调用由运行图1的服务器设备102和应用104的移动网络运营商(MNO)提供的QoS。
以这种方式,图11的方法表示一种方法的示例,该方法包括:由第一客户端设备确定用于第二客户端设备的交互式连接建立(ICE)候选列表;由该第一客户端设备确定用于该第二客户端设备的该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,由该第一客户端设备向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;由该第一客户端设备确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;由该第一客户端设备使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;由该第一客户端设备确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及由该第一客户端设备向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
本公开的某些示例性技术汇总于以下条款中:
条款1:一种将服务质量应用于媒体通信会话的方法,该方法包括:由第一客户端设备确定交互式连接建立(ICE)候选列表;由该第一客户端设备向第二客户端设备发送媒体通信会话请求,该媒体通信会话请求包括表示该ICE候选列表的数据;由该第一客户端设备确定该ICE候选中的一个或多个ICE候选的列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,由该第一客户端设备向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该通信会话提供媒体控制;由该第一客户端设备确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;由该第一客户端设备确定QoS规范与该QoS流中的该一个QoS流之间的关联;以及由该第一客户端设备根据该QoS规范将QoS应用于该通信会话。
条款2:根据条款1所述的方法,还包括从执行该AF的该服务器设备接收表示使用中继NAT的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一个服务器的数据。
条款3:根据条款1和2中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款4:根据条款1-3中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款5:根据条款1-4中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款6:根据条款1-5中任一项所述的方法,还包括向执行该AF的该服务器设备发送更新消息,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款12:一种用于将服务质量应用于媒体通信会话的设备,该设备包括用于执行根据条款1-6中任一项所述的方法的一个或多个构件。
条款13:根据条款12所述的设备,其中该一个或多个装置包括实现于电路中的一个或多个处理器。
条款14:根据条款12和13中任一项所述的设备,还包括显示器。
条款15:根据条款12-14中任一项所述的设备,其中该设备包括相机、计算机、移动设备、广播接收机设备或机顶盒中的一者或多者。
条款16:根据条款12-15所述的设备,还包括存储器。
条款17:一种计算机可读存储介质,该计算机可读存储介质上存储有指令,该指令在被执行时使处理器执行根据条款1-6中任一项所述的方法。
条款18:一种用于将服务质量应用于媒体通信会话的第一客户端设备,该第一客户端设备包括:用于确定交互式连接建立(ICE)候选列表的构件;用于向第二客户端设备发送媒体通信会话请求的构件,该媒体通信会话请求包括表示该ICE候选列表的数据;用于确定该ICE候选列表中的有效ICE候选的构件;用于针对该有效ICE候选中的一个或多个有效ICE候选向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据的构件,该AF为该通信会话提供媒体控制;用于确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流的构件;用于确定QoS规范与该QoS流中的该一个QoS流之间的关联的构件;和用于根据该QoS规范将QoS应用于该通信会话的构件。
条款19:一种将服务质量应用于媒体通信会话的方法,该方法包括:由第一客户端设备确定用于第二客户端设备的交互式连接建立(ICE)候选列表;由该第一客户端设备确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,由该第一客户端设备向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;由该第一客户端设备确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;由该第一客户端设备使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;由该第一客户端设备确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及由该第一客户端设备向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款20:根据条款19所述的方法,其中确定该ICE候选列表包括:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款21:根据条款19所述的方法,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且向该应用功能提供该数据以将QoS应用于该媒体通信会话包括使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS。
条款22:根据条款19所述的方法,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且确定该ICE候选列表包括从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据。
条款23:根据条款19所述的方法,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款24:根据条款19所述的方法,该方法还包括从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
条款25:根据条款19所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款26:根据条款19所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款27:根据条款19所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款28:根据条款19所述的方法,还包括向执行该AF的该服务器设备发送更新消息,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款29:根据条款19所述的方法,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款30:一种用于将服务质量应用于媒体通信会话的第一客户端设备,该第一客户端设备包括:存储器,该存储器被配置成存储媒体数据;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立所述媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款31:根据条款30所述的第一客户端设备,其中,为了确定该ICE候选列表,该一个或多个处理器被配置成:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款32:根据条款30所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且为了向该应用功能提供数据以将QoS应用于该媒体通信会话,该一个或多个处理器被配置成使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS。
条款33:根据条款30所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且为了确定该ICE候选列表,该一个或多个处理器被配置成从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据。
条款34:根据条款30所述的第一客户端设备,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款35:根据条款30所述的第一客户端设备,其中该一个或多个处理器还被配置成从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
条款36:根据条款30所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款37:根据条款30所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款38:根据条款30所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款39:根据条款30所述的第一客户端设备,其中该一个或多个处理器还被配置成向执行该AF的该服务器设备发送更新消息,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款40:根据条款30所述的第一客户端设备,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款41:根据条款30所述的第一客户端设备,还包括显示器。
条款42:根据条款30所述的第一客户端设备,其中该第一客户端设备包括相机、计算机、移动设备、广播接收机设备或机顶盒中的一者或多者。
条款43:一种计算机可读存储介质,该计算机可读存储介质上存储有指令,该指令在被执行时使第一客户端设备的处理器:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立所述媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款44:根据条款43所述的计算机可读存储介质,其中使该处理器确定该ICE候选列表的该指令包括使该处理器执行以下操作的指令:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款45:根据条款43所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且使该处理器向该应用功能提供数据以将QoS应用于该媒体通信会话的该指令包括使该处理器使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS的指令。
条款46:根据条款43所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且使该处理器确定该ICE候选列表的该指令包括使该处理器从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据的指令。
条款47:根据条款43所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款48:根据条款43所述的计算机可读存储介质,还包括使该处理器从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据的指令。
条款49:根据条款43所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款50:根据条款43所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款51:根据条款43所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款52:根据条款43所述的计算机可读存储介质,还包括使该处理器向执行该AF的该服务器设备发送更新消息的指令,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款53:根据条款43所述的计算机可读存储介质,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款54:一种用于将服务质量应用于媒体通信会话的第一客户端设备,该第一客户端设备包括:用于确定用于第二客户端设备的交互式连接建立(ICE)候选列表的构件;用于确定该ICE候选列表中的有效ICE候选的构件;用于针对该有效ICE候选中的一个或多个有效ICE候选向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据的构件,该AF为该媒体通信会话提供媒体控制;用于确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流的构件;用于使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话的构件;用于确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联的构件;和用于向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话的构件。
条款55:一种将服务质量应用于媒体通信会话的方法,该方法包括:由第一客户端设备确定用于第二客户端设备的交互式连接建立(ICE)候选列表;由该第一客户端设备确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,由该第一客户端设备向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;由该第一客户端设备确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;由该第一客户端设备使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;由该第一客户端设备确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及由该第一客户端设备向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款56:根据条款55所述的方法,其中确定该ICE候选列表包括:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款57:根据条款55和56中任一项所述的方法,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且向该应用功能提供该数据以将QoS应用于该媒体通信会话包括使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS。
条款58:根据条款55和56中任一项所述的方法,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且确定该ICE候选列表包括从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据。
条款59:根据条款55和56中任一项所述的方法,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款60:根据条款55-59中任一项所述的方法,还包括从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
条款61:根据条款55-60中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款62:根据条款55-61中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款63:根据条款55-62中任一项所述的方法,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款64:根据条款55-63中任一项所述的方法,还包括向执行该AF的该服务器设备发送更新消息,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款65:根据条款55-64中任一项所述的方法,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款66:一种用于将服务质量应用于媒体通信会话的第一客户端设备,该第一客户端设备包括:存储器,该存储器被配置成存储媒体数据;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款67:根据条款66所述的第一客户端设备,其中为了确定该ICE候选列表,该一个或多个处理器被配置成:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款68:根据条款66和67中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且为了向该应用功能提供该数据以将QoS应用于该媒体通信会话,该一个或多个处理器被配置成使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS。
条款69:根据条款66和67中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且为了确定该ICE候选列表,该一个或多个处理器被配置成从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据。
条款70:根据条款66和67中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款71:根据条款66-70中任一项所述的第一客户端设备,其中该一个或多个处理器还被配置成从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
条款72:根据条款66-71中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款73:根据条款66-72中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款74:根据条款66-73中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款75:根据条款66-74中任一项所述的第一客户端设备,其中该一个或多个处理器还被配置成向执行该AF的该服务器设备发送更新消息,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款76:根据条款66-75中任一项所述的第一客户端设备,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款77:根据条款66-76中任一项所述的第一客户端设备,还包括显示器。
条款78:根据条款66-77中任一项所述的第一客户端设备,其中该第一客户端设备包括相机、计算机、移动设备、广播接收机设备或机顶盒中的一者或多者。
条款79:一种计算机可读存储介质,该计算机可读存储介质上存储有指令,该指令在被执行时使第一客户端设备的处理器:确定用于第二客户端设备的交互式连接建立(ICE)候选列表;确定该ICE候选列表中的有效ICE候选;针对该有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,该AF为该媒体通信会话提供媒体控制;确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流;使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话;确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联;以及向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话。
条款80:根据条款79所述的计算机可读存储介质,其中使该处理器确定该ICE候选列表的该指令包括使该处理器执行以下操作的指令:接收定义多个ICE候选的数据;以及形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选。
条款81:根据条款79和80中任一项所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且使该处理器向该应用功能提供该数据以将QoS应用于该媒体通信会话的该指令包括使该处理器使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS的指令。
条款82:根据条款79和80中任一项所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且使该处理器确定该ICE候选列表的该指令包括使该处理器从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据的指令。
条款83:根据条款79和80中任一项所述的计算机可读存储介质,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款84:根据条款79-83中任一项所述的计算机可读存储介质,还包括使该处理器从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据的指令。
条款85:根据条款79-84中任一项所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款86:根据条款79-85中任一项所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款87:根据条款79-86中任一项所述的计算机可读存储介质,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款88:根据条款79-87中任一项所述的计算机可读存储介质,还包括使该处理器向执行该AF的该服务器设备发送更新消息的指令,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款89:根据条款79-88中任一项所述的计算机可读存储介质,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款90:一种用于将服务质量应用于媒体通信会话的第一客户端设备,该第一客户端设备包括:用于确定用于第二客户端设备的交互式连接建立(ICE)候选列表的构件;用于确定该ICE候选列表中的有效ICE候选的构件;用于针对该有效ICE候选中的一个或多个有效ICE候选向执行应用功能(AF)的服务器设备发送表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的服务质量(QoS)流的数据的构件,该AF为该媒体通信会话提供媒体控制;用于确定该有效ICE候选中的一个有效ICE候选以及与该有效ICE候选中的该一个有效ICE候选相关联的该QoS流中的一个QoS流的构件;用于使用该有效ICE候选中的所确定的一个有效ICE候选与该第二客户端设备建立该媒体通信会话的构件;用于确定QoS规范与用于该媒体通信会话的该QoS流中的该一个QoS流之间的关联的构件;和用于向该AF提供数据以根据该QoS规范将QoS应用于该媒体通信会话的构件。
条款91:根据条款90所述的第一客户端设备,其中用于确定该ICE候选列表的该构件包括:用于接收定义多个ICE候选的数据的构件;以及用于形成该ICE候选列表以包括该多个ICE候选中的一个或多个ICE候选的构件。
条款92:根据条款90和91中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且用于向该应用功能提供该数据以将QoS应用于该媒体通信会话的该构件包括用于使用由该第一MNO提供的基于服务的架构(SBA)程序来调用由该第一MNO提供的QoS的构件。
条款93:根据条款90和91中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到第一移动网络运营商(MNO),该第二客户端设备通信地耦接到第二MNO,并且用于确定该ICE候选列表的该构件包括用于从该第一MNO接收表示该ICE候选中的一个或多个ICE候选的数据的构件。
条款94:根据条款90和91中任一项所述的第一客户端设备,其中该第一客户端设备通信地耦接到移动网络运营商(MNO),并且该第二客户端设备通信地耦接到该MNO。
条款95:根据条款90-94中任一项所述的第一客户端设备,还包括用于从执行该AF的该服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据的构件。
条款96:根据条款90-95中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括表示QoS流描述与QoS规范之间的关联的数据。
条款97:根据条款90-96中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括描述为其提供QoS的服务数据流的数据。
条款98:根据条款90-97中任一项所述的第一客户端设备,其中表示与该有效ICE候选中的该一个或多个有效ICE候选相关联的该QoS流的该数据包括对该QoS规范的引用。
条款99:根据条款90-98中任一项所述的第一客户端设备,还包括用于向执行该AF的该服务器设备发送更新消息的构件,该更新消息包括将该有效ICE候选中的一个有效ICE候选与该QoS流中的一个QoS流相关联的数据。
条款100:根据条款90-99中任一项所述的第一客户端设备,其中该媒体通信会话包括Web实时通信(WebRTC)通信会话。
条款101:一种将服务质量应用于媒体通信会话的方法,该方法包括:由执行应用功能(AF)的服务器设备从第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据,该AF为该第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;由该服务器设备从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及由该服务器设备根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
条款102:一种用于将服务质量应用于媒体通信会话的服务器设备,该设备包括:存储器,该存储器被配置成存储服务质量(QoS)流与用于第一客户端设备的一个或多个有效交互式连接建立(ICE)候选之间的关联;和一个或多个处理器,该一个或多个处理器实现于电路中并且被配置成:执行应用功能(AF),该AF为该第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;从该第一客户端设备接收表示QoS流与用于该第一客户端设备的该一个或多个有效ICE候选之间的该关联的数据;从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及由该服务器设备根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
条款103:一种计算机可读存储介质,该计算机可读存储介质上存储有指令,该指令使服务器设备的处理器:执行应用功能(AF),该AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;从该第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据;从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话。
条款104:一种用于将服务质量应用于媒体通信会话的服务器设备,该服务器设备包括:用于执行应用功能(AF)的构件,该AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;用于从该第一客户端设备接收表示与用于该第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据的构件;用于从该第一客户端设备接收表示该QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据的构件;和用于根据与该QoS流中的该一个QoS流相对应的该QoS规范将QoS应用于该媒体通信会话的构件。
要认识到的是,根据示例,本文中所描述的任何技术的某些动作或事件可以以不同的顺序来执行,可以被添加、合并或完全省略(例如,并非所有描述的动作或事件对于实施所述技术都是必要的)。此外,在某些示例中,动作或事件可以被并发地执行(例如,通过多线程处理、中断处理或多个处理器)而不是顺序地执行。
在一个或多个示例中,所描述的功能可以在硬件、软件、固件或它们的任何组合中实现。如果在软件中实现,则该功能可以作为一个或多个指令或代码存储在计算机可读介质上或者通过计算机可读介质进行传输并且由基于硬件的处理单元执行。计算机可读介质可以包括计算机可读存储介质(其对应于诸如数据存储介质之类的有形介质)或者通信介质,该通信介质包括例如根据通信协议来促进计算机程序从一个地方传送到另一地方的任何介质。以这种方式,计算机可读介质通常可以对应于(1)非暂时性的有形计算机可读存储介质、或者(2)诸如信号或载波之类的通信介质。数据存储介质可以是可以由一个或多个计算机或者一个或多个处理器访问以检索用于实现本公开中所描述的技术的指令、代码和/或数据结构的任何可用介质。计算机程序产品可以包括计算机可读介质。
通过示例而非限制的方式,此类计算机可读存储介质可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁存储设备、闪存存储器、或者能够用于以指令或数据结构的形式存储期望的程序代码并且能够由计算机访问的任何其它介质。而且,任何连接被适当地称为计算机可读介质。例如,如果指令是使用同轴电缆、光纤光缆、双绞线、数字用户线(DSL)或者无线技术(诸如红外线、无线电和微波)从网站、服务器或其它远程源发射的,则同轴电缆、光纤光缆、双绞线、DSL或者无线技术(诸如红外线、无线电和微波)被包括在介质的定义中。然而,应当理解的是,计算机可读存储介质和数据存储介质不包括连接、载波、信号或其它暂时性介质,而是替代地针对非暂时性的有形存储介质。如本文所使用的,碟和盘包括压缩光盘(CD)、激光光盘、光盘、数字多功能光盘(DVD)、软碟和蓝光光盘,其中碟通常磁性地再现数据,而盘则利用激光来光学地再现数据。上述的组合应当也被包括在计算机可读介质的范围内。
指令可由一个或多个处理器来执行,诸如一个或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、或其它等效的集成或分立逻辑电路。因此,如本文中所使用的术语“处理器”和“处理电路”可以指代前述结构中的任何一者或者适于实现本文中所描述的技术的任何其它结构。同样,这些技术可以在一个或多个电路或逻辑元件中被完全实现。
本公开的技术可以在各种各样的设备或装置中实现,包括无线手机、集成电路(IC)或一组IC(例如,芯片组)。在本公开中描述各种组件、模块或单元以强调被配置成执行所公开的技术的设备的功能性方面,但是不一定要求通过不同的硬件单元来实现。确切而言,如上文所描述的,各种单元可以被组合在编解码器硬件单元中,或者由可互操作的硬件单元的集合(包括如上文所描述的一个或多个处理器)结合适当的软件和/或固件来提供。
已经描述各个示例。这些和其它示例在以下权利要求书的范围内。
Claims (37)
1.一种将服务质量应用于媒体通信会话的方法,所述方法包括:
由第一客户端设备确定用于第二客户端设备的交互式连接建立(ICE)候选列表;
由所述第一客户端设备确定用于所述第二客户端设备的所述ICE候选列表中的有效ICE候选;
针对所述有效ICE候选中的一个或多个有效ICE候选,由所述第一客户端设备向执行应用功能(AF)的服务器设备发送表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,所述AF为所述媒体通信会话提供媒体控制;
由所述第一客户端设备确定所述有效ICE候选中的一个有效ICE候选以及与所述有效ICE候选中的所述一个有效ICE候选相关联的所述QoS流中的一个QoS流;
由所述第一客户端设备使用所述有效ICE候选中的所确定的一个有效ICE候选与所述第二客户端设备建立所述媒体通信会话;
由所述第一客户端设备确定QoS规范与用于所述媒体通信会话的所述QoS流中的所述一个QoS流之间的关联;以及
由所述第一客户端设备向所述AF提供数据以根据所述QoS规范将QoS应用于所述媒体通信会话。
2.根据权利要求1所述的方法,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且向所述AF提供所述数据以将QoS应用于所述媒体通信会话包括使用由所述第一MNO提供的基于服务的架构(SBA)程序来调用由所述第一MNO提供的QoS。
3.根据权利要求1所述的方法,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且确定所述ICE候选列表包括从所述第一MNO接收表示所述ICE候选中的一个或多个ICE候选的数据。
4.根据权利要求1所述的方法,其中所述第一客户端设备通信地耦接到移动网络运营商(MNO),并且所述第二客户端设备通信地耦接到所述MNO。
5.根据权利要求1所述的方法,还包括从执行所述AF的所述服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
6.根据权利要求1所述的方法,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括表示QoS流描述与QoS规范之间的关联的数据。
7.根据权利要求1所述的方法,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括描述为其提供QoS的服务数据流的数据。
8.根据权利要求1所述的方法,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括对所述QoS规范的引用。
9.根据权利要求1所述的方法,还包括向执行所述AF的所述服务器设备发送更新消息,所述更新消息包括将所述有效ICE候选中的一个有效ICE候选与所述QoS流中的一个QoS流相关联的数据。
10.根据权利要求1所述的方法,其中所述媒体通信会话包括Web实时通信(WebRTC)通信会话。
11.一种用于将服务质量应用于媒体通信会话的第一客户端设备,所述第一客户端设备包括:
存储器,所述存储器被配置成存储媒体数据;和
一个或多个处理器,所述一个或多个处理器实现于电路中并且被配置成:
确定用于第二客户端设备的交互式连接建立(ICE)候选列表;
确定所述ICE候选列表中的有效ICE候选;
针对所述有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,所述AF为所述媒体通信会话提供媒体控制;
确定所述有效ICE候选中的一个有效ICE候选以及与所述有效ICE候选中的所述一个有效ICE候选相关联的所述QoS流中的一个QoS流;
使用所述有效ICE候选中的所确定的一个有效ICE候选与所述第二客户端设备建立所述媒体通信会话;
确定QoS规范与用于所述媒体通信会话的所述QoS流中的所述一个QoS流之间的关联;以及
向所述AF提供数据以根据所述QoS规范将QoS应用于所述媒体通信会话。
12.根据权利要求11所述的第一客户端设备,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且为了向所述AF提供数据以将QoS应用于所述媒体通信会话,所述一个或多个处理器被配置成使用由所述第一MNO提供的基于服务的架构(SBA)程序来调用由所述第一MNO提供的QoS。
13.根据权利要求11所述的第一客户端设备,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且为了确定所述ICE候选列表,所述一个或多个处理器被配置成从所述第一MNO接收表示所述ICE候选中的一个或多个ICE候选的数据。
14.根据权利要求11所述的第一客户端设备,其中所述第一客户端设备通信地耦接到移动网络运营商(MNO),并且所述第二客户端设备通信地耦接到所述MNO。
15.根据权利要求11所述的第一客户端设备,其中所述一个或多个处理器还被配置成从执行所述AF的所述服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据。
16.根据权利要求11所述的第一客户端设备,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括表示QoS流描述与QoS规范之间的关联的数据。
17.根据权利要求11所述的第一客户端设备,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括描述为其提供QoS的服务数据流的数据。
18.根据权利要求11所述的第一客户端设备,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括对所述QoS规范的引用。
19.根据权利要求11所述的第一客户端设备,其中所述一个或多个处理器还被配置成向执行所述AF的所述服务器设备发送更新消息,所述更新消息包括将所述有效ICE候选中的一个有效ICE候选与所述QoS流中的一个QoS流相关联的数据。
20.根据权利要求11所述的第一客户端设备,其中所述媒体通信会话包括Web实时通信(WebRTC)通信会话。
21.根据权利要求11所述的第一客户端设备,还包括显示器。
22.根据权利要求11所述的第一客户端设备,其中所述第一客户端设备包括相机、计算机、移动设备、广播接收机设备或机顶盒中的一者或多者。
23.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,所述指令在被执行时使第一客户端设备的处理器:
确定用于第二客户端设备的交互式连接建立(ICE)候选列表;
确定所述ICE候选列表中的有效ICE候选;
针对所述有效ICE候选中的一个或多个有效ICE候选,向执行应用功能(AF)的服务器设备发送表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的服务质量(QoS)流的数据,所述AF为所述媒体通信会话提供媒体控制;
确定所述有效ICE候选中的一个有效ICE候选以及与所述有效ICE候选中的所述一个有效ICE候选相关联的所述QoS流中的一个QoS流;
使用所述有效ICE候选中的所确定的一个有效ICE候选与所述第二客户端设备建立所述媒体通信会话;
确定QoS规范与用于所述媒体通信会话的所述QoS流中的所述一个QoS流之间的关联;以及
向所述AF提供数据以根据所述QoS规范将QoS应用于所述媒体通信会话。
24.根据权利要求23所述的计算机可读存储介质,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且使所述处理器向所述AF提供数据以将QoS应用于所述媒体通信会话的所述指令包括使所述处理器使用由所述第一MNO提供的基于服务的架构(SBA)程序来调用由所述第一MNO提供的QoS的指令。
25.根据权利要求23所述的计算机可读存储介质,其中所述第一客户端设备通信地耦接到第一移动网络运营商(MNO),所述第二客户端设备通信地耦接到第二MNO,并且使所述处理器确定所述ICE候选列表的所述指令包括使所述处理器从所述第一MNO接收表示所述ICE候选中的一个或多个ICE候选的数据的指令。
26.根据权利要求23所述的计算机可读存储介质,其中所述第一客户端设备通信地耦接到移动网络运营商(MNO),并且所述第二客户端设备通信地耦接到所述MNO。
27.根据权利要求23所述的计算机可读存储介质,还包括使所述处理器从执行所述AF的所述服务器设备接收表示使用中继网络地址转换的遍历(TURN)服务器或UDP的会话遍历(STUN)服务器中的至少一者的数据的指令。
28.根据权利要求23所述的计算机可读存储介质,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括表示QoS流描述与QoS规范之间的关联的数据。
29.根据权利要求23所述的计算机可读存储介质,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括描述为其提供QoS的服务数据流的数据。
30.根据权利要求23所述的计算机可读存储介质,其中表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的所述QoS流的所述数据包括对所述QoS规范的引用。
31.根据权利要求23所述的计算机可读存储介质,还包括使所述处理器向执行所述AF的所述服务器设备发送更新消息的指令,所述更新消息包括将所述有效ICE候选中的一个有效ICE候选与所述QoS流中的一个QoS流相关联的数据。
32.根据权利要求23所述的计算机可读存储介质,其中所述媒体通信会话包括Web实时通信(WebRTC)通信会话。
33.一种用于将服务质量应用于媒体通信会话的第一客户端设备,所述第一客户端设备包括:
用于确定用于第二客户端设备的交互式连接建立(ICE)候选列表的构件;
用于确定所述ICE候选列表中的有效ICE候选的构件;
用于针对所述有效ICE候选中的一个或多个有效ICE候选向执行应用功能(AF)的服务器设备发送表示与所述有效ICE候选中的所述一个或多个有效ICE候选相关联的服务质量(QoS)流的数据的构件,所述AF为所述媒体通信会话提供媒体控制;
用于确定所述有效ICE候选中的一个有效ICE候选以及与所述有效ICE候选中的所述一个有效ICE候选相关联的所述QoS流中的一个QoS流的构件;
用于使用所述有效ICE候选中的所确定的一个有效ICE候选与所述第二客户端设备建立所述媒体通信会话的构件;
用于确定QoS规范与用于所述媒体通信会话的所述QoS流中的所述一个QoS流之间的关联的构件;和
用于向所述AF提供数据以根据所述QoS规范将QoS应用于所述媒体通信会话的构件。
34.一种将服务质量应用于媒体通信会话的方法,所述方法包括:
由执行应用功能(AF)的服务器设备从第一客户端设备接收表示与用于所述第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据,所述AF为所述第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;
由所述服务器设备从所述第一客户端设备接收表示所述QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及
由所述服务器设备根据与所述QoS流中的所述一个QoS流相对应的所述QoS规范将QoS应用于所述媒体通信会话。
35.一种用于将服务质量应用于媒体通信会话的服务器设备,所述设备包括:
存储器,所述存储器被配置成存储服务质量(QoS)流与用于第一客户端设备的一个或多个有效交互式连接建立(ICE)候选之间的关联;和
一个或多个处理器,所述一个或多个处理器实现于电路中并且被配置成:
执行应用功能(AF),所述AF为所述第一客户端设备与
第二客户端设备之间的媒体通信会话提供媒体控制;
从所述第一客户端设备接收表示QoS流与用于所述第一客户端设备的所述一个或多个有效ICE候选之间的所述关联的数据;
从所述第一客户端设备接收表示所述QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及
由所述服务器设备根据与所述QoS流中的所述一个QoS流相对应的所述QoS规范将QoS应用于所述媒体通信会话。
36.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,所述指令使服务器设备的处理器:
执行应用功能(AF),所述AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;
从所述第一客户端设备接收表示与用于所述第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据;
从所述第一客户端设备接收表示所述QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据;以及
根据与所述QoS流中的所述一个QoS流相对应的所述QoS规范将QoS应用于所述媒体通信会话。
37.一种用于将服务质量应用于媒体通信会话的服务器设备,所述服务器设备包括:
用于执行应用功能(AF)的构件,所述AF为第一客户端设备与第二客户端设备之间的媒体通信会话提供媒体控制;
用于从所述第一客户端设备接收表示与用于所述第一客户端设备的一个或多个有效交互式连接建立(ICE)候选相关联的服务质量(QoS)流的数据的构件;
用于从所述第一客户端设备接收表示所述QoS流中的一个QoS流与相关联的QoS规范之间的关联的数据的构件;和
用于根据与所述QoS流中的所述一个QoS流相对应的所述QoS规范将QoS应用于所述媒体通信会话的构件。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US63/232,005 | 2021-08-11 | ||
US17/818,566 | 2022-08-09 | ||
US17/818,566 US11811843B2 (en) | 2021-08-11 | 2022-08-09 | Supporting quality of service for media communications |
PCT/US2022/074759 WO2023019167A1 (en) | 2021-08-11 | 2022-08-10 | Supporting quality of service for media communications |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117859313A true CN117859313A (zh) | 2024-04-09 |
Family
ID=90543794
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280054909.8A Pending CN117859313A (zh) | 2021-08-11 | 2022-08-10 | 支持用于媒体通信的服务质量 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117859313A (zh) |
-
2022
- 2022-08-10 CN CN202280054909.8A patent/CN117859313A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11108570B2 (en) | Method and apparatus for multimedia communication, and storage medium | |
Alvestrand | RFC 8825: Overview: Real-Time Protocols for Browser-Based Applications | |
Holmberg et al. | Web real-time communication use cases and requirements | |
CN113746808B (zh) | 线上会议的融合通信方法、网关、电子设备及存储介质 | |
US10778731B2 (en) | Communications methods, apparatus and systems for conserving media resource function resources | |
US9374263B2 (en) | Latency differential mitigation for real time data streams | |
WO2016150235A1 (zh) | 一种WebRTC P2P音视频通话的方法及装置 | |
WO2016150213A1 (zh) | 一种基于网页的实时通信的媒体处理方法与装置 | |
US9077667B2 (en) | Computing latency introduced by media transcoding operations | |
US20130282820A1 (en) | Method and System for an Optimized Multimedia Communications System | |
EP3059945A1 (en) | Method and system for video surveillance content adaptation, and central server and device | |
Fowdur et al. | Performance analysis of webrtc and sip-based audio and video communication systems | |
WO2012174908A1 (zh) | 实现从文本到语音的音频转码方法、装置及系统 | |
JP5311460B2 (ja) | 接続制御装置 | |
Pandey et al. | Web application for social networking using RTC | |
Shreya et al. | Internetworking Gateway between WebRTC to SIP to Integrate Real-Time Audio Video Communication | |
US11811843B2 (en) | Supporting quality of service for media communications | |
CN117859313A (zh) | 支持用于媒体通信的服务质量 | |
WO2022203891A1 (en) | Method and system for integrating video content in a video conference session | |
Kullberg | Implementing remote customer service api using webrtc and jitsi sdk | |
Choroś et al. | Reliability of Video Conferencing Applications Based on the WebRTC Standard Used on Different Web Platforms | |
Burnett | Webrtc: Handling media on the web | |
Li | Large-Scale Measurement of Real-Time Communication on the Web | |
Roy | Handbook on Networked Multipoint Multimedia Conferencing and Multistream Immersive Telepresence Using SIP: Scalable Distributed Applications and Media Control Over Internet | |
Jayasekara | Setting Up a VoIP Phone System Using Open Source Tools. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |