CN112585922B - 提供辅助的方法、提供信息的方法、流传输的方法和设备 - Google Patents
提供辅助的方法、提供信息的方法、流传输的方法和设备 Download PDFInfo
- Publication number
- CN112585922B CN112585922B CN201980054314.0A CN201980054314A CN112585922B CN 112585922 B CN112585922 B CN 112585922B CN 201980054314 A CN201980054314 A CN 201980054314A CN 112585922 B CN112585922 B CN 112585922B
- Authority
- CN
- China
- Prior art keywords
- event
- network
- electronic device
- media
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 88
- 230000005540 biological transmission Effects 0.000 title claims description 26
- 238000004519 manufacturing process Methods 0.000 claims abstract description 130
- 230000006835 compression Effects 0.000 claims description 6
- 238000007906 compression Methods 0.000 claims description 6
- 239000013028 medium composition Substances 0.000 claims 1
- 238000004891 communication Methods 0.000 description 29
- 230000006870 function Effects 0.000 description 23
- 230000011664 signaling Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 238000012913 prioritisation Methods 0.000 description 7
- 230000001413 cellular effect Effects 0.000 description 5
- 239000013257 coordination network Substances 0.000 description 5
- 239000000872 buffer Substances 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000005265 energy consumption Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000013468 resource allocation Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1073—Registration or de-registration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/765—Media network packet handling intermediate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/70—Admission control; Resource allocation
- H04L47/80—Actions related to the user profile or the type of traffic
- H04L47/805—QOS or priority aware
Abstract
本申请涉及提供辅助的方法、提供信息的方法、流传输的方法和设备。当多个流传输电子设备被注册在相同流传输事件内时,媒体制作元件(12)组合来自多个流传输电子设备的媒体内容。媒体制作元件(12)可以使用由多个电子设备提供的流传输内容的选择和组合来制作组合的实时视频流或组合的媒体作品。网络辅助设备(42)可以从媒体制作元件(12)接收优先级信息,并基于与事件相对应的事件优先级分配或与被注册到事件的特定设备相对应的单个优先级分配来确定事件协调上行链路网络辅助数据,其目的是优先化向当前用于组合的媒体作品的客户端/电子设备的资源分配,并为当前不使用或具有较低优先级的客户端/电子设备分配较少的资源。
Description
技术领域
本公开的技术总体上涉及网络环境中的电子设备之间的无线通信,并且更具体地涉及在具有多个上行链路流的事件处的上行链路流传输期间基于事件或设备优先级提供并且采用网络辅助的方法以及相关设备。
背景技术
在诸如蜂窝网络或移动网络的网络中,客户端设备可以将媒体内容流传输到媒体制作实体。例如,用于报道实时体育、音乐或新闻事件的专业摄像机或便携式电子设备可以在上行链路传输中提供视听流。其它设备也可以将视听内容实时流传输到网络,诸如呈智能电话、平板计算机或类似设备形式的无线手持设备。
在这些示例中,作为媒体流的源的客户端设备通常被配置成以客户端可以生成的最高比特率发送数据。在多个客户端设备正在流传输旨在用于协同媒体制作的媒体内容的情况下,这种上行链路媒体流会产生各种问题。一个问题是,适应流传输的网络节点将假定流传输媒体内容仅来自单个客户端,因此每个单个流传输链路应被单独地优化。
在多个客户端以协同方式流传输数据的情况下,需要进一步改进流传输。
发明内容
公开了在多个客户端设备正在流传输旨在用于协同制作的内容的情况下可以增强上行链路媒体流传输服务的体验质量(QoE:quality of experience)的特征。所公开的特征特别是当在频谱资源在多个用户之间共享的网络上操作时,例如在根据诸如3GPP颁布的那些标准的任何适当的标准集的无线移动或蜂窝网络中,可以改进QoE。所公开的特征还可以提高网络运营商的资源利用率。
根据本公开的多个方面,一种用于在从网络中的多个电子设备流传输数据期间通过网络辅助服务将事件协调上行链路网络辅助提供给多个电子设备的方法,所述方法包括:从所述多个电子设备中的第一电子设备接收对与事件相对应的流传输会话的注册请求;将所述数据流传输会话注册到所述事件;从媒体制作服务接收优先级信息,所述优先级信息包括与所述事件相对应的事件优先级或与所述第一电子设备相对应的单个优先级中的至少一者;至少部分地基于所述优先级信息确定事件协调上行链路网络辅助数据;以及将所述事件协调上行链路辅助数据发送到所述第一电子设备。
根据所述方法的一个实施方式,所述网络辅助服务由DASH感知网络元件(DANE)主持。
根据所述方法的一个实施方式,所述网络辅助服务由实时上行链路流传输框架(FLUS)主持。
根据所述方法的一个实施方式,所述方法还包括基于所述事件优先级分配优先用于所述事件的网络资源。
根据所述方法的一个实施方式,分配优先用于所述事件的网络资源包括:分配相对于未被注册到所述事件的电子设备被优先用于被注册到所述事件的电子设备的频率资源集合或时间资源集合中的至少一者。
根据所述方法的一个实施方式,分配优先用于所述事件的网络资源包括:定义为被注册到所述事件的电子设备保留的聚合最小带宽。
根据所述方法的一个实施方式,从所述第一电子设备接收所述注册请求包括:接收关于所述第一电子设备的设备信息。
根据所述方法的一个实施方式,所述设备信息包括所述第一电子设备的设备标识、设备类型、设备能力或用户身份中的至少一者。
根据所述方法的一个实施方式,所述优先级信息包括单个优先级分配,所述单个优先级分配使所述第一电子设备优先于同样被注册到所述事件的第二电子设备,其中,所述单个优先级分配基于所述设备信息。
根据所述方法的一个实施方式,所述事件协调上行链路网络辅助数据包括推荐的媒体编解码器、推荐的媒体操作点、推荐的媒体质量、推荐的数据速率、推荐的帧速率、推荐的分辨率、推荐的压缩级别、暂停数据流命令或恢复数据流命令中的至少一者。
根据本公开的多个方面,一种通过媒体制作服务向网络辅助服务提供优先级信息的方法包括:接收与多个电子设备流传输数据的事件相对应的事件注册信息;确定优先级信息,所述优先级信息包括与所述事件相对应的事件优先级或与被注册到所述事件的第一电子设备相对应的单个优先级中的至少一者;以及将所述优先级信息发送到所述网络辅助服务。
根据所述方法的一个实施方式,所述事件注册信息包括与所述第一电子设备相对应的设备信息。
根据所述方法的一个实施方式,所述事件注册信息从所述网络辅助服务被接收。
根据所述方法的一个实施方式,所述设备信息包括所述第一电子设备的设备标识、设备类型、设备能力或用户的身份中的至少一者。
根据所述方法的一个实施方式,确定所述优先级信息包括:确定单个优先级分配,所述单个优先级分配使所述第一电子设备优先于同样被注册到所述事件的第二电子设备,其中,所述单个优先级分配基于所述设备信息。
根据所述方法的一个实施方式,确定所述优先级信息包括:基于针对所述事件的网络资源的预定分配来分配所述事件优先级。
根据本公开的多个方面,一种用于在网络中从电子设备流传输数据的方法包括:响应于确定所述数据流传输会话与事件对应而将数据流传输会话注册到网络辅助服务或媒体制作服务,其中,注册所述数据流传输会话包括:发送设备信息;从所述网络辅助服务接收事件协调上行链路网络辅助数据,其中,所述事件协调上行链路网络辅助数据基于与所述事件相对应的事件优先级或与所述电子设备相对应的单个优先级中的至少一者;以及基于所述事件协调上行链路网络辅助数据修改所述数据流传输会话的至少一个传输特性。
根据所述方法的一个实施方式,所述设备信息包括所述第一电子设备的设备标识、设备类型、设备能力或用户的身份中的至少一者。
根据所述方法的一个实施方式,修改所述数据流传输会话的至少一个传输特性涉及选择媒体编解码器、选择媒体操作点、选择媒体质量、选择数据速率、选择帧速率、选择分辨率、选择压缩级别、暂停数据流传输会话或恢复所述数据流传输会话中的至少一者。
根据所述方法的一个实施方式,所述方法还包括:基于所述事件协调上行链路网络辅助数据将所述数据从所述数据流传输会话流传输到所述媒体制作服务。
附图说明
图1是进行用于协同媒体制作的上行链路媒体传输的网络辅助的代表性网络系统的示意性框图。
图2是用于协同媒体制作的上行链路媒体传输的网络辅助的代表性高级架构图。
图3是进行用于协同媒体制作的上行链路媒体传输的网络辅助的网络系统的代表性实施方式的示意图。
图4是进行用于协同媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图5是进行用于协同媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图6是进行用于协同媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图7是进行用于利用两个运营商网络的协同媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图8是通过网络辅助服务提供事件协调上行链路网络辅助的代表性方法的流程图。
图9是从媒体制作服务向网络辅助服务提供优先级信息的代表性方法的流程图。
图10是基于优先级信息从网络中的电子设备流传输数据的代表性方法的流程图。
图11是从网络辅助服务确定和提供网络状况信息的代表性方法的流程图。
图12是由媒体制作服务利用网络状况信息的代表性方法的流程图。
具体实施方式
A.介绍
现在将参照附图描述实施方式,其中,贯穿全文,相似的附图标记用于指代相似的元件。将理解的是,附图不必须按比例绘制。关于一个实施方式描述和/或例示的特征可以在一个或更多个其它实施方式中以相同方式或以类似方式使用,和/或与其它实施方式的特征组合或替代其使用。
下面结合附图描述用于进行包括用于上行链路流传输的事件协调网络辅助的无线无线电通信的系统和方法的各种实施方式。可以通过网络上的各个服务以自动化方式来执行用于上行链路流传输的事件协调网络辅助。用于上行链路流传输的事件协调网络辅助可以改进上行链路流传输性能。
B.系统架构
图1是用于实现所公开的技术的示例性网络系统10的示意图。应当理解,所示的系统是代表性的,并且可以使用其它系统来实现所公开的技术。示例性网络系统10包括用于通过上行链路从电子设备14流传输的数据的媒体制作元件12。媒体制作元件12通常是服务器、服务器的组件或位于无线移动或蜂窝网络运营商的核心网络中和/或由无线移动或蜂窝网络运营商的核心网络管理的其它设备。用于接收到的媒体流的客户端也可以经由运营商的核心网络或者通过更广泛的网络(诸如互联网)到达(reachable)。
电子设备14经由基站30或根据蜂窝或移动设备网络协议(诸如但不限于第三代项目合作伙伴(3GPP)颁布的协议)进行工作的其它接入点来发送数据和控制信令。示例性基站30可以是长期演进(LTE)基站,通常被称为增强型节点B(eNodeB或eNB)或下一代节点B(gNB)。基站30服务一个或更多个电子设备,包括电子设备14。基站12可以支持电子设备与网络介质16之间的通信,通过该网络介质16,电子设备可以与其它电子设备、服务器进行通信,这些其它电子设备、服务器可以被连接在运营商的核心网络内或者经由互联网等连接。电子设备14可以经由网络介质16与之通信的一个设备是媒体制作元件12。将理解的是,媒体制作元件12在网络架构中的其它位置是可能的。作为媒体制作元件12的另一位置的示例,媒体制作元件12可以是互联网上用于不由无线网络运营商管理的流传输服务的服务器。
流传输的数据的源可以是基站12的任何客户端或终端。可以作为流传输的数据的源的示例性电子设备14可以是用户设备(UE),如根据3GPP规范中采用的通用术语所述。电子设备14可以是经由无线接口18(例如3GPP无线调制解调器)提供媒体流的任何种类的电子设备。示例性电子设备14包括但不限于智能电话、平板计算机、台式或膝上型计算机、摄像机等。在摄像机的情况下,摄像机可以被包括在无人机中、可以由人操作、可以是自主监视摄像机等。在一个实施方式中,摄像机可以是新闻或实时事件报告组织所使用的专业型摄像机。电子设备14还可以是经由上行链路发送的贡献馈送的源,诸如外部广播车或移动演播室,其将贡献馈送作为多个摄像机或其它设备馈送的集合或作为正被报告的事件的预制作编辑和音频混合进行传输。在这些贡献馈送情况下,多个电子设备也可能正在提供与同一事件有关的贡献馈送。摄像机可以包括无线接口18,或者可以例如使用线缆或电连接器通过本地接口在工作上连接至无线接口18。在新闻或实时事件报道组织操作摄像机的情况下,该组织可以与移动网络的运营商进行安排,以提供增强的带宽容量来支持视听内容流传输。例如,摄像机可以接入网络中的多个载波以使用载波聚合来传递内容。无线网络还可以为单个载波或信道中的媒体流提供足够的带宽容量。
媒体制作元件12可以包括用于执行无线通信和媒体制作元件12的其它功能的操作组件。例如,媒体制作元件12可以包括控制电路20,该控制电路20负责媒体制作元件12的整体操作,包括控制媒体制作元件12以执行可应用于媒体制作元件12的操作,并且在下文中进行了详细描述。控制电路20包括执行代码24(诸如操作系统和/或其它应用)的处理器22。在本公开文件中描述的并且可应用于媒体制作元件12的功能可以被实现为代码24的一部分或者被实现成媒体制作元件12的其它专用逻辑操作的一部分。根据媒体制作元件12的性质和配置,可以以其它方式实现媒体制作元件12的逻辑功能和/或硬件。因此,所例示和描述的方法仅仅是示例,并且可以使用其它方法,包括但不限于将控制电路20实现成或包括硬件(例如,微处理器、微控制器、中央处理单元(CPU)等)或者硬件和软件的组合(例如,片上系统(SoC)、专用集成电路(ASIC)等)。应当注意,尽管为上行链路流传输场景提供了给定实现的示例,但是其它实施方式可以基于下行链路数据。事件优先级可以应用于从数据源到多个设备的协调下行链路流传输,或者事件优先级可以应用于包括上行链路和下行链路定向数据流传输的事件。
代码24和任何存储的数据(例如,与媒体制作元件12的操作相关联的数据)可以存储在存储器26上。代码24可以以可执行逻辑例程(例如,软件程序)的形式实现,该可执行逻辑例程作为计算机程序产品存储在媒体制作元件12的非临时性计算机可读介质(例如,存储器26)上,并且由处理器22执行。被描述为由媒体制作元件12执行的功能可以被认为是由媒体制作元件12执行的方法。
存储器26可以例如是缓冲器、闪存、硬盘驱动器、可移动介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适设备中的一者或更多者。在典型的布置中,存储器26包括用于长期数据存储的非易失性存储器和用作控制电路20的系统存储器的易失性存储器。存储器26被认为是非暂时性计算机可读介质。
媒体制作元件12包括通信电路,该通信电路使媒体制作元件12能够建立各种通信连接。例如,媒体制作元件12可以具有网络通信接口28以与网络介质16通信。
电子设备14可以包括用于执行电子设备14的各种功能的操作组件,包括与基站30和任何其它设备(电子设备14可以与之通信)的无线通信。电子设备14的一个功能是网络辅助上行链路流传输和/或事件协调网络辅助上行链路流传输,如将更详细描述的。除了其它组件之外,电子设备14可以包括控制电路32,该控制电路32负责电子设备14的整体操作,包括控制电子设备14执行在下文中详细描述的操作。控制电路32包括执行代码36(诸如操作系统和/或其它应用)的处理器34。在本公开文件中描述的功能可以被实现为代码36的一部分或者被实现成电子设备14的其它专用逻辑操作的一部分。根据电子设备14的性质和配置,可以以其它方式实现电子设备14的逻辑功能和/或硬件。因此,所例示和描述的方法仅仅是示例,并且可以使用其它方法,包括但不限于将控制电路32实现成或包括硬件(例如,微处理器、微控制器、中央处理单元(CPU)等)或者硬件和软件的组合(例如,片上系统(SoC)、专用集成电路(ASIC)等)。
代码36和任何存储的数据(例如,与电子设备14的操作相关联的数据)可以存储在存储器38上。代码36可以以可执行逻辑例程(例如,软件程序)的形式实现,该可执行逻辑例程作为计算机程序产品存储在电子设备14的非临时性计算机可读介质(例如,存储器38)上,并且由处理器34执行。被描述为由电子设备14执行的功能可以被认为是由电子设备14执行的方法。
存储器38可以例如是缓冲器、闪存、硬盘驱动器、可移动介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适设备中的一者或更多者。在典型布置中,存储器38包括用于长期数据存储的非易失性存储器和用作控制电路32的系统存储器的易失性存储器。存储器38被认为是非暂时性计算机可读介质。
电子设备14包括通信电路,该通信电路使电子设备14能够建立各种通信连接。例如,电子设备14包括无线接口18,通过无线接口18与基站30进行无线通信。可以与电子设备14建立其它通信,诸如Wi-Fi通信、有线连接等。无线接口18可以包括具有一个或更多个射频收发器(也被称为调制解调器)的无线电电路、至少一个天线组件以及任何适当调谐器、阻抗匹配电路以及各种所支持的频带和无线电接入技术所需的任何其它组件。
电子设备14的其它组件可以包括但不限于用户输入装置(例如,按钮、键盘、触摸表面等)、显示器、麦克风、扬声器、传感器、插孔或电连接器、可充电电池和电源单元、SIM卡、运动传感器(例如,加速度计或陀螺仪)、GPS接收器以及任何其它适当的组件。特别地,电子设备14可以包括具有所有适当光学和电子成像组件以及诸如视频处理器、视频和音频编码器等组件的摄像机组件40。
在一些实现中,控制无线通信接口18的逻辑(例如,如由控制电路20实现的)是所谓的较低层协议架构,并且可以包括物理层、介质访问层、无线电资源控制层等。这可以被称为电子设备14的调制解调器实体。此外,在一些实现中,控制视频媒体客户端和对应的视频内容编码以及任何相关功能的逻辑是所谓的较高层架构,并且可以包括IP层、应用层等。该逻辑可以被称为应用程序实体,并且可以包括上行链路视频流传输客户端。通过这种层中的该分离,在一些实现中,与蜂窝基站30的无线调制解调器实体通信在逻辑上与利用媒体制作元件12执行的应用实体数据通信分离。
网络系统10可以包括网络辅助设备42,网络辅助设备42可以在上行链路流传输期间向包括电子设备14和/或媒体制作元件12的任何网络元件提供网络辅助服务。在示例性实施方式中,网络辅助设备42可以是DASH感知网络元件(DANE:DASH-aware networkelement)。尽管DASH指的是超文本传输协议(HTTP)上的动态自适应流传输,但DANE可以为根据附加和/或其它协议(诸如HTTP实时流(HLS)、实时传输协议(RTP)、实时消息传输协议(RTMP)等)执行的上行链路流传输提供网络辅助。在另一示例性实施方式中,网络辅助设备42可以被实现成用于3GPP的实时上行链路流传输框架(FLUS:live uplink streaming)一部分。
网络辅助设备42可以包括用于执行网络辅助设备42的各种功能(包括向电子设备14和/或媒体制作元件12提供上行链路网络辅助服务)的操作组件。除了其它组件之外,网络辅助设备42可以包括控制电路44,该控制电路44负责网络辅助设备42的整体操作,包括控制网络辅助设备42执行在下文中详细描述的操作。控制电路44包括执行代码48(诸如操作系统和/或其它应用)的处理器46。在本公开文件中描述的功能可以被实现为代码48的一部分或者被实现成网络辅助设备42的其它专用逻辑操作的一部分。根据网络辅助设备42的性质和配置,可以以其它方式实现网络辅助设备42的逻辑功能和/或硬件。因此,所例示和描述的方法仅仅是示例,并且可以使用其它方法,包括但不限于将控制电路44实现成或包括硬件(例如,微处理器、微控制器、中央处理单元(CPU)等)或者硬件和软件的组合(例如,片上系统(SoC)、专用集成电路(ASIC)等)。
代码48和任何存储的数据(例如,与网络辅助设备42的操作相关联的数据)可以存储在存储器50上。代码48可以以可执行逻辑例程(例如,软件程序)的形式实现,该可执行逻辑例程作为计算机程序产品被存储在网络辅助设备42的非临时性计算机可读介质(例如,存储器50)上,并且由处理器46执行。被描述为由网络辅助设备42执行的功能可以被认为是由网络辅助设备42执行的方法。
存储器50可以例如是缓冲器、闪存、硬盘驱动器、可移动介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适设备中的一者或更多者。在典型布置中,存储器50包括用于长期数据存储的非易失性存储器和用作控制电路44的系统存储器的易失性存储器。存储器50被认为是非暂时性计算机可读介质。
网络辅助设备42包括通信电路,该通信电路使网络辅助设备42能够建立各种通信连接。例如,网络辅助设备42包括网络接口52,通过网络接口52经由网络介质16与媒体制作元件12、电子设备14和任何其它设备进行通信。
在所示的实施方式中,网络辅助设备42被实现成服务器,该服务器在通过上行链路流从电子设备14传输到媒体制作元件12的内容的媒体传递路径的带外。利用带外架构,电子设备14与网络辅助设备42之间的通信可以独立于电子设备14与媒体制作元件12之间的通信。因此,电子设备14与网络辅助设备42之间的通信可以在与用于上行链路流的通信路径和/或数据链路不同的单独通信路径和/或数据链路中发生。这样,可以在网络系统10中的多个位置处提供网络辅助设备42。例如,网络辅助设备42可以通过所示的基站30、通过不同的基站与电子设备14通信,或者与电子设备14直接通信。在另一实施方式中,网络辅助设备42的功能可以成为媒体制作元件12的一部分。
网络系统10还可以包括第三方媒体元件54。从电子设备14流传输到媒体制作元件12的数据(经由基站30及其上行链路数据路径)可以被传递到第三方媒体元件54。在一个实施方式中,媒体制作元件12临时缓冲从电子设备14接收的流传输数据,并使用适当的协议通过网络介质16传递数据,出于本公开的目的,其细节无需详细讨论。在电子设备14是摄像机的情况下,第三方媒体元件54可以是电视演播室的一部分,该电视演播室处理、存储从电子设备14接收的视听内容和/或将从电子设备14接收的视听内容重新分配到媒体播放器(例如,电视、智能手机、手持设备等)。最终用户可以在媒体播放器上以“磁带延迟”或“实时”方式消费内容。在其它情况下,第三方媒体元件54可以是最终用户设备,或者可以是经由广播或多播重传从媒体制作元件12或其它设备(例如,连接至媒体制作元件12的重传服务器)接收媒体流的许多最终用户设备中的一个最终用户设备。
C.用于上行链路流传输的事件协调网络辅助
信令
图2是可以被实现用于事件协调上行链路网络辅助的上行链路网络辅助系统的高级架构图,其示出了系统的信号流中的一些信号流并且可以结合以下描述作为用于事件协调上行链路网络辅助的代表性方法被引用。
在一个实施方式中,为了辅助为上行链路视频流传输提供改进的体验质量,可以建立用于网络辅助(NA:network assistance)的信令路径。因此,为了实现NA功能,可以建立电子设备14与网络辅助设备42之间的信令方法。在一个实施方式中,在电子设备14的NA客户端56与网络辅助设备42之间建立这种NA信令方法。在第一方向上,网络辅助设备42可以将事件协调上行链路网络辅助数据发送到电子设备14的NA客户端56,如下所述。在第二方向上,电子设备14的NA客户端56可以将消息发送到网络辅助设备42。这样的消息可以包括事件注册请求、对事件协调上行链路网络辅助数据的请求或设备相关信息。例如,设备相关信息可以包括有关可用媒体质量级别的信息,诸如帧速率、视频和音频分辨率等。在网络辅助设备42与媒体制作元件12之间也可以存在一个或更多个信令路径。事件注册信息和网络状况信息可以从网络辅助设备42传输到媒体制作元件12,而优先级信息可以从媒体制作元件12传输到网络辅助设备42。这些信令路径在下面更详细地描述。
在一个实施方式中,媒体制作元件12和电子设备的上行链路客户端58共享数据路径。在第一方向上,媒体制作元件12可以将消息发送到电子设备14的上行链路客户端58。例如,媒体制作元件12消息可以包括对媒体流的片段的请求、暂停或恢复流命令等。在第二方向上,电子设备14的上行链路客户端58可以将上行链路媒体流发送到媒体制作元件12。在一些实施方式中,媒体制作元件12可以处理来自电子设备14的媒体流以及来自其它电子设备的媒体流以创建组合的媒体作品。该组合的媒体作品可以被发送到第三方媒体元件54。第三方媒体元件54可以进一步编辑、查看、显示或发布组合的媒体作品。应当理解,网络辅助设备42和媒体制作元件12的所描述的通信路径和功能可以在两个元件之间互换地存在,或者通信路径和功能可以在单个元件中存在。
一般操作
某些事件可能涉及多个电子设备在存在大量电子设备的区域中同时发送数据。在这些情况下,即使无线网络可能由多个基站组成,上行链路数据容量很可能是电子设备到基站链路的每个上的可实现上行链路数据速率的限制因素。同样,由于无线链路的性质导致信道衰落,即使不考虑总上行链路小区负载,上行链路方向上可实现的数据速率也会随时间变化。使用现有技术系统,每个所连接的电子设备将尝试优化其自身的传输以创建尽可能高的个体质量,而不考虑任何其它电子设备,这要求针对每个客户端可用的尽可能多的上行链路数据容量。
媒体制作元件12操作媒体制作服务,并且可以被配置成在多个电子设备正在流传输多个实时媒体流时组合事件的多个实时媒体流。当多个流传输电子设备被注册为在相同流传输事件内时,媒体制作元件12组合来自多个流传输电子设备的媒体内容。媒体制作元件12可以使用多个电子设备提供的流传输内容的选择和组合来制作组合的实时视频流或组合的媒体作品。在这些实施方式中,网络辅助设备42可以确定事件协调上行链路网络辅助数据,其目的是优先化到当前用于组合媒体作品的客户端/电子设备14的资源分配,并且分配较少的资源给那些当前不使用的组合媒体作品。通过考虑聚合容量和媒体制作元件12的制作需求来确定事件协调上行链路网络辅助数据,而不是优化单个链路。
在图3至图5中提供了各种实施方式的示例网络架构。通常,可以使用几种不同的架构来实现网络辅助和媒体制作的不同功能,并且应当理解,可以将这些功能实现成单独节点或在任何其它节点内。
现在转到图3,网络辅助设备42和媒体制作元件12在位于运营商网络上但与基站30(例如,eNB或gNB)分离的节点上实现。网络辅助设备42和媒体制作元件12二者可以与基站30和/或直接与电子设备14通信。网络辅助设备42和媒体制作元件12可以通信并向基站30以及第二基站60提供功能。基站30和第二基站60可以或可以不向与相同事件相对应的电子设备提供服务。
现在转到图4,网络辅助设备42可以在基站30(例如,eNB或gNB)中实现或连接至基站30,并且因此具有关于调度负载的信息或可用上行链路传输容量的其它指示。在某些实施方式中,网络辅助设备42可以在第二基站60中实现或连接至第二基站60,第二基站60可以或可以不向与相同事件相对应的电子设备提供服务。
现在转到图5,网络辅助设备42可以如上面关于图4所描述的在基站30中实现或连接至基站30。此外,媒体制作元件12可以在第三方媒体元件54中实现或连接至第三方媒体元件54。在这些实施方式中,媒体制作元件12不是运营商网络的一部分,并且可以与第三方媒体元件54集成。
不管网络架构布置如何,事件协调上行链路网络辅助系统和方法可以如下所述地起作用。驻留在发送设备(例如,电子设备14)中的媒体流传输客户端58可以建立属于某个事件的上行链路媒体流传输会话。此外,在该事件处的一个或更多个附加流传输客户端还可以建立属于该事件的上行链路媒体流传输会话。这样的事件的示例是音乐会、体育事件和新闻事件。该事件注册可以通过网络功能来完成,例如通过用于视频流传输的网络辅助设备42来完成。在一个示例中,网络辅助设备42可以是DASH感知网络元件(DANE),其中,可以发起视频流传输会话。在另一示例中,网络辅助设备42可以是用于3GPP的实时上行链路流传输框架(FLUS)的一部分。在某些实施方式中,可以在媒体流传输电子设备与网络辅助设备42之间直接执行创建媒体流传输电子设备至网络辅助设备42之间的链路的事件注册。例如,该事件注册过程可以使用用于标识相关网络辅助设备42的IP地址的DNS查询来执行,或者间接经由另一节点(诸如媒体制作元件12)来执行。
在某些实施方式中,网络辅助设备42和媒体制作元件12可以被定义成不同的实体,但是它们也可以是相同的网络实体,例如,这意味着直接相对于网络辅助设备42执行的注册,并且该网络辅助设备42也可以直接包括媒体制作元件12。
当电子设备14被注册/启动到事件中时,电子设备14将能够从网络辅助设备42接收特定于事件的事件协调上行链路网络辅助数据。该事件特定信息可以包括与其自身的流传输会话有关的信息,并且还可以包括与可以连接多个电子设备的总事件有关的信息。这种信息可以包括但不限于有关被注册到事件的电子设备的数量、针对事件的总分配网络资源的信息、或者有关在无线电链路的已建立链路(与其它客户端到网络链路相比)上的无线电链路性能的信息。这样的信息可以由网络辅助服务器以请求-响应方式定期提供,其中,电子设备14基于请求信息从网络辅助设备42接收事件信息。信息也可以从网络辅助设备42“推送”到电子设备14,即,在没有来自电子设备42的明确请求的情况下可以传递信息。当电子设备14接收到这样的事件特定信息时,电子设备可以调整其内容的传输,以便优化整体组合媒体作品和/或优化无线网络负载和/或减少电子设备14中的能量消耗。
在某些实施方式中,事件协调上行链路网络辅助数据在注册期间被共享一次。在其它实施方式中,事件协调上行链路网络辅助数据可以被多次共享。例如,网络辅助设备42可以以一定周期发送辅助信息,或者网络辅助设备42可以在从电子设备14接收到信息请求时利用辅助信息做出响应。事件协调上行链路网络辅助数据可以为电子设备14提供用于流传输会话的附加信息,该附加信息实现单个电子设备14以及也被注册到该事件的整个电子设备组的改进流传输性能。例如,电子设备14可以在流传输事件期间使用事件协调上行链路网络辅助数据来调整其传输。这种调整可以是增加或减少流传输视频分辨率和/或帧速率、选择媒体编解码器、选择媒体操作点、选择媒体质量、选择数据速率、选择压缩级别、暂停数据流传输会话或恢复数据流传输会话。事件协调上行链路网络辅助数据可以取决于所连接的电子设备的数量,例如,在给定地理区域内或连接至某个基站或被注册到某个事件的电子设备的数量。作为电子设备14的益处,这可以减少流传输期间的设备能量消耗。在某些实施方式中,注册到事件制作的另一激励可以是获得对最终组合媒体作品的访问权,和/或如果组合媒体作品被发布则获得收益份额。
此外,当电子设备14在流传输事件中被注册并且是活动的时,由电子设备14接收的事件协调上行链路网络辅助数据还可以包括来自协调事件的网络辅助设备42的上行链路传输命令或推荐。这样的上行链路传输命令或推荐可以作为请求-响应过程的一部分被接收。特别地,传输命令或推荐被执行以协调多个上行链路流传输电子设备以制作组合的媒体作品。这样的协调可以包括向电子设备14提供关于其流传输的请求/推荐,以便使网络辅助设备42、媒体制作元件12和/或第三方媒体元件54能够优化组合的媒体作品。在某些情况下,并非所有被注册到事件的上行链路媒体流各个都是重要的,因此上行链路媒体流中的一些流可以例如在某些时间降低其媒体速率或被暂停。然而,对于第三方媒体元件54或媒体制作元件12中的媒体制作,仍然重要的是看到尽可能多的媒体流,以便快速响应媒体流中的变化。媒体制作元件12或第三方媒体元件54可以将媒体优化信息发送到网络辅助设备42,以指示网络辅助设备42每个媒体流的优先级。网络辅助设备42可以针对每个流连续地协调质量级别、暂停或恢复,以给予媒体制作元件12或第三方媒体元件54用于制作的最佳可能输入,但是仍然减轻网络负载。
某些实施方式还包括电子设备14到网络辅助设备42信息共享。在这些实施方式中,电子设备14可以将设备相关信息提供给网络辅助设备42。设备相关信息可以包括有关电子设备14的可用媒体质量级别的信息。这可以包括可用帧速率、视频分辨率、音频分辨率等。该信息可以被提供给网络辅助设备42,以使得网络辅助设备42可以在可用媒体质量级别之间进行选择或推荐。当电子设备14将其上行链路数据流注册到网络辅助设备42作为事件的一部分时,该通信可以发生。
除了向电子设备14提供关于其流传输的请求/推荐之外,网络辅助设备42还可以从包括无线电接入功能的其它网络功能请求调度和/或其它网络资源分配中的适当优先级。例如,如果网络辅助设备42检测到被注册到事件的电子设备需要附加资源,例如无线电接入容量,以便提供由媒体制作元件12确定的可接受质量的媒体流,可以从其它业务转移资源。在其它实施方式中,网络辅助设备42可以将指示给定电子设备14的优先级的信息提供给其它网络功能。以这种方式,网络辅助设备42可以影响某些事件的数据流相对于其它事件的数据流或相对于网络中的其它不相关业务的优先级。而且,与其它电子设备相比,网络辅助设备42可能影响与某些电子设备有关的数据的优先级。在某些实施方式中,网络辅助设备42或任何其它网络功能可以向参与与预期的或给定的网络优先级或网络优先级的改变有关的事件的电子设备14提供信息。被提供给电子设备14的这种信息可以向电子设备14指示事件参与是否影响网络内设备的数据优先级。这样的信息可以指示用于这样的优先级改变的时间段,例如,优先级改变有效的时间长度。
可以通过选择由来自不同电子设备的媒体流随时间提供的片段来构建组合的媒体作品。在某些实施方式中,媒体制作元件12构建组合的媒体作品。在其它实施方式中,第三方媒体元件54构建组合的媒体作品。媒体制作元件12和/或第三方媒体元件54可以基于当前是否将单个流用作组合的媒体作品的一部分,是否可以在不久的将来将该流用作组合的媒体作品的一部分,或者当前是否不需要单个流,来为各个流分配优先级。可以将这样的优先级传送到网络辅助设备42,以使得网络辅助设备42可以使用这些优先级来确定要发送到对应电子设备14的事件协调上行链路网络辅助数据。在一示例中,如果正在给定时间点从一个电子设备14发送当前选择用于组合的媒体作品的片段,则网络辅助设备42可以在该时间期间指示一个或更多个其它电子设备以中等质量至低质量和/或帧速率传输上行链路片段,因为它可能想为即将到来的媒体片段选择这些电子设备中的任一电子设备。此外,由于网络辅助设备42当前可能不认为它们的上行链路媒体片段中的任一上行链路媒体片段重要或适用于组合的媒体作品,所以网络功能可以指示一个或更多个其它电子设备在给定时间段内暂停流传输或不发送上行链路媒体片段。质量/速率级别和/或传输暂停的选择可以是基于媒体制作元件12的媒体流的优先化以及整个上行链路容量的估计或测量结果来决定的。
现在转到图6,还公开了一种网络辅助节点可以接收关于事件特定优先级的输入信令的方法。这样的信令可以遵循与TS 26.238中的3GPP中的实时上行链路流传输相同的信令过程,其中,信令通常被作为基于HTTP的通信来执行。可以从媒体制作服务发送事件特定优先级。当确定事件协调上行链路网络辅助数据,建议媒体速率并控制对参与事件的设备的媒体流传输参数建议时,网络辅助服务可以考虑事件特定优先级。
在一个示例中,第一电子设备62和第二电子设备64可以将事件注册请求发送到网络辅助服务,该网络辅助服务可以作为例如网络辅助设备42的一部分来操作。作为发送事件注册请求的一部分,第一电子设备62和第二电子设备64可以发送事件注册信息。该事件注册信息可以包括期望事件的标识、以及与发送事件注册信息的设备有关的设备信息。设备信息可以包括第一电子设备的设备标识、设备位置、设备类型、摄像机类型、设备能力、摄像机规格或用户身份中的至少一者。在将第一电子设备62和第二电子设备64注册到事件之后,网络辅助服务可以将关于第一电子设备62和/或第二电子设备64的全部或部分设备信息中继到媒体制作服务,该媒体制作服务可以在例如媒体制作元件12或第三方媒体元件54上工作。
媒体制作服务可以确定优先级信息并将优先级信息发送到网络辅助服务,如图2所示。优先级信息可以包括事件优先级,该事件优先级是用于在事件参与设备(诸如第一电子设备62和第二电子设备64)与来自未被注册到该事件的其它设备66的数据业务之间建立优先级的信息。优先级信息还可以包括单个优先级,该单个优先级是用于在被注册到事件的单个设备之间建立优先级的信息。例如,单个优先级可以在被注册到事件的第一设备62与也被注册到所述事件的第二设备64之间建立优先级。
媒体制作服务可以基于预定协议(例如,商业协议)来确定事件优先级信息,以优先化事件并且用于主要将某些网络资源分配给事件内的设备。例如,事件优先级信息可以指定来自事件内的设备的至少一个或几个动态分配的流在任何给定时间具有完全期望的质量吞吐量。在另一示例中,事件优先级信息可以指定事件相关上行链路流传输内容不被包括在应用于对应电子设备的标准数据限制中。在某些实施方式中,媒体制作服务确定事件优先级信息,该事件优先级信息指定优先用于该事件的某些网络资源。例如,优先级信息可以指定给定频率资源集合和/或时间资源集合主要可用于该事件的传输,并且仅次要地可用于不属于该事件的其它业务。在另一示例中,优先级信息可以指定应为事件提供最小指示容量,诸如聚合最小带宽、比特/秒或数据通信容量的类似测量结果。
媒体制作服务可以基于设备信息确定单个优先级信息。例如,基于第一电子设备62相比于第二电子设备64的优越摄像机能力(例如,4K视频分辨率、空中或无人驾驶能力),可以向第一电子设备62分配比第二电子设备64更高的优先级。在另一示例中,基于电子设备的用户的身份,可以向第一电子设备62分配比第二电子设备64更高的优先级。如果使用第一电子设备62的人员比使用第二电子设备64的人员捕获更好的视图或具有更好的摄影技巧,则可以向第一电子设备62分配比第二电子设备64更高的优先级。可以为设备静态地或临时分配优先级。当由媒体制作服务或其它事件控制单元分配临时优先级时,被发送到网络辅助服务的优先级信息可以包括关于优先级信息的有效性或到期的定时信息。以此方式,媒体制作服务可以确定并设置时间窗,在该时间窗中,为特定设备分配优先级。
在从媒体制作服务接收到优先级信息之后,网络辅助服务可以至少部分地基于优先级信息来确定事件协调上行链路网络辅助数据。网络辅助服务可以根据由媒体制作服务提供的优先级信息向电子设备62、64、66提供推荐。例如,推荐可以包括推荐的媒体编解码器、推荐的媒体操作点、推荐的媒体质量、推荐的数据速率、推荐的帧速率、推荐的分辨率、推荐的压缩级别、暂停数据流命令或恢复数据流命令中的任一者。在一个示例中,优先级信息指示被注册到事件的电子设备(例如,第一电子设备62和第二电子设备64)具有在任何给定时间可用的完全期望的质量吞吐量。在这种情况下,网络辅助服务将向第一电子设备62和第二电子设备64提供推荐,这些推荐允许第一电子设备62和第二电子设备64以最高质量将其各自的数据流上传到媒体制作服务,并且优先于未注册到该事件的其它设备66。在另一方面,其它设备66可能未被配置成接收推荐,或者未请求从网络辅助服务接收推荐。在这种情况下,在高小区负载下,可能未准许其它设备66发送,以便给予第一电子设备62和第二电子设备64优先级,因此分组可能会在其它设备66中停留一时间段。另一可能性是网络辅助服务将向未被注册到事件的其它设备66提供推荐,该推荐允许其它设备66以比被注册到事件的第一电子设备62和第二电子设备64更低的质量上传其各自的数据流。在另一示例中,优先级信息指示第一电子设备62具有比第二电子设备64更高的优先级。在这种情况下,网络辅助服务将向第一电子设备62提供推荐,以允许第一电子设备62能够以高质量上传其数据流。在另一方面,网络辅助服务将向第二电子设备64提供推荐,以允许第二电子设备64能够以比第一电子设备62更低的质量上传其数据流。
在某些实施方式中,媒体制作服务可以向被注册到事件的单个电子设备提供优先级排序。对于每个可能的优先级排序,网络辅助服务可以具有预定事件协调上行链路网络辅助数据。例如,媒体制作服务可以将优先级排序“1”分配给第一电子设备62,并且将优先级排序“2”分配给第二电子设备64。然后,网络辅助服务可以基于其优先级排序“1”向第一电子设备62提供第一媒体速率推荐,并且基于其优先级排序“2”向第二电子设备64提供比第一媒体速率推荐更低的第二媒体速率推荐。
应当理解,由媒体制作服务生成的优先级信息以及在网络辅助服务处的对应使用不同于基于例如服务质量等级标识符类别在移动网络中使用的基于SIM/订阅的服务质量功能。在某些实施方式中,当设备正在参与上行链路媒体流传输事件时,与该设备可能正在上传或下载的其它非事件相关媒体流传输数据相比,事件相关媒体流传输数据可以接收到不同的优先级。换句话说,在某些情况下,基于优先级信息的事件协调上行链路网络辅助数据可以仅相对于事件相关媒体流传输数据向电子设备62、64提供推荐。
在某些实施方式中,网络辅助服务的另一功能是向媒体制作服务提供有关被注册到事件的电子设备的网络状况的反馈。通过帮助媒体制作服务决定在制作中使用哪个电子设备的数据流以及何时从可能失去最佳无线电状况的电子设备切换,这样的反馈可以防止不良网络连接影响最终媒体作品。
在注册多个数据流之后,网络辅助服务可以收集有关在事件期间的一个或更多个数据流的无线电状况的连接状态信息。连接状态信息可以包括一个或更多个链路参数,包括接收信号强度、丢包率、基于数据限制即将对电子设备进行节流的指示、无线电状况变化参数、当前小区的数据负载、或当前小区正在切换的指示。连接状态信息还可以包括应用相关参数,诸如每个事件和/或针对单个连接电子设备的媒体或数据速率指示。
在收集连接状态信息之后,网络辅助服务可以确定网络状况信息,并将网络状况信息发送到媒体制作服务。在某些实施方式中,网络状况信息包括原始连接状态信息。在某些实施方式中,网络辅助服务可以执行统计计算或将连接状态信息与服务质量要求参数进行比较,并提供网络状况的质量的分数或评级。例如,网络状况信息可以包括丢包率、关于服务质量参数的满足程度的加权值或诸如由平均意见得分预测模型(例如,适应上行链路流传输的ITU-T P.1201系列模型)提供的体验质量预测。在一些实施方式中,网络辅助服务可以使用即将到来的网络拥塞的知识,该知识可以用来制定无线电相关状况的预测。媒体制作服务可以利用预测的无线电相关状况来预先避免即将发生的干扰或媒体质量下降。在另一示例中,网络状况信息可以包括用于特定电子设备的数据通信将很快被节流的指示。在接收到此信息后,媒体制作服务可以从即将受到节流的电子设备的数据流切换,以避免中断。
在确定网络状况信息之后,网络辅助服务可以将网络状况信息发送到媒体制作服务。在某些实施方式中,网络状况信息以实时方式被连续发送,或者以预定周期被连续发送。另选地,或者与定期报告相结合,可以基于特定条件触发网络状况信息的传输。在一个示例中,当针对设备、针对事件或针对网络的总预期通信链路容量达到阈值链路容量时,可以触发网络条件信息的传输。
现在转到图7,在参与事件的不同电子设备72、74被连接至不同运营商网络76、78的情况下,网络状况信息也是有益的。在流传输数据时,可以在多个运营商网络上聚合内容,并且利用此方法,可以例如向这些多个网络指示每个事件的优先级。在一个示例中,第一电子设备72和第二电子设备74都参与事件并且都利用各自的网络辅助服务注册到该事件,所述各自的网络辅助服务可以是设备的各自网络辅助设备42、70的一部分。在该示例中,运行媒体制作服务的媒体制作元件12位于互联网上,并且网络辅助设备42、70位于运营商网络域内。在这种情况下,媒体制作服务可以通过从网络特定网络辅助设备42、70接收信息来接收并确定不同运营商网络76、78的各个网络状况,并使单个设备上传流适合于来自不同网络的媒体作品,这些不同网络可能正经历不同网络特定无线电状况。
图8至图12描述了由本文公开的网络元件执行的多种方法。应当理解,以下方法中的任一种方法可以单个地、同时地或彼此组合地执行。
现在转到图8,公开了一种用于在从在网络中的多个电子设备流传输数据期间通过网络辅助服务向多个电子设备提供事件协调上行链路网络辅助的方法的实施方式。在附图标记80处,网络辅助服务从多个电子设备中的第一电子设备接收对与事件相对应的数据流传输会话的注册请求。在附图标记82处,网络辅助服务将数据流传输会话注册到事件。在附图标记84处,网络辅助服务从媒体制作服务接收优先级信息。优先级信息包括与事件相对应的事件优先级或与第一电子设备相对应的单个优先级中的至少一者。在附图标记86处,网络辅助服务至少部分地基于优先级信息来确定事件协调上行链路网络辅助数据。在附图标记88处,网络辅助服务将事件协调上行链路网络辅助数据发送到第一电子设备。应当理解,网络辅助服务可以如前所述连续或周期性地重复该方法的步骤。
现在转到图9,公开了一种用于通过媒体制作服务向网络辅助服务提供优先级信息的方法的实施方式。在附图标记90处,媒体制作服务接收与多个电子设备流传输数据的事件相对应的事件注册信息。在附图标记92处,媒体制作服务确定优先级信息。优先级信息包括与事件相对应的事件优先级或与被注册到事件的第一电子设备相对应的单个优先级中的至少一者。在附图标记94处,媒体制作服务将优先级信息发送到网络辅助服务。应当理解,网络辅助服务可以如前所述连续或周期性地重复该方法的某些步骤。
现在转到图10,描述了用于在事件处从电子设备流传输数据的方法的实施方式。在附图标记100处,电子设备响应于确定数据流传输会话与事件相对应而将数据流传输会话注册到网络辅助服务或媒体制作服务。注册数据流传输会话包括发送设备信息。在附图标记102处,电子设备从网络辅助服务接收事件协调上行链路网络辅助数据。事件协调上行链路网络辅助数据基于与事件相对应的事件优先级或与电子设备相对应的单个优先级中的至少一者。在附图标记104处,电子设备基于事件协调上行链路网络辅助数据来修改数据流传输会话的至少一个传输特性。应当理解,网络辅助服务可以如前所述连续或周期性地重复该方法的步骤。
现在转到图11,公开了一种用于通过网络辅助服务向多个电子设备提供事件协调上行链路网络辅助的方法的实施方式。在附图标记110处,网络辅助服务将来自多个电子设备的多个数据流注册到事件。在附图标记112处,网络辅助服务在事件期间收集关于多个数据流中的一个或更多个数据流的连接状态信息。在附图标记114处,网络辅助服务从连接状态信息确定网络状况信息。在附图标记116处,网络辅助服务将网络状况信息发送到媒体制作服务。应当理解,网络辅助服务可以如前所述连续或周期性地重复该方法的步骤。
现在转到图12,公开了一种用于制作组合的媒体作品的方法的实施方式。在附图标记120处,媒体制作服务从被注册到事件的多个电子设备接收多个数据流。在附图标记122处,媒体制作服务从网络辅助服务接收多个数据流的网络状况信息。在附图标记124处,媒体制作元件至少部分地基于网络状况信息从多个数据流选择第一数据流,以在第一时间段期间包括在组合的媒体作品中。应当理解,网络辅助服务可以如前所述连续或周期性地重复该方法的某些步骤。
D.结论
尽管已经示出和描述了某些实施方式,但是应当理解,在阅读和理解本说明书之后,本领域技术人员将想到落入所附权利要求范围内的等同和修改。
Claims (15)
1.一种在从网络中的多个电子设备流传输数据期间通过网络辅助服务向所述多个电子设备提供事件协调上行链路网络辅助的方法,所述方法包括:
由所述网络辅助服务从具有与事件相对应的上行链路数据流传输会话的所述多个电子设备中的第一电子设备接收注册请求,所述事件是所述多个电子设备被注册到的实况并且所述多个电子设备根据所述实况同时制作各自的上行链路媒体流并且将各自的上行链路媒体流发送到媒体制作服务;
由所述网络辅助服务将所述电子设备注册到所述事件;
由所述网络辅助服务从媒体制作服务接收优先级信息,所述优先级信息包括与所述事件相对应的事件优先级和与所述第一电子设备相对应的单个优先级中的至少一者;
基于所述事件优先级来向被注册到所述事件的所述多个电子设备分配网络资源的一部分,其中,所述网络资源的所述一部分优先用于所述多个电子设备;
由所述网络辅助服务至少部分地基于所述优先级信息来确定事件协调上行链路网络辅助数据;以及
由所述网络辅助服务将所述事件协调上行链路辅助数据发送到所述第一电子设备。
2.根据权利要求1所述的方法,其中,所述网络辅助服务由DASH感知网络元件DANE或实时上行链路流传输框架FLUS主持。
3.根据权利要求1或2所述的方法,其中,分配网络资源的一部分的步骤包括:分配相对于未被注册到所述事件的电子设备被优先用于被注册到所述事件的所述多个电子设备的频率资源集合和时间资源集合中的至少一者。
4.根据权利要求1或2所述的方法,其中,分配网络资源的一部分的步骤包括:定义为了被注册到所述事件的所述多个电子设备保留的聚合最小带宽。
5.根据权利要求1或2所述的方法,其中,从所述第一电子设备接收所述注册请求包括:接收关于所述第一电子设备的设备信息,其中,所述设备信息包括所述第一电子设备的设备标识、设备类型、设备能力和用户的身份中的至少一者。
6.根据权利要求5所述的方法,其中,所述优先级信息包括单个优先级分配,所述单个优先级分配使所述第一电子设备优先于同样被注册到所述事件的第二电子设备,其中,所述单个优先级分配是基于所述设备信息的。
7.根据权利要求1或2所述的方法,其中,所述事件协调上行链路网络辅助数据包括推荐的媒体编解码器、推荐的媒体操作点、推荐的媒体质量、推荐的数据速率、推荐的帧速率、推荐的分辨率、推荐的压缩级别、暂停数据流命令和恢复数据流命令中的至少一者。
8.一种通过媒体制作服务向网络辅助服务提供优先级信息的方法,所述方法包括:
由所述媒体制作服务接收与多个电子设备流传输数据的事件相对应的事件注册信息,所述事件是所述多个电子设备被注册到的实况并且所述多个电子设备根据所述实况同时制作的各自上行链路媒体流并且将各自的上行链路媒体流发送到所述媒体制作服务;
由所述媒体制作服务确定优先级信息,所述优先级信息包括与所述事件相对应的事件优先级和与被注册到所述事件的所述电子设备中的第一电子设备相对应的单个优先级中的至少一者,其中,所述优先级信息指定网络资源的一部分优先由被注册到所述事件的所述多个电子设备使用;以及
由所述媒体制作服务将所述优先级信息发送到所述网络辅助服务。
9.根据权利要求8所述的方法,其中,所述事件注册信息包括与所述第一电子设备相对应的设备信息,其中,所述设备信息包括所述第一电子设备的设备标识、设备类型、设备能力和用户的身份中的至少一者。
10.根据权利要求8或9所述的方法,其中,所述事件注册信息是从所述网络辅助服务接收到的。
11.根据权利要求9所述的方法,其中,确定所述优先级信息包括:确定单个优先级分配,所述单个优先级分配使所述第一电子设备优先于同样被注册到所述事件的第二电子设备,其中,所述单个优先级分配是基于所述设备信息的。
12.根据权利要求8或9所述的方法,其中,确定所述优先级信息包括:基于针对所述事件的网络资源的预定分配来分配所述事件优先级。
13.一种从网络中的电子设备流传输数据的方法,所述方法包括:
由所述电子设备并且利用网络辅助服务或媒体制作服务将上行链路数据流传输会话注册到事件,其中,注册所述数据流传输会话包括发送设备信息,并且所述事件是实况,在所述实况下,被注册到所述事件的多个电子设备同时制作各自的上行链路媒体流并且将各自的上行链路媒体流发送到所述媒体制作服务;
由所述电子设备从所述网络辅助服务接收事件协调上行链路网络辅助数据,其中,所述事件协调上行链路网络辅助数据是基于与所述事件相对应的事件优先级和与所述电子设备相对应的单个优先级中的至少一者;以及
在利用优先用于被注册到所述事件的电子设备的网络资源的一部分的同时,由所述电子设备基于所述事件协调上行链路网络辅助数据修改所述数据流传输会话的至少一个传输特性。
14.根据权利要求13所述的方法,其中,修改所述数据流传输会话的至少一个传输特性涉及选择媒体编解码器、选择媒体操作点、选择媒体质量、选择数据速率、选择帧速率、选择分辨率、选择压缩级别、暂停数据流传输会话和恢复所述数据流传输会话中的至少一者。
15.一种电子设备,所述电子设备包括无线接口和控制电路,所述控制电路被配置成执行权利要求13或14所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
SE1830244-8 | 2018-08-20 | ||
SE1830244 | 2018-08-20 | ||
PCT/US2019/043789 WO2020040939A1 (en) | 2018-08-20 | 2019-07-26 | Method and system for utilizing event specific priority in a network controlled uplink media transmission for a collaborative media production |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112585922A CN112585922A (zh) | 2021-03-30 |
CN112585922B true CN112585922B (zh) | 2023-05-23 |
Family
ID=67659964
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980054314.0A Active CN112585922B (zh) | 2018-08-20 | 2019-07-26 | 提供辅助的方法、提供信息的方法、流传输的方法和设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11206298B2 (zh) |
EP (1) | EP3841721A1 (zh) |
CN (1) | CN112585922B (zh) |
WO (1) | WO2020040939A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230064204A1 (en) * | 2020-02-10 | 2023-03-02 | Sony Group Corporation | Methods for coordinating a media session, related network nodes, related wireless devices, and related production devices |
US11438398B2 (en) | 2020-03-30 | 2022-09-06 | Tencent America LLC | 3rd generation partnership project (3gpp) framework for live uplink streaming (flus) sink capabilities determination |
US11063992B1 (en) * | 2020-03-30 | 2021-07-13 | Tencent America LLC | Network-based media processing (NBMP) workflow management through 5G framework for live uplink streaming (FLUS) control |
WO2022089887A1 (en) * | 2020-10-27 | 2022-05-05 | Sony Group Corporation | Methods for coordinating media sessions, related network assistance nodes, related network nodes and related wireless devices |
FI20216044A1 (en) * | 2021-10-08 | 2023-04-09 | Elisa Oyj | Direct playback of digital live content |
CN114138348A (zh) * | 2021-11-16 | 2022-03-04 | 中国电信集团系统集成有限责任公司 | 业务恢复优先级评估方法及设备、存储介质和产品 |
CN117319509A (zh) * | 2022-06-24 | 2023-12-29 | 中兴通讯股份有限公司 | 网络数据处理方法、装置和计算机可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101378534A (zh) * | 2007-08-29 | 2009-03-04 | 中兴通讯股份有限公司 | 高速上行分组接入的媒体接入控制层调度方法及系统 |
CN107637045A (zh) * | 2015-06-16 | 2018-01-26 | 英特尔Ip公司 | 使用动态无线接入网信息的自适应视频流送 |
CN108141443A (zh) * | 2015-09-29 | 2018-06-08 | 索尼移动通讯有限公司 | 用户设备和媒体流传输网络辅助节点 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070258418A1 (en) | 2006-05-03 | 2007-11-08 | Sprint Spectrum L.P. | Method and system for controlling streaming of media to wireless communication devices |
KR20140068270A (ko) | 2010-10-01 | 2014-06-05 | 인터디지탈 패튼 홀딩스, 인크 | 고속 다운링크 패킷 액세스(hsdpa)을 위한 피드백 업링크를 위한 시스템 및 방법 |
US9253233B2 (en) | 2011-08-31 | 2016-02-02 | Qualcomm Incorporated | Switch signaling methods providing improved switching between representations for adaptive HTTP streaming |
US9661047B2 (en) | 2012-04-30 | 2017-05-23 | Mobilatv Ltd. | Method and system for central utilization of remotely generated large media data streams despite network bandwidth limitations |
US8863208B2 (en) | 2012-06-18 | 2014-10-14 | Micropower Technologies, Inc. | Synchronizing the storing of streaming video |
US9391792B2 (en) | 2012-06-27 | 2016-07-12 | Google Inc. | System and method for event content stream |
EP3127118A4 (en) * | 2014-03-31 | 2017-12-06 | GoPro, Inc. | Distributed video processing and selective video upload in a cloud environment |
EP3164963A4 (en) | 2014-07-04 | 2018-04-04 | Telefonaktiebolaget LM Ericsson (publ) | Priority of uplink streams in video switching |
US20160100329A1 (en) | 2014-10-03 | 2016-04-07 | Qualcomm Incorporated | Techniques for dynamically adjusting the streaming of media content from a wireless device |
US20160294890A1 (en) | 2015-03-31 | 2016-10-06 | Facebook, Inc. | Multi-user media presentation system |
US9820326B2 (en) | 2015-04-02 | 2017-11-14 | Qualcomm Incorporated | Techniques for assisting radio access technology (RAT) communications using another RAT |
CN106162911B (zh) | 2015-04-17 | 2021-12-07 | 索尼公司 | 用于无线通信的电子设备和方法 |
WO2017063189A1 (en) | 2015-10-16 | 2017-04-20 | Qualcomm Incorporated | Deadline signaling for streaming of media data |
US20170272491A1 (en) | 2016-03-16 | 2017-09-21 | Mesa Digital, LLC. | Self-contained and portable synchronized data communication system and method for facilitating the wireless transmission of video and data from venues to client devices |
WO2018027237A1 (en) | 2016-08-05 | 2018-02-08 | Sportscastr.Live Llc | Systems, apparatus, and methods for scalable low-latency viewing of broadcast digital content streams of live events |
JP6663082B2 (ja) | 2016-11-10 | 2020-03-11 | ソニーモバイルコミュニケーションズ株式会社 | ノードタイプに基づくデータストリーミングの支援制御 |
US10904313B2 (en) * | 2017-06-20 | 2021-01-26 | Telefonaktiebolaget Lm Ericsson (Publ) | Apparatuses, methods, computer programs, and computer program products for live uplink adaptive streaming |
US11190554B2 (en) * | 2017-06-20 | 2021-11-30 | Samsung Electronics Co., Ltd. | System and method for discovery and access of uplink services |
US20190104326A1 (en) * | 2017-10-03 | 2019-04-04 | Qualcomm Incorporated | Content source description for immersive media data |
WO2019150286A1 (en) * | 2018-01-30 | 2019-08-08 | Telefonaktiebolaget Lm Ericsson (Publ) | Dynamic prioritization for live streaming |
US11303826B2 (en) * | 2018-01-31 | 2022-04-12 | Lg Electronics Inc. | Method and device for transmitting/receiving metadata of image in wireless communication system |
US10924775B2 (en) * | 2018-06-26 | 2021-02-16 | Qualcomm Incorporated | Uplink and downlink methods for efficient operation of live uplink streaming services |
-
2019
- 2019-07-26 EP EP19753527.1A patent/EP3841721A1/en active Pending
- 2019-07-26 CN CN201980054314.0A patent/CN112585922B/zh active Active
- 2019-07-26 US US17/262,898 patent/US11206298B2/en active Active
- 2019-07-26 WO PCT/US2019/043789 patent/WO2020040939A1/en unknown
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101378534A (zh) * | 2007-08-29 | 2009-03-04 | 中兴通讯股份有限公司 | 高速上行分组接入的媒体接入控制层调度方法及系统 |
CN107637045A (zh) * | 2015-06-16 | 2018-01-26 | 英特尔Ip公司 | 使用动态无线接入网信息的自适应视频流送 |
CN108141443A (zh) * | 2015-09-29 | 2018-06-08 | 索尼移动通讯有限公司 | 用户设备和媒体流传输网络辅助节点 |
Non-Patent Citations (2)
Title |
---|
E-FLUS:network assistance;Sony Mobile Communications EL AL;《3GPP》;20180703;正文第2-3节 * |
Guidelines on the Framework for Live Uplink Streaming (FLUS);3GPP STANDARD;《3GPP》;20180622;正文第6-7节 * |
Also Published As
Publication number | Publication date |
---|---|
WO2020040939A1 (en) | 2020-02-27 |
US20210168185A1 (en) | 2021-06-03 |
US11206298B2 (en) | 2021-12-21 |
EP3841721A1 (en) | 2021-06-30 |
CN112585922A (zh) | 2021-03-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112585922B (zh) | 提供辅助的方法、提供信息的方法、流传输的方法和设备 | |
US9398337B2 (en) | Method and apparatus for assigning video bitrate in mobile communication system | |
EP3219106B1 (en) | Context-aware resource management for video streaming services | |
US11140701B2 (en) | Service data transmission method, network device, and terminal device | |
WO2016091298A1 (en) | Updating flow-specific qos policies based on information reported from base station | |
WO2020143564A1 (zh) | 一种通信方法和通信装置 | |
WO2019001391A1 (zh) | 无线资源调度方法、视频终端及接入网设备 | |
US20230209591A1 (en) | Systems and methods for prioritizing bi-directional traffic flows | |
EP3841722B1 (en) | Method and system for utilizing network conditions feedback for improving quality of a collaborative media production | |
CN112236986B (zh) | 用于网络容量受限场景中的协作媒体制作的网络控制上行媒体传送 | |
CN107172652B (zh) | 一种基于高层业务信息的基站调度方法及装置 | |
US9635586B2 (en) | Method and apparatus for using call admission control for client balancing | |
CN112585979B (zh) | 用于所存储内容的网络控制媒体上传的方法和系统 | |
US10813112B2 (en) | Application aware scheduling and resource management | |
CN105794159A (zh) | 资源分配 | |
US20230342194A1 (en) | Method, apparatus and computer program | |
Ma et al. | Access point centric scheduling for dash streaming in multirate 802.11 wireless network | |
CN116867000A (zh) | 一种数据传输的方法及通信装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |