CN112585921A - 利用网络状况反馈改善协调媒体作品质量的方法和系统 - Google Patents

利用网络状况反馈改善协调媒体作品质量的方法和系统 Download PDF

Info

Publication number
CN112585921A
CN112585921A CN201980054308.5A CN201980054308A CN112585921A CN 112585921 A CN112585921 A CN 112585921A CN 201980054308 A CN201980054308 A CN 201980054308A CN 112585921 A CN112585921 A CN 112585921A
Authority
CN
China
Prior art keywords
network
media
service
electronic device
media production
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980054308.5A
Other languages
English (en)
Other versions
CN112585921B (zh
Inventor
R·荣
D·朗布莱德
P·伊斯贝格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN112585921A publication Critical patent/CN112585921A/zh
Application granted granted Critical
Publication of CN112585921B publication Critical patent/CN112585921B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723—Monitoring of network processes or resources, e.g. monitoring of network load
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

当多个流传输电子设备被注册为位于同一流传输事件内时，媒体制作元件(12)组合来自所述多个流传输电子设备的媒体内容。媒体制作元件(12)可以使用由多个电子设备提供的流传输的内容的选择和组合来制作组合实时视频流或组合媒体作品。网络辅助设备(42)可以向媒体制作元件(12)提供与注册到事件的电子设备的网络状况有关的反馈。通过帮助媒体制作元件(12)决定在作品中使用哪些数据流以及何时从可能正失去最佳无线电状况的电子设备切换，这种反馈可以防止不良的网络连接影响最终的媒体作品。

Description

利用网络状况反馈改善协调媒体作品质量的方法和系统
技术领域
本公开的技术总体上涉及在网络环境中电子设备之间的无线通信，并且更具体地，涉及以下方法和相关设备：关于被注册到事件的电子设备的网络状况向媒体制作元件提供反馈，提供并采用网络辅助作为基于上行链路流传输的协调(collaborative)媒体制作的一部分。
背景技术
在诸如蜂窝网络或移动网络的网络中，客户端设备可以将媒体内容流传输至媒体制作实体。例如，用于报道实时(live)体育、音乐或新闻事件的专业摄像机或便携式电子设备可以在上行链路传输中提供视听流。其它设备也可以将视听内容实时流传输至网络，诸如以智能电话、平板计算机或类似设备形式的无线手持设备。
在这些示例中，作为媒体流源的客户端设备通常被配置为以客户端可以生成的最高比特率发送数据。在多个客户端设备流传输旨在用于协调媒体制作的媒体内容的情况下，这种上行链路媒体流会产生各种问题。一个问题是适应流传输的网络节点将假定流传输媒体内容仅来自个体客户端，因此应单独优化各个个体流传输链路。
在多个客户端以协调方式流传输数据的情况下，需要进一步改善流传输。
发明内容
公开了在多个客户端设备流传输旨在用于协调制作的内容的情况下可以增强上行链路媒体流传输服务的体验质量(QoE)的特征。所公开的特征可以改善QoE，特别是例如在根据诸如3GPP发布的标准的任何适当的一组标准的无线移动或蜂窝网络中在多个用户之间共享频谱资源的网络上操作时。所公开的特征还可以改善网络运营商的资源利用率和协调制作的质量。
根据本公开的方面，一种由网络辅助服务向多个电子设备提供事件协调的上行链路网络辅助的方法包括：将来自所述多个电子设备的多个数据流注册到事件；在所述事件期间收集与所述多个数据流中的一个或更多个数据流有关的连接状态信息；根据所述连接状态信息确定网络状况信息；以及将网络状况信息发送至媒体制作服务。
根据所述方法的一个实施方式，所述网络辅助服务由DASH感知网络元件(DANE)托管。
根据所述方法的一个实施方式，所述网络辅助服务由实时上行链路流传输框架(FLUS)托管。
根据所述方法的一个实施方式，所述连接状态信息包括一个或更多个链路参数，所述一个或更多个链路参数包括接收信号强度、无线电状况变化参数、当前小区的数据负载或小区之间的切换的指示中的至少一者。
根据所述方法的一个实施方式，所述连接状态信息包括一个或更多个应用参数，所述一个或更多个应用参数包括所述事件的聚合媒体速率、所述事件的聚合数据速率、所述多个电子设备中的个体电子设备的媒体速率或所述多个电子设备中的所述个体电子设备的数据速率中的至少一者。
根据所述方法的一个实施方式，确定所述网络状况信息包括将所述连接状态信息与网络状况要求参数进行比较。
根据所述方法的一个实施方式，所述方法还包括确定将来的预期连接状态信息，并且确定所述网络状况信息包括将所述将来的预期连接状态信息与网络状况要求参数进行比较。
根据所述方法的一个实施方式，按预定周期将所述网络状况信息发送至所述媒体制作服务。
根据所述方法的一个实施方式，基于触发事件将所述网络状况信息发送至所述媒体制作服务。
根据所述方法的一个实施方式，所述网络状况信息包括丢包率。
根据所述方法的一个实施方式，所述网络状况信息包括原始无线电状况参数。
根据所述方法的一个实施方式，确定所述网络状况信息包括根据所述连接状态信息计算加权的服务质量值。
根据所述方法的一个实施方式，确定所述网络状况信息包括使用平均意见分数预测模型来确定预测的体验质量值。
根据一个实施方式，所述方法由网络元件执行。
根据本公开的方面，一种制作组合媒体作品的方法包括：从注册到事件的多个电子设备接收多个数据流；从网络辅助服务接收所述多个数据流的网络状况信息；以及至少部分地基于所述网络状况信息来从所述多个数据流中选择第一数据流，以在第一时间段期间包括在所述组合媒体作品中。
根据一个实施方式，所述多个电子设备包括通过第一运营商网络进行通信并且与第一网络辅助服务相关联的第一电子设备，以及通过第二运营商网络进行通信并且与第二网络辅助服务相关联的第二电子设备。
根据一个实施方式，从所述第一网络辅助服务和所述第二网络辅助服务接收所述网络状况信息。
根据一个实施方式，所述方法还包括：基于所述网络状况信息来确定所述第一数据流具有或将具有小于阈值服务质量值的服务质量值；并且基于确定所述第一数据流具有或将具有小于阈值服务质量值的服务质量值，从所述多个数据流中选择第二数据流，以在所述第一时间段之后的第二时间段期间包括在所述组合媒体作品中。
根据一个实施方式，所述方法还包括：基于所述网络状况信息确定来自与所述第一数据流相对应的第一电子设备的通信被压制或很快将被压制；并且基于确定来自与所述第一数据流相对应的所述第一电子设备的通信被压制或很快将被压制，从所述多个数据流中选择第二数据流，以在所述第一时间段之后的第二时间段期间包括在所述组合媒体作品中。
根据一个实施方式，所述方法由媒体制作元件执行。
附图说明
图1是进行用于协调媒体制作的上行链路媒体传输的网络辅助的代表性网络系统的示意性框图。
图2是用于协调媒体制作的上行链路媒体传输的网络辅助的代表性高级架构图。
图3是进行用于协调媒体制作的上行链路媒体传输的网络辅助的网络系统的代表性实施方式的示意图。
图4是进行用于协调媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图5是进行用于协调媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图6是进行用于协调媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图7是进行用于利用两个运营商网络的协调媒体制作的上行链路媒体传输的网络辅助的网络系统的另一代表性实施方式的示意图。
图8是通过网络辅助服务提供事件协调的上行链路网络辅助的代表性方法的流程图。
图9是从媒体制作服务向网络辅助服务提供优先级信息的代表性方法的流程图。
图10是基于优先级信息从网络中的电子设备流传输数据的代表性方法的流程图。
图11是根据网络辅助服务确定和提供网络状况信息的代表性方法的流程图。
图12是媒体制作服务利用网络状况信息的代表性方法的流程图。
具体实施方式
A.介绍
现在将参照附图描述实施方式，其中，贯穿全文，相似的附图标记用于指代相似的要素。将理解，附图不一定按比例绘制。关于一个实施方式描述和/或例示的特征可以在一个或更多个其它实施方式中以相同方式或以类似方式使用，和/或与其它实施方式的特征组合地或替代地使用。
下面结合附图描述用于进行包括用于上行链路流传输的事件协调的网络辅助的无线通信的系统和方法的各种实施方式。可以通过网络上的相应服务以自动化方式来执行用于上行链路流传输的事件协调的网络辅助。用于上行链路流传输的事件协调的网络辅助可以改善上行链路流传输性能。
B.系统架构
图1是用于实现所公开的技术的示例性网络系统10的示意图。将理解，所例示的系统是代表性的，并且可以使用其它系统来实现所公开的技术。示例性网络系统10包括用于通过上行链路从电子设备14流传输的数据的媒体制作元件12。媒体制作元件12通常将是服务器、服务器的部件或位于无线移动或蜂窝网络运营商的核心网络和/或由无线移动或蜂窝网络运营商的核心网络管理的其它设备。客户端针对接收到的媒体流也可以经由运营商的核心网络或者通过更广阔的网络(诸如互联网)来获得。
电子设备14经由基站30或根据蜂窝或移动设备网络协议(诸如但不限于第三代项目合作伙伴(3GPP)发布的协议)工作的其它接入点来发送数据和控制信令。示例性基站30可以是长期演进(LTE)基站，通常称为增强型Node B(eNodeB或eNB)或下一代Node B(gNB)。基站30为一个或更多个电子设备(包括电子设备14)提供服务。基站12可以支持电子设备与网络介质16之间的通信，电子设备可以通过该网络介质与可以连接在运营商的核心网络内或经由互联网连接等的其它电子设备、服务器进行通信。可以经由网络介质16与电子设备14进行通信的一个设备是媒体制作元件12。将理解，媒体制作元件12可以位于网络架构中的其它位置。作为媒体制作元件12的另一位置的示例，媒体制作元件12可以是互联网上的用于不由无线网络运营商管理的流传输服务的服务器。
参照根据3GPP规范中采用的通用术语，流传输的数据的源可以是基站12的任何客户端或终端。可以是流传输的数据的源的示例性电子设备14可以是用户设备(UE)。电子设备14可以是经由无线接口18(例如，3GPP无线调制解调器)提供媒体流的任何种类的电子设备。示例性电子设备14包括但不限于智能电话、平板计算机、台式或膝上型计算机、摄像机等。在摄像机的情况下，摄像机可以包括在无人机中，可以由人操作，可以是自主监视摄像机等。在一个实施方式中，摄像机可以是由新闻或实时事件报告组织使用的专业型相机。电子设备14还可以是经由上行链路发送的贡献馈送(contribution feed)的源，诸如将贡献馈送作为多个相机或其它设备馈送的聚合或作为被报道的事件的预制作编辑和音频混合发送的外部广播面包车或移动演播室。在这些贡献馈送情况下，多个电子设备也可以提供与同一事件有关的贡献馈送。摄像机可以包括无线接口18，或者可以例如使用电缆或电连接器通过本地接口在工作时连接至无线接口18。在由新闻或实时事件报告组织操作摄像机的情况下，该组织可以与移动网络的运营商进行安排，以提供增强的带宽容量来支持视听内容流传输。例如，摄像机可以访问网络中的多个载波以使用载波聚合来传递内容。无线网络还可以为单个载波或信道中的媒体流提供足够的带宽容量。
媒体制作元件12可以包括用于执行无线通信和媒体制作元件12的其它功能的操作部件。例如，媒体制作元件12可以包括控制电路20，该控制电路20负责媒体制作元件12的所有操作(包括控制媒体制作元件12执行适用于媒体制作元件12并在下面更详细描述的操作)。控制电路20包括执行代码24(诸如操作系统和/或其它应用)的处理器22。在本公开文件中描述的并且适用于媒体制作元件12的功能可以被实现为代码24的一部分或者被实现为媒体制作元件12的其它专用逻辑操作的一部分。媒体制作元件12的逻辑功能和/或硬件可以根据媒体制作元件12的性质和配置以其它方式实现。因此，所例示的和所描述的方法仅仅是示例，并且可以使用其它方法，包括但不限于控制电路20被实现为或包括硬件(例如，微处理器、微控制器、中央处理单元(CPU)等)或硬件和软件的组合(例如，片上系统(SoC)、专用集成电路(ASIC)等)。应当注意，尽管针对上行链路流传输场景提供了给定的实现方式示例，但是其它实施方式可以基于下行链路数据。事件优先级可以应用于从数据源朝向多个设备的协调的下行链路流传输，或者事件优先级可以应用于包括面向上行链路和下行链路的数据流传输的事件。
代码24和任何存储的数据(例如，与媒体制作元件12的操作相关联的数据)可以存储在存储器26上。代码24可以以可执行逻辑例程(例如，软件程序)的形式体现，该代码作为计算机程序产品存储在媒体制作元件12的非暂时性计算机可读介质(例如，存储器26)上并由处理器22执行。被描述为由媒体制作元件12执行的功能可以被认为是由媒体制作元件12执行的方法。
例如，存储器26可以是缓冲器、闪存、硬盘驱动器、可移除介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适的设备中的一者或更多者。在典型的布置中，存储器26包括用于长期数据存储的非易失性存储器和用作控制电路20的系统存储器的易失性存储器。存储器26被认为是非暂时性计算机可读介质。
媒体制作元件12包括使媒体制作元件12能够建立各种通信连接的通信电路。例如，媒体制作元件12可以具有网络通信接口28，以与网络介质16进行通信。
电子设备14可以包括用于执行电子设备14的各种功能(包括与基站30以及可以与电子设备14进行通信的任何其它设备进行无线通信)的操作部件。电子设备14的一个功能是将更详细描述的网络辅助的上行链路流传输和/或事件协调的网络辅助的上行链路流传输。除其它部件外，电子设备14还可以包括控制电路32，该控制电路32负责电子设备14的所有操作，包括控制电子设备14执行下面更详细描述的操作。控制电路32包括执行代码36(诸如操作系统和/或其它应用)的处理器34。在本公开文件中描述的功能可以被实现为代码36的一部分或者被实现为电子设备14的其它专用逻辑操作的一部分。电子设备14的逻辑功能和/或硬件可以根据电子设备14的性质和配置以其它方式实现。因此，所例示的和所描述的方法仅仅是示例，并且可以使用其它方法，包括但不限于控制电路32被实现为或包括硬件(例如，微处理器、微控制器、中央处理单元(CPU)等)或硬件和软件的组合(例如，片上系统(SoC)、专用集成电路(ASIC)等)。
代码36和任何存储的数据(例如，与电子设备14的操作相关联的数据)可以存储在存储器38上。代码36可以以可执行逻辑例程(例如，软件程序)的形式体现，该代码36作为计算机程序产品存储在电子设备14的非暂时性计算机可读介质(例如，存储器38)上并由处理器34执行。被描述为由电子设备14执行的功能可以被认为是由电子设备14执行的方法。
例如，存储器38可以是缓冲器、闪存、硬盘驱动器、可移除介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适的设备中的一者或更多者。在典型的布置中，存储器38包括用于长期数据存储的非易失性存储器和用作控制电路32的系统存储器的易失性存储器。存储器38被认为是非暂时性计算机可读介质。
电子设备14包括使电子设备14能够建立各种通信连接的通信电路。例如，电子设备14包括无线接口18，通过该无线接口18与基站30进行无线通信。可以与电子设备14建立其它通信(诸如Wi-Fi通信、有线连接等)。无线接口18可以包括无线电电路，该无线电电路具有一个或更多个射频收发器(也称为调制解调器)、至少一个天线组件以及任何适当的调谐器、阻抗匹配电路以及各种支持的频带和无线电接入技术所需的任何其它部件。
电子设备14的其它部件可以包括但不限于用户输入(例如，按钮、小键盘、触摸表面等)、显示器、麦克风、扬声器、传感器、插孔或电连接器、可再充电电池和电源单元、SIM卡、运动传感器(例如，加速度计或陀螺仪)、GPS接收器以及任何其它适当的部件。具体地，电子设备14可以包括摄像头组件40，该摄像头组件40具有所有适当的光学和电子成像部件以及诸如视频处理器、视频和音频编码器等的部件。
在一些实现方式中，对无线通信接口18进行控制的逻辑(例如，如由控制电路20实现的)是所谓的较低层协议架构，并且可以包括物理层、媒体接入层、无线电资源控制层等。这可以称为电子设备14的调制解调器实体。此外，在一些实现方式中，对视频媒体客户端和对应视频内容编码以及任何相关功能进行控制的逻辑是所谓的较高层架构，并且可以包括IP层、应用层等。该逻辑可以称为应用实体，并且可以包括上行链路视频流传输客户端。利用层的这种分离，在一些实现方式中，与蜂窝基站30的无线调制解调器实体通信在逻辑上与利用媒体制作元件12执行的应用实体数据通信分离。
网络系统10可以包括网络辅助设备42，该网络辅助设备可以在上行链路流传输期间向包括电子设备14和/或媒体制作元件12的任何网络元件提供网络辅助服务。在示例性实施方式中，网络辅助设备42可以是DASH感知网络元件(DANE)。尽管DASH是指超文本传输协议(HTTP)上的动态自适应流传输，但DANE可以为根据附加和/或其它协议(诸如HTTP实时流传输(HLS)、实时传输协议(RTP)、实时消息收发协议(RTMP)等)执行的上行链路流传输提供网络辅助。在另一示例性实施方式中，网络辅助设备42可以实现为3GPP实时上行链路流传输框架(FLUS)的一部分。
网络辅助设备42可以包括用于执行网络辅助设备42的各种功能(包括向电子设备14和/或媒体制作元件12提供上行链路网络辅助服务)的操作部件。除其它部件外，网络辅助设备4214还可以包括控制电路44，该控制电路44负责网络辅助设备42的所有操作，包括控制网络辅助设备42执行下面更详细描述的操作。控制电路44包括执行代码48(诸如操作系统和/或其它应用)的处理器46。在本公开文件中描述的功能可以被实现为代码48的一部分或者被实现为网络辅助设备42的其它专用逻辑操作的一部分。网络辅助设备42的逻辑功能和/或硬件可以根据网络辅助设备42的性质和配置以其它方式实现。因此，所例示的和所描述的方法仅仅是示例，并且可以使用其它方法，包括但不限于控制电路44被实现为或包括硬件(例如，微处理器、微控制器、中央处理单元(CPU)等)或硬件和软件的组合(例如，片上系统(SoC)、专用集成电路(ASIC)等)。
代码48和任何存储的数据(例如，与网络辅助设备42的操作相关联的数据)可以存储在存储器50上。代码48可以以可执行逻辑例程(例如，软件程序)的形式体现，该代码48作为计算机程序产品存储在网络辅助设备42的非暂时性计算机可读介质(例如，存储器50)上并由处理器46执行。被描述为由网络辅助设备42执行的功能可以被认为是由网络辅助设备42执行的方法。
例如，存储器50可以是缓冲器、闪存、硬盘驱动器、可移除介质、易失性存储器、非易失性存储器、随机存取存储器(RAM)或其它合适的设备中的一者或更多者。在典型的布置中，存储器50包括用于长期数据存储的非易失性存储器和用作控制电路44的系统存储器的易失性存储器。存储器50被认为是非暂时性计算机可读介质。
网络辅助设备42包括使网络辅助设备42能够建立各种通信连接的通信电路。例如，网络辅助设备42包括网络接口52，通过该网络接口52经由网络介质16与媒体制作元件12、电子设备14和任何其它设备进行通信。
在所例示的实施方式中，网络辅助设备42被实现为服务器，该服务器在通过上行链路流从电子设备14发送至媒体制作元件12的内容的媒体传递路径的带外。利用带外架构，电子设备14与网络辅助设备42之间的通信可以独立于电子设备14与媒体制作元件12之间的通信。因此，电子设备14与网络辅助设备42之间的通信可以在与用于上行链路流的通信路径和/或数据链路分离的通信路径和/或数据链路中发生。这样，可以在网络系统10中的各个位置处提供网络辅助设备42。例如，网络辅助设备42可以通过所示基站30、通过不同基站与电子设备14进行通信或直接与电子设备14进行通信。在另一实施方式中，网络辅助设备42的功能可以成为媒体制作元件12的一部分。
网络系统10还可以包括第三方媒体元件54。(经由基站30及其上行链路数据路径)从电子设备14流传输至媒体制作元件12的数据可以传递至第三方媒体元件54。在一个实施方式中，媒体制作元件12临时缓冲从电子设备14接收的流传输的数据，并使用适当的协议通过网络介质16传递该数据，出于本公开的目的，其细节无需详细讨论。在电子设备14是摄像机的情况下，第三方媒体元件54可以是处理、存储从电子设备14接收的视听内容和/或将从电子设备14接收的视听内容重新分配至媒体播放器(例如，电视、智能电话、手持设备等)的电视演播室的一部分。最终用户可以在媒体播放器上以“磁带延迟”或“实时”方式消费内容。在其它情况下，第三方媒体元件54可以是最终用户设备，或者可以是经由广播或多播重传从媒体制作元件12或其它设备(例如，连接至媒体制作元件12的重传服务器)接收媒体流的许多最终用户设备中的一者。
C.用于上行链路流传输的事件协调的网络辅助
信令
图2是可以针对事件协调的上行链路网络辅助实现的上行链路网络辅助系统的高级架构图，其示出了系统信号流中的一些系统信号流并且可以结合以下描述作为事件协调的上行链路网络辅助的代表性方法来参考。
在一个实施方式中，为了辅助针对上行链路视频流传输提供改善的体验质量，可以针对网络辅助(NA)建立信令路径。因此，为了实现NA功能，可以建立电子设备14与网络辅助设备42之间的信令方法。在一个实施方式中，在电子设备14的NA客户端56与网络辅助设备42之间建立该NA信令方法。在第一方向上，如下文所描述的，网络辅助设备42可以将事件协调的上行链路网络辅助数据发送至电子设备14的NA客户端56。在第二方向上，电子设备14的NA客户端56可以将消息发送至网络辅助设备42。这样的消息可以包括事件注册请求、对事件协调的上行链路网络辅助数据的请求或设备相关信息。例如，设备相关信息可以包括与可用媒体质量水平有关的信息，诸如帧速率、视频和音频分辨率等。在网络辅助设备42与媒体制作元件12之间也可以存在一个或更多个信令路径。事件注册信息和网络状况信息可以从网络辅助设备42发送至媒体制作元件12，而优先级信息可以从媒体制作元件12发送至网络辅助设备42。下面更详细地描述这些信令路径。
在一个实施方式中，媒体制作元件12和电子设备的上行链路客户端58共享数据路径。在第一方向上，媒体制作元件12可以将消息发送至电子设备14的上行链路客户端58。例如，媒体制作元件12消息可以包括对媒体流段的请求、暂停或恢复流命令等。在第二方向上，电子设备14的上行链路客户端58可以将上行链路媒体流发送至媒体制作元件12。在一些实施方式中，媒体制作元件12可以将来自电子设备14的媒体流与来自其它电子设备的媒体流一起处理，以创建组合媒体作品。该组合媒体作品可以被发送至第三方媒体元件54。第三方媒体元件54可以进一步编辑、查看、显示或发布组合媒体作品。应理解，网络辅助设备42和媒体制作元件12的所描述的通信路径和功能可以在两个元件之间互换地存在，或者通信路径和功能可以存在于单个元件中。
总体操作
某些事件可能涉及多个电子设备同时在存在大量电子设备的区域中发送数据。在这些情况下，即使无线网络可以由多个基站组成，上行链路数据容量也很有可能是电子设备中的各个电子设备到基站链路上可达到的上行链路数据速率的限制因素。而且，由于无线链路的性质导致信道衰落，即使不考虑总上行链路小区负载，上行链路方向上可实现的数据速率也将会随时间推移变化。使用现有技术系统，各个连接的电子设备将尝试优化其自己的传输以创建尽可能高的个体质量，而不考虑任何其它电子设备，这需要各个客户端可用的尽可能多的上行链路数据容量。
媒体制作元件12操作媒体制作服务，并且可以被配置为，在多个电子设备流传输多个实时媒体流时，组合事件的多个实时媒体流。当多个流传输电子设备被注册在同一流传输事件内时，媒体制作元件12组合来自所述多个流传输电子设备的媒体内容。媒体制作元件12可以使用由多个电子设备提供的流传输的内容的选择和组合来制作组合的实时视频流或组合的媒体作品。在这些实施方式中，网络辅助设备42可以确定事件协调的上行链路网络辅助数据，其目标是将资源优先分配给当前用于组合媒体作品的客户端/电子设备14，并且为当前未使用的客户端/电子设备14指派较少的资源。不是优化个体链路，而是通过考虑媒体制作元件12的制作需求和聚合的容量来确定事件协调的上行链路网络辅助数据。
在图3至图5中提供了各种实施方式的示例网络架构。通常，可以使用多种不同架构来实现网络辅助和媒体制作的不同功能，并且应理解，可以将这些功能实现为分离的节点或在任何其它节点内实现这些功能。
现在转至图3，在位于运营商网络上但与基站30(例如，eNB或gNB)分离的节点上实现网络辅助设备42和媒体制作元件12。网络辅助设备42和媒体制作元件12两者可以与基站30进行通信和/或直接与电子设备14进行通信。网络辅助设备42和媒体制作元件12可以进行通信并向基站30还有第二基站60提供功能。基站30和第二基站60可以向或可以不向与同一事件相对应的电子设备提供服务。
现在转至图4，网络辅助设备42可以在基站30(例如，eNB或gNB)中实现或连接至基站30，并因此具有与调度负载有关的信息或可用上行链路传输容量的其它指示。在某些实施方式中，网络辅助设备42可以在第二基站60中实现或连接至第二基站60，第二基站60可以向或可以不向与同一事件相对应的电子设备提供服务。
现在转至图5，如上面关于图4描述的，网络辅助设备42可以在基站30中实现或连接至基站30。此外，媒体制作元件12可以在第三方媒体元件54中实现或连接至第三方媒体元件54。在这些实施方式中，媒体制作元件12不是运营商网络的一部分，并且可以与第三方媒体元件54集成在一起。
不管网络架构布置如何，事件协调的上行链路网络辅助系统和方法都可以如下所述地起作用。驻留在发送设备(例如，电子设备14)中的媒体流传输客户端58可以建立属于某个事件的上行链路媒体流传输会话。此外，在该事件处的一个或更多个附加流传输客户端还可以建立属于该事件的上行链路媒体流传输会话。这样的事件的示例是音乐会、体育事件和新闻事件。该事件注册可以利用网络功能来完成，例如利用用于视频流传输的网络辅助设备42来完成。在一个示例中，网络辅助设备42可以是DASH感知网络元件(DANE)，其中视频流传输会话可以被发起。在另一示例中，网络辅助设备42可以是3GPP实时上行链路流传输框架(FLUS)的一部分。在某些实施方式中，可以在媒体流传输电子设备与网络辅助设备42之间直接执行在媒体流传输电子设备与网络辅助设备42之间创建链路的事件注册。例如，可以使用DNS查找以识别相关网络辅助设备42的IP地址或间接经由另一节点(诸如媒体制作元件12)来执行该事件注册过程。
在某些实施方式中，网络辅助设备42和媒体制作元件12可以被限定为不同实体，但是它们也可以是同一网络实体，例如，这意味着关于网络辅助设备42直接执行注册，并且该网络辅助设备42也可以包括媒体制作元件12。
当电子设备14被注册/发起到事件中时，电子设备14将能够从网络辅助设备42接收特定于事件的事件协调的上行链路网络辅助数据。该事件特定信息可以包括与其自己的流传输会话有关的信息，还可以包括与可以连接多个电子设备的总事件有关的信息。这种信息可以包括但不限于与注册到事件的电子设备的数量、为事件分配的总网络资源有关的信息，或与其它客户端到网络链路相比，其已建立的链路上的无线电链路性能有关的信息。这样的信息可以由网络辅助服务器以请求-响应方式定期提供，其中电子设备14基于请求信息从网络辅助设备42接收事件信息。该信息也可以从网络辅助设备42“推送”至电子设备14，即，在不具有来自电子设备42的明确请求的情况下被传递。当电子设备14接收到这样的事件特定信息时，它可以适配其内容传输，以便优化整体组合媒体作品和/或优化无线网络负载和/或降低电子设备14中的能耗。
在某些实施方式中，事件协调的上行链路网络辅助数据在注册期间被共享一次。在其它实施方式中，事件协调的上行链路网络辅助数据可以被共享多次。例如，网络辅助设备42可以以一定的周期发送辅助信息，或者网络辅助设备42可以在从电子设备14接收到信息请求时以辅助信息做出响应。事件协调的上行链路网络辅助数据可以为电子设备14提供用于流传输会话的附加信息，该附加信息使得能够改善个体电子设备14以及也注册到该事件的整个电子设备组的流传输性能。例如，电子设备14可以在流传输事件期间使用事件协调的上行链路网络辅助数据来适配其传输。这种适配可以是增大或减小流传输视频分辨率和/或帧速率、选择媒体编解码器、选择媒体操作点、选择媒体质量、选择数据速率、选择压缩级别、暂停数据流传输会话或恢复数据流传输会话。事件协调的上行链路网络辅助数据可以取决于连接的电子设备(例如，在给定地理区域内连接或连接至某个基站或注册到某个事件)的数量。作为电子设备14的益处，这可以降低流传输期间的设备能耗。在某些实施方式中，注册到事件制作的另一激励可以是获得对最终组合媒体作品的访问权，和/或如果发布组合媒体作品而获得收益分成。
此外，当电子设备14被注册在流传输事件中并在流传输事件中是活动状态时，由电子设备14接收的事件协调的上行链路网络辅助数据还可以包括来自协调事件的网络辅助设备42的上行链路传输命令或建议。这样的上行链路传输命令或建议可以作为请求-响应过程的一部分被接收。具体地，执行传输命令或建议以协调多个上行链路流传输电子设备制作组合媒体作品。这样的协调可以包括向电子设备14提供关于其流传输的请求/建议，以便使网络辅助设备42、媒体制作元件12和/或第三方媒体元件54能够优化组合媒体作品。在某些情况下，并非注册到事件的所有上行链路媒体流都是同等(individually)重要的，因此上行链路媒体流中的一些上行链路媒体流可以例如在某些时候降低其媒体速率或暂停。然而，对于第三方媒体元件54或媒体制作元件12中的媒体制作，看到尽可能多的媒体流仍是重要的，以便快速响应媒体流的变化。媒体制作元件12或第三方媒体元件54可以将媒体优化信息发送至网络辅助设备42，以指示网络辅助设备42各个媒体流的优先级。网络辅助设备42可以连续地协调各个流的质量水平、暂停或恢复，以向媒体制作元件12或第三方媒体元件54提供用于制作的最佳可能输入，但是仍然降低了网络负载。
某些实施方式还包括电子设备14到网络辅助设备42的信息共享。在这些实施方式中，电子设备14可以向网络辅助设备42提供设备相关信息。设备相关信息可以包括与电子设备14的可用媒体质量水平有关的信息。这可以包括可用帧速率、视频分辨率、音频分辨率等。可以将该信息提供给网络辅助设备42，使得网络辅助设备42可以在可用媒体质量水平之间进行选择或建议。当电子设备14将其上行链路数据流注册到网络辅助设备42作为事件的一部分时，可以发生该通信。
除了向电子设备14提供关于其流传输的请求/建议之外，网络辅助设备42还可以从包括无线电接入功能的其它网络功能请求调度和/或其它网络资源分配的合适优先级。例如，如果网络辅助设备42检测到注册到事件的电子设备需要附加资源(例如，无线电接入能力)以便提供由媒体制作元件12确定的可接受质量的媒体流，则可以从其它业务传递资源。在其它实施方式中，网络辅助设备42可以将指示给定电子设备14的优先级的信息提供给其它网络功能。以这种方式，网络辅助设备42可以影响某些事件的数据流相比于其它事件的数据流或相比于网络中其它不相关业务的优先级。而且，与其它电子设备相比，网络辅助设备42可以影响与某些电子设备有关的数据的优先级。在某些实施方式中，网络辅助设备42或任何其它网络功能可以向参与事件的电子设备14提供与预期的或给定的网络优先级或网络优先级的改变有关的信息。提供给电子设备14的这种信息可以向电子设备14指示事件参与是否影响网络内设备的数据优先级。这样的信息可以指示这样的优先级改变的时间段(例如，优先级改变有效的时间长度)。
可以通过随时间推移选择由来自不同电子设备的媒体流提供的段来构建组合媒体作品。在某些实施方式中，媒体制作元件12构建组合媒体作品。在其它实施方式中，第三方媒体元件54构建组合媒体作品。媒体制作元件12和/或第三方媒体元件54可以基于当前是否正将个体流用作组合媒体作品的一部分、是否可以在不久的将来将该流用作组合媒体作品的一部分或者当前是否不需要个体流来为个体流指派优先级。可以将这样的优先级传送至网络辅助设备42，使得网络辅助设备42可以使用这些优先级来确定将被发送至对应电子设备14的事件协调的上行链路网络辅助数据。在一个示例中，如果在给定时间点正在从一个电子设备14发送当前被选择用于组合媒体作品的段，则因为网络辅助设备42可能想针对即将到来的媒体段选择这些电子设备中的任何电子设备，所以网络辅助设备42可以在此时间期间指示一个或更多个其它电子设备以中低质量和/或帧速率发送上行链路段。此外，由于网络辅助设备42当前可能不认为其上行链路媒体段中的任何上行链路媒体段很重要或适用于组合媒体作品，因此网络功能可以指示一个或更多个其它电子设备在给定时间段内暂停流传输或不发送上行链路媒体段。质量/速率水平和/或传输暂停的选择可以基于媒体制作元件12的媒体流优先级以及整个上行链路容量的估计或测量结果来决定。
现在转至图6，进一步公开了一种方法，其中网络辅助节点可以接收与事件特定优先级有关的输入信令。这样的信令可以遵循与TS 26.238中的3GPP中的实时上行链路流传输相同的信令过程，其中，信令通常被执行为基于HTTP的通信。可以从媒体制作服务发送事件特定优先级。当确定事件协调的上行链路网络辅助数据、建议媒体速率并控制对参与事件的设备的媒体流传输参数建议时，网络辅助服务可以考虑事件特定优先级。
在一个示例中，第一电子设备62和第二电子设备64可以将事件注册请求发送至网络辅助服务，该网络辅助服务可以作为例如网络辅助设备42的一部分来操作。作为发送事件注册请求的一部分，第一电子设备62和第二电子设备64可以发送事件注册信息。该事件注册信息可以包括期望事件的标识，以及与发送事件注册信息的设备有关的设备信息。设备信息可以包括设备标识、设备位置、设备类型、摄像头类型、设备能力、摄像头规范或第一电子设备的用户身份中的至少一者。在将第一电子设备62和第二电子设备64注册到事件之后，网络辅助服务可以将与第一电子设备62和/或第二电子设备64有关的设备信息中的全部或部分设备信息中继到媒体制作服务，该媒体制作服务可以在例如媒体制作元件12或第三方媒体元件54上工作。
媒体制作服务可以如图2所示确定优先级信息并将该优先级信息发送至网络辅助服务。优先级信息可以包括事件优先级，该事件优先级是用于在事件参与设备(诸如第一电子设备62和第二电子设备64)与来自未注册到该事件的其它设备66的数据业务之间建立优先级的信息。优先级信息还可以包括个体优先级，该个体优先级是用于在注册到事件的个体设备之间建立优先级的信息。例如，个体优先级可以在注册到事件的第一设备62与也注册到事件的第二设备64之间建立优先级。
媒体制作服务可以基于用于对事件进行优先级排序并且用于主要将某些网络资源分配给事件内的设备的预定协定(例如，商业协定)来确定事件优先级信息。例如，事件优先级信息可以指定来自事件内的设备的至少一个或几个动态指派的流在任何给定时间具有完全期望的质量吞吐量。在另一示例中，事件优先级信息可以指定事件相关上行链路流传输内容不包括在适用于对应电子设备的标准数据限制中。在某些实施方式中，媒体制作服务确定事件优先级信息，该事件优先级信息指定了优先用于该事件的某些网络资源。例如，优先级信息可以指定给定的一组频率资源和/或时间资源主要可用于该事件的传输，并且只是次要地可用于不属于该事件的其它业务。在另一示例中，优先级信息可以指定应为事件提供最小指示容量(诸如聚合的最小带宽、比特/秒或数据通信容量的类似度量)。
媒体制作服务可以基于设备信息来确定个体优先级信息。例如，可以基于第一电子设备62的相比于第二电子设备64更优的摄像机能力(例如，4K视频分辨率、空中或无人驾驶能力)来为第一电子设备62指派相比于第二电子设备64更高的优先级。在另一示例中，可以基于电子设备的用户身份来向第一电子设备62指派相比于第二电子设备64更高的优先级。如果使用第一电子设备62的人比使用第二电子设备64的人拍摄了更好的视图或具有更好的摄影技巧，则可以向第一电子设备62指派比第二电子设备64更高的优先级。可以静态地或暂时地向设备指派优先级。当由媒体制作服务或其它事件控制单元指派临时优先级时，发送至网络辅助服务的优先级信息可以包括与优先级信息的有效性或期满有关的定时信息。以这种方式，媒体制作服务可以确定并设置时间窗，在该时间窗中为特定设备指派了优先级。
在从媒体制作服务接收优先级信息之后，网络辅助服务可以至少部分地基于优先级信息来确定事件协调的上行链路网络辅助数据。网络辅助服务可以根据由媒体制作服务提供的优先级信息来向电子设备62、64、66提供建议。例如，建议可以包括以下任何一种：建议的媒体编解码器、建议的媒体操作点、建议的媒体质量、建议的数据速率、建议的帧速率、建议的分辨率、建议的压缩水平、暂停数据流命令或恢复数据流命令。在一个示例中，优先级信息指示注册到事件的电子设备(例如，第一电子设备62和第二电子设备64)具有在任何给定时间可用的完全期望的质量吞吐量。在这种情况下，网络辅助服务将向第一电子设备62和第二电子设备62提供建议，这些建议允许第一电子设备62和第二电子设备64优先于未注册到该事件的其它设备66将其相应数据流以最高质量上传至媒体制作服务。另一方面，其它设备66可能未被配置为接收建议，或者未请求从网络辅助服务接收建议。在这种情况下，在高小区负载下，可能未授予其它设备66权限来优先于第一电子设备62和第二电子设备64进行传输，因此数据包可能会在其它设备66中停滞一段时间。另一可能性是网络辅助服务将向未注册到该事件的其它设备66提供建议，该建议允许其它设备66以比已注册到该事件的第一电子设备62和第二电子设备64低的质量上传其相应数据流。在另一示例中，优先级信息指示第一电子设备62具有比第二电子设备64高的优先级。在这种情况下，网络辅助服务将向第一电子设备62提供允许第一电子设备62以高质量上传其数据流的建议。另一方面，网络辅助服务将向第二电子设备64提供允许第二电子设备64以比第一电子设备62低的质量上传其数据流的建议。
在某些实施方式中，媒体制作服务可以向注册到事件的个体电子设备提供优先级排序。针对各个可能的优先级排序，网络辅助服务可以具有预定的事件协调的上行链路网络辅助数据。例如，媒体制作服务可以将优先级排序“1”指派给第一电子设备62，将优先级排序“2”指派给第二电子设备64。然后，网络辅助服务可以基于第一电子设备62的优先级排序“1”向第一电子设备62提供第一媒体速率建议，并且基于第二电子设备64的优先级排序“2”向第二电子设备64提供低于第一媒体速率建议的第二媒体速率建议。
应理解，由媒体制作服务生成的优先级信息以及网络辅助服务处的对应用途不同于基于例如服务质量等级的标识符等级在移动网络中使用的基于SIM/订阅的服务质量功能。在某些实施方式中，当设备正参与上行链路媒体流传输事件时，与该设备可以上传或下载的其它非事件相关媒体流传输数据相比，事件相关媒体流传输数据可以接收不同优先级。换句话说，在某些情况下，基于优先级信息的事件协调的上行链路网络辅助数据可以仅关于事件相关媒体流传输数据仅向电子设备62、64提供建议。
在某些实施方式中，网络辅助服务的另一功能是向媒体制作服务提供与注册到事件的电子设备的网络状况有关的反馈。通过帮助媒体制作服务决定在作品中使用哪些电子设备的数据流以及何时从可能正失去最佳无线电状况的电子设备切换，这样的反馈可以防止不良的网络连接影响最终的媒体作品。
在注册多个数据流之后，网络辅助服务可以在事件期间收集与数据流中的一个或更多个数据流的无线电状况有关的连接状态信息。连接状态信息可以包括一个或更多个链路参数，所述一个或更多个链路参数包括接收信号强度、丢包率、基于数据限制即将对电子设备进行压制的指示、无线电状况变化参数、当前小区的数据负载或当前小区正在进行切换的指示。连接状态信息还可以包括应用相关参数，诸如每事件和/或个体连接的电子设备的媒体或数据速率指示。
在收集连接状态信息之后，网络辅助服务可以确定网络状况信息，并将网络状况信息发送至媒体制作服务。在某些实施方式中，网络状况信息包括原始连接状态信息。在某些实施方式中，网络辅助服务可以执行统计计算或将连接状态信息与服务质量要求参数进行比较，并提供网络状况质量的分数或等级。例如，网络状况信息可以包括丢包率、关于服务质量参数的满足程度的加权值，或诸如由平均意见分数预测模型(例如，适配用于上行链路流传输的ITU-T P.1201系列模型)提供的体验质量预测。在一些实施方式中，网络辅助服务可以使用即将到来的网络拥塞的知识，可以利用该知识来制定无线电相关状况的预测。媒体制作服务可以利用所预测的无线电相关状况来优先避免即将发生的干扰或媒体质量下降。在另一示例中，网络状况信息可以包括特定电子设备的数据通信很快将被压制的指示。接收到该信息后，媒体制作服务可以从即将受到压制的电子设备的数据流切换，以避免中断。
在确定网络状况信息之后，网络辅助服务可以将网络状况信息发送至媒体制作服务。在某些实施方式中，以实时方式连续发送网络状况信息，或者按预定周期连续发送网络状况信息。另选地，或者与定期报告相结合，可以基于特定状况来触发网络状况信息的传输。在一个示例中，当针对设备、针对事件或针对网络的预期通信链路容量总共达到阈值链路容量时，可以触发网络状况信息的传输。
现在转至图7，在参与事件的不同电子设备72、74连接至不同运营商网络76、78的情况下，网络状况信息也是有益的。当流传输数据时，可以通过多个运营商网络来聚合内容，并且利用这种方法，各个事件的优先级可以例如被指示给这些多个网络。在一个示例中，第一电子设备72和第二电子设备74都参与事件并且都利用可以是设备的相应网络辅助设备42、70的一部分的相应网络辅助服务注册到该事件。在该示例中，运行媒体制作服务的媒体制作元件12位于互联网上，并且网络辅助设备42、70位于运营商网络域内。在这种情况下，媒体制作服务可以通过从网络特定网络辅助设备42、70接收信息来接收并确定不同运营商网络76、78的个体网络状况，并按照来自不同网络的媒体作品适配个体设备上传流，这可能会遇到不同网络特定无线电状况。
图8至图12描述了由本文公开的网络元件执行的各种方法。应理解，以下方法中的任何方法可以单独地、同时地或彼此结合地执行。
现在转至图8，公开了一种来自网络中的多个电子设备的数据流传输期间通过网络辅助服务向所述多个电子设备提供事件协调的上行链路网络辅助的方法的实施方式。在附图标记80，网络辅助服务从多个电子设备中的第一电子设备接收针对与事件相对应的数据流传输会话的注册请求。在附图标记82，网络辅助服务向事件注册数据流传输会话。在附图标记84，网络辅助服务从媒体制作服务接收优先级信息。优先级信息包括与事件相对应的事件优先级或与第一电子设备相对应的个体优先级中的至少一者。在附图标记86，网络辅助服务至少部分地基于优先级信息来确定事件协调的上行链路网络辅助数据。在附图标记88，网络辅助服务将事件协调的上行链路网络辅助数据发送至第一电子设备。应理解，网络辅助服务可以如前所述连续地或周期性地重复该方法的步骤。
现在转至图9，公开了一种通过媒体制作服务向网络辅助服务提供优先级信息的方法的实施方式。在附图标记90，媒体制作服务接收与多个电子设备流传输数据的事件相对应的事件注册信息。在附图标记92，媒体制作服务确定优先级信息。优先级信息包括与事件相对应的事件优先级或与注册到事件的第一电子设备相对应的个体优先级中的至少一者。在附图标记94，媒体制作服务将优先级信息发送至网络辅助服务。应理解，网络辅助服务可以如前所述连续地或周期性地重复该方法的某些步骤。
现在转至图10，描述了在事件时从电子设备流传输数据的方法的实施方式。在附图标记100，电子设备响应于确定数据流传输会话与事件相对应而将数据流传输会话注册到网络辅助服务或媒体制作服务。注册数据流传输会话包括发送设备信息。在附图标记102，电子设备从网络辅助服务接收事件协调的上行链路网络辅助数据。事件协调的上行链路网络辅助数据基于与事件相对应的事件优先级或与电子设备相对应的个体优先级中的至少一者。在附图标记104，电子设备基于事件协调的上行链路网络辅助数据来修改数据流传输会话的至少一个传输特性。应理解，网络辅助服务可以如前所述连续地或周期性地重复该方法的步骤。
现在转至图11，公开了一种通过网络辅助服务向多个电子设备提供事件协调的上行链路网络辅助的方法的实施方式。在附图标记110，网络辅助服务向事件注册来自多个电子设备的多个数据流。在附图标记112，网络辅助服务在事件期间收集与多个数据流中的一个或更多个数据流有关的连接状态信息。在附图标记114，网络辅助服务根据连接状态信息来确定网络状况信息。在附图标记116，网络辅助服务将网络状况信息发送至媒体制作服务。应理解，网络辅助服务可以如前所述连续地或周期性地重复该方法的步骤。
现在转至图12，公开了一种制作组合媒体作品的方法的实施方式。在附图标记120，媒体制作服务从注册到事件的多个电子设备接收多个数据流。在附图标记122，媒体制作服务从网络辅助服务接收多个数据流的网络状况信息。在附图标记124，媒体制作元件至少部分地基于网络状况信息来从多个数据流中选择第一数据流，以在第一时间段期间包括在组合媒体作品中。应理解，网络辅助服务可以如前所述连续地或周期性地重复该方法的某些步骤。
D.结论
尽管已示出和描述了某些实施方式，但是应理解，在阅读和理解本说明书之后，本领域技术人员将想到落入所附权利要求书范围内的等同例和修改例。

Claims (23)

1.一种由网络辅助服务向多个电子设备提供事件协调的上行链路网络辅助的方法，所述方法包括：
由所述网络辅助服务获得与已注册到事件的多个上行链路数据会话有关的数据，各个上行链路数据会话位于相应电子设备与媒体制作服务之间，所述事件是实时情况，所述多个电子设备根据所述实时情况同时制作上行链路媒体流并在相应上行链路数据会话中将所述上行链路媒体流发送至所述媒体制作服务；
由所述网络辅助服务在所述事件期间收集(112)与多个数据流中的所述上行链路媒体流中的一个或更多个上行链路媒体流有关的连接状态信息；
由所述网络辅助服务根据所述连接状态信息确定(114)网络状况信息；以及
由所述网络辅助服务将网络状况信息发送(116)至所述媒体制作服务。
2.根据权利要求1所述的方法，其中，所述网络辅助服务由DASH感知网络元件(DANE)(42)托管。
3.根据权利要求1所述的方法，其中，所述网络辅助服务由实时上行链路流传输框架(FLUS)托管。
4.根据权利要求1至3中任一项所述的方法，其中，所述连接状态信息包括一个或更多个链路参数，所述一个或更多个链路参数包括接收信号强度、无线电状况变化参数、当前小区的数据负载以及小区之间的切换的指示中的至少一者。
5.根据权利要求1至4中任一项所述的方法，其中，所述连接状态信息包括一个或更多个应用参数，所述一个或更多个应用参数包括所述事件的聚合媒体速率、所述事件的聚合数据速率、所述多个电子设备中的个体电子设备的媒体速率以及所述多个电子设备中的所述个体电子设备的数据速率中的至少一者。
6.根据权利要求1至5中任一项所述的方法，其中，确定所述网络状况信息包括将所述连接状态信息与网络状况要求参数进行比较。
7.根据权利要求1至6中任一项所述的方法，所述方法还包括：
确定将来的预期连接状态信息；并且
其中，确定所述网络状况信息包括将所述将来的预期连接状态信息与网络状况要求参数进行比较。
8.根据权利要求1至7中任一项所述的方法，其中，所述网络状况信息按预定周期被发送至所述媒体制作服务。
9.根据权利要求1至7中任一项所述的方法，其中，所述网络状况信息基于触发事件被发送至所述媒体制作服务。
10.根据权利要求1至9中任一项所述的方法，其中，所述网络状况信息包括丢包率。
11.根据权利要求1至10中任一项所述的方法，其中，所述网络状况信息包括原始无线电状况参数。
12.根据权利要求1至11中任一项所述的方法，其中，确定所述网络状况信息包括根据所述连接状态信息计算加权的服务质量值。
13.根据权利要求1至12中任一项所述的方法，其中，确定所述网络状况信息包括使用平均意见分数预测模型来确定预测的体验质量值。
14.根据权利要求1至13中任一项所述的方法，其中，所述网络辅助服务在基站(30)中实现或连接至基站(30)。
15.一种托管网络辅助服务的网络元件(42)，所述网络元件包括网络接口(52)和控制电路(44)，所述控制电路被配置为执行根据权利要求1至14中任一项所述的方法。
16.一种制作组合媒体作品的方法，所述方法包括：
由媒体制作服务接收多个上行链路数据流，各个上行链路数据流来自被注册到事件的相应电子设备，所述事件是实时情况，所述电子设备根据所述实时情况同时制作上行链路数据流并在相应上行链路数据会话中将所述上行链路数据流发送至所述媒体制作服务；
由所述媒体制作服务从网络辅助服务接收所述多个上行链路数据流的网络状况信息；以及
由所述媒体制作服务至少部分地基于所述网络状况信息来从所述多个上行链路数据流中选择第一上行链路数据流，以在第一时间段期间包括在所述组合媒体作品中。
17.根据权利要求16所述的方法，其中，所述电子设备包括第一电子设备和第二电子设备，所述第一电子设备通过第一运营商网络进行通信并且与第一网络辅助服务相关联，并且所述第二电子设备通过第二运营商网络进行通信并且与第二网络辅助服务相关联。
18.根据权利要求17所述的方法，其中，所述网络状况信息是从所述第一网络辅助服务和所述第二网络辅助服务接收的。
19.根据权利要求16至18中任一项所述的方法，所述方法还包括：
由所述媒体制作服务基于所述网络状况信息来确定所述第一上行链路数据流具有或将具有小于阈值服务质量值的服务质量值；并且
基于确定所述第一上行链路数据流具有或将具有小于所述阈值服务质量值的服务质量值，由所述媒体制作服务从所述多个上行链路数据流中选择第二上行链路数据流，以在所述第一时间段之后的第二时间段期间包括在所述组合媒体作品中。
20.根据权利要求16至19中任一项所述的方法，所述方法还包括：
由所述媒体制作服务基于所述网络状况信息确定来自与所述第一上行链路数据流相对应的第一电子设备的通信被压制或很快将被压制；并且
基于确定来自与所述第一上行链路数据流相对应的所述第一电子设备的通信被压制或很快将被压制，由所述媒体制作服务从所述多个上行链路数据流中选择第二上行链路数据流，以在所述第一时间段之后的第二时间段期间包括在所述组合媒体作品中。
21.根据权利要求16至20中任一项所述的方法，其中，所述媒体制作服务在媒体制作元件(12)中实现或连接至媒体制作元件(12)。
22.一种托管媒体制作服务的媒体制作元件(12)，所述媒体制作元件包括网络接口(28)和控制电路(20)，所述控制电路被配置为执行根据权利要求16至21中任一项所述的方法。
23.一种系统，所述系统包括电子设备(14)、根据权利要求15所述的网络元件(42)和根据权利要求22所述的媒体制作元件(12)。
CN201980054308.5A 2018-08-20 2019-07-26 提供事件协调的上行链路网络辅助的方法和网络元件 Active CN112585921B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SE1830245-5 2018-08-20
SE1830245 2018-08-20
PCT/US2019/043792 WO2020040940A1 (en) 2018-08-20 2019-07-26 Method and system for utilizing network conditions feedback for improving quality of a collaborative media production

Publications (2)

Publication Number Publication Date
CN112585921A true CN112585921A (zh) 2021-03-30
CN112585921B CN112585921B (zh) 2023-04-18

Family

ID=67742960

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980054308.5A Active CN112585921B (zh) 2018-08-20 2019-07-26 提供事件协调的上行链路网络辅助的方法和网络元件

Country Status (4)

Country Link
US (1) US11368512B2 (zh)
EP (1) EP3841722B1 (zh)
CN (1) CN112585921B (zh)
WO (1) WO2020040940A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019233595A1 (en) * 2018-06-08 2019-12-12 Telefonaktiebolaget Lm Ericsson (Publ) A method and system for media content production
US11063992B1 (en) * 2020-03-30 2021-07-13 Tencent America LLC Network-based media processing (NBMP) workflow management through 5G framework for live uplink streaming (FLUS) control

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101427512A (zh) * 2006-03-31 2009-05-06 卢森特技术有限公司 用于改进无线网络中的组播流动的方法和装置
US20140355446A1 (en) * 2013-05-31 2014-12-04 Liveu Ltd. Network Assisted Bonding
CN104969657A (zh) * 2013-01-16 2015-10-07 微软技术许可有限责任公司 通过使用多个媒体流进行无线实时媒体通信
US20160100329A1 (en) * 2014-10-03 2016-04-07 Qualcomm Incorporated Techniques for dynamically adjusting the streaming of media content from a wireless device
CN107113460A (zh) * 2015-01-08 2017-08-29 高通股份有限公司 针对空中广播媒体数据的会话描述信息

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070258418A1 (en) 2006-05-03 2007-11-08 Sprint Spectrum L.P. Method and system for controlling streaming of media to wireless communication devices
US8144187B2 (en) 2008-03-14 2012-03-27 Microsoft Corporation Multiple video stream capability negotiation
AU2011308576C1 (en) 2010-10-01 2016-03-03 Interdigital Patent Holdings, Inc. Systems and methods for uplink feedback for high-speed downlink packet access (HSDPA)
US9119111B2 (en) 2011-08-12 2015-08-25 Alcatel Lucent Method and apparatus for controlling wireless uplink sessions
US9253233B2 (en) 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9661047B2 (en) 2012-04-30 2017-05-23 Mobilatv Ltd. Method and system for central utilization of remotely generated large media data streams despite network bandwidth limitations
US8863208B2 (en) 2012-06-18 2014-10-14 Micropower Technologies, Inc. Synchronizing the storing of streaming video
US9391792B2 (en) 2012-06-27 2016-07-12 Google Inc. System and method for event content stream
US20140189760A1 (en) 2012-12-31 2014-07-03 Charles R. Payette Method and system for allocating wireless resources
US20150281305A1 (en) 2014-03-31 2015-10-01 Gopro, Inc. Selectively uploading videos to a cloud environment
US9948889B2 (en) 2014-07-04 2018-04-17 Telefonaktiebolaget Lm Ericsson (Publ) Priority of uplink streams in video switching
US10057204B2 (en) 2015-03-31 2018-08-21 Facebook, Inc. Multi-user media presentation system
US9820326B2 (en) 2015-04-02 2017-11-14 Qualcomm Incorporated Techniques for assisting radio access technology (RAT) communications using another RAT
CN114222372A (zh) 2015-04-17 2022-03-22 索尼公司 用于无线通信的电子设备和方法
WO2016204815A1 (en) 2015-06-16 2016-12-22 Intel IP Corporation Adaptive video streaming using dynamic radio access network information
US11153359B2 (en) 2015-09-29 2021-10-19 Sony Group Corporation User equipment and media streaming network assistance node
WO2017063189A1 (en) 2015-10-16 2017-04-20 Qualcomm Incorporated Deadline signaling for streaming of media data
US20170272491A1 (en) 2016-03-16 2017-09-21 Mesa Digital, LLC. Self-contained and portable synchronized data communication system and method for facilitating the wireless transmission of video and data from venues to client devices
WO2018027237A1 (en) 2016-08-05 2018-02-08 Sportscastr.Live Llc Systems, apparatus, and methods for scalable low-latency viewing of broadcast digital content streams of live events
WO2018086695A1 (en) 2016-11-10 2018-05-17 Sony Mobile Communications Inc. Node type based control of assistance for data streaming
WO2018175849A1 (en) 2017-03-23 2018-09-27 Ring Inc. Streaming and storing audio/video content captured by audio/video recording and communication devices
US11190554B2 (en) 2017-06-20 2021-11-30 Samsung Electronics Co., Ltd. System and method for discovery and access of uplink services
US10904313B2 (en) 2017-06-20 2021-01-26 Telefonaktiebolaget Lm Ericsson (Publ) Apparatuses, methods, computer programs, and computer program products for live uplink adaptive streaming
US10972778B2 (en) * 2017-08-14 2021-04-06 Koninklijke Kpn N.V. Stream control system for use in a network
US20190104326A1 (en) 2017-10-03 2019-04-04 Qualcomm Incorporated Content source description for immersive media data
US11483847B2 (en) 2018-01-30 2022-10-25 Telefonaktiebolaget Lm Ericsson (Publ) Dynamic prioritization for live streaming
US11303826B2 (en) 2018-01-31 2022-04-12 Lg Electronics Inc. Method and device for transmitting/receiving metadata of image in wireless communication system
US10924775B2 (en) 2018-06-26 2021-02-16 Qualcomm Incorporated Uplink and downlink methods for efficient operation of live uplink streaming services
US20210176530A1 (en) * 2019-12-06 2021-06-10 Q'ligent Corporation ESTIMATING OTT PLAYER QoE METRICS FROM CDN LOGS USING AI AND MACHINE LEARNING

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101427512A (zh) * 2006-03-31 2009-05-06 卢森特技术有限公司 用于改进无线网络中的组播流动的方法和装置
CN104969657A (zh) * 2013-01-16 2015-10-07 微软技术许可有限责任公司 通过使用多个媒体流进行无线实时媒体通信
US20140355446A1 (en) * 2013-05-31 2014-12-04 Liveu Ltd. Network Assisted Bonding
US20160100329A1 (en) * 2014-10-03 2016-04-07 Qualcomm Incorporated Techniques for dynamically adjusting the streaming of media content from a wireless device
CN107113460A (zh) * 2015-01-08 2017-08-29 高通股份有限公司 针对空中广播媒体数据的会话描述信息

Also Published As

Publication number Publication date
US20210243243A1 (en) 2021-08-05
CN112585921B (zh) 2023-04-18
WO2020040940A1 (en) 2020-02-27
EP3841722A1 (en) 2021-06-30
EP3841722B1 (en) 2023-12-13
US11368512B2 (en) 2022-06-21

Similar Documents

Publication Publication Date Title
US11206298B2 (en) Method and system utilizing event specific priority in a network controlled uplink media transmission for a collaborative media production
US20210410168A1 (en) Service data transmission method, network device, and terminal device
US11071089B2 (en) Dynamic switching of streaming service between broadcast and unicast delivery
WO2016091298A1 (en) Updating flow-specific qos policies based on information reported from base station
CN111512609B (zh) 将数据从ue流传输到网络中的摄取点的方法和用户设备
WO2019001391A1 (zh) 无线资源调度方法、视频终端及接入网设备
CN112585921B (zh) 提供事件协调的上行链路网络辅助的方法和网络元件
CN112236986B (zh) 用于网络容量受限场景中的协作媒体制作的网络控制上行媒体传送
Barik et al. D2D-assisted user-centric adaptive video transmission in next generation cellular networks
Singhal et al. UE-TV: User-centric energy-efficient HDTV broadcast over LTE and Wi-Fi
CN105794159A (zh) 资源分配
US9635586B2 (en) Method and apparatus for using call admission control for client balancing
CN112585979B (zh) 用于所存储内容的网络控制媒体上传的方法和系统
CN107172652B (zh) 一种基于高层业务信息的基站调度方法及装置
CN111512636A (zh) 视频多播方法、装置及可读存储介质
US20240323748A1 (en) Wireless Communication Utilizing Selective Bonding with Cellular Network Slices and Sub-Slices
US20240372909A1 (en) Prioritization of data streams between a source of audio/video content and telecommunication clients
CN117750424A (zh) 通信方法、通信装置和通信系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant