CN116615906A - 一种流媒体处理方法、系统及设备 - Google Patents

一种流媒体处理方法、系统及设备 Download PDF

Info

Publication number
CN116615906A
CN116615906A CN202180003982.8A CN202180003982A CN116615906A CN 116615906 A CN116615906 A CN 116615906A CN 202180003982 A CN202180003982 A CN 202180003982A CN 116615906 A CN116615906 A CN 116615906A
Authority
CN
China
Prior art keywords
media
ops
media stream
acquired
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180003982.8A
Other languages
English (en)
Inventor
冯峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Publication of CN116615906A publication Critical patent/CN116615906A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本公开提供了一种流媒体处理方法、系统及设备，用于根据显示设备外接的OPS设备进行流媒体处理，在不需要增加额外服务器的同时降低了显示设备的处理负担。该方法包括：从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。

Description

一种流媒体处理方法、系统及设备 技术领域
本公开涉及流媒体技术领域，特别涉及一种流媒体处理方法、系统及设备。
背景技术
传统的视频流的处理方式主要分为两种，一种是通过云服务器进行处理后转发给显示设备进行视频流的显示，另一种是通过显示设备自身进行处理后显示。
目前的方案中，以显示设备的视频会议场景为例，显示设备需要显示多路的视频流，如果由显示设备对多路的视频流进行处理，会给显示设备的中央处理器(central processing unit，CPU)带来很大的负担，造成视频通话的卡顿，如果由服务器对多路的视频流进行处理，还需要额外提供服务器，不仅增加了硬件成本，而且便携性较差。
发明内容
本公开提供一种流媒体处理方法、系统及设备，用于根据显示设备外接的开放式可插拔规范(Open Pluggable Specification，OPS)设备进行流媒体处理，在不需要增加额外服务器的同时降低了显示设备的处理负担。
第一方面，本公开实施例提供的一种流媒体处理方法，包括：
从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
本实施例提供的流媒体处理方法，借助于显示设备外接的OPS设备进行流媒体处理，能够有效分担显示设备的处理压力，而且不需要额外增加硬件 设备，在不需要增加额外服务器的同时降低了显示设备的处理负担。
作为一种可选的实施方式，从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流，包括：
将获取的媒体流拆分成多个媒体单元；
从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
将所述分配的媒体单元确定为所述子媒体流。
本实施例能够通过对媒体流拆分的方式，相比于对媒体流的整体进行分配的方式，提供了一种细粒度更小的分配媒体流的方式，本实施例中的媒体单元可以是同一业务的媒体流划分得到的多个媒体单元，也可以是划分的不同业务的媒体单元。
作为一种可选的实施方式，所述将获取的媒体流拆分成多个媒体单元，包括：
按预设大小，将获取的媒体流拆分成多个媒体单元；或，
按业务类型，将获取的媒体流拆分成多个媒体单元；或，
按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
本实施例提供了多种拆分媒体流的方式，能够针对不同的需求，提供一种更加灵活，对场景的适应性更高的拆分方式。
作为一种可选的实施方式，所述从获取的媒体流中，确定为显示设备外接的OPS设备分配的子媒体流，包括：
根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
本实施例在媒体流的分配问题上，提供了不同的分配方式，基于用户的 不同需求，用户可以灵活选择媒体流的分配方式，提供一种更加灵活，对场景的适应性更高的分配方式。
作为一种可选的实施方式，所述根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流，包括：
若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
作为一种可选的实施方式，所述根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流，包括：
若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
作为一种可选的实施方式，所述利用所述OPS设备对所述子媒体流进行媒体处理，该方法还包括：
利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
作为一种可选的实施方式，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，该方法还包括：
将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
作为一种可选的实施方式，该方法还包括：
通过所述显示设备显示所述OPS设备的配置界面；
响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
本实施例还可以提供一种通过显示设备为OPS设备的媒体处理方式进行配置的方法，更加便携的按照用户的不同需求进行不同的媒体处理，能够提高用户的使用体验。
作为一种可选的实施方式，所述通过所述显示设备显示所述OPS设备的配置界面，包括：
通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
作为一种可选的实施方式，所述对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置，包括：
通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述媒体处理包括解码、转码、视频增强中的至少一种。
第二方面，本公开实施例提供的一种流媒体处理系统，包括：
所述系统包括显示设备、所述显示设备外接的OPS设备；
所述OPS设备，用于从获取的媒体流中确定为自身分配的子媒体流，并对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备；
所述显示设备，用于显示所述OPS媒体流。
第三方面，本公开实施例还提供一种流媒体处理设备，该设备包括处理器和存储器，所述存储器用于存储所述处理器可执行的程序，所述处理器用于读取所述存储器中的程序并执行如下步骤：
从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
作为一种可选的实施方式，所述处理器具体被配置为执行：
将获取的媒体流拆分成多个媒体单元；
从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
将所述分配的媒体单元确定为所述子媒体流。
作为一种可选的实施方式，所述处理器具体被配置为执行：
按预设大小，将获取的媒体流拆分成多个媒体单元；或，
按业务类型，将获取的媒体流拆分成多个媒体单元；或，
按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
作为一种可选的实施方式，所述处理器具体被配置为执行：
根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
作为一种可选的实施方式，所述处理器具体被配置为执行：
若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
作为一种可选的实施方式，所述处理器具体被配置为执行：
若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
作为一种可选的实施方式，所述利用所述OPS设备对所述子媒体流进行媒体处理，所述处理器具体还被配置为执行：
利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
作为一种可选的实施方式，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，所述处理器具体还被配置为执行：
将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
作为一种可选的实施方式，所述处理器具体还被配置为执行：
通过所述显示设备显示所述OPS设备的配置界面；
响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述处理器具体被配置为执行：
通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
作为一种可选的实施方式，所述处理器具体被配置为执行：
通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述媒体处理包括解码、转码、视频增强中的至少一种。
第四方面，本公开实施例还提供一种流媒体处理装置，包括：
分配媒体流单元，用于从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
处理媒体流单元，用于利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
作为一种可选的实施方式，所述分配媒体流单元具体用于：
将获取的媒体流拆分成多个媒体单元；
从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
将所述分配的媒体单元确定为所述子媒体流。
作为一种可选的实施方式，所述分配媒体流单元具体用于：
按预设大小，将获取的媒体流拆分成多个媒体单元；或，
按业务类型，将获取的媒体流拆分成多个媒体单元；或，
按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
作为一种可选的实施方式，所述分配媒体流单元具体用于：
根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
作为一种可选的实施方式，所述分配媒体流单元具体用于：
若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
作为一种可选的实施方式，所述分配媒体流单元具体用于：
若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
作为一种可选的实施方式，所述利用所述OPS设备对所述子媒体流进行媒体处理，还包括处理显示单元具体用于：
利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
作为一种可选的实施方式，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，还包括合并单元具体用于：
将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
作为一种可选的实施方式，还包括配置单元具体用于：
通过所述显示设备显示所述OPS设备的配置界面；
响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述配置单元具体用于：
通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
作为一种可选的实施方式，所述配置单元具体用于：
通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述媒体处理包括解码、转码、视频增强中的至少一种。
第五方面，本公开实施例还提供非瞬态计算机存储介质，其上存储有计算机程序，该程序被处理器执行时用于实现上述第一方面所述方法的步骤。
本公开的这些方面或其他方面在以下的实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种流媒体处理的实施流程图；
图2为本公开实施例提供的一种配置界面的示意图；
图3为本公开实施例提供的一种显示设备和OPS设备的媒体配置的连接方式示意图；
图4为本公开实施例提供的一种流媒体处理系统示意图；
图5为本公开实施例提供的一种显示设备通过OPS设备处理媒体流的示意图；
图6为本公开实施例提供的一种调度分配并处理媒体流的实施流程图；
图7为本公开实施例提供的一种配置OPS并进行媒体资源分配的实施流程图；
图8为本公开实施例提供的一种流媒体处理设备示意图；
图9为本公开实施例提供的一种流媒体处理装置示意图。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开作进一步地详细描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本公开保护的范围。
本公开实施例中术语“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
本公开实施例描述的应用场景是为了更加清楚的说明本公开实施例的技术方案，并不构成对于本公开实施例提供的技术方案的限定，本领域普通技术人员可知，随着新应用场景的出现，本公开实施例提供的技术方案对于类似的技术问题，同样适用。其中，在本公开的描述中，除非另有说明，“多个”的含义是两个或两个以上。
传统的视频流的处理方式主要分为两种，一种是通过云服务器进行处理后转发给显示设备进行视频流的显示，另一种是通过显示设备自身进行处理后显示。目前的方案中，以显示设备的视频会议场景为例，显示设备需要显示多路的视频流，如果由显示设备对多路的视频流进行处理，会给显示设备的中央处理器(central processing unit，CPU)带来很大的负担，造成视频通话的卡顿，如果由服务器对多路的视频流进行处理，还需要额外提供服务器，不仅增加了硬件成本，而且便携性较差。
目前的显示设备由于对各类应用程序APP的兼容性比较差，处理性能不高，因此一般都配置OPS接口，通过OPS接口外接OPS设备实现更多的扩展功能，由于OPS设备中的系统大多为windows系统，对各类APP的兼容性较高，并且OPS设备的处理性能可扩展性较高，可以通过在OPS设备上集成硬件或软件的方式提高OPS设备的处理能力和处理业务的种类。
本公开实施例在目前已有的OPS设备的基础上，无需添加额外的硬件设 备，通过OPS设备为显示设备处理媒体流，减小显示设备进行媒体处理的资源，尤其在多路媒体流同时需要处理的情况下，能够很好的承担媒体处理的任务，降低显示设备的CPU的处理压力，避免在多路视频同时显示的时候，出现卡顿现象，影响用户的使用体验。
本实例设计的核心思想是，利用显示设备外接的OPS设备对至少部分媒体流进行媒体处理，从而分担显示设备的CPU进行媒体处理的压力，然后将媒体处理后的OPS媒体流发送给显示设备，以使显示设备进行相应的处理。
如图1所示，本公开实施例提供的一种流媒体处理的实施流程如下所示：
步骤100、从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
实施中，利用显示设备的OPS接口来外接OPS设备，由于显示设备通常都配置有OPS接口，因此，本实施例可以不对显示设备的硬件进行改进，只需要通过OPS设备进行媒体流的处理，分担显示设备的处理压力，在一些实施例中，显示设备外接的OPS设备可以是一个，也可以是多个，本实施例对此不作过多限定。
在一些实施例中，本实施例中的OPS设备可以通过访问显示设备的CPU确定显示设备的资源占用情况，例如CPU占用情况、任务负载情况等，还可以确定OPS设备自身的资源占用情况，从而根据OPS设备的资源占用情况和显示设备的资源占用情况，确定对媒体流的调度方案，例如选择资源占用较少的设备进行媒体流的处理，最终确定出至少部分媒体流，通过OPS设备进行该部分媒体流的处理。
在一些实施例中，本实施例可以在OPS设备中增加相应的软件功能模块实现媒体流资源的分配，OPS设备可以通过访问显示设备的CPU和查找自身CPU的占用情况，确定为自身分配的子媒体流，并将剩余未分配的交给显示设备处理。可选的，可以将获取的媒体流中的全部都分配给OPS进行处理，也可以将获取的媒体流中的部分分配给OPS处理，剩余的部分分配给显示设备处理。
步骤101、利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
实施中，利用OPS设备进行部分媒体流的处理后，得到OPS媒体流，将OPS媒体流发送给显示设备进行相应的显示或处理。
在一些实施例中，本实施例可以通过显示设备的OPS设备对不同类型的媒体流进行处理，包括但不限于视频流等其他类型的媒体流。实施中，如果获取的媒体流为多路视频流，则可以将多路视频流中的至少一路视频流通过OPS设备进行处理后，发送给显示设备进行显示，例如在多人视频会议时，通过OPS设备先对多路视频进行处理后，再发送给显示设备进行显示，能够有效避免通过显示设备处理多路视频时造成的视频通话卡顿现象。
在一些实施例中，为了能更好的利用OPS设备进行媒体流的媒体处理，本实施例还可以将获取的媒体流先进行拆分后再分配给OPS设备、显示设备进行相应的处理。
在一些实施例中，首先，将获取的媒体流拆分成多个媒体单元；其次，从多个媒体单元中，确定为所述OPS设备分配的媒体单元；最后，将所述分配的媒体单元确定为所述子媒体流。需要说明的是，本实施例中的多个媒体单元包括但不限于两个媒体单元及两个以上的媒体单元。
在一些实施例中，具体的媒体流的拆分方式包括但不限于如下任意一种或任意多种：
拆分方式1、按预设大小拆分。
实施中，按预设大小，将获取的媒体流拆分成多个媒体单元，从多个媒体单元中确定为所述OPS设备分配的媒体单元，将所述分配的媒体单元确定为所述子媒体流。
具体的，可以先将获取的媒体流拆分成固定大小的多个媒体单元，然后从拆分后的多个媒体单元中，确定由OPS设备处理的媒体单元，如果为OPS设备分配媒体单元后，还存在剩余未分配的媒体单元，则将剩余未分配的媒体单元发送给显示设备进行媒体处理。
拆分方式2、按业务类型拆分。
实施中，按业务类型，将获取的媒体流拆分成多个媒体单元，从多个媒体单元中确定为所述OPS设备分配的媒体单元，将所述分配的媒体单元确定为所述子媒体流。
具体的，可以先将获取的媒体流拆分成多个媒体单元，每个媒体单元对应同一种业务，例如将媒体流按照同一种业务进行拆分，例如将N路媒体流拆分成N个媒体单元，N为正整数，其中任意一路媒体流表示一种业务，N路媒体流则表示N种业务，将N路媒体流按N种业务进行拆分后，得到的每个媒体单元对应同一种业务，即对应同一路媒体流，例如将N路会话拆分后得到的任一个媒体单元对应N路会话中的其中一路会话。然后从拆分后的多个媒体单元中，确定为OPS设备分配的媒体单元，如果为OPS设备分配媒体单元后，还存在剩余未分配的媒体单元，则将剩余未分配的媒体单元发送给显示设备进行媒体处理。
拆分方式3、按第一资源空闲率拆分。
实施中，按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元，从多个媒体单元中确定为所述OPS设备分配的媒体单元，将所述分配的媒体单元确定为所述子媒体流。其中，第一资源空闲率包括但不限于CPU空闲率、任务负载中的至少一种。
具体的，根据第一资源空闲率的大小，确定拆分的媒体单元的拆分大小，从而将获取的媒体流按照拆分大小进行拆分，从拆分后得到的多个媒体单元中为OPS设备分配媒体单元，将分配的媒体单元确定为OPS设备的子媒体流。
拆分方式4、按第二资源空闲率拆分。
实施中，按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元，从多个媒体单元中确定为所述OPS设备分配的媒体单元，将所述分配的媒体单元确定为所述子媒体流。其中，第二资源空闲率包括但不限于CPU空闲率、任务负载中的至少一种。
具体的，根据第二资源空闲率的大小，确定拆分的媒体单元的拆分大小， 从而将获取的媒体流按照拆分大小进行拆分，从拆分后得到的多个媒体单元中为OPS设备分配媒体单元，将分配的媒体单元确定为OPS设备的子媒体流。
本实施例提供了多种媒体流的拆分方式，能够适应更多的应用场景，使得OPS设备能够处理的媒体流的内容更加丰富，能够依据不同条件进行不同大小的媒体流的拆分，本实施例提供的上述拆分方式可以独立实施，也可以组合实施，例如将拆分方式1和拆分方式3进行组合实施，根据与拆分方式1预先定义的业务，将与该业务对应的媒体流按照拆分方式1的方式进行拆分；同样的，根据与拆分方式3预先定义的业务，将与该业务对应的媒体流按照拆分方式3的方式进行拆分。
在一些实施例中，为了能够更加动态的根据当前显示设备和OPS设备的任务负载、资源占用等情况，分配视频流，本实施例提供了如下任意一种或任意多种分配媒体流的方式：
分配方式1、按照显示设备优先的分配原则。
实施中，根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
在该方式下，显示设备处理媒体流的优先级高于OPS设备处理媒体流的优先级，实施中，优先根据显示设备的第一资源空闲率，确定为OPS设备分配的媒体流。
在一些实施例中，本实施例通过如下方式进行媒体流的分配：
具体分配方式1a，通过和阈值比较确定显示设备优先分配。
实施中，若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
在该分配方式的情况中，通过将显示设备的第一资源空闲率和预先设置的第一阈值进行比较，如果第一资源空闲率大于第一阈值，那么说明此时显示设备有能力处理媒体流，从获取的媒体流中确定出与该第一资源空闲率对应的第一媒体流，即从媒体流中为显示设备分配与该显示设备当前的处理能 力匹配的第一媒体流，最后，将媒体流中除第一媒体流以外，剩余的媒体流分配给OPS设备进行媒体处理。即将媒体流减去第一媒体流得到的媒体流，确定为OPS设备处理的子媒体流。
具体分配方式1b，通过显示设备和OPS设备的相互比较确定显示设备优先分配。
在该分配方式的情况中，若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
在该情况下，可以通过对显示设备的资源占用情况和OPS设备的资源占用情况进行动态比较，当确定所述第一资源空闲率大于所述第二资源空闲率时，说明此时显示设备相比OPS设备更有能力处理媒体流，从获取的媒体流中确定出与该第一资源空闲率对应的第一媒体流，即从媒体流中为显示设备分配与该显示设备当前的处理能力匹配的第一媒体流，最后，将媒体流中除第一媒体流以外，剩余的媒体流分配给OPS设备进行媒体处理。即将媒体流减去第一媒体流得到的媒体流，确定为OPS设备处理的至少部分媒体流。
分配方式2、按照OPS设备的优先原则分配。
实施中，根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
在该方式下，OPS设备处理媒体流的优先级高于显示设备处理媒体流的优先级，实施中，优先根据OPS设备的第二资源空闲率，确定为OPS设备分配的媒体流。
在一些实施例中，本实施例通过如下方式进行媒体流的分配：
具体分配方式2a，通过和阈值比较确定OPS设备优先分配。
实施中，若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；
在该分配方式的情况中，通过将OPS设备的第二资源空闲率和预先设置 的第二阈值进行比较，如果第二资源空闲率大于第二阈值，那么说明此时OPS设备有能力处理媒体流，从获取的媒体流中确定出与该第二资源空闲率对应的第二媒体流，即从媒体流中为OPS设备分配与该OPS设备当前的处理能力匹配的媒体流，最后，将媒体流中除第二媒体流以外，剩余的媒体流分配给显示设备进行媒体处理。即将媒体流减去第二媒体流得到的媒体流，确定为显示设备处理的媒体流。
具体分配方式2b，通过显示设备和OPS设备的相互比较确定OPS设备优先分配。
实施中，若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
在该分配方式的情况中，可以通过对显示设备的资源占用情况和OPS设备的资源占用情况进行动态比较，当确定所述第二资源空闲率大于等于所述第一资源空闲率时，说明此时OPS设备有能力处理媒体流，从获取的媒体流中确定出与该第二资源空闲率对应的第二媒体流，即从媒体流中为OPS设备分配与该OPS设备当前的处理能力匹配的第一媒体流，最后，将媒体流中除第二媒体流以外，剩余的媒体流分配给显示设备进行媒体处理。
在一些实施例中，为OPS设备分配媒体流之后，如果还存在剩余的媒体流，则利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
在一些实施例中，如果相同业务的媒体流拆分成两部分，一部分分配给OPS设备进行媒体处理，另一部分分配给显示设备进行媒体处理，则本实施例还可以将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
具体实施中，例如获取的媒体流中包括多路视频流(例如多人视频会议的情况)，其中一路视频流被拆分成两个视频单元，一个视频单元分配给OPS设备进行媒体处理，另一个视频单元分配给显示设备进行媒体处理，那么都 处理完成后，将OPS设备处理后得到的OPS媒体流和显示设备处理后得到的显示媒体流进行合并，得到合并媒体流，即得到该一路视频流的处理后待显示的视频流，通过显示设备显示该合并媒体流。
在一些实施例中，为了方便用户通过显示设备的显示界面实现对OPS设备的功能配置，本实施例还提供如下的配置步骤：
1)通过所述显示设备显示所述OPS设备的配置界面；如图2所示，本实施例提供了一种配置界面的示意图。用户可以通过配置界面的配置项，选择对应的配置项进行媒体处理。
在一些实施例中，具体显示的方式包括但不限于如下任意一种或任意多种：
1a)通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；
1b)通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
1c)通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的一部分配置界面，以及通过所述显示设备的网页浏览器，显示所述OPS设备的另一部分配置界面。
用户可以通过显示设备的触摸屏打开显示设备上应用程序APP中内置的网页Webview或者直接打开显示设备的网页浏览器，通过URL(Uniform Resource Locator，统一资源定位器)加载出OPS设备中的配置界面，通过HTTP协议与OPS设备通讯，接收用户在显示设备的配置界面的输入指令，设置OPS设备。
2)响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
实施中，通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
具体实施中，可以在OPS设备中集成网页服务器web server，在显示设备上运行网页浏览器web browser，通过网页浏览器访问OPS设备中的网页服 务器，然后通过用户在网页浏览器显示的配置界面中输入的配置项，对OPS设备进行相关的配置。
如图3所示，本实施例提供一种显示设备和OPS设备的媒体配置的连接方式。显示设备300包括触摸屏300a和应用程序内置网页或网页浏览器300b，OPS设备301包括网页服务器301a，媒体处理模块301b。用户通过触摸屏上应用程序内置网页或网页浏览器300b显示的配置界面，进行配置项的输入，将输入的配置项通过HTTP协议发送给OPS设备的网页服务器301a，网页服务器控制媒体处理模块301b进行相应的媒体处理。
在一些实施例中，本实施例中的媒体处理包括但不限于解码、转码、视频增强中的至少一种。
实施中，用户通过配置界面对OPS设备的媒体处理方式进行相关配置，配置的主要内容包括但不限于转码方式、视频增强方式以及分配优先级：
配置项1、转码。
实施中，用户可以设置OPS设备是否需要转码，或者需要转换成哪种类型的编码。例如嵌入在web媒体的播放器只支持H.264的解码格式，所以需要对媒体流进行转码，转为H.264后才可以实现正常播放。
配置项2、视频增强。
实施中，通过在OPS设备上集成一些软件或硬件的人工智能(Artificial Intelligence，AI)处理模块，可以对视频流进行降噪、美化、超分等处理。本实施例中的视频增强模块可以用软件来实现，也可以结合专用的芯片硬件来实现，如果采用软件实现的方式，那么使用OPS设备的CPU来运行AI算法，如果是结合专用的芯片例如图形处理器(Graphics Processing Unit，GPU)、网络处理器(Neural-network Processing Unit，NPU)、数字信号处理(Digital Signal Process，DSP)，那么就可以利用GPU、NPU、DSP等资源来进行媒体处理，减轻OPS设备的CPU的压力，本实施例中的降噪算法、美化算法和超分算法只是举例说明，可根据业务需求集成其他的AI算法模块，本实施例对此不作过多限定。
配置项3、分配优先级。
本实施例主要提供三种方式：第一种，显示设备优先，即在显示设备的CPU占有率和OPS设备CPU占有率都低于对应的阈值的情况下，优先让显示设备进行媒体处理；第二种、OPS设备优先，即在显示设备的CPU占有率和OPS设备的CPU占有率都低于对应的阈值的情况下，优先让OPS设备进行媒体处理；第三种、动态方式，即在实时获取显示设备和OPS设备的CPU占有率，优先让CPU占有率低的设备进行媒体处理。
在具体进行媒体流的调度时，可以先将获取的媒体流进行拆解，得到多个媒体流单元，同时按照业务将媒体流划分为多个会话，一般一个会话用于表征一路媒体流，那么在调度的时候，将会话作为最小的调度单位，在每个会话包含的媒体流单元全部完成媒体处理后，统一将该会话进行调度处理，例如传输给显示设备进行显示。
在一些实施例中，本公开实施例还提供一种流媒体处理系统，如图4所示，包括显示设备400、OPS设备401；其中：
本实施例中的OPS设备401，用于执行分配、调度、媒体处理等功能，实施中，从获取的媒体流中确定为自身分配的子媒体流，并对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备；还可以确定为显示设备分配的媒体流，从而分发给显示设备进行处理后得到显示媒体流。
所述显示设备400，用于显示所述OPS媒体流。还可以接收OPS设备分配的媒体流并进行媒体处理，得到显示媒体流，并进行显示。
本实施例获取媒体流的方式包括但不限于：通过云服务器获取媒体流，或者通过显示设备的本地网络摄像头的媒体流。本实施例对获取媒体的方式不作过多限定。如图5所示，本实施例提供了一种显示设备通过OPS设备处理媒体流的示意图，图中可知，通过云服务或者本地网络摄像头获取的媒体流都先传输给OPS设备，OPS设备先将媒体流都拆分成多个媒体单元，再确 定为自身和显示设备分配的媒体单元，将为自身分配的媒体单元进行媒体处理后，传输给显示设备进行显示，如果有多路视频流，则显示设备能够同时显示多路处理后的视频。另外，显示设备还可以通过网页浏览器或APP内置网页进行OPS设备的相关配置，并通过超文本传输协议(Hyper Text Transfer Protocol，HTTP)协议传输给OPS设备的网页服务器对OPS设备的媒体处理方式进行相应的配置。
本实施例将获取的媒体流先交由OPS设备进行处理后再传输给显示设备进行显示。OPS设备可以先对媒体流进行拆分后，再进行分配。在一些实施例中，OPS设备进行拆分的依据可以是按预设大小，也可以是按所述显示设备的第一资源空闲率，还可以是按所述显示设备的第二资源空闲率，本实施例不作过多限定。
在一些实施例中，本实施例中的可以基于显示设备的第一资源空闲率、OPS设备的第二资源空闲率中的至少一种，从获取的媒体流中确定为所述OPS设备分配的子媒体流，以及确定为显示设备分配的媒体流。
在一些实施例中，如图6所示，本公开实施例还提供一种调度分配并处理媒体流的实施流程，具体如下所示：
步骤600、获取媒体流；
步骤601、将获取的媒体流拆分成多个媒体单元；
步骤602、根据所述OPS设备的第二资源空闲率，从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
步骤603、通过OPS设备对分配的媒体单元进行媒体处理；
步骤604、将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
步骤605、利用显示设备，对多个媒体单元中除分配给OPS设备以外的媒体单元进行媒体处理，得到显示媒体流。
步骤606、利用显示设备，对OPS媒体流和显示媒体流进行显示。
在一些实施例中，如图7所示，本实施例提供一种配置OPS并进行媒体资源分配的实施流程，具体如下：
步骤700、通过显示设备显示OPS设备的配置界面；
步骤701、响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
步骤702、获取媒体流，并将获取的媒体流拆分成多个媒体单元；
步骤703、确定媒体流的分配方式；
步骤704、若显示设备优先分配，则根据显示设备的第一资源空闲率，从多个媒体单元确定为所述OPS设备分配的媒体单元；
步骤705、若OPS设备优先分配，则根据OPS设备的第二资源空闲率，从多个媒体单元确定为所述OPS设备分配的媒体单元；
步骤706、若动态分配，则从多个媒体单元中确定为第一资源空闲率和第二资源空闲率中的较小值对应的设备分配的媒体单元；
其中步骤704～步骤706，没有先后顺序。
步骤707、利用OPS设备对分配的媒体单元进行媒体处理，得到OPS媒体流；
步骤708、利用显示设备，对多个媒体单元中除分配给OPS设备以外的媒体单元进行媒体处理，得到显示媒体流。
步骤709、利用显示设备，对OPS媒体流和显示媒体流进行显示。
基于相同的公开构思，本公开实施例还提供了一种流媒体处理设备，由于该设备即是本公开实施例中的方法中的设备，并且该设备解决问题的原理与该方法相似，因此该设备的实施可以参见方法的实施，重复之处不再赘述。需要说明的是本实施例中的流媒体处理设备可以是OPS设备，将本实施例中的流媒体处理方法应用于OPS设备上。
如图8所示，该设备包括处理器800和存储器801，所述存储器801用于存储所述处理器800可执行的程序，所述处理器800用于读取所述存储器801中的程序并执行如下步骤：
从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备 分配的子媒体流；
利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
将获取的媒体流拆分成多个媒体单元；
从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
将所述分配的媒体单元确定为所述子媒体流。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
按预设大小，将获取的媒体流拆分成多个媒体单元；或，
按业务类型，将获取的媒体流拆分成多个媒体单元；或，
按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
作为一种可选的实施方式，所述利用所述OPS设备对所述子媒体流进行媒体处理，所述处理器800具体还被配置为执行：
利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
作为一种可选的实施方式，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，所述处理器800具体还被配置为执行：
将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
作为一种可选的实施方式，所述处理器800具体还被配置为执行：
通过所述显示设备显示所述OPS设备的配置界面；
响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
作为一种可选的实施方式，所述处理器800具体被配置为执行：
通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述媒体处理包括解码、转码、视频增强中 的至少一种。
基于相同的公开构思，本公开实施例还提供了一种流媒体处理装置，由于该设备即是本公开实施例中的方法中的设备，并且该设备解决问题的原理与该方法相似，因此该设备的实施可以参见方法的实施，重复之处不再赘述。
如图9所示，该装置包括：
分配媒体流单元900，用于从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
处理媒体流单元901，用于利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
作为一种可选的实施方式，所述分配媒体流单元900具体用于：
将获取的媒体流拆分成多个媒体单元；
从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
将所述分配的媒体单元确定为所述子媒体流。
作为一种可选的实施方式，所述分配媒体流单元900具体用于：
按预设大小，将获取的媒体流拆分成多个媒体单元；或，
按业务类型，将获取的媒体流拆分成多个媒体单元；或，
按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
作为一种可选的实施方式，所述分配媒体流单元900具体用于：
根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
作为一种可选的实施方式，所述分配媒体流单元900具体用于：
若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
作为一种可选的实施方式，所述分配媒体流单元900具体用于：
若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
作为一种可选的实施方式，所述利用所述OPS设备对所述子媒体流进行媒体处理，还包括处理显示单元具体用于：
利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
作为一种可选的实施方式，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，还包括合并单元具体用于：
将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
作为一种可选的实施方式，还包括配置单元具体用于：
通过所述显示设备显示所述OPS设备的配置界面；
响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述配置单元具体用于：
通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
作为一种可选的实施方式，所述配置单元具体用于：
通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
作为一种可选的实施方式，所述媒体处理包括解码、转码、视频增强中的至少一种。
基于相同的公开构思，本公开实施例还提供了一种非瞬态计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如下步骤：
从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的 装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (15)

  1. 一种流媒体处理方法，其中，该方法包括：
    从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流；
    利用所述OPS设备对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备。
  2. 根据权利要求1所述的方法，其中，从获取的媒体流中，确定为显示设备外接的开放式可插拔规范OPS设备分配的子媒体流，包括：
    将获取的媒体流拆分成多个媒体单元；
    从多个媒体单元中，确定为所述OPS设备分配的媒体单元；
    将所述分配的媒体单元确定为所述子媒体流。
  3. 根据权利要求2所述的方法，其中，所述将获取的媒体流拆分成多个媒体单元，包括：
    按预设大小，将获取的媒体流拆分成多个媒体单元；或，
    按业务类型，将获取的媒体流拆分成多个媒体单元；或，
    按所述显示设备的第一资源空闲率，将获取的媒体流拆分成多个媒体单元；或，
    按所述OPS设备的第二资源空闲率，将获取的媒体流拆分成多个媒体单元。
  4. 根据权利要求1所述的方法，其中，所述从获取的媒体流中，确定为显示设备外接的OPS设备分配的子媒体流，包括：
    根据所述显示设备的第一资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流；或，
    根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流。
  5. 根据权利要求4所述的方法，其中，所述根据所述显示设备的第一资 源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流，包括：
    若确定所述第一资源空闲率大于第一阈值，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流；或，
    若确定所述第一资源空闲率大于所述第二资源空闲率，则从获取的媒体流中确定与所述第一资源空闲率对应的第一媒体流，根据所述获取的媒体流和所述第一媒体流，确定所述子媒体流。
  6. 根据权利要求4所述的方法，其中，所述根据所述OPS设备的第二资源空闲率，从获取的媒体流中确定为所述OPS设备分配的子媒体流，包括：
    若确定所述第二资源空闲率大于第二阈值，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流；或，
    若确定所述第二资源空闲率大于等于所述第一资源空闲率，则从获取的媒体流中确定与所述第二资源空闲率对应的第二媒体流，将所述第二媒体流确定为所述子媒体流。
  7. 根据权利要求1～6任一所述的方法，其中，所述利用所述OPS设备对所述子媒体流进行媒体处理，该方法还包括：
    利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流。
  8. 根据权利要求7所述的方法，其中，所述利用所述显示设备，对获取的媒体流中除所述子媒体流以外的媒体流进行媒体处理，得到显示媒体流之后，该方法还包括：
    将所述OPS媒体流和所述显示媒体流中属于相同业务的部分进行合并，得到合并媒体流，并通过显示设备显示所述合并媒体流。
  9. 根据权利要求1～6、8任一所述的方法，其中，该方法还包括：
    通过所述显示设备显示所述OPS设备的配置界面；
    响应于用户在所述配置界面的输入指令，对所述OPS设备的媒体处理的 方式进行与所述输入指令对应的配置。
  10. 根据权利要求9所述的方法，其中，所述通过所述显示设备显示所述OPS设备的配置界面，包括：
    通过所述显示设备的应用程序中内置的网页，显示所述OPS设备的配置界面；或，
    通过所述显示设备的网页浏览器，显示所述OPS设备的配置界面。
  11. 根据权利要求9所述的方法，其中，所述对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置，包括：
    通过所述OPS设备的网页服务器，对所述OPS设备的媒体处理方式进行与所述输入指令对应的配置。
  12. 根据权利要求1～6、8、10～11任一所述的方法，其中，所述媒体处理包括解码、转码、视频增强中的至少一种。
  13. 一种流媒体处理系统，其中，所述系统包括显示设备、所述显示设备外接的OPS设备；
    所述OPS设备，用于从获取的媒体流中确定为自身分配的子媒体流，并对所述子媒体流进行媒体处理，将所述媒体处理后得到的OPS媒体流发送给所述显示设备；
    所述显示设备，用于显示所述OPS媒体流。
  14. 一种流媒体处理设备，其中，该设备包括处理器和存储器，所述存储器用于存储所述处理器可执行的程序，所述处理器用于读取所述存储器中的程序并执行权利要求1～12任一所述方法的步骤。
  15. 一种非瞬态计算机存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如权利要求1～12任一所述方法的步骤。
CN202180003982.8A 2021-12-15 2021-12-15 一种流媒体处理方法、系统及设备 Pending CN116615906A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/138264 WO2023108468A1 (zh) 2021-12-15 2021-12-15 一种流媒体处理方法、系统及设备

Publications (1)

Publication Number Publication Date
CN116615906A true CN116615906A (zh) 2023-08-18

Family

ID=86774995

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180003982.8A Pending CN116615906A (zh) 2021-12-15 2021-12-15 一种流媒体处理方法、系统及设备

Country Status (2)

Country Link
CN (1) CN116615906A (zh)
WO (1) WO2023108468A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8380864B2 (en) * 2006-12-27 2013-02-19 Microsoft Corporation Media stream slicing and processing load allocation for multi-user media systems
CN102695036B (zh) * 2011-03-25 2015-01-21 鸿富锦精密工业（深圳）有限公司 视讯会议系统及其使用方法
US10366017B2 (en) * 2018-03-30 2019-07-30 Intel Corporation Methods and apparatus to offload media streams in host devices
CN112399252B (zh) * 2019-08-14 2023-03-14 浙江宇视科技有限公司 软硬解码控制方法、装置及电子设备
CN212012861U (zh) * 2020-04-01 2020-11-24 深圳市鸿合创新信息技术有限责任公司 信号转换装置、显示设备及显示系统

Also Published As

Publication number Publication date
WO2023108468A1 (zh) 2023-06-22

Similar Documents

Publication Publication Date Title
US10165028B2 (en) Context-aware streaming of digital content
CN114501062B (zh) 视频渲染协同方法、装置、设备及存储介质
CN105635751B (zh) 一种视频云平台播放视频的方法及装置
JP7386990B2 (ja) ビデオ再生方法、装置、機器及びコンピュータプログラム
CN110650347B (zh) 多媒体数据的处理方法及装置
CN108965884B (zh) 一种转码任务的分配方法及调度设备、转码设备
CN110324721B (zh) 一种视频数据处理方法、装置及存储介质
CN104349177B (zh) 一种在桌面云下转向播放多媒体文件的方法、虚拟机及系统
CN110442610A (zh) 负载均衡的方法、装置、计算设备以及介质
CN113157418A (zh) 服务器资源分配方法和装置、存储介质及电子设备
CN103200350A (zh) 一种非线性云编辑方法
US11562772B2 (en) Video processing method, electronic device, and storage medium
CN105610869B (zh) 一种流媒体的调度方法及装置
CN108920274B (zh) 用于图像处理服务器端的性能优化及装置
US20170171579A1 (en) Method and Device for Transcoding Live Video
CN114513506A (zh) 业务处理方法、接入边缘云服务器及业务处理系统
CN115445194A (zh) 游戏的渲染方法、装置、设备及存储介质
CN114598931A (zh) 一种多开云游戏的串流方法、系统、装置及介质
CN106331764A (zh) 一种全景视频分享方法及其分享装置
CN110784731B (zh) 一种数据流转码方法、装置、设备及介质
CN105163197A (zh) 一种即时视频的编码方法和电子设备
CN116615906A (zh) 一种流媒体处理方法、系统及设备
US20230018087A1 (en) Data coding method and apparatus, and computer-readable storage medium
CN110704182A (zh) 深度学习的资源调度方法、装置及终端设备
CN116456496A (zh) 资源调度的方法、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination