CN113038183A - 基于多处理器系统的视频处理方法、系统、设备及介质 - Google Patents

基于多处理器系统的视频处理方法、系统、设备及介质 Download PDF

Info

Publication number
CN113038183A
CN113038183A CN202110327895.XA CN202110327895A CN113038183A CN 113038183 A CN113038183 A CN 113038183A CN 202110327895 A CN202110327895 A CN 202110327895A CN 113038183 A CN113038183 A CN 113038183A
Authority
CN
China
Prior art keywords
video
component
processor system
processor
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110327895.XA
Other languages
English (en)
Other versions
CN113038183B (zh
Inventor
胡昌威
胡小鹏
李婧
周晨
白元明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Keda Technology Co Ltd
Original Assignee
Suzhou Keda Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Keda Technology Co Ltd filed Critical Suzhou Keda Technology Co Ltd
Priority to CN202110327895.XA priority Critical patent/CN113038183B/zh
Publication of CN113038183A publication Critical patent/CN113038183A/zh
Application granted granted Critical
Publication of CN113038183B publication Critical patent/CN113038183B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明提供了一种基于多处理器系统的视频处理方法、系统、设备及介质，所述方法包括：第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立各个组件之间的视频传输通道，并确定预设视频流转顺序；从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，并将处理后的编码视频流发送至所对应的视频会议终端。本发明可以由第一处理器系统和视频处理器系统中的各个组件根据视频传输通道中预设视频流转顺序来依次对视频进行传输和处理，从而解决了现有技术中单个处理器系统中处理能力不足的问题。

Description

基于多处理器系统的视频处理方法、系统、设备及介质
技术领域
本发明涉及数据处理技术领域，尤其涉及一种基于多处理器系统的视频处理方法、系统、设备及介质。
背景技术
一个视频会议系统一般由多点控制单元(Microcontroller Unit,MCU)、终端(Mobile Terminal,MT)、网守(GateKeeper,GK)等几个部分组成。各种不同的终端都呼入MCU进行集中管控和交换，组成一个视频会议网络。多点视频处理单元(Multipoint VideoProcessing Unit,MVPU)是MCU的重要组成部分，负责对来自于各终端的视频进行处理和交换，最终使各终端都能得到自己各自的视频流。传统的视频会议多点视频处理单元在进行超高清(3840*2160)的多画面(25画面)合成时由于受限于总的解码能力一般让参与画面合成的各终端各发一路标清(768*432)视频，然后在单个的处理器系统上对多路标清视频进行解码合成一路超高清视频，但如果这时会议中存在另一个超高清4画面合成,则其中的一个画面大小为1920*1080，如果采用终端发的标清视频，则画面质量较差，或如果参与视频会议中的某一方想选看另一视频会议终端时，也只能看到标清图像，一种解决方案是让被选看的终端同时发多路视频，但这又可能受限于终端编码能力或线路带宽无法实现。
发明内容
针对现有技术中的问题，本发明的目的在于提供一种基于多处理器系统的视频处理方法、系统、设备及介质，基于多个处理器系统解决单个处理器系统处理能力不足的问题，充分提高视频处理能力。
本发明实施例提供一种基于多处理器系统的视频处理方法，包括如下步骤：
S100：第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
S200：从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并发送至所对应的视频会议终端。
本发明通过采用该基于多处理器系统的视频处理方法，首先由第一处理器系统在自身和视频处理器系统中分别创建各个功能组件并建立各个功能组件之间的预设视频流转顺序，由此，在从各个视频会议终端接收到待处理的编码视频流时，可以由第一处理器系统和视频处理器系统中的各个组件根据视频传输通道中预设视频流转顺序来依次对视频进行传输和处理，得到处理后的编码视频流，并发送给各个视频会议终端，从而解决了现有技术中单个处理器系统中处理能力不足的问题，充分利用多处理器系统的处理能力，提高视频处理速度，并且满足用户的各种需求。
在一些实施例中，所述视频处理组件包括视频解码组件、视频编码组件和画面合成组件，所述视频传输通道中的预设视频流转顺序为从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的顺序。
在一些实施例中，所述步骤S100包括如下步骤：
第一处理器系统获取视频会议的业务需求，所述业务需求包括视频会议终端信息和各个视频会议终端的画面合成需求，所述画面合成需求包括合成画面数量、待合成画面来源终端信息、合成画面需求方终端信息；
第一处理器系统根据所述业务需求在自身创建网络接收组件和网络发送组件，并根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件；
所述第一处理器系统根据所述业务需求建立从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。
在一些实施例中，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，包括：
在所述视频处理器系统中确定至少一个第二处理器系统、至少一个第三处理器系统和至少一个第四处理器系统，在所述第二处理器系统、所述第三处理器系统和所述第四处理器系统中分别创建所述视频解码组件、所述视频编码组件和所述画面合成组件。
在一些实施例中，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，还包括如下步骤：
根据所述画面合成需求确定画面缩放需求；
根据所述画面缩放需求在所述视频处理器系统中创建缩放组件，所述视频解码组件通过所述缩放组件连接至所对应的画面合成组件。
在一些实施例中，所述第一处理器系统还用于在所述业务需求中包括至少一视频会议终端的单个画面查看需求时，根据所述画面查看需求中的画面来源终端信息和画面需求方终端信息，建立从所述网络接收组件依次通过所述视频解码组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。
在一些实施例中，不同的处理器系统之间的视频传输管道为PCIE通信管道。
本发明实施例还提供一种基于多处理器系统的视频处理系统，应用于所述的基于多处理器系统的视频处理方法，所述视频处理系统包括第一处理器系统和视频处理器系统，其中：
所述第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
所述第一处理器系统从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并通过所述第一处理器系统发送至所对应的视频会议终端。
本发明通过采用该基于多处理器系统的视频处理系统，首先由第一处理器系统在自身和视频处理器系统中分别创建各个功能组件并建立各个功能组件之间的预设视频流转顺序，由此，在从各个视频会议终端接收到待处理的编码视频流时，可以由第一处理器系统和视频处理器系统中的各个组件根据视频传输通道中预设视频流转顺序来依次对视频进行传输和处理，得到处理后的编码视频流，并发送给各个视频会议终端，从而解决了现有技术中单个处理器系统中处理能力不足的问题，充分利用多处理器系统的处理能力，提高视频处理速度，并且满足用户的各种需求。
本发明实施例还提供一种基于多处理器系统的视频处理设备，包括：
处理器；
存储器，其中存储有所述处理器的可执行指令；
其中，所述处理器配置为经由执行所述可执行指令来执行所述的基于多处理器系统的视频处理方法的步骤。
通过采用本发明所提供的基于多处理器系统的视频处理设备，所述处理器在执行所述可执行指令时执行所述的基于多处理器系统的视频处理方法，由此可以获得上述基于多处理器系统的视频处理方法的有益效果。
本发明实施例还提供一种计算机可读存储介质，用于存储程序，所述程序被处理器执行时实现所述的基于多处理器系统的视频处理方法的步骤。
通过采用本发明所提供的计算机可读存储介质，其中存储的程序在被执行时实现所述的基于多处理器系统的视频处理方法的步骤，由此可以获得上述基于多处理器系统的视频处理方法的有益效果。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显。
图1是本发明一实施例的基于多处理器系统的视频处理方法的流程图；
图2是本发明一实施例的第一处理器系统创建各个组件的流程图；
图3是本发明一实施例的对待处理的视频进行处理的流程图；
图4是本发明一实施例的基于多处理器系统的视频处理系统的示意图；
图5是本发明一具体实例的基于多处理器系统的视频处理系统的示意图；
图6～图8是本发明一具体实例的三种预设视频流转顺序的示意图；
图9是本发明一实施例的基于多处理器系统的视频处理设备的结构示意图；
图10是本发明一实施例的计算机存储介质的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的实施方式；相反，提供这些实施方式使得本发明将全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的结构，因而将省略对它们的重复描述。
如图1所示，在一实施例中，本发明提供了一种基于多处理器系统的视频处理方法，包括如下步骤：
S100：第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
S200：从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并发送至所对应的视频会议终端。
本发明通过采用该基于多处理器系统的视频处理方法，首先通过步骤S100，由第一处理器系统在自身和视频处理器系统中分别创建各个功能组件并建立各个功能组件之间的预设视频流转顺序，由此，在步骤S200中，在从各个视频会议终端接收到待处理的编码视频流时，可以由第一处理器系统和视频处理器系统中的各个组件根据视频传输通道中预设视频流转顺序来依次对视频进行传输和处理，得到处理后的编码视频流，并发送给各个视频会议终端，从而解决了现有技术中单个处理器系统中处理能力不足的问题，充分利用多处理器系统的处理能力，提高视频处理速度，并且满足用户的各种需求。
具体地，所述网络接收组件和所述网络发送组件用于与视频会议终端通信，所述网络接收组件用于从各个所述视频会议终端接收待处理的编码视频流，所述视频处理组件用于对所述待处理的编码视频流进行解码、画面合成、编码等处理，得到处理后的编码视频流，然后由所述网络发送组件将所述处理后的编码视频流发送至所对应的视频会议终端。
所述网络接收组件与提供视频流的所述视频会议终端之间可以是一一对应的关系，也可以是一对多或多对一的关系。所述网络发送组件与需要接收视频流的所述视频会议终端之间可以是一一对应的关系，也可以是一对多或多对一的关系。
在该实施例中，所述视频处理组件包括视频解码组件、视频编码组件和画面合成组件，所述视频传输通道中的预设视频流转顺序为从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的顺序。其中，所述视频解码组件用于对所述待处理的编码视频流进行解码，所述画面合成组件用于将解码后的多个视频流的画面进行合成，得到合成的视频流，所述视频编码组件用于将合成后的视频流进行编码，得到编码后的视频流，然后通过所述网络发送组件发送给所对应的视频会议终端。
如图2所示，在该实施例中，所述步骤S100包括如下步骤：
S110：第一处理器系统获取视频会议的业务需求，所述业务需求包括视频会议终端信息和各个视频会议终端的画面合成需求。
其中，所述画面合成需求包括合成画面数量、待合成画面来源终端信息、合成画面需求方终端信息，画面合成需求可以包括多个，例如一个画面合成需求为25画面合成，则该画面合成需求包括合成画面数量为25、需要合成的25个画面对应的视频会议终端信息和将该25合成画面提供给哪一个或哪几个视频会议终端的信息，又例如，另一个画面合成需求为4画面合成，则该画面合成需求包括合成画面数量为4、需要合成的4个画面对应的视频会议终端信息和将该4合成画面提供给哪一个或哪几个视频会议终端的信息；
S120：第一处理器系统根据所述业务需求在自身创建网络接收组件和网络发送组件，并根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件。
具体地，对应于每一个提供待处理的编码视频流的视频会议终端，分别创建一个视频解码组件，负责给所对应的视频会议终端的编码视频流进行解码，对于不同的画面合成需求，可以分别创建不同的画面合成组件和视频编码组件，例如，对于一个25合成画面的画面合成需求，创建一个画面合成组件和视频编码组件，该视频编码组件输出的视频流可以通过网络发送组件发送给有该画面合成需求的一个或多个视频会议终端；
S130：所述第一处理器系统根据所述业务需求建立从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。
所述步骤S110、S120、S130的执行顺序仅为示例，而不作为本发明的限制。例如，在另一可替代的实施方式中，也可以首先第一处理器系统根据所述业务需求在自身创建网络接收组件，在一个或多个视频处理器系统中创建视频解码组件，并建立网络接收组件到视频编码组件的连接，然后第一处理器系统在自身创建网络发送组件，然后在视频处理器系统中创建视频编码组件，并建立视频编码组件到网络接收组件的连接，然后在视频处理器系统中建立画面合成组件，然后建立视频解码组件通过画面合成组件后到视频编码组件的连接。
在本发明中，所述第一处理器系统作为主控处理器系统，所述视频处理器系统可以有多个处理器系统。所有其它处理器系统上电后都在主控处理器系统上注册，当有会议召开时主控处理器系统根据会议业务需求在多个处理器系统上创建组件并进行连接构成跨处理器视频传输通道，并下发视频数据给管道处理，会议中可根据需要给各组件设置参数或改变连接关系，当会议结束时断开组件的连接并让各处理器系统销毁组件。
所述第一处理器系统和所述视频处理器系统中所创建的每个组件可以是按需要被创建于某一个处理器系统上的，组件与组件之间可以进行连接，一个处理器系统上的组件可以与另一个处理器系统上的组件连接，一系列组件连接起来构成一个跨多个处理器系统的视频传输通道，视频流在视频传输通道中按照预设视频流转顺序流转被各个组件处理后最后输出预期的处理后的编码视频流。每个组件具有一个全局唯一的标识ID，每个组件可以根据需要在某个处理器系统上被创建，用完后销毁，组件可以输入数据、输出数据、设置参数等。
每个组件可以设置多个前置组件也可以设置多个后置组件从而建立组件间的连接，两个不同处理器系统上的组件可以建立连接，一个组件无需关心其前置组件与后置组件，前后组件间传递的是需要处理的视频数据；多个组件前后连接构成一个视频传输通道。视频传输通道中的每个组件从前置组件接收视频数据，进行处理后输出给后置组件，组件之间的视频数据只能从给定的方向从一个组件流向另一个组件，不可逆向流动。
在该实施例中，所述视频解码组件、视频编码组件和画面合成组件可以设置于不同的处理器系统上。所述步骤S120中，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，包括：
在所述视频处理器系统中确定至少一个第二处理器系统、至少一个第三处理器系统和至少一个第四处理器系统，在所述第二处理器系统、所述第三处理器系统和所述第四处理器系统中分别创建所述视频解码组件、所述视频编码组件和所述画面合成组件。
在该实施例中，第二处理器系统、第三处理器系统和第四处理器系统可以不是固定的，即一个处理器系统在此次视频会议中用于第二处理器系统，在另一视频会议中则可以用于第三处理器系统，在再一视频会议中则可以用于第四处理器系统等。第一处理器系统可以根据业务需求选择不同视频处理器系统的数量，例如，在参与视频会议的和视频会议终端较多时，可以设置较多的第二处理器系统，有多种不同的画面合成需求时，可以设置较多的第三处理器系统和第四处理器系统。
在该实施例中，所述步骤S120中，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，还包括如下步骤：
根据所述画面合成需求确定画面缩放需求；
根据所述画面缩放需求在所述视频处理器系统中创建缩放组件，所述视频解码组件通过所述缩放组件连接至所对应的画面合成组件。
在该实施例中，每个第二处理器系统中可以设置一个或多个缩放组件，以适应于不同的画面缩放需求。例如，待处理的编码视频流在解码后为具有3840*2160分辨率的超高清视频流，在需要进行4画面合成时，需要缩放到1920*1080，则需要创建一个对应的缩放组件，在需要进行25画面合成时，需要缩放到768*432分辨率的标清视频流，则需要创建一个对应的缩放组件。
如图3所示，所述步骤S200具体包括如下步骤：
S210：所述网络接收组件从各个视频会议终端接收到待处理的编码视频流时，发送至所对应的视频解码组件；
S220：所述视频解码组件将所述待处理的编码视频流进行解码，得到解码后的视频流，所述缩放组件对所述解码后的视频流按照预设缩放比例进行缩放，得到缩放后的视频流，发送至所对应的画面合成组件；
S230：所述画面合成组件将多个缩放组件发送的缩放后的视频流进行合成，得到合成后的视频流，发送至所对应的视频编码组件；
S240：所述视频编码组件进行编码处理，得到处理后的编码视频流，发送至所对应的网络发送组件；
S250：所述网络发送组件将处理后的编码视频流发送至所对应的视频会议终端。
具体地，各个处理器系统上还创建有视频流接收组件和视频流发送组件，用于与其他处理器系统之间进行视频流传输。在该实施例中，不同的处理器系统之间的视频传输管道为PCIE(Peripheral Component Interconnect Express，一种高速串行计算机扩展总线标准)通信管道，即各个处理器系统上创建有PCIE接收组件和PCIE发送组件，用于实现与其他处理器系统之间的视频流传输。因此，任何两个处理器系统间的物理连接是足以传输一路超高清裸视频的PCIE高速通道,一个处理器系统的一个组件可以通过特殊组件：PCIE发送组件与PCIE接收组件与另一处理器系统上的组件进行连接，从而构成跨越多个处理器系统的视频传输通道，以便在某些应用中充分利用多个处理器系统的视频处理能力。
具体地，所述第一处理器系统创建有第一PCIE发送组件和第一PCIE接收组件，所述第二处理器系统创建有第二PCIE发送组件和第二PCIE接收组件，所述第三处理器组件创建有第三PCIE发送组件和第三PCIE接收组件，所述第四处理器组件创建有第四PCIE发送组件和第四PCIE接收组件。
基于此，在所述步骤S200具体包括如下步骤：
对应于步骤S210，所述网络接收组件从各个视频会议终端接收到待处理的编码视频流时，将所述待处理的编码视频流通过所述第一PCIE发送组件发送至所对应的第二处理器系统的第二PCIE接收组件；
对应于步骤S220，所述视频解码组件将通过所述第二PCIE接收组件接收到的待处理的编码视频流进行解码处理，得到解码后的视频流，并通过缩放组件进行缩放处理，得到缩放后的视频流；
对应于步骤S230，所述第二处理器系统通过所述第二PCIE发送组件将所述缩放后的视频流发送至所对应的第四处理器系统的第四PCIE接收组件，画面合成组件通过第四PCIE接收组件接收到缩放后的视频流后进行画面合成，得到合成后的视频流；
对应于步骤S240，所述第四处理器系统通过所述第四PCIE发送组件将合成后的视频流发送给所对应的第三处理器系统的第三PCIE接收组件，视频编码组件将第三PCIE接收组件接收到的合成后的视频流进行编码，得到处理后的编码视频流；
对应于步骤S250，所述第三处理器系统通过所述第三PCIE发送组件将所述处理后的编码视频流发送至所述第一处理器系统的第一PCIE接收组件，所述第一处理器系统通过所述网络发送组件将所述处理后的编码视频流发送给视频会议终端。
在该实施例中，所述第一处理器系统还用于在所述业务需求中包括至少一视频会议终端的单个画面查看需求时，根据所述画面查看需求中的画面来源终端信息和画面需求方终端信息，建立从所述网络接收组件依次通过所述视频解码组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。例如，B视频会议终端单独获取A视频会议终端的视频画面，则在视频会议期间，通过网络接收组件获取A视频会议终端提供的超高清视频流，通过视频解码组件进行解码，并通过视频编码组件进行编码后，得到处理后的超高清编码视频流，通过网络发送组件发送给B视频会议终端，从而形成一条选看逻辑的视频传输通道，B视频会议终端得到的视频流图像是超高清的，可以实现最佳清晰度的图像效果。
因此，本发明利用组件构建跨越多个处理器系统的视频传输通道，充分利用多个处理器系统的处理能力，在复杂业务的视频会议中同时解码及处理多路超高清视频，使参与高清视频会议的各终端无需编码发送多路视频也能按需要的尺寸参与多个高清画面合成，各画面合成都能得到最佳效果，并同时提供灵活的高清选看，使各会议终端都能得到最佳清晰度的图像效果。
如图4所示，本发明实施例还提供一种基于多处理器系统的视频处理系统，应用于所述的基于多处理器系统的视频处理方法，所述视频处理系统包括第一处理器系统M100和视频处理器系统M200，其中：
所述第一处理器系统M100在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统M200中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
所述第一处理器系统M100从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统M100和所述视频处理器系统M200根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并通过所述第一处理器系统M100发送至所对应的视频会议终端。
本发明通过采用该基于多处理器系统的视频处理方法，首先由第一处理器系统M100在自身和视频处理器系统中分别创建各个功能组件并建立各个功能组件之间的预设视频流转顺序，由此，在从各个视频会议终端接收到待处理的编码视频流时，可以由第一处理器系统M100和视频处理器系统M200中的各个组件根据视频传输通道中预设视频流转顺序来依次对视频进行传输和处理，得到处理后的编码视频流，并发送给各个视频会议终端，从而解决了现有技术中单个处理器系统中处理能力不足的问题，充分利用多处理器系统的处理能力，提高视频处理速度，并且满足用户的各种需求。
下面结合图5和一个具体实例来具体介绍本发明的基于多处理器系统的视频处理方法中创建各个组件和视频传输通道的过程。
在一个视频会议中，有多个超高清(3840*2160)分辨率的视频会议终端，视频会议终端上线后每个终端发送一路超高清视频给视频处理系统，并从视频处理系统接收一路超高清视频。如图5所示，所述视频处理系统包括作为第一处理器系统的主控处理器系统0和作为视频处理器系统的处理器系统1～8，其中，处理器系统1～3即为第二处理器系统，处理器系统4、5为第四处理器系统，处理器系统6～8为第三处理器系统。
对应于步骤S100，所述视频处理系统采用如下步骤创建各个组件和视频传输通道：
步骤1：主控处理器系统0在视频会议终端上线后根据业务需求先在本处理器系统上创建接收各终端的编码视频流的网络接收组件001、002、003和发送编码视频流的PCIE发送组件007、008、009(即对应于第一PCIE发送组件)，然后再在处理器系统1上创建接收编码视频流的PCIE接收组件101(即对应于第二PCIE接收组件)和视频解码组件102；连接网络接收组件003与PCIE发送组件009、连接PCIE发送组件009与PCIE接收组件101、连接PCIE接收组件101与视频解码组件102；在处理器系统2上创建接收编码视频流的PCIE接收组件201(即对应于第二PCIE接收组件)和视频解码组件202,连接网络接收组件002与PCIE发送组件008、连接PCIE发送组件008与PCIE接收组件201、连接PCIE接收组件201与视频解码组件202，在处理器系统3上创建接收编码视频流的PCIE接收组件301(即对应于第二PCIE接收组件)和视频解码组件302，连接网络接收组件001与PCIE发送组件007、连接PCIE发送组件007与PCIE接收组件301、连接PCIE接收组件301与视频解码组件302；
步骤2：主控处理器系统0根据业务需求在本处理器系统上创建发送给各终端编码视频流的网络发送组件004、005、006和接收编码视频流的PCIE接收组件010、011、012(即对应于第一PCIE接收组件)，并在处理器系统6上创建视频编码组件602和发送编码视频流的PCIE发送组件601(即对应于第三PCIE发送组件)，连接视频编码组件602与PCIE发送组件601、连接PCIE发送组件601与组件010、连接PCIE接收组件010与网络发送组件004，在处理器系统7上创建视频编码组件702和发送编码视频流的PCIE发送组件701(即对应于第三PCIE发送组件)，连接视频编码组件702与PCIE发送组件701、连接PCIE发送组件701与PCIE接收组件011、连接PCIE接收组件011与网络发送组件005，在处理器系统8上创建视频编码组件802和发送编码视频流的PCIE发送组件801(即对应于第三PCIE发送组件)，连接视频编码组件802与PCIE发送组件801、连接PCIE发送组件801与PCIE接收组件012、连接PCIE接收组件012与网络发送组件006；
步骤3：主控处理器系统0根据业务需求在处理器系统4上创建一个25画面的画面合成组件403，并根据业务需求创建接收参与画面合成的YUV视频裸数据的PCIE接收组件401、402(即对应于第四PCIE接收组件)，并根据合成小画面的大小分别在处理器系统1上创建解码后视频数据的缩放组件105与发送缩放后视频数据的PCIE发送组件106(即对应于第二PCIE发送组件)，连接视频解码组件102与组件105、连接缩放组件105与PCIE发送组件106、连接PCIE发送组件106与PCIE接收组件401、连接PCIE接收组件401与画面合成组件403，在处理器系统2上创建解码后视频数据的缩放组件205与发送缩放后视频数据的PCIE发送组件206(即对应于第二PCIE发送组件)，连接视频解码组件202与缩放组件205、连接缩放组件205与PCIE发送组件206、连接PCIE发送组件206与PCIE接收组件402、连接PCIE接收组件402与画面合成组件403；根据业务需求在处理器系统6上创建用于接收合成后YUV数据的PCIE接收组件603(即对应于第三PCIE接收组件)，在处理器系统4上创建用于发送画面合成后YUV数据的PCIE发送组件404(即对应于第四PCIE发送组件)，连接画面合成组件403与PCIE发送组件404、连接PCIE发送组件404与PCIE接收组件603、连接PCIE接收组件603与视频编码组件602；到此步实现处理器系统0从网络接收终端编码视频流后发送到处理器系统1、2上进行解码然后把解码后的视频流数据根据合成需要进行缩放然后将缩放后的视频流数据发送给处理器系统4进行画面合成，再把合成后的视频流数据发送给处理器系统6进行编码，得到处理后的编码视频流后发送给处理器系统0通过网络发送给终端，形成一条视频传输通道，最后结果终端得到一个25画面合成的编码视频流，各画面都是最佳图像；该视频传输通道中预设视频流转顺序如图6所示；
步骤4：主控处理器系统0根据业务需求在处理器系统5上创建一个4画面的画面合成组件504，并根据业务需求创建接收参与画面合成的YUV视频裸数据的PCIE接收组件501、502、503(即对应于第四PCIE接收组件)，并根据合成小画面的大小分别在处理器系统1上创建解码后视频数据的缩放组件103与发送缩放后视频数据的PCIE发送组件104(即对应于第二PCIE发送组件)，连接视频解码组件102与网络接收组件103、连接网络接收组件103与PCIE发送组件104、连接PCIE发送组件104与PCIE接收组件501、连接PCIE接收组件501与画面合成组件504，在处理器系统2上创建解码后视频数据的缩放组件203与发送缩放后视频数据的PCIE发送组件204，连接视频解码组件202与缩放组件203、连接缩放组件203与PCIE发送组件204、连接PCIE发送组件204与PCIE接收组件502、连接PCIE接收组件502与画面合成组件504，在处理器系统3上创建解码后视频数据的缩放组件305与发送缩放后视频数据的PCIE发送组件306(即对应于第二PCIE发送组件)，连接视频解码组件302与缩放组件305、连接缩放组件305与PCIE发送组件306、连接PCIE发送组件306与PCIE接收组件503、连接PCIE接收组件503与画面合成组件504；根据业务需求在处理器系统5上创建用于发送画面合成后YUV数据的PCIE发送组件505(即对应于第四PCIE发送组件)，在处理器系统7上创建用于接收合成后YUV数据的PCIE接收组件703(即对应于第三PCIE接收组件)，连接画面合成组件504与PCIE发送组件505、连接PCIE发送组件505与PCIE接收组件703、连接PCIE接收组件703与视频编码组件702；到此步实现处理器系统0从网络接收终端编码视频流后发送到处理器系统1、2、3上进行解码然后把解码后的视频流数据根据合成需要进行缩放得到缩放后的视频流数据，然后发送给处理器系统5进行4画面合成，再把合成后的视频流数据发送给处理器系统7进行编码，得到处理后的编码视频流后发送给处理器系统0通过网络发送给终端，形成另一条视频处理管道，最后结果终端得到一个4画面合成的编码视频流，各画面都是最佳图像；该视频传输通道中预设视频流转顺序如图7所示；
步骤5：主控处理器系统0根据业务需求在处理器系统3上创建PCIE发送组件304，在处理器系统8上创建PCIE接收组件803，连接视频解码组件302与PCIE发送组件304、连接PCIE发送组件304与PCIE接收组件803、连接PCIE接收组件803与视频编码组件802,此步实现处理器系统0从网络接收终端编码视频流后发送到处理器系统3上进行解码然后把解码后的YUV数据发送给处理器系统8进行编码，编码视频发送给处理器系统0通过网络发送给终端，形成一条选看逻辑的视频处理管道，终端所得到的图像是最佳的；该视频传输通道中预设视频流转顺序如图8所示；
限于篇幅上面处理器系统4上25画面合成组件403只描述了2个小画面的数据来源，实际应用中可以是25路视频流参与画面合成，同理处理器系统5上的4画面合成组件只描述了3个小画面的数据来源。通过以上描述的视频处理方法实现的多点视频处理组件可根据业务需求灵活地调整，充分利用多处理器的视频处理性能，确保每个视频会议终端只需要发送给视频处理系统一路高清编码视频，即使会议中有多个画面合成或选看，各终端最后都能收到最佳的图像效果。
本发明实施例还提供一种基于多处理器系统的视频处理设备，包括处理器；存储器，其中存储有所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行所述的基于多处理器系统的视频处理方法的步骤。
所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。
下面参照图9来描述根据本发明的这种实施方式的电子设备600。图9显示的电子设备600仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图9所示，电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于：至少一个处理单元610、至少一个存储单元620、连接不同系统组件(包括存储单元620和处理单元610)的总线630、显示单元640等。
其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元610执行，使得所述处理单元610执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。例如，所述处理单元610可以执行如图1中所示的步骤。
所述存储单元620可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)6201和/或高速缓存存储单元6202，还可以进一步包括只读存储单元(ROM)6203。
所述存储单元620还可以包括具有一组(至少一个)程序模块6205的程序/实用工具6204，这样的程序模块6205包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线630可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备600也可以与一个或多个外部设备700(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备600交互的设备通信，和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口650进行。并且，电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。网络适配器660可以通过总线630与电子设备600的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备600使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过采用本发明所提供的基于多处理器系统的视频处理设备，所述处理器在执行所述可执行指令时执行所述的基于多处理器系统的视频处理方法，由此可以获得上述基于多处理器系统的视频处理方法的有益效果。
本发明实施例还提供一种计算机可读存储介质，用于存储程序，所述程序被处理器执行时实现所述的基于多处理器系统的视频处理方法的步骤。在一些可能的实施方式中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。
参考图10所示，描述了根据本发明的实施方式的用于实现上述方法的程序产品800，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或集群上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
通过采用本发明所提供的计算机可读存储介质，其中存储的程序在被执行时实现所述的基于多处理器系统的视频处理方法的步骤，由此可以获得上述基于多处理器系统的视频处理方法的有益效果。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (10)

1.一种基于多处理器系统的视频处理方法，其特征在于，包括如下步骤：
S100：第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
S200：从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并发送至所对应的视频会议终端。
2.根据权利要求1所述的基于多处理器系统的视频处理方法，其特征在于，所述视频处理组件包括视频解码组件、视频编码组件和画面合成组件，所述视频传输通道中的预设视频流转顺序为从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的顺序。
3.根据权利要求1所述的基于多处理器系统的视频处理方法，其特征在于，所述步骤S100包括如下步骤：
第一处理器系统获取视频会议的业务需求，所述业务需求包括视频会议终端信息和各个视频会议终端的画面合成需求，所述画面合成需求包括合成画面数量、待合成画面来源终端信息、合成画面需求方终端信息；
第一处理器系统根据所述业务需求在自身创建网络接收组件和网络发送组件，并根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件；
所述第一处理器系统根据所述业务需求建立从所述网络接收组件依次通过所述视频解码组件、所述画面合成组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。
4.根据权利要求3所述的基于多处理器系统的视频处理方法，其特征在于，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，包括：
在所述视频处理器系统中确定至少一个第二处理器系统、至少一个第三处理器系统和至少一个第四处理器系统，在所述第二处理器系统、所述第三处理器系统和所述第四处理器系统中分别创建所述视频解码组件、所述视频编码组件和所述画面合成组件。
5.根据权利要求3所述的基于多处理器系统的视频处理方法，其特征在于，根据所述业务需求在一个或多个视频处理器系统中创建视频解码组件、视频编码组件和画面合成组件，还包括如下步骤：
根据所述画面合成需求确定画面缩放需求；
根据所述画面缩放需求在所述视频处理器系统中创建缩放组件，所述视频解码组件通过所述缩放组件连接至所对应的画面合成组件。
6.根据权利要求3所述的基于多处理器系统的视频处理方法，其特征在于，所述第一处理器系统还用于在所述业务需求中包括至少一视频会议终端的单个画面查看需求时，根据所述画面查看需求中的画面来源终端信息和画面需求方终端信息，建立从所述网络接收组件依次通过所述视频解码组件和所述视频编码组件连接至所述网络发送组件的视频传输通道。
7.根据权利要求1所述的基于多处理器系统的视频处理方法，其特征在于，不同的处理器系统之间的视频传输管道为PCIE通信管道。
8.一种基于多处理器系统的视频处理系统，其特征在于，应用于权利要求1至7中任一项所述的基于多处理器系统的视频处理方法，所述视频处理系统包括第一处理器系统和视频处理器系统，其中：
所述第一处理器系统在自身创建网络接收组件和网络发送组件，在一个或多个视频处理器系统中创建视频处理组件，建立所述网络接收组件、所述视频处理组件和所述网络发送组件之间的视频传输通道，并确定所述视频传输通道中的预设视频流转顺序；
所述第一处理器系统从各个视频会议终端接收到待处理的编码视频流时，所述第一处理器系统和所述视频处理器系统根据所述预设视频流转顺序处理所述待处理的编码视频流，得到处理后的编码视频流，并通过所述第一处理器系统发送至所对应的视频会议终端。
9.一种基于多处理器系统的视频处理设备，其特征在于，包括：
处理器；
存储器，其中存储有所述处理器的可执行指令；
其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1至7中任一项所述的基于多处理器系统的视频处理方法的步骤。
10.一种计算机可读存储介质，用于存储程序，其特征在于，所述程序被处理器执行时实现权利要求1至7中任一项所述的基于多处理器系统的视频处理方法的步骤。
CN202110327895.XA 2021-03-26 2021-03-26 基于多处理器系统的视频处理方法、系统、设备及介质 Active CN113038183B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110327895.XA CN113038183B (zh) 2021-03-26 2021-03-26 基于多处理器系统的视频处理方法、系统、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110327895.XA CN113038183B (zh) 2021-03-26 2021-03-26 基于多处理器系统的视频处理方法、系统、设备及介质

Publications (2)

Publication Number Publication Date
CN113038183A true CN113038183A (zh) 2021-06-25
CN113038183B CN113038183B (zh) 2023-03-17

Family

ID=76472602

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110327895.XA Active CN113038183B (zh) 2021-03-26 2021-03-26 基于多处理器系统的视频处理方法、系统、设备及介质

Country Status (1)

Country Link
CN (1) CN113038183B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860714A (zh) * 2010-04-29 2010-10-13 中兴通讯股份有限公司 一种视频处理方法及其系统、mcu视频处理单元
CN101867767A (zh) * 2010-04-30 2010-10-20 中兴通讯股份有限公司 视频会议系统的多点控制单元及其视频处理方法
CN102387338A (zh) * 2010-09-03 2012-03-21 中兴通讯股份有限公司 分布式视频处理方法及视频会议系统
CN108134918A (zh) * 2018-01-30 2018-06-08 苏州科达科技股份有限公司 视频处理方法、装置及多点视频处理单元、会议设备
CN108881918A (zh) * 2017-11-29 2018-11-23 北京视联动力国际信息技术有限公司 一种多路视频的处理方法和一种多媒体终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101860714A (zh) * 2010-04-29 2010-10-13 中兴通讯股份有限公司 一种视频处理方法及其系统、mcu视频处理单元
CN101867767A (zh) * 2010-04-30 2010-10-20 中兴通讯股份有限公司 视频会议系统的多点控制单元及其视频处理方法
CN102387338A (zh) * 2010-09-03 2012-03-21 中兴通讯股份有限公司 分布式视频处理方法及视频会议系统
CN108881918A (zh) * 2017-11-29 2018-11-23 北京视联动力国际信息技术有限公司 一种多路视频的处理方法和一种多媒体终端
CN108134918A (zh) * 2018-01-30 2018-06-08 苏州科达科技股份有限公司 视频处理方法、装置及多点视频处理单元、会议设备

Also Published As

Publication number Publication date
CN113038183B (zh) 2023-03-17

Similar Documents

Publication Publication Date Title
JP5781441B2 (ja) マルチビットレートストリームを使用するビデオ会議のサブスクリプション
US9462228B2 (en) Distributed real-time media composer
US8976220B2 (en) Devices and methods for hosting a video call between a plurality of endpoints
US20150381935A1 (en) User-Defined Content Magnification and Multi-Point Video Conference System, Method and Logic
CN101291417B (zh) 一种视频会议系统的轮询方法和系统
US9262391B2 (en) Annotating a presentation in a telepresence meeting
WO2021190229A1 (zh) 三维视频的处理方法、装置、可读存储介质和电子设备
CN105554430A (zh) 一种视频通话方法、系统及装置
CN112788276A (zh) 视频流显示方法、发送方法、装置、终端、服务器及介质
CN112911383A (zh) 一种局域网下多路投屏方法、设备及系统
CN114095671A (zh) 云会议直播系统、方法、装置、设备及介质
WO2021093882A1 (zh) 一种视频会议方法、会议终端、服务器及存储介质
CN114143600A (zh) 直播画面调整方法、装置、设备和存储介质
CN101316352A (zh) 会议电视系统多画面的实现方法及装置、视频网关及其实现方法
CN113038183B (zh) 基于多处理器系统的视频处理方法、系统、设备及介质
CN113037751A (zh) 创建音视频接收流的方法及系统
US20220311814A1 (en) Techniques for signaling multiple audio mixing gains for teleconferencing and telepresence for remote terminals
CN107872683B (zh) 一种视频数据处理方法、装置、设备及存储介质
CN112672100B (zh) 多显卡数据协同处理方法、视频会议系统及云服务器
CN114760309A (zh) 基于云端服务的终端的业务交互方法、装置、设备和介质
CN113382280B (zh) 用于互动直播系统的方法和装置、电子设备
CN117119216B (zh) 一种直播解说的方法、系统以及直播系统的使用方法
US20220294839A1 (en) Techniques for signaling audio mixing gain in teleconferencing and telepresence for remote terminals
WO2023030402A1 (zh) 视频的处理方法、装置及系统
CN116636201A (zh) 使用rtcp反馈发信号通知用于远程终端的远程会议和远程呈现的多个音频混合增益的技术

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant