CN112492335A - 一种视频处理系统、方法和装置 - Google Patents

一种视频处理系统、方法和装置 Download PDF

Info

Publication number
CN112492335A
CN112492335A CN202011309548.6A CN202011309548A CN112492335A CN 112492335 A CN112492335 A CN 112492335A CN 202011309548 A CN202011309548 A CN 202011309548A CN 112492335 A CN112492335 A CN 112492335A
Authority
CN
China
Prior art keywords
video
streaming media
server
remote server
media server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011309548.6A
Other languages
English (en)
Other versions
CN112492335B (zh
Inventor
穆凯辉
匡昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Chuangyiyun Network Technology Co ltd
Original Assignee
Suzhou Chuangyiyun Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Chuangyiyun Network Technology Co ltd filed Critical Suzhou Chuangyiyun Network Technology Co ltd
Priority to CN202011309548.6A priority Critical patent/CN112492335B/zh
Publication of CN112492335A publication Critical patent/CN112492335A/zh
Application granted granted Critical
Publication of CN112492335B publication Critical patent/CN112492335B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Abstract

本申请提供了一种视频处理系统、方法和装置，其中，该系统包括：视频拍摄终端，用于拍摄视频流；流媒体服务器，用于接收所述视频流，将所述视频流转换为NDI信号，并将所述NDI信号传送至远程服务器进行处理；所述远程服务器，用于通过虚幻引擎对NDI信号进行视频合成，并将合成的视频推流至所述流媒体服务器。通过上述方案解决了现有的无法高效无失真地将拍摄的视频流实时传入到远程服务器的虚幻引擎中的技术问题，达到了延迟小、失真低的效果。

Description

一种视频处理系统、方法和装置
技术领域
本申请属于数据处理技术领域，尤其涉及一种视频处理系统、方法和装置。
背景技术
虚拟拍摄和实时渲染一般是通过多用Unreal Engine(虚幻引擎)系统实现的，在使用Unreal Engine的过程中会带来大量的IT问题，且Unreal Engine对硬件系统的要求较高，系统配置复杂。利用云端的系统来运行Unreal Engine，既可以减少制作人员的IT工作，还可以减少制作人员的设备投入，使得制作人员可以专注于Unreal Engine的创作。
然而，使用云端Unreal Engine系统，需要解决数据的实时传输问题，虚拟拍摄系统需要将拍摄的画面及时传送到Unreal Engine中。在本地使用Unreal Engine的过程中，可以通过有效地将摄像机或者动作捕捉数据实时传入到Unreal Engine中。
但是，针对如何将这些数据实时传入到远程服务器上的Unreal Engine中，目前尚未提出有效的解决方案。
发明内容
本申请目的在于提供一种视频处理系统、方法和装置，可以实现对视频的实时高效处理。
一方面，提供了一种视频处理系统，包括：
视频拍摄终端，用于拍摄视频流；
流媒体服务器，用于接收所述视频流，将所述视频流转换为NDI信号，并将所述NDI信号传送至远程服务器进行处理；
所述远程服务器，用于通过虚幻引擎对NDI信号进行视频合成，并将合成的视频推流至所述流媒体服务器。
在一个实施方式中，上述视频处理系统还包括：
直播平台，用于接收所述流媒体服务器推送的合成的视频，并播放所述合成的视频。
在一个实施方式中，所述视频拍摄终端与所述流媒体服务器之间通过5G链路进行通信。
在一个实施方式中，上述视频处理系统还包括：
操作终端，与所述远程服务器相连，用于接收用户操作，并根据所述用户操作，通过虚幻引擎对NDI信号进行视频合成。
在一个实施方式中，所述视频拍摄终端包括以下至少之一：手机、笔记本、台式机。
另一方面，提供了一种视频处理方法，包括：
流媒体服务器接收视频拍摄终端推送的视频流；
所述流媒体服务器将所述视频流转换为NDI信号；
所述流媒体服务器将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
所述流媒体服务器将所述合成视频推送出去。
在一个实施方式中，所述流媒体服务器将所述合成视频推送出去，包括：
所述流媒体服务器将所述合成视频推送至直播平台进行显示。
在一个实施方式中，所述合成视频是远程服务器中的虚幻引擎对NDI信号进行视频合成得到的。
另一方面，提供了一种视频处理装置，位于流媒体服务器中，包括：
接收模块，用于接收视频拍摄终端推送的视频流；
转换模块，用于将所述视频流转换为NDI信号；
接收模块，用于将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
推送模块，用于将所述合成视频推送出去。
又一方面，提供了一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现上述方法的步骤。
本申请提供的视频处理系统，包括：视频拍摄终端，用于拍摄视频流；流媒体服务器，用于接收所述视频流，将所述视频流转换为NDI信号，并将所述NDI信号传送至远程服务器进行处理；所述远程服务器，用于通过虚幻引擎对NDI信号进行视频合成，并将合成的视频推流至所述流媒体服务器。即，通过流媒体服务器作为信号的中转，从而将本地视频流数据推流到远程服务器上，通过流媒体服务器将视频流转换为NDI信号，从而满足虚幻引擎的需求，通过上述方案解决了现有的无法高效无失真地将拍摄的视频流实时传入到远程服务器的虚幻引擎中的技术问题，达到了延迟小、失真低的效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本申请提供的视频处理系统的架构图；
图2是本申请提供的视频处理方法的方法流程图；
图3是本申请提供的视频处理系统的架构图；
图4是本申请提供的服务器端的架构图；
图5是本申请提供的视频处理装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
为了减少本地的处理负荷，可以将本地的Unreal Engine制作过程放置到云端制作，从而减少本地制作时对本地资源的需求，针对如何将拍摄的数据实时传入到远程服务器的Unreal Engine中，并保证在传输过程中的画质不受大的损失，保证低延时，在本例中，提供了一种视频处理系统，如图1所示，可以包括：
1)视频拍摄终端101，用于拍摄视频流；
其中，该视频流可以是用户通过视频拍摄终端拍摄的，例如，可以是主播人员通过自己的手机终端等拍摄的。
2)流媒体服务器102，用于接收视频流，将所述视频流转换为NDI(Network DeviceInterface，一种IP网络设备接口协议)信号，并将所述NDI信号传送至远程服务器进行处理；
即，通过增加流媒体服务器实现视频流的中转，可以满足数据实时传输的要求，提升传输效率。
其中，该流媒体服务器可以是RTMP(Real Time Messaging Protocol，实时消息传输协议)服务器，通过RTMP服务器可以支持RTMP，SRT等流媒体传输协议。
3)远程服务器103，用于通过虚幻引擎对NDI信号进行视频合成，并将合成的视频推流至所述流媒体服务器。
在远程服务器中设置有Unreal Engine处理模块，通过远程服务器中的UnrealEngine可以进行视频合成，从而得到合成的视频流，将合成的视频流可以再返回至流媒体服务器，由流媒体服务器进行推送。
对于流媒体服务器而言，可以将合成的视频推送到视频拍摄终端，也可以是将合成的视频推送出去，例如，可以将合成的视频推送到直播平台进行播放。
为此，在上述视频处理系统中还可以包括：直播平台，用于接收所述流媒体服务器推送的合成的视频，并播放所述合成的视频。
为了进一步提升传输速率，视频拍摄终端与流媒体服务器之间可以通过5G链路进行通信，即，通过5G信号实现流媒体数据推流，从而提高画质，减小延迟。
对于远程服务器而言，在远程服务器中设置了Unreal Engine，Unreal Engine在进行视频合成的时候，是需要用户参与操作的，为此，上述视频处理系统还可以包括：操作终端，与所述远程服务器相连，用于接收用户操作，并根据所述用户操作，通过虚幻引擎对NDI信号进行视频合成。即，在远程服务器上制作人员可以实时合成新的直播场景，合成完成后可以推流到直播平台进行播放。
上述的视频拍摄终端可以包括但不限于以下至少之一：手机、笔记本、台式机。
上述视频拍摄终端101可以是客户操作使用的终端设备或者软件。具体的，视频拍摄终端101可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能手表或者其它可穿戴设备等终端设备。当然，视频拍摄终端101也可以是能运行于上述终端设备中的软件。例如：手机淘宝、支付宝或者浏览器等应用软件。
图2是本申请所述一种视频处理方法一个实施例的方法流程图。虽然本申请提供了如下述实施例或附图所示的方法操作步骤或装置结构，但基于常规或者无需创造性的劳动在所述方法或装置中可以包括更多或者更少的操作步骤或模块单元。在逻辑性上不存在必要因果关系的步骤或结构中，这些步骤的执行顺序或装置的模块结构不限于本申请实施例描述及附图所示的执行顺序或模块结构。所述的方法或模块结构的在实际中的装置或终端产品应用时，可以按照实施例或者附图所示的方法或模块结构连接进行顺序执行或者并行执行(例如并行处理器或者多线程处理的环境，甚至分布式处理环境)。
具体的，如图2所示，本申请一种实施例提供的一种视频处理方法可以包括：
步骤201：流媒体服务器接收视频拍摄终端推送的视频流；
步骤202：流媒体服务器将所述视频流转换为NDI信号；
步骤203：流媒体服务器将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
步骤204：流媒体服务器将所述合成视频推送出去。
在上例中，通过流媒体服务器作为信号的中转，从而将本地视频流数据推流到远程服务器上，通过流媒体服务器将视频流转换为NDI信号，从而满足虚幻引擎的需求，通过上述方案解决了现有的无法高效无失真地将拍摄的视频流实时传入到远程服务器的虚幻引擎中的技术问题，达到了延迟小、失真低的效果。
在实现的时候，流媒体服务器将所述合成视频推送出去可以是流媒体服务器将所述合成视频推送至直播平台进行显示，其中，合成视频可以是远程服务器中的虚幻引擎对NDI信号进行视频合成得到的。
下面结合一个具体实施例对上述方法进行说明，然而，值得注意的是，该具体实施例仅是为了更好地说明本申请，并不构成对本申请的不当限定。
考虑到可以将本地的Unreal Engine制作过程放置到云端制作，从而减少本地制作时大量的IT设备和IT工作，针对如何将拍摄的数据实时传入到远程服务器的UnrealEngine中，并保证在传输过程中的画质不受大的损失，保证低延时，是需要解决的问题。
为此，可以采用RTMP或SRT流传输协议将摄像机拍摄的数据通过5G链路推流到远程服务端，然后，在远程服务端转成NDI(Network Device Interface，一种IP网络设备接口协议)信号，这样在局域网内部的Unreal Engine系统就能导入NDI视频流和语音流信号，完成摄像机信号到远程Unreal Engines的输入，合成后的视频可以推流到直播平台进行播放。进一步的，通过采用5G信号不仅可以提高链路带宽并能有效降低延时，提升整个系统的画质和实时性。
整个系统的架构，可以如图3所示，摄像机拍摄得到视频内容，然后进行本地推流，通过5G链路传送到流媒体服务端，在流媒体服务端将流媒体数据流转换为NDI信号，将转换得到的NDI信号作为Unreal Engine NDI信号传送到远程服务器，在远程服务器中进行实时视频合成，合成的视频结果为二进制数据流，将二进制数据流转换为流媒体数据流传送至流媒体服务器中，然后通过流媒体服务器将合成的视频推流到直播平台进行播放。
对于音视频信号在进行NDI编码后，能实时通过IP网络对多重广播级质量信号进行传输和接收，同时可以达到低延迟、精确帧视频、数据流相互识别和通信等效果。
即，在使用摄像机拍摄到现场视频流后，通过本地推流到流媒体服务器，在流媒体服务器上面转成Unreal Engine可用的NDI信号，通过NDI信号输入到Unreal Engine中，远程用户可以通过远程桌面的方式操作远程服务器上面的Unreal Engine，完成视频导入并合成到场景中后，然后可以再推流到直播平台进行直播。即，通过流媒体服务器作为信号的中转，从而将本地摄像机数据推流到远程服务器上，通过流媒体服务器将视频流转换为NDI信号，进一步的，可以通过5G信号实现视频数据推流，从而提高画质，减小延迟。
上述视频处理方式可以应用在直播场景中，例如，直播人员可以通过手机终端进行视频录像并推流到流媒体服务器中，然后在远程服务器上制作人员可以实时合成新的直播场景，合成完成后可以推流到直播平台进行播放。
在上例中，通过将拍摄的视频流实时传入到远程服务器上的Unreal Engine应用中，延迟比较小，可以满足实时视频处理的需求。
在本例中，提供了一种基于5G网络，利用大带宽进行本地拍摄数据实时上传到远程服务器的Unreal Engine系统中，结合远程桌面系统，为Unreal Engine制作人员提供了一种远程的操作方式。通过5G接入的数据流可以保证画质清晰，且可以达到低延迟地输入到Unreal Engine中的目的，Unreal Engine生成的合成结果可以直接推流到直播平台用于向最终用户展示制作结果。
本申请上述实施例所提供的方法实施例可以在服务器端或者类似的运算装置中执行。以运行在计算机终端上为例，图4是本发明实施例的一种视频处理方法的服务器端的硬件结构框图。如图4所示，服务器端10可以包括一个或多个(图中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输模块106。本领域普通技术人员可以理解，图4所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，服务器端10还可包括比图4中所示更多或者更少的组件，或者具有与图4所示不同的配置。
存储器104可用于存储应用软件的软件程序以及模块，如本发明实施例中的视频处理方法对应的程序指令/模块，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的应用程序的视频处理方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至服务器端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输模块106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括服务器端10的通信供应商提供的无线网络。在一个实例中，传输模块106包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输模块106可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
在软件层面，上述视频处理装置，位于流媒体服务器中，可以如图5所示，包括：
接收模块501，用于接收视频拍摄终端推送的视频流；
转换模块502，用于将所述视频流转换为NDI信号；
接收模块503，用于将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
推送模块504，用于将所述合成视频推送出去。
在一个实施方式中，上述推送模块504具体可以将所述合成视频推送至直播平台进行显示。
在一个实施方式中，上述合成视频可以是远程服务器中的虚幻引擎对NDI信号进行视频合成得到的。
本申请的实施例还提供能够实现上述实施例中的视频处理方法中全部步骤的一种电子设备的具体实施方式，所述电子设备具体包括如下内容：处理器(processor)、存储器(memory)、通信接口(Communications Interface)和总线；其中，所述处理器、存储器、通信接口通过所述总线完成相互间的通信；所述处理器用于调用所述存储器中的计算机程序，所述处理器执行所述计算机程序时实现上述实施例中的视频处理方法中的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
步骤1：流媒体服务器接收视频拍摄终端推送的视频流；
步骤2：流媒体服务器将所述视频流转换为NDI信号；
步骤3：流媒体服务器将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
步骤4：流媒体服务器将所述合成视频推送出去。
从上述描述可知，本申请实施例通过流媒体服务器作为信号的中转，从而将本地视频流数据推流到远程服务器上，通过流媒体服务器将视频流转换为NDI信号，从而满足虚幻引擎的需求，通过上述方案解决了现有的无法高效无失真地将拍摄的视频流实时传入到远程服务器的虚幻引擎中的技术问题，达到了延迟小、失真低的效果。
本申请的实施例还提供能够实现上述实施例中的视频处理方法中全部步骤的一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述实施例中的视频处理方法的全部步骤，例如，所述处理器执行所述计算机程序时实现下述步骤：
步骤1：流媒体服务器接收视频拍摄终端推送的视频流；
步骤2：流媒体服务器将所述视频流转换为NDI信号；
步骤3：流媒体服务器将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
步骤4：流媒体服务器将所述合成视频推送出去。
从上述描述可知，本申请实施例通过流媒体服务器作为信号的中转，从而将本地视频流数据推流到远程服务器上，通过流媒体服务器将视频流转换为NDI信号，从而满足虚幻引擎的需求，通过上述方案解决了现有的无法高效无失真地将拍摄的视频流实时传入到远程服务器的虚幻引擎中的技术问题，达到了延迟小、失真低的效果。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于硬件+程序类实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
虽然本申请提供了如实施例或流程图所述的方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的装置或客户端产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、车载人机交互设备、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
虽然本说明书实施例提供了如实施例或流程图所述的方法操作步骤，但基于常规或者无创造性的手段可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式，不代表唯一的执行顺序。在实际中的装置或终端产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境，甚至为分布式数据处理环境)。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、产品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、产品或者设备所固有的要素。在没有更多限制的情况下，并不排除在包括所述要素的过程、方法、产品或者设备中还存在另外的相同或等同要素。
为了描述的方便，描述以上装置时以功能分为各种模块分别描述。当然，在实施本说明书实施例时可以把各模块的功能在同一个或多个软件和/或硬件中实现，也可以将实现同一功能的模块由多个子模块或子单元的组合实现等。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内部包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
本领域技术人员应明白，本说明书的实施例可提供为方法、系统或计算机程序产品。因此，本说明书实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本说明书实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书实施例可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书实施例，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本说明书实施例的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
以上所述仅为本说明书实施例的实施例而已，并不用于限制本说明书实施例。对于本领域技术人员来说，本说明书实施例可以有各种更改和变化。凡在本说明书实施例的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本说明书实施例的权利要求范围之内。

Claims (10)

1.一种视频处理系统，其特征在于，包括：
视频拍摄终端，用于拍摄视频流；
流媒体服务器，用于接收所述视频流，将所述视频流转换为NDI信号，并将所述NDI信号传送至远程服务器进行处理；
所述远程服务器，用于通过虚幻引擎对NDI信号进行视频合成，并将合成的视频推流至所述流媒体服务器。
2.根据权利要求1所述的视频处理系统，其特征在于，还包括：
直播平台，用于接收所述流媒体服务器推送的合成的视频，并播放所述合成的视频。
3.根据权利要求1所述的视频处理系统，其特征在于，所述视频拍摄终端与所述流媒体服务器之间通过5G链路进行通信。
4.根据权利要求1所述的视频处理系统，其特征在于，还包括：
操作终端，与所述远程服务器相连，用于接收用户操作，并根据所述用户操作，通过虚幻引擎对NDI信号进行视频合成。
5.根据权利要求1所述的视频处理系统，其特征在于，所述视频拍摄终端包括以下至少之一：手机、笔记本、台式机。
6.一种视频处理方法，其特征在于，包括：
流媒体服务器接收视频拍摄终端推送的视频流；
所述流媒体服务器将所述视频流转换为NDI信号；
所述流媒体服务器将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
所述流媒体服务器将所述合成视频推送出去。
7.根据权利要求6所述的方法，其特征在于，所述流媒体服务器将所述合成视频推送出去，包括：
所述流媒体服务器将所述合成视频推送至直播平台进行显示。
8.根据权利要求6所述的方法，其特征在于，所述合成视频是远程服务器中的虚幻引擎对NDI信号进行视频合成得到的。
9.一种视频处理装置，其特征在于，位于流媒体服务器中，包括：
接收模块，用于接收视频拍摄终端推送的视频流；
转换模块，用于将所述视频流转换为NDI信号；
接收模块，用于将所述NDI信号推送至远程服务器，并接收远程服务器对NDI信号进行视频合成生成的合成视频；
推送模块，用于将所述合成视频推送出去。
10.一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现权利要求6至8中任一项所述方法的步骤。
CN202011309548.6A 2020-11-20 2020-11-20 一种视频处理系统、方法和装置 Active CN112492335B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011309548.6A CN112492335B (zh) 2020-11-20 2020-11-20 一种视频处理系统、方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011309548.6A CN112492335B (zh) 2020-11-20 2020-11-20 一种视频处理系统、方法和装置

Publications (2)

Publication Number Publication Date
CN112492335A true CN112492335A (zh) 2021-03-12
CN112492335B CN112492335B (zh) 2023-06-09

Family

ID=74932615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011309548.6A Active CN112492335B (zh) 2020-11-20 2020-11-20 一种视频处理系统、方法和装置

Country Status (1)

Country Link
CN (1) CN112492335B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339405A (zh) * 2022-01-04 2022-04-12 广州博冠信息科技有限公司 Ar视频数据流远程制作方法及装置、设备、存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110460910A (zh) * 2019-08-23 2019-11-15 南京美乐威电子科技有限公司 一种rtmp协议到ndi协议的转换方法，转换装置及转换系统
CN111243068A (zh) * 2019-12-09 2020-06-05 佛山欧神诺云商科技有限公司 一种3d模型场景自动渲染方法、装置及存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110460910A (zh) * 2019-08-23 2019-11-15 南京美乐威电子科技有限公司 一种rtmp协议到ndi协议的转换方法，转换装置及转换系统
CN111243068A (zh) * 2019-12-09 2020-06-05 佛山欧神诺云商科技有限公司 一种3d模型场景自动渲染方法、装置及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339405A (zh) * 2022-01-04 2022-04-12 广州博冠信息科技有限公司 Ar视频数据流远程制作方法及装置、设备、存储介质
CN114339405B (zh) * 2022-01-04 2023-11-17 广州博冠信息科技有限公司 Ar视频数据流远程制作方法及装置、设备、存储介质

Also Published As

Publication number Publication date
CN112492335B (zh) 2023-06-09

Similar Documents

Publication Publication Date Title
CN112235604B (zh) 渲染方法及装置、计算机可读存储介质、电子设备
CN104796767A (zh) 一种云视频编辑方法和系统
CN103442071A (zh) 一种手机屏幕内容的实时分享方法
CN109168026A (zh) 即时视频显示方法、装置、终端设备及存储介质
CN104954812A (zh) 一种视频同步播放的方法、装置及系统
CN114006894B (zh) 数据处理系统、方法、电子设备及计算机存储介质
CN111818383B (zh) 视频数据的生成方法、系统、装置、电子设备及存储介质
CN111327921A (zh) 视频数据处理方法及设备
CN112492335B (zh) 一种视频处理系统、方法和装置
CN113973224A (zh) 媒体信息的传输方法、计算设备及存储介质
US10897655B2 (en) AV server and AV server system
CN103269450A (zh) 一种面向Android智能电视的多媒体系统
CN108282670A (zh) 用于实时影像合成的代码转换器
CN201957067U (zh) 一种门户提供装置和视频云计算系统
CN115314732B (zh) 一种多用户协同审片方法及系统
CN111641878A (zh) 三维模型展示方法、装置和电子设备
WO2023077866A1 (zh) 多媒体数据处理方法、装置、电子设备及存储介质
CN107005731B (zh) 使用应用代码的图像云端流媒体服务方法、服务器及系统
CN116668415A (zh) 流媒体数据处理方法及系统
CN103491368A (zh) 一种视频处理方法、装置及系统
CN102802002A (zh) 一种手机3d电视视频播放方法
CN105228030A (zh) 一种基于无线网络的智能推送系统
CN106412663A (zh) 直播方法、直播装置以及终端
CN110072067A (zh) 可交互式操作的影视节目制作与发送方法、系统及设备
CN115604411A (zh) 一种信号转换设备及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant