CN114979688A - 直播数据传输系统、方法及装置 - Google Patents

直播数据传输系统、方法及装置 Download PDF

Info

Publication number
CN114979688A
CN114979688A CN202210510714.1A CN202210510714A CN114979688A CN 114979688 A CN114979688 A CN 114979688A CN 202210510714 A CN202210510714 A CN 202210510714A CN 114979688 A CN114979688 A CN 114979688A
Authority
CN
China
Prior art keywords
server
rendering
running
video data
servers
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202210510714.1A
Other languages
English (en)
Inventor
范涛
周玉杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Datianmian White Sugar Technology Co ltd
Original Assignee
Beijing Datianmian White Sugar Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Datianmian White Sugar Technology Co ltd filed Critical Beijing Datianmian White Sugar Technology Co ltd
Priority to CN202210510714.1A priority Critical patent/CN114979688A/zh
Publication of CN114979688A publication Critical patent/CN114979688A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2404—Monitoring of server processing errors or hardware failure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2405—Monitoring of the internal components or processes of the server, e.g. server load
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开提供了一种直播数据传输系统、方法及装置，其中，该系统包括：多个运行服务器、至少一个备份服务器以及导播台，各服务器分别部署有监控进程和渲染进程；所述运行服务器，用于获取直播的视频数据，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示，其中，不同的运行服务器获取的视频数据的数据来源不同；所述备份服务器，用于在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，获取所述目标运行服务器对应的数据来源的视频数据，并通过所述备份服务器的渲染进程进行渲染，将渲染后的视频信息发送至所述导播台。

Description

直播数据传输系统、方法及装置
技术领域
本公开涉及数据传输技术领域，具体而言，涉及一种直播数据传输系统、方法及装置。
背景技术
目前，互联网环境日益多样化发展，网络环境带给人们的娱乐方式也更加广泛及多样，收看直播就是人们新时代的娱乐和消费方式之一。在直播场景中，一般需要多路视频信息进行直播，这就导致需要有多个服务器对这多路视频信号进行处理，，如果一台服务器运行出现异常，那么在直播过程中将会缺少一路直播视频信号，进而影响直播效果。
发明内容
本公开实施例至少提供一种直播数据传输系统、方法及装置。
第一方面，本公开实施例提供了一种直播数据传输系统，所述系统包括多个运行服务器、至少一个备份服务器以及导播台，各服务器分别部署有监控进程和渲染进程；
所述运行服务器，用于获取直播的视频数据，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示，其中，不同的运行服务器获取的视频数据的数据来源不同；
所述备份服务器，用于在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，获取所述目标运行服务器对应的数据来源的视频数据，并通过所述备份服务器的渲染进程进行渲染，将渲染后的视频信息发送至所述导播台。
通过上述方法，可以在任一路直播的视频数据的运行服务器出现故障时，通过备份服务器对该运行服务器进行替代，保证了直播的视频数据的传输稳定性；通过在各运行服务器和各备份服务器上部署监控进程和渲染进程，一方面可以对各服务器本身的渲染进程的运行状态进行监控，另一方面可以对除当前服务器外的其他服务器的运行状态进行监控，提高了数据渲染和数据传输的稳定性。
一种可能的实施方式中，所述备份服务器，在通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号时，用于：
识别所述视频数据中的目标动作；
在所述视频数据中添加与所述目标动作匹配的虚拟展示动画；
通过所述渲染进程将添加所述虚拟展示动画后的视频数据渲染为符合预设条件的视频信号。
上述方式中，一方面通过备份服务器中部署的渲染进程将获取到的视频数据进行渲染处理，可以直接在导播台进行展示，避免在导播台进行渲染增加导播台负担，另一方面通过在视频数据中添加与目标动作匹配的虚拟展示动画，可以提升所述视频数据的展示效果。
一种可能的实施方式中，所述运行服务器的渲染进程，还用于：
向所述运行服务器的监控进程发送第二心跳信号，以通过所述监控进程对所述渲染进程的状态进行监控。
上述实施方式中，部署在运行服务器的渲染进程可以定时发送第二心跳信号给监控进程，以通过监控进程对所述渲染进程的运行状态进行监控，进一步保证直播数据传输的稳定性。
一种可能的实施方式中，所述运行服务器的监控进程还用于：
在检测到所述运行服务器的渲染进程停止发送所述第二心跳信号的情况下，结束所述运行服务器的当前的渲染进程，并重新启动渲染进程。
当监控进程检测到渲染进程停止发送第二心跳信号时，可以确定渲染进程运行异常，因此通过结束当前渲染进程，重新启动新的渲染进程，可以保证直播的视频数据能够正常被渲染，提高了直播数据的稳定性。
一种可能的实施方式中，在停止发送所述第一心跳信号后，所述目标运行服务器还用于：
作为备份服务器，并通过所述目标运行服务器上的监控进程，接收其他运行服务器的第一心跳信号。
在上述实施方式中，所述目标运行服务器在运行出现异常后，还可以作为备份服务器，继续对其他服务器的运行状态进行实时检测，可以在所述目标运行服务器运行出现异常之后，仍然能够对所述目标运行服务器进行充分的利用，提高了服务器的利用率。
一种可能的实施方式中，所述备份服务器，在获取所述目标运行服务器对应的数据来源的视频数据时，用于：
将所述备份服务器作为所述目标运行服务器，并获取所述目标运行服务器对应的数据来源的视频数据；
在所述系统包括多个备份服务器的情况下，在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，所述方法还包括根据以下方法确定替换所述目标运行服务器的备份服务器：
确定各备份服务器的当前状态；
基于各备份服务器的当前状态，确定替换所述目标运行服务器的备份服务器。
在上述实施方式中，当目标运行服务器出现异常时，可以结合各备份服务器的当前状态，启动对应的备份服务器代替目标运行服务器继续进行直播数据的传输工作，提高了直播数据传输的有效性。
第二方面，本公开实施例还提供一种直播数据传输方法，应用于运行服务器，所述运行服务器上部署有监控进程和渲染进程，所述包括：
获取直播的视频数据；
基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
在这种方法中，运行服务器可以将接收到直播的视频数据直接渲染成符合条件的视频信号，一方面可以提升直播效果，另一方面可以减轻导播台的渲染压力；利用监控进程对渲染进程和其他运行服务器的运行状态进行实时监控，可以在任一运行服务器出现运行问题时，启用备份服务器进行直播数据的渲染和传输工作，在任一渲染进程出现运行问题时，直接启动新的渲染进程，提高了直播数据的稳定性。
第三方面，本公开实施例还提供一种直播数据传输装置，应用于运行服务器，所述运行服务器上部署有监控进程和渲染进程，所述包括：
获取模块，用于获取直播的视频数据；
渲染模块，用于基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
监控模块，用于基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
第四方面，本公开实施例还提供一种计算机设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行上述第二方面，或第二方面中任一种可能的实施方式中的步骤。
第五方面，本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述第二方面，或第二方面中任一种可能的实施方式中的步骤。
关于上述直播数据传输装置、计算机设备、及计算机可读存储介质的效果描述参见上述直播数据传输方法的说明，这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种直播数据传输系统结构示意图；
图2示出了本公开实施例所提供的直播数据传输系统中，各服务器的部署示意图；
图3示出了本公开实施例所提供的直播数据传输系统中，渲染处理方法的流程图；
图4示出了本公开实施例所提供的直播数据传输系统中，渲染进程和监控进程的交互示意图；
图5示出了本公开实施例所提供的直播数据传输方法流程图；
图6示出了本公开实施例所提供的另一种直播数据传输装置的架构示意图；
图7示出了本公开实施例所提供的一种计算机设备的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
经研究发现，收看直播就是人们新时代的娱乐和消费方式之一。体育赛事的直播也广受关注，例如冰壶比赛。在一场冰壶比赛中，会同时开设多条赛道。进而，在直播场景中，则需要多路视频信息进行直播，这就导致需要有多个服务器对这多路视频信号进行处理，，如果一台服务器运行出现异常，那么在直播过程中将会缺少一路直播视频信号，进而影响直播效果。
基于上述研究，本公开提供了一种直播数据传输系统、方法及装置，在所述系统中包含多个运行服务器、至少一个备份服务器，各服务器均部署有渲染进程和监控进程。通过这种方式，可以在任一路直播的视频数据的运行服务器出现故障时，通过备份服务器对该运行服务器进行替代，保证了直播的视频数据的传输稳定性；通过在各运行服务器和各备份服务器上部署监控进程和渲染进程，一方面可以对各服务器本身的渲染进程的运行状态进行监控，另一方面可以对除当前服务器外的其他服务器的运行状态进行监控，提高了数据渲染和数据传输的稳定性。
针对以上方案所存在的缺陷，均是发明人在经过实践并仔细研究后得出的结果，因此，上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案，都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种直播数据传输系统进行详细介绍。
参见图1所示，为本公开实施例提供的直播数据传输系统的结构示意图，所述系统包括多个运行服务器101、至少一个备份服务器102以及导播台103，各服务器分别部署有监控进程和渲染进程，其中：
运行服务器101，用于获取直播的视频数据，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示，其中，不同的运行服务器获取的视频数据的数据来源不同。
备份服务器102，用于在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，获取所述目标运行服务器对应的数据来源的视频数据，并通过所述备份服务器的渲染进程进行渲染，将渲染后的视频信号发送至所述导播台。
导播台103，用于接收所述运行服务器101、所述备份服务器102传输的全部的视频信号，并将所述视频信号中的任一信号切换至直播系统中。
以下是针对上述系统的详细说明：
为了保证直播数据传输过程中数据传输的高效性，所述系统中包含多个运行服务器、至少一个备份服务器，具体的，可以如图2所示，其中，运行服务器为机器A、机器B、机器C、机器D，备份服务器为机器E、机器F。其中，每个运行服务器(即机器A、机器B、机器C、机器D)和每个备份服务器(即机器E、机器F)均部署有渲染进程和监控进程。各服务器上的渲染进程用以对获取到的所述直播的视频数据进行渲染处理，各服务器上的监控进程用以对各服务器上的渲染进程以及其他服务器的运行状态进行实时监控。
下面，将具体对各服务器执行的处理过程进行介绍。
一、运行服务器
在所述系统中，所述运行服务器可以将获取的直播视频数据，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台。
各运行服务器中部署的渲染进程可以对各运行服务器接收的直播视频数据进行渲染处理，同时定时发送第二心跳信号至各服务器的监控进程，以通过监控进程对所述渲染进程的运行状态进行监控。
部署在各运行服务器的监控进程，一方面可以接收各运行服务器的渲染进程发送的第二心跳信号，并根据接收情况对各运行服务器的渲染进程的状态进行监控，另一方面可以发送第一心跳信号至其他服务器中，以通过其他服务器对当前运行服务器的运行状态进行监控。
二、备份服务器
在所述系统中，所述备份服务器可以在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，替代所述目标运行服务器继续工作。
具体的，备份服务器在替代目标运行服务器继续工作时，一方面，可以获取所述目标运行服务器对应的数据来源的视频数据，并通过备份服务器的渲染进程对获取的视频数据进行渲染处理；另一方面，可以通过所述备份服务器的渲染进程定时发送第二心跳信号至备份服务器的监控进程，以通过备份服务器的监控进程对备份服务器的渲染进程的运行状态进行监控。
备份服务器在替代目标运行服务器继续工作时，各备份服务器的监控进程，与运行服务器的监控进程所执行的功能相同。每个备份服务器的监控进程一方面可以接收当前备份服务器的渲染进程发送的第二心跳信号，并根据接收情况对当前备份服务器的渲染进程的运行状态进行监督，另一方面可以发送第一心跳信号至其他服务器中(具体为发送至其他服务器的监控进程中)，以对当前备份服务器的运行状态进行监督。
其中，所述目标运行服务器可以是多个运行服务器的监控进程中停止发送第一心跳信号的任一运行服务器。
下面对所述运行服务器、所述备份服务器以服务器中的各功能进行详细说明：
所述运行服务器获取直播的视频数据，可以是指所述运行服务器获取的推流服务器发送的视频数据，不同运行服务器获取的直播的视频数据的来源不同。
示例性的，在冰壶比赛中，不同的运行服务器获取的直播的视频数据可以是指不同赛道的摄像机采集的视频数据。
在所述运行服务器获取到所述直播的视频数据之后，为了给观众呈现更真实、更生动的直播画面，需要对所述直播的视频数据进行渲染处理。
具体的，在运行服务器中，对所述直播的视频数据进行渲染处理时，可以通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号。
一种可能的实施方式，在备份服务器中，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号时，示例性的，可以如图3所示，包括以下几个步骤：
步骤301、识别所述视频数据中的目标动作。
具体的，识别所述视频数据中的目标动作时，示例性的可以通过动作识别算法确定所述视频数据中的目标动作，或者可以通过预先训练的动作识别网络识别所述视频数据中的目标动作。
步骤302、在所述视频数据中添加与所述目标动作匹配的虚拟展示动画。
示例性的，可以预先设置各个动作与对应的虚拟展示动画之间的对应关系，在所述视频数据中添加与所述目标动作匹配的虚拟展示动画时，可以先基于所述对应关系，确定与所述目标动作匹配的虚拟展示动画，然后再在所述视频数据中添加与所述目标动作匹配的虚拟展示动画。
在一种可能的实施方式中，通过所述渲染进程将添加所述虚拟展示动画后的视频数据渲染为符合预设条件的视频信号之前，还可以对所述添加所述虚拟展示动画后的视频数据进行画面特效处理。例如，可以对所述添加所述虚拟展示动画后的视频数据中的画面进行光影效果的添加，还可以对所述添加所述虚拟展示动画后的视频数据中的人物进行慢动作效果的添加。
步骤303、通过所述渲染进程将添加所述虚拟展示动画后的视频数据渲染为符合预设条件的视频信号。
一种可能的实施方式中，通过所述渲染进程将添加所述虚拟展示动画后的视频数据渲染为符合预设条件的视频信号时，可以基于渲染进程将所述视频数据转换为SDI视频信号(即符合预设条件的视频信号)；若所述视频数据未能转换为SDI视频信号，则提示渲染失败，返回重新进行渲染处理。
利用这种方式，将视频采集装置采集到的视频数据渲染成更立体、更生动的视频数据，进而增加了直播的观赏性。
进一步的，为了保证直播数据传输的有效性，避免多个运行服务器的渲染进程都运行失败而导致导播台没有可选择播放的赛事画面的情况出现，可以利用所述运行服务器中监控进程对渲染进程进行实时地监控。示例性的，在所述运行服务器中，所述渲染进程与所述监控进程的交互，如图4所示，其中：
所述渲染进程用于向所述运行服务器的监控进程发送第二心跳信号，以通过所述监控进程对所述渲染进程的状态进行监控。
具体的，所述渲染进程向所述运行服务器的监控进程发送第二心跳信号时，可以在第一时间间隔内，基于所述渲染进程的当前状态生成第二心跳信号，再将所述第二心跳信号发送至所述监控进程。所述第一时间间隔的数值可以依据使用需求进行设定，例如，可以是50毫秒。
在所述渲染进程向所述监控进程发送第二心跳信号的同时，所述监控进程基于所述第二心跳信号的接收情况对所述渲染进程的运行状态进行监控。
具体的，所述监控进程基于所述第二心跳信号的接收情况对所述运行服务器的渲染进程的运行状态进行监控时，可以通过判断所述监控进程是否在第二时间间隔内接收到所述渲染进程发送的所述第二心跳信号。所述第二时间间隔也可以依据使用需求进行设定。其中，所述第二时间间隔的数值可以根据需求设定，例如可以是1秒钟。
一种可能的实施方式中，若所述监控进程在第二预设时间间隔内接收到所述渲染进程发送的所述第二心跳信号，则确定所述渲染进程正常运行；另一种可能的实施方式中，若所述监控进程在第二预设时间间隔内没有接收到所述渲染进程发送的所述第二心跳信号，则确定所述渲染进程运行异常，提示所述运行服务器的渲染进程停止发送所述第二心跳信号。
一种可能的实施方式中，所述监控进程在检测到所述运行服务器的渲染进程停止发送所述第二心跳信号的情况下，可以结束所述运行服务器的当前的渲染进程，并重新启动渲染进程。
在这种方式中，渲染进程定时向监控进程发送第二心跳信号，监控进程根据第二心跳信号的接收情况对所述渲染进程的运行状态进行监控，提高了直播数据传输的有效性，进一步保证了直播的观赏性。
在另外一种可能的实施方式中，若所述监控进程在预设时间内重新启动渲染进程的次数超过预设次数，则可以确定当前运行服务器的运行状态出现问题，因此所述当前运行服务器的监控进程可以停止向其他服务器发送第一心跳信号，以启用备份服务器替代当前运行服务器。
为了进一步保证直播数据传输的有效性，在检测运行服务器中的渲染进程是否可以正常运行的同时，还需要对多个运行服务器的运行状态进行检测。具体的，在对多个运行服务器的运行状态进行检测时，可以基于所述运行服务器和所述备份服务器中部署的监控进程通过用户数据报协议互相发送第一心跳信号。
示例性的，如图2所示的系统中，机器A的监控进程需要向机器B、机器C、机器D、机器E、机器F发送所述第一心跳信号。如果所述机器B、机器C、机器D、机器E、机器F成功接收到机器A发送的所述第一心跳信号，则确定所述机器A运行正常；否则，确定所述机器A运行异常，并将所述机器A确定为目标运行服务器。
当多个运行服务器中出现目标运行服务器的监控进程停止发送第一心跳信号时，需要启用备份服务器替换所述目标运行服务器继续进行直播数据传输。
一种可能的实施方式中，在备份服务器中，所述备份服务器检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，先获取所述目标运行服务器对应的数据来源的视频数据，再通过所述备份服务器的渲染进程进行渲染，将渲染后的视频信号发送至所述导播台。
具体的，在备份服务器中，在获取所述目标运行服务器对应的数据来源的视频数据时，可以将所述备份服务器作为所述目标运行服务器，并获取所述目标运行服务器对应的数据来源的视频数据。
另一种可能的实施方式中，在所述系统中包含多个备份服务器时，可以从多个备份服务器中确定一个用以替换所述目标运行服务器的备份服务器。
具体的，从多个备份服务器中确定一个用以替换所述目标运行服务器的备份服务器时，可以先确定各备份服务器的当前状态，再基于各备份服务器的当前状态，确定替换所述目标运行服务器的备份服务器。
所述各备份服务器的当前状态示例性的可以包括各备份服务器的运行时长、各备份服务器的异常次数等。
或者在从多个备份服务器中确定一个用以替换所述目标运行服务器的备份服务器时，可以按照预设的替换顺序，确定替换所述目标运行服务器的备份服务器。
示例性的，如图2所示的系统中，若机器A为目标运行服务器，机器E和机器F均作为备份服务器时，可以分别基于机器E、机器F发送第一心跳信号的情况确定机器E、机器F是否能正常运行，若机器E、机器F均能正常运行，则按照预设的顺序替换所述目标运行服务器进行工作；若机器E或机器F中只有一台可以正常运行，则将正常运行的备份服务器代替所述机器A进行工作。
进一步的，在备份服务器代替所述目标运行服务器工作时，所述目标运行服务器可以作为备份服务器继续工作。
一种可能的实施方式中，在所述目标运行服务器停止发送所述第一心跳信号后，所述目标运行服务器可以作为备份服务器，并通过所述目标运行服务器上的监控进程，接收其他运行服务器的第一心跳信号。
利用这种方式，将停止发送第一心跳信号的目标运行服务器作为备份服务器，接收其他运行服务器的第一心跳信号，继续进行其他运行服务器的监控，减少资源的浪费。
这里需要说明的是，所述目标运行服务器在停止发送第一心跳信号之后，可以作为备份服务器，以在其他运行服务器出现故障时进行替代。
所述运行服务器给所述系统中的其他服务器均发送第一心跳信号的原因在于，所述运行服务器无法分辨备份服务器和运行服务器，或者说备份服务器和运行服务器并非固定的，运行服务器可能会出现故障成为备份服务器，备份服务器也可能会替代运行服务器。
所述导播台在接受到各服务器传输的视频信号之后，可以通过不同的显示屏显示各视频信号，然后响应信号切换指令，将与信号切换指令对应的视频信号切换到直播信道中，以通过直播信道中的视频信号进行直播。
基于本公开实施例提供的直播数据传输系统，本公开实施例还提供了一种直播数据传输方法。本公开实施例所提供的直播数据传输方法的执行主体一般为服务器。
如图5所示，为本公开实施例提供的直播数据传输方法的流程图，所述方法包括步骤501～步骤503，应用于运行服务器，所述服务器上部署有监控进程和渲染进程。其中：
步骤501、获取直播的视频数据。
具体的，所述直播的视频数据是基于目标视频采集装置实时采集得到的视频。其中，所述目标视频采集装置是在多个视频采集装置中预先设定的任一视频采集装置。所述视频采集装置可以是DV、摄像机、gopro等。
步骤502、基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示。以及
具体的，基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号的方法与上述通过备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号方法一致，在此不再赘述。
步骤503、基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
一种可能的实施方式中，基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号时，若全部成功接收其他服务器的第一心跳信号，则确定其他服务器均运行成功；若未能成功接收其他服务器中任一服务器的第一心跳信号，则确定该服务器运行异常。
一种可能的实施方式中，在所述运行服务器上的监控进程接收所述运行服务器上的渲染进程的第二心跳信号时，若所述监控进程在第二预设时间间隔内成功接收到所述渲染进程的第二心跳信号，则确定所述运行服务器上的渲染进程正常运行；否则，确定所述运行服务器上的渲染进程运行异常，并结束所述运行服务器上的当前的渲染进程，并重新启动渲染进程。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思，本公开实施例中还提供了与直播数据传输方法对应的直播数据传输装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述直播数据传输方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图6所示，为本公开实施例提供的一种直播数据传输装置的架构示意图，所述装置包括：获取模块601、渲染模块602、监控模块603；其中，
获取模块601，用于获取直播的视频数据；
渲染模块602，用于基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
监控模块603，用于基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
基于同一技术构思，本公开实施例还提供了一种计算机设备。参照图7所示，为本公开实施例提供的计算机设备700的结构示意图，包括处理器701、存储器702、和总线703。其中，存储器702用于存储执行指令，包括内存7021和外部存储器7022；这里的内存7021也称内存储器，用于暂时存放处理器701中的运算数据，以及与硬盘等外部存储器7022交换的数据，处理器701通过内存7021与外部存储器7022进行数据交换，当计算机设备700运行时，处理器701与存储器702之间通过总线703通信，使得处理器701在执行以下指令：
获取直播的视频数据；
基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中所述的直播数据传输方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品，该计算机产品承载有程序代码，所述程序代码包括的指令可用于执行上述方法实施例中所述的直播数据传输方法的步骤，具体可参见上述方法实施例，在此不再赘述。
其中，上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software Development Kit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种直播数据传输系统，其特征在于，所述系统包括多个运行服务器、至少一个备份服务器以及导播台，各服务器分别部署有监控进程和渲染进程；
所述运行服务器，用于获取直播的视频数据，通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示，其中，不同的运行服务器获取的视频数据的数据来源不同；
所述备份服务器，用于在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，获取所述目标运行服务器对应的数据来源的视频数据，并通过所述备份服务器的渲染进程进行渲染，将渲染后的视频信息发送至所述导播台。
2.根据权利要求1所述的系统，其特征在于，所述备份服务器，在通过所述备份服务器上部署的渲染进程将所述视频数据渲染为符合预设条件的视频信号时，用于：
识别所述视频数据中的目标动作；
在所述视频数据中添加与所述目标动作匹配的虚拟展示动画；
通过所述渲染进程将添加所述虚拟展示动画后的视频数据渲染为符合预设条件的视频信号。
3.根据权利要求1或2所述的系统，其特征在于，所述运行服务器的渲染进程，还用于：
向所述运行服务器的监控进程发送第二心跳信号，以通过所述监控进程对所述渲染进程的状态进行监控。
4.根据权利要求3所述的系统，其特征在于，所述运行服务器的监控进程还用于：
在检测到所述运行服务器的渲染进程停止发送所述第二心跳信号的情况下，结束所述运行服务器的当前的渲染进程，并重新启动渲染进程。
5.根据权利要求1～4任一所述的系统，其特征在于，在停止发送所述第一心跳信号后，所述目标运行服务器还用于：
作为备份服务器，并通过所述目标运行服务器上的监控进程，接收其他运行服务器的第一心跳信号。
6.根据权利要求1～5任一所述的系统，其特征在于，所述备份服务器，在获取所述目标运行服务器对应的数据来源的视频数据时，用于：
将所述备份服务器作为所述目标运行服务器，并获取所述目标运行服务器对应的数据来源的视频数据；
在所述系统包括多个备份服务器的情况下，在检测到所述多个运行服务器中的目标运行服务器的监控进程停止发送第一心跳信号时，所述方法还包括根据以下方法确定替换所述目标运行服务器的备份服务器：
确定各备份服务器的当前状态；
基于各备份服务器的当前状态，确定替换所述目标运行服务器的备份服务器。
7.一种直播数据传输方法，其特征在于，应用于运行服务器，所述运行服务器上部署有监控进程和渲染进程，所述包括：
获取直播的视频数据；
基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
8.一种直播数据传输装置，其特征在于，应用于运行服务器，所述运行服务器上部署有监控进程和渲染进程，所述包括：
获取模块，用于获取直播的视频数据；
渲染模块，用于基于所述运行服务器上的渲染进程将所述视频数据渲染为符合预设条件的视频信号，并将所述视频信号发送至导播台，以通过导播台进行展示；以及，
监控模块，用于基于所述运行服务器上的监控进程接收其他服务器的第一心跳信号，以及接收所述运行服务器上的渲染进程的第二心跳信号，以对所述其他服务器的状态和所述运行服务器上的渲染进程的状态进行监控。
9.一种计算机设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求7所述的直播数据传输方法的步骤。
10.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求7所述的直播数据传输方法的步骤。
CN202210510714.1A 2022-05-11 2022-05-11 直播数据传输系统、方法及装置 Withdrawn CN114979688A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210510714.1A CN114979688A (zh) 2022-05-11 2022-05-11 直播数据传输系统、方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210510714.1A CN114979688A (zh) 2022-05-11 2022-05-11 直播数据传输系统、方法及装置

Publications (1)

Publication Number Publication Date
CN114979688A true CN114979688A (zh) 2022-08-30

Family

ID=82980796

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210510714.1A Withdrawn CN114979688A (zh) 2022-05-11 2022-05-11 直播数据传输系统、方法及装置

Country Status (1)

Country Link
CN (1) CN114979688A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117119264A (zh) * 2023-10-18 2023-11-24 北京奇点智播科技有限公司 一种视频数据处理系统及方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101631011A (zh) * 2008-07-16 2010-01-20 中国科学院声学研究所 适于进行ip流媒体实时处理及转发设备的热备方法及系统
CN109842505A (zh) * 2017-11-27 2019-06-04 北京通号国铁城市轨道技术有限公司 一种云端集群故障处理方法及装置
US20200104222A1 (en) * 2018-09-28 2020-04-02 Hewlett Packard Enterprise Development Lp Systems and methods for managing server cluster environments and providing failure recovery therein
CN111031341A (zh) * 2019-11-20 2020-04-17 杭州当虹科技股份有限公司 一种基于心跳的双机热备方法
CN111163330A (zh) * 2020-01-13 2020-05-15 广州虎牙科技有限公司 直播视频的渲染方法、装置、系统、设备及存储介质
US20220004449A1 (en) * 2020-07-01 2022-01-06 Abb Schweiz Ag Method For Failure Detection And Role Selection In A Network Of Redundant Processes

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101631011A (zh) * 2008-07-16 2010-01-20 中国科学院声学研究所 适于进行ip流媒体实时处理及转发设备的热备方法及系统
CN109842505A (zh) * 2017-11-27 2019-06-04 北京通号国铁城市轨道技术有限公司 一种云端集群故障处理方法及装置
US20200104222A1 (en) * 2018-09-28 2020-04-02 Hewlett Packard Enterprise Development Lp Systems and methods for managing server cluster environments and providing failure recovery therein
CN111031341A (zh) * 2019-11-20 2020-04-17 杭州当虹科技股份有限公司 一种基于心跳的双机热备方法
CN111163330A (zh) * 2020-01-13 2020-05-15 广州虎牙科技有限公司 直播视频的渲染方法、装置、系统、设备及存储介质
US20220004449A1 (en) * 2020-07-01 2022-01-06 Abb Schweiz Ag Method For Failure Detection And Role Selection In A Network Of Redundant Processes

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117119264A (zh) * 2023-10-18 2023-11-24 北京奇点智播科技有限公司 一种视频数据处理系统及方法
CN117119264B (zh) * 2023-10-18 2024-01-26 北京奇点智播科技有限公司 一种视频数据处理系统及方法

Similar Documents

Publication Publication Date Title
CN110418151B (zh) 游戏直播中弹幕信息发送、处理方法、装置、设备、介质
CN111866525A (zh) 多视点视频的播放控制方法及装置、电子设备、存储介质
JP6937978B2 (ja) 双方向性ビデオコンテンツの表示の検出および表示に対する応答
CN113038287B (zh) 多人视频直播业务实现方法、装置、计算机设备
CA3153390C (en) Multi-camera synchronization method and distributed system
CN110870975B (zh) 游戏直播的处理方法、装置、设备及计算机可读存储介质
CN105007527A (zh) 数据直播方法及装置
CN106201690A (zh) 应用运行控制方法及装置
CN112619130B (zh) 一种游戏的多场景回放方法及装置
CN114979688A (zh) 直播数据传输系统、方法及装置
CN113242435A (zh) 一种投屏的方法、装置及系统
CN113242441B (zh) 一种直播方法、装置、计算机设备及存储介质
CN107835449B (zh) Android平台上基于网络实现多终端同步联屏的方法
KR101249279B1 (ko) 동영상 생성 방법 및 장치
CN110809172A (zh) 交互特效展示方法、装置及电子设备
CN104486553B (zh) 一种全景照片拍摄方法和终端
CN112770172A (zh) 一种直播监控方法、装置、计算机设备及存储介质
CN113014852A (zh) 信息提示方法、装置及设备
CN114356090B (zh) 一种控制方法、装置、计算机设备及存储介质
CN107592561B (zh) 屏保显示方法、装置、智能遥控器及计算机可读存储介质
CN109726026B (zh) 一种交互数据处理方法、装置、设备及存储介质
CN114344918A (zh) 基于虚拟场景的数据录制方法、装置、设备、介质及产品
CN108289226B (zh) 数字电影视频数据的放映方法、服务器和系统
CN113132808A (zh) 视频生成方法、装置及计算机可读存储介质
CN111475240B (zh) 数据处理方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20220830

WW01 Invention patent application withdrawn after publication