CN115250361A - 一种直播数据处理方法及装置 - Google Patents

一种直播数据处理方法及装置 Download PDF

Info

Publication number
CN115250361A
CN115250361A CN202110460990.7A CN202110460990A CN115250361A CN 115250361 A CN115250361 A CN 115250361A CN 202110460990 A CN202110460990 A CN 202110460990A CN 115250361 A CN115250361 A CN 115250361A
Authority
CN
China
Prior art keywords
video frame
local
target
target local
previous
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110460990.7A
Other languages
English (en)
Inventor
苏建明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Qingyan Communication Equipment Co ltd
Original Assignee
Anhui Qingyan Communication Equipment Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Qingyan Communication Equipment Co ltd filed Critical Anhui Qingyan Communication Equipment Co ltd
Priority to CN202110460990.7A priority Critical patent/CN115250361A/zh
Publication of CN115250361A publication Critical patent/CN115250361A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请提供一种直播数据处理方法及装置，其中所述直播数据处理方法包括：采集所述主播端展示页面的当前视频帧和上一视频帧；分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。本申请的直播数据处理方法，通过将变化的视频帧传输至客户端进行展示，避免对未变化的视频帧进行多次传输，解决了视频直播高流量的问题。

Description

一种直播数据处理方法及装置
技术领域
本申请涉及数据处理技术领域，特别涉及一种直播数据处理方法及装置、计算设备和计算机可读存储介质。
背景技术
随着直播技术的不断发展，越来越多的直播形式不断涌现出来。主要的直播形式分为视频直播和音频直播两种类型。由于视频直播可以看见直播画面，并且互动性较强，故更多的用户选择观看视频直播。
视频直播存在使用流量多，带宽占用过大的缺陷。现有技术中解决此类问题的方法主要是将视频流进行压缩再传输，但可提升的空间不大。故需要一种方式来解决视频直播的问题。
发明内容
有鉴于此，本申请实施例提供了一种直播数据方法及装置、计算设备和计算机可读存储介质，以解决现有技术中存在的技术缺陷。
根据本申请实施例的第一方面，提供了一种直播数据处理方法，应用于主播端，包括：
采集所述主播端展示页面的当前视频帧和上一视频帧；
分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；
在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
可选地，获得至少两个局部当前视频帧和至少两个局部上一视频帧，包括：
获取预设的分割参数；
根据所述分割参数分割所述当前视频帧，获得至少两个局部当前视频帧，其中，每个所述局部当前视频帧携带有局部视频帧标识；
根据所述分割参数分割所述上一视频帧，获得至少两个局部上一视频帧，其中，每个所述局部上一视频帧携带有局部视频帧标识。
可选地，所述获取预设的分割参数，包括：
获取预设的分割行数和/或分割列数。
可选地，所述方法还包括：
确定目标局部视频帧标识；
根据所述目标局部视频帧标识在至少两个局部当前视频帧中确定目标局部当前视频帧；
根据所述目标局部视频帧标识在至少两个局部上一视频帧中确定目标局部上一视频帧。
可选地，所述方法还包括：
判断所述目标局部当前视频帧相对于所述目标局部上一视频帧是否改变；
若是，则确定所述目标局部当前视频帧与所述目标局部上一视频帧不一致；
若否，则确定所述目标局部当前视频帧与所述目标局部上一视频帧一致。
可选地，将所述目标局部当前视频帧传输至客户端，包括：
分别解析所述目标局部当前视频帧和所述目标局部上一视频帧，获得所述目标局部当前视频帧的第一图像参数以及目标局部上一视频帧的第二图像参数；
在所述第一图像参数与所述第二图像参数的区别位数小于预设位阈值的情况下，将所述目标局部当前视频帧传输至客户端。
根据本申请实施例的第二方面，提供了一种直播数据处理方法，应用于客户端，包括：
接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识；
根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧；
根据所述目标局部视频帧替换所述目标本地局部视频帧。
可选地，所述根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧，包括：
获取预设的分割参数；
根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，其中，每个所述本地局部视频帧携带有局部视频帧标识。
可选地，所述根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，包括：
根据所述局部视频帧标识在至少两个本地局部视频帧中确定目标本地局部视频帧。
根据本申请实施例的第三方面，提供了一种直播数据处理装置，应用于主播端，包括：
采集模块，被配置为采集所述主播端展示页面的当前视频帧和上一视频帧；
分割模块，被配置为分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；
传输模块，被配置为在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
根据本申请实施例的第四方面，提供了一种直播数据处理装置，应用于客户端，包括：
接收模块，被配置为接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识；
确定模块，被配置为根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧；
替换模块，被配置为根据所述目标局部视频帧替换所述目标本地局部视频帧。
根据本申请实施例的第五方面，提供了一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述指令时实现所述直播数据处理方法的步骤。
根据本申请实施例的第六方面，提供了一种计算机可读存储介质，其存储有计算机指令，该指令被处理器执行时实现所述直播数据处理方法的步骤。
本申请提供一种直播数据处理方法及装置，其中所述直播数据处理方法包括：采集所述主播端展示页面的当前视频帧和上一视频帧；分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。通过本申请的直播数据处理方法，将存在变化的局部视频帧传输至客户端进行展示，避免对相同内容视频帧的重复传递，节省了用户观看直播使用的流量，减少了直播占用带宽。
附图说明
图1是本申请实施例提供的计算设备的结构框图；
图2是本申请实施例提供的应用于主播端的直播数据处理方法的流程图；
图3是本申请实施例提供的当前视频帧与上一视频帧示意图；
图4是本申请实施例提供的局部视频帧标识示意图；
图5是本申请实施例提供的分割视频帧示意图；
图6是本申请实施例提供的对比局部视频帧示意图；
图7是本申请实施例提供的应用于客户端的直播数据处理方法的流程图；
图8是本申请实施例提供的替换局部视频帧示意图；
图9是本申请实施例提供的应用于游戏直播的直播数据处理方法流程图；
图10是本申请实施例提供的应用于主播端的直播数据处理装置的结构示意图；
图11是本申请实施例提供的应用于客户端的直播数据处理装置的结构示意图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本申请内涵的情况下做类似推广，因此本申请不受下面公开的具体实施的限制。
在本申请一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本申请一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本申请一个或多个实施例中可能采用术语第一、第二等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请一个或多个实施例范围的情况下，第一也可以被称为第二，类似地，第二也可以被称为第一。取决于语境，如在此所使用的词语“如果”可以被解释成为“响应于确定”。
首先，对本发明一个或多个实施例涉及的名词术语进行解释。
视频帧：视频都是由静止的画面组成的,这些静止的画面被称为帧。
在本申请中，提供了一种直播数据处理方法及装置、计算设备和计算机可读存储介质，在下面的实施例中逐一进行详细说明。
图1示出了根据本申请一实施例的计算设备100的结构框图。该计算设备100的部件包括但不限于存储器110和处理器120。处理器120与存储器110通过总线130相连接，数据库150用于保存数据。
计算设备100还包括接入设备140，接入设备140使得计算设备100能够经由一个或多个网络160通信。这些网络的示例包括公用交换电话网(PSTN)、局域网(LAN)、广域网(WAN)、个域网(PAN)或诸如因特网的通信网络的组合。接入设备140可以包括有线或无线的任何类型的网络接口(例如，网络接口卡(NIC))中的一个或多个，诸如IEEE802.11无线局域网(WLAN)无线接口、全球微波互联接入(Wi-MAX)接口、以太网接口、通用串行总线(USB)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC)接口，等等。
在本申请的一个实施例中，计算设备100的上述部件以及图1中未示出的其他部件也可以彼此相连接，例如通过总线。应当理解，图1所示的计算设备结构框图仅仅是出于示例的目的，而不是对本申请范围的限制。本领域技术人员可以根据需要，增添或替换其他部件。
计算设备100可以是任何类型的静止或移动计算设备，包括移动计算机或移动计算设备(例如，平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如，智能手机)、可佩戴的计算设备(例如，智能手表、智能眼镜等)或其他类型的移动设备，或者诸如台式计算机或PC的静止计算设备。计算设备100还可以是移动式或静止式的服务器。
其中，处理器120可以执行图2所示应用于主播端的直播数据处理方法中的步骤。图2示出了根据本申请一实施例的应用于主播端的直播数据处理方法的流程图，包括步骤202至步骤206。
步骤202：采集所述主播端展示页面的当前视频帧和上一视频帧。
主播端为主播发起直播的设备，例如手机、电脑、平板等；当前视频帧可以是主播端当前展示页面的对应的视频帧；上一视频帧可以是与当前视频帧存在连接关系的位于当前视频帧之前的视频帧。
具体的，将主播端的直播数据传输至客户端展示，需要获取主播端展示内容，用于作为直播数据传输至客户端。
在本申请一具体实施方式中，如图3所示，图3为本申请实施例提供的当前视频帧与上一视频帧示意图。图中301表示上一视频帧、302表示当前视频帧、303表示主播端当前展示页面，其中301与302存在连接关系，在主播端播放301后会直接转到302进行播放。在直播过程中，采集当前视频帧302以及上一视频帧301。根据主播端当前展示页面303，确定与所述当前展示页面对应的当前视频帧301；同理，根据主播端上一展示页面确定与所述上一展示页面对应的上一视频帧302。
通过采集主播端展示的当前视频帧和上一视频帧，作为传输至客户端的直播数据。
步骤204：分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧。
对视频帧的分割可以是将面积大的视频帧进行矩阵分割得到小于视频帧面积的局部视频帧。局部当前视频帧可以是对当前视频帧进行分割得到的；局部上一视频帧可以是对上一视频帧进行分割得到的。在对视频帧进行分割后至少得到两个局部视频帧。
本申请一具体实施方式中，以分割主播端展示的动画视频对应的视频帧为例，对分割视频帧进行具体描述。主播端播放动画视频，获取当前时刻动画视频对应的视频帧，以及上一时刻动画视频对应的视频帧，其中当前时刻与上一时刻是连续的。将获取到的动画视频帧分别进行分割，得到局部动画视频帧。
通过获取对视频帧进行分割，用于后续对获取的视频帧做进一步的处理。
为了方便对分割得到的局部视频帧进行比较，需要将上一视频帧以及当前视频帧分割成存在对应位置的局部视频帧。
具体的，分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧，包括：
获取预设的分割参数；
根据所述分割参数分割所述当前视频帧，获得至少两个局部当前视频帧，其中，每个所述局部当前视频帧携带有局部视频帧标识；
根据所述分割参数分割所述上一视频帧，获得至少两个局部上一视频帧，其中，每个所述局部上一视频帧携带有局部视频帧标识。
在实际应用中，根据预设的分割参数可将局部视频帧以及上一视频帧划分为相同数量且存在对应位置的局部当前视频帧以及局部上一视频帧。每个分割得到的局部视频帧都携带有局部视频帧标识，用于标识局部视频帧的位置。
在本申请一具体实施方式中，如图4所示，图4是本申请实施例提供的局部视频帧标识示意图，图中401为当前视频帧，402为上一视频帧，分别对其进行矩阵切割。对当前视频帧401进行分割，得到带有局部视频帧标识1、2、3、4的局部当前视频帧；对上一视频帧进行分割得到带有局部视频帧标识a、b、c、d的局部上一视频帧。
在具体实施中，预设的分割参数包括预设的分割行数和/或分割列数。
具体的，基于所述预设的分割行数和/或分割列数，将当前视频帧和上一视频帧分别分割为与预设行数以及预设列数一致的局部上一视频帧和局部当前视频帧。
在本申请一具体实施方式中，如图5所示，图5是本申请实施例提供的分割视频帧示意图，其中，501表示未进行分割处理的视频帧，502表示根据预设的分割行数以及分割列数对501进行矩阵分割得到的局部视频帧。本实施例中，预设的分割参数包括分割行数数值为2、分割列数数值为2。根据预设的行数值以及列数值将501分割为两行两列的4个局部视频帧。
在实际应用中，预设的分割行数以及分割列数都为正整数且不能同时为1，即在分割行数以及分割列数同时为1时并未对视频帧进行分割。故在对视频帧进行分割处理后，可以获取分割处理得到的至少两个局部视频帧。
在对视频帧分割后，可以根据局部视频帧标识确定目标局部视频帧。目标局部当前视频帧以及目标局部上一视频帧为存在对应位置关系的视频帧
具体的，确定目标局部视频帧标识；根据所述目标局部视频帧标识在至少两个局部当前视频帧中确定目标局部当前视频帧；根据所述目标局部视频帧标识在至少两个局部上一视频帧中确定目标局部上一视频帧。
在本申请一具体实施方式中，如图4所示，图4是本申请实施例提供的局部视频帧标识示意图。在本实施例中，确定当前局部视频帧标识为1，根据局部视频帧标识1，在当前视频帧401的四个局部当前视频帧中确定位于第一行第一列的目标局部当前视频帧。根据局部视频帧标识在上一视频帧402的四个局部上一视频帧中确定位于第一行第一列的目标局部上一视频帧。
通过将视频帧进行分割处理，方便将分割得到的局部视频帧进行对比，确定变化的局部视频帧。
步骤206：在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
目标局部当前视频帧和目标局部上一视频帧为位于对应位置的局部视频帧。将对应位置的局部视频帧进行比较，判断视频帧内容发生的变化。
在本申请一具体实施方式中，如图6所示，图6是本申请实施例提供的对比局部视频帧示意图。图中601为主播端展示的上一视频帧，602为主播端展示的当前视频帧。603、604分别为将601上一视频帧分割得到的两个局部上一视频帧，605、606分别为将602当前视频帧分割得到的两个局部当前视频帧。确定目标局部上一视频帧为603，并确定与目标局部当前视频帧位于对应位置的局部当前视频帧605，在603与605存在区别的情况下，将目标局部当前视频帧605传输至客户端。
在确定目标局部当前视频帧与目标局部上一视频帧是否一致时，需要对两者进行对比。
具体的，判断所述目标局部当前视频帧相对于所述目标局部上一视频帧是否改变；若是，则确定所述目标局部当前视频帧与所述目标局部上一视频帧不一致；若否，则确定所述目标局部当前视频帧与所述目标局部上一视频帧一致。
在本申请一具体实施方式中，如图6所示，图6是本申请实施例提供的对比局部视频帧示意图。在以603作为目标局部上一视频帧、605作为目标局部当前视频帧时，判断605相对于603是否发生改变。在图6中，目标局部上一视频帧603中为圆形图案，而目标局部当前视频帧605中为三角形图案，则确定603与605不一致。在以604作为目标局部上一视频帧、606作为目标局部当前视频帧时，判断606相对于604是否发生改变。在图6中，目标局部上一视频帧604中为三角图案，目标局部当前视频帧606中同为三角形图案，则确定603与605一致。
通过上述比较可以得到与所述局部上一视频帧不一致的局部当前视频帧，将这些局部当前视频帧传输至客户端。
在实际应用中，在局部当前视频帧与局部上一视频帧存在较大区别时，将局部当前视频帧传输至客户端。
实际应用时的步骤为：分别解析所述目标局部当前视频帧和所述目标局部上一视频帧，获得所述目标局部当前视频帧的第一图像参数以及目标局部上一视频帧的第二图像参数；
在所述第一图像参数与所述第二图像参数的区别位数大于预设位阈值的情况下，将所述目标局部当前视频帧传输至客户端。
具体的，解析局部视频帧可以是以字符串的形式表示局部视频帧。第一图像参数可以是表示目标局部当前视频帧的字符串，第二图像参数可以是表示目标局部上一视频帧的字符串，其中，表示视频帧的字符串长度一致。将表示目标局部上一视频帧的字符串与表示目标局部当前视频帧的字符串的每一位进行对比。在区别位数大于预设的区别位数值时，再将目标局部当前视频帧传输至客户端。
通过将第一图像参数与第二图像参数进行对比，在区别位数大于预设的位数值时，再将目标局部当前视频帧传输至客户端，实现了在视频帧变化较小不影响画面效果时，仍沿用上一帧的画面数据，不再传输新的视频数据，从而在不影响观看效果的前提下，节省了观看直播时使用的流量。
本申请提供的应用于主播端的直播数据处理方法，通过采集所述主播端展示页面的当前视频帧和上一视频帧；分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。本申请的直播数据处理方法，仅将变化的视频帧传输至客户端，减少了视频直播占用的带宽资源。
图1计算设备中的处理器120也可以执行图7所示应用于客户端的直播数据处理方法中的步骤。图7示出了根据本申请一实施例的应用于客户端的直播数据处理方法的流程图，包括步骤702至步骤706。
步骤702：接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识。
客户端是指可以观看直播的设备，包括但不限于电脑、手机以及平板等设备。客户端接收主播端传输的至少一个目标局部视频帧，用于对直播画面进行展示。目标局部视频帧携带有目标局部视频帧，用于确定目标局部视频帧在直播画面中的位置。
具体的，在直播过程中，主播端将主播展示的画面以直播数据的形式传输中客户端。客户端接收直播数据，即接收至少一个目标局部视频帧，用于在客户端展示主播端播放的画面。在客户端未接收到目标局部视频帧时，以客户端本地的局部视频帧作为直播画面数据用于向观看直播的用户展示直播画面。
在本申请一具体实施方式中，以接收带有局部视频帧标识“4”的显示动画人物手部动作的视频帧为例进行描述。本实施例中目标局部视频帧为显示动画人物手部动作的视频帧，并且视频帧携带有标识“4”。客户端为观看直播使用的手机。观看直播的手机接收显示动画人物手部动作的视频帧，用于将主播端展示的直播画面还原至客户端展示。局部视频帧标识“4”用于确定显示手部的视频帧在客户端展示直播画面时的位置。
步骤704：根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧。
目标局部视频帧标识中包含位置信息，根据位置信息在本地显示视频帧中确定位置以及位置对应的本地局部视频帧，作为目标本地局部视频帧。本地显示视频帧用于在客户端展示主播端的直播画面。本地显示视频帧包含客户端保存的由主播端传输至客户端的视频帧。
在本申请一具体实施方式中，以目标局部视频帧标识为“3-2”为例，对上述步骤进行具体描述。本实施例中，目标局部视频帧标识“3-2”中包含“第3行第2列”的位置信息。根据位置信息“第3行第2列”确定在本地视频帧中目标本地局部视频帧的位置在“第3行第2列”。
在实际应用中，为了从本地显示视频帧中确定目标本地局部视频帧，需要将本地视频帧也进行分割，得到至少两个本地局部视频帧，具体步骤为：
获取预设的分割参数；
根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，其中，每个所述本地局部视频帧携带有局部视频帧标识。
具体的，分割参数包括分割行数以及分割列数。对本地视频帧进行分割所使用的分割参数与主播端对视频帧进行分割使用的分割参数的参数值一致。根据分割参数对本地显示视频帧进行分割，得到至少两个本地局部视频帧。
在本申请一具体实施方式中，以对本地显示视频帧A进行分割为例，对上述步骤进行具体描述。获取与主播端分割参数一致的分割参数作为预设的分割参数。根据分割参数对本地显示视频帧A进行分割，得到至少两个本地局部视频帧。每个本地局部视频帧携带有局部视频帧标识。
在实际应用中，确定目标本地局部视频帧的方法为：根据所述局部视频帧标识在至少两个本地局部视频帧中确定目标本地局部视频帧。
具体的，根据局部视频帧标识确定位置信息，在对本地显示视频帧分割得到的本地局部视频帧中确定与位置信息对应的本地局部视频帧作为目标本地局部视频帧。
在本申请一具体实施方式中，以本地显示视频帧为B为例，对确定目标本地局部视频帧的方法具体描述。根据预设的分割参数对本地显示视频帧B进行分割。本实施例中预设的分割参数为2行2列，根据分割参数将本地显示视频帧划分为2行2列的4个本地局部视频帧。在4个本地局部视频帧中，根据局部视频帧标识携带的位置信息“第1行第1列”确定与目标局部视频位置对应本地局部视频帧，即位于第1行第1列的局部视频帧作为目标本地局部视频帧。
步骤706：根据所述目标局部视频帧替换所述目标本地局部视频帧。
在确定目标局部视频帧在本地显示视频帧中的位置后，用目标局部视频帧替换位于本地显示视频帧中目标本地局部视频帧，得到用于在展示的视频帧数据。
在本申请一具体实施方式中，如图8所示，图8是本申请实施例提供的替换局部视频帧示意图。以目标局部视频帧为图8中的801为例，对步骤706进行具体描述。图8中，801表示目标局部视频帧，802表示本地显示视频帧。根据目标局部视频帧标识确定目标局部视频帧的位置在802的第1行第1列。根据位置802确定位于第1行第1列的本地局部视频帧为目标本地局部视频帧，并用目标局部视频帧替换目标本地局部视频帧，得到如803所示的完成替换的视频帧。
本申请提供的应用于客户端的直播数据传输方法，在直播过程中，接收至少一个待显示局部视频帧；根据每个待显示局部视频帧的显示位置，对本地的显示视频帧中对应位置的局部视频帧进行替换得到待显示视频帧；播放所述待显示视频帧。客户端通过接收存在变化的局部视频帧，替换本地的显示视频帧，使得客户端只需向直播观众展示变化的直播画面即可，节省了用户观看视频直播的流量花费。
下面以游戏直播为例对本申请的直播数据处理方法进行具体说明，参见图9，图9是本申请实施例提供的应用于游戏直播的直播数据处理方法流程图，包括步骤902-912。
步骤902：采集主播端展示页面的当前视频帧和上一视频帧。
本实施例中的主播端为电脑设备，主播端的展示页面为游戏页面。
具体的，游戏主播打开电脑中的直播软件，点击直播开始按钮。电脑响应于开始指令，开始游戏直播。在直播过程中，采集主播端展示游戏页面的当前视频帧与上一视频帧。
步骤904：分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧。
根据预设的分割参数分割当前视频帧和上一视频帧，得到至少两个局部当前视频帧和至少两个局部上一视频帧。预设的分割参数包括分割行数以及分割列数，其中，分割行数以及分割列数均为正整数且不能同时为1。
本实施例中，预设的分割参数为分割行数5以及分割列数6。根据分割行数5以及分割列数6，将当前视频帧分割成5行6列的30个局部当前视频帧；根据分割行数5以及分割列数6，将上一视频帧分割成5行6列的30个局部上一视频帧。
步骤906：在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
本实施例中，目标局部当前视频帧为位于第2行6列的局部当前游戏视频帧；目标局部上一视频帧为位于第2行6列的局部上一游戏视频帧。
在实际应用中，将对应位置的局部视频帧逐一进行对比，例如，将2行6列的局部当前视频帧与2行6列的局部上一视频帧进行比较。将对应位置的与局部上一视频帧不一致的局部当前视频帧传输至客户端。客户端接收主播端发送的局部当前视频帧，并根据显示位置替换本地的显示视频中的局部视频帧。例如，客户端接收到3行2列位置的局部当前视频帧，用此局部视频帧替换本地的显示视频帧中3行2列位置的局部视频帧得到待显示视频帧。
步骤908：客户端接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识。
本实施例中，客户端为观看直播的手机设备，目标局部视频帧目标局部游戏视频帧。
观看直播的手机设备接收主播端即电脑发送的局部游戏视频帧，用于在客户端展示主播端屏幕展示的内容。
步骤910：根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧。
本实施例中，目标局部视频帧为目标局部游戏视频帧，本地显示视频帧为客户端本地的游戏显示视频帧，目标本地局部视频帧为目标本地局部游戏视频帧。
目标局部视频帧标识用于确定目标局部视频帧的位置，在本实施例中用于确定目标本地局部游戏视频帧在本地显示游戏视频帧中的位置。根据位置确定本地显示游戏视频中的局部视频帧。
步骤912：根据所述目标局部视频帧替换所述目标本地局部视频帧。
本实施例中，用目标局部游戏视频帧替换本地游戏视频帧中的目标局部游戏视频帧。
本申请提供的直播数据传输方法，通过采集与主播端展示页面的对应的视频帧，并对视频帧进行分割处理，得到局部视频帧；将当前的局部视频帧与上一视频帧的局部视频帧进行对比，获取变化的局部视频帧传输至客户端；客户端接收局部视频帧替换客户端本地的局部显示视频帧得到待展示视频帧并展示。本申请的直播数据处理方法，主播端只向客户端传输存在变化的局部视频帧，在直播画面多为静止的情况下能够节省大量流量以及带宽资源。
与上述方法实施例相对应，本申请还提供了应用于主播端的直播数据处理装置实施例，图10示出了本申请一个实施例的直播数据处理装置的结构示意图。如图10所示，该装置1000包括：
采集模块1002，被配置为采集所述主播端展示页面的当前视频帧和上一视频帧；
分割模块1004，被配置为分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；
传输模块1006，被配置为在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
在本申请实施例中，所述分割模块1004，包括：
获取子模块，被配置为获取预设的分割参数；
分割子模块，被配置为根据所述分割参数分割所述当前视频帧，获得至少两个局部当前视频帧，其中，每个所述局部当前视频帧携带有局部视频帧标识；根据所述分割参数分割所述上一视频帧，获得至少两个局部上一视频帧，其中，每个所述局部上一视频帧携带有局部视频帧标识。
所述获取子模块还被配置为获取预设的分割行数和/或分割列数。
所述分割模块1004，还包括：
第一确定子模块，被配置为确定目标局部视频帧标识；
第二确定子模块，被配置为根据所述目标局部视频帧标识在至少两个局部当前视频帧中确定目标局部当前视频帧；根据所述目标局部视频帧标识在至少两个局部上一视频帧中确定目标局部上一视频帧。
所述装置，还包括：
判断模块，被配置为判断所述目标局部当前视频帧相对于所述目标局部上一视频帧是否改变；若是，则确定所述目标局部当前视频帧与所述目标局部上一视频帧不一致；若否，则确定所述目标局部当前视频帧与所述目标局部上一视频帧一致。
所述传输模块1006还被配置为分别解析所述目标局部当前视频帧和所述目标局部上一视频帧，获得所述目标局部当前视频帧的第一图像参数以及目标局部上一视频帧的第二图像参数；在所述第一图像参数与所述第二图像参数的区别位数小于预设位阈值的情况下，将所述目标局部当前视频帧传输至客户端。
上述为本实施例的一种直播数据处理装置的示意性方案。需要说明的是，该直播数据处理装置的技术方案与上述的直播数据处理方法的技术方案属于同一构思，直播数据处理装置的技术方案未详细描述的细节内容，均可以参见上述直播数据处理方法的技术方案的描述。
与上述方法另一实施例相对应，本申请还提供了应用于客户端的直播数据处理装置实施例，图11示出了本申请一个实施例的直播数据处理装置的结构示意图。如图11所示，该装置1100包括：
接收模块1102，被配置为接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识；
确定模块1104，被配置为根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧；
替换模块1106，被配置为根据所述目标局部视频帧替换所述目标本地局部视频帧。
本申请一具体实施例中，所述确定模块1104，包括：
获取子模块，被配置为获取预设的分割参数；
分割子模块，被配置为根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，其中，每个所述本地局部视频帧携带有局部视频帧标识。
所述分割子模块，包括：
确定子模块，被配置为根据所述局部视频帧标识在至少两个本地局部视频帧中确定目标本地局部视频帧。
上述为另一实施例的一种直播数据处理装置的示意性方案。需要说明的是，该直播数据处理装置的技术方案与上述的直播数据处理方法的技术方案属于同一构思，直播数据处理装置的技术方案未详细描述的细节内容，均可以参见上述直播数据处理方法的技术方案的描述。
需要说明的是，装置权利要求中的各组成部分应当理解为实现该程序流程各步骤或该方法各步骤所必须建立的功能模块，各个功能模块并非实际的功能分割或者分离限定。由这样一组功能模块限定的装置权利要求应当理解为主要通过说明书记载的计算机程序实现该解决方案的功能模块构架，而不应当理解为主要通过硬件方式实现该解决方案的实体装置。
本申请一实施例中还提供一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述指令时实现所述的直播数据处理方法的步骤。
上述为本实施例的一种计算设备的示意性方案。需要说明的是，该计算设备的技术方案与上述的直播数据处理方法的技术方案属于同一构思，计算设备的技术方案未详细描述的细节内容，均可以参见上述直播数据处理方法的技术方案的描述。
本申请一实施例还提供一种计算机可读存储介质，其存储有计算机指令，该指令被处理器执行时实现如前所述直播数据处理方法的步骤。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是，该存储介质的技术方案与上述的直播数据处理方法的技术方案属于同一构思，存储介质的技术方案未详细描述的细节内容，均可以参见上述直播数据处理方法的技术方案的描述。
上述对本申请特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
所述计算机指令包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。
需要说明的是，对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本申请所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。
以上公开的本申请优选实施例只是用于帮助阐述本申请。可选实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施方式。显然，根据本申请的内容，可作很多的修改和变化。本申请选取并具体描述这些实施例，是为了更好地解释本申请的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本申请。本申请仅受权利要求书及其全部范围和等效物的限制。

Claims (13)

1.一种直播数据处理方法，其特征在于，应用于主播端，包括：
采集所述主播端展示页面的当前视频帧和上一视频帧；
分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；
在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
2.根据权利要求1所述的方法，其特征在于，所述分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧，包括：
获取预设的分割参数；
根据所述分割参数分割所述当前视频帧，获得至少两个局部当前视频帧，其中，每个所述局部当前视频帧携带有局部视频帧标识；
根据所述分割参数分割所述上一视频帧，获得至少两个局部上一视频帧，其中，每个所述局部上一视频帧携带有局部视频帧标识。
3.根据权利要求2所述的方法，其特征在于，所述获取预设的分割参数，包括：
获取预设的分割行数和/或分割列数。
4.根据权利要求2所述的方法，其特征在于，所述方法还包括：
确定目标局部视频帧标识；
根据所述目标局部视频帧标识在至少两个局部当前视频帧中确定目标局部当前视频帧；
根据所述目标局部视频帧标识在至少两个局部上一视频帧中确定目标局部上一视频帧。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
判断所述目标局部当前视频帧相对于所述目标局部上一视频帧是否改变；
若是，则确定所述目标局部当前视频帧与所述目标局部上一视频帧不一致；
若否，则确定所述目标局部当前视频帧与所述目标局部上一视频帧一致。
6.根据权利要求1所述的方法，其特征在于，将所述目标局部当前视频帧传输至客户端，包括：
分别解析所述目标局部当前视频帧和所述目标局部上一视频帧，获得所述目标局部当前视频帧的第一图像参数以及目标局部上一视频帧的第二图像参数；
在所述第一图像参数与所述第二图像参数的区别位数小于预设位阈值的情况下，将所述目标局部当前视频帧传输至客户端。
7.一种直播数据处理方法，其特征在于，应用于客户端，包括：
接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识；
根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧；
根据所述目标局部视频帧替换所述目标本地局部视频帧。
8.根据权利要求7所述的方法，其特征在于，所述根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧，包括：
获取预设的分割参数；
根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，其中，每个所述本地局部视频帧携带有局部视频帧标识。
9.根据权利要求8所述的方法，其特征在于，所述根据所述分割参数分割所述本地显示视频帧，获得至少两个本地局部视频帧，包括：
根据所述局部视频帧标识在至少两个本地局部视频帧中确定目标本地局部视频帧。
10.一种直播数据处理装置，应用于主播端，包括：
采集模块，被配置为采集所述主播端展示页面的当前视频帧和上一视频帧；
分割模块，被配置为分别分割所述当前视频帧和所述上一视频帧，获得至少两个局部当前视频帧和至少两个局部上一视频帧；
传输模块，被配置为在目标局部当前视频帧与目标局部上一视频帧不一致的情况下，将所述目标局部当前视频帧传输至客户端。
11.一种直播数据处理装置，应用于客户端，包括：
接收模块，被配置为接收至少一个目标局部视频帧，其中，所述目标局部视频帧携带有目标局部视频帧标识；
确定模块，被配置为根据所述目标局部视频帧标识在本地显示视频帧中确定目标本地局部视频帧；
替换模块，被配置为根据所述目标局部视频帧替换所述目标本地局部视频帧。
12.一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，其特征在于，所述处理器执行所述指令时实现权利要求1-6或7-9任意一项所述方法的步骤。
13.一种计算机可读存储介质，其存储有计算机指令，其特征在于，该指令被处理器执行时实现权利要求1-6或7-9任意一项所述方法的步骤。
CN202110460990.7A 2021-04-27 2021-04-27 一种直播数据处理方法及装置 Pending CN115250361A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110460990.7A CN115250361A (zh) 2021-04-27 2021-04-27 一种直播数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110460990.7A CN115250361A (zh) 2021-04-27 2021-04-27 一种直播数据处理方法及装置

Publications (1)

Publication Number Publication Date
CN115250361A true CN115250361A (zh) 2022-10-28

Family

ID=83696432

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110460990.7A Pending CN115250361A (zh) 2021-04-27 2021-04-27 一种直播数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN115250361A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111757062A (zh) * 2020-06-29 2020-10-09 郑州信大捷安信息技术股份有限公司 一种视频流的高效安全传输方法和系统
US20210098024A1 (en) * 2018-05-28 2021-04-01 Guangzhou Huya Information Technology Co., Ltd. Short video synthesis method and apparatus, and device and storage medium
CN112672154A (zh) * 2020-12-15 2021-04-16 上海信联信息发展股份有限公司 直播视频播放方法、装置、服务器和计算机可读存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210098024A1 (en) * 2018-05-28 2021-04-01 Guangzhou Huya Information Technology Co., Ltd. Short video synthesis method and apparatus, and device and storage medium
CN111757062A (zh) * 2020-06-29 2020-10-09 郑州信大捷安信息技术股份有限公司 一种视频流的高效安全传输方法和系统
CN112672154A (zh) * 2020-12-15 2021-04-16 上海信联信息发展股份有限公司 直播视频播放方法、装置、服务器和计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN107295352B (zh) 一种视频压缩方法、装置、设备及存储介质
US20220188357A1 (en) Video generating method and device
CN113038185B (zh) 弹幕处理方法及装置
CN113316015B (zh) 弹幕处理方法、装置及系统
CN112839223B (zh) 图像压缩方法、装置、存储介质及电子设备
CN114466216B (zh) 直播间显示方法、服务端及直播客户端
CN106998485A (zh) 视频直播方法及装置
CN113891105A (zh) 画面显示方法和装置、存储介质及电子设备
CN114173160B (zh) 直播推流方法及装置
CN115396705A (zh) 投屏操作验证方法、平台及系统
CN114363703A (zh) 视频处理方法、装置及系统
CN110446118B (zh) 视频资源预处理方法及装置、视频资源下载方法及装置
CN115250361A (zh) 一种直播数据处理方法及装置
CN113949899B (zh) 视频质量评估方法及装置
CN114419203A (zh) 文件处理方法及装置
CN117014649A (zh) 视频处理方法、装置及电子设备
CN112672202B (zh) 弹幕处理方法、设备和存储介质
CN114979748A (zh) 视频处理方法及装置
CN114900727A (zh) 视频流处理方法及装置
CN112492333B (zh) 图像生成方法及装置、封面更换方法、介质和设备
CN108933945B (zh) 一种gif图片的压缩方法、装置及存储介质
CN111355985A (zh) 一种视频广告的生成方法
CN112312208A (zh) 多媒体信息的处理方法、装置、存储介质和电子设备
CN114898753A (zh) 数据处理方法及装置
CN113676765B (zh) 交互动画展示方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination