CN114697693B - 一种数据处理方法、装置、存储介质及电子设备 - Google Patents

一种数据处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN114697693B
CN114697693B CN202210277552.1A CN202210277552A CN114697693B CN 114697693 B CN114697693 B CN 114697693B CN 202210277552 A CN202210277552 A CN 202210277552A CN 114697693 B CN114697693 B CN 114697693B
Authority
CN
China
Prior art keywords
data
multimedia data
target
configuration parameters
output end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210277552.1A
Other languages
English (en)
Other versions
CN114697693A (zh
Inventor
于博杰
李斌
马瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN202210277552.1A priority Critical patent/CN114697693B/zh
Publication of CN114697693A publication Critical patent/CN114697693A/zh
Application granted granted Critical
Publication of CN114697693B publication Critical patent/CN114697693B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/45—Clustering; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请公开了一种数据处理方法、装置、存储介质及电子设备，包括：基于数据输出端的多媒体数据获取请求，获得与多媒体数据获取请求对应的多媒体数据集；确定与数据输出端相匹配的目标配置参数；在多媒体数据集中确定与目标配置参数相匹配的目标多媒体数据；以及输出目标多媒体数据至数据输出端。其中，多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据。本申请在多媒体数据进行分发之前可以基于不同的配置参数生成对应的多媒体数据，能够输出与当前数据输出端对应的多媒体数据，提升了数据分发的质量，使得数据输出端在输出对应的多媒体数据时具有更优的数据体验效果。

Description

一种数据处理方法、装置、存储介质及电子设备
技术领域
本申请涉及数据处理技术领域，更具体的说是涉及一种数据处理方法、装置、存储介质及电子设备。
背景技术
伴随着互联网和智能终端技术的发展，视频直播应用也越来越普遍。
在视频直播过程中，主播客户端将生成的直播视频流发送给服务器，再由服务器将直播视频流发送观众客户端，最后观众客户端播放该直播视频流。
如何提升观众客户端播放的直播对应的多媒体视频流数据质量，已经成为目前主要面临的问题。
发明内容
有鉴于此，本申请提供如下技术方案：
一种数据处理方法，包括：
基于数据输出端的多媒体数据获取请求，获得与所述多媒体数据获取请求对应的多媒体数据集，所述多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据；
确定与所述数据输出端相匹配的目标配置参数；
在所述多媒体数据集中确定与所述目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据至所述数据输出端。
可选地，所述配置参数包括硬件配置参数和传输网络参数，所述方法还包括：
获取不同的数据输出端的硬件配置参数，以及不同网络传输模式对应的传输网络参数；
对不同的所述硬件配置参数和不同的所述传输网络参数进行组合，得到不同的配置参数；
基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据；
基于所述多个多媒体数据，生成多媒体数据集。
可选地，所述基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据，包括：
基于不同的所述配置参数，确定不同的视频码率；
基于每一所述视频码率对获得的同一数据流进行视频数据编码处理，得到多个多媒体数据。
可选地，所述方法还包括：
响应于所述数据输出端输出所述目标多媒体数据，获得与所述目标多媒体数据相匹配的反馈信息；
基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至所述数据输出端。
可选地，所述获得与所述目标多媒体数据相匹配的反馈信息，包括：
获取所述数据输出端的目标对象针对所述目标多媒体数据的互动数据，将所述互动数据确定为反馈信息；
和/或，
获取所述数据输出端针对所述目标多媒体数据的传输网络的调整信息，将所述传输网络的调整信息确定为反馈信息。
可选地，所述基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，包括：
对所述互动数据进行解析，确定与所述目标多媒体数据对应的输出画面的第一区域和第二区域；
根据所述第一区域和所述第二区域的数据特征以及与所述目标多媒体数据对应的处理参数，确定与所述第一区域对应的第一处理子参数，以及与所述第二区域对应的第二处理子参数，其中，所述第一处理子参数和第二处理子参数对应的输出画面的分辨率不同。
一种数据数据处理装置，包括：
数据获取单元，用于基于数据输出端的多媒体数据获取请求，获得与所述多媒体数据获取请求对应的多媒体数据集，所述多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据；
参数确定单元，用于确定与所述数据输出端相匹配的目标配置参数；
数据确定单元，用于在所述多媒体数据集中确定与所述目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据至所述数据输出端。
在一种实施方式中，所述配置参数包括硬件配置参数和传输网络参数，所述装置还包括：
参数获取单元，用于获取不同的数据输出端的硬件配置参数，以及不同网络传输模式对应的传输网络参数；
参数组合单元，用于对不同的所述硬件配置参数和不同的所述传输网络参数进行组合，得到不同的配置参数；
处理单元，用于基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据；
生成单元，用于基于所述多个多媒体数据，生成多媒体数据集。
可选地，所述处理单元具体用于：
基于不同的所述配置参数，确定不同的视频码率；
基于每一所述视频码率对获得的同一数据流进行视频数据编码处理，得到多个多媒体数据。
可选地，所述装置还包括：
反馈数据获取单元，用于响应于所述数据输出端输出所述目标多媒体数据，获得与所述目标多媒体数据相匹配的反馈信息；
优化单元，用于基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至所述数据输出端。
进一步地，所述反馈数据获取单元具体用于：
获取所述数据输出端的目标对象针对所述目标多媒体数据的互动数据，将所述互动数据确定为反馈信息；
和/或，
获取所述数据输出端针对所述目标多媒体数据的传输网络的调整信息，将所述传输网络的调整信息确定为反馈信息。
可选地，所述优化单元具体用于：
对所述互动数据进行解析，确定与所述目标多媒体数据对应的输出画面的第一区域和第二区域；
根据所述第一区域和所述第二区域的数据特征以及与所述目标多媒体数据对应的处理参数，确定与所述第一区域对应的第一处理子参数，以及与所述第二区域对应的第二处理子参数，其中，所述第一处理子参数和第二处理子参数对应的输出画面的分辨率不同。
一种存储介质，所述存储介质上存储有计算机程序代码，所述计算机程序代码被处理器执行时，实现如上述中任意一项所述的数据处理方法。
一种电子设备，包括：
存储器，用于存储应用程序和所述应用程序运行所产生的数据；
处理器，用于执行所述应用程序，以实现如上述中任意一项所述的数据处理方法。
经由上述的技术方案可知，本申请公开了一种数据处理方法、装置、存储介质及电子设备，包括：基于数据输出端的多媒体数据获取请求，获得与多媒体数据获取请求对应的多媒体数据集；确定与数据输出端相匹配的目标配置参数；在多媒体数据集中确定与目标配置参数相匹配的目标多媒体数据；以及输出目标多媒体数据至数据输出端。其中，多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据。本申请在多媒体数据进行分发之前可以基于不同的配置参数生成对应的多媒体数据，使得数据输出端能够获得与之对应的多媒体数据，提升了数据分发的质量，使得数据输出端在输出对应的多媒体数据时获得更优的数据体验效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种数据处理方法的流程示意图；
图2为本申请实施例提供的一种生成多媒体数据集方法的流程示意图；
图3为本申请实施例提供的一种直播系统的结构示意图；
图4为本申请实施例提供的一种数据处理装置的结构示意图；
图5为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在本申请实施例了一种数据处理方法，该方法应用于多媒体数据处理领域，使得能够生成满足不同数据输出端的多媒体数据，提升了多媒体数据的分发质量，进一步提升了数据输出端输出的多媒体数据的体验效果。
参见图1，为本申请实施例提供的一种数据处理方法的流程示意图，该方法可以包括步骤S101、S102以及S103，具体的：
S101、基于数据输出端的多媒体数据获取请求，获得与多媒体数据获取请求对应的多媒体数据集。
数据输出端是指需要对多媒体数据进行输出的设备，如在直播应用场景中，数据输出端可以是观众客户端。多媒体数据是由内容上相互关联的文本、图形、图像、声音、动画、互通图像等媒体的数据所形成的复合数据。在直播应用场景中，多媒体数据可以是包括主播音频以及直播图像组成的视频数据。
数据输出端的多媒体数据获取请求在不同的应用场景中可以是由不同的触发方式生成的。例如，在音视频播放场景中，数据输出端的多媒体数据获取请求可以是当数据输出端的用户点击待播放的音频或者视频时产生的请求。又例如，在直播应用场景中，数据输出端的多媒体数据获取请求可以是数据输出端的观看者进入目标主播的直播间的请求。
在本申请实施例中不同的多媒体数据获取请求对应不同的多媒体数据集，每一多媒体数据集中的各个多媒体数据对应的内容信息是相同的。可以根据多媒体数据获取请求中的标识信息来确定与之对应的多媒体数据集，例如通过多媒体数据获取请求中的用户标识或者被请求内容的数据标识，来确定与之对应的多媒体数据集。具体的，若数据输出端的用户进入主播A对应的直播间，则对应的多媒体数据获取请求是请求主播A当前的直播数据，对应的多媒体数据集为主播A当前直播的多媒体数据。
其中，多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据。在多媒体数据集中每一个多媒体数据均是一个独立的数据个体，但是各个多媒体数据具有相同的数据内容，即其对应的数据内容与针对的同一数据流相同。仅是以不同的配置参数对数据流进行处理，该配置参数可以是针对数据处理的不同的格式参数，例如，对数据流的编码参数不同，对数据流的封装格式类型不同等。这样可以使得在对多媒体数据进行分发之前，就可以针对不同的数据输出端生成不同格式的多媒体数据，使得分发的多媒体数据更能满足各个数据输出端的输出需求。
在本申请实施例中还提供了一种生成多媒体数据集的方法，在该实施例中配置参数包括硬件配置参数和传输网络配置参数，其中，硬件配置参数是指数据输出端对应的相关硬件的配置参数，如可以包括进行多媒体数据解码的解码硬件的配置参数，进一步可以包括是否具有解码硬件，以及若就有解码硬件相关的解码参数等。还可以是数据输出端对应的存储硬件的存储参数，以便能够获得数据输出端的数据缓存能力，便于对多媒体数据的输出。传输网络参数对应于数据输出端进行数据传输的网络的配置参数，如网络格式，网络传输速率等。
具体的，参见图2，该生成多媒体数据集的方法可以包括以下步骤：
S201、获取不同的数据输出端的硬件配置参数，以及不同网络传输模式对应的传输网络参数。
S202、对不同的所述硬件配置参数和不同的所述传输网络参数进行组合，得到不同的配置参数。
S203、基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据。
S204、基于所述多个多媒体数据，生成媒体数据集。
在该实施例中不同的硬件配置参数是基于不同类型的数据输出端普遍存在的硬件确定的配置参数，即可以满足当前各个数据输出端的硬件配置需求。可以对获得的不同的硬件配置参数进行分组，每一组对应的硬件配置参数的参数范围能够满足该组对应的数据输出端的硬件类型。网络传输模式可以包括有线网络传输模式和无线网络传输模式。具体的网络传输模式对应的传输网络参数可以包括数据传输速率参数等。
然后基于不同的硬件配置参数和不同的传输网络参数进行组合，得到不同的配置参数，使得得到的配置参数可以满足不同网络条件下的不同数据输出端对多媒体数据进行获取和处理的需求。若多媒体数据集是通过服务端生成的，可以将确定的各个不同的配置参数存储到服务端，服务端在接收到其他客户端发送的数据流后，可以基于各个不同的配置参数对该数据流进行处理，得到与每一配置参数相匹配的多媒体数据，基于得到的多个多媒体数据，审查各行多媒体数据集。使得能够满足针对不同环境以及不同配置的数据输出端的多媒体数据分发。
具体的，在一种实施方式中，所述基于不同的配置参数对获得的同一数据流进行处理，得到多个多媒体数据，包括：基于不同的配置参数，确定不同的视频码率；基于每一视频码率对获得的同一数据流进行视频数据编码处理，得到多个多媒体数据。
在该实施方式中是以对视频数据进行处理为例，通过配置参数确定视频码率，其中，视频码率是数据传输时单位时间传送的数据位数，一般用的单位是kbps即千位每秒。通俗一点的理解就是取样率，单位时间内取样率越大，精度就越高，处理出来的文件就越接近得到数据流。基于不同的视频码率对数据就进行编码处理时，可以满足不同的数据输出端对视频数据输出的不同的分辨率的需求。
S102、确定与数据输出端相匹配的目标配置参数。
不同的数据输出端会对应不同的配置参数，该配置参数包括数据输出端获取多媒体数据的配置参数，如传输网络参数，还可以包括数据输出端对获得到的多媒体数据进行处理的参数，如对多媒体数据进行解码的解码参数等。
在一种实施方式中可以预先生成不同类型的数据输出端与配置参数之间的映射关系文件，然后基于该映射关系文件来获得当前数据输出端的目标配置参数，具体的，可以为不同的数据输出端设置对应的标识信息，或者为具有相同硬件结构的数据输出端设置同一类型的标识信息，然后基于该标识信息在映射关系文件中进行查询，获得对应的目标配置参数。在另一种实施方式中，还可以是采集当前数据输出端的特征信息，该特征信息包括数据输出端的硬件特征信息以及该数据输出端的环境特征信息，然后基于对该特征信息进行分析，确定与当前数据输出端对应的目标配置参数。例如，当前数据输出端的目标配置参数可以包括支持4G无线网络进行数据传输，并且具有解码硬件等。
S103、在所述多媒体数据集中确定与目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据值所述数据输出端。
多媒体数据集中包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据。因此，可以在多媒体数据集中根据目标配置参数确定与之对应的目标对媒体数据。从而使得获得的目标多媒体数据满足该目标配置参数。例如，目标配置参数包括数据输出端所在环境的网络配置参数，确定的目标多媒体数据可以满足当前的网络配置参数，即数据输出端基于当前的网络配置参数接收该目标多媒体数据时不会出现卡顿或者延迟等问题。
需要说明的是，若多媒体数据集中不包括与当前数据输出端对应的目标配置参数相匹配的多媒体数据，则需要对目标配置参数进行解析，获得所述目标配置参数中每一参数对应的参数范围，然后在多媒体数据集中确定满足该参数范围的多媒体数据作为目标多媒体数据。例如，当前数据输出端的解码码率对应的数据值为A，而多媒体数据集中没有与解码码率A完全匹配的多媒体数据，通过分析得到解码码率范围在a到c的数据均可以被当前数据输出端进行解码，则通过解码范围a到c在多媒体数据集中进行查询，若多媒体数据集中的某个多媒体数据对应的解码范围在此范围内，则将该多媒体数据作为目标多媒体数据。又例如，数据输出端不具备解码功能，则在基于目标配置参数确定目标多媒体数据时，首先在多媒体数据集中选取已经解码的数据作为待选的多媒体数据，然后再基于目标配置参数中的其他参数在待选的多媒体数据中确定目标多媒体数据。
进而使得获得的目标多媒体数据更匹配传输至数据输出端的环境特征，以及更满足数据输出端对其进行处理的能力，进一步使得数据输出端在处理之前就能获得与匹配的多媒体数据，提升了数据输出端的输出多媒体数据的体验效果。
在本申请实施例公开了一种数据处理方法，包括：基于数据输出端的多媒体数据获取请求，获得与多媒体数据获取请求对应的多媒体数据集；确定与数据输出端相匹配的目标配置参数；在多媒体数据集中确定与目标配置参数相匹配的目标多媒体数据；以及输出目标多媒体数据至数据输出端。其中，多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据。本申请在多媒体数据进行分发之前可以基于不同的配置参数生成对应的多媒体数据，使得数据输出端能够获得与之对应的多媒体数据，提升了数据分发的质量，使得数据输出端在输出对应的多媒体数据时获得更优的数据体验效果。
为了能够使得数据输出端在输出多媒体数据的过程中，能够一直满足数据输出端输出效果更优的多媒体数据的需求，在本申请实施例中还能够根据数据输出端获得的反馈信息对多媒体数据进行优化。
具体的，该方法还包括：
响应于数据输出端输出目标多媒体数据，获得与目标多媒体数据相匹配的反馈信息；基于反馈信息对目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至数据输出端。
其中，反馈信息可以包括数据输出端的自动反馈信息，也可以包括数据输出端用户产生的反馈信息。自动反馈信息以是数据输出端对接收多媒体数据的网络的自动切换的反馈信息。其中，用户产生的反馈信息可以是用户对接收到的多媒体数据进行调整的信息，如在直播应用场景中，可以是用户退出当前直播间再重新进入产生的触发信息。根据得到的反馈信息可以对输出至数据输出端的多媒体数据进行优化，如在保证数据内容相同的前提下，将目标多媒体数据切换至其他多媒体数据，以使得优化后的多媒体数据能够满足当前数据输出端的环境状态以及用户体验需求。
具体的，所述获得与目标多媒体数据相匹配的反馈信息，包括：获取数据输出端的目标对象对目标多媒体数据的互动数据，将所述互动数据确定为反馈信息；和/或，获取数据输出端针对目标多媒体数据的传输网络的调整信息，将传输网络的调整信息确定为反馈信息。
其中，数据输出端的目标对象是指数据输出端的用户，对应的互动数据可以包括用户的切换触发数据、观看时长数据、评论信息等数据。传输网络的调整信息可以包括网络传输模式的切换数据。
具体的，可以根据目标对象的互动数据确定不同的处理模式，即所述基于所述反馈信息对目标多媒体数据进行优化，得到优化后的多媒体数据，包括：对互动数据进行解析，确定与目标多媒体数据对应的输出画面的第一区域和第二区域；根据第一区域和第二区域的数据特征以及与目标多媒体数据对应的处理参数，确定第一区域对应的第一处理子参数，以及第二区域对应的第二处理子参数，其中，第一处理子参数和第二处理子参数对应的输出画面的分辨率不同。
在该实施方式中，可以通过用户的互动数据，确定用户通常观看或者关注、互动的区域，然后基于不同的区域采用不同的处理模式，在满足对不同数据输出端的多媒体数据分发的需求的同时，还可以进一步提升用户的体验效果。如当前数据输出端的传输网络较差，需要降低多媒体数据的分辨率，这样可以对用户非关注区域进行分辨率降低，使得用户关注区域的画面的分辨率保持能够满足用户需求的状态。进一步，第一处理子参数和第二处理子参数可以对应不同的编码参数。
下面以直播应用场景对本申请实施例进行说明。参见图3，为本申请实施例提供的一种直播系统的结构示意图，该直播系统包括主播客户端301、服务端302以及观众客户端303，其中，服务端302用于执行本申请实施例中的数据处理方法，观众客户端303为本申请实施例中的数据输出端的一种示例。
在该应用场景中，主播客户端301将产生的直播数据流发送至服务端302，服务端302根据其存储的不同的配置参数对该直播数据流进行处理，得到多个不同的多媒体数据。当服务端302接收到观众客户端303的多媒体数据获取请求，具体的可以是观众客户端303进入与直播客户端301对应的主播的直播间产生的多媒体数据获取请求。此时，服务端可以通过观众客户端浏览器端安装的浏览插件获得该观众客户端的目标配置参数，该目标配置参数可以包括观众客户端是否具备解码硬件、若具备解码硬件时的解码参数、客户端的资源占用情况，如CPU或者GPU的使用情况，还包括传输网络的配置参数。然后服务端基于获得的目标配置参数，在多媒体数据集中确定与该目标配置参数相匹配的目标多媒体数据，将目标多媒体数据发送至观众客户端，由观众客户端输出该目标多媒体数据。
在一种实施方式中，也可以是基于目标配置参数确定观众客户端硬件条件能够满足的画面模式，基于对应的画面模式在多媒体数据集中确定与该画面模式相匹配的目标多媒体数据。其中，画面模式包括原画面自解码、高清、标清、流畅、图片直播或者声音直播等。在服务端输出目标多媒体数据至观众客户端时，还会通过观众客户端的插件检测观众的观看行为，如互动数据、观看次数、观看时长、网络是否进行切换，使得观众客户端将这些数据反馈至服务端，以供服务端对目标多媒体数据对应的配置参数进行优化，将优化后的多媒体数据传输给观众客户端。观众客户端在接收到多媒体数据后可以进行对应的解码或者其他画面优化处理，以进一步提升画面质量。在本申请实施例中能够使得服务端产生能够满足不同观众客户端获取直播数据的需求，并且能够不断优化用户的观看体验，满足用户在不同环境的体验需求，提升了体验效果。
在本申请的另一实施例中还提供了一种数据处理装置，参见图4，该装置可以包括：
数据获取单元401，用于基于数据输出端的多媒体数据获取请求，获得与所述多媒体数据获取请求对应的多媒体数据集，所述多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据；
参数确定单元402，用于确定与所述数据输出端相匹配的目标配置参数；
数据确定单元403，用于在所述多媒体数据集中确定与所述目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据至所述数据输出端。
在一种实施方式中，所述配置参数包括硬件配置参数和传输网络参数，所述装置还包括：
参数获取单元，用于获取不同的数据输出端的硬件配置参数，以及不同网络传输模式对应的传输网络参数；
参数组合单元，用于对不同的所述硬件配置参数和不同的所述传输网络参数进行组合，得到不同的配置参数；
处理单元，用于基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据；
生成单元，用于基于所述多个多媒体数据，生成多媒体数据集。
可选地，所述处理单元具体用于：
基于不同的所述配置参数，确定不同的视频码率；
基于每一所述视频码率对获得的同一数据流进行视频数据编码处理，得到多个多媒体数据。
可选地，所述装置还包括：
反馈数据获取单元，用于响应于所述数据输出端输出所述目标多媒体数据，获得与所述目标多媒体数据相匹配的反馈信息；
优化单元，用于基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至所述数据输出端。
进一步地，所述反馈数据获取单元具体用于：
获取所述数据输出端的目标对象针对所述目标多媒体数据的互动数据，将所述互动数据确定为反馈信息；
和/或，
获取所述数据输出端针对所述目标多媒体数据的传输网络的调整信息，将所述传输网络的调整信息确定为反馈信息。
可选地，所述优化单元具体用于：
对所述互动数据进行解析，确定与所述目标多媒体数据对应的输出画面的第一区域和第二区域；
根据所述第一区域和所述第二区域的数据特征以及与所述目标多媒体数据对应的处理参数，确定与所述第一区域对应的第一处理子参数，以及与所述第二区域对应的第二处理子参数，其中，所述第一处理子参数和第二处理子参数对应的输出画面的分辨率不同。
需要说明的是，本实施例中各个单元的具体实现可以参考前文中的相应内容，此处不再详述。
参见图5，为本申请实施例提供的一种电子设备的结构示意图，该电子设备可以包括：
存储器501，用于存储应用程序和所述应用程序运行所产生的数据；
处理器502，用于执行所述应用程序，以实现如上述中任意一项所述的数据处理方法。
需要说明的是，本实施例中处理器的具体实现可以参考前文中的相应内容，此处不再详述。
在本申请的另一实施例中还提供了一种存储介质，所述存储介质上存储有计算机程序代码，所述计算机程序代码被处理器执行时，实现如上述中任意一项所述的数据处理方法。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (7)

1.一种数据处理方法，包括：
基于数据输出端的多媒体数据获取请求，获得与所述多媒体数据获取请求对应的多媒体数据集，所述多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据；
确定与所述数据输出端相匹配的目标配置参数；
在所述多媒体数据集中确定与所述目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据至所述数据输出端；
响应于所述数据输出端输出所述目标多媒体数据，获得与所述目标多媒体数据相匹配的反馈信息；
基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至所述数据输出端；
其中，所述获得与所述目标多媒体数据相匹配的反馈信息，包括：
获取所述数据输出端的目标对象针对所述目标多媒体数据的互动数据，将所述互动数据确定为反馈信息。
2.根据权利要求1所述的方法，所述配置参数包括硬件配置参数和传输网络参数，所述方法还包括：
获取不同的数据输出端的硬件配置参数，以及不同网络传输模式对应的传输网络参数；
对不同的所述硬件配置参数和不同的所述传输网络参数进行组合，得到不同的配置参数；
基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据；
基于所述多个多媒体数据，生成多媒体数据集。
3.根据权利要求2所述的方法，所述基于不同的所述配置参数对获得的同一数据流进行处理，得到多个多媒体数据，包括：
基于不同的所述配置参数，确定不同的视频码率；
基于每一所述视频码率对获得的同一数据流进行视频数据编码处理，得到多个多媒体数据。
4.根据权利要求1所述的方法，所述基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，包括：
对所述互动数据进行解析，确定与所述目标多媒体数据对应的输出画面的第一区域和第二区域；
根据所述第一区域和所述第二区域的数据特征以及与所述目标多媒体数据对应的处理参数，确定与所述第一区域对应的第一处理子参数，以及与所述第二区域对应的第二处理子参数，其中，所述第一处理子参数和第二处理子参数对应的输出画面的分辨率不同。
5.一种数据处理装置，包括：
数据获取单元，用于基于数据输出端的多媒体数据获取请求，获得与所述多媒体数据获取请求对应的多媒体数据集，所述多媒体数据集包括多个多媒体数据，每一多媒体数据来源于基于不同的配置参数对同一数据流进行处理得到的数据；
参数确定单元，用于确定与所述数据输出端相匹配的目标配置参数；
数据确定单元，用于在所述多媒体数据集中确定与所述目标配置参数相匹配的目标多媒体数据；以及输出所述目标多媒体数据至所述数据输出端；
其中，所述装置还包括：
反馈数据获取单元，用于响应于所述数据输出端输出所述目标多媒体数据，获取所述数据输出端的目标对象针对所述目标多媒体数据的互动数据，将所述互动数据确定为反馈信息；
优化单元，用于基于所述反馈信息对所述目标多媒体数据进行优化，得到优化后的多媒体数据，以使得将优化后的多媒体数据发送至所述数据输出端。
6.一种存储介质，所述存储介质上存储有计算机程序代码，所述计算机程序代码被处理器执行时，实现如权利要求1-4中任意一项所述的数据处理方法。
7.一种电子设备，包括：
存储器，用于存储应用程序和所述应用程序运行所产生的数据；
处理器，用于执行所述应用程序，以实现如权利要求1-4中任意一项所述的数据处理方法。
CN202210277552.1A 2022-03-21 2022-03-21 一种数据处理方法、装置、存储介质及电子设备 Active CN114697693B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210277552.1A CN114697693B (zh) 2022-03-21 2022-03-21 一种数据处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210277552.1A CN114697693B (zh) 2022-03-21 2022-03-21 一种数据处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN114697693A CN114697693A (zh) 2022-07-01
CN114697693B true CN114697693B (zh) 2023-09-19

Family

ID=82138275

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210277552.1A Active CN114697693B (zh) 2022-03-21 2022-03-21 一种数据处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN114697693B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106060550A (zh) * 2016-06-21 2016-10-26 网易（杭州）网络有限公司 视频编码参数的处理、视频数据的编码方法及装置
CN106791854A (zh) * 2016-11-22 2017-05-31 北京疯景科技有限公司 图像编码、解码方法及装置
CN109348244A (zh) * 2018-11-20 2019-02-15 浙江齐聚科技有限公司 视频编码参数的配置方法、装置、设备和存储介质
CN109819272A (zh) * 2018-12-26 2019-05-28 平安科技（深圳）有限公司 视频发送方法、装置、计算机可读存储介质及电子设备
CN110611839A (zh) * 2018-06-15 2019-12-24 优酷网络技术（北京）有限公司 互动内容处理方法及装置
CN113315991A (zh) * 2021-06-01 2021-08-27 南京海比信息技术有限公司 一种自动调整网络视频传输码率和清晰度的方法
CN113518250A (zh) * 2020-08-07 2021-10-19 腾讯科技（深圳）有限公司 一种多媒体数据处理方法、装置、设备及可读存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454395B (zh) * 2016-09-20 2018-10-12 北京百度网讯科技有限公司 在服务器中用于自适应提供多码率流媒体的方法及装置
US11094346B2 (en) * 2018-11-12 2021-08-17 Netflix, Inc. Systems and methods for adaptive streaming of multimedia content

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106060550A (zh) * 2016-06-21 2016-10-26 网易（杭州）网络有限公司 视频编码参数的处理、视频数据的编码方法及装置
CN106791854A (zh) * 2016-11-22 2017-05-31 北京疯景科技有限公司 图像编码、解码方法及装置
CN110611839A (zh) * 2018-06-15 2019-12-24 优酷网络技术（北京）有限公司 互动内容处理方法及装置
CN109348244A (zh) * 2018-11-20 2019-02-15 浙江齐聚科技有限公司 视频编码参数的配置方法、装置、设备和存储介质
CN109819272A (zh) * 2018-12-26 2019-05-28 平安科技（深圳）有限公司 视频发送方法、装置、计算机可读存储介质及电子设备
CN113518250A (zh) * 2020-08-07 2021-10-19 腾讯科技（深圳）有限公司 一种多媒体数据处理方法、装置、设备及可读存储介质
CN113315991A (zh) * 2021-06-01 2021-08-27 南京海比信息技术有限公司 一种自动调整网络视频传输码率和清晰度的方法

Also Published As

Publication number Publication date
CN114697693A (zh) 2022-07-01

Similar Documents

Publication Publication Date Title
US20230283653A1 (en) Methods and apparatus to reduce latency for 360-degree viewport adaptive streaming
CN108391179B (zh) 直播数据处理方法、装置、服务器、终端及存储介质
EP1233591B1 (en) Progressive streaming media rendering
US11356493B2 (en) Systems and methods for cloud storage direct streaming
CN111064973A (zh) 一种基于ipv9的直播系统
CN111064972A (zh) 一种基于ipv9的视频直播控制方法
US20130212231A1 (en) Method, apparatus and system for dynamic media content insertion based on http streaming
CN112019927B (zh) 视频直播方法、连麦设备、直播系统及存储介质
EP3734927A1 (en) Content service implementation method and device, and content delivery network node
CN107634930B (zh) 一种媒体数据的获取方法和装置
CN108810657B (zh) 一种设置视频封面的方法和系统
CN113141522B (zh) 资源传输方法、装置、计算机设备及存储介质
CN111970565A (zh) 视频数据处理方法、装置、电子设备及存储介质
JP2015531217A (ja) ストリーミングメディアのための状態情報を搬送すること
CN114040232A (zh) 投屏系统、方法、电子设备和存储介质
CN111510720A (zh) 实时流媒体数据的传输方法、电子装置及服务器
US20140201368A1 (en) Method and apparatus for enforcing behavior of dash or other clients
CN111107387B (zh) 视频转码方法、装置及计算机存储介质
CN114697693B (zh) 一种数据处理方法、装置、存储介质及电子设备
JP6597604B2 (ja) 受信装置、送信装置、データ通信方法、およびデータ処理方法
US11284139B1 (en) Stateless re-discovery of identity using watermarking of a video stream
CN107534792B (zh) 接收设备、发送设备以及数据处理方法
CN111787417B (zh) 基于人工智能ai的音视频的传输控制方法及相关设备
KR102319932B1 (ko) 수신 장치 및 수신 방법, 재생 장치 및 재생 방법, 공급 장치 및 공급 방법, 그리고 프로그램
KR102602941B1 (ko) 하이브리드 전송 시스템을 이용하여 3차원 영상 서비스를 제공하는 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant