CN114697689A - 数据处理方法、装置、电子设备和存储介质 - Google Patents

数据处理方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN114697689A
CN114697689A CN202011608750.9A CN202011608750A CN114697689A CN 114697689 A CN114697689 A CN 114697689A CN 202011608750 A CN202011608750 A CN 202011608750A CN 114697689 A CN114697689 A CN 114697689A
Authority
CN
China
Prior art keywords
data
live broadcast
sound effect
live
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011608750.9A
Other languages
English (en)
Inventor
徐进
丁建栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202011608750.9A priority Critical patent/CN114697689A/zh
Priority to US17/541,731 priority patent/US20220248107A1/en
Publication of CN114697689A publication Critical patent/CN114697689A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请实施例提供了一种数据处理方法、装置、电子设备和存储介质，所述的方法包括：获取直播数据，并依据所述直播数据确定直播状态信息；依据所述直播状态信息，确定对应的音效数据；将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户；能够方便主播的操作。

Description

数据处理方法、装置、电子设备和存储介质
技术领域
本申请涉及计算机技术领域，特别是涉及一种数据处理方法、一种数据处理装置、一种电子设备和一种存储介质。
背景技术
随着各类直播平台的兴起，越来越多的人加入到直播的行列中。
一些主播为了使直播内容更加具有感染力，通常会在直播的内容中添加音效，例如，主播在讲了一个笑话之后，主播会手动的在大量的音效中选择“鼓掌”的音效，并将其添加到发送给观众的直播数据中。
但是采用这样的方式，主播需要手动的从大量的音效中选择音效，并添加到直播内容中，主播操作十分不方便。
发明内容
本申请实施例提供了一种数据处理方法，以方便主播的操作。
相应的，本申请实施例还提供了一种数据处理装置、一种电子设备和一种存储介质，用以保证上述系统的实现及应用。
为了解决上述问题，本申请实施例公开了一种数据处理方法，所述的方法包括：获取直播数据，并依据所述直播数据确定直播状态信息；依据所述直播状态信息，确定对应的音效数据；将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。
为了解决上述问题，本申请实施例公开了一种数据处理方法，包括：提供直播数据；发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定；接收添加了音效数据的直播数据，并进行播放。
为了解决上述问题，本申请实施例公开了一种数据处理方法，包括：提供直播数据给目标用户；接收目标用户对直播数据的评论数据；依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定；将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
为了解决上述问题，本申请实施例公开了一种数据处理装置，包括：直播状态获取模块，用于获取直播数据，并依据所述直播数据确定直播状态信息；音效数据获取模块，用于依据所述直播状态信息，确定对应的音效数据；直播数据合成模块，用于将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。
为了解决上述问题，本申请实施例公开了一种数据处理装置，包括：直播数据获取模块，用于提供直播数据；评论数据输出模块，用于发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定；直播数据接收模块，用于接收添加了音效数据的直播数据，并进行播放。
为了解决上述问题，本申请实施例公开了一种数据处理装置，包括：直播数据提供模块，用于提供直播数据给目标用户；评论数据接收模块，用于接收目标用户对直播数据的评论数据；音效数据确定模块，用于依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定；音效数据添加模块，用于将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
为了解决上述问题，本申请实施例公开了一种电子设备，包括：处理器；和存储器，其上存储有可执行代码，当所述可执行代码被执行时，使得所述处理器执行如上述实施例中一个或多个所述的方法。
为了解决上述问题，本申请实施例公开了一个或多个机器可读介质，其上存储有可执行代码，当所述可执行代码被执行时，使得处理器执行如上述实施例中一个或多个所述的方法。
与现有技术相比，本申请实施例包括以下优点：
在本申请实施例中，可以对直播数据进行分析，得到主播的直播状态信息，然后依据直播状态信息，确定符合主播的直播状态的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，然后发送给目标用户。本申请实施例中，通过对直播数据中主播的状态进行识别，来筛选出符合主播直播状态的音效，并添加到直播数据中，主播无需从大量的音效数据中查找对应的音效数据，即可为直播数据添加对应的音效数据，能够方便主播的操作。
附图说明
图1是本申请一个实施例的数据处理系统的结构示意图；
图2A是本申请一个实施例的数据处理方法的流程示意图；
图2B是本申请一个实施例的音效推荐引擎的数据处理示意图；
图3是本申请另一个实施例的数据处理方法的流程示意图；
图4是本申请再一个实施例的数据处理方法的流程示意图；
图5是本申请再一个实施例的数据处理方法的流程示意图；
图6是本申请一个实施例的数据处理装置的结构示意图；
图7是本申请另一个实施例的数据处理装置的结构示意图；
图8是本申请再一个实施例的数据处理装置的结构示意图；
图9是本申请一个实施例提供的示例性装置的结构示意图。
具体实施方式
为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。
本申请实施例可应用于直播领域，直播是指“广播电视节目的后期合成、播出同时进行的播出方式”。按播出场合可分为现场直播(如网络直播)和播音室或演播室直播等形式。
本申请实施例可以应用在直播领域中，如可以应用在网络直播的场景中，如图1所示，本申请实施例的数据处理方法可以通过处理端来执行，处理端可以为进行直播数据存储、转发的服务端，也可以为采集直播数据的直播端，还可以为进行直播数据输出的用户端。本申请实施例以处理端为服务端为例，直播端可以采集直播数据，并发送给服务端，服务端可以识别直播数据中主播的状态，并在直播数据中添加对应该状态的音效数据，并将添加了音效的直播数据发送给观看直播的用户的用户端。其中，音效(Sound effects)还可称为声效(Audio effects)，是人工制造或加强的声音，用来增强对电影、电子游戏、音乐或其他媒体的艺术或其他内容的声音处理。举例来说，音效可以包括：鼓掌音效、欢呼音效、尖叫音效、动物音效、大自然音效、乐器音效等。本申请实施例在直播数据中添加音效数据，能够增进直播的气氛。
具体的，可以获取主播的直播数据，并依据直播数据确定主播的直播状态信息，其中，主播的直播数据可包括主播的直播视频，直播状态信息可以包括直播氛围信息和直播情绪信息；确定直播状态信息之后，可以依据主播的直播状态信息和目标用户的偏好信息，确定对应的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，以将目标直播数据发送给目标用户。如可以对直播数据中用户的面部表情、用户的肢体动作、用户的语音数据进行识别，确定主播的直播情绪为开心，根据目标用户的历史观看行为确定目标用户的对音效的偏好信息，然后确定欢快的音效作为音效数据，并添加到直播数据中，得到目标直播数据。本申请实施例中，可以识别直播数据，确定直播状态信息，并依据直播状态信息，确定符合直播状态信息的音效数据，并将音效数据添加到直播数据中，无需主播从大量的音效数据中查找音效数据，即可为直播数据添加音效数据，能够方便主播的操作。
其中，主播的直播数据除了可以包括主播的直播视频之外，还可以包括主播的属性信息、状态偏好信息、互动习惯、声纹、声道属性、以及其他的关联信息。举例来说，主播的直播数据可以包括主播的属性信息，主播的年龄、性别等信息，以便根据主播的年龄、性别以及直播视频，确定直播状态信息。再举例来说，主播的直播数据可以包括主播的互动习惯，处理端可以依据主播的互动习惯，为不同的直播状态设定不同的权重值，进而依据权重值和直播视频来确定直播状态信息。再举例来说，主播的直播数据可以包括主播的声纹，处理端可以依据主播的声纹，从直播视频中提取出与主播相关的音频，进而对包含有主播声纹的音频进行识别，确定直播状态信息。再举例来说，主播在位置不同时，直播状态可能会随之改变，如主播在站起表演才艺以及坐在座位上聊天时，两种状态对应的直播状态识别方式可能不相同，因此，直播数据还可以包括声道属性，处理端可以依据直播视频中的音频的声道属性，确定主播的位置，进而依据位置和对应的识别方式，来识别主播的直播状态。
在确定了直播状态信息之后，可以依据直播状态信息以及观看直播的用户的用户信息(如偏好信息)来确定对应的音效数据，其中，用户的用户信息除了可以包括用户对于各音效数据的偏好之外，还可以包括用户的等级信息、用户的注册时长、使用频率、日均使用时长等信息，以便进一步确定对应的音效数据。举例来说，对于使用频率低的用户和使用频率高的用户来说，高频率用户对于产品的粘性相对较高，因此，用户信息可以包括用户的注册时长、使用频率、日均使用时长等信息，以便处理端依据用户的注册时长、使用频率和日均使用时长等信息，判断用户对于产品的粘性，进而对于粘性更高的用户可以提供更多的服务，进而依据高粘性客户的反馈来确定服务质量。再举例来说，对于音效数据可以划分为不同的等级，用户信息还可以包括用户的等级信息，以便为不同等级的用户提供不同等级的音效数据，进而提升用户对于直播的参与性。本申请实施例还可以依据用户对于直播的评论数据来确定对应的音效数据，举例来说，处理端可以预先设置多个对应不同音效的关键词组，处理端可以获取用户对于直播数据的评论数据，并提取评论数据中的关键词，进而依据关键词确定其所属的关键词组，以确定对应的音效数据，并添加到直播数据中。本申请实施例对于音效数据还可以划分为不同类型，如收费类型的音效和免费类型的音效，以为不同类型的用户提供对应的音效服务。本申请实施例中的音效数据中还可以包括声道信息，以通过不同声道之间的时间延迟来模拟立体的音效效果。
本申请实施例中，处理端可以理解为主播的直播端与用户的用户端之间的桥梁，处理端可以接收直播端的直播数据并传输给用户端，处理端可以向用户提供直播数据展示页面，直播数据展示页面可以包括直播视频展示控件、直播评论获取控件、直播弹幕展示控件等，观看直播的用户可以通过对直播评论获取页面进行触发，以上传评论数据。处理端可以接收用户端返回给直播端的反馈信息(如评论数据)，并将反馈信息传输给直播端(以及其他用户端)，本申请实施例可以采集一段时长内用户的反馈信息，以对用户的反馈信息进行分析，确定用户的偏好信息，其中，用户的反馈信息可以包括用户观看的直播内容、用户对于直播内容的评价等信息，举例来说，处理端可以依据用户观看的直播内容，判断用户是否从添加了音效的直播内容切换到未添加音效的其他直播内容中，进而确定用户对于音效是否喜好，进而确定是否在后续直播数据中继续添加音效。本申请实施例的用户端可以为终端设备，如电脑端、手机端等，也可以为物联网设备，如应用虚拟现实(Virtual Reality，VR)技术的VR设备(如VR眼镜)、应用增强现实(Augmented Reality，AR)技术的AR设备等，处理端可以向VR设备或AR设备发送添加了音效数据(和/或图像特效)的数据，并通过VR设备或AR设备进行数据的输出。并且，处理端可以接收VR设备或AR设备(也可以为其他设备)返回的反馈信息，如用户的肢体动作、用户的面部表情等数据，确定用户对于音效数据或图像特效是否满意。
本申请实施例除了可以应用在网络主播的直播场景中之外，还可以应用在直播录像的点播、演唱会直播、演唱会录播、影视直播、影视点播、综艺直播、综艺点播等场景中，以在视频中添加适合对象状态的音效，提升用户体验。例如，本申请实施例可以应用在对于直播录像的点播场景中，处理端可以依据主播在直播录像中的直播状态和观看直播的用户的用户信息，确定对应的音效数据，并将音效数据添加到直播录像中，形成目标直播数据，并发送给用户端。
本申请实施例除了可以对直播数据进行数据处理之外，还可以为包含有音频数据和/或图像数据的数据添加适合数据中对象状态的音效，得到编辑后的数据，如可以对拍摄的宠物视频数据进行识别，识别到宠物的状态，并添加对应该状态的音效。再例如还可以识别拍摄的风景视频中的风景对象(树木、河水等)进行识别，并添加对应的音效，如可以为摇动状态的树木添加风声的音效、为流动状态的河水添加流水的音效。
本申请实施例的数据处理方法可以通过处理端来执行，处理端可以为进行直播数据存储、转发的服务端，也可以为采集直播数据的直播端，还可以为进行直播数据输出的用户端。本申请实施例以处理端为服务端为例，对数据处理方法进行描述，具体的，如图2A所示，数据处理方法包括：
步骤202、获取直播数据，并依据所述直播数据确定直播状态信息。直播数据可以为商品推荐、才艺表演、互动娱乐等场景的直播数据。状态信息可以依据待处理数据中的对象设定，如待处理数据为直播数据时，直播状态信息可以为主播的直播氛围、主播的直播情绪等信息，其中，直播情绪和直播氛围可以按照类别进行划分，对应不同类别的情绪，可以确定对应的音效数据，并添加到直播数据中。举例来说，直播情绪可以包括正面情绪、负面情绪和其他情绪，正面情绪可以包括：兴奋、开心、温暖、热情；负面情绪可以包括：愤怒、沮丧、悲伤、害怕、压抑；其他情绪可以包括：惊讶、尴尬、淡定。对应正面情绪可以确定轻松、愉快类别的音效数据，并添加到直播数据中，对应负面情绪可以确定忧伤、伤感的音效数据，并添加到直播数据中。待处理数据为待编辑的宠物视频数据的情况下，状态信息可以为宠物的行为动作信息，如宠物的奔跑动作。待处理数据为待编辑的风景视频数据的情况下，状态信息可以为风景对象的动作信息，如树木因风吹产生的晃动，河水的流动等。本申请实施例可以获取直播数据，并从直播数据中获取主播的直播氛围信息、主播的直播情绪信息，作为主播的直播状态信息。
在主播的直播过程中，对应不同的场景，可能部分场景无需添加音效，因此，可以在采集直播数据中添加场景信息的标识，以依据该标识，确定是否进行直播状态的识别。具体的，作为一个可选的实施例，所述依据所述直播数据确定直播状态信息，包括：获取直播数据中的场景信息；依据所述场景信息和所述直播数据，确定直播状态信息。在一个可选的示例中，直播端可以在采集的直播数据中添加对应的场景标识，处理端可以从直播数据中提取场景标识来确定场景信息。具体的，直播端在采集直播数据的过程中，采集直播端的当前的直播场景，并生成对应的场景标识，添加到采集的直播数据中，并将添加了场景标识的直播数据发送给处理端，处理端接收到直播数据之后，从直播数据中提取场景标识，确定对应的场景。其中，直播端可以依据当前运行的应用的运行状态，确定当前的直播场景，例如对于唱歌主播，在运行伴奏的应用的情况下，可以确定主播在才艺表演的场景，并生成对应的场景标识；在未运行伴奏应用的情况下，可以确定主播处在其他场景。在另一个可选的示例中，处理端在接收到直播数据之后，可以对音频数据和图像数据进行预识别，确定场景信息。对于不同类型的主播，可以采取不同的识别方式，例如对游戏的主播，可以识别直播数据是否为游戏界面，来确定直播数据的场景信息。
在对直播数据进行分析的过程中，处理端可以对直播数据中的音频数据和/或图像数据进行识别，得到直播状态信息。具体的，作为一个可选的实施例，所述依据所述直播数据确定直播状态信息，包括以下步骤中的至少一个：对所述直播数据中的音频数据进行分析，以确定直播状态数据；对所述直播数据中的图像数据进行分析，以确定直播状态数据。直播数据中可以包括音频数据和图像数据中的至少一个，本申请实施例可以对音频数据和图像数据中的至少一个进行分析，得到直播状态信息。
直播状态数据可以包括主播的直播情绪信息和直播氛围信息，处理端可以提取音频数据中的语音特征，并根据语音特征，确定主播的直播情绪和直播氛围，具体的，作为一个可选的实施例，所述对所述直播数据中的音频数据进行分析，以确定直播状态数据，包括：对音频数据进行识别，得到语音特征信息；对所述语音特征信息进行分析，以确定直播状态数据。语音特征信息可以包括：音质特征、韵律特征和频谱特征中的至少一个。音质包含了三方面的内容：音量(volume)、音高(pitch)和音色(timbre)。声音的音量，即音频的强度和幅度；声音的音调，也称为音高，即音频的频率或每秒变化的次数；声音的音色，即音频泛音。韵律特征又叫“超音质特征”或“超音段特征”，韵律特征是语言的一种音系结构，与句法和语篇结构、信息结构等其他语言学结构密切相关。频谱特征是指对音频数据进行频谱转换，得到的频谱数据。处理端可以提取音频数据进行识别，得到语音特征信息，并依据语音特征信息，确定主播的直播情绪和直播氛围，作为直播状态数据。
在对直播数据中的图像数据进行分析的过程中，可以对图像数据中的主播的面部表情、肢体动作进行识别，得到直播状态数据。具体的，作为一个可选的实施例，所述对所述直播数据中的图像数据进行分析，以确定直播状态数据，包括：对所述图像数据中人物的面部特征和肢体动作信息进行分析，以确定直播状态数据。在处理端中可以预先设置对应不同情绪类别的情绪表情和对应不同情绪类别的情绪动作，处理端可以对直播数据中的主播的面部特征进行分析，确定其符合的情绪表情；可以对主播的肢体动作进行分析，确定包含的情绪动作；并依据面部特征符合的情绪表情、肢体动作包含的情绪动作，确定主播对应的情绪。例如，可以在识别到用户的面部特征符合愤怒的表情、用户的肢体动作包含有握拳的动作，则确定主播对应的情绪为愤怒情绪。
在确定了直播状态信息之后，处理端可以在步骤204中，依据所述直播状态信息，确定对应的音效数据。在直播状态数据包括直播情绪信息的情况下，可以按照直播情绪信息所述的类别，确定对应的音效数据。本申请实施例除了可以根据主播的直播状态来确定对应的音效数据之外，还可以根据不同的观看直播的用户的喜好不同来对应的添加音效数据，具体的，作为一个可选的实施例，所述依据所述直播状态信息，确定对应的音效数据，包括：依据所述直播状态信息和观看直播的目标用户的偏好信息，确定对应的音效数据。偏好数据是指用户对于不同音效的兴趣程度，处理端可以依据主播的直播状态信息和观看直播的用户对不同音效数据的偏好程度，为用户推荐符合观看直播的用户的偏好的音效。例如用户a对于第一类型的欢快音效的兴趣程度高，对第二类型的欢快音效的兴趣程度低；用户b对于第一类型的欢快音效的兴趣程度低，对第二类型的欢快音效的兴趣程度高。在依据直播状态信息确定音效数据为欢快类别时，可以为用户a推荐第一类型的欢快音效，为用户b推荐第二类型的欢快音效。
各用户的偏好信息可以依据用户对直播数据的历史观看行为确定，具体的，作为一个可选的实施例，还包括：获取目标用户的历史观看行为；依据所述历史观看行为，确定目标用户的偏好信息。历史观看行为可以包括对直播数据的观看时长、对直播数据的评价数据、对直播数据的分享、点赞等行为。在处理端可以为用户划分为不同的群体，如属于同一年龄段、消费层次相似和观看的直播内容相近的用户可以作为同一个群体，可以将一个群体内的用户进行划分，得到添加音效a的用户组、添加音效b的用户组和不添加音效的用户组，处理端可以收集同一群体内的不同用户组的用户的历史观看行为，并进行对比分析，得到目标用户的偏好信息。
在处理端可以设定音效推荐引擎，通过将主播的直播状态信息、观看直播的目标用户的偏好信息和主播预先为直播设定的直播参数信息，输入到音效推荐引擎中，得到对应的音效数据。具体的，作为一个可选的实施例，所述依据所述直播状态信息和观看直播的目标用户的偏好信息，确定对应的音效数据，包括：将所述直播状态信息、所述偏好信息和为直播设定的直播参数信息，输入到音效推荐引擎中，得到对应的音效数据。直播参数信息用于描述直播的内容，例如直播参数信息可以包括主播的直播风格信息(如娱乐类型)、直播内容所属的直播类型(如游戏类型)。如图2B所示，音效推荐引擎可以按照输入的数据进行分析，进而得到对应的音效数据。音效推荐引擎可以理解为算法模型，利用输入数据和音效推荐引擎的参数进行运算，进而得到音效数据。音效推荐引擎可以将直播状态信息、直播参数信息和偏好信息作为输入数据进行分析，得到对应的音效数据。此外，音效推荐引擎按照主播的直播参数信息和/或目标用户的偏好信息的不同，还可以设置有多个子引擎，处理端可以将直播参数信息和目标用户的偏好信息输入到音效推荐引擎中，确定对应的子引擎，并利用子引擎对直播状态信息进行分析，得到对应的音效数据。
在确定了对应的音效数据之后，处理端可以在步骤206中，将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。针对于不同的观看直播的用户，处理端可以确定与该用户对应的音效数据，并添加到直播数据中，得到目标直播数据，然后将目标直播数据发送给对应的目标用户，不同的目标用户可以接收到添加了不同的音效数据的直播数据，提升用户的体验。
本申请实施例可以在确定了音效数据之后，直接将音效数据添加到直播数据中，也可以在确定了音效数据之后，将确定的音效数据展示给主播，并根据主播对音效数据的选择指令，将主播选择的音效数据添加到直播数据中。具体的，作为一个可选的实施例，所述将所述音效数据添加到直播数据中，得到目标直播数据，包括：将所述音效数据添加到展示信息中，以进行展示；接收针对于展示信息中的音效数据的选择指令，并将选择的音效数据添加到直播数据中，得到目标直播数据。展示信息可以理解为展示框，在确定了音效数据之后，处理端可以将音效数据添加到展示框中，并发送给直播端的主播，主播可以通过点选展示框内的音效数据做出选择指令，并发送给处理端，处理端接收到选择指令之后，将对应的音效数据添加到直播数据中，得到目标直播数据，并发送给目标用户。
在将音效数据添加到直播数据中并发送给目标用户之后，处理端还可以依据目标用户对添加了音效数据的直播数据的观看行为，确定用户对添加了音效数据的直播数据的兴趣程度，进而对音效推荐引擎进行修正。具体的，作为一个可选的实施例，还包括：收集目标用户的目标观看行为；依据所述目标观看行为，对所述音效推荐引擎进行修正。目标用户的观看行为可以包括对直播数据的评论数据、对直播数据的观看时长、对直播数据的分享、点赞等行为。处理端可以在将添加了音效数据的直播数据发送给目标用户之后的一段时间内，对目标用户的行为进行监控，确定目标用户的观看行为是正面行为或是负面行为，进而对音效推荐引擎进行修正。
为了确定目标用户的观看行为是正面行为或负面行为，本申请实施例可以对同一个偏好的用户群体的不同用户采用不同的推荐方案，并针对该群体内不同用户对不同的音效数据的反馈进行对比分析，进而确定音效数据对目标用户的观看行为的影响，以对音效推荐引擎进行修正。具体的，作为一个可选的实施例，所述依据所述目标观看行为，对所述音效推荐引擎的参数进行修正，包括：依据目标用户的偏好信息，确定目标用户所属的用户群体；获取用户群体中其他用户的其他观看行为；依据所述目标观看行为和其他观看行为，对所述音效推荐引擎进行修正。在处理端可以按照用户的偏好信息，为用户预先划分到对应的用户群体中，在对直播数据添加音效数据的过程中，可以对发送给用户群体中的部分用户的直播数据中添加音效数据，对发送给用户群体中的其他用户的直播数据不添加音效数据，然后采集用户群体中各用户的观看行为，分析添加了音效数据和未添加音效数据的观看行为的差异，进而确定该音效数据对用户的观看行为是正向影响或负向影响，进而对音效推荐引擎进行修正。本申请实施例可以对用户针对添加了音效数据的直播数据的观看行为进行分析，进而修正音效推荐引擎，提升音效推荐引擎的准确性。
在本申请实施例中，可以对直播数据进行分析，得到主播的直播状态信息，然后依据直播状态信息，确定对应的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，并发送给目标用户。本申请实施例中，通过对直播数据中主播的状态进行识别，来筛选出符合主播的状态的音效，并添加到直播数据中，主播无需从大量的音效数据中查找对应的音效数据，即可为直播数据添加对应的音效数据，能够方便主播的操作。
在上述实施例的基础上，本申请还提供一种数据处理方法，可以应用在处理端，如图3所示，该方法包括：
步骤302、获取直播数据。
步骤304、对所述直播数据中的音频数据进行分析，以确定直播状态数据。作为一个可选的实施例，所述对所述直播数据中的音频数据进行分析，以确定直播状态数据，包括：对音频数据进行识别，得到语音特征信息；对所述语音特征信息进行分析，以确定直播状态数据。
步骤306、对所述直播数据中的图像数据进行分析，以确定直直播状态数据。作为一个可选的实施例，所述对所述直播数据中的图像数据进行分析，以确定直播状态数据，包括：对所述图像数据中人物的面部特征和肢体动作信息进行分析，以确定直播状态数据。
步骤308、将所述直播状态信息、所述偏好信息和为直播设定的直播参数信息，输入到音效推荐引擎中，得到对应的音效数据。作为一个可选的实施例，所述方法还包括：获取目标用户的历史观看行为；依据所述历史观看行为，确定目标用户的偏好信息。
步骤310、将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。作为一个可选的实施例，所述将所述音效数据添加到直播数据中，得到目标直播数据，包括：将所述音效数据添加到展示信息中，以进行展示；接收针对于展示信息中的音效数据的选择指令，并将选择的音效数据添加到直播数据中，得到目标直播数据。
步骤312、收集目标用户的目标观看行为，以依据所述目标观看行为，对所述音效推荐引擎进行修正。作为一个可选的实施例，所述依据所述目标观看行为，对所述音效推荐引擎进行修正，包括：依据目标用户的偏好信息，确定目标用户所属的用户群体；获取用户群体中其他用户的其他观看行为；依据所述目标观看行为和其他观看行为，对所述音效推荐引擎进行修正。
在本申请实施例中，可以对直播数据中的音频数据和图像数据进行分析，进而得到主播的直播状态信息，然后将直播状态信息、预先设置的直播参数信息和依据观看直播的目标用户的偏好信息输入到音效推荐引擎中，输出对应的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，并发送给目标用户。然后可以采集目标用户对添加了音效数据的直播数据的观看行为，并依据该观看行为对音效推荐引擎进行修正，提升音效推荐引擎的准确性。本申请实施例中，通过对直播数据中主播的状态进行识别，来筛选出符合主播的状态的音效，并添加到直播数据中，主播无需从大量的音效数据中查找对应的音效数据，即可为直播数据添加对应的音效数据，能够方便主播的操作。
在上述实施例的基础上，本申请还提供一种数据处理方法，可以应用在处理端，处理端可以为观看直播的用户的用户端，本申请实施例的数据处理方法可以结合观看直播的用户的评论，确定符合观看直播的用户的评论的音效数据，提升用户体验，如图4所示，该方法包括：
步骤402、提供直播数据。
步骤404、发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定。
步骤406、接收添加了音效数据的直播数据，并进行播放。
本申请实施例的方法的具体实施方式与上述方法的实施方式类似，具体实施过程可以参考上述实施例的实施方式，此处不再赘述。
在本申请实施例中，处理端可以提供直播数据，处理端的观看直播的用户可以输入对直播数据的评论数据并发送给服务端，服务端接收到该评论数据之后，可以对后续的直播数据中主播的直播状态信息进行识别，然后结合直播状态信息和评论数据，确定对应的音效数据，并将该音效数据添加到后续的直播数据中，以发送给处理端观看直播的用户，处理端接收到服务端添加了音效数据的直播数据之后，输出该数据。本申请实施例中，可以结合观看直播的用户对直播数据的评论和主播的直播状态来确定音效，能够为观看直播的用户提供更加适合的音效，提升观看直播的用户的用户体验。
举例来说，观看用户a和观看用户b观看了同一直播的直播数据，观看用户a对直播数据做出了正面的评论数据，如“很棒”，观看用户b对直播数据做出了负面的评论数据，如“太弱了”，处理端可以获取观看用户a的评论数据，并结合后续的直播数据中主播的直播状态信息，为后续的直播数据中添加“鼓掌”的音效，并发送给观看用户a；处理端可以获取观看用户b的评论数据，并结合后续的直播数据中主播的直播状态信息，为后续的直播数据中添加“嘘声”的音效，并发送给观看用户b。本申请实施例可以结合观看直播的用户的评论和主播的直播状态，为观看直播的用户推荐更加适合的音效，提升观看体验。
在上述实施例的基础上，本申请还提供一种数据处理方法，可以应用在处理端，处理端可以为进行数据中转、存储的服务端，本申请实施例的数据处理方法可以结合观看直播的用户的评论，确定符合观看直播的用户的评论的音效数据，提升用户体验，如图5所示，该方法包括：
步骤502、提供直播数据给目标用户。
步骤504、接收目标用户对直播数据的评论数据。
步骤506、依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定。
步骤508、将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
在本申请实施例中，处理端可以向观看直播的目标用户的用户端提供直播数据，用户端的目标用户可以输入对直播数据的评论数据并发送给处理端，处理端接收到该评论数据之后，可以对后续的直播数据中主播的直播状态信息进行识别，然后结合直播状态信息和评论数据，确定对应的音效数据，并将该音效数据添加到后续的直播数据中，以发送给用户端的目标用户。本申请实施例中，可以结合观看直播的目标用户对直播数据的评论和主播的直播状态来确定音效，能够为观看直播的目标用户提供更加适合的音效，提升观看直播的目标用户的用户体验。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本申请实施例所必须的。
在上述实施例的基础上，本实施例还提供了一种数据处理装置，参照图6，具体可以包括如下模块：
直播状态获取模块602，用于获取直播数据，并依据所述直播数据确定直播状态信息。
音效数据获取模块604，用于依据所述直播状态信息，确定对应的音效数据。
直播数据合成模块606，用于将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。
综上，在本申请实施例中，可以对直播数据进行分析，得到主播的直播状态信息，然后依据直播状态信息，确定符合主播的直播状态的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，然后发送给目标用户。本申请实施例中，通过对直播数据中主播的状态进行识别，来筛选出符合主播状态的音效，并添加到直播数据中，主播无需从大量的音效数据中查找对应的音效数据，即可为直播数据添加对应的音效数据，能够方便主播的操作。
在上述实施例的基础上，本实施例还提供了一种数据处理装置，具体可以包括如下模块：
直播数据接入模块，用于获取直播数据。
音频数据分析模块，用于对所述直播数据中的音频数据进行分析，以确定直播状态数据。作为一个可选的实施例，所述音频数据分析模块，具体包括：对音频数据进行识别，得到语音特征信息；对所述语音特征信息进行分析，以确定直播状态数据。
图像数据分析模块，用于对所述直播数据中的图像数据进行分析，以确定直播状态数据。作为一个可选的实施例，所述图像数据分析模块，具体包括：对所述图像数据中人物的面部特征和肢体动作信息进行分析，以确定直播状态数据。
数据输入处理模块，用于将所述直播状态信息、所述偏好信息和为直播设定的直播参数信息，输入到音效推荐引擎中，得到对应的音效数据。作为一个可选的实施例，装置还包括：偏好确定模块，用于获取目标用户的历史观看行为；依据所述历史观看行为，确定目标用户的偏好信息。
数据合成处理模块，用于将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。作为一个可选的实施例，所述数据合成处理模块，具体包括：将所述音效数据添加到展示信息中，以进行展示；接收针对于展示信息中的音效数据的选择指令，并将选择的音效数据添加到直播数据中，得到目标直播数据。
修正处理模块，用于收集目标用户的目标观看行为，以依据所述目标观看行为，对所述音效推荐引擎进行修正。作为一个可选的实施例，所述修正处理模块，具体包括：依据目标用户的偏好信息，确定目标用户所属的用户群体；获取用户群体中其他用户的其他观看行为；依据所述目标观看行为和其他观看行为，对所述音效推荐引擎进行修正。
在本申请实施例中，可以对直播数据中的音频数据和图像数据进行分析，进而得到主播的直播状态信息，然后将直播状态信息、预先设置的直播参数信息和依据观看直播的目标用户的偏好信息输入到音效推荐引擎中，输出对应的音效数据，并将音效数据添加到直播数据中，得到目标直播数据，并发送给目标用户。然后可以采集目标用户对添加了音效数据的直播数据的观看行为，并依据该观看行为对音效推荐引擎进行修正，提升音效推荐引擎的准确性。本申请实施例中，通过对直播数据中主播的状态进行识别，来筛选出符合主播的状态的音效，并添加到直播数据中，主播无需从大量的音效数据中查找对应的音效数据，即可为直播数据添加对应的音效数据，能够方便主播的操作。
在上述实施例的基础上，本实施例还提供了一种数据处理装置，参照图7，具体可以包括如下模块：
直播数据获取模块702，用于提供直播数据。
评论数据输出模块704，用于发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定。
直播数据接收模块706，用于接收添加了音效数据的直播数据，并进行播放。
综上，在本申请实施例中，处理端可以提供直播数据，处理端的观看直播的用户可以输入对直播数据的评论数据并发送给服务端，服务端接收到该评论数据之后，可以对后续的直播数据中主播的直播状态信息进行识别，然后结合直播状态信息和评论数据，确定对应的音效数据，并将该音效数据添加到后续的直播数据中，以发送给处理端观看直播的用户，处理端接收到服务端添加了音效数据的直播数据之后，输出该数据。本申请实施例中，可以结合观看直播的用户对直播数据的评论和主播的直播状态来确定音效，能够为观看直播的用户提供更加适合的音效，提升观看直播的用户的用户体验。
在上述实施例的基础上，本实施例还提供了一种数据处理装置，参照图8，具体可以包括如下模块：
直播数据提供模块802，用于提供直播数据给目标用户。
评论数据接收模块804，用于接收目标用户对直播数据的评论数据。
音效数据确定模块806，用于依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定。
音效数据添加模块808，用于将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
综上，在本申请实施例中，处理端可以向观看直播的目标用户的用户端提供直播数据，用户端的目标用户可以输入对直播数据的评论数据并发送给处理端，处理端接收到该评论数据之后，可以对后续的直播数据中主播的直播状态信息进行识别，然后结合直播状态信息和评论数据，确定对应的音效数据，并将该音效数据添加到后续的直播数据中，以发送给用户端的目标用户。本申请实施例中，可以结合观看直播的目标用户对直播数据的评论和主播的直播状态来确定音效，能够为观看直播的目标用户提供更加适合的音效，提升观看直播的目标用户的用户体验。
本申请实施例还提供了一种非易失性可读存储介质，该存储介质中存储有一个或多个模块(programs)，该一个或多个模块被应用在设备时，可以使得该设备执行本申请实施例中各方法步骤的指令(instructions)。
本申请实施例提供了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得电子设备执行如上述实施例中一个或多个所述的方法。本申请实施例中，所述电子设备包括服务器、终端设备等设备。
本公开的实施例可被实现为使用任意适当的硬件，固件，软件，或及其任意组合进行想要的配置的装置，该装置可包括服务器(集群)、终端等电子设备。图9示意性地示出了可被用于实现本申请中所述的各个实施例的示例性装置900。
对于一个实施例，图9示出了示例性装置900，该装置具有一个或多个处理器902、被耦合到(一个或多个)处理器902中的至少一个的控制模块(芯片组)904、被耦合到控制模块904的存储器906、被耦合到控制模块904的非易失性存储器(NVM)/存储设备908、被耦合到控制模块904的一个或多个输入/输出设备910，以及被耦合到控制模块904的网络接口912。
处理器902可包括一个或多个单核或多核处理器，处理器902可包括通用处理器或专用处理器(例如图形处理器、应用处理器、基频处理器等)的任意组合。在一些实施例中，装置900能够作为本申请实施例中所述服务端、终端等设备。
在一些实施例中，装置900可包括具有指令914的一个或多个计算机可读介质(例如，存储器906或NVM/存储设备908)以及与该一个或多个计算机可读介质相合并被配置为执行指令914以实现模块从而执行本公开中所述的动作的一个或多个处理器902。
对于一个实施例，控制模块904可包括任意适当的接口控制器，以向(一个或多个)处理器902中的至少一个和/或与控制模块904通信的任意适当的设备或组件提供任意适当的接口。
控制模块904可包括存储器控制器模块，以向存储器906提供接口。存储器控制器模块可以是硬件模块、软件模块和/或固件模块。
存储器906可被用于例如为装置900加载和存储数据和/或指令914。对于一个实施例，存储器906可包括任意适当的易失性存储器，例如，适当的DRAM。在一些实施例中，存储器906可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例，控制模块904可包括一个或多个输入/输出控制器，以向NVM/存储设备908及(一个或多个)输入/输出设备910提供接口。
例如，NVM/存储设备908可被用于存储数据和/或指令914。NVM/存储设备908可包括任意适当的非易失性存储器(例如，闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如，一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备908可包括作为装置900被安装在其上的设备的一部分的存储资源，或者其可被该设备访问可不必作为该设备的一部分。例如，NVM/存储设备908可通过网络经由(一个或多个)输入/输出设备910进行访问。
(一个或多个)输入/输出设备910可为装置900提供接口以与任意其他适当的设备通信，输入/输出设备910可以包括通信组件、音频组件、传感器组件等。网络接口912可为装置900提供接口以通过一个或多个网络通信，装置900可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信，例如接入基于通信标准的无线网络，如WiFi、2G、3G、4G、5G等，或它们的组合进行无线通信。
对于一个实施例，(一个或多个)处理器902中的至少一个可与控制模块904的一个或多个控制器(例如，存储器控制器模块)的逻辑封装在一起。对于一个实施例，(一个或多个)处理器902中的至少一个可与控制模块904的一个或多个控制器的逻辑封装在一起以形成系统级封装(SiP)。对于一个实施例，(一个或多个)处理器902中的至少一个可与控制模块904的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例，(一个或多个)处理器902中的至少一个可与控制模块904的一个或多个控制器的逻辑集成在同一模具上以形成片上系统(SoC)。
在各个实施例中，装置900可以但不限于是：服务器、台式计算设备或移动计算设备(例如，膝上型计算设备、手持计算设备、平板电脑、上网本等)等终端设备。在各个实施例中，装置900可具有更多或更少的组件和/或不同的架构。例如，在一些实施例中，装置900包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
其中，检测装置中可采用主控芯片作为处理器或控制模块，传感器数据、位置信息等存储到存储器或NVM/存储设备中，传感器组可作为输入/输出设备，通信接口可包括网络接口。
本申请实施例还提供了一种电子设备，包括：处理器；和存储器，其上存储有可执行代码，当所述可执行代码被执行时，使得所述处理器执行如本申请实施例中一个或多个所述的方法。
本申请实施例还提供了一个或多个机器可读介质，其上存储有可执行代码，当所述可执行代码被执行时，使得处理器执行如本申请实施例中一个或多个所述的方法。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本申请实施例是参照根据本申请实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本申请所提供的一种数据处理方法、一种数据处理装置、一种电子设备和一种存储介质，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (18)

1.一种数据处理方法，其特征在于，所述的方法包括：
获取直播数据，并依据所述直播数据确定直播状态信息；
依据所述直播状态信息，确定对应的音效数据；
将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。
2.根据权利要求1所述的方法，其特征在于，所述依据所述直播数据确定直播状态信息，包括：
获取直播数据中的场景信息；
依据所述场景信息和所述直播数据，确定直播状态信息。
3.根据权利要求1所述的方法，其特征在于，所述依据所述直播数据确定直播状态信息，包括以下步骤中的至少一个：
对所述直播数据中的音频数据进行分析，以确定直播状态数据；
对所述直播数据中的图像数据进行分析，以确定直播状态数据。
4.根据权利要求3所述的方法，其特征在于，所述对所述直播数据中的音频数据进行分析，以确定直播状态数据，包括：
对音频数据进行识别，得到语音特征信息；
对所述语音特征信息进行分析，以确定直播状态数据。
5.根据权利要求3所述的方法，其特征在于，所述对所述直播数据中的图像数据进行分析，以确定直播状态数据，包括：
对所述图像数据中人物的面部特征和肢体动作信息进行分析，以确定直播状态数据。
6.根据权利要求1所述的方法，其特征在于，所述依据所述直播状态信息，确定对应的音效数据，包括：
依据所述直播状态信息和观看直播的目标用户的偏好信息，确定对应的音效数据。
7.根据权利要求6所述的方法，其特征在于，所述依据所述直播状态信息和观看直播的目标用户的偏好信息，确定对应的音效数据，包括：
将所述直播状态信息、所述偏好信息和为直播设定的直播参数信息，输入到音效推荐引擎中，得到对应的音效数据。
8.根据权利要求7所述的方法，其特征在于，还包括：
收集目标用户的目标观看行为；
依据所述目标观看行为，对所述音效推荐引擎进行修正。
9.根据权利要求8所述的方法，其特征在于，所述依据所述目标观看行为，对所述音效推荐引擎的参数进行修正，包括：
依据目标用户的偏好信息，确定目标用户所属的用户群体；
获取用户群体中其他用户的其他观看行为；
依据所述目标观看行为和其他观看行为，对所述音效推荐引擎进行修正。
10.根据权利要求6所述的方法，其特征在于，还包括：
获取目标用户的历史观看行为；
依据所述历史观看行为，确定目标用户的偏好信息。
11.根据权利要求1所述的方法，其特征在于，所述将所述音效数据添加到直播数据中，得到目标直播数据，包括：
将所述音效数据添加到展示信息中，以进行展示；
接收针对于展示信息中的音效数据的选择指令，并将选择的音效数据添加到直播数据中，得到目标直播数据。
12.一种数据处理方法，其特征在于，包括：
提供直播数据；
发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定；
接收添加了音效数据的直播数据，并进行播放。
13.一种数据处理方法，其特征在于，包括：
提供直播数据给目标用户；
接收目标用户对直播数据的评论数据；
依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定；
将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
14.一种数据处理装置，其特征在于，包括：
直播状态获取模块，用于获取直播数据，并依据所述直播数据确定直播状态信息；
音效数据获取模块，用于依据所述直播状态信息，确定对应的音效数据；
直播数据合成模块，用于将所述音效数据添加到直播数据中，得到目标直播数据，以发送给目标用户。
15.一种数据处理装置，其特征在于，包括：
直播数据获取模块，用于提供直播数据；
评论数据输出模块，用于发送针对于直播数据的评论数据，以依据所述评论数据和直播状态信息，确定对应的音效数据，并将音效数据添加到后续的直播数据中，所述直播状态信息依据后续的直播数据确定；
直播数据接收模块，用于接收添加了音效数据的直播数据，并进行播放。
16.一种数据处理装置，其特征在于，包括：
直播数据提供模块，用于提供直播数据给目标用户；
评论数据接收模块，用于接收目标用户对直播数据的评论数据；
音效数据确定模块，用于依据所述评论数据和直播状态信息，确定对应的音效数据，所述直播状态信息依据后续的直播数据确定；
音效数据添加模块，用于将所述音效数据添加到后续的直播数据中，得到目标直播数据，并发送给目标用户。
17.一种电子设备，其特征在于，包括：处理器；和
存储器，其上存储有可执行代码，当所述可执行代码被执行时，使得所述处理器执行如权利要求1-13中一个或多个所述的方法。
18.一个或多个机器可读介质，其上存储有可执行代码，当所述可执行代码被执行时，使得处理器执行如权利要求1-13中一个或多个所述的方法。
CN202011608750.9A 2020-12-29 2020-12-29 数据处理方法、装置、电子设备和存储介质 Pending CN114697689A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011608750.9A CN114697689A (zh) 2020-12-29 2020-12-29 数据处理方法、装置、电子设备和存储介质
US17/541,731 US20220248107A1 (en) 2020-12-29 2021-12-03 Method, apparatus, electronic device, and storage medium for sound effect processing during live streaming

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011608750.9A CN114697689A (zh) 2020-12-29 2020-12-29 数据处理方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN114697689A true CN114697689A (zh) 2022-07-01

Family

ID=82131894

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011608750.9A Pending CN114697689A (zh) 2020-12-29 2020-12-29 数据处理方法、装置、电子设备和存储介质

Country Status (2)

Country Link
US (1) US20220248107A1 (zh)
CN (1) CN114697689A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115942050A (zh) * 2022-10-12 2023-04-07 北京达佳互联信息技术有限公司 数据处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464939A (zh) * 2016-07-28 2017-02-22 北京小米移动软件有限公司 播放音效的方法及装置
CN108073671A (zh) * 2017-04-12 2018-05-25 北京市商汤科技开发有限公司 业务对象推荐方法、装置和电子设备
CN111263227A (zh) * 2020-02-10 2020-06-09 腾讯科技（深圳）有限公司 一种多媒体播放方法、装置和存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10614487B1 (en) * 2017-06-04 2020-04-07 Instreamatic, Inc. Server for enabling voice-responsive content as part of a media stream to an end user on a remote device
US11122240B2 (en) * 2017-09-11 2021-09-14 Michael H Peters Enhanced video conference management

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106464939A (zh) * 2016-07-28 2017-02-22 北京小米移动软件有限公司 播放音效的方法及装置
CN108073671A (zh) * 2017-04-12 2018-05-25 北京市商汤科技开发有限公司 业务对象推荐方法、装置和电子设备
CN111263227A (zh) * 2020-02-10 2020-06-09 腾讯科技（深圳）有限公司 一种多媒体播放方法、装置和存储介质

Also Published As

Publication number Publication date
US20220248107A1 (en) 2022-08-04

Similar Documents

Publication Publication Date Title
CN107329980B (zh) 一种基于音频的实时联动显示方法及存储设备
US11669296B2 (en) Computerized systems and methods for hosting and dynamically generating and providing customized media and media experiences
US8566880B2 (en) Device and method for providing a television sequence using database and user inputs
US20160364397A1 (en) System and Methods for Locally Customizing Media Content for Rendering
US10541000B1 (en) User input-based video summarization
CN103856390B (zh) 即时通讯方法及系统、通讯信息处理方法、终端
US20230215068A1 (en) Method for outputting blend shape value, storage medium, and electronic device
CN109788345A (zh) 直播控制方法、装置、直播设备及可读存储介质
CN114173067B (zh) 一种视频生成方法、装置、设备及存储介质
CN112738557A (zh) 视频处理方法及装置
JP7453712B2 (ja) オーディオ再生方法、装置、コンピュータ可読記憶媒体及び電子機器
CN113923462A (zh) 视频生成、直播处理方法、设备和可读介质
KR20200045852A (ko) 음성 합성 또는 영상 편집을 통한 멀티미디어 컨텐츠 내 광고 서비스 플랫폼 및 음성 합성 서비스와 영상 편집 서비스를 제공하는 방법
CN114073854A (zh) 基于多媒体文件的游戏方法和系统
EP4394684A1 (en) Method and system for generating synthetic video advertisements
US11785299B1 (en) Selecting advertisements for media programs and establishing favorable conditions for advertisements
US20220248107A1 (en) Method, apparatus, electronic device, and storage medium for sound effect processing during live streaming
EP4345814A1 (en) Video-generation system
CN113762056A (zh) 演唱视频识别方法、装置、设备及存储介质
CN110324702B (zh) 视频播放过程中的信息推送方法和装置
CN111008287A (zh) 音视频处理方法、装置、服务器及存储介质
CN113282770A (zh) 一种多媒体推荐系统及方法
CN115866339A (zh) 电视节目推荐方法、装置、智能设备及可读存储介质
CN115623146A (zh) 一种生成特效视频的方法、装置、电子设备及存储介质
CN112839256B (zh) 视频播放方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination