CN114390361A - 音频弹幕处理方法及装置 - Google Patents

音频弹幕处理方法及装置 Download PDF

Info

Publication number
CN114390361A
CN114390361A CN202011126393.2A CN202011126393A CN114390361A CN 114390361 A CN114390361 A CN 114390361A CN 202011126393 A CN202011126393 A CN 202011126393A CN 114390361 A CN114390361 A CN 114390361A
Authority
CN
China
Prior art keywords
audio
bullet screen
user
current video
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011126393.2A
Other languages
English (en)
Inventor
许兴旺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN202011126393.2A priority Critical patent/CN114390361A/zh
Priority to US17/505,506 priority patent/US20220124383A1/en
Publication of CN114390361A publication Critical patent/CN114390361A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234336Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by media transcoding, e.g. video is transformed into a slideshow of still pictures or audio is converted into text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440236Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by media transcoding, e.g. video is transformed into a slideshow of still pictures, audio is converted into text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本说明书实施例提供音频弹幕处理方法及装置,其中,所述音频弹幕处理方法包括接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端;所述音频弹幕处理方法在用户观看当前视频时,可以在当前视频通过弹幕的形式生成,包含与当前视频匹配的音乐的音频弹幕,使得后续其他用户在观看该当前视频时可以播放该音频弹幕,通过音频弹幕的形式实现用户之间的音乐共享,提升弹幕趣味性,且增加了弹幕的丰富性。

Description

音频弹幕处理方法及装置
技术领域
本说明书实施例涉及计算机技术领域,特别涉及一种音频弹幕处理方法。本说明书一个或者多个实施例同时涉及一种音频弹幕处理装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
弹幕是一种显示在视频中的用户评论,在视频领域的弹幕可以给观众一种实时互动的感觉,会极大的提高观众的视频观看兴趣和参与感;目前在视频领域主要为文字弹幕以及语音弹幕的形式,趣味性较差,呈现方式单一。
因此需要提供一种可以提升弹幕趣味性的音频弹幕处理方法。
发明内容
有鉴于此,本说明书施例提供了一种音频弹幕处理方法。本说明书一个或者多个实施例同时涉及一种音频弹幕处理装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中弹幕趣味性较差且呈现方式单一的技术缺陷。
根据本说明书实施例的第一方面,提供了一种音频弹幕处理方法,包括:
接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;
接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;
保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
可选的,所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面选择的预设格式的简谱文本,将所述简谱文本确定为音频乐谱;或者
接收所述第一用户在所述音频弹幕生成界面选择的音频文件,将所述音频文件解析为预设格式的音频乐谱。
可选的,所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面输入的预设格式的数字简谱,将所述数字简谱确定为音频乐谱。
可选的,所述基于所述音频生成音频弹幕之后,还包括:
获取所述当前视频预设的音频弹幕合规条件,将所述音频弹幕与所述音频弹幕合规条件进行匹配。
可选的,所述保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端,包括:
在所述音频弹幕与所述音频弹幕合规条件匹配成功的情况下,保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕以预设格式发送至播放所述当前视频的用户终端。
可选的,所述方法,还包括:
接收第二用户针对所述当前视频的音频弹幕的播放指令,其中,所述播放指令中携带有所述音频弹幕的标识;
基于所述音频弹幕的标识确定与所述音频弹幕对应的音频乐谱;
将所述音频乐谱解析为对应的音频,且在播放所述当前视频的用户终端为所述第二用户播放所述音频。
可选的,所述将所述音频乐谱解析为对应的音频,包括:
基于乐谱解析库将所述音频乐谱解析为所述音频弹幕对应的音频。
可选的,所述在播放所述当前视频的用户终端为所述用户播放所述音频,包括:
在检测到播放所述当前视频的用户终端,关闭所述当前视频的视频声音的情况下,为所述用户播放所述音频。
可选的,所述在播放所述当前视频的用户终端为所述用户播放所述音频之后,还包括:
在所述音频播放未结束,接收到所述用户针对所述当前视频的另一音频弹幕的播放指令的情况下,停止所述音频播放,且在播放所述当前视频的用户终端为所述用户播放与所述另一音频弹幕对应的音频。
可选的,所述将所述音频弹幕发送至播放所述当前视频的用户终端之后,还包括:
接收第二用户针对所述音频弹幕的点评信息;
基于所述点评信息对所述音频弹幕进行删除或屏蔽。
根据本说明书实施例的第二方面,提供了一种音频弹幕处理装置,包括:
第一指令接收模块,被配置为接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;
音频弹幕生成模块,被配置为接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;
音频弹幕发送模块,被配置为保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
可选的,所述音频弹幕生成模块,进一步被配置为:
接收所述第一用户在所述音频弹幕生成界面选择的预设格式的简谱文本,将所述简谱文本确定为音频乐谱;或者
接收所述第一用户在所述音频弹幕生成界面选择的音频文件,将所述音频文件解析为预设格式的音频乐谱。
可选的,所述音频弹幕生成模块,进一步被配置为:
接收所述第一用户在所述音频弹幕生成界面输入的预设格式的数字简谱,将所述数字简谱确定为音频乐谱。
可选的,所述装置,还包括:
匹配模块,被配置为获取所述当前视频预设的音频弹幕合规条件,将所述音频弹幕与所述音频弹幕合规条件进行匹配。
可选的,所述音频弹幕发送模块,进一步被配置为:
在所述音频弹幕与所述音频弹幕合规条件匹配成功的情况下,保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕以预设格式发送至播放所述当前视频的用户终端。
可选的,所述装置,还包括:
第二指令接收模块,被配置为接收第二用户针对所述当前视频的音频弹幕的播放指令,其中,所述播放指令中携带有所述音频弹幕的标识;
音频乐谱确定模块,被配置为基于所述音频弹幕的标识确定与所述音频弹幕对应的音频乐谱;
弹幕播放模块,被配置为将所述音频乐谱解析为对应的音频,且在播放所述当前视频的用户终端为所述第二用户播放所述音频。
可选的,所述弹幕播放模块,进一步被配置为:
基于乐谱解析库将所述音频乐谱解析为所述音频弹幕对应的音频。
可选的,所述弹幕播放模块,进一步被配置为:
在检测到播放所述当前视频的用户终端,关闭所述当前视频的视频声音的情况下,为所述用户播放所述音频。
可选的,所述装置,还包括:
音频播放模块,被配置为在所述音频播放未结束,接收到所述用户针对所述当前视频的另一音频弹幕的播放指令的情况下,停止所述音频播放,且在播放所述当前视频的用户终端为所述用户播放与所述另一音频弹幕对应的音频。
可选的,所述装置,还包括:
点评信息接收模块,被配置为接收第二用户针对所述音频弹幕的点评信息;
弹幕处理模块,被配置为基于所述点评信息对所述音频弹幕进行删除或屏蔽。
根据本说明书实施例的第三方面,提供了一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该指令被处理器执行时实现所述音频弹幕处理方法的步骤。
根据本说明书实施例的第四方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该指令被处理器执行时实现所述音频弹幕处理方法的步骤。
本说明书一个实施例实现了一种音频弹幕处理方法及装置,其中,所述音频弹幕处理方法包括接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端;所述音频弹幕处理方法在用户观看当前视频时,可以在当前视频通过弹幕的形式,生成包含与当前视频匹配的音乐的音频弹幕,使得后续其他用户在观看该当前视频时可以播放该音频弹幕,通过音频弹幕的形式实现用户之间的音乐共享,提升弹幕趣味性,且增加了弹幕的丰富性。
附图说明
图1是本说明书一个实施例提供的一种音频弹幕处理方法的系统架构图;
图2是本说明书一个实施例提供的一种音频弹幕处理方法的流程图;
图3是本说明书一个实施例提供的一种音频弹幕处理方法中音频弹幕的示意图;
图4是本说明书一个实施例提供的一种音频弹幕处理方法的处理过程流程图;
图5是本说明书一个实施例提供的一种音频弹幕处理方法中对乐谱弹幕进行解析的流程图;
图6是本说明书一个实施例提供的一种音频弹幕处理装置的结构示意图;
图7是本说明书一个实施例提供的一种计算设备的结构框图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本说明书。但是本说明书能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本说明书内涵的情况下做类似推广,因此本说明书不受下面公开的具体实施的限制。
在本说明书一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本说明书一个或多个实施例。在本说明书一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本说明书一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本说明书一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本说明书一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
首先,对本说明书一个或多个实施例涉及的名词术语进行解释。
音频弹幕:弹幕通常指在观看视频时,随视频播放时间轴出现的评论,通常为文字类型或者语音类型,音频弹幕特指包含音乐内容的弹幕。
MIDI:英文全称:Musical Instrument Digital Interface,中文全称:乐器数字接口
在本说明书中,提供了一种音频弹幕处理方法。本说明书一个或者多个实施例同时涉及一种音频弹幕处理装置,一种计算设备,以及一种计算机可读存储介质,在下面的实施例中逐一进行详细说明。
本说明书实施例提供的所述音频弹幕处理方法可以应用于任何需要处理音频弹幕的领域,例如对视频领域的音频弹幕的处理、对音频领域的音频弹幕的处理、对通信领域的语音弹幕的处理、对自媒体领域的语音弹幕的处理等等;为了便于理解,本说明书实施例以所述音频弹幕处理方法应用于对视频领域的音频弹幕的处理为例进行详细介绍,但不局限于此。
那么在所述音频弹幕处理方法应用于对视频领域的音频弹幕处理的处理为例的情况下,所述音频弹幕处理方法中的音频弹幕即可以理解为包含音乐的弹幕。
具体实施时,本说明书实施例的音频弹幕可以呈现于大型视频播放设备、游戏机、台式计算机、智能手机、平板电脑、MP3(Moving Picture Experts Group Audio LayerIII,动态影像专家压缩标准音频层面3)播放器,MP4(Moving Picture Experts GroupAudio Layer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机、电子书阅读器以及其它显示终端等用户终端。
此外,本说明书实施例的所述音频弹幕处理方法中的音频弹幕可以应用于任何可呈现音频弹幕的视频、音频中,例如在直播、录播类的视频中可呈现音频弹幕,在线或离线听歌、听书等的音频中也可呈现音频弹幕。
参见图1,图1示出了根据本说明书一个实施例提供的一种音频弹幕处理方法的系统架构图。
图1中,用户A通过用户终端A观看视频A,在该视频A的播放界面,用户A通过点击该视频A的播放界面中的弹幕生成控件,生成针对该视频A的音频弹幕生成指令,且将该音频弹幕生成指令发送至服务器,服务器接收到该音频弹幕生成指令后会为用户A返回一个音频弹幕生成界面,且将该音频弹幕生成界面在用户终端A展示给用户A,用户A可以在给音频弹幕生成界面上选择本地midi乐谱或者是输入数字简谱形成midi乐谱,然后将该midi乐谱发送给服务器,服务器接收到该midi乐谱之后,基于该midi乐谱生成音频弹幕a,最后将音频弹幕a同步给通过用户终端B同时观看视频A的用户B以及通过用户终端C同时观看视频A的用户C,用户B和用户C可以通过点击音频弹幕a后面的播放按钮通过对该音频弹幕a对应的midi乐谱的解析,实现该音频弹幕a进行播放。
参见图2,图2示出了根据本说明书一个实施例提供的一种音频弹幕处理方法的流程图,具体包括以下步骤。
步骤202:接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户。
其中,第一用户可以理解为观看当前视频的用户,其中,当前视频可以为直播视频、点播视频或者录播视频等,例如购物直播视频、体育直播视频、电视剧视频或者电影视频等。
实际应用中,接收第一用户针对当前视频发送的音频弹幕生成指令,可以理解为接收第一用户在播放当前视频的第一用户终端上的某个控件发送的音频弹幕生成指令,其中,第一用户终端为第一用户的用户终端,例如第一用户的手机、平板电脑等。
以第一用户终端为手机为例,具体实施时,第一用户通过手机观看视频时,若第一用户想要针对手机播放的当前视频生成音频弹幕,则第一用户可以点击手机的当前视频播放界面中的“弹幕”生成控件,在弹出的弹幕窗口中选择“音频弹幕”选项或者直接点击手机的当前视频播放界面中的“音频弹幕”生成控件,以生成音频弹幕生成指令,然后将该音频弹幕生成指令发送给服务端,该音频弹幕生成指令即为本说明书实施例中的服务端接收的第一用户针对当前视频发送的音频弹幕生成指令。
具体实施时,服务端在接收到第一用户基于第一用户终端发送的针对当前视频的音频弹幕生成指令后,基于该生成指令确定音频弹幕生成界面,然后将该音频弹幕生成界面返回至第一用户,即返回至第一用户的第一用户终端,在第一用户终端展示给第一用户。
步骤204:接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕。
其中,音频乐谱可以理解为midi乐谱;实际使用中,确定midi乐谱有三种方式,具体如下所述:
所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面选择的预设格式的简谱文本,将所述简谱文本确定为音频乐谱;或者
接收所述第一用户在所述音频弹幕生成界面选择的音频文件,将所述音频文件解析为预设格式的音频乐谱。
例如预设格式为midi格式;具体的,一种情况是本地存在完整的midi乐谱,即完整的midi简谱文本,那么第一用户可以通过音频弹幕生成界面直接选择本地的midi简谱文本,服务端将选择的midi简谱文本确定为待生成音频弹幕的音频乐谱,另一种情况是用户选择本地音频文件,那么服务端会基于midi乐谱解析库将该音频文件解析为midi乐谱,将该midi乐谱确定为待生成音频弹幕的音频乐谱,实际应用中,所述音频弹幕处理方法还可以支持其他格式的音频乐谱,只要技术上可以实现将音频乐谱生成对应的音频弹幕,且可以在用户播放音频弹幕时对音频弹幕对应的音频乐谱解析为对应的音频,实现音频弹幕的播放即可。而本说明书实施例中,支持midi音频乐谱生成音频弹幕,那么在用户选择的简谱文本不是midi格式的情况下,则可以将该简谱文本转成midi格式的乐谱之后也可以实现音频弹幕的生成以及后续的音频弹幕播放。
本说明书实施例中,服务端可以直接接收第一用户在音频弹幕生成界面选择的预设格式的本地简谱文本确定的音频乐谱,又或者可以通过第一用户选择的本地音频文件生成音频乐谱,无需用户对待生成音频弹幕的音频乐谱进行编辑,简单快捷。
此外,所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面输入的预设格式的数字简谱,将所述数字简谱确定为音频乐谱。
具体的,还有一种情况是本地不存在用户想要生成音频弹幕的midi乐谱或者是用户想要生成自定义的midi乐谱,那么此时第一用户可以通过音频弹幕生成界面输入待生成音频弹幕的预设格式的数字简谱,实现待生成音频弹幕的音频乐谱的实现,例如第一用户通过音频弹幕生成界面输入代表音符的数字1、2、3、4、5、6、7等组成数字简谱,将该数字简谱作为待生成音频弹幕的音频乐谱。
本说明书实施例中,服务端可以接收第一用户在音频弹幕生成界面输入的预设格式的数字简谱确定的个性化的音频乐谱,后续可以基于用户自定义的音频乐谱实现后续音频弹幕的个性化生成,体现音频弹幕的个性化以及丰富性。
具体实施时,在服务端在接收第一用户在音频弹幕生成界面通过上述两种方式确定的音频乐谱后,可以基于该音频乐谱生成音频弹幕。
具体的,为了保证音频弹幕的安全性、合规性,创造和维护健康的弹幕发布环境,在基于音频乐谱生成音频弹幕后,通常会对音频弹幕进行合规性检测,具体实现方式如下所述:
所述基于所述音频生成音频弹幕之后,还包括:
获取所述当前视频预设的音频弹幕合规条件,将所述音频弹幕与所述音频弹幕合规条件进行匹配。
其中,音频弹幕合规条件为当前视频基于自身需求预设的,例如当前视频为比较煽情的视频,为了避免造成与视频原声反差较大的音乐,给用户造成不好的体验,则可以对音频弹幕的声调等进行限制,即当前视频的原声为比较轻缓的音乐的情况下,音频弹幕的声调不能超过预设声调阈值;又或者预设的音频弹幕合规条件可以为音频弹幕无杂音等,另一种情况下,为了保证音频弹幕与当前视频的匹配性,可以将预设的音频弹幕合规条件设置为音频弹幕的长度小于当前视频的长度,避免音频弹幕的长度大于当前视频的长度时,在当前视频播放完毕的情况下,音频弹幕还没有播放结束,给用户造成不好的体验;还可以对音频弹幕中的音频内容进行合规性检查,以确保音频弹幕中不会包含惊悚、暴力等内容。
具体的,在将音频弹幕发布到当前视频之前,会基于当前视频预设的音频弹幕合规条件对音频弹幕进行合规性校验,以保证发布到当前视频的音频弹幕满足当前视频的要求,保证音频弹幕的安全性、合规性,创造和维护健康的弹幕发布环境。
步骤206:保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
具体的,基于音频乐谱生成音频弹幕后,则将该音频弹幕对应的音频乐谱保存到音频库中,同时将该音频弹幕发送至播放当前视频的所有用户终端。
那么为了保证音频弹幕的合规性,实际应用中,则是在确定音频弹幕与当前视频预设的音频弹幕合规条件匹配的情况下,才会将其进行保存以及发送,具体实现方式如下所述:
所述保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端,包括:
在所述音频弹幕与所述音频弹幕合规条件匹配成功的情况下,保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕以预设格式发送至播放所述当前视频的用户终端。
其中,音频弹幕的预设格式可以根据实际需求进行设置,例如在音频弹幕的后面追加一个播放按钮的形式,实际应用中,用户可以通过点击播放按钮实现音频弹幕的音乐播放,又或者是可以将音频弹幕以数字乐谱、音乐名称或者用户自定义的形式展示在当前视频等,本说明书对此不做任何限定。
参见图3,图3示出了根据本说明书一个实施例提供的一种音频弹幕处理方法中音频弹幕的示意图。
图3中为当前视频的弹幕展示形式,其中,图3中包括文本弹幕以及音频弹幕。
具体的,“Text”、“This is a Text”、“result”为文本弹幕,“zbj娶媳妇”为音频弹幕,该音频弹幕的后部设置有一个播放按钮“midi”,后续用户可以通过点击“midi”播放按钮实现该音频弹幕的播放。
例如具体场景如下:例如用户1是A区的忠实粉丝,他很喜欢观看A区的恶搞视频,当用户1在A区看到一群人抬着东西歪歪扭扭走的视频时,觉得非常搞笑,想要在该视频上传一个音频弹幕。于是,他在该视频的播放界面点击上传midi弹幕,在弹出的音频弹幕生成界面选择了一个“zbj背媳妇”的音乐上传至服务端,服务端在接收到该音乐之后将该音乐解析为对应的音频乐谱,然后基于该音频乐谱生成对应的“zbj背媳妇”的音频弹幕,并展示在播放该视频的所有用户终端。
此外,还有一种场景是,用户1是一个手工视频上传者,非常喜欢制作八音盒,该用户1就发了一个八音盒的视频,视频里面有非常好听的八音盒的声音,当该视频发布后,很多用户在该视频的播放界面询问八音盒的音乐在哪里可以下载,因此该用户1就上传了一个midi版本的音乐作为midi弹幕发布到该视频的播放界面,使得观看该视频的用户都可以通过点击该midi音频弹幕进行收听八音盒的音乐,并且可以对该midi音频弹幕进行收藏以及下载,即服务端在接收到用户在当前视频的播放界面针对该音频弹幕的收藏或者下载指令后,对该音频弹幕对应的音频进行收藏或者下载,使得用户可以回放喜欢的音乐,通过此种方式可以给喜欢该视频同时喜欢该音乐的用户提供一个更好的交流方式,通过音频弹幕的形式实现用户之间的互动,增加弹幕的丰富性。
本说明书实施例中,将音频弹幕以预设格式发送并展示在当前视频的播放界面上,与其他的文本弹幕以及语音弹幕的展示方式不同,极大的提高了弹幕展示的丰富性,且可以通过预设格式对音频弹幕的展示名称进行用户自定义,也极大的提高了音频弹幕的趣味性和用户交互的积极性。
本说明书另一实施例中,在基于上述方法生成音频弹幕且将该音频弹幕发送至播放当前视频的所有用户终端之后,就可以接收观看当前视频的第二用户针对该音频弹幕的播放、点评等操作,具体实现方式如下所述:
所述音频弹幕处理方法,还包括:
接收第二用户针对所述当前视频的音频弹幕的播放指令,其中,所述播放指令中携带有所述音频弹幕的标识;
基于所述音频弹幕的标识确定与所述音频弹幕对应的音频乐谱;
将所述音频乐谱解析为对应的音频,且在播放所述当前视频的用户终端为所述第二用户播放所述音频。
其中,第二用户为通过用户终端观看当前视频的用户,可以包括第一用户。
具体的,接收第二用户针对所述当前视频的音频弹幕的播放指令,即为接收第二用户在播放当前视频的用户终端通过点击当前视频界面中的音频弹幕生成的播放指令,其中,该播放指令中携带有该音频弹幕的标识。
沿用上例,例如具体应用场景为:用户2在用户终端观看当前视频时,该当前视频的播放界面弹出“zbj娶媳妇”的音频弹幕,然后用户2点击该“zbj娶媳妇”的音频弹幕实现该音频弹幕的音乐播放。
在接收到音频弹幕的播放指令后,基于该音频弹幕的标识查找到该音频弹幕对应的音频乐谱,然后将该音频乐谱解析为对应的音频,且在播放该当前视频的用户终端为第二用户播放该音频弹幕的音频。
本说明书实施例中,用户在观看当前视频时可以在该当前视频的播放界面将自己想要分享的音乐以音频弹幕的形式,分享给观看该当前视频的其他用户,其他用户可以通过点击该音频弹幕在该当前视频的播放界面,实现该音频弹幕的播放,通过音频弹幕的方式实现用户之间的音乐共享,可以给观看当前视频的用户提供一个更好、更有趣的音乐交流方式,提升用户体验。
具体实施时,所述将所述音频乐谱解析为对应的音频,包括:
基于乐谱解析库将所述音频乐谱解析为所述音频弹幕对应的音频。
其中,乐谱解析库实现将音频乐谱解析为该音频乐谱对应的音频弹幕的音频文件。
具体实施时,首先基于该音频弹幕的标识从服务端获取该音频弹幕对应的音频乐谱,然后基于乐谱解析库对音频乐谱进行解析,将该音频乐谱解析为音频弹幕对应的音频。
仍以midi格式的音频乐谱为例,在音频乐谱为midi格式的情况下,该乐谱解析库则为可以解析midi格式的音频乐谱的midi乐谱解析库,该midi乐谱解析库可以实现将midi音频乐谱解析为对应的音频,也可以将音频解析为对应的midi音频乐谱。
本说明书实施例中,通过乐谱解析库的方式可以快速、准确的获得音频弹幕对应的音乐,以实现对音频弹幕的播放,节省系统处理时间,提高音频弹幕的播放效率。
本说明书另一实施例中,所述在播放所述当前视频的用户终端为所述用户播放所述音频,包括:
在检测到播放所述当前视频的用户终端,关闭所述当前视频的视频声音的情况下,为所述用户播放所述音频。
实际应用中,在当前视频的播放界面进行音频弹幕的播放时,会造成当前视频以及音频弹幕的音乐声音的混杂播放,会给用户造成不好的体验,那么此种情况下,当用户点击播放当前视频界面中的音频弹幕时,服务端可以关闭当前视频的视频声音,使得用户可以基于音频弹幕的声音观看当前视频。很多情况下,音频弹幕中的音乐为用户觉得与该当前视频比较匹配的音乐,因此在用户播放音频弹幕的时候关闭当前视频原声,可以使得用户更好的欣赏音频弹幕的音乐,配合搞笑的或者是舒缓的音频弹幕音乐观看当前视频,提升当前视频观看的趣味性和丰富性。
可选的,所述在播放所述当前视频的用户终端为所述用户播放所述音频之后,还包括:
在所述音频播放未结束,接收到所述用户针对所述当前视频的另一音频弹幕的播放指令的情况下,停止所述音频播放,且在播放所述当前视频的用户终端为所述用户播放与所述另一音频弹幕对应的音频。
具体的,同一个当前视频播放界面中的多个音频弹幕之间的播放时互斥的,在一个音频弹幕播放的时候,其他的音频弹幕不能被同时播放,例如用户3在视频a的播放界面观看视频,此时该视频a的播放界面有多个音频弹幕播放,那么用户3在同一时间只能点击这多个音频弹幕中的某一个进行音乐播放。
本说明书实施例中,通过音频弹幕互斥的方式,使得同一个用户在观看当前视频时同一时间只能播放一个音频弹幕,避免多个音频弹幕的音乐同时播放造成声音混杂,影响当前视频的观看。
此外,在将音频弹幕发送至播放当前视频的用户终端之后,还可以根据用户对该音频弹幕的点评信息,实现对音频弹幕的删除或者屏蔽,又或者是对发布该音频弹幕的用户进行奖励等,具体实现方式如下所述:
所述将所述音频弹幕发送至播放所述当前视频的用户终端之后,还包括:
接收第二用户针对所述音频弹幕的点评信息;
基于所述点评信息对所述音频弹幕进行删除或屏蔽。
具体实施时,用户可以对当前视频界面中的音频弹幕进行评论,若某条音频弹幕的好评较多的情况下,可以对发布该音频弹幕的用户进行奖励,例如积分奖励、等级奖励或者是勋章奖励等;若某条音频弹幕的差评较多,那么可以对该音频弹幕进行删除或者屏蔽等,以避免该音频弹幕影响到观看当前视频的用户数。
参见图4,图4示出了本说明书一个实施例提供的一种音频弹幕处理方法的处理过程流程图,具体包括以下步骤。
具体的,所述音频弹幕处理方法中,以midi格式的乐谱为例进行介绍。
步骤402:点击发送弹幕。
具体的,点击发送弹幕可以理解为,服务端接收第一用户在用户终端点击“发送弹幕”控件生成的音频弹幕生成指令,基于该音频弹幕生成指令确定音频弹幕生成界面,且将该音频弹幕生成界面返回至第一用户。
步骤404:输入midi乐谱。
具体的,输入midi乐谱可以理解为,服务端接收第一用户基于音频弹幕生成界面在本地选择的midi乐谱或者是第一用户通过输入数字简谱生成的midi乐谱。
步骤406:将乐谱作为弹幕发送。
具体的,将乐谱作为弹幕发送可以理解为,服务端接收用户在输入midi乐谱之后,点击音频弹幕生成界面中的确定控件实现的midi乐谱,然后基于该midi乐谱生成乐谱弹幕。
步骤408:弹幕上出现乐谱弹幕。
具体的,弹幕上出现乐谱弹幕,可以理解为服务端将生成的乐谱弹幕发送至播放该视频的所有客户端,使得该视频的播放界面出现该乐谱弹幕。
步骤410:点击乐谱弹幕。
具体的,点击乐谱弹幕,可以理解为服务端接收第二用户在该视频播放界面点击该乐谱弹幕的播放指令。
步骤412:乐谱弹幕被解析为音乐播放。
具体的,乐谱弹幕被解析为音乐播放,可以理解为服务端基于乐谱解析库对该乐谱弹幕进行解析,其具体解析方式如下所述。
参见图5,图5示出了本说明书一个实施例提供的一种音频弹幕处理方法中对乐谱弹幕进行解析的流程图,具体包括以下步骤。
步骤502:点击屏幕上的midi弹幕播放按钮。
具体的,点击屏幕上的midi弹幕播放按钮,可以理解为服务端接收用户点击视频播放用户终端屏幕上的midi弹幕播放按钮形成的播放指令,该播放指令中携带有该midi弹幕的id(Identity document,身份标识号)。
步骤504:根据midi弹幕的id去服务端获取该midi弹幕完成内容。
具体的,服务端根据该midi弹幕的id去其自身获取该midi弹幕对应的完整的乐谱。
步骤506:本地将该midi弹幕完整内容用midi解析库转换为.mid音频文件。
具体的,基于该midi弹幕对应的完整的乐谱在midi解析库中确定对应的.mid音频文件。
步骤508:播放器播放.mid音频文件。
具体的,播放器播放.mid音频文件,可以理解为在视频播放界面使用播放器播放.mid音频文件,实现该midi弹幕的播放。
本说明书实施例中,用户在视频播放界面点击播放某个音频弹幕的情况下,可以通过解析库实现对该音频弹幕的快速准确解析,使得解析后的该视频弹幕对应的音频配合视频一起输出,提升用户观看体验。
步骤414:选择收藏或保持乐谱弹幕的播放。
具体的,选择收藏或保持乐谱弹幕的播放,可以理解为服务端在接收到第二用户基于该乐谱弹幕的收藏指令的情况下,对该乐谱弹幕对应的音乐进行收藏,或者是在该视频的播放界面一直保持该乐谱弹幕的播放。
步骤416:乐谱被保存。
具体的,乐谱被保存,可以理解为服务端在接收到第二用户基于该乐谱弹幕的保存指令的情况下,将该乐谱弹幕对应的音乐进行保存。
本说明书实施例中,在某些场景(例如用户上传的视频中的音乐被其他用户索取)下可以用音频弹幕补充视频能力,允许用户输入一段midi乐谱,将该midi乐谱以文本或者乐谱的形式展示在视频弹幕上,其他用户在观看该视频时可以选择播放该音频弹幕,通过解析库实现对该音频弹幕的快速准确解析,使得解析后的该视频弹幕对应的音频配合视频一起输出,提升用户观看体验。
与上述方法实施例相对应,本说明书还提供了音频弹幕处理装置实施例,图6示出了本说明书一个实施例提供的一种音频弹幕处理装置的结构示意图。如图6所示,该装置包括:
第一指令接收模块602,被配置为接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;
音频弹幕生成模块604,被配置为接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;
音频弹幕发送模块606,被配置为保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
可选的,所述音频弹幕生成模块604,进一步被配置为:
接收所述第一用户在所述音频弹幕生成界面选择的预设格式的简谱文本,将所述简谱文本确定为音频乐谱;或者
接收所述第一用户在所述音频弹幕生成界面选择的音频文件,将所述音频文件解析为预设格式的音频乐谱。
可选的,所述音频弹幕生成模块604,进一步被配置为:
接收所述第一用户在所述音频弹幕生成界面输入的预设格式的数字简谱,将所述数字简谱确定为音频乐谱。
可选的,所述装置,还包括:
匹配模块,被配置为获取所述当前视频预设的音频弹幕合规条件,将所述音频弹幕与所述音频弹幕合规条件进行匹配。
可选的,所述音频弹幕发送模块606,进一步被配置为:
在所述音频弹幕与所述音频弹幕合规条件匹配成功的情况下,保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕以预设格式发送至播放所述当前视频的用户终端。
可选的,所述装置,还包括:
第二指令接收模块,被配置为接收第二用户针对所述当前视频的音频弹幕的播放指令,其中,所述播放指令中携带有所述音频弹幕的标识;
音频乐谱确定模块,被配置为基于所述音频弹幕的标识确定与所述音频弹幕对应的音频乐谱;
弹幕播放模块,被配置为将所述音频乐谱解析为对应的音频,且在播放所述当前视频的用户终端为所述第二用户播放所述音频。
可选的,所述弹幕播放模块,进一步被配置为:
基于乐谱解析库将所述音频乐谱解析为所述音频弹幕对应的音频。
可选的,所述弹幕播放模块,进一步被配置为:
在检测到播放所述当前视频的用户终端,关闭所述当前视频的视频声音的情况下,为所述用户播放所述音频。
可选的,所述装置,还包括:
音频播放模块,被配置为在所述音频播放未结束,接收到所述用户针对所述当前视频的另一音频弹幕的播放指令的情况下,停止所述音频播放,且在播放所述当前视频的用户终端为所述用户播放与所述另一音频弹幕对应的音频。
可选的,所述装置,还包括:
点评信息接收模块,被配置为接收第二用户针对所述音频弹幕的点评信息;
弹幕处理模块,被配置为基于所述点评信息对所述音频弹幕进行删除或屏蔽。
本说明书实施例中,所述音频弹幕处理装置在用户观看当前视频时,可以在当前视频通过弹幕的形式生成,包含与当前视频匹配的音乐的音频弹幕,使得后续其他用户在观看该当前视频时可以播放该音频弹幕,通过音频弹幕的形式实现用户之间的音乐共享,提升弹幕趣味性,且通过音频弹幕的形式增加了弹幕的丰富性。
上述为本实施例的一种音频弹幕处理装置的示意性方案。需要说明的是,该音频弹幕处理装置的技术方案与上述的音频弹幕处理方法的技术方案属于同一构思,音频弹幕处理装置的技术方案未详细描述的细节内容,均可以参见上述音频弹幕处理方法的技术方案的描述。
图7示出了根据本说明书一个实施例提供的一种计算设备700的结构框图。该计算设备700的部件包括但不限于存储器710和处理器720。处理器720与存储器710通过总线730相连接,数据库750用于保存数据。
计算设备700还包括接入设备740,接入设备740使得计算设备700能够经由一个或多个网络760通信。这些网络的示例包括公用交换电话网(PSTN)、局域网(LAN)、广域网(WAN)、个域网(PAN)或诸如因特网的通信网络的组合。接入设备740可以包括有线或无线的任何类型的网络接口(例如,网络接口卡(NIC))中的一个或多个,诸如IEEE802.11无线局域网(WLAN)无线接口、全球微波互联接入(Wi-MAX)接口、以太网接口、通用串行总线(USB)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC)接口,等等。
在本说明书的一个实施例中,计算设备700的上述部件以及图7中未示出的其他部件也可以彼此相连接,例如通过总线。应当理解,图7所示的计算设备结构框图仅仅是出于示例的目的,而不是对本说明书范围的限制。本领域技术人员可以根据需要,增添或替换其他部件。
计算设备700可以是任何类型的静止或移动计算设备,包括移动计算机或移动计算设备(例如,平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如,智能手机)、可佩戴的计算设备(例如,智能手表、智能眼镜等)或其他类型的移动设备,或者诸如台式计算机或PC的静止计算设备。计算设备700还可以是移动式或静止式的服务器。
其中,处理器720用于执行如下计算机可执行指令,其中,所述处理器执行所述计算机可执行指令时实现所述音频弹幕处理方法的步骤。
上述为本实施例的一种计算设备的示意性方案。需要说明的是,该计算设备的技术方案与上述的音频弹幕处理方法的技术方案属于同一构思,计算设备的技术方案未详细描述的细节内容,均可以参见上述音频弹幕处理方法的技术方案的描述。
本说明书一实施例还提供一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时实现所述音频弹幕处理方法的步骤。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是,该存储介质的技术方案与上述的音频弹幕处理方法的技术方案属于同一构思,存储介质的技术方案未详细描述的细节内容,均可以参见上述音频弹幕处理方法的技术方案的描述。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
所述计算机指令包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本说明书实施例并不受所描述的动作顺序的限制,因为依据本说明书实施例,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本说明书实施例所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上公开的本说明书优选实施例只是用于帮助阐述本说明书。可选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书实施例的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本说明书实施例的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本说明书。本说明书仅受权利要求书及其全部范围和等效物的限制。

Claims (13)

1.一种音频弹幕处理方法,其特征在于,包括:
接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;
接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;
保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
2.根据权利要求1所述的音频弹幕处理方法,其特征在于,所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面选择的预设格式的简谱文本,将所述简谱文本确定为音频乐谱;或者
接收所述第一用户在所述音频弹幕生成界面选择的音频文件,将所述音频文件解析为预设格式的音频乐谱。
3.根据权利要求1所述的音频弹幕处理方法,其特征在于,所述接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,包括:
接收所述第一用户在所述音频弹幕生成界面输入的预设格式的数字简谱,将所述数字简谱确定为音频乐谱。
4.根据权利要求1所述的音频弹幕处理方法,其特征在于,所述基于所述音频生成音频弹幕之后,还包括:
获取所述当前视频预设的音频弹幕合规条件,将所述音频弹幕与所述音频弹幕合规条件进行匹配。
5.根据权利要求4所述的音频弹幕处理方法,其特征在于,所述保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端,包括:
在所述音频弹幕与所述音频弹幕合规条件匹配成功的情况下,保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕以预设格式发送至播放所述当前视频的用户终端。
6.根据权利要求1-5任意一项所述的音频弹幕处理方法,其特征在于,所述方法,还包括:
接收第二用户针对所述当前视频的音频弹幕的播放指令,其中,所述播放指令中携带有所述音频弹幕的标识;
基于所述音频弹幕的标识确定与所述音频弹幕对应的音频乐谱;
将所述音频乐谱解析为对应的音频,且在播放所述当前视频的用户终端为所述第二用户播放所述音频。
7.根据权利要求6所述的音频弹幕处理方法,其特征在于,所述将所述音频乐谱解析为对应的音频,包括:
基于乐谱解析库将所述音频乐谱解析为所述音频弹幕对应的音频。
8.根据权利要求6所述的音频弹幕处理方法,其特征在于,所述在播放所述当前视频的用户终端为所述用户播放所述音频,包括:
在检测到播放所述当前视频的用户终端,关闭所述当前视频的视频声音的情况下,为所述用户播放所述音频。
9.根据权利要求6所述的音频弹幕处理方法,其特征在于,所述在播放所述当前视频的用户终端为所述用户播放所述音频之后,还包括:
在所述音频播放未结束,接收到所述用户针对所述当前视频的另一音频弹幕的播放指令的情况下,停止所述音频播放,且在播放所述当前视频的用户终端为所述用户播放与所述另一音频弹幕对应的音频。
10.根据权利要求1-5任意一项所述的音频弹幕处理方法,其特征在于,所述将所述音频弹幕发送至播放所述当前视频的用户终端之后,还包括:
接收第二用户针对所述音频弹幕的点评信息;
基于所述点评信息对所述音频弹幕进行删除或屏蔽。
11.一种音频弹幕处理装置,其特征在于,包括:
第一指令接收模块,被配置为接收第一用户针对当前视频发送的音频弹幕生成指令,并将基于所述生成指令确定的音频弹幕生成界面返回至所述第一用户;
音频弹幕生成模块,被配置为接收所述第一用户在所述音频弹幕生成界面确定的音频乐谱,并基于所述音频乐谱生成音频弹幕;
音频弹幕发送模块,被配置为保存所述音频弹幕对应的所述音频乐谱,且将所述音频弹幕发送至播放所述当前视频的用户终端。
12.一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,该指令被处理器执行时实现权利要求1-10任意一项所述音频弹幕处理方法的步骤。
13.一种计算机可读存储介质,其存储有计算机指令,该指令被处理器执行时实现权利要求1-10任意一项所述音频弹幕处理方法的步骤。
CN202011126393.2A 2020-10-20 2020-10-20 音频弹幕处理方法及装置 Pending CN114390361A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011126393.2A CN114390361A (zh) 2020-10-20 2020-10-20 音频弹幕处理方法及装置
US17/505,506 US20220124383A1 (en) 2020-10-20 2021-10-19 Audio bullet screen processing method and device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011126393.2A CN114390361A (zh) 2020-10-20 2020-10-20 音频弹幕处理方法及装置

Publications (1)

Publication Number Publication Date
CN114390361A true CN114390361A (zh) 2022-04-22

Family

ID=81185875

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011126393.2A Pending CN114390361A (zh) 2020-10-20 2020-10-20 音频弹幕处理方法及装置

Country Status (2)

Country Link
US (1) US20220124383A1 (zh)
CN (1) CN114390361A (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102930861A (zh) * 2012-11-03 2013-02-13 徐国元 数字音乐系统及装置
CN109951743A (zh) * 2019-03-29 2019-06-28 上海哔哩哔哩科技有限公司 弹幕信息处理方法、系统及计算机设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6528715B1 (en) * 2001-10-31 2003-03-04 Hewlett-Packard Company Music search by interactive graphical specification with audio feedback
WO2019196052A1 (en) * 2018-04-12 2019-10-17 Sunland Information Technology Co., Ltd. System and method for generating musical score
CN111787346B (zh) * 2020-07-09 2024-02-09 腾讯科技(深圳)有限公司 基于直播的乐谱展示方法、装置、设备及存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102930861A (zh) * 2012-11-03 2013-02-13 徐国元 数字音乐系统及装置
CN109951743A (zh) * 2019-03-29 2019-06-28 上海哔哩哔哩科技有限公司 弹幕信息处理方法、系统及计算机设备

Also Published As

Publication number Publication date
US20220124383A1 (en) 2022-04-21

Similar Documents

Publication Publication Date Title
WO2022121601A1 (zh) 一种直播互动方法、装置、设备及介质
CN110085244B (zh) 直播互动方法、装置、电子设备及可读存储介质
KR101326897B1 (ko) 텔레비전 시퀀스를 제공하는 장치 및 방법
US11900967B2 (en) Template-based excerpting and rendering of multimedia performance
WO2010109057A1 (en) Method and apparatus for providing comments during content rendering
CN109493888B (zh) 漫画配音方法及装置、计算机可读存储介质、电子设备
US20140164371A1 (en) Extraction of media portions in association with correlated input
CN113316015B (zh) 弹幕处理方法、装置及系统
CN112423081B (zh) 一种视频数据处理方法、装置、设备及可读存储介质
CN113709527B (zh) 多主播场景中关注主播的方法及装置
CN112738557A (zh) 视频处理方法及装置
CN113573128B (zh) 一种音频处理方法、装置、终端以及存储介质
KR101874441B1 (ko) 음악제공방법 및 음악제공시스템
CN113282770A (zh) 一种多媒体推荐系统及方法
CN114390361A (zh) 音频弹幕处理方法及装置
CN114125543B (zh) 弹幕处理方法、计算设备及弹幕处理系统
US9223458B1 (en) Techniques for transitioning between playback of media files
CN112562733A (zh) 媒体数据处理方法及装置、存储介质、计算机设备
KR20220135203A (ko) 스트리밍 방송에서의 자동 추천 음악 지원 시스템
CN116800988A (zh) 视频生成方法、装置、设备、存储介质和程序产品
CN117376596B (zh) 基于智能数字人模型的直播方法、装置及存储介质
CN115022729A (zh) 弹幕的播放方法及装置
CN113542803A (zh) 直播内容处理方法及装置
CN114564952A (zh) 一种文本标题生成方法、装置、设备及介质
CN112509538A (zh) 音频处理方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination