CN107888937A - 弹幕处理方法、服务端、客户端和计算机可读存储介质 - Google Patents

弹幕处理方法、服务端、客户端和计算机可读存储介质 Download PDF

Info

Publication number
CN107888937A
CN107888937A CN201711092279.0A CN201711092279A CN107888937A CN 107888937 A CN107888937 A CN 107888937A CN 201711092279 A CN201711092279 A CN 201711092279A CN 107888937 A CN107888937 A CN 107888937A
Authority
CN
China
Prior art keywords
barrage
audio
timestamp
voice data
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711092279.0A
Other languages
English (en)
Inventor
吴进锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201711092279.0A priority Critical patent/CN107888937A/zh
Publication of CN107888937A publication Critical patent/CN107888937A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
    • H04N21/26241—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints involving the time of distribution, e.g. the best time of the day for inserting an advertisement or airing a children program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明提供一种弹幕处理方法、服务端、客户端和计算机可读存储介质，其中，该方法包括：接收第一客户端发送的音频数据；根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，音频弹幕包括音频数据以及时间戳；将音频弹幕发送给第一客户端和第二客户端。本发明能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性和现场感，提升了用户的使用体验。

Description

弹幕处理方法、服务端、客户端和计算机可读存储介质
技术领域
本发明涉及通信技术领域，尤其涉及一种弹幕处理方法、服务端、客户端和计算机可读存储介质。
背景技术
目前，在视频播放领域，弹幕功能非常流行。在用户观看视频时弹幕技术能够为用户提供了一种互动的渠道，增加了视频播放的社交性，也增强了用户观看视频的意愿和粘性，所以，各大主流视频网站或视频客户端都支持弹幕功能。但是，现有技术中，为用户提供的弹幕类型一般只支持文字弹幕，类型比较单一，无法实现多样化的交互体验。
发明内容
本发明提供一种弹幕处理方法、服务端、客户端和计算机可读存储介质，以解决现有的视频播放的弹幕交互只支持文字弹幕，类型比较单一的问题。
为了解决上述技术问题，本发明是这样实现的：
第一方面，本发明实施例提供一种弹幕处理方法，该方法包括：
接收第一客户端发送的音频数据；
根据音频数据的接收时间，为音频数据设置对应的时间戳，音频弹幕包括音频数据以及时间戳；
将音频弹幕发送给第一客户端和第二客户端。
第二方面，本发明实施例提供一种弹幕处理方法，该方法包括：
接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与所述时间戳对应的音频数据；
在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据。
第三方面，本发明实施例提供一种服务器，该服务器包括：
接收模块，用于接收第一客户端发送的音频数据；
处理模块，用于根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，所述音频弹幕包括所述音频数据以及所述时间戳；
发送模块，用于将音频弹幕发送给第一客户端和第二客户端。
第四方面，本发明实施例提供一种客户端，该客户端包括：
第一接收模块，用于接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据；
处理模块，用于在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据。
第五方面，本发明实施例提供一种服务器，包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，计算机程序被处理器执行时实现第一方面的弹幕处理方法的步骤。
第六方面，本发明实施例提供一种移动终端，包括处理器，存储器，存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述第二方面的弹幕处理方法的步骤。
第七方面，本发明实施例提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述第一方面的弹幕处理方法的步骤。
第八方面，本发明实施例提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述第二方面的弹幕处理方法的步骤。
本发明实施例中，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性和现场感，提升了用户的使用体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1表示本发明实施例提供的应用于服务器的弹幕处理方法的流程示意图；
图2表示本发明实施例提供的应用于客户端的弹幕处理方法的流程示意图；
图3表示本发明实施例提供的服务器的结构示意图；
图4表示本发明实施例提供的客户端的结构示意图。
图5表示本发明实施例提供的移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参见图1，其示出的是本发明实施例提供的应用于服务器的弹幕处理方法的流程示意图。本发明实施例提供一种弹幕处理方法，应用于服务器，该方法可以包括以下步骤：
步骤101，接收第一客户端发送的音频数据。
本步骤中，服务器向第一客户端和第二客户端发送多媒体文件，在第一客户端播放多媒体文件的过程中，服务器接收用户通过第一客户端发送的关于多媒体文件的语音评论的音频数据。其中，多媒体文件可以包括音频文件和视频文件。
步骤102，根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，音频弹幕包括音频数据以及时间戳。
本步骤中，在接收到第一客户端发送的音频数据时，记录该音频数据的接收时间，并基于该接收时间为音频数据设置对应的时间戳，以生成音频数据对应的音频弹幕。其中，在一优选实施例中，时间戳可以对应于多媒体文件中的播放时间点。
步骤103，将音频弹幕发送给第一客户端和第二客户端。
本步骤中，通过将音频弹幕发送至第一客户端和第二客户端时，能够在多媒体文件播放过程中，实现音频弹幕的交互，能够增强用户在多媒体文件播放时的交互性和现场感。
其中，考虑到多媒体文件播放的可重复播放的特性，本发明实施例中，步骤102，根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕的步骤之后，该方法还可以包括：将音频弹幕存储至弹幕文件中。本实施例中，通过将音频弹幕存储至与所播放的多媒体文件相对应的弹幕文件中，以便于后续重复播放该多媒体文件时，服务端调用该弹幕文件发送至客户端。
本发明实施例提供的应用于服务器的弹幕处理方法，通过接收第一客户端发送的音频数据；根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，音频弹幕包括音频数据以及时间戳；将音频弹幕发送给第一客户端和第二客户端，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性和现场感，提升了用户的使用体验。
请参见图2，其示出的是本发明实施例提供的应用于客户端的弹幕处理方法的流程示意图。本发明实施例提供一种弹幕处理方法，应用于客户端，该方法可以包括以下步骤：
步骤201，接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据。
本步骤中，在接收服务端发送的多媒体文件的同时，接收与该多媒体文件对应的音频弹幕，其中，多媒体文件可以包括音频文件和视频文件。
步骤202，在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据。
本步骤中，在多媒体文件播放过程中，基于时间戳对服务器发送的音频弹幕进行播放，能够实现音频弹幕的交互，增强用户在多媒体文件播放时的交互性和现场感。其中，在本实施例中，可以是根据音频弹幕包含的时间戳的先后顺序，播放与时间戳对应的音频数据。
本发明实施例中，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了用户在多媒体文件播放时的交互性和现场感，提升了用户的使用体验。
其中，接收到音频弹幕后，在多媒体文件播放过程中可以采用以下几种方式播放音频数据：可以根据音频弹幕包含的时间戳，直接播放时间戳对应的音频数据；或者，也可以根据音频弹幕包含的时间戳，显示音频弹幕对应的弹幕控件并在满足触发条件时播放音频弹幕对应的音频数据。这样，用户可以根据实际使用需要选择针对音频弹幕的播放方式。当然，本实施例中，还可以针对不同的音频弹幕采用不同的播放方式。
下面针对触发播放音频弹幕的方式进行具体描述。具体的，步骤202，在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据的步骤，可以包括：在多媒体文件播放过程中，根据音频弹幕包含的时间戳，显示弹幕控件；当检测到对弹幕控件的触控操作，或者弹幕控件到达预设的播放时间线时，播放与时间戳对应的音频数据。
本实施例中，根据音频弹幕的时间戳，在屏幕上显示音频弹幕对应的弹幕控件，能够方便用户获知接收到音频弹幕；然后在检测到对弹幕控件的触控操作或者弹幕控件到达预设的播放时间线时，即检测到满足触发条件，则播放与时间戳对应的音频数据。其中，基于用户触控操作触发音频数据播放的方式，能够增加用户操作互动，并且用户可以根据自身需求判断是否触发播放音频数据；基于播放时间线触发音频数据播放的方式，能够提升用户的现场感体验，并且能够减少用户操作。本实施例中，用户能够根据自身需求选择对应的触发音频数据播放的方式，提升了用户使用体验。
另外，本实施例中，触控操作可以包括：点击操作、按压操作、拖动操作或者捏合操作等。
其中，本实施例中，为增加音频弹幕的显示趣味性，在多媒体文件播放过程中，根据音频弹幕包含的时间戳，显示弹幕控件的步骤，可以包括：根据音频弹幕包含的时间戳，按照预定的移动方向，在屏幕上显示并移动音频弹幕对应的弹幕控件。其中，本实施例中，屏幕可以指预设设置的多媒体文件的播放区域。该弹幕控件对应的图层覆盖在多媒体文件的播放图层上。
其中，在本发明优选的实施例中，该音频弹幕对应的弹幕控件可以为预定形状的图标；该预定形状可以为如圆形、椭圆形、矩形、圆角矩形或柱形等常规图形，或者也可以为多种常规图形组成的不规则图形。这样，能够增加弹幕控件的显示趣味性。其中，该预设形状可以由用户选择设置，也可以通过客户端默认设置。
在发明实施例中，若在屏幕上显示音频弹幕对应的弹幕控件，为增加弹幕控件的显示趣味性，可以相应设置弹幕控件的显示属性，具体的，在多媒体文件播放过程中，根据音频弹幕包含的时间戳，显示弹幕控件的步骤之前，该方法还可以包括：获取与时间戳对应的音频数据的音频时长；根据预先设置的音频时长与弹幕控件的显示属性之间的对应关系，确定音频弹幕对应的弹幕控件的显示属性。
本实施例中，结合音频数据的音频时长，设置弹幕控件的显示属性，其中，对于音频时长与弹幕控件的显示属性之间的对应关系，可以由用户选择设置，也可以通过客户端默认设置。其中，本实施例中，显示属性可以包括显示颜色和显示长度中的一种或多种。
另外，本发明优选的实施例中，考虑到可能存在至少两个音频弹幕对应的音频数据在播放时时间轴上发生重叠的情况，步骤202，在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据的步骤，可以包括：若检测到至少两个与时间戳对应的音频数据的播放时间存在重叠，将至少两个与时间戳对应的音频数据进行混音处理后播放。
本发明实施例中，若检测到存在至少两个与时间戳对应的音频数据的播放时间重叠，将至少两个与时间戳对应的音频数据进行混音处理，以使至少两个与时间戳对应的音频数据的播放不会相互影响。优选的，可以对至少两个与时间戳对应的音频数据进行立体声音混音处理，提升现场感体验。
其中，本发明实施例中，播放与时间戳对应的音频数据时，对多媒体文件的音频和与时间戳对应的音频数据进行混音处理，从而能够保证与时间戳对应的音频数据播放时，不会影响多媒体文件的播放，提升用户使用体验。
另外，在本发明实施例中，可以对音频弹幕的播放音量进行单独控制，以使用户能够根据需要调节音频弹幕的播放音量，以提升用户使用体验。具体的，该方法还可以包括：接收一弹幕音量调节指令；根据弹幕音量调节指令，调节与时间戳对应的音频数据的播放音量。
另外，在本发明实施例中，考虑到多媒体文件的播放体验，该方法还可以包括：获取屏幕上的弹幕过滤区域；在弹幕过滤区域内取消显示弹幕控件。本实施例中，可以预先设置的弹幕过滤区域，并在弹幕控件到达该弹幕过滤区域则取消显示，以满足多媒体文件的正常播放，提升用户的观看体验。
本发明实施例提供的应用于客户端的弹幕处理方法，通过接收服务端发送与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据；在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性、现场感和趣味性，提升了用户的使用体验。
请参见图3，其示出的是本发明实施例提供的服务器的结构示意图。本发明实施例提供一种服务器300，该服务器300可以包括：接收模块310、处理模块320以及发送模块330。
接收模块310，用于接收第一客户端发送的音频数据；
处理模块320，用于根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，音频弹幕包括音频数据以及时间戳；
发送模块330，用于将音频弹幕发送给第一客户端和第二客户端。
在一实施例中，该服务器300还可以包括：存储模块。
存储模块，用于将音频弹幕存储至弹幕文件中。
本发明实施例提供的服务器能够实现图1的方法实施例中服务器实现的各个过程，为避免重复，这里不再赘述。
本发明实施例提供的服务器，通过接收第一客户端发送的音频数据；根据音频数据的接收时间，为音频数据设置对应的时间戳，生成音频数据对应的音频弹幕，频弹幕包括音频数据以及时间戳；将音频弹幕发送给第一客户端和第二客户端，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性和现场感，提升了用户的使用体验。
其中，本发明实施例还提供一种服务器，包括处理器，存储器，存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现上述应用于服务器的弹幕处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
另外，本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现上述应用于服务器的弹幕处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
请参见图4，其示出的是本发明实施例提供的客户端的结构示意图。本发明实施例提供一种客户端400，该客户端400可以包括：第一接收模块410和处理模块420。
第一接收模块410，用于接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据；
处理模块420，用于在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据。
本发明一实施例中，处理模块420可以包括：第一显示单元和第一播放单元。
第一显示单元，用于在多媒体文件播放过程中，根据音频弹幕包含的时间戳，显示弹幕控件；
第一播放单元，用于当检测到对弹幕控件的触控操作，或者弹幕控件到达预设的播放时间线时，播放与时间戳对应的音频数据。
本发明一实施例中，第一显示单元可以包括：显示子单元。
显示子单元，用于根据音频弹幕包含的时间戳，按照预定的移动方向，在屏幕上显示并移动音频弹幕对应的弹幕控件。
本发明实施例中，客户端400还可以包括：第一获取模块以及确定模块。
第一获取模块，用于获取与时间戳对应的音频数据的音频时长；
确定模块，用于根据预先设置的音频时长与弹幕控件的显示属性之间的对应关系，确定音频弹幕对应的弹幕控件的显示属性。
其中，显示属性可以包括显示颜色和显示长度中的一种或多种。
本发明一实施例中，处理模块420可以包括：第二播放单元。
第二播放单元，用于若检测到至少两个与时间戳对应的音频数据的播放时间存在重叠，将至少两个与时间戳对应的音频数据进行混音处理后播放。
本发明实施例中，客户端400还可以包括：第二接收模块和调节模块。
第二接收模块，用于接收一弹幕音量调节指令；
调节模块，用于根据弹幕音量调节指令，调节与时间戳对应的音频数据的播放音量。
本发明实施例中，客户端400还可以包括：第二获取模块以及取消模块。
第二获取模块，用于获取屏幕上的弹幕过滤区域；
取消模块，用于在弹幕过滤区域内取消显示弹幕控件。
本发明实施例提供的客户端能够实现图2的方法实施例中客户端实现的各个过程，为避免重复，这里不再赘述。
本发明实施例提供的客户端，通过接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据；在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了多媒体文件播放时的交互性、现场感和趣味性，提升了用户的使用体验。
图5为实现本发明各个实施例的一种移动终端的硬件结构示意图。
该移动终端500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解，图5中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中，处理器510，用于接收服务端发送的与多媒体文件对应的音频弹幕，音频弹幕包括时间戳以及与时间戳对应的音频数据；在多媒体文件播放过程中，根据音频弹幕包含的时间戳，播放与时间戳对应的音频数据。
本发明实施例中，能够在多媒体文件播放时进行音频弹幕的交互，实现弹幕类型的多样化，增强了用户在多媒体文件播放时的交互性、现场感和趣味性，提升了用户的使用体验。
应理解的是，本发明实施例中，射频单元501可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器510处理；另外，将上行的数据发送给基站。通常，射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元501还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块502为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元503还可以提供与移动终端500执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。
输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(Graphics Processing Unit，GPU)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元506上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。
移动终端500还包括至少一种传感器505，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度，接近传感器可在移动终端500移动到耳边时，关闭显示面板5061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元506可包括显示面板5061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板5061。
用户输入单元507可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器510，接收处理器510发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071，用户输入单元507还可以包括其他输入设备5072。具体地，其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步的，触控面板5071可覆盖在显示面板5061上，当触控面板5071检测到在其上或附近的触摸操作后，传送给处理器510以确定触摸事件的类型，随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图5中，触控面板5071与显示面板5061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板5071与显示面板5061集成而实现移动终端的输入和输出功能，具体此处不做限定。
接口单元508为外部装置与移动终端500连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端500内的一个或多个元件或者可以用于在移动终端500和外部装置之间传输数据。
存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器509可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器510是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器509内的软件程序和/或模块，以及调用存储在存储器509内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器510可包括一个或多个处理单元；优选的，处理器510可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。
移动终端500还可以包括给各个部件供电的电源511(比如电池)，优选的，电源511可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外，移动终端500包括一些未示出的功能模块，在此不再赘述。
优选的，本发明实施例还提供一种移动终端，包括处理器510，存储器509，存储在存储器509上并可在处理器510上运行的计算机程序，该计算机程序被处理器510执行时实现上述应用于客户端的弹幕处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述应用于客户端的弹幕处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random AccessMemory，简称RAM)、磁碟或者光盘等。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (14)

1.一种弹幕处理方法，其特征在于，所述方法包括：
接收第一客户端发送的音频数据；
根据所述音频数据的接收时间，为所述音频数据设置对应的时间戳，生成所述音频数据对应的音频弹幕，所述音频弹幕包括所述音频数据以及所述时间戳；
将所述音频弹幕发送给所述第一客户端和第二客户端。
2.根据权利要求1所述的方法，其特征在于，根据所述音频数据的接收时间，为所述音频数据设置对应的时间戳，生成所述音频数据对应的音频弹幕的步骤之后，所述方法还包括：
将所述音频弹幕存储至弹幕文件中。
3.一种弹幕处理方法，其特征在于，所述方法包括：
接收服务端发送的与多媒体文件对应的音频弹幕，所述音频弹幕包括时间戳以及与所述时间戳对应的音频数据；
在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，播放与所述时间戳对应的音频数据。
4.根据权利要求3所述的方法，其特征在于，所述在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，播放与所述时间戳对应的音频数据的步骤，包括：
在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，显示弹幕控件；
当检测到对所述弹幕控件的触控操作，或者所述弹幕控件到达预设的播放时间线时，播放与所述时间戳对应的音频数据。
5.根据权利要求4所述的方法，其特征在于，所述在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，显示弹幕控件的步骤，包括：
根据所述音频弹幕包含的时间戳，按照预定的移动方向，在屏幕上显示并移动所述音频弹幕对应的弹幕控件。
6.一种服务器，其特征在于，所述服务器包括：
接收模块，用于接收第一客户端发送的音频数据；
处理模块，用于根据所述音频数据的接收时间，为所述音频数据设置对应的时间戳，生成所述音频数据对应的音频弹幕，所述音频弹幕包括所述音频数据以及所述时间戳；
发送模块，用于将所述音频弹幕发送给所述第一客户端和第二客户端。
7.根据权利要求6所述的服务器，其特征在于，所述服务器还包括：
存储模块，用于将所述音频弹幕存储至弹幕文件中。
8.一种客户端，其特征在于，所述客户端包括：
第一接收模块，用于接收服务端发送的与多媒体文件对应的音频弹幕，所述音频弹幕包括时间戳以及与所述时间戳对应的音频数据；
处理模块，用于在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，播放与所述时间戳对应的音频数据。
9.根据权利要求8所述的客户端，其特征在于，所述处理模块包括：
第一显示单元，用于在所述多媒体文件播放过程中，根据所述音频弹幕包含的时间戳，显示弹幕控件；
第一播放单元，用于当检测到对所述弹幕控件的触控操作，或者所述弹幕控件到达预设的播放时间线时，播放与所述时间戳对应的音频数据。
10.根据权利要求9所述的客户端，其特征在于，所述第一显示单元包括：
显示子单元，用于根据所述音频弹幕包含的时间戳，按照预定的移动方向，在屏幕上显示并移动所述音频弹幕对应的弹幕控件。
11.一种服务器，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至2中任一项所述的弹幕处理方法的步骤。
12.一种移动终端，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求3至5中任一项所述的弹幕处理方法的步骤。
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至2中任一项所述的弹幕处理方法的步骤。
14.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求3至5中任一项所述的弹幕处理方法的步骤。
CN201711092279.0A 2017-11-08 2017-11-08 弹幕处理方法、服务端、客户端和计算机可读存储介质 Pending CN107888937A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711092279.0A CN107888937A (zh) 2017-11-08 2017-11-08 弹幕处理方法、服务端、客户端和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711092279.0A CN107888937A (zh) 2017-11-08 2017-11-08 弹幕处理方法、服务端、客户端和计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN107888937A true CN107888937A (zh) 2018-04-06

Family

ID=61779293

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711092279.0A Pending CN107888937A (zh) 2017-11-08 2017-11-08 弹幕处理方法、服务端、客户端和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN107888937A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495163A (zh) * 2018-04-08 2018-09-04 上海哔哩哔哩科技有限公司 视频弹幕朗读装置、系统、方法及计算机可读存储介质
CN111726696A (zh) * 2019-03-21 2020-09-29 阿里巴巴集团控股有限公司 声音弹幕的应用方法、装置、设备及可读存储介质
CN113132785A (zh) * 2019-12-30 2021-07-16 阿里巴巴集团控股有限公司 多媒体数据方法、装置、电子设备及计算机存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105228013A (zh) * 2015-09-28 2016-01-06 百度在线网络技术（北京）有限公司 弹幕信息处理方法、装置及弹幕视频播放器
CN105611481A (zh) * 2015-12-30 2016-05-25 北京时代拓灵科技有限公司 一种基于空间声的人机交互方法和系统
CN105657482A (zh) * 2016-03-28 2016-06-08 广州华多网络科技有限公司 一种语音弹幕的实现方法及装置
CN105681820A (zh) * 2016-01-08 2016-06-15 天脉聚源（北京）科技有限公司 一种视频弹幕录音方法及装置
CN105847939A (zh) * 2016-05-12 2016-08-10 乐视控股（北京）有限公司 弹幕播放方法、播放装置及播放系统
CN105867718A (zh) * 2015-12-10 2016-08-17 乐视网信息技术（北京）股份有限公司 一种多媒体互动方法及装置
CN106921868A (zh) * 2017-03-07 2017-07-04 深圳创维数字技术有限公司 一种弹幕发布方法及装置
CN107204860A (zh) * 2017-06-02 2017-09-26 深圳市华阅文化传媒有限公司 阅读页面多人语音聊天的方法及装置
CN107332871A (zh) * 2017-05-18 2017-11-07 百度在线网络技术（北京）有限公司 广告推送方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105228013A (zh) * 2015-09-28 2016-01-06 百度在线网络技术（北京）有限公司 弹幕信息处理方法、装置及弹幕视频播放器
CN105867718A (zh) * 2015-12-10 2016-08-17 乐视网信息技术（北京）股份有限公司 一种多媒体互动方法及装置
CN105611481A (zh) * 2015-12-30 2016-05-25 北京时代拓灵科技有限公司 一种基于空间声的人机交互方法和系统
CN105681820A (zh) * 2016-01-08 2016-06-15 天脉聚源（北京）科技有限公司 一种视频弹幕录音方法及装置
CN105657482A (zh) * 2016-03-28 2016-06-08 广州华多网络科技有限公司 一种语音弹幕的实现方法及装置
CN105847939A (zh) * 2016-05-12 2016-08-10 乐视控股（北京）有限公司 弹幕播放方法、播放装置及播放系统
CN106921868A (zh) * 2017-03-07 2017-07-04 深圳创维数字技术有限公司 一种弹幕发布方法及装置
CN107332871A (zh) * 2017-05-18 2017-11-07 百度在线网络技术（北京）有限公司 广告推送方法及装置
CN107204860A (zh) * 2017-06-02 2017-09-26 深圳市华阅文化传媒有限公司 阅读页面多人语音聊天的方法及装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108495163A (zh) * 2018-04-08 2018-09-04 上海哔哩哔哩科技有限公司 视频弹幕朗读装置、系统、方法及计算机可读存储介质
CN108495163B (zh) * 2018-04-08 2021-03-16 上海哔哩哔哩科技有限公司 视频弹幕朗读装置、系统、方法及计算机可读存储介质
CN111726696A (zh) * 2019-03-21 2020-09-29 阿里巴巴集团控股有限公司 声音弹幕的应用方法、装置、设备及可读存储介质
CN111726696B (zh) * 2019-03-21 2022-09-09 阿里巴巴集团控股有限公司 声音弹幕的应用方法、装置、设备及可读存储介质
CN113132785A (zh) * 2019-12-30 2021-07-16 阿里巴巴集团控股有限公司 多媒体数据方法、装置、电子设备及计算机存储介质

Similar Documents

Publication Publication Date Title
CN107977144A (zh) 一种截屏处理方法及移动终端
CN108762640A (zh) 一种弹幕信息的显示方法和终端
CN107613362A (zh) 一种视频显示控制方法及移动终端
CN108958684A (zh) 投屏方法及移动终端
CN107682634A (zh) 一种人脸图像获取方法及移动终端
CN107302624A (zh) 一种屏幕投影方法、终端及计算机可读存储介质
CN108803963A (zh) 一种截屏方法及移动终端
CN107817939A (zh) 一种图像处理方法及移动终端
CN110177296A (zh) 一种视频播放方法及移动终端
CN107678829A (zh) 一种应用程序控制方法和移动终端
CN107808084A (zh) 一种触控操作方法及移动终端
CN107635110A (zh) 一种视频截图方法及终端
CN107845057A (zh) 一种拍照预览方法及移动终端
CN107911735A (zh) 一种音视频播放处理方法、装置及终端
CN109040808A (zh) 一种视频交互调控方法、设备及计算机可读存储介质
CN110351407A (zh) 一种音频播放方法及移动终端
CN107633850A (zh) 一种音量调节方法及电子设备
CN108008991A (zh) 一种图片处理方法、终端及计算机可读存储介质
CN107835495A (zh) 一种消息提示方法、装置及移动终端
CN107992250A (zh) 一种电子书文件内容的显示方法、移动终端
CN107888937A (zh) 弹幕处理方法、服务端、客户端和计算机可读存储介质
CN108924035A (zh) 一种文件分享方法及终端
CN108769783A (zh) 视频广告播放方法、移动终端及计算机可读存储介质
CN107817933A (zh) 一种截屏方法及移动终端
CN108307105A (zh) 一种拍摄方法、终端及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180406