CN113596493B - 一种互动特效同步方法及相关装置 - Google Patents

一种互动特效同步方法及相关装置 Download PDF

Info

Publication number
CN113596493B
CN113596493B CN202110845877.0A CN202110845877A CN113596493B CN 113596493 B CN113596493 B CN 113596493B CN 202110845877 A CN202110845877 A CN 202110845877A CN 113596493 B CN113596493 B CN 113596493B
Authority
CN
China
Prior art keywords
special effect
interactive special
interactive
video content
mapping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110845877.0A
Other languages
English (en)
Other versions
CN113596493A (zh
Inventor
肖壹
黄日成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202110845877.0A priority Critical patent/CN113596493B/zh
Publication of CN113596493A publication Critical patent/CN113596493A/zh
Application granted granted Critical
Publication of CN113596493B publication Critical patent/CN113596493B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开一种互动特效同步方法及相关装置，涉及云技术领域，获取直播房间中互动特效对应的互动特效素材信息，生成映射标识并将映射标识通过扩展信息写入该直播房间对应的直播流，映射标识体现互动特效素材信息与该直播房间中直播流的映射关系，在将直播流转换为视频内容时将该扩展信息写入到视频内容的视频帧中。当进入点播房间观看该视频内容时，播放对应的视频内容。若播放到视频内容的目标视频帧，读取其中的扩展信息，若读取到表征互动特效的扩展信息，根据扩展信息中的映射标识获取互动特效素材，依据互动特效素材，在目标视频帧上展示对应的互动特效。该方法提高点播房间的互动性，更好的烘托用户点播观看视频内容的氛围，提高用户体验。

Description

一种互动特效同步方法及相关装置
技术领域
本申请涉及互联网技术领域，特别是涉及一种互动特效同步方法及相关装置。
背景技术
网络直播作为一种新兴的高互动性视频娱乐方式，通常是主播通过终端在互联网直播平台上，直播自己唱歌、玩游戏等活动，观众可以通过终端进入直播房间观看直播流。在网络直播过程中观众与主播可以进行互动，例如弹幕互动、送礼物互动等。
由于主播在直播房间进行直播时，并不是所有用户都能够及时进入直播房间观看直播流，因此，存在用户对直播流进行回放的需求。这就需要将直播流转换为视频内容。
然而，当直播流转换为视频内容后，用户在点播房间观看视频内容时，点播房间互动性较差，用户观看氛围较差，降低用户体验。
发明内容
为了解决上述技术问题，本申请提供了一种互动特效同步方法及相关装置，实现将直播房间产生的互动特效同步到点播房间，提高点播房间的互动性，更好的烘托用户点播观看视频内容的氛围，提高用户体验。
本申请实施例公开了如下技术方案：
第一方面，本申请实施例提供一种互动特效同步方法，所述方法包括：
响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；
依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
第二方面，本申请实施例提供一种互动特效同步方法，所述方法包括：
在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效素材信息；
建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；
将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系。
第三方面，本申请实施例提供一种互动特效同步装置，所述装置包括播放单元、读取单元、获取单元和展示单元：
所述播放单元，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
所述读取单元，用于在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
所述获取单元，用于若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；
所述展示单元，用于依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
第四方面，本申请实施例提供一种互动特效同步装置，所述装置包括获取单元、建立单元、写入单元和转换单元：
所述获取单元，用于在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效素材信息；
所述建立单元，用于建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
所述写入单元，用于将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；
所述转换单元，用于将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系。
第五方面，本申请实施例提供一种互动特效同步系统，所述系统包括第一终端、第二终端和服务器：
所述第一终端，用于在直播房间进行直播，向所述直播房间发送互动特效；
所述服务器，用于在所述直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；建立所述互动特效素材信息与所述直播房间中直播流的映射关系；将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系；
所述第二终端，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据所述直播房间对应的直播流转换得到的；在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
第六方面，本申请实施例提供一种用于互动特效同步的设备，所述设备包括处理器以及存储器：
所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；
所述处理器用于根据所述程序代码中的指令执行前述方面所述的方法。
第七方面，本申请实施例提供一种计算机可读存储介质，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行前述方面所述的方法。
由上述技术方案可以看出，当用户在直播房间观看直播时，若直播房间出现互动特效，服务器可以获取该互动特效对应的互动特效素材信息，进而生成映射标识并将映射标识通过扩展信息写入该直播房间对应的直播流，该映射标识体现互动特效素材信息与该直播房间中直播流的映射关系，在将直播流转换为视频内容时将该扩展信息写入到视频内容的视频帧中，从而体现视频内容中的视频帧与互动特效素材信息的映射关系。当用户进入点播房间以观看该视频内容时，播放该点播房间对应的视频内容。若播放到视频内容的目标视频帧，读取目标视频帧中的扩展信息，若读取到表征互动特效的扩展信息，根据该扩展信息中的映射标识获取互动特效素材，依据互动特效素材，在目标视频帧上展示对应的互动特效。该方法在将直播流转换成视频内容时，将体现视频帧与互动特效素材信息的映射关系映射标识写入视频帧，从而在播放到目标视频帧时可以播放对应的互动特效，实现将直播房间产生的互动特效同步到点播房间，提高点播房间的互动性，更好的烘托用户点播观看视频内容的氛围，提高用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术成员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为相关技术中提供的一种直播界面示意图；
图2为相关技术中提供的一种点播房间观看视频内容的界面示意图；
图3为本申请实施例提供的一种互动特效同步方法的系统架构示意图；
图4为本申请实施例提供的一种直播流转换为视频内容的流程图；
图5为本申请实施例提供的一种视频内容播放过程的流程图；
图6为本申请实施例提供的一种直播界面示意图；
图7为本申请实施例提供的一种用户观看视频内容的界面示意图；
图8为本申请实施例提供的另一种直播流转换为视频内容的流程图；
图9为本申请实施例提供的另一种视频内容播放过程的流程图；
图10为本申请实施例提供的一种互动特效同步装置的结构图；
图11为本申请实施例提供的另一种互动特效同步装置的结构图；
图12为本申请实施例提供的一种终端的结构图；
图13为本申请实施例提供的一种服务器的结构图。
具体实施方式
下面结合附图，对本申请的实施例进行描述。
首先对本申请涉及的名词进行解释：
互动特效：是指用户之间进行互动的特殊效果，是一种互动玩法，例如可以包括弹幕(飘屏弹幕)互动玩法、虚拟资源转移特效玩法。其中，虚拟资源是一种有价值的资源，例如可以包括虚拟货币、鲜花、金币、体现不同价值的虚拟物品(例如虚拟汽车、虚拟飞机、虚拟火箭等)等，虚拟资源转移即赠送虚拟资源，此时虚拟资源可以称为礼物。
直播与视频内容：网络直播平台上通常具有直播观看入口和视频观看入口，通过直播观看入口可以进入不同的直播房间观看直播，通过视频观看入口可以进入不同的点播房间观看视频内容。其中，直播采取实时流采集转码观看，此时采取的实时流可以称为直播流；视频内容为处理后的非实时内容。
在直播房间进行直播时，用户之间经常会发送互动特效以进行互动，然而在将直播房间对应的直播流转换为视频内容后，当用户进入点播房间观看视频内容，用户仅能看到视频内容，无法观看直播过程产生的互动特效，导致点播房间互动性较差，用户观看氛围较差，降低用户体验。
参见图1所示，图1以直播房间中进行游戏直播为例，示出了直播界面示意图，图1中101为互动特效展示区域，102为直播内容展示区域，用户发送的互动特效例如发送弹幕或赠送礼物可以显示在101所示区域，同样也可以显示在102所示区域。然而，当将该直播房间对应的直播流转换成视频内容时，若用户进行点播房间观看该视频内容，参见图2所示，在点播房间中，用户只能观看到对应的视频内容，以及相关视频的列表，并不会显示用户在直播房间中发送的互动特效。
为了解决上述技术问题，本申请实施例提供一种互动特效同步方法，该方法在将直播流转换成视频内容时，将体现视频帧与互动特效素材信息的映射关系映射标识写入视频帧，从而在播放到目标视频帧时可以播放对应的互动特效，实现将直播房间产生的互动特效同步到点播房间，提高点播房间的互动性，更好的烘托用户点播观看视频内容的氛围，提高用户体验。
需要说明的是，本申请实施例提供的互动特效同步方法可以应用于各种网络直播平台，这些直播平台既包括直播房间，又包括点播房间，即既可以在该网络直播平台观看直播，又可以在该网络直播平台观看根据直播流得到的非实时视频内容。这样，用户在直播房间发送的互动特效，在直播流转换成视频内容进行播放后依然存在且展示在用户面前。
本申请实施例对直播流对应的直播内容的类型不做限定，例如可以包括游戏直播内容、跳舞直播内容、比赛直播内容等等，相应的，视频内容也可以是游戏画面、跳舞画面、比赛画面等。
本申请实施例所提供的方法主要涉及云技术领域，例如涉及云计算领域，云计算(cloud computing)指IT基础设施的交付和使用模式，指通过网络以按需、易扩展的方式获得所需资源；广义云计算指服务的交付和使用模式，指通过网络以按需、易扩展的方式获得所需服务。这种服务可以是IT和软件、互联网相关，也可是其他服务。云计算是网格计算(Grid Computing)、分布式计算(DistributedComputing)、并行计算(ParallelComputing)、效用计算(Utility Computing)、网络存储(Network StorageTechnologies)、虚拟化(Virtualization)、负载均衡(Load Balance)等传统计算机和网络技术发展融合的产物。随着互联网、实时数据流、连接设备多样化的发展，以及搜索服务、社会网络、移动商务和开放协作等需求的推动，云计算迅速发展起来。不同于以往的并行分布式计算，云计算的产生从理念上将推动整个互联网模式、企业管理模式发生革命性的变革。
又如可以涉及数据库(Database)，数据库可视为电子化的文件柜——存储电子文件的处所，用户可以对文件中的数据进行新增、查询、更新、删除等操作。所谓“数据库”是以一定方式储存在一起、能与多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合。
数据库管理系统(Database Management System，DBMS)是为管理数据库而设计的电脑软件系统，一般具有存储、截取、安全保障、备份等基础功能。数据库管理系统可以依据它所支持的数据库模型来作分类，例如关系式、XML(Extensible Markup Language,即可扩展标记语言)；或依据所支持的计算机类型来作分类，例如服务器群集、移动电话；或依据所用查询语言来作分类，例如结构化查询语言(Structured Query Language，SQL)、XQuery；或依据性能冲量重点来作分类，例如最大规模、最高运行速度；亦或其他的分类方式。不论使用哪种分类方式，一些DBMS能够跨类别，例如，同时支持多种查询语言。
接下来，将对互动特效同步方法的系统架构进行介绍。参见图3，图3为本申请实施例提供的互动特效同步方法的系统架构示意图。该系统架构中包括第一终端301、第二终端302和服务器303，第一终端301可以是直播过程中在直播房间观看直播并发送互动特效的第一用户对应的终端，第二终端302可以是进入点播房间观看视频内容的第二用户对应的终端。其中，由于发送互动特效的第一用户与观看视频内容的第二用户可以是同一用户，故第一终端301和第二终端302可以是同一个终端，也可以是不同的终端。
当第一用户通过第一终端301进入直播房间，在直播房间观看直播时，若直播房间出现互动特效，例如第一用户通过第一终端301发送互动特效，服务器303可以获取该互动特效对应的互动特效素材信息，进而建立互动特效素材信息与直播房间中直播流的映射关系，并将表征该映射关系的映射标识通过扩展信息写入该直播房间对应的直播流。这样，服务器303在将直播流转换为视频内容时，可以将该扩展信息写入到视频内容的视频帧中，从而体现视频内容中的视频帧与互动特效素材信息的映射关系。
当第二用户针对点播房间执行进入操作后，可以通过第二终端302进入点播房间以观看该视频内容时，播放该点播房间对应的视频内容。若播放到视频内容的目标视频帧，第二终端302读取目标视频帧中的扩展信息，若读取到表征互动特效的扩展信息，根据该扩展信息中的映射标识获取互动特效素材，依据互动特效素材，在目标视频帧上展示对应的互动特效。
需要说明的是，服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云计算服务的云服务器。终端例如第一终端301和第二终端302可以是智能手机、平板电脑、笔记本电脑、台式计算机、车载终端、智能电视等，但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接，本申请在此不做限制。
从上述介绍可以看出，本申请实施例所提供的互动特效同步方法主要包括两个流程，第一个流程是将直播流转换为视频内容的流程，第二个流程是视频内容播放的流程，在视频内容播放流程主要在于将直播房间中产生的互动特效同步到视频内容播放过程中，以在视频内容播放时依旧展示直播房间中产生的互动特效。
接下来，将分别对上述两个流程进行介绍，首先结合附图对本申请实施例提供的直播流转换为视频内容的流程进行详细介绍。
参见图4，图4示出了一种直播流转换为视频内容的流程图，所述方法包括：
S401、在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息。
用户在网络直播平台观看直播时，可以根据自己想要观看的节目进入对应的直播房间观看直播内容，节目例如可以是“×××赛季AA战队对战BB战队”，节目具有对应的节目标识(IDentifier，ID)，节目ID例如可以表示为live_p1，直播房间具有对应的房间ID，节目ID与房间ID是一一对应的。从而可以根据对应的节目ID或房间ID拉取对应的直播流进行播放。
用户在直播房间(假设节目ID为live_p1)发送互动特效，例如发送弹幕或赠送礼物。当用户发送该互动特效时，网络直播平台对应的服务器可以获取该互动特效对应的互动特效素材信息。
其中，互动特效素材信息可以是互动特效素材或互动特效数据，其中互动特效素材可以是展示该互动特效效果的图片、文字本身，互动特效数据可以是互动特效素材的标识。
S402、建立所述互动特效素材信息与所述直播房间中直播流的映射关系。
服务器在得到该直播房间的互动特效素材信息后，可以建立互动特效素材信息与该直播房间中直播流的映射关系。该映射关系可以体现直播流播放时何时出现互动特效。
映射关系可以通过映射标识来标识，故建立映射关系相当于生成标识该映射关系的映射标识，故建立互动特效素材信息与直播房间中直播流的映射关系的方式可以是对所述互动特效素材信息按照预设时间间隔进行切片分割，得到多个切片。然后根据多个切片中每个切片对应的时间戳和直播房间对应的标识信息，分别生成每个切片的映射标识。直播房间对应的标识信息例如可以是该直播房间的房间ID，也可以是该直播房间的节目ID。此时，映射标识可以表示为节目ID_时间戳，或者房间ID_时间戳，其中时间戳可以是进行操作系统(例如unix、linux)的时间戳(秒级)。
其中，预设时间间隔越短，建立的映射关系越准确，消耗的计算资源也越多，因此，可以综合映射关系准确性和计算资源的消耗，选择一个合适的预设时间间隔，从而在尽量保证映射关系准确性的同时，尽可能少的消耗计算资源。一般情况下，根据实际经验，可以将预设时间间隔设置为1s。
也就是说，针对一个直播房间的直播流，每个视频流根据1s的预设时间间隔进行切片分割，每1s产生一个切片，然后根据每个切片对应的时间戳和直播房间对应的标识信息，分别生成每个切片的映射标识。这样，映射标识可以指示在直播流播放的哪个时间会出现互动特效素材信息对应的互动特效。
需要说明的是，S402实际上就是将一个直播房间对应的互动特效素材信息，按照预设时间间隔进行汇聚。该过程可以通过特效汇聚模块实现，该特效汇聚模块可以部署在网络直播平台对应的服务器上，也可以是独立的特效汇聚服务器。若是独立的特效汇聚服务器，则网络直播平台对应的服务器获取到互动特效素材信息后，将互动特效素材信息旁路转发到特效汇聚服务器，针对一个直播房间的直播流，特效汇聚服务器会按照节目ID，时间间隔1s进行该互动特效素材信息的汇聚。其中，转发根据节目ID进行有状态的路由，确保同一个节目ID的互动特效素材信息都旁路转发到同一台汇聚服务器，便于建立映射关系，生成对应的映射标识。
在本实施例中，互动特效素材信息需要进行存储，以便后续播放视频内容时，可以根据存储的互动特效素材信息在播放视频内容的同时展示对应的互动特效。在存储时，可以是得到所有切片后，在对所有切片进行存储；也可以是每得到一个切片后，立即将该切片进行存储，以预设时间间隔是1s为例，即当确定针对一个直播流汇聚了1s的切片(互动特效素材信息)后，便将这1s的互动特效素材信息进行存储。
可以理解的是，存储互动特效素材信息的方式有很多中，在一种可能的实现方式中，可以将互动特效素材信息采用键值对(key-value，KV)存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键(key)，每个切片对应的互动特效素材信息作为键值对存储方式的值(value)，同一个切片的映射标识和互动特效素材信息构成一个键值对。例如，通过前述步骤得到10个切片，分别是切片1、切片2、……、切片10，切片1对应的映射标识key1作为KV存储的key，切片1表示的互动特效素材信息存入KV存储中，作为该key关联的value；切片2对应的映射标识key2作为KV存储的key，切片2表示的互动特效素材信息存入KV存储中，作为该key的value，以此类推。
可以理解的是，本申请实施例中存储的互动特效素材信息可以是不同的内容，在一种可能的实现方式中，互动特效素材信息可以为互动特效对应的互动特效素材本身。
在另一种可能的实现方式中，互动特效素材信息可以是表征互动特效素材的互动特效数据，互动特效数据例如可以是特效标识。由于特效标识的数据量远小于互动特效素材本身的数据量，尤其在互动特效较多的情况下，通过存储互动特效数据，可以大大降低存储空间的占用，节约存储空间。
S403、将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中。
通常情况下，服务器通过转码模块将直播流转换为视频内容，为了使得后续服务器通过转码模块在将直播流转换为视频内容进行播放后，依旧可以展示互动特效，服务器可以将映射标识发送至直播的转码模块，以便转码模块可以将映射标识通过扩展信息写入到该直播流中。
以上述映射标识表示为节目ID_时间戳为例，节目ID可以指示对应哪个节目，时间戳可以指明对应该节目的哪个时间的直播流，即可以指明直播流ID，故转码模块收到映射标识后，根据该映射标识的节目ID和直播流ID查找到对应的直播流，并将该映射标识(例如key1)通过扩展信息写入到该直播流中。
其中，扩展信息可以是直播流中可以编辑的字段。由于补充增强信息(Supplemental Enhancement Information，SEI)具有兼容性高的特性，可以被不同的播放器所识别，因此，在一种可能的实现方式中，扩展信息可以是SEI。
S404、将携带所述扩展信息的所述直播流转换为视频内容。
服务器将携带所述扩展信息的直播流转换为视频内容，视频内容的视频帧携带对应的扩展信息，从而使得互动特效素材信息与视频内容中的视频帧具有上述映射标识所标识的映射关系。即在将直播转点播的录制过程中，写入直播流的SEI也会录制到视频内容中，以便在后续播放视频内容时，可以在对应的视频帧展示直播房间中产生的互动特效。
然后，将结合附图对本申请实施例提供的视频内容播放过程进行介绍。参见图5所示，图5示出了一种视频内容播放过程的流程图，所述方法包括：
S501、响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容。
直播完成后，若用户希望在网络直播平台上观看当时的内容，用户可以通过终端进入相应的点播房间观看视频内容，该视频内容是根据直播房间对应的直播流转换得到的，直播流转换为视频内容的方法与图5对应实施例所示的方法类似，此处不再赘述。
具体的，用户可以针对点播房间执行进入操作，例如用户点击该点播房间，从而播放该点播房间对应的视频内容。其中，该点播房间可以是用户根据自己的观看需求选择的任意点播房间。
S502、在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息。
在播放该视频内容的过程中，可以实时检查是否存在互动特效需要展示。例如，在直播过程中，一些用户在直播的第2分30s-第2分31s发送了互动特效，互动特效例如可以是弹幕和虚拟资源转移特效中至少一种，即第2分30s-第2分31s对应的直播流出现了互动特效，那么，在播放该直播流转换得到的视频内容时，第2分30s-第2分31s对应的视频帧也应该出现互动特效。由于视频帧中具有扩展信息，扩展信息中的映射标识可以体现视频帧与互动特效素材信息的映射关系，故若播放到视频内容的目标视频帧，终端可以读取目标视频帧中的扩展信息，该扩展信息是将直播流转换成视频内容时写入视频内容的，从而可以根据扩展信息确定是否需要展示互动特效。其中，扩展信息可以是SEI。
S503、若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材。
若读取到表征互动特效的扩展信息，则说明需要展示互动特效，故终端可以根据扩展信息中的映射标识获取互动特效素材。
需要说明的是，根据互动特效素材信息的内容不同，根据扩展信息中的映射标识获取互动特效素材的方式可以有所不同。
当互动特效素材信息是互动特效素材时，映射标识体现的是视频内容的视频帧与互动特效素材本身的映射关系，则终端可以根据映射标识直接获取到映射标识关联的互动特效素材。
例如，以KV存储方式存储互动特效素材，若映射标识为key1，则根据key1关联的V获取互动特效素材。
当互动特效素材信息为互动特效数据时，映射标识体现的是视频内容的视频帧与互动特效数据的映射关系，则终端可以获取映射标识关联的互动特效数据，然后根据互动特效数据，查询得到互动特效素材。其中，这些素材可以保存在互动特效素材库中。
例如，以KV存储方式存储互动特效数据例如特效标识，若映射标识为key1，则根据key1关联的V获取特效标识，进而根据特效标识从互动特效素材库中查询得到对应的互动特效素材。
可以理解的是，为了提高用户体验，不断的对互动特效素材进行更新，例如产生新的互动特效素材，或者在原互动特效素材基础上进行更改，因此，为了保证展示给用户的是最新的互动特效，终端可以通过异步线程加载更新的互动特效素材，以便根据映射标识可以获取到最新的互动特效素材，进而向用户展示最新的互动特效。
S504、依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
终端在获取到互动特效素材后，可以依据互动特效素材，在目标视频帧上展示对应的互动特效，从而将直播房间中产生的互动特效同步到视频内容播放过程中，以在视频内容播放时依旧展示直播房间中产生的互动特效。
参见图6所示，图6示出了一种直播界面示意图，该直播界面示意图示出了用户在直播房间中观看直播时的界面，该界面中601为互动特效展示区域，602为直播内容展示区域，用户发送的互动特效例如发送弹幕或赠送礼物可以显示在601所示区域，同样也可以显示在602所示区域。当将该直播房间的直播流转换成视频内容后，若用户进入点播房间观看该视频内容时，用户观看视频内容的界面示意图可以参见图7所示，图7中701为视频内容展示区域，播放视频内容时依据可以展示直播房间中产生的互动特效，参见7011所示，例如弹幕“大战一触即发！观赛抽手办！”、“$$关注了主播”等等；702为视频列表，该视频列表中展示了其他可以观看的视频内容。
由上述技术方案可以看出，当用户在直播房间观看直播时，若直播房间出现互动特效，服务器可以获取该互动特效对应的互动特效素材信息，进而生成映射标识并将映射标识通过扩展信息写入该直播房间对应的直播流，该映射标识体现互动特效素材信息与该直播房间中直播流的映射关系，在将直播流转换为视频内容时将该扩展信息写入到视频内容的视频帧中，从而体现视频内容中的视频帧与互动特效素材信息的映射关系。当用户进入点播房间以观看该视频内容时，播放该点播房间对应的视频内容。若播放到视频内容的目标视频帧，读取目标视频帧中的扩展信息，若读取到表征互动特效的扩展信息，根据该扩展信息中的映射标识获取互动特效素材，依据互动特效素材，在目标视频帧上展示对应的互动特效。该方法在将直播流转换成视频内容时，将体现视频帧与互动特效素材信息的映射关系映射标识写入视频帧，从而在播放到目标视频帧时可以播放对应的互动特效，实现将直播房间产生的互动特效同步到点播房间，提高点播房间的互动性，更好的烘托用户点播观看视频内容的氛围，提高用户体验。
需要说明的是，除了仍旧展示直播房间中产生的互动特效外，本申请实施例在点播房间中同样提供了互动特效功能，即在点播房间中，用户观看视频内容时可以发送互动特效，例如发送弹幕或赠送礼物。故，在本实施例中，终端可以展示互动特效入口，响应于针对所述互动特效入口的互动特效发送操作，在所述视频内容播放过程中在所述点播房间展示用户发送的互动特效。其中，互动特效入口例如可以参见图7中7012和7013所示，通过7012所示区域可以发送弹幕，通过7013所示区域可以赠送礼物。
下面将结合实际应用场景对本申请实施例提供的互动特效同步方法进行介绍。主播在直播房间进行直播，第一用户进入该直播房间观看直播，并在该直播房间发送弹幕、赠送礼物，在直播完成后，可以将该直播房间的直播流转换成视频内容。直播流转换为视频内容的方法可以参见图8所示，所述方法包括：
S801、第一用户通过终端在直播房间观看直播时发送弹幕、赠送礼物。
S802、终端将发送弹幕、赠送礼物这一互动特效对应的互动特效数据发送至特效汇聚服务器。
S803、特效汇聚服务器判断该直播房间的节目是否汇聚了1s的互动特效数据，若是，执行S804。
S804、通过KV存储对该1s的互动特效数据进行存储。
S805、将该1s的互动特效数据的key发送到转码模块。
S806、转码模块将该key通过SEI写入到该直播房间的直播流中。
S807、将该直播流转换成视频内容时，将该SEI写入视频内容中。
当第二用户希望观看该视频内容时，第二用户可以进入该视频内容的点播房间，从而播放该视频内容以便用户观看。在播放该视频内容时，第一用户在直播房间中发送弹幕、赠送礼物的互动特效依然存在且向第二用户展示。其中第一用户和第二用户可以是相同的用户，也可以是不同的用户。参见图9，所述方法包括：
S901、第二用户通过终端进入点播房间观看视频内容。
S902、异步加载更新发送弹幕、赠送礼物的互动特效素材。
S903、在播放该视频内容的过程中，读取播放到的目标视频帧中的SEI。
S904、通过SEI中的key，查询播放目标视频帧时的特效标识。
S905、根据特效标识得到互动特效素材。
S906、根据互动特效素材展示发送弹幕、赠送礼物的互动特效。
基于以上方法，本申请实施例还提供一种互动特效同步装置，该互动特效同步装置可以实现前述图4对应的实施例提供的方法。参见图10，所述装置1000包括播放单元1001、读取单元1002、获取单元1003和展示单元1004：
所述播放单元1001，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
所述读取单元1002，用于在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
所述获取单元1003，用于若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；
所述展示单元1004，用于依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
在一种可能的实现方式中，所述展示单元1004，用于：
展示互动特效入口；
响应于针对所述互动特效入口的互动特效发送操作，在所述视频内容播放过程中在所述点播房间展示用户发送的互动特效。
在一种可能的实现方式中，所述互动特效素材信息包括互动特效素材，所述获取单元1003，用于：
获取所述映射标识关联的互动特效素材。
在一种可能的实现方式中，所述互动特效素材信息包括互动特效数据，所述获取单元1003，用于：
获取所述映射标识关联的互动特效数据；
根据所述互动特效数据，查询得到所述互动特效素材。
在一种可能的实现方式中，所述装置包括加载单元：
所述加载单元，用于通过异步线程加载更新后的互动特效素材。
在一种可能的实现方式中，所述互动特效为弹幕和虚拟资源转移特效中至少一种。
本申请实施例还提供一种互动特效同步装置，该互动特效同步装置可以实现前述图5对应的实施例提供的方法。参见图11，所述装置1100包括获取单元1101、建立单元1102、写入单元1103和转换单元1104：
所述获取单元1101，用于在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；
所述建立单元1102，用于建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
所述写入单元1103，用于将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；
所述转换单元1104，用于将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系。
在一种可能的实现方式中，所述建立单元1102，用于：
对所述互动特效素材信息按照预设时间间隔进行切片分割，得到多个切片；
根据所述多个切片中每个切片对应的时间戳和所述直播房间对应的标识信息，分别生成每个切片的映射标识。
在一种可能的实现方式中，所述装置还包括存储单元：
所述存储单元，用于将所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的所述映射标识分别作为所述键值对存储方式的键，每个切片对应的互动特效素材信息作为所述键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对。
本申请实施例还提供一种互动特效同步系统，所述系统包括第一终端、第二终端和服务器：
所述第一终端，用于在直播房间进行直播，向所述直播房间发送互动特效；
所述服务器，用于在所述直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；建立所述互动特效素材信息与所述直播房间中直播流的映射关系；将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系；
所述第二终端，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据所述直播房间对应的直播流转换得到的；在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
基于以上方法，本申请实施例还提供了一种用于互动特效同步的设备，该设备可以是终端，以终端为智能手机为例：
图12示出的是与本申请实施例提供的终端相关的智能手机的部分结构的框图。参考图12，智能手机包括：射频(英文全称：Radio Frequency，英文缩写：RF)电路1210、存储器1220、输入单元1230、显示单元1240、传感器1250、音频电路1260、无线保真(英文全称：wireless fidelity，英文缩写：WiFi)模块1270、处理器1280、以及电源1290等部件。输入单元1230可包括触控面板1231以及其他输入设备1232，显示单元1240可包括显示面板1241，音频电路1260可以包括扬声器1261和传声器1262。本领域技术人员可以理解，图12中示出的智能手机结构并不构成对智能手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
存储器1220可用于存储软件程序以及模块，处理器1280通过运行存储在存储器1220的软件程序以及模块，从而执行智能手机的各种功能应用以及数据处理。存储器1220可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据智能手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1220可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器1280是智能手机的控制中心，利用各种接口和线路连接整个智能手机的各个部分，通过运行或执行存储在存储器1220内的软件程序和/或模块，以及调用存储在存储器1220内的数据，执行智能手机的各种功能和处理数据，从而对智能手机进行整体监控。可选的，处理器1280可包括一个或多个处理单元；优选的，处理器1280可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1280中。
在本实施例中，所述终端中的处理器1280可以执行以下步骤：
响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；
依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效。
本申请实施例还提供一种服务器，请参见图13所示，图13为本申请实施例提供的服务器1300的结构图，服务器1300可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上中央处理器(Central Processing Units，简称CPU)1322(例如，一个或一个以上处理器)和存储器1332，一个或一个以上存储应用程序1342或数据1344的存储介质1330(例如一个或一个以上海量存储设备)。其中，存储器1332和存储介质1330可以是短暂存储或持久存储。存储在存储介质1330的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对服务器中的一系列指令操作。更进一步地，中央处理器1322可以设置为与存储介质1330通信，在服务器1300上执行存储介质1330中的一系列指令操作。
服务器1300还可以包括一个或一个以上电源1326，一个或一个以上有线或无线网络接口1350，一个或一个以上输入输出接口1358，和/或，一个或一个以上操作系统1341，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM等等。
在本实施例中，所述服务器中的中央处理器1322可以执行以下步骤：
在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；
建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中；
将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系。
根据本申请的一个方面，提供了一种计算机可读存储介质，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行前述各个实施例所述的互动特效同步方法。
根据本申请的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述实施例各种可选实现方式中提供的方法。
本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术成员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (11)

1.一种互动特效同步方法，其特征在于，所述方法包括：
响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系，所述映射标识根据切片对应的时间戳和直播房间对应的标识信息生成，所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键，每个切片对应的互动特效素材信息作为键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对，所述切片通过对所述互动特效素材信息按照预设时间间隔进行切片分割得到，所述互动特效素材信息通过特效汇聚模块按照预设时间间隔进行汇聚，所述特效汇聚模块部署在网络直播平台对应的服务器或者独立的特效汇聚服务器上；
依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效；
展示互动特效入口；
响应于针对所述互动特效入口的互动特效发送操作，在所述视频内容播放过程中在互动特效展示区域展示用户发送的互动特效，其中，观看视频内容的界面包括视频内容展示区域，所述视频内容展示区域包括视频内容展示区域、所述互动特效展示区域以及所述互动特效入口，通过所述互动特效入口可以发送互动特效；
通过异步线程加载更新的互动特效素材。
2.根据权利要求1所述的方法，其特征在于，所述互动特效素材信息包括互动特效素材，所述根据所述扩展信息中的映射标识获取互动特效素材，包括：
获取所述映射标识关联的互动特效素材。
3.根据权利要求1所述的方法，其特征在于，所述互动特效素材信息包括互动特效数据，所述根据所述扩展信息中的映射标识获取互动特效素材，包括：
获取所述映射标识关联的互动特效数据；
根据所述互动特效数据，查询得到所述互动特效素材。
4.根据权利要求1-3任一项所述的方法，其特征在于，所述互动特效为弹幕和虚拟资源转移特效中至少一种。
5.一种互动特效同步方法，其特征在于，所述方法包括：
在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；
建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中，所述映射标识根据切片对应的时间戳和直播房间对应的标识信息生成，所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键，每个切片对应的互动特效素材信息作为键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对，所述切片通过对所述互动特效素材信息按照预设时间间隔进行切片分割得到，所述互动特效素材信息通过特效汇聚模块按照预设时间间隔进行汇聚，所述特效汇聚模块部署在网络直播平台对应的服务器或者独立的特效汇聚服务器上；
将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系，其中，终端通过异步线程加载更新的互动特效素材。
6.根据权利要求5所述的方法，其特征在于，所述建立所述互动特效素材信息与所述直播房间中直播流的映射关系，包括：
对所述互动特效素材信息按照预设时间间隔进行切片分割，得到多个切片；
根据所述多个切片中每个切片对应的时间戳和所述直播房间对应的标识信息，分别生成每个切片的映射标识。
7.一种互动特效同步装置，其特征在于，所述装置包括播放单元、读取单元、获取单元、加载单元和展示单元：
所述播放单元，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据直播房间对应的直播流转换得到的；
所述读取单元，用于在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；
所述获取单元，用于若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系，所述映射标识根据切片对应的时间戳和直播房间对应的标识信息生成，所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键，每个切片对应的互动特效素材信息作为键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对，所述切片通过对所述互动特效素材信息按照预设时间间隔进行切片分割得到，所述互动特效素材信息通过特效汇聚模块按照预设时间间隔进行汇聚，所述特效汇聚模块部署在网络直播平台对应的服务器或者独立的特效汇聚服务器上；
所述展示单元，用于依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效；展示互动特效入口；响应于针对所述互动特效入口的互动特效发送操作，在所述视频内容播放过程中在互动特效展示区域展示用户发送的互动特效，其中，观看视频内容的界面包括视频内容展示区域，所述视频内容展示区域包括视频内容展示区域、所述互动特效展示区域以及所述互动特效入口，通过所述互动特效入口可以发送互动特效；
所述加载单元，用于通过异步线程加载更新的互动特效素材。
8.一种互动特效同步装置，其特征在于，所述装置包括获取单元、建立单元、写入单元、加载单元和转换单元：
所述获取单元，用于在直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；
所述建立单元，用于建立所述互动特效素材信息与所述直播房间中直播流的映射关系；
所述写入单元，用于将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中，所述映射标识根据切片对应的时间戳和直播房间对应的标识信息生成，所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键，每个切片对应的互动特效素材信息作为键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对，所述切片通过对所述互动特效素材信息按照预设时间间隔进行切片分割得到，所述互动特效素材信息通过特效汇聚模块按照预设时间间隔进行汇聚，所述特效汇聚模块部署在网络直播平台对应的服务器或者独立的特效汇聚服务器上；
所述转换单元，用于将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系，其中，终端通过异步线程加载更新的互动特效素材。
9.一种互动特效同步系统，其特征在于，所述系统包括第一终端、第二终端和服务器：
所述第一终端，用于在直播房间进行直播，向所述直播房间发送互动特效；
所述服务器，用于在所述直播房间进行直播的过程中，获取所述直播房间中产生的互动特效对应的互动特效素材信息；建立所述互动特效素材信息与所述直播房间中直播流的映射关系；将标识所述映射关系的映射标识通过扩展信息写入到所述直播流中，所述映射标识根据切片对应的时间戳和直播房间对应的标识信息生成，所述互动特效素材信息采用键值对存储方式进行存储，每个切片对应的映射标识分别作为键值对存储方式的键，每个切片对应的互动特效素材信息作为键值对存储方式的值，同一个切片的映射标识和互动特效素材信息构成一个键值对，所述切片通过对所述互动特效素材信息按照预设时间间隔进行切片分割得到，所述互动特效素材信息通过特效汇聚模块按照预设时间间隔进行汇聚，所述特效汇聚模块部署在网络直播平台对应的服务器或者独立的特效汇聚服务器上；将携带所述扩展信息的所述直播流转换为视频内容，所述视频内容的视频帧携带对应的扩展信息，所述互动特效素材信息与所述视频内容中的视频帧具有所述映射标识所标识的映射关系；
所述第二终端，用于响应于用户针对点播房间的进入操作，播放所述点播房间对应的视频内容，所述视频内容是根据所述直播房间对应的直播流转换得到的；在播放所述视频内容的过程中，若播放到所述视频内容的目标视频帧，读取所述目标视频帧中的扩展信息，所述扩展信息是将所述直播流转换成所述视频内容时写入所述视频内容的；若读取到表征互动特效的扩展信息，根据所述扩展信息中的映射标识获取互动特效素材，所述映射标识用于体现互动特效素材信息与所述视频内容中视频帧的映射关系；依据所述互动特效素材，在所述目标视频帧上展示对应的互动特效；展示互动特效入口；响应于针对所述互动特效入口的互动特效发送操作，在所述视频内容播放过程中在互动特效展示区域展示用户发送的互动特效，其中，观看视频内容的界面包括视频内容展示区域，所述视频内容展示区域包括视频内容展示区域、所述互动特效展示区域以及所述互动特效入口，通过所述互动特效入口可以发送互动特效；通过异步线程加载更新的互动特效素材。
10.一种用于互动特效同步的设备，其特征在于，所述设备包括处理器以及存储器：
所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；
所述处理器用于根据所述程序代码中的指令执行权利要求1-4任一项所述的方法，或执行权利要求5-6任一项所述的方法。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质用于存储程序代码，所述程序代码用于执行权利要求1-4任一项所述的方法，或执行权利要求5-6任一项所述的方法。
CN202110845877.0A 2021-07-26 2021-07-26 一种互动特效同步方法及相关装置 Active CN113596493B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110845877.0A CN113596493B (zh) 2021-07-26 2021-07-26 一种互动特效同步方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110845877.0A CN113596493B (zh) 2021-07-26 2021-07-26 一种互动特效同步方法及相关装置

Publications (2)

Publication Number Publication Date
CN113596493A CN113596493A (zh) 2021-11-02
CN113596493B true CN113596493B (zh) 2023-03-10

Family

ID=78250119

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110845877.0A Active CN113596493B (zh) 2021-07-26 2021-07-26 一种互动特效同步方法及相关装置

Country Status (1)

Country Link
CN (1) CN113596493B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114327182B (zh) * 2021-12-21 2024-04-09 广州博冠信息科技有限公司 特效显示方法及装置、计算机存储介质、电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131593A (zh) * 2016-06-28 2016-11-16 乐视控股（北京）有限公司 内容处理方法及装置
CN106488253A (zh) * 2016-11-04 2017-03-08 合网络技术（北京）有限公司 直播视频互动数据处理方法及装置
CN109561351A (zh) * 2018-12-03 2019-04-02 网易（杭州）网络有限公司 网络直播回放方法、装置及存储介质
CN110213599A (zh) * 2019-04-16 2019-09-06 腾讯科技（深圳）有限公司 一种附加信息处理的方法、设备及存储介质
CN111131847A (zh) * 2019-12-23 2020-05-08 杭州当虹科技股份有限公司 一种直播互动方法
CN111629253A (zh) * 2020-06-11 2020-09-04 网易（杭州）网络有限公司 视频处理方法及装置、计算机可读存储介质、电子设备
CN112468822A (zh) * 2020-11-06 2021-03-09 上海钦文信息科技有限公司 一种基于视频sei消息的多媒体录播课互动方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112188225B (zh) * 2020-09-29 2022-12-06 上海哔哩哔哩科技有限公司 用于直播回放的弹幕下发方法和直播视频弹幕回放方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106131593A (zh) * 2016-06-28 2016-11-16 乐视控股（北京）有限公司 内容处理方法及装置
CN106488253A (zh) * 2016-11-04 2017-03-08 合网络技术（北京）有限公司 直播视频互动数据处理方法及装置
CN109561351A (zh) * 2018-12-03 2019-04-02 网易（杭州）网络有限公司 网络直播回放方法、装置及存储介质
CN110213599A (zh) * 2019-04-16 2019-09-06 腾讯科技（深圳）有限公司 一种附加信息处理的方法、设备及存储介质
CN111131847A (zh) * 2019-12-23 2020-05-08 杭州当虹科技股份有限公司 一种直播互动方法
CN111629253A (zh) * 2020-06-11 2020-09-04 网易（杭州）网络有限公司 视频处理方法及装置、计算机可读存储介质、电子设备
CN112468822A (zh) * 2020-11-06 2021-03-09 上海钦文信息科技有限公司 一种基于视频sei消息的多媒体录播课互动方法

Also Published As

Publication number Publication date
CN113596493A (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
US11417341B2 (en) Method and system for processing comment information
US11223868B2 (en) Promotion content push method and apparatus, and storage medium
US20240298077A1 (en) Live streaming sharing method, and related device and system
EP2940940B1 (en) Methods for sending and receiving video short message, apparatus and handheld electronic device thereof
CN108093267B (zh) 一种直播方法、装置、存储介质及电子设备
US20220078492A1 (en) Interactive service processing method and system, device, and storage medium
CN111654716B (zh) 直播间推荐方法、装置、电子设备及计算机可读存储介质
CN105872717A (zh) 视频处理方法及系统、视频播放器与云服务器
CN104065979A (zh) 一种动态显示和视频内容相关联信息方法及系统
CN108900855B (zh) 直播内容录制方法、装置、计算机可读存储介质及服务器
CN112771881B (zh) 弹幕处理方法、装置、电子设备及计算机可读取存储介质
US20150106730A1 (en) Framework for screen content sharing system with generalized screen descriptions
CN110602543A (zh) 素材的显示方法和装置、存储介质及电子装置
CN113596493B (zh) 一种互动特效同步方法及相关装置
WO2023131269A1 (zh) 监视屏幕设备播放的方法及系统、存储介质
CN112969093A (zh) 互动业务处理方法、装置、设备及存储介质
CN114254183A (zh) 内容推荐方法、装置、终端、服务器及存储介质
CN111930927B (zh) 评价信息展示方法、装置、电子设备及可读存储介质
CN117579885A (zh) 一种直播间的特效展示方法及系统
US20190313156A1 (en) Asynchronous Video Conversation Systems and Methods
CN114979695B (zh) 基于srs的多进程直播方法、装置、电子设备以及存储介质
CN113468346B (zh) 资源处理方法、装置、电子设备及存储介质
CN110798743A (zh) 视频播放方法、装置及计算机可读存储介质
CN111918092B (zh) 视频流处理方法、装置、服务器及存储介质
CN107017978B (zh) 终端设备间的信息同步方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40054065

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant