CN107948702B - 应用程序状态的同步方法、装置、终端和存储介质 - Google Patents

应用程序状态的同步方法、装置、终端和存储介质 Download PDF

Info

Publication number
CN107948702B
CN107948702B CN201711168566.5A CN201711168566A CN107948702B CN 107948702 B CN107948702 B CN 107948702B CN 201711168566 A CN201711168566 A CN 201711168566A CN 107948702 B CN107948702 B CN 107948702B
Authority
CN
China
Prior art keywords
terminal
run
picture
party application
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711168566.5A
Other languages
English (en)
Other versions
CN107948702A (zh
Inventor
胡三根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN201711168566.5A priority Critical patent/CN107948702B/zh
Publication of CN107948702A publication Critical patent/CN107948702A/zh
Application granted granted Critical
Publication of CN107948702B publication Critical patent/CN107948702B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8352Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]

Abstract

本发明公开了一种应用程序状态的同步方法、装置、终端和存储介质,属于网络技术领域。所述方法包括:获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中,向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数,达到了能够令第二终端在播放直播画面的同时更新对应该直播画面的第三方应用程序的运行状态,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。

Description

应用程序状态的同步方法、装置、终端和存储介质
技术领域
本发明涉及网络技术领域,特别涉及一种应用程序状态的同步方法、装置、终端和存储介质。
背景技术
随着互联网技术以及多媒体技术的快速发展,直播已经成为一种常用的互动方式,通过直播可以使主播用户与观众用户直观地进行交流,提升了趣味性,极大地丰富了人们的生活。
直播过程中,如主播直播的是运行在主播终端上的第三方应用程序(如游戏),则主播终端分别获取第三方应用程序的状态数据和主播用户的多媒体数据,根据采集的数据分别生成媒体流,推送给直播服务器,观众终端从直播服务器拉取媒体流,并对拉取的媒体流进行解码,当得到主播用户的游戏的状态数据时,在观众终端上更新游戏的状态;当得到多媒体数据时,在观众终端上播放该多媒体数据。
在实现本发明实施例的过程中,发明人发现相关技术至少存在以下问题:若第三方应用程序的状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到第三方应用程序的状态和主播用户的影像不同步,导致播放效果差。
发明内容
本发明实施例提供了一种应用程序状态的同步方法、装置、终端和存储介质,可以用于解决若从游戏状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到第三方应用程序的状态和主播用户的影像不同步的问题,所述技术方案如下:
在一种可能的实现方式中,本发明实施例提供一种应用程序状态的同步方法,所述方法包括:
获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备实时采集的画面;
将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,包括:
监控运行在所述第一终端上的第三方应用程序接收的操作;
当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
可选地,所述将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中,包括:
根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
在所述数据字段位置中添加所述至少一帧直播画面;
在所述拓展字段位置中添加所述目标操作信息。
可选地,所述方法还包括:
在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
在另一种可能的实现方式中,本发明实施例提供一种应用程序状态的同步方法,所述方法包括:
接收传输数据包,所述传输数据包包含目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作;
从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,包括:
获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
在一种可能的实现方式中,本发明实施例提供一种应用程序状态的同步装置,所述装置包括:
获取模块,用于获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备实时采集的画面;
第一添加模块,用于将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
推送模块,用于向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述获取模块,包括:
操作监控单元,用于监控运行在所述第一终端上的第三方应用程序接收的操作;
信息获取单元,用于当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
可选地,所述第一添加模块,包括:
位置获取单元,用于根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
第一添加单元,用于在所述数据字段位置中添加所述至少一帧直播画面;
第二添加单元,用于在所述拓展字段位置中添加所述目标操作信息。
可选地,所述装置还包括:
第二添加模块,用于在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
封装模块,用于在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
在另一种可能的实现方式中,本发明实施例提供一种应用程序状态的同步装置,所述装置包括:
接收模块,用于接收传输数据包,所述传输数据包包含目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作;
解析模块,用于从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
处理模块,用于播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述处理模块,包括:
标识获取单元,用于获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
参数确定单元,用于根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
状态更新单元,用于根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
本发明实施例还提供一种终端,终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述指令、所述程序、所述代码集或所述指令集由所述处理器加载并执行以实现上述任意一种应用程序状态的同步方法。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述指令、所述程序、所述代码集或所述指令集由处理器加载并执行以实现上述任意一种应用程序状态的同步方法。
本发明实施例提供的技术方案带来的有益效果是:
通过从第一终端中获取第三方应用程序的状态信息和对应于状态信息的至少一帧直播画面,并将状态信息和至少一帧直播画面调价到传输数据包中,向至少一个第二终端推送该传输数据包,以便至少一个第二终端在播放至少一帧直播画面的同时,根据状态信息更新至少一个第二终端中运行的第三方应用程序的运行状态。由于状态信息和相对应的至少一帧直播画面中处于同于传输数据包,因此,第二终端可以在至少一帧直播画面播放的同时对应更新第三方应用程序的运行状态,达到了能够令第二终端在播放直播画面的同时更新对应该直播画面的第三方应用程序的运行状态,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明各个实施例所提供的应用程序状态的同步方法的实施环境示意图;
图2是本发明实施例示出的一种应用程序状态的同步方法的流程图;
图3是本发明实施例示出的另一种应用程序状态的同步方法的流程图;
图4是本发明实施例示出的另一种应用程序状态的同步方法的流程图;
图5是本发明实施例示出的一种应用程序状态的同步装置的框图;
图6是本发明实施例示出的一种应用程序状态的同步装置的框图;
图7示出了本发明一个示例性实施例提供的终端700的结构框图。
通过上述附图,已示出本发明明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本发明构思的范围,而是通过参考特定实施例为本领域技术人员说明本发明的概念。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明各个实施例所提供的应用程序状态的同步方法的实施环境示意图,该实施环境可以包括网络服务器11、第一终端12和第二终端13。网络服务器11和第一终端12以及第二终端13之间可以通过有线网络或无线网络的方式建立连接。需要说明的是,在本发明的应用场景中,第一终端12既可以是直播间的房主所使用的终端,也可以是参与第三方应用程序在线协同处理的用户所使用的终端。例如,当第三方应用程序是网络直播间提供的在线多人游戏时,第一终端12既可以是直播间的房主所使用的终端,也可以是参与该在线多人游戏的玩家的终端。
相应地,第二终端13可以是参与第三方应用程序在线协同处理的用户所使用的终端中,除所述第一终端12以外的其它终端,也可以是收看该直播间协同处理该第三方应用程序的直播内容的普通观众所使用的终端。可选地,在本方案的应用场景中,至少存在一个第二终端13。
可选地,该第一终端12可以是手机、个人电脑(Personal Computer,PC)、平板电脑、膝上型电脑或可穿戴智能设备等。第一终端12中安装有摄像头或者其它图像采集设备,可以用于采集第一终端12的使用者的影像,例如直播间房主的影像或者采集参与第三方应用程序在线协同处理的用户的影像。
可选地,第二终端13也可以是手机、个人电脑(Personal Computer,PC)、平板电脑、膝上型电脑或可穿戴智能设备等。第二终端13中运行有播放第一终端12发送流媒体数据的播放器,使得第二终端13能够从网络服务器器11中拉取多媒体流后播放。
网络服务器11可以是单一的服务器或服务器集群,该网络服务器11可以是直播平台的服务器,用于向用户终端12提供直播数据,在本方案中,该直播数据通过传输数据包的形式提供。可选地,所述传输数据包是符合一预定的数据传输协议的数据传输单元,该预定的数据传输协议可以是RTMP(Real Time Messaging Protocol,实时消息传输协议)、HLS(HTTP Live Streaming,超文本传输协议流媒体直播)协议或HTTP-FLV(HTTP FlashVideo,超文本传输协议流媒体)协议中任意一种协议。可选地,预定的数据传输协议还可以是其它指定的数据传输协议,本方案不作限定。
图2是本发明实施例示出的一种应用程序状态的同步方法的流程图。该应用程序状态的同步方法可以应用于图1所示实施环境中的第一终端12中,该应用程序状态的同步方法可以包括如下几个步骤:
步骤201,获取目标操作信息和对应于目标操作信息的至少一帧直播画面,目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作,至少一帧直播画面是第一终端的图像采集设备实时采集的画面。
步骤202,将目标操作信息和至少一帧直播画面添加到同一个传输数据包中。
步骤203,向至少一个第二终端推送传输数据包,以便至少一个第二终端在播放至少一帧直播画面的同时,根据目标操作信息更新至少一个第二终端中运行的第三方应用程序中与目标操作相关的对象的运行参数。
综上所述,本发明实施例提供的应用程序状态的同步方法,通过获取目标存储信息和对于和对应于目标操作信息的至少一帧直播画面,将目标操作信息和至少一帧直播画面添加到同一个传输数据包中,向至少一个第二终端推送传输数据包,以便至少一个第二终端在播放至少一帧直播画面的同时,根据目标操作信息更新至少一个第二终端中运行的第三方应用程序中与目标操作相关的对象的运行参数。解决了相关技术中若从游戏状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到游戏的状态和主播用户的影像不同步的问题,达到了能够令第二终端在播放直播画面的同时更新对应该直播画面的第三方应用程序的运行状态,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
图3是本发明实施例示出的另一种应用程序状态的同步方法的流程图。该应用程序状态的同步方法可以应用于图1所示实施环境中的第二终端13中。该应用程序状态的同步方法可以包括如下几个步骤:
步骤301,接收传输数据包,传输数据包包含目标操作信息和对应于目标操作信息的至少一帧直播画面,目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作。
步骤302,从传输数据包中解析目标操作信息和至少一帧直播画面。
步骤303,播放至少一帧直播画面,并同时根据目标操作信息更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。
综上所述,本发明实施例提供的应用程序状态的同步方法,通过接收传输数据包,从传输数据包中解析目标操作信息和至少一帧直播画面,播放至少一帧直播画面,并同时根据目标操作信息更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。解决了相关技术中若从游戏状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到第三方应用程序的状态和主播用户的影像不同步的问题,达到了第二终端在播放第一终端提供的直播画面时,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
图4是本发明实施例示出的另一种应用程序状态的同步方法的流程图。该应用程序状态的同步方法可以由图1所示实施环境中的第一终端12和第二终端13配合完成。该应用程序状态的同步方法可以包括如下几个步骤:
步骤401,第一终端监控运行在第一终端上的第三方应用程序接收的操作。
在本发明实施例中,第一终端中运行有多人参与的第三方应用程序。该第三方应用程序可以是多人在线游戏、多人在线协同文档编辑软件或多人在线协同图像(影像)编辑工具等一系列需要多位用户在线协同操作的应用程序。在本方案中,由于第三方应用程序在第一终端中的某些操作需要和其它在线使用该第三方应用的用户共享。因此,第一终端需要监控运行在本端中第三方应用程序接收的操作。
可选地,第一终端中运行的第三方应用程序接收的操作可以是针对某个具体的对象的一个操作指令。例如,若第三方应用程序是多人在线游戏时,该操作可以是针对一个游戏人物的控制指令、针对一个游戏控件的触发操作、针对一个游戏数据的更改操作等等。
步骤402,第一终端将运行在第一终端中的第三方应用程序接收到的操作与目标操作进行匹配。
在本发明实施例中,第一终端中可以安装有直播客户端,第三方应用程序也可以在直播客户端中运行,成为一个客户端上搭载的小程序,或者,第三方应用程序也可以独立运行。当第三方应用程序是在直播客户端中运行的小程序时,直播客户端中可以预先存储配置文件,配置文件中存储有若干个目标操作。可选地,当第三方应用程序是相对直播客户端在第一终端中独立运行的应用程序时,第一终端可以在本地预先存储上述配置文件,以便于第一终端将在第三方应用程序上接收到的操作,与目标操作进行匹配。
可选地,目标操作是用于指示改变第三方应用程序中预设的参数的操作。具体来讲,目标操作可以是程序开发人员预先指定的操作,例如当第三方应用程序是多人在线游戏时,该指定操作可以是针对游戏人物的控制指令或针对一个游戏按钮的触发指令。相应的,用户在第三方应用程序中对用户界面(UI,User Interface)的界面显示图案的设置,则不会被认为是目标操作。
步骤403,当运行在第一终端上的第三方应用程序接收到的操作是目标操作时,第一终端获取目标操作信息,以及第一终端的图像采集设备在第三方应用程序接收到目标操作的时刻采集到的画面。
在本发明实施例中,目标操作通常是影响其他在线使用第三方应用程序的操作,例如多人在线抢答游戏中的抢答操作,若第一终端中运行的第三方应用程序接收到该操作后,必然会影响其他终端中用户的操作,其他终端中的第三方应用就不能够在相应抢答操作。相应的,目标操作信息是用于指示目标操作的信息,可以是根据目标操作生成的指令,也可以是用于表明目标操作的标识信息。例如,标识信息0x0030,可以用于表示第一终端中运行的第三方应用承受接收到该标识对应的目标操作。
在本发明实施例中,第一终端在获取目标操作的目标操作信息时,会在第三方应用程序接收到目标操作的时刻,通过第一终端的图像采集设备采集画面。例如,多人在线抢答游戏中第一终端在接收到用户的抢答操作时,获取该抢答操作对应的抢答指令并同时,从接收到该抢答操作的时刻开始通过该第一终端的图像采集设备采集至少一帧直播画面,该直播画面可以是包含作出该抢答操作的用户的实时影像。
步骤404,第一终端根据传输数据包对应的传输协议,获取传输数据包的数据字段位置和拓展字段位置。
在本发明实施例中,传输数据包对应的传输协议是在第一终端传输该传输数据包前,由直播客户端所选定的一个指定的协议。第一终端为了获取用于传输至少一帧直播画面的数据字段位置,以及为了获取用于传输目标操作信息的拓展字段位置,第一终端首先需要根据传输数据包对应的传输协议,根据该协议规范获取数据字段位置和拓展字段位置在一个传输数据包中的相对位置。
步骤405,第一终端在数据字段位置中添加至少一帧直播画面。
在本发明实施例中,第一终端在获取到数据字段位置和拓展字段位置后,便可以开始构建传输数据包。首先,第一终端可以将至少一帧直播画面添加到数据字段位置中。需要说明的是,本方案中添加到数据字段位置中的直播画面的帧数可以在传输数据包大小的限制下自由选择。例如,传输数据包能够容纳预设像素量的直播画面是72帧,则该直播画面的帧数可以根据需要在小于72的正整数中选择。可选地,为了提高用户的视觉体验,一个传输数据包中的直播画面的帧数应当不影响用户的正常观看。
步骤406,第一终端在拓展字段位置中添加目标操作信息。
在传输数据中成功地添加了至少一帧直播画面后,第一终端将继续添加目标操作信息。需要说明的是,该目标操作信息是添加到拓展字段位置中的信息。由于一个传输数据包是信息传输的最小单位,因此,在一种可能的实现方式中,第一终端添加到同一传输数据包中的至少一帧直播画面和对应的目标操作信息会被其它设备同时获取到。在另一种可能的实现方式中,其他设备在没有获取到该传输数据包时,将在获取不到目标操作信息的同时也获取不到对应于该目标操作信息的至少一帧直播画面。
可见,通过本方案将目标操作信息和对应的至少一帧直播画面添加到同一个传输数据包的处理方式,能够保证其他设备在获取到目标操作信息的同时,获取到对应的至少一帧直播画面。
步骤407,第一终端在拓展字段位置的开头处增添目标识别字段,并封装传输数据包。
在本发明实施例中,第一终端可以在拓展字段位置的开头处增添目标识别字段,该目标识别字段用于表示拓展字段位置中存在目标操作信息,以便读取传输数据包的其他设备能够辨别出该目标操作信息。在本发明实施例中,第一终端还能够检测拓展字段位置的开头处中是否增添了目标识别字段,当检测到拓展字段位置的开头处中增添了目标识别字段后,第一终端封装传输数据包。
可选地,当预定的数据传输协议是RTMP时,该目标识别字段可以是十六进制的字符串,比如0x05000000。
步骤408,第一终端向至少一个第二终端推送传输数据包。
相应的,第二终端接收传输数据包,传输数据包包含目标操作信息和对应于目标操作信息的至少一帧直播画面,目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作。
需要说明的是,在一种能够实现的应用场景中,第一终端向至少一个第二终端推动的传输数据包,首先被推送到网络服务器中,网络服务器作为中转设备,再将该传输数据包推送到至少一个第二终端中。
在另一种能够实现的应用场景中,第一终端能够通过路由等设备将传输数据包推送到至少一个第二终端中。
步骤409,第二终端从传输数据包中解析目标操作信息和至少一帧直播画面。
在本发明实施例中,第二终端在接收到传输数据包中,即第二终端在拉流成功后,将实时读取该传输数据包中的数据,将该传输数据包解析并获取目标操作信息和至少一帧直播画面。可选地,第二终端可以通过目标识别字段来确定目标操作信息,当第二终端在传输数据包中检测到目标识别字段后,第二终端将拓展字段中位于该目标识别字段后的字符串,确定为目标操作信息。
步骤410,第二终端播放至少一帧直播画面,并同时根据目标操作信息更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。
在本发明实施例中,第二终端将在屏幕中通过直播客户端或者本地的播放器,播放该至少一帧直播画面。在播放该至少一帧直播画面的同时,第二终端将根据目标操作信息更新第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。需要说明的是,与目标操作相关的对象可以是一个操作按钮、一个虚拟的游戏人物、一个可控的游戏对象、一个表格的单元格、一个图像的一个图像层等等第三方应用程序中与目标操作相关的对象。相应的,上述对象的运行参数可以是可编辑对象是否可以被编辑的状态、游戏人物所在虚拟空间的位置和状态属性、表格单元格中的数值、图像的图像层的色彩数值等等。
可选地,由于第三方应用程序分别在第一终端和至少一个第二终端中都由相应的客户端予以运行,因此,各个终端之间为了区别互相的操作,通过将各个终端上运行的第三方应用程序添加对应的用户标识,以确定具体的操作的发出者。在此基础上,步骤410中,根据目标操作信息更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数的操作,可以通过步骤(1)至步骤(3)来实现。
步骤(1),第二终端获取运行在第二终端中的第三方应用程序对应的可控对象的状态标识。
在本发明实施例中,第三方应用程序中对应的可控对象的状态标识用于表示在当前终端中该可控对象的状态,例如,第二终端能够控制的对象包括对象m和对象n,该对象的状态标识可以指示对象m和对象n是否处于可控状态。
可选地,第一终端和至少一个第二终端能够控制的可控对象将会根据用户标识的不同而不同。例如,当第三方应用程序是猜歌名游戏时,当第一终端是玩家A的终端,第二终端是直播间房主的终端、玩家B和玩家C的终端,直播间房主的终端的可控对象是“邀请”按钮和“踢出”按钮,用于邀请新的玩家或者踢出已有的玩家,玩家的终端的可控对象是歌名输入文本框和“抢答”按钮。在本步骤中,第二终端将获取运行在本端中的第三方应用程序对应的可控对象的状态标识。例如,玩家B的第二终端将获取本端中用户标识B对应的可控对象歌名输入文本框和“抢答”按钮的状态,比如是可编辑状态和可点击状态。
步骤(2),第二终端根据可控对象的状态标识和目标操作信息,确定运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。
基于上述的例子,当玩家B的终端(第二终端)接收到玩家A的终端(第一终端)推送的传输数据包时,第二终端还将根据用户标识B对应的可控对象歌名输入文本框的状态标识(可编辑状态)和“抢答”按钮的状态标识(可点击状态),以及目标操作信息(玩家A的终端中运行的第三方应用程序接收到点击“抢答”按钮的操作),第二终端将确定运行在玩家B的终端中的第三方应用程序中的“抢答”按钮变为不可点击状态,歌名输入文本框变为不可编辑状态,即运行参数指示为不可点击状态和不可编辑状态。
步骤(3),第二终端根据确定的运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数,更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行状态。
基于上述的例子,第二终端将在确定运行参数后,更新第二终端中的与目标操作相关的对象的运行状态。比如,玩家B的终端中的第三方应用程序中的“抢答”按钮变为不可点击状态,歌名输入文本框变为不可编辑状态。
综上所述,本发明实施例公开的应用程序状态的同步方法,通过第一终端将获取到的目标操作信息和对应的至少一帧直播画面添加到同一个传输数据包中,并在第二终端接收到该传输数据包后,在播放至少一帧直播画面的同时,根据目标操作信息关系至少一个第二终端中运行的第三方应用程序中与目标操作相关的对象的运行参数,达到了能够令第二终端在播放直播画面的同时更新对应该直播画面的第三方应用程序的运行状态,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
下述为本公开装置实施例,可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节,请参照本公开方法实施例。
图5是本发明实施例示出的一种应用程序状态的同步装置的框图,该应用程序状态的同步装置可以通过软件、硬件或者两者的结合实现成为图1所示实施环境中的第一终端的部分或者全部。该应用程序状态的同步装置500可以包括:获取模块510、第一添加模块520和推送模块530。
获取模块510,用于获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备实时采集的画面;
第一添加模块520,用于将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
推送模块530,用于向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,获取模块510,包括:操作监控单元511和信息获取单元512。
操作监控单元511,用于监控运行在所述第一终端上的第三方应用程序接收的操作;
信息获取单元512,用于当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
可选地,第一添加模块520,包括:位置获取单元521、第一添加单元522和第二添加单元523。
位置获取单元521,用于根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
第一添加单元522,用于在所述数据字段位置中添加所述至少一帧直播画面;
第二添加单元523,用于在所述拓展字段位置中添加所述目标操作信息。
可选地,该应用程序状态的同步装置500还可以包括:第二添加模块540和封装模块550。
第二添加模块540,用于在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
封装模块550,用于在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
综上所述,本发明实施例提供的应用程序状态的同步装置,通过获取目标存储信息和对于和对应于目标操作信息的至少一帧直播画面,将目标操作信息和至少一帧直播画面添加到同一个传输数据包中,向至少一个第二终端推送传输数据包,以便至少一个第二终端在播放至少一帧直播画面的同时,根据目标操作信息更新至少一个第二终端中运行的第三方应用程序中与目标操作相关的对象的运行参数。解决了相关技术中若从游戏状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到游戏的状态和主播用户的影像不同步的问题,达到了能够令第二终端在播放直播画面的同时更新对应该直播画面的第三方应用程序的运行状态,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
图6是本发明实施例示出的一种应用程序状态的同步装置的框图,该应用程序状态的同步装置可以通过软件、硬件或者两者的结合实现成为图1所示实施环境中的第二终端的部分或者全部。该应用程序状态的同步装置600可以包括:接收模块610、解析模块620和处理模块630。
接收模块610,用于接收传输数据包,所述传输数据包包含目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作;
解析模块620,用于从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
处理模块630,用于播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,处理模块630,包括:标识获取单元631、参数确定单元632和状态更新单元633。
标识获取单元631,用于获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
参数确定单元632,用于根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
状态更新单元633,用于根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
综上所述,本发明实施例提供的应用程序状态的同步装置,通过接收传输数据包,从传输数据包中解析目标操作信息和至少一帧直播画面,播放至少一帧直播画面,并同时根据目标操作信息更新运行在第二终端中的第三方应用程序中与目标操作相关的对象的运行参数。解决了相关技术中若从游戏状态数据和主播用户的多媒体数据没有被观众终端同时获取,则从观众终端上将看到第三方应用程序的状态和主播用户的影像不同步的问题,达到了第二终端在播放第一终端提供的直播画面时,令第三方应用程序的运行状态和直播画面同步,提高了直播内容的展示效果。
图7示出了本发明一个示例性实施例提供的终端700的结构框图。该终端700可以是便携式移动终端,比如:智能手机、平板电脑、MP3播放器(Moving Picture ExpertsGroup Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端700还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端700包括有:处理器701和存储器702。
处理器701可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器701可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器701也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器701可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器701还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器702可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器702还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器702中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器701所执行以实现本申请中方法实施例提供的应用程序状态的同步方法。
在一些实施例中,终端700还可选包括有:外围设备接口703和至少一个外围设备。处理器701、存储器702和外围设备接口703之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口703相连。具体地,外围设备包括:射频电路704、触摸显示屏705、摄像头706、音频电路707、定位组件708和电源709中的至少一种。
外围设备接口703可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器701和存储器702。在一些实施例中,处理器701、存储器702和外围设备接口703被集成在同一芯片或电路板上;在一些其他实施例中,处理器701、存储器702和外围设备接口703中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路704用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路704通过电磁信号与通信网络以及其他通信设备进行通信。射频电路704将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路704包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路704可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路704还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏705用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏705是触摸显示屏时,显示屏705还具有采集在显示屏705的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器701进行处理。此时,显示屏705还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏705可以为一个,设置终端700的前面板;在另一些实施例中,显示屏705可以为至少两个,分别设置在终端700的不同表面或呈折叠设计;在再一些实施例中,显示屏705可以是柔性显示屏,设置在终端700的弯曲表面上或折叠面上。甚至,显示屏705还可以设置成非矩形的不规则图形,也即异形屏。显示屏705可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件706用于采集图像或视频。可选地,摄像头组件706包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件706还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路707可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器701进行处理,或者输入至射频电路704以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端700的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器701或射频电路704的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路707还可以包括耳机插孔。
定位组件708用于定位终端700的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件708可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源709用于为终端700中的各个组件进行供电。电源709可以是交流电、直流电、一次性电池或可充电电池。当电源709包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端700还包括有一个或多个传感器710。该一个或多个传感器710包括但不限于:加速度传感器711、陀螺仪传感器712、压力传感器713、指纹传感器714、光学传感器715以及接近传感器716。
加速度传感器711可以检测以终端700建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器711可以用于检测重力加速度在三个坐标轴上的分量。处理器701可以根据加速度传感器711采集的重力加速度信号,控制触摸显示屏705以横向视图或纵向视图进行用户界面的显示。加速度传感器711还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器712可以检测终端700的机体方向及转动角度,陀螺仪传感器712可以与加速度传感器711协同采集用户对终端700的3D动作。处理器701根据陀螺仪传感器712采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器713可以设置在终端700的侧边框和/或触摸显示屏705的下层。当压力传感器713设置在终端700的侧边框时,可以检测用户对终端700的握持信号,由处理器701根据压力传感器713采集的握持信号进行左右手识别或快捷操作。当压力传感器713设置在触摸显示屏705的下层时,由处理器701根据用户对触摸显示屏705的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器714用于采集用户的指纹,由处理器701根据指纹传感器714采集到的指纹识别用户的身份,或者,由指纹传感器714根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器701授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器714可以被设置终端700的正面、背面或侧面。当终端700上设置有物理按键或厂商Logo时,指纹传感器714可以与物理按键或厂商Logo集成在一起。
光学传感器715用于采集环境光强度。在一个实施例中,处理器701可以根据光学传感器715采集的环境光强度,控制触摸显示屏705的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏705的显示亮度;当环境光强度较低时,调低触摸显示屏705的显示亮度。在另一个实施例中,处理器701还可以根据光学传感器715采集的环境光强度,动态调整摄像头组件706的拍摄参数。
接近传感器716,也称距离传感器,通常设置在终端700的前面板。接近传感器716用于采集用户与终端700的正面之间的距离。在一个实施例中,当接近传感器716检测到用户与终端700的正面之间的距离逐渐变小时,由处理器701控制触摸显示屏705从亮屏状态切换为息屏状态;当接近传感器716检测到用户与终端700的正面之间的距离逐渐变大时,由处理器701控制触摸显示屏705从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图7中示出的结构并不构成对终端700的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本发明实施例还提供一种计算机可读存储介质,该存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述指令、所述程序、所述代码集或所述指令集由处理器加载并执行以实现应用程序状态的同步装置执行上述实施例提供应用程序状态的同步方法。在一种可能实现的方式中,例如,该方法包括:
获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备实时采集的画面;
将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,包括:
监控运行在所述第一终端上的第三方应用程序接收的操作;
当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
可选地,所述将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中,包括:
根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
在所述数据字段位置中添加所述至少一帧直播画面;
在所述拓展字段位置中添加所述目标操作信息。
可选地,所述方法还包括:
在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
在另一种可能实现的方式中,例如,该方法包括:
接收传输数据包,所述传输数据包包含目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在第一终端上的第三方应用程序的目标操作;
从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
可选地,所述根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,包括:
获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
在本发明中,术语“第一”和“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个模块或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (14)

1.一种应用程序状态的同步方法,其特征在于,所述方法包括:
获取第一终端上的目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在所述第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备在所述第三方应用接收到所述目标操作时实时采集的画面;
将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
2.根据权利要求1所述的方法,其特征在于,所述获取目标操作信息和对应于所述目标操作信息的至少一帧直播画面,包括:
监控运行在所述第一终端上的第三方应用程序接收的操作;
当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
3.根据权利要求1所述的方法,其特征在于,所述将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中,包括:
根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
在所述数据字段位置中添加所述至少一帧直播画面;
在所述拓展字段位置中添加所述目标操作信息。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
5.一种应用程序状态的同步方法,其特征在于,所述方法包括:
接收传输数据包,所述传输数据包包含第一终端上的目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在所述第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备在所述第三方应用接收到所述目标操作时实时采集的画面;
从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
6.根据权利要求5所述的方法,其特征在于,所述根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,包括:
获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
7.一种应用程序状态的同步装置,其特征在于,所述装置包括:
获取模块,用于获取第一终端上的目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在所述第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备在所述第三方应用接收到所述目标操作时实时采集的画面;
第一添加模块,用于将所述目标操作信息和所述至少一帧直播画面添加到同一个传输数据包中;
推送模块,用于向至少一个第二终端推送所述传输数据包,以便所述至少一个第二终端在播放所述至少一帧直播画面的同时,根据所述目标操作信息更新所述至少一个第二终端中运行的第三方应用程序中与所述目标操作相关的对象的运行参数。
8.根据权利要求7所述的装置,其特征在于,所述获取模块,包括:
操作监控单元,用于监控运行在所述第一终端上的第三方应用程序接收的操作;
信息获取单元,用于当运行在所述第一终端上的第三方应用程序接收到的操作是所述目标操作时,获取所述目标操作信息,以及所述第一终端的图像采集设备在所述第三方应用程序接收到所述目标操作的时刻采集到的画面。
9.根据权利要求7所述的装置,其特征在于,所述第一添加模块,包括:
位置获取单元,用于根据所述传输数据包对应的传输协议,获取所述传输数据包的数据字段位置和拓展字段位置;
第一添加单元,用于在所述数据字段位置中添加所述至少一帧直播画面;
第二添加单元,用于在所述拓展字段位置中添加所述目标操作信息。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
第二添加模块,用于在所述拓展字段位置的开头处增添目标识别字段,所述目标识别字段用于指示所述拓展字段位置中存在所述目标操作信息;
封装模块,用于在所述拓展字段位置的开头处增添了所述目标识别字段之后,封装所述传输数据包。
11.一种应用程序状态的同步装置,其特征在于,所述装置包括:
接收模块,用于接收传输数据包,所述传输数据包包含第一终端上的目标操作信息和对应于所述目标操作信息的至少一帧直播画面,所述目标操作信息用于指示针对运行在所述第一终端上的第三方应用程序的目标操作,所述至少一帧直播画面是所述第一终端的图像采集设备在所述第三方应用接收到所述目标操作时实时采集的画面;
解析模块,用于从所述传输数据包中解析所述目标操作信息和所述至少一帧直播画面;
处理模块,用于播放所述至少一帧直播画面,并同时根据所述目标操作信息更新运行在第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数。
12.根据权利要求11所述的装置,其特征在于,所述处理模块,包括:
标识获取单元,用于获取运行在所述第二终端中的第三方应用程序对应的可控对象的状态标识;
参数确定单元,用于根据可控对象的状态标识和所述目标操作信息,确定运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数;
状态更新单元,用于根据确定的运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行参数,更新运行在所述第二终端中的第三方应用程序中与所述目标操作相关的对象的运行状态。
13.一种终端,其特征在于,所述终端包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述指令、所述程序、所述代码集或所述指令集由所述处理器加载并执行以实现如权利要求1至4任一权利要求所述的应用程序状态的同步方法中所执行的操作,或者,以实现如权利要求5或6所述的应用程序状态的同步方法中所执行的操作。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述指令、所述程序、所述代码集或所述指令集由处理器加载并执行以实现如权利要求1至4任一权利要求所述的应用程序状态的同步方法中所执行的操作,或者,以实现如权利要求5或6所述的应用程序状态的同步方法中所执行的操作。
CN201711168566.5A 2017-11-21 2017-11-21 应用程序状态的同步方法、装置、终端和存储介质 Active CN107948702B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711168566.5A CN107948702B (zh) 2017-11-21 2017-11-21 应用程序状态的同步方法、装置、终端和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711168566.5A CN107948702B (zh) 2017-11-21 2017-11-21 应用程序状态的同步方法、装置、终端和存储介质

Publications (2)

Publication Number Publication Date
CN107948702A CN107948702A (zh) 2018-04-20
CN107948702B true CN107948702B (zh) 2019-09-03

Family

ID=61930537

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711168566.5A Active CN107948702B (zh) 2017-11-21 2017-11-21 应用程序状态的同步方法、装置、终端和存储介质

Country Status (1)

Country Link
CN (1) CN107948702B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109040851B (zh) * 2018-08-06 2021-02-12 广州方硅信息技术有限公司 基于直播进行游戏的延迟处理方法、系统、服务器及计算机可读存储介质
CN108989830A (zh) * 2018-08-30 2018-12-11 广州虎牙信息科技有限公司 一种直播方法、装置、电子设备及存储介质
CN110225384A (zh) * 2019-06-18 2019-09-10 北京字节跳动网络技术有限公司 状态消息的推送方法、交互内容的切换方法、装置及设备
CN110602529B (zh) * 2019-09-12 2021-12-10 广州虎牙科技有限公司 直播监控方法、装置、电子设备和机器可读存储介质
CN110996088B (zh) * 2019-12-09 2021-06-29 Oppo广东移动通信有限公司 视频处理方法及相关装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104796455A (zh) * 2015-03-12 2015-07-22 安徽讯飞皆成软件技术有限公司 跨平台的多屏互动方法、装置及系统
CN105791958A (zh) * 2016-04-22 2016-07-20 北京小米移动软件有限公司 游戏直播方法及装置
CN106210791A (zh) * 2016-05-17 2016-12-07 北京畅游天下网络技术有限公司 一种信息同步方法及系统
CN107281756A (zh) * 2017-05-05 2017-10-24 武汉斗鱼网络科技有限公司 一种组队游戏的方法和装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10251023B2 (en) * 2016-04-29 2019-04-02 In-Telligent Properties Inc. Notification and communication system using geofencing to identify members of a community

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104796455A (zh) * 2015-03-12 2015-07-22 安徽讯飞皆成软件技术有限公司 跨平台的多屏互动方法、装置及系统
CN105791958A (zh) * 2016-04-22 2016-07-20 北京小米移动软件有限公司 游戏直播方法及装置
CN106210791A (zh) * 2016-05-17 2016-12-07 北京畅游天下网络技术有限公司 一种信息同步方法及系统
CN107281756A (zh) * 2017-05-05 2017-10-24 武汉斗鱼网络科技有限公司 一种组队游戏的方法和装置

Also Published As

Publication number Publication date
CN107948702A (zh) 2018-04-20

Similar Documents

Publication Publication Date Title
CN107948702B (zh) 应用程序状态的同步方法、装置、终端和存储介质
CN104967902B (zh) 视频分享方法、装置及系统
CN107959860B (zh) 显示直播列表的方法和装置
CN109286852B (zh) 直播间的竞赛方法及装置
CN108769814A (zh) 视频互动方法、装置及可读介质
CN109167950A (zh) 视频录制方法、视频播放方法、装置、设备及存储介质
CN108401124A (zh) 视频录制的方法和装置
CN107967706A (zh) 多媒体数据的处理方法、装置及计算机可读存储介质
CN110061900B (zh) 消息显示方法、装置、终端及计算机可读存储介质
CN109729411A (zh) 直播互动方法及装置
CN108848394A (zh) 视频直播方法、装置、终端及存储介质
CN109660855A (zh) 贴纸显示方法、装置、终端及存储介质
CN109040297A (zh) 用户画像生成方法及装置
CN110213608A (zh) 显示虚拟礼物的方法、装置、设备及可读存储介质
CN109413342A (zh) 音视频处理方法、装置、终端及存储介质
CN109920065A (zh) 资讯的展示方法、装置、设备及存储介质
CN109600678A (zh) 信息展示方法、装置及系统、服务器、终端、存储介质
CN109068081A (zh) 视频生成方法、装置、电子设备及存储介质
CN109151044A (zh) 信息推送方法、装置、电子设备及存储介质
CN109803154A (zh) 棋类比赛的直播方法、设备及存储介质
CN109525883A (zh) 互动特效显示方法、装置、电子设备、服务器及存储介质
CN108419113A (zh) 字幕显示方法及装置
CN109191549A (zh) 显示动画的方法及装置
CN109302385A (zh) 多媒体资源分享方法、装置及存储介质
CN110297917A (zh) 直播方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant