CN115378915B - 数据共享方法及电子设备 - Google Patents

Abstract

本申请提供一种数据共享方法及电子设备。该方法应用于远程会议系统中的服务器，包括：在目标会议进行过程中，在至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，服务器接收至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；从至少一个第一多媒体数据流中提取全部第一音频数据流，并基于全部第一音频数据流得到目标音频数据流，向第一终端发送目标音频数据流。实施本申请，可以减少向第一终端传输的数据量，提高远程会议流畅度。

Description

数据共享方法及电子设备

技术领域

本申请涉及计算机技术领域，尤其涉及一种数据共享方法及电子设备。

背景技术

远程会议能利用现代化的通讯手段，实现跨区域召开会议的目的。现有的远程会议软件可以在多个终端上各自运行，使得多个用户通过终端加入同一会议组中，实时共享语音、视频、文档等数据。而参与远程会议的用户所处的实际场景可能存在差异，例如，这些场景包括办公室场景、家庭场景或室外移动场景等。在室外移动场景中，用户终端所在的网络环境较复杂，可能导致实时共享的会议数据传输卡顿，影响远程会议的流畅度。

发明内容

为解决上述问题，本申请实施例公开了一种数据共享方法及电子设备，可以减少向第一终端传输的实时会议数据的数据量，提高远程会议的流畅度。

第一方面，本申请提供一种数据共享方法，所述方法应用于远程会议系统中的服务器，所述远程会议系统还包括至少两个终端，所述服务器分别与所述至少两个终端中的每个终端通信连接，所述至少两个终端通过所述服务器创建的虚拟空间进行目标会议，所述方法包括：

在所述目标会议过程中，在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；

从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流，向所述第一终端发送所述目标音频数据流。

在一种可能的实施例中，所述在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流之前，还包括：

确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，所述第一指示信息指示所述第一终端从当前时刻开始对所述目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求。

在一种可能的实施例中，所述用户场景信息包括用于衡量用户所处场景的通信质量的一类信息和用于衡量用户对所述目标会议的参与程度的二类信息，所述确定所述第一终端采集的用户场景信息满足所述目标条件，包括：

在所述一类信息满足第一条件，且所述二类信息满足第二条件的情况下，确定所述第一终端采集的用户场景信息满足所述目标条件，其中，所述一类信息包括终端位置移动速度和当前网络质量，所述二类信息包括用户在所述目标会议中的麦克风使用情况、摄像头使用情况、屏幕共享情况、文件上传情况和会议控制权限获得情况。

在一种可能的实施例中，所述确定所述第一终端采集的用户场景信息满足所述目标条件之前，还包括：

在所述当前时刻之前的第一时刻，确定所述第一终端对所述目标会议的多媒体数据流包括的视频数据流的接收需求高于或等于对音频数据流的接收需求；

向所述第一终端发送信息采集指令，所述信息采集指令用于指示所述第一终端采集所述用户场景信息。

在一种可能的实施例中，所述确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，包括：

获取所述第一终端采集的所述用户场景信息，确定所述用户场景信息满足所述目标条件；

向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

在一种可能的实施例中，所述确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，包括：

获取来自所述第一终端的第二指示信息，所述第二指示信息是所述第一终端在采集到的所述用户场景信息满足所述目标条件的情况下向所述服务器发送的；

向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

在一种可能的实施例中，所述向所述第一终端发送所述目标音频数据流之前，还包括：

获取来自所述第一终端的第三指示信息，所述第三指示信息指示所述第一终端需要接收所述目标会议的多媒体数据流包括的视频数据流中满足预设条件的图像帧；

从所述至少一个第一多媒体数据流包括的所有第一视频数据流中，实时提取满足所述预设条件的全部第一图像帧，并基于获得的所述全部第一图像帧得到目标图像帧；

所述方法还包括：

向所述第一终端发送所述目标图像帧。

在一种可能的实施例中，所述预设条件包括以下条件中的一项：所述图像帧包括目标标识、所述图像帧的内容包括目标信息、或所述图像帧在所述目标会议中的出现时刻与所述目标会议的开始时刻相差预设时长。

在一种可能的实施例中，在所述当前时刻之后的第二时刻获得的所述全部第一图像帧包括第一数量个第一图像帧，所述基于获得的所述全部第一图像帧得到目标图像帧，包括：

确定与所述第一数量对应的第一组合版式，并按照所述第一组合版式将所述第一数量个第一图像帧组合显示在同一图像中，得到所述目标图像帧。

第二方面，本申请提供一种数据共享装置，所述装置包括：

接收单元，用于在所述目标会议进行过程中，在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；

处理单元，用于从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流；

发送单元，用于向所述第一终端发送所述目标音频数据流。

第三方面，本申请提供一种电子设备，包括：存储器、处理器，其中所述存储器和所述处理器被相互可通信地连接；其中所述存储器存储有程序指令；所述程序指令被所述处理器执行时，使所述处理器执行如第一方面描述的方法。

第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序；当所述计算机程序在一个或多个处理器上运行时，执行如第一方面描述的方法。

第五方面，本申请实施例提供了一种计算机程序产品，其中，所述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，所述计算机程序可操作来使计算机执行如本申请实施例第一方面描述的方法。

本申请实施例中，在确定第一终端采集的用户场景信息满足目标条件的情况下，服务器确认第一终端对目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求，则从参与目标会议的至少一个第二终端上传的至少一个第一多媒体数据流中提取所有第一音频数据流，并基于这些第一音频数据流获得目标音频数据流后传输给第一终端。通过根据第一终端采集的用户场景信息来发现第一终端对实时传输的多媒体数据流包括的不同类型数据流的实际接收需求的差别，对其他终端上传的至少一个第一多媒体数据流进行特别处理后再发送给第一终端，可以实现主动识别参与会议的终端所处场景的特殊性，并适应性进行相应处理，减少向第一终端传输的实时会议数据的数据量，提高远程会议的流畅度。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍。

图1为本申请实施例提供的一种远程会议系统的结构示意图；

图2为本申请实施例提供的一种数据共享方法的流程示意图；

图3为本申请实施例提供的另一种数据共享方法的流程示意图；

图4为本申请实施例提供的一种数据共享方法的应用场景图；

图5为本申请实施例提供的一种数据共享装置的结构示意图；

图6为本申请实施例提供的一种电子设备的结构示意图。

具体实施方式

为了使本申请的目的、技术方案和优点更加清楚，下面结合附图对本发明作进一步详细描述。

本申请的说明书、权利要求书及附图中的术语“第一”和“第二”等仅用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备等，没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元等，或可选地还包括对于这些过程、方法、产品或设备等固有的其它步骤或单元。

在本文中提及的“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现上述短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员可以显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。

在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上，“至少两个(项)”是指两个或三个及三个以上，“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指这些项中的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”。

下面结合附图对本发明进行详细描述。

请参阅图1，图1为本申请实施例提供的一种远程会议系统的结构示意图。本申请提到的远程会议系统可以包括服务器和至少两个终端，而至少两个终端可以通过服务器创建的虚拟空间进行远程会议。该至少两个终端可以分别位于不同的地方或处于不同场景，例如，部分终端处于固定的室内场景如在办公室中或在家庭中等，而另一部分终端处于移动的室外场景如在高铁上或在汽车内等。如图1所示，以远程会议系统包括一个服务器101和三个终端102、103、104为例，其中，终端102处于室外移动场景，在本申请中可以称为第一终端，而终端103和终端104处于室内场景，因而在本申请中可以称为第二终端。该服务器101分别和每个终端通信连接，且服务器101创建虚拟空间以使得三个终端102、103、104利用该虚拟空间进行目标会议。可理解的，该服务器101可以是服务器集群，也可以是分布式部署的服务器，而终端102、终端103、终端104可以包括但不限于手机、平板电脑、笔记本电脑、上网本等电子设备。可理解的，图1所示的设备数量和形态用于举例，并不构成对本申请实施例的限定。本申请提供的数据共享方法可以应用于上述服务器101。

在如图1所示的远程会议系统中，终端102和终端103、终端104通过服务器101创建的虚拟空间进行目标会议。在目标会议进行的过程中，终端102、终端103和终端104各自均可以根据终端开启的信息获取权限如麦克风权限、摄像头权限和屏幕共享权限等，收集用户的实时语音、拍摄用户所在场景的实时画面或录制终端桌面上的共享画面等以生成多媒体数据流，并将生成的多媒体数据流实时上传到服务器101。服务器101接收这些多媒体数据流后，可以进行处理后再发送给除原先上传多媒体数据流的终端之外的其他终端，以实现多个终端在该目标会议中能实时共享语音、文档或视频等数据的目的。但由于参与会议的终端所处的实际场景存在区别，服务器101针对不同终端的会议数据传输速率可能不同。如终端102处于室外移动场景中，网络环境较复杂，可能导致实时共享的会议数据传输卡顿，影响远程会议的流畅度。

本申请提供一种数据分享方法，可以应用于如图1所示的远程会议系统中的服务器101。具体的，在上述目标会议进行过程中，在上述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，上述服务器接收该至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，该第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且该至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；从该至少一个第一多媒体数据流中提取全部第一音频数据流，并基于该全部第一音频数据流得到目标音频数据流，向该第一终端发送该目标音频数据流，从而可以在第一终端所处实际场景为室外移动场景时且采集的用户场景信息满足目标条件时，向第一终端传输其他终端上传的音频数据流而不传输其他终端上传的视频数据流，减少向第一终端发送的实时会议数据量，以提高远程会议的流畅度。

请参阅图2，图2为本申请实施例提供的一种数据共享方法的流程示意图，该数据共享方法可以包括以下步骤201-步骤202：

步骤201，在所述目标会议过程中，在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流。

其中，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流。

本申请实施例中，上述用户场景信息是在第一终端所处实际场景下采集到的，该用户场景信息满足目标条件可以表示第一终端当前所处场景属于室外移动场景这种特殊场景，需要服务器对目标会议中实时获取到的多媒体数据流进行处理后再传输给该第一终端以保证远程会议的流畅度。可理解的，上述视频数据流具体是指不含语音的视频画面(或视频图像)数据流，上述至少一个第二终端中的某个第二终端上传到服务器的第一多媒体数据流可以只包括第一音频数据流，也可以只包括第一视频数据流，还可以同时包括第一音频数据流和第一视频数据流，即单个第二终端可以传输实时语音、实时视频(指摄像头拍摄到的视频图像或屏幕共享获得的视频图像)或实时语音结合实时视频等数据。而在本申请中，至少有一个第二终端上传的第一多媒体数据流同时包括第一视频数据流和第一音频数据流，即服务器接收到至少一个包括实时语音和实时视频的会议数据。这种场景下，可以执行以下步骤202，以完成对目标会议中实时获取到的多媒体数据流的特殊处理，满足处于室外移动场景这种特殊场景的第一终端的会议需求。

在一种可能的实施例中，在服务器接收其他终端上传的多媒体数据流之前，即在步骤201中的所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流之前，还可以包括以下步骤：确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，所述第一指示信息指示所述第一终端从当前时刻开始对所述目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求。即服务器在确定上述第一终端采集的用户场景信息满足目标条件，且获得第一终端用于确认对视频数据流的接收需求低于对音频数据流的接收需求的第一指示信息时，才针对接收的多媒体数据流进行处理以降低传输给第一终端的实时会议数据的数据量。在此实施例中，先确定第一终端采集的用户场景信息满足目标条件，可以主动发现第一终端所处场景的特殊性，然后获取第一终端的第一指示信息，进一步获取第一终端的明确指示以确定是否针对该场景进行特殊处理，来满足用户需求，这样可以提醒用户在当前场景下可通过只听音频的方式来保证会议流畅度，给予用户提示和选择余地，保证良好的用户体验。

在一种可能的实施例中，上述用户场景信息可以包括用于衡量用户所处场景的通信质量的一类信息，且上述用户场景信息还可以包括用于衡量用户对所述目标会议的参与程度的二类信息，其中，该一类信息可以包括但不限于终端位置移动速度和当前网络质量，该二类信息可以包括但不限于用户在所述目标会议中的麦克风使用情况、摄像头使用情况、屏幕共享情况、文件上传情况和会议控制权限获得情况等。因而，上述确定所述第一终端采集的用户场景信息满足所述目标条件的过程，可以包括：在所述一类信息满足第一条件，且所述二类信息满足第二条件的情况下，确定所述第一终端采集的用户场景信息满足所述目标条件。该第一条件和第二条件可以是根据经验确定的，具体的，第一条件可以为：终端位置移动速度＞速度阈值A；或者，速度阈值B＜终端位置移动速度＜速度阈值A，且当前网络质量＜网络质量阈值C。而第二条件可以为以下5种信息中每种信息的一种可能状态的任意组合：

1)麦克风使用情况：①一直未开启麦克风；②当前时刻之前开启过麦克风但当前时刻麦克风已关闭，且麦克风使用时长占会议时长的比例小于D；③当前时刻之前开启过麦克风但当前时刻麦克风已关闭，且麦克风关闭时刻与当前时刻的时间差大于时长E。

2)摄像头使用情况：④一直未开启摄像头；⑤当前时刻之前开启过摄像头但当前时刻摄像头已关闭，且摄像头使用时长占会议时长的比例小于F。

3)屏幕共享情况：⑥一直未开启屏幕共享；⑦当前时刻之前开启过屏幕共享但当前时刻屏幕共享已关闭。

4)文件上传情况：⑧一直未上传任何文件；⑨当前时刻之前上传过文件，且最新的文件上传时间与当前时刻的时间差大于时长G；⑩当前时刻之前上传过文件，且上传的文件数量小于H。

5)会议控制权限获得情况：一直未获得过会议控制权限；/>当前时刻之前获得过会议控制权限，但当前时刻会议控制权限已转移给其他终端。

示例性的，第二条件可以为①④⑥⑧的组合，也可以为③④⑦⑨/>的组合，或者第二条件还可以为以上5种信息中某些特定信息的可能状态的组合，如为④⑥⑨/>的组合，或④⑥/>的组合，本申请不作限制，可以根据需要进行设置。可理解的，上述第一条件和第二条件的举例不构成对本申请的限定。在此实施例中，可以采集多种用户场景信息，并选择合适的条件作为目标条件来确定第一终端所处的场景是否需要特殊处理。通过以上多种用户场景信息的采集和检测，可以较清楚地确定第一终端处于怎样的场景，有利于及时和准确发现第一终端所处场景的特殊性。

而在确定所述第一终端采集的用户场景信息满足所述目标条件之前，还可以执行以下过程：在所述当前时刻之前的第一时刻，确定所述第一终端对所述目标会议的多媒体数据流包括的视频数据流的接收需求高于或等于对音频数据流的接收需求；向所述第一终端发送信息采集指令，所述信息采集指令用于指示所述第一终端采集所述用户场景信息。即当前时刻之前确定第一终端对目标会议中的视频数据流的接收需求不低于对音频数据流的接收需求，那么向第一终端发送信息采集指令，指示该第一终端采集上述用户场景信息，以确定第一终端是否处于室外移动场景，是否需要对传输给第一终端的多媒体数据流进行特殊处理(指按照步骤202进行处理)，从而满足第一终端的会议需求。在此实施例中，在确定第一终端对视频数据流的接收需求不低于对音频数据流的接收需求时向第一终端发送信息采集指令，有利于及时主动地发现第一终端所处场景是否发生改变，并在发生改变时尽快采取措施以保证会议流畅度，从而可以保证良好的用户体验。

进一步的，根据对第一终端采集的用户场景信息进行直接判断处理的实际执行主体的不同，上述确定第一终端采集的用户场景信息满足目标条件，获取来自第一终端的第一指示信息的过程，可以存在以下两种不同的处理方式：

方式(一)：服务器获取第一终端采集的上述用户场景信息，并确定该用户场景信息是否满足目标条件；若确定满足目标条件，则向第一终端发送询问信息，以确认第一终端在当前时刻对目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；而在接收第一终端针对上述询问信息的确认信息时，将该确认信息作为上述第一指示信息，确定得到第一终端处于室外移动场景且需要对传输给第一终端的多媒体数据流进行特殊处理的通知。通过该方式服务器可以主动对第一终端采集的用户场景信息进行检测判断，有利于快速得到结果，确定第一终端所处场景的特殊性，从而及时采取措施来保证会议流畅度。

方式(二)：第一终端采集上述用户场景信息后，确定该用户场景信息是否满足目标条件；若确定满足目标条件，则向服务器发送第二指示信息，以通知服务器这一情况。

而服务器在获取到来自第一终端的第二指示信息后，基于第二指示信息可确定第一终端采集的用户场景信息满足目标条件，向第一终端发送询问信息，以确认第一终端在当前时刻对目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

在接收第一终端针对上述询问信息的确认信息时，将该确认信息作为上述第一指示信息，即确定获取到来自第一终端的第一指示信息。可理解的，方式(二)中是由第一终端对采集的用户场景信息进行直接判断处理来确定是否满足目标条件，而服务器在获取到第一终端发送的第二指示信息时，即确定第一终端采集的用户场景信息满足目标条件，通过这种方式可以减少服务器对第一终端采集的权限隐私信息的直接接触，提高了终端信息安全性，也减少了服务器的数据处理量。

步骤202，从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流，向所述第一终端发送所述目标音频数据流。

本申请实施例中，上述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流，因此，提取得到的全部第一音频数据流包括一个或多个第一音频数据流。若该全部第一音频数据流只包括一个第一音频数据流，则直接将该第一音频数据流作为上述目标音频数据流，而若该全部第一音频数据流包括多个第一音频数据流，则可以将该多个第一音频数据流进行混音处理得到上述目标音频数据流。然后向第一终端发送该目标音频数据流，完成向第一终端传输目标会议的多媒体数据流中包括的音频数据流，而不传输视频数据流的目的，从而降低向第一终端传输的实时会议数据量，提高远程会议的流程度。可理解的，上述第一多媒体数据流是由第二终端上传到服务器的，因而目标音频数据流中不包括第一终端上传到服务器的音频数据流，可以保证第一终端不会接收到自己的上传的实时语音数据。

此外，为保证远程会议的流畅度，服务器还可以只接收来自第一终端的音频数据流，而不接收来自第一终端的视频数据流，使得第一终端需要上传给服务器的实时会议数据量减少，减少数据传输造成的卡顿，保证会议的流畅度。

本申请中，在确定第一终端采集的用户场景信息满足目标条件的情况下，服务器确认第一终端对目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求，则从参与目标会议的至少一个第二终端上传的至少一个第一多媒体数据流中提取所有第一音频数据流，并基于这些第一音频数据流获得目标音频数据流后传输给第一终端。通过根据第一终端采集的用户场景信息来发现第一终端对实时传输的多媒体数据流包括的不同类型数据流的实际接收需求的差别，对其他终端上传的至少一个第一多媒体数据流进行特别处理后再发送给第一终端，可以实现主动识别参与会议的终端所处场景的特殊性，并适应性进行相应处理，减少向第一终端传输的实时会议数据的数据量，提高远程会议的流畅度。

下面结合图3介绍本申请实施例提供的另一种数据共享方法，该方法可以包括以上步骤201-步骤202，还可以包括以下步骤301-步骤303：

步骤301，获取来自所述第一终端的第三指示信息。

其中，所述第三指示信息指示所述第一终端需要接收所述目标会议的多媒体数据流包括的视频数据流中满足预设条件的图像帧；

该步骤301可以在上述步骤202中的向第一终端发送目标音频数据流之前执行。可理解的，服务器获取到第三指示信息，说明第一终端在接收音频数据流之外，还可以接收视频数据流中的部分重要图像帧，这些重要图像帧即为上述满足预设条件的图像帧。因而服务器需要执行以下步骤302、步骤303以满足第一终端的需求。

在一些可能的实施例中，上述预设条件可以包括以下条件中的一项：1)该图像帧包括目标标识。2)该图像帧的内容包括目标信息。3)所述图像帧在目标会议中的出现时刻与目标会议的开始时刻相差预设时长。

具体的，在条件1)中，目标标识可以是指第二终端对应的用户触发的特殊控制指令，例如，可以是用户在讲解PPT时操作截图控件、放大查看控件或重点标注控件而触发的控制指令，或者控制PPT翻页时触发的控制指令等，服务器接收到这些特殊控制指令时确定这些控制指令对应的图像帧包括目标标识。而在条件2)中，目标信息可以为预设关键字，如“总结、重点内容、关键、核心”等关键字。在条件3)中，图像帧在目标会议中的出现时刻可以是指该图像帧的采集/产生时间，或者，指该图像帧被服务器接收到的时刻，当该图像帧在目标会议中的出现时刻与该目标会议的开始时刻相差的预设时长可以为一个等差序列，例如，预设时长为{1s,2s,3s,4s……}，即可以按照固定的时间间隔将实时接收到的图像帧确定为上述满足预设条件的图像帧。可选的，还可以将预设条件设为：图像帧的持续时长超过时长阈值。图像帧的持续时长基于同一图像帧出现的起始时间和终止时间获得，而相似度大于相似度阈值(如95％)的多个图像帧可以理解为同一图像帧，例如在PPT讲解场景中，若某页PPT的静态展示时长超过上述时长阈值，则可以将该页PPT对应的图像帧作为上述满足预设条件的图像帧。本申请不对预设条件的具体内容进行限制。在该实施例中，可以根据需要设置合适的预设条件，以便于根据该预设条件选择出重要的图像帧后传输给第一终端，这些满足预设条件的图像帧可以通过视觉通道向用户展示部分重要的会议数据，方便用户理解会议内容，有利于提高会议效率。

步骤302，从所述至少一个第一多媒体数据流包括的所有第一视频数据流中，实时提取满足所述预设条件的全部第一图像帧，并基于获得的所述全部第一图像帧得到目标图像帧。

可理解的，针对上述所有第一视频数据流中的每个第一视频数据流，若该第一视频数据流包括的图像帧中存在满足上述预设条件的图像帧，则可以将其确定为第一图像帧，并将其实时提取出来。然后基于实时获得的全部第一图像帧，得到目标图像帧。可理解的，若实时提取的全部第一图像帧只包括一个第一图像帧，则可将这个第一图像帧作为目标图像帧。而若实时提取的全部第一图像帧包括多个第一图像帧，则可以基于该多个第一图像帧获得目标图像帧。具体的，当在第二时刻(在上述当前时刻之后)获得的全部第一图像帧包括第一数量个第一图像帧时，可以先确定与上述第一数量对应的第一组合版式，再按照上述第一组合版式将上述第一数量个第一图像帧组合显示在同一图像中，得到目标图像帧。示例性的，当第一数量为1时，第一组合版式为第一图像帧占满整个显示画面；而第一数量为N(N>1)时，第一组合版式可以相应为每个图像占显示画面的1/N，或者，第一组合版式可以相应为其中3个图像中每个图像固定占显示画面的1/4，而剩下的N-3个图像总共占显示画面的1/4，或者，第一组合版式可以突出实时获得会议控制权限的第二终端的第一图像帧的显示画面，而缩小未实时获得会议控制权限的其他第二终端的第一图像帧的显示画面。本申请对此不作限制。在此实施例中，实时提取满足预设条件的全部第一图像帧，并基于这些第一图像帧得到目标图像帧以传输给第一终端，可以将部分重要的会议数据在合适的时机传输给第一终端，而且某时刻来自多个第二终端的多个第一图像帧可以组合后发送给第一终端显示，在保证会议流畅度的前提下可以提高会议效率。

步骤303，向所述第一终端发送所述目标图像帧。

本申请实施例中，除了向第一终端发送目标音频数据流之外，还可以根据来自第一终端的第三指示信息，从第二终端上传的至少一个第一多媒体数据流包括的所有第一视频数据流中，实时提取满足预设条件的全部第一图像帧，并基于获得的全部第一图像帧得到目标图像帧后发送给第一终端，这样在第一终端处于室外移动场景这样的特殊场景时，不再实时传输视频数据流，而是在合适时机传输满足预设条件的图像帧，使得会议数据的传输量大大减少，可以保证会议的流畅度且额外通过视觉通道为用户提供重要的会议信息，有利于提高会议效率。

下面结合具体的应用场景介绍本申请提供的数据共享方法。在该应用场景下，终端102(第一终端)和终端103、终端104(均为第二终端)通过服务器101创建的虚拟空间进行实时会议。在时刻1，终端102选择“正常模式”参会，说明此时终端102对会议的多媒体数据流中的视频数据流的接收需求大于或等于对音频数据流的接收需求。

服务器101基于终端102选择的“正常模式”，接收终端103、终端104上传的所有多媒体数据流，并直接推流给终端102，当然服务器101也接收终端102上传的多媒体数据流并推流给终端103、终端104。服务器101还可以向终端102发送信息采集指令，指示终端102采集用户场景信息，即采集如终端位置移动速度和当前网络质量等用于衡量用户所处场景的通信质量的一类信息，以及采集如用户在所述目标会议中的麦克风使用情况、摄像头使用情况、屏幕共享情况、文件上传情况和会议控制权限获得情况等用于衡量用户对所述目标会议的参与程度的二类信息。并确定终端102采集的用户场景信息是否满足目标条件。

在时刻2，服务器101确定终端102采集的用户场景信息满足目标条件，可以向终端102发送询问信息，示例性的，可以发送询问信息1“发现当前网络质量差，是否切换为流畅模式(仅听音频)参会”。在接收到用户的确认信息时，确定终端102选择“流畅模式(仅听音频)”。若此时是终端103获得实时会议控制权限，则终端103上传到服务器101的第一多媒体数据流包括第一音频数据流和第一视频数据流，而终端104上传到服务器101的第一多媒体数据流可以包括第一音频数据流和/或第一视频数据流，那么服务器101可以提取终端103、终端104上传的所有第一多媒体数据流中的所有第一音频数据流，并基于所有第一音频数据流获得目标音频数据流，再向终端102发送该目标音频数据流，该场景可以如图4所示，此时图4中的终端102只接收目标音频数据流。

可选的，可以在上述向终端102发送询问信息的步骤中，不发送询问信息1，而是发送询问信息2“发现当前网络质量差，请选择当前参会模式：流畅模式1(仅听音频)；流畅模式2(听音频+重要图像)；正常模式”。或者，在发送询问信息1之后，接收到确认信息再发送询问信息3“请选择：流畅模式1(仅听音频)；流畅模式2(听音频+重要图像)”。在接收到用户确认选择：流畅模式2(听音频+重要图像)的情况下，服务器101可以采取上述步骤202得到目标音频数据流并向第一终端发送，还可以采取上述步骤302和步骤303，得到目标图像帧并向第一终端发送，使得第一终端能接收到目标音频数据流和目标图像帧，并显示目标图像帧，从而保证会议流畅度和会议效率。该场景可以如图4所示，此时图4中的终端102接收目标音频数据流和目标图像帧。

可理解的，当终端102没有选择“正常模式”参会时，可以在终端102的显示界面上提供模式切换控件，方便用户根据需要主动切换为“正常模式”。当然在终端102选择“正常模式”参会时也可以显示模式切换控件以便于用户可以主动切换为其他模式(如流畅模式1、流畅模式2等)。或者，还可以在终端102选择“流畅模式”参会时，仍指示终端102采集用户场景信息，当确定用户场景信息不满足目标条件时自动将终端102的参会模式切换为“正常模式”，并向终端102传输音频数据流和视频数据流，以保证良好的会议效果。本申请对此不作限制。

请参阅图5，图5为本申请实施例提供的一种数据共享装置的结构示意图，如图5所示，该数据共享装置包括接收单元501、处理单元502、第一发送单元503，其中：

接收单元501，用于在所述目标会议进行过程中，在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；

处理单元502，用于从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流；

第一发送单元503，用于向所述第一终端发送所述目标音频数据流。

在一种可能的设计中，所述装置还包括：

第一确定单元，用于确定所述第一终端采集的用户场景信息满足所述目标条件；

第一获取单元，用于获取来自所述第一终端的第一指示信息，所述第一指示信息指示所述第一终端从当前时刻开始对所述目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求。

在一种可能的设计中，所述用户场景信息包括用于衡量用户所处场景的通信质量的一类信息和用于衡量用户对所述目标会议的参与程度的二类信息，所述第一确定单元具体用于：

在所述一类信息满足第一条件，且所述二类信息满足第二条件的情况下，确定所述第一终端采集的用户场景信息满足所述目标条件，其中，所述一类信息包括终端位置移动速度和当前网络质量，所述二类信息包括用户在所述目标会议中的麦克风使用情况、摄像头使用情况、屏幕共享情况、文件上传情况和会议控制权限获得情况。

在一种可能的设计中，所述装置还包括：

第二确定单元，用于在所述当前时刻之前的第一时刻，确定所述第一终端对所述目标会议的多媒体数据流包括的视频数据流的接收需求高于或等于对音频数据流的接收需求；

第二发送单元，用于向所述第一终端发送信息采集指令，所述信息采集指令用于指示所述第一终端采集所述用户场景信息。

在一种可能的设计中，所述第一确定单元具体用于获取所述第一终端采集的所述用户场景信息，并确定所述用户场景信息满足所述目标条件；

所述第一获取单元具体用于向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

所述第一获取单元还用于接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

在一种可能的设计中，所述第一确定单元具体用于获取来自所述第一终端的第二指示信息，所述第二指示信息是所述第一终端在采集到的所述用户场景信息满足所述目标条件的情况下向所述服务器发送的；

所述第一获取单元具体用于向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

所述第一获取单元还用于接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

在一种可能的设计中，所述装置还包括：

第二获取单元，用于获取来自所述第一终端的第三指示信息，所述第三指示信息指示所述第一终端需要接收所述目标会议的多媒体数据流包括的视频数据流中满足预设条件的图像帧；

第二处理单元，用于从所述至少一个第一多媒体数据流包括的所有第一视频数据流中，实时提取满足所述预设条件的全部第一图像帧，并基于获得的所述全部第一图像帧得到目标图像帧；

所述装置还包括：

第三发送单元，用于向所述第一终端发送所述目标图像帧。

在一种可能的设计中，所述预设条件包括以下条件中的一项：所述图像帧包括目标标识、所述图像帧的内容包括目标信息、或所述图像帧在所述目标会议中的出现时刻与所述目标会议的开始时刻相差预设时长。

在一种可能的设计中，在所述当前时刻之后的第二时刻获得的所述全部第一图像帧包括第一数量个第一图像帧，所述第二处理单元具体用于：

确定与所述第一数量对应的第一组合版式，并按照所述第一组合版式将所述第一数量个第一图像帧组合显示在同一图像中，得到所述目标图像帧。

其中，该实施方式的相关内容可参见上述方法实施例的相关内容。此处不再详述。

请参阅图6，图6为本申请实施例提供的一种电子设备的结构示意图。如图6所示，上述电子设备包括存储器601、处理器602和通信接口603。其中，存储器601、处理器602和通信接口603通过总线604实现彼此间的通信连接。电子设备可为上述图1中的服务器101。

其中，存储器601用于提供存储空间，存储空间中可以存储操作系统和计算机程序等数据。存储器601包括但不限于是随机存储记忆体(random access memory，RAM)、只读存储器(read-only memory，ROM)、可擦除可编程只读存储器(erasable programmable readonly memory，EPROM)、或便携式只读存储器(compact disc read-only memory，CD-ROM)。该存储器601用于存储应用程序及数据。

处理器602是进行算术运算和逻辑运算的模块，可以是中央处理器(centralprocessing unit，CPU)、显卡处理器(graphics processing unit，GPU)或微处理器(microprocessor unit，MPU)等处理模块中的一种或者多种的组合。

存储器601中存储有计算机程序，处理器602调用存储器601中存储的计算机程序，使该电子设备实现如本申请上述各实施例所示的数据共享方法，具体可以执行如下步骤：

在所述目标会议进行过程中，在所述至少两个终端中的第一终端采集的用户场景信息满足目标条件的情况下，所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；

从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流，向所述第一终端发送所述目标音频数据流。

本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，当该计算机程序在一个或多个处理器上运行时，可以实现上述方法实施例所示的方法。

本申请实施例还提供一种计算机程序产品，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包，上述计算机包括上述电子设备。

应理解，在本申请的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

在本申请所提供的几个实施例中，应该理解到，所揭露的方法、装置和系统，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的；例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式；例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理包括，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本领域普通技术人员可以理解实现该实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如该各方法实施例的流程。而前述的存储介质包括：ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。

Claims (8)

1.一种数据共享方法，其特征在于，所述方法应用于远程会议系统中的服务器，所述远程会议系统还包括至少两个终端，所述服务器分别与所述至少两个终端中的每个终端通信连接，所述至少两个终端通过所述服务器创建的虚拟空间进行目标会议，所述方法包括：

在所述目标会议进行过程中，确定所述至少两个终端中的第一终端采集的用户场景信息满足目标条件，获取来自所述第一终端的第一指示信息，所述第一指示信息指示所述第一终端从当前时刻开始对所述目标会议的多媒体数据流包括的视频数据流的接收需求低于对音频数据流的接收需求；所述服务器接收所述至少两个终端中的至少一个第二终端上传的至少一个第一多媒体数据流，所述第一多媒体数据流包括第一视频数据流和/或第一音频数据流，且所述至少一个第一多媒体数据流中至少存在一个第一多媒体数据流同时包括第一视频数据流和第一音频数据流；

其中，所述用户场景信息包括用于衡量用户所处场景的通信质量的一类信息和用于衡量用户对所述目标会议的参与程度的二类信息，所述确定所述第一终端采集的用户场景信息满足所述目标条件，包括：在所述一类信息满足第一条件，且所述二类信息满足第二条件的情况下，确定所述第一终端采集的用户场景信息满足所述目标条件；所述一类信息包括终端位置移动速度和当前网络质量，所述二类信息包括用户在所述目标会议中的麦克风使用情况、摄像头使用情况、屏幕共享情况、文件上传情况和会议控制权限获得情况；

从所述至少一个第一多媒体数据流中提取全部第一音频数据流，并基于所述全部第一音频数据流得到目标音频数据流，向所述第一终端发送所述目标音频数据流。

2.如权利要求1所述的方法，其特征在于，所述确定所述第一终端采集的用户场景信息满足所述目标条件之前，还包括：

在所述当前时刻之前的第一时刻，确定所述第一终端对所述目标会议的多媒体数据流包括的视频数据流的接收需求高于或等于对音频数据流的接收需求；

向所述第一终端发送信息采集指令，所述信息采集指令用于指示所述第一终端采集所述用户场景信息。

3.如权利要求2所述的方法，其特征在于，所述确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，包括：

获取所述第一终端采集的所述用户场景信息，确定所述用户场景信息满足所述目标条件；

向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

4.如权利要求2所述的方法，其特征在于，所述确定所述第一终端采集的用户场景信息满足所述目标条件，并获取来自所述第一终端的第一指示信息，包括：

获取来自所述第一终端的第二指示信息，所述第二指示信息是所述第一终端在采集到的所述用户场景信息满足所述目标条件的情况下向所述服务器发送的；

向所述第一终端发送询问信息，所述询问信息用于确认所述第一终端在当前时刻对所述目标会议的多媒体数据流包括的视频数据流的接收需求是否低于对音频数据流的接收需求；

接收所述第一终端针对所述询问信息的确认信息，将所述确认信息作为所述第一指示信息。

5.如权利要求1-4任一项所述的方法，其特征在于，所述向所述第一终端发送所述目标音频数据流之前，还包括：

获取来自所述第一终端的第三指示信息，所述第三指示信息指示所述第一终端需要接收所述目标会议的多媒体数据流包括的视频数据流中满足预设条件的图像帧；

从所述至少一个第一多媒体数据流包括的所有第一视频数据流中，实时提取满足所述预设条件的全部第一图像帧，并基于获得的所述全部第一图像帧得到目标图像帧；

所述方法还包括：

向所述第一终端发送所述目标图像帧。

6.如权利要求5所述的方法，其特征在于，所述预设条件包括以下条件中的一项：所述图像帧包括目标标识、所述图像帧的内容包括目标信息、或所述图像帧在所述目标会议中的出现时刻与所述目标会议的开始时刻相差预设时长。

7.如权利要求5或6所述的方法，其特征在于，在所述当前时刻之后的第二时刻获得的所述全部第一图像帧包括第一数量个第一图像帧，所述基于获得的所述全部第一图像帧得到目标图像帧，包括：

确定与所述第一数量对应的第一组合版式，并按照所述第一组合版式将所述第一数量个第一图像帧组合显示在同一图像中，得到所述目标图像帧。

8.一种电子设备，其特征在于，包括：存储器、处理器，其中所述存储器和所述处理器被相互可通信地连接；其中所述存储器存储有程序指令；所述程序指令被所述处理器执行时，使所述处理器执行如权利要求1-7中任一项所述的方法。