CN116938861A - 通信方法、介质及其电子设备 - Google Patents
通信方法、介质及其电子设备 Download PDFInfo
- Publication number
- CN116938861A CN116938861A CN202210359414.8A CN202210359414A CN116938861A CN 116938861 A CN116938861 A CN 116938861A CN 202210359414 A CN202210359414 A CN 202210359414A CN 116938861 A CN116938861 A CN 116938861A
- Authority
- CN
- China
- Prior art keywords
- user
- electronic device
- communication
- window
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 title claims abstract description 173
- 238000000034 method Methods 0.000 title claims abstract description 76
- 230000015654 memory Effects 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 abstract description 3
- 230000004044 response Effects 0.000 description 70
- 238000010586 diagram Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 6
- 230000000977 initiatory effect Effects 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
- H04L51/046—Interoperability with other network applications or services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Multimedia (AREA)
- Telephonic Communication Services (AREA)
Abstract
本申请涉及通信技术领域,尤其涉及一种通信方法、介质及其电子设备。该方法包括:第一电子设备与第二电子设备可以登录相同账号的多人通话客户端,第一电子设备可以通过该多人通话客户端,加入多人通话会议,显示多人通话界面。例如,第一电子设备加入的多人通话会议可以是十人的通话会议,第一电子设备可以显示十个用户窗口,每个用户窗口用于显示每个会议成员。第一电子设备在检测到用户将用户窗口X分发给第二电子设备显示的第一操作的情况下,第一电子设备不再显示用户窗口X,并且用户窗口X显示在第二电子设备的显示界面上。可以使得用户有选择地将用户窗口X显示在第二电子设备上,该过程操作简单便捷,提升用户体验。
Description
技术领域
本申请涉及通信技术领域,尤其涉及一种通信方法、介质及其电子设备。
背景技术
随着终端技术的不断发展,终端设备所具备的功能越来越丰富,目前,终端设备提供了多人语音通话或多人视频通话的功能,例如:电话会议、视频会议、语音群聊等,即用户可以利用终端设备同时与多人进行语音通话或视频通话。
然而,目前的多人语音通话或多人视频通话功能,当语音或视频通话的用户较多时,由于单个终端设备的屏幕大小的限制,终端设备的用户界面显示的用户较多时,单个用户的画面在终端设备的用户界面上所占据的区域较小,该用户显示的画面也不够清晰。并且在语音或视频通话的用户的数量到达一定数目,还会出现终端设备的用户界面上无法同时显示所有参会用户的情形。从而影响用户的体验。
发明内容
本申请公开了一种通信方法、介质及其电子设备。
第一方面,本申请提供了一种通信方法,该方法包括:
第一电子设备显示即时通信应用的第一通话界面,其中,第一通话界面包括N个通信对象窗口(用户窗口),其中N个通信对象窗口的通信数据(数据流)来自第三电子设备。第一电子设备检测到分布显示指令,其中,分布显示指令用于指令将第一通话界面中的N个通信对象窗口中的M个通信对象窗口显示在第二电子设备上,其中第二电子设备上运行即时通信应用(多人通话客户端),M为小于N的正整数。第一电子设备响应于分布显示指令,显示第二通话界面,其中,第二通话界面中不显示M个通信对象窗口,并且第一电子设备向第三电子设备发送分布显示信息,其中,分布显示信息包括M个通信对象窗口的标识信息和第二电子设备的设备信息。第二电子设备在运行的即时通信应用中显示M个通信对象窗口,其中,M个通信对象窗口的通信数据是第三电子设备根据分布显示信息向第二电子设备发送的。
例如,第一电子设备与第二电子设备可以登录相同账号的多人通话客户端,第一电子设备可以通过该多人通话客户端,加入多人通话会议,显示多人通话界面(第一通话界面)。例如,第一电子设备加入的多人通话会议可以是十人的通话会议,第一电子设备可以显示十个用户窗口(通信对象窗口),每个用户窗口用于显示每个会议成员。第一电子设备在检测到用户将用户窗口X分发给第二电子设备显示的第一操作的情况下,第一电子设备不再显示用户窗口X,并且用户窗口X显示在第二电子设备的显示界面上。
可以理解,用户窗口X可以是十个用户窗口中的任意一个窗口。相较于下文中的图2a-图2d显示的多人通话界面,本申请提供的通信方法,可以使得用户有选择地将用户窗口X显示在第二电子设备上,该过程操作简单便捷,提升用户体验。并且第二电子设备只显示用户窗口X。不需要像下文的图2a-图2d的显示界面第一电子设备和第二电子设备均显示十个用户窗口的情况。从而进一步提升用户体验。
在上述第一方面的一种可能的实现中,还包括:第一电子设备向第三电子设备发送分布显示信息之后,第三电子设备停止向第一电子设备发送M个通信对象窗口的通信数据。
在上述第一方面的一种可能的实现中,第一电子设备检测到分布显示指令,包括:第一电子设备检测到用户在第一通话界面的第一操作。第一电子设备响应于第一操作,显示分布显示设备列表,其中,分布显示设备列表中的电子设备与第一电子设备登陆相同的即时通信应用账号。第一电子设备检测到用户选择分布显示设备列表中的第二电子设备之后,检测到分布显示指令。
在一些实施例中,第一操作可以是用户通过触摸(例如,点击、拖拽、滑动等)、手势、语音等对用户窗口的选择操作。第一操作还可以是用户通过第一电子设备的外围设备(例如,鼠标、键盘等)对用户窗口的选择操作。第一操作还可以是用户通过第一电子设备配备的遥控器发送的选择用户窗口的控制指令的操作。
在上述第一方面的一种可能的实现中,第二电子设备的设备信息包括以下至少一种:第二电子设备的设备状态信息、第二电子设备显示的通信对象窗口的数量信息。
在上述第一方面的一种可能的实现中,即时通信应用包括以下至少一种:社交应用程序、会议应用程序。
在上述第一方面的一种可能的实现中,第三电子设备为即时通信应用的服务器。第一电子设备与第二电子设备采用相同的第一账号与即时通信应用的服务器建立通信连接。
在上述第一方面的一种可能的实现中,即时通信应用用于多人语音通话和/或多人视频通话。在即时通信应用用于多人视频通话的情况下,N个通信对象窗口显示对应通信对象的视频画面。
在上述第一方面的一种可能的实现中,N个通信对象窗口的通信数据包括以下至少一个:通信对象的视频图像数据、语音数据、设备信息、账户信息。
在上述第一方面的一种可能的实现中,还包括:第一电子设备检测到第一通信停止指令,响应于第一通信停止指令,第一电子设备离开第二通话界面,其中,第一通信停止指令用于指令第一电子设备和第二电子设备不显示N个通信对象窗口。
例如,当多设备系统10中的主设备(第一电子设备)的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备(第二电子设备)显示后,当多设备系统10中的主设备检测到用户执行离开会议的操作,响应于该操作,多设备系统10中的主设备和显示主设备的至少一个用户窗口的显示内容的至少一个子设备同时离开多人通话。例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当手机100-1检测到用户A执行离开会议的操作,响应于该操作,手机100-1和笔记本电脑100-2同时离开多人通话。具体的,手机100-1响应于用户A离开会议的操作,向服务器20发送多人通话关闭请求。服务器20基于该多人通话关闭请求,不再向手机100-1和笔记本电脑100-2发送多个用户的视频流。
在上述第一方面的一种可能的实现中,还包括:第二电子设备检测到第二通信停止指令,响应于第二通信停止指令,第二电子设备离开显示的M个通信对象窗口,其中,第二通信停止指令用于指令第一电子设备和第二电子设备不显示通信对象窗口。
例如,当多设备系统10中的主设备(第一电子设备)的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备(第二电子设备)显示后,当多设备系统10中的主设备检测到用户执行离开会议的操作,响应于该操作,多设备系统10中的主设备和显示主设备的至少一个用户窗口的显示内容的至少一个子设备同时离开多人通话。例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当手机100-1检测到用户A执行离开会议的操作,响应于该操作,手机100-1和笔记本电脑100-2同时离开多人通话。具体的,手机100-1响应于用户A离开会议的操作,向服务器20发送多人通话关闭请求。服务器20基于该多人通话关闭请求,不再向手机100-1和笔记本电脑100-2发送多个用户的视频流。
在上述第一方面的一种可能的实现中,还包括:第二电子设备检测到分布显示关闭指令,响应于分布显示关闭指令,第二电子设备离开显示的M个通信对象窗口,其中,第二通信停止指令用于指令第二电子设备显示的M个通信对象窗口显示在第一电子设备上。
例如,当多设备系统10中的主设备的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备显示后,当多设备系统10中的子设备检测到用户执行本设备离开会议的操作,响应于该操作,该子设备离开多人通话,同时该子设备显示的主设备的至少一个用户窗口又转移到主设备上显示。例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当笔记本电脑100-2检测到用户A执行本设备离开会议的操作,响应于该操作,笔记本电脑100-2离开多人通话,同时笔记本电脑100-2显示的用户窗口713又转移到手机100-1上显示。具体的,笔记本电脑100-2响应于用户A执行的本设备离开会议的操作,向服务器20发送停止接收数据流的请求。服务器20基于该请求,不再向笔记本电脑100-2发送多个用户的数据流,并且服务器20将用户窗口713对应用户的数据流发送给手机100-1。
第二方面,本申请提供了一种通信方法,该方法包括:第三电子设备向第一电子设备发送第一电子设备上运行的即时通信应用的N个通信对象窗口的通信数据,以使得第一电子设备显示即时通信应用的第一通话界面,其中,第一通话界面包括N个通信对象窗口。第三电子设备从第一电子设备接收到分布显示信息,其中,分布显示信息包括N个通信对象窗口中的M个通信对象窗口的标识信息和第二电子设备的设备信息,M为小于N的正整数。第三电子设备根据分布显示信息,向第二电子设备发送M个通信对象窗口的通信数据。
在上述第二方面的一种可能的实现中,还包括:第三电子设备基于分布显示信息,停止向第一电子设备发送M个通信对象窗口的通信数据。
第三方面,本申请提供了一种通信方法,该方法包括:第二电子设备从第三电子设备接收到M个通信对象窗口的通信数据,其中,M个通信对象窗口的通信数据是第三电子设备根据分布显示信息向第二电子设备发送的,并且分布显示信息包括:在第一电子设备上显示的即使通信应用的第一通话界面中的N个通信对象窗口中的M个通信对象窗口的标识信息和第二电子设备的设备信息,M为小于N的正整数。第二电子设备基于M个通信对象窗口的通信数据,在运行的即时通信应用的第三通话界面中显示M个通信对象窗口。
在上述第三方面的一种可能的实现中,第三电子设备为即时通信应用的服务器。第二电子设备与第一电子设备采用相同的第一账号与即时通信应用的服务器建立通信连接。
第四方面,本申请提供了一种电子设备,该电子设备包括:一个或多个处理器、存储器。该存储器与该一个或多个处理器耦合,该存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令,该一个或多个处理器用于调用上述计算机指令以使得该电子设备执行如第一方面的各种可能实现中的任意一种通信方法。
第五方面,本申请提供了一种计算机可读存储介质,包括指令,当该指令在电子设备上运行时,使得该电子设备执行如第一方面的各种可能实现中的任意一种通信方法。
第六方面,本申请提供了一种包含指令的计算机程序产品,当该计算机程序产品在电子设备上运行时,使得该电子设备执行如第一方面的各种可能实现中的任意一种通信方法。
附图说明
图1a-图1c为本申请实施例提供的一组用户界面示意图;
图2a-图2d为本申请实施例提供的一组用户界面示意图;
图3为本申请实施例提供的一种多设备系统示意图;
图4为本申请实施例提供的一种电子设备的硬件结构示意图;
图5为本申请实施例提供的一种电子设备的软件结构示意图;
图6为本申请实施例提供的一种方法流程示意图;
图7为本申请实施例提供的一种用户界面示意图;
图8a-图8c为本申请实施例提供的一组用户界面示意图;
图9a-图9c为本申请实施例提供的一组用户界面示意图;
图10a-图10b为本申请实施例提供的一组用户界面示意图;
图11a-图11e为本申请实施例提供的一组用户界面示意图;
图12a-图12e为本申请实施例提供的一组用户界面示意图;
图13a-图13e为本申请实施例提供的一组用户界面示意图;
图14a-图14c为本申请实施例提供的一组用户界面示意图;
图15为本申请实施例提供的一种方法流程示意图;
图16为本申请实施例提供的一种遥控器示意图;
图17为本申请实施例提供的一种用户界面示意图;
图18a-图18b为本申请实施例提供的一组用户界面示意图;
图19a-图19c为本申请实施例提供的一组用户界面示意图;
图20a-图20b为本申请实施例提供的一组用户界面示意图。
具体实施方式
本申请的说明性实施例包括但不限于通信方法、介质和电子设备。
如前所述,由于电子设备的屏幕大小的限制,在多人通话的用户较多的情况下,电子设备通常会将各用户的用户窗口分页显示,用户需要通过通过滑动用户窗口,来查看多人通话的更多用户,从而使得操作繁琐,影响用户体验。
例如,图1a-图1c,图1a-图1c示例性示出手机100-1的多人通话用户界面。
参考图1a,用户界面110即手机100-1显示多人通话中所有用户中的一部分用户的通话信息的页面。其中,用户界面110包含8个用户窗口。例如,如图1a所示,用户窗口112用于显示用户A的视频图像。用户窗口113用于显示与用户A进行视频通话的用户B的视频图像。用户窗口114用于显示与用户A进行视频通话的用户C的视频图像。用户窗口115用于显示与用户A进行视频通话的用户D的视频图像。用户界面110还包括翻页图标111,翻页图标111可以用于查看与用户A进行视频通话的更多用户的视频图像。不难看出,与用户A进行多人通话的用户窗口共占据三页用户界面。翻页图标111还用于指示用户界面110为第一页用户界面。
当手机100-1在如图1a所示的用户界面110中接收到用户在用户界面110执行的向左滑动的操作,响应于该操作,手机100-1显示图1b所示的手机100-1显示多人通话中所有用户中的另一部分用户的用户界面120。例如,如图1b所示,用户界面120包含8个用户窗口以及翻页图标111。其中,用户窗口122用于显示与用户A进行视频通话的用户E的视频图像。
手机100-1在如图1b所示的用户界面120中接收到用户在用户界面120执行的向左滑动的操作,响应于该操作,手机100-1显示图1c所示的手机100-1显示多人通话中所有用户中的另一部分用户的通话信息的用户界面130。例如,如图1c所示,用户界面130包含8个用户窗口以及翻页图标111。用户窗口132显示的是与用户A进行视频通话的用户F的视频图像。
由图1a-图1c不难看出,在用户A与其他用户进行多人视频通话时,当视频通话的用户较多时,用户界面110无法显示全部的与用户A进行视频通话的用户的视频图像,只能通过用户A左右滑动手机100-1的屏幕,才能查看所有用户的视频图像,用户体验较差。
在一些实施例中,用户可以通过采用多个电子设备加入同一个多人通话,并在各个电子设备上设置各电子设备显示的不同用户窗口,来增加用户可以看到的更多用户的用户界面。但是,用户需要在不同的电子设备上选择电子设备要显示的用户窗口,操作依然繁锁。并且,在同一用户采用多个电子设备接入到一个多人通话中时,其他用户的电子设备会为该用户的各个电子设备分别显示一个用户窗口,导致其他用户的电子设备的多人通话的用户窗口较多,影响其他用户的会议体验。
例如,图2a-图2c,图2a-图2c示例性示出手机100-1和笔记本电脑100-2的多人通话用户界面。
如图2a-图2d所示,用户A通过同时使用手机100-1和笔记本电脑100-2与多个用户进行视频通话,用户A与多个用户的视频图像同时显示在手机100-1和笔记本电脑100-2上。图2a的用户界面210显示内容参考图1a的用户界面110的文字描述,在此不做赘述。
如图2b所示,用户界面220即笔记本电脑100-2显示多人通话中所有用户中的一部分用户的通话信息的页面。例如,如图2b所示,用户界面220包含8个用户窗口。用户窗口212用于显示用户A的视频图像。用户窗口213用于显示与用户A进行视频通话的用户B的视频图像。用户窗口214用于显示与用户A进行视频通话的用户C的视频图像。用户窗口215用于显示用户A进行视频通话的用户D的视频图像。用户界面220还包括翻页图标211,翻页图标211可以用于查看与用户A进行视频通话的更多用户的视频图像。不难看出,与用户A进行多人通话的用户窗口共占据三页用户界面。翻页图标211还用于指示用户界面220为第一页多人通话的用户界面。
当笔记本电脑100-2在如图2b所示的用户界面220中接收到用户在用户界面220执行的向左滑动的操作,响应于该操作,笔记本电脑100-2显示图2c所示的笔记本电脑100-2显示多人通话中所有用户中的另一部分用户的通话信息的用户界面230。例如,如图2c所示,用户界面230包含8个用户窗口以及翻页图标211。其中,用户窗口232显示的是与用户A进行视频通话的用户E的视频图像。翻页图标211可以用于查看与用户A进行视频通话的更多用户的视频图像。
例如,图2d示例性示出了用户B对应的手机30的显示界面。如图2d所示,用户界面240即是手机30显示的与用户B进行多人通话的界面。该用户界面240可以包括8个视频通话的用户窗口。其中,8个视频通话的多人用户窗口可以用于显示用户B的视频图像以及与用户B进行视频通话的用户的视频图像。例如,用户界面240可以包括用户窗口241、用户窗口242、用户窗口243、用户窗口244。其中,用户窗口241用于显示用户B的视频图像。用户窗口244用于显示与用户B进行视频通话的用户C的视频图像。用户窗口242和用户窗口243用于显示与用户B进行视频通话的用户A的视频图像。
由图2d不难理解,由于用户A使用手机100-1和笔记本电脑100-2接入了一个多人通话,则用户B的手机100的用户界面会显示两个用户A的用户窗口。例如,用户窗口242显示的是手机100-1采集的用户A的视频图像。用户窗口243显示的是笔记本电脑100-2采集的用户A的视频图像。
由图2a-图2d不难看出,用户A可以通过在手机100-1和笔记本电脑100-2上同时登录账号或接入会议组号,同时在手机100-1和笔记本电脑100-2上显示相同的与用户A视频通话的用户,例如,手机100-1的用户界面210与笔记本电脑100-2的用户界面210显示相同的用户的视频图像。通过切换手机100-1或笔记本电脑100-2显示的不同的用户界面,可以使得用户A可以同时看到多个用户的视频图像。例如,手机100-1显示用户界面210,笔记本电脑100-2显示用户界面220。
相较于图1a-图1c所示的场景,在图2a-图2c所示的场景中,用户A虽然通过两个电子设备可以同时显示16个用户的用户窗口,但需要分别在手机100-1和笔记本电脑100-2同时接入同一个多人通话,分别操作手机100-1、笔记本电脑100-2显示不同的用户窗口,并且如图2d所示的其他用户(例如用户B)的电子设备会为同时接入多人通话的手机100-1或笔记本电脑100-2分别显示两个用户窗口,影响其他用户的多人通话体验。
为了解决上述问题,本申请实施例提供了一种通信方法,第一电子设备与第二电子设备可以登录相同账号的多人通话客户端,第一电子设备可以通过该多人通话客户端,加入多人通话会议,显示多人通话界面。例如,第一电子设备加入的多人通话会议可以是十人的通话会议,第一电子设备可以显示十个用户窗口,每个用户窗口用于显示每个会议成员。第一电子设备在检测到用户将用户窗口X分发给第二电子设备显示的第一操作的情况下,第一电子设备不再显示用户窗口X,并且用户窗口X显示在第二电子设备的显示界面上。
可以理解,用户窗口X可以是十个用户窗口中的任意一个窗口。相较于上述的图2a-图2d显示的多人通话界面,本申请提供的通信方法,可以使得用户有选择地将用户窗口X显示在第二电子设备上,该过程操作简单便捷,提升用户体验。并且第二电子设备只显示用户窗口X。不需要像图2a-图2d的显示界面第一电子设备和第二电子设备均显示十个用户窗口的情况。从而进一步提升用户体验。
在一些实施例中,第一操作可以是用户通过触摸(例如,点击、拖拽、滑动等)、手势、语音等对第一用户窗口的选择操作。第一操作还可以是用户通过第一电子设备的外围设备(例如,鼠标、键盘等)对第一用户窗口的选择操作。第一操作还可以是用户通过第一电子设备配备的遥控器发送的选择第一用户窗口的控制指令的操作。不难理解,根据第一电子设备的设备类型,本申请对用于实现第一窗口分发给目标第二电子设备的第一操作的具体实现方式不做具体限定。
图3为本申请实施例提供的一种多设备系统10示意图,该多设备系统10中的每个电子设备运行相同的多人通话客户端,使用相同的账号登录该多人通话客户端的服务器。如图3所示,该多设备多设备系统10包括4个电子设备100,分别是电子设备100-1、电子设备100-2、电子设备100-3、电子设备100-4,其中,这4个电子设备100中包括1个主设备和3个子设备。
在一些实施例中,在多设备系统10中,主设备可以是用于启动多人通话功能并显示多人通话界面的电子设备,子设备可以是用于协同显示主设备分发的用户窗口的电子设备。主设备也可以是用户当前使用并进行多人通话的电子设备。在其他一些实施例中,在多设备系统10中,用户还可以任意切换多个电子设备中主设备,例如,电子设备100-1为主设备,其他电子设备为子设备,在多人通话过程中,用户可以通过手动操作,将电子设备100-2切换为主设备,电子设备100-1切换为子设备。可以理解,根据实际场景的用户需求,本申请对多设备系统10中的主设备和子设备不做具体限定。
例如,如图3所示,多设备系统10中的电子设备100-1为手机,电子设备100-2为笔记本电脑,电子设备100-3为智慧大屏,电子设备100-4为平板电脑。
在一些实施例中,多设备系统10中的电子设备100之间可以运行相同的多人通话客户端,并在该客户端上登录相同的账号。其中,该客户端可以是APP(Application,应用程序)或者网页。具体地,例如,多人通话客户端可以是畅连TM、welinkTM、ZOOMTM、微信TM等。
为了更加清楚、详细地介绍本申请实施例提供的通信方法,下面先介绍本申请实施例提供实施该方法所涉及的多设备系统10中的电子设备100。电子设备100可以是手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtualreality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等具有显示屏的设备,本申请实施例对电子设备的具体类型不作任何限制。
图4是本申请实施例提供的一例多设备系统10中的电子设备100的结构示意图。如图4所示,电子设备100可以包括:处理器210,外部存储器接口220,内部存储器221,通用串行总线(universal serial bus,USB)接口230,充电管理模块240,电源管理模块241,电池242,天线1,天线2,移动通信模块250,无线通信模块260,音频模块270,扬声器270A,受话器270B,麦克风270C,耳机接口270D,传感器模块280,按键290,马达291,指示器292,摄像头293,显示屏294,以及用户标识模块(subscriber identification module,SIM)卡接口295等。
其中,上述传感器模块280可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器和环境光传感器等传感器。
可以理解的是,本实施例示意的结构并不构成对电子设备的具体限定。在另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器210可以包括一个或多个处理单元,例如:处理器210可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
处理器210中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器210中的存储器为高速缓冲存储器。该存储器可以保存处理器210刚用过或循环使用的指令或数据。如果处理器210需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器210的等待时间,因而提高了系统的效率。
在一些实施例中,处理器210可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
电子设备通过GPU,显示屏294,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏294和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器210可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏294用于显示图像,视频等。该显示屏294包括显示面板。
电子设备可以通过ISP,摄像头293,视频编解码器,GPU,显示屏294以及应用处理器等实现拍摄功能。ISP用于处理摄像头293反馈的数据。摄像头293用于捕获静态图像或视频。在一些实施例中,电子设备可以包括1个或N个摄像头293,N为大于1的正整数。
外部存储器接口220可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备的存储能力。外部存储卡通过外部存储器接口220与处理器210通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器221可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器210通过运行存储在内部存储器221的指令,从而执行电子设备的各种功能应用以及数据处理。例如,在本申请实施例中,处理器210可以通过执行存储在内部存储器221中的指令,内部存储器221可以包括存储程序区和存储数据区。
其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器221可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flashstorage,UFS)等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
图5是本发明实施例的多设备系统10中的电子设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图5所示,应用程序包可以包括相机,日程安排,智慧出行,日历,天气,备忘录,多人通话类等应用程序。
在本申请一些实施例中,用户可以对多人通话应用程序进行操作,电子设备100响应于用户的操作,显示多人通话界面或将用户窗口分发给多设备系统10中的其他电子设备显示。
结合图3,下面以多设备系统10的主设备为手机100-1,子设备包括笔记本电脑100-2、智慧大屏100-3、平板电脑100-4,手机100-1上的多人通话的用户窗口分发给笔记本电脑100-2为例,说明本申请提供的通信方法。
基于图6所示的方法流程示意图来详细描述本申请实施例提供的通信方法。图6示出了一种通信方法的交互图。
参考图6,该通信方法可以包括以下步骤:
S601:多设备系统10中的多个电子设备采用同一账号与服务器20建立通信连接。
在一些实施例中,服务器20可以是能够进行多人通话的客户端对应的服务器。多设备系统10中的每个电子设备100可以通过运行多人通话客户端与服务器20建立通信连接。其中,该多人通话客户端的可以是APP(Application,应用程序)或者网页。具体地,例如,多人通话客户端可以是畅连TM、welinkTM、ZOOMTM、微信TM等APP(Application,应用程序)或者网页。
在一些实施例中,服务器20是实现多人通话的枢纽,不同设备的客户端之间的多人通话需依赖于服务器20建立的多人通话连接。在服务器20所建立的多人通话连接中,每个电子设备运行的客户端分别与服务器20建立通话连接,通过服务器20对数据流的中转传输,实现每个电子设备运行的客户端对于多人通话中每个用户的通话获取。例如,多设备系统10中的电子设备100可以通过服务器20与其他电子设备建立的多人通话连接。
不难理解,服务器20中转传输的数据流可以是以下至少一种:视频图像、语音数据。例如,在多人用户之间的多人通话为视频通话的情况下,服务器20中转传输的数据流可以是视频图像和语音数据。在多人用户之间的多人通话为视频通话时,服务器20中转传输的数据流可以是语音数据。在其他一些实施例中,服务器20中转传输的数据流还可以是账户信息、设备信息等。可以理解,根据多人通话的实际应用场景,本申请对服务器20中转传输的数据流不做具体限定。
在一些实施例中,服务器20可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群,还可以是提供云数据库、云存储和CDN等基础云计算服务的服务器,服务器的规模可以根据需要处理的数据流的数量进行规划,本申请实施例对此不做限制。
S602:手机100-1响应于用户A启动多人通话的操作,生成多人通话请求。
在一些实施例中,用户A可以通过触摸、手势、语音等方式,执行启动多人通话操作,手机100-1响应于用户A执行启动多人通话的操作,生成多人通话请求。
具体地,例如,当手机100-1检测用户A在多人通话客户端上触发以下操作时:向其它用户发起多人通话邀请的操作,或者加入由其它用户所发起的多人通话邀请的操作,响应于该操作,手机100-1生成多人通话请求。
S603:手机100-1向服务器20发送多人通话请求。
S604:服务器20基于多人通话请求,将多个用户的数据流发送给手机100-1。
在本申请的一些实施例中,多人用户之间的多人通话可以是视频通话,还可以是语音通话,或者是二者结合。对应于不同的多人通话方式,手机100-1响应于用户A启动多人通话的操作,向服务器20发送多人通话请求也可以不同,对应的服务器20发送到数据流也可以不同。
示例性的,在多人语音通话中,手机100-1向服务器20发送多人语音通话请求,服务器20基于该请求,可以向手机100-1发送语音数据。在多人视频通话中,手机100-1向服务器20发送多人视频通话请求,服务器20基于该请求,向手机100-1发送语音数据和视频图像。下文以多人用户之间的多人通话为视频通话为例,说明本申请的实施过程。
S605:手机100-1根据多人通话的数据流,显示多人通话界面,其中,多人通话界面包括多个用户窗口。
在一些实施例中,服务器20基于多人通话请求,将多人通话的数据流(即多个用户的数据流)发送给手机100-1。在多人通话为视频通话时,服务器20基于多人通话请求,可以将多个用户的数据流发送给手机100-1,其中,该数据流包括多个用户的语音数据以及对应多个用户的视频图像。手机100-1根据多人通话的数据流,可以显示多人通话界面,同时还可以播放多人通话的语音。
在一些实施例中,多人通话界面包括多个用户窗口,每个用户窗口用于显示多人通话中对应用户的视频图像或用户的头像。当多人通话用户界面中显示有用户对应的用户窗口,则表示此用户为多人通话中的成员之一。需要说明的是,多人通话用户界面是指多人通话客户端对于所进行多人通话的界面展示。在一些实施例中,多人通话的数据流可以包括视频图像、语音数据、设备信息、账户信息等。
在一些实施例中,手机100-1可以根据多人通话的数据流中的账户信息,将具有相同账户信息的其他用户的视频图像合并显示一个用户窗口上。手机100-1也可以在检测到与手机100-1采用相同账号加入该多人通话中的其他电子设备时(例如前述多设备系统10中的笔记本电脑100-2、智慧大屏100-3等),将该多个设备采集的用户视频图像作为一个用户窗口显示。具体的显示方式可以参考下文中图14a至图14c的实施例,在此不做赘述。
在多人通话界面中的多个用户窗口的显示内容中,对应于不同的多人通话方式,用户对应的用户窗口显示的内容也可以不同。示例性的,在多人语音通话中,用户所对应的用户窗口显示的内容为用户的头像。而在多人视频通话中,用户所对应的用户窗口显示的内容为用户的视频图像或用户的头像。接下来以多人视频通话为例,介绍本申请实施例中手机100-1响应于用户A启动多人通话的操作,显示多人视频通话界面。
参考图7,图7示例性示出手机100-1响应于用户A启动多人视频通话的操作,显示的与用户A进行多人视频通话的界面。
如图7所示,用户界面710即用于手机100-1显示与用户A进行多人通话的界面。该用户界面710可以包括8个用户窗口,翻页图标711。其中,8个视频通话的多人用户窗口可以用于显示用户A的视频图像以及与用户A进行视频通话的用户的视频图像。在用户界面710无法显示与用户A进行视频通话的所有用户的视频图像时,翻页图标711可以用于查看与用户A进行视频通话的更多用户的视频图像。
例如,用户界面710可以包括用户窗口712、用户窗口713、用户窗口714、用户窗口715。其中,用户窗口712用于显示用户A的视频图像。用户窗口713用于显示与用户A进行视频通话的用户B的视频图像。用户窗口714用于显示与用户A进行视频通话的用户C的视频图像。用户窗口715用于显示与用户A进行视频通话的用户D的视频图像。
S606:手机100-1检测到用户A分发第一用户窗口的操作,响应于该操作,显示设备选择界面。
在一些实施例中,手机100-1可以在检测到用于分发第一用户窗口的触摸操作、手势、语音等情况下,检测到分发第一用户窗口的操作,例如用户A在第一用户窗口的长按操作等,并响应于该操作,显示设备选择界面。
在本申请的一些实施例中,第一用户窗口可以是用于显示用户A的视频图像的用户窗口。例如,第一用户窗口为图7中的用户窗口712。第一用户窗口也可以是用于显示与用户A进行视频通话的用户的视频图像的用户窗口。例如,第一用户窗口为图7中的用户窗口713。
在一些实施例中,设备选择界面用于显示与手机100-1采用相同账号与服务器20建立连接的电子设备,其中,设备选择界面显示的电子设备可以是已经加入该多人通话的电子设备,也可以是未加入该多人通话的电子设备。在其他一些实施例中,设备选择界面还可以用于显示与手机100-1采用相同账号与服务器20建立连接的电子设备的多人通话运行状态以及被分发的用户窗口的数量。可以理解,设备选择界面通过显示与手机100-1采用相同账号与服务器20建立连接的电子设备的多人通话运行状态以及被分发的用户窗口的数量,可以帮助用户了解与手机100-1连接的设备被分发的用户窗口的分发数量,从而使得用户快速决策将第一用户窗口分发给哪个的电子设备。
接下来以手机100-1的第一用户窗口为用户窗口713,说明手机100-1检测到用户A分发第一用户窗口的操作,响应于该操作,显示设备选择界面的具体操作过程。
参考图8a-图8c,图8a-图8c示例性示出手机100-1响应于用户A分发用户窗口713的操作,显示的一组用户界面。
图8a所示的用户界面810与上文图7所示的用户界面710相同,图7中的用户界面710的文字说明也适用于图8a所示的用户界面810。
当手机100-1在如图8a所示的用户界面810中接收到用户作用于用户窗口713的操作(例如,长按操作),响应于该操作,手机100-1显示图8b所示的用户界面820或图8c所示的用户界面830。
如图8b所示,用户界面820为设备选择界面,即用于显示与手机100-1登录相同的客户端账号的多个设备的界面。用户界面820可以包括笔记本电脑图标821、智慧大屏图标822、平板电脑图标823、用户窗口713等。笔记本电脑图标821用于显示多设备系统10的笔记本电脑100-2,智慧大屏图标822用于显示多设备系统10的智慧大屏100-3,平板电脑图标823用于显示多设备系统10的平板电脑100-4,用户界面820的用户窗口713可以用于显示用户A选择的待分发的用户窗口。
如图8c所示,用户界面830为设备选择界面,即用于显示与手机100-1登录相同的客户端账号的多个设备的界面。用户界面830可以包括笔记本电脑状态图标831、智慧大屏状态图标832、平板电脑状态图标833、用户窗口713等。笔记本电脑图标831用于显示多设备系统10的笔记本电脑100-2当前空闲状态,智慧大屏图标832用于显示多设备系统10的智慧大屏100-3当前已被分发了两个用户窗口,平板电脑图标833用于显示多设备系统10的平板电脑100-4当前已被分发了两个用户窗口,用户界面830的用户窗口713可以用于显示用户A选择的待分发的用户窗口。
由图8c不难看出,手机100-1通过显示笔记本电脑状态图标831、智慧大屏状态图标832、平板电脑状态图标833,可以帮助用户A了解与手机100-1连接的设备被分发的用户窗口的分发数量,从而使得用户A快速决策将用户窗口713分发给多设备系统10的哪个的子设备。
S607:手机100-1根据用户A选择的目标电子设备,将目标电子设备的设备信息和第一用户窗口的窗口信息发送给服务器20。
例如,在手机100-1检测到用户选择的目标电子设备为笔记本电脑100-2,将笔记本电脑100-2的设备信息以及第一用户窗口的窗口信息信息发送给服务器20。
在一些实施例中,手机100-1可以在检测到用于选择目标电子设备的触摸操作、手势、语音等情况下,检测到选择目标电子设备的操作,例如,用户A在设备选择界面将第一窗口拖拽到目标电子设备图标的操作等,并响应于该操作,将目标电子设备的设备信息和第一用户窗口的窗口信息发送给服务器20。
在一些实施例中,第一用户窗口的窗口信息可以为第一用户窗口所显示的用户信息。例如,多人用户之间的多人通话为视频通话,第一用户窗口显示的用户信息可以是对应用户的视频图像和用户信息。多人用户之间的多人通话为语音通话,第一用户窗口显示的用户信息可以是对应用户的账号信息等。
在多人通话界面对用户所对应用户窗口的显示中,不同用户的用户窗口对应于多人通话界面中不同的显示区域。通过多人通话界面对不同用户所对应用户窗口的展示,不仅能够对多人通话中不同用户的通话状态进行容易掌握,还能够通过对检测不同显示区域的触发,对不同显示区域所对应的用户进行通话控制。例如,将某个显示区域所对应用户的通话转移到多设备系统10中的子设备。
在一些实施例中,手机100-1的显示窗口所对应用户的通话可以转移到多设备系统10中的至少一个子设备上。下文以子设备为笔记本电脑100-2为例,说明手机100-1的显示窗口所对应用户的视频通话转移到笔记本电脑100-2的具体操作过程。
接下来以手机100-1的第一用户窗口为用户窗口713,目标电子设备为笔记本电脑100-2说明响应于用户A选择的笔记本电脑100-2的具体操作过程。
参考图9a-图9c,图9a-图9c示例性示出手机100-1响应于用户A选择用户窗口713分发给笔记本电脑100-2的操作,显示的一组用户界面。
图9a所示的用户界面910与上文图7所示的用户界面710相同,图7中的用户界面710的文字说明也适用于图9a所示的用户界面910。
当手机100-1在如图9a所示的用户界面910中接收到用户A在用户界面910执行的将用户窗口713拖拽到笔记本电脑图标821所在的位置的操作,响应于该操作,手机100-1显示图9b所示的用户界面920。
如图9b所示,用户界面920可以包括确定图标831、智慧大屏图标822、平板电脑图标823等。其中,确定图标831可以用于确定待分发的视频窗口713显示在笔记本电脑100-2上。当手机100-1在如图9b所示的用户界面920中未接收到用户A作用在确定图标831的操作,即用户A将用户窗口713拖拽到笔记本电脑图标821所在的位置后,手指离开手机100-1的屏幕,此时手机100-1显示图9c所示的用户界面930。
如图9c所示,用户界面930可以包括8个用户窗口。例如,用户界面930可以包括用户窗口712、用户窗口714、用户窗口715等,不难看出,手机100-1的用户界面930不再显示用户窗口713。
S608:服务器20基于笔记本电脑100-2的设备信息以及第一用户窗口的窗口信息,将第一用户窗口对应用户的数据流发送给笔记本电脑100-2。
S609:笔记本电脑100-2基于接收的第一用户窗口对应用户的数据流,显示第一用户窗口所显示的内容。
在一些实施例中,服务器20基于笔记本电脑100-2的设备信息以及第一用户窗口的窗口信息,将第一用户窗口对应用户的数据流发送给笔记本电脑100-2。在多人通话为视频通话时,服务器20基于笔记本电脑100-2的设备信息以及第一用户窗口的窗口信息,可以将第一用户窗口对应用户的数据流发送给笔记本电脑100-2,其中,第一用户窗口对应用户的数据流包括第一用户窗口对应用户的视频图像和语音数据。笔记本电脑100-2基于接收的第一用户窗口对应用户的数据流,可以显示第一用户窗对应用户的视频图像,同时还可以播放第一用户窗对应用户的语音。
接下来以第一用户窗口为用户窗口713为例,具体描述手机100-1的用户窗口713的显示内容转移到笔记本电脑100-2上。
参考图10a-图10b,图10a-图10b示例性示出手机100-1响应于用户A启动用户窗口713分发给笔记本电脑100-2的操作前后,手机100-1与笔记本电脑100-2显示的界面变化。
图10a为手机100-1响应于用户A启动用户窗口713分发给笔记本电脑100-2的操作前,手机100-1与笔记本电脑100-2分别显示的界面。图10b为用户A启动用户窗口713分发给笔记本电脑100-2的操作后,手机100-1与笔记本电脑100-2分别显示的界面。
图10a所示的用户界面1010与上文图7所示的用户界面710相同,图7中的用户界面710的文字说明也适用于图10a所示的用户界面1010。图10a所示的用户界面1020即笔记本电脑100-2显示的桌面窗口。
当手机100-1在图10a所示的用户界面1010中接收到用户A在用户界面1010执行的用户窗口713分发的操作,响应于该操作,手机100-1显示图10b所示的用户界面1030,同时笔记本电脑100-2显示图10b所示的用户界面1040。
图10b所示的用户界面1030与上文图8所示的用户界面840相同,图8中的用户界面840的文字说明也适用于图10b所示的用户界面1030。
如图10b所示,用户界面1040即用于笔记本电脑100-2显示用户窗口713的显示内容的界面。例如,该用户界面1040可以包括用户窗口713,其中,用户界面1040的用户窗口713用于显示与用户A进行视频通话的用户B的视频图像。
由图10a-图10b不难看出,手机100-1响应于用户A在用户界面1010执行的用户窗口713分发的操作,手机100-1的用户窗口714的显示内容转移到笔记本电脑100-2、即笔记本电脑100-2显示手机100-1分发的用户窗口714显示的用户B的视频图像,同时手机100-1不再显示用户窗口714。
由图6至图10的描述不难看出,通过本申请实施例提供的通信方法,手机100-1可以提供用户A自由选择用户窗口的界面以及设备选择界面,以使得用户可以快速将第一用户窗口分发给与手机100-1登录相同多人通话账号的电子设备(例如,笔记本电脑100-2)。从而使得用户操作更加便捷,提升用户体验。并且,手机100-1根据用户A选择第一用户窗口分发给笔记本电脑100-2的操作,将第一用户窗口的窗口信息和笔记本电脑100-2的设备信息发送给服务器,服务器基于该信息,将第一用户窗口对应的用户的数据流发送给笔记本电脑100-2,从而使得笔记本电脑100-2的显示界面显示第一用户窗口对应的用户的视频图像,笔记本电脑100-2播放第一用户窗口对应的用户的语音,从而使得用户A在多人通话中,可以同时看到更多用户的视频图像,进一步提升用户体验。
在一些实施例中,在用户通过多个电子设备加入到同一个多人通话的情况下,在通话结束后,用户需要逐个在电子设备中结束该多人通话,影响用户体验。为此,本申请实施例提供的通信方法中,当主设备和/或至少一个子设备检测到用户选择离开会议的操作时,响应于该操作,主设备和/或至少一个子设备可以向服务器发送离开会议请求,服务器基于离开会议请求,不再向主设备和/或至少一个子设备发送多人通话的数据流。从而用户通过在加入同一多人通话的多个电子设备中的任意一个中结束通话,即可使该多个电子设备都结束该多人通话,提升用户体验。
在一些实施例中,当多设备系统10中的主设备的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备显示后,当多设备系统10中的主设备检测到用户执行离开会议的操作,响应于该操作,多设备系统10中的主设备和显示主设备的至少一个用户窗口的显示内容的至少一个子设备同时离开多人通话。例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当手机100-1检测到用户A执行离开会议的操作,响应于该操作,手机100-1和笔记本电脑100-2同时离开多人通话。
具体的,手机100-1响应于用户A离开会议的操作,向服务器20发送多人通话关闭请求。服务器20基于该多人通话关闭请求,不再向手机100-1和笔记本电脑100-2发送多个用户的视频流。
参考图11a-图11b,图11a-图11b示例性示出一种手机100-1响应于用户执行离开会议的操作,对应的手机100-1与笔记本电脑100-2的用户界面的变化过程。
如图11a所示,用户界面1110即用于手机100-1显示与用户A进行多人通话的界面。该用户界面1110可以包括8个用户窗口。例如,用户界面1110可以包括用户窗口712、用户窗口714、用户窗口715等,其中,用户窗口712用于显示用户A的视频图像。用户窗口714用于显示与用户A进行视频通话的用户C的视频图像。用户窗口715用于显示与用户A进行视频通话的用户D的视频图像。用户界面1110还包括挂断图标1111,挂断图标1111可以用于手机100-1离开多人通话。
图11b所示的笔记本电脑100-2显示的用户界面1120与上文图10b所示的笔记本电脑100-2显示的用户界面1040相同,图10b中的用户界面1040的文字说明也适用于图11b所示的用户界面1120。
当手机100-1在图11a所示的用户界面1110中接收到用户A在用户界面1110执行的离开多人通话的操作(例如,用户A点击挂断图标1111的操作),响应于该操作,手机100-1显示图11c所示的用户界面1130。
如图11c所示,用户界面1130可以包括8个用户窗口。例如,具体包括用户窗口712、用户窗口714、用户窗口715等。用户界面1130还可以包括挂断图标1111、第一选项卡1131。第一选项卡1131用于选择是否离开多人通话。当手机100-1在图11c所示的用户界面1130中接收到用户A在用户界面1130执行的离开多人通话的操作(例如,用户A点击第一选项卡1131的操作),响应于该操作,手机100-1可以显示图11d所示的用户界面1140。同时笔记本电脑100-2可以显示图11e所示的用户界面1150。
如图11d所示,用户界面1140即用于手机100-1显示的主界面。如图11e所示,用户界面1150即用于笔记本电脑100-2显示的主界面。
在一些实施例中,当多设备系统10中的主设备的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备显示后,当多设备系统10中的子设备检测到用户执行离开会议的操作,响应于该操作,多设备系统10中的主设备和显示主设备的至少一个用户窗口的显示内容的至少一个子设备同时离开多人通话。
例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当笔记本电脑100-2检测到用户A执行离开会议的操作,响应于该操作,手机100-1和笔记本电脑100-2同时离开多人通话。
具体的,笔记本电脑100-2响应于用户A离开会议的操作,向服务器20发送多人通话关闭请求。服务器20基于该多人通话关闭请求,不再向手机100-1和笔记本电脑100-2发送多个用户的视频流。
参考图12a-图12b,图12a-图12b示例性示出一种笔记本电脑100-2响应于到用户执行离开会议的操作,显示的一组用户界面。
图12a所示的手机100-1显示的用户界面1210与上文图10b所示的手机100-1显示的用户界面1030相同,图10b中的用户界面1030的文字说明也适用于图12a所示的用户界面1210。
如图12b所示,用户界面1220可以包括用户窗口713、挂断图标1111。挂断图标1111可以用于笔记本电脑100-2离开多人通话。图10b中的用户界面1040的用户窗口713的文字说明也适用于图12b所示的用户界面1220的用户窗口713。
当手机100-1在图12b所示的用户界面1220中接收到用户A在用户界面1220执行的离开多人通话的操作(例如,用户A点击挂断图标1111的操作),响应于该操作,手机100-1显示图12c所示的用户界面1230。
如图12c所示,用户界面1230可以包括用户窗口713、挂断图标1111、第一选项卡1131以及第一选项卡1231。第一选项卡1131用于选择是否离开多人通话。第一选项卡1131用于选择笔记本电脑100-2是否离开多人通话。当手机100-1在图12c所示的用户界面1230中接收到用户A在用户界面1230执行的离开多人通话的操作(例如,用户A点击第一选项卡1131的操作),响应于该操作,笔记本电脑100-2可以显示图12d所示的用户界面1240,同时手机100-1可以显示图12e所示的用户界面1250。
如图12d所示,用户界面1240即用于笔记本电脑100-2显示的主界面。如图12e所示,用户界面1250即用于手机100-1显示的主界面。
在一些实施例中,当多设备系统10中的主设备的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备显示后,当多设备系统10中的子设备检测到用户执行本设备离开会议的操作,响应于该操作,该子设备离开多人通话,同时该子设备显示的主设备的至少一个用户窗口又转移到主设备上显示。例如,以多设备系统10中的主设备为手机100-1,多设备系统10中的子设备为显示手机100-1的用户窗口713的显示内容的笔记本电脑100-2。当笔记本电脑100-2检测到用户A执行本设备离开会议的操作,响应于该操作,笔记本电脑100-2离开多人通话,同时笔记本电脑100-2显示的用户窗口713又转移到手机100-1上显示。
具体的,笔记本电脑100-2响应于用户A执行的本设备离开会议的操作,向服务器20发送停止接收数据流的请求。服务器20基于该请求,不再向笔记本电脑100-2发送多个用户的数据流,并且服务器20将用户窗口713对应用户的数据流发送给手机100-1。
参考图13a-图13b,图13a-图13b示例性示出笔记本电脑100-2响应于用户A执行的笔记本电脑100-2离开会议的操作,显示的一组用户界面。
图13a所示的手机100-1显示的用户界面1310与上文图10b所示的手机100-1显示的用户界面1030相同,图10b中的用户界面1030的文字说明也适用于图13a所示的用户界面1310。
如图13b所示,用户界面1320可以包括用户窗口713、挂断图标1111。挂断图标1111可以用于笔记本电脑100-2离开多人通话。图10b中的用户界面1040的用户窗口713的文字说明也适用于图13b所示的用户界面1320的用户窗口713。
当手机100-1在图13b所示的用户界面1320中接收到用户A在用户界面1320执行的离开多人通话的操作(例如,用户A点击挂断图标1111的操作),响应于该操作,手机100-1显示图13c所示的用户界面1330。
如图13c所示,用户界面1330可以包括用户窗口713、挂断图标1111、第一选项卡1131以及第二选项卡1231。第一选项卡1131用于选择是否离开多人通话。第二选项卡1231用于选择笔记本电脑100-2是否离开多人通话。当手机100-1在图13c所示的用户界面1330中接收到用户A在用户界面1330执行的笔记本电脑100-2离开多人通话的操作(例如,用户A点击第二选项卡1231的操作),响应于该操作,笔记本电脑100-2可以显示图13d所示的用户界面1340,同时手机100-1可以显示图13d所示的用户界面1350。
如图13d所示,用户界面1340即用于笔记本电脑100-2显示的主界面。图13e所示的手机100-1显示的用户界面1350与上文图7所示的手机100-1显示的用户界面710相同,图7中的用户界面710的文字说明也适用于图13d所示的用户界面1340。
在一些实施例中,当多设备系统10中的主设备的至少一个用户窗口的显示内容分发给多设备系统10中的至少一个子设备显示后,多设备系统10中的至少一个子设备也作为多方通话中的一方接入,多设备系统10中的至少一个子设备采集的视频图像以及语音图像(即数据流)会发送给服务器20,由服务器20对该数据流进行中转,并传输给进行多方通话的多个设备。不难理解,进行多方通话的对端设备会接收到多设备系统10中的主设备和至少一个子设备分别采集的数据流。
接下来以用户B对应的对端设备为手机30为例,说明进行多方通话的对端设备接收到多设备系统10中的主设备和至少一个子设备分别采集的数据流,基于该数据流,显示的用户A对应的用户窗口。
参考图14a-图14c,图14a-图14c示例性示出手机30响应于用户B在手机30上查看多个设备采集的用户A的视频图像的操作,显示的一组用户界面。
如图14a所示,用户界面1410即用于手机30显示与用户B进行多人通话的界面。该用户界面1410可以包括8个视频通话的用户窗口。其中,8个视频通话的多人用户窗口可以用于显示用户B的视频图像以及与用户B进行视频通话的用户的视频图像。例如,用户界面1410可以包括用户窗口1411、用户窗口1412、用户窗口1413、用户窗口1414。其中,用户窗口1411用于显示用户B的视频图像。用户窗口1413用于显示与用户B进行视频通话的用户C的视频图像。用户窗口1414用于显示与用户B进行视频通话的用户D的视频图像。用户窗口1412用于显示与用户B进行视频通话的用户A的视频图像。
由于用户A将多个用户窗口分别分发到了多个电子设备上进行显示,则这几台电子设备的摄像头分别采集了用户A的视频图像,并上传服务器20,当用户B的手机30在显示用户A的视频图像时,会显示多个电子设备采集的用户A的不同角度的图像。如图14a所示,用户窗口1412包括子窗口1412-1、子窗口1412-2、子窗口1412-3。例如,子窗口1412-1可以是用于显示手机10采集的用户A的视频图像。子窗口1412-2可以是用于显示笔记本电脑100-2采集的用户A的视频图像,子窗口1412-3可以是用于显示智慧大屏30采集的用户A的视频图像。
当手机30在图14a所示的用户界面1410中接收到用户A在用户界面1410执行的查看用户窗口1412的操作(例如,用户A双击用户窗口1412的操作),响应于该操作,手机30显示图14b所示的用户界面1420。
如图14b所示,用户界面1420即用于手机30显示放大的用户窗口1412的界面。不难看出,用户窗口1412所显示的子窗口1412-1、子窗口1412-2、子窗口1412-3平铺在用户界面1420上。当手机30在图14b所示的用户界面1410中接收到用户A在用户界面1410执行的查看子窗口1412-2的操作(例如,用户A双击子窗口1412-2的操作),响应于该操作,手机30显示图14c所示的用户界面1430。
如图14c所示,用户界面1430即用于手机30显示放大的子窗口1412-2的界面。不难看出,子窗口1412-2被放大后,可以方便用户B观察某个特定角度的用户B的视频画面。
由图14a-图14c不难看出,当进行多人通话的多个设备中,用户A通过协同显示在多设备系统10中的多个电子设备上接入多人通话时,由于多设备系统10中的多个电子设备登录的是相同的多人通话客户端账号,因此,手机30不会同时呈现多个接入帐号,即不在其他会议成员的设备上占用过多的用户窗口。所有同个帐号的视频图像集中在一个用户窗口中显示,允许其他用户有选择性地显示对应需要的视频画面。例如,所有同个帐号的多个用户A的视频图像集中在用户窗口1412上显示,并且,手机30允许用户B选择查看子窗口1412-1、子窗口1412-2、子窗口1412-3中的任意一个显示的用户A的视频图像。
上述的图6至图14主要以手机100-1为多设备系统10的主设备为例来说明本申请的通信方法,在其他一些实施例子中,本申请还提供了一种以智慧大屏100-3为多设备系统10的主设备的通信方法。
结合图3,下面以多设备系统10的主设备为智慧大屏100-3,子设备包括笔记本电脑100-2、手机100-1、平板电脑100-4,智慧大屏100-3上的多人通话的用户窗口分发给手机100-1为例,说明本申请提供的通信方法。
基于图15所示的方法流程示意图来详细描述本申请实施例提供的通信方法。图15示出了一种通信方法的交互图。
参考图15,该通信方法可以包括以下步骤:
S1501:多设备系统10中的多个电子设备采用同一账号与服务器20建立通信连接。具体内容参考图6的步骤S601,在此不做赘述。
S1502:智慧大屏100-3响应于用户A启动多人通话的操作,生成多人通话请求。
在一些实施例中,用户A可以通过遥控器向智慧大屏100-3发送控制指令的方式,执行启动多人通话操作,用户A也可以通过触摸、手势、语音等方式,执行启动多人通话操作,手机100-1响应于用户A执行启动多人通话的操作,生成多人通话请求。
例如,当智慧大屏100-3检测用户A在多人通话客户端上触发以下操作时:向其它用户发起多人通话邀请的操作,或者加入由其它用户所发起的多人通话邀请的操作,响应于该操作,智慧大屏100-3向服务器20发送多人通话请求。
在一些实施例中,智慧大屏100-3可以配有一遥控器,该遥控器可以作为输入设备使用。该遥控器用于控制智慧大屏100-3。例如,如图16所示,该遥控器40可以包括:多个按键,如电源按键、音量按键、以及其他的多个选择按键。遥控器40上的按键可以是机械按键,也可以是触摸式按键。例如,遥控器40可以通过红外信号等向智慧大屏100-3发送控制信号。
在本申请的一些实施例中,智慧大屏100-3可以运行能够进行多人通话的客户端,当智慧大屏100-3检测用户A在多人通话的客户端上触发以下操作:向其它用户发起通话邀请的操作,或者加入由其它用户所发起的通话邀请的操作,响应于该操作,形成多人用户之间的多人通话,智慧大屏100-3显示多人通话界面。其中,智慧大屏100-3接收的用户A在多人通话的客户端上触发的操作可以是智慧大屏100-3接收的用户A通过遥控器40向智慧大屏100-3发送控制信号以启动多人通话的操作。
S1503:智慧大屏100-3向服务器20发送多人通话请求。
S1504:服务器20基于多人通话请求,将多个用户的数据流发送给智慧大屏100-3。
S1505:智慧大屏100-3根据多人通话的数据流,显示多人通话界面,其中,多人通话界面包括多个用户窗口。
在一些实施例中,服务器20基于多人通话请求,将多个用户的数据流发送给智慧大屏100-3。在多人通话为视频通话时,服务器20基于多人通话请求,可以将多个用户的数据流发送给智慧大屏100-3,其中,该数据流包括多个用户的语音数据以及对应多个用户的视频图像。智慧大屏100-3根据多人通话的数据流,可以显示多人通话界面,同时还可以播放多人通话的语音。
参考图17,图17示例性示出智慧大屏100-3响应于用户A启动多人通话的操作,显示的与用户A进行多人通话的多用户通话界面。例如,智慧大屏100-3响应于用户A通过遥控器40发送到启动多人通话的控制信号,显示的与用户A进行多人通话的多用户通话界面。
如图17所示,用户界面1710即用于智慧大屏100-3显示与用户A进行多人通话的界面。该用户界面1710可以包括8个用户窗口,翻页图标1711。其中,8个多人用户窗口可以用于显示用户A的视频图像以及与用户A进行视频通话的用户的视频图像,在用户界面1710无法显示与用户A进行视频通话的所有用户的视频图像时,翻页图标1711可以用于查看与用户A进行视频通话的更多用户的视频图像。
例如,用户界面1710可以包括用户窗口1712、用户窗口1713、用户窗口1714、用户窗口1715。其中,用户窗口1712用于显示用户A的视频图像。用户窗口1713用于显示与用户A进行视频通话的用户B的视频图像。用户窗口1714用于显示与用户A进行视频通话的用户C的视频图像。用户窗口1715用于显示与用户A进行视频通话的用户D的视频图像。
S1506:智慧大屏100-3检测到用户A分发第二用户窗口操作,响应于该操作,显示设备选择界面。
在一些实施例中,智慧大屏100-3在接收到用户A通过遥控器向智慧大屏100-3发送控制指令的情况下,检测到分发第二用户窗口的操作,例如,用户A通过遥控器30选择第二用户窗口的操作等,并响应于该操作,显示设备选择界面。
接下来以智慧大屏100-3的第二用户窗口为用户窗口1713,说明智慧大屏100-3检测到用户A分发第二用户窗口的操作,响应于该操作,显示设备选择界面的具体操作过程。
参考图18a-图18b,图18a-图18b示例性示出手机100-1响应于用户A分发用户窗口1713的操作,显示的一组用户界面。
图18a所示的用户界面1810与上文图17所示的用户界面1710相同,图17中的用户界面1710的文字说明也适用于图18a所示的用户界面1810。
当智慧大屏100-3在如图18a所示的用户界面1810中接收到用户A分发用户窗口1713的操作,响应于该操作,智慧大屏100-3显示图18b所示的用户界面1820。例如,智慧大屏100-3在如图18a所示的用户界面1810中接收的用户A分发用户窗口1713的操作,可以是用户A通过遥控器30向智慧大屏100-3发送的分发用户窗口1713的控制指令的操作。
如图18b所示,用户界面1820为智慧大屏100-3的设备选择界面,即用于显示与智慧大屏100-3登录相同的客户端账号的多个设备的界面。用户界面1820可以包括笔记本电脑图标1821、平板电脑图标1822、手机图标1823、用户窗口1713等。笔记本电脑图标1821用于表示与智慧大屏100-3进行通信连接的手机100-1,平板电脑图标1822表示与智慧大屏100-3进行通信连接的平板电脑100-4,手机图标1823用于表示与智慧大屏100-3进行通信连接的手机100-1,用户界面1820的用户窗口1713可以用于显示用户A选中的用于显示用户B的视频图像的用户窗口。不难看出,在用户界面1820中,基于用户A通过遥控器30向智慧大屏100-3发送的启动用户窗口1713分发的控制指令的操作,用户窗口1713变成了焦点窗口。
S1507:智慧大屏100-3根据用户A选择的目标电子设备,将目标电子设备的设备信息和第一用户窗口的窗口信息发送给服务器20。
例如,在智慧大屏100-3检测到用户A选择的目标电子设备为手机100-1,智慧大屏100-3根据用户A选择的手机100-1,将手机100-1的设备信息以及第一用户窗口的窗口信息发送给服务器20。
在本申请的一些实施例中,多人用户之间的多人通话为视频通话,第二用户窗口显示的用户信息可以是对应用户的视频图像和语音数据信息。多人用户之间的多人通话为语音通话,第二用户窗口显示的用户信息可以是对应用户的语音数据信息等。例如,第二用户窗口可以是用于智慧大屏100-3显示用户B的视频图像的用户窗口1712。智慧大屏100-3可以响应于用户A选择手机100-1的操作,使得智慧大屏100-3的用户窗口1712显示的用户B的视频图像显示在手机100-1上,同时用户B的语音播放在手机100-1上。
接下来仅以第二用户窗口为用户窗口1712,目标电子设备为手机100-1为例,来介绍本申请实施例中用户A在智慧大屏100-3的用户界面执行的用户窗口1712分发给智慧大屏100-3的操作的具体过程。
参考图19a-图19c,图19a-图19c示例性示出智慧大屏100-3响应于用户A选择用户窗口1713分发给手机100-1的操作,显示的一组用户界面。
图19a所示的用户界面1910与上文图17所示的用户界面1710相同,图17中的用户界面1710的文字说明也适用于图19a所示的用户界面1910。
当智慧大屏100-3在如图19a所示的用户界面1910中接收到用户A在用户界面1910执行的选择手机图标1823的操作,响应于该操作,智慧大屏100-3显示图19b所示的用户界面1920。例如,智慧大屏100-3在如图19a所示的用户界面1910中接收的用户A在用户界面1910执行的选择手机图标1823的操作,可以是用户A通过遥控器30向智慧大屏100-3发送的用户A在用户界面1820执行的选择手机图标1823的控制指令的操作。
如图19b所示,用户界面1920可以包括用户窗口1713、笔记本电脑图标1821、平板电脑图标1822以及手机图标1823。不难看出,在用户界面1920中,基于用户A通过遥控器30向智慧大屏100-3发送的选择手机图标1823的控制指令的操作,手机图标1823变成了焦点窗口。
当智慧大屏100-3在如图19b所示的用户界面1920中接收到用户A在用户界面1920执行的确定选择手机图标1823的操作,响应于该操作,智慧大屏100-3显示图19c所示的用户界面1930。
如图19c所示,用户界面1930即用于智慧大屏100-3显示与用户A进行多人通话的界面。该用户界面1930可以包括8个用户窗口。例如,用户界面1930可以包括用户窗口1712、用户窗口1714、用户窗口1715等,其中,用户窗口1712用于显示用户A的视频图像。用户窗口1714用于显示与用户A进行视频通话的用户C的视频图像。用户窗口1715用于显示与用户A进行视频通话的用户D的视频图像,用户界面1930不再显示用户窗口1713。
S1508:服务器20基于手机100-1的设备信息以及第二用户窗口的窗口信息,将第二用户窗口对应用户的数据流发送给手机100-1。
S1509:手机100-1基于接收的第二用户窗口对应用户的数据流,显示第二用户窗口所显示内容。
在一些实施例中,服务器20基于手机100-1的设备信息以及第二用户窗口的窗口信息,将第二用户窗口对应用户的数据流发送给手机100-1。手机100-1基于接收的第二用户窗口对应用户的数据流,显示第二用户窗口所显示内容。从而实现智慧大屏100-3的第二用户窗口的显示内容显示在手机100-1上。
下面以第二用户窗口为用户窗口1713为例,说明智慧大屏100-3响应于用户A启动用户窗口1713分发的操作,使得智慧大屏100-3的用户窗口1713显示的用户B的视频图像显示在手机100-1上。
参考图20a-图20b,图20a-图20b示例性示出智慧大屏100-3响应于用户A启动用户窗口1713分发的操作,使得智慧大屏100-3的用户窗口1713显示的用户B的视频图像显示在手机100-1上。
图20a所示的用户界面2010与上文图17所示的用户界面1710相同,图17中的用户界面1710的文字说明也适用于图20a所示的用户界面2010。图20a所示的手机100-1的用户界面2020即手机100-1显示的主界面。
当智慧大屏100-3在图20a所示的用户界面2010中接收到用户A在用户界面2010执行的用户窗口1713分发的操作,响应于该操作,智慧大屏100-3显示图20b所示的用户界面2030,同时智慧大屏100-3显示图20b所示的用户界面2040。
图20b所示的用户界面2030与上文图18所示的用户界面1840相同,图18中的用户界面1840的文字说明也适用于图20b所示的用户界面2030。
如图20b所示,用户界面2040即用于手机100-1显示与用户A进行多人通话的用户B的视频图像的界面。例如,该用户界面2040可以包括用户窗口1713,其中,用户窗口1713用于显示与用户A进行视频通话的用户B的视频图像。
由图20a-图20b不难看出,智慧大屏100-3响应于用户A在用户界面2010执行的用户窗口1713分发的操作,智慧大屏100-3的用户窗口1713显示在手机100-1上,同时智慧大屏100-3不再显示用于显示用户B的视频图像的用户窗口1713。即智慧大屏100-3的用户窗口1713显示的显示内容转移到手机100-1显示。
由图15至图20的描述不难看出,通过本申请实施例提供的通信方法,智慧大屏100-3可以提供用户A自由选择用户窗口的界面以及设备选择界面,以使得用户可以快速将第二用户窗口分发给与智慧大屏100-3登录相同多人通话账号的电子设备(例如,手机100-1)。从而使得用户操作更加便捷,提升用户体验。并且,智慧大屏100-3根据用户A选择第二用户窗口分发给手机100-1的操作,将第二用户窗口的窗口信息和手机100-1的设备信息发送给服务器,服务器基于该信息,将第二用户窗口对应的用户的数据流发送给手机100-1,从而使得手机100-1的显示界面显示第二用户窗口对应的用户的视频图像,手机100-1播放第二用户窗口对应的用户的语音,从而使得用户A在多人通话中,可以同时看到更多用户的视频图像,进一步提升用户体验。
下面将结合附图对本申请实施例中的技术方案进行清楚、详尽地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本申请所描述的实施例可以与其它实施例相结合。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid StateDisk)等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,该流程可以由计算机程序来指令相关的硬件完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。而前述的存储介质包括:ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。
总之,以上所述仅为本发明技术方案的实施例而已,并非用于限定本发明的保护范围。凡根据本发明的揭露,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (17)
1.一种通信方法,其特征在于,所述方法包括:
第一电子设备显示即时通信应用的第一通话界面,其中,所述第一通话界面包括N个通信对象窗口,其中所述N个通信对象窗口的通信数据来自第三电子设备;
所述第一电子设备检测到分布显示指令,其中,所述分布显示指令用于指令将所述第一通话界面中的所述N个通信对象窗口中的M个通信对象窗口显示在第二电子设备上,其中所述第二电子设备上运行所述即时通信应用,M为小于N的正整数;
所述第一电子设备响应于所述分布显示指令,显示第二通话界面,其中,所述第二通话界面中不显示所述M个通信对象窗口,并且
所述第一电子设备向第三电子设备发送分布显示信息,其中,所述分布显示信息包括所述M个通信对象窗口的标识信息和所述第二电子设备的设备信息;
所述第二电子设备在运行的所述即时通信应用中显示所述M个通信对象窗口,其中,所述M个通信对象窗口的通信数据是所述第三电子设备根据所述分布显示信息向所述第二电子设备发送的。
2.根据权利要求1所述的方法,其特征在于,还包括:
所述第一电子设备向所述第三电子设备发送分布显示信息之后,所述第三电子设备停止向所述第一电子设备发送所述M个通信对象窗口的通信数据。
3.根据权利要求1所述的方法,其特征在于,所述第一电子设备检测到分布显示指令,包括:
所述第一电子设备检测到用户在所述第一通话界面的第一操作;
所述第一电子设备响应于所述第一操作,显示分布显示设备列表,其中,所述分布显示设备列表中的电子设备与所述第一电子设备登陆相同的即时通信应用账号;
所述第一电子设备检测到用户选择所述分布显示设备列表中的第二电子设备之后,检测到所述分布显示指令。
4.根据权利要求1所述的方法,其特征在于,所述第二电子设备的设备信息包括以下至少一种:所述第二电子设备的设备状态信息、所述第二电子设备显示的通信对象窗口的数量信息。
5.根据权利要求1所述的方法,其特征在于,所述即时通信应用包括以下至少一种:社交应用程序、会议应用程序。
6.根据权利要求1所述的方法,其特征在于,所述第三电子设备为所述即时通信应用的服务器;
所述第一电子设备与所述第二电子设备采用相同的第一账号与所述即时通信应用的服务器建立通信连接。
7.根据权利要求1所述的方法,其特征在于,所述即时通信应用用于多人语音通话和/或多人视频通话;
在所述即时通信应用用于多人视频通话的情况下,所述N个通信对象窗口显示对应通信对象的视频画面。
8.根据权利要求1所述的方法,其特征在于,所述N个通信对象窗口的通信数据包括以下至少一个:通信对象的视频图像数据、语音数据、设备信息、账户信息。
9.根据权利要求1所述的方法,其特征在于,还包括:
所述第一电子设备检测到第一通信停止指令,响应于第一通信停止指令,所述第一电子设备离开第二通话界面,其中,所述第一通信停止指令用于指令所述第一电子设备和所述第二电子设备不显示N个通信对象窗口。
10.根据权利要求1所述的方法,其特征在于,还包括:
所述第二电子设备检测到第二通信停止指令,响应于第二通信停止指令,所述第二电子设备离开显示的所述M个通信对象窗口,其中,所述第二通信停止指令用于指令所述第一电子设备和所述第二电子设备不显示通信对象窗口。
11.根据权利要求1所述的方法,其特征在于,还包括:
所述第二电子设备检测到分布显示关闭指令,响应于所述分布显示关闭指令,所述第二电子设备离开显示的所述M个通信对象窗口,其中,所述第二通信停止指令用于指令所述第二电子设备显示的M个通信对象窗口显示在所述第一电子设备上。
12.一种通信方法,其特征在于,所述方法包括:
第三电子设备向第一电子设备发送第一电子设备上运行的即时通信应用的N个通信对象窗口的通信数据,以使得所述第一电子设备显示所述即时通信应用的第一通话界面,其中,所述第一通话界面包括所述N个通信对象窗口;
所述第三电子设备从所述第一电子设备接收到分布显示信息,其中,所述分布显示信息包括所述N个通信对象窗口中的M个通信对象窗口的标识信息和第二电子设备的设备信息,M为小于N的正整数;
所述第三电子设备根据所述分布显示信息,向所述第二电子设备发送所述M个通信对象窗口的通信数据。
13.根据权利要求12所述的方法,其特征在于,还包括:
所述第三电子设备基于所述分布显示信息,停止向所述第一电子设备发送所述M个通信对象窗口的通信数据。
14.一种通信方法,其特征在于,所述方法包括:
第二电子设备从第三电子设备接收到M个通信对象窗口的通信数据,其中,所述M个通信对象窗口的通信数据是所述第三电子设备根据分布显示信息向所述第二电子设备发送的,并且所述分布显示信息包括:在第一电子设备上显示的即使通信应用的第一通话界面中的N个通信对象窗口中的M个通信对象窗口的标识信息和第二电子设备的设备信息,M为小于N的正整数;
第二电子设备基于M个通信对象窗口的通信数据,在运行的即时通信应用的第三通话界面中显示M个通信对象窗口。
15.根据权利要求14所述的方法,其特征在于,所述第三电子设备为所述即时通信应用的服务器;
所述第二电子设备与所述第一电子设备采用相同的第一账号与所述即时通信应用的服务器建立通信连接。
16.一种电子设备,其特征在于,其特征在于,所述电子设备包括一个或多个处理器和一个或多个存储器;其中,所述一个或多个存储器与所述一个或多个处理器耦合,所述一个或多个存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,当所述一个或多个处理器执行所述计算机指令时,使得所述电子设备执行如权利要求1至15中任一项所述的方法。
17.一种计算机可读存储介质,包括指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1至15中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210359414.8A CN116938861A (zh) | 2022-04-06 | 2022-04-06 | 通信方法、介质及其电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210359414.8A CN116938861A (zh) | 2022-04-06 | 2022-04-06 | 通信方法、介质及其电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116938861A true CN116938861A (zh) | 2023-10-24 |
Family
ID=88374332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210359414.8A Pending CN116938861A (zh) | 2022-04-06 | 2022-04-06 | 通信方法、介质及其电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116938861A (zh) |
-
2022
- 2022-04-06 CN CN202210359414.8A patent/CN116938861A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11310294B2 (en) | Companion devices for real-time collaboration in communication sessions | |
EP3192220B1 (en) | Real-time sharing during a phone call | |
US9584682B2 (en) | System and method for sharing data across multiple electronic devices | |
US8789094B1 (en) | Optimizing virtual collaboration sessions for mobile computing devices | |
US9338110B1 (en) | Method of providing instant messaging service, recording medium that records program therefore, and terminal | |
RU2617109C2 (ru) | Система связи | |
CN104780423A (zh) | 一种移动终端即时通信同步到智能电视的方法及系统 | |
US20150032809A1 (en) | Conference Session Handoff Between Devices | |
WO2021120511A1 (zh) | 网络会话的切换方法、装置、计算机设备及存储介质 | |
CN112601046B (zh) | 交互方法、终端、服务器、交互系统和非瞬时性存储介质 | |
CN106105174A (zh) | 自动相机选择 | |
EP2868095B1 (en) | Collaboration environments and views | |
US10372324B2 (en) | Synchronous communication system and method | |
CN114697148A (zh) | 一种云协同方法及系统 | |
WO2022116033A1 (zh) | 协同操作方法、装置、终端及存储介质 | |
WO2024001956A1 (zh) | 视频通话方法、装置、第一电子设备及第二电子设备 | |
US20170222823A1 (en) | Synchronous communication | |
CN106326476B (zh) | 一种信息处理方法及装置 | |
US20150138061A1 (en) | Synchronous communication system and method | |
CN116938861A (zh) | 通信方法、介质及其电子设备 | |
CN112968826B (zh) | 语音交互方法、装置和电子设备 | |
CA2815724C (en) | System and method for sharing data across multiple electronic devices | |
TWI431487B (zh) | 網路裝置之分享控制方法及其應用 | |
CN115240821A (zh) | 图像显示方法、装置、计算机设备及存储介质 | |
CN115348240B (zh) | 共享文档的语音通话方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |