CN103384235A - 多人会话时数据呈现的方法、服务器及系统 - Google Patents
多人会话时数据呈现的方法、服务器及系统 Download PDFInfo
- Publication number
- CN103384235A CN103384235A CN2012101372553A CN201210137255A CN103384235A CN 103384235 A CN103384235 A CN 103384235A CN 2012101372553 A CN2012101372553 A CN 2012101372553A CN 201210137255 A CN201210137255 A CN 201210137255A CN 103384235 A CN103384235 A CN 103384235A
- Authority
- CN
- China
- Prior art keywords
- user
- user side
- session
- user end
- speech
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000005540 biological transmission Effects 0.000 claims description 21
- 238000010586 diagram Methods 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 230000009286 beneficial effect Effects 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1818—Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/567—Multimedia conference systems
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- Telephonic Communication Services (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种多人会话时数据呈现的方法、服务器及系统,属于多人视频会话技术领域。所述方法包括:与参与会话的多个用户端建立会话连接;通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;根据所述参与会话的多个用户端发送的会话控制命令,为第一用户端分配音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;将所述音频数据及视频数据发送给所述第一用户端,以便所述第一用户端呈现所述音频数据及视频数据。对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,使得多人会话可以覆盖到更多的用户。
Description
技术领域
本发明涉及多人视频会话技术领域,特别涉及一种多人会话时数据呈现的方法、服务器及系统。
背景技术
随着网络技术的迅速发展,多人视频会话系统逐渐得到了广泛的建设和应用,使得多个地方的用户可以通过所部署的用户端及传输线路,将声音及图像在彼此之间进行互传,以实现即时且互动的沟通,提高了开会的效率,且降低开会成本。
现有技术中,每个参与会话的用户可以通过所部署的多个用户端或者采用同一用户端上的大屏幕的多个小窗口来呈现所有的其他参与会话的用户,但是,这种方式会给网络带来很大的带宽压力,尤其在参与会话的用户的数量过大时,网络的带宽压力也将会更加的明显。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种多人会话时数据呈现的方法、服务器及系统。所述技术方案如下:
一种多人会话时数据呈现的方法,所述方法包括:
与参与会话的多个用户端建立会话连接;
通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端请求呈现的音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;
将分配给所述第一用户端的音频数据及视频数据发送给所述第一用户端,以便所述第一用户端呈现所接收到的音频数据及视频数据。
所述会话控制命令包括切换命令,相应地,所述根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端所要呈现的视频数据,包括:
根据所述第一用户端所发送的切换命令,确定所述第一用户端所关注的第二用户端,所述切换命令包括第一用户端当前所关注的第二用户端的信息,所述第二用户端为所述参与会话的多个用户端中除所述第一用户端之外的一个或者多个用户端;
将所接收到的所述第二用户端发送的视频数据分配给所述第一用户端。
所述会话控制命令包括会话通知命令,相应地,所述根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端所要呈现的音频数据,包括:
根据所述参与会话的多个用户端发送的会话通知命令,确定所述参与会话的多个用户端中发言的用户端,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
从所述发言的用户端中选择不大于预定值的用户端,并将接收到的所选择的用户端发送的音频数据分配给所述第一用户端。
所述从所述发言的用户端中选择不大于预定值的用户端包括:
当所述发言的用户端的数量大于所述预定值时,确定所述发言的用户端被所述第一用户端关注的关注权重;
根据所述发言的用户端被所述第一用户端关注的关注权重,从所述发言的用户端中选择大于预定值的用户端。
所述确定所述发言的用户端被所述第一用户端关注的关注权重,包括:
根据所述发言的用户端被所述第一用户端关注的次数、所述发言的用户端所属运营商的权限等级或/和所述发言的用户端的身份等级计算得到所述关注权重。
一种服务器,所述服务器包括:会话连接建立模块、接收模块、分配模块和发送模块;
所述会话连接建立模块,用于与参与会话的多个用户端建立会话连接;
所述接收模块,用于通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
所述分配模块,用于根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端请求呈现的音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;
所述发送模块,用于将分配给所述第一用户端的音频数据及视频数据发送给所述第一用户端,以便所述第一用户端呈现所接收到的音频数据及视频数据。
所述分配模块包括:
第一确定单元,用于当所述会话控制命令包括切换命令时,根据所述第一用户端所发送的切换命令,确定所述第一用户端所关注的第二用户端,所述切换命令包括第一用户端当前所关注的第二用户端的信息,所述第二用户端为所述参与会话的多个用户端中除所述第一用户端之外的一个或者多个用户端;
第一分配单元,用于将所接收到的所述第二用户端发送的视频数据分配给所述第一用户端。
所述分配模块包括:
第二确定单元,用于当所述会话控制命令包括会话通知命令时,根据所述参与会话的多个用户端发送的会话通知命令,确定所述参与会话的多个用户端中发言的用户端,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
选择单元,用于从所述发言的用户端中选择不大于预定值的用户端;
第二分配单元,用于将接收到的所选择的用户端发送的音频数据分配给所述第一用户端。
所述选择单元包括:
确定子单元,用于当所述发言的用户端的数量大于所述预定值时,确定所述发言的用户端被所述第一用户端关注的关注权重;
选择子单元,用于根据所述发言的用户端被所述第一用户端关注的关注权重,从所述发言的用户端中选择大于预定值的用户端。
所述确定子单元,具体用于根据所述发言的用户端被所述第一用户端关注的次数、所述发言的用户端所属运营商的权限等级或/和所述发言的用户端的身份等级计算得到所述关注权重。
一种多人会话时数据呈现的系统,所述系统包括服务器和参与多人会话的多个用户端;其中,所述服务器为以上所述的任一服务器;
所述参与会话的多个用户端,用于分别通过会话连接向所述服务器发送会话控制命令、本地音频数据和视频数据,并呈现所述服务器分配的音频数据及视频数据。
本发明实施例提供的技术方案带来的有益效果是:通过根据参与会话的多个用户端发送的会话控制命令,为参与会话的多个用户端中的任一个第一用户端分配音频数据和视频数据,将分配给第一用户端的音频数据及视频数据发送给第一用户端进行呈现的技术方案的实现,对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,如现有技术要求参与会话的用户使用多个用户端或者大屏幕的用户端来呈现会话时的音频和视频数据,而本发明由于对分配给用户端的音频和视频数据进行了控制而降低了对用户端的性能要求,使得多人会话可以覆盖到更多的用户(可以包括手机等小屏幕的用户端或者计算机等大屏幕的用户端)。另一方面,服务器仅负责视频和音频资源的分配及中转,降低了资源消耗,提高了资源分配的并发性,可以使得低成本支持大量的会话用户。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种多人会话时数据呈现的方法流程示意图;
图2是本发明实施例二提供的一种多人会话时数据呈现的方法流程示意图;
图3是本发明实施例二提供的一种服务器与参与会话的用户端间建立会话连接的示意图;
图4是本发明实施例二提供的一种第一用户端在多人会话时数据呈现的实例图;
图5是本发明实施例三提供的一种服务器结构示意图;
图6是本发明实施例三提供的一种服务器结构示意图;
图7是本发明实施例四提供的一种多人会话时数据呈现的系统示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
参见图1,一种多人会话时数据呈现的方法,包括:
步骤101:与参与会话的多个用户端建立会话连接;
步骤102:通过会话连接接收参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
步骤103:根据参与会话的多个用户端发送的会话控制命令,为第一用户端分配第一用户端请求呈现的音频数据和视频数据,其中,第一用户端为参与会话的多个用户端中的任一个;
步骤104:将分配给第一用户端的音频数据及视频数据发送给第一用户端,以便第一用户端呈现所接收到的音频数据及视频数据。
本发明实施例提供的技术方案带来的有益效果是:通过根据参与会话的多个用户端发送的会话控制命令,为参与会话的多个用户端中的任一个第一用户端分配音频数据和视频数据,将分配给第一用户端的音频数据及视频数据发送给第一用户端进行呈现的技术方案的实现,对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,如现有技术要求参与会话的用户使用多个用户端或者大屏幕的用户端来呈现会话时的音频和视频数据,而本发明由于对分配给用户端的音频和视频数据进行了控制而降低了对用户端的性能要求,使得多人会话可以覆盖到更多的用户(可以包括手机等小屏幕的用户端或者计算机等大屏幕的用户端)。另一方面,服务器仅负责视频和音频资源的分配及中转,降低了资源消耗,提高了资源分配的并发性,可以使得低成本支持大量的会话用户。
实施例二
参见图2,为本发明实施例所提供的一种多人会话时数据呈现的方法,适用于通过无线连接方式所建立的多人视频会话的场景,可以使得在多人视频会话时,参与会话的用户端可以分别呈现来呈现视频数据和音频数据,如呈现一路视频数据和多路音频数据,整个发明实施例中所述的视频数据是指一组由连续的图像帧所构成的图像数据,其中,所述多人视频会话由服务器及参与会话的多个用户端构成,所述用户端可以是诸如手机或者平板电脑等移动通信设备,所述服务器可以是流媒体服务器,方法包括:
步骤201:服务器与参与会话的多个用户端建立会话连接;
具体地,服务器可以通过无线连接的方式、有线连接的方式或者无线与有线混合连接的方式来与参与会话的多个用户端建立会话连接,其中,本发明实施例所述的建立会话连接的过程可以包括:
第一用户端向服务器发送呼叫请求,以通过服务器呼叫参与会话的其他用户端,其中,第一用户端为参与会话的多个用户端中的任一个,呼叫请求包括所呼叫的参与会话的用户端信息,如所呼叫的参与会话的用户端的标识等信息;
作为一个可选实现的实施例,服务器在接收到第一用户端所发送的呼叫请求时,分配会话房间,并通知第一用户端进入会话房间进行等待;之后,向第一用户端所呼叫的参与会话的用户端转发所述呼叫请求,并在接收到第一用户端所呼叫的参与会话的用户端返回的呼叫响应后,通知第一用户端所呼叫的参与会话的用户端进入所述会话房间进行等待,至此,服务器与参与会话的多个用户端建立了会话连接。
作为另一个可选实现的实施例,服务器在接收到第一用户端所发送的呼叫请求后,向第一用户端所呼叫的参与会话的用户端转发所述呼叫请求,并在接收到第一用户端所呼叫的参与会话的用户端返回的呼叫响应后,分配会话房间,并通知第一用户端及其呼叫的参与会话的用户端进入所述会话房间等待,至此,服务器与参与会话的多个用户端建立了会话连接。
图3为本发明实施例所提供的一种服务器与参与会话的用户端间所建立的会话连接的示意图,服务器可以通过上述方式在应用层与参与会话的用户端建立会话连接,包括:会话控制连接(1)、视频数据传输连接(2)及音频数据传输连接(3)等。
本发明实施例在具体实现时,服务器所建立的上述会话连接可以复用相同的TCP(Transmission Control Protocol,传输控制协议)连接或者UDP(User Datagram Protocol,用户数据包协议)连接,也可以分别使用不同的TCP或者UDP连接。
当服务器与参与会话的多个用户端建立会话连接后,同一会话房间内的用户端彼此之间便可以通过与服务器间建立的会话连接进行会话。
步骤202:服务器通过所建立的会话连接接收参与会话的多个用户端所分别上传的音频数据及视频数据;
本发明实施例中,参与会话的多个用户端进行会话时,分别采集本地的音频数据及视频数据,并分别通过上述所建立的音频数据传输连接及视频数据传输连接将所采集到的音频数据及视频数据上传到服务器;
这样,服务器接收到参与会话的多个用户端各自上传的音频数据和视频数据后,便可以从接收到的音频数据和视频数据中,选择分配给参与会话的各用户端所要呈现的音频数据和视频数据,具体的分配过程参见步骤203和204的描述。
步骤203:服务器通过所建立的会话连接接收参与会话的多个用户端发送的会话控制命令,其中,所述会话控制命令可以包括会话通知命令及切换命令等;
本发明实施例在具体实现时,当参与会话的用户端开始或者停止会话时,可以通过上述所建立的会话控制连接向服务器发送会话通知命令,通知服务器参与会话的用户端的会话状态,所述会话通知命令包含有参与会话的用户端是否发言的信息;当参与会话的用户端切换其关注的其他参与会话的用户端时,可以通过上述所建立的会话控制连接向服务器发送切换命令,通知服务器参与会话的用户端所关注用户端的信息,所述切换命令包含有所切换用户端的信息。
本发明实施例在具体实现时,服务器可以根据参与会话的各用户端所发送的切换命令,确定参与会话的多个用户端中未被其他用户端所关注的用户端,作为一可选实现的实施例,服务器丢弃所接收到的未被其他用户端所关注的用户端上传的音频数据及视频数据,作为另一可选实现的实施例,服务器向未被其他用户端所关注的用户端发送终止上传命令,未被其他用户端所关注的用户端接收到终止上传命令后,终止上传其本地采集到的音频数据及视频数据,以节省无线带宽。
本发明实施例中,步骤202与步骤203之间并无执行顺序上的约束。
步骤204:服务器根据参与会话的多个用户端发送的会话控制命令,为第一用户端分配第一用户端请求呈现的音频数据和视频数据,其中,所述第一用户端为参与会话的多个用户端中的任一个;
本发明实施例中为第一用户端分配视频数据包括:
根据第一用户端发送的切换命令,确定第一用户端所关注的第二用户端,其中,切换命令包括第一用户端当前关注的第二用户端的信息,第二用户端为参与会话的多个用户端中除第一用户端之外的一个或者多个用户端;
将所接收的第二用户端发送的视频数据分配给第一用户端。
本发明实施例中,通过将第一用户端所关注的第二用户端的视频数据发送给第一用户端的实现,第一用户端便可以通过不断切换其关注的第二用户端来切换显示其关注的用户端,以保证用户的使用体验,例如,当第一用户端为小屏幕用户端时,第一用户端可以一次仅关注一个参与会话的用户端,这样,第一用户端一次呈现一个参与会话的用户端的视频数据,使得小屏幕的第一用户端可以呈现较大的视频图像,且通过自由切换其关注的参与会话的用户端,保证小屏幕的第一用户端可以自由切换呈现参会会话的用户端,而最终保证用户的使用体验。
本发明实施例中为第一用户端分配音频数据包括:
根据参与会话的多个用户端发送的会话通知命令,确定参与会话的多个用户端中发言的用户端,其中,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
从发言的用户端中选择不大于预定值个的用户端,并将接收到的所选择的用户端发送的音频数据分配给第一用户端,其中,预定值可以根据网络的带宽来预先设定。
本发明实施例中,当发言的用户端的数量不大于预定值时,则将接收到的所发言的用户端发送的音频数据分配给第一用户端;
当发言的用户端的数量大于预定值时,确定发言的用户端被第一用户端关注的关注权重;
根据所述发言的用户端被所述第一用户端关注的关注权重,从所述发言的用户端中选择大于预定值个的用户端,本发明实施例在具体实现时,根据关注权重从发言的用户端中选择用户端时,关注权重高的发言的用户端被优先选择。
其中,确定发言的用户端被第一用户端关注的关注权重包括:可以根据发言的用户端被第一用户端关注的次数、发言的用户端所属运营商的权限等级或/和发言的用户端的身份等级计算(如加权计算等)得到发言的用户端被第一用户端关注的关注权重。
本发明实施例中,通过从发言的用户端中选择不大于预定值个的用户端,且将所选择的用户端发送的音频数据分配给第一用户端的实现,限定第一用户端所可以呈现的音频数据的数量,以降低多人会话时对网络的带宽要求。
本发明实施例虽然限定了第一用户端所可以呈现的音频数据的数量,但是并不会降低用户的使用体验,原因如下:当多人会话时,如果两三个人同时说话,听者是可以分清谁在说什么的,但是当过多人(比如十几个人)同时说话时,听者基本上就分不清谁在说什么了。而在友好的交谈中,这种过多的人同时说话的情况会很快消失,大家礼貌的安静下来让一个人或者少数的几个人说话。所以,本发明实施例中,将第一用户端所呈现的音频数据限定在预定值个参与会话的其他的用户端所发送的音频数据是是不会降低用户体验的。
本发明实施例中,当参会会话的多个用户端中发言的用户端的数量大于预定值时,采用发言者被第一用户端关注的关注权重要保证第一用户端可以呈现其所关注的重要的参与会话的用户端的音频数据,在一定程度上可以保证用户的使用体验。
本发明实施例在具体实现时,服务器为第一用户端分配音频数据可以包括:
1)、服务器根据接收到的第一用户端发送的切换命令维护一个第一用户端的视频关注列表,该视频关注列表存储有第一用户端所关注第二用户端与关注权重间对应关系。
具体实现时,根据第一用户端所发送的切换命令,统计并记录第一用户端所关注过的第二用户端的信息,其中,第一用户端所关注过的第二用户端的信息包括第二用户端的标识及被第一用户端关注的次数,如第一用户端先后关注过用户端2、用户端3和用户端4,用户端2、3和4被关注的次数分别为3次、1次和4次;根据第一用户端所关注的第二用户端的记录信息计算第一用户端所关注第二用户端的关注权重,作为一个可选的实施例,直接将第二用户端被第一用户端关注的次数作为第二用户端的关注权重;作为另一可选实现的实施例,根据第二用户端被第一用户端所关注的次数、第二用户端的身份等级或/和第二用户端所属运营商等级计算(如加权计算等)得到第二用户端的关注权重。
其中,第二用户端的身份等级及第二用户端所属运营商的等级都可以在服务器的本地存储文件中查找得到。这是由于服务器在与第二服务器进行会话连接时,要求第二用户端在服务器内进行注册,告知服务器其身份以及所属运营商等基本用户信息,服务器可以根据第二用户端的身份查询身份与身份等级间对应关系可以得到第二用户端的身份等级,并可以根据第二用户端所属运营商查找运营商与运营商等级间对应关系得到第二用户端所述运营商的等级,之后,服务器在本地存储文件中存储第二用户端对应的身份等级及所述运营商等级等信息,故,服务器可以从本地存储文件中获知第二用户端的身份等级及所属运营商等级等信息。
例如,服务器所获取的第一用户端的视频关注列表如表1所示。
表1:第一用户端的视频关注列表
所关注的第二用户端 | 关注权重 |
用户端2 | 3 |
用户端3 | 1 |
用户端4 | 4 |
...... | ...... |
2)、根据参与会话的各用户端发送的会话通知命令维护一当前发言者列表,该当前发言者列表给出了多人会话时,当前发言的用户端的信息,具体可以如表2所示。
表2:当前发言者列表
参与会话的用户端 | 是否发言 |
用户端1 | 是 |
用户端2 | 是 |
用户端3 | 否 |
用户端4 | 是 |
...... | ...... |
3)、根据无线网络的带宽确定可以分配给第一用户端的音频数据的数量;
本发明实施例中,所述的音频数据的数量指第一用户端可以呈现几路的音频数据,例如,用户端1可以呈现1路的音频数据,即用户端可以呈现其他参与会话的1个用户端所对应的音频数据;
4)、根据所维护的第一用户端的视频关注列表及当前发言者列表确定分配给第一用户端的音频数据;
具体地,查找当前发言列表得到当前发言的用户端,如表2所示,当前发言的用户端有用户端1、用户端2及用户端4;
由于用户端1为当前发言的用户端,用户端1对应的音频数据不用再分配用户端1,且用户端1可以呈现1路的音频数据,故从当前发言的用户端2及用户端4中选择一个用户端对应的音频数据分配给用户端1;
由表1所示的用户端1的视频关注列表可以知道,当前发言的用户端2的关注权重为3,当前发言的用户端4的关注权重为4,故将用户端4发送的音频数据分配给用户端1。
步骤205:服务器将分配给第一用户端的音频数据及视频数据发送给第一用户端,具体通过与第一用户端间建立的音频数据传输连接和视频数据传输连接将分配给第一用户端的音频数据发送给第一用户端;
具体地,服务器将分配给第一用户端的音频数据进行编码,具体地,可以采用AMR(Adaptive Multi-Rate,自适应多速率)编码对分配给第一用户端的音频数据进行编码,之后,将编码后的音频数据发送给第一用户端,以节省传输音频数据的带宽、提高音频数据的传输效率及传输安全性。
步骤206:第一用户端呈现所接收到的音频数据及视频数据;
一方面,第一用户端对接收到的音频数据进行解密后显示,参见图4,本发明实施例中,第一用户端在第一显示区域显示接收到的视频数据,也即第一用户端所关注的用户端(第二用户端)的视频数据,在第二显示区域显示除自身及第二用户端外的其他参与会话的用户端的头像图标,以便第一用户端可以根据第二显示区域所显示的头像图标选择切换其关注的用户端。
另一方面,第一用户端对接收到的音频数据进行混音后播放,具体地,第一用户端预先安装有混音器,该混混音器可以将接收到的多路音频数据混音后合成一路音频信号进行播放,具体的混音方式请参见现有技术,此处就不再赘述。
本发明实施例提供的技术方案带来的有益效果是:通过根据参与会话的多个用户端发送的会话控制命令,为参与会话的多个用户端中的任一个第一用户端分配音频数据和视频数据,将分配给第一用户端的音频数据及视频数据发送给第一用户端进行呈现的技术方案的实现,对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,如现有技术要求参与会话的用户使用多个用户端或者大屏幕的用户端来呈现会话时的音频和视频数据,而本发明由于对分配给用户端的音频和视频数据进行了控制而降低了对用户端的性能要求,使得多人会话可以覆盖到更多的用户(可以包括手机等小屏幕的用户端或者计算机等大屏幕的用户端)。另一方面,服务器仅负责视频和音频资源的分配及中转,降低了资源消耗,提高了资源分配的并发性,可以使得低成本支持大量的会话用户。
实施例三
参见图5,本发明实施例提供了一种服务器,该服务器具体可以上述方法实施例所述的服务器相同,包括:会话连接建立模块301、接收模块302、分配模块303和发送模块304;
会话连接建立模块301,用于与参与会话的多个用户端建立会话连接;
接收模块302,用于通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
分配模块303,用于根据所述参与会话的多个用户端发送的会话控制命令,为第一用户端分配第一用户端请求呈现的音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;
发送模块304,用于将分配给所述第一用户端的音频数据及视频数据发送给第一用户端,以便第一用户端呈现所接收到的音频数据及视频数据。
参见图6,本发明实施例如图4所示的分配模块303包括:
第一确定单元3031,用于当所述会话控制命令包括切换命令时,根据第一用户端所发送的切换命令,确定第一用户端所关注的第二用户端,切换命令包括第一用户端当前所关注的第二用户端的信息,第二用户端为参与会话的多个用户端中除第一用户端之外的一个或者多个用户端;
第一分配单元3032,用于将所接收到的所述第二用户端发送的视频数据分配给所述第一用户端。
第二确定单元3033,用于当所述会话控制命令包括会话通知命令时,根据所述参与会话的多个用户端发送的会话通知命令,确定所述参与会话的多个用户端中发言的用户端,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
选择单元3034,用于从所述发言的用户端中选择不大于预定值的用户端;
第二分配单元3035,用于将接收到的所选择的用户端发送的音频数据分配给所述第一用户端。
具体地,选择单元3034包括:
确定子单元,用于当发言的用户端的数量大于预定值时,确定发言的用户端被第一用户端关注的关注权重;
选择子单元,用于根据发言的用户端被第一用户端关注的关注权重,从发言的用户端中选择大于预定值的用户端。
其中,确定子单元,具体用于根据所述发言的用户端被所述第一用户端关注的次数、所述发言的用户端所属运营商的权限等级或/和所述发言的用户端的身份等级计算得到所述关注权重。
本发明实施例提供的技术方案带来的有益效果是通过根据参与会话的多个用户端发送的会话控制命令,为参与会话的多个用户端中的任一个第一用户端分配音频数据和视频数据,将分配给第一用户端的音频数据及视频数据发送给第一用户端进行呈现的技术方案的实现,对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,如现有技术要求参与会话的用户使用多个用户端或者大屏幕的用户端来呈现会话时的音频和视频数据,而本发明由于对分配给用户端的音频和视频数据进行了控制而降低了对用户端的性能要求,使得多人会话可以覆盖到更多的用户(可以包括手机等小屏幕的用户端或者计算机等大屏幕的用户端)。另一方面,服务器仅负责视频和音频资源的分配及中转,降低了资源消耗,提高了资源分配的并发性,可以使得低成本支持大量的会话用户。
实施例四
参见图7,本发明实施例还提供了一种多人会话时数据呈现的系统,该系统包括服务器401和参与多人会话的多个用户端402;
其中,服务器401请参见实施例三所述的任一服务器,此处就不再赘述。
参与会话的多个用户端402,用于分别通过会话连接向服务器401发送会话控制命令、本地音频数据和视频数据,并呈现服务器401分配的音频数据及视频数据。
本发明实施例提供的技术方案带来的有益效果是:通过根据参与会话的多个用户端发送的会话控制命令,为参与会话的多个用户端中的任一个第一用户端分配音频数据和视频数据,将分配给第一用户端的音频数据及视频数据发送给第一用户端进行呈现的技术方案的实现,对分配给用户端的音频数据和视频数据进行了控制,可以减少对网络带宽的依赖,节省网络流量,并降低对用户端性能的要求,如现有技术要求参与会话的用户使用多个用户端或者大屏幕的用户端来呈现会话时的音频和视频数据,而本发明由于对分配给用户端的音频和视频数据进行了控制而降低了对用户端的性能要求,使得多人会话可以覆盖到更多的用户(可以包括手机等小屏幕的用户端或者计算机等大屏幕的用户端)。另一方面,服务器仅负责视频和音频资源的分配及中转,降低了资源消耗,提高了资源分配的并发性,可以使得低成本支持大量的会话用户。
需要说明的是:上述实施例提供的多人视频会话时数据呈现的设备在呈现数据时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的多人视频会话时数据呈现的设备与多人视频会话时数据呈现的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (11)
1.一种多人会话时数据呈现的方法,其特征在于,所述方法包括:
与参与会话的多个用户端建立会话连接;
通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端请求呈现的音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;
将分配给所述第一用户端的音频数据及视频数据发送给所述第一用户端,以便所述第一用户端呈现所接收到的音频数据及视频数据。
2.根据权利要求1所述的方法,其特征在于,所述会话控制命令包括切换命令,所述根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端所要呈现的视频数据,包括:
根据所述第一用户端所发送的切换命令,确定所述第一用户端所关注的第二用户端,所述切换命令包括第一用户端当前所关注的第二用户端的信息,所述第二用户端为所述参与会话的多个用户端中除所述第一用户端之外的一个或者多个用户端;
将所接收到的所述第二用户端发送的视频数据分配给所述第一用户端。
3.根据权利要求1所述的方法,其特征在于,所述会话控制命令包括会话通知命令,所述根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端所要呈现的音频数据,包括:
根据所述参与会话的多个用户端发送的会话通知命令,确定所述参与会话的多个用户端中发言的用户端,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
从所述发言的用户端中选择不大于预定值的用户端,并将接收到的所选择的用户端发送的音频数据分配给所述第一用户端。
4.根据权利要求3所述的方法,其特征在于,所述从所述发言的用户端中选择不大于预定值的用户端包括:
当所述发言的用户端的数量大于所述预定值时,确定所述发言的用户端被所述第一用户端关注的关注权重;
根据所述发言的用户端被所述第一用户端关注的关注权重,从所述发言的用户端中选择大于预定值的用户端。
5.根据权利要求4所述的方法,其特征在于,所述确定所述发言的用户端被所述第一用户端关注的关注权重,包括:
根据所述发言的用户端被所述第一用户端关注的次数、所述发言的用户端所属运营商的权限等级或/和所述发言的用户端的身份等级计算得到所述关注权重。
6.一种服务器,其特征在于,所述服务器包括:会话连接建立模块、接收模块、分配模块和发送模块;
所述会话连接建立模块,用于与参与会话的多个用户端建立会话连接;
所述接收模块,用于通过所述会话连接接收所述参与会话的多个用户端发送的会话控制命令、音频数据和视频数据;
所述分配模块,用于根据所述参与会话的多个用户端发送的会话控制命令,为所述第一用户端分配所述第一用户端请求呈现的音频数据和视频数据,所述第一用户端为所述参与会话的多个用户端中的任一个;
所述发送模块,用于将分配给所述第一用户端的音频数据及视频数据发送给所述第一用户端,以便所述第一用户端呈现所接收到的音频数据及视频数据。
7.根据权利要求6所述的服务器,其特征在于,所述分配模块包括:
第一确定单元,用于当所述会话控制命令包括切换命令时,根据所述第一用户端所发送的切换命令,确定所述第一用户端所关注的第二用户端,所述切换命令包括第一用户端当前所关注的第二用户端的信息,所述第二用户端为所述参与会话的多个用户端中除所述第一用户端之外的一个或者多个用户端;
第一分配单元,用于将所接收到的所述第二用户端发送的视频数据分配给所述第一用户端。
8.根据权利要求6所述的服务器,其特征在于,所述分配模块包括:
第二确定单元,用于当所述会话控制命令包括会话通知命令时,根据所述参与会话的多个用户端发送的会话通知命令,确定所述参与会话的多个用户端中发言的用户端,所述会话通知命令包括参与会话的用户端当前是否发言的信息;
选择单元,用于从所述发言的用户端中选择不大于预定值的用户端;
第二分配单元,用于将接收到的所选择的用户端发送的音频数据分配给所述第一用户端。
9.根据权利要求8所述的服务器,其特征在于,所述选择单元包括:
确定子单元,用于当所述发言的用户端的数量大于所述预定值时,确定所述发言的用户端被所述第一用户端关注的关注权重;
选择子单元,用于根据所述发言的用户端被所述第一用户端关注的关注权重,从所述发言的用户端中选择大于预定值的用户端。
10.根据权利要求9所述的服务器,其特征在于,所述确定子单元,具体用于根据所述发言的用户端被所述第一用户端关注的次数、所述发言的用户端所属运营商的权限等级或/和所述发言的用户端的身份等级计算得到所述关注权重。
11.一种多人会话时数据呈现的系统,其特征在于,所述系统包括服务器和参与多人会话的多个用户端;其中,
所述服务器为如权利要求6至10任一项所述的服务器;
所述参与会话的多个用户端,用于分别通过会话连接向所述服务器发送会话控制命令、本地音频数据和视频数据,并呈现所述服务器分配的音频数据及视频数据。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210137255.3A CN103384235B (zh) | 2012-05-04 | 2012-05-04 | 多人会话时数据呈现的方法、服务器及系统 |
AP2014008091A AP2014008091A0 (en) | 2012-05-04 | 2013-04-28 | Method, server, user terminal, and system for datapresentation in multi-person conversation |
PCT/CN2013/075015 WO2013163951A1 (zh) | 2012-05-04 | 2013-04-28 | 多人会话时数据呈现的方法、服务器、用户端及系统 |
US14/531,609 US9906574B2 (en) | 2012-05-04 | 2014-11-03 | Method, server, client and system for data presentation in a multiplayer session |
ZA2014/08837A ZA201408837B (en) | 2012-05-04 | 2014-12-02 | Method, server, user terminal, and system for data presentation in multi-person conversation |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210137255.3A CN103384235B (zh) | 2012-05-04 | 2012-05-04 | 多人会话时数据呈现的方法、服务器及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103384235A true CN103384235A (zh) | 2013-11-06 |
CN103384235B CN103384235B (zh) | 2017-09-29 |
Family
ID=49491932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210137255.3A Active CN103384235B (zh) | 2012-05-04 | 2012-05-04 | 多人会话时数据呈现的方法、服务器及系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9906574B2 (zh) |
CN (1) | CN103384235B (zh) |
AP (1) | AP2014008091A0 (zh) |
WO (1) | WO2013163951A1 (zh) |
ZA (1) | ZA201408837B (zh) |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104156866A (zh) * | 2014-08-30 | 2014-11-19 | 林志辉 | 一种基于二维码、nfc和移动客户端应用平台 |
CN105262602A (zh) * | 2015-09-08 | 2016-01-20 | 北京北方博业科技发展有限公司 | 采用中心控制的多用户语音复合分组语音交互方法及系统 |
CN105376516A (zh) * | 2015-10-19 | 2016-03-02 | 深圳市航安网络科技有限公司 | 一种移动视频会议系统及其实现方法 |
CN106060424A (zh) * | 2016-06-14 | 2016-10-26 | 徐文波 | 视频配音方法和装置 |
CN106231237A (zh) * | 2016-09-27 | 2016-12-14 | 北京小米移动软件有限公司 | 视频通话方法及装置 |
CN108781310A (zh) * | 2016-04-15 | 2018-11-09 | 英特尔公司 | 使用视频的图像来选择要增强的视频的音频流 |
CN109587176A (zh) * | 2019-01-22 | 2019-04-05 | 网易(杭州)网络有限公司 | 多人语音通信控制方法及装置、存储介质及电子设备 |
CN110062193A (zh) * | 2019-04-18 | 2019-07-26 | 视联动力信息技术股份有限公司 | 一种多人通话的处理方法及装置 |
CN110213527A (zh) * | 2019-07-08 | 2019-09-06 | 海能达通信股份有限公司 | 一种视频会话控制方法及用户端及服务器 |
CN110457104A (zh) * | 2018-05-07 | 2019-11-15 | 苹果公司 | 多参与者实时通信用户界面 |
CN111522604A (zh) * | 2020-04-26 | 2020-08-11 | 腾讯科技(深圳)有限公司 | 一种应用数据处理方法、装置以及计算机可读存储介质 |
US10866703B2 (en) | 2017-09-29 | 2020-12-15 | Apple Inc. | User interface for multi-user communication session |
CN112135155A (zh) * | 2020-09-11 | 2020-12-25 | 上海七牛信息技术有限公司 | 音视频的连麦合流方法、装置、电子设备及存储介质 |
US10904486B2 (en) | 2018-05-07 | 2021-01-26 | Apple Inc. | Multi-participant live communication user interface |
CN112652408A (zh) * | 2020-12-14 | 2021-04-13 | 河南经方云科技有限公司 | 一种基于互联网的中医远程会诊辅助系统及方法 |
US11079913B1 (en) | 2020-05-11 | 2021-08-03 | Apple Inc. | User interface for status indicators |
US11128792B2 (en) | 2018-09-28 | 2021-09-21 | Apple Inc. | Capturing and displaying images with multiple focal planes |
US11360634B1 (en) | 2021-05-15 | 2022-06-14 | Apple Inc. | Shared-content session user interfaces |
US11431891B2 (en) | 2021-01-31 | 2022-08-30 | Apple Inc. | User interfaces for wide angle video conference |
US11770600B2 (en) | 2021-09-24 | 2023-09-26 | Apple Inc. | Wide angle video conference |
US11893214B2 (en) | 2021-05-15 | 2024-02-06 | Apple Inc. | Real-time communication user interface |
US11907605B2 (en) | 2021-05-15 | 2024-02-20 | Apple Inc. | Shared-content session user interfaces |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107479811A (zh) * | 2016-06-08 | 2017-12-15 | 南京跃豚智能科技有限公司 | 在会话期间建立与管理会议、记录会议的方法以及移动终端 |
US11258840B2 (en) | 2018-12-20 | 2022-02-22 | Cisco Technology, Inc | Realtime communication architecture over hybrid ICN and realtime information centric transport protocol |
US10880315B1 (en) * | 2020-02-28 | 2020-12-29 | Cisco Technology, Inc. | Active speaker naming and request in ICN-based real-time communication systems |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101141613A (zh) * | 2007-10-10 | 2008-03-12 | 中国联合通信有限公司 | 一种视频会议切换控制系统及方法 |
CN101183961A (zh) * | 2006-12-26 | 2008-05-21 | 腾讯科技(深圳)有限公司 | 一种实现多用户语音会话的方法及系统 |
EP1936934A1 (fr) * | 2006-12-19 | 2008-06-25 | France Telecom | Procédé de diffusion d'un flux depuis une plate-forme de service, produit programme d'ordinateur et plate-forme de service correspondants |
CN101427557A (zh) * | 2006-04-18 | 2009-05-06 | 思科技术公司 | 视频会议中的网络资源优化 |
CN102246458A (zh) * | 2008-12-15 | 2011-11-16 | 微软公司 | 使用多个比特率流的视频会议订阅 |
CN102265613A (zh) * | 2008-12-23 | 2011-11-30 | 坦德伯格电信公司 | 用于处理在多个视频会议终端之间的会议中的图像的方法、设备和计算机程序 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2831377B1 (fr) * | 2001-10-22 | 2004-01-16 | France Telecom | Systeme de conference du type qui comprend un pont de conference audio et/ou video et/ou des donnees auquel une pluralite de terminaux peuvent se connecter pour participer a une conference |
US20080165708A1 (en) * | 2007-01-08 | 2008-07-10 | Avaya Technology Llc | Multimedia conferencing method and signal |
US7620413B2 (en) * | 2007-03-22 | 2009-11-17 | Unication Co., Ltd. | Method for implementing push-to-talk over SIP and multicast RTP related system |
US20120077536A1 (en) * | 2009-04-13 | 2012-03-29 | Qualcomm Incorporated | Collaborative group communication method involving a context aware call jockey |
US8761379B2 (en) * | 2009-06-05 | 2014-06-24 | Radish Systems, Llc | System and method for establishing voice and data connection |
US8611877B2 (en) * | 2011-10-31 | 2013-12-17 | Blackberry Limited | Automatic management control of external resources |
US9680658B2 (en) * | 2011-12-07 | 2017-06-13 | Qualcomm Incorporated | Collaborative group communication method involving a context aware call jockey |
US20130169742A1 (en) * | 2011-12-28 | 2013-07-04 | Google Inc. | Video conferencing with unlimited dynamic active participants |
-
2012
- 2012-05-04 CN CN201210137255.3A patent/CN103384235B/zh active Active
-
2013
- 2013-04-28 AP AP2014008091A patent/AP2014008091A0/xx unknown
- 2013-04-28 WO PCT/CN2013/075015 patent/WO2013163951A1/zh active Application Filing
-
2014
- 2014-11-03 US US14/531,609 patent/US9906574B2/en active Active
- 2014-12-02 ZA ZA2014/08837A patent/ZA201408837B/en unknown
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101427557A (zh) * | 2006-04-18 | 2009-05-06 | 思科技术公司 | 视频会议中的网络资源优化 |
EP1936934A1 (fr) * | 2006-12-19 | 2008-06-25 | France Telecom | Procédé de diffusion d'un flux depuis une plate-forme de service, produit programme d'ordinateur et plate-forme de service correspondants |
CN101183961A (zh) * | 2006-12-26 | 2008-05-21 | 腾讯科技(深圳)有限公司 | 一种实现多用户语音会话的方法及系统 |
CN101141613A (zh) * | 2007-10-10 | 2008-03-12 | 中国联合通信有限公司 | 一种视频会议切换控制系统及方法 |
CN102246458A (zh) * | 2008-12-15 | 2011-11-16 | 微软公司 | 使用多个比特率流的视频会议订阅 |
CN102265613A (zh) * | 2008-12-23 | 2011-11-30 | 坦德伯格电信公司 | 用于处理在多个视频会议终端之间的会议中的图像的方法、设备和计算机程序 |
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104156866A (zh) * | 2014-08-30 | 2014-11-19 | 林志辉 | 一种基于二维码、nfc和移动客户端应用平台 |
CN105262602A (zh) * | 2015-09-08 | 2016-01-20 | 北京北方博业科技发展有限公司 | 采用中心控制的多用户语音复合分组语音交互方法及系统 |
CN105262602B (zh) * | 2015-09-08 | 2019-02-01 | 北京北方博业科技发展有限公司 | 采用中心控制的多用户语音复合分组语音交互方法及系统 |
CN105376516A (zh) * | 2015-10-19 | 2016-03-02 | 深圳市航安网络科技有限公司 | 一种移动视频会议系统及其实现方法 |
CN108781310A (zh) * | 2016-04-15 | 2018-11-09 | 英特尔公司 | 使用视频的图像来选择要增强的视频的音频流 |
CN106060424A (zh) * | 2016-06-14 | 2016-10-26 | 徐文波 | 视频配音方法和装置 |
CN106231237A (zh) * | 2016-09-27 | 2016-12-14 | 北京小米移动软件有限公司 | 视频通话方法及装置 |
CN106231237B (zh) * | 2016-09-27 | 2019-03-15 | 北京小米移动软件有限公司 | 视频通话方法及装置 |
US10866703B2 (en) | 2017-09-29 | 2020-12-15 | Apple Inc. | User interface for multi-user communication session |
US11435877B2 (en) | 2017-09-29 | 2022-09-06 | Apple Inc. | User interface for multi-user communication session |
US11849255B2 (en) | 2018-05-07 | 2023-12-19 | Apple Inc. | Multi-participant live communication user interface |
CN110457104A (zh) * | 2018-05-07 | 2019-11-15 | 苹果公司 | 多参与者实时通信用户界面 |
US10904486B2 (en) | 2018-05-07 | 2021-01-26 | Apple Inc. | Multi-participant live communication user interface |
US11399155B2 (en) | 2018-05-07 | 2022-07-26 | Apple Inc. | Multi-participant live communication user interface |
US11895391B2 (en) | 2018-09-28 | 2024-02-06 | Apple Inc. | Capturing and displaying images with multiple focal planes |
US11128792B2 (en) | 2018-09-28 | 2021-09-21 | Apple Inc. | Capturing and displaying images with multiple focal planes |
CN109587176B (zh) * | 2019-01-22 | 2021-08-10 | 网易(杭州)网络有限公司 | 多人语音通信控制方法及装置、存储介质及电子设备 |
CN109587176A (zh) * | 2019-01-22 | 2019-04-05 | 网易(杭州)网络有限公司 | 多人语音通信控制方法及装置、存储介质及电子设备 |
CN110062193A (zh) * | 2019-04-18 | 2019-07-26 | 视联动力信息技术股份有限公司 | 一种多人通话的处理方法及装置 |
CN110213527A (zh) * | 2019-07-08 | 2019-09-06 | 海能达通信股份有限公司 | 一种视频会话控制方法及用户端及服务器 |
CN111522604A (zh) * | 2020-04-26 | 2020-08-11 | 腾讯科技(深圳)有限公司 | 一种应用数据处理方法、装置以及计算机可读存储介质 |
US11079913B1 (en) | 2020-05-11 | 2021-08-03 | Apple Inc. | User interface for status indicators |
US11513667B2 (en) | 2020-05-11 | 2022-11-29 | Apple Inc. | User interface for audio message |
CN112135155A (zh) * | 2020-09-11 | 2020-12-25 | 上海七牛信息技术有限公司 | 音视频的连麦合流方法、装置、电子设备及存储介质 |
CN112652408A (zh) * | 2020-12-14 | 2021-04-13 | 河南经方云科技有限公司 | 一种基于互联网的中医远程会诊辅助系统及方法 |
US11467719B2 (en) | 2021-01-31 | 2022-10-11 | Apple Inc. | User interfaces for wide angle video conference |
US11431891B2 (en) | 2021-01-31 | 2022-08-30 | Apple Inc. | User interfaces for wide angle video conference |
US11671697B2 (en) | 2021-01-31 | 2023-06-06 | Apple Inc. | User interfaces for wide angle video conference |
US11449188B1 (en) | 2021-05-15 | 2022-09-20 | Apple Inc. | Shared-content session user interfaces |
US11822761B2 (en) | 2021-05-15 | 2023-11-21 | Apple Inc. | Shared-content session user interfaces |
US11360634B1 (en) | 2021-05-15 | 2022-06-14 | Apple Inc. | Shared-content session user interfaces |
US11893214B2 (en) | 2021-05-15 | 2024-02-06 | Apple Inc. | Real-time communication user interface |
US11907605B2 (en) | 2021-05-15 | 2024-02-20 | Apple Inc. | Shared-content session user interfaces |
US11928303B2 (en) | 2021-05-15 | 2024-03-12 | Apple Inc. | Shared-content session user interfaces |
US11770600B2 (en) | 2021-09-24 | 2023-09-26 | Apple Inc. | Wide angle video conference |
US11812135B2 (en) | 2021-09-24 | 2023-11-07 | Apple Inc. | Wide angle video conference |
Also Published As
Publication number | Publication date |
---|---|
CN103384235B (zh) | 2017-09-29 |
WO2013163951A1 (zh) | 2013-11-07 |
US9906574B2 (en) | 2018-02-27 |
AP2014008091A0 (en) | 2014-11-30 |
ZA201408837B (en) | 2015-12-23 |
US20150058413A1 (en) | 2015-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103384235A (zh) | 多人会话时数据呈现的方法、服务器及系统 | |
CN110213609B (zh) | 在网络教育直播中进行连麦直播的方法、装置及存储介质 | |
US9357077B2 (en) | Multi-channel multi-access voice over IP intercommunication systems and methods | |
US9024997B2 (en) | Virtual presence via mobile | |
CN101778181B (zh) | 一种移动终端实现可视电话三方通话的方法及系统 | |
US20070250568A1 (en) | System and method for displaying users in a visual conference between locations | |
CN101697580B (zh) | 一种实现可视电话的方法和装置 | |
CN101040524A (zh) | 用于在无线系统中优化音频及视频数据传输的系统及方法 | |
CN103327287B (zh) | 一种会议信号播放方法和装置、视频会议终端、移动设备 | |
CN101477754A (zh) | 一种无线课堂系统 | |
CN106851174A (zh) | 虚拟会议室创建方法及装置、召开视频会议的方法及装置 | |
CN101668163B (zh) | 视讯会议中的点名方法和设备 | |
CN108933914B (zh) | 一种使用移动终端进行视频会议的方法及系统 | |
CN109194904B (zh) | 一种适用于指挥调度业务的移动视频会商系统 | |
CN104601827A (zh) | 一种信息处理方法及移动终端 | |
CN104751868B (zh) | 语音录制方法、通话录音回放方法以及相关装置和系统 | |
CN105611219A (zh) | 视频会议的处理方法及装置 | |
CN104283857A (zh) | 多媒体会议的建立方法、装置及系统 | |
CN113542660A (zh) | 一种实现会议多画面高清显示的方法、系统及存储介质 | |
CN104869347B (zh) | 视频通话方法及装置 | |
CN103546459A (zh) | 一种基于会话初始协议进行会话的方法、终端及服务器 | |
CN108156413A (zh) | 视频会议的传输方法及装置、mcu | |
CN101986732B (zh) | 一种在手机通话中添加背景场景的方法 | |
CN109451261B (zh) | 一种基于公网对讲的远程视频调度系统及方法 | |
CN103905483A (zh) | 音视频共享方法、设备和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20231226 Address after: 518057 Tencent Building, No. 1 High-tech Zone, Nanshan District, Shenzhen City, Guangdong Province, 35 floors Patentee after: TENCENT TECHNOLOGY (SHENZHEN) Co.,Ltd. Patentee after: TENCENT CLOUD COMPUTING (BEIJING) Co.,Ltd. Address before: 2 East 403 room, SEG science and technology garden, Futian District, Guangdong, Shenzhen 518000, China Patentee before: TENCENT TECHNOLOGY (SHENZHEN) Co.,Ltd. |
|
TR01 | Transfer of patent right |