CN110876033B - 一种音视频处理方法、装置及存储介质 - Google Patents
一种音视频处理方法、装置及存储介质 Download PDFInfo
- Publication number
- CN110876033B CN110876033B CN201811001024.3A CN201811001024A CN110876033B CN 110876033 B CN110876033 B CN 110876033B CN 201811001024 A CN201811001024 A CN 201811001024A CN 110876033 B CN110876033 B CN 110876033B
- Authority
- CN
- China
- Prior art keywords
- audio
- sender
- video
- receiver
- platform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25808—Management of client data
- H04N21/25816—Management of client data involving client authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25875—Management of end-user data involving end-user authentication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
- H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
Abstract
本发明实施例公开了一种音视频处理方法、装置及存储介质,本发明实施例可以接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议;通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。该方案发送方和接收方可以通过不同的平台加入同一个音视频会议进行音视频数据交互,提高了音视频数据传输的灵活性及便捷性。
Description
技术领域
本发明涉及互联网技术领域,具体涉及一种音视频处理方法、装置及存储介质。
背景技术
随着互联网技术的发展,用户不仅仅满足于文字的沟通与社交,对实时语音与视频的需求越来越强烈,因此用户通过音视频会议进行信息交互越来越普及,用户可以根据自己的需求通过客户端加入不同的音视频会议,以便在该音视频会议内进行信息交互。
现有技术中,多个用户之间需要通过相同客户端的加入音视频会议,从而在同一音视频会议内进行音视频数据交互。例如,用户A和用户B可以在终端上安装微信等同一即时通信(IM,Instant Messaging)应用,然后用户A和用户B均通过微信应用在微信平台上注册的账号,并且用户A和用户B之间需要加为微信好友,此时才可以通过微信账号建立音视频会议进行视频通话等。或者是,用户A和用户B可以在终端上安装网络会议应用,然后用户A和用户B均在网络会议应用上注册账号,并通过账号建立音视频会议在指定时间进行视频通话等。由此可见,不同用户之间均需要安装统一的应用,以及需注册统一的账号,方可建立音视频会议进行视频通话。
在对现有技术的研究和实践过程中,本发明的发明人发现,不同用户进行音视频数据交互时,需要安装统一的应用,以及需注册统一的账号,才能加入同一个音视频会议,使得进行音视频数据交互的局限性较大及通用性不高,使用起来非常不方便。
发明内容
本发明实施例提供一种音视频处理方法、装置及存储介质,旨在提高对音视频数据进行处理的灵活性及便捷性。
为解决上述技术问题,本发明实施例提供以下技术方案:
一种音视频处理方法,包括:
接收发送方发送的预约请求,根据所述预约请求确定所述发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;
接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议;
通过所述回拨平台呼叫所述发送方,并接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议;
将所述音视频会议内产生的音视频数据通过所述回拨平台发送给所述发送方,以及通过所述第三方平台发送给所述接收方。
一种音视频处理装置,包括:
处理单元,用于接收发送方发送的预约请求,根据所述预约请求确定所述发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;
加入单元,用于接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议;
呼叫单元,用于通过所述回拨平台呼叫所述发送方,并接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议;
发送单元,用于将所述音视频会议内产生的音视频数据通过所述回拨平台发送给所述发送方,以及通过所述第三方平台发送给所述接收方。
一种存储介质,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本发明实施例提供的任一种音视频处理方法中的步骤。
本发明实施例可以根据接收到的发送方发送的预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址,然后在接收到接收方基于链接地址通过第三方平台发送的加入请求时,可以根据加入请求将接收方加入音视频会议。在接收方加入音视频会议后,可以通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;此时可以将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。该方案可以将发送方和接收方通过不同的平台加入同一个音视频会议,并将该音视频会议内产生的音视频数据通过不同平台分别发送给发送方和接收方,实现了发送方和接收方可以通过不同平台在同一个音视频会议内进行音视频数据交互,克服了现有需要在统一平台(即应用)上注册统一的账号才能加入同一个音视频会议进行音视频数据传输的局限性,大大提高了音视频数据传输的灵活性及便捷性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的音视频处理系统的场景示意图;
图2是本发明实施例提供的音视频处理方法的流程示意图;
图3是本发明实施例提供的回拨平台选择的示意图;
图4是本发明实施例提供的登录QQ账号进行授权的示意图;
图5是本发明实施例提供的授权会议系统回拨的示意图;
图6是本发明实施例提供的选择进行身份认证的示意图;
图7是本发明实施例提供的发送方进行音视频通话的显示界面的示意图;
图8是本发明实施例提供的接收方进行音视频通话的显示界面的示意图;
图9是本发明实施例提供的会议系统与其他平台进行通讯的架构图;
图10是本发明实施例提供的音视频处理方法的另一流程示意图;
图11是本发明实施例提供的会议系统处理音视频数据的结构示意图;
图12是本发明实施例提供的音视频处理装置的结构示意图;
图13是本发明实施例提供的音视频处理装置的另一结构示意图;
图14是本发明实施例提供的音视频处理装置的另一结构示意图;
图15是本发明实施例提供的音视频处理装置的另一结构示意图;
图16是本发明实施例提供的音视频处理装置的另一结构示意图;
图17是本发明实施例提供的服务器的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种音视频处理方法、装置及存储介质。
请参阅图1,图1为本发明实施例所提供的音视频处理系统的场景示意图,该音视频处理系统可以包括音视频处理装置,该音视频处理装置具体可以集成在服务器中,例如,该服务器可以用于接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及根据预约请求生成音视频会议对应的链接地址,例如可以为音视频会议分配会议标识,并根据会议标识生成音视频会议对应的链接地址。其中,回拨平台可以包括微信、QQ、skype及WhatsApp等,链接地址可以是统一资源定位符(URL,Uniform Resource Locator)。然后接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议,还可以根据加入请求对接收方进行身份验证,并在身份验证通过时,将接收方加入音视频会议,其中,第三方平台可以包括微信、QQ、skype、WhatsApp、Facebook、Google Account、及Twitter等。在接收方加入音视频会议后,可以通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。此时,发送方和接收方之间可以进行音视频通话,例如,将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方,即接收发送方通过音视频会议发送的音视频数据,并通过第三方平台将该音视频数据发送给接收方,或者,接收接收方通过音视频会议发送的音视频数据,并通过回拨平台将该音视频数据发送给发送方;等等。
需要说明的是,图1所示的音视频处理系统的场景示意图仅仅是一个示例,本发明实施例描述的音视频处理系统以及场景是为了更加清楚的说明本发明实施例的技术方案,并不构成对于本发明实施例提供的技术方案的限定,本领域普通技术人员可知,随着音视频处理系统的演变和新业务场景的出现,本发明实施例提供的技术方案对于类似的技术问题,同样适用。
以下分别进行详细说明。
在本实施例中,将从音视频处理装置的角度进行描述,该音视频处理装置具体可以集成在服务器或网关等网络设备中。
一种音视频处理方法,包括:接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议;通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。
请参阅图2,图2是本发明一实施例提供的音视频处理方法的流程示意图。该音视频处理方法可以包括:
在步骤S101中,接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址。
其中,发送方可以是用户预约音视频会议所使用的客户端,该客户端可以包括微信客户端、QQ客户端、及浏览器客户端等,还可以包括其他类型的客户端,具体内容在此处不作限定。回拨平台可以包括微信、QQ、skype、WhatsApp、Facebook、Google Account、Microsoft ID、及Twitter等,链接地址可以是音视频会议对应的URL,例如,该链接地址可以是http://www.meeting.com/123456等。该音视频会议可以是网络视频会议,在该网络视频会议内发送方与接收方等之间可以进行音视频通话和文字交流等。
当需要预约音视频会议时,发送方可以向音视频处理装置发送预约请求,音视频处理装置可以接收发送方发送的预约请求,该预约请求可以携带有发送方选择的相关信息,例如,发送方所选择的回拨平台、或发送方选择进行身份验证等。此时,音视频处理装置可以根据预约请求确定发送方所选择的回拨平台,以及根据预约请求生成音视频会议对应的链接地址。
在某些实施方式中,接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台的步骤可以包括:接收发送方发送的预约请求,根据预约请求显示预约界面;在预约界面内接收发送方选择的回拨模式,并进入回拨模式;在回拨模式下接收发送方选择的回拨平台。
具体的,发送方可以在音视频处理装置提供的音视频会议系统内申请账号,并登录该账号进入音视频会议系统,发送方进入音视频会议系统后,可以向音视频处理装置发送预约请求。音视频处理装置可以接收发送方发送的预约请求,并根据预约请求显示预约界面,在预约界面内可以接收发送方选择的回拨模式,在回拨模式下,可以通过音视频处理装置在接收方加入音视频会议后,呼叫发送方的方式将发送方加入音视频会议。在发送方选择回拨模式后,需要指定使用的回拨平台,例如,选择回拨到QQ平台或微信平台等,此时音视频处理装置可以在回拨模式下接收发送方选择的回拨平台。
例如,如图3所示,音视频处理装置可以通过https://callback.meeting.com进入回拨模式,提示用户选择回拨平台,此时在选择回拨平台的下拉列表中接收选择指令,根据该选择指令选择QQ平台,提示用户登录QQ平台进行授权。
例如,如图4所示,发送方需要打开的QQ平台登录页面http://auth.qq.com,在QQ平台登录页面内登录希望接收回拨的QQ账号,即输入QQ账号对应的用户名及密码等进行登录,登录后可以授权音视频处理装置呼叫该QQ账号。例如,如图5所示,在授权显示界面内可以触发授权按钮,生成授权指令,并根据授权指令授权音视频处理装置(即会议系统)呼叫该QQ账号。授权后,音视频处理装置可以从QQ平台获取到发送方在QQ平台的身份标识(ID,Identification)和授权信息,该身份标识即为发送方标识,并保存发送方标识和授权信息。
在某些实施方式中,生成音视频会议对应的链接地址的步骤可以包括:建立音视频会议,并为音视频会议分配会议标识;根据会议标识生成音视频会议对应的链接地址。
在预约成功后,音视频处理装置可以建立音视频会议,并为该音视频会议分配会议标识,该会议标识可以是音视频会议的名称或编号等,该会议标识可以是由数字和/或字母组成等,此时可以根据会议标识及预约请求中携带的信息等生成音视频会议对应的链接地址URL,例如,当链接地址为http://www.meeting.com/123456时,其中123456为会议标识。发送方可以将该链接地址发给接收方,例如,发送方可以在租房平台上给接收方发私信,以告知接收方音视频会议对应的链接地址;或者是发送方可以电话、邮件或微信等形式告诉接收方音视频会议对应的链接地址等,以便接收方获知链接地址后,可以通过该链接地址加入音视频会议。
在某些实施方式中,根据会议标识生成音视频会议对应的链接地址的步骤可以包括:接收设置指令,根据设置指令设置链接地址的有效范围;根据会议标识和有效范围生成音视频会议对应的链接地址;
接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议的步骤可包括:接收接收方在有效范围内基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议。
其中,有效范围可以包括有效时间或有效次数等,为了避免接收方在发送方不方便的时间加入音视频会议与发送方进行视频通话,可以对链接地址的有效范围进行设置,例如,当发送方和接收方在不同国家时,可能会存在时差,此时发送方可以指定链接地址的有效范围,即可以指定回拨的有效时间,例如该有效时间设置为北京时间8:00至20:00,以避免不同时区的接收方打搅自己;或者是,发送方在9:00至11:00有急事需要处理,不方便进行音视频通话,此时发送方可以指定链接地址的有效范围,即可以指定回拨的有效时间,例如该有效时间设置为北京时间12:00至20:00,以避免接收方打搅自己。
当音视频通话进需要进行一次时,为了避免接收方骚扰自己,此时发送方可以设置音视频会议的链接地址的有效次数为一次;当音视频通话进需要进行多次,或发送方希望与接收方之间保存联系时,此时发送方可以设置音视频会议的链接地址的有效次数为多次等。当然,还可以设置链接地址的过期时间,例如,设置该链接地址在一个星期后过期。
音视频处理装置可以接收发送方发送的设置指令,例如,发送方可以在设置界面内输入或选择有效时间或有效次数等,从而生成设置指令并发送给音视频处理装置,此时可以根据设置指令设置音视频会议对应的链接地址的有效时间或有效次数等有效范围,然后根据会议标识和有效范围等生成音视频会议对应的链接地址。
在设置链接地址的有效范围,并根据会议标识和有效范围生成音视频会议对应的链接地址后,音视频处理装置可以接收接收方在有效范围内基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议。
在步骤S102中,接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议。
其中,该接收方可以包括一个或多个,该接收方可以应邀发送方加入音视频会议所使用的客户端,该客户端可以包括微信客户端、QQ客户端、及浏览器客户端等,还可以包括其他类型的客户端,具体内容在此处不作限定。第三方平台可以包括微信、QQ、skype、WhatsApp、Facebook、Google Account、Microsoft ID、及Twitter等。
需要说明的是,在某种场景下,接收方可以作为发送方,发送方也可以作为接收方,接收方与发送方互换角色后,音视频数据处理流程与本发明实施例类似,在此不再赘述。
接收方在获取到发送方提供的音视频会议对应的链接地址后,可以基于该链接地址加入音视频会议,例如,接收方可以在第三方平台点击或激活该链接地址,生成加入请求,并向音视频处理装置发送该加入请求。音视频处理装置可以接收接收方基于链接地址通过第三方平台发送的加入请求,该加入请求中可以携带音视频会议的会议标识及接收方的身份标识等,此时可以根据加入请求将接收方加入音视频会议。
在某些实施方式中,接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议的步骤可以包括:接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求对接收方进行身份验证;当身份验证通过时,将接收方加入音视频会议。
由于音视频处理装置可以允许用户匿名进行会议,因此在陌生人场景下,为了提高沟通效果,可以通过有效的手段验证对方身份,以建立信任关系。具体地,音视频处理装置在接收到接收方基于链接地址通过第三方平台发送的加入请求后,可以根据加入请求对接收方进行身份验证,当对接收方进行身份验证通过时,可以将接收方加入音视频会议,当对接收方进行身份验证不通过时,可以拒绝接收方加入音视频会议。
在某些实施方式中,生成音视频会议对应的链接地址的步骤之前,音视频数据处理方法还可以包括:接收发送方发送的接收方在第三方平台对应的第三方账号类型及账号标识。
在建立音视频会议的过程中,发送方可以根据实际需要设置在回拨模式下要求对参会者(即接收方)进行身份验证,例如发送方可以在预约页面指定接收方在第三方平台对应的第三方账号类型,以及输入第三方账号的账号标识,例如接收方在第三方账号的昵称等。
例如,如图6所示,发送方可以在选择身份认证平台的下拉列表中选择第三方账号类型,例如,选择第三方账号类型是Facebook账号,以及在输入呼叫者(即接收方)在该平台的昵称输入文本框中输入昵称(即账号标识),例如,填写接收方对应的Facebook账号的昵称为Mike Green,并点击确定按钮,此时音视频处理装置可以接收发送方发送的接收方在第三方平台对应的第三方账号类型及账号标识。
在某些实施方式中,接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求对接收方进行身份验证的步骤可以包括:
接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求获取会议信息;当根据会议信息确定需要进行身份验证时,接收接收方通过第三方平台发送的账号信息;当账号信息与第三方账号类型及账号标识匹配时,确定身份验证通过。
为了避免骚扰,在接入音视频会议之前,可以对接收方进行身份验证,接收方打开链接地址生成加入请求后,音视频处理装置可以接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求获取会议信息,例如可以根据链接地址中携带的会议标识查找对应的会议信息,该会议信息可以包括会议主题、会议是否要求进行身份验证等,然后,根据会议信息判断是否需要进行身份验证,当根据会议信息确定不需要进行身份验证时,可以直接将接收方加入音视频会议;当根据会议信息确定需要进行身份验证时,音视频处理装置可以提示接收方登录第三方账号进行身份验证,例如提示接收方使用Facebook账号登录进行身份验证。
接收方点击登录按钮,打开第三方账号的登录页,并在登录页内输入第三方账号对应的用户名及密码来登录第三方账号,登录成功后可以授权音视频处理装置获取接收方在第三方平台上的相关信息,例如昵称及头像等信息。此时音视频处理装置可以接收接收方通过第三方平台发送的账号信息,该账号信息可以包括第三方账号类型、账号标识、授权信息、昵称、及头像等,例如,Facebook账号及Facebook账号的昵称等。此时可以将获取得到的第三方账号类型及账号标识等账号信息,与发送方提供的第三方账号类型及账号标识进行校验,如果一致,则说明获取得到的第三方账号类型及账号标识等账号信息与发送方提供的第三方账号类型及账号标识匹配,此时可以确定身份验证通过,可以将接收方加入音视频会议;如果不一致,则说明获取得到的第三方账号类型及账号标识等账号信息与发送方提供的第三方账号类型及账号标识不匹配,此时可以确定身份验证不通过,拒绝接收方加入音视频会议。例如,获取到的接收方对应的Facebook账号的昵称为Mike Green,而发送方提供的接收方对应的Facebook账号的昵称也为Mike Green。两者一致,此时可以将接收方加入音视频会议,接收方加入音视频会议后,需要等待发送方加入该音视频会议。
在步骤S103中,通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
在接收方成功加入音视频会议之后,音视频处理装置可以通过发送方所选择的回拨平台呼叫发送方,例如通过QQ平台呼叫发送方的QQ账号,发送方可以在在QQ平台中接受呼叫,并基于该呼叫向音视频处理装置反馈的接通响应,此时音视频处理装置可以接收发送方反馈的接通响应,并基于接通响应将发送方加入音视频会议。在发送方和接收方均加入音视频会议后,发送方和接收方之间可以在音视频会议内进行音视频通话,例如,在音视频会议内发送方可以通过QQ平台与接收方通过Facebook平台进行音视频通话。
需要说明的是,当只存在一个发送方和一个接收方时,在该接收方加入音视频会议之后,音视频处理装置即可通过回拨平台呼叫发送方;当存在一个发送方和多个接收方时,可以是第一个接收方加入音视频会议后,音视频处理装置即可通过回拨平台呼叫发送方,或者是左后一个接收方加入音视频会议后,音视频处理装置才通过回拨平台呼叫发送方。
在某些实施方式中,通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议的步骤可以包括:
接收回拨平台基于发送方的授权发送的授权信息和发送方标识;根据授权信息和发送方标识通过回拨平台呼叫发送方;接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
发送方在回拨平台登录账号并进行授权后,回拨平台可以将授权信息和发送方标识等发送给音视频处理装置,此时音视频处理装置可以接收回拨平台基于发送方的授权发送的授权信息和发送方标识等,并对授权信息和发送方标识等进行存储,当需要呼叫发送方时,可以根据预先存储的授权信息和发送方标识等通过回拨平台呼叫发送方,例如通过QQ平台呼叫发送方,QQ平台可以验证发送方标识和授权信息,并在验证通过后呼叫发送方的QQ账号。发送方在回拨平台上接听该呼叫后,可以生成接通响应,并将接通响应反馈给音视频处理装置,此时,音视频处理装置在接收到发送方反馈的接通响应后,可以基于接通响应将发送方加入音视频会议。例如,发送方可以在QQ平台上通过QQ账号接听通话,并发送音视频数据,以生成接通响应,QQ平台可以将接通响应发送给音视频处理装置,音视频处理装置在接收到接通响应后,将发送方加入到音视频会议中。在发送方和接收方都接入音视频会议后,即可进行音视频数据交互,即进行音视频通话。
需要说明的是,步骤S102和步骤S103之间可以同时执行,也可以先执行步骤S102,后执行步骤S103,或者是,先执行步骤S103,后执行步骤S102,具体执行顺序在此次不作限定。
在步骤S104中,将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。
在发送方和接收方都加入音视频会议后,发送方和接收方可在音视频会议内进行音视频数据交互,例如,发送方可以在音视频会议内通过回拨平台将音视频数据发送给音视频处理装置,音视频处理装置可以通过第三方平台将音视频数据发送给接收方;接收方可以在音视频会议内通过第三方平台将音视频数据发送给音视频处理装置,音视频处理装置可以通过回拨平台将音视频数据发送给发送方。
在某些实施方式中,将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方的步骤可以包括:
获取发送方和接收方所需的语言类型,根据语言类型对音视频数据中的音频数据进行处理,得到处理后音频数据;将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方,及通过第三方平台发送给接收方。
在将音视频数据发送给发送方和接收方之前,音视频处理装置可以预先对音视频数据进行处理,例如,发送方和接收方可以自行打开翻译模式,设置自己所需的语言类型,其中语言类型可以包括中文、英语、德语、法语、泰语及俄语等,当在音视频会议内接收到音视频数据时,音视频处理装置可以对音视频数据中的音频数据进行识别,识别出该音频数据的语义,以及获取发送方和接收方所需的语言类型,根据发送方所需的语言类型,对音视频数据中的音频数据进行转换和/或翻译等处理,得到处理后音频数据,将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方;并且,根据接收方所需的语言类型,对音视频数据中的音频数据进行转换和/或翻译等处理,得到处理后音频数据,将音视频数据中的视频数据及处理后音视频数据通过第三方平台发送给接收方。此时,发送方可以通过回拨平台在显示屏幕内显示视频画面及字幕,通过扬声器等输出语音,以及接收方可以通过第三方平台在显示屏幕内显示视频画面及字幕,并通过扬声器等输出语音,从而实现同声传译功能。
在某些实施方式中,处理后音频数据包括转换后音频数据和/或翻译后文字,获取发送方和接收方所需的语言类型,根据语言类型对音视频数据中的音频数据进行处理,得到处理后音频数据的步骤可以包括:
获取发送方所需的第一语言类型,以及接收方所需的第二语言类型;对音视频数据中的音频数据进行识别,得到识别后音频数据;根据第一语言类型和第二语言类型对识别后音频数据转换,得到转换后音频数据,和/或对识别后音频数据进行翻译,得到翻译后文字。
例如,如图7和图8所示,若发送方对应的用户为ABC,用户ABC的所需的第一语言类型为中文,接收方对应的用户为XYZ,用户XYZ的所需的第二语言类型为英文,则在用户ABC通过QQ平台与用户XYZ通过Facebook平台建立音视频会议并进行音视频通话的过程中,当用户ABC在音视频会议内利用中文说出“你爱我吗”时,此时需要对音视频数据进行处理,首先,音视频处理装置可以对音视频数据中的音频数据进行识别,识别出该音频数据为用户ABC说出的中文:“你爱我吗”。然后根据用户ABC的语言为中文,对识别后音频数据进行翻译,得到翻译后的中文文字:“你爱我吗”,以及根据用户XYZ的语言为英文,对识别后音频数据进行翻译,得到翻译后的英文文字:“Do you love me”。此时音视频处理装置还可以根据实际需要将中文语音转换为英文语音。最后,音视频处理装置可以将得到的中文文字、中文语音、及视频画面等通过回拨平台发送给发送方,图7中发送方可以在显示屏幕内显示中文文字、英文文字及视频画面,并输出中文语音或英文语音。以及,音视频处理装置可以将得到的英文文字、英文语音、及视频画面等通过第三方平台发送给接收方,接收方可以在显示屏幕内显示英文文字、中文文字及视频画面,及输出中文语音或英文语音。
当用户XYZ在音视频会议内利用英文说出“Yes,I love you”时,音视频处理装置可以对音视频数据中的音频数据进行识别,识别出该音频数据为用户XYZ说出的英文:“Yes,I love you”。然后根据用户ABC的语言为中文,对识别后音频数据进行翻译,得到翻译后的中文文字:“是的,我爱你”,以及根据用户XYZ的语言为英文,对识别后音频数据进行翻译,得到翻译后的英文文字:“Yes,I love you”。此时音视频处理装置还可以根据实际需要将英文语音转换为中文语音。最后,音视频处理装置可以将得到的中文文字、中文语音、及视频画面等通过回拨平台发送给发送方,发送方可以在显示屏幕内显示中文文字及视频画面,并输出中文语音或英文语音。以及,音视频处理装置可以将得到的英文文字、英文语音、及视频画面等通过第三方平台发送给接收方,图8中接收方可在显示屏幕内显示英文文字及视频画面,输出中文语音或英文语音。
本发明为不同母语用户之间的交流提供了便利,无需安装统一的应用,且无需注册统一的账号,即可进行视频通话,并为不同母语用户提供同声传译功能,使得不同国家、地域的互联网用户可以更便捷的沟通,解决了现有互联网上不同地区、不同语言的用户由于使用的应用软件不同、账号体系不同、及语言不同等,导致很难进行沟通的问题,更加方便各个用户进行沟通,另外,回拨模式相比时间固定的预约会议方式,使得用户在时间安排上更加灵活。
以下将举例进行详细说明,随着互联网应用越来越广泛,不同母语的用户之间交流的需求越来越多,例如,中国用户A在租房平台发布了一个房屋信息,外国用户B来中国旅游期间希望在中国租房,于是用户B在租房平台看到了用户A的房源,希望与用户A交流,并查看房屋内部设施。由于用户A仅仅掌握简单英语的读写能力,用户B仅仅掌握简单中文的读写能力,因此即使双方打电话也无法进行沟通,而且用户A仅使用QQ,用户B仅使用WhatsApp,这种情况下,本发明提供的音视频处理装置(例如音视频会议系统)能为用户A和用户B提供便捷的沟通方式。具体地,以音视频处理装置为音视频会议系统为例,用户A可以在音视频会议系统中注册账号,并使用注册的账号登录音视频会议系统,进入会议预约界面,并选择开启回拨模式及回拨平台为QQ平台,在QQ平台登录QQ账号,授权音视频会议系统可以获得QQ账号相关信息和进行回拨操作,以及选择在进行回拨时先对用户B进行身份验证,此时用户A需要指定用户B的验证平台为WhatsApp平台及在该平台的昵称。预约成功后,音视频会议系统可以生成可以用于回拨用户A的QQ账号的链接地址URL,用户A可以通过系统外的方式将URL发给用户B,例如在租房平台上给用户B发携带URL的私信。用户B打开URL时,音视频会议系统提示用户B使用WhatsApp账号登录进行身份验证,用户B登录WhatsApp账号,并授权音视频会议系统获取其昵称与头像等信息。音视频会议系统将取得的昵称与用户A填写的昵称进行校验,如果一致,则用户B可以加入音视频会议。成功加入音视频会议之后,音视频会议系统会呼叫用户A的QQ账号。用户A在QQ中接受呼叫后,用户A可以在QQ中与用户B在WhatsApp进行音视频通话。在进行音视频通话的过程中,音视频会议系统可以根据用户A和用户B打开的翻译模式及设置的语言类型对音视频数据进行转换和/或翻译等处理,得到处理后的音视频数据,并将处理后的音视频数据通过QQ平台发送给用户A,以及通过WhatsApp平台发送给用户B,此时用户A和用户B均可以在屏幕上看到对方讲话的字幕,实现了同声传译功能,打破了语言的隔阂,为更广泛的合作提供了更多的机会。
由上可知,本发明实施例可以根据接收到的发送方发送的预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址,然后在接收到接收方基于链接地址通过第三方平台发送的加入请求时,可以根据加入请求将接收方加入音视频会议。在接收方加入音视频会议后,可以通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;此时可以将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。该方案可以将发送方和接收方通过不同的平台加入同一个音视频会议,并将该音视频会议内产生的音视频数据通过不同平台分别发送给发送方和接收方,实现了发送方和接收方可以通过不同平台在同一个音视频会议内进行音视频数据交互,克服了现有需要在统一平台(即应用)上注册统一的账号才能加入同一个音视频会议进行音视频数据传输的局限性,大大提高了音视频数据传输的灵活性及便捷性。
根据上述实施例所描述的方法,以下将举例作进一步详细说明。
本实施例以音视频处理装置为服务器为例,该服务器可以集成在音视频会议系统(以下将简称为会议系统)中,以发送方为客户端A,接收方为客户端B为例,其中,客户端A使用的回拨平台为QQ平台,客户端B使用的第三方平台可以是Facebook平台。
其中,如图9所示,会议系统可以包括控制模块、浏览器代理、QQ适配器及其他适配器等,控制模块可以用于负责账号登录,连接QQ服务器(或其他服务器)、浏览器代理、及QQ适配器(或其他适配器)等,以及控制会议的开始、加入、及退出等操作。浏览器代理可以用于模拟浏览器行为,在音视频通话中负责与客户端B的浏览器互相传递音视频数据。QQ适配器可以用于负责与QQ服务器(即QQ平台)进行通讯,实现呼叫客户端A,以及会议生命周期内的所有数据交换的操作。其他适配器可以用于负责与其他即时通信IM平台进行通讯,通过添加不同的适配器,可以实现与WhatsApp或Skype等其他IM实现回拨服务。
需要说明的是,会议系统的架构、发送方、接收方、回拨平台及第三方平台等可以根据实际需要进行灵活设置,本实施例只是为了便于描述所举的例子,不应理解为是对会议系统的架构、发送方、接收方、回拨平台及第三方平台等的限定,但不管回拨平台及第三方平台等具体为什么平台,或会议系统的架构包括哪些模块,音视频处理的过程都是类似的,都可按照该示例进行理解。
请参阅图10,图10为本发明实施例提供的音视频处理方法的流程示意图。该方法流程可以包括:
S201、客户端A登录会议系统,并开启回拨模式。
客户端A可以在会议系统内注册账号,并登录注册好的账号以进入会议系统,例如,客户端A可以向会议系统中的控制模块发送注册请求,并根据控制模块的提示执行注册操作。客户端A进入会议系统后,可以进入预约界面,在预约界面内选择回拨模式,从而开启回拨模式,在该回拨模式下无需填写会议时间。在回拨模式下,在客户端B加入音视频会议后,会议系统可以通过呼叫客户端A的方式将客户端A加入音视频会议。
S202、会议系统提示客户端A选择回拨平台。
S203、客户端A选择QQ平台。
S204、会议系统提示客户端A登录QQ平台进行授权。
S205、客户端A登录QQ账号,并向QQ平台申请授权回拨。
S206、QQ平台授权后,向会议系统发送客户端A的ID、授权信息。
S207、会议系统保存客户端A的ID、授权信息。
例如,如图3所示,会议系统可以通过https://callback.meeting.com进入回拨模式,提示客户端A选择回拨平台,此时会议系统可以在选择回拨平台的下拉列表中接收客户端A发送的选择指令,根据该选择指令选择QQ平台,提示客户端A登录QQ平台进行授权。如图4所示,客户端A需要打开的QQ平台登录页面http://auth.qq.com,在QQ平台登录页面内登录接收回拨的QQ账号,即输入QQ账号对应的用户名及密码等进行登录,登录后可以授权会议系统呼叫该QQ账号。如图5所示,在授权显示界面内客户端A可以触发授权按钮,生成授权指令,并根据授权指令授权会议系统呼叫该QQ账号。授权后,会议系统可以从QQ平台获取到客户端A在QQ平台的身份标识和授权信息,该身份标识即为客户端A的ID,并保存客户端A的ID和授权信息。
S208、会议系统根据客户端A的请求,要求对参会人员进行身份验证。
S209、客户端A指定客户端B对应的第三方账号类型,以及输入第三方账号的账号昵称。
客户端A可以根据实际需要请求会议系统对要求参会人员(例如客户端B)进行身份验证,例如客户端A可以在预约页面指定客户端B在第三方平台对应的第三方账号类型,以及输入第三方账号的昵称等。例如,如图6所示,客户端A可以在选择身份认证平台的下拉列表中选择客户端B的第三方账号类型,例如,选择客户端B的第三方账号类型是Facebook账号,以及在输入呼叫者(即客户端B)在该平台的昵称的输入文本框中输入昵称,例如,输入客户端B对应的Facebook账号的昵称为Mike Green,并点击确定按钮。
S210、会议系统生成URL,并将URL发送给客户端A。
S211、客户端A将URL发送给客户端B。
在预约成功后,会议系统可以通过控制模块建立音视频会议,并为该音视频会议分配会议标识,该会议标识可以是音视频会议的名称或编号等,此时可以根据会议标识及其他信息等生成音视频会议对应的链接地址URL,例如,当链接地址为http://www.meeting.com/123456时,其中123456为会议标识。客户端A可以将该链接地址发给客户端B,例如,客户端A可以在租房平台上将URL发送给客户端B,或者是客户端A可以电话、邮件或微信等形式将URL发送给客户端B等,以便客户端B获知URL后,可以通过该URL加入音视频会议。
S212、客户端B点击URL,打开会议系统界面。
S213、会议系统提示客户端B使用第三方账号登陆。
S214、客户端B登陆第三方账号,并授权会议系统获取相关信息。
S215、第三方平台将昵称、头像、客户端B的ID和授权信息发送给会议系统。
客户端B通过浏览器打开URL生成加入请求后,会议系统可以通过浏览器代理接收客户端B基于URL通过第三方平台发送的加入请求,此时客户端B可以进入会议系统界面,当确定需要进行身份验证时,会议系统可以提示客户端B登录第三方账号进行身份验证,例如提示客户端B使用Facebook账号登录进行身份验证。客户端B点击登录按钮,打开第三方账号的登录页,并在登录页内输入第三方账号对应的用户名及密码来登录第三方账号,登录成功后可以授权会议系统获取客户端B在第三方平台上的相关信息,例如昵称及头像等信息。此时会议系统可以接收客户端B通过第三方平台发送的账号信息,该账号信息可以包括第三方账号类型、账号标识、授权信息、昵称、及头像等,例如,Facebook账号及Facebook账号的昵称等。
S216、会议系统验证账号类型及账号昵称。
S217、当验证通过时,会议系统将客户端B加入音视频会议。
S218、客户端B等待客户端A加入音视频会议。
会议系统可以将第三方平台发送的第三方账号类型及账号标识等,与客户端A提供的第三方账号类型及账号标识进行校验,如果一致,则可以确定身份验证通过,此时可以将客户端B加入音视频会议;如果不一致,则可以确定身份验证不通过,此时拒绝客户端B加入音视频会议。例如,第三方平台发送的客户端B对应的Facebook账号的昵称为MikeGreen,而客户端A提供的客户端B对应的Facebook账号的昵称也为Mike Green。两者一致,此时可以将客户端B加入音视频会议,客户端B加入音视频会议后,需要等待客户端A加入该音视频会议(简称会议)。
S219、会议系统根据客户端A的ID及授权信息通过QQ平台呼叫客户端A。
S220、QQ平台根据会议系统的呼叫请求验证客户端A的ID及授权信息。
S221、当验证通过时,QQ平台呼叫客户端A的QQ账号。
S222、客户端A接听QQ平台的呼叫,并向QQ平台发送音视频数据。
S223、QQ平台向会议系统转发客户端A的音视频数据。
S224、会议系统将客户端A加入会议。
会议系统可以根据预先通过客户端A所选择的回拨平台呼叫客户端A,例如会议系统可以利用控制模块控制QQ适配器通过QQ平台呼叫客户端A的QQ账号,客户端A可以在在QQ平台中接受呼叫,并基于该呼叫向会议系统反馈的接通响应,此时会议系统可以接收客户端A反馈的接通响应,并基于接通响应将客户端A加入音视频会议。在客户端A和客户端B均加入音视频会议后,客户端A和客户端B之间可以在音视频会议内进行音视频通话,例如,在音视频会议内客户端A可通过QQ平台与客户端B通过Facebook平台进行音视频通话。
在客户端B成功加入音视频会议之后,会议系统可以根据预先存储的授权信息和客户端A的ID等通过客户端A所选择的回拨平台呼叫客户端A,例如通过QQ平台呼叫客户端A的QQ账号,此时QQ平台在接收到呼叫请求后,可以对呼叫请求中携带的客户端A的ID及授权信息进行验证,并在验证通过后呼叫客户端A的QQ账号。客户端A在接收到QQ平台的呼叫后,可以接听QQ平台的呼叫,并向QQ平台发送音视频数据(此时说明客户端A生成接通响应),QQ平台可以向会议系统转发客户端A的音视频数据,此时,会议系统在接收到客户端A的音视频数据后,可以将客户端A加入音视频会议。
S225、客户端A通过QQ平台与客户端B通过第三方平台在音视频会议内进行视频通话。
在客户端A和客户端B都接入音视频会议后,客户端A和客户端B可在音视频会议内进行音视频数据交互,即进行音视频通话,例如,客户端A可以在音视频会议内通过QQ平台(即QQ服务器)将音视频数据发送给会议系统,会议系统可以通过QQ适配器接收音视频数据,并转发给浏览器代理,会议系统的浏览器代理可以通过第三方平台将音视频数据发送给客户端B;客户端B可以在音视频会议内通过第三方平台将音视频数据发送给会议系统的浏览器代理,并通过浏览器代理转发给QQ适配器,会议系统的QQ适配器可以通过QQ平台将音视频数据发送给客户端A。
需要说明的是,在将音视频数据发送给发送方和接收方之前,会议系统可以预先对音视频数据进行处理,例如,如图11所示,会议系统可以包括音视频通讯服务器、语音识别服务器及翻译服务器等,当客户端A产生音频流和视频流(即音视频数据包括音频流和视频流)时,可以通过QQ平台将音频流和视频流发送给会议系统中的音视频通讯服务器,由音视频通讯服务器存储该音频流和视频流,并将音频流和视频流通过第三方平台发送给客户端B,以及将音频流传输给语音识别服务器。在将音频流传输给语音识别服务器时,可以为音频流设置会议标识RoomID及设置客户端标识UserID(即说话者UserID),以便语音识别服务器及翻译服务器对接收到音频流进行区分。语音识别服务器对音频流进行语音识别,得到识别出的文字,然后语音识别服务器根据会议标识及客户端标识将识别出的文字发送给翻译服务器,翻译服务器可以根据客户端A和客户端B所需的语言类型,对该文字进行翻译,得到译文,此时翻译服务器可以根据客户端标识将译文及原文通过QQ平台发送给客户端A,以及通过第三方平台发送给客户端B。其中,客户端A和客户端B的音频流可以分别独立发送给语音识别服务器,避免了双方同时说话时识别率降低的情形,且在语音识别服务器识别语音时,可以对音频进行降噪处理,以提升识别率。
例如,如图7所示,若客户端A对应的QQ账号昵称为ABC,客户端B对应的Facebook账号为XYZ,则在客户端A通过QQ平台与客户端B通过Facebook平台建立音视频会议并进行音视频通话的过程中,当客户端A在音视频会议内利用中文说出“你爱我吗”时,会议系统可以对音视频数据中的音频数据进行识别,并对识别后音频数据进行翻译,得到翻译后的中文:“你爱我吗”及英文:“Do you love me”,会议系统还可以根据实际需要将中文语音转换为英文语音等。然后,会议系统可以将处理后的音视频数据通过QQ平台发送给客户端A,客户端A可以在显示屏幕内显示文字及视频画面,输出中文语音或英文语音;以及,会议系统可以将处理后的音视频数据通过第三方平台发送给客户端B,客户端B可以在显示屏幕内显示文字及视频画面,输出中文语音或英文语音等。从而可以为不同母语用户之间的交流提供了便利,使得不同国家、地域的互联网用户可以更便捷的沟通。
本发明实施例将各个客户端通过不同的平台加入同一个音视频会议,并将该音视频会议内产生的音视频数据通过不同平台分别发送给各个客户端,实现了各个客户端可以通过不同平台在同一个音视频会议内进行音视频数据交互,为不同母语用户之间的交流提供了便利,无需安装统一的应用,且无需注册统一的账号,即可进行视频通话,使得不同国家、地域的互联网用户可以更便捷的沟通,解决了现有平台不同及语言不同等很难进行沟通的问题,提高了音视频数据传输的灵活性及便捷性。
为便于更好的实施本发明实施例提供的音视频处理方法,本发明实施例还提供一种基于上述音视频处理方法的装置。其中名词的含义与上述音视频处理方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图12,图12为本发明实施例提供的音视频处理装置的结构示意图,其中该音视频处理装置可以包括处理单元301、加入单元302、呼叫单元303及发送单元304等。
其中,处理单元301,用于接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址。
其中,发送方可以是用户预约音视频会议所使用的客户端,该客户端可以包括微信客户端、QQ客户端、及浏览器客户端等,还可以包括其他类型的客户端,具体内容在此处不作限定。回拨平台可以包括微信、QQ、skype、WhatsApp、Facebook、Google Account、Microsoft ID、及Twitter等,链接地址可以是音视频会议对应的URL。该音视频会议可以是网络视频会议,在该网络视频会议内发送方与接收方等之间可以进行音视频通话和文字交流等。
当需要预约音视频会议时,处理单元301可以接收发送方发送的预约请求,该预约请求可以携带有发送方选择的相关信息,例如,发送方所选择的回拨平台、或发送方选择进行身份验证等。此时处理单元301可以根据预约请求确定发送方所选择的回拨平台,及根据预约请求生成音视频会议对应的链接地址。
在某些实施方式中,如图13所示,处理单元301可以包括:
请求接收子单元3011,用于接收发送方发送的预约请求,根据预约请求显示预约界面;
模式接收子单元3012,用于在预约界面内接收发送方选择的回拨模式,并进入回拨模式;
平台接收子单元3013,用于在回拨模式下接收发送方选择的回拨平台。
请求接收子单元3011可以接收发送方发送的预约请求,并根据预约请求显示预约界面,在预约界面内模式接收子单元3012可以接收发送方选择的回拨模式,在回拨模式下,可以在接收方加入音视频会议后,通过呼叫发送方的方式将发送方加入音视频会议。在发送方选择回拨模式后,需要指定使用的回拨平台,例如,选择回拨到QQ平台或微信平台等,此时平台接收子单元3013可以在回拨模式下接收发送方选择的回拨平台。
在某些实施方式中,如图14所示,处理单元301可以包括:
建立子单元3014,用于建立音视频会议,并为音视频会议分配会议标识;
生成子单元3015,用于根据会议标识生成音视频会议对应的链接地址。
在预约成功后,建立子单元3014可以建立音视频会议,并为该音视频会议分配会议标识,该会议标识可以是音视频会议的名称或编号等,该会议标识可以是由数字和/或字母组成等,此时生成子单元3015可以根据会议标识及预约请求中携带的信息等生成音视频会议对应的链接地址URL,例如,当链接地址为http://www.meeting.com/123456时,其中123456为会议标识。发送方可以将该链接地址发给接收方。
在某些实施方式中,生成子单元3015具体可以用于:接收设置指令,根据设置指令设置链接地址的有效范围;根据会议标识和有效范围生成音视频会议对应的链接地址。
加入单元302具体可以用于:接收接收方在有效范围内基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议。
其中,有效范围可以包括有效时间或有效次数等,为了避免接收方在发送方不方便的时间加入音视频会议与发送方进行视频通话,可以对链接地址的有效范围进行设置,例如,当发送方和接收方在不同国家时,可能会存在时差,此时发送方可以指定链接地址的有效范围,即可以指定回拨的有效时间。当音视频通话进需要进行一次时,为了避免接收方骚扰自己,此时发送方可以设置音视频会议的链接地址的有效次数为一次;当音视频通话进需要进行多次,或发送方希望与接收方之间保存联系时,此时发送方可以设置音视频会议的链接地址的有效次数为多次等。当然,还可以设置链接地址的过期时间,例如,设置该链接地址在一个星期后过期。
生成子单元3015可以接收发送方发送的设置指令,例如,发送方可以在设置界面内输入或选择有效时间或有效次数等,从而生成设置指令并发送给生成子单元3015,此时可以根据设置指令设置音视频会议对应的链接地址的有效时间或有效次数等有效范围,然后根据会议标识和有效范围等生成音视频会议对应的链接地址。
加入单元302,用于接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议。
其中,该接收方可以包括一个或多个,该接收方可以应邀发送方加入所使用的客户端,该客户端可以包括微信客户端、QQ客户端、及浏览器客户端等,还可以包括其他类型的客户端,具体内容在此处不作限定。第三方平台可以包括微信、QQ、skype、WhatsApp、Facebook、Google Account、Microsoft ID、及Twitter等。
接收方在获取到发送方提供的音视频会议对应的链接地址后,可以基于该链接地址加入音视频会议,例如,接收方可以在第三方平台点击或激活该链接地址,生成加入请求,并向加入单元302发送该加入请求。加入单元302可以接收接收方基于链接地址通过第三方平台发送的加入请求,该加入请求中可以携带音视频会议的会议标识及接收方的身份标识等,此时可以根据加入请求将接收方加入音视频会议。
在某些实施方式中,如图15所示,加入单元302可以包括:
验证子单元3021,用于接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求对接收方进行身份验证;
加入子单元3022,用于当身份验证通过时,将接收方加入音视频会议。
由于音视频处理装置可以允许用户匿名进行会议,因此在陌生人场景下,为了提高沟通效果,可以通过有效的手段验证对方身份,以建立信任关系。具体地,在接收到接收方基于链接地址通过第三方平台发送的加入请求后,验证子单元3021可以根据加入请求对接收方进行身份验证,当对接收方进行身份验证通过时,加入子单元3022可以将接收方加入音视频会议,当对接收方进行身份验证不通过时,可以拒绝接收方加入音视频会议。
在某些实施方式中,音视频处理装置还包括:接收单元,用于接收发送方发送的接收方在第三方平台对应的第三方账号类型及账号标识。
在建立音视频会议的过程中,发送方可以根据实际需要设置在回拨模式下要求对参会者(即接收方)进行身份验证,例如发送方可以在预约页面指定接收方在第三方平台对应的第三方账号类型,以及输入第三方账号的账号标识,例如接收方在第三方账号的昵称等。此时接收单元可以接收发送方发送的接收方在第三方平台对应的第三方账号类型及账号标识。
在某些实施方式中,验证子单元3021具体可以用于:接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求获取会议信息;当根据会议信息确定需要进行身份验证时,接收接收方通过第三方平台发送的账号信息;当账号信息与第三方账号类型及账号标识匹配时,确定身份验证通过。
为了避免骚扰,在接入音视频会议之前,可以对接收方进行身份验证,接收方打开链接地址生成加入请求后,验证子单元3021可以接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求获取会议信息,例如可以根据链接地址中携带的会议标识查找对应的会议信息,该会议信息可以包括会议主题、会议是否要求进行身份验证等,然后,根据会议信息判断是否需要进行身份验证,当根据会议信息确定不需要进行身份验证时,可以直接将接收方加入音视频会议;当根据会议信息确定需要进行身份验证时,音视频处理装置可以提示接收方登录第三方账号进行身份验证,例如提示接收方使用Facebook账号登录进行身份验证。
接收方点击登录按钮,打开第三方账号的登录页,并在登录页内输入第三方账号对应的用户名及密码来登录第三方账号,登录成功后可以授权音视频处理装置获取接收方在第三方平台上的相关信息,例如昵称及头像等信息。此时音视频处理装置可以接收接收方通过第三方平台发送的账号信息,该账号信息可以包括第三方账号类型、账号标识、授权信息、昵称、及头像等,例如,Facebook账号及Facebook账号的昵称等。此时验证子单元3021可以将获取得到的第三方账号类型及账号标识等账号信息,与发送方提供的第三方账号类型及账号标识进行校验,如果一致,则说明获取得到的第三方账号类型及账号标识等账号信息与发送方提供的第三方账号类型及账号标识匹配,此时可以确定身份验证通过,可以将接收方加入音视频会议;如果不一致,则说明获取得到的第三方账号类型及账号标识等账号信息与发送方提供的第三方账号类型及账号标识不匹配,此时可以确定身份验证不通过,拒绝接收方加入音视频会议。
呼叫单元303,用于通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
在接收方成功加入音视频会议之后,呼叫单元303可以通过发送方所选择的回拨平台呼叫发送方,例如通过QQ平台呼叫发送方的QQ账号,发送方可以在在QQ平台中接受呼叫,并基于该呼叫向音视频处理装置反馈的接通响应,此时呼叫单元303可以接收发送方反馈的接通响应,并基于接通响应将发送方加入音视频会议。在发送方和接收方均加入音视频会议后,发送方和接收方之间可以在音视频会议内进行音视频通话,例如,在音视频会议内发送方可以通过QQ平台与接收方通过Facebook平台进行音视频通话。
在某些实施方式中,呼叫单元303具体可以用于:接收回拨平台基于发送方的授权发送的授权信息和发送方标识;根据授权信息和发送方标识通过回拨平台呼叫发送方;接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
发送方在回拨平台登录账号并进行授权后,回拨平台可以将授权信息和发送方标识等发送给呼叫单元303,此时呼叫单元303可以接收回拨平台基于发送方的授权发送的授权信息和发送方标识等,并对授权信息和发送方标识等进行存储,当需要呼叫发送方时,可以根据预先存储的授权信息和发送方标识等通过回拨平台呼叫发送方,例如通过QQ平台呼叫发送方,QQ平台可以验证发送方标识和授权信息,并在验证通过后呼叫发送方的QQ账号。发送方在回拨平台上接听该呼叫后,可以生成接通响应,并将接通响应反馈给呼叫单元303,此时,呼叫单元303在接收到发送方反馈的接通响应后,可以基于接通响应将发送方加入音视频会议。
发送单元304,用于将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。
在发送方和接收方都接入音视频会议后,发送方和接收方可在音视频会议内进行音视频数据交互,例如,发送方可以在音视频会议内通过回拨平台将音视频数据发送给发送单元304,发送单元304可以通过第三方平台将音视频数据发送给接收方;接收方可以在音视频会议内通过第三方平台将音视频数据发送给发送单元304,发送单元304可以通过回拨平台将音视频数据发送给发送方。
在某些实施方式中,如图16所示,发送单元304可以包括:
处理子单元3041,用于获取发送方和接收方所需的语言类型,根据语言类型对音视频数据中的音频数据进行处理,得到处理后音频数据;
发送子单元3042,用于将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方,及通过第三方平台发送给接收方。
在将音视频数据发送给发送方和接收方之前,可以预先对音视频数据进行处理,例如,发送方和接收方可以自行打开翻译模式,设置自己所需的语言类型,其中语言类型可以包括中文、英语、德语、法语、泰语及俄语等,当在音视频会议内接收到音视频数据时,处理子单元3041可以对音视频数据中的音频数据进行识别,识别出该音频数据的语义,以及获取发送方和接收方所需的语言类型,根据发送方所需的语言类型,对音视频数据中的音频数据进行转换和/或翻译等处理,得到处理后音频数据,由发送子单元3042将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方;并且,处理子单元3041根据接收方所需的语言类型,对音视频数据中的音频数据进行转换和/或翻译等处理,得到处理后音频数据,由发送子单元3042将音视频数据中的视频数据及处理后音视频数据通过第三方平台发送给接收方。此时,发送方可以通过回拨平台在显示屏幕内显示视频画面及字幕,通过扬声器等输出语音,以及接收方可以通过第三方平台在显示屏幕内显示视频画面及字幕,并通过扬声器等输出语音,从而实现同声传译功能。
在某些实施方式中,处理后音频数据包括转换后音频数据和/或翻译后文字,处理子单元3041具体可以用于:获取发送方所需的第一语言类型,以及接收方所需的第二语言类型;对音视频数据中的音频数据进行识别,得到识别后音频数据;根据第一语言类型和第二语言类型对识别后音频数据转换,得到转换后音频数据,和/或对识别后音频数据进行翻译,得到翻译后文字。
例如,如图7所示,若发送方对应的用户为ABC,用户ABC的所需的第一语言类型为中文,接收方对应的用户为XYZ,用户XYZ的所需的第二语言类型为英文,则在用户ABC通过QQ平台与用户XYZ通过Facebook平台建立音视频会议并进行音视频通话的过程中,当用户ABC在音视频会议内利用中文说出“你爱我吗”时,此时需要对音视频数据进行处理,首先,音视频处理装置可以对音视频数据中的音频数据进行识别,识别出该音频数据为用户ABC说出的中文:“你爱我吗”。然后根据用户ABC的语言为中文,对识别后音频数据进行翻译,得到翻译后的中文文字:“你爱我吗”,以及根据用户XYZ的语言为英文,对识别后音频数据进行翻译,得到翻译后的英文文字:“Do you love me”。此时音视频处理装置还可以根据实际需要将中文语音转换为英文语音。最后,音视频处理装置可以将得到的中文文字、中文语音、及视频画面等通过回拨平台发送给发送方,图7中发送方可以在显示屏幕内显示中文文字、英文文字及视频画面,并输出中文语音或英文语音。以及,音视频处理装置可以将得到的英文文字、英文语音、及视频画面等通过第三方平台发送给接收方,接收方可以在显示屏幕内显示英文文字、中文文字及视频画面,及输出中文语音或英文语音。从而为不同母语用户之间的交流提供了便利,无需安装统一的应用,且无需注册统一的账号,即可进行视频通话,并为不同母语用户提供同声传译功能,使得不同国家、地域的互联网用户可以更便捷的沟通,另外,回拨模式相比时间固定的预约会议方式,使得用户在时间安排上更加灵活。
由上可知,本发明实施例处理单元301可以根据接收到的发送方发送的预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址,然后加入单元302在接收到接收方基于链接地址通过第三方平台发送的加入请求时,可以根据加入请求将接收方加入音视频会议。在接收方加入音视频会议后,呼叫单元303可以通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;此时发送单元304可以将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。该方案可以将发送方和接收方通过不同的平台加入同一个音视频会议,并将该音视频会议内产生的音视频数据通过不同平台分别发送给发送方和接收方,实现了发送方和接收方可以通过不同平台在同一个音视频会议内进行音视频数据交互,克服了现有需要在统一平台(即应用)上注册统一的账号才能加入同一个音视频会议进行音视频数据传输的局限性,大大提高了音视频数据传输的灵活性及便捷性。
本发明实施例还提供一种服务器,如图17所示,其示出了本发明实施例所涉及的服务器的结构示意图,具体来讲:
该服务器可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解,图17中示出的服务器结构并不构成对服务器的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该服务器的控制中心,利用各种接口和线路连接整个服务器的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行服务器的各种功能和处理数据,从而对服务器进行整体监控。可选的,处理器401可包括一个或多个处理核心;优选的,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据服务器的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
服务器还包括给各个部件供电的电源403,优选的,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该服务器还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,服务器还可以包括显示单元等,在此不再赘述。具体在本实施例中,服务器中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能,如下:
接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议;通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。
可选地,通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议的步骤可以包括:接收回拨平台基于发送方的授权发送的授权信息和发送方标识;根据授权信息和发送方标识通过回拨平台呼叫发送方;接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
可选地,生成音视频会议对应的链接地址的步骤可以包括:建立音视频会议,并为音视频会议分配会议标识;根据会议标识生成音视频会议对应的链接地址。
可选地,接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议的步骤可以包括:接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求对接收方进行身份验证;当身份验证通过时,将接收方加入音视频会议。
可选地,将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方的步骤可以包括:获取发送方和接收方所需的语言类型,根据语言类型对音视频数据中的音频数据进行处理,得到处理后音频数据;将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方,及通过第三方平台发送给接收方。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见上文针对音视频处理方法的详细描述,此处不再赘述。
由上可知,本发明实施例可以根据接收到的发送方发送的预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址,然后在接收到接收方基于链接地址通过第三方平台发送的加入请求时,可以根据加入请求将接收方加入音视频会议。此时可以通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;此时可以将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。该方案可以将发送方和接收方通过不同的平台加入同一个音视频会议,并将该音视频会议内产生的音视频数据通过不同平台分别发送给发送方和接收方,实现了可以通过不同平台在同一个音视频会议内进行音视频数据交互,提高了音视频数据传输的灵活性及便捷性。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本发明实施例提供一种存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本发明实施例所提供的任一种音视频处理方法中的步骤。例如,该指令可以执行如下步骤:
接收发送方发送的预约请求,根据预约请求确定发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议;通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议;将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方。
可选地,通过回拨平台呼叫发送方,并接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议的步骤可以包括:接收回拨平台基于发送方的授权发送的授权信息和发送方标识;根据授权信息和发送方标识通过回拨平台呼叫发送方;接收发送方反馈的接通响应,基于接通响应将发送方加入音视频会议。
可选地,生成音视频会议对应的链接地址的步骤可以包括:建立音视频会议,并为音视频会议分配会议标识;根据会议标识生成音视频会议对应的链接地址。
可选地,接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求将接收方加入音视频会议的步骤可以包括:接收接收方基于链接地址通过第三方平台发送的加入请求,根据加入请求对接收方进行身份验证;当身份验证通过时,将接收方加入音视频会议。
可选地,将音视频会议内产生的音视频数据通过回拨平台发送给发送方,以及通过第三方平台发送给接收方的步骤可以包括:获取发送方和接收方所需的语言类型,根据语言类型对音视频数据中的音频数据进行处理,得到处理后音频数据;将音视频数据中的视频数据及处理后音视频数据通过回拨平台发送给发送方,及通过第三方平台发送给接收方。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本发明实施例所提供的任一种音视频处理方法中的步骤,因此,可以实现本发明实施例所提供的任一种音视频处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本发明实施例所提供的一种音视频处理方法、装置及存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (15)
1.一种音视频处理方法,其特征在于,包括:
接收发送方发送的预约请求,根据所述预约请求确定所述发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;
接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议,所述第三方平台包括即时通信平台,所述加入请求为所述接收方通过所述第三方平台点击或激活所述链接地址生成的;
通过所述回拨平台呼叫所述发送方,并接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议;
将所述音视频会议内产生的音视频数据通过所述回拨平台发送给所述发送方,以及通过所述第三方平台发送给所述接收方;
其中,所述接收方与所述发送方之间可互换角色。
2.根据权利要求1所述的音视频处理方法,其特征在于,所述通过所述回拨平台呼叫所述发送方,并接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议的步骤包括:
接收所述回拨平台基于所述发送方的授权发送的授权信息和发送方标识;
根据所述授权信息和发送方标识通过所述回拨平台呼叫所述发送方;
接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议。
3.根据权利要求1所述的音视频处理方法,其特征在于,所述接收发送方发送的预约请求,根据所述预约请求确定所述发送方所选择的回拨平台的步骤包括:
接收所述发送方发送的预约请求,根据所述预约请求显示预约界面;
在所述预约界面内接收所述发送方选择的回拨模式,并进入所述回拨模式;
在所述回拨模式下接收所述发送方选择的回拨平台。
4.根据权利要求1所述的音视频处理方法,其特征在于,所述生成音视频会议对应的链接地址的步骤包括:
建立音视频会议,并为所述音视频会议分配会议标识;
根据所述会议标识生成所述音视频会议对应的链接地址。
5.根据权利要求4所述的音视频处理方法,其特征在于,所述根据所述会议标识生成所述音视频会议对应的链接地址的步骤包括:
接收设置指令,根据所述设置指令设置链接地址的有效范围;
根据所述会议标识和有效范围生成所述音视频会议对应的链接地址;
所述接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议的步骤包括:
接收接收方在所述有效范围内基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议。
6.根据权利要求1所述的音视频处理方法,其特征在于,所述接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议的步骤包括:
接收接收方基于所述链接地址通过所述第三方平台发送的加入请求,根据所述加入请求对所述接收方进行身份验证;
当身份验证通过时,将所述接收方加入所述音视频会议。
7.根据权利要求6所述的音视频处理方法,其特征在于,所述生成音视频会议对应的链接地址的步骤之前,所述方法还包括:
接收所述发送方发送的所述接收方在第三方平台对应的第三方账号类型及账号标识;
所述接收接收方基于所述链接地址通过所述第三方平台发送的加入请求,根据所述加入请求对所述接收方进行身份验证的步骤包括:
接收接收方基于所述链接地址通过所述第三方平台发送的加入请求,根据所述加入请求获取会议信息;
当根据所述会议信息确定需要进行身份验证时,接收所述接收方通过所述第三方平台发送的账号信息;
当所述账号信息与第三方账号类型及账号标识匹配时,确定身份验证通过。
8.根据权利要求1至7任一项所述的音视频处理方法,其特征在于,所述将所述音视频会议内产生的音视频数据通过所述回拨平台发送给所述发送方,以及通过所述第三方平台发送给所述接收方的步骤包括:
获取所述发送方和接收方所需的语言类型,根据所述语言类型对所述音视频数据中的音频数据进行处理,得到处理后音频数据;
将所述音视频数据中的视频数据及处理后音视频数据通过所述回拨平台发送给所述发送方,及通过所述第三方平台发送给所述接收方。
9.根据权利要求8所述的音视频处理方法,其特征在于,所述处理后音频数据包括转换后音频数据和/或翻译后文字,所述获取所述发送方和接收方所需的语言类型,根据所述语言类型对所述音视频数据中的音频数据进行处理,得到处理后音频数据的步骤包括:
获取所述发送方所需的第一语言类型,以及所述接收方所需的第二语言类型;
对所述音视频数据中的音频数据进行识别,得到识别后音频数据;
根据所述第一语言类型和第二语言类型对所述识别后音频数据转换,得到转换后音频数据,和/或对所述识别后音频数据进行翻译,得到翻译后文字。
10.一种音视频处理装置,其特征在于,包括:
处理单元,用于接收发送方发送的预约请求,根据所述预约请求确定所述发送方所选择的回拨平台,以及生成音视频会议对应的链接地址;
加入单元,用于接收接收方基于所述链接地址通过第三方平台发送的加入请求,根据所述加入请求将所述接收方加入所述音视频会议,所述第三方平台包括即时通信平台,所述加入请求为所述接收方通过所述第三方平台点击或激活所述链接地址生成的;
呼叫单元,用于通过所述回拨平台呼叫所述发送方,并接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议;
发送单元,用于将所述音视频会议内产生的音视频数据通过所述回拨平台发送给所述发送方,以及通过所述第三方平台发送给所述接收方,其中,所述接收方与所述发送方之间可互换角色。
11.根据权利要求10所述的音视频处理装置,其特征在于,所述呼叫单元具体用于:
接收所述回拨平台基于所述发送方的授权发送的授权信息和发送方标识;
根据所述授权信息和发送方标识通过所述回拨平台呼叫所述发送方;
接收所述发送方反馈的接通响应,基于所述接通响应将所述发送方加入所述音视频会议。
12.根据权利要求10所述的音视频处理装置,其特征在于,所述处理单元包括:
请求接收子单元,用于接收所述发送方发送的预约请求,根据所述预约请求显示预约界面;
模式接收子单元,用于在所述预约界面内接收所述发送方选择的回拨模式,并进入所述回拨模式;
平台接收子单元,用于在所述回拨模式下接收所述发送方选择的回拨平台。
13.根据权利要求10所述的音视频处理装置,其特征在于,所述处理单元包括:
建立子单元,用于建立音视频会议,并为所述音视频会议分配会议标识;
生成子单元,用于根据所述会议标识生成所述音视频会议对应的链接地址。
14.根据权利要求10至13任一项所述的音视频处理装置,其特征在于,所述发送单元包括:
处理子单元,用于获取所述发送方和接收方所需的语言类型,根据所述语言类型对所述音视频数据中的音频数据进行处理,得到处理后音频数据;
发送子单元,用于将所述音视频数据中的视频数据及处理后音视频数据通过所述回拨平台发送给所述发送方,及通过所述第三方平台发送给所述接收方。
15.一种存储介质,其特征在于,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至9任一项所述的音视频处理方法中的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811001024.3A CN110876033B (zh) | 2018-08-30 | 2018-08-30 | 一种音视频处理方法、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811001024.3A CN110876033B (zh) | 2018-08-30 | 2018-08-30 | 一种音视频处理方法、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110876033A CN110876033A (zh) | 2020-03-10 |
CN110876033B true CN110876033B (zh) | 2021-08-31 |
Family
ID=69714423
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811001024.3A Active CN110876033B (zh) | 2018-08-30 | 2018-08-30 | 一种音视频处理方法、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110876033B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6824458B1 (ja) * | 2020-05-11 | 2021-02-03 | ベルフェイス株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
CN113473059A (zh) * | 2020-05-27 | 2021-10-01 | 海信集团有限公司 | 一种数据处理方法、智能设备及智能处理系统 |
CN112073670B (zh) * | 2020-07-13 | 2023-04-07 | 长沙市到家悠享网络科技有限公司 | 数据处理方法、系统及服务端设备 |
CN111931962B (zh) * | 2020-07-31 | 2022-07-12 | 北京字节跳动网络技术有限公司 | 信息展示方法、装置和电子设备 |
CN113222549A (zh) * | 2021-05-18 | 2021-08-06 | 北京字节跳动网络技术有限公司 | 信息交互方法、装置、系统和电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101193072A (zh) * | 2007-03-29 | 2008-06-04 | 腾讯科技(深圳)有限公司 | 一种多平台聊天室系统及其实现方法 |
CN104780335A (zh) * | 2015-03-26 | 2015-07-15 | 中兴通讯股份有限公司 | 一种WebRTC P2P音视频通话的方法及装置 |
CN106303377A (zh) * | 2015-05-20 | 2017-01-04 | 中兴通讯股份有限公司 | 视频监控处理方法及装置 |
CN106998439A (zh) * | 2017-03-23 | 2017-08-01 | 中国南方电网有限责任公司 | 一种将传统视频会议系统与webrtc融合的网关系统和方法 |
CN107707868A (zh) * | 2016-08-08 | 2018-02-16 | 中国电信股份有限公司 | 视频会议加入方法、多接入会议服务器和视频会议系统 |
CN108024087A (zh) * | 2016-10-31 | 2018-05-11 | 北京视联动力国际信息技术有限公司 | 一种视频调度的方法及系统 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291241A (zh) * | 2008-06-23 | 2008-10-22 | 北京国际汉语学院 | 结合p2p传输方式以浏览器实现实时音视频会议的方法 |
CN101990101A (zh) * | 2010-11-04 | 2011-03-23 | 武汉钢铁(集团)公司 | 实时多媒体混合编解码方法 |
CN102215238B (zh) * | 2011-07-27 | 2013-12-18 | 中国电信股份有限公司 | 融合视频会议业务处理方法与系统、主持人终端 |
US9596584B2 (en) * | 2013-03-15 | 2017-03-14 | Elwha Llc | Protocols for facilitating broader access in wireless communications by conditionally authorizing a charge to an account of a third party |
-
2018
- 2018-08-30 CN CN201811001024.3A patent/CN110876033B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101193072A (zh) * | 2007-03-29 | 2008-06-04 | 腾讯科技(深圳)有限公司 | 一种多平台聊天室系统及其实现方法 |
CN104780335A (zh) * | 2015-03-26 | 2015-07-15 | 中兴通讯股份有限公司 | 一种WebRTC P2P音视频通话的方法及装置 |
CN106303377A (zh) * | 2015-05-20 | 2017-01-04 | 中兴通讯股份有限公司 | 视频监控处理方法及装置 |
CN107707868A (zh) * | 2016-08-08 | 2018-02-16 | 中国电信股份有限公司 | 视频会议加入方法、多接入会议服务器和视频会议系统 |
CN108024087A (zh) * | 2016-10-31 | 2018-05-11 | 北京视联动力国际信息技术有限公司 | 一种视频调度的方法及系统 |
CN106998439A (zh) * | 2017-03-23 | 2017-08-01 | 中国南方电网有限责任公司 | 一种将传统视频会议系统与webrtc融合的网关系统和方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110876033A (zh) | 2020-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110876033B (zh) | 一种音视频处理方法、装置及存储介质 | |
CN110418099B (zh) | 一种音视频处理方法、装置及存储介质 | |
US10715672B2 (en) | Social networking-based teleconferencing system and method | |
CN107707868B (zh) | 视频会议加入方法、多接入会议服务器和视频会议系统 | |
US9654519B2 (en) | Notification of communication events | |
US8872884B2 (en) | System and method for combining instant messaging and video communication systems | |
US11470023B2 (en) | Session initiation method and device | |
US20170288942A1 (en) | Portal for Provisioning Autonomous Software Agents | |
US8774168B2 (en) | Communication system and method | |
US20170288943A1 (en) | Supplying Context Data to a Servicing Entity | |
CN102257791A (zh) | 用于电话的通信会话的音频和非音频部分的高效按需汇合 | |
US20170289070A1 (en) | Making a Dialogue Available To an Autonomous Software Agent | |
US20170289069A1 (en) | Selecting an Autonomous Software Agent | |
CN108347337B (zh) | 会议通信方法和装置 | |
CN103888600A (zh) | 一种即时通信客户端 | |
EP2862343B1 (en) | Notification of communication events | |
CN112929353B (zh) | 远程会议的实现方法、装置、服务器及存储介质 | |
US11778001B2 (en) | Conferencing application with instant messaging persona | |
US9628490B2 (en) | Trusted contact name validation | |
CN117014552A (zh) | 一种基于视频彩铃进行元宇宙场景互动的方法及相关设备 | |
CN117714084A (zh) | 应用授权方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40022009 Country of ref document: HK |
|
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |