CN110798813B - 一种辅助通话的方法、装置和电子设备 - Google Patents

一种辅助通话的方法、装置和电子设备 Download PDF

Info

Publication number
CN110798813B
CN110798813B CN201911095218.9A CN201911095218A CN110798813B CN 110798813 B CN110798813 B CN 110798813B CN 201911095218 A CN201911095218 A CN 201911095218A CN 110798813 B CN110798813 B CN 110798813B
Authority
CN
China
Prior art keywords
audio data
communication connection
auxiliary
terminal
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911095218.9A
Other languages
English (en)
Other versions
CN110798813A (zh
Inventor
唐溢辰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nobarrier Hangzhou Technology Co ltd
Original Assignee
Nobarrier Hangzhou Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nobarrier Hangzhou Technology Co ltd filed Critical Nobarrier Hangzhou Technology Co ltd
Priority to CN201911095218.9A priority Critical patent/CN110798813B/zh
Publication of CN110798813A publication Critical patent/CN110798813A/zh
Application granted granted Critical
Publication of CN110798813B publication Critical patent/CN110798813B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/02Methods for producing synthetic speech; Speech synthesisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/03Protecting confidentiality, e.g. by encryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/16Communication-related supplementary services, e.g. call-transfer or call-hold
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]

Abstract

本申请提供一种辅助通话的方法,对于IOS系统的第一终端,利用辅助硬件与第一终端的电话通话进程建立蓝牙耳机通信连接,与第一终端的辅助应用建立无线局域网连接,由于辅助硬件独立于第一终端的操作系统,使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,进而完成辅助通话,通过在蓝牙耳机之外以无线局域网的形式建立连接,可以在满足实时的双向通话的数据传输速率需求,减缓通话延迟。

Description

一种辅助通话的方法、装置和电子设备
技术领域
本申请涉及通信领域,尤其涉及一种辅助通话的方法、装置和电子设备。
背景技术
人们在进行信息交流时,在一些复杂的场景中会出现交流困难的情况:由于双方周围环境的差异,或者双方对不同载体的信息的识别能力存在差异,使得信息发出方以一种载体发出的信息需要以另一种载体展现给信息接收方,使得信息接收方识别这种载体速携带的信息。比如,信息发送方通过通讯软件向信息接收方的终端发送语音,信息接收方的通讯软件需要将该语音信息转换成文字信息,使得听力障碍者,或者环境嘈杂中的用户等复杂场景用户可以根据文字获取其中所反映的信息。
针对这种情况,申请人提出过一种移动设备文字通话方法(申请号:CN201810589483.1),利用双蓝牙实现来实现辅助通话方法。
然而,在实施该方法后申请人发现,这种方案适用于安卓系统的手机,然而对于IOS系统的手机有诸多不适,主要原因在于蓝牙数据通道传输速率受限,无法满足与硬件盒子之间的速率要求,使得通话延迟较大。为了解决上述问题,本说明书提出了一种新的辅助通话方法。
发明内容
本说明书实施例提供一种辅助通话的方法、装置和电子设备,用以减缓现有的辅助通话方法存在的延迟问题。
本说明书实施例提供一种辅助通话的方法,包括:
第一终端的电话通话进程通过与辅助硬件建立的第一通信连接向所述辅助硬件发送所述第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用发送所述第一音频数据,所述第一音频数据为第二终端向所述第一终端发送的通话数据,所述第一通信连接包括蓝牙耳机通信连接,所述第二通信连接包括无线局域网连接;
第一终端的辅助应用通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据;
根据所述第一音频数据展示第一文字;
接收用户操作产生的第二文字;
将所述第二文字转换成第二音频数据;
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述第一终端的电话通话进程发送所述第二音频数据;
所述电话通话进程通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
可选地,所述接收用户操作产生的第二文字,包括:
接收用户输入文字的操作,确定输入的文字作为第二文字。
可选地,所述根据所述第一音频数据展示第一文字,还包括:
根据所述第一音频数据展示第一文字和反馈标识;
所述接收用户操作产生的第二文字,包括:
根据接收用户操作的反馈标识确定对应的第二文字。
可选地,所述辅助应用通过所述第二通信连接接收所述辅助硬件发送的第一音频数据,包括:
接收辅助硬件发送的加密的第一音频数据;
所述根据所述第一音频数据展示第一文字,包括:
对加密的第一音频数据进行解密;
根据解密的第一音频数据展示第一文字。
本说明书实施例还提供一种辅助通话的方法,包括:
通过与第一终端的电话通话进程建立的第一通信连接接收所述电话通话进程发送的第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙耳机通信连接;
通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,使所述辅助应用根据所述第一音频数据展示第一文字,所述第二通信连接包括无线局域网连接;
通过所述第二通信连接接收所述辅助应用发送的第二音频数据;
通过所述第一通信连接向所述电话通话进程发送所述第二音频数据,使所述电话通话进程向第二终端发送所述第二音频数据。
可选地,在接收所述电话通话进程发送的第一音频数据之前,还包括:
建立电话通话进程与辅助硬件的第一通信连接;
建立辅助应用与辅助硬件的第二通信连接。
可选地,所述第一通信连接包括蓝牙耳机通信连接,所述第二通信连接包括局域网连接。
可选地,在接收所述电话通话进程发送的第一音频数据之后,对第一音频数据进行加密;
所述通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,包括:
向所述辅助应用发送加密的第一音频数据。
本说明书实施例还提供一种辅助通话的装置,包括:
电话通话模块,通过与辅助硬件建立的第一通信连接向所述辅助硬件发送所述第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用模块发送所述第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙耳机通信连接,所述第二通信连接包括无线局域网连接;
展示模块;
操作采集模块;
辅助应用模块,通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据;
根据所述第一音频数据通过展示模块展示第一文字;
通过操作采集模块接收用户操作产生的第二文字;
将所述第二文字转换成第二音频数据;
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述电话通话模块发送所述第二音频数据;
所述电话通话模块,还用于通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
可选地,所述接收用户操作产生的第二文字,包括:
接收用户输入文字的操作,确定输入的文字作为第二文字。
可选地,所述根据所述第一音频数据展示第一文字,还包括:
根据所述第一音频数据展示第一文字和反馈标识;
所述接收用户操作产生的第二文字,包括:
根据接收用户操作的反馈标识确定对应的第二文字。
可选地,所述辅助应用模块通过所述第二通信连接接收所述辅助硬件发送的第一音频数据,包括:
接收辅助硬件发送的加密的第一音频数据;
所述根据所述第一音频数据展示第一文字,包括:
对加密的第一音频数据进行解密;
根据解密的第一音频数据展示第一文字。
本说明书实施例还提供一种辅助通话的装置,包括:
第一通信模块,用于通过与第一终端的电话通话模块建立的第一通信连接接收所述电话通话模块发送的第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙耳机通信连接;
第二通信模块,用于通过与第一终端的辅助应用模块建立的第二通信连接向所述辅助应用模块发送所述第一音频数据,使所述辅助应用模块根据所述第一音频数据展示第一文字,所述第二通信连接包括无线局域网连接;
通过所述第二通信连接接收所述辅助应用模块发送的第二音频数据;
第一通信模块,还用于通过所述第一通信连接向所述电话通话模块发送所述第二音频数据,使所述电话通话模块向第二终端发送所述第二音频数据。
可选地,所述第二通信模块,还用于与电话通话模块101建立第一通信连接;
所述第二通信模块,还用于与辅助应用模块建立第二通信连接。
可选地,还包括加密模块,用于在接收所述电话通话模块发送的第一音频数据之后,对第一音频数据进行加密;
所述通过与第一终端的辅助应用模块建立的第二通信连接向所述辅助应
用模块发送所述第一音频数据,包括:
向所述辅助应用模块发送加密的第一音频数据。
本说明书实施例还提供一种电子设备,其中,该电子设备包括:
处理器;以及,
存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行上述任一项方法。
本说明书实施例还提供一种计算机可读存储介质,其中,所述计算机可读存储介质存储一个或多个程序,所述一个或多个程序当被处理器执行时,实现上述任一项方法。
本说明书记载的各种实施例利用辅助硬件与对于IOS系统的第一终端的电话通话进程建立蓝牙耳机通信连接,与第一终端的辅助应用建立无线局域网连接,由于辅助硬件独立于第一终端的操作系统,使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,进而完成辅助通话,通过在蓝牙耳机之外以无线局域网的形式建立连接,可以在满足实时的双向通话的数据传输速率需求,减缓通话延迟。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本说明书实施例提供的一种辅助对话的系统的原理示意图;
图2为本说明书实施例提供的一种辅助通话的装置的结构示意图;
图3为本说明书实施例提供的一种辅助通话的方法的原理示意图;
图4为本说明书实施例提供的一种电子设备的结构示意图。
具体实施方式
申请人转换思路,构想是否可以将双蓝牙的方法转换成蓝牙耳机+无线局域网的形式来进行辅助通话,以减弱通话延迟。
但是进一步思考,在将手机设置成连接无线局域网后,安卓手机通常会自动屏蔽数据流量,无法再连接外部网络,使得这种构想无法实施。
后来,申请人通过多次对照试验,并进行归纳,最终发现:在利用安卓等开源系统的终端实施双蓝牙方案时,辅助通话基本不存在延迟,而在利用封闭式终端实施双蓝牙方案时,则会存在通话延迟的情况,这是因为IOS系统的手机会限制数据蓝牙的传输速度。
然而,申请人发现对于上述“将手机设置成连接无线局域网后,无法连接外部网络的这种情况”恰好也只出现在安卓手机上,对于苹果手机来讲,则可以规避:通过手动设置ip的形式,最后使手机可以同时连接WiFi局域网,又可以连接数据流量。
因此,对于IOS系统的手机来讲,可以通过蓝牙耳机+无线局域网的形式来进行辅助通话,提高数据传输速度,以减弱通话延迟,而这在安卓手机上是无法实现的。
本说明书实施例提供一种辅助对话的方法,包括:
第一终端的电话通话进程通过与辅助硬件建立的第一通信连接向所述辅助硬件发送所述第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用发送所述第一音频数据,所述第一音频数据为第二终端向所述第一终端发送的通话数据,所述第一通信连接包括蓝牙耳机通信连接,所述第二通信连接包括无线局域网连接;
第一终端的辅助应用通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据;
根据所述第一音频数据展示第一文字;
接收用户操作产生的第二文字;
将所述第二文字转换成第二音频数据;
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述第一终端的电话通话进程发送所述第二音频数据;
所述电话通话进程通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
对于IOS系统的第一终端,利用辅助硬件与第一终端的电话通话进程建立蓝牙耳机通信连接,与第一终端的辅助应用建立无线局域网连接,由于辅助硬件独立于第一终端的系统,使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,进而完成辅助通话,通过在蓝牙耳机之外以无线局域网的形式建立连接,可以在满足实时的双向通话的数据传输速率需求,减缓通话延迟。
此外,利用辅助硬件使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,进而完成辅助通话,实现实时的双向通话,由于利用电话通话进程来辅助通话,使得第一终端用户在需要与第二终端用户进行通话时,第二终端用户可以及时接收到通话呼叫请求,也不需要第二终端的用户事先安装辅助应用,因此提高了辅助通话的及时性和适用性提高,而且,这种方式不受第一终端系统的权限限制,在第一终端为封闭式终端的情况下依然可以进行辅助通话,所适用的终端的范围广。
此外,第二通信连接使用无线局域网进行数据传输,能有效克服iOS系统对于蓝牙传输速率的限制,从而满足通信速率要求,提高通话效果。
本说明书实施例提供一种辅助对话的装置:具有辅助应用模块的第一终端,本说明书实施例还提供一种辅助对话的装置:辅助硬件,通话时,辅助硬件和第一终端共同完成辅助通话的过程。
图1为本说明书实施例提供的一种辅助对话的系统的原理示意图,该系统可以包括:第一终端10和辅助硬件20,图1示出了该系统与第二终端30进行通话的原理。
其中,第一终端10中具有电话通话模块101、展示模块102、操作采集模块103和辅助应用模块104,辅助应用模块中具有辅助应用,电话通话模块具有电话通话进程。
S101:在通话前,建立电话通话模块101与辅助硬件20的通信连接,作为第一通信连接,使电话通话进程与辅助硬件20建立通信连接,进行数据的接收和发送;建立辅助应用模块104与辅助硬件20的通信连接,作为第二通信连接,使辅助硬件20建立与辅助应用的通信连接,进行与辅助应用之间的数据接收和发送。
其中,辅助硬件20中可以具有第一通信模块和第二通信模块;第一通信模块用于,与电话通话模块101建立第一通信连接,第二通信模块用于与辅助应用模块建立第二通信连接,通过建立两个通信连接实现双向数据传输。
可选地,第一通信连接包括蓝牙耳机通信连接,第二通信连接包括无线局域网连接,
具体的,可以通过蓝牙耳机与与电话通话模块101建立蓝牙连接,作为第一通信连接,通过Wifi(无线局域网)建立辅助硬件与辅助应用模块104的无线局域网连接,从而实现音频和数据的双向传输通道,这样,再结合语音翻译和语音合成技术,辅助双向电话通话。
通过以无线局域网的方式进行数据传输,可以提高数据传输速度。
第一终端是IOS系统的手机,具体操作时,可以先连接WiFi,再通过手动设置ip的形式,使手机可以同时连接WiFi局域网与硬件通信,又可以通过数据流量与外部网络通信,WiFi+蓝牙耳机的连接方式可行。
S102:在通话时,电话通话模块101,开启电话通话进程,通过与辅助硬件20建立的第一通信连接向辅助硬件20发送所述第一音频数据,使辅助硬件20通过第二通信连接向辅助应用模块发送所述第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据。
在图1中,这可以表示为:第一终端的电话通话模块101获取第一音频数据A,以及向辅助硬件20发送A的过程。
S103:辅助硬件20通过与电话通话模块101建立的第一通信连接接收电话通话模块101发送的第一音频数据。
在图1中,这可以表示为:辅助硬件20接收A的过程。
具体地,可以是第一通信模块通过与第一终端的电话通话模块建立的第一通信连接接收所述电话通话模块发送的第一音频数据。
S104:辅助硬件20通过与辅助应用模块104建立的第二通信连接向辅助应用模块104发送所述第一音频数据,使辅助应用模块104根据所述第一音频数据展示第一文字。
在图1中,这可以表示为:辅助硬件20向辅助应用模块104发送A的过程。
具体地,第二通信模块,通过与第一终端的辅助应用模块建立的第二通信连接向辅助应用模块104发送所述第一音频数据,使辅助应用模块104根据所述第一音频数据展示第一文字。
可选地,辅助硬件还可以具有加密模块,用于在接收所述电话通话模块发送的第一音频数据之后,对第一音频数据进行加密;
这样,通过与第一终端的辅助应用模块建立的第二通信连接向所述辅助应用模块发送所述第一音频数据,可以包括:
向所述辅助应用模块发送加密的第一音频数据。
S105:辅助应用模块104,通过与辅助硬件20建立的第二通信连接接收辅助硬件20发送的第一音频数据,根据所述第一音频数据通过展示模块展示第一文字。
在图1中,这可以表示为:辅助应用模块104接收A,将A转换成a,并通过展示模块102展示a的过程。
可选地,辅助应用模块104通过所述第二通信连接接收所述辅助硬件发送的第一音频数据,可以用于:
接收辅助硬件发送的加密的第一音频数据;
这样,根据所述第一音频数据展示第一文字,可以包括:
对加密的第一音频数据进行解密;
根据解密的第一音频数据展示第一文字。
S106:辅助应用模块104通过操作采集模块103接收用户操作产生的第二文字。
在图1中,这可以表示为:辅助应用模块104通过操作采集模块103接收b的过程。
可选地,所述接收用户操作产生的第二文字,可以包括:
接收用户输入文字的操作,确定输入的文字作为第二文字。
可选地,所述根据所述第一音频数据展示第一文字,还可以包括:
根据所述第一音频数据展示第一文字和反馈标识;
所述接收用户操作产生的第二文字,可以包括:
根据接收用户操作的反馈标识确定对应的第二文字。
S107:辅助应用模块104将所述第二文字转换成第二音频数据,通过所述第二通信连接将所述第二音频数据发送给辅助硬件20,使辅助硬件20通过所述第一通信连接向电话通话模块101发送所述第二音频数据。
在图1中,这可以表示为:辅助应用模块104将b转换成B,以及向辅助硬件20发送B的过程。
S108:辅助硬件20通过第二通信连接接收辅助应用模块104发送的第二音频数据。
在图1中,这可以表示为:辅助硬件20接收B的过程。
具体地,第二通信模块,通过所述第二通信连接接收所述辅助应用模块发送的第二音频数据。
S109:辅助硬件20通过第一通信连接向电话通话模块101发送第二音频数据,使电话通话模块101向第二终端30发送所述第二音频数据。
在图1中,这可以表示为:辅助硬件20向电话通话模块101发送B的过程。
具体的,第一通信模块,通过所述第一通信连接向所述电话通话模块发送所述第二音频数据,使所述电话通话模块向第二终端发送所述第二音频数据。
S110:电话通话模块101,还用于通过所述第一通信连接接收辅助硬件20发送的第二音频数据,向第二终端30发送所述第二音频数据。
在图1中,这可以表示为:电话通话模块101向第二终端30发送B的过程。
对于图1中的系统,图2为本说明书实施例提供一种辅助通话装置的结构示意图,示出了一种辅助硬件的结构,其中,辅助硬件20,可以具有:
蓝牙通信模块201,数据无线网模块202和微控制模块203,各个模块之间进行双向通信,辅助双向通话过程中的双向数据传输。
对于由IOS系统的第一终端构成的辅助通话系统,利用辅助硬件与第一终端的电话通话进程建立蓝牙耳机通信连接,与第一终端的辅助应用建立无线局域网连接,由于辅助硬件独立于第一终端的系统,使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,进而完成辅助通话,通过在蓝牙耳机之外以无线局域网的形式建立连接,可以在满足实时的双向通话的数据传输速率需求,减缓通话延迟。
此外,通过使辅助硬件与第一终端的电话通话进程建立蓝牙连接,与第一终端的辅助应用建立无线局域网连接,由于辅助硬件独立于第一终端的系统,使得辅助应用利用辅助硬件间接与电话通话进程之间进行通信,辅助应用可以通过辅助硬件从通话进程中获取音频数据,并将其转换成文字展示给第一终端用户,也可以将第一终端用户操作产生的文字转换成音频数据,通过辅助硬件发送到电话通话进程中,进而发送给第二终端,进而完成辅助通话,通过建立不同的连接,实现实时的双向通话,由于利用电话通话进程来辅助通话,使得第一终端用户在需要与第二终端用户进行通话时,第二终端用户可以及时接收到通话呼叫请求,也不需要第二终端的用户事先安装辅助应用,因此提高了辅助通话的及时性和适用性提高,而且,这种方式不受第一终端系统的权限限制,在第一终端为封闭式终端的情况下依然可以进行辅助通话,所适用的终端的范围广。
基于图1所示的系统的构思,本说明书实施例还提供一种辅助通话的方法,图3为本说明书实施例提供的一种辅助通话的方法的原理示意图,示出了第一终端利用辅助硬件进行通话的原理,该方法可以包括:
S301:第一终端的电话通话进程通过与辅助硬件建立的第一通信连接向所述辅助硬件发送所述第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用发送所述第一音频数据,所述第一音频数据为第二终端向所述第一终端发送的通话数据。
在S301之前,该方法可以包括建立通信连接的过程。
具体地,对于辅助硬件,可以包括:
建立电话通话进程与辅助硬件的第一通信连接;
建立辅助应用与辅助硬件的第二通信连接。
在本说明书实施例中,第一终端和第二终端可以是具有SIM卡的(用户识别模块)的终端,比如,安装SIM卡的手机,由于第一终端中具有用户识别模块硬件,通讯软件的用户识别,因此,只要在该用户识别模块激活、入网后,便可以在以后的时间随时接收来自其它用户的交流请求,及时性强。
其中,第一终端可以是封闭式操作系统的终端,如iOS系统,由于利用辅助硬件进行辅助通话的方式不受操作系统的限制,因此,在封闭式操作系统终端和开放式操作系统的终端中均可以适用,所适用的终端范围大。
第一终端的用户可以在仅知道第二终端用户的号码的情况下便可拨通电话,第二终端的用户可以及时接收到交流请求,而且电话通话也不需要第二终端的用户事先安装辅助应用,因此,这种方法使复杂场景下进行通信交流的及时性和适用性提高。
在拨通电话后,第一终端中的电话通话进程开启,接受接收第二终端向所述第一终端发送的通话数据,这种数据,是对方用户向第一终端发送的,为方便区分,可以将其称作作为第一音频数据。
S302:辅助硬件,通过与第一终端的电话通话进程建立的第一通信连接接收所述电话通话进程发送的第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据。
S303:辅助硬件,通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,使所述辅助应用根据所述第一音频数据展示第一文字。
可选地,在接收所述电话通话进程发送的第一音频数据之后,对第一音频数据进行加密;
这样,通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,包括:
向所述辅助应用发送加密的第一音频数据。
S304:第一终端的辅助应用通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据,根据所述第一音频数据展示第一文字。
其中,辅助应用根据所述第一音频数据展示第一文字,可以包括:
利用语音翻译将第一音频数据翻译成第一文字。
S305:接收用户操作产生的第二文字,将所述第二文字转换成第二音频数据。
其中,可以利用语音合成技术将用户操作产生的第二文字转换成第二音频数据。
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述第一终端的电话通话进程发送所述第二音频数据。
其中,作为可选的一种方式,若所述辅助应用通过所述第二通信连接接收所述辅助硬件发送的第一音频数据,包括:
接收辅助硬件发送的加密的第一音频数据;
则根据所述第一音频数据展示第一文字,可以包括:
对加密的第一音频数据进行解密;
既而,根据解密的第一音频数据展示第一文字。
其中,可选地,接收用户操作产生的第二文字,可以包括:
接收用户输入文字的操作,确定输入的文字作为第二文字。
在展示第一文字时,可以根据用户对第一文字所可能做出的反馈,确定与第一文字对应的多个反馈标识,当第一终端的用户点击某个反馈标识时,表示第一终端用户希望传达对应语义的音频数据。
因此,可选地,所述根据所述第一音频数据展示第一文字,还可以包括:
根据所述第一音频数据展示第一文字和反馈标识;
所述接收用户操作产生的第二文字,包括:
根据接收用户操作的反馈标识确定对应的第二文字。
S306:辅助硬件,通过所述第二通信连接接收所述辅助应用发送的第二音频数据。
S307:辅助硬件,通过所述第一通信连接向所述电话通话进程发送所述第二音频数据,使所述电话通话进程向第二终端发送所述第二音频数据。
S308:第一终端的电话通话进程通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
上述各种实施例中的辅助硬件通过建立两个通信连接,分别进行与电话通话模块中的电话通话进程的数据收发,以及与辅助应用模块中的辅助应用数据收发,实现了双向通信。
上述各种实施例可以实现第一终端与第二终端的实时的双向信息交流,对于正常电话通话的一侧的用户来说,通话的实时性好,真实性好,对于辅助通话的一方来说,在具备实时交流的优点的同时,提高了通话及时性。
第一终端中的电话通话进程和辅助应用分别与辅助硬件建立通信连接,由于辅助硬件独立于第一终端的系统,可以中转第一终端的辅助应用与电话通话进程之间的数据传输,使辅助应用可以通过辅助硬件从通话进程中获取音频数据,并将其转换成文字展示给第一终端用户,也可以将第一终端用户操作产生的文字转换成音频数据,通过辅助硬件发送到电话通话进程中,进而发送给第二终端。由于以电话通话的方式进行辅助通话,使第一终端的用户在需要与第二终端的用户进行通话时,第二终端的用户可以及时接收到通话呼叫请求,也不需要第二终端的用户事先安装辅助应用,使辅助通话的及时性和适用性提高。
基于同一发明构思,本说明书实施例还提供一种电子设备。
下面描述本发明的电子设备实施例,该电子设备可以视为对于上述本发明的方法和装置实施例的具体实体实施方式。对于本发明电子设备实施例中描述的细节,应视为对于上述方法或装置实施例的补充;对于在本发明电子设备实施例中未披露的细节,可以参照上述方法或装置实施例来实现。
图4为本说明书实施例提供的一种电子设备的结构示意图。下面参照图4来描述根据本发明该实施例的电子设备400。图4显示的电子设备400仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。
如图4所示,电子设备400以通用计算设备的形式表现。电子设备400的组件可以包括但不限于:至少一个处理单元410、至少一个存储单元420、连接不同系统组件(包括存储单元420和处理单元410)的总线430、显示单元440等。
其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元410执行,使得所述处理单元410执行本说明书上述电子处方流转处理方法部分中描述的根据本发明各种示例性实施方式的步骤。例如,所述处理单元410可以执行如图1所示的步骤。
所述存储单元420可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(RAM)4201和/或高速缓存存储单元4202,还可以进一步包括只读存储单元(ROM)4203。
所述存储单元420还可以包括具有一组(至少一个)程序模块4205的程序/实用工具4204,这样的程序模块4205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。
总线430可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。
电子设备400也可以与一个或多个外部设备500(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备400交互的设备通信,和/或与使得该电子设备400能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口450进行。并且,电子设备400还可以通过网络适配器460与一个或者多个网络(例如局域网(LAN),广域网(WAN)和/或公共网络,例如因特网)通信。网络适配器460可以通过总线430与电子设备400的其它模块通信。应当明白,尽管图4中未示出,可以结合电子设备400使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
通过以上的实施方式的描述,本领域的技术人员易于理解,本发明描述的示例性实施例可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本发明实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个计算机可读的存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、或者网络设备等)执行根据本发明的上述方法。当所述计算机程序被一个数据处理设备执行时,使得该计算机可读介质能够实现本发明的上述方法,即:如图3所示的方法。
所述计算机程序可以存储于一个或多个计算机可读介质上。计算机可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
综上所述,本发明可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)等通用数据处理设备来实现根据本发明实施例中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,应理解的是,本发明不与任何特定计算机、虚拟装置或者电子设备固有相关,各种通用装置也可以实现本发明。以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (13)

1.一种辅助通话的方法,其特征在于,包括:
第一终端的电话通话进程通过与辅助硬件建立的第一通信连接向所述辅助硬件发送第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用发送所述第一音频数据,所述第一音频数据为第二终端向所述第一终端发送的通话数据,所述第一通信连接包括蓝牙连接,所述第二通信连接包括无线局域网连接;
第一终端的辅助应用通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据;
根据所述第一音频数据展示第一文字;
接收用户操作产生的第二文字;
将所述第二文字转换成第二音频数据;
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述第一终端的电话通话进程发送所述第二音频数据;
所述电话通话进程通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
2.根据权利要求1所述的方法,其特征在于,所述接收用户操作产生的第二文字,包括:
接收用户输入文字的操作,确定输入的文字作为第二文字。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一音频数据展示第一文字,还包括:
根据所述第一音频数据展示第一文字和反馈标识;
所述接收用户操作产生的第二文字,还包括:
根据接收用户操作的反馈标识确定对应的第二文字。
4.根据权利要求1所述的方法,所述辅助应用通过所述第二通信连接接收所述辅助硬件发送的第一音频数据,包括:
接收辅助硬件发送的加密的第一音频数据;
所述根据所述第一音频数据展示第一文字,包括:
对加密的第一音频数据进行解密;
根据解密的第一音频数据展示第一文字。
5.一种辅助对话的方法,其特征在于,包括:
通过与第一终端的电话通话进程建立的第一通信连接接收所述电话通话进程发送的第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙连接;
通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,使所述辅助应用根据所述第一音频数据展示第一文字,接收用户操作产生的第二文字,将所述第二文字转换成第二音频数据,所述第二通信连接包括无线局域网连接;
通过所述第二通信连接接收所述辅助应用发送的第二音频数据;
通过所述第一通信连接向所述电话通话进程发送所述第二音频数据,使所述电话通话进程向第二终端发送所述第二音频数据。
6.根据权利要求5所述的方法,其特征在于,在接收所述电话通话进程发送的第一音频数据之前,还包括:
建立电话通话进程与辅助硬件的第一通信连接;
建立辅助应用与辅助硬件的第二通信连接。
7.根据权利要求6所述的方法,其特征在于,在接收所述电话通话进程发送的第一音频数据之后,对第一音频数据进行加密;
所述通过与第一终端的辅助应用建立的第二通信连接向所述辅助应用发送所述第一音频数据,包括:
向所述辅助应用发送加密的第一音频数据。
8.一种辅助通话的装置,其特征在于,包括:
电话通话模块,通过与辅助硬件建立的第一通信连接向所述辅助硬件发送第一音频数据,使所述辅助硬件通过第二通信连接向辅助应用模块发送所述第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙连接,所述第二通信连接包括无线局域网连接;
展示模块;
操作采集模块;
辅助应用模块,通过与所述辅助硬件建立的第二通信连接接收所述辅助硬件发送的第一音频数据;
根据所述第一音频数据通过展示模块展示第一文字;
通过操作采集模块接收用户操作产生的第二文字,将所述第二文字转换成第二音频数据;
通过所述第二通信连接将所述第二音频数据发送给所述辅助硬件,使所述辅助硬件通过所述第一通信连接向所述电话通话模块发送所述第二音频数据;
所述电话通话模块,还用于通过所述第一通信连接接收所述辅助硬件发送的第二音频数据,向所述第二终端发送所述第二音频数据。
9.一种辅助对话的装置,其特征在于,包括:
第一通信模块,用于通过与第一终端的电话通话模块建立的第一通信连接接收所述电话通话模块发送的第一音频数据,所述第一音频数据为第二终端向第一终端发送的通话数据,所述第一通信连接包括蓝牙连接;
第二通信模块,用于通过与第一终端的辅助应用模块建立的第二通信连接向所述辅助应用模块发送所述第一音频数据,使所述辅助应用模块根据所述第一音频数据展示第一文字,接收用户操作产生的第二文字,将所述第二文字转换成第二音频数据,所述第二通信连接包括无线局域网连接;
通过所述第二通信连接接收所述辅助应用模块发送的第二音频数据;
第一通信模块,还用于通过所述第一通信连接向所述电话通话模块发送所述第二音频数据,使所述电话通话模块向第二终端发送所述第二音频数据。
10.根据权利要求9所述的装置,其特征在于,所述第一通信模块,还用于:
与电话通话模块建立第一通信连接;
所述第二通信模块,还用于与辅助应用模块建立第二通信连接。
11.根据权利要求10所述的装置,其特征在于,还包括加密模块,用于在接收所述电话通话模块发送的第一音频数据之后,对第一音频数据进行加密;
所述通过与第一终端的辅助应用模块建立的第二通信连接向所述辅助应用模块发送所述第一音频数据,包括:
向所述辅助应用模块发送加密的第一音频数据。
12.一种电子设备,其中,该电子设备包括:
处理器;以及,
存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行根据权利要求1-7中任一项所述的方法。
13.一种计算机可读存储介质,其中,所述计算机可读存储介质存储一个或多个程序,所述一个或多个程序当被处理器执行时,实现权利要求1-7中任一项所述的方法。
CN201911095218.9A 2019-11-11 2019-11-11 一种辅助通话的方法、装置和电子设备 Active CN110798813B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911095218.9A CN110798813B (zh) 2019-11-11 2019-11-11 一种辅助通话的方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911095218.9A CN110798813B (zh) 2019-11-11 2019-11-11 一种辅助通话的方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN110798813A CN110798813A (zh) 2020-02-14
CN110798813B true CN110798813B (zh) 2021-12-07

Family

ID=69443893

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911095218.9A Active CN110798813B (zh) 2019-11-11 2019-11-11 一种辅助通话的方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN110798813B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101115088A (zh) * 2007-08-07 2008-01-30 周运南 聋哑人专用手机
CN201499302U (zh) * 2009-07-27 2010-06-02 陈坚强 一种多功能助听器
CN103973877A (zh) * 2013-02-06 2014-08-06 北京壹人壹本信息科技有限公司 一种在移动终端中利用文字实现实时通话的方法和装置
CN106254642A (zh) * 2016-07-30 2016-12-21 吴凤彪 一种辅助耳机及其通话方法
CN107993646A (zh) * 2016-10-25 2018-05-04 北京分音塔科技有限公司 一种实现实时语音互译的方法
CN108650419A (zh) * 2018-05-09 2018-10-12 深圳市知远科技有限公司 基于智能手机的电话翻译系统
CN109712484A (zh) * 2019-02-27 2019-05-03 厦门市派美特科技有限公司 一种方便聋哑人交流的系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110051385A (ko) * 2009-11-10 2011-05-18 삼성전자주식회사 통신 단말기 및 그의 통신 방법
CN107172521A (zh) * 2017-06-30 2017-09-15 广州音书科技有限公司 一种用于实时语音识别的蓝牙耳机及系统
CN108833698B (zh) * 2018-06-08 2021-01-15 诺百爱(杭州)科技有限责任公司 一种移动设备文字通话方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101115088A (zh) * 2007-08-07 2008-01-30 周运南 聋哑人专用手机
CN201499302U (zh) * 2009-07-27 2010-06-02 陈坚强 一种多功能助听器
CN103973877A (zh) * 2013-02-06 2014-08-06 北京壹人壹本信息科技有限公司 一种在移动终端中利用文字实现实时通话的方法和装置
CN106254642A (zh) * 2016-07-30 2016-12-21 吴凤彪 一种辅助耳机及其通话方法
CN107993646A (zh) * 2016-10-25 2018-05-04 北京分音塔科技有限公司 一种实现实时语音互译的方法
CN108650419A (zh) * 2018-05-09 2018-10-12 深圳市知远科技有限公司 基于智能手机的电话翻译系统
CN109712484A (zh) * 2019-02-27 2019-05-03 厦门市派美特科技有限公司 一种方便聋哑人交流的系统

Also Published As

Publication number Publication date
CN110798813A (zh) 2020-02-14

Similar Documents

Publication Publication Date Title
CN105100141B (zh) 多媒体内容网络分享方法、装置及系统
CN101888519A (zh) 共享桌面内容的方法和智能设备
CA2484246A1 (en) Sequential multimodal input
EP3542522A1 (en) Incoming call management method and apparatus
CN101826897A (zh) 实现移动终端与pc交互的方法、装置和系统
CN109543198A (zh) 翻译方法、装置、系统及存储介质
CN105913249A (zh) 一种基于声波和蓝牙结合的移动支付方法及系统
CN113259301A (zh) 一种账号数据共享方法及电子设备
CN104955033A (zh) 一种语音加密通话方法
CN111615090B (zh) 蓝牙设备间的交互方法及装置、存储介质和电子设备
CN112272254A (zh) 终端设备的定位方法、终端设备、系统以及服务器
CN109936840A (zh) 通信方法、装置及电子设备
CN110798813B (zh) 一种辅助通话的方法、装置和电子设备
JP4898735B2 (ja) Ipネットワークアプリケーションを備えたコードレス電話システム
KR20150047150A (ko) 음성을 텍스트로 변환하는 채팅 서비스 장치 및 방법과, 채팅 서비스 시스템
CN115801299B (zh) 元宇宙身份认证方法、装置、设备及存储介质
CN115174558B (zh) 云网端一体化身份认证方法、装置、设备及存储介质
CN210380947U (zh) 一种分布式通话装置
CN110855832A (zh) 一种辅助通话的方法、装置和电子设备
JP2014149644A (ja) 電子会議システム
US20150170651A1 (en) Remedying distortions in speech audios received by participants in conference calls using voice over internet (voip)
KR100645527B1 (ko) 화상 통화 데이터를 기록하는 통신 단말기 및 상기 통신단말기의 동작 방법
CN111726283B (zh) 用于车载智能音箱的微信接收方法和装置
CN113572904B (zh) 一种话务台的话单传递方法、装置、电子设备及存储介质
CN214125339U (zh) 一种车载手机投屏装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant