CN111046680A - 一种翻译方法及电子设备 - Google Patents
一种翻译方法及电子设备 Download PDFInfo
- Publication number
- CN111046680A CN111046680A CN201811198981.XA CN201811198981A CN111046680A CN 111046680 A CN111046680 A CN 111046680A CN 201811198981 A CN201811198981 A CN 201811198981A CN 111046680 A CN111046680 A CN 111046680A
- Authority
- CN
- China
- Prior art keywords
- language
- voice
- electronic device
- user
- text
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42348—Location-based services which utilize the location information of a target
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/55—Rule-based translation
- G06F40/56—Natural language generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/40—Processing or translation of natural language
- G06F40/58—Use of machine translation, e.g. for multi-lingual retrieval, for server-side translation for client devices or for real-time translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/06—Authentication
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Signal Processing (AREA)
- Telephone Function (AREA)
- Machine Translation (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请提供一种翻译方法及电子设备,该方法应用于第一电子设备,包括:第一电子设备建立与第二电子设备的通话连接,然后显示通话界面,在接收第一用户的第一操作之后,响应于第一操作,第一电子设备由显示通话界面切换为显示翻译界面,当第一电子设备接收第一用户的第一语言的第一语音时,并向第二电子设备发送第一语音,同时响应于第一语音,翻译界面依次至少显示第一文本和第二文本,其中,第一文本是通过识别第一语音得到的,第二文本是将第一语音翻译为目标语言得到的。在翻译界面显示第二文本的同时,向第二电子设备发送目标语言的机器语音,该方法可以实现在通话完成实时翻译,并能够同步机器语音和目标语言的文本。
Description
技术领域
本申请涉及终端技术领域,尤其涉及一种翻译方法及电子设备。
背景技术
近年来,随着电子产业和通信技术的飞速发展,目前智能家庭设备越来越多,例如手机,智能音箱、智能手环等,人们的生活变得越来越智能化。由于手机的便携性,且可以从应用商店上下载各种功能的应用软件,所以手机已经成为人们日常生活中必不可少的必备品。
随着国家间贸易、交流的不断发展和进步,用户国际化的趋势必然导致不同语种的人们存在沟通不畅的问题。以中、英文母语用户通话为例,使用中文的用户需要熟练使用英语才能和英文用户进行交流,而英文用户也很少有人懂汉语,于是语言成为国际化交流的最大障碍,因此通话过程中的即时语言翻译需求显得越来越重要。
目前,现有技术虽然能够实现在通话过程中进行即时语言翻译,但是如果需要切换语言类型,就需要中断此处通话,设置成功语言类型之后,再次发起通话,另外,因此翻译的过程存在时延,导致在通话过程中可能发生翻译之后的机器语音与用户发出的语音发生重叠的现象。
发明内容
本申请提供一种翻译方法及电子设备,用以实现使用不同语言的通话双方可以借助电子设备的翻译功能实现顺畅、实时的语言交流。
第一方面,本申请实施例提供了一种翻译方法,所述方法适用于第一电子设备,该方法包括:第一电子设备建立与第二电子设备的通话连接,并显示所述第一电子设备的通话界面,然后第一电子设备接收所述第一用户的第一操作;响应于所述第一操作,所述第一电子设备由显示所述通话界面切换为显示翻译界面;然后第一电子设备接收第一用户的第一语言的第一语音,并向所述第二电子设备发送所述第一语音;响应于所述第一语音,第一电子设备的翻译界面依次至少显示第一文本和第二文本,其中,所述第一文本是通过识别所述第一语音得到的,所述第二文本是将所述第一语音翻译为目标语言得到的;在所述翻译界面显示所述第二文本的同时,向所述第二电子设备发送所述目标语言的机器语音,其中,所述目标语言的机器语音是将所述第一语音翻译为目标语言得到的。该方法可以同步机器语音和目标语言的文本,避免用户已阅读完成翻译之后的文本,但机器语音尚未收到的问题。
进一步地,第一电子设备接收所述第一用户在所述翻译界面上的语言设置操作;响应于所述语言设置操作,第一电子设备由显示所述翻译界面切换为显示语言设置界面,所述语言设置界面包括第二语言的设置控件;第一电子设备接收所述第一用户对所述第二语言的设置控件的确认操作;响应于所述确认操作,第一电子设备将所述目标语言设置为所述第二语言;然后第一电子设备接收所述第一用户在所述通话界面的挂机操作;响应于所述挂机操作,结束所述通话连接。该方法,可以实现在通话过程中更改语言的设置,使得翻译功能更加人性化。
在一种可能的设计中,第一电子设备可以从所述第一用户所拨打电话号码中获取国际区号,然后根据国际区号将所述目标语言设置为与所述国际区号对应的国家的官方语言。也就是说,第一电子设备可以实现自动地设置目标语言,不需要用户手动操作,使得翻译功能更加人性化。
在一种可能的设计中,响应于所述第一语音之后,所述翻译界面依次至少显示第一文本和第二文本之前,该方法还包括:通过识别所述第一语音得到所述第一文本,并将所述第一文本翻译成所述目标语言的第二文本;将所述第二文本转换为所述目标语言的机器语音。也就是说,本申请实施例通过上述方法可以实现对用户语音的翻译,既翻译得到文本也得到机器语音,便于用户理解对方的通话内容。
在一种可能的设计中,该方法还包括:第一电子设备接收所述第一用户的目标语言的第二语音,并向所述第二电子设备发送所述第二语音;然后接收所述第一用户在所述翻译界面的朗读自身译文控件的关闭操作;响应于所述关闭操作,所述电子设备显示所述翻译界面,所述翻译界面还包括目标语言的第三文本,所述第三文本是通过识别所述第二语音得到的。
本申请实施例中,通过用户自主打开或者关闭对自身语音的翻译功能,可以减少无效的翻译,提高通话的流畅度。
在一种可能的设计中,该方法还包括:第一电子设备接收第一用户的目标语言的所述第二语音,并向所述第二电子设备发送所述第二语音;当检测到所述第二语音对应的语言为目标语言时,响应于所述第二语音,所述电子设备不对所述第二语音进行翻译,且显示所述翻译界面,所述翻译界面还包括目标语言的第三文本。
本申请实施例中,通过自动关闭对自身语音的翻译功能,可以减少无效的翻译,提高通话的流畅度。
在一种可能的设计中,所述第一电子设备向所述第二电子设备发送所述所述目标语言的机器语音之后,所述接收所述第一用户在所述通话界面的挂机操作之前,还包括:接收所述第二电子设备发送的目标语言的第三语音;响应于所述第三语音,显示所述翻译界面,所述翻译界面还包括所述目标语言的第四文本和所述第一语言的第五文本;其中,所述目标语言的第四文本是通过识别所述第三语音得到的,所述第一语言的第五文本是将所述第三语音翻译为目标语言得到的;
在第一电子设备接收所述第二电子设备发送的第一语言的机器语音的同时,所述翻译界面显示所述第五文本,其中,所述第一语言的机器语音是将所述第三语音翻译为目标语言得到的。
本申请实施例中,第一电子设备可以接收对方用户发来的语音,以及机器语音,实现顺畅、实时的语言交流。
在一种可能的设计中,所述第一电子设备通过所述第一电子设备的听筒播放所述第二电子设备发送的目标语言的第三语音;所述第一电子设备接收所述第二电子设备发送的第一语言的机器语音之后,所述第一电子设备接收所述第一用户在所述通话界面的挂机操作之前,还包括:通过所述第一电子设备的扬声器播放所述第一语言的机器语音。该方法可以便于用户在不同的场景下理解对方用户的通话内容。
在一种可能的设计中,所述第一电子设备接收所述第一用户在所述通话界面的挂机操作之前,还包括:接收所述第一用户在所述翻译界面上的静音控件的关闭操作;响应于所述关闭操作,停止播放所述第一语言的机器语音。这样,可以使得翻译功能更加人性化,以便于提高用户体验。
在一种可能的设计中,在所述第一电子设备通过所述第一电子设备的扬声器播放所述第一语言的机器语音时,还包括:接收第一用户的第一语言的第四语音;响应于所述第四语音,显示提示信息,所述提示信息用于指示所述第一用户在所述第一语言的机器语音播放完成后再发出语音。通过该方法,当用户语速过快,或者连续发出的语音间隔过短时,电子设备可以在翻译界面显示提示信息,用于提醒用户减慢语速,以避免机器语音与用户的语音发生重叠。
在一种可能的设计中,接收所述第一用户在所述翻译界面上的退出操作;响应于所述退出操作,由显示所述翻译界面切换为显示通话界面;接收所述第一用户的第一语言的第五语音;向所述第二电子设备发送所述第五语音。这样,可以便于用户根据实际需要启用翻译功能,更加人性化和个性化,提高了用户的体验。
第二方面,本申请实施例提供一种电子设备,包括处理器和存储器。其中,存储器用于存储一个或多个计算机程序;当存储器存储的一个或多个计算机程序被处理器执行时,使得该电子设备能够实现上述任一方面的任意一种可能的设计的方法。
第三方面,本申请实施例还提供一种装置,该装置包括执行上述任一方面的任意一种可能的设计的方法的模块/单元。这些模块/单元可以通过硬件实现,也可以通过硬件执行相应的软件实现。
第四方面,本申请实施例中还提供一种计算机可读存储介质,所述计算机可读存储介质包括计算机程序,当计算机程序在电子设备上运行时,使得所述电子设备执行上述任一方面的任意一种可能的设计的方法。
第五方面,本申请实施例还提供一种包含计算机程序产品,当所述计算机程序产品在终端上运行时,使得所述电子设备执行上述任一方面的任意一种可能的设计的方法。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
图1为本申请实施例提供的一种互联场景示意图;
图2为本申请实施例提供的一种手机的结构示意图;
图3为本申请实施例提供的安卓操作系统结构示意图;
图4a至图4e为本申请实施例提供的一组界面示意图;
图4f至图4i为本申请实施例提供的另一组界面示意图;
图5为本申请实施例提供的一个界面示意图;
图6为本申请实施例提供的一个界面示意图;
图7为本申请实施例提供的一组界面示意图;
图8为本申请实施例提供的一个界面示意图;
图9为本申请实施例提供的一个界面示意图;
图10为本申请实施例提供的一种电子设备的结构示意图;
图11为本申请实施例提供的另一种电子设备的结构示意图。
具体实施方式
为了便于理解,示例的给出了部分与本申请实施例相关概念的说明以供参考。如下所示:
机器翻译,又称为自动翻译,是利用计算机将一种自然语言(源语言)转换为另一种自然语言(目标语言)的过程。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。下文中的第一语言、第二语言指代的是自然语言,第一语音、第二语音指代的是用户发出的声音。在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例提供的翻译方法可以应用于如图1所示的多个电子设备100基于通信网络互联的场景。其中,该通信网络可以是局域网,也可以是通过中继(relay)设备转接的广域网。当该通信网络为局域网时,示例性的,该通信网络可以是wifi热点网络、wifiP2P网络、蓝牙网络、zigbee网络或近场通信(near field communication,NFC)网络等近距离通信网络。当该通信网络为广域网时,示例性的,该通信网络可以是第三代移动通信技术(3rd-generation wireless telephone technology,3G)网络、第四代移动通信技术(the4th generation mobile communication technology,4G)网络、第五代移动通信技术(5th-generation mobile communication technology,5G)网络、未来演进的公共陆地移动网络(public land mobile network,PLMN)或因特网等。在图1所示的场景中,不同电子设备之间可以通过通信网络交互数据,例如交互图片、文本、视频,或者交互电子设备对图片、文本或视频等对象处理后的结果。
在本申请一些实施例中,图1所示的电子设备100可以是还包含其他功能诸如个人数字助理和/或音乐播放器功能的便携式电子设备,诸如手机、平板电脑、具备无线通讯功能的可穿戴设备(如智能手表)等。便携式电子设备的示例性实施例包括但不限于搭载 或者其他操作系统的便携式电子设备。上述便携式电子设备也可以是其他便携式电子设备,诸如具有触敏表面(例如触控面板)的膝上型计算机(laptop)等。还应当理解的是,在本申请其他一些实施例中,上述电子设备100也可以不是便携式电子设备,而是具有触敏表面(例如触控面板)的台式计算机。
示例性地,如图2所示,下面以电子设备100为例对实施例进行具体说明。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,USB接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及SIM卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(Neural-network Processing Unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本发明实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线模块1,天线模块2移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将蜂窝网天线复用为无线局域网分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(Low Noise Amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN),蓝牙(bluetooth,BT),全球导航卫星系统(globalnavigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。本申请实施例中,无线通信模块160用于发送第一用户的语音,以及翻译之后的目标语言的机器语音,或者对方用户发送的目标语言的语音,以及翻译之后的第一语言的机器语音。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS))和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用LCD(liquid crystal display,液晶显示屏),OLED(organic light-emitting diode,有机发光二极管),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏,N为大于1的正整数。本申请实施例中,显示屏194可以用于显示通话界面和翻译界面,以及语言设置界面等。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:MPEG1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。本申请实施例中,扬声器170A用于播放翻译之后的机器语音。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。本申请实施例中,麦克风170C可以用于采集用户的语音,例如第一用户的第一语言的第一语音。
耳机接口170D用于连接有线耳机。耳机接口可以是USB接口,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。可设置于显示屏194。用于检测作用于其上或附近的触摸操作。可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型,并通过显示屏194提供相应的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。本申请实施例中,触控面板用于接收第一操作、语言设置控件的确认操作、关闭操作、退出操作等触摸操作。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接用户标识模块(subscriber identity module,SIM)。SIM卡可以通过插入SIM卡接口,或从SIM卡接口拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持NanoSIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本发明实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图3是本发明实施例的电子设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图3所示,应用程序包可以包括电话、相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图3所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
以下实施例均可以在具有上述硬件结构的电子设备100实现。以下实施例将以电子设备100为例,对本申请实施例提供的翻译方法进行说明。
本申请实施例提供的翻译方法可以使得使用不同语言的通话双方可以借助电子设备的翻译功能实现顺畅、实时的语言交流。以下将结合附图和应用场景,对本申请实施例提供的翻译方法进行详细介绍。
场景一
主要以第一电子设备和第二电子设备之间的通话为例,其中第一电子设备的第一用户Wang的母语为中文,即第一用户的第一语言为中文,第二电子设备的第二用户EvelynChoi的母语是英文,即第一用户的目标语言为英文。如图4a所示,第一用户Wang打开第一电子设备的电话应用,在电话应用界面,呼叫第二用户Evelyn Choi,当电话接通之后,第一用户Wang因不太精通英语,选择打开图4a界面上的翻译功能,第一电子设备响应于第一用户Wang对图4a所示的通话界面中翻译这一功能控件401的第一操作(例如点击,或者向左滑动),显示如图4b所示的翻译界面,该翻译界面用于显示通话双方的文本信息和语音信息。
需要说明的是,电子设备也可以通过监测通话双方的语言是否一致,自动打开翻译功能,显示翻译界面。例如,第一电子设备检测到第一用户Wang的语言是中文,对方第二用户Evelyn Choi的语言是英文,因二者不一致,所以自动打开翻译功能。
例如,当第一用户Wang用中文向对方发出第一语音:“你好,我在Airbnb上预订了房间,想跟你确认下预订信息”时,第一电子设备在将第一语音发送至第二电子设备的同时,自动将第一语音识别成中文文本,并显示在图4b所示的翻译界面上,接着第一电子设备将该中文文本翻译成英文文本“Hello,I booked a room from Airbnb,and would liketo confirm the booking information with you.”,并将该英文文本显示在图4b所示翻译界面的中文文本下方区域。进一步,第一电子设备将该英文文本转换成英文语言的机器语音,并且第一电子设备在将第一用户Wang的中文语音发送给第二用户Evelyn Choi之后,还将该英文语言的机器语音发送至第二用户Evelyn Choi。这样,当对方第二用户EvelynCho依次接收到第一用户Wang发出的中文语音,以及英文语言的机器语音之后,第二用户Evelyn Choi可以理解第一用户Wang的通话内容,然后第二用户Evelyn Choi用英文回复第三语音“Sure,from Match 14 to 17,3nights totally,a single room,right?”。这时第一电子设备先接收到第二用户Evelyn Choi回复的第三语音,紧接着第一电子设备首先自动将第三语音识别成第四文本,并显示在图4c所示的翻译界面上,接着,第一电子设备将该英文的第四文本翻译成中文的第五文本“好的,从3月14日到17日,单人间共3晚,对吗?”,并将该中文文本显示在图4b所示翻译界面的第四文本“Sure,from Match 14 to 17,3nightstotally,a single room,right?”的下方区域。进一步,第一电子设备将该第五文本转换成中文语言的机器语音。第一用户Wang通过阅读图4c所示的翻译界面中的中文文本或者通过播放该中文语言的机器语音,可以理解对方用户的通话内容。
进一步地,第一用户Wang可以回复中文语音“对的,我将于6点登记入住,谢谢。”,第一电子设备首先将第一用户Wang这一句中文语音自动识别成中文文本,并显示在如图4d所示的翻译界面上,接着,第一电子设备将该中文文本翻译成英文文本“Yes,I will checkin at 6o’clock,thanks.”,并将该英文文本显示在图4d所示翻译界面的中文文本“对的,我将于6点登记入住,谢谢。”的下方区域。进一步,第一电子设备将该英文文本转换成英文语言的机器语音,并且第一电子设备在将第一用户Wang的该句中文语音发送给第二用户Evelyn Choi之后,还将该英文语言的机器语音发送至第二用户Evelyn Choi。这样,当对方第二用户Evelyn Choi接收到第一用户Wang回复的中文语音,以及英文语言的机器语音之后,第二用户Evelyn Choi可以理解第一用户Wang的通话内容,第二用户Evelyn Choi回复英文语音“Got it,You are welcome.”。这时第一电子设备先接收到第二用户Evelyn Choi回复的该句英文语音,紧接着第一电子设备首先自动将该句英文语音识别成英文文本,并显示在图4e所示的翻译界面上,接着第一电子设备将该英文文本翻译成中文文本“没问题,不客气”,并将该中文文本显示在图4e所示翻译界面的英文文本“Got it,You arewelcome.”之后。进一步,第一电子设备将该中文文本转换成中文语言的机器语音。第一用户Wang通过阅读图4e所示的翻译界面中的中文文本或者通过播放该中文语言的机器语音,可以理解对方用户的通话内容。
其中,图4b至图4e所示的翻译界面中,翻译之后的文本以AI机器人发出的消息的形式显示在翻译界面上,另外在图4b至图4e所示的翻译界面中,第一电子设备当前正在播放的机器语音旁边标记有播放图标,如图4b中的控件403所示。
值得指出的是,除了图4a中翻译控件401的位置设置方式,还可以有多种位置设置方式,如图4f至4i所示,图4f中,在通话界面右上角的“更多”菜单中设置翻译控件401,图4g1和图4g2中,在通话的控件列表中设置翻译控件401,若通话的控件列表超出一屏,可以使用导航点滑动显示。如4h中,在通话界面上设置悬浮翻译控件401,当用户在左滑该翻译控件过程中,显示屏可以显示如图4i所示的翻译界面。
另外,需要说明的是,当第一电子设备和第二电子设备均具有翻译功能时,第一电子设备和第二电子设备可以均显示图4b至图4e所示的翻译界面;当第二电子设备不具有翻译功能时,第二电子设备也可以不显示图4b至图4e所示的翻译界面,仅通过来自对方的语音以及翻译后的机器语音理解对话内容;亦或者,第一电子设备和第二电子设备可以均不显示图4b至图4e所示的翻译界面,仅通过接收的来自对方的的语音以及翻译后的机器语音理解对话内容。
还需要说明的是,当电子设备具有翻译功能时,电子设备可以连接网络,通过网络从云端服务器获取翻译之后的文本和机器语音。例如电子设备接入无线保真(wirelessfidelity,wifi)网络,从云端服务器获取翻译之后的文本和机器语音,或者电子设备通过长期演进语音承载(voice over long term evolution,VOLTE)发起通话,在通话过程中从云端服务器获取翻译之后的文本和机器语音。另外,该翻译功能可以除了可以是机器翻译,还可以是人工在线翻译。除此之外,电子设备也可以不连接网络,直接通过自身设备存储的语言库获取翻译之后的文本和机器语音。
在一种可能的设计中,如果第一用户Wang找了旁边的同事第三用户Zhang代为人工翻译自己的通话内容,则可以选择退出翻译功能,这时当第一电子设备检测到第一用户Wang作用于图4b所示的退出控件402的操作(例如点击控件402)时,第一电子设备退出翻译界面,同时停止翻译第一用户和对方用户的通话内容,但是通话继续。例如,第一电子设备的第三用户Zhang用英文发出第五语音“Thanks.”后,第一电子设备直接将第五语音“Thanks.”发送至第二电子设备。也就是说,在用户双方通话过程中,可以随时启动或者关闭翻译功能,且并不会中断通话。这样,可以便于用户根据实际需要启用翻译功能,更加人性化和个性化,提高了用户的体验。
本申请另一实施例中,如图5所示,如果第一用户Wang英文口语水平一般,可以说一些简单的口语,那么在第一用户Wang和第二用户Evelyn Choi在通话过程中,第一用户Wang可以在通话过程中,直接发送英文语音,这时就不需要对这句话进行翻译。可选的了,为了实现该效果,第一用户Wang可以手动关闭翻译自身的译文的功能。例如,当第一用户Wang用英文发出第二语音“Hello,I booked a room from Airbnb,and would like toconfirm the booking information with you”后,第一电子设备响应于第一用户Wang作用于图5所示的翻译界面中“朗读我的译文”这一功能控件501的关闭操作(例如点击控件501),显示如图5所示的翻译界面,该翻译界面中仅显示英文文本“Hello,I booked a roomfrom Airbnb,and would like to confirm the booking information with you”。也就是说,用户可以根据需要选择翻译或者不翻译自己的通话内容,这样可以减少无效的翻译,提高通话的流畅度。可选的,即使在翻译开关打开时,第一用户Wang直接用英文与对方交流,第一电子设备在检测到本机用户的使用语言为英文时,只将识别出的对应的英文文本显示在第一电子设备上,不翻译识别出的英文文本。
本申请另一实施例中,如图6所示,当第一用户Wang正在开车或者周围有别人需要旁听时,第一用户Wang可以选择打开“朗读对方译文”这一功能开关,例如,第一电子设备响应于第一用户Wang对图6所示的翻译界面中“朗读我的译文”这一功能控件601的打开操作(例如点击控件601),时,当第二用户Evelyn Choi发出英文语音“Sure,from Match 14 to17,3nights totally,a single room,right?”后,第一电子设备会播放第二用户EvelynChoi所发出英文语音对应的中文语音“好的,从3月14日到17日,单人间共3晚,对吗?”。也就是说,用户可以根据需要选择外放播报对方翻译后的机器语音内容,这样,更适用于不同的业务场景,提高了用户的体验。
本申请其它实施例中,在通话过程中,用户可以根据实际需要选择更改翻译之后的语言类型,且并不会中断通话,即该次通话继续。如图7所示,当第一电子设备检测到第一用户Wang作用于图7a所示的设置语言这一控件701的操作(例如点击控件701)时,显示如图7b所示的语言设置界面,该语言设置界面中包括通话双方的语言类型。例如,语言设置界面中包括对方语言和我的语言,其中,我的语言预先可以通过系统默认语言获得,例如第一电子设备的系统默认语言是中文,所以图7b显示我的语言是中文,对方语言则默认设置为英文。假设用户Wang在通话过程中获知对方的母语是法语,则可以即时将对方语言更改为法文,即第一电子设备检测到第一用户Wang作用于图7b所示的翻译界面中的对方语言这一控件702的操作(例如点击控件702)时,显示如图7c所示的翻译界面。该翻译界面包括多个语言选项,当第一电子设备检测到用户作用于法文这一控件703的操作(例如点击控件703)时,返回至翻译界面,即如图7d所示的翻译界面,该翻译界面还包括提示信息“正在切换语言,请等待”。可见,通过上述过程,用户可以在通话过程中切换语言类型,便于用户顺畅地进行交流,提高了沟通效率。
在本申请另一实施例中,一种方式,在用户建立通话之前,用户可以预先进入电话应用的语言设置界面,即如图7b所示的语言设置界面,用户对对方语言和我的语言进行主动设置。一般地,电子设备会默认设置我的语言是系统默认语言,对方语言为中文。用户可以根据实际需要再修改默认设置。另一种方式,用户在建立通话时,电子设备可以根据获取的用户所拨打的电话号码的国际区号或者来电号码的国际区号,自动设置对方语言,也就是自动设置目标语言为与所述国际区号对应的国家的官方语言。例如,第一用户Wang拨打的电话的国际区号是0033,第一电子设备获取国际区号是0033,确定是法国,法国虽然存在多种语言,但官方语言是法语,因此第一电子设备自动修改对方语言官方语言为法语,或者再比如,第二用户Evelyn Choi接到来电的国际区号是0086,第二电子设备获取国际区号是0086,确定是中国,因此第二电子设备自动修改对方语言为简体中文。
本申请另一实施例中,由于翻译过程会造成一定的时间延迟,且第一电子设备或第二电子设备是先将用户的语音转换成文本,再翻译成机器语音,所以就可能出现原文文本和译文文本较快地显示在翻译界面上,但是对方还未接收到音频数据,即对方还未接收到翻译之后的机器语音。因此本申请实施例提供的控制语序的方式为:第一电子设备或第二电子设备先显示自身用户所发出的语音对应的文本,当第一电子设备或第二电子设备翻译得到与自身用户所发出的语音对应的机器语音后,显示翻译得到的与自身用户所发出的语音对应的文本的同时,扬声器播放机器语音。如图8所示,该翻译界面先显示“你好,我在Airbnb上预订了房间,想跟你确认下预订信息”,当电子设备获取翻译之后的机器语音之后,电子设备将“Hello,I booked a room from Airbnb,and would like to confirm thebooking information with you”显示的同时,扬声器播报机器语音“Hello,I booked aroom from Airbnb,and would like to confirm the booking information with you”。需要说明的是,该翻译界面中还可以显示提示语“拿到音频准备播放”,这样,既能够实现语序的控制,又能够便于用户了解当前设备状态。
本申请另一实施例中,当用户语速过快,或者连续发出的语音间隔过短时,电子设备可以在翻译界面显示提示信息,用于提醒用户减慢语速,以避免机器语音与用户的语音发生重叠,例如,如图9所示,第一电子设备通过所述第一电子设备的扬声器播放“好的,从3月14日到17日,单人间共3晚,对吗?”,因第一用户Wang在扬声器未播放完成该机器语音时,已阅读完成翻译界面中翻译之后的文本,所以第一用户Wang可能会发出中文的第四语音“对的,我将于6点登记入住,谢谢。”,这时就会发生机器语音与第一用户Wang的声音的重叠,因此这时,响应于第四语音,第一电子设备显示提示信息,提示信息用于指示所述第一用户在所述第一语言的机器语音播放完成后再发出语音。如图9所示,翻译界面中包括提示信息“说的太快了,等下译文吧”。当然,提示信息也可以不显示在翻译界面,可以通过单独的消息框显示在显示屏上。
另外,需要说明的是,图9所示的翻译界面中,还设置静音控件901和免提控件902,当电子设备检测到用户作用于静音控件901的操作(例如点击控件901)时,电子设备不再播报语音内容,当电子设备检测到用户作用于免提控件902的操作(例如点击控件902)时,电子设备不再播放语音内容。这样,可以使得翻译功能更加人性化,以便于提高用户体验。
在本申请的一些实施例中,本申请实施例公开了一种电子设备,如图10所示,该电子设备用于实现以上各个方法实施例中记载的方法,其包括:接收单元1001、显示单元1002、发送单元1003、处理单元1004。其中,接收单元1001用于支持电子设备执行上述方法中的接收用户的语音和机器语音的操作;显示单元1002用于支持电子设备执行上述方法显示通话界面、翻译界面和通话设置界面;发送单元1003用于支持电子设备执行上述方法中发送用户的语音和机器语音的操作,处理单元1004用于支持电子设备执行将语音转换成文本,并翻译成目标语言的语音和文本。其中,上述方法实施例涉及所有相关内容均可以援引到对应单元模块的功能描述,在此不再赘述。
在本申请的另一些实施例中,本申请实施例公开了一种电子设备,如图11所示,该电子设备可以包括:触摸屏1101,其中,所述触摸屏1101包括触控面板1106和显示屏1107;一个或多个处理器1102;存储器1103;一个或多个应用程序(未示出);以及一个或多个计算机程序1104,上述各器件可以通过一个或多个通信总线1105连接。其中该一个或多个计算机程序1104被存储在上述存储器1103中并被配置为被该一个或多个处理器1102执行,该一个或多个计算机程序1104包括指令,上述指令可以用于执行如图4a至图9相应实施例中的各个步骤。
本申请实施例还提供一种计算机存储介质,该计算机存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的照片共享方法。
本申请实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的翻译方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的翻译方法。
其中,本申请实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其他的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其他的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (19)
1.一种翻译方法,应用于第一电子设备,其特征在于,所述方法包括:
建立与第二电子设备的通话连接,并显示所述第一电子设备的通话界面;
接收所述第一用户的第一操作;
响应于所述第一操作,由显示所述通话界面切换为显示翻译界面;
接收第一用户的第一语言的第一语音,并向所述第二电子设备发送所述第一语音;
响应于所述第一语音,所述翻译界面依次至少显示第一文本和第二文本,其中,所述第一文本是通过识别所述第一语音得到的,所述第二文本是将所述第一语音翻译为目标语言得到的;
在所述翻译界面显示所述第二文本的同时,向所述第二电子设备发送所述目标语言的机器语音,其中,所述目标语言的机器语音是将所述第一语音翻译为目标语言得到的;
接收所述第一用户在所述翻译界面上的语言设置操作;
响应于所述语言设置操作,由显示所述翻译界面切换为显示语言设置界面,所述语言设置界面包括第二语言的设置控件;
接收所述第一用户对所述第二语言的设置控件的确认操作;
响应于所述确认操作,将所述目标语言设置为所述第二语言;
接收所述第一用户在所述通话界面的挂机操作;
响应于所述挂机操作,结束所述通话连接。
2.如权利要求1所述的方法,其特征在于,在所述第一电子设备建立与第二电子设备的通话连接之后,所述接收第一用户的第一语言的第一语音之前,还包括:
从所述第一用户拨打的电话号码中获取国际区号;
根据所述国际区号,将所述目标语言设置为与所述国际区号对应的国家的官方语言。
3.如权利要求1所述的方法,其特征在于,响应于所述第一语音之后,所述翻译界面依次至少显示第一文本和第二文本之前,还包括:
通过识别所述第一语音得到所述第一文本,并将所述第一文本翻译成所述目标语言的第二文本;
将所述第二文本转换为所述目标语言的机器语音。
4.如权利要求1至3任一项所述的方法,其特征在于,还包括:
接收所述第一用户的目标语言的第二语音,并向所述第二电子设备发送所述第二语音;
当检测到所述第二语音对应的语言为目标语言时,响应于所述第二语音,所述电子设备不对所述第二语音进行翻译,且显示所述翻译界面,所述翻译界面还包括目标语言的第三文本,所述第三文本是通过识别所述第二语音得到的。
5.如权利要求1至3任一项所述的方法,其特征在于,所述第一电子设备向所述第二电子设备发送所述目标语言的机器语音之后,所述接收所述第一用户在所述通话界面的挂机操作之前,还包括:
接收所述第二电子设备发送的目标语言的第三语音;
响应于所述第三语音,显示所述翻译界面,所述翻译界面还包括所述目标语言的第四文本和所述第一语言的第五文本;其中,所述目标语言的第四文本是通过识别所述第三语音得到的,所述第一语言的第五文本是将所述第三语音翻译为目标语言得到的;
在接收所述第二电子设备发送的第一语言的机器语音的同时,所述翻译界面显示所述第五文本,其中,所述第一语言的机器语音是将所述第三语音翻译为目标语言得到的。
6.如权利要求5所述的方法,其特征在于,所述第一电子设备接收所述第二电子设备发送的目标语言的第三语音,包括:
通过所述第一电子设备的听筒播放所述第二电子设备发送的目标语言的第三语音;
所述第一电子设备接收所述第二电子设备发送的第一语言的机器语音之后,所述第一电子设备接收所述第一用户在所述通话界面的挂机操作之前,还包括:
通过所述第一电子设备的扬声器播放所述第一语言的机器语音。
7.如权利要求6所述的方法,其特征在于,所述第一电子设备接收所述第一用户在所述通话界面的挂机操作之前,还包括:
接收所述第一用户在所述翻译界面上的静音控件的关闭操作;
响应于所述关闭操作,停止播放所述第一语言的机器语音。
8.如权利要求6所述的方法,其特征在于,在所述第一电子设备通过所述第一电子设备的扬声器播放所述第一语言的机器语音时,还包括:
接收第一用户的第一语言的第四语音;
响应于所述第四语音,显示提示信息,所述提示信息用于指示所述第一用户在所述第一语言的机器语音播放完成后再发出语音。
9.如权利要求1所述的方法,其特征在于,所述第一电子设备接收所述第一用户在所述通话界面的挂机操作之前,还包括:
接收所述第一用户在所述翻译界面上的退出操作;
响应于所述退出操作,由显示所述翻译界面切换为显示通话界面;
接收所述第一用户的第一语言的第五语音;
向所述第二电子设备发送所述第五语音。
10.一种电子设备,其特征在于,包括处理器、无线通信模块、存储器、触控面板、显示屏、麦克风;
所述触控面板,用于接收所述第一用户的操作;
所述麦克风,用于采集所述第一用户的声音;
所述存储器用于存储一个或多个计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行:
通过所述无线通信模块建立与第二电子设备的通话连接,指示所述显示屏显示所述第一电子设备的通话界面;
通过所述麦克风接收所述第一用户的第一语言的第一语音;
通过所述触控面板接收所述第一用户的第一操作;
响应于所述第一操作,指示所述显示屏由显示所述通话界面切换为显示翻译界面;
通过所述无线通信模块接收第一用户的第一语言的第一语音,并通过所述无线通信模块向所述第二电子设备发送所述第一语音;
响应于所述第一语音,并指示所述显示屏所述第一文本和所述第二文本;其中,所述第一文本是通过识别所述第一语音得到的,所述第二文本是将所述第一语音翻译为目标语言得到的;
在所述翻译界面显示所述第二文本的同时,通过所述无线通信模块向所述第二电子设备发送所述目标语言的机器语音,其中,所述目标语言的机器语音是将所述第一语音翻译为目标语言得到的;
通过所述触控面板接收所述第一用户在所述翻译界面上的语言设置操作;
响应于所述语言设置操作,指示所述显示屏由显示所述翻译界面切换为显示语言设置界面,所述语言设置界面包括第二语言的设置控件;
通过所述触控面板接收所述第一用户对所述第二语言的设置控件的确认操作;
响应于所述确认操作,将所述目标语言设置为所述第二语言;
通过所述触控面板接收所述第一用户在所述通话界面的挂机操作;
响应于所述挂机操作,结束所述通话连接。
11.如权利要求10所述的电子设备,其特征在于,所述处理器还用于执行:
在通过所述无线通信模块建立与第二电子设备的通话连接之后,通过所述无线通信模块接收第一用户的第一语言的第一语音之前,从所述第一用户所拨打电话号码中获取国际区号;
根据所述国际区号将所述目标语言设置为与所述国际区号对应的国家的官方语言。
12.如权利要求10所述的电子设备,其特征在于,所述处理器还用于执行:
响应于所述第一语音之后,指示所述显示屏依次至少显示第一文本和第二文本之前,通过识别所述第一语音得到所述第一文本,并将所述第一文本翻译成所述目标语言的第二文本;
将所述第二文本转换为所述目标语言的机器语音。
13.如权利要求10至12任一项所述的电子设备,其特征在于,所述处理器还用于执行:
通过所述无线通信模块接收所述第一用户的目标语言的二语音,并向所述第二电子设备发送所述第二语音;
当检测到所述第二语音对应的语言为目标语言时,响应于所述第二语音,不对所述第二语音进行翻译,且指示所述显示屏显示所述翻译界面,所述翻译界面还包括目标语言的第三文本,所述第三文本是通过识别所述第二语音得到的。
14.如权利要求10至13任一项所述的电子设备,其特征在于,所述处理器还用于执行:
通过所述无线通信模块接收所述第二电子设备发送的目标语言的第三语音;
响应于所述第三语音,指示所述显示屏显示所述翻译界面,所述翻译界面还包括所述目标语言的第四文本和所述第一语言的第五文本;其中,所述目标语言的第四文本是通过识别所述第三语音得到的,所述第一语言的第五文本是将所述第三语音翻译为目标语言得到的;
在通过所述无线通信模块接收所述第二电子设备发送的第一语言的机器语音的同时,所述翻译界面显示所述第五文本,其中,所述第一语言的机器语音是将所述第三语音翻译为目标语言得到的。
15.如权利要求14所述的电子设备,其特征在于,所述电子设备还包括扬声器,所述处理器还用于执行:
通过所述第一电子设备的听筒播放所述第二电子设备发送的目标语言的第三语音;
通过所述扬声器播放所述第一语言的机器语音。
16.如权利要求15所述的电子设备,其特征在于,所述处理器还用于执行:
通过所述触控面板接收所述第一用户在所述通话界面的挂机操作之前,通过所述触控面板接收所述第一用户在所述翻译界面上的静音控件的关闭操作;
响应于所述关闭操作,停止播放所述第一语言的机器语音。
17.如权利要求15所述的电子设备,其特征在于,所述处理器还用于执行:
在通过所述扬声器播放所述第一语言的机器语音时,通过所述无线通信模块接收第一用户的第一语言的第四语音;
响应于所述第四语音,指示所述显示屏显示提示信息,所述提示信息用于指示所述第一用户在所述第一语言的机器语音播放完成后再发出语音。
18.如权利要求10至17任一项所述的电子设备,其特征在于,所述处理器还用于执行:
通过所述触控面板接收所述第一用户在所述通话界面的挂机操作之前,通过所述触控面板接收所述第一用户在所述翻译界面上的退出操作;
响应于所述退出操作,指示所述显示屏由显示所述翻译界面切换为显示通话界面;
通过所述无线通信模块接收所述第一用户的第一语言的第五语音;
通过所述无线通信模块向所述第二电子设备发送所述第五语音。
19.一种计算机存储介质,其特征在于,所述计算机可读存储介质包括计算机程序,当计算机程序在电子设备上运行时,使得所述电子设备执行如权利要求1至9任一项所述的翻译方法。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811198981.XA CN111046680B (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
CN202210561999.1A CN115017920A (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
JP2021546040A JP7180007B2 (ja) | 2018-10-15 | 2019-10-15 | 翻訳方法及び電子装置 |
US17/285,632 US11570299B2 (en) | 2018-10-15 | 2019-10-15 | Translation method and electronic device |
PCT/CN2019/111130 WO2020078337A1 (zh) | 2018-10-15 | 2019-10-15 | 一种翻译方法及电子设备 |
EP19872337.1A EP3855772B1 (en) | 2018-10-15 | 2019-10-15 | Translation method and electronic device |
US17/851,642 US11843716B2 (en) | 2018-10-15 | 2022-06-28 | Translation method and electronic device |
JP2022183465A JP2023029846A (ja) | 2018-10-15 | 2022-11-16 | 翻訳方法及び電子装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811198981.XA CN111046680B (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210561999.1A Division CN115017920A (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111046680A true CN111046680A (zh) | 2020-04-21 |
CN111046680B CN111046680B (zh) | 2022-05-24 |
Family
ID=70230257
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210561999.1A Pending CN115017920A (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
CN201811198981.XA Active CN111046680B (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210561999.1A Pending CN115017920A (zh) | 2018-10-15 | 2018-10-15 | 一种翻译方法及电子设备 |
Country Status (5)
Country | Link |
---|---|
US (2) | US11570299B2 (zh) |
EP (1) | EP3855772B1 (zh) |
JP (2) | JP7180007B2 (zh) |
CN (2) | CN115017920A (zh) |
WO (1) | WO2020078337A1 (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111597828A (zh) * | 2020-05-06 | 2020-08-28 | Oppo广东移动通信有限公司 | 翻译显示方法、装置、头戴显示设备及存储介质 |
CN111814497A (zh) * | 2020-08-05 | 2020-10-23 | Oppo广东移动通信有限公司 | 翻译方法、装置、可穿戴设备及计算机可读存储介质 |
CN112494958A (zh) * | 2020-12-18 | 2021-03-16 | 腾讯科技(深圳)有限公司 | 语音转换文字的方法、系统、设备及介质 |
CN112737213A (zh) * | 2021-01-18 | 2021-04-30 | Oppo广东移动通信有限公司 | 电子设备及其供电装置 |
CN113286217A (zh) * | 2021-04-23 | 2021-08-20 | 北京搜狗智能科技有限公司 | 一种通话语音翻译方法、装置和耳机设备 |
CN113299290A (zh) * | 2021-04-06 | 2021-08-24 | 维沃移动通信有限公司 | 语音识别的方法、装置、电子设备和可读存储介质 |
CN113726952A (zh) * | 2021-08-09 | 2021-11-30 | 北京小米移动软件有限公司 | 通话过程中的同声传译方法及装置、电子设备、存储介质 |
CN113885973A (zh) * | 2020-07-02 | 2022-01-04 | 华为技术有限公司 | 翻译结果显示方法、装置及电子设备 |
CN114095906A (zh) * | 2021-10-14 | 2022-02-25 | 华为技术有限公司 | 一种短距离通信方法及系统 |
CN114201978A (zh) * | 2020-09-18 | 2022-03-18 | 华为技术有限公司 | 一种对应用程序的界面进行翻译的方法及相关设备 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115017920A (zh) * | 2018-10-15 | 2022-09-06 | 华为技术有限公司 | 一种翻译方法及电子设备 |
CN111680522B (zh) * | 2020-05-29 | 2024-04-23 | 刘于平 | 基于电子终端实现翻译控制的方法及其系统、电子设备 |
CN112887194B (zh) * | 2021-01-19 | 2022-12-09 | 广州亿语智能科技有限公司 | 实现听障人士通话的交互方法、装置、终端及存储介质 |
US12056457B2 (en) * | 2022-03-22 | 2024-08-06 | Charles University, Faculty Of Mathematics And Physics | Computer-implemented method of real time speech translation and a computer system for carrying out the method |
CN116185551A (zh) * | 2023-04-25 | 2023-05-30 | 北京全路通信信号研究设计院集团有限公司 | 一种显示界面的多语言切换方法、装置、设备和介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201018626Y (zh) * | 2006-12-28 | 2008-02-06 | 康佳集团股份有限公司 | 一种移动终端 |
CN101340676A (zh) * | 2008-08-21 | 2009-01-07 | 深圳华为通信技术有限公司 | 一种实现同声翻译的方法、装置和移动终端 |
CN102903361A (zh) * | 2012-10-15 | 2013-01-30 | Itp创新科技有限公司 | 一种通话即时翻译系统和方法 |
CN103533129A (zh) * | 2013-10-23 | 2014-01-22 | 上海斐讯数据通信技术有限公司 | 实时的语音翻译通信方法、系统及所适用的通讯设备 |
CN104303177A (zh) * | 2012-04-25 | 2015-01-21 | 寇平公司 | 即时翻译系统 |
US20150095011A1 (en) * | 2013-09-30 | 2015-04-02 | Kabushiki Kaisha Toshiba | Speech translation systems, speech translation method and program product for speech translation |
CN104796536A (zh) * | 2015-03-17 | 2015-07-22 | 乐视致新电子科技(天津)有限公司 | 一种通话过程中的语音协助方法及装置 |
CN105117391A (zh) * | 2010-08-05 | 2015-12-02 | 谷歌公司 | 翻译语言 |
CN106462573A (zh) * | 2014-05-27 | 2017-02-22 | 微软技术许可有限责任公司 | 通话中翻译 |
CN107465816A (zh) * | 2017-07-25 | 2017-12-12 | 广西定能电子科技有限公司 | 一种通话即时原声语音翻译的通话终端及方法 |
CN206863740U (zh) * | 2017-04-14 | 2018-01-09 | 深圳市领芯者科技有限公司 | 语音翻译装置和系统 |
CN108009159A (zh) * | 2017-11-30 | 2018-05-08 | 上海与德科技有限公司 | 一种同声传译方法和移动终端 |
CN108650419A (zh) * | 2018-05-09 | 2018-10-12 | 深圳市知远科技有限公司 | 基于智能手机的电话翻译系统 |
Family Cites Families (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004179838A (ja) | 2002-11-26 | 2004-06-24 | Sony Ericsson Mobilecommunications Japan Inc | 携帯通信端末及び翻訳システム |
JP3920812B2 (ja) * | 2003-05-27 | 2007-05-30 | 株式会社東芝 | コミュニケーション支援装置、支援方法、及び支援プログラム |
JP2005318346A (ja) | 2004-04-30 | 2005-11-10 | Matsushita Electric Ind Co Ltd | 携帯端末装置 |
US20070041370A1 (en) * | 2005-07-15 | 2007-02-22 | Aaron Cleveland | System for Translating Electronic Communications |
CN101052069B (zh) | 2006-04-07 | 2010-09-08 | 英华达(南京)科技有限公司 | 语音通话的翻译方法 |
US20080059200A1 (en) * | 2006-08-22 | 2008-03-06 | Accenture Global Services Gmbh | Multi-Lingual Telephonic Service |
US8290779B2 (en) * | 2007-09-18 | 2012-10-16 | Verizon Patent And Licensing Inc. | System and method for providing a managed language translation service |
US20090248392A1 (en) * | 2008-03-25 | 2009-10-01 | International Business Machines Corporation | Facilitating language learning during instant messaging sessions through simultaneous presentation of an original instant message and a translated version |
EP2371106A1 (fr) * | 2008-12-30 | 2011-10-05 | France Telecom | Procede de notification et passerelle d'acces a un reseau de voix sur ip |
US9646001B2 (en) * | 2011-09-19 | 2017-05-09 | Nuance Communications, Inc. | Machine translation (MT) based spoken dialog systems customer/machine dialog |
CN102360347A (zh) * | 2011-09-30 | 2012-02-22 | 宇龙计算机通信科技(深圳)有限公司 | 一种语音翻译方法、系统及语音翻译服务器 |
US8494838B2 (en) * | 2011-11-10 | 2013-07-23 | Globili Llc | Systems, methods and apparatus for dynamic content management and delivery |
US20130326347A1 (en) * | 2012-05-31 | 2013-12-05 | Microsoft Corporation | Application language libraries for managing computing environment languages |
US20140058838A1 (en) * | 2012-08-23 | 2014-02-27 | Google Inc. | Providing content in multiple languages |
KR102108500B1 (ko) * | 2013-02-22 | 2020-05-08 | 삼성전자 주식회사 | 번역 기반 통신 서비스 지원 방법 및 시스템과, 이를 지원하는 단말기 |
US9794141B2 (en) * | 2013-03-14 | 2017-10-17 | Arista Networks, Inc. | System and method for determining a cause of network congestion |
US20140269678A1 (en) * | 2013-03-15 | 2014-09-18 | Evan Patrick McGee | Method for providing an application service, including a managed translation service |
JP6327848B2 (ja) * | 2013-12-20 | 2018-05-23 | 株式会社東芝 | コミュニケーション支援装置、コミュニケーション支援方法およびプログラム |
KR102249086B1 (ko) * | 2014-04-04 | 2021-05-10 | 삼성전자주식회사 | 레코딩 지원 전자장치 및 방법 |
CN103970734A (zh) | 2014-05-21 | 2014-08-06 | 刘业兴 | 一种交互式多语种自动翻译终端及其实现方法 |
US20150347399A1 (en) * | 2014-05-27 | 2015-12-03 | Microsoft Technology Licensing, Llc | In-Call Translation |
KR20170060439A (ko) * | 2015-11-24 | 2017-06-01 | 한국전자통신연구원 | 자동 언어설정 기능을 갖는 다국어 통번역 장치 및 방법 |
US9875238B2 (en) * | 2016-03-16 | 2018-01-23 | Vonage America Inc. | Systems and methods for establishing a language translation setting for a telephony communication |
WO2018230596A1 (ja) * | 2017-06-16 | 2018-12-20 | 本田技研工業株式会社 | 支援装置、支援方法、およびプログラム |
CN107465887A (zh) * | 2017-09-14 | 2017-12-12 | 潍坊学院 | 视频通话系统及视频通话方法 |
CN107770387A (zh) * | 2017-10-31 | 2018-03-06 | 珠海市魅族科技有限公司 | 通信控制方法、装置、计算机装置及计算机可读存储介质 |
CN107909994A (zh) | 2017-10-31 | 2018-04-13 | 珠海市魅族科技有限公司 | 通信控制方法、装置、计算机装置及计算机可读存储介质 |
CN107833577A (zh) | 2017-11-29 | 2018-03-23 | 宋晓成 | 一种语音实时多语言翻译记录方法 |
CN110322881B (zh) * | 2018-03-29 | 2024-07-05 | 松下控股株式会社 | 语音翻译装置、语音翻译方法及其存储介质 |
CN112119641B (zh) * | 2018-09-20 | 2022-04-22 | 华为技术有限公司 | 通过转发模式连接的多tws耳机实现自动翻译的方法及装置 |
CN115017920A (zh) * | 2018-10-15 | 2022-09-06 | 华为技术有限公司 | 一种翻译方法及电子设备 |
US20210312143A1 (en) * | 2020-04-01 | 2021-10-07 | Smoothweb Technologies Limited | Real-time call translation system and method |
-
2018
- 2018-10-15 CN CN202210561999.1A patent/CN115017920A/zh active Pending
- 2018-10-15 CN CN201811198981.XA patent/CN111046680B/zh active Active
-
2019
- 2019-10-15 JP JP2021546040A patent/JP7180007B2/ja active Active
- 2019-10-15 EP EP19872337.1A patent/EP3855772B1/en active Active
- 2019-10-15 US US17/285,632 patent/US11570299B2/en active Active
- 2019-10-15 WO PCT/CN2019/111130 patent/WO2020078337A1/zh unknown
-
2022
- 2022-06-28 US US17/851,642 patent/US11843716B2/en active Active
- 2022-11-16 JP JP2022183465A patent/JP2023029846A/ja not_active Ceased
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201018626Y (zh) * | 2006-12-28 | 2008-02-06 | 康佳集团股份有限公司 | 一种移动终端 |
CN101340676A (zh) * | 2008-08-21 | 2009-01-07 | 深圳华为通信技术有限公司 | 一种实现同声翻译的方法、装置和移动终端 |
CN105117391A (zh) * | 2010-08-05 | 2015-12-02 | 谷歌公司 | 翻译语言 |
CN104303177A (zh) * | 2012-04-25 | 2015-01-21 | 寇平公司 | 即时翻译系统 |
CN102903361A (zh) * | 2012-10-15 | 2013-01-30 | Itp创新科技有限公司 | 一种通话即时翻译系统和方法 |
US20150095011A1 (en) * | 2013-09-30 | 2015-04-02 | Kabushiki Kaisha Toshiba | Speech translation systems, speech translation method and program product for speech translation |
CN103533129A (zh) * | 2013-10-23 | 2014-01-22 | 上海斐讯数据通信技术有限公司 | 实时的语音翻译通信方法、系统及所适用的通讯设备 |
CN106462573A (zh) * | 2014-05-27 | 2017-02-22 | 微软技术许可有限责任公司 | 通话中翻译 |
CN104796536A (zh) * | 2015-03-17 | 2015-07-22 | 乐视致新电子科技(天津)有限公司 | 一种通话过程中的语音协助方法及装置 |
CN206863740U (zh) * | 2017-04-14 | 2018-01-09 | 深圳市领芯者科技有限公司 | 语音翻译装置和系统 |
CN107465816A (zh) * | 2017-07-25 | 2017-12-12 | 广西定能电子科技有限公司 | 一种通话即时原声语音翻译的通话终端及方法 |
CN108009159A (zh) * | 2017-11-30 | 2018-05-08 | 上海与德科技有限公司 | 一种同声传译方法和移动终端 |
CN108650419A (zh) * | 2018-05-09 | 2018-10-12 | 深圳市知远科技有限公司 | 基于智能手机的电话翻译系统 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111597828A (zh) * | 2020-05-06 | 2020-08-28 | Oppo广东移动通信有限公司 | 翻译显示方法、装置、头戴显示设备及存储介质 |
CN111597828B (zh) * | 2020-05-06 | 2023-10-03 | Oppo广东移动通信有限公司 | 翻译显示方法、装置、头戴显示设备及存储介质 |
CN113885973A (zh) * | 2020-07-02 | 2022-01-04 | 华为技术有限公司 | 翻译结果显示方法、装置及电子设备 |
CN111814497A (zh) * | 2020-08-05 | 2020-10-23 | Oppo广东移动通信有限公司 | 翻译方法、装置、可穿戴设备及计算机可读存储介质 |
CN114201978A (zh) * | 2020-09-18 | 2022-03-18 | 华为技术有限公司 | 一种对应用程序的界面进行翻译的方法及相关设备 |
CN112494958A (zh) * | 2020-12-18 | 2021-03-16 | 腾讯科技(深圳)有限公司 | 语音转换文字的方法、系统、设备及介质 |
CN112737213A (zh) * | 2021-01-18 | 2021-04-30 | Oppo广东移动通信有限公司 | 电子设备及其供电装置 |
CN112737213B (zh) * | 2021-01-18 | 2022-04-15 | Oppo广东移动通信有限公司 | 电子设备及其供电装置 |
CN113299290A (zh) * | 2021-04-06 | 2021-08-24 | 维沃移动通信有限公司 | 语音识别的方法、装置、电子设备和可读存储介质 |
CN113286217A (zh) * | 2021-04-23 | 2021-08-20 | 北京搜狗智能科技有限公司 | 一种通话语音翻译方法、装置和耳机设备 |
CN113726952A (zh) * | 2021-08-09 | 2021-11-30 | 北京小米移动软件有限公司 | 通话过程中的同声传译方法及装置、电子设备、存储介质 |
CN114095906A (zh) * | 2021-10-14 | 2022-02-25 | 华为技术有限公司 | 一种短距离通信方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
US20220329693A1 (en) | 2022-10-13 |
US20210385328A1 (en) | 2021-12-09 |
JP2023029846A (ja) | 2023-03-07 |
EP3855772B1 (en) | 2023-07-26 |
EP3855772A1 (en) | 2021-07-28 |
US11570299B2 (en) | 2023-01-31 |
JP7180007B2 (ja) | 2022-11-29 |
CN115017920A (zh) | 2022-09-06 |
JP2022508789A (ja) | 2022-01-19 |
EP3855772A4 (en) | 2021-11-17 |
WO2020078337A1 (zh) | 2020-04-23 |
CN111046680B (zh) | 2022-05-24 |
US11843716B2 (en) | 2023-12-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111046680B (zh) | 一种翻译方法及电子设备 | |
CN110381282B (zh) | 一种应用于电子设备的视频通话的显示方法及相关装置 | |
CN111345010B (zh) | 一种多媒体内容同步方法、电子设备及存储介质 | |
CN110114747B (zh) | 一种通知处理方法及电子设备 | |
CN110825469A (zh) | 语音助手显示方法及装置 | |
CN114397982A (zh) | 一种应用显示方法及电子设备 | |
CN109286725B (zh) | 翻译方法及终端 | |
CN110489215A (zh) | 一种应用程序中等待场景的处理方法和装置 | |
CN112119641B (zh) | 通过转发模式连接的多tws耳机实现自动翻译的方法及装置 | |
CN114125130B (zh) | 控制通信服务状态的方法、终端设备和可读存储介质 | |
CN113452945A (zh) | 分享应用界面的方法、装置、电子设备及可读存储介质 | |
CN111492678B (zh) | 一种文件传输方法及电子设备 | |
CN114115770A (zh) | 显示控制的方法及相关装置 | |
CN113746961A (zh) | 显示控制方法、电子设备和计算机可读存储介质 | |
CN113141483B (zh) | 基于视频通话的共享屏幕方法及移动设备 | |
CN110286975B (zh) | 一种前景元素的显示方法和电子设备 | |
CN113438366A (zh) | 信息通知的交互方法、电子设备和存储介质 | |
CN113593567A (zh) | 视频声音转文本的方法及相关设备 | |
CN112532508A (zh) | 一种视频通信方法及视频通信装置 | |
CN114664306A (zh) | 一种编辑文本的方法、电子设备和系统 | |
CN114827098A (zh) | 合拍的方法、装置、电子设备和可读存储介质 | |
WO2023124829A1 (zh) | 语音协同输入方法、电子设备及计算机可读存储介质 | |
CN118555327A (zh) | 一种音频处理方法及电子设备 | |
CN113973152A (zh) | 一种未读消息快速回复方法及电子设备 | |
CN115515112A (zh) | 蓝牙通信方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |