CN112243061A - 一种移动终端的通信方法以及移动终端 - Google Patents

Abstract

本申请提供了一种移动终端的通信方法以及移动终端。该移动终端能够在听障模式和视障模式间切换；在听障模式下，移动终端通过人工智能算法将语音信息转换为文字信息；在视障模式下，移动终端通过人工智能算法将文字信息转换为语音信息。利用该通信方法，移动终端能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。在听障模式下，当存在多个版本的文字信息时，移动终端将转换后的多个版本的文字信息按相关度的大小排序后进行显示，有利于用户准确地获取语音信息的语义内容。

Description

一种移动终端的通信方法以及移动终端

技术领域

本发明涉及通信技术领域，尤其涉及一种移动终端的通信方法以及移动终端。

背景技术

随着手机用户越来越多，手机的影响力越来越大，人们对手机依赖程度也越来越高。残障人士是一个较大的社会群体，其对手机的特殊要求，成就了一个潜力巨大的市场。

现有的移动终端往往同时依赖于用户健全的听觉功能和健全的视觉功能以协助用户进行信息交互。移动终端，例如手机，并不会对语音信息和文字信息加以选择、处理，而是将其直接推送至用户。

然而，当用户有听力障碍时，用户无法有效地接收语音信息；或者，当用户有视觉障碍时，用户无法有效地接收文字信息。通信终端的直接推送将会严重影响用户高效地进行信息交互，造成沟通障碍。

发明内容

针对上述现有技术中的问题，本申请提供了一种移动终端的通信方法以及移动终端，其能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

第一方面，本发明提供了一种移动终端的通信方法，切换所述移动终端的通信模式，所述通信模式为听障模式或视障模式；在所述听障模式下，所述移动终端通过人工智能算法将语音信息转换为文字信息；在所述视障模式下，所述移动终端通过人工智能算法将文字信息转换为语音信息。利用该通信方法，移动终端能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

在第一方面的一个实施方式中，在所述听障模式下，当存在多个版本的文字信息时，所述移动终端将转换后的多个版本的文字信息按相关度的大小排序后进行显示。通过该实施方式，有利于用户准确地获取语音信息的语义内容。

在第一方面的一个实施方式中，在所述听障模式下，所述移动终端还将用户输入的语音信息转换为文字信息发出。通过该实施方式，能够协助具有语言障碍的听障用户进行沟通。

在第一方面的一个实施方式中，在发出前，所述移动终端将待发出的文字信息通过显示屏显示以便用户检查确认后发出。通过该实施方式，能够提高发出的文字信息的准确性，有利于提高沟通效率。

在第一方面的一个实施方式中，在所述视障模式下，所述移动终端多次重复播放所述语音信息；在用户确认接收后，所述移动终端停止播放所述语音信息。通过该实施方式，有利于用户准确地获取语音信息的语义。

在第一方面的一个实施方式中，在所述视障模式下，所述移动终端还将用户输入的语音信息转换为文字信息进行输出，通过该实施方式，有利于接收端获取文字信息。

在第一方面的一个实施方式中，在所述视障模式下，所述移动终端还将网页、阅读软件中的文字信息转换为语音信息并进行播放。通过该实施方式，能够为用户提供便利，避免用户重复设置各个应用的属性，以使用户打开应用即能够直接收听根据文字信息转换获取的语音信息，而无需手动启动插件或阅读功能。

在第一方面的一个实施方式中，所述文字信息包括表情信息，所述表情信息包括表情所属表情包的主题名称和表情的关键词。通过该实施方式，利用表情所属表情包的主题名称和表情的关键词能够对表情信息和语音信息进行转换，有利于用户在视障模式或听障模式下使用表情信息，丰富用户的语言表达，有利于提高沟通的趣味性、幽默性和亲和性。

在第一方面的一个实施方式中，所述移动终端的视障模式和听障模式能够通过滑动控制键切换。通过该实施方式，有利于实现移动终端工作模式的灵活切换。

第二方面，本发明还提供了一种利用第一方面及其实施方式中的通信方法进行通信的移动终端，该移动终端包括：接收器，其接收语音信息或文字信息；处理器，其包括人工智能转换芯片；所述人工智能转换芯片利用集成的人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息；以及输出装置，其将转换后的文字信息或语音信息输出至用户。利用该移动终端，其能够在听障模式和视障模式间灵活切换，该移动终端既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

在第二方面的一个实施方式中，所述输出装置包括显示屏、扬声器。通过该实施方式，有利于用户获取准确的沟通信息以顺利地进行沟通。

第三方面，本发明还提供了一种利用第一方面及其实施方式中的通信方法进行通信的移动终端，该移动终端包括：接收模块，其用于接收语音信息或文字信息；以及转换模块，其利用人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息。利用该移动终端，其能够在听障模式和视障模式间灵活切换，该移动终端既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

在第三方面的一个实施方式中，所述移动终端还包括输出模块，用于将转换后的文字信息或语音信息输出至用户。通过该实施方式，有利于用户获取准确的沟通信息以顺利地进行沟通。

本申请提供的一种移动终端的通信方法以及移动终端，相较于现有技术，具有如下的有益效果。

1、本申请的移动终端能够在听障模式和视障模式间灵活切换，其既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

2、在所述听障模式下，当存在多个版本的文字信息时，所述移动终端将转换后的多个版本的文字信息按相关度的大小排序后进行显示，有利于用户准确地获取语音信息的语义内容。

3、通过表情所属表情包的主题名称和表情的关键词能够对表情信息和语音信息进行转换，有利于用户在视障模式或听障模式下使用表情信息，丰富用户的语言表达，有利于提高沟通的趣味性、幽默性和亲和性。

上述技术特征可以各种适合的方式组合或由等效的技术特征来替代，只要能够达到本发明的目的。

附图说明

在下文中将基于实施例并参考附图来对本发明进行更详细的描述，其中：

图1显示了根据本发明一实施方式的通信方法的流程图；

图2显示了根据本发明一实施方式的移动终端的结构示意图；

图3显示了根据本发明一实施方式的移动终端的模块示意图。

在附图中，相同的部件使用相同的附图标记。附图并未按照实际的比例。

具体实施方式

下面将结合附图对本发明作进一步说明。

为使本发明实施例的目的、技术方案和优点更加清楚，上面结合本发明实施例中的附图，对本发明实施例中的技术方案进行了清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此，以上对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

需要说明的是，在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。

如图1所示，本公开的一些实施例提供了一种移动终端10的通信方法，包括以下步骤：步骤100，切换所述移动终端10的通信模式，所述通信模式为听障模式或视障模式；步骤210，在听障模式下，移动终端10通过人工智能算法将语音信息转换为文字信息；步骤220，在视障模式下，移动终端10通过人工智能算法将文字信息转换为语音信息。

现有的移动终端10往往仅具有听障模式或视障模式。在移动终端10仅具有听障模式时，移动终端10仅能为听障人士提供高效地服务；而当移动终端10仅具有视障模式时，移动终端10仅能为视障人士提供高效地服务。

现有的移动终端10往往不同时具有能够灵活切换的听障模式和视障模式。因此，听障人士需要使用具有听障模式的移动终端10，视障人士需要使用具有视障模式的移动终端10。在生产销售时，不得不分别生产销售具有听障模式的移动终端10和具有视障模式的移动终端10，不利于降低移动终端10的生产成本。

本实施例中的移动终端10同时具有听障模式和视障模式，且听障模式和视障模式能够灵活切换，有利于降低移动终端10的生产销售成本，也便于消费者选购、使用。

可选地，移动终端10的视障模式和听障模式能够通过滑动控制键切换。

滑动控制键包括滑条和滑块，滑块能够在滑条内滑动，滑条的一端对应听障模式，滑条的另一端对应视障模式，滑条的中部对应普通模式。

可选地，滑动控制键可以为虚拟键或机械键。

听障人士能够自主地控制滑动控制键以对移动终端10的工作模式进行选择。视障人士可以在家人、朋友的帮助下熟悉移动终端10以掌握控制技巧，从而实现移动终端10工作模式的切换。

可选地，移动终端10还可以通过语音控制切换听障模式和视障模式。失语者则可以在家人、朋友的帮助下完成初始设置；或使用滑动控制键完成设置。

步骤210，在听障模式下，移动终端10通过人工智能算法将语音信息转换为文字信息。当发送端向移动终端10发送语音信息时，移动终端10通过人工智能算法将语音信息转换为文字信息，以供用户阅读，使得用户能够获取语音信息的内容从而有利于缓解听障人士的沟通障碍。

步骤220，在视障模式下，移动终端10通过人工智能算法将文字信息转换为语音信息。当发送端向移动终端10发送文字信息时，移动终端10通过人工智能算法将文字信息转换为语音信息，以供用户收听，使得用户能够获取文字信息的内容从而有利于缓解视障人士的沟通障碍。

利用该通信方法，移动终端10能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

在本实施例的一些实施方式中，在听障模式下，步骤210还包括，当存在多个版本的文字信息时，移动终端10将转换后的多个版本的文字信息按相关度的大小排序后进行显示。

在听障模式下，移动终端10将语音信息转换为文字信息。由于移动终端10接收到的语音信息可能是方言或者由于环境噪音等多方面原因模糊不清，此时，可能存在多种不同版本的转换后的文字信息。移动终端10将转换后的多个版本的文字信息按相关度的大小排序后进行显示。

例如，移动终端10接收到的语音信息为“您吃了吗”。转换后的文字信息有三个版本，其包括：“您吃了么”、“您冷么”和“您有事么”。移动终端10能够根据计算获取上述三个版本的文字信息与当前语境的相关度并对其进行排序，例如相关度最高的为“您吃了么”，其次为“您冷么”，相关度最低的为“您有事么”。其中，计算相关度时可以获取地理位置以判断方言的种属，也可以获取既往沟通内容或大数据库中流行的、高频率沟通内容等以协助判断，此处不做赘述。

移动终端10将这三个版本的文字信息按相关度的排序进行显示，例如，在屏幕上第一行显示“有歧义”；第二行显示“一、您吃了么”；第三行显示“二、您冷么”；第四行显示“三、您有事么”。通过将各个版本展示在显示屏上，用户可以根据聊天内容进行自主推测。

本实施方式有利于用户准确地获取语音信息的语义内容。

在本实施例的一些实施方式中，在听障模式下，步骤210还包括，移动终端10还将用户输入的语音信息转换为文字信息发出。

部分听障人士能够正常说话，此时，其能够发出准确的语音信息。但，由于部分听障人士有着语言障碍，其发音不准确，为了方便沟通，因此将其输入的语音信息转换为文字发出。

优选地，步骤210还包括，在发出前，移动终端10将待发出的文字信息通过显示屏显示以便用户检查确认后发出，从而提高发出的文字信息的准确性，有利于提高沟通效率。

可选地，步骤210还包括，在听障模式下，用户也可以输入文字信息，移动终端10根据设置将其转换为语音信息或保持其文字信息状态发出。

在本实施例的一些实施方式中，步骤220还包括，在视障模式下，移动终端10多次重复播放语音信息；在用户确认接收后，移动终端10停止播放语音信息。

由于环境因素及个人因素，用户可能无法通过一次收听获取准确的语义，所以移动终端10可以多次重复播放语音信息，在用户确认接收后，移动终端10才停止播放该语音信息。通过该实施方式，有利于用户准确地获取语音信息的语义。

在本实施例的一些实施方式中，步骤220还包括，在视障模式下，移动终端10还将用户输入的语音信息转换为文字信息进行输出，以方便接收端阅读。

可选地，移动终端10还可以根据设置将用户输入的语音信息直接发出，以方便接收端收听。

在本实施例的一些实施方式中，步骤220还包括，在视障模式下，移动终端10还将网页、阅读软件中的文字信息转换为语音信息并进行播放。该实施方式能够为用户提供便利，避免用户重复设置各个应用的属性，以使用户打开应用即能够直接收听根据文字信息转换获取的语音信息，而无需手动启动插件或阅读功能。

在本实施例的一些实施方式中，文字信息包括表情信息，表情信息包括表情所属表情包的主题名称和表情的关键词。

在将表情信息转换为语音信息时，可以直接使用表情所属表情包的主题名称和表情的关键词。例如，表情信息为Emoji表情包中的“微笑”，语音信息可以播放“表情：微笑，所属表情包为Emoji表情包”。再例如，表情信息为福气猫表情包中的“谢谢”，语音信息可以播放“表情：谢谢，所属表情包为福气猫表情包”。

在将语音信息转换为表情信息时，可以识别语音信息中的表情包的主题名称和表情的关键词从而确定相应的表情。例如，语音信息为“Emoji表情包中的微笑”、“微笑，Emoji表情包”、“表情：微笑，Emoji表情包”等时，移动终端10均能够将其转换为Emoji表情包中的“微笑”显示或发出。再例如，语音信息为“福气猫表情包中的谢谢”、“表情：谢谢，福气猫表情包”等时，移动终端10均能够将其转换为福气猫表情包中的“谢谢”显示或发出。

本实施方式通过表情所属表情包的主题名称和表情的关键词能够对表情信息和语音信息进行转换，有利于用户在视障模式或听障模式下使用表情信息，丰富用户的语言表达，有利于提高沟通的趣味性、幽默性和亲和性。

在本实施例的一些实施方式中，移动终端10的视障模式和听障模式能够通过滑动控制键切换。滑动控制键能够为用户切换视障模式和听障模式提供便利，有利于实现移动终端10工作模式的灵活切换。

如图2所示，本公开的一些实施例还提供了一种利用上述通信方法进行通信的移动终端10，该移动终端10包括：接收器11，其接收语音信息或文字信息；处理器12，其包括人工智能转换芯片；人工智能转换芯片利用集成的人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息；以及输出装置13，其将转换后的文字信息或语音信息输出至用户。

接收器11将接收到的语音信息或文字信息传输至处理器12，处理器12将语音信息或文字信息分别转换为对应的文字信息或语音信息并传输至输出装置13，用户通过输出装置13直接获取转换后的文字信息或语音信息，以实现沟通。

本实施方式中的移动终端10能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

在本实施例的一些实施方式中，输出装置13包括显示屏、扬声器。

在听障模式下，移动终端10将语音信息转换为文字信息并通过显示屏进行显示，以方便用户阅读。

在视障模式下，移动终端10将文字信息转换为语音信息并通过扬声器进行播放，以方便用户收听。

本实施方式有利于用户获取准确的沟通信息以顺利地进行沟通。

如图3所示，本公开的一些实施例还提供了一种利用上述的通信方法进行通信的移动终端10，该移动终端10包括：接收模块14，其用于接收语音信息或文字信息；以及转换模块15，其利用人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息。

本实施方式中的移动终端10能够在听障模式和视障模式间灵活切换，既能够协助听障用户，也能够协助视障用户高效地进行信息交互，有利于缓解沟通障碍。

如图3所示，在本实施例的一些实施方式中，移动终端10还包括输出模块16，用于将转换后的文字信息或语音信息输出至用户。本实施方式中的输出模块16有利于用户获取准确的沟通信息以顺利地进行沟通。

本申请中的移动终端10能够应用于短信息沟通和电话沟通。

在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，笔记本电脑,服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

处理器可能是一种集成电路芯片，具有信号的处理能力。上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(NetworkProcessor，NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

虽然已经参考优选实施例对本发明进行了描述，但在不脱离本发明的范围的情况下，可以对其进行各种改进并且可以用等效物替换其中的部件。尤其是，只要不存在结构冲突，各个实施例中所提到的各项技术特征均可以任意方式组合起来。本发明并不局限于文中公开的特定实施例，而是包括落入权利要求的范围内的所有技术方案。

Claims (13)

1.一种移动终端的通信方法，其特征在于，

切换所述移动终端的通信模式，所述通信模式为听障模式或视障模式；

在所述听障模式下，所述移动终端通过人工智能算法将语音信息转换为文字信息；

在所述视障模式下，所述移动终端通过人工智能算法将文字信息转换为语音信息。

2.根据权利要求1所述的移动终端的通信方法，其特征在于，在所述听障模式下，当存在多个版本的文字信息时，所述移动终端将转换后的多个版本的文字信息按相关度的大小排序后进行显示。

3.根据权利要求1所述的移动终端的通信方法，其特征在于，在所述听障模式下，所述移动终端还将用户输入的语音信息转换为文字信息发出。

4.根据权利要求3所述的移动终端的通信方法，其特征在于，在发出前，所述移动终端将待发出的文字信息通过显示屏显示以便用户检查确认后发出。

5.根据权利要求1所述的移动终端的通信方法，其特征在于，在所述视障模式下，所述移动终端多次重复播放所述语音信息；在用户确认接收后，所述移动终端停止播放所述语音信息。

6.根据权利要求1所述的移动终端的通信方法，其特征在于，在所述视障模式下，所述移动终端还将用户输入的语音信息转换为文字信息进行输出。

7.根据权利要求1所述的移动终端的通信方法，其特征在于，在所述视障模式下，所述移动终端还将网页、阅读软件中的文字信息转换为语音信息并进行播放。

8.根据权利要求1至7中任一项所述的移动终端的通信方法，其特征在于，所述文字信息包括表情信息，所述表情信息包括表情所属表情包的主题名称和表情的关键词。

9.根据权利要求1至7中任一项所述的移动终端的通信方法，其特征在于，所述移动终端的视障模式和听障模式能够通过滑动控制键切换。

10.一种利用如权利要求1至9中任一项所述的通信方法进行通信的移动终端，其特征在于，包括：

接收器，其接收语音信息或文字信息；

处理器，其包括人工智能转换芯片；所述人工智能转换芯片利用集成的人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息；以及

输出装置，其将转换后的文字信息或语音信息输出至用户。

11.根据权利要求10所述的移动终端，其特征在于，所述输出装置包括显示屏、扬声器。

12.一种利用如权利要求1至9中任一项所述的通信方法进行通信的移动终端，其特征在于，包括：

接收模块，其用于接收语音信息或文字信息；以及

转换模块，其利用人工智能算法将语音信息或文字信息分别转换为对应的文字信息或语音信息。

13.根据权利要求12所述的移动终端，其特征在于，还包括输出模块，用于将转换后的文字信息或语音信息输出至用户。

Images