CN103095927A - 基于移动通讯终端及眼镜的显示及语音输出方法及系统 - Google Patents

Abstract

本发明涉及一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，包括移动通讯终端及眼镜，所述眼镜包括显示单元、输出音频的音频输出单元，通过所述眼镜输入语音信息，并传输到所述移动通讯终端；所述移动通讯终端根据指令传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。本发明的一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，基于普通眼镜进行简单的改进，让其基于移动通讯终端输出信息，同时，通过语音交互控制，以极低的成本，实现了眼镜的丰富功能。

Description

基于移动通讯终端及眼镜的显示及语音输出方法及系统

技术领域

 本发明涉及一种显示及语音输出方法及系统，尤其涉及一种基于移动通讯终端及眼镜的显示及语音输出方法及系统。

背景技术

随着电子技术的发展，于无线通讯技术给人们生活带来了诸多方便。眼镜也成为电子技术发展的方向，象谷哥公司制造的“谷哥眼镜”，由于该眼镜具有独立的处理器架构，具有天然独立的数据处理能力，并不与依靠移动通讯终端进行信息的处理，同时，该眼镜具有非普通眼镜所不能及的硬件结构，结构复杂、成本高昂，非普通人所能承担。现有的移动通讯终端可以连接电脑或其它无线设备输出信息，但不具备通过眼镜等设备显示输出信息的功能。

发明内容

本发明解决的技术问题是：构建一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，克服现有技术眼镜具有独立处理能力导致成本高的技术问题。 

本发明的技术方案是：构建一种基于移动通讯终端及眼镜的显示及语音输出方法，包括移动通讯终端及眼镜，所述眼镜包括显示单元、输出音频的音频输出单元，该方法包括如下步骤：           

通过所述眼镜输入语音信息，并传输到所述移动通讯终端；所述移动通讯终端根据指令传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。

本发明的进一步技术方案是：还包括通过所述眼镜输入语音信息，并传输到所述移动通讯终端，所述移动通讯终端对接收的语音信息进行语音识别转换,所述移动通讯终端根据语音识别转换结果输出相应的信息。

本发明的进一步技术方案是：还包括进行语音识别转换的网络服务器，所述移动通讯终端通过互联网连接所述网络服务器并上传语音信息，所述网络服务器与所述移动通讯终端并行对语音信息进行识别转换。

本发明的进一步技术方案是：所述移动通讯终端和所述网络服务器的语音识别转换结果均包括语音识别转换的置信度，所述移动通讯终端设置语音识别转换结果的置信度阈值，当所述移动通讯终端语音识别转换结果的置信度大于等于该置信度阈值时，取该语音识别转换结果，若所述移动通讯终端语音识别转换结果的置信度小于该置信度阈值时，取所述移动通讯终端语音识别转换结果的置信度和所述网络服务器语音识别转换结果的置信度中较大值的语音识别转换结果。

本发明的进一步技术方案是：还包括根据识别场景构建语义知识库，所述语义知识库包括字词的语义属性，在语音识别转换步骤中，还包括进行语义识别转换，具体包括如下步骤：

分词及语义消歧：根据知识库字词的语义属性对语音识别结果进行分词并进行语义消歧；

意图分类及参数提取：对分词及语义消歧的结果进行意图分类，并进行参数提取。

本发明的进一步技术方案是：所述移动通讯终端对接收的语音信息进行转发处理。

本发明的技术方案是：构建一种基于移动通讯终端及眼镜的显示及语音输出系统，包括移动通讯终端及眼镜，所述眼镜包括眼镜本体及安装在所述眼镜本体上的显示单元、与所述移动通讯终端进行双向无线通讯的第一无线通讯单元、输出音频的音频输出单元、输入语音信息的语音输入单元，所述移动通讯终端包括与所述眼镜进行无线通讯的第二无线通讯单元，所述语音输入单元输入语音信号后通过所述第一无线通讯单元传送到所述移动通讯终端，所述移动通讯终端根据指令通过所述第一无线通讯单元和第二无线通讯单元传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。

本发明的进一步技术方案是：所述眼镜还包括输入语音的语音输入单元，所述移动通讯终端包括第一语音识别转换单元，所述第一语音识别转换单元将所述语音输入单元输入的语音信息进行识别转换，所述移动通讯终端根据语音识别转换结果输出信息。

本发明的进一步技术方案是：还包括进行语音识别转换的网络服务器，所述移动通讯终端通过互联网连接所述网络服务器并上传语音信息，所述网络服务器包括第二语音识别转换单元，所述第一语音识别转换单元与所述二语音识别转换单元并行对语音信息进行识别转换。

本发明的进一步技术方案是：所述显示单元包括显示屏，所述眼镜包括镜框，所述显示屏设置所述眼镜镜框上沿。

本发明的进一步技术方案是：还包括调用所述移动通讯终端机资源输出信息以及根据互联网上的资源输出信息。

本发明的进一步技术方案是：所述第一无线通讯单元和所述第二无线通讯单元为2.4G无线通讯模块、蓝牙通讯模块、WIFI通讯模块、5.8G通讯模块中任一种。

本发明的技术效果是：本发明构建一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，包括移动通讯终端及眼镜，所述眼镜包括显示单元、输出音频的音频输出单元，通过所述眼镜输入语音信息，并传输到所述移动通讯终端；所述移动通讯终端根据指令传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。本发明的一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，基于普通眼镜进行简单的改进，让其基于移动通讯终端输出信息，同时，通过语音交互控制，以极低的成本，实现了眼镜的丰富功能。 

附图说明

图1为本发明的结构示意图。

图2为本发明的优选实施方式结构示意图。

图3为本发明的优选实施例结构示意图。

具体实施方式

下面结合具体实施例，对本发明技术方案进一步说明。

如图1所法，本发明的具体实施方式是：构建一种基于移动通讯终端及眼镜的显示及语音输出方法，包括移动通讯终端1及眼镜2，所述眼镜2包括显示单元21、输出音频的音频输出单元22，该方法包括如下步骤：           

所述移动通讯终端1根据指令传送信息到所述眼镜2，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

如图1所法，本发明的具体实施过程是：所述移动通讯终端1根据指令将信息传送到所述眼镜2，所述传送方式为无线通讯方式。所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。比如，移动通讯终端1播放视频文件，输出视频信号和音频信号，该视频信号和音频信号通过无线通讯传送到眼镜，其中的音频信号由所述音频输出单元22输出，其中的视频信号由所述显示单元21输出。

如图2所法，本发明的优选实施方式是：还包括通过所述眼镜2输入语音信息，并传输到所述移动通讯终端1，所述移动通讯终端1对接收的语音信息进行语音识别转换,所述移动通讯终端1根据语音识别转换结果输出相应的信息。本发明的优选实施过程是：通过所述眼镜2输入语音信息，所述语音信息为语音指令信息或语音交互信息，然后以无线通讯方式传送到所述移动通讯终端，所述移动通讯终端1对接收的语音信息进行语音识别转换, 所述移动通讯终端1根据语音识别转换结果输出相应的信息。具体来说，对于识别转换后的语音指令信息，将其转换为执行指令，通过执行指令然后输出相应的执行结果信息，对于识别转换后的语音交互信息，根据交互内容输出相应的结果信息。这些结果信息传送到眼镜2，然后由眼镜2输出。所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

如图2所法，本发明的优选实施方式是：还包括进行语音识别转换的网络服务器3，所述移动通讯终端1通过互联网连接所述网络服务器3并上传语音信息，所述网络服务器3与所述移动通讯终端1并行对语音信息进行识别转换。所述移动通讯终端1和所述网络服务器3的语音识别转换结果均包括语音识别转换的置信度，所述移动通讯终端1设置语音识别转换结果的置信度阈值，当所述移动通讯终端1语音识别转换结果的置信度大于等于该置信度阈值时，取该语音识别转换结果，若所述移动通讯终端1语音识别转换结果的置信度小于该置信度阈值时，取所述移动通讯终端1语音识别转换结果的置信度和所述网络服务器3语音识别转换结果的置信度中较大值的语音识别转换结果。所述移动通讯终端1根据语音识别转换结果输出相应的信息。具体来说，对于识别转换后的语音指令信息，将其转换为执行指令，通过执行指令然后输出相应的执行结果信息，对于识别转换后的语音交互信息，根据交互内容输出相应的结果信息。这些结果信息传送到眼镜2，然后由眼镜2输出。所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

如图2所法，本发明的优选实施方式是：还包括根据识别场景构建语义知识库，所述语义知识库包括字词的语义属性。比如：根据实际过程，设定各种场景，例如，娱乐、天气、体育、人物等，根据识别场景构建相应的语义知识库。构建语义知识库为语义识别的基本条件，对一些字词构建其知识库，定义其语义属性。比如：“刘德华”，其知识库包括：男、香港人、歌手、演员，其语义属性为“娱乐人物”。“下雨”，则为一种天气情况，天气预报，其语义属性为“天气”。在语音转换步骤中，还包括根据语音转换结果进行语义转换。具体包括：

步骤10:分词及语义消歧，即：根据知识库字词的语义属性对语音识别结果进行分词并进行语义消歧。具体过程如下：根据字词在知识库中的语义属性，对语音识别结果进行分词或消除歧义，比如：语音识别结果为“明天北京会下雨吗？”根据知识库字词的语义属性分词为“明天”、“北京”、“会”、“下雨”、“吗”, “明天”为时间属性，“北京”为地点属性，“会”为动词，“下雨”为天气属性，“吗”为提问。在某些情况下，需要消除歧义，比如“刘德华的歌”，可能识别为“浏得滑”，但经过知识库对“刘德华”的定义，分析判断为“刘德华”。这属于根据知识库字词的语义属性消除歧义。

步骤20:意图分类及参数提取，即：对分词及语义消歧的结果进行意图分类，并进行参数提取。比如：语音识别结果为“明天北京会下雨吗？”根据分词及语义消歧的结果进行意图分类，其意图类为“查询天气”，提取参数为：地点是北京，时间是明天。这样对“明天北京会下雨吗？”进行了语义转换。

具体过程如下：输入语音为“今天天气好吗？”，首先，进行语音识别，输出识别结果为“今天天气好吗？”然后根据语音识别结果，进行语义判断，根据语义判断为：播出今天该地的天气情况。再比如：语音输入为：“我想听王菲的音乐”，最终语义识别分析得到用户的意图为“播放歌曲”，参数是“王菲”，然后根据分析结果，调用歌曲播放功能并直接播放王菲的歌曲。因为采用有语义识别，用户并不需要记住固定的语音控制命令，而是可以采用用户自己最习惯的语言表达来与家电互动。所以对上一条意图，用户也可以说“请帮我找王菲的歌”、“有没有王菲最新的专辑？”、“王菲的执迷不悟”，也就是说，用户可自由表达自己的命令和意图，移动通讯终端1上强大的语音识别和语义理解引擎，都可以非常好的识别出用户的真正意图：播放王菲的歌曲，或播放王菲的某一首歌曲。如此，让智能家电和用户的交互更加自由、有趣，而且也没有增加原来家电终端的直接硬件成本，让家电厂商可以用比较低的成本，却实现了高性能的人机交互效果。

如图1所法，本发明的具体实施方式是：构建一种基于移动通讯终端及眼镜的显示及语音输出系统，包括移动通讯终端1及眼镜2，所述眼镜2包括显示单元21及与所述移动通讯终端1进行无线通讯的第一无线通讯单元23、输出音频的音频输出单元22，所述移动通讯终端1包括与所述眼镜2进行无线通讯的第二无线通讯单元11，所述移动通讯终端1根据指令通过所述第一无线通讯单元23和第二无线通讯单元11传送信息到所述眼镜2，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

如图1所法，本发明的具体实施过程是：所述移动通讯终端1根据指令将信息传送到所述眼镜2，所述传送方式为无线通讯方式，所述移动通讯终端1根据指令通过所述第一无线通讯单元23和第二无线通讯单元11传送信息到所述眼镜2。所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。比如，移动通讯终端1播放视频文件，输出视频信号和音频信号，该视频信号和音频信号通过无线通讯传送到眼镜，其中的音频信号由所述音频输出单元22输出，其中的视频信号由所述显示单元21输出。具体实施例中，所述第一无线通讯单元23和所述第二无线通讯单元11为2.4G无线通讯模块、蓝牙通讯模块、WIFI通讯模块、5.8G通讯模块中任一种。

如图2所法，本发明的优选实施方式是：所述眼镜2还包括输入语音的语音输入单元24，所述移动通讯终端1包括第一语音识别转换单元12，所述第一语音识别转换单元12将所述语音输入单元24输入的语音信息进行识别转换，所述移动通讯终端1根据语音识别转换结果输出信息。具体实施过程如下：通过所述眼镜2的所述语音输入单元24输入语音信息，所述眼镜2通过所述第一无线通讯单元23和第二无线通讯单元11将语音信息传送到所述移动通讯终端1，所述移动通讯终端1的第一语音识别转换单元12对接收的语音信息进行语音识别转换,所述移动通讯终端1根据语音识别转换结果输出相应的信息。具体来说，对于识别转换后的语音指令信息，将其转换为执行指令，通过执行指令然后输出相应的执行结果信息，对于识别转换后的语音交互信息，根据交互内容输出相应的结果信息。这些结果信息传送到眼镜2，然后由眼镜2输出。所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

如图2所法，本发明的优选实施方式是：还包括进行语音识别转换的网络服务器3，所述移动通讯终端1通过互联网连接所述网络服务器3并上传语音信息，所述网络服务器3包括第二语音识别转换单元31，所述第一语音识别转换单元12与所述二语音识别转换单元31并行对语音信息进行识别转换。所述移动通讯终端1和所述网络服务器3的语音识别转换结果均包括语音识别转换的置信度，所述移动通讯终端1设置语音识别转换结果的置信度阈值，当所述移动通讯终端1语音识别转换结果的置信度大于等于该置信度阈值时，取该语音识别转换结果，若所述移动通讯终端1语音识别转换结果的置信度小于该置信度阈值时，取所述移动通讯终端1语音识别转换结果的置信度和所述网络服务器3语音识别转换结果的置信度中较大值的语音识别转换结果。所述移动通讯终端1根据语音识别转换结果输出相应的信息。具体来说，对于识别转换后的语音指令信息，将其转换为执行指令，通过执行指令然后输出相应的执行结果信息，对于识别转换后的语音交互信息，根据交互内容输出相应的结果信息。这些结果信息传送到眼镜2，然后由眼镜2输出。所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。

本发明的优选实施方式是：所述显示单元21包括显示屏，所述眼镜本体27包括镜框，所述显示屏设置所述眼镜2镜框上沿。具体实施例中，所述显示屏紧贴在所述眼镜2镜框上沿内侧，镜框尺寸与显示屏的尺寸相当，这样，由外部看上去看不到显示屏。

本发明的优选实施方式是：所述眼镜2还包括对设备进行开启及状态切换第一按键26，这样就方便进行使用。所述眼镜2还包括控制向所述移动通讯终端1上传信号的第二按键25，通过第二按键25即向所述移动通讯终端1上传信号。

本发明的技术效果是：本发明构建一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，包括移动通讯终端1及眼镜2，所述眼镜2包括显示单元21、输出音频的音频输出单元22，所述移动通讯终端1根据指令传送信息到所述眼镜2，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元22输出，所述视频信息、文本信息、图片信息由所述显示单元21输出。本发明的一种基于移动通讯终端及眼镜的显示及语音输出方法及系统，基于普通眼镜进行简单的改进，让其基于移动通讯终端输出信息，同时，通过语音交互控制，以极低的成本，实现了眼镜的丰富功能。

以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (10)

1.一种基于移动通讯终端及眼镜的显示及语音输出方法，其特征在于，包括移动通讯终端及眼镜，所述眼镜包括显示单元、输出音频的音频输出单元，该方法包括如下步骤：           

通过所述眼镜输入语音信息，并传输到所述移动通讯终端；所述移动通讯终端根据指令传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。

2.根据权利要求1所述基于移动通讯终端及眼镜的显示及语音输出方法，其特征在于，所述移动通讯终端对接收的语音信息进行语音识别转换,所述移动通讯终端根据语音识别转换结果输出相应的信息。

3.根据权利要求2所述基于移动通讯终端及眼镜的显示及语音输出方法，其特征在于，还包括进行语音识别转换的网络服务器，所述移动通讯终端通过互联网连接所述网络服务器并上传语音信息，所述网络服务器与所述移动通讯终端并行对语音信息进行识别转换。

4.根据权利要求1所述基于移动通讯终端及眼镜的显示及语音输出方法，其特征在于，所述移动通讯终端对接收的语音信息进行转发处理。

5.一种基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，包括移动通讯终端及眼镜，所述眼镜包括眼镜本体及安装在所述眼镜本体上的显示单元、与所述移动通讯终端进行双向无线通讯的第一无线通讯单元、输出音频的音频输出单元、输入语音信息的语音输入单元，所述移动通讯终端包括与所述眼镜进行无线通讯的第二无线通讯单元，所述语音输入单元输入语音信号后通过所述第一无线通讯单元传送到所述移动通讯终端，所述移动通讯终端根据指令通过所述第一无线通讯单元和第二无线通讯单元传送信息到所述眼镜，所述信息包括音频信息、视频信息、文本信息、图片信息中的一种或多种，所述音频信息由所述音频输出单元输出，所述视频信息、文本信息、图片信息由所述显示单元输出。

6.据权利要求5所述基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，所述移动通讯终端包括第一语音识别转换单元，所述第一语音识别转换单元将所述语音输入单元输入的语音信息进行识别转换，所述移动通讯终端根据语音识别转换结果输出信息。

7.根据权利要求5所述基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，还包括进行语音识别转换的网络服务器，所述移动通讯终端通过互联网连接所述网络服务器并上传语音信息，所述网络服务器包括第二语音识别转换单元，所述第一语音识别转换单元与所述二语音识别转换单元并行对语音信息进行识别转换。

8.根据权利要求5或6所述基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，所述显示单元包括显示屏，所述眼镜本体包括镜框，所述显示屏设置所述眼镜镜框上沿。

9.根据权利要求7所述基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，还包括调用所述移动通讯终端机资源输出信息以及根据互联网上的资源输出信息。

10.根据权利要求5所述基于移动通讯终端及眼镜的显示及语音输出系统，其特征在于，所述第一无线通讯单元和所述第二无线通讯单元为2.4G无线通讯模块、蓝牙通讯模块、WIFI通讯模块、5.8G通讯模块中任一种。

Images