CN108345667A - 一种搜索方法及相关装置 - Google Patents

Abstract

本申请提供了一种搜索方法及相关装置，所述方法包括：启动摄像装置拍摄现实场景并生成虚拟对象；利用AR技术在用户界面中显示所述现实场景和所述虚拟对象；获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。可见，本发明实施例不仅可以更直观的获取多个搜索结果进行查看，从而提高了搜索效率，而且通过与虚拟对象的语音交互增强了现实场景感从而提高了用户体验。

Description

一种搜索方法及相关装置

技术领域

本申请涉及信息技术领域，尤其是涉及一种搜索方法及相关装置。

背景技术

传统的搜索方式中，用户在搜索引擎的搜索输入框中以文字形式输入搜索内容，搜索引擎检测到搜索内容对应的多个搜索结果，并且以文字列表的方式进行显示。

然而，这种传统的搜索方式，用户需要对以文字列表方式显示的多个搜索结果进行查看，不仅搜索效率较低，而且现实场景感不强，导致用户体验较差。

发明内容

本申请解决的技术问题在于提供一种搜索方法及相关装置，能够将增强现实(Augmented Rea lity，AR)技术融合到搜索过程中，不仅提高了搜索效率，而且增强了现实场景感从而提高了用户体验。

为此，本申请解决技术问题的技术方案是：

本申请实施例提供了一种搜索方法，包括：

启动摄像装置拍摄现实场景并生成虚拟对象；

利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；

在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

可选的，启动摄像装置拍摄现实场景并生成虚拟对象之前，所述方法还包括：

启动搜索应用程序或者搜索网页，在用户界面中显示AR搜索键；

接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，获取用户输入的语音数据之前，所述方法还包括：

启动AR应用程序，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示AR搜索键；接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述虚拟对象包括：虚拟开关键或者虚拟提示信息；

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，所述虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态；

获取用户输入的语音数据，包括：

获取用户在语音输入功能处于开启状态时输入的语音数据。

可选的，所述虚拟对象包括：虚拟卡通对象，所述利用AR技术显示所述搜索结果对应的文本数据时，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以回答问题的动画形象展现。

可选的，所述利用AR技术显示所述搜索结果对应的文本数据之前，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以思考问题的动画形象展现。

可选的，还包括：获取用户信息；

所述将所述文本数据发送至搜索服务器，包括：将所述文本数据和所述用户信息发送至搜索服务器；

接收所述搜索服务器返回的所述文本数据对应的搜索结果，包括：接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

可选的，利用AR技术显示所述搜索结果对应的文本数据，包括：

利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。

可选的，还包括：

获取所述用户界面的显示内容的截屏图像，所述截屏图像中显示有所述现实场景、虚拟卡通对象和所述搜索结果对应的文本数据。

可选的，还包括：

获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。

本申请提供了一种搜索装置，包括：启动模块、生成模块、显示模块、转换模块、发送模块和接收模块；

所述启动模块，用于启动摄像装置拍摄现实场景；

所述生成模块，用于生成虚拟对象；

所述显示模块，用于利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

所述转换模块，用于获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

所述发送模块，用于将所述文本数据发送至搜索服务器；

所述接收模块，用于接收所述搜索服务器返回的所述文本数据对应的搜索结果；

所述显示模块还用于，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或，所述装置还包括输出模块，用于输出所述搜索结果转换成的语音数据。

可选的，所述启动模块还用于启动搜索应用程序或者搜索网页，所述显示模块还用于在用户界面中显示AR搜索键；

所述接收模块还用于接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述启动模块还用于启动AR应用程序，所述显示模块还用于在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示AR搜索键；所述接收模块还用于接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述虚拟对象包括：虚拟开关键或者虚拟提示信息；

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，所述虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态；

获取用户输入的语音数据时，所述转换模块具体用于获取用户在语音输入功能处于开启状态时输入的语音数据。

可选的，所述虚拟对象包括：虚拟卡通对象，所述显示模块还用于，利用AR技术显示所述搜索结果对应的文本数据时，将在所述用户界面中显示的所述虚拟卡通对象以回答问题的动画形象展现。

可选的，所述显示模块还用于，显示所述搜索结果对应的文本数据之前，将在所述用户界面中显示的所述虚拟卡通对象以思考问题的动画形象展现。

可选的，还包括：

第一获取模块，用于获取用户信息；

所述发送模块具体用于，将所述文本数据和所述用户信息发送至搜索服务器；

所述接收模块具体用于，接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

可选的，利用AR技术显示所述搜索结果对应的文本数据时，所述显示模块具体用于，利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。

可选的，还包括第二获取模块，用于获取所述用户界面的显示内容的截屏图像，所述截屏图像中显示有所述现实场景、虚拟卡通对象和所述搜索结果对应的文本数据。

可选的，还包括第三获取模块，用于获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。

本申请实施例提供了一种用于搜索的装置，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令：

启动摄像装置拍摄现实场景并生成虚拟对象；

利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；

在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

本申请实施例还提供了一种机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得装置执行如上所述的任一种方法实施例。

通过上述技术方案可知，本发明实施例中，启动摄像装置拍摄现实场景并生成虚拟对象；利用AR技术在同一用户界面中显示所述现实场景和所述虚拟对象；获取并将用户输入的语音数据转换成对应的文本数据，发送至搜索服务器并获取搜索服务器对文本数据的搜索结果，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

可见，本发明实施例中将AR技术融合到搜索过程中，利用AR技术在同一用户界面中显示现实场景和虚拟对象，并且模拟与虚拟对象的语音交互，通过AR技术或者语音方式展现搜索结果。因此，本发明实施例不仅可以更直观的获取多个搜索结果进行查看，从而提高了搜索效率，而且通过与虚拟对象的语音交互增强了现实场景感从而提高了用户体验。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其它的附图。

图1为本申请实施例提供的一种方法实施例的流程示意图；

图2为本申请实施例提供的一种装置实施例的结构示意图；

图3是根据一示例性实施例示出的一种用于搜索的装置300的框图；

图4是本发明实施例中服务器的结构示意图。

具体实施方式

传统的搜索方式中，用户在搜索引擎的搜索输入框中以文字形式输入搜索内容，搜索引擎检测到搜索内容对应的多个搜索结果，并且以文字列表的方式进行显示。例如，用户在搜索输入框中输入“天气”，搜索引擎检索到“天气”对应的多个搜索结果，例如“北京天气情况：XX”，“上海天气情况：XX”等等，并通过文字列表的方式进行显示。

然而，这种传统的搜索方式，用户需要对以文字列表方式显示的多个搜索结果进行查看，不仅搜索效率较低，而且现实场景感不强，导致用户体验较差。

为了解决上述技术问题，本申请提供一种搜索方法及相关装置，能够将AR技术融合到搜索过程中，使得用户可以更直观的获取搜索结果进行查看，提高了搜索效率，而且通过与虚拟对象的语音交互增强了现实场景感从而提高了用户体验。

为了更好地理解本发明的技术方案，下面对AR技术的定义及应用情况进行说明。

AR技术是一种在摄像装置拍摄的现实场景中叠加上相应图像、视频、3D模型等虚拟对象的技术，这种技术的目标是在屏幕上把虚拟对象套在现实场景并进行互动。目前已经出现很多AR技术相关的产品，例如利用AR技术在现实场景中进行虚拟宠物养成类的游戏，或者利用AR技术在现实场景中寻找虚拟红包，然而，这些与AR技术相关的产品，用户往往通过点击屏幕实现交互，例如，用户通过点击屏幕上相应的虚拟按键，使得虚拟宠物执行相应的动作，然而这种方式中并不能模拟用户与虚拟宠物在真实场景中的交互，例如用户无法与虚拟宠物进行语音对话，降低了用户体验。

而在将AR技术融合到搜索过程时，如果通过点击屏幕实现互动，例如在屏幕上显示输入键盘并通过点击屏幕等方式输入搜索内容，对现实场景感有较大的影响，用户体验很差。而为了解决该技术问题，本发明实施例采用了一种更贴近真实场景的交互方式，增强了用户体验。下面具体说明本发明实施例的技术方案。

为了使本技术领域的人员更好地理解本申请中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。

请参阅图1，本发明实施例提供了搜索方法的一种方法实施例。本实施例具体可以用于终端设备(也可以称为用户设备)，常见的终端设备例如包括：手机、平板电脑、笔记本电脑、掌上电脑、移动互联网设备、可穿戴设备(例如头戴式设备)、个人数字助理(PersonalDigital Assistant，PDA)和膝上型便携计算机等。

本实施例的所述方法包括：

S101：启动摄像装置拍摄现实场景并生成虚拟对象。

在本发明实施例中，摄像装置指的是具有拍摄和/或录像功能的装置。摄像装置可以内置在终端设备中，例如终端设备为手机时，摄像装置可以为手机内置的摄像头；摄像装置也可以为外置设备，例如，摄像装置为外置的头戴设备上的摄像头，头戴设备与终端设备之间通过通信网络进行连接，终端设备通过向头戴设备发送开启指令，启动头戴设备上的摄像头。

在本发明实施例中，虚拟对象指的是用于和用户进行语音互动的虚拟化的对象。其中，虚拟对象可以包括虚拟开关键、虚拟提示信息和虚拟卡通形象中的任一种或者多种。下面举例说明。

在一种可选的实施例中，虚拟对象可以包括虚拟开关键和/或虚拟提示信息。

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，例如，虚拟开关键为显示在用户界面的虚拟按键，用户通过点击用户界面上显示的虚拟按键，开启语音输入功能，此时用户可以输入语音数据，用户可以通过再次点击虚拟按键，关闭语音输入功能，或者可以在预设时间之后(可以通过显示时间进度条、倒计时等提示剩余时间)自动关闭语音输入功能，或者也可以自动检测到用户完成输入的语音数据之后，关闭语音输入功能。

虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态，例如终端设备开启语音输入功能并在用户界面上显示有虚拟信息：“已开启语音输入功能，可以输入语音”、或者通过显示时间进度条、倒计时等提示剩余时间，此时用户可以输入语音数据，在预设时间之后或者检测到用户操作后，关闭语音输入功能。

在另一种可选的实施例中，虚拟对象可以包括虚拟卡通形象，虚拟卡通形象用于模拟与用户之间的问答过程。其中可以通过触摸等方式触发虚拟卡通形象的动画效果，或者还可以对虚拟卡通形象进行形象选择和更换。

在本发明实施例中，可以在传统的文字搜索过程中，通过操作相应的AR搜索键切换到本发明实施例中基于AR技术的搜索过程。

在本发明实施例中，可以在搜索应用程序(即具有搜索功能的应用程序)或者搜索网页中设置AR搜索功能。可以例如，启动搜索应用程序(即具有搜索功能的应用程序)或者搜索网页后，在用户界面中显示有搜索输入框和AR搜索键，搜索输入框用于输入文字形式的搜索内容，支持用户基于文字进行搜索，当用户想要实施基于AR技术的搜索时，触发该AR搜索键，终端设备接收用户的搜索请求，其中该搜索请求根据用户对所述AR搜索键的操作而生成，根据所述用户的搜索请求，启动摄像装置拍摄现实场景并生成虚拟对象。

或者，本发明实施例中也可以在AR相关的应用程序嵌入搜索功能，通过在AR应用程序中设置相应的AR搜索键实施本发明实施例中基于AR技术的搜索。可以例如，打开AR应用程序，在显示现实场景和虚拟对象的用户界面中，利用AR技术显示AR搜索键，当用户想要实施基于AR技术的搜索时，触发该AR搜索键，终端设备接收用户的搜索请求，其中该搜索请求根据用户对所述AR搜索键的操作而生成，根据所述用户的搜索请求，获取语音数据。

S102：利用AR技术在用户界面中显示所述现实场景和所述虚拟对象。

例如，虚拟对象可以包括虚拟开关键和虚拟卡通形象，在同一用户界面中将摄像装置实时拍摄的现实场景、虚拟开关键和虚拟卡通形象叠加显示。

S103：获取用户输入的语音数据，将所述语音数据转换成对应的文本数据。

在本发明实施例中，不需要在屏幕上显示输入键盘并通过点击屏幕等方式输入搜索内容，而是通过语音输入，模拟用户与虚拟对象在真实场景中的交互，从而增强了用户体验。其中，语音数据可以用于描述用户提出的问题。

其中，可以在开启语音输入功能时，获取用户输入的语音数据。

在一种实施例中，用户可以通过点击用户界面上显示的虚拟按键，开启语音输入功能，此时用户可以输入语音数据，例如“北京天气”，输入完毕之后，用户可以通过再次点击虚拟按键关闭语音输入功能，或者可以在预设时间之后(可以通过显示时间进度条、倒计时等提示剩余时间)自动关闭语音输入功能，或者也可以自动检测到用户完成输入的语音数据之后，关闭语音输入功能，获取用户在开启语音输入功能时输入的语音数据，并转换成对应的文本数据。

在另一种实施例中，可以自动开启语音输入功能，例如进入到搜索应用程序之后即开启语音输入功能，当检测到用户输入语音数据时，获取该语音数据，此时，可以通过点击虚拟按键关闭语音输入功能，或者可以在预设时间之后(可以通过显示时间进度条、倒计时等提示剩余时间)自动关闭语音输入功能，或者也可以自动检测到用户完成输入的语音数据之后，关闭语音输入功能。其中，在开启语音输入功能时，可以通过终端设备中的麦克风获取用户输入的语音数据。

S104：将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果。

其中，所述搜索服务器可以具体是搜索引擎中用于进行数据搜索的服务器。搜索服务器可以根据文本数据，搜索到对应的搜索结果。若用户输入的语音数据用于描述用户提出的问题，搜索服务器返回的搜索结果可以用于对用户提出的问题进行回复，例如，用户输入的语音数据转换为的文本数据为：“北京天气”，搜索服务器搜索到对应的搜索结果：“北京天气：最低气温-7度，最高气温5度，多云，西北风2级，感觉有点凉，室外活动”。

S105：在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

本发明实施例中提供了多种搜索结果的输出方式，例如，可以利用AR技术，在用户界面上叠加显示搜索结果对应的文本数据，其中，当虚拟对象包括虚拟卡通形象时，虚拟卡通形象可以模拟与用户之间的问答过程，因此在叠加显示搜索结果对应的文本数据时，虚拟卡通对象可以以回答问题的动画形象展现，例如虚拟卡通形象展现正在说话的动画形象。其中，在显示所述搜索结果对应的文本数据之前，该虚拟卡通形象可以以思考问题的动画形象展现。

又例如，可以将搜索结果转换成语音数据并输出，即播放该语音数据，进一步模拟用户与虚拟对象在真实场景中的交互，此时虚拟卡通形象也可以以回答问题的动画形象展现。又例如，叠加显示搜索结果对应的文本数据，并同时输出搜索结果转换成的语音数据。

其中，如果接收搜索服务器返回的搜索结果超时，例如网络信号较差、或者搜索服务器未能搜索到匹配度较高的搜索结果时，可以生成提示文本数据，用于提示搜索失败，并且在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示提示文本数据，和/或输出所述提示文本数据转换成的语音数据。

可见，本发明实施例中将AR技术融合到搜索过程中，利用AR技术在同一用户界面中显示现实场景和虚拟对象，并且模拟与虚拟对象的语音交互，通过AR技术或者语音方式展现搜索结果。因此，本发明实施例不仅可以更直观的获取多个搜索结果进行查看，从而提高了搜索效率，而且通过与虚拟对象的语音交互增强了现实场景感从而提高了用户体验。其中需要强调的是，本发明实施例不需要在屏幕上显示输入键盘并通过点击屏幕等方式输入搜索内容，而是通过语音输入模拟用户与虚拟对象在真实场景中的交互，因此增强了用户体验。

在本发明实施例中，通过搜索服务器进行搜索时，还可以通过用户信息进一步筛选搜索结果。具体地，还包括：获取用户信息；所述将所述文本数据发送至搜索服务器，包括：将所述文本数据和所述用户信息发送至搜索服务器；接收所述搜索服务器返回的所述文本数据对应的搜索结果，包括：接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

其中，用户信息可以为用户标识、用户属性信息(例如用户位置信息、用户性别、用户喜好等)、用户历史行为信息(例如用户历史搜索信息)等。举例说明，用户输入语音数据并转换为文本数据：“今天的天气”，并且获取用户的位置信息：北京，将该位置信息和文本数据发送至搜索服务器进行关联搜索。

在本发明实施例中，为了进一步增强现实场景感，提高用户的搜索效率，可以只向用户输出一个搜索结果，例如，搜索服务器在搜索文本数据对应的搜索结果时，搜索匹配度最高的一个搜索结果，并将该一个搜索结果返回至终端设备，或者，终端设备接收到搜索服务器返回的多个搜索结果，对多个搜索结果进行筛选，输出筛选后的匹配度最高的一个搜索结果。

而当搜索结果为多个并通过文本形式显示时，为了提高用户的搜索效率并提高用户体验，可以滚动播出搜索结果，具体地，利用AR技术显示所述搜索结果对应的文本数据，包括：利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。当搜索结果为多个并通过语音形式播放时，可以对搜索结果的语音数据进行自然语言的处理，以自然语言对话的形式进行播放。

在本发明实施例中，可以对搜索过程进行拍照和/或录像，并且可以对拍照得到的图像和/或录像得到的视频进行保存、分享等操作。下面分别说明。

对搜索过程拍照的过程可以包括：获取所述用户界面的显示内容的截屏图像，其中，若在搜索结果以文本形式展现时进行截屏，则截屏图像中显示有所述现实场景、所述虚拟卡通对象和所述搜索结果对应的文本数据。

对搜索过程录像的过程可以包括：获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和所述虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。例如，对整个搜索过程进行录像，则截屏视频记录有动态变化的现实场景和虚拟卡通对象、用户输入的语音数据、显示的所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据。

对应上述方法实施例，本申请还提供了相应的装置实施例，下面具体说明。

请参阅图2，本申请提供了搜索装置的一种装置实施例，包括：启动模块201、生成模块202、显示模块203、转换模块204、发送模块205和接收模块206。

所述启动模块201，用于启动摄像装置拍摄现实场景。

所述生成模块202，用于生成虚拟对象。

所述显示模块203，用于利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象。

所述转换模块204，用于获取用户输入的语音数据，将所述语音数据转换成对应的文本数据。

所述发送模块205，用于将所述文本数据发送至搜索服务器。

所述接收模块206，用于接收所述搜索服务器返回的所述文本数据对应的搜索结果。

所述显示模块203还用于，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或，所述装置还包括输出模块207，用于输出所述搜索结果转换成的语音数据。

可选的，所述启动模块还用于启动搜索应用程序或者搜索网页，所述显示模块还用于在用户界面中显示AR搜索键；

所述接收模块还用于接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述启动模块还用于启动AR应用程序，所述显示模块还用于在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示AR搜索键；所述接收模块还用于接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述虚拟对象包括：虚拟开关键或者虚拟提示信息；

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，所述虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态；

获取用户输入的语音数据时，所述转换模块具体用于获取用户在语音输入功能处于开启状态时输入的语音数据。

可选的，所述虚拟对象包括：虚拟卡通对象，所述显示模块还用于，利用AR技术显示所述搜索结果对应的文本数据时，将在所述用户界面中显示的所述虚拟卡通对象以回答问题的动画形象展现。

可选的，所述显示模块还用于，显示所述搜索结果对应的文本数据之前，将在所述用户界面中显示的所述虚拟卡通对象以思考问题的动画形象展现。

可选的，还包括：

第一获取模块，用于获取用户信息；

所述发送模块具体用于，将所述文本数据和所述用户信息发送至搜索服务器；

所述接收模块具体用于，接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

可选的，利用AR技术显示所述搜索结果对应的文本数据时，所述显示模块具体用于，利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。

可选的，还包括第二获取模块，用于获取所述用户界面的显示内容的截屏图像，所述截屏图像中显示有所述现实场景、虚拟卡通对象和所述搜索结果对应的文本数据。

可选的，还包括第三获取模块，用于获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图3是根据一示例性实施例示出的一种用于搜索的装置300的框图。例如，装置300可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图3，装置300可以包括以下一个或多个组件：处理组件302，存储器304，电源组件306，多媒体组件308，音频组件310，输入/输出(I/O)的接口312，传感器组件314，以及通信组件316。

处理组件302通常控制装置300的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件302可以包括一个或多个处理器320来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件302可以包括一个或多个模块，便于处理组件302和其他组件之间的交互。例如，处理部件302可以包括多媒体模块，以方便多媒体组件308和处理组件302之间的交互。

存储器304被配置为存储各种类型的数据以支持在设备300的操作。这些数据的示例包括用于在装置300上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器304可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件306为装置300的各种组件提供电力。电源组件306可以包括电源管理系统，一个或多个电源，及其他与为装置300生成、管理和分配电力相关联的组件。

多媒体组件308包括在所述装置300和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件308包括一个前置摄像头和/或后置摄像头。当设备300处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件310被配置为输出和/或输入音频信号。例如，音频组件310包括一个麦克风(MIC)，当装置300处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器304或经由通信组件316发送。在一些实施例中，音频组件310还包括一个扬声器，用于输出音频信号。

I/O接口312为处理组件302和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件314包括一个或多个传感器，用于为装置300提供各个方面的状态评估。例如，传感器组件314可以检测到设备300的打开/关闭状态，组件的相对定位，例如所述组件为装置300的显示器和小键盘，传感器组件314还可以检测装置300或装置300一个组件的位置改变，用户与装置300接触的存在或不存在，装置300方位或加速/减速和装置300的温度变化。传感器组件314可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件314还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件314还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件316被配置为便于装置300和其他设备之间有线或无线方式的通信。装置300可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信部件316经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信部件316还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置300可以被一个或多个应用专用集成电路

(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子组件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器304，上述指令可由装置300的处理器320执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种搜索方法，所述方法包括：

启动摄像装置拍摄现实场景并生成虚拟对象；

利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；

在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

可选的，启动摄像装置拍摄现实场景并生成虚拟对象之前，所述方法还包括：

启动搜索应用程序或者搜索网页，在用户界面中显示AR搜索键；

接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，获取用户输入的语音数据之前，所述方法还包括：

启动AR应用程序，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示AR搜索键；接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

可选的，所述虚拟对象包括：虚拟开关键或者虚拟提示信息；

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，所述虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态；

获取用户输入的语音数据，包括：

获取用户在语音输入功能处于开启状态时输入的语音数据。

可选的，所述虚拟对象包括：虚拟卡通对象，所述利用AR技术显示所述搜索结果对应的文本数据时，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以回答问题的动画形象展现。

可选的，所述利用AR技术显示所述搜索结果对应的文本数据之前，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以思考问题的动画形象展现。

可选的，还包括：获取用户信息；

所述将所述文本数据发送至搜索服务器，包括：将所述文本数据和所述用户信息发送至搜索服务器；

接收所述搜索服务器返回的所述文本数据对应的搜索结果，包括：接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

可选的，利用AR技术显示所述搜索结果对应的文本数据，包括：

利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。

可选的，还包括：

获取所述用户界面的显示内容的截屏图像，所述截屏图像中显示有所述现实场景、虚拟卡通对象和所述搜索结果对应的文本数据。

可选的，还包括：

获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。

图4是本发明实施例中服务器的结构示意图。该服务器400可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上中央处理器(central processing units，CPU)422(例如，一个或一个以上处理器)和存储器432，一个或一个以上存储应用程序442或数据444的存储介质430(例如一个或一个以上海量存储设备)。其中，存储器432和存储介质430可以是短暂存储或持久存储。存储在存储介质430的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对服务器中的一系列指令操作。更进一步地，中央处理器422可以设置为与存储介质430通信，在服务器400上执行存储介质430中的一系列指令操作。

服务器400还可以包括一个或一个以上电源426，一个或一个以上有线或无线网络接口450，一个或一个以上输入输出接口458，一个或一个以上键盘456，和/或，一个或一个以上操作系统441，例如Windows ServerTM，Mac OS XTM，UnixTM,LinuxTM，FreeBSDTM等等。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (13)

1.一种搜索方法，其特征在于，包括：

启动摄像装置拍摄现实场景并生成虚拟对象；

利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；

在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

2.根据权利要求1所述的搜索方法，其特征在于，启动摄像装置拍摄现实场景并生成虚拟对象之前，所述方法还包括：

启动搜索应用程序或者搜索网页，在用户界面中显示AR搜索键；

接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

3.根据权利要求1所述的搜索方法，其特征在于，获取用户输入的语音数据之前，所述方法还包括：

启动AR应用程序，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示AR搜索键；接收用户的搜索请求，所述搜索请求根据用户对所述AR搜索键的操作而生成。

4.根据权利要求1所述的搜索方法，其特征在于，所述虚拟对象包括：虚拟开关键或者虚拟提示信息；

其中，所述虚拟开关键用于根据用户的触发操作，开启或者结束语音输入功能，所述虚拟提示信息用于提示用户语音输入功能处于开启或者结束状态；

获取用户输入的语音数据，包括：

获取用户在语音输入功能处于开启状态时输入的语音数据。

5.根据权利要求1所述的搜索方法，其特征在于，所述虚拟对象包括：虚拟卡通对象，所述利用AR技术显示所述搜索结果对应的文本数据时，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以回答问题的动画形象展现。

6.根据权利要求5所述的搜索方法，其特征在于，所述利用AR技术显示所述搜索结果对应的文本数据之前，还包括：

将在所述用户界面中显示的所述虚拟卡通对象以思考问题的动画形象展现。

7.根据权利要求1所述的搜索方法，其特征在于，还包括：获取用户信息；

所述将所述文本数据发送至搜索服务器，包括：将所述文本数据和所述用户信息发送至搜索服务器；

接收所述搜索服务器返回的所述文本数据对应的搜索结果，包括：接收所述搜索服务器返回的所述文本数据和所述用户信息对应的搜索结果。

8.根据权利要求1所述的搜索方法，其特征在于，利用AR技术显示所述搜索结果对应的文本数据，包括：

利用AR技术，以多幅画面滚动的方式显示所述搜索结果对应的文本数据,其中每幅画面中显示一个搜索结果对应的文本数据。

9.根据权利要求1所述的搜索方法，其特征在于，还包括：

获取所述用户界面的显示内容的截屏图像，所述截屏图像中显示有所述现实场景、虚拟卡通对象和所述搜索结果对应的文本数据。

10.根据权利要求1所述的搜索方法，其特征在于，还包括：

获取所述用户界面的显示内容的录制视频，所述录制视频中记录有动态变化的所述现实场景和虚拟卡通对象，还记录有用户输入的语音数据、所述搜索结果对应的文本数据和所述搜索结果转换成的语音数据中的任一种或多种数据。

11.一种搜索装置，其特征在于，包括：启动模块、生成模块、显示模块、转换模块、发送模块和接收模块；

所述启动模块，用于启动摄像装置拍摄现实场景；

所述生成模块，用于生成虚拟对象；

所述显示模块，用于利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

所述转换模块，用于获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

所述发送模块，用于将所述文本数据发送至搜索服务器；

所述接收模块，用于接收所述搜索服务器返回的所述文本数据对应的搜索结果；

所述显示模块还用于，在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或，所述装置还包括输出模块，用于输出所述搜索结果转换成的语音数据。

12.一种用于搜索的装置，其特征在于，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令：

启动摄像装置拍摄现实场景并生成虚拟对象；

利用增强现实AR技术在用户界面中显示所述现实场景和所述虚拟对象；

获取用户输入的语音数据，将所述语音数据转换成对应的文本数据；

将所述文本数据发送至搜索服务器，接收所述搜索服务器返回的所述文本数据对应的搜索结果；

在显示所述现实场景和所述虚拟对象的所述用户界面中，利用AR技术显示所述搜索结果对应的文本数据，和/或输出所述搜索结果转换成的语音数据。

13.一种机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得装置执行如权利要求1至10中一个或多个所述的搜索方法。