CN103020184B - 使用拍摄图像获取搜索结果的方法和系统 - Google Patents

Abstract

本发明提出一种使用拍摄图像获取搜索结果的方法和系统，该方法包括以下步骤：移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户；移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像；移动终端将区域图像发送至搜索服务器；以及搜索服务器对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。根据本发明实施例的使用拍摄图像获取搜索结果的方法，实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

Description

使用拍摄图像获取搜索结果的方法和系统

技术领域

本发明涉及搜索技术领域，尤其涉及一种使用拍摄图像获取搜索结果的方法和系统。

背景技术

移动终端由于可以便捷的随身携带，用户经常使用移动终端上的照相机进行拍摄图像，目前移动终端可以对照相机所拍摄的图像进行快速处理以方便用户，例如可以在照相时识别图片的内容，对成像画面中的对象（包括字符，图案等）进行识别，或者识别照相机所拍摄的二维码，或者对已经生成的照片，利用各种识别算法对照片内的物体进行识别。

但是，存在以下问题，如果用户很想知道自己所拍摄的图像中的某段文字所代表的含义，现有的图像识别技术则无法满足用户需要，用户体验差。

发明内容

本发明旨在至少解决上述技术问题之一。

为此，本发明的第一个目的在于提出一种使用拍摄图像获取搜索结果的方法，该方法实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

本发明的第二个目的在于提出另一种使用拍摄图像获取搜索结果的方法。

本发明的第三个目的在于提出一种使用拍摄图像获取搜索结果的系统。

本发明的第四个目的在于提出另一种使用拍摄图像获取搜索结果的系统。

为了实现上述目的，根据本发明第一方面实施例的使用拍摄图像获取搜索结果的方法包括以下步骤：a、移动终端根据用户指令进行拍摄，并将拍摄的图像显示给所述用户；b、所述移动终端接收所述用户在显示屏幕上针对所述拍摄图像所选取的区域图像；c、所述移动终端将所述区域图像发送至搜索服务器；以及d、所述搜索服务器对所述区域图像进行识别以获取所述区域图像的显示内容，并根据所述显示内容获得多个搜索结果，以及将所述多个搜索结果反馈至所述移动终端。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，用户可以一边拍摄图像，一边选择拍摄图像中的区域图像发送至搜索服务器获取搜索结果，实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

为了实现上述目的，根据本发明第二方面实施例的使用拍摄图像获取搜索结果的方法包括以下步骤：a、移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户；b、移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像；c、移动终端对区域图像进行预处理以获取区域图像类型，并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片；d、如果区域图像类型为文字，则移动终端获取对应的文字信息，并将文字信息发送至搜索服务器；以及e、搜索服务器根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，通过移动终端先对区域图像进行预处理，再将判断得出的区域图像的文字信息发送到搜索服务器，减少了移动终端数据传输的流量，节省了费用，提升了用户的体验。

为了实现上述目的，根据本发明第三方面实施例的使用拍摄图像获取搜索结果的系统，包括：移动终端和搜索服务器。其中，移动终端，用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，以及将区域图像发送至搜索服务器；搜索服务器，用于对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

根据本发明实施例的使用拍摄图像获取搜索结果的系统，用户可以一边拍摄图像，一边选择拍摄图像中的区域图像发送至搜索服务器获取搜索结果，实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

为了实现上述目的，根据本发明第四方面实施例的使用拍摄图像获取搜索结果的系统，包括：移动终端和搜索服务器。其中，移动终端，用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，并对区域图像进行预处理以获取区域图像类型，并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片，以及在区域图像类型为文字时，获取对应的文字信息，并将文字信息发送至搜索服务器；搜索服务器，用于根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端。

根据本发明实施例的使用拍摄图像获取搜索结果的系统，通过移动终端先对区域图像进行预处理，再将判断得出的区域图像的文字信息发送到搜索服务器，减少了移动终端数据传输的流量，节省了费用，提升了用户的体验。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中，

图1是根据本发明一个实施例的使用拍摄图像获取搜索结果的方法的流程图；

图2是根据本发明一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图；

图3是根据本发明另一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图；

图4是根据本发明又一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图；

图5是根据本发明另一个实施例的使用拍摄图像获取搜索结果的方法的流程图；

图6是根据本发明一个实施例的使用拍摄图像获取搜索结果的系统的结构框图；以及

图7是根据本发明另一个实施例的使用拍摄图像获取搜索结果的系统的结构框图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。相反，本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。

在本发明的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。此外，在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

下面参考附图描述根据本发明实施例的使用拍摄图像获取搜索结果的方法和系统。

为了让用户在用照相机拍摄图像的同时又能根据用户的需求了解图像中的内容的具体含义，可以在用户使用照相机的情况下增加一种使用方式和场景，例如，可以将拍摄图像发送至搜索服务器进行搜索以满足用户的需要，由此，提出一种使用拍摄图像获取搜索结果的方法，包括以下步骤：a、移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户；b、移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像；c、移动终端将区域图像发送至搜索服务器；以及d、搜索服务器对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

图1是根据本发明一个实施例的使用拍摄图像获取搜索结果的方法的流程图。

如图1所示，使用拍摄图像获取搜索结果的方法包括下述步骤。

步骤S101，移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户。

步骤S102，移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像。其中，移动终端可以保存区域图像，保存的格式可以是JPEG或PNG等标准格式。

步骤S103，移动终端将区域图像发送至搜索服务器。

步骤S104，搜索服务器对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器的同时启动浏览器，然后搜索服务器将搜索结果反馈至移动终端，移动终端再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器，然后搜索服务器返回搜索结果至移动终端，移动终端再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

在本发明的一个实施例中，移动终端接收用户输入的搜索词，并将搜索词发送至搜索服务器，以使搜索服务器根据显示内容和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，用户可以一边拍摄图像，一边选择拍摄图像中的区域图像发送至搜索服务器获取搜索结果，实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

图2是根据本发明一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图。

如图2所示，使用拍摄图像获取搜索结果的方法包括下述步骤。

步骤S201，移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户。

步骤S202，移动终端获取用户在显示屏幕上的手势轨迹。

步骤S203，移动终端判断手势轨迹是否封闭。

步骤S204，如果手势轨迹封闭，则移动终端根据封闭的手势轨迹获取区域图像。其中，移动终端可以保存区域图像，保存的格式可以是JPEG或PNG等标准格式。

具体地，在不同的移动终端中，获取图片中区域图像的方法可以有很多种，用户也可能通过其他的输入方式和装置获取区域图像的内容。通过手势滑动圈取搜索内容可能是其中最便捷的一种方法。

步骤S205，移动终端将区域图像发送至搜索服务器。

步骤S206，搜索服务器对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器的同时启动浏览器，然后搜索服务器将搜索结果反馈至移动终端，移动终端再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器，然后搜索服务器返回搜索结果至移动终端，移动终端再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

在本发明的一个实施例中，移动终端接收用户输入的搜索词，并将搜索词发送至搜索服务器，以使搜索服务器根据显示内容和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，在移动终端的显示屏幕上通过手势选取区域图像，比较方便，进一步提升了用户体验。

图3是根据本发明另一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图。

如图3所示，使用拍摄图像获取搜索结果的方法包括下述步骤。

步骤S301，移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户。

步骤S302，移动终端获取用户在显示屏幕上的手势轨迹。

步骤S303，移动终端判断手势轨迹是否封闭。

步骤S304，如果手势轨迹封闭，则移动终端根据封闭的手势轨迹获取区域图像。

具体地，在不同的移动终端中，获取图片中搜索区域的方法可以有很多种，用户也可能通过其他的输入方式和装置获取搜索区域的内容。通过手势滑动圈取搜索内容可能是其中最便捷的一种方法。

步骤S305，移动终端对区域图像进行预处理以获取区域图像类型，其中，区域图像类型包括文字和/或图片。其中，移动终端保存预处理之后的区域图像，保存的格式可以是JPEG或PNG等标准格式。

具体地，区域图像的预处理可以使用现有的图片识别方法和文字识别方法，首先，识别文字，例如采用OCR（OpticalCharacterRecognition，光学字符识别），如果不为文字图像，则区域图像为图片，可以使用现有的图像识别技术进一步进行识别。

步骤S306，移动终端根据区域图像类型为用户提供搜索请求选择界面，其中，搜索请求为文字搜索请求或图片搜索请求。

具体地，用户通过移动终端显示屏上弹出的选择界面，例如“文字搜索”或者“图片搜索”，用户可以任意选择其中一种方式进行搜索，其中，搜索请求选择界面形式可以有不同的设计方法，例如对于预处理之后的文字区域图像，将选择界面中“文字搜索”加亮或者突出显示，同时将“图片搜索”设置为灰度显示；对于预处理之后的图片区域图像，将选择界面中“图片搜索”加亮或者突出显示，同时将“文字搜索”设置为灰度显示。

步骤S307，移动终端接收用户根据搜索请求选择界面输入的搜索请求，并根据搜索请求将区域图像发送至搜索服务器。

步骤S308，搜索服务器对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器的同时启动浏览器，然后搜索服务器将搜索结果反馈至移动终端，移动终端再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器，然后搜索服务器返回搜索结果至移动终端，移动终端再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

在本发明的一个实施例中，移动终端接收用户输入的搜索词，并将搜索词发送至搜索服务器，以使搜索服务器根据显示内容和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，通过移动终端给用户对于选择界面中的“文字搜索”或者“图片搜索”进行的暗示，提示用户进行选择，进一步提升了用户的体验。

图4是根据本发明又一个具体实施例的使用拍摄图像获取搜索结果的方法的流程图。

如图4所示，使用拍摄图像获取搜索结果的方法包括下述步骤。

步骤S401，移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户。

步骤S402，移动终端获取用户在显示屏幕上的手势轨迹。

步骤S403，移动终端判断手势轨迹是否封闭。

步骤S404，如果手势轨迹封闭，则移动终端根据封闭的手势轨迹获取区域图像。

具体地，在不同的移动终端中，获取图片中搜索区域的方法可以有很多种，用户也可能通过其他的输入方式和装置获取搜索区域的内容。通过手势滑动圈取搜索内容可能是其中最便捷的一种方法。

步骤S405，移动终端对区域图像进行预处理以获取区域图像类型，其中，区域图像类型包括文字和/或图片。其中，移动终端保存预处理之后的区域图像，保存的格式可以是JPEG或PNG等标准格式。

具体地，区域图像的预处理可以使用现有的图片识别方法和文字识别方法，首先，识别文字，例如采用OCR（OpticalCharacterRecognition，光学字符识别），如果不为文字图像，则区域图像为图片，可以使用现有的图像识别技术进一步进行识别。

步骤S406，移动终端根据区域图像类型为用户提供搜索请求选择界面，其中，搜索请求为文字搜索请求或图片搜索请求。

具体地，用户通过移动终端显示屏上弹出的窗口界面选择搜索的入口，文字搜索或者图片搜索。搜索入口界面形式可以有不同的设计方法，例如对于通过预处理获取的图像类型是文字的区域图像，窗口界面应把文字搜索的入口界面设置为加亮或者突出显示，同时把图片搜索的入口界面设置为灰度显示；而对于通过预处理获取的图像类型是图片的区域图像，窗口界面应把图片搜索入口界面设置为加亮或者突出显示，同时把文字搜索的入口界面设置为灰度显示。

步骤S407，移动终端接收用户根据搜索请求选择界面输入的搜索请求，并根据搜索请求将区域图像发送至搜索服务器。

步骤S408，如果搜索请求为文字搜索请求，则搜索服务器对区域图像进行识别以获取区域图像的文字信息。

步骤S409，搜索服务器判断文字信息是否为地理位置信息。

步骤S410，如果文字信息是地理位置信息，则搜索服务器根据地理位置信息进行地图搜索。

步骤S411，如果文字信息不是地理位置信息，则搜索服务器根据文字信息进行网页搜索。

步骤S412，如果搜索请求为图片搜索请求，则搜索服务器对区域图像进行识别以获取区域图像的图片信息，并根据图片信息进行图片搜索。

具体地，搜索服务器可以包括文字搜索（网页搜索服务器）、图片搜索（图片搜索服务器）和地理位置（地图搜索服务器），每种搜索对应不同的入口，例如对于文字信息，发送给搜索服务器进行网页搜索；对于地理位信息，发送给搜索服务器进行地图搜索；对于图片信息，发送给搜索服务器进行图片搜索；对于无法识别出任何文字、图片、地理位置信息内容的情况，还可以提示用户无法识别图片中的内容。因此，将区域图像的显示内容进行区分，可以提高效率，更加具有针对性。

步骤S413，搜索服务器获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器的同时启动浏览器，然后搜索服务器将搜索结果反馈至移动终端，移动终端再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器，然后搜索服务器返回搜索结果至移动终端，移动终端再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

在本发明的一个实施例中，移动终端接收用户输入的搜索词，并将搜索词发送至搜索服务器，以使搜索服务器根据显示内容和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，搜索服务器识别区域图像以针对区域图像中的不同显示内容，例如文字、图片以及地理位置，进行不同的搜索，反馈的搜索结果具有针对性，进一步提升了用户体验。

为了满足用户需求，还提出另一种使用拍摄图像获取搜索结果的方法，包括以下步骤：a、移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户；b、移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像；c、移动终端对区域图像进行预处理以获取区域图像类型，并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片；d、如果区域图像类型为文字，则移动终端获取对应的文字信息，并将文字信息发送至搜索服务器；以及e、搜索服务器根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端。

图5是根据本发明另一个实施例的使用拍摄图像获取搜索结果的方法的流程图。

如图5所示，使用拍摄图像获取搜索结果的方法包括下述步骤。

步骤S501，移动终端根据用户指令进行拍摄，并将拍摄的图像显示给用户。

步骤S502，移动终端接收用户在显示屏幕上针对拍摄图像所选取的区域图像。其中，移动终端可以保存区域图像，保存的格式可以是JPEG或PNG等标准格式。

步骤S503，移动终端对区域图像进行预处理以获取区域图像类型，并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片。其中，移动终端保存预处理之后的区域图像，保存的格式可以是JPEG或PNG等标准格式。

具体地，区域图像的预处理可以使用现有的图片识别方法和文字识别方法，首先，识别文字，例如采用OCR（OpticalCharacterRecognition，光学字符识别），如果不为文字图像，则区域图像为图片，可以使用现有的图像识别技术进一步进行识别。

步骤S504，如果区域图像类型为文字，则移动终端获取对应的文字信息，并将文字信息发送至搜索服务器。

步骤S505，搜索服务器根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端。

其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器的同时启动浏览器，然后搜索服务器将搜索结果反馈至移动终端，移动终端再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器，然后搜索服务器返回搜索结果至移动终端，移动终端再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

根据本发明实施例的使用拍摄图像获取搜索结果的方法，通过移动终端先对区域图像进行预处理，再将判断得出的区域图像的文字信息发送到搜索服务器，减少了移动终端数据传输的流量，节省了费用，提升了用户的体验。

在本发明的一个实施例中，在步骤S505之后，还包括步骤：移动终端接收用户输入的搜索词，并将搜索词发送至搜索服务器，以使搜索服务器根据文字信息和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

在本发明的一个实施例中，还包括步骤：搜索服务器判断文字信息是否为地理位置信息；如果文字信息是地理位置信息，则搜索服务器根据地理位置信息进行地图搜索；以及如果文字信息不是地理位置信息，则搜索服务器根据文字信息进行网页搜索。具体地，搜索服务器可以包括文字搜索（网页搜索服务器）和地理位置（地图搜索服务器），每种搜索对应不同的入口，例如对于文字信息，发送给搜索服务器进行网页搜索；对于地理位信息，发送给搜索服务器进行地图搜索。因此，将区域图像的显示内容进行区分，可以提高效率，更加具有针对性。

为了实现上述实施例，本发明还提出一种使用拍摄图像获取搜索结果的系统。

一种使用拍摄图像获取搜索结果的系统，包括：移动终端和搜索服务器。其中，移动终端，用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，以及将区域图像发送至搜索服务器；搜索服务器，用于对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端。

图6是根据本发明一个实施例的使用拍摄图像获取搜索结果的系统的结构框图。

如图6所示，使用拍摄图像获取搜索结果的系统包括：移动终端10和搜索服务器20。

具体地，移动终端10用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，其中，移动终端10可以保存区域图像，保存的格式可以是JPEG或PNG等标准格式，以及将区域图像发送至搜索服务器20。

搜索服务器20用于对区域图像进行识别以获取区域图像的显示内容，并根据显示内容获得多个搜索结果，以及将多个搜索结果反馈至移动终端10。其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器20的同时启动浏览器，然后搜索服务器20将搜索结果反馈至移动终端10，移动终端10再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器20，然后搜索服务器20返回搜索结果至移动终端10，移动终端10再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

根据本发明实施例的使用拍摄图像获取搜索结果的系统，用户可以一边拍摄图像，一边选择拍摄图像中的区域图像发送至搜索服务器获取搜索结果，实现了用户在使用照相机的同时使用搜索服务器获取与拍摄图像相关的搜索结果，满足用户需求，提升了用户体验。

在本发明的一个实施例中，移动终端10还用于获取用户在显示屏幕上的手势轨迹，并判断手势轨迹是否封闭，以及在手势轨迹封闭时，根据封闭的手势轨迹获取区域图像。具体地，在不同的移动终端中，获取图片中搜索区域的方法可以有很多种，用户也可能通过其他的输入方式和装置获取搜索区域的内容。通过手势滑动圈取搜索内容可能是其中最便捷的一种方法。

在本发明的另一个实施例中，移动终端10还用于接收用户输入的搜索词，并将搜索词发送至搜索服务器20，以使搜索服务器20根据显示内容和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

在本发明的另一个实施例中，移动终端10还用于对区域图像进行预处理以获取区域图像类型，其中，区域图像类型包括文字和/或图片，并根据区域图像类型为用户提供搜索请求选择界面，其中，搜索请求为文字搜索请求或图片搜索请求，以及接收用户根据搜索请求选择界面输入的搜索请求，并根据搜索请求将区域图像发送至搜索服务器20。其中，移动终端10还用于保存预处理之后的区域图像，保存的格式可以是JPEG或PNG等标准格式。具体地，区域图像的预处理可以使用现有的图片识别方法和文字识别方法，首先，识别文字，例如采用OCR（OpticalCharacterRecognition，光学字符识别），如果不为文字图像，则区域图像为图片，可以使用现有的图像识别技术进一步进行识别。

更具体地，用户通过移动终端10显示屏上弹出的选择界面，例如“文字搜索”或者“图片搜索”，用户可以任意选择其中一种方式进行搜索，其中，搜索请求选择界面形式可以有不同的设计方法，例如对于预处理之后的文字区域图像，将选择界面中“文字搜索”加亮或者突出显示，同时将“图片搜索”设置为灰度显示；对于预处理之后的图片区域图像，将选择界面中“图片搜索”加亮或者突出显示，同时将“文字搜索”设置为灰度显示。

在本发明的另一个实施例中，搜索服务器20还用于在搜索请求为文字搜索请求时，对区域图像进行识别以获取区域图像的文字信息，并判断文字信息是否为地理位置信息，并在文字信息是地理位置信息时，根据地理位置信息进行地图搜索，以及在文字信息不是地理位置信息时，根据文字信息进行网页搜索。

在本发明的另一个实施例中，搜索服务器20还用于：在搜索请求为图片搜索请求时，对区域图像进行识别以获取区域图像的图片信息，并根据图片信息进行图片搜索。

具体地，搜索服务器20可以包括文字搜索（网页搜索服务器）和地理位置（地图搜索服务器），每种搜索对应不同的入口，例如对于文字信息，发送给搜索服务器20进行网页搜索；对于地理位信息，发送给搜索服务器20进行地图搜索。因此，将区域图像的显示内容进行区分，可以提高效率，更加具有针对性，搜索服务器20还可以包括图片搜索（图片搜索服务器）。对于图片信息，通过连接图片搜索服务器的入口，发送给搜索服务器20进行图片搜索；此外，对于无法识别出任何文字、图片、地理位置信息内容的情况，还可以提示用户无法识别图片中的内容。因此，将区域图像的显示内容进行区分，可以提高效率，更加具有针对性。

为了满足用户需求，还提出另一种使用拍摄图像获取搜索结果的系统。

一种使用拍摄图像获取搜索结果的系统，包括：移动终端和搜索服务器。其中，移动终端，用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，并对区域图像进行预处理以获取区域图像类型，并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片，以及在区域图像类型为文字时，获取对应的文字信息，并将文字信息发送至搜索服务器；搜索服务器，用于根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端。

图7是根据本发明另一个实施例的使用拍摄图像获取搜索结果的系统的结构框图。

如7所示，使用拍摄图像获取搜索结果的系统包括：移动终端100和搜索服务器200。

其中，移动终端100用于根据用户指令进行拍摄，并将拍摄的图像显示给用户，并接收用户在显示屏幕上针对拍摄图像所选取的区域图像，并对区域图像进行预处理以获取区域图像类型，其中，移动终端100保存预处理之后的区域图像，保存的格式可以是JPEG或PNG等标准格式。并判断区域图像类型是否为文字，其中，区域图像类型包括文字和/或图片，以及在区域图像类型为文字时，获取对应的文字信息，并将文字信息发送至搜索服务器200。

在本发明的一个实施例中，区域图像的预处理可以使用现有的图片识别方法和文字识别方法，首先，识别文字，例如采用OCR（OpticalCharacterRecognition，光学字符识别），如果不为文字图像，则区域图像为图片，可以使用现有的图像识别技术进一步进行识别。

搜索服务器200用于根据文字信息获得多个搜索结果，并将多个搜索结果反馈至移动终端100。其中，搜索结果可以通过调用浏览器或者照相机的界面显示，例如发送搜索请求到搜索服务器200的同时启动浏览器，然后搜索服务器200将搜索结果反馈至移动终端100，移动终端100再将搜索结果显示在浏览器中，当用户退出浏览器时，可以返回到照相机的显示界面，或者照相发送搜索请求到搜索服务器200，然后搜索服务器200返回搜索结果至移动终端100，移动终端100再显示在照相机中，通过例如弹出式窗口或者下拉式界面等方式显示，使用户的操作始终停留在照相机中。

根据本发明实施例的使用拍摄图像获取搜索结果的系统，通过移动终端先对区域图像进行预处理，再将判断得出的区域图像的文字信息发送到搜索服务器，减少了移动终端数据传输的流量，节省了费用，提升了用户的体验。

在本发明的一个实施例中，移动终端100还用于：接收用户输入的搜索词，并将搜索词发送至搜索服务器200，以使搜索服务器200根据文字信息和搜索词进行搜索。由此可以在用户不满意搜索结果的情况下手动输入关键词进行搜索，或者区域图像不能完全表达用户的搜索需求时手动输入关键词进行搜索。

在本发明的另一个实施例中，搜索服务器200还用于：判断文字信息是否为地理位置信息，并在文字信息是地理位置信息时，根据地理位置信息进行地图搜索，以及在文字信息不是地理位置信息时，根据文字信息进行网页搜索。具体地，搜索服务器可以包括文字搜索（网页搜索服务器）和地理位置（地图搜索服务器），每种搜索对应不同的入口，例如对于文字信息，发送给搜索服务器进行网页搜索；对于地理位信息，发送给搜索服务器进行地图搜索。因此，将区域图像的显示内容进行区分，可以提高效率，更加具有针对性。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列（PGA），现场可编程门阵列（FPGA）等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同限定。

Claims (12)

1.一种使用拍摄图像获取搜索结果的方法，其特征在于，包括以下步骤：

a、移动终端根据用户指令进行拍摄，并将拍摄的图像显示给所述用户；

b、所述移动终端接收所述用户在显示屏幕上针对所述拍摄图像所选取的区域图像；

c、所述移动终端对所述区域图像进行预处理以获取所述区域图像类型，其中，所述区域图像类型包括文字和/或图片；

d、所述移动终端根据所述区域图像类型为所述用户提供搜索请求选择界面，其中，所述搜索请求为文字搜索请求或图片搜索请求，所述搜索请求选择界面中包括文字搜索和图片搜索，对于文字类型的区域图像，将所述搜索请求选择界面中所述文字搜索加亮或者突出显示，同时将所述图片搜索设置为灰度显示，对于图片类型的区域图像，将所述搜索请求选择界面中所述图片搜索加亮或者突出显示，同时将所述文字搜索设置为灰度显示；

e、所述移动终端接收所述用户根据所述搜索请求选择界面输入的所述搜索请求，并根据所述搜索请求将所述区域图像发送至搜索服务器；以及

f、所述搜索服务器对所述区域图像进行识别以获取所述区域图像的显示内容，并根据所述显示内容获得多个搜索结果，以及将所述多个搜索结果反馈至所述移动终端。

2.根据权利要求1所述的方法，其特征在于，所述步骤b具体包括以下步骤：

所述移动终端获取所述用户在所述显示屏幕上的手势轨迹；

所述移动终端判断所述手势轨迹是否封闭；以及

如果所述手势轨迹封闭，则所述移动终端根据封闭的手势轨迹获取所述区域图像。

3.根据权利要求1所述的方法，其特征在于，还包括以下步骤：

所述移动终端接收用户输入的搜索词，并将所述搜索词发送至所述搜索服务器，以使所述搜索服务器根据所述显示内容和所述搜索词进行搜索。

4.根据权利要求1所述的方法，其特征在于，还包括以下步骤：

如果所述搜索请求为文字搜索请求，则所述搜索服务器对所述区域图像进行识别以获取所述区域图像的文字信息；

所述搜索服务器判断所述文字信息是否为地理位置信息；

如果所述文字信息是地理位置信息，则所述搜索服务器根据所述地理位置信息进行地图搜索；以及

如果所述文字信息不是地理位置信息，则所述搜索服务器根据所述文字信息进行网页搜索。

5.根据权利要求1所述的方法，其特征在于，还包括以下步骤：

如果所述搜索请求为图片搜索请求，则所述搜索服务器对所述区域图像进行识别以获取所述区域图像的图片信息，并根据所述图片信息进行图片搜索。

6.根据权利要求1所述的方法，其特征在于，在所述步骤b之后还包括以下步骤：

所述移动终端保存预处理之后的所述区域图像。

7.一种使用拍摄图像获取搜索结果的系统，其特征在于，包括：移动终端和搜索服务器，其中，

所述移动终端，用于根据用户指令进行拍摄，并将拍摄的图像显示给所述用户，并接收所述用户在显示屏幕上针对所述拍摄图像所选取的区域图像，以及对所述区域图像进行预处理以获取所述区域图像类型，其中，所述区域图像类型包括文字和/或图片，并根据所述区域图像类型为所述用户提供搜索请求选择界面，其中，所述搜索请求为文字搜索请求或图片搜索请求，以及接收所述用户根据所述搜索请求选择界面输入的所述搜索请求，并根据所述搜索请求将所述区域图像发送至所述搜索服务器，其中，所述搜索请求选择界面中包括文字搜索和图片搜索，对于文字类型的区域图像，将所述搜索请求选择界面中所述文字搜索加亮或者突出显示，同时将所述图片搜索设置为灰度显示，对于图片类型的区域图像，将所述搜索请求选择界面中所述图片搜索加亮或者突出显示，同时将所述文字搜索设置为灰度显示；

所述搜索服务器，用于对所述区域图像进行识别以获取所述区域图像的显示内容，并根据所述显示内容获得多个搜索结果，以及将所述多个搜索结果反馈至所述移动终端。

8.根据权利要求7所述的系统，其特征在于，所述移动终端还用于：

获取所述用户在所述显示屏幕上的手势轨迹，并判断所述手势轨迹是否封闭，以及在所述手势轨迹封闭时，根据封闭的手势轨迹获取所述区域图像。

9.根据权利要求7所述的系统，其特征在于，所述移动终端还用于：

接收用户输入的搜索词，并将所述搜索词发送至所述搜索服务器，以使所述搜索服务器根据所述显示内容和所述搜索词进行搜索。

10.根据权利要求7所述的系统，其特征在于，所述搜索服务器还用于：

在所述搜索请求为文字搜索请求时，对所述区域图像进行识别以获取所述区域图像的文字信息，并判断所述文字信息是否为地理位置信息，并在所述文字信息是地理位置信息时，根据所述地理位置信息进行地图搜索，以及在所述文字信息不是地理位置信息时，根据所述文字信息进行网页搜索。

11.根据权利要求7所述的系统，其特征在于，所述搜索服务器还用于：

在所述搜索请求为图片搜索请求时，对所述区域图像进行识别以获取所述区域图像的图片信息，并根据所述图片信息进行图片搜索。

12.根据权利要求7所述的系统，其特征在于，所述移动终端还用于：

保存预处理之后的所述区域图像。