CN103678305A - 一种基于图片识别显示咨询信息的方法和系统 - Google Patents

Abstract

本发明提供了一种基于图片识别显示咨询信息的方法和系统，用于包含摄像头模块和显示模块的移动终端，所述方法包括：输入步骤，所述移动终端通过摄像头模块拍摄标识物图片，并将所述标识物图片上传至服务器端；识别处理步骤，所述服务器端对所述标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。本发明能够根据用户拍的照片识别出对应的标识物，并且通过服务器端对图片内容进行搜索，并不断修正，获取到丰富的咨询信息，让结果越来越接近用户的需求。

Description

一种基于图片识别显示咨询信息的方法和系统

技术领域

本发明属于移动通讯领域，尤其涉及一种基于图片识别显示咨询信息的方法和系统。

背景技术

目前，人们对信息的搜集往往是通过文字搜索或者语音搜索技术来获取相应的内容，但是在很多场景下，用户需要更加精确的信息来源，传统的搜索技术无法满足人们的需求，并且随着移动互联网的发展，搜索技术从文字、语音逐渐往图像识别发展，人们更加喜欢简洁易用并富有人性化的搜索方式，而图像搜索作为一种更加符合大多数人思维模式的搜索方式，越来越成为迫切的需求，从用户体验上讲比文字和语音搜索都要好。

发明内容

有鉴于此，本发明的目的是提供一种基于图片识别显示咨询信息的方法和系统，能够根据用户拍的照片识别出对应的标识物，能从服务器端不断优化搜索策略，能更好地改进搜索策略，让用户有更好的搜索体验。

本发明提供一种基于图片识别显示咨询信息的方法，用于包含摄像头模块和显示模块的移动终端，该方法包括：

输入步骤，所述移动终端通过摄像头模块拍摄标识物图片，并将所述标识物图片上传至服务器端；

识别处理步骤，所述服务器端对所述标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

根据上述的方法，其中，所述摄像头模块包括前置摄像头和/或后置摄像头。

根据上述的方法，其中，所述标识物包括：建筑物、景观、名片、标签。

根据上述的方法，其中，所述识别处理步骤进一步包括：

图文处理步骤，如果所述标识物图片中包含有图标或文字信息，则从所述标识物图片中检测出图标和文字信息，否则直接执行比对识别步骤；

比对识别步骤，依据所述图标、文字信息和/或标识物图片，在所述服务器端进行搜索、比对识别出与所述图标、文字信息和/或标识物图片对应的咨询信息。

根据上述的方法，其中，所述咨询信息包括：建筑物资料、景观介绍、公司详情、商品信息。

本发明提供一种基于图片识别显示咨询信息的系统，用于包含摄像头模块和显示模块的移动终端，该系统包括：移动终端、服务器端，

所述移动终端包括：输入模块，用于移动终端通过摄像头模块拍摄标识物图片，并将所述标识物图片上传至服务器端；

所述服务器端包括：通讯模块、识别处理单元，

所述通讯模块，用于接收所述移动终端发送的标识物图片数据，并将所述识别处理单元获得的咨询信息发送到所述移动终端；

所述识别处理单元，用于对所述移动终端发送的所述标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

根据上述的系统，其中，所述摄像头模块包括前置摄像头和/或后置摄像头。

根据上述的系统，其中，所述标识物包括：建筑物、景观、名片、标签。

根据上述的系统，其中，所述识别处理单元进一步包括：

图文处理模块，用于如果所述标识物图片中包含有文字信息，则从所述标识物图片中检测出图标和文字信息；

比对识别模块，用于依据所述图标、文字信息和/或标识物图片，在所述服务器端进行搜索、比对识别出与所述图标、文字信息和/或标识物图片对应的咨询信息。

根据上述的系统，其中，所述咨询信息包括：建筑物资料、景观介绍、公司详情、商品信息。

本发明提供的一种基于图片识别显示咨询信息的方法和系统，能够根据用户拍的照片识别出对应的标识物，并且通过服务器端对图片内容进行搜索，并不断修正，获取到丰富的咨询信息，让结果越来越接近用户的需求。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域内普通技术人员来说，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1是根据本发明实施例的显示咨询信息的方法流程图；

图2是根据本发明实施例的显示咨询信息的具体方法流程图；

图3是根据本发明实施例的服务器端获取咨询信息的处理流程图；以及

图4是根据本发明实施例的显示咨询信息的系统框图。

具体实施方式

为了使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

参见图1，本实施例的提供的显示咨询信息的方法流程图，包括以下步骤：

步骤110，输入步骤，移动终端通过摄像头模块拍摄标识物图片，并将标识物图片上传至服务器端。

步骤120，识别处理步骤，服务器端对标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

本发明的移动终端包括：手机、平板电脑等智能移动终端，具备有摄像头模块，并能进行基本拍摄操作，在以下实施例中以手机为例对显示咨询信息的方法进行详细描述。

参见图2，根据本发明实施例的显示咨询信息的具体方法流程图，具体如下所述：

步骤210，启动手机客户端，同时启动手机的摄像头，拍摄标识物图片。

用户在遇到需要进行了解的标识物时，可以通过手机来拍摄该标识物的图片，其中，标识物包括但不限于：建筑物、景观、名片、标签等，比如，用户在旅游时参观了“埃菲尔铁塔”，很想要了解关于“埃菲尔铁塔”的一些资料，这时用户可以先通过手机对其进行拍照。其中，手机的摄像头包括：前置摄像头、后置摄像头。

步骤220，手机客户端对手机拍摄的标识物图片进行保存，完成信息的采集。

步骤230，手机客户端将标识物图片上传到服务器端。

步骤240，服务器端对标识物图片进行文字识别、比对，并进行信息搜索，将获得的标识物图片对应的咨询信息返回给移动终端。

服务器端对标识物图片进行处理后获得咨询信息的过程具体如图3，根据本发明实施例的服务器端获取咨询信息的处理流程图，步骤进一步包括：

步骤310，服务器端接收手机上传的标识物图片数据。如果标识物图片中包含有图标或文字信息，需要进行进一步的处理，则执行步骤320，否则执行步骤330。

步骤320，服务器端从标识物图片中检测出图标和文字信息。

首先，服务器端依据标识物图片按照一定方法（如基于颜色的连通分量方法）或算法（如基于纹理的分割算法）检测出其中包含的图标和文字区域；然后，将文字区域的文字图像从画面背景中分割出来得到文字图像信息，服务器端依据文字图像信息与文字库进行比对识别，依据文字图像信息中文字的笔画特征与文字库进行比对，检索出最相似字形的文字；最后，对比对识别结果进行分类、整理后获得图标和文字信息。其中，文字库包括但不限于：汉字、字母、数字等，服务器端的文字库还可以定期从网络上进行下载更新。

步骤330，根据图标、文字信息和/或标识物图片，在服务器端进行搜索，比对识别出与图标、文字信息和/或标识物图片对应的咨询信息。

服务器端可以预先采集并建立标识物资料数据库，通过比对可以识别出当前图标、文字信息和/或标识物图片的准确内容，再通过服务器搜索出对应的咨询信息，该咨询信息包括但不限于：建筑物资料、景观介绍、公司详情、商品信息等，具体可以包括：建筑物的历史背景和地理交通，景观的特色介绍和地理交通，公司Logo、网址和相关新闻链接，商品名称、类型和打折信息等，比如：服务器端通过比对“埃菲尔铁塔”的图片，搜索出“埃菲尔铁塔”的历史背景和地理位置介绍，以及交通情况。

如果在服务器端没有识别到图标、文字信息和/或标识物图片的准确内容，可以通过网络进行检索。

步骤340，服务器端将咨询信息返回给移动终端。

实际使用过程中，如果服务器端进行搜索后并没有相匹配的咨询信息，则返回咨询信息为空，并提示用户“没有找到相关信息”。

步骤250，移动终端收到服务器端返回的咨询信息，用户可选择显示需要的信息。

收到返回的咨询信息后，手机可通过显示屏进行显示，用户可以通过选择建筑物资料、景观介绍、公司详情、商品信息来获取需要的信息。比如：

选择建筑物资料，用户可了解建筑物的历史背景、地理位置、交通情况，并可实现导航功能；

选择景观介绍，用户可了解标识物图片中景观的特色介绍、地理位置、交通情况，并可实现导航功能；

选择公司详情，用户可了解名片上公司Logo对应的公司名称地址、公司网址、相关新闻链接；

选择商品信息，用户可了解标签对应商品的名称、类型、价格和打折信息等。

图4是本实施例提供的显示咨询信息的系统框图，用于包含摄像头模块410和显示模块420的移动终端400a，该系统400包括：移动终端400a、服务器端400b，本实施例中所说的摄像头模块410包括前置摄像头和/或后置摄像头。

移动终端400a包括：输入模块430，用于移动终端400a通过摄像头模块410拍摄标识物图片，并将标识物图片上传至服务器端400b，其中，标识物包括但不限于：建筑物、景观、名片、标签等。

服务器端400b包括：通讯模块440，用于接收所述移动终端400a发送的标识物图片数据，并将识别处理单元450获得的咨询信息发送到移动终端400a；识别处理单元450，用于对移动终端400a发送的标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

在本实施例中，识别处理单元450进一步包括：

图文处理模块450a，用于如果标识物图片中包含有文字信息，则从标识物图片中检测出图标和文字信息。首先，图文处理模块450a依据标识物图片按照一定方法（如基于颜色的连通分量方法）或算法（如基于纹理的分割算法）检测出其中包含的图标和文字区域；然后，将文字区域的文字图像从画面背景中分割出来得到文字图像信息，图文处理模块450a依据文字图像信息与文字库进行比对识别，依据文字图像信息中文字的笔画特征与文字库进行比对，检索出最相似字形的文字；最后，对比对识别结果进行分类、整理后获得图标和文字信息。其中，文字库包括但不限于：汉字、字母、数字等，服务器端的文字库还可以定期从网络上进行下载更新；

比对识别模块450b，用于依据图标、文字信息和/或标识物图片，在服务器端400b进行搜索、比对识别出与图标、文字信息和/或标识物图片对应的咨询信息。

本实施例中，咨询信息包括但不限于：建筑物资料、景观介绍、公司详情、商品信息等，具体可以包括：建筑物的历史背景和地理交通，景观的特色介绍和地理交通，公司Logo、网址和相关新闻链接，商品名称、类型和打折信息等。

如果在服务器端没有识别到图标、文字信息和/或标识物图片的准确内容，可以通过网络进行检索。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于图片识别显示咨询信息的方法，用于包含摄像头模块和显示模块的移动终端，其特征在于，所述方法包括：

输入步骤，所述移动终端通过摄像头模块拍摄标识物图片，并将所述标识物图片上传至服务器端；

识别处理步骤，所述服务器端对所述标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

2.根据权利要求1所述的方法，其特征在于，所述摄像头模块包括前置摄像头和/或后置摄像头。

3.根据权利要求1所述的方法，其特征在于，所述标识物包括：建筑物、景观、名片、标签。

4.根据权利要求1所述的方法，其特征在于，所述识别处理步骤进一步包括：

图文处理步骤，如果所述标识物图片中包含有图标或文字信息，则从所述标识物图片中检测出图标和文字信息，否则直接执行比对识别步骤；

比对识别步骤，依据所述图标、文字信息和/或标识物图片，在所述服务器端进行搜索、比对识别出与所述图标、文字信息和/或标识物图片对应的咨询信息。

5.根据权利要求4所述的方法，其特征在于，所述咨询信息包括：建筑物资料、景观介绍、公司详情、商品信息。

6.一种基于图片识别显示咨询信息的系统，用于包含摄像头模块和显示模块的移动终端，其特征在于，所述系统包括：移动终端、服务器端，

所述移动终端包括：输入模块，用于移动终端通过摄像头模块拍摄标识物图片，并将所述标识物图片上传至服务器端；

所述服务器端包括：通讯模块、识别处理单元，

所述通讯模块，用于接收所述移动终端发送的标识物图片数据，并将所述识别处理单元获得的咨询信息发送到所述移动终端；

所述识别处理单元，用于对所述移动终端发送的所述标识物图片进行文字识别、比对，并进行信息搜索，获得咨询信息。

7.根据权利要求6所述的系统，其特征在于，所述摄像头模块包括前置摄像头和/或后置摄像头。

8.根据权利要求6所述的系统，其特征在于，所述标识物包括：建筑物、景观、名片、标签。

9.根据权利要求6所述的系统，其特征在于，所述识别处理单元进一步包括：

图文处理模块，用于如果所述标识物图片中包含有文字信息，则从所述标识物图片中检测出图标和文字信息；

比对识别模块，用于依据所述图标、文字信息和/或标识物图片，在所述服务器端进行搜索、比对识别出与所述图标、文字信息和/或标识物图片对应的咨询信息。

10.根据权利要求9所述的系统，其特征在于，所述咨询信息包括：建筑物资料、景观介绍、公司详情、商品信息。

Images