CN102214222B - 通过手机摄像获取景物资讯的预分类及交互系统和方法 - Google Patents

通过手机摄像获取景物资讯的预分类及交互系统和方法 Download PDF

Info

Publication number
CN102214222B
CN102214222B CN201110159656.4A CN201110159656A CN102214222B CN 102214222 B CN102214222 B CN 102214222B CN 201110159656 A CN201110159656 A CN 201110159656A CN 102214222 B CN102214222 B CN 102214222B
Authority
CN
China
Prior art keywords
information
image
platform
presorting
scene
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110159656.4A
Other languages
English (en)
Other versions
CN102214222A (zh
Inventor
梁宇杰
李锭伟
杨杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN201110159656.4A priority Critical patent/CN102214222B/zh
Publication of CN102214222A publication Critical patent/CN102214222A/zh
Application granted granted Critical
Publication of CN102214222B publication Critical patent/CN102214222B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开通过手机摄像获取景物资讯的预分类及交互系统和方法,可根据获取的景物图像确定其类别,自动与相应类别的资讯平台连接,获取图像相关资讯并展现给用户。用户无需手动选择图像的类别和资讯平台,快捷方便。通过本发明可充分利用现有各类图像识别及资讯平台,为用户提供综合的图像识别和资讯服务。

Description

通过手机摄像获取景物资讯的预分类及交互系统和方法
技术领域
本发明涉及移动通信增值业务领域,尤其涉及通过手机摄像获取景物资讯的预分类及交互系统和方法。
背景技术
通过手机摄像,获取风景点、建筑物、商品等景物的图像信息,然后通过图像识别和搜索,可获取相应的内容资讯。由于现实世界的图像非常丰富,很多图像搜索引擎只能搜索一类或几类图像,如有的只能搜索人脸,有的只能搜索图书,有的只能搜索建筑物等,对同一类型的图像也可能存在多种不同来源的资讯。
目前已有基于分布式处理的通过手机摄像获取资讯的业务系统,包括一个业务平台和若干个资讯处理平台,每个资讯平台可以处理一类图像并搜索到相关资讯,一类资讯可能对应到多个资讯平台。用户打开手机上的业务软件,可以选择其中一种资讯平台,然后拍摄图像并获取资讯,由于资讯平台数量比较多,用户需要手工操作来选择资讯平台,操作步骤比较多,而且容易误操作。
发明内容
鉴于以上,本发明的目的是提供通过手机摄像获取景物资讯的预分类及交互系统和方法,采用多资讯平台分布处理,在选择资讯平台时候,可以提高效率和避免误操作,优化用户体验。
本发明提出通过手机摄像获取景物资讯的预分类及交互系统,其中:
手机摄像处理业务平台包括:
手机摄像单元,用于获取景物图像信息,将景物图像转换成电子图像信号并传送给图像预处理单元;
图像预处理单元,用于对图像获取单元传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
资讯平台管理单元,用于管理资讯平台信息,包括资讯平台信息库,每个资讯平台都在该信息库中有对应的记录;
资讯平台接口单元,用于与资讯平台连接通信,根据接口协议向资讯平台发送获取请求并获取与景物图像信息的预分类类别对应的资讯信息,在获取请求中携带景物图像信息;
控制单元,用于根据图像预处理单元确定的景物图像的预分类类别,在资讯平台管理单元中查询到对应的资讯平台,通知资讯平台接口单元将景物图像信息发送到资讯平台;
资讯平台包括:
图像接口单元,分别与手机摄像处理业务平台、图像分析控制单元连接,具有连接地址,用于与手机摄像处理业务平台连接通信,获取景物图像信息并向其返回资讯信息;
图像分析控制单元,用于对图像接口单元获取的景物图像信息进行图像分析,从内容管理单元获取与景物图像信息的预分类类别对应的资讯信息,并发送给图像接口单元;
内容管理单元,用于管理和获取资讯信息。
本发明提出通过手机摄像获取景物资讯的预分类及交互方法,包括以下步骤:
手机摄像处理业务平台获取景物图像信息,将景物图像转换成电子图像信号;
对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
根据景物图像的预分类类别查询到对应的资讯平台,向资讯平台发送获取请求,在获取请求中携带景物图像信息;
手机摄像处理业务平台从资讯平台接收与景物图像信息的预分类类别关联的资讯信息。
本发明提出建立手机摄像处理业务平台与资讯平台之间连接的接口,包括:
资讯平台接口单元,设置在手机摄像处理业务平台,用于与资讯平台连接通信,根据接口协议向与预分类类别对应的资讯平台发送获取请求并获取反馈的资讯信息,在获取请求中携带景物图像信息;其中,根据景物图像特征确定景物图像的预分类类别;
图像接口单元,设置在资讯平台,用于与手机摄像处理业务平台连接通信,获取景物图像信息并向其返回与景物图像信息的预分类类别对应的资讯信息。
本发明提出手机摄像处理业务平台,包括:
手机摄像单元,用于获取景物图像信息,将景物图像转换成电子图像信号并传送给图像预处理单元;
图像预处理单元,用于对图像获取单元传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
资讯平台管理单元,用于管理资讯平台信息,包括资讯平台信息库,每个资讯平台都在该信息库中有对应的记录;
资讯平台接口单元,用于与资讯平台连接通信,根据接口协议向资讯平台发送获取请求并获取与景物图像信息的预分类类别对应的资讯信息,在获取请求中携带景物图像信息;
控制单元,用于根据图像预处理单元确定的景物图像的预分类类别,在资讯平台管理单元中查询到对应的资讯平台,通知资讯平台接口单元将景物图像信息发送到资讯平台。
本发明提出与资讯平台连接的接口,包括:
资讯平台接口单元,设置在手机摄像处理业务平台,根据接口协议向与预分类类别对应的资讯平台发送获取请求并获取反馈的资讯信息,在获取请求中携带景物图像信息;其中,根据景物图像特征确定景物图像的预分类类别。
本发明可确定景物图像的类别,自动与相应类别的图像识别引擎和资讯平台连接,获取与图像相关的资讯信息。用户无需手动选择图像的类别和资讯类别,快捷方便。本发明可充分利用现有各类图像识别及资讯平台,为用户提供综合的图像识别和资讯信息,使用户快捷、准确访问到各类丰富的资讯信息。
附图说明
图1为本发明通过手机摄像获取景物资讯的预分类及交互系统实施例示意图,其中,图像预处理单元设置在业务平台;
图2为本发明通过手机摄像获取景物资讯的预分类及交互系统实施例示意图,其中,图像预处理单元设置在手机终端;
图3为本发明通过手机摄像获取景物资讯的预分类及交互方法流程图。
具体实施方式
本发明增加了图像预处理单元,通过现有的图像相似度分析算法,分析出用户拍摄到的图片是人脸类型的图片,于是系统自动将该照片发送给引擎1。而不会再发给其他两个引擎,其中引擎1只能搜索人脸,引擎2只能搜索图书,引擎3只能搜索建筑。可以带来的效果就是软件更加智能化,返回结果的速度更快,不占用其他两个引擎的处理能力,用户体验更好。
下面参照附图对本发明进行更全面的描述,说明本发明的示例性实施例。
如图1所示为本发明通过手机摄像获取景物资讯的预分类及交互系统实施例的示意图,包括手机摄像处理业务平台1以及资讯平台2。
再如图1所示,手机摄像处理业务平台1包括手机摄像单元11、图像预处理单元12、资讯平台管理单元13、资讯平台接口单元14以及控制单元15。
下面将结合附图对各个单元进行详细说明。
手机摄像单元11用于获取景物图像信息,将景物图像转换成电子图像信号并传送给图像预处理单元12。
手机摄像单元是安装于手机终端上的客户端软件模块,现有手机获取图像的渠道主要就是拍摄。手机是指具有图像获取功能和移动通信功能的移动终端,比如普通的手机、具有移动通信模块的PDA、PAD、便携电脑等。
景物图像信息可以是照片或实时视频流,其格式为JPG、BMP、GIS、3GP、AVI、MPG或RMVB等。比如,景物图像信息是静态的JPG格式,已经拍照锁定;比如,景物图像为动态的AVI格式。
资讯平台管理单元13、资讯平台接口单元14和控制单元15是运行于网络侧的业务平台中的软件模块,业务平台是一套计算机软硬件系统总成,根据本发明方法进行业务处理。如图1所示,图像预处理单元12是运行于网络侧的业务平台中的软件模块;如图2所示,图像预处理单元12是手机终端上的客户端软件模块,在手机侧进行图像预分类处理,再将处理结果发送给业务平台。其中:
图像预处理单元12用于对图像获取单元11传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别。
其中,图像预处理单元对电子图像信号进行图像特征分析,根据景物图像特征计算与已有类别的相似度,将相似度最高的已有类别作为景物图像的预分类类别。已有类别比如是建筑物、图书图像、风景、名片、商品码(比如二维码、条码等)、人脸、衣服等。
作为实施例,图像预处理单元12用于对图像获取单元11传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别,包括但不限于以下情况:
第一,当所拍摄的图像信息是商品码时,根据图像特征分析出其预分类类别为商品码;对商品码(二维码、条形码等)的图像特征分析和相似度判断,是现有的技术方法,本领域技术人员可参考现有的图像分析及二维码、条码的识别技术文档;
第二,当所拍摄的图像信息是人物时,根据图像特征分析出其预分类类别为人物;判断图像信息是否为人物的图像特征分析方法,本领域技术人员可参考现有的人脸识别相关的技术文档;
第三,当所拍摄的图像信息是建筑物时,根据图像特征分析出其预分类类别为建筑物;判断图像信息是否为建筑物的图像特征分析方法,本领域技术人员可参考现有的建筑物识别相关技术文档。
图像特征包括图像的形状特征、颜色特征和/或纹理特征等,可以根据景物图像的形状、纹理、颜色等特征中至少一个特征计算相似度。现有的计算相似度的方法比如,把图片的大小规范化;图像灰度化、区域颜色特征值提取;得到直方图;利用欧式距离法等方法,分析判断相似度。
现有情况下,用户拍照之后,下一步就是后台把照片发给搜索引擎进行识别搜索,而预分类就是增加在这两个动作之间,即拍照后先分析图像的类别(是一张人脸、一个建筑或是一本图书),之后根据类别发到相对应的引擎。好处是,返回结果的速度更快,不占用其他引擎的处理能力。
资讯平台管理单元13用于管理资讯平台信息,包括资讯平台信息库,每个资讯平台都在该信息库中有一条对应的记录。
信息库可以包括:类别、资讯平台标识、资讯平台连接地址。信息库还可以包括优先级字段,用于记录资讯平台的优先级,如果一类资讯有多个资讯平台,根据优先级来提示用户确定优先连接和获取的资讯平台。其中,资讯平台标识用于标识资讯平台,可以是资讯平台名称或资讯平台编号等;连接地址用于连接资讯平台,可以是IP地址、操作系统的调用连接地址或Web域名地址等。
资讯平台接口单元14用于与各个资讯平台2连接通信,根据接口协议向资讯平台发送获取请求并获取与景物图像信息的预分类类别对应的资讯信息,在获取请求中携带景物图像信息。
接口协议为XML协议,也可以是基于TCP/IP的WebService协议。资讯信息是指与景物信息相关的资讯内容,如建筑物介绍、建筑物关联的商家介绍和联系方式、风景点介绍、商品相关的介绍和商家联系方式、评论等。
控制单元15和其他各单元连接,进行业务流程的控制。用于根据图像预处理单元12确定的景物图像的预分类类别,在资讯平台管理单元13中找到对应的资讯平台,通知资讯平台接口单元14将景物图像信息发送到对应的资讯平台。
控制单元15设置在业务平台,通过通信网络与手机摄像单元建立连接。所述通信网络可以是移动通信网络,比如CDMA2000、WCDMA、TD-SCDMA、WiFi等网络。
在资讯平台管理单元13中找到对应的资讯平台的操作可以是,控制单元根据信息库保存的类别与资讯平台连接地址之间的对应关系,查询到与类别对应的资讯平台连接地址,通知资讯平台接口单元14向所述资讯平台连接地址发送景物图像信息。进一步,在信息库中还可以保存类别、资讯平台标识以及资讯平台连接地址之间的对应关系,控制单元可以根据该对应关系确定资讯平台标识以及资讯平台连接地址,通知资讯平台接口单元向所述资讯平台发送景物图像信息。
作为一种实施方式,所述手机摄像处理业务平台1还包括移动资讯呈现单元16,用于呈现资讯平台反馈的资讯信息。此外,移动资讯呈现单元16还在手机屏幕上实时显示拍摄到的景物图像、以及景物图像转换后的电子图像信号。
本实施例中,手机摄像处理业务平台的图像获取单元11可以包括用于将景物图像信息转换成电子图像信号的摄像头模块,还可以包括用于获取其他环境信息的环境信息感知模块,所述环境信息感知模块包括但不限于:位置感知模块,用于获取拍摄图像时候的位置信息;方向感知模块,用于获取拍摄图像时候的镜头方向信息。图像获取单元11将拍摄时候感知的位置信息、方向信息等其他环境信息一起发送给图像预处理单元12,图像预处理单元12进行图像预分类时还根据环境信息来确定图像的范围,进行图像预分类,作为某些场景下辅助预分类方式,例如GPS是在室外。环境信息比如是位置信息和/或方向信息。位置感知可通过GPS定位、基站定位等定位技术来实现,方向感知可通过电子罗盘、重力感应器等技术来实现。
作为一种实施方式,手机摄像处理业务平台将景物图像信息通过资讯平台接口单元14发送给该类别对应的资讯平台时,还可将拍摄时候的位置、方向等环境信息一起发给该资讯平台,由资讯平台根据景物图像获取时候的位置、方向等环境参数,确定图像搜索匹配的范围,从而提高效率和准确性。例如,在建筑物识别时,通过摄像时候的位置,可确定建筑物的大致范围,在该地理范围的建筑物特征库中进行搜索匹配,从而大大减少了搜索的范围以及时间,提高了识别准确率和效率。
在本实施例中,还进一步根据拍摄时候获取的位置信息确定对应的资讯平台,在这种情况下,某类图像关联到多个资讯平台,每个资讯平台负责一个区域,手机拍摄业务处理平台根据所获取的位置信息来确定用户所在区域,准确地将景物图像和位置信息发送给该区域对应的资讯平台来处理。例如当检测到图像类别为风景,所获取的位置为某风景区(如张家界),则连接张家界风景介绍对应的风景类资讯平台进行图像分析处理以及获取该风景点对应的资讯;如果所获取的位置为黄山,则连接黄山风景介绍对应的风景资讯类资讯平台进行图像分析处理以及获取该风景点对应的资讯。
如图2所示,资讯平台2包括图像接口单元21、图像分析控制单元22以及内容管理单元23。图像分析控制单元22分别与图像接口单元21、内容管理单元23连接。
作为实施方式,所述资讯平台是运行在手机上的客户端,例如手机上运行的商品码(包括条码、二维码等)识别和资讯获取客户端;手机上运行的名片识别和个人信息获取客户端。其图像接口单元,与手机摄像处理业务平台连接通信的连接地址是客户端提供的供第三方调用的接口地址,并提供特定的接口调用协议。
作为另一种实施方式,所述资讯平台是部署在网络侧的计算机平台,如房地产网站、餐饮信息网站等。其图像接口单元,与手机摄像处理业务平台连接通信的连接地址是网站提供给第三方调用的网站接口API,或者IP地址和端口,并提供特定的内容接口访问协议。
下面将结合附图对各个单元进行详细说明。
图像接口单元21与手机摄像处理业务平台1、图像分析控制单元22连接,具有连接地址,用于与手机摄像处理业务平台1连接通信,获取景物图像信息并返回与景物图像信息的预分类类别对应的资讯信息。本实施例中是IP地址,通信协议为XML协议。
图像分析控制单元22用于对图像接口单元21获取的景物图像信息进行图像分析,从内容管理单元23获取与景物图像信息关联的资讯信息,并发送给图像接口单元21。
图像分析方法是通过对图像的形状、颜色、纹理等特征进行提取、分析并搜索匹配的图像,各类别景物的图像特征提取和分析搜索方法,如建筑物识别、商品码识别、人脸识别、名片识别等相关技术。
内容管理单元23用于管理和获取该类别资讯平台管理的内容资讯,如建筑物的关联内容资讯包括建筑物介绍、里面的商家、公司介绍等;商品码关联的资讯包括对应的商品名称、介绍、用户评价、网上购物的链接等;人脸识别关联的资讯包括其联系方式、网上个人空间等,所述内容可保存在资讯平台内部,也可以保存在资讯平台的外部,由内容管理单元23通过网络连接获取。
资讯平台至少有2个,不同类别的资讯平台可以采用不同的图像分析方法,并关联到不同类别的资讯信息。如建筑物的资讯平台,采用建筑物的图像分析方法,内容管理单元可搜索到建筑物介绍和商家信息;商品码的资讯平台,采用商品码识别方法,内容管理单元可搜索到商品码对应的商品信息。
图2所示的实施例中有3个资讯平台,其中:
资讯平台2-1是建筑物资讯平台,设置有建筑物图像特征数据库,利用建筑物图像识别技术,对建筑物进行图像分析和搜索,确定建筑物的名称和标识等信息,内容管理单元23根据建筑物的标识,获取资讯平台的数据库中内容资讯,或从外部的建筑物资讯内容平台中,搜索相应的内容资讯。
资讯平台2-2是商品码资讯平台,利用商品码识别技术,根据商品码确定对应的文字标识,内容管理单元23根据文字标识连接商品资讯等信息库,获取商品码标识相应的商品等资讯。
资讯平台2-3是图书资讯平台,设置有图书封面特征数据库,利用图书封面识别技术,搜索匹配出图书名称和标识,然后内容管理单元23根据图书标识连接内部或外部的图书资讯库,获取图书的介绍、订购相关资讯。
本发明可充分利用现有各类图像识别及资讯平台,为用户提供综合的图像识别和资讯服务,使用户快捷、准确访问到各类丰富的资讯。
图3为本发明通过手机摄像获取景物资讯的预分类及交互方法,包括以下步骤:
在步骤301,手机摄像处理业务平台获取景物图像信息,将景物图像转换成电子图像信号。
在步骤302,对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别。
对电子图像信号进行图像特征分析,根据景物图像特征计算与已有类别的相似度,将相似度最高的已有类别作为景物图像的预分类类别。
作为实施例,该步骤可以包括但不限于以下情况:
第一,当所拍摄的图像信息是商品码时,根据图像特征分析出其预分类类别为商品码;对商品码(二维码、条形码等)的图像特征分析和相似度判断,是现有的技术方法,本领域技术人员可参考现有的图像分析及二维码、条码的识别技术文档;
第二,当所拍摄的图像信息是人物时,根据图像特征分析出其预分类类别为人物;判断图像信息是否为人物的图像特征分析方法,本领域技术人员可参考现有的人脸识别相关的技术文档;
第三,当所拍摄的图像信息是建筑物时,根据图像特征分析出其预分类类别为建筑物;判断图像信息是否为建筑物的图像特征分析方法,本领域技术人员可参考现有的建筑物识别相关技术文档。
在步骤302中,还可包括用户辅助选择资讯平台的步骤,业务平台获取预分类类别关联的若干资讯平台,在手机屏幕上显示并获取用户操作选择指令,根据指令确定目标资讯平台及其地址。例如预分类的类别为建筑物,则业务平台确定建筑物关联的若干资讯平台,如“大众点评资讯”、“号百服务资讯”、“口碑网资讯”等,将该类资讯平台名称在手机屏幕上显示,用户点击其中一个,即可确定其为目标资讯平台。其他无关的资讯平台,如“商品资讯”、“个人空间资讯”等,则不显示,用户不会误操作。
作为本发明的一个实施例,一类景物图像可能对应多个资讯平台,可按照优先级或其他参数进一步排列对应的资讯平台。
作为本发明的一个实施例,还可以根据环境信息来确定图像的范围,进行图像预分类。根据环境信息进行预分类的操作与根据相似度进行预分类的操作,在执行顺序上不分先后。所述环境信息例如手机的位置、手机摄像头的焦距等,例如根据手机所在的位置是某个景点,业务平台判断资讯平台是景点类型;如果根据手机焦距信息确定是近距离拍摄状态,业务平台判断手机正在拍摄商品或商品码。
在步骤303,根据景物图像的预分类类别查询到对应的资讯平台,向资讯平台发送获取请求,在获取请求中携带景物图像信息。
根据景物图像的预分类类别查询到对应的资讯平台的操作,可以包括以下步骤:
在信息库中保存景物图像信息的预分类类别与资讯平台连接地址之间的对应关系,根据该对应关系,查询与预分类类别对应的资讯平台连接地址;以及
根据资讯平台连接地址与资讯平台建立连接。
比如,当所拍摄的图像信息是商品码时,手机对准该图像,可自动根据图像特征分析出其预分类类别为商品码,并找到商品码资讯平台连接地址,根据该连接地址建立连接。
进一步,在信息库中还可以保存类别、资讯平台标识以及资讯平台连接地址之间的对应关系,根据该对应关系确定资讯平台标识以及资讯平台连接地址,向所述资讯平台发送景物图像信息。上述信息库可以设置在手机摄像处理业务平台。
作为本发明的一个实施例,向资讯平台发送获取请求的操作,包括:
在发送的获取请求中还包括环境信息;
由资讯平台根据景物图像获取时的环境信息,确定图像搜索匹配的范围,从而提高效率和准确性。
在步骤304,手机摄像处理业务平台从资讯平台接收与景物图像信息的预分类类别关联的资讯信息。
资讯平台返回的资讯信息的格式可以为Web或WAP的网页链接URL,手机摄像处理业务平台的客户端调用手机上的Web或WAP浏览器显示该URL。
资讯平台返回的资讯信息格式可以为XML,该XML文档包括景物图像相关的文字提示或图片,手机摄像处理业务平台的客户端将文字提示或图片显示在客户端界面上,并和拍摄实景物叠加在一起,所述的叠加显示技术可参考增强现实AR技术。
作为本发明的一个实施例,手机摄像处理业务平台还可以在接收到资讯平台返回的资讯信息时,呈现资讯信息并进行交互。
作为另一个实施例,呈现资讯信息的操作还可以由资讯平台提供的客户端来完成。手机摄像处理业务平台确定的资讯平台的连接地址是操作系统调用标识,资讯平台在手机上有对应的客户端,由手机摄像处理业务平台的手机客户端调用资讯平台的客户端,由资讯平台的客户端进行资讯的处理和呈现。
利用本发明,用户通过图像获取单元对准景物,手机摄像处理业务平台即可根据景物图像的类别进行预分类,并自动发送给该类别对应的资讯平台处理,用户无需手动选择图像的类别和资讯类别,快捷方便。
本发明的描述是为了示例和描述起见而给出的,而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用,并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。

Claims (12)

1.一种通过手机摄像获取景物资讯的预分类及交互系统,其中:
所述通过手机摄像获取景物资讯的预分类及交互系统包括手机摄像处理业务平台与至少两个资讯平台;
手机摄像处理业务平台包括:
手机摄像单元,用于获取景物图像信息,将景物图像转换成电子图像信号并传送给图像预处理单元;
图像预处理单元,用于对图像获取单元传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
资讯平台管理单元,用于管理资讯平台信息,包括资讯平台信息库,每个资讯平台都在该信息库中有对应的记录,所述信息库包括类别、资讯平台标识与资讯平台连接地址;
资讯平台接口单元,用于与资讯平台连接通信,根据接口协议向资讯平台发送获取请求并获取与景物图像信息的预分类类别对应的资讯信息,在获取请求中携带景物图像信息;
控制单元,用于根据图像预处理单元确定的景物图像的预分类类别,根据信息库保存的类别与资讯平台连接地址之间的对应关系,查询到与所述预分类类别对应的资讯平台连接地址,通知资讯平台接口单元将景物图像信息发送到资讯平台;
资讯平台包括:
图像接口单元,分别与手机摄像处理业务平台、图像分析控制单元连接,具有连接地址,用于与手机摄像处理业务平台连接通信,获取景物图像信息并向其返回资讯信息;
图像分析控制单元,用于对图像接口单元获取的景物图像信息进行图像分析,从内容管理单元获取与景物图像信息的预分类类别对应的资讯信息,并发送给图像接口单元;
内容管理单元,用于管理和获取资讯信息。
2.根据权利要求1所述通过手机摄像获取景物资讯的预分类及交互系统,其中:
图像预处理单元在所拍摄的图像信息是商品码时,根据图像特征分析出其预分类类别为商品码。
3.根据权利要求1所述通过手机摄像获取景物资讯的预分类及交互系统,其中:
图像预处理单元对电子图像信号进行图像特征分析,根据景物图像特征计算与已有类别的相似度,将相似度最高的已有类别作为景物图像的预分类类别。
4.根据权利要求1所述通过手机摄像获取景物资讯的预分类及交互系统,还包括:用于获取环境信息的环境信息感知模块。
5.根据权利要求4所述通过手机摄像获取景物资讯的预分类及交互系统,其中:
图像预处理单元根据环境信息来确定图像的范围,进行图像预分类。
6.根据权利要求4或5所述通过手机摄像获取景物资讯的预分类及交互系统,其中:
资讯平台接口单元将景物图像信息发送给与预分类类别对应的资讯平台时,还将环境信息发送到资讯平台。
7.一种通过手机摄像获取景物资讯的预分类及交互方法,包括以下步骤:
手机摄像处理业务平台获取景物图像信息,将景物图像转换成电子图像信号;
对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
在信息库中保存景物图像信息的预分类类别与资讯平台连接地址之间的对应关系,根据该对应关系,查询与预分类类别对应的资讯平台连接地址,并根据资讯平台连接地址与资讯平台建立连接,向资讯平台发送获取请求,在获取请求中携带景物图像信息;
手机摄像处理业务平台从资讯平台接收与景物图像信息的预分类类别关联的资讯信息。
8.根据权利要求7所述通过手机摄像获取景物资讯的预分类及交互方法,对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别的操作,包括:
当所拍摄的图像信息是商品码时,根据图像特征分析出其预分类类别为商品码。
9.根据权利要求7所述通过手机摄像获取景物资讯的预分类及交互方法,对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别的操作,包括:
对电子图像信号进行图像特征分析,根据景物图像特征计算与已有类别的相似度,将相似度最高的已有类别作为景物图像的预分类类别。
10.根据权利要求7所述通过手机摄像获取景物资讯的预分类及交互方法,对电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别的操作,还包括:
根据环境信息来确定图像的范围,进行图像预分类。
11.根据权利要求7所述通过手机摄像获取景物资讯的预分类及交互方法,向资讯平台发送获取请求的操作,包括:
在发送的获取请求中还包括环境信息;
由资讯平台根据景物图像获取时的环境信息,确定图像搜索匹配的范围。
12.一种手机摄像处理业务平台,包括:
手机摄像单元,用于获取景物图像信息,将景物图像转换成电子图像信号并传送给图像预处理单元;
图像预处理单元,用于对图像获取单元传送的电子图像信号进行图像特征分析,根据景物图像特征确定景物图像的预分类类别;
资讯平台管理单元,用于管理资讯平台信息,包括资讯平台信息库,每个资讯平台都在该信息库中有对应的记录,所述信息库包括类别、资讯平台标识与资讯平台连接地址;
资讯平台接口单元,用于与资讯平台连接通信,根据接口协议向资讯平台发送获取请求并获取与景物图像信息的预分类类别对应的资讯信息,在获取请求中携带景物图像信息;
控制单元,用于根据图像预处理单元确定的景物图像的预分类类别,根据信息库保存的类别与资讯平台连接地址之间的对应关系,查询到与所述预分类类别对应的资讯平台连接地址,通知资讯平台接口单元将景物图像信息发送到资讯平台。
CN201110159656.4A 2011-06-15 2011-06-15 通过手机摄像获取景物资讯的预分类及交互系统和方法 Active CN102214222B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110159656.4A CN102214222B (zh) 2011-06-15 2011-06-15 通过手机摄像获取景物资讯的预分类及交互系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110159656.4A CN102214222B (zh) 2011-06-15 2011-06-15 通过手机摄像获取景物资讯的预分类及交互系统和方法

Publications (2)

Publication Number Publication Date
CN102214222A CN102214222A (zh) 2011-10-12
CN102214222B true CN102214222B (zh) 2013-08-21

Family

ID=44745530

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110159656.4A Active CN102214222B (zh) 2011-06-15 2011-06-15 通过手机摄像获取景物资讯的预分类及交互系统和方法

Country Status (1)

Country Link
CN (1) CN102214222B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102497331A (zh) * 2011-12-16 2012-06-13 王博 一种信息提供方法及装置
CN102682091A (zh) * 2012-04-25 2012-09-19 腾讯科技(深圳)有限公司 基于云服务的视觉搜索方法和系统
CN102694750A (zh) * 2012-06-12 2012-09-26 上海量明科技发展有限公司 即时通信中实景型天气数据的实现方法及系统
CN102819566A (zh) * 2012-07-17 2012-12-12 杭州淘淘搜科技有限公司 一种商品图像跨类目检索方法
CN105338483B (zh) * 2014-08-12 2019-01-18 中国电信股份有限公司 基于增强实现技术实现展馆导游的方法、装置和系统
CN105025227A (zh) * 2015-07-10 2015-11-04 深圳市金立通信设备有限公司 一种图像处理方法及终端
CN105117438A (zh) * 2015-08-10 2015-12-02 联想(北京)有限公司 一种信息处理方法及电子设备
WO2018032178A1 (zh) * 2016-08-14 2018-02-22 阮元 一种基于用户当前视觉进行信息推送的方法及系统
CN107977390B (zh) * 2017-03-09 2021-10-26 北京物灵智能科技有限公司 绘本识别方法、装置、系统及电子设备
CN107705259A (zh) * 2017-09-24 2018-02-16 合肥麟图信息科技有限公司 一种在移动终端预览、拍摄模式下的数据增强方法及装置
CN108550190A (zh) * 2018-04-19 2018-09-18 腾讯科技(深圳)有限公司 增强现实数据处理方法、装置、计算机设备和存储介质
CN108733805B (zh) * 2018-05-18 2020-12-08 招银云创(深圳)信息技术有限公司 文件交互方法、系统、计算机设备和存储介质
CN109063667B (zh) * 2018-08-14 2021-02-19 视云融聚(广州)科技有限公司 一种基于场景的视频识别方式优化及推送方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102053960A (zh) * 2009-11-04 2011-05-11 孙红临 依群需特征构建物联互联双网快准搜索引擎的方法及系统
CN102063436A (zh) * 2009-11-18 2011-05-18 腾讯科技(深圳)有限公司 一种利用终端获取图像实现商品信息搜索的系统及方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102053960A (zh) * 2009-11-04 2011-05-11 孙红临 依群需特征构建物联互联双网快准搜索引擎的方法及系统
CN102063436A (zh) * 2009-11-18 2011-05-18 腾讯科技(深圳)有限公司 一种利用终端获取图像实现商品信息搜索的系统及方法

Also Published As

Publication number Publication date
CN102214222A (zh) 2011-10-12

Similar Documents

Publication Publication Date Title
CN102214222B (zh) 通过手机摄像获取景物资讯的预分类及交互系统和方法
CN102194007B (zh) 获取移动增强现实信息的系统和方法
CN103631819B (zh) 一种图片命名的方法及系统
CN103069415B (zh) 用于图像处理的计算机实施的方法、计算机程序产品和计算机系统
KR101867558B1 (ko) 뷰이미지의 적어도 하나의 피처에 주석을 달기 위한 컴퓨터화 방법 및 장치
US7872669B2 (en) Photo-based mobile deixis system and related techniques
US8185596B2 (en) Location-based communication method and system
US20120062595A1 (en) Method and apparatus for providing augmented reality
US20110096992A1 (en) Method, apparatus and computer program product for utilizing real-world affordances of objects in audio-visual media data to determine interactions with the annotations to the objects
US8787673B2 (en) System and method of determining building numbers
WO2011136608A2 (ko) 단말 장치로 입력되는 입력 영상 및 상기 입력 영상에 관련된 정보를 이용하여 증강 현실을 제공하기 위한 방법, 단말 장치 및 컴퓨터 판독 가능한 기록 매체
US10606824B1 (en) Update service in a distributed environment
WO2020044097A1 (zh) 一种实现位置服务的方法和装置
CN105631051A (zh) 基于文字识别的移动增强现实阅读方法及其阅读系统
WO2007116500A1 (ja) 情報呈示システム、情報呈示端末及びサーバ
US20120019547A1 (en) Apparatus and method for providing augmented reality using additional data
JP2011253424A (ja) 画像認識装置及び画像認識方法並びに情報提供システム
CN104504155A (zh) 一种基于图像搜索的数据获取方法及系统
CN104504402A (zh) 一种基于图像搜索的数据处理方法及系统
CN109522503B (zh) 基于ar与lbs技术的旅游景点虚拟留言板系统
CN108230220B (zh) 水印添加方法和装置
CN102055932A (zh) 电视节目搜索的方法及采用该方法的电视机
KR20060134337A (ko) 위치기반 이미지패턴 검색 서비스 방법
KR100706945B1 (ko) 이동단말기의 현재위치에 따른 이미지 패턴 검색 시스템 및방법
CN107945353B (zh) 一种基于深度学习的自助导游系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant