CN102968473A - 基于人脸图像的信息检索方法及系统 - Google Patents

基于人脸图像的信息检索方法及系统 Download PDF

Info

Publication number
CN102968473A
CN102968473A CN2012104574148A CN201210457414A CN102968473A CN 102968473 A CN102968473 A CN 102968473A CN 2012104574148 A CN2012104574148 A CN 2012104574148A CN 201210457414 A CN201210457414 A CN 201210457414A CN 102968473 A CN102968473 A CN 102968473A
Authority
CN
China
Prior art keywords
information retrieval
facial image
value vector
data processing
eigenwert
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012104574148A
Other languages
English (en)
Inventor
曾元清
刘健
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN2012104574148A priority Critical patent/CN102968473A/zh
Publication of CN102968473A publication Critical patent/CN102968473A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于人脸图像的信息检索方法及系统,适用于移动终端,该方法包括:图像采集模块从移动终端的当前应用程序中获取人脸快照数据;对图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;将特征值向量发送至数据处理服务器上以对特征值向量进行检索匹配,并将匹配结果返回至移动终端。本发明利用成熟的人脸识别技术对移动终端应用程序中的陌生人图像或者照片进行人脸识别,并将人脸识别的特征与存储在数据处理服务器上的特征参照量进行匹配,从而提供该陌生人相关的检索信息,便于用户快速的了解应用程序中出现的陌生人的相关信息,且该检索方式快捷方便,准确性高,操作极为人性化,有利于提升用户操作手机的满意度。

Description

基于人脸图像的信息检索方法及系统
技术领域
本发明涉及移动通信领域,尤其涉及利用手机进行信息检索的方法及系统。
背景技术
随着互联网的快速发展,基于互联网的数据搜索已被人们广泛使用。典型的应用是通过网页来向搜索引擎提交要搜索的关键词,由搜索引擎服务器检索到相关的数据信息,并将搜索结果返回给用户。
随着手机智能化程度的提高及操作系统的升级,无线通信技术的成熟,手机上集成有拍照摄影、浏览网页、在线收看视频、查看图片等多种功能。由于手机的便捷性,人们更青睐在空暇时间通过手机来浏览网页、观看比赛视频或者搜索信息等。在这个信息爆炸的时代,人们在浏览图片或者观看视频时经常会遇到陌生的人物图像信息,如果想要了解此人物的更多信息,则需要询问身边的朋友或者进行文字搜索,这样既浪费用户的时间,又难以获得理想的检索结果。由于人物图像数据不具备文字信息的明确指向性,不能为用户提供明确的关键字以供检索,故传统用于手机的信息检索方法有待进一步改进。
发明内容
本发明的目的是:提供一种基于人脸图像的信息检索方法,该方法便于用户快速检索在应用程序中出现的陌生人的相关信息,且检索更为方便快捷,富有人性化。
本发明的另一目的是:提供一种基于人脸图像的信息检索系统,该系统基于人脸图像识别技术,对移动终端应用程序上出现的陌生人图像进行智能检索,从而为用户提供了精准便捷的检索服务。
为了实现上述目的,本发明采用的技术方案是:
一种基于人脸图像的信息检索方法,适用于移动终端,该方法包括以下步骤:
图像采集模块从所述移动终端的当前应用程序中获取人脸快照数据;
对所述图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;
将所述特征值向量发送至数据处理服务器上以对所述特征值向量进行检索匹配,并将匹配结果返回至移动终端。
较佳地,所述数据处理服务器上预先存储有用于匹配所述特征值向量的特征值参照量,所述特征值参照量为预先学习训练建立的。
较佳地,所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序。
较佳地,所述匹配结果为文字信息或者包含相关搜索信息的URL地址,如果返回的是文字信息,则直接显示在手机上;如果返回URL地址,则自动引导手机访问该URL地址。
本发明还提供一种基于人脸图像的信息检索系统,包括移动终端及数据处理服务器,其特征在于,所述移动终端包括:
图像采集模块,用于从所述移动终端的当前应用程序中获取人脸快照数据;
特征提取模块,用于对所述图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;
应用处理模块,用于将所述特征值向量发送至数据处理服务器,并从数据处理服务器接收匹配结果;
所述数据处理服务器包括:
特征库模块,用于存储特征值参照量;
检索模块,用于将所述应用处理模块传来的所述特征值向量与所述特征值参照量进行匹配以生成匹配结果。
较佳地,所述特征库模块上存储的特征值参照量为预先学习训练建立的。
较佳地,所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序。
较佳地,所述匹配结果为文字信息或者包含相关搜索信息的URL地址,如果返回的是文字信息,则直接显示在手机上;如果返回URL地址,则自动引导手机访问该URL地址。
本发明的有益效果是:与现有技术相比,本发明基于人脸图像的信息检索方法及系统,利用成熟的人脸识别技术对移动终端应用程序中的陌生人图像或者照片进行人脸识别,并将人脸识别的特征与存储在数据处理服务器上的特征参照量进行匹配,从而提供该陌生人相关的检索信息,便于用户快速的了解应用程序中出现的陌生人的相关信息,且该检索方式快捷方便,准确性高,操作极为人性化,有利于提升用户操作手机的满意度。
附图说明
图1为本发明基于人脸图像的信息检索方法的步骤流程图;
图2是本发明基于人脸图像的信息检索系统的原理方框图。
具体实施方式
下面结合附图和优选实施例对本发明作进一步的描述,但本发明的实施方式不限于此。
本发明基于人脸图像的信息检索方法及系统,在移动终端运行应用程序的过程中,对应用程序中出现的陌生人物利用人脸识别技术提取该人物的人脸图像的特征量,进而对该人脸图像进行检索匹配,为移动终端用户提供该人物相关的搜索信息,以方便用户利用人物图像进行智能化信息检索。
参照图1,本发明基于人脸图像的信息检索方法,包括以下步骤:
步骤S10,图像采集模块从所述移动终端的当前应用程序中获取人脸快照数据;
所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序。例如,用户在通过手机的视频播放程序观看比赛录像时,录像中出现了用户不熟悉的陌生运动员面孔,则用户通过快捷键触发图像采集模块来获取当前帧画面数据上的人脸快照数据,具体为,图像采集模块基于人脸检测及定位技术对当前帧画面数据上的人脸进行定位裁剪,从而去除不相关区域的多余图像数据,形成用于后续步骤中比对的人脸快照数据,以提高数据处理的效率及比对的精准度。
步骤S20,对所述图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;
对步骤S10获取的人脸快照数据进行特征值提取,具体可采用特征分析的方法,将人脸基准点的相对比率和其他描述人脸脸部特征的形状参数或者类别参数等一起构成特征值向量,此处人脸特征提取方法为本领域技术人员的公知技术,在此不再赘述。
步骤S30,将所述特征值向量发送至数据处理服务器上以对所述特征值向量进行检索匹配,并将匹配结果返回至移动终端。
数据处理服务器上预先存储有用于匹配所述特征值向量的特征值参照量,所述特征值参照量为预先学习训练建立的。将所述特征值向量与数据库中的特征参照量进行匹配,设置若特征值向量与特征参照量的匹配近似度超过预定阈值,认定二者匹配,将与该人脸图像对应的人物数据或者包含该人物的相关搜索信息的URL地址返回给移动终端,手机可以直接对人物数据进行显示或者访问包含搜索信息的URL地址;若特征值向量与特征参照量的匹配近似度未达到预定阈值,则返回无法检索到此人的提示信息给手机。这样用户在通过手机观看视频、浏览网页或者查看图片的同时就能快捷地检索到相关人物的信息,不仅操作方便,而且检索路径可靠,信息相关性高。
本发明还提供一种基于人脸图像的信息检索系统,参照图2,该系统包括移动终端10及数据处理服务器20,移动终端10包括:
图像采集模块11,用于从所述移动终端10的当前应用程序中获取人脸快照数据;
特征提取模块12,用于对所述图像采集模块11获取的人脸快照数据进行特征值提取以得到特征值向量;
应用处理模块13,用于将所述特征值向量发送至数据处理服务器20,并从数据处理服务器20接收匹配结果;
所述数据处理服务器20包括:
特征库模块21,用于存储特征值参照量,所述特征值参照量为预先学习训练建立的,以作为对提取的人脸快照数据的特征值向量进行检索匹配的参照量;
检索模块22,用于将所述应用处理模块13传来的所述特征值向量与所述特征值参照量进行匹配以生成匹配结果。
检索模块22上可设置匹配的预定阈值,若特征值向量与特征参照量的匹配近似度超过预定阈值,则认定二者匹配,将与该人脸图像对应的人物数据或者包含该人物的相关搜索信息的URL地址返回给移动终端,手机可以直接对人物数据进行显示或者访问包含搜索信息的URL地址;若特征值向量与特征参照量的匹配近似度未达到预定阈值,则返回无法检索到此人的提示信息给手机。这样用户在通过手机观看视频、浏览网页或者查看图片的同时就能快捷地检索到相关人物的信息,不仅操作方便,而且检索路径可靠,信息相关性高。
所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序,所述移动终端为手机、PDA等智能终端。
本发明基于人脸图像的信息检索方法及系统,利用成熟的人脸识别技术对移动终端应用程序中的陌生人图像或者照片进行人脸识别,并将人脸识别的特征与存储在数据处理服务器上的特征参照量进行匹配,从而提供该陌生人相关的检索信息,便于用户快速的了解应用程序中出现的陌生人的相关信息,且该检索方式快捷方便,准确性高,操作极为人性化,有利于提升用户操作手机的满意度。
以上是对本发明的较佳实施进行了具体说明,但本发明创造并不限于所述实施例,熟悉本领域的技术人员在不违背本发明精神的前提下还可做作出种种的等同变形或替换,这些等同的变形或替换均包含在本申请权利要求所限定的范围内。

Claims (8)

1.一种基于人脸图像的信息检索方法,适用于移动终端,其特征在于,该方法包括以下步骤:
图像采集模块从所述移动终端的当前应用程序中获取人脸快照数据;
对所述图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;
将所述特征值向量发送至数据处理服务器上以对所述特征值向量进行检索匹配,并将匹配结果返回至移动终端。
2.如权利要求1所述的基于人脸图像的信息检索方法,其特征在于:
所述数据处理服务器上预先存储有用于匹配所述特征值向量的特征值参照量,所述特征值参照量为预先学习训练建立的。
3.如权利要求1所述的基于人脸图像的信息检索方法,其特征在于:
所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序。
4.如权利要求1所述的基于人脸图像的信息检索方法,其特征在于:
所述匹配结果为文字信息或者包含相关搜索信息的URL地址,如果返回的是文字信息,则直接显示在手机上;如果返回URL地址,则自动引导手机访问该URL地址。
5.一种基于人脸图像的信息检索系统,包括移动终端及数据处理服务器,其特征在于,所述移动终端包括:
图像采集模块,用于从所述移动终端的当前应用程序中获取人脸快照数据;
特征提取模块,用于对所述图像采集模块获取的人脸快照数据进行特征值提取以得到特征值向量;
应用处理模块,用于将所述特征值向量发送至数据处理服务器,并从数据处理服务器接收匹配结果;
所述数据处理服务器包括:
特征库模块,用于存储特征值参照量;
检索模块,用于将所述应用处理模块传来的所述特征值向量与所述特征值参照量进行匹配以生成匹配结果。
6.如权利要求5所述的基于人脸图像的信息检索系统,其特征在于:所述特征库模块上存储的特征值参照量为预先学习训练建立的。
7.如权利要求5所述的基于人脸图像的信息检索系统,其特征在于:所述当前应用程序为视频播放程序、图片浏览程序或者网页浏览程序。
8.如权利要求5所述的基于人脸图像的信息检索系统,其特征在于:
所述匹配结果为文字信息或者包含相关搜索信息的URL地址,如果返回的是文字信息,则直接显示在手机上;如果返回URL地址,则自动引导手机访问该URL地址。
CN2012104574148A 2012-11-14 2012-11-14 基于人脸图像的信息检索方法及系统 Pending CN102968473A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012104574148A CN102968473A (zh) 2012-11-14 2012-11-14 基于人脸图像的信息检索方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012104574148A CN102968473A (zh) 2012-11-14 2012-11-14 基于人脸图像的信息检索方法及系统

Publications (1)

Publication Number Publication Date
CN102968473A true CN102968473A (zh) 2013-03-13

Family

ID=47798611

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012104574148A Pending CN102968473A (zh) 2012-11-14 2012-11-14 基于人脸图像的信息检索方法及系统

Country Status (1)

Country Link
CN (1) CN102968473A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103870559A (zh) * 2014-03-06 2014-06-18 海信集团有限公司 一种基于播放的视频获取信息的方法及设备
CN104881407A (zh) * 2014-02-27 2015-09-02 福州瑞芯微电子有限公司 基于特征识别的信息推荐系统及方法
CN105144156A (zh) * 2013-03-14 2015-12-09 微软技术许可有限责任公司 将元数据与个人图像集合中的图像相关联
CN105354288A (zh) * 2015-10-30 2016-02-24 百度在线网络技术(北京)有限公司 一种基于视频内容的图像搜索方法和装置
CN105868684A (zh) * 2015-12-10 2016-08-17 乐视网信息技术(北京)股份有限公司 视频信息获取方法及装置
CN105898129A (zh) * 2014-09-26 2016-08-24 贺江涛 一种基于移动设备的人脸抓拍的方法与装置
CN106407483A (zh) * 2016-12-07 2017-02-15 连惠城 一种具有文字搜索功能的电子相册
CN107463891A (zh) * 2017-07-26 2017-12-12 珠海市魅族科技有限公司 一种身份信息获取方法、装置、计算机装置及计算机可读存储介质
CN107729737A (zh) * 2017-11-08 2018-02-23 广东小天才科技有限公司 一种身份信息的获取方法及穿戴设备
CN110210340A (zh) * 2019-05-20 2019-09-06 深圳供电局有限公司 一种人脸特征值比对方法及其系统、可读存储介质
CN110222206A (zh) * 2019-05-20 2019-09-10 深圳供电局有限公司 一种客户端、服务器及图像识别系统
CN112241687A (zh) * 2020-09-16 2021-01-19 安徽超视野智能科技有限公司 一种具有陌生人脸库功能的人脸识别方法及系统
WO2021047305A1 (zh) * 2019-09-10 2021-03-18 中兴通讯股份有限公司 人脸搜索方法、装置、设备及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040151375A1 (en) * 2002-12-28 2004-08-05 Samsung Electronics Co., Ltd. Method of digital image analysis for isolating a teeth area within a teeth image and personal identification method and apparatus using the teeth image
CN101216841A (zh) * 2008-01-14 2008-07-09 南京搜拍信息技术有限公司 交互式图像搜索系统和方法
CN101635005A (zh) * 2009-08-21 2010-01-27 深圳华为通信技术有限公司 一种移动终端及其信息检索方法
US20120062597A1 (en) * 2010-09-14 2012-03-15 Kabushiki Kaisha Toshiba Adding metadata apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040151375A1 (en) * 2002-12-28 2004-08-05 Samsung Electronics Co., Ltd. Method of digital image analysis for isolating a teeth area within a teeth image and personal identification method and apparatus using the teeth image
CN101216841A (zh) * 2008-01-14 2008-07-09 南京搜拍信息技术有限公司 交互式图像搜索系统和方法
CN101635005A (zh) * 2009-08-21 2010-01-27 深圳华为通信技术有限公司 一种移动终端及其信息检索方法
US20120062597A1 (en) * 2010-09-14 2012-03-15 Kabushiki Kaisha Toshiba Adding metadata apparatus

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105144156A (zh) * 2013-03-14 2015-12-09 微软技术许可有限责任公司 将元数据与个人图像集合中的图像相关联
CN105144156B (zh) * 2013-03-14 2018-11-06 微软技术许可有限责任公司 将元数据与个人图像集合中的图像相关联
CN104881407A (zh) * 2014-02-27 2015-09-02 福州瑞芯微电子有限公司 基于特征识别的信息推荐系统及方法
CN103870559A (zh) * 2014-03-06 2014-06-18 海信集团有限公司 一种基于播放的视频获取信息的方法及设备
CN105898129A (zh) * 2014-09-26 2016-08-24 贺江涛 一种基于移动设备的人脸抓拍的方法与装置
CN105354288A (zh) * 2015-10-30 2016-02-24 百度在线网络技术(北京)有限公司 一种基于视频内容的图像搜索方法和装置
CN105868684A (zh) * 2015-12-10 2016-08-17 乐视网信息技术(北京)股份有限公司 视频信息获取方法及装置
CN106407483A (zh) * 2016-12-07 2017-02-15 连惠城 一种具有文字搜索功能的电子相册
CN107463891A (zh) * 2017-07-26 2017-12-12 珠海市魅族科技有限公司 一种身份信息获取方法、装置、计算机装置及计算机可读存储介质
CN107729737A (zh) * 2017-11-08 2018-02-23 广东小天才科技有限公司 一种身份信息的获取方法及穿戴设备
CN107729737B (zh) * 2017-11-08 2020-07-03 广东小天才科技有限公司 一种身份信息的获取方法及穿戴设备
CN110210340A (zh) * 2019-05-20 2019-09-06 深圳供电局有限公司 一种人脸特征值比对方法及其系统、可读存储介质
CN110222206A (zh) * 2019-05-20 2019-09-10 深圳供电局有限公司 一种客户端、服务器及图像识别系统
WO2021047305A1 (zh) * 2019-09-10 2021-03-18 中兴通讯股份有限公司 人脸搜索方法、装置、设备及计算机可读存储介质
CN112241687A (zh) * 2020-09-16 2021-01-19 安徽超视野智能科技有限公司 一种具有陌生人脸库功能的人脸识别方法及系统

Similar Documents

Publication Publication Date Title
CN102968473A (zh) 基于人脸图像的信息检索方法及系统
CN109614482B (zh) 标签的处理方法、装置、电子设备及存储介质
WO2021068744A1 (zh) 昆虫识别方法及系统
US11153430B2 (en) Information presentation method and device
CN108121736B (zh) 一种主题词确定模型的建立方法、装置及电子设备
US9843908B2 (en) Method, client, server and system for intelligent recognizing contents of short message
CN109063662B (zh) 数据处理方法、装置、设备及存储介质
CN102549603A (zh) 基于相关性的图像选择
CN108073606B (zh) 一种新闻推荐方法和装置、一种用于新闻推荐的装置
CN102622375A (zh) 第三方律师推荐智能匹配系统和方法
CN113569037A (zh) 一种消息处理方法、装置以及可读存储介质
CN106407358B (zh) 一种图像搜索方法、装置及移动终端
CN111586469A (zh) 弹幕显示方法、装置及电子设备
CN110162691B (zh) 在线内容服务中的话题推荐、运营方法、装置和机器设备
CN110929176A (zh) 一种信息推荐方法、装置及电子设备
CN103593356A (zh) 基于多媒体信息指纹技术的信息搜索方法、系统和应用
CN110110146A (zh) 基于人工智能的视频短片搜索方法、装置、介质和设备
CN110096619A (zh) 视频数据分析方法、分析平台、终端及存储介质
CN111491209A (zh) 视频封面确定方法、装置、电子设备和存储介质
CN117216308B (zh) 基于大模型的搜索方法、系统、设备及介质
CN114186074A (zh) 视频搜索词推荐方法、装置、电子设备及存储介质
CN111368161A (zh) 一种搜索意图的识别方法、意图识别模型训练方法和装置
CN107203572A (zh) 一种图片搜索的方法及装置
CN104506696B (zh) 一种移动终端通讯录联系人信息输入提示的方法及系统
US20220027419A1 (en) Smart search and recommendation method for content, storage medium, and terminal

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130313