CN104679832A - 基于人脸识别的单体或多体组合图片检索系统及方法 - Google Patents

基于人脸识别的单体或多体组合图片检索系统及方法 Download PDF

Info

Publication number
CN104679832A
CN104679832A CN201510062239.6A CN201510062239A CN104679832A CN 104679832 A CN104679832 A CN 104679832A CN 201510062239 A CN201510062239 A CN 201510062239A CN 104679832 A CN104679832 A CN 104679832A
Authority
CN
China
Prior art keywords
face
monomer
many bodies
processing module
recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510062239.6A
Other languages
English (en)
Inventor
张科
董建林
曹俭
刘贤洪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Changhong Electric Co Ltd
Original Assignee
Sichuan Changhong Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Changhong Electric Co Ltd filed Critical Sichuan Changhong Electric Co Ltd
Priority to CN201510062239.6A priority Critical patent/CN104679832A/zh
Publication of CN104679832A publication Critical patent/CN104679832A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种基于人脸识别的单体或多体组合图片检索系统及方法,检索方法包括以下步骤:(1)、基于RGB传感器模块完成单体或多体组合图形信息数据采集,并完成本地或网络数据存储;(2)、对单体或多体组合图形信息数据进行处理建模,并记录所述建模数据信息;(3)、建立单体或多体组合人脸识别样本标本库;(4)、进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索;(5)、通过图形检索结果显示模块显示检索结果。本发明由智能终端设备在后台完成与选择的图像标本匹配的所有图片文档检索处理工作,大大简化了用户手动查找检索图片的操作流程,提高了图片应用管理效率。

Description

基于人脸识别的单体或多体组合图片检索系统及方法
技术领域
本发明涉及智能终端产品的应用技术领域,具体涉及一种基于人脸识别的单体或多体组合图片检索系统及方法。
背景技术
随着摄像头传感器逐渐成为个人智能终端设备的标准化配置以及各种照相和摄像设备产品的大规模普及,个人在生活、工作中将产生大量的图像照片,面对海量的图像照片文档,无疑将给个人在分类批量或个性化查找管理带来较大的困难和处理工作量。
发明内容
本发明克服了现有技术的不足,提供一种基于人脸识别的单体或多体组合图片检索系统及方法。
本发明提出了一种基于人脸识别完成图片文档检索管理的方法,通过设备内置或外嵌连接摄像头传感器,完成所指定人脸表情识别图像标本相关的图片文档检索,支持人脸相似、表情分类、单体与多体组合等多种图片检索方案,大大简化了用户对图片文档查找过程。
应用平台开发厂商,可以基于上述发明方法,结合摄像头传感器的图像识别算法定义部分应用软件开发所需的API接口,为图像及文档管理智能应用开发者提供应用技术支撑,开发出更多便民智能应用服务软件,如智能相册制作、照片处理、图片文档分类等应用服务。
为解决上述的技术问题,本发明采用以下技术方案:
一种基于人脸识别的单体或多体组合图片检索系统,包括RGB传感器模块、人脸骨骼识别处理模块、人脸面部表情识别处理模块、图形捕捉采集模块、识别图形标本库、图形识别API接口、图形检索处理模块、图形检索结果显示模块;所述RGB传感器模块连接所述人脸骨骼识别处理模块;完成单体或多体组合人脸骨骼特征处理,建立单体或多体人脸骨骼组织特征模型,并记录人脸骨骼图形数据信息;所述人脸骨骼识别处理模块连接所述人脸面部表情识别处理模块;完成单体或多体组合人脸面部表情特征处理,进行人脸面部表情建模,并记录人脸面部表情数据信息;所述人脸面部表情识别处理模块连接所述图形捕捉采集模块;所述图形捕捉采集模块连接所述识别图形标本库,完成识别图形标本库的建立;所述识别图形标本库连接所述图形识别API接口;所述图形识别API接口连接所述图形检索处理模块;完成单体或多体组合图片的检索;所述图形检索处理模块通过本地或网络图片文件资源池的检索处理,与所述图形检索结果显示模块连接,显示检索结果。
更进一步的技术方案是提供一种基于人脸识别的单体或多体组合图片检索系统的检索方法,所述的检索方法包括以下步骤:
(1)、基于RGB传感器模块完成单体或多体组合图形信息数据采集,并完成本地或网络数据存储;
(2)、根据人脸骨骼识别处理模块和人脸面部表情识别处理模块对单体或多体组合图形信息数据进行处理建模,并记录所述建模数据信息;
(3)、根据图形捕捉采集模块和识别图形标本库建立单体或多体组合人脸识别样本标本库;
(4)、通过图形识别API接口和图形检索处理模块进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索;
(5)、通过图形检索结果显示模块显示检索结果。
更进一步的技术方案是步骤(2)中所述处理建模包括结合单体或多体人脸图形中人脸骨骼特征,通过人脸骨骼识别处理模块完成单体或多体组合人脸骨骼特征,建立单体或多体组合人脸骨骼组织特征模型。
更进一步的技术方案是单体或多体组合人脸骨骼组织特征包括人体五官位置信息、体毛信息。
更进一步的技术方案是步骤(2)中所述处理建模还包括根据人脸面部表情应用需求,通过人脸面部表情识别处理模块完成单体或多体组合人脸面部表情特征,完成单体或多体组合人脸面部表情3D建模。
更进一步的技术方案是步骤(4)是通过调用图形识别API接口和图形检索处理模块,选择本地或网络图片资源池检索路径,进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索。
更进一步的技术方案是RGB传感器模块内置或外嵌连接在智能终端上。
更进一步的技术方案是智能终端是集成Android OS或IOS OS或Windows OS系统的智能终端。
更进一步的技术方案是智能终端包括:智能电视、智能机顶盒、智能手机、智能平板及个人电脑中的一种或几种。
与现有技术相比,本发明的有益效果是:本发明采用智能设备产品内置或外接的RGB摄像头,基于人脸表情识别技术,建立单个个体或多个组合人脸识别库,在各种图片文件应用管理软件中,通过指定对应人脸图像识别标本,查找到与指定人脸表情图像相关的图片文档。在整个处理过程中,只需将人置于摄像头前端,摄像头捕捉识别人脸并提示完成人脸表情图像捕捉采集动作,由智能终端设备在后台完成与选择的图像标本匹配的所有图片文档检索处理工作,大大简化了用户手动查找检索图片的操作流程,提高了图片应用管理效率。
附图说明
图1为本发明一个实施例的系统架构及检索流程图。
具体实施方式
本说明书中公开的所有特征,或公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。
本说明书(包括任何附加权利要求、摘要和附图)中公开的任一特征,除非特别叙述,均可被其他等效或具有类似目的的替代特征加以替换。即,除非特别叙述,每个特征只是一系列等效或类似特征中的一个例子而已。
下面结合附图及实施例对本发明的具体实施方式进行详细描述。
实施例1
如图1所示,根据本发明的一个实施例,本实施例公开一种基于人脸识别的单体或多体组合图片检索系统,包括RGB传感器模块、人脸骨骼识别处理模块、人脸面部表情识别处理模块、图形捕捉采集模块、识别图形标本库、图形识别API接口、图形检索处理模块、图形检索结果显示模块;或者说,本实施例的检索系统由由RGB传感器模块、人脸骨骼识别算法引擎、人脸面部表情识别算法、图形捕捉采集模块、识别图形标本库、图形识别API接口、图形检索算法引擎、图形检索结果显示模块构成。
具体的,RGB传感器模块连接所述人脸骨骼识别处理模块;完成单体或多体组合人脸骨骼特征处理,建立单体或多体人脸骨骼组织特征模型,并记录人脸骨骼图形数据信息;所述人脸骨骼识别处理模块连接所述人脸面部表情识别处理模块;完成单体或多体组合人脸面部表情特征处理,进行人脸面部表情建模,并记录人脸面部表情数据信息;所述人脸面部表情识别处理模块连接所述图形捕捉采集模块;所述图形捕捉采集模块连接所述识别图形标本库,完成识别图形标本库的建立;所述识别图形标本库连接所述图形识别API接口;所述图形识别API接口连接所述图形检索处理模块;完成单体或多体组合图片的检索;所述图形检索处理模块通过本地或网络图片文件资源池的检索处理,与所述图形检索结果显示模块连接,显示检索结果。
RGB传感器模块内置或外嵌连接在智能终端上,智能终端是指集成AndroidOS或IOS OS或Windows OS系统的智能终端设备,包括但不限于智能电视、智能机顶盒、智能手机、智能平板及个人电脑等智能设备产品,本实施例通过对单个个体和多个组合人脸表情的识别,能高效检索到所需要的检索目标样本相似的图片文档,并可对检索到的图片文档进行相关的编辑或管理工作。
实施例2
根据本发明的另一个实施例,本实施例公开一种基于人脸识别的单体或多体组合图片检索系统的检索方法,具体的,该检索方法包括以下步骤:
基于RGB摄像头传感器模块,通过传感器成像及图形像素采集信息处理,将单体或多体组合人脸图形像素信息数据完成在本地或网络存储,用于后期的人脸及表情识别处理。
结合单体或多体人脸图形中人脸骨骼特征,通过人脸骨骼识别算法引擎完成单体或多体组合人脸骨骼特点,建立单体或多体组合人脸骨骼组织(包括人体五官位置信息、体毛等)特征模型,发现单体或多体组合中人脸骨骼特征差异性,并记录单体或多体人脸骨骼图形数据信息。
同时可根据面部表情应用需求,通过人脸面部表情识别算法引擎完成单体或多体组合人脸面部表情特征,完成单体或多体组合人脸面部表情3D建模,记录单体或多体组合人脸面部表情样本数据信息。
通过RGB摄像头传感器模块、人脸骨骼识别算法引擎和人脸面部表情识别算法引擎,在本地或网络建立单体或多体组合人脸骨骼识别样本标本和人脸面部表情识别样本标本库,用于支撑后续基于样本标本与待识别图形文件资源池的检索匹配。
完成识别图形标本库的建立后,通过调用图形检索识别API应用接口和图形检索算法引擎,选择本地或网络图片资源池检索路径,进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索,显示检索结果。
采用本实施例的检索系统及方法,在整个处理过程中,只需将人置于摄像头前端,摄像头捕捉识别人脸并提示完成人脸表情图像捕捉采集动作,由智能终端设备在后台完成与选择的图像标本匹配的所有图片文档检索处理工作,大大简化了用户手动查找检索图片的操作流程,提高了图片应用管理效率。
在本说明书中所谈到的“一个实施例”、“另一个实施例”、“实施例”、等,指的是结合该实施例描述的具体特征、结构或者特点包括在本申请概括性描述的至少一个实施例中。在说明书中多个地方出现同种表述不是一定指的是同一个实施例。进一步来说,结合任一个实施例描述一个具体特征、结构或者特点时,所要主张的是结合其他实施例来实现这种特征、结构或者特点也落在本发明的范围内。
尽管这里参照发明的多个解释性实施例对本发明进行了描述,但是,应该理解,本领域技术人员可以设计出很多其他的修改和实施方式,这些修改和实施方式将落在本申请公开的原则范围和精神之内。更具体地说,在本申请公开权利要求的范围内,可以对主题组合布局的组成部件和/或布局进行多种变型和改进。除了对组成部件和/或布局进行的变型和改进外,对于本领域技术人员来说,其他的用途也将是明显的。

Claims (9)

1.一种基于人脸识别的单体或多体组合图片检索系统,其特征在于:包括RGB传感器模块、人脸骨骼识别处理模块、人脸面部表情识别处理模块、图形捕捉采集模块、识别图形标本库、图形识别API接口、图形检索处理模块、图形检索结果显示模块;所述RGB传感器模块连接所述人脸骨骼识别处理模块;完成单体或多体组合人脸骨骼特征处理,建立单体或多体人脸骨骼组织特征模型,并记录人脸骨骼图形数据信息;所述人脸骨骼识别处理模块连接所述人脸面部表情识别处理模块;完成单体或多体组合人脸面部表情特征处理,进行人脸面部表情建模,并记录人脸面部表情数据信息;所述人脸面部表情识别处理模块连接所述图形捕捉采集模块;所述图形捕捉采集模块连接所述识别图形标本库,完成识别图形标本库的建立;所述识别图形标本库连接所述图形识别API接口;所述图形识别API接口连接所述图形检索处理模块;完成单体或多体组合图片的检索;所述图形检索处理模块通过本地或网络图片文件资源池的检索处理,与所述图形检索结果显示模块连接,显示检索结果。
2.根据权利要求1所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的检索方法包括以下步骤:
(1)、基于RGB传感器模块完成单体或多体组合图形信息数据采集,并完成本地或网络数据存储;
(2)、根据人脸骨骼识别处理模块和人脸面部表情识别处理模块对单体或多体组合图形信息数据进行处理建模,并记录所述建模数据信息;
(3)、根据图形捕捉采集模块和识别图形标本库建立单体或多体组合人脸识别样本标本库;
(4)、通过图形识别API接口和图形检索处理模块进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索;
(5)、通过图形检索结果显示模块显示检索结果。
3.根据权利要求2所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的步骤(2)中所述处理建模包括结合单体或多体人脸图形中人脸骨骼特征,通过人脸骨骼识别处理模块完成单体或多体组合人脸骨骼特征,建立单体或多体组合人脸骨骼组织特征模型。
4.根据权利要求3所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的单体或多体组合人脸骨骼组织特征包括人体五官位置信息、体毛信息。
5.根据权利要求2所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的步骤(2)中所述处理建模还包括根据人脸面部表情应用需求,通过人脸面部表情识别处理模块完成单体或多体组合人脸面部表情特征,完成单体或多体组合人脸面部表情3D建模。
6.根据权利要求2所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的步骤(4)是通过调用图形识别API接口和图形检索处理模块,选择本地或网络图片资源池检索路径,进行标本与资源池文件的筛选和匹配,并根据相似度指数级别选择,完成用户不同需求的单体或多体组合图片的检索。
7.根据权利要求2所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的RGB传感器模块内置或外嵌连接在智能终端上。
8.根据权利要求7所述的基于人脸识别的单体或多体组合图片检索系统的检索方法,其特征在于所述的智能终端是集成Android OS或IOS OS或WindowsOS系统的智能终端。
9.根据权利要求7或8所述的,其特征在于所述的智能终端包括:智能电视、智能机顶盒、智能手机、智能平板及个人电脑中的一种或几种。
CN201510062239.6A 2015-02-05 2015-02-05 基于人脸识别的单体或多体组合图片检索系统及方法 Pending CN104679832A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510062239.6A CN104679832A (zh) 2015-02-05 2015-02-05 基于人脸识别的单体或多体组合图片检索系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510062239.6A CN104679832A (zh) 2015-02-05 2015-02-05 基于人脸识别的单体或多体组合图片检索系统及方法

Publications (1)

Publication Number Publication Date
CN104679832A true CN104679832A (zh) 2015-06-03

Family

ID=53314874

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510062239.6A Pending CN104679832A (zh) 2015-02-05 2015-02-05 基于人脸识别的单体或多体组合图片检索系统及方法

Country Status (1)

Country Link
CN (1) CN104679832A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108629168A (zh) * 2017-03-23 2018-10-09 三星电子株式会社 脸部验证方法、设备以及计算设备
CN112702635A (zh) * 2020-12-28 2021-04-23 深圳康佳电子科技有限公司 一种基于人脸识别的图片投屏方法、系统及智能电视

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05159030A (ja) * 1991-12-05 1993-06-25 Toppan Printing Co Ltd 画像データ管理装置
CN102254336A (zh) * 2011-07-14 2011-11-23 清华大学 人脸视频合成方法及装置
CN102332034A (zh) * 2011-10-21 2012-01-25 中国科学院计算技术研究所 一种人像图片检索方法和装置
CN103514447A (zh) * 2013-10-18 2014-01-15 陕西高新实业有限公司 基于智能手机人脸识别系统
CN103971131A (zh) * 2014-05-13 2014-08-06 华为技术有限公司 一种预设表情识别方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05159030A (ja) * 1991-12-05 1993-06-25 Toppan Printing Co Ltd 画像データ管理装置
CN102254336A (zh) * 2011-07-14 2011-11-23 清华大学 人脸视频合成方法及装置
CN102332034A (zh) * 2011-10-21 2012-01-25 中国科学院计算技术研究所 一种人像图片检索方法和装置
CN103514447A (zh) * 2013-10-18 2014-01-15 陕西高新实业有限公司 基于智能手机人脸识别系统
CN103971131A (zh) * 2014-05-13 2014-08-06 华为技术有限公司 一种预设表情识别方法和装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108629168A (zh) * 2017-03-23 2018-10-09 三星电子株式会社 脸部验证方法、设备以及计算设备
US11861937B2 (en) 2017-03-23 2024-01-02 Samsung Electronics Co., Ltd. Facial verification method and apparatus
CN108629168B (zh) * 2017-03-23 2024-04-02 三星电子株式会社 脸部验证方法、设备以及计算设备
CN112702635A (zh) * 2020-12-28 2021-04-23 深圳康佳电子科技有限公司 一种基于人脸识别的图片投屏方法、系统及智能电视
CN112702635B (zh) * 2020-12-28 2023-10-27 深圳康佳电子科技有限公司 基于人脸识别的图片投屏方法、系统、智能电视及介质

Similar Documents

Publication Publication Date Title
US12001475B2 (en) Mobile image search system
RU2608261C2 (ru) Автоматическое генерирование тега на основании содержания изображения
CN102547090B (zh) 数字拍摄设备及其提供照片的方法
US9008438B2 (en) Image processing device that associates photographed images that contain a specified object with the specified object
US8391615B2 (en) Image recognition algorithm, method of identifying a target image using same, and method of selecting data for transmission to a portable electronic device
JP5934653B2 (ja) 画像分類装置、画像分類方法、プログラム、記録媒体、集積回路、モデル作成装置
WO2017092280A1 (zh) 一种多媒体照片生成方法、装置、设备及手机
US20220383053A1 (en) Ephemeral content management
CN106156347A (zh) 云相册分类展示方法、装置及服务器
EP1770554B1 (en) Image analysis apparatus and image analysis program storage medium
JP2007206919A (ja) 表示制御装置および方法、プログラム、並びに記録媒体
CN105243084A (zh) 拍摄图像文件的保存方法和系统及其检索方法和系统
CN103428537A (zh) 一种视频处理方法和装置
CN108563651A (zh) 一种多视频的目标搜索方法、装置及设备
CN104520848A (zh) 按照出席者搜索事件
CN105247606B (zh) 一种照片显示方法及用户终端
CN113011403A (zh) 手势识别方法、系统、介质及设备
CN111027622A (zh) 图片标签生成方法、装置、计算机设备及存储介质
CN106777071B (zh) 一种图像识别获取参考信息的方法和装置
CN106713859A (zh) 一种图片视觉监控搜索系统及其搜索方法
CN105095468A (zh) 一种新型的图像检索方法及系统
CN105512119A (zh) 一种实现图片排序的方法及终端
CN104679832A (zh) 基于人脸识别的单体或多体组合图片检索系统及方法
CN103488380A (zh) 一种信息展示方法及装置
CN107945353B (zh) 一种基于深度学习的自助导游系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20150603

RJ01 Rejection of invention patent application after publication