CN109635137B - 一种图像关联信息检索方法与系统 - Google Patents
一种图像关联信息检索方法与系统 Download PDFInfo
- Publication number
- CN109635137B CN109635137B CN201811275427.7A CN201811275427A CN109635137B CN 109635137 B CN109635137 B CN 109635137B CN 201811275427 A CN201811275427 A CN 201811275427A CN 109635137 B CN109635137 B CN 109635137B
- Authority
- CN
- China
- Prior art keywords
- image
- information
- retrieval
- module
- privacy
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明涉及一种图像关联信息检索方法与系统，基于图像检索，得到目标图像以及目标图像所在网页，解析获得网页内容中与目标图像关联的、匹配关键字的数据信息；用户不再需要自行查阅网页，人工地寻找需要的数据信息，大大提高检索效率。本发明充分考虑涉及隐私敏感信息对应的法律风险，在图像检索发起时进行隐私权属的识别与授权，防止检索服务向非授权者提供涉及个人隐私的数据信息。本发明的实施能够有效地避免涉及个人隐私的数据信息被随意获取，能够快速有效地发现已被盗用的涉及个人隐私的数据信息，及时制止可能存在或正在进行的诈骗行为。基于图像检索，还能够用于查找长相相似的群体，形成一种基于相似长相的新社交方式。
Description
技术领域
本发明涉及图像检索技术，更具体地说，涉及一种图像关联信息检索方法，以及一种图像关联信息检索系统。
背景技术
传统的图像检索方法，仅仅是检索出类似图像的目标网页，将网页交给用户自行查阅，从网页中人工阅读。使用这种传统的检索信息的方法，当用户需要检索图像的关联信息时，效率极低。原因是搜索得到的包含目标图像的网页往往缺少目标图像的关联信息，例如仅转载图像的网页，虽然包含了该目标图像，但文字信息可能与原网页完全不同。
另一方面，图像的关联信息中的部分信息涉及个人隐私，如果搜索服务提供涉及个人隐私的关联信息的检索和存储，存在侵犯隐私权的法律风险。
发明内容
本发明的目的在于克服现有技术的不足，提供一种图像关联信息检索方法与系统，能够快速高效地检索获得图像的关联信息，并且能够进一步实现规避隐私侵犯风险。
本发明的技术方案如下：
一种图像关联信息检索方法，输入作为检索样本的源图像与关键字，关键字对应需要获取的、与目标图像关联的数据信息；基于图像检索，得到目标图像；解析目标图像所在的网页，获得网页内容中与目标图像关联的、符合与关键字相关的数据信息。
作为优选，输入源图像后，判断源图像是否包含隐私敏感信息，如果是，则等待获取隐私敏感信息的授权后，再进行图像检索。
作为优选，根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权。
作为优选，如果隐私敏感信息为人脸，通过实时采集的影像进行身份识别，如果用户判定为所述人脸的所有者，则完成授权。
作为优选，如果隐私敏感信息为身份证，则先识别身份证，再针对身份证的人脸进行身份识别。
作为优选，如果隐私敏感信息为除身份证外的其他证件，则先识别当前证件，再识别身份证，然后针对身份证的人脸进行身份识别。
作为优选，如果隐私敏感信息为车牌，则先识别车辆行驶证，再识别身份证，然后针对身份证的人脸进行身份识别。
作为优选，解析网页前，检查是否具备对应关键字的内容识别模块，如果没有，则形成通知信息，或者从预设的模块源自动获取内容识别模块。
作为优选，如果与目标图像关联的数据信息设置为隐私状态，在未获得相应授权的情况下，无法被获得。
一种图像关联信息检索系统，执行所述的图像关联信息检索方法，包括：
交互模块，用于调用图像提交模块提交作为检索样本的源图像与关键字；
图像提交模块，用于提交源图像；
互联网信息检索模块，用于进行图像检索，以及用于获得目标图像所在网页的内容；
数据信息识别模块库，包括若干类型的内容识别模块，用于解析网页内容时，识别对应于关键字的数据信息；
数据信息提取模块，用于输出对应于关键字的数据信息。
作为优选，还包括隐私敏感识别模块，用于对图像提交模块输出的源图像进行是否包含隐私敏感信息的识别；
隐私权属识别模块，用于根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权。
作为优选，还包括图像采集模块、活动识别模块，用于辅助隐私权属识别模块与用户进行交互授权。
作为优选，解析网页前，如果检查至数据信息识别模块库缺少对应关键字的内容识别模块，则形成通知信息，或者从预设的模块源自动获取内容识别模块。
本发明的有益效果如下：
本发明所述的图像关联信息检索方法与系统，基于图像检索，得到目标图像以及目标图像所在网页，解析获得网页内容中与目标图像关联的、匹配关键字的数据信息；用户不再需要自行查阅网页，人工地寻找需要的数据信息，大大提高检索效率。
本发明充分考虑涉及隐私敏感信息对应的法律风险，在图像检索发起时进行隐私权属的识别与授权，防止检索服务向非授权者提供涉及个人隐私的数据信息，实现对涉及个人隐私的数据信息的保护。
本发明的实施能够有效地避免涉及个人隐私的数据信息被随意获取，能够快速有效地发现已被盗用的涉及个人隐私的数据信息，及时制止可能存在或正在进行的诈骗行为。基于图像检索，还能够用于查找长相相似的群体，形成一种基于相似长相的新社交方式。
附图说明
图1是图像关联信息检索系统的原理框图。
具体实施方式
以下结合附图及实施例对本发明进行进一步的详细说明。
本发明为了解决现有技术的图像检索存在的信息获取效率低、存在隐私侵权的法律风险等不足，提供一种图像关联信息检索方法与系统，不再仅仅得到与展示网页，而是通过图像检索进行初步筛选，再从初步筛选得到的网页中，解析网页内容，得到关键字对应的与目标图像关联的数据信息，即为需要检索的信息。本发明还可以衍生出多种应用，如社交、发现诈骗等。
本发明所述的图像关联信息检索方法，主要过程为：输入作为检索样本的源图像与关键字，关键字对应需要获取的、与目标图像关联的数据信息，即需要获得的信息内容，如地址、联系方式、简历等；基于图像检索，得到目标图像；解析目标图像所在的网页，获得网页内容中与目标图像关联的、符合与关键字相关的数据信息，即为检索结果，可进一步对检索结果进行存储。本发明对于数据信息的获取基于语义关联性，不仅仅是对于关键字的字面文字进行匹配检索。例如，对于影视导演，在寻找需要的拍摄地时，可以先通过绘图或者寻找类似的场景，通过提交源图像，并将关键字设置为源图像所在地址，从而寻找到接近绘图或类似场景的地点；而检索的输出结果即为目标图像及其地址，不需要再在所有适合图像检索标准的网页中，通过人工方式寻找地址信息。
基于本发明记载的图像检索与数据信息分析提取的方式，进一步可实施为社交功能，得到一种以长相相似的群体为群组的全新社交方式或社交平台，用户可通过本人的照片查找长相相似的其他用户，然后建立社交关系，建立新型的商业模式。如寻找明星脸，以供商业演出之用。
由于不同类别的数据信息需要不同的内容识别模块进行识别提取，例如地址、电话、E-mail、联系人等不同类型的数据信息，但技术实施过程中，不可能一步到位地将所有功能都进行预设，一来对所有功能进行穷举较难，二来会造成程序系统过大，影响执行效率。因而，具体实施时，可进行两方面平衡，选择预设较常用的类型的内容识别模块，当需要时，可补充内容识别模块，进行更新。即解析网页前，检查是否具备对应关键字的内容识别模块，如果没有，则形成通知信息(由人工开发或人工添加)，或者从预设的模块源自动获取内容识别模块，以满足不断更新的信息需求。
本发明还考虑了涉及个人隐私的侵权问题，对于源图像是否涉及需要保护的个人隐私信息进行判断，如果源图像包含涉及个人隐私的隐私敏感信息，则本发明从源头上控制检索权限，即进行检索操作的用户是否具有获得与目标图像关联的涉及个人隐私的数据信息的权限。如果未成功授权，获得检索权限，则无法完成检索，进而保护相关数据信息的隐私安全，防止出现检索服务存在隐私侵权的法律风险。本发明中，输入源图像后，判断源图像是否包含隐私敏感信息，如果是，则等待获取隐私敏感信息的授权后，再进行图像检索。
根据源图像记载的图像内容不同，源图像包含的隐私敏感信息的类型也不同，对于不同类型的隐私敏感信息，采用的识别模式也不同。本发明中，根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权。通常涉及个人隐私的数据信息的内容包括身份、证件，或其他与证件关联的具有法律确认效果的物品，如车牌。
如果隐私敏感信息为人脸，则进行活体识别，确认为本人，即确认身体。本发明中，通过实时采集的影像进行身份识别，如果用户判定为所述人脸的所有者，则完成授权，获得检索权限。
如果隐私敏感信息为身份证，则先识别身份证，再针对身份证的人脸进行身份识别，即上述的活体识别。如果隐私敏感信息为除身份证外的其他证件，如驾照、护照等，则先识别当前证件，再识别身份证，然后针对身份证的人脸进行身份识别。如果隐私敏感信息为车牌，则先识别车辆行驶证，再识别身份证，然后针对身份证的人脸进行身份识别。可见，本发明的授权，最终均需要通过身份确认，防止证件存在伪造的风险。
对于数据信息的拥有者，为了数据信息的安全，可将与目标图像关联的数据信息设置为隐私状态进行保护，防止他人恶意盗用信息，从数据信息本身进行隐私保护。进而，如果与目标图像关联的数据信息设置为隐私状态，在未获得相应授权的情况下，无法被获得。将数据信息的隐私保护与用户的授权相结合，能够从首尾两端保护相应数据信息的隐私安全。基于此技术方案，可以避免他人通过本人照片，检索获取本人的个人隐私信息。而且，本人通过个人照片，可检索出是否有其他人也同样在使用本人照片，并模仿本人(包括头像、照片、个人信息，个人信息往往也可通过其他手段获得)进行诈骗活动，以便利及时发现并制止类似盗用身份进行诈骗的犯罪行为。
本发明还提供一种图像关联信息检索系统，执行所述的图像关联信息检索方法，如图1所示，包括：
交互模块，用于调用图像提交模块提交作为检索样本的源图像与关键字；
存储模块，用于存储检索结果，包括目标图像，以及相关联的数据信息；
图像提交模块，用于提交源图像；
隐私敏感识别模块，用于对图像提交模块输出的源图像进行是否包含隐私敏感信息的识别；
隐私权属识别模块，用于根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权；
互联网信息检索模块，用于进行图像检索，以及用于获得目标图像所在网页的内容；
数据信息识别模块库，包括若干类型的内容识别模块，用于解析网页内容时，识别对应于关键字的数据信息；解析网页前，如果检查至数据信息识别模块库缺少对应关键字的内容识别模块，则形成通知信息，或者从预设的模块源自动获取内容识别模块；
数据信息提取模块，用于输出对应于关键字的数据信息；
图像采集模块、活动识别模块，用于辅助隐私权属识别模块与用户进行交互授权。
上述实施例仅是用来说明本发明，而并非用作对本发明的限定。只要是依据本发明的技术实质，对上述实施例进行变化、变型等都将落在本发明的权利要求的范围内。
Claims (13)
1.一种图像关联信息检索方法，其特征在于，输入关键字与作为检索样本的源图像，关键字对应需要获取的、与目标图像关联的数据信息；基于图像检索，得到目标图像；通过图像检索进行初步筛选，再从初步筛选得到的网页中，解析目标图像所在的网页，通过关键字进行字面文字匹配检索，或者基于语义关联性，获得网页内容中与目标图像关联的、符合与关键字相关的数据信息。
2.根据权利要求1所述的图像关联信息检索方法，其特征在于，输入源图像后，判断源图像是否包含隐私敏感信息，如果是，则等待获取隐私敏感信息的授权后，再进行图像检索。
3.根据权利要求2所述的图像关联信息检索方法，其特征在于，根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权。
4.根据权利要求3所述的图像关联信息检索方法，其特征在于，如果隐私敏感信息为人脸，通过实时采集的影像进行身份识别，如果用户判定为所述人脸的所有者，则完成授权。
5.根据权利要求4所述的图像关联信息检索方法，其特征在于，如果隐私敏感信息为身份证，则先识别身份证，再针对身份证的人脸进行身份识别。
6.根据权利要求4所述的图像关联信息检索方法，其特征在于，如果隐私敏感信息为除身份证外的其他证件，则先识别当前证件，再识别身份证，然后针对身份证的人脸进行身份识别。
7.根据权利要求4所述的图像关联信息检索方法，其特征在于，如果隐私敏感信息为车牌，则先识别车辆行驶证，再识别身份证，然后针对身份证的人脸进行身份识别。
8.根据权利要求1所述的图像关联信息检索方法，其特征在于，解析网页前，检查是否具备对应关键字的内容识别模块，如果没有，则形成通知信息，或者从预设的模块源自动获取内容识别模块。
9.根据权利要求1所述的图像关联信息检索方法，其特征在于，如果与目标图像关联的数据信息设置为隐私状态，在未获得相应授权的情况下，无法被获得。
10.一种图像关联信息检索系统，其特征在于，执行权利要求1至9任一项所述的图像关联信息检索方法，包括：
交互模块，用于调用图像提交模块提交关键字与作为检索样本的源图像；
图像提交模块，用于提交源图像；
互联网信息检索模块，用于进行图像检索，以及用于获得目标图像所在网页的内容；
数据信息识别模块库，包括若干类型的内容识别模块，用于解析网页内容时，识别对应于关键字的数据信息；
数据信息提取模块，用于输出对应于关键字的数据信息。
11.根据权利要求10所述的图像关联信息检索系统，其特征在于，还包括隐私敏感识别模块，用于对图像提交模块输出的源图像进行是否包含隐私敏感信息的识别；
隐私权属识别模块，用于根据隐私敏感信息的类型，选择对应的隐私权属识别模式，与用户进行交互授权。
12.根据权利要求11所述的图像关联信息检索系统，其特征在于，还包括图像采集模块、活动识别模块，用于辅助隐私权属识别模块与用户进行交互授权。
13.根据权利要求10所述的图像关联信息检索系统，其特征在于，解析网页前，如果检查至数据信息识别模块库缺少对应关键字的内容识别模块，则形成通知信息，或者从预设的模块源自动获取内容识别模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811275427.7A CN109635137B (zh) | 2018-10-30 | 2018-10-30 | 一种图像关联信息检索方法与系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811275427.7A CN109635137B (zh) | 2018-10-30 | 2018-10-30 | 一种图像关联信息检索方法与系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109635137A CN109635137A (zh) | 2019-04-16 |
| CN109635137B true CN109635137B (zh) | 2022-05-17 |
Family
ID=66066796
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811275427.7A Active CN109635137B (zh) | 2018-10-30 | 2018-10-30 | 一种图像关联信息检索方法与系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109635137B (zh) |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104424257A (zh) * | 2013-08-28 | 2015-03-18 | 北大方正集团有限公司 | 信息检索装置和信息检索方法 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20030193582A1 (en) * | 2002-03-29 | 2003-10-16 | Fuji Photo Film Co., Ltd. | Method for storing an image, method and system for retrieving a registered image and method for performing image processing on a registered image |
| CN102855298B (zh) * | 2012-08-16 | 2016-08-03 | 熊兵 | 图像检索方法及系统 |
| CN104182671A (zh) * | 2013-05-23 | 2014-12-03 | 腾讯科技（深圳）有限公司 | 一种浏览器的隐私信息保护方法及装置 |
| CN106777177A (zh) * | 2016-12-22 | 2017-05-31 | 百度在线网络技术（北京）有限公司 | 检索方法和装置 |
| CN107480163B (zh) * | 2017-06-19 | 2020-03-24 | 西安电子科技大学 | 一种云环境下支持隐私保护的高效密文图像检索方法 |
| CN107315812B (zh) * | 2017-06-28 | 2019-10-25 | 武汉大学 | 一种云环境下基于词袋模型的图像安全检索方法 |
| CN107729573A (zh) * | 2017-11-24 | 2018-02-23 | 百度在线网络技术（北京）有限公司 | 信息推送方法和装置 |
| CN108256031B (zh) * | 2018-01-11 | 2021-09-10 | 北京理工大学 | 一种支持隐私保护的多源加密图像检索方法 |
-
2018
- 2018-10-30 CN CN201811275427.7A patent/CN109635137B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104424257A (zh) * | 2013-08-28 | 2015-03-18 | 北大方正集团有限公司 | 信息检索装置和信息检索方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109635137A (zh) | 2019-04-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11394708B2 (en) | Account information obtaining method, terminal, server and system | |
| CN109389723B (zh) | 利用人脸识别的访客管理方法、装置、计算机设备 | |
| CN111886842B (zh) | 使用基于阈值的匹配进行远程用户身份验证 | |
| CN101438297B (zh) | 身份验证及进入控制 | |
| JP5372369B2 (ja) | デジタル資産管理、ターゲットを定めたサーチ、及びデジタル透かしを使用するデスクトップサーチ | |
| CN110781460A (zh) | 版权认证方法、装置、设备、系统及计算机可读存储介质 | |
| CN110796054B (zh) | 证件验真方法及装置 | |
| JP2020137070A5 (zh) | ||
| CN108959884B (zh) | 人证核验装置和方法 | |
| CN107517180A (zh) | 登录方法和装置 | |
| Parveen et al. | Classification and evaluation of digital forensic tools | |
| EP4162376A1 (en) | Method for accessing multimedia content | |
| CN109635137B (zh) | 一种图像关联信息检索方法与系统 | |
| WO2018060863A1 (en) | Method and device for covering private data | |
| RU2701088C1 (ru) | Способ и система для доверенного безбумажного предъявления документов | |
| CN110737677B (zh) | 一种数据搜索系统及方法 | |
| US11853451B2 (en) | Controlled data access | |
| CN112041847A (zh) | 提供具有隐私标签的图像 | |
| CN108304563A (zh) | 图片处理方法、装置及设备 | |
| US20200364321A1 (en) | Method and apparatus for providing authentication using voice and facial data | |
| CN109165496B (zh) | 锁定状态解除方法及装置 | |
| WO2019237578A1 (zh) | 文件查看方法和装置及计算机可读存储介质 | |
| JP2005128922A (ja) | スパムメールフィルタリングシステム，方法，およびプログラム | |
| US20230222235A1 (en) | Method and system for redacting and retrieving data in a video | |
| US11470080B2 (en) | Method for performing a biometric function between a client and a server |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20190924 Address after: Room 803-1, No. 371 Xingxing Road, Xiaoshan Economic and Technological Development Zone, Hangzhou, Zhejiang 310000 Applicant after: Yaoling Artificial Intelligence (Zhejiang) Co.,Ltd. Address before: 361000 Fujian city of Xiamen Province torch torch high tech Zone Park torch torch Road Plaza South Building No. 56-58 203-68 Applicant before: XIAMEN DURUO TECHNOLOGY CO.,LTD. |
|
| TA01 | Transfer of patent application right | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220809 Address after: 2nd Floor, Building 10, Phase I Standard Workshop (Jinling Science and Technology Park), Ganzhou Economic and Technological Development Zone, Ganzhou City, Jiangxi Province, 341004 Patentee after: Ganzhou Yaoling Tianhua Digital Economy Technology Co., Ltd. Address before: Room 803-1, building 1, no.371, Mingxing Road, economic and Technological Development Zone, Xiaoshan District, Hangzhou City, Zhejiang Province 310000 Patentee before: Yaoling Artificial Intelligence (Zhejiang) Co.,Ltd. |
|
| TR01 | Transfer of patent right |