JP2020135580A - 検索装置、検索方法、およびプログラム - Google Patents
検索装置、検索方法、およびプログラム Download PDFInfo
- Publication number
- JP2020135580A JP2020135580A JP2019030099A JP2019030099A JP2020135580A JP 2020135580 A JP2020135580 A JP 2020135580A JP 2019030099 A JP2019030099 A JP 2019030099A JP 2019030099 A JP2019030099 A JP 2019030099A JP 2020135580 A JP2020135580 A JP 2020135580A
- Authority
- JP
- Japan
- Prior art keywords
- image
- search
- image data
- person
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/535—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/538—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/50—Maintenance of biometric data or enrolment thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】選択対象の画像データが格納される第1のデータベースと、検索対象人物を示すターゲット画像と、検索対象人物の検索を補助する補助画像を含む補助画像群とが指定された際に、第1のデータベースに格納された選択対象の画像データから顔を検出された顔がターゲット画像および補助画像群に含まれるかを評価する顔認識部と、顔認識部による評価結果を用いて検索対象人物が画像データに写っているかを判定する類似度計算部と、類似度計算部による判定結果が格納される第2のデータベースと、第2のデータベースに格納された判定結果に基づいて、検索対象人物が写っていると判定された画像データを第1のデータベースから取得し、取得した画像データを含む検索結果を出力する検索結果出力部と、を備える検索装置とする。
【選択図】 図1
Description
まず、本発明の第1の実施形態に係る検索装置について図面を参照しながら説明する。本実施形態の検索装置は、データベース(DB:Database)に格納された画像や類似度を用いて、少なくとも一つの選択対象の画像データの中から検索対象人物が写っている画像データを検索する。
図1は、本実施形態の検索装置10の構成の一例を示すブロック図である。図1のように、検索装置10は、顔認識部11、画像DB12、類似度計算部13、類似度DB14、および検索結果出力部15を備える。検索装置10は、入力装置110と出力装置150に接続される。
次に、類似度DB14に格納される判定結果について一例を挙げて説明する。図2は、類似度DB14に格納される判定結果の一例の判定結果テーブル140である。判定結果テーブル140には、一例として、n個の選択対象の画像データ(画像1〜n)に関する判定結果が格納される。
次に、本実施形態の検索装置10の動作について図面を参照しながら説明する。図5は、検索装置10の動作について説明するためのフローチャートである。図5のフローチャートに沿った説明においては、検索装置10を動作の主体とする。
次に、本発明の第2の実施形態に係る検索装置について図面を参照しながら説明する。本実施形態は、画像DBに格納された画像データの中からターゲット画像や補助画像の候補の画像(候補画像とも呼ぶ)を生成し、生成した候補画像をユーザに提案する点で第1の実施形態とは異なる。
次に、本実施形態の検索装置20の動作について図面を参照しながら説明する。図9は、検索装置20の動作について説明するためのフローチャートである。図9のフローチャートに沿った説明においては、検索装置20を動作の主体とする。
ここで、本発明の各実施形態に係る検索装置の処理を実行するハードウェア構成について、図10の情報処理装置90を一例として挙げて説明する。なお、図10の情報処理装置90は、各実施形態の検索装置の処理を実行するための構成例であって、本発明の範囲を限定するものではない。
11、21 顔認識部
12、22 画像DB
13、23 類似度計算部
14、24 類似度DB
15、25 検索結果出力部
26 候補画像提案部
110、210 入力装置
150、250 出力装置
Claims (10)
- 少なくとも一つの選択対象の画像データが格納される第1のデータベースと、
前記第1のデータベースに格納された前記選択対象の画像データから顔を検出し、検索対象人物を示すターゲット画像と、前記検索対象人物の検索を補助する少なくとも一つの補助画像を含む補助画像群とが指定された際に、前記選択対象の画像データから検出された顔が前記ターゲット画像および前記補助画像群に含まれるかを評価する顔認識手段と、
前記顔認識手段による評価結果を用いて前記検索対象人物が前記画像データに写っているかを判定する類似度計算手段と、
前記類似度計算手段による判定結果が格納される第2のデータベースと、
前記第2のデータベースに格納された判定結果に基づいて、前記検索対象人物が写っていると判定された前記画像データを前記第1のデータベースから取得し、取得した前記画像データを含む検索結果を出力する検索結果出力手段と、を備える検索装置。 - 前記顔認識手段には、
前記検索対象人物の関連人物を示す画像が前記補助画像として入力される請求項1に記載の検索装置。 - 前記顔認識手段は、
前記画像データから検出した顔と、前記ターゲット画像および前記補助画像群に含まれる人物の顔との一致度を計算し、
前記類似度計算手段は、
前記ターゲット画像および前記補助画像群について算出された前記一致度に基づいて、前記検索対象人物が前記画像データに写っているか否かを判定する請求項1または2に記載の検索装置。 - 前記第1のデータベースには、
前記選択対象の画像データのメタデータが格納され、
前記類似度計算手段は、
前記選択対象の画像データのメタデータを前記第1のデータベースから取得し、取得した前記選択対象の画像データのメタデータと、前記ターゲット画像および前記補助画像群について算出された前記一致度とに基づいて前記検索対象人物が前記画像データに写っているかを判定する請求項3に記載の検索装置。 - 前記類似度計算手段は、
前記選択対象の画像データのメタデータと、前記ターゲット画像および前記補助画像群について算出された前記一致度とに基づいて、前記検索対象人物が写っている確度を示す類似度判定を前記画像データに付与する請求項4に記載の検索装置。 - モニタを有する出力装置に接続され、
前記検索結果出力手段は、
前記検索結果を前記出力装置に出力し、
前記出力装置は、
前記検索結果に含まれる前記画像データを選択させるための第1のユーザインタフェースを前記モニタに表示させる請求項5に記載の検索装置。 - 前記顔認識手段によって検出される顔を含む画像を用いて前記ターゲット画像および前記補助画像の候補画像を生成し、生成した前記候補画像を出力する候補画像提案手段を備え、
前記顔認識手段は、
前記第1のデータベースに格納された少なくとも一つの前記画像データを取得し、取得した前記画像データから顔を検出し、検出された顔を含む前記画像データを前記候補画像提案手段に出力し、
前記候補画像提案手段は、
前記顔認識手段が出力した前記画像データを用いて前記候補画像を生成する請求項1乃至6のいずれか一項に記載の検索装置。 - 前記候補画像提案手段は、
モニタを有する入力装置に接続され、前記候補画像を前記入力装置に出力し、
前記入力装置は、
前記候補画像の中から前記ターゲット画像および前記補助画像を選択させるための第2のユーザインタフェースを前記モニタに表示させ、前記第2のユーザインタフェースを介して選択された前記候補画像のそれぞれを前記ターゲット画像および前記補助画像のいずれかに指定し、指定された前記ターゲット画像および前記補助画像に関する情報を前記顔認識手段に出力する請求項7に記載の検索装置。 - 第1のデータベースに格納された少なくとも一つの選択対象の画像データから顔を検出し、
検索対象人物を示すターゲット画像と、前記検索対象人物の検索を補助する少なくとも一つの補助画像を含む補助画像群とが指定された際に、前記選択対象の画像データから検出された顔が前記ターゲット画像および前記補助画像群に含まれるかを評価し、
評価結果を用いて前記検索対象人物が前記画像データに写っているかを判定し、
第2のデータベースに判定結果を格納し、
前記第2のデータベースに格納された判定結果に基づいて、前記検索対象人物が写っていると判定された前記画像データを前記第1のデータベースから取得し、取得した前記画像データを含む検索結果を出力する検索方法。 - 第1のデータベースに格納された少なくとも一つの選択対象の画像データから顔を検出する処理と、
検索対象人物を示すターゲット画像と、前記検索対象人物の検索を補助する少なくとも一つの補助画像を含む補助画像群とが指定された際に、前記選択対象の画像データから検出された顔が前記ターゲット画像および前記補助画像群に含まれるかを評価する処理と、
評価結果を用いて前記検索対象人物が前記画像データに写っているかを判定する処理と、
第2のデータベースに判定結果を格納する処理と、
前記第2のデータベースに格納された判定結果に基づいて、前記検索対象人物が写っていると判定された前記画像データを前記第1のデータベースから取得し、取得した前記画像データを含む検索結果を出力する処理とをコンピュータに実行させるプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019030099A JP6635208B1 (ja) | 2019-02-22 | 2019-02-22 | 検索装置、検索方法、およびプログラム |
US16/789,521 US11308151B2 (en) | 2019-02-22 | 2020-02-13 | Search system, search method, and program recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019030099A JP6635208B1 (ja) | 2019-02-22 | 2019-02-22 | 検索装置、検索方法、およびプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019227490A Division JP6844681B2 (ja) | 2019-12-17 | 2019-12-17 | 検索装置、検索方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6635208B1 JP6635208B1 (ja) | 2020-01-22 |
JP2020135580A true JP2020135580A (ja) | 2020-08-31 |
Family
ID=69166814
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019030099A Active JP6635208B1 (ja) | 2019-02-22 | 2019-02-22 | 検索装置、検索方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11308151B2 (ja) |
JP (1) | JP6635208B1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11227007B2 (en) * | 2019-07-23 | 2022-01-18 | Obayashi Corporation | System, method, and computer-readable medium for managing image |
JP7463853B2 (ja) | 2020-05-29 | 2024-04-09 | 日本電気株式会社 | ビンゴシステム、ビンゴカード生成装置、方法、およびプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008148053A (ja) * | 2006-12-11 | 2008-06-26 | Seiko Epson Corp | 画像処理装置、画像処理サーバ、画像処理方法および制御プログラム |
JP2014102715A (ja) * | 2012-11-21 | 2014-06-05 | Dainippon Printing Co Ltd | スクールフォト管理サーバ、スクールフォト管理システム、スクールフォト管理方法、プログラム、及び記録媒体 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5128880B2 (ja) | 2007-08-30 | 2013-01-23 | オリンパスイメージング株式会社 | 画像取扱装置 |
US8670597B2 (en) * | 2009-08-07 | 2014-03-11 | Google Inc. | Facial recognition with social network aiding |
JP5477017B2 (ja) | 2010-01-26 | 2014-04-23 | ソニー株式会社 | 電子機器、コンテンツ送信方法及びプログラム |
US9225701B2 (en) * | 2011-04-18 | 2015-12-29 | Intelmate Llc | Secure communication systems and methods |
KR101936802B1 (ko) * | 2012-07-20 | 2019-01-09 | 한국전자통신연구원 | 얼굴인식 기반의 개인정보보호 장치 및 방법 |
JP6139364B2 (ja) | 2013-10-02 | 2017-05-31 | 株式会社東芝 | 人物特定装置、人物特定方法及びプログラム |
GB2516512B (en) * | 2013-10-23 | 2015-10-14 | Imagination Tech Ltd | Face detection |
US9177194B2 (en) * | 2014-01-29 | 2015-11-03 | Sony Corporation | System and method for visually distinguishing faces in a digital image |
CN104133899B (zh) * | 2014-08-01 | 2017-10-13 | 百度在线网络技术(北京)有限公司 | 图片搜索库的生成方法和装置、图片搜索方法和装置 |
CN105374306A (zh) * | 2015-12-17 | 2016-03-02 | 英业达科技有限公司 | 广告装置及具有身份识别功能的广告播放方法 |
US9918006B2 (en) * | 2016-05-20 | 2018-03-13 | International Business Machines Corporation | Device, system and method for cognitive image capture |
US10734027B2 (en) * | 2017-02-16 | 2020-08-04 | Fusit, Inc. | System and methods for concatenating video sequences using face detection |
JP6648769B2 (ja) * | 2018-01-12 | 2020-02-14 | 日本電気株式会社 | 顔認証装置 |
US10642886B2 (en) * | 2018-02-14 | 2020-05-05 | Commvault Systems, Inc. | Targeted search of backup data using facial recognition |
JP7264166B2 (ja) * | 2018-07-31 | 2023-04-25 | 日本電気株式会社 | 情報処理装置、情報処理方法及び記録媒体及びプログラム |
US10455365B1 (en) * | 2018-09-06 | 2019-10-22 | Cognizant Technology Solutions India Pvt. Ltd. | System and method for optimized tracking and identification of user equipment |
CN109753927A (zh) * | 2019-01-02 | 2019-05-14 | 腾讯科技(深圳)有限公司 | 一种人脸检测方法和装置 |
-
2019
- 2019-02-22 JP JP2019030099A patent/JP6635208B1/ja active Active
-
2020
- 2020-02-13 US US16/789,521 patent/US11308151B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008148053A (ja) * | 2006-12-11 | 2008-06-26 | Seiko Epson Corp | 画像処理装置、画像処理サーバ、画像処理方法および制御プログラム |
JP2014102715A (ja) * | 2012-11-21 | 2014-06-05 | Dainippon Printing Co Ltd | スクールフォト管理サーバ、スクールフォト管理システム、スクールフォト管理方法、プログラム、及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
US20200272654A1 (en) | 2020-08-27 |
US11308151B2 (en) | 2022-04-19 |
JP6635208B1 (ja) | 2020-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101346539B1 (ko) | 얼굴들을 상관시킴으로써 디지털 이미지들을 구조화하기 | |
US9665959B2 (en) | Composite image creation assist apparatus using images of users other than target user, and non-transitory computer readable recording medium | |
JP5816393B1 (ja) | 商品評価装置、方法及びプログラム | |
JP2008165701A (ja) | 画像処理装置、電子機器、画像処理方法、及び、プログラム | |
CN110175849B (zh) | 收款方法、装置、设备、服务器及系统 | |
JP2008131330A (ja) | 画像表示装置および画像表示方法 | |
JP7419080B2 (ja) | コンピュータシステムおよびプログラム | |
JP6635208B1 (ja) | 検索装置、検索方法、およびプログラム | |
US11244186B2 (en) | Information processing apparatus, method and storage medium | |
US9195312B2 (en) | Information processing apparatus, conference system, and information processing method | |
JP7104292B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
JP7409134B2 (ja) | 画像処理方法、画像処理プログラム、および画像処理装置 | |
CN113674313A (zh) | 一种行人跟踪方法、装置、存储介质和电子设备 | |
JP6410427B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6844681B2 (ja) | 検索装置、検索方法、およびプログラム | |
WO2018000299A1 (en) | Method for assisting acquisition of picture by device | |
JP6499750B2 (ja) | 顔照合システムおよび顔照合方法 | |
JPWO2017146229A1 (ja) | 情報処理装置、容疑者情報生成方法及びプログラム | |
JP2016218766A (ja) | 情報処理装置及び情報処理プログラム | |
US20180189602A1 (en) | Method of and system for determining and selecting media representing event diversity | |
JP2011082864A (ja) | 画像データ管理装置、方法及びプログラム | |
JP6773144B2 (ja) | コンテンツ選択装置、コンテンツ選択方法、コンテンツ選択システム及びプログラム | |
US20240185641A1 (en) | Fingerprint information processing apparatus, fingerprint information processing method, and non-transitory storage medium | |
JP2019016255A (ja) | 情報処理装置、プログラム及び情報処理方法 | |
US20230267727A1 (en) | Image analysis apparatus, image analysis method, and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190917 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191119 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6635208 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |