JP4943207B2 - 映像検索装置 - Google Patents
映像検索装置 Download PDFInfo
- Publication number
- JP4943207B2 JP4943207B2 JP2007091461A JP2007091461A JP4943207B2 JP 4943207 B2 JP4943207 B2 JP 4943207B2 JP 2007091461 A JP2007091461 A JP 2007091461A JP 2007091461 A JP2007091461 A JP 2007091461A JP 4943207 B2 JP4943207 B2 JP 4943207B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- similar
- similarity
- feature vector
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 239000013598 vector Substances 0.000 claims description 92
- 238000004364 calculation method Methods 0.000 claims description 29
- 229960001716 benzalkonium Drugs 0.000 claims description 2
- CYDRXTMLKJDRQH-UHFFFAOYSA-N benzododecinium Chemical compound CCCCCCCCCCCC[N+](C)(C)CC1=CC=CC=C1 CYDRXTMLKJDRQH-UHFFFAOYSA-N 0.000 claims description 2
- 238000001914 filtration Methods 0.000 claims 1
- 238000000034 method Methods 0.000 description 13
- 239000000284 extract Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 7
- 230000008921 facial expression Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 230000000386 athletic effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Description
(実施の形態1)
実施の形態1における映像検索装置について、図1乃至6を用いて説明する。図1は、映像検索装置の構成図である。図1において、映像検索装置100は、特徴ベクトル算出手段101、登録手段102、類似検索手段103、画像分類手段104、特徴選択手段105、類似度算出手段106、結果表示手段107を有する。特徴ベクトル算出手段101は、撮像装置から入力される画像から顔領域の画像(以下、顔画像)を抽出して、さらに特徴ベクトルを算出する。登録手段102は、顔画像とこの顔画像から算出した特徴ベクトルを互いに関連付けてデータベース1000に登録する。類似検索手段103は、ユーザからの問合せ画像を基に類似する複数の画像をデータベース1000から検索するものであり、本実施の形態では、ユーザから入力される問合せ画像から顔画像(以下、問合せ顔画像)を抽出して、さらに特徴ベクトルを算出し、算出した特徴ベクトルを用いてデータベース1000に登録されている顔画像(以下、登録顔画像)から類似する複数の顔画像を検索する。また、類似検索手段103は、問合せ顔画像から算出される特徴ベクトルと類似検索手段103により検索される複数の類似顔画像の特徴ベクトルとを用いて、複数の類似度を算出する。当該類似度の算出については後述する。画像分類手段104は、類似検索手段103により検索される複数の類似顔画像を、その類似度に応じて、第1の類似画像群と第2の類似画像群とに分類するものであり、本実施の形態では、類似検索手段103により算出される類似度が高い第1の類似画像群とこの第1の類似画像群より類似度が低い第2の類似画像群との、2つの画像群に分類する。特徴選択手段105は、類似検索手段103により検索される複数の類似顔画像それぞれが有する複数の特徴ベクトル中から特徴ベクトルを再構成するものであり、本実施の形態では、画像分類手段104により分類される第1の類似画像群それぞれの特徴ベクトル間で互いに異なる特徴ベクトルの成分を除いた成分で問合せ顔画像及び第2の類似画像群の類似顔画像の特徴ベクトルを再構成する。類似度算出手段106は、問合せ画像と、問合せ画像との比較の対象となる対象画像との類似度を、再構成した特徴ベクトルにより、算出するものであり、本実施の形態では、問合せ顔画像及び第2の類似画像群の類似顔画像の類似度を再構成した特徴ベクトルにより算出する。結果表示手段107は、類似度算出手段106により算出される類似度に応じて画像を表示する。なお、本実施の形態では、映像検索装置が結果表示手段を有しているが、必ずしも、映像検索装置が結果表示手段107を有する必要は無く、映像検索装置100とは別の装置としても良い。
実施の形態2における映像検索装置について、図6及び7を用いて説明する。図6は、映像検索装置の構成図である。図6において、図1と同じ構成要素については同じ符号を用い、説明を省略する。図6において、映像検索装置600は、実施の形態1の映像検索装置100と同様に、特徴ベクトル算出手段100、登録手段102、類似検索手段103、画像分類手段104、特徴選択手段105、類似度算出手段106、結果表示手段107を含む。本実施の形態では、特徴ベクトル算出手段101は、撮像装置が撮影した一連の時系列画像から同一の移動体の顔画像を抽出して、さらに特徴ベクトルを算出し、登録手段102は、求めた特徴ベクトルを顔画像と関連付け、さらに同一の移動体の一連の時系列的な顔画像をデータベース1000に登録する。また、本実施の形態では、類似画像検索手段103により検索される複数の類似画像それぞれが有する特徴ベクトルを基に同一の移動体の一連の時系列的な顔画像をデータベース1000から取得する移動体画像取得手段601を有する。
101 特徴ベクトル算出手段
102 登録手段
103 類似検索手段
104 画像分類手段
105 特徴選択手段
106 類似度算出手段
107 結果表示手段
401 本人の顔画像の類似度の度数分布
402 他人の顔画像の類似度の度数分布
403 第1の類似画像群
404 第2の類似画像群
500 映像検索装置
501 条件指定手段
502 検索対象取得手段
600 映像検索装置
601 移動体画像取得手段
801 例示画像提示部
802 検索属性指定部
803 特徴ベクトル抽出部
804 類似度計算部
805 表示部
806 顔画像データベース
1000 データベース
Claims (5)
- 問合せ画像を基に類似する複数の画像をデータベースから検索する類似画像検索手段と、
前記類似画像検索手段により検索される複数の類似画像のうち、前記問合せ画像との類似度が所定の閾値以上である類似画像それぞれが有する特徴ベクトルを基に第1の特徴ベクトルを再構成する特徴選択手段と、
前記問合せ画像と、前記問合せ画像との比較の対象となる対象画像と、の類似度を前記再構成した第1の特徴ベクトルにより算出する類似度算出手段と、を備えることを特徴とする映像検索装置。 - 問合せ画像を基に類似する複数の画像をデータベースから検索する類似画像検索手段と、
前記類似画像検索手段により検索される複数の類似画像を、前記複数の類似画像の類似度に応じて、第1の類似画像群と第2の類似画像群とに分類する類似画像分類手段と、
前記第1の類似画像群の複数の類似画像それぞれが有する複数の特徴ベクトルを基に第1の特徴ベクトルを再構成する特徴選択手段と、
前記問合せ画像と、前記第2の類似画像群の類似画像との類似度を前記再構成した第1の特徴ベクトルにより算出する類似度算出手段と、
を備えた映像検索装置。 - 検索対象となる画像の条件である絞込み条件を指定する条件指定手段と、
前記絞り込み条件を満たす画像を前記データベースから取得する検索対象取得手段と、を備え、
前記類似度算出手段は、前記絞り込み条件を満たす画像を前記対象画像として、前記問合せ画像と前記対象画像との類似度を前記再構成した第1の特徴ベクトルにより算出することを特徴とする請求項1又は2に記載の映像検索装置。 - 前記特徴選択手段は、前記複数の特徴ベクトル間で分散が大きい特徴ベクトル成分を除いた特徴ベクトル成分で前記第1の特徴ベクトルを再構成することを特徴とする請求項1又は2に記載の映像検索装置。
- さらに、前記類似画像検索手段により検索される複数の類似画像のうち、前記問合せ画像との類似度が前記所定の閾値以上である類似画像それぞれと同一物 として予め関連付けられた時系列的な画像が有する特徴ベクトルを前記データベースから取得する移動体画像取得手段を備え、
前記特徴選択手段は、前記移動体画像取得手段において取得された特徴ベクトルを基に第1の特徴ベクトルを再構成することを特徴とする請求項1に記載の映像検索装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007091461A JP4943207B2 (ja) | 2007-03-30 | 2007-03-30 | 映像検索装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007091461A JP4943207B2 (ja) | 2007-03-30 | 2007-03-30 | 映像検索装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008250693A JP2008250693A (ja) | 2008-10-16 |
JP4943207B2 true JP4943207B2 (ja) | 2012-05-30 |
Family
ID=39975559
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007091461A Expired - Fee Related JP4943207B2 (ja) | 2007-03-30 | 2007-03-30 | 映像検索装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4943207B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5227911B2 (ja) * | 2009-07-22 | 2013-07-03 | 株式会社日立国際電気 | 監視映像検索装置及び監視システム |
JP5202463B2 (ja) * | 2009-07-23 | 2013-06-05 | 株式会社日立製作所 | 監視映像表示システム |
JP5549418B2 (ja) * | 2010-06-25 | 2014-07-16 | オムロン株式会社 | 情報処理装置および方法、並びにプログラム |
JP5937823B2 (ja) * | 2011-12-28 | 2016-06-22 | グローリー株式会社 | 画像照合処理装置、画像照合処理方法及び画像照合処理プログラム |
US11749021B2 (en) | 2019-05-27 | 2023-09-05 | Nec Corporation | Retrieval device, control method, and non-transitory storage medium |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11119795A (ja) * | 1997-10-16 | 1999-04-30 | Nec Corp | 特徴量の濃縮合成方法、及び特徴量の濃縮合成装置 |
JP2002245560A (ja) * | 2001-02-19 | 2002-08-30 | Matsushita Electric Ind Co Ltd | 監視システム |
JP2006269651A (ja) * | 2005-03-23 | 2006-10-05 | Canon Inc | 画像抽出装置および方法、並びにそれらを有する露光装置および方法 |
JP2006301995A (ja) * | 2005-04-21 | 2006-11-02 | Matsushita Electric Ind Co Ltd | 人物検索装置及び人物検索方法 |
-
2007
- 2007-03-30 JP JP2007091461A patent/JP4943207B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2008250693A (ja) | 2008-10-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109934176B (zh) | 行人识别系统、识别方法及计算机可读存储介质 | |
CN111639616B (zh) | 一种基于深度学习的重身份识别方法 | |
JP4777059B2 (ja) | 画像検索装置および画像検索方法 | |
JP2007317062A (ja) | 人物認識装置及びその方法 | |
CN110796074B (zh) | 一种基于时空数据融合的行人再识别方法 | |
KR101943433B1 (ko) | 몽타주 인식을 통한 실시간 수배자 검출 시스템 | |
JP4943207B2 (ja) | 映像検索装置 | |
KR20170077366A (ko) | 얼굴 인식 시스템 및 방법 | |
US11113838B2 (en) | Deep learning based tattoo detection system with optimized data labeling for offline and real-time processing | |
US20200258236A1 (en) | Person segmentations for background replacements | |
JP2020107354A (ja) | 解析装置、解析方法及びプログラム | |
JP5047382B2 (ja) | ビデオ監視時に移動物体を分類するシステムおよび方法 | |
JP2009027393A (ja) | 映像検索システムおよび人物検索方法 | |
EP3246849A1 (en) | Method for analyzing video data | |
JP2019020777A (ja) | 情報処理装置、及び、情報処理装置の制御方法、コンピュータプログラム、記憶媒体 | |
CN111310605A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
Dileep et al. | Suspicious human activity recognition using 2D pose estimation and convolutional neural network | |
Kaur et al. | Violence detection in videos using deep learning: A survey | |
JP2019082959A (ja) | 情報処理装置、情報処理方法及びプログラム | |
CN117351405A (zh) | 一种人群行为分析系统及方法 | |
Mucha et al. | Depth and thermal images in face detection-a detailed comparison between image modalities | |
Ruprah et al. | Crime Prediction Based on Person-Weapons Relation using Deep Learning Techniques | |
Rachna et al. | Real-time violence detection using deep neural networks and DTW | |
Chamasemani et al. | A framework for automatic video surveillance indexing and retrieval | |
Teja et al. | Man-on-man brutality identification on video data using Haar cascade algorithm |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100114 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111028 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111122 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120207 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120229 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4943207 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150309 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |