JP2020095408A - リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム - Google Patents
リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム Download PDFInfo
- Publication number
- JP2020095408A JP2020095408A JP2018231867A JP2018231867A JP2020095408A JP 2020095408 A JP2020095408 A JP 2020095408A JP 2018231867 A JP2018231867 A JP 2018231867A JP 2018231867 A JP2018231867 A JP 2018231867A JP 2020095408 A JP2020095408 A JP 2020095408A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- image
- actual size
- list
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/532—Query formulation, e.g. graphical querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
- G06F18/231—Hierarchical techniques, i.e. dividing or merging pattern sets so as to obtain a dendrogram
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/762—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using clustering, e.g. of similar faces in social networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/55—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30128—Food products
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Multimedia (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Geometry (AREA)
- Library & Information Science (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
また、被写体識別装置、及びプログラムによれば、同一属性のサイズ違いの被写体を精度よく識別することができる、という効果が得られる。
[参考文献2]J. Redmon, A. Fradai, “YOLO9000: Better, Faster, Stronger,” in CVPR, 2017.
まず、識別結果補正部36は、クエリ画像と共に入力された、画素あたりの実寸である実寸比と、被写体領域のサイズとを用いて、クエリ画像について識別対象の被写体の現実のサイズを推定する。次に、推定したクエリ画像の被写体の現実のサイズと、リストDB28に含まれるクラスタのうち識別された被写体と同一のクラスタの画像に含まれる被写体の現実のサイズと、に基づいて識別結果を補正し、クエリ画像に含まれる被写体を推定する。そして、識別結果補正部36は、推定したクエリ画像に含まれる被写体の位置、ラベル名、及び現実のサイズを最終的な識別結果として出力する。
・・・(1)
・・・(2)
・・・(3)
24 分類部
26 出力部
30 被写体識別装置
32 被写体領域推定部
34 被写体識別部
36 識別結果補正部
100、200 被写体識別システム
230 被写体識別装置
240 実寸比推定部
Claims (8)
- 複数の属性のいずれかの被写体を含む画像からなる画像群から、属性が同一であり、かつ、前記被写体の現実のサイズが異なる前記被写体を含む画像の各々を同一のクラスタに分類する分類部と、
少なくとも2つの前記画像が分類されたクラスタの各々を、同一の属性における前記被写体の現実のサイズが異なる画像のリストとして出力する出力部と、
を有するリスト生成装置。 - 前記分類部は、
前記画像群に含まれる画像毎に、前記画像に撮像された被写体の画像特徴、及び前記被写体に係るテキスト特徴のうち、少なくとも前記画像特徴に基づき、同一属性であると識別された画像が、前記被写体の現実のサイズによらず同一のクラスタに分類されるように前記分類を行う請求項1に記載のリスト生成装置。 - 前記出力部は、
前記クラスタの各々において、前記クラスタに分類された前記画像に含まれる被写体について予め与えられた現実のサイズと、前記画像の識別情報とを関連付けて、前記リストとして出力する請求項2に記載のリスト生成装置。 - クエリ画像を入力として、複数の属性のいずれかの被写体を含む画像からなる画像群に基づいて、前記クエリ画像に含まれる被写体を識別する被写体識別部と、
前記クエリ画像について推定した被写体の現実のサイズと、請求項1〜3の何れか1項にリスト生成装置によって出力された前記リストに含まれるクラスタのうち前記識別された被写体と同一のクラスタの画像に含まれる被写体の現実のサイズと、に基づいて識別結果を補正し、前記クエリ画像に含まれる被写体を推定する識別結果補正部と、
を含む被写体識別装置。 - 前記クエリ画像は3つ以上の被写体を含み、前記クエリ画像の前記被写体の各々について、前記クエリ画像中の前記被写体の画像上のサイズと前記識別された被写体の現実のサイズとに基づいて実寸比を算出し、算出結果に基づいて、前記クエリ画像に含まれる被写体の実寸比を推定する実寸比推定部を更に含み、
前記識別結果補正部は、推定した実寸比に基づいて前記クエリ画像についての被写体の現実のサイズを推定する請求項4に記載の被写体識別装置。 - 分類部が、複数の属性のいずれかの被写体を含む画像からなる画像群から、属性が同一であり、かつ、前記被写体の現実のサイズが異なる前記被写体を含む画像の各々を同一のクラスタに分類するステップと、
出力部が、少なくとも2つの前記画像が分類されたクラスタの各々を、同一の属性における前記被写体の現実のサイズが異なる画像のリストとして出力するステップと、
を有するリスト生成方法。 - コンピュータを、請求項1〜請求項3のいずれか1項に記載のリスト生成装置の各部として機能させるためのプログラム。
- コンピュータを、請求項4又は請求項5に記載の被写体識別装置の各部として機能させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018231867A JP7183753B2 (ja) | 2018-12-11 | 2018-12-11 | リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム |
PCT/JP2019/047005 WO2020121866A1 (ja) | 2018-12-11 | 2019-12-02 | リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム |
US17/312,367 US11809525B2 (en) | 2018-12-11 | 2019-12-02 | List generation device, photographic subject identification device, list generation method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018231867A JP7183753B2 (ja) | 2018-12-11 | 2018-12-11 | リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020095408A true JP2020095408A (ja) | 2020-06-18 |
JP7183753B2 JP7183753B2 (ja) | 2022-12-06 |
Family
ID=71075339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018231867A Active JP7183753B2 (ja) | 2018-12-11 | 2018-12-11 | リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11809525B2 (ja) |
JP (1) | JP7183753B2 (ja) |
WO (1) | WO2020121866A1 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2022044923A1 (ja) * | 2020-08-26 | 2022-03-03 | ||
WO2023062718A1 (ja) * | 2021-10-12 | 2023-04-20 | 日本電気株式会社 | 画像解析システム、画像解析方法およびプログラム |
WO2023127085A1 (ja) * | 2021-12-28 | 2023-07-06 | 日本電気株式会社 | 物体認識装置、物体認識方法、及び、記憶媒体 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020255227A1 (ja) * | 2019-06-17 | 2020-12-24 | 日本電信電話株式会社 | 学習装置、検索装置、学習方法、検索方法、学習プログラム、及び検索プログラム |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009251705A (ja) * | 2008-04-02 | 2009-10-29 | Nikon Systems Inc | 画像評価装置 |
JP2015138349A (ja) * | 2014-01-21 | 2015-07-30 | 東芝テック株式会社 | 商品読取装置、販売データ処理装置および制御プログラム |
JP2017220206A (ja) * | 2016-06-02 | 2017-12-14 | サインポスト株式会社 | 情報処理システム、情報処理方法、及びプログラム |
WO2018016214A1 (ja) * | 2016-07-21 | 2018-01-25 | 日本電気株式会社 | 画像処理装置、画像処理方法及びプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7764808B2 (en) * | 2003-03-24 | 2010-07-27 | Siemens Corporation | System and method for vehicle detection and tracking |
US20070058836A1 (en) * | 2005-09-15 | 2007-03-15 | Honeywell International Inc. | Object classification in video data |
US7725451B2 (en) * | 2006-01-23 | 2010-05-25 | Microsoft Corporation | Generating clusters of images for search results |
US8352465B1 (en) * | 2009-09-03 | 2013-01-08 | Google Inc. | Grouping of image search results |
US9025888B1 (en) * | 2012-02-17 | 2015-05-05 | Google Inc. | Interface to facilitate browsing of items of visual content |
BR112013015346B1 (pt) * | 2013-06-13 | 2021-10-13 | Sicpa Holding Sa | Método e dispositivo para classificar um objeto em dados de imagem em uma dentre um conjunto de classes usando um classificador, meio legível por computador não transitório e sistema |
US10489739B2 (en) * | 2013-09-18 | 2019-11-26 | Simpler Postage, Inc. | System and method for object shipping automation |
US20150149952A1 (en) * | 2013-11-27 | 2015-05-28 | Qualcomm Incorporated | Text input for abugida writing systems with conjuncts |
JP6055435B2 (ja) | 2014-04-10 | 2016-12-27 | 日本電信電話株式会社 | 被写体認識装置、被写体認識方法及び被写体認識プログラム |
US9639806B2 (en) * | 2014-04-15 | 2017-05-02 | Xerox Corporation | System and method for predicting iconicity of an image |
US10002310B2 (en) * | 2014-04-29 | 2018-06-19 | At&T Intellectual Property I, L.P. | Method and apparatus for organizing media content |
JP6801676B2 (ja) * | 2016-01-21 | 2020-12-16 | 日本電気株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
US10699284B2 (en) * | 2016-08-10 | 2020-06-30 | Label Insight, Inc. | Information management system for product ingredients to fill gaps in the market and to determine proper attribution |
US11126653B2 (en) * | 2017-09-22 | 2021-09-21 | Pinterest, Inc. | Mixed type image based search results |
-
2018
- 2018-12-11 JP JP2018231867A patent/JP7183753B2/ja active Active
-
2019
- 2019-12-02 WO PCT/JP2019/047005 patent/WO2020121866A1/ja active Application Filing
- 2019-12-02 US US17/312,367 patent/US11809525B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009251705A (ja) * | 2008-04-02 | 2009-10-29 | Nikon Systems Inc | 画像評価装置 |
JP2015138349A (ja) * | 2014-01-21 | 2015-07-30 | 東芝テック株式会社 | 商品読取装置、販売データ処理装置および制御プログラム |
JP2017220206A (ja) * | 2016-06-02 | 2017-12-14 | サインポスト株式会社 | 情報処理システム、情報処理方法、及びプログラム |
WO2018016214A1 (ja) * | 2016-07-21 | 2018-01-25 | 日本電気株式会社 | 画像処理装置、画像処理方法及びプログラム |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2022044923A1 (ja) * | 2020-08-26 | 2022-03-03 | ||
WO2022044923A1 (ja) * | 2020-08-26 | 2022-03-03 | 株式会社Nttドコモ | 情報処理装置 |
JP7412575B2 (ja) | 2020-08-26 | 2024-01-12 | 株式会社Nttドコモ | 情報処理装置 |
WO2023062718A1 (ja) * | 2021-10-12 | 2023-04-20 | 日本電気株式会社 | 画像解析システム、画像解析方法およびプログラム |
WO2023127085A1 (ja) * | 2021-12-28 | 2023-07-06 | 日本電気株式会社 | 物体認識装置、物体認識方法、及び、記憶媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP7183753B2 (ja) | 2022-12-06 |
US20220019841A1 (en) | 2022-01-20 |
US11809525B2 (en) | 2023-11-07 |
WO2020121866A1 (ja) | 2020-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020121866A1 (ja) | リスト生成装置、被写体識別装置、リスト生成方法、及びプログラム | |
JP6354589B2 (ja) | 物体識別装置、方法及びプログラム | |
JP6517666B2 (ja) | 物品管理装置、その方法、及びそのプログラム | |
US20150213328A1 (en) | Object identification apparatus, object identification method, and program | |
US9679221B2 (en) | Object identification apparatus, object identification method, and program | |
US9424466B2 (en) | Shoe image retrieval apparatus and method using matching pair | |
US9916513B2 (en) | Method for processing image and computer-readable non-transitory recording medium storing program | |
US10699156B2 (en) | Method and a device for image matching | |
US8718362B2 (en) | Appearance and context based object classification in images | |
US8027978B2 (en) | Image search method, apparatus, and program | |
JP2019045909A (ja) | 画像認識システム | |
US9342753B2 (en) | Image processing apparatus, image processing method, and computer program product | |
CN109685002B (zh) | 一种数据集采集方法、系统以及电子装置 | |
JP2012159990A (ja) | 物体識別システムおよび方法、並びに、特徴点位置抽出システムおよび方法 | |
JPWO2019008734A1 (ja) | 物体識別装置、物体識別方法、計算装置、システムおよび記録媒体 | |
JP6855175B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
KR20160148806A (ko) | 방향정보를 이용한 객체 검출기 생성 방법, 이를 이용한 객체 검출 장치 및 방법 | |
JP6717769B2 (ja) | 情報処理装置及びプログラム | |
TW201040847A (en) | Method of identifying objects in image | |
JP6964296B2 (ja) | 領域抽出装置、方法、及びプログラム | |
JP6919276B2 (ja) | 画像表示プログラム、画像表示装置および画像表示方法 | |
Hema et al. | THE IDENTIFICATION OF PILL USING FEATURE EXTRACTION IN IMAGE MINING. | |
CN114565750A (zh) | 一种纸质试题的处理方法和系统 | |
EP2921993A1 (en) | Computer-implemented system and method for marking objects on an image | |
JP2015219757A (ja) | 画像登録方法、装置並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210312 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220517 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220714 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221025 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221107 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7183753 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |