JP7388531B2 - 物品特定装置、物品特定方法、及びプログラム - Google Patents
物品特定装置、物品特定方法、及びプログラム Download PDFInfo
- Publication number
- JP7388531B2 JP7388531B2 JP2022501498A JP2022501498A JP7388531B2 JP 7388531 B2 JP7388531 B2 JP 7388531B2 JP 2022501498 A JP2022501498 A JP 2022501498A JP 2022501498 A JP2022501498 A JP 2022501498A JP 7388531 B2 JP7388531 B2 JP 7388531B2
- Authority
- JP
- Japan
- Prior art keywords
- article
- image
- imaging means
- size data
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 30
- 238000003384 imaging method Methods 0.000 claims description 126
- 230000006870 function Effects 0.000 claims description 14
- 238000010801 machine learning Methods 0.000 claims description 6
- 239000000047 product Substances 0.000 description 36
- 238000010586 diagram Methods 0.000 description 8
- 238000005286 illumination Methods 0.000 description 7
- 239000006227 byproduct Substances 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Image Analysis (AREA)
Description
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記物品特定装置は、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得する取得手段と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する画像処理手段と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する判定手段と、
を備える物品特定装置が提供される。
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記コンピュータは、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得し、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成し、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する、物品特定方法が提供される。
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記プログラムは、前記コンピュータに、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得する機能と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する機能と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する機能と、
を持たせるプログラムが提供される。
1.物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用される物品特定装置であって、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記物品特定装置は、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得する取得手段と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する画像処理手段と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する判定手段と、
を備える物品特定装置。
2.上記1に記載の物品特定装置において、
前記画像処理手段は、前記判定手段が前記第1サイズデータと前記第2サイズデータが基準を満たすか否かを判定する前に、前記画像処理により前記物品の品名を推定し、
前記判定手段は、前記物品の品名の推定結果に応じた前記基準を用いる物品特定装置。
3.上記1又は2に記載の物品特定装置において、
前記第1撮像手段は前記物品載置領域より上に位置しており、前記第2撮像手段は前記物品載置領域より下に位置している物品特定装置。
4.上記1~3のいずれか一項に記載の物品特定装置において、
前記基準は機械学習を用いて設定されている物品特定装置。
5.物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用されるコンピュータが行う方法であって、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記コンピュータは、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得し、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成し、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する、物品特定方法。
6.上記5に記載の物品特定方法において、
前記コンピュータは、
前記判定手段が前記第1サイズデータと前記第2サイズデータが基準を満たすか否かを判定する前に、前記画像処理により前記物品の品名を推定し、
前記物品の品名の推定結果に応じた前記基準を用いる物品特定方法。
7.上記5又は6に記載の物品特定方法において、
前記第1撮像手段は前記物品載置領域より上に位置しており、前記第2撮像手段は前記物品載置領域より下に位置している物品特定方法。
8.上記5~7のいずれか一項に記載の物品特定方法において、
前記基準は機械学習を用いて設定されている物品特定方法。
9.物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用されるコンピュータに用いられるプログラムで会って、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記プログラムは、前記コンピュータに、
前記第1撮像手段が生成した第1画像を取得するとともに、第2撮像手段が生成した第2画像を取得する機能と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する機能と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する機能と、
を持たせるプログラム。
10.上記9に記載のプログラムにおいて、
前記コンピュータに、
前記判定手段が前記第1サイズデータと前記第2サイズデータが基準を満たすか否かを判定する前に、前記画像処理により前記物品の品名を推定させ、
前記物品の品名の推定結果に応じた前記基準を用いさせるプログラム。
11.上記9又は10に記載のプログラムにおいて、
前記第1撮像手段は前記物品載置領域より上に位置しており、前記第2撮像手段は前記物品載置領域より下に位置しているプログラム。
12.上記9~11のいずれか一項に記載のプログラムにおいて、
前記基準は機械学習を用いて設定されているプログラム。
20 撮像部
30 外部装置
40 物品棚
42 前面フレーム
50 物品
110 取得部
120 画像処理部
130 判定部
132 基準記憶部
200 撮像装置
210 撮像ユニット
220 照明部
Claims (6)
- 物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用される物品特定装置であって、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記物品特定装置は、
前記第1撮像手段が生成した第1画像を取得するとともに、前記第2撮像手段が生成した第2画像を取得する取得手段と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する画像処理手段と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する判定手段と、
を備える物品特定装置。 - 請求項1に記載の物品特定装置において、
前記画像処理手段は、前記判定手段が前記第1サイズデータと前記第2サイズデータの関係が前記基準を満たすか否かを判定する前に、前記画像処理により前記物品の品名を推定し、
前記判定手段は、前記物品の品名の推定結果に応じた前記基準を用いる物品特定装置。 - 請求項1又は2に記載の物品特定装置において、
前記第1撮像手段は前記物品載置領域より上に位置しており、前記第2撮像手段は前記物品載置領域より下に位置している物品特定装置。 - 請求項1~3のいずれか一項に記載の物品特定装置において、
前記基準は機械学習を用いて設定されている物品特定装置。 - 物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用されるコンピュータが行う方法であって、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記コンピュータは、
前記第1撮像手段が生成した第1画像を取得するとともに、前記第2撮像手段が生成した第2画像を取得し、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成し、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する、物品特定方法。 - 物品載置領域及びその前方の少なくとも一方を撮影する第1撮像手段及び第2撮像手段と共に使用されるコンピュータに用いられるプログラムであって、
前記第1撮像手段、前記物品載置領域、及び前記第2撮像手段は、第1方向においてこの順に並んでおり、
前記プログラムは、前記コンピュータに、
前記第1撮像手段が生成した第1画像を取得するとともに、前記第2撮像手段が生成した第2画像を取得する機能と、
前記第1画像において物品が写っている領域の大きさを示す第1サイズデータを生成するとともに、前記第2画像において前記物品が写っている領域の大きさを示す第2サイズデータを生成する機能と、
前記第1サイズデータと前記第2サイズデータの関係が基準を満たすときに、前記第1画像及び前記第2画像の少なくとも一方を用いた画像処理による前記物品の品名の推定結果を正しいと判定する機能と、
を持たせるプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2020/006733 WO2021166146A1 (ja) | 2020-02-20 | 2020-02-20 | 物品特定装置、物品特定方法、及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021166146A1 JPWO2021166146A1 (ja) | 2021-08-26 |
JPWO2021166146A5 JPWO2021166146A5 (ja) | 2022-10-14 |
JP7388531B2 true JP7388531B2 (ja) | 2023-11-29 |
Family
ID=77391856
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022501498A Active JP7388531B2 (ja) | 2020-02-20 | 2020-02-20 | 物品特定装置、物品特定方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230064123A1 (ja) |
JP (1) | JP7388531B2 (ja) |
WO (1) | WO2021166146A1 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015138349A (ja) | 2014-01-21 | 2015-07-30 | 東芝テック株式会社 | 商品読取装置、販売データ処理装置および制御プログラム |
WO2018151008A1 (ja) | 2017-02-14 | 2018-08-23 | 日本電気株式会社 | 画像認識システム、画像認識方法及び記録媒体 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3596434B2 (ja) * | 2000-06-30 | 2004-12-02 | 株式会社ダイフク | 物品位置認識装置 |
-
2020
- 2020-02-20 US US17/797,944 patent/US20230064123A1/en active Pending
- 2020-02-20 JP JP2022501498A patent/JP7388531B2/ja active Active
- 2020-02-20 WO PCT/JP2020/006733 patent/WO2021166146A1/ja active Application Filing
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015138349A (ja) | 2014-01-21 | 2015-07-30 | 東芝テック株式会社 | 商品読取装置、販売データ処理装置および制御プログラム |
WO2018151008A1 (ja) | 2017-02-14 | 2018-08-23 | 日本電気株式会社 | 画像認識システム、画像認識方法及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
WO2021166146A1 (ja) | 2021-08-26 |
JPWO2021166146A1 (ja) | 2021-08-26 |
US20230064123A1 (en) | 2023-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7019357B2 (ja) | 棚情報推定装置及び情報処理プログラム | |
TWI618916B (zh) | 貨架庫存估測方法與系統 | |
EP2722810A1 (en) | Commodity display information tabulation method, data structure, and recording medium recording the same | |
US10929629B2 (en) | Positional relationship detection device and positional relationship detection system | |
JP2019094191A (ja) | 棚割生成プログラム、棚割生成方法及び棚割生成装置 | |
JP2024040297A (ja) | 物品推定装置、物品推定方法、及びプログラム | |
JP2022162153A (ja) | システム、処理方法及びプログラム | |
JP2020017253A (ja) | 商品管理システム及び商品管理方法 | |
JP2022528022A (ja) | スーパーマーケット商品棚上の商品の分析方法及びシステム | |
JP7388531B2 (ja) | 物品特定装置、物品特定方法、及びプログラム | |
JP6769554B2 (ja) | 物体識別装置、物体識別方法、計算装置、システムおよび記録媒体 | |
US8622284B1 (en) | Determining and recording the locations of objects | |
JP6536707B1 (ja) | 画像認識システム | |
JP7367846B2 (ja) | 商品検出装置、商品検出方法、及びプログラム | |
WO2021060032A1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
WO2021214880A1 (ja) | 処理装置、処理方法及びプログラム | |
JP7428244B2 (ja) | 商品特定装置、商品特定方法、およびプログラム | |
JP2018049584A (ja) | 食事量推定プログラム、食事量推定方法及び食事量推定装置 | |
CN111783627A (zh) | 商品存量确定方法、装置及设备 | |
JP7491366B2 (ja) | 身長推定装置、身長推定方法、及びプログラム | |
WO2021149221A1 (ja) | 価格情報決定装置、価格決定方法、及びプログラム | |
WO2021186704A1 (ja) | 身長推定装置、身長推定方法、及びプログラム | |
JP7428241B2 (ja) | 処理装置、処理方法及びプログラム | |
JP6769555B2 (ja) | 物品識別装置、物品識別方法、計算装置、システムおよびプログラム | |
WO2022244176A1 (ja) | 欠品検出装置、欠品検出方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220817 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220817 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231017 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231030 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7388531 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |