JP2014092960A - 商品認識装置及び商品認識プログラム - Google Patents
商品認識装置及び商品認識プログラム Download PDFInfo
- Publication number
- JP2014092960A JP2014092960A JP2012243485A JP2012243485A JP2014092960A JP 2014092960 A JP2014092960 A JP 2014092960A JP 2012243485 A JP2012243485 A JP 2012243485A JP 2012243485 A JP2012243485 A JP 2012243485A JP 2014092960 A JP2014092960 A JP 2014092960A
- Authority
- JP
- Japan
- Prior art keywords
- product
- distance
- feature amount
- recognition
- similarity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Cash Registers Or Receiving Machines (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】特徴量抽出手段は、商品を撮影する撮像部で撮影された画像からその画像に含まれる商品の外観特徴量を抽出する。類似度算出手段は、特徴量抽出手段により抽出された外観特徴量を、認識対象商品毎にその商品の表面情報を表わす特徴量データが保存される認識辞書ファイルの特徴量データと照合して、外観特徴量が特徴量データに対してどの程度類似しているかを示す類似度を認識対象商品毎に算出する。候補出力手段は、類似度算出手段により算出される前記類似度の大きい順に認識対象商品を認識商品候補として出力する。距離測定手段は、撮像部からこの撮像部で撮影された商品までの距離を測定する。可変手段は、距離測定手段により測定される距離に応じて候補出力手段により出力される認識商品候補の数を変更する。
【選択図】図7
Description
また、画像をオブジェクト毎に領域分割することによって、一般物体認識を行う技術が、下記の文献において解説されている。
Jamie Shottonら,“Semantic Texton Forests for Image Categorization and Segmentation”,[平成22年8月10日検索],インターネット< URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=repl&type=pdf >
近年、例えば小売店の会計システム(POSシステム)において、顧客が買い上げる商品、特に、野菜、果物等のようにバーコードが付されていない商品の認識装置に、上述した一般物体認識の技術を適用することが提案されている。この場合、オペレータ(店員または客)は撮像部に向けて認識対象の商品を翳すが、翳した際に撮像部から商品までの距離が必ずしも一定になるとは限らない。その一方で、撮像部の画素数は一定であるため、撮像部から商品までの距離によって撮影画像の解像度は異なる。このため、撮像画像から抽出される商品の外観特徴量と基準画像の特徴量データとを比較した際に、撮影画像と基準画像の解像度が異なるために類似度が低くなり、認識率が低下する懸念がある。
また、適正フラグF1を“0”にリセットするタイミングは、ステップST25またはステップST27の処理の後には限定されず、処理の前であってもよい。
例えば前記実施形態では、距離測定手段74により測定された距離dが適正値であるか否かを距離判定手段75が判定し、適正値であるときと適正値でないときとで、可変手段77が登録商品候補として表示する商品の数を可変した。この点に関しては、例えば0cm〜10cm、10cm〜20cm、20cm〜30cmというように段階的に設定された距離範囲に関連付けて登録商品候補として表示する商品の数を設定したテーブルを用意しておく。そして、距離測定手段74により測定された距離dがどの距離範囲に含まれるかを距離判定手段75が検索し、可変手段77が該当する距離範囲に関連付けられた数の商品を登録商品候補とするように構成してもよい。
Claims (6)
- 商品を撮影する撮像部で撮影された画像からその画像に含まれる商品の外観特徴量を抽出する特徴量抽出手段と、
この特徴量抽出手段により抽出された外観特徴量を、認識対象商品毎にその商品の表面情報を表わす特徴量データが保存される認識辞書ファイルの前記特徴量データと照合して、前記外観特徴量が前記特徴量データに対してどの程度類似しているかを示す類似度を前記認識対象商品毎に算出する類似度算出手段と、
この類似度算出手段により算出される前記類似度の大きい順に前記認識対象商品を認識商品候補として出力する候補出力手段と、
前記撮像部からこの撮像部で撮影された商品までの距離を測定する距離測定手段と、
この距離測定手段により測定される距離に応じて前記候補出力手段により出力される認識商品候補の数を変更する可変手段と、
を具備したことを特徴とする商品認識装置。 - 前記候補出力手段は、認識商品候補の認識対象商品を選択可能に表示出力する手段であり、
前記認識商品候補の中から選択された認識対象商品を前記撮影部で撮影された商品として確定する第1の確定手段を含むことを特徴とする請求項1記載の商品認識装置。 - 前記距離測定手段により測定される距離が適正値か否かを判定する距離判定手段、をさらに具備し、
前記可変手段は、前記距離が適正値であるときには適正値でないときと比べて認識商品候補の数を少なくすることを特徴とする請求項1または2記載の商品認識装置。 - 前記距離判定手段により前記距離が適正値であると判定され、かつ、前記候補出力手段により認識商品候補として出力される認識対象商品の最大類似度が予め設定された確定値以上であるとき、この最大類似度を有する認識対象商品を前記撮影部で撮影された商品として確定する第2の確定手段、をさらに具備したことを特徴とする請求項3記載の商品認識装置。
- 前記距離判定手段により前記距離が適正値でないと判定されると警告を発する警告手段、をさらに具備したことを特徴とする請求項3または4記載の商品認識装置。
- コンピュータに、
商品を撮影する撮像部で撮影された画像からその画像に含まれる商品の外観特徴量を抽出する特徴量抽出機能と、
この特徴量抽出機能により抽出された外観特徴量を、認識対象商品毎にその商品の表面情報を表わす特徴量データが保存される認識辞書ファイルの前記特徴量データと照合して、前記外観特徴量が前記特徴量データに対してどの程度類似しているかを示す類似度を前記認識対象商品毎に算出する類似度算出機能と、
この類似度算出機能により算出される前記類似度の大きい順に前記認識対象商品を認識商品候補として出力する候補出力機能と、
前記撮像部から当該撮像部で撮影された商品までの距離に応じて前記候補出力手段により出力される認識商品候補の数を変更する可変機能と、
を実現させるための商品認識プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012243485A JP5747014B2 (ja) | 2012-11-05 | 2012-11-05 | 商品認識装置及び商品認識プログラム |
US14/065,510 US9235764B2 (en) | 2012-11-05 | 2013-10-29 | Commodity recognition apparatus and commodity recognition method |
CN201310532819.8A CN103810798B (zh) | 2012-11-05 | 2013-10-31 | 商品识别装置及商品识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012243485A JP5747014B2 (ja) | 2012-11-05 | 2012-11-05 | 商品認識装置及び商品認識プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014092960A true JP2014092960A (ja) | 2014-05-19 |
JP5747014B2 JP5747014B2 (ja) | 2015-07-08 |
Family
ID=50622424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012243485A Active JP5747014B2 (ja) | 2012-11-05 | 2012-11-05 | 商品認識装置及び商品認識プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9235764B2 (ja) |
JP (1) | JP5747014B2 (ja) |
CN (1) | CN103810798B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016038796A (ja) * | 2014-08-08 | 2016-03-22 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP6209717B1 (ja) * | 2016-06-02 | 2017-10-11 | サインポスト株式会社 | 情報処理システム、情報処理方法、及びプログラム |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5826800B2 (ja) * | 2013-07-17 | 2015-12-02 | 東芝テック株式会社 | 認識辞書評価装置及び認識辞書評価プログラム |
JP6239460B2 (ja) * | 2014-07-28 | 2017-11-29 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP6428240B2 (ja) * | 2014-12-17 | 2018-11-28 | カシオ計算機株式会社 | 商品登録装置、商品認識方法、およびプログラム |
CN107852438B (zh) * | 2015-07-30 | 2021-03-19 | Lg电子株式会社 | 移动终端及其控制方法 |
JP7085393B2 (ja) * | 2018-04-12 | 2022-06-16 | 東芝テック株式会社 | 読取装置およびプログラム |
CN110414541B (zh) | 2018-04-26 | 2022-09-09 | 京东方科技集团股份有限公司 | 用于识别物体的方法、设备和计算机可读存储介质 |
US11017641B2 (en) * | 2018-12-21 | 2021-05-25 | Sbot Technologies Inc. | Visual recognition and sensor fusion weight detection system and method |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0612514A (ja) * | 1992-05-11 | 1994-01-21 | Olympus Optical Co Ltd | バーコードの解読方法及び装置 |
JP2001216571A (ja) * | 2000-02-03 | 2001-08-10 | Glory Ltd | 料金精算方法および装置 |
JP2001229382A (ja) * | 2000-02-17 | 2001-08-24 | Nippon Telegr & Teleph Corp <Ntt> | 情報蓄積装置,情報検索装置および情報蓄積方法,情報検索方法並びにこれらの方法を記録した記録媒体 |
JP2005318546A (ja) * | 2004-03-29 | 2005-11-10 | Fuji Photo Film Co Ltd | 画像認識システム、画像認識方法、及び画像認識プログラム |
JP2010198137A (ja) * | 2009-02-23 | 2010-09-09 | Nec Infrontia Corp | 定置スキャナ、pos端末、決済商品選別方法、決済商品選別プログラムおよびプログラム記録媒体 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6650761B1 (en) * | 1999-05-19 | 2003-11-18 | Digimarc Corporation | Watermarked business cards and methods |
US6529855B1 (en) | 1999-07-28 | 2003-03-04 | Ncr Corporation | Produce recognition system and method |
US7246087B1 (en) * | 2000-01-10 | 2007-07-17 | General Electric Company | Method and apparatus for product selection assistance |
TWI278782B (en) * | 2001-08-24 | 2007-04-11 | Toshiba Corp | Personal recognition apparatus |
JP2004234228A (ja) * | 2003-01-29 | 2004-08-19 | Seiko Epson Corp | 画像検索装置、画像検索装置におけるキーワード付与方法、及びプログラム |
US20080133592A1 (en) * | 2006-11-30 | 2008-06-05 | James Peters | Bird identification system |
US20100092093A1 (en) * | 2007-02-13 | 2010-04-15 | Olympus Corporation | Feature matching method |
JP5012247B2 (ja) * | 2007-06-21 | 2012-08-29 | ソニー株式会社 | 認証装置、入場管理装置、入退場管理装置、入場管理システム、入退場管理システム、認証処理方法およびプログラム |
JP4565015B2 (ja) * | 2008-05-15 | 2010-10-20 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理システム、画像処理プログラムおよびその記録媒体 |
CN101400001B (zh) * | 2008-11-03 | 2010-06-02 | 清华大学 | 一种视频帧深度图的生成方法及系统 |
US8150813B2 (en) * | 2008-12-18 | 2012-04-03 | International Business Machines Corporation | Using relationships in candidate discovery |
JP5245971B2 (ja) * | 2009-03-26 | 2013-07-24 | 富士通株式会社 | 生体情報処理装置および方法 |
EP2518641A4 (en) * | 2009-12-24 | 2013-07-24 | Nikon Corp | RESEARCH MANAGEMENT SYSTEM, RESEARCH MANAGEMENT METHOD, AND RESEARCH MANAGEMENT PROGRAM |
US20110191327A1 (en) * | 2010-01-31 | 2011-08-04 | Advanced Research Llc | Method for Human Ranking of Search Results |
US9092981B2 (en) * | 2010-03-03 | 2015-07-28 | Panasonic Intellectual Property Management Co., Ltd. | Road condition management system and road condition management method |
US8791996B2 (en) * | 2010-03-31 | 2014-07-29 | Aisin Aw Co., Ltd. | Image processing system and position measurement system |
JP5194149B2 (ja) * | 2010-08-23 | 2013-05-08 | 東芝テック株式会社 | 店舗システムおよびプログラム |
US20120099756A1 (en) * | 2010-10-20 | 2012-04-26 | Faiz Feisal Sherman | Product Identification |
JP5149950B2 (ja) * | 2010-10-28 | 2013-02-20 | 東芝テック株式会社 | 商品情報読取装置及びプログラム |
CN102024049A (zh) * | 2010-12-08 | 2011-04-20 | 中国科学院自动化研究所 | 一种用于电子商务平台上的图像检索方法 |
CN102063616A (zh) * | 2010-12-30 | 2011-05-18 | 上海电机学院 | 一种基于图像特征匹配的商品自动识别系统及方法 |
JP5799586B2 (ja) * | 2011-05-27 | 2015-10-28 | 富士通株式会社 | 生体認証装置、生体認証方法及び生体認証用コンピュータプログラム |
JP5485954B2 (ja) * | 2011-09-06 | 2014-05-07 | 東芝テック株式会社 | 店舗システム及びプログラム |
US9424480B2 (en) * | 2012-04-20 | 2016-08-23 | Datalogic ADC, Inc. | Object identification using optical code reading and object recognition |
-
2012
- 2012-11-05 JP JP2012243485A patent/JP5747014B2/ja active Active
-
2013
- 2013-10-29 US US14/065,510 patent/US9235764B2/en active Active
- 2013-10-31 CN CN201310532819.8A patent/CN103810798B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0612514A (ja) * | 1992-05-11 | 1994-01-21 | Olympus Optical Co Ltd | バーコードの解読方法及び装置 |
JP2001216571A (ja) * | 2000-02-03 | 2001-08-10 | Glory Ltd | 料金精算方法および装置 |
JP2001229382A (ja) * | 2000-02-17 | 2001-08-24 | Nippon Telegr & Teleph Corp <Ntt> | 情報蓄積装置,情報検索装置および情報蓄積方法,情報検索方法並びにこれらの方法を記録した記録媒体 |
JP2005318546A (ja) * | 2004-03-29 | 2005-11-10 | Fuji Photo Film Co Ltd | 画像認識システム、画像認識方法、及び画像認識プログラム |
JP2010198137A (ja) * | 2009-02-23 | 2010-09-09 | Nec Infrontia Corp | 定置スキャナ、pos端末、決済商品選別方法、決済商品選別プログラムおよびプログラム記録媒体 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016038796A (ja) * | 2014-08-08 | 2016-03-22 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP6209717B1 (ja) * | 2016-06-02 | 2017-10-11 | サインポスト株式会社 | 情報処理システム、情報処理方法、及びプログラム |
JP2017220206A (ja) * | 2016-06-02 | 2017-12-14 | サインポスト株式会社 | 情報処理システム、情報処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5747014B2 (ja) | 2015-07-08 |
CN103810798B (zh) | 2017-04-12 |
US20140126772A1 (en) | 2014-05-08 |
US9235764B2 (en) | 2016-01-12 |
CN103810798A (zh) | 2014-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5707375B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5747014B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5619095B2 (ja) | 商品認識装置及び商品認識プログラム | |
US10108830B2 (en) | Commodity recognition apparatus and commodity recognition method | |
JP5553866B2 (ja) | 商品認識装置及び認識辞書追加プログラム | |
US10169752B2 (en) | Merchandise item registration apparatus, and merchandise item registration method | |
JP5551143B2 (ja) | 店舗システムおよびプログラム | |
JP5656796B2 (ja) | 商品データ処理装置、商品データ処理方法及び制御プログラム | |
JP5612645B2 (ja) | 情報処理装置及びプログラム | |
US20170116491A1 (en) | Commodity recognition apparatus and commodity recognition method | |
JP5847117B2 (ja) | 認識辞書作成装置及び認識辞書作成プログラム | |
JP5511864B2 (ja) | 店舗会計システム及び店舗会計プログラム | |
JP2013250768A (ja) | 商品認識装置及び商品認識プログラム | |
US20160196543A1 (en) | Information processing apparatus, store system and information processing method | |
US10482447B2 (en) | Recognition system, information processing apparatus, and information processing method | |
JP5620416B2 (ja) | 情報処理装置及びプログラム | |
US20170344853A1 (en) | Image processing apparatus and method for easily registering object | |
EP3002739A2 (en) | Information processing apparatus and information processing method by the same | |
JP6239460B2 (ja) | 情報処理装置及びプログラム | |
US20170344851A1 (en) | Information processing apparatus and method for ensuring selection operation | |
JP5658720B2 (ja) | 情報処理装置及びプログラム | |
JP5770899B2 (ja) | 情報処理装置及びプログラム | |
JP5760032B2 (ja) | 認識辞書作成装置及び認識辞書作成プログラム | |
JP2015099550A (ja) | 商品認識装置及び商品認識プログラム | |
JP6392406B2 (ja) | 商品認識装置及び商品認識プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140911 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140924 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141030 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150414 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150511 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5747014 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |