JP5553866B2 - 商品認識装置及び認識辞書追加プログラム - Google Patents
商品認識装置及び認識辞書追加プログラム Download PDFInfo
- Publication number
- JP5553866B2 JP5553866B2 JP2012162852A JP2012162852A JP5553866B2 JP 5553866 B2 JP5553866 B2 JP 5553866B2 JP 2012162852 A JP2012162852 A JP 2012162852A JP 2012162852 A JP2012162852 A JP 2012162852A JP 5553866 B2 JP5553866 B2 JP 5553866B2
- Authority
- JP
- Japan
- Prior art keywords
- product
- feature amount
- image
- declaration
- recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/772—Determining representative reference patterns, e.g. averaging or distorting patterns; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
- G06F18/2178—Validation; Performance evaluation; Active pattern learning techniques based on feedback of a supervisor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/28—Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Cash Registers Or Receiving Machines (AREA)
- Image Analysis (AREA)
Description
また、画像をオブジェクト毎に領域分割することによって、一般物体認識を行う技術が、下記の文献において解説されている。
Jamie Shottonら,“Semantic Texton Forests for Image Categorization and Segmentation”,[平成22年8月10日検索],インターネット< URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=repl&type=pdf >
近年、例えば小売店の会計システム(POSシステム)において、顧客が買い上げる商品、特に、野菜、果物等のようにバーコードが付されていない商品の認識装置に、一般物体認識の技術を適用することが提案されている。この場合、認識辞書には、認識対象商品の外観形状、色合い、模様、凹凸具合等の表面情報をパラメータで表わす特徴量データが保存される。商品認識装置は、撮像手段によって撮像された商品の画像データから当該商品の外観上の特徴量を抽出し、この特徴量を認識辞書に登録されている各商品の特徴量データと照合する。そして商品認識装置は、特徴量データが類似している商品を認識商品候補として出力する。
例えば前記実施形態では、認識辞書ファイル9への特徴量データの追加を実行するか否かの確認条件として「類似度差」と「候補順位」の2種類を示したが、どちらか1種類のみであってもよい。あるいは、他の条件を採用してもよい。
Claims (6)
- 撮像手段により撮像された画像からその画像に含まれる商品の外観特徴量を抽出する特徴量抽出手段と、
この特徴量抽出手段により抽出された外観特徴量のデータを、認識対象である商品毎にその商品の表面情報を表わす特徴量データが保存される認識辞書ファイルの前記特徴量データと照合して、前記画像に含まれる商品の候補を抽出する商品候補抽出手段と、
この商品候補抽出手段により複数の商品の候補が抽出された場合、この複数の商品の候補の中から前記画像に含まれる商品の選択入力を受け付ける商品選択受付手段と、
この商品選択受付手段により前記複数の商品の中からいずれか1商品の選択入力を受け付けると、この選択された商品に対して前記認識辞書ファイルに保存されている前記特徴量データの追加を実行するか否かの宣言入力を受け付ける追加宣言受付手段と、
この追加宣言受付手段により追加を実行する旨の宣言入力を受け付けると、前記特徴量抽出手段により抽出された前記外観特徴量のデータを、前記商品選択受付手段により選択を受け付けた商品に対する特徴量データとして前記認識辞書ファイルに追加する追加手段と、
を具備したことを特徴とする商品認識装置。 - 前記追加宣言受付手段は、前記商品選択受付手段により選択入力を受け付けた商品の前記認識辞書ファイルに保存される特徴量データと前記特徴量抽出手段により抽出された外観特徴量のデータとの類似度が、前記商品候補抽出手段により候補として抽出された他の商品の前記認識辞書ファイルに保存される特徴量データと前記特徴量抽出手段により抽出された外観特徴量のデータとの類似度と比較して低いとき、前記追加を実行するか否かの宣言入力を受け付けることを特徴とする請求項1記載の商品認識装置。
- 前記追加宣言受付手段は、前記商品選択受付手段により選択入力を受け付けた商品の前記類似度と、前記商品候補抽出手段により候補として抽出された他の商品の前記類似度のうち最も高い類似度との差が所定値以上であるとき、前記追加を実行するか否かの宣言入力を受け付けることを特徴とする請求項2記載の商品認識装置。
- 前記追加宣言受付手段は、前記商品選択受付手段により選択入力を受け付けた商品の前記類似度が、前記商品候補抽出手段により候補として抽出された全商品の前記類似度を高い順に並べた順位において1位以外の所定の順位以下に相当するとき、前記追加を実行するか否かの宣言入力を受け付けることを特徴とする請求項2記載の商品認識装置。
- タッチパネルを備え、
前記追加宣言受付手段は、前記追加を実行するか否かの宣言入力を促すボタン画像を前記タッチパネルに表示することを特徴とする請求項1乃至4のうちいずれか1に記載の商品認識装置。 - 撮像手段により撮像された画像からその画像に含まれる商品の外観特徴量を抽出し、抽出された外観特徴量のデータを、認識対象である商品毎にその商品の表面情報を表わす特徴量データが保存される認識辞書ファイルの前記特徴量データと照合して、前記画像に含まれる商品の候補を抽出する商品認識装置に、
複数の商品が前記画像に含まれる商品の候補として認識された場合に、この複数の商品の候補の中から前記画像に含まれる商品の選択入力を受け付ける機能と、
前記複数の商品の中からいずれか1商品の選択入力を受け付けると、この選択された商品に対して前記認識辞書ファイルに保存されている前記特徴量データの追加を実行するか否かの宣言入力を受け付ける機能と、
前記追加を実行する旨の宣言入力を受け付けると、前記画像に含まれる商品の外観特徴量のデータを、前記認識辞書ファイルの前記選択入力を受け付けた商品に対する特徴量データとして追加する機能と、
を実現させるための認識辞書追加プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012162852A JP5553866B2 (ja) | 2012-07-23 | 2012-07-23 | 商品認識装置及び認識辞書追加プログラム |
CN201310234920.5A CN103577515A (zh) | 2012-07-23 | 2013-06-14 | 商品识别装置及识别词库追加方法 |
US13/939,425 US20140023241A1 (en) | 2012-07-23 | 2013-07-11 | Dictionary registration apparatus and method for adding feature amount data to recognition dictionary |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012162852A JP5553866B2 (ja) | 2012-07-23 | 2012-07-23 | 商品認識装置及び認識辞書追加プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014109438A Division JP5753929B2 (ja) | 2014-05-27 | 2014-05-27 | 商品認識装置、方法及び認識辞書追加プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014021915A JP2014021915A (ja) | 2014-02-03 |
JP5553866B2 true JP5553866B2 (ja) | 2014-07-16 |
Family
ID=49946572
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012162852A Active JP5553866B2 (ja) | 2012-07-23 | 2012-07-23 | 商品認識装置及び認識辞書追加プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20140023241A1 (ja) |
JP (1) | JP5553866B2 (ja) |
CN (1) | CN103577515A (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5927147B2 (ja) * | 2013-07-12 | 2016-05-25 | 東芝テック株式会社 | 商品認識装置及び商品認識プログラム |
JP6122805B2 (ja) * | 2013-07-16 | 2017-04-26 | 東芝テック株式会社 | 情報処理装置及びプログラム |
US9594983B2 (en) | 2013-08-02 | 2017-03-14 | Digimarc Corporation | Learning systems and methods |
JP5865316B2 (ja) * | 2013-08-30 | 2016-02-17 | 東芝テック株式会社 | 商品登録装置およびプログラム |
JP6549558B2 (ja) * | 2014-03-28 | 2019-07-24 | 日本電気株式会社 | 売上登録装置、プログラム及び売上登録方法 |
JP6361326B2 (ja) * | 2014-06-30 | 2018-07-25 | 株式会社寺岡精工 | 商品販売データ処理装置 |
JP6555866B2 (ja) * | 2014-09-22 | 2019-08-07 | カシオ計算機株式会社 | 商品登録装置及びプログラム |
JP6369258B2 (ja) * | 2014-09-22 | 2018-08-08 | カシオ計算機株式会社 | 商品登録装置、商品登録方法およびプログラム |
JP6428240B2 (ja) * | 2014-12-17 | 2018-11-28 | カシオ計算機株式会社 | 商品登録装置、商品認識方法、およびプログラム |
US10049273B2 (en) * | 2015-02-24 | 2018-08-14 | Kabushiki Kaisha Toshiba | Image recognition apparatus, image recognition system, and image recognition method |
US10824873B2 (en) | 2016-01-21 | 2020-11-03 | Nec Corporation | Information processing apparatus, control method, and program |
JP2017211880A (ja) * | 2016-05-26 | 2017-11-30 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP2018041261A (ja) * | 2016-09-07 | 2018-03-15 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP6838903B2 (ja) | 2016-09-13 | 2021-03-03 | 東芝テック株式会社 | 物品読取装置およびプログラム |
JP6920868B2 (ja) * | 2017-04-24 | 2021-08-18 | 東芝テック株式会社 | 商品情報読取装置およびプログラム |
JP7034615B2 (ja) * | 2017-07-07 | 2022-03-14 | 東芝テック株式会社 | チェックアウト装置およびプログラム |
EP3669434A1 (en) | 2017-08-15 | 2020-06-24 | Saronikos Trading and Services, Unipessoal Lda. | Assembly and method for powering an electric aircraft and/or an electric aircraft equipped with said assembly |
KR101850315B1 (ko) * | 2018-01-22 | 2018-05-31 | 주식회사 엑사스코프 | 하이브리드 상품 인식 기술이 적용된 셀프 체크 아웃 기기 |
CN109345733A (zh) * | 2018-09-07 | 2019-02-15 | 杭州物宜网络科技有限公司 | 智能秤的计价方法及系统 |
JP7457347B2 (ja) * | 2020-02-10 | 2024-03-28 | 株式会社イシダ | 商品候補提示システム及び会計処理システム |
US11928662B2 (en) * | 2021-09-30 | 2024-03-12 | Toshiba Global Commerce Solutions Holdings Corporation | End user training for computer vision system |
US11681997B2 (en) * | 2021-09-30 | 2023-06-20 | Toshiba Global Commerce Solutions Holdings Corporation | Computer vision grouping recognition system |
Family Cites Families (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5530645A (en) * | 1993-06-30 | 1996-06-25 | Apple Computer, Inc. | Composite dictionary compression system |
JP3213669B2 (ja) * | 1994-05-30 | 2001-10-02 | 東芝テック株式会社 | チェックアウトシステム |
JP3223064B2 (ja) * | 1995-02-21 | 2001-10-29 | 東芝テック株式会社 | 商品販売登録データ処理装置 |
US7246087B1 (en) * | 2000-01-10 | 2007-07-17 | General Electric Company | Method and apparatus for product selection assistance |
US7845554B2 (en) * | 2000-10-30 | 2010-12-07 | Fujitsu Frontech North America, Inc. | Self-checkout method and apparatus |
JP2002074511A (ja) * | 2001-06-21 | 2002-03-15 | Toshiba Tec Corp | 商品販売登録データ処理装置 |
JP2003067744A (ja) * | 2001-08-24 | 2003-03-07 | Toshiba Corp | 個人認証装置および個人認証方法 |
TWI299471B (en) * | 2001-08-24 | 2008-08-01 | Toshiba Kk | Person recognition apparatus |
JP2004234228A (ja) * | 2003-01-29 | 2004-08-19 | Seiko Epson Corp | 画像検索装置、画像検索装置におけるキーワード付与方法、及びプログラム |
US7118026B2 (en) * | 2003-06-26 | 2006-10-10 | International Business Machines Corporation | Apparatus, method, and system for positively identifying an item |
US6983244B2 (en) * | 2003-08-29 | 2006-01-03 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for improved speech recognition with supplementary information |
US20080133592A1 (en) * | 2006-11-30 | 2008-06-05 | James Peters | Bird identification system |
JP5012247B2 (ja) * | 2007-06-21 | 2012-08-29 | ソニー株式会社 | 認証装置、入場管理装置、入退場管理装置、入場管理システム、入退場管理システム、認証処理方法およびプログラム |
JP4565015B2 (ja) * | 2008-05-15 | 2010-10-20 | シャープ株式会社 | 画像処理装置、画像形成装置、画像処理システム、画像処理プログラムおよびその記録媒体 |
CN101639891B (zh) * | 2008-07-28 | 2012-05-02 | 汉王科技股份有限公司 | 一种双摄像头人脸识别装置和方法 |
US8150813B2 (en) * | 2008-12-18 | 2012-04-03 | International Business Machines Corporation | Using relationships in candidate discovery |
US8494909B2 (en) * | 2009-02-09 | 2013-07-23 | Datalogic ADC, Inc. | Automatic learning in a merchandise checkout system with visual recognition |
JP5403657B2 (ja) * | 2009-02-23 | 2014-01-29 | Necインフロンティア株式会社 | 定置スキャナ、pos端末および決済商品選別方法 |
JP5245971B2 (ja) * | 2009-03-26 | 2013-07-24 | 富士通株式会社 | 生体情報処理装置および方法 |
US8429173B1 (en) * | 2009-04-20 | 2013-04-23 | Google Inc. | Method, system, and computer readable medium for identifying result images based on an image query |
JP2010286937A (ja) * | 2009-06-10 | 2010-12-24 | Hitachi Ltd | 生体認証方法、及び、生体認証に用いるクライアント端末、認証サーバ |
CN102004979A (zh) * | 2009-09-03 | 2011-04-06 | 叶克 | 一种提供商品匹配推广服务的系统和方法 |
US20110191327A1 (en) * | 2010-01-31 | 2011-08-04 | Advanced Research Llc | Method for Human Ranking of Search Results |
US8782556B2 (en) * | 2010-02-12 | 2014-07-15 | Microsoft Corporation | User-centric soft keyboard predictive technologies |
US9092981B2 (en) * | 2010-03-03 | 2015-07-28 | Panasonic Intellectual Property Management Co., Ltd. | Road condition management system and road condition management method |
CN102063616A (zh) * | 2010-12-30 | 2011-05-18 | 上海电机学院 | 一种基于图像特征匹配的商品自动识别系统及方法 |
JP5799586B2 (ja) * | 2011-05-27 | 2015-10-28 | 富士通株式会社 | 生体認証装置、生体認証方法及び生体認証用コンピュータプログラム |
JP5485954B2 (ja) * | 2011-09-06 | 2014-05-07 | 東芝テック株式会社 | 店舗システム及びプログラム |
JP5194160B1 (ja) * | 2011-10-19 | 2013-05-08 | 東芝テック株式会社 | 情報処理装置、情報処理方法及びプログラム |
CN103106214B (zh) * | 2011-11-14 | 2016-02-24 | 索尼爱立信移动通讯有限公司 | 一种候选词组输出方法和电子设备 |
JP5551143B2 (ja) * | 2011-12-02 | 2014-07-16 | 東芝テック株式会社 | 店舗システムおよびプログラム |
JP5579202B2 (ja) * | 2012-01-16 | 2014-08-27 | 東芝テック株式会社 | 情報処理装置、店舗システム及びプログラム |
JP5551196B2 (ja) * | 2012-03-06 | 2014-07-16 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP2013250768A (ja) * | 2012-05-31 | 2013-12-12 | Toshiba Tec Corp | 商品認識装置及び商品認識プログラム |
JP5675722B2 (ja) * | 2012-07-23 | 2015-02-25 | 東芝テック株式会社 | 認識辞書処理装置及び認識辞書処理プログラム |
JP2014032539A (ja) * | 2012-08-03 | 2014-02-20 | Toshiba Tec Corp | オブジェクト認識スキャナシステム、辞書サーバ、オブジェクト認識スキャナ、辞書サーバプログラムおよび制御プログラム |
JP5619095B2 (ja) * | 2012-09-03 | 2014-11-05 | 東芝テック株式会社 | 商品認識装置及び商品認識プログラム |
JP2014049015A (ja) * | 2012-09-03 | 2014-03-17 | Toshiba Tec Corp | 商品認識装置及び商品認識プログラム |
JP5707375B2 (ja) * | 2012-11-05 | 2015-04-30 | 東芝テック株式会社 | 商品認識装置及び商品認識プログラム |
-
2012
- 2012-07-23 JP JP2012162852A patent/JP5553866B2/ja active Active
-
2013
- 2013-06-14 CN CN201310234920.5A patent/CN103577515A/zh active Pending
- 2013-07-11 US US13/939,425 patent/US20140023241A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
CN103577515A (zh) | 2014-02-12 |
JP2014021915A (ja) | 2014-02-03 |
US20140023241A1 (en) | 2014-01-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5553866B2 (ja) | 商品認識装置及び認識辞書追加プログラム | |
JP5936993B2 (ja) | 商品認識装置及び商品認識プログラム | |
US9990541B2 (en) | Commodity recognition apparatus and commodity recognition method | |
JP5619095B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5372191B2 (ja) | 商品読取装置及び商品読取プログラム | |
JP5826152B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP6730079B2 (ja) | 監視装置及びプログラム | |
JP5707375B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5439623B2 (ja) | 商品読取装置及び商品読取プログラム | |
JP5826801B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP2013250768A (ja) | 商品認識装置及び商品認識プログラム | |
JP5747014B2 (ja) | 商品認識装置及び商品認識プログラム | |
US10482447B2 (en) | Recognition system, information processing apparatus, and information processing method | |
JP2015099549A (ja) | 商品認識装置及び商品認識プログラム | |
JP6949611B2 (ja) | 商品登録装置及びそのプログラム | |
JP2022009877A (ja) | 管理装置及びプログラム | |
JP2017211880A (ja) | 情報処理装置及びプログラム | |
JP5753929B2 (ja) | 商品認識装置、方法及び認識辞書追加プログラム | |
JP5760032B2 (ja) | 認識辞書作成装置及び認識辞書作成プログラム | |
JP5903516B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP2015099550A (ja) | 商品認識装置及び商品認識プログラム | |
JP6392406B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP6133470B2 (ja) | 商品認識装置及び商品認識プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131219 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20131226 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20140109 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140527 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5553866 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |