JP6073774B2 - 商品認識装置及び商品認識プログラム - Google Patents
商品認識装置及び商品認識プログラム Download PDFInfo
- Publication number
- JP6073774B2 JP6073774B2 JP2013232475A JP2013232475A JP6073774B2 JP 6073774 B2 JP6073774 B2 JP 6073774B2 JP 2013232475 A JP2013232475 A JP 2013232475A JP 2013232475 A JP2013232475 A JP 2013232475A JP 6073774 B2 JP6073774 B2 JP 6073774B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- product
- recognition
- displayed
- cpu
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Cash Registers Or Receiving Machines (AREA)
Description
なお、本実施形態は、社員食堂や学生食堂のように利用者が限られているカフェテリア形式の食堂施設に設置される場合である。
柳井 啓司,“一般物体認識の現状と今後”,情報処理学会論文誌,Vol.48,No.SIG16[平成22年8月10日検索],インターネット< URL: http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf >
また、画像をオブジェクト毎に領域分割することによって一般物体認識を行う技術については、下記の文献に解説されている。
Jamie Shottonら,“Semantic Texton Forests for Image Categorization and Segmentation”,[平成22年8月10日検索],インターネット< URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=repl&type=pdf >
[第1の実施形態]
図1は、本実施形態に係る商品認識装置1の外観図である。会計カウンタ2の卓面2A上に設置される商品認識装置1は、板状のボディ部11Aと庇部11Bとを含む。ボディ部11Aは、正面が手前側を向くように卓面2Aの奥側の縁に沿って立設される。庇部11Bは、ボディ部11Aの正面上端部から、上記正面に対して略直交する方向に突出する。このため庇部11Bの下面は、卓面2Aと対向する。
第1の実施形態では、容器30に盛り付けられた料理の認識処理が完了しているか否かに係らず、確定ボタン84がタッチされると、決済処理が実行される。第2の実施形態では、容器30に盛り付けられた料理の認識処理が完了しないと、決済処理が実行されない。このような第2の実施形態について、図15〜図17を用いて説明する。なお、第2の実施形態も、商品認識装置1の外観及び内部構成は第1の実施形態と同様なので、共通する部分には同一符号を付し、詳しい説明は省略する。
品目数Mが検出されると、CPU21は、第1の実施形態のステップST5の処理に進む。
Claims (10)
- 撮像部で撮影された画像を取り込む画像取込手段と、
この画像取込手段により前記撮像部から取り込んだ前記画像を表示部に表示させる画像表示手段と、
前記表示部に表示される画像上の任意の箇所への選択入力を受け付ける入力受付手段と、
前記表示部に表示される画像上の前記入力受付手段により入力を受け付けた箇所に固定サイズの枠線を表示させる枠線表示手段と、
前記枠線によって囲われた領域内の画像の特徴量から前記枠線内に存在する商品を認識する認識手段と、
この認識手段で認識された前記商品の情報を出力する出力手段と、
を具備したことを特徴とする商品認識装置。 - 前記枠線表示手段は、前記表示部に表示される画像上の前記入力受付手段により入力を受け付けた箇所に、その箇所を中心に固定サイズの枠線を表示させることを特徴とする請求項1記載の商品認識装置。
- 前記画像取込手段は、前記枠線表示手段によって前記画像に前記枠線が表示されるまでは前記画像の取込みを繰り返し、前記枠線が表示されると前記画像の取込みを停止することを特徴とする請求項1または2記載の商品認識装置。
- 前記表示部に表示された枠線を消去する消去手段、をさらに具備し、
前記画像取込手段は、前記画像の取込みを停止した後、前記消去手段により前記画像から全ての前記枠線が消去されると前記画像の取込みを再開することを特徴とする請求項3記載の商品認識装置。 - 前記出力手段は、前記認識手段で認識された前記商品の情報を個別に出力する個別出力手段と、前記認識手段で認識された全ての前記商品の合計情報を出力する合計出力手段と、を含むことを特徴とする請求項1乃至4のうちいずれか1記載の商品認識装置。
- 前記商品の情報は、その商品に対して設定された単価であり、前記商品の合計情報は、各商品の単価を合算した合計金額であることを特徴とする請求項5記載の商品認識装置。
- 前記商品の情報は、その商品の標準分量に対して導出されるパラメータであり、前記商品の合計情報は、各商品のパラメータを合算した合計パラメータであることを特徴とする請求項5記載の商品認識装置。
- 画像取込手段により前記撮像部から取り込んだ前記画像からその画像に映し出されている商品の数を検出する品目数検出手段と、
前記認識手段により認識される商品の数を計数する品目数計数手段と、
前記品目数検出手段により検出される品目数と前記品目数計数手段により計数される品目数とを比較する比較手段と、
を具備したことを特徴とする請求項1乃至7のうちいずれか1に記載の商品認識装置。 - コンピュータに、
撮像部で撮影された画像を取り込む機能と、
前記撮像部から取り込んだ前記画像を表示部に表示させる機能と、
前記表示部に表示される画像上の任意の箇所への選択入力を受け付ける機能と、
前記表示部に表示される画像上の前記入力を受け付けた箇所に固定サイズの任意の1乃至複数箇所に商品を囲うための枠線を表示させる機能と、
前記枠線によって囲われた領域内の画像の特徴量から前記枠線内に存在する商品を認識する機能と、
認識された前記商品の情報を出力させる機能と、
を実現させるための商品認識プログラム。 - 前記枠線表示手段により表示された前記枠線のサイズを変更する手段、
をさらに具備することを特徴とする請求項1又は2記載の商品認識装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013232475A JP6073774B2 (ja) | 2012-11-15 | 2013-11-08 | 商品認識装置及び商品認識プログラム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012251222 | 2012-11-15 | ||
JP2012251222 | 2012-11-15 | ||
JP2013232475A JP6073774B2 (ja) | 2012-11-15 | 2013-11-08 | 商品認識装置及び商品認識プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017000682A Division JP6244484B2 (ja) | 2012-11-15 | 2017-01-05 | 商品認識装置及び商品認識プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014115987A JP2014115987A (ja) | 2014-06-26 |
JP6073774B2 true JP6073774B2 (ja) | 2017-02-01 |
Family
ID=50681725
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013232475A Active JP6073774B2 (ja) | 2012-11-15 | 2013-11-08 | 商品認識装置及び商品認識プログラム |
JP2017000682A Active JP6244484B2 (ja) | 2012-11-15 | 2017-01-05 | 商品認識装置及び商品認識プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017000682A Active JP6244484B2 (ja) | 2012-11-15 | 2017-01-05 | 商品認識装置及び商品認識プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9269005B2 (ja) |
JP (2) | JP6073774B2 (ja) |
CN (1) | CN103824048B (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6547292B2 (ja) | 2014-02-05 | 2019-07-24 | 株式会社リコー | 画像処理装置、機器制御システム、および画像処理プログラム |
US9659225B2 (en) * | 2014-02-12 | 2017-05-23 | Microsoft Technology Licensing, Llc | Restaurant-specific food logging from images |
JP6480676B2 (ja) * | 2014-06-27 | 2019-03-13 | 国立大学法人電気通信大学 | 摂取量推定装置、摂取量推定方法およびプログラム |
CN104269003A (zh) * | 2014-09-12 | 2015-01-07 | 李龙龙 | 一种食物识别方法、装置及系统 |
JP6503814B2 (ja) * | 2015-03-19 | 2019-04-24 | カシオ計算機株式会社 | 商品登録装置、商品登録方法及びプログラム |
US10254264B2 (en) | 2017-03-29 | 2019-04-09 | Dragontail Systems Ltd. | Apparatus and method for monitoring preparation of a food product |
JP6651169B2 (ja) * | 2018-04-17 | 2020-02-19 | 株式会社マーケットヴィジョン | 陳列状況判定システム |
CN109299648A (zh) * | 2018-07-24 | 2019-02-01 | 上海常仁信息科技有限公司 | 一种能够菜品识别的识别装置 |
CN109118681B (zh) * | 2018-08-22 | 2020-12-01 | 安徽省华腾农业科技有限公司经开区分公司 | 食堂餐盘菜品划价机构 |
CN111143585A (zh) * | 2019-04-11 | 2020-05-12 | 王晓东 | 自动化大数据排序方法 |
CN110415463A (zh) * | 2019-07-25 | 2019-11-05 | 腾讯科技(深圳)有限公司 | 一种支付方法及终端 |
JP6885563B2 (ja) * | 2019-09-05 | 2021-06-16 | 株式会社マーケットヴィジョン | 陳列状況判定システム |
JP7531175B2 (ja) * | 2020-04-28 | 2024-08-09 | パナソニックIpマネジメント株式会社 | 精算決済装置および精算決済システム |
CN111681376B (zh) * | 2020-06-18 | 2023-05-16 | 刘洋 | 一种基于智能识别的结算设备 |
JP7127892B2 (ja) | 2021-02-08 | 2022-08-30 | Necプラットフォームズ株式会社 | 決済システム、決済方法及びプログラム |
CN113269052A (zh) * | 2021-04-30 | 2021-08-17 | 广州图匠数据科技有限公司 | 价签识别方法、终端、存储装置 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6363366B1 (en) * | 1998-08-31 | 2002-03-26 | David L. Henty | Produce identification and pricing system for checkouts |
JP2001216571A (ja) | 2000-02-03 | 2001-08-10 | Glory Ltd | 料金精算方法および装置 |
US7845554B2 (en) * | 2000-10-30 | 2010-12-07 | Fujitsu Frontech North America, Inc. | Self-checkout method and apparatus |
JP2006350806A (ja) * | 2005-06-17 | 2006-12-28 | Toshiba Tec Corp | 無線タグ認識装置及び商品販売データ処理装置 |
US8234139B2 (en) * | 2007-10-15 | 2012-07-31 | Oracle International Corporation | Process manufacturing with least cost formulation |
US8315673B2 (en) * | 2010-01-12 | 2012-11-20 | Qualcomm Incorporated | Using a display to select a target object for communication |
JP5544332B2 (ja) * | 2010-08-23 | 2014-07-09 | 東芝テック株式会社 | 店舗システムおよびプログラム |
JP2012252396A (ja) | 2011-05-31 | 2012-12-20 | Toshiba Tec Corp | 外観検査装置、外観検査プログラムおよび外観検査システム |
-
2013
- 2013-11-08 JP JP2013232475A patent/JP6073774B2/ja active Active
- 2013-11-11 CN CN201310556535.2A patent/CN103824048B/zh active Active
- 2013-11-13 US US14/078,691 patent/US9269005B2/en active Active
-
2017
- 2017-01-05 JP JP2017000682A patent/JP6244484B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
CN103824048B (zh) | 2018-03-23 |
US20140133704A1 (en) | 2014-05-15 |
JP2014115987A (ja) | 2014-06-26 |
CN103824048A (zh) | 2014-05-28 |
JP6244484B2 (ja) | 2017-12-06 |
JP2017059272A (ja) | 2017-03-23 |
US9269005B2 (en) | 2016-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6244484B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5927147B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP5553866B2 (ja) | 商品認識装置及び認識辞書追加プログラム | |
US9990541B2 (en) | Commodity recognition apparatus and commodity recognition method | |
JP2006350806A (ja) | 無線タグ認識装置及び商品販売データ処理装置 | |
JP5826801B2 (ja) | 商品認識装置及び商品認識プログラム | |
US20110073645A1 (en) | Article sales data processing apparatus and transaction display method | |
US20230043615A1 (en) | Self-checkout system and self-checkout method | |
JP2014146384A (ja) | 商品読取装置、商品読取方法及び商品読取プログラム | |
US20190043033A1 (en) | Point-of-sale terminal | |
JP5572651B2 (ja) | 商品読取装置および商品読取プログラム | |
US9355395B2 (en) | POS terminal apparatus and commodity specification method | |
JP5760032B2 (ja) | 認識辞書作成装置及び認識辞書作成プログラム | |
JP6116717B2 (ja) | 商品認識装置及び商品認識プログラム | |
JP2023067916A (ja) | 商品販売データ処理装置、及びプログラム | |
US20170185249A1 (en) | Point-of-sale terminal including a touch panel screen having expanded areas for selecting objects when the objects are partially obscured | |
JP5753929B2 (ja) | 商品認識装置、方法及び認識辞書追加プログラム | |
US20150025955A1 (en) | System for enrollment of customers into company loyalty programs | |
US20220092573A1 (en) | Portable terminal and information processing method for a portable terminal | |
JP2020160930A (ja) | 商品販売データ処理装置、及びプログラム | |
US11580566B2 (en) | Store system, information processing apparatus, and information processing method therefor | |
JP7172060B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP7503303B2 (ja) | 商品販売データ処理装置、プログラム、クラウドサーバ | |
JP2023131660A (ja) | 情報端末、プログラム | |
JP2022098820A (ja) | 商品販売データ処理システム、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160113 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160927 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170105 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6073774 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |