JP6147676B2 - 情報処理装置、店舗システム及びプログラム - Google Patents
情報処理装置、店舗システム及びプログラム Download PDFInfo
- Publication number
- JP6147676B2 JP6147676B2 JP2014001171A JP2014001171A JP6147676B2 JP 6147676 B2 JP6147676 B2 JP 6147676B2 JP 2014001171 A JP2014001171 A JP 2014001171A JP 2014001171 A JP2014001171 A JP 2014001171A JP 6147676 B2 JP6147676 B2 JP 6147676B2
- Authority
- JP
- Japan
- Prior art keywords
- product
- unit
- similarity
- article
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 16
- 238000003384 imaging method Methods 0.000 claims description 69
- 238000000034 method Methods 0.000 claims description 44
- 238000003860 storage Methods 0.000 claims description 16
- 238000010586 diagram Methods 0.000 description 27
- 238000001514 detection method Methods 0.000 description 23
- 238000012790 confirmation Methods 0.000 description 19
- 238000003825 pressing Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 12
- 238000011156 evaluation Methods 0.000 description 4
- 244000000626 Daucus carota Species 0.000 description 3
- 235000002767 Daucus carota Nutrition 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 240000006108 Allium ampeloprasum Species 0.000 description 1
- 235000005254 Allium ampeloprasum Nutrition 0.000 description 1
- 240000007124 Brassica oleracea Species 0.000 description 1
- 235000003899 Brassica oleracea var acephala Nutrition 0.000 description 1
- 235000011301 Brassica oleracea var capitata Nutrition 0.000 description 1
- 235000001169 Brassica oleracea var oleracea Nutrition 0.000 description 1
- 244000088415 Raphanus sativus Species 0.000 description 1
- 235000006140 Raphanus sativus var sativus Nutrition 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 235000012055 fruits and vegetables Nutrition 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009987 spinning Methods 0.000 description 1
- 230000003746 surface roughness Effects 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/08—Payment architectures
- G06Q20/20—Point-of-sale [POS] network systems
- G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
- G06V40/67—Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/0036—Checkout procedures
- G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
- G07G1/0054—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
- G07G1/00—Cash registers
- G07G1/0036—Checkout procedures
- G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
- G07G1/0054—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles
- G07G1/0063—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles with means for detecting the geometric dimensions of the article of which the code is read, such as its size or height, for the verification of the registration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Theoretical Computer Science (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Finance (AREA)
- Geometry (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Cash Registers Or Receiving Machines (AREA)
- Image Analysis (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
1.撮像対象となる全商品に共通するものであって、撮像部164に対する撮像距離を示すガイダンス。
2.リンゴのように球形の物品(オブジェクト)について、くるくる回しながら、物品全体を撮像するように案内するガイダンス。
3.大根やネギのように長い物品(オブジェクト)について、長手方向を軸としてくるくる回しながら、物品全体を長手方向に流して撮像するように案内するガイダンス。
4.スダチのように小さい物品(オブジェクト)について、物品(オブジェクト)を把持している店員の手が撮像部164による撮像画像内にできるだけ入らないように撮像するように案内するガイダンス。
まず、POS端末11の画像取込部51、商品検出部52、類似度算出部53、類似度判定部54、商品提示部55、入力受付部57、情報入力部58による一般物体認識(オブジェクト認識)に応じた商品登録処理、および売上登録部59による売上登録処理についての概要を説明する。
柳井 啓司,“一般物体認識の現状と今後”,情報処理学会論文誌,Vol.48,No.SIG16 [平成22年8月10日検索],インターネット<URL: http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf >
Jamie Shottonら,“Semantic Texton Forests for Image Categorization and Segmentation”,[平成22年8月10日検索],インターネット<URL: http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=rep1&type=pdf >
次いで、POS端末11の画像取込部51、商品検出部52、類似度算出部53、類似度判定部54、物品指定部91、判定部92、報知部93、追加学習部94によるオブジェクト認識に際してのリアルタイム認識判定処理について説明する。
52 商品検出部
53 類似度算出部
91 物品指定部
92 判定部
93 報知部
164 撮像部
F1 PLUファイル
PR2 リアルタイム認識判定チェックプログラム
G5 精度チェック画面
Claims (6)
- 物品を識別するための特徴量を、複数の物品について記憶した記憶部から、かざし方の適否を判定する対象の物品を選択させる選択手段と、
かざされた物品を所定のフレームレートで撮像する撮像手段と、
前記記憶部に記憶された物品の特徴量と、前記撮像手段が撮像した画像に含まれる物品の特徴量とを比較することで、前記記憶部に記憶された物品ごとの類似度を算出する類似度算出手段と、
前記類似度算出手段が物品ごとに算出した類似度のランクに応じて、前記選択手段によって選択された物品の前記撮像手段へのかざし方の適否を判定する判定手段と、
かざし方の適否の判定を終了する操作を受け付ける入力手段と、
前記入力手段が終了する操作を受け付けるまで、前記判定手段がかざし方の適否を判定する度に、判定結果を報知する報知手段と、
を備えた情報処理装置。 - 前記報知手段は、1フレーム画像ごとに、前記撮像手段への物品のかざし方の適否について報知する、
請求項1に記載の情報処理装置。 - 前記報知手段は、前記撮像手段への物品のかざし方の適否を複数段階で報知する、
請求項1または2に記載の情報処理装置。 - 前記報知手段は、前記撮像手段への物品のかざし方の適否に関するメッセージを表示する、
請求項1ないし3の何れか一項に記載の情報処理装置。 - 物品を識別するための特徴量を、複数の物品について記憶した記憶部から、かざし方の適否を判定する対象の物品を選択させる選択手段と、
かざされた物品を所定のフレームレートで撮像する撮像手段と、
前記記憶部に記憶された物品の特徴量と、前記撮像手段が撮像した画像に含まれる物品の特徴量とを比較することで、前記記憶部に記憶された物品ごとの類似度を算出する類似度算出手段と、
前記類似度算出手段が物品ごとに算出した類似度のランクに応じて、前記選択手段によって選択された物品の前記撮像手段へのかざし方の適否を判定する判定手段と、
かざし方の適否の判定を終了する操作を受け付ける入力手段と、
前記入力手段が終了する操作を受け付けるまで、前記判定手段がかざし方の適否を判定する度に、判定結果を報知する報知手段と、
前記物品を識別するための特徴量を用いて前記撮像手段が撮像した商品を識別して売上登録処理を実行する売上登録手段と、
を備えた店舗システム。 - コンピュータを、
物品を識別するための特徴量を、複数の物品について記憶した記憶部から、かざし方の適否を判定する対象の物品を選択させる選択手段と、
かざされた物品を所定のフレームレートで撮像する撮像手段と、
前記記憶部に記憶された物品の特徴量と、前記撮像手段が撮像した画像に含まれる物品の特徴量とを比較することで、前記記憶部に記憶された物品ごとの類似度を算出する類似度算出手段と、
前記類似度算出手段が物品ごとに算出した類似度のランクに応じて、前記選択手段によって選択された物品の前記撮像手段へのかざし方の適否を判定する判定手段と、
かざし方の適否の判定を終了する操作を受け付ける入力手段と、
前記入力手段が終了する操作を受け付けるまで、前記判定手段がかざし方の適否を判定する度に、判定結果を報知する報知手段と、
として機能させるプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014001171A JP6147676B2 (ja) | 2014-01-07 | 2014-01-07 | 情報処理装置、店舗システム及びプログラム |
US14/589,331 US20150193668A1 (en) | 2014-01-07 | 2015-01-05 | Information processing apparatus, store system and method for recognizing object |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014001171A JP6147676B2 (ja) | 2014-01-07 | 2014-01-07 | 情報処理装置、店舗システム及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017097198A Division JP6336656B2 (ja) | 2017-05-16 | 2017-05-16 | 情報処理装置、店舗システム及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015130066A JP2015130066A (ja) | 2015-07-16 |
JP6147676B2 true JP6147676B2 (ja) | 2017-06-14 |
Family
ID=53495440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014001171A Active JP6147676B2 (ja) | 2014-01-07 | 2014-01-07 | 情報処理装置、店舗システム及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20150193668A1 (ja) |
JP (1) | JP6147676B2 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2015145977A1 (ja) * | 2014-03-27 | 2017-04-13 | 日本電気株式会社 | 情報処理装置、画像処理方法とプログラム、ならびに、pos端末装置 |
JP6272810B2 (ja) * | 2015-09-30 | 2018-01-31 | 東芝テック株式会社 | 情報処理装置およびプログラム |
RU2021106383A (ru) * | 2016-08-24 | 2021-04-05 | Зодженикс Интернэшнл Лимитед | Состав для ингибирования образования агонистов 5-ht2b и способы его применения |
JP6838903B2 (ja) * | 2016-09-13 | 2021-03-03 | 東芝テック株式会社 | 物品読取装置およびプログラム |
US10331969B2 (en) * | 2016-10-28 | 2019-06-25 | Ncr Corporation | Image processing for scale zero validation |
JP6851193B2 (ja) * | 2016-12-20 | 2021-03-31 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP6996856B2 (ja) * | 2017-03-21 | 2022-01-17 | 東芝テック株式会社 | 商品販売データ処理装置、及び表示制御プログラム |
JP7197971B2 (ja) * | 2017-08-31 | 2022-12-28 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法及びプログラム |
CN113836956A (zh) * | 2017-12-25 | 2021-12-24 | 创新先进技术有限公司 | 一种扫描定位方法、装置、设备及系统 |
CN108364420A (zh) * | 2018-01-08 | 2018-08-03 | 阿里巴巴集团控股有限公司 | 图像识别方法及装置和电子设备 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1074287A (ja) * | 1996-08-30 | 1998-03-17 | Nec Eng Ltd | Posシステム |
US7219838B2 (en) * | 2004-08-10 | 2007-05-22 | Howell Data Systems | System and method for notifying a cashier of the presence of an item in an obscured area of a shopping cart |
US7909248B1 (en) * | 2007-08-17 | 2011-03-22 | Evolution Robotics Retail, Inc. | Self checkout with visual recognition |
JP5535508B2 (ja) * | 2009-03-31 | 2014-07-02 | Necインフロンティア株式会社 | セルフpos装置及びその動作方法 |
JP2012038215A (ja) * | 2010-08-10 | 2012-02-23 | Toshiba Tec Corp | コード読取装置およびプログラム |
JP2013008103A (ja) * | 2011-06-22 | 2013-01-10 | Toshiba Tec Corp | 提供商品確認装置、プログラム、および提供商品確認方法 |
JP5431429B2 (ja) * | 2011-09-06 | 2014-03-05 | 東芝テック株式会社 | 情報処理装置及びプログラム |
JP5511864B2 (ja) * | 2012-02-08 | 2014-06-04 | 東芝テック株式会社 | 店舗会計システム及び店舗会計プログラム |
JP2013210971A (ja) * | 2012-03-30 | 2013-10-10 | Toshiba Tec Corp | 情報処理装置及びプログラム |
US9113002B2 (en) * | 2013-04-28 | 2015-08-18 | Tencent Technology (Shenzhen) Company Limited | Method and system for automatically capturing an object using a mobile terminal |
-
2014
- 2014-01-07 JP JP2014001171A patent/JP6147676B2/ja active Active
-
2015
- 2015-01-05 US US14/589,331 patent/US20150193668A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US20150193668A1 (en) | 2015-07-09 |
JP2015130066A (ja) | 2015-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6141207B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP6147676B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5579202B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP6348827B2 (ja) | 情報処理装置、店舗システムおよびプログラム | |
JP5194160B1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6220679B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP6306775B2 (ja) | 情報処理装置、及びプログラム | |
JP6193897B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP6360350B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5551140B2 (ja) | 情報処理装置及びプログラム | |
JP2017211881A (ja) | 情報処理装置及びプログラム | |
JP5437404B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5797703B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP2017211880A (ja) | 情報処理装置及びプログラム | |
JP5451787B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5802803B2 (ja) | 情報処理装置及びプログラム | |
JP5529982B2 (ja) | 情報処理装置 | |
JP6177199B2 (ja) | 情報処理装置及びプログラム | |
JP6348784B2 (ja) | 情報処理装置及びプログラム | |
JP6336656B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP2013156934A (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5820011B2 (ja) | 情報処理装置、情報処理システムおよび情報処理方法 | |
JP5885708B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP5903414B2 (ja) | 情報処理装置、店舗システム及びプログラム | |
JP2018101292A (ja) | 情報処理装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160113 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20160201 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161031 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170104 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170418 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170517 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6147676 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |