JP7156860B2 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
JP7156860B2
JP7156860B2 JP2018156707A JP2018156707A JP7156860B2 JP 7156860 B2 JP7156860 B2 JP 7156860B2 JP 2018156707 A JP2018156707 A JP 2018156707A JP 2018156707 A JP2018156707 A JP 2018156707A JP 7156860 B2 JP7156860 B2 JP 7156860B2
Authority
JP
Japan
Prior art keywords
information
product
acquisition unit
information acquisition
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018156707A
Other languages
English (en)
Other versions
JP2020030701A (ja
Inventor
仁志 飯坂
英浩 内藤
秀彦 宮越
裕紀 川口
直樹 尾籠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Priority to JP2018156707A priority Critical patent/JP7156860B2/ja
Priority to CN201910549121.4A priority patent/CN110858272B/zh
Priority to US16/521,420 priority patent/US20200065792A1/en
Priority to EP19192245.9A priority patent/EP3617975A3/en
Publication of JP2020030701A publication Critical patent/JP2020030701A/ja
Application granted granted Critical
Publication of JP7156860B2 publication Critical patent/JP7156860B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
    • G06K7/10861—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices sensing of data fields affixed to objects or articles, e.g. coded labels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
    • B62B5/00—Accessories or details specially adapted for hand carts
    • B62B5/0096—Identification of the cart or merchandise, e.g. by barcodes or radio frequency identification [RFID]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/322—Aspects of commerce using mobile devices [M-devices]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/322—Aspects of commerce using mobile devices [M-devices]
    • G06Q20/3224—Transactions dependent on location of M-devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0054—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles
    • G07G1/0063—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles with means for detecting the geometric dimensions of the article of which the code is read, such as its size or height, for the verification of the registration
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0081—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader the reader being a portable scanner or data reader
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/01—Details for indicating
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated
    • G07G1/14—Systems including one or more distant stations co-operating with a central processing unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/35—Services specially adapted for particular environments, situations or purposes for the management of goods or merchandise
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Toxicology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Geometry (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明の実施形態は、情報処理装置に関する。
従来、ＰＯＳ端末装置などの情報処理装置には、商品の外観の特徴に基づいて商品を識別する技術を用いるものがあり、さらに、上記技術とバーコードなどのコードシンボルの読み取りによる商品識別とを選択的に使用するものがある。
商品の外観の特徴に基づく商品識別と、コードシンボルの読み取りによる商品識別とでは、現段階においては、後者の方が高い正確性を有していると言える。また、処理速度の観点からも、後者の方が早く完了する。このため、コードシンボルが検知された商品については、コードシンボルにより商品識別を行い、例えば青果などのような表面にコードシンボルを備えない「コードシンボルなし商品」については、外観的特徴による商品識別を行う、などの処理が行われている。
しかしながら、コードシンボルによる商品識別と、商品の外観的特徴による商品識別との両方を実行可能な情報処理装置においては、意図しない物品について外観的特徴による商品識別が実行されてしまうなどの不都合が発生し得る。
本発明が解決しようとする課題は、意図しない物品に対してコードシンボルなし商品としての読み取り処理を実行してしまう不都合の発生を減らし得る情報処理装置を提供することである。
実施形態の情報処理装置は、店舗に設置された商品運搬用の籠またはカートに設けられたものであって、店舗内の１か所以上の所定の箇所に配置された１または複数のビーコンが発する信号を受信する近距離無線通信部と、商品を撮像し、撮像画像または当該撮像画像に含まれるコードシンボルを読み取ったコード情報を出力する読取装置から、前記コード情報と前記撮像画像との少なくとも一方を取得する読取情報取得部と、前記読取情報取得部が取得した前記コード情報に基づいて、商品を認識可能な情報を取得する第１の商品情報取得部と、前記読取情報取得部が取得した前記撮像画像を一般物体認識して、商品を認識可能な情報を取得する第２の商品情報取得部と、前記近距離無線通信部の受信状態に応じて、自装置の稼働状態を、前記第１の商品情報取得部による情報の取得が可能で前記第２の商品情報取得部による情報の取得が不可能な第１の稼働状態と、前記第１の商品情報取得部による情報の取得および前記第２の商品情報取得部による情報の取得がともに可能な第２の稼働状態と、のいずれかに切り替える読取制御部と、を備える。
図１は、第１の実施形態の情報処理装置の外観を示す斜視図である。 図２は、情報処理装置のハードウェア構成の一例を示す図である。 図３は、ビーコン端末のハードウェア構成の一例を示す図である。 図４は、情報処理装置の制御部が備える機能部を示す図である。 図５は、情報処理装置で実行される処理の一例を示すフローチャートである。 図６は、第２の実施形態における店舗内のビーコンなどの配置を示す図である。 図７は、情報処理装置とビーコン端末との位置関係を示す図である。 図８は、情報処理装置で実行される処理の流れを示すフローチャートである。
（第１の実施形態）
第１の実施形態について図面を用いて説明する。図１は、本実施形態における情報処理装置１０の外観を示す斜視図である。情報処理装置１０は、読取装置２０とともに、小売りの店舗に設置されて商品の運搬に用いられるカート（ショッピングカート）３０や籠（買物籠）に取り付けて用いられる。また、情報処理装置１０は、購入する商品の情報を記録（登録）する販売データ処理装置であるとともに、代替可能な商品の情報を提示する商品情報提示装置でもある。
情報処理装置１０は、いわゆるタブレット型コンピュータ（タブレット端末）のような外観および機能を有し、本体部１１、表示部１２および操作部１３を備えている。
図２は、情報処理装置１０のハードウェア構成の一例を示す図である。情報処理装置１０は、制御部１１０、記憶部１２０、近距離無線通信部１３０および通信部１４０を、さらに備えている。これらの各部（制御部１１０、記憶部１２０、近距離無線通信部１３０、通信部１４０、表示部１２および操作部１３）は、データバスやアドレスバス等のシステムバス１０１を介して相互に接続している。
表示部１２は、例えば液晶ディスプレイなど、板状の表示デバイスである。操作部１３は、表示部１２の表面に重ねられたタッチ入力デバイス（タッチパネル）である。本体部１１は、一面に開口部を有する薄い箱状の筐体で、上記各部（制御部１１０、記憶部１２０、近距離無線通信部１３０、通信部１４０、表示部１２および操作部１３）を収納する。本体部１１の開口部は、操作部１３が操作を受け付ける領域を露出させる。
制御部１１０は、コンピュータ構成であって、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）およびＲＡＭ（Random Access Memory）などを備える。ＲＯＭは、各種プログラムやデータを記憶する記憶媒体である。ＲＡＭは、各種プログラムや各種データを一時的に記憶する記憶媒体である。制御部１１０は、ＣＰＵがＲＯＭや記憶部１２０に記憶されたプログラムを実行することにより機能し、情報処理装置１０の動作を統括的に制御する。
記憶部１２０は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などの記憶装置である。記憶部１２０は、制御部１１０（ＣＰＵ）が実行可能な各種のプログラムや、設定情報等を記憶する。
また記憶部１２０は、ＰＬＵファイルを、記憶している。ＰＬＵファイルは、各商品に一意に割り当てられた商品コードと、その商品の名称、価格（単価）、商品分類などの商品に関する情報（商品情報）とを、対応付けて格納している。また、ＰＬＵファイルは、情報処理装置１０が商品を一般物体認識（オブジェクト認識）により特定する際に用いる、各商品の特徴量または基準画像等を記憶する。尚、特徴量とは、商品の基準画像から読み取られた、商品の色合いや商品の表面の凹凸状況等のデータである。
通信部１４０は、無線ＬＡＮ通信やモバイル通信等により、サーバ装置や他の情報処理端末（いずれも不図示）と通信するための通信インタフェースである。
ところで、本実施形態では、例えば青果などのコードシンボルなし商品４１が陳列された棚４２に、ビーコン端末４０が備え付けられている。ここで、コードシンボルなし商品４１は、商品の表面に、バーコードや二次元コードなどのコードシンボルが付されていない商品である。情報処理装置１０は、ビーコン端末４０が発する電波の受信を契機に所定の処理を行う機能部（後述）を有している。
図３は、ビーコン端末４０のハードウェア構成の一例を示す図である。ビーコン端末４０は、制御部４１０、記憶部４２０、近距離無線通信部４３０を備える。これら各部は、データバスやアドレスバス等のシステムバス４０１を介して相互に接続している。
制御部４１０は、ＣＰＵ、ＲＯＭおよびＲＡＭ等のコンピュータ構成を備える。ＲＯＭは、各種プログラムやデータを記憶する記憶媒体である。ＲＡＭは、各種プログラムを一時的に記憶したり、各種データを書き換えたりする記憶媒体である。制御部４１０は、ＣＰＵがＲＯＭや記憶部４２０に記憶されたプログラムを実行することにより機能し、ビーコン端末４０の動作を統括的に制御する。
記憶部４２０は、例えばフラッシュメモリ等の記憶装置であって、ビーコンＩＤや配信情報などを記憶する。
近距離無線通信部４３０は、ＢＬＥ等の近距離無線通信用の通信インタフェースである。近距離無線通信部４３０は、通信圏内にある情報処理装置１０などと通信する。
ビーコン端末４０の制御部４１０は、記憶部４２０に記憶されたビーコンＩＤや配信情報を、近距離無線通信部４３０からブロードキャストで配信することで、ビーコンＩＤや配信情報を通信圏内に存在する情報処理装置１０の各々に提供する。
情報処理装置１０において、上述のビーコン端末４０との通信は、近距離無線通信部１３０が担う。近距離無線通信部１３０は、ＢＬＥ等の近距離無線通信を行うための通信インタフェースであって、ビーコン端末４０および読取装置２０と通信する。
読取装置２０は、例えば、ＣＣＤ（Charge Coupled Device）等の撮像素子を備え、当該撮像素子で撮像した画像（撮像画像）から、商品の情報を読み取る。より詳しくは、読取装置２０は、商品の表面に付されたバーコードや二次元コードなどのコードシンボルを読み取った（デコードした）コード情報や、商品の外観を撮像した画像（撮像画像）を、情報処理装置１０に対して出力する。
図４は、情報処理装置１０の制御部１１０が備える機能部を示す図である。制御部１１０は、近距離通信制御部１１１、通信制御部１１２、読取情報取得部１１３、商品情報取得部１１４、読取制御部１１５を備える。制御部１１０は、ＲＯＭや記憶部１２０に記憶されたプログラムと協働することで、上記各機能部を実現する。
近距離通信制御部１１１は、近距離無線通信部１３０を制御することで、ビーコン端末４０と近距離無線通信を行う。例えば、近距離通信制御部１１１は、ビーコン端末４０からブロードキャストで配信される配信情報（ビーコンＩＤ）を受信する。また、近距離通信制御部１１１は、読取装置２０との間で１対１の通信（近距離無線通信）を確立する。
通信制御部１１２は、通信部１４０を制御することで、サーバ装置などと通信を行う。読取情報取得部１１３は、読取装置２０から入力されたコード情報や撮像画像を取得する。
商品情報取得部１１４は、第１の商品情報取得部の一例であるとともに、第２の商品情報取得部の一例である。商品情報取得部１１４は、読取情報取得部１１３が取得したコード情報や撮像画像に合致する商品の情報を、ＰＬＵファイルから取り出す。
より具体的には、商品情報取得部１１４は、読取情報取得部１１３が取得したのがコード情報である場合には、当該コード情報と一致する商品コードをＰＬＵファイルから探し出し、当該商品コードに対応付けられた商品情報を取得する。
また、商品情報取得部１１４は、読取情報取得部１１３が取得したのが撮像画像である場合には、当該撮像画像に基づいて一般物体認識（オブジェクト認識）を行って特徴量を得て、当該特徴量が合致する商品の情報を、ＰＬＵファイルから取得する。
なお、上述の商品コードおよび特徴量は、商品を認識可能な情報の一例である。
画像中に含まれる物体を認識する一般物体認識（generic object recognition）については、例えば下記の文献において認識技術が解説されている。
柳井 啓司，“一般物体認識の現状と今後”、情報処理学会論文誌、Ｖｏｌ．４８、Ｎｏ．ＳＩＧ１６ [平成３０年１月５日検索]、インターネット<URL：http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf>
商品情報取得部１１４は、後述の読取制御部１１５の制御に従い、自身の稼働状態を、第１の稼働状態と第２の稼働状態とのいずれかに切り替える。第１の稼働状態の商品情報取得部１１４は、コード情報に基づく商品認識のみを行い、撮像画像に基づく商品認識を行わない。第２の稼働状態の商品情報取得部１１４は、コード情報に基づく商品認識に加え、撮像画像に基づく商品認識をも行う。
読取制御部１１５は、近距離通信制御部１１１が、ビーコン端末４０からビーコンＩＤを受信した場合に、商品情報取得部１１４に対し、稼働状態を、第２の稼働状態に切り替えるよう指示する。
なお、読取制御部１１５は、操作部１３を介して所定の操作入力が行われた場合に、商品情報取得部１１４に対し、稼働状態を第２の稼働状態に切り替えるよう指示する。つまり、情報処理装置１０は、例えばショッピングカート３０を使用中の客などがビーコンＩＤの受信の有無に関わらずオブジェクト認識を行いたい場合などに、所定の操作によりオブジェクト認識が可能な状態に切り替えることを許容する。
また、読取制御部１１５は、起動時は、商品情報取得部１１４に対し、第１の稼働状態で稼働するよう指示する。以降、商品情報取得部１１４は、基本的には、第１の稼働状態を維持し、読取制御部１１５から稼働状態を切り替える旨の指示があった場合に、稼働状態を切り替える。
このような構成において、情報処理装置１０は、読取装置２０から送られるコード情報や撮像画像に合致する商品の商品情報を、購入する商品の情報として、記憶部１２０などに設定された所定の領域に、記録する。
情報処理装置１０および読取装置２０が取り付けられたショッピングカート３０を使用する顧客は、読取装置２０に商品を読み取らせた後に、ショッピングカート３０に商品を入れる。なお、ショッピングカート３０は、当該ショッピングカート３０が運搬する商品の合計重量を計測する秤を備えていてもよい。そして、情報処理装置１０が、秤の出力を受けて、読取装置２０が読み取った商品に対応する分だけ増えたか確認するようにしてもよい。
次に、図５を参照して、情報処理装置１０の動作について説明する。図５は、情報処理装置１０で実行される処理の一例を示すフローチャートである。
情報処理装置１０の制御部１１０は、近距離通信制御部１１１として、近距離無線通信部１３０を介してビーコン端末４０のビーコンＩＤを受信した場合（ステップＳ１のＹｅｓ）、読取制御部１１５として、オブジェクト認識をＯＮにする（ステップＳ２）。
ここで、オブジェクト認識をＯＮにするとは、本実施形態では、商品情報取得部１１４に対し、稼働状態を、第２の稼働状態に切り替えるよう指示することである。当該指示を受けた商品情報取得部１１４は、現行の稼働状態が第１の稼働状態であれば、稼働状態を第２の稼働状態に切り替え、現行の稼働状態が第２の稼働状態であれば、稼働状態を現行のまま維持する。
ステップＳ１において、近距離通信制御部１１１としての制御部１１０が、近距離無線通信部１３０を介してビーコン端末４０のビーコンＩＤを受信しないとき（ステップＳ１のＮｏ）、制御部１１０は、読取制御部１１５として、オブジェクト認識をＯＦＦにする（ステップＳ３）。
ここで、オブジェクト認識をＯＦＦにするとは、本実施形態では、商品情報取得部１１４に対し、稼働状態を、第１の稼働状態に切り替えるよう指示することである。当該指示を受けた商品情報取得部１１４は、現行の稼働状態が第２の稼働状態であれば、稼働状態を第１の稼働状態に切り替え、現行の稼働状態が第１の稼働状態であれば、稼働状態を現行のまま維持する。
上述のように動作するよう情報処理装置１０が構成された本実施形態においては、ショッピングカート３０が棚４２に近づき、当該ショッピングカート３０に取り付けられた情報処理装置１０がビーコンＩＤを受信すると、情報処理装置１０は、青果などのコードシンボルなし商品４１の読み取りに備え、オブジェクト認識をＯＮに切り替える。また、ショッピングカート３０が棚４２から遠ざかり、当該ショッピングカート３０に取り付けられた情報処理装置１０がビーコンＩＤを受信しない状態になると、情報処理装置１０は、オブジェクト認識をＯＦＦに切り替え、商品認識はコードシンボルに基づいて行う。
以上のような本実施形態によれば、オブジェクト認識を、コードシンボルなし商品４１が陳列された棚４２の付近だけで行うようにすることができる。これにより、例えば、コードシンボルなし商品４１の読み取りを行うと想定されない場所でのオブジェクト認識を、控えることが可能となる。
また、オブジェクト認識が控えられた状態（第１の稼働状態）においても、所定の操作により第２の稼働状態に切り替え可能に構成されていることで、例えば、棚４２から離れた位置でショッピングカート３０を使用中の客の連れが、コードシンボルなし商品４１を持ってきた場合など、その場でオブジェクト認識を行える状態に切り替えることが可能である。
なお、本実施形態において、読取装置２０と情報処理装置１０とは無線通信により通信可能に接続されているが、実施にあたってはこれに限らない。例えば、読取装置２０と情報処理装置１０とが有線で通信可能に接続されていてもよいし、また、読取装置２０が情報処理装置１０に直接連結されていてもよいし、或いは、読取装置２０が情報処理装置１０に組み込まれていてもよい。
また、本実施形態において、読取制御部１１５は、商品情報取得部１１４に第１の稼働状態と第２の稼働状態とを切り替えるよう働きかけることで、所望の機能を実現しているが、実施にあたってはこれに限らない。
例えば、商品情報取得部１１４は常に本実施形態の第２の稼働状態にあり、読取制御部１１５は、読取情報取得部１１３に対して撮像画像の取得の実行／不実行を切り替えるように指示してもよい。
また、例えば、読取制御部１１５は、読取装置２０に対して、稼働状態を切り替えるように指示してもよい。この場合、商品情報取得部１１４は常に本実施形態の第２の稼働状態にあり、読取装置２０が、読取制御部１１５の制御に従って、稼働状態を、第１の稼働状態と第２の稼働状態とのいずれかに切り替える。第１の稼働状態の読取装置２０は、撮像画像からコードシンボルを検知すると、当該コードシンボルからコード情報を読み取り、当該コード情報を情報処理装置１０に出力する。第２の稼働状態の読取装置２０は、第１の稼働状態で行う上述の処理に加え、撮像画像からコードシンボルを検知できない場合に、撮像画像を、情報処理装置１０に出力する。
以上いずれの手法によっても同様の働きを得ることができる。
（第２の実施形態）
以下、第２の実施形態について説明する。この説明にあたり、第１の実施形態と同じ箇所については同じ符号を用い、また、詳細な説明を省略する。図６は、本実施形態における店舗内のビーコンなどの配置を示す図である。本実施形態においては、複数のビーコン端末４０が、店舗内に概ねまんべんなく配置されている。また、店舗内には、当該店舗内の無線通信をカバーするアクセスポイントが備えつけられている。アクセスポイントは、情報処理装置１０と店舗サーバとの通信を仲介する。
本実施形態の情報処理装置１０は、記憶部１２０に、マップ情報を記憶している。マップ情報は、各ビーコン端末４０のビーコンＩＤおよび位置を示す情報と、商品の陳列場所である棚の位置を示す情報と、当該棚に陳列されている商品がコードシンボル付きであるか否かが判断可能な情報と、を対応付けて記憶している。
図７は、情報処理装置１０とビーコン端末４０との位置関係を示す図である。本実施形態の読取制御部１１５は、近距離無線通信部１３０が３つ以上のビーコンの信号を受信しているとき、当該信号の電波強度が強い方から３番目までのビーコン端末４０の位置から、マップ情報における自装置の位置を推定し、当該位置とコードシンボルなし商品４１の棚４２との距離が所定の閾値を下回るならば、自装置の稼働状態が第２の稼働状態であるよう、制御する。
図８は、情報処理装置１０で実行される上記処理の流れを示すフローチャートである。読取制御部１１５は、受信した電波強度が１～３番目のビーコン端末４０との相対距離を推定する（ステップＳ１１）。ここではビーコン端末４０から自装置までの距離（相対距離）の推定値を算出するが、この算出手法としては、受信位置での電波強度に基づいて電波の発信位置と受信位置との相対距離を算出する、既存の手法を用いる。
次に読取制御部１１５は、マップ情報を参照し、各ビーコン端末４０との相対位置から、マップ情報における自装置の位置を推定する（ステップＳ１２）。より具体的には、例えば、各ビーコン端末４０を中心としステップＳ１１で推定した相対距離を半径として描いた３つの円の交点を、自装置の推定位置とする。
次に読取制御部１１５は、自装置の推定位置が、コードシンボルなし商品４１に近いかを判断する（ステップＳ１３）。ステップＳ１３において、読取制御部１１５は、マップ情報を参照し、自装置の推定位置と、コードシンボルなし商品４１の棚４２との距離が、所定の閾値を下回るかを判断し、下回る場合には、コードシンボルなし商品４１に近いと判断する。
読取制御部１１５は、コードシンボルなし商品４１に近いと判断した場合には（ステップＳ１３のＹｅｓ）、オブジェクト認識をＯＮにする（ステップＳ１４）。また、読取制御部１１５は、コードシンボルなし商品４１に近くないと判断した場合には（ステップＳ１３のＮｏ）、オブジェクト認識をＯＦＦにする（ステップＳ１５）。
以上、本実施形態によれば、複数のビーコン端末４０が配置された店舗においても、第１の実施形態と同様に、基本的にはコードシンボルの読み取りによる商品認識に限りながらも、コードシンボルなし商品４１の付近ではオブジェクト認識をも併用する情報処理装置１０を提供することができる。
上記実施形態の情報処理装置１０で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供される。
また、上記実施形態の情報処理装置１０で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
さらに、上記実施形態の情報処理装置１０で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上記実施形態の情報処理装置１０で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
また、上記実施形態の情報処理装置１０で実行されるプログラムは、上述した各部（近距離通信制御部１１１、通信制御部１１２、読取情報取得部１１３、商品情報取得部１１４、読取制御部１１５）を含むモジュール構成となっている。ＣＰＵ（プロセッサ）は、上記記憶媒体からプログラムを読み出して実行することにより、上記各部を主記憶装置上にロードする。これにより、近距離通信制御部１１１、通信制御部１１２、読取情報取得部１１３、商品情報取得部１１４、読取制御部１１５が、主記憶装置上に生成される。
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
１０ …情報処理装置
１１ …本体部
１２ …表示部
１３ …操作部
１０１…システムバス
１１０…制御部
１１１…近距離通信制御部
１１２…通信制御部
１１３…読取情報取得部
１１４…商品情報取得部
１１５…読取制御部
１２０…記憶部
１３０…近距離無線通信部
１４０…通信部
２０ …読取装置
３０ …ショッピングカート
４０ …ビーコン端末
４１ …コードシンボルなし商品
４２ …棚
４０１…システムバス
４１０…制御部
４２０…記憶部
４３０…近距離無線通信部
特開２０１８－４５４９７号公報

Claims (6)

  1. 店舗に設置された商品運搬用の籠またはカートに設けられた情報処理装置であって、
    店舗内の１か所以上の所定の箇所に配置された１または複数のビーコンが発する信号を受信する近距離無線通信部と、
    商品を撮像し、撮像画像または当該撮像画像に含まれるコードシンボルを読み取ったコード情報を出力する読取装置から、前記コード情報と前記撮像画像との少なくとも一方を取得する読取情報取得部と、
    前記読取情報取得部が取得した前記コード情報に基づいて、商品を認識可能な情報を取得する第１の商品情報取得部と、
    前記読取情報取得部が取得した前記撮像画像を一般物体認識して、商品を認識可能な情報を取得する第２の商品情報取得部と、
    前記近距離無線通信部の受信状態に応じて、自装置の稼働状態を、前記第１の商品情報取得部による情報の取得が可能で前記第２の商品情報取得部による情報の取得が不可能な第１の稼働状態と、前記第１の商品情報取得部による情報の取得および前記第２の商品情報取得部による情報の取得がともに可能な第２の稼働状態と、のいずれかに切り替える読取制御部と、
    を備える情報処理装置。
  2. 前記読取制御部は、前記近距離無線通信部が前記ビーコンの信号を受信しているとき、自装置の稼働状態が、前記第２の稼働状態であるよう制御する
    請求項１に記載の情報処理装置。
  3. 前記読取制御部は、前記近距離無線通信部が前記ビーコンの信号を受信していないとき、自装置の稼働状態が、前記第１の稼働状態であるよう制御する
    請求項２に記載の情報処理装置。
  4. 店舗内の複数箇所に配置された複数の前記ビーコンのビーコンＩＤと、商品の陳列場所の情報と、商品が前記コードシンボル付きであるか否かが判断可能な情報と、が対応付けられたマップ情報を記憶した記憶部をさらに備え、
    前記読取制御部は、前記近距離無線通信部が３つ以上のビーコンの信号を受信しているとき、当該信号の電波強度が強い方から３番目までの前記ビーコンの位置から推定される前記マップ情報における自装置と、前記コードシンボル付きでない商品の前記陳列場所と、の距離が所定の閾値を下回るならば、自装置の稼働状態が前記第２の稼働状態であるよう制御する
    請求項１に記載の情報処理装置。
  5. 前記読取制御部は、商品の撮像および前記撮像画像の出力と前記コードシンボルの読み取りおよび前記コード情報の出力とを行う読取装置に対して、前記撮像画像の出力を行わないよう指示することにより、前記第１の稼働状態を実現する
    請求項１に記載の情報処理装置。
  6. 店舗に設置された商品運搬用の籠またはカートに設けられ、店舗内の１か所以上の所定の箇所に配置された１または複数のビーコンが発する信号を受信する近距離無線通信部を備えた情報処理装置が備えるコンピュータを、
    商品を撮像し、撮像画像または当該撮像画像に含まれるコードシンボルを読み取ったコード情報を出力する読取装置から、前記コード情報と前記撮像画像との少なくとも一方を取得する読取情報取得部と、
    前記読取情報取得部が取得した前記コード情報に基づいて、商品を認識可能な情報を取得する第１の商品情報取得部と、
    前記読取情報取得部が取得した前記撮像画像を一般物体認識して、商品を認識可能な情報を取得する第２の商品情報取得部と、
    前記近距離無線通信部の受信状態に応じて、自装置の稼働状態を、前記第１の商品情報取得部による情報の取得が可能で前記第２の商品情報取得部による情報の取得が不可能な第１の稼働状態と、前記第１の商品情報取得部による情報の取得および前記第２の商品情報取得部による情報の取得がともに可能な第２の稼働状態と、のいずれかに切り替える読取制御部と、
    として機能させるためのプログラム。
JP2018156707A 2018-08-23 2018-08-23 情報処理装置 Active JP7156860B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2018156707A JP7156860B2 (ja) 2018-08-23 2018-08-23 情報処理装置
CN201910549121.4A CN110858272B (zh) 2018-08-23 2019-06-24 信息处理装置及控制方法、可读存储介质、电子设备
US16/521,420 US20200065792A1 (en) 2018-08-23 2019-07-24 Information processing device
EP19192245.9A EP3617975A3 (en) 2018-08-23 2019-08-19 Information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018156707A JP7156860B2 (ja) 2018-08-23 2018-08-23 情報処理装置

Publications (2)

Publication Number Publication Date
JP2020030701A JP2020030701A (ja) 2020-02-27
JP7156860B2 true JP7156860B2 (ja) 2022-10-19

Family

ID=67659240

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018156707A Active JP7156860B2 (ja) 2018-08-23 2018-08-23 情報処理装置

Country Status (4)

Country Link
US (1) US20200065792A1 (ja)
EP (1) EP3617975A3 (ja)
JP (1) JP7156860B2 (ja)
CN (1) CN110858272B (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008003859A (ja) 2006-06-22 2008-01-10 Toshiba Tec Corp 商品データ処理装置、決済装置及びｐｏｓシステム
JP2013214336A (ja) 2012-01-30 2013-10-17 Toshiba Tec Corp 商品読取装置及び商品読取プログラム
JP2014235530A (ja) 2013-05-31 2014-12-15 Kddi株式会社 セルフショッピングシステム、携帯端末、コンピュータプログラムおよびセルフショッピング方法
WO2016135142A1 (en) 2015-02-23 2016-09-01 Pentland Firth Software GmbH System and method for the identification of products in a shopping cart
WO2017085758A1 (ja) 2015-11-16 2017-05-26 富士通株式会社 情報処理装置、位置推定プログラム及び位置推定方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5372191B2 (ja) * 2012-01-30 2013-12-18 東芝テック株式会社 商品読取装置及び商品読取プログラム
JP5826152B2 (ja) * 2012-11-20 2015-12-02 東芝テック株式会社 商品認識装置及び商品認識プログラム
JP5848734B2 (ja) * 2013-08-30 2016-01-27 東芝テック株式会社 商品登録装置
JP6316169B2 (ja) * 2014-11-06 2018-04-25 東芝テック株式会社 商品販売データ処理装置、読取装置、及びプログラム
JP6813310B2 (ja) * 2016-09-02 2021-01-13 東芝テック株式会社 物品読取装置およびプログラム
JP6798831B2 (ja) * 2016-09-07 2020-12-09 東芝テック株式会社 情報処理装置およびプログラム
CN207311505U (zh) * 2017-10-06 2018-05-04 赵海杰 一种智能购物车

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008003859A (ja) 2006-06-22 2008-01-10 Toshiba Tec Corp 商品データ処理装置、決済装置及びｐｏｓシステム
JP2013214336A (ja) 2012-01-30 2013-10-17 Toshiba Tec Corp 商品読取装置及び商品読取プログラム
JP2014235530A (ja) 2013-05-31 2014-12-15 Kddi株式会社 セルフショッピングシステム、携帯端末、コンピュータプログラムおよびセルフショッピング方法
WO2016135142A1 (en) 2015-02-23 2016-09-01 Pentland Firth Software GmbH System and method for the identification of products in a shopping cart
WO2017085758A1 (ja) 2015-11-16 2017-05-26 富士通株式会社 情報処理装置、位置推定プログラム及び位置推定方法

Also Published As

Publication number Publication date
EP3617975A2 (en) 2020-03-04
EP3617975A3 (en) 2020-03-18
CN110858272B (zh) 2023-06-30
JP2020030701A (ja) 2020-02-27
US20200065792A1 (en) 2020-02-27
CN110858272A (zh) 2020-03-03

Similar Documents

Publication Publication Date Title
CN108537992B (zh) 检验装置、信息处理装置及控制方法
US20170171035A1 (en) Easy wi-fi connection system and method
US8505817B2 (en) Code reading apparatus and code reading method
US20160203429A1 (en) Restocking workflow prioritization
US20140023241A1 (en) Dictionary registration apparatus and method for adding feature amount data to recognition dictionary
US20160171264A1 (en) Information processing apparatus and information processing method
US8342401B2 (en) Code reading apparatus and control method
US20170352077A1 (en) Information collecting system, server, and control program
JP2017049888A (ja) 買物支援サーバ及びそのプログラム
JP2021152895A (ja) 読取装置、商品登録装置及び記録媒体
JP7418173B2 (ja) 顧客モニタリングシステム、及び顧客モニタリング方法
US20160343006A1 (en) Information processing apparatus, information processing system, and information management method
US20120048923A1 (en) Reading apparatus and control method
US11393012B2 (en) Article input device and article input system
JP7156860B2 (ja) 情報処理装置
US20220172189A1 (en) Information processing apparatus and information processing method
US20210366018A1 (en) Server and method for avoiding registered materials
JP6057971B2 (ja) 情報処理装置及びプログラム
US20170083891A1 (en) Information processing apparatus and information processing method
JP2017084377A (ja) 情報処理装置及びプログラム
WO2019181035A1 (ja) 登録システム、登録方法及びプログラム
US20170206531A1 (en) Self-registration system for products
JP7379182B2 (ja) 商品登録装置、商品登録システム及びプログラム
US20240202775A1 (en) Information processing device and information processing method
US20210166212A1 (en) Commodity sales processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210607

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220526

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220726

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221006

R150 Certificate of patent or registration of utility model

Ref document number: 7156860

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150