CN109285019A - 图像处理装置、信息处理装置、系统及控制方法 - Google Patents

图像处理装置、信息处理装置、系统及控制方法 Download PDF

Info

Publication number
CN109285019A
CN109285019A CN201810638028.6A CN201810638028A CN109285019A CN 109285019 A CN109285019 A CN 109285019A CN 201810638028 A CN201810638028 A CN 201810638028A CN 109285019 A CN109285019 A CN 109285019A
Authority
CN
China
Prior art keywords
user
list
commodity
processor
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810638028.6A
Other languages
English (en)
Other versions
CN109285019B (zh
Inventor
澤田崇行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Publication of CN109285019A publication Critical patent/CN109285019A/zh
Application granted granted Critical
Publication of CN109285019B publication Critical patent/CN109285019B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0283—Price estimation or determination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0009—Details of the software in the checkout register, electronic cash register [ECR] or point of sale terminal [POS]
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated
    • G07G1/14—Systems including one or more distant stations co-operating with a central processing unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Image Analysis (AREA)
  • Processing Or Creating Images (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种图像处理装置、信息处理装置、系统及控制方法，其能够迅速地指定对象物，该图像处理装置，用于指定对象物，包括：列表取得部、图像取得部及物品指定部。列表取得部取得存储利用者所访问的区所存储的物品的物品信息的列表。图像取得部取得包含所述利用者出示的对象物的图像的摄像图像。物品指定部基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物。

Description

图像处理装置、信息处理装置、系统及控制方法
本申请主张申请日为2017年07月21日、申请号为JP2017-142010的日本申请为优先权，并引用上述申请的内容，通过引用将其公开内容全部结合于此。
技术领域
本发明的实施例涉及一种图像处理装置、信息处理装置、系统及控制方法。
背景技术
目前，在图像处理装置中有从上方摄像装入到筐等中的商品(对象物)，并指定商品的技术。图像处理装置预先具有多个商品的词库信息，并将词库信息和已摄像的商品图像进行匹配后指定商品。图像处理装置将各词库信息和商品图像进行匹配后指定商品。
当词库信息较多时，图像处理装置存在有匹配处理所需的时间变长这样的问题。
发明内容
鉴于上述问题，本发明所要解决的技术问题是，提供一种图像处理装置、信息处理装置、系统及控制方法，其能够迅速地指定对象物。
为解决上述问题，本发明的一实施例，提供了一种指定对象物的图像处理装置，包括：列表取得部、图像取得部及物品指定部。列表取得部取得存储利用者所访问的区所存储的物品的物品信息的列表。图像取得部取得包含所述利用者出示的对象物的图像的摄像图像。物品指定部基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物。
根据这样的构成，能够迅速地指定对象物。
对于图像处理装置，在一种可能的实施方式中，所述物品指定部当不能基于在所述列表中的物品信息指定所述对象物时，基于在所述列表中的物品信息以外的信息指定所述对象物。
根据这样的构成，能够可靠地指定对象物。
本发明的另一实施例，提供了一种信息处理装置，包括：区指定部，指定利用者所访问的区；物品信息取得部，取得表示所述区所存储的物品的物品信息；以及列表生成部，生成存储所述物品信息的列表。
根据这样的构成，能够向图像处理装置可靠地提供存储物品信息的列表。
对于信息处理装置，在一种可能的实施方式中，还包括：利用者指定部，指定所述利用者，其中，所述列表将表示所述利用者的利用者ID和所述物品信息进行对应并存储。
根据这样的构成，能够通过利用者ID来指定对象物。
本发明的第三实施例，提供了一种系统，包括信息处理装置和图像处理装置，所述信息处理装置，包括：第一通信部，与所述图像处理装置发送接收数据；区指定部，指定利用者所访问的区；物品信息取得部，取得表示所述区所存储的物品的物品信息；列表生成部，生成存储所述物品信息的列表；以及发送部，通过所述第一通信部向所述图像处理装置发送所述列表，所述图像处理装置，包括：第二通信部，与所述信息处理装置发送接收数据；列表取得部，通过所述第二通信部取得所述列表；图像取得部，取得包含所述利用者出示的对象物的图像的摄像图像；以及物品指定部，基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物。
根据这样的构成，能够迅速地指定对象物。
对于系统，在一种可能的实施方式中，所述物品指定部当不能基于在所述列表中的物品信息指定所述对象物时，基于在所述列表中的物品信息以外的信息指定所述对象物。
根据这样的构成，能够可靠地指定对象物。
对于系统，在一种可能的实施方式中，还包括：利用者指定部，指定所述利用者，其中，所述列表将表示所述利用者的利用者ID和所述物品信息进行对应并存储。
根据这样的构成，能够通过利用者ID来指定对象物。
对于系统，在一种可能的实施方式中，所述列表取得部通过所述第二通信部向所述信息处理装置发送请求所述列表的、包含所述利用者ID的请求，作为针对所述请求的响应，取得所述列表。
根据这样的构成，能够通过请求准确地取得与利用者对应的列表。
本发明的第四实施例，提供了一种图像处理装置的控制方法，还包括以下步骤：取得存储利用者所访问的区所存储的物品的物品信息的列表的步骤；取得包含所述利用者出示的对象物的图像的摄像图像的步骤；以及基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物的步骤。
根据这样的控制方法，能够迅速地指定对象物。
对于控制方法，在一种可能的实施方式中，当不能基于在所述列表中的物品信息指定所述对象物时，基于在所述列表中的物品信息以外的信息指定所述对象物。
根据这样的控制方法，能够可靠地指定对象物。
附图说明
下面，参照附图对实施例所涉及的图像处理装置、信息处理装置、系统及程序进行说明。当结合附图考虑时，通过参照下面的详细描述，能够更完整更好地理解本发明以及容易得知其中许多伴随的优点，但此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定，其中：
图1是概略地示出实施例所涉及的指定系统的构成例的框图；
图2是概略地示出实施例所涉及的服务器装置的构成例的框图；
图3是概略地示出实施例所涉及的结账装置的构成例的图；
图4是概略地示出实施例所涉及的结账装置的构成例的框图；
图5是概略地示出实施例所涉及的商品货架的构成例的图；
图6是表示实施例所涉及的利用者信息表的构成例的图；
图7是表示实施例所涉及的货架区ID表的构成例的图；
图8是表示实施例所涉及的货架区信息表的构成例的图；
图9是表示实施例所涉及的候补明细表的构成例的图；
图10是表示实施例所涉及的服务器装置的动作例的流程图；以及
图11是表示实施例所涉及的结账装置的动作例的流程图。
附图标记说明
1 指定系统 10 服务器装置
11 处理器 14 存储部
14a至14d 存储区域 15 通信部
20 结账装置 23及26 摄像头
30 商品货架 31 货架访问传感器
32 利用者传感器 40 来店检测部
210 筐 221 处理器
223 通信部
具体实施方式
以下，参照附图对实施例进行说明。
实施例所涉及的指定系统基于摄像了商品的摄像图像指定商品(对象物)。例如，指定系统被设置在销售商品的店铺等中。指定系统摄像店铺的利用者放置到台等上的筐等所装入的商品而指定利用者想购买的商品。另外，指定系统也可以是指定除商品以外的物品。指定系统所指定的物品并不限定于指定的构成。在这里，指定系统被设置在规定的店铺中。
图1是表示指定系统1的构成例的框图。如图1所示，指定系统1具有服务器装置10(信息处理装置)，结账装置20(图像处理装置)、商品货架30、来店检测部40及网络50等。另外，指定系统1也可以具有除图1所示那样的构成外根据需要的构成、或除去指定的构成。
服务器装置10统括指定系统1。例如，服务器装置10通过网络50与各部发送接收数据。服务器装置10汇总来自各部的数据。此外，服务器装置10向各部发送需要的数据。对服务器装置10详细后述。
结账装置20对商品进行结算。结账装置20被设置在店铺等的出口附近。结账装置20对店铺的利用者具有的在筐内的商品进行结算。结账装置20对筐内进行摄像，并指定筐内的商品。结账装置20对已指定的商品进行结算。对结账装置20详细后述。
商品货架30用于设置商品。例如，商品货架30由店铺的店员(工作人员)等来补充商品。此外，商品货架30具有货架访问传感器31及利用者传感器32等。商品货架30、货架访问传感器31及利用者传感器32详细后述。
来店检测部40对进入到店铺的利用者进行检测。来店检测部40被设置在店铺的入口附近。来店检测部40对从入口进店的利用者进行检测。来店检测部40具有阅读器41及摄像头42等。
阅读器41从进店的利用者所持的便携终端(例如、卡)读取利用者ID。例如，阅读器41从利用者所持的IC芯片或RF-ID读取利用者ID。利用者将进店时自身的便携终端对准阅读器41。阅读器41从利用者所对准的便携终端取得利用者ID。阅读器41将已取得的利用者ID发送给服务器装置10。
此外，摄像头42对进店的利用者的人脸进行摄像。例如，摄像头42在入口的天棚附近朝向入口而设置。摄像头42是CCD摄像头等。摄像头42将已摄像的图像发送给服务器装置10。
网络50将服务器装置10、结账装置20、货架访问传感器31、利用者传感器32及来店检测部40相互进行连接。网络50诸如是店铺内的LAN网络(互联网等)。
另外，指定系统1也可以具有多个商品货架30。指定系统1具有的商品货架30的个数并不限定于指定的个数。
接着，对服务器装置10进行说明。图2是表示服务器装置10的构成例的框图。在图2所示的构成例中，服务器装置10具有处理器11、存储部14、通信部15、操作部16及显示部17等。处理器11、存储部14、通信部15、操作部16及显示部17通过数据总线相互连接。另外，服务器装置10也可以具有除图2所示那样的构成外根据需要的构成、或除去指定构成。
处理器11具有控制服务器装置10整体动作的功能。处理器11也可以具有内部存储器及各种接口等。处理器11通过执行内部存储器或存储部14预先存储的程序来实现各种处理。处理器11诸如是CPU。
另外，处理器11通过执行程序来实现的各种功能中的一部分功能也可以通过硬件电路来实现。这时，处理器11控制通过硬件电路执行的功能。
存储部14存储各种数据。例如，存储部14具有作为ROM、RAM及NVM的功能。例如，存储部14存储控制程序及控制数据等。控制程序及控制数据根据服务器装置10的规格预先被安装。例如，控制程序是支持在服务器装置10中实现的功能的程序等。
此外，存储部14暂时存储处理器11的处理中的数据等。此外，存储部14也可以存储在执行应用程序所需的数据及应用程序的执行结果等。
存储部14具有存储利用者信息表的存储区域14a、存储货架区ID表的存储区域14b、存储货架区信息表的存储区域14c及存储候补明细表的存储区域14d等。关于利用者信息表、货架区ID表、商品表及候补明细表详细后述。
通信部15(第一通信部)是通过网络50与外部装置发送接收数据用的接口。通信部15具有作为与结账装置20、货架访问传感器31、利用者传感器32及来店检测部40等发送接收数据的接口的功能。通信部15诸如是支持LAN连接的接口。
操作部16从操作员接受各种操作的输入。操作部16将表示接受到的操作的信号发送给处理器11。例如，操作部16包括键盘、数字键及触摸面板。
显示部17通过处理器11的控制来显示各种信息。例如，显示部17具有液晶显示器。另外，当操作部16由触摸面板等构成时，显示部17也可以与操作部16一体形成。
接着，对结账装置20进行说明。如图3所示，结账装置20具有机箱21、摄像头23、显示器24、操作部25及摄像头26等。机箱21是形成结账装置20的外观的框架。机箱21以能够设置框210的方式被形成。在图3所示的例子中，机箱21为コ字型，以能够装载筐210的方式被形成。
摄像头23用于摄像筐210内的商品。在图3所示的例子中，摄像头23以从上方摄像筐210的方式被设置。摄像头23也可以从斜上方摄像筐210内的方式被设置。摄像头23被设置的位置及方向并不限定于指定的构成。
另外，结账装置20也可以设置多个摄像头23。这时，多个摄像头23也可以由各不相同的位置及角度摄像筐210内的商品的方式设置。
例如，摄像头23是CCD摄像头等。此外，摄像头23也可以是摄像不可见光的装置。摄像头23的构成并不限定于指定构成。显示器24是显示后述的处理器221输出的图像的显示装置。显示器24诸如是液晶显示器等。
操作部25通过结账装置20的利用者输入各种的操作指示。操作部25将利用者所输入的操作指示的数据发送给处理器221。操作部25诸如是键盘、数字键及触摸面板等。此外，操作部25也可以从利用者接受手势的输入。在这里，操作部25是触摸面板，并与显示器24一体形成。
摄像头26摄像已放置筐210的利用者的人脸。摄像头26从正面摄像放置了筐210的利用者。在图3所示的例子中，摄像头26设置在显示器24及操作部25被设置的面上。
例如，摄像头26是CCD摄像头等。此外，摄像头26也可以是摄像不可见光的装置。摄像头26的构成并不限定于指定的构成。
另外，摄像头23、显示器24、操作部25或摄像头26也可以与机箱21一体形成。此外，结账装置20也可以具有照射筐210内的商品的照明等。
接着，对结账装置20的构成例进行说明。图4是表示结账装置20的构成例的框图。如图4所示，结账装置20具有摄像头23、显示器24、操作部25、摄像头26、处理器221、存储部222、通信部223、摄像头接口224、显示器接口225、操作部接口226及摄像头接口227等。处理器221、存储部222、通信部223、摄像头接口224、显示器接口225、操作部接口226及摄像头接口227通过数据总线等相互连接。
摄像头接口224和摄像头23通过数据总线等相互连接。显示器接口225和显示器24通过数据总线等相互连接。操作部接口226和操作部25通过数据总线等相互连接。摄像头接口227和摄像头26通过数据总线等相互连接。另外，结账装置20也可以具有除图4所示那样的构成外根据需要的构成、或除去指定的构成。
摄像头23、显示器24、操作部25及摄像头26如上述那样。处理器221具有控制结账装置20的整体动作的功能。处理器221也可以具有内部缓存及各种接口等。处理器221通过执行内部存储器或存储部222等所预先存储的程序来实现各种处理。处理器221诸如是CPU。
另外，处理器221通过执行程序实现的各种功能中的一部分功能也可以通过硬件电路来实现。这时，处理器221对通过硬件电路执行的功能进行控制。
存储部222存储各种数据。例如，存储部222具有作为ROM、RAM及NVM的功能。例如，存储部222存储控制程序及控制数据等。控制程序及控制数据根据结账装置20的规格被预先安装。例如，控制程序是支持在结账装置20中实现的功能的程序等。
此外，存储部222暂时地存储处理器221的处理中的数据等。此外，存储部222也可以存储执行应用程序所需的数据及应用程序的执行结果等。
通信部223(第二通信部)是通过网络50与外部装置发送接收数据用的接口。通信部223具有作为与服务器装置10等发送接收数据的接口的功能。通信部223诸如是支持LAN连接的接口。
摄像头接口224是处理器221与摄像头23通信用的接口。例如，处理器221通过摄像头接口224发送使摄像头23取得图像的信号。此外，处理器221也可以通过摄像头接口224在摄像头23中设定摄像用的摄像头参数。
此外，摄像头接口224取得摄像头23所摄像的图像。摄像头接口224将已取得的图像发送给处理器221。处理器221从摄像头接口224取得摄像头23所摄像的图像。
显示器接口225是处理器221与显示器24通信用的接口。例如，处理器221通过显示器接口225向显示器24发送显示画面。
操作部接口226是处理器221与操作部25通信用的接口。例如，处理器221通过操作部接口226接收表示操作部25所输入的操作的信号。
摄像头接口227是处理器221与摄像头26通信用的接口。例如，处理器221通过摄像头接口227发送使摄像头26取得图像的信号。此外，处理器221也可以通过摄像头接口227在摄像头26中设定摄像用的摄像头参数。
此外，摄像头接口227取得摄像头26所摄像的图像。摄像头接口227将已取得的图像发送给处理器221。处理器221从摄像头接口227取得摄像头26所摄像的图像。
接着，对商品货架30进行说明。图5示出商品货架30的构成例。商品货架30在店铺中以商品可显示的方式被配置。也就是说，商品货架30以利用者可取出商品的方式存储商品。例如，商品货架30以商品被向外部出示的方式存储商品。
在这里，商品货架30具有三个存储(收纳)空间。存储空间存储商品。在这里，各存储空间分别存储商品A及商品B、商品C及商品D以及商品E至商品G。例如，存储空间以从商品货架30的规定面(表面)能配置或取出商品的方式形成。另外，商品货架30具有的存储空间的数量及形状并不限定于指定的构成。
商品货架30具有货架访问传感器31及利用者传感器32。货架访问传感器31检测访问货架区的利用者。在这里，货架访问传感器31对访问作为货架区的商品货架30的利用者进行检测。货架访问传感器31检测利用者进入到能够取出商品货架30的商品的范围。例如，货架访问传感器31检测位于离商品货架30数米以内的利用者。货架访问传感器31诸如是红外线传感器等。
货架访问传感器31当检测出利用者时，则向服务器装置10发送表示检测出利用者的检测信号。
此外，货架访问传感器31存储指定自身的货架访问传感器ID。货架访问传感器31在检测信号中存储自身的货架访问传感器ID，并发送给服务器装置10。
利用者传感器32取得用于指定访问商品货架30的利用者的信息。在这里，利用者传感器32由摄像利用者的人脸的摄像头构成。利用者传感器32摄像访问商品货架30的利用者的人脸，并向服务器装置10发送摄像图像。
另外，利用者传感器32也可以由从便携终端取得利用者ID的阅读器构成。利用者传感器32的构成并不限定于指定的构成。
接着，对存储区域14a所存储的利用者信息表进行说明。利用者信息表示出与利用者关联的利用者信息。图6示出利用者信息表的构成例。
如图6所示，利用者信息表将“利用者ID”和该利用者ID所示的利用者的利用者信息进行对应并存储。利用者信息表存储“信用卡信息”及“人脸信息”，作为利用者信息。
“利用者ID”是用于指定利用者的标识符。“利用者ID”被固有地分配给利用者。“利用者ID”也可以存储在利用者所持的便携终端中。例如，利用者ID是数值、文字列或这些的组合。
“信用卡信息”是与对应的利用者ID所示的利用者所持的信用卡有关的信息。“信用卡信息”是为了进行信用卡结算而需要的信息。“信用卡信息”包含信用卡编号等。
“人脸信息”是用于从包含利用者的人脸的图像指定利用者的信息。例如，“人脸信息”是利用者的人脸图像。此外，“人脸图像”也可以包含人脸图像的特征量。“人脸图像”的构成并不限定于指定的构成。
利用者信息表预先存储在存储区域14a中。例如，当接受到利用者的登记时，操作员通过操作部16等编制或更新利用者信息表。
接着，对存储区域14b存储的货架区ID表进行说明。货架区ID表示出表示货架区的货架区ID。图7示出货架区ID表的构成例。
如图7所示，货架区ID表对应存储“货架访问传感器ID”和“货架区ID”。
“货架访问传感器ID”是用于指定货架访问传感器31的标识符。“货架访问传感器ID”固有地分配给货架访问传感器31。“货架访问传感器ID”存储在货架访问传感器31中。例如，“货架访问传感器ID”是数值、文字列或这些的组合。
“货架区ID”是用于指定表示规定区域的货架区的标识符。货架区是在店铺内存储提供给利用者的商品的区域。例如，货架区也可以是规定的商品货架30。此外，货架区也可以是规定的商品货架30的规定的收纳空间。此外，货架区也可以是多个商品货架30。货架区的构成并不限定于指定的构成。“货架区ID”固有地分配给货架区。例如，“货架区ID”是数值、文字列或这些的组合。
“货架区ID”示出所对应的“货架访问传感器ID”所示的货架访问传感器31检测访问的货架区。也就是说，“货架访问传感器ID”所示的货架访问传感器31检测访问“货架区ID”所示的货架区的利用者。
另外，也可以针对多个“货架访问传感器ID”对应有一个“货架区ID”。这时，例如，“货架区ID”所示的货架区设置多个货架访问传感器31。
此外，也可以针对一个“货架访问传感器ID”对应有多个“货架区ID”。这时，例如，在多个货架区设置一个货架访问传感器31。货架区ID表预先存储在存储区域14b中。例如，操作员通过操作部16编制或更新货架区ID表。
接着，对存储区域14c存储的货架区信息表进行说明。货架区信息表示出与货架区关联的货架区信息。图8示出货架区信息表的构成例。
如图8所示，货架区信息表对应存储“货架区ID”和货架区信息。货架区信息表存储“利用者传感器ID”及“商品”，作为货架区信息。
“货架区ID”如上所述那样。
“利用者传感器ID”是表示指定访问了所对应的货架区ID所示的货架区的利用者用的利用者传感器32的标识符。也就是说，“利用者传感器ID”示出“货架区ID”的货架区所设置的利用者传感器32。例如，“利用者传感器ID”是数值、文字列或这些的组合。
“商品”是表示所对应的货架区ID所示的货架区所存储的商品的信息(商品信息)。也就是说，“商品”示出在该货架区中提供给利用者的商品。“商品”示出访问了该货架区的利用者有可能放入到筐210中的商品。“商品”也可以包含多个商品信息。商品信息也可以是表示商品的商品代码或商品名等。
货架区信息表预先存储在存储区域14c中。例如，操作员通过操作部16编制或更新货架区信息表。例如，“商品”也可以根据表示商品的配置的货架分配信息等而生成。
接着，对存储区域14d存储的候补明细表进行说明。候补明细表示出表示利用者有可能装入到筐210中的商品(候补商品)的商品信息(物品信息)的列表(候补列表)。图9示出候补明细表的构成例。
如图9所示，候补明细表对应存储“利用者ID”和“候补列表”。
“利用者ID”如上述那样。
“候补列表”是表示所对应的“利用者ID”所示的利用者有可能装入到筐210中的商品的商品信息的列表。也就是说，“候补列表”是表示利用者所访问的货架区所存储的商品的列表(明细)。
接着，对服务器装置10的处理器11实现的功能进行说明。以下的功能通过处理器11执行存储部14等所存储的程序来实现。
首先，处理器11具有取得进入到店铺的利用者的利用者ID的功能。处理器11使用来店检测部40的摄像头42摄像进店了的利用者的人脸。例如，处理器11从摄像头42以规定间隔取得图像，并判定在摄像图像中是否有利用者的人脸。处理器11取得判定出有人脸的图像(摄像图像)。
处理器11基于利用者信息表的人脸信息指定映入到摄像图像的利用者的利用者ID。例如，处理器11使用模式匹配等技术对摄像图像内的人脸区域和各人脸信息进行比较。
处理器11指定与人脸区域一致的人脸信息。处理器11从利用者信息表取得与该人脸信息对应的利用者ID。
当没有与人脸区域一致的人脸信息时，处理器11发放该利用者的利用者ID。此外，处理器11将发放的利用者ID和与人脸区域对应的人脸信息进行对应存储在利用者信息表。另外，处理器11也可以暂时地(例如，到该利用者离开店铺)，将该利用者ID和该人脸信息存储在利用者信息表中。
另外，处理器11也可以通过阅读器41从利用者所持的便携终端取得利用者ID。
此外，处理器11具有针对取得的利用者ID生成候补列表的功能。处理器11当取得利用者ID时，则将该利用者ID和候补列表进行对应并存储在候补明细表中。处理器11将空的候补列表存储在候补商品表中。
此外，处理器11具有指定利用者所访问的货架区的功能(区指定部)。首先，处理器11判定利用者是否访问了货架区。例如，处理器11判定是否通过通信部15从货架访问传感器31接收到表示利用者访问了货架区的检测信号。处理器11当判定为接收到检测信号时，则判定利用者访问了货架区。
此外，处理器11也可以使用利用者传感器32判定利用者是否访问了货架区。例如，处理器11也可以基于来自利用者传感器32的图像，当利用者的手和货架区之间的距离小于等于阈值时，判定为利用者访问了货架区。此外，商品货架30也可以具有测量商品的重量的重量传感器。处理器11也可以当重量传感器测量的重量较轻时则判定为利用者访问了货架区。处理器11判定访问货架区的方法并不限定于指定的方法。
处理器11当判定为利用者访问了货架区时，则指定该货架区。也就是说，处理器11取得表示该货架区的货架区ID。
处理器11取得发送了检测信号的货架访问传感器31的货架访问传感器ID。例如，处理器11从检测信号取得货架访问传感器ID。
处理器11参照货架区ID表取得与货架访问传感器ID对应的货架区ID。也就是说，处理器11指定表示利用者所访问的货架区的货架区ID。
此外，处理器11具有指定访问了货架区的利用者的功能(利用者指定部)。处理器11指定用于指定访问了该货架区的利用者的利用者传感器32。也就是说，处理器11参照货架区信息表，取得与已取得的货架区ID对应的利用者传感器ID。
处理器11从已取得的利用者传感器ID所示的利用者传感器32取得包含访问了货架区的利用者的人脸的摄像图像。处理器11基于利用者信息表的人脸信息指定映入到摄像图像的利用者的利用者ID。例如，处理器11使用模式匹配等技术对摄像图像内的人脸区域和各人脸信息进行比较。
处理器11指定与人脸区域一致的人脸信息。处理器11从利用者信息表取得与该人脸信息对应的利用者ID。
另外，当在摄像图像中映入有多个利用者的人脸时，处理器11也可以指定离货架区最近的利用者。
此外，商品货架30也可以具有从便携终端读取利用者ID的阅读器作为利用者传感器32。处理器11也可以通过阅读器从便携终端读取利用者ID。当在阅读器的可通信范围内存在有多个利用者时，处理器11也可以取得来自便携终端的信号的强度最强的(离阅读器最近的)便携终端的利用者ID，作为访问了货架区的利用者的利用者ID。
此外，处理器11具有取得表示已指定的货架区所存储的商品的商品信息的功能(物品信息取得部)。处理器11参照货架区信息表，取得与已取得的货架区ID对应的商品信息。
此外，处理器11具有生成存储已取得的商品信息的候补列表的功能(列表生成部)。处理器11在候补明细表中，向与所取得的利用者ID对应的候补列表追加所取得的商品信息。通过这样，能够通过利用者ID来指定商品(对象物)。
如上所述，处理器11(信息处理器装置)能够向结账装置(图像处理装置)20可靠地提供存储物品信息的候补列表(列表)。
此外，处理器11具有将候补列表发送给结账装置20的功能(发送部)。例如，处理器11通过通信部15从结账装置20接收请求与规定的利用者对应的候补列表的请求。例如，请求包含利用者的利用者ID。
处理器11参照候补明细表取得与利用者对应的候补列表。例如，处理器11取得与请求所存储的利用者ID对应的候补列表。
处理器11通过通信部15将所取得的候补列表发送给结账装置20，作为针对请求的响应。
接着，对结账装置20的处理器221实现的功能进行说明。以下功能通过处理器221执行存储部222等所存储的程序来实现。
首先，处理器221具有取得利用者从货架区取出的商品的图像的功能(图像取得部)。在这里，利用者从货架区取出商品后放入到筐210中。此外，利用者将筐210放置到结账装置20的规定区域。
处理器221取得摄像了在筐210内的商品的图像。例如，处理器221对在规定区域配置有筐210的情况进行检测。例如，处理器221基于来自摄像头23的图像对筐210被放置到机箱21上的情况进行检测。
另外，结账装置20也可以在该规定区域设置重量计。例如，处理器221也可以基于来自重量计的信号对在重量计上配置了筐210的情况进行检测。
处理器221当检测出筐210已被配置时，则摄像包含在筐210内的商品的图像。例如，处理器221向摄像头23发送进行摄像的信号。处理器221从摄像头23取得摄像图像。另外，处理器221也可以为了摄像图像而在摄像头23中设定摄像参数。另外，处理器221也可以从外部装置取得摄像图像。另外，处理器221也可以从外部装置取得摄像图像。
此外，处理器221具有指定放置了筐210的利用者的功能。
处理器221使用摄像头26摄像放置了筐的利用者的人脸。例如，处理器221当检测出筐210在规定区域已配置了筐210时，则使用摄像头26摄像利用者的人脸。
处理器221基于利用者信息表的人脸信息指定映入到摄像图像的利用者的利用者ID。例如，处理器221使用模式匹配等技术对摄像图像内的人脸区域和各人脸信息进行比较。
处理器221指定与人脸区域一致的人脸信息。处理器221从利用者信息表取得与该人脸信息对应的利用者ID。
另外，结账装置20也可以具有从便携终端读取利用者ID的阅读器。处理器221也可以使用阅读器从利用者所对准的便携终端取得利用者ID。
此外，处理器221具有通过通信部223从服务器装置10取得利用者所访问的货架区的商品(候补商品)的列表(候补列表)的功能(列表取得部)。例如，处理器221将请求该利用者的候补列表的请求发送给服务器装置10。请求包含该利用者的利用者ID。处理器221取得该利用者的候补列表作为针对该请求的响应。也就是说，列表取得部通过通信部(第二通信部)223向服务器(信息处理装置)10发送请求列表的、包含利用者ID的请求，作为针对该请求的响应，取得候补列表(列表)。通过这样，能够通过请求准确地取得与利用者对应的候补列表(列表)。
此外，处理器221具有从摄像图像提取作为映入有商品的图像区域的商品区域(物品区域)的功能。处理器221基于商品图像提取商品区域。例如，处理器221进行边缘检测等从商品图像中提取商品区域。
另外，结账装置20也可以具有距离传感器。处理器221也可以使用距离传感器取得表示从规定位置向摄像图像的各部的距离的距离信息。处理器221也可以从距离信息提取商品区域。处理器221提取商品区域的方法并不限定于指定的方法。
此外，处理器221具有从候补列表的候补商品中指定商品区域内的商品(对象物)的功能(物品指定部)。例如，处理器221取得候补商品的词库信息。词库信息是用于与商品区域的图像进行比较而指定商品区域的商品的信息。例如，词库信息是商品图像或商品图像的特征量等。词库信息的构成并不限定于指定的构成。
例如，存储部222也可以预先存储各商品的词库信息。处理器221也可以从存储部222取得候补商品的词库信息。此外，处理器221也可以从服务器装置10取得词库信息。
处理器221基于候补商品的词库信息指定商品区域的商品。例如，处理器221使用模式匹配等技术对商品区域的图像和各词库信息进行比较。
处理器221指定与商品区域的图像一致的词库信息。处理器221指定相似度最高且超过了规定阈值的词库信息。处理器221取得与已指定的词库信息对应的商品的商品信息，作为表示商品区域的商品的商品信息。
此外，处理器221具有当不能从候补商品中指定商品区域内的商品时，从候补商品以外在店铺中的商品中指定商品区域内的商品的功能(物品指定部)。通过这样，能够可靠地指定商品区域内的商品(对象物)。
处理器221当在各候补商品的词库信息中最高的相似度小于等于规定阈值时，判定商品区域内的商品不在候补商品中。当判定为商品区域内的商品不在候补商品中时，则处理器221从在店铺中的其他商品中指定商品区域内的商品。
例如，处理器221取得候补商品以外的商品的词库信息。例如，处理器221也可以从存储部222取得该词库信息。此外，处理器221也可以从服务器装置10取得该词库信息。
处理器221基于该词库信息指定商品区域的商品。例如，处理器221使用模式匹配等技术对商品区域的图像和各词库信息进行比较。
处理器221指定与商品区域的图像一致的词库信息。处理器221指定相似度最高且超过了规定阈值的词库信息。处理器221取得与已指定的词库信息对应的商品的商品信息，作为表示商品区域的商品的商品信息。
此外，处理器221具有对已指定的商品进行结算的功能。例如，处理器221取得已指定的商品的货款。例如，存储部222也可以预先存储各商品的货款。处理器221也可以从存储部222取得已指定的商品的货款。此外，处理器221也可以从服务器装置10取得已指定商品的货款。
处理器221基于商品的货款对商品进行结算。例如，处理器221从服务器装置10取得与已指定的利用者ID对应的信用卡信息。处理器221基于信用卡信息对商品进行结算。
此外，处理器221也可以从利用者接受信用卡信息的输入。例如，处理器221也可以使用信用卡读卡器等取得信用卡信息。
此外，处理器221也可以使用现金、借记卡或电子货币等对商品进行结算。处理器221对商品进行结算的方法并不限定于指定的方法。
例如，结算方法也可以是微信支付、支付宝支付、百度钱包支付等的扫码支付，也可以是Apple Pay、NFC(近距离通信)支付、扫描支付、支付圈、财付通、盛付通、银联、一网通支付等，或者未来出现的新的支付手段，关于结算支付方法，这里没有特别限定，只要是能够支付货款或服务费用就可以。
此外，处理器221当结算完成时，则删除服务器装置10的候补列表。例如，处理器221通过通信部223将使候补列表删除的信号发送给服务器装置10。例如，该信号包含结算已完成的利用者的利用者ID。
服务器装置10的处理器11通过通信部15接收该信号。处理器11按照该信号从候补明细表删除与利用者ID对应的候补列表。
另外，处理器221也可以远程访问服务器装置10的存储部14删除候补列表。
接着，对服务器装置10的动作例进行说明。图10是用于对服务器装置10的动作例进行说明的流程图。首先，服务器装置10的处理器11通过来店检测部40判定利用者是否已进店(ACT11)。
当判定利用者已进店时(ACT11的YES)，则处理器11取得已进店的利用者的利用者ID(ACT12)。当取得利用者ID时，则处理器11向候补明细表追加利用者ID和候补列表(ACT13)。
当追加利用者ID和候补列表时，则处理器11判定利用者是否访问了货架区(ACT14)。当判定利用者访问了货架区时(ACT14的YES)，则处理器11取得检测出利用者的货架访问传感器31的货架访问传感器ID(ACT15)。
当取得货架访问传感器ID时，则处理器11参照货架区ID表，取得与已取得的货架访问传感器ID对应的货架区ID(ACT16)。当取得货架区ID时，则处理器11使用与货架区ID对应的利用者传感器ID所示的利用者传感器32取得访问了货架的利用者的利用者ID(ACT17)。
当取得利用者ID时，则处理器11取得表示货架区ID所示的货架区所存储的商品的商品信息(ACT18)。当取得商品信息时，则处理器11向与已取得的利用者ID对应的候补列表追加已取得的商品信息(ACT19)。
当向候补列表追加商品信息时，则处理器11判定是否结束服务器装置10的工作(运转)(ACT20)。例如，处理器11判定是否通过操作部16接受了结束工作的操作。此外，处理器11也可以判定当前时刻是否是结束工作的时刻。
当判定未结束服务器装置10的工作时(ACT20的NO)，则处理器11返回到ACT11。当判定结束服务器装置10的工作时(ACT20的YES)，处理器11结束动作。
当判定利用者未访问货架时(ACT14的NO)，则处理器11前进到ACT20。当判定利用者未进店时(ACT11的NO)，则处理器11前进到ACT14。
接着，对结账装置20的动作例进行说明。图11是用于对结账装置20的动作例进行说明的流程图。
首先，结账装置20的处理器221判定是否在规定区域配置了筐210(ACT21)。当判定在规定区域未配置有筐210时(ACT21的NO)，则处理器221返回到ACT21。
当判定在规定区域配置了筐210时(ACT21的YES)，则处理器221摄像筐210内的商品(ACT22)。当摄像筐210内的商品时，则处理器221使用摄像头26取得配置了筐210的利用者的利用者ID(ACT23)。
当取得利用者ID时，则处理器221从服务器装置10取得与利用者ID对应的候补列表(ACT24)。当取得候补列表时，则处理器221从摄像了筐210内的图像提取商品区域(ACT25)。
当提取商品区域时，则处理器221将一个商品区域的图像与候补列表的各候补商品的词库信息进行匹配(ACT26)。当将一个商品区域的图像与候补列表的各候补商品的词库信息进行匹配时，则处理器221判定最大的相似度是否超过了阈值(ACT27)。
当判定最大的相似度超过了阈值时(ACT27的YES)，则处理器221将与最大的相似度的词库信息对应的商品的商品信息确定作为映入到商品区域的商品的商品信息(ACT28)。
当判定最大的相似度未超过阈值时(ACT27的NO)，则处理器221将一个商品区域的图像与候补商品以外的商品的各候补商品的词库信息进行匹配(ACT29)。当与候补商品以外的商品的词库信息进行匹配时，则处理器221前进到ACT28。也就是说，处理器221将与在候补商品以外的商品的词库信息中最大的相似度的词库信息对应的商品的商品信息确定作为映入到商品区域的商品的商品信息。
当确定商品信息时，则处理器221判定是否有未确定商品的商品区域(ACT30)。当判定有未确定商品的商品区域时(ACT30的YES)，则处理器221返回到ACT26。
当判定没有未确定商品的商品区域时(ACT30的NO)，则处理器221对已确定的商品进行结算(ACT31)。当对已确定的商品进行结算时，则处理器221删除与利用者ID对应的候补列表(ACT32)。
当删除与利用者ID对应的候补列表时，则处理器221结束动作。
另外，服务器装置10和结账装置20也可以用相同装置来实现。此外，服务器装置10也可以是实现结账装置20的一部分功能的装置。此外，结账装置20也可以是实现服务器装置10的一部分功能的装置。
如上那样构成的指定系统，将利用者所访问的货架区所存储的商品作为候补商品并存储在候补列表中。指定系统在指定利用者所持的商品时，从候补列表的候补商品中指定商品。
因此，指定系统能够从利用者所持的可能性高的候补商品中指定商品。其结果，指定系统能够从较少的商品群(组)指定商品。因而，指定系统能够迅速指定商品。
虽然对本发明的几个实施例进行了说明，但是这些实施例是作为例子提出的，并不意图限定发明的范围。这些新颖的实施例可以用其他的各种形式来实施，在不脱离发明要旨的范围内可以进行各种省略、替换、变更。这些实施例及其变形均被包含在发明的范围或要旨中，而且，包含在权利要求的范围所记载的发明和其均等的范围内。

Claims (10)

1.一种图像处理装置，对对象物进行指定，该图像处理装置，包括：
列表取得部，取得存储利用者所访问的区所存储的物品的物品信息的列表；
图像取得部，取得包含所述利用者出示的对象物的图像的摄像图像；
以及
物品指定部，基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物。
2.根据权利要求1所述的图像处理装置，其中，
所述物品指定部当不能基于在所述列表中的物品信息指定所述对象物时，由在所述列表中的物品信息以外的信息指定所述对象物。
3.一种信息处理装置，包括：
区指定部，指定利用者所访问的区；
物品信息取得部，取得表示所述区所存储的物品的物品信息；以及
列表生成部，生成存储所述物品信息的列表。
4.根据权利要求3所述的信息处理装置，还包括：
利用者指定部，指定所述利用者，
其中，所述列表将表示所述利用者的利用者ID和所述物品信息进行对应并存储。
5.一种系统，包括信息处理装置和图像处理装置，其中，
所述信息处理装置，包括：
第一通信部，与所述图像处理装置发送接收数据；
区指定部，指定利用者所访问的区；
物品信息取得部，取得表示所述区所存储的物品的物品信息；
列表生成部，生成存储所述物品信息的列表；以及
发送部，通过所述第一通信部向所述图像处理装置发送所述列表，
所述图像处理装置，包括：
第二通信部，与所述信息处理装置发送接收数据；
列表取得部，通过所述第二通信部取得所述列表；
图像取得部，取得包含所述利用者出示的对象物的图像的摄像图像；以及
物品指定部，基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物。
6.根据权利要求5所述的系统，其中，
所述物品指定部当不能基于在所述列表中的物品信息指定所述对象物时，基于在所述列表中的物品信息以外的信息指定所述对象物。
7.根据权利要求5所述的系统，还包括：
利用者指定部，指定所述利用者，
其中，所述列表将表示所述利用者的利用者ID和所述物品信息进行对应并存储。
8.根据权利要求7所述的系统，其中，
所述列表取得部通过所述第二通信部向所述信息处理装置发送请求所述列表的、包含所述利用者ID的请求，作为针对所述请求的响应，取得所
述列表。
9.一种图像处理装置的控制方法，包括以下步骤：
取得存储利用者所访问的区所存储的物品的物品信息的列表的步骤；
取得包含所述利用者出示的对象物的图像的摄像图像的步骤；以及
基于所述摄像图像所包含的所述对象物的图像，基于所述列表的物品信息指定所述对象物的步骤。
10.根据权利要求9所述的控制方法，其中，
当不能基于在所述列表中的物品信息指定所述对象物时，基于在所述列表中的物品信息以外的信息指定所述对象物。
CN201810638028.6A 2017-07-21 2018-06-20 信息处理装置、系统及控制方法 Active CN109285019B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017142010A JP7036548B2 (ja) 2017-07-21 2017-07-21 画像処理装置、情報処理装置、システム及びプログラム
JPJP2017-142010 2017-07-21

Publications (2)

Publication Number Publication Date
CN109285019A true CN109285019A (zh) 2019-01-29
CN109285019B CN109285019B (zh) 2023-05-30

Family

ID=63244355

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810638028.6A Active CN109285019B (zh) 2017-07-21 2018-06-20 信息处理装置、系统及控制方法

Country Status (4)

Country Link
US (2) US20190026593A1 (zh)
EP (1) EP3432247A1 (zh)
JP (1) JP7036548B2 (zh)
CN (1) CN109285019B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113269579A (zh) * 2020-02-17 2021-08-17 东芝泰格有限公司 信息处理装置及店铺系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11087273B1 (en) * 2017-12-14 2021-08-10 Amazon Technologies, Inc. Item recognition system using reference images
JP7361262B2 (ja) * 2019-03-29 2023-10-16 パナソニックＩｐマネジメント株式会社 精算決済装置および無人店舗システム
JP7456764B2 (ja) * 2019-12-10 2024-03-27 東芝テック株式会社 店舗システム
JP2021174379A (ja) * 2020-04-28 2021-11-01 パナソニックＩｐマネジメント株式会社 精算決済装置および精算決済システム
CN113808342B (zh) * 2020-08-19 2023-09-01 北京京东乾石科技有限公司 物品支付方法、装置、计算机可读介质及电子设备
US20220129919A1 (en) * 2020-10-26 2022-04-28 Toshiba Tec Kabushiki Kaisha Automated shopping assistant customized from prior shopping patterns
EP4020415A1 (de) * 2020-12-27 2022-06-29 Bizerba SE & Co. KG Self-checkout store
EP4020418A1 (de) * 2020-12-27 2022-06-29 Bizerba SE & Co. KG Self-checkout store

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084297A (ja) * 1999-09-10 2001-03-30 Casio Comput Co Ltd 商品情報収集システム
JP2009196805A (ja) * 2008-02-25 2009-09-03 Nec Corp 物品管理システム、仮想管理サーバ、無線通信端末、物品管理方法、プログラム及び記録媒体
US20100002902A1 (en) * 2008-07-01 2010-01-07 International Business Machines Corporation Graphical Retail Item Identification With Point-Of-Sale Terminals
CN101667270A (zh) * 2008-09-04 2010-03-10 东芝泰格有限公司 物品管理系统
JP2010146064A (ja) * 2008-12-16 2010-07-01 Sharp Corp 購買システム、電子棚札、及び注文処理方法
WO2011021862A2 (en) * 2009-08-19 2011-02-24 Lg Innotek Co., Ltd. Apparatus and method for detecting pattern of buyers using electronic shelf label
CN103686392A (zh) * 2012-09-05 2014-03-26 索尼公司 信息处理设备、信息处理系统、信息处理方法及程序
US20140153786A1 (en) * 2012-12-03 2014-06-05 Toshiba Tec Kabushiki Kaisha Commodity recognition apparatus and commodity recognition method
US20150039458A1 (en) * 2013-07-24 2015-02-05 Volitional Partners, Inc. Method and system for automated retail checkout using context recognition
CN104885111A (zh) * 2013-09-19 2015-09-02 松下电器（美国）知识产权公司 使信息终端显示销售信息的控制方法
WO2016072056A1 (ja) * 2014-11-05 2016-05-12 パナソニックＩｐマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
CN105718833A (zh) * 2014-12-23 2016-06-29 东芝泰格有限公司 图像识别装置及商品信息处理装置
JP2016143270A (ja) * 2015-02-03 2016-08-08 大日本印刷株式会社 情報処理装置、情報処理方法、および、情報処理装置用のプログラム
US20160300247A1 (en) * 2015-04-07 2016-10-13 Toshiba Tec Kabushiki Kaisha Sales data processing apparatus, server and method for acquiring attribute information
CN106097040A (zh) * 2016-05-31 2016-11-09 北京小米移动软件有限公司 信息推送方法、装置及终端设备
CN106485575A (zh) * 2016-10-22 2017-03-08 肇庆市联高电子商务有限公司 一种生鲜水果电商平台
CN106709776A (zh) * 2015-11-17 2017-05-24 腾讯科技（深圳）有限公司 商品推送方法及装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6659344B2 (en) * 2000-12-06 2003-12-09 Ncr Corporation Automated monitoring of activity of shoppers in a market
US8695878B2 (en) * 2011-08-31 2014-04-15 Djb Group Llc Shelf-monitoring system
WO2013059716A2 (en) * 2011-10-19 2013-04-25 Ran Margalit Automated purchasing system
US20140365334A1 (en) * 2013-06-07 2014-12-11 Bby Solutions, Inc. Retail customer service interaction system and method
WO2015140853A1 (ja) * 2014-03-20 2015-09-24 日本電気株式会社 Ｐｏｓ端末装置、ｐｏｓシステム、商品認識方法及びプログラムが格納された非一時的なコンピュータ可読媒体
US20160189162A1 (en) * 2014-12-29 2016-06-30 Toshiba Tec Kabushiki Kaisha Information processing system, and storage medium which stores information processing program
US10692128B2 (en) * 2014-12-30 2020-06-23 Paypal, Inc. Smart shopping list system
US9911149B2 (en) * 2015-01-21 2018-03-06 Paypal, Inc. Systems and methods for online shopping cart management
WO2016147612A1 (ja) * 2015-03-16 2016-09-22 日本電気株式会社 画像認識装置、システム、画像認識方法、および、記録媒体
US10262293B1 (en) * 2015-06-23 2019-04-16 Amazon Technologies, Inc Item management system using multiple scales
US20160379219A1 (en) * 2015-06-25 2016-12-29 Toshiba Tec Kabushiki Kaisha Settlement apparatus
US10332096B2 (en) * 2015-07-27 2019-06-25 Paypal, Inc. Wireless communication beacon and gesture detection system

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001084297A (ja) * 1999-09-10 2001-03-30 Casio Comput Co Ltd 商品情報収集システム
JP2009196805A (ja) * 2008-02-25 2009-09-03 Nec Corp 物品管理システム、仮想管理サーバ、無線通信端末、物品管理方法、プログラム及び記録媒体
US20100002902A1 (en) * 2008-07-01 2010-01-07 International Business Machines Corporation Graphical Retail Item Identification With Point-Of-Sale Terminals
CN101667270A (zh) * 2008-09-04 2010-03-10 东芝泰格有限公司 物品管理系统
JP2010146064A (ja) * 2008-12-16 2010-07-01 Sharp Corp 購買システム、電子棚札、及び注文処理方法
WO2011021862A2 (en) * 2009-08-19 2011-02-24 Lg Innotek Co., Ltd. Apparatus and method for detecting pattern of buyers using electronic shelf label
CN103686392A (zh) * 2012-09-05 2014-03-26 索尼公司 信息处理设备、信息处理系统、信息处理方法及程序
US20140153786A1 (en) * 2012-12-03 2014-06-05 Toshiba Tec Kabushiki Kaisha Commodity recognition apparatus and commodity recognition method
US20150039458A1 (en) * 2013-07-24 2015-02-05 Volitional Partners, Inc. Method and system for automated retail checkout using context recognition
CN104885111A (zh) * 2013-09-19 2015-09-02 松下电器（美国）知识产权公司 使信息终端显示销售信息的控制方法
WO2016072056A1 (ja) * 2014-11-05 2016-05-12 パナソニックＩｐマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
CN105718833A (zh) * 2014-12-23 2016-06-29 东芝泰格有限公司 图像识别装置及商品信息处理装置
JP2016143270A (ja) * 2015-02-03 2016-08-08 大日本印刷株式会社 情報処理装置、情報処理方法、および、情報処理装置用のプログラム
US20160300247A1 (en) * 2015-04-07 2016-10-13 Toshiba Tec Kabushiki Kaisha Sales data processing apparatus, server and method for acquiring attribute information
CN106709776A (zh) * 2015-11-17 2017-05-24 腾讯科技（深圳）有限公司 商品推送方法及装置
CN106097040A (zh) * 2016-05-31 2016-11-09 北京小米移动软件有限公司 信息推送方法、装置及终端设备
CN106485575A (zh) * 2016-10-22 2017-03-08 肇庆市联高电子商务有限公司 一种生鲜水果电商平台

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113269579A (zh) * 2020-02-17 2021-08-17 东芝泰格有限公司 信息处理装置及店铺系统

Also Published As

Publication number Publication date
JP7036548B2 (ja) 2022-03-15
US20190026593A1 (en) 2019-01-24
US20210182598A1 (en) 2021-06-17
JP2019021256A (ja) 2019-02-07
EP3432247A1 (en) 2019-01-23
CN109285019B (zh) 2023-05-30

Similar Documents

Publication Publication Date Title
CN109285019A (zh) 图像处理装置、信息处理装置、系统及控制方法
US11847689B2 (en) Dynamic customer checkout experience within an automated shopping environment
US11756039B2 (en) Biometric authentication payment system, payment system, and cash register system
WO2012132324A1 (ja) 店舗システム並びにその制御方法及び制御プログラムが格納された非一時的なコンピュータ可読媒体
JP6672597B2 (ja) 情報処理システム、情報処理方法、およびプログラム
JP7298594B2 (ja) 店舗管理装置および店舗管理方法、プログラム
JP6261060B2 (ja) 情報処理装置
KR102286946B1 (ko) 무인 자판기 상품 구매 및 관리 시스템
Subudhi et al. An intelligent shopping cart with automatic product detection and secure payment system
JP2023088960A (ja) 情報処理装置、及び店舗システム
CN106897871A (zh) 一种购物方法和计算机可读存储媒体
US11651416B2 (en) Goods purchase analysis assist system
JP2016024601A (ja) 情報処理装置、情報処理システム、情報処理方法、商品推薦方法、およびプログラム
US20220270061A1 (en) System and method for indicating payment method availability on a smart shopping bin
JP7251210B2 (ja) 情報処理装置、サーバ、情報処理システム、情報処理方法、および情報処理プログラム
JP2022075746A (ja) 画像処理装置、情報処理装置、システム及びプログラム
JP2022127364A (ja) 可搬式端末及びプログラム
JP2022098820A (ja) 商品販売データ処理システム、及びプログラム
JP2023158300A (ja) セルフレジ装置及びセルフレジシステム
JP2021179927A (ja) 販売システム、精算装置、プログラム
JP2021128363A (ja) 商品販売データ処理システム、携帯端末装置、及びコンピュータ
JP2020077111A (ja) 自動販売機システムおよび自動販売機

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant