CN105448000A - 商品登录装置以及商品登录方法 - Google Patents

商品登录装置以及商品登录方法 Download PDF

Info

Publication number
CN105448000A
CN105448000A CN201510594363.7A CN201510594363A CN105448000A CN 105448000 A CN105448000 A CN 105448000A CN 201510594363 A CN201510594363 A CN 201510594363A CN 105448000 A CN105448000 A CN 105448000A
Authority
CN
China
Prior art keywords
commodity
region
image
identified region
login
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510594363.7A
Other languages
English (en)
Other versions
CN105448000B (zh
Inventor
胜村典嘉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN105448000A publication Critical patent/CN105448000A/zh
Application granted granted Critical
Publication of CN105448000B publication Critical patent/CN105448000B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • G06Q20/208Input by product or record sensing, e.g. weighing or scanner processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G06F18/24133Distances to prototypes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/38Payment protocols; Details thereof
    • G06Q20/40Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/407Cancellation of a transaction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/0036Checkout procedures
    • G07G1/0045Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0054Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Security & Cryptography (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

商品登录装置(1)具备:左光电传感器(26L),其探测商品辨别装置(2)中的商品的识别区域的一侧的第1区域中的物体的有无;右光电传感器(26R),其探测该识别区域的另一侧的第2区域中的物体的有无;和照相机(27),其对该识别区域的图像进行摄像。从照相机(27)摄像得到的识别区域的图像中探测物体并确定商品,并且根据左光电传感器(26L)、右光电传感器(26R)、照相机(27)对各区域的探测结果的时间序列,来使POS终端(3)进行商品登录处理和商品的临时登录的取消处理中的任意一者。

Description

商品登录装置以及商品登录方法
技术领域
本发明涉及对商品进行销售额登录的商品登录装置以及商品登录方法。
背景技术
以往,电子式收银机(商品登录装置)通过条形码读取部来读取对商品赋予的条形码等数据代码,对该商品进行辨别。对商品赋予的条形码包含制造商代码的信息、项目代码的信息、和检验位的信息而构成。商品登录装置在根据检验位的信息判断出正确地读取了条形码之后,根据项目代码的信息来辨别该商品。通过将条形码预先印刷于商品的包装等,能够减轻收银机的操作人员的负担。
但是,对于未包装的商品、例如蔬菜和水果等来说,挨个粘贴条形码是极其繁杂的,很费时间和成本。以往对蔬菜和水果等运用了由操作人员用键盘来输入商品代码、金额。
近年来,对蔬菜和水果等进行对象识别来进行辨别,并对辨别出的商品进行销售额登录的商品登录装置开始普及。该商品登录装置从对蔬菜和水果等进行拍摄而得到的图像信息中提取外观的特征量,与预先准备的特征量数据库进行比较,由此来辨别该物品是哪个商品。由此,即使是未预先包装的商品,也无需挨个粘贴条形码就能够由商品登录装置来识别,因此能够减轻店铺侧的负担。
可是顾客在超市购买商品时,在将商品放入购物筐等之后,请收银机的操作人员进行结算。
收银机的操作人员在对商品进行销售额登录时,使商品登录装置按顺序读入与该顾客相关的放入第1购物筐的各商品,并放入第2购物筐。在此顾客提出想要取消任意一个商品的购买时,操作人员需要进行用于对商品的登录进行订正的键盘操作。由于该操作是非常规的操作,因此操作人员没有学会该操作的情况很多。因此,必须呼唤操作人员的上长等来进行该取消作业,存在到取消为止需要很多作业工时和时间的问题。这是在具有条形码读取功能的商品登录装置、和具有对象识别功能的商品登录装置中共同的问题。
在专利文献1(日本公开专利:JP特开2013-182323号公报)的解决手段中记载了“具备:类似度计算单元,其计算类似度,所述类似度表示摄像单元所摄像的包含物体的图像在内的帧图像中包含的所述物体的图像、与登录在辞典中的各登录商品的基准图像在多大程度上类似;商品候补提取单元,其基于所述类似度来提取与所述物体对应的所述登录商品的候补;确定单元,其在所述登录商品的候补为一个的情况下将该登录商品的候补作为暂定商品,或者,在所述登录商品的候补为多个的情况下将所选择的一个登录商品的候补作为暂定商品,并将该暂定商品确定为与所述物体对应的所述登录商品;和特殊处理执行单元,其在所述确定单元确定前,在判断为所述帧图像的颜色属性超过了给定基准值的情况下,或者判断为该颜色属性的每单位时间的变化量超过了给定基准值的情况下,对所述暂定商品执行预先决定的特殊处理。”。
在专利文献2(日本公开专利:JP特开2013-182457号公报)的课题中记载了“实现用于与对象识别的结果相关的某些处理的操作的效率化。”,在其解决手段中记载了“实施方式的商品读取装置包含识别单元、辨别单元、判定单元、处理单元以及确定单元。识别单元从摄像单元所摄像的图像中识别该图像所包含的对象。辨别单元根据所述识别单元所识别出的所述对象来辨别成为购买商品的候补的候补商品。判定单元判定所述识别单元所识别出的所述对象中的特定的对象在所述图像内的变化模式。处理单元与所述辨别单元的辨别结果关联地进行与所述判定单元所判定出的变化模式建立了关联的处理。确定单元在预先决定的确定条件成立的情况下,将对在所述候补商品中成为选择候补的商品进行辨别的商品代码确定为购买商品的商品代码。”。
根据专利文献1所记载的发明,操作人员无需进行键盘操作就能够取消商品登录。但是,专利文献1所记载的发明中,作为商品登录的取消操作,需要进行将手遮在对象识别用的照相机上这样的操作。该将手遮在照相机上的操作,作为取消操作而言并不直观,存在难以熟练的问题。此外,在操作人员不知道该操作时,不能取消商品登录的情况没有变化。
根据专利文献2所记载的发明,操作人员无需进行键盘操作就能够取消商品登录。但是,专利文献1所记载的发明在商品登录取消时,利用了所识别出的对象的变化。因此,有可能由于对象的误识别而错误地执行各种操作。
此外,具有条形码读取功能的商品登录装置无法识别上述操作,因此无法实现商品登录的取消。
发明内容
[课题]
因此,本发明的课题在于,提供一种能够实现直观且误操作少的商品登录操作及其取消操作的商品登录装置。
[手段]
本发明提供一种商品登录装置,其特征在于,具备:
探测单元,其探测与商品的识别区域相邻的探测区域中的物体的有无;
摄像单元,其对所述识别区域的图像进行摄像;和
控制单元,其从所述摄像单元摄像得到的所述识别区域的图像中探测物体并确定商品,并且根据所述探测区域和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
[效果]
根据本发明,能够提供一种能够实现直观且误操作少的商品登录操作和其取消操作的商品登录装置。
附图说明
图1是表示第1实施方式中的商品登录装置的外观的立体图。
图2是表示第1实施方式中的商品登录装置的概略的构成图。
图3是表示第1实施方式中的商品登录装置的概略的功能框图。
图4是第1实施方式中的商品辨别装置的主视图。
图5是表示第1实施方式中的商品登录操作和商品登录的取消操作的说明图。
图6是表示第1实施方式中的商品登录处理的流程图。
图7是表示第1实施方式中的商品登录的取消处理的流程图。
图8是表示第1实施方式的第1变形例的商品登录处理的流程图。
图9是表示第1实施方式的第2变形例的商品登录方向决定处理的流程图。
图10是第2实施方式中的商品辨别装置的主视图。
图11是表示第2实施方式中的商品登录的取消处理的流程图。
图12是表示第3实施方式中的商品登录装置的概略的构成图。
图13是表示第3实施方式中的商品登录操作及其订正操作的说明图。
图14是表示第3实施方式中的商品登录订正操作和再登录操作的说明图。
图15是表示第3实施方式中的商品登录/订正处理的流程图(其1)。
图16是表示第3实施方式中的商品登录/订正处理的流程图(其2)。
图17是表示第3实施方式的变形例的商品登录/取消处理的流程图。
具体实施方式
以下,参照各图对用于实施本发明的方式进行详细说明。另外,有时同一要素即使被表示在不同的图中也赋予同一标号并省略其重复的说明。
(第1实施方式)
图1是表示第1实施方式中的商品登录装置1的外观的立体图。
如图1所示,商品登录装置1具备对各商品进行登录的商品辨别装置2、和进行与各交易相关的商品的销售额登录和结算的POS终端3。该商品辨别装置2是读取与商品有关的信息并进行登录的POS连接用扫描器。
商品辨别装置2设置在横长桌状的清点台5的长边方向的中央。商品辨别装置2具备薄型的矩形状的外壳51。在该外壳51的正面,隔着读取窗52而配置有照相机27(参照图2)。在读取窗52的左侧,配置有左光电传感器26L。在读取窗52的右侧,配置有右光电传感器26R。
在外壳51的上部,安装有显示/操作部22。在显示/操作部22设置有显示器221。在该显示器221的表面层叠有触摸面板222(参照图2)。在显示器221的右侧临近处配置有键盘23。在键盘23的右侧临近处设置有未图示的读卡器的读卡槽。在显示/操作部22的左内侧,朝向背面设置有用于向顾客提供信息的顾客用显示器24。
POS终端3载置于结账台6上的抽屉37的上表面。该抽屉37通过POS终端3来接受打开动作的控制。
在POS终端3的上表面配置有用于操作人员(店员)进行操作的键盘33。从该操作人员来看在键盘33的上部内侧设置有显示信息的显示器321。在该显示器321的表面层叠有触摸面板322(参照图2)。在比显示器321更靠内侧处以能够向左右方向旋转的方式设置有显示信息的顾客用显示器34。另外,图1所示的顾客用显示器34朝向图的跟前侧。通过使该顾客用显示器34朝向图的内侧旋转,来向顾客显示信息。
与载置有POS终端3的结账台6形成L字地配置有横长桌状的清点台5。在清点台5的上表面形成有货物承载面。顾客一边从图1的左侧向右侧移动,一边接受商品的登录处理。即,在清点台5的货物承载面载置收纳商品的第1购物筐4L和第2购物筐4R。以下,在不特别区分第1购物筐4L和第2购物筐4R时,有时仅记载为购物筐4。这些购物筐4不限于所谓筐形状,也可以为托盘等。此外,购物筐4不限于所谓筐形状,也可以为箱状或袋状等。
第1购物筐4L是由顾客带入的,收纳一次交易所涉及的商品。第2购物筐4R载置于与第1购物筐4L隔着商品辨别装置2的位置。第1购物筐4L内的商品由操作商品辨别装置2的操作人员取出,移动到第2购物筐4R。在该移动过程中,使商品遮在商品辨别装置2的读取窗52上。此时,配置在读取窗52内的照相机27(参照图2)对商品进行摄像。
在商品辨别装置2中,在显示器221上显示用于指定由照相机27摄像得到的图像中包含的商品对应于后述的特征量文件361(参照图2)中记录的哪个商品的画面。商品辨别装置2还将被指定的商品的商品ID通知给POS终端3。POS终端3基于从商品辨别装置2通知的商品ID,将与该商品ID对应的商品的商品分类、商品名、单价等与销售额登录相关的信息记录到销售额主文件(未图示)等中,来进行销售额登录。
图2是表示第1实施方式中的商品登录装置1的概略的构成图。
商品登录装置1包含商品辨别装置2和POS终端3而构成。
商品辨别装置2包含微型计算机21、显示/操作部22、接口25、左光电传感器26L、右光电传感器26R、照相机27、扬声器28、和电源29而构成。
微型计算机21将ROM(ReadOnlyMemory,只读存储器)212和RAM(RandomAccessMemory,随机存取存储器)213与CPU(CentralProcessingUnit,中央处理器)211总线连接而构成。在ROM212中,存储由CPU211执行的程序。
显示/操作部22、接口25、右光电传感器26R、左光电传感器26L、照相机27、和扬声器28经由内部总线、各输入输出电路(未图示)而与CPU211连接。
显示/操作部22包含显示器221、触摸面板222、顾客用显示器24、和键盘23而构成,由CPU211来控制动作。
显示器221根据CPU211的指示来显示面向操作人员的信息。触摸面板222接受针对由显示器221显示的信息的操作的输入。顾客用显示器24根据CPU211的指示来显示面向顾客的信息。
键盘23由多个操作键构成,受理操作人员的操作输入。
接口25与POS终端3的接口35连接,使得能够与POS终端3之间进行数据收发。
左光电传感器26L和右光电传感器26R例如是扩散反射型的光电传感器,投光器和受光器被一体地形成。若从该投光部发出的光命中检测对象的物体(商品),则从该物体反射的光入射到受光部从而光量增加,能够进行该物体的检测。
照相机27是彩色CCD图像传感器、彩色CMOS图像传感器等,是在CPU211的控制下,从读取窗52(图1参照)进行摄像的摄像单元。照相机27进行例如30[fps]的运动图像的摄像。照相机27以给定帧速率依次摄像得到的帧图像(摄像图像)被保存在RAM213中。
扬声器28产生预先设定的警告音等。扬声器28在CPU211的控制下进行基于警告音或声音的通知。
电源29向该商品辨别装置2的各部供给电力。
接口25与POS终端3的接口35连接,使得能够与POS终端3之间进行数据收发。
POS终端3包含微型计算机31、显示器321、触摸面板322、键盘33、顾客用显示器34、接口35、HDD36、抽屉37、打印机38、和电源39而构成。
微型计算机31执行信息处理。该微型计算机31将ROM312和RAM313总线连接于执行各种运算处理并对各部进行控制的CPU311而构成。抽屉37、键盘33、显示器321、触摸面板322、顾客用显示器34、和HDD36(HardDiskDrive,硬盘驱动器)经由内部总线、各输入输出电路而连接于CPU311。它们受到CPU311的控制。
显示器321根据CPU311的指示来显示面向操作人员的信息。触摸面板322接受针对由显示器321显示的信息的操作的输入。顾客用显示器34根据CPU311的指示来显示面向顾客的信息。
键盘33包含临时关闭键331、关闭键332、和数字小键盘333而构成,受理操作人员的操作输入。数字小键盘333由0~9的数字键和各种运算符键构成。
在HDD36中存储有程序、各种文件。存储在HDD36中的程序、各种文件的全部或一部分在POS终端3起动时被复制到RAM313中并由CPU311来执行。在HDD36中,例如记录特征量文件361,但也可以记录商品销售数据处理用的程序。特征量文件361是针对陈列于店铺来销售的每一个经营商品设定了与商品的销售额登录相关的信息、和与该商品的图像的关联的商品文件,作为经营商品的辞典而发挥作用。
接口35与商品辨别装置2连接,使得能够与商品辨别装置2之间进行数据收发。
打印机38在收据等上进行打印。POS终端3在CPU311的控制下将各交易的交易内容打印在收据上。
电源39向该POS终端3的各部供给电力。
图3是表示第1实施方式中的商品登录装置1的概略的功能框图。在以下的说明中,适当参照图1和图2。
商品辨别装置2的CPU211通过执行保存在ROM212中的程序,来实现图像取得部90、物体检测部91、时间序列判断部92、类似度运算部93、类似度判断部94、确定通知部95、候补商品提示部96、输入取得部97、信息输出部98的各部。此外,同样地,POS终端3的CPU311通过执行保存在HDD36中的程序,来实现销售额登录部991、销售额取消部992的各部。在POS终端3的HDD36中还保存特征量文件361。
图像取得部90向照相机27输出摄像开启(ON)信号,使该照相机27开始摄像动作。进而图像取得部90依次取入由照相机27摄像而保存在RAM213中的帧图像。图像取得部90所进行的帧图像的取入按照保存到RAM213中的顺序来进行。
物体检测部91利用模式匹配(patternmatching)技术等来检测由图像取得部90取入的帧图像中包含的物体的全部或一部分。
具体来说,若操作人员为了销售额登录而使商品朝向读取窗52,则图像取得部90通过照相机27对该商品的图像进行拍摄。物体检测部91将所取入的帧图像二值化来提取轮廓线。接着物体检测部91对从上次的帧图像中提取的轮廓线和从本次的帧图像中提取的轮廓线进行比较,来检测作为该商品的物体。
以下示出另外的具体方法。若操作人员为了销售额登录而用手把持商品朝向读取窗52,则图像取得部90通过照相机27对该商品以及手的图像进行拍摄。物体检测部91从所取入的帧图像中检测肤色区域的有无。在检测到肤色区域的情况下,即在检测到店员的手的情况下,物体检测部91在该肤色区域的附近检测轮廓线。由此,提取被认为由操作人员的手所把持的商品的轮廓。物体检测部91在检测到表示手的形状的轮廓、且在手的轮廓的附近进一步检测到除此以外的物体的轮廓的情况下,根据该物体的轮廓来检测商品。
时间序列判断部92根据右光电传感器26R的物体的探测结果、基于照相机27的拍摄图像的物体的探测结果、和左光电传感器26L的物体的探测结果的时间序列,来判断对应的处理。
类似度运算部93从由照相机27摄像得到的商品的图像中,读取该商品的配色、表面的凹凸状况等表面状态作为特征量。类似度运算部93不考虑该商品的轮廓、大小。由此类似度运算部93能够缩短处理时间。
类似度运算部93进一步从记录在特征量文件361中的各商品(以下,称作经营商品)的商品图像中读取该经营商品的配色、表面的凹凸状况等表面状态作为特征量,并与所拍摄到的商品的特征量分别进行比较,由此计算所拍摄到的商品和记录在特征量文件361中的经营商品的类似度。在此所谓类似度,表示在将记录在特征量文件361中的各商品所设想的商品图像设为100%的类似度的情况下,商品的全部或一部分图像类似到何种程度。另外,类似度运算部93例如也可以改变配色和表面的凹凸状况的权重来计算类似度。
像这样,对图像中包含的物体进行识别被称作一般物体识别(genericobjectrecognition)。在柳井启司著的“一般物体识别的现状与未来”中,将一般物体识别的研究的调查加入到方法中,进行数据集、评价基准,并进一步对其未来进行了展望。
柳井启司,“一般物体识别的现状与未来”,[online],信息处理学会论文杂志,2007年11月15日,Vol.48,No.SIG16,1-24页,[平成26年9月8日检索],因特网<URL:http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf>
此外,通过按照每个对象对图像进行区域分割来进行一般物体识别的技术在下述文献中进行了解说。
JamieShotton等,“SemanticTextonForestsforImageCategorizationandSegmentation”,ComputerVisionandPatternRecognition、2008.CVPR2008.IEEEConferenceon,[平成26年9月8日检索],因特网<URL:http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=rep1&type=pdf>
另外,摄像得到的商品的图像与记录在特征量文件361中的经营商品的商品图像的类似度的计算方法并没有特别的限制。例如,既可以将摄像得到的商品的图像与记录在特征量文件361中的各经营商品的类似度作为绝对评价来进行计算,也可以作为相对评价来进行计算。
在将类似度作为绝对评价来进行计算的情况下,将摄像得到的商品的图像与记录在特征量文件361中的各经营商品1对1地进行比较,并直接采用该比较的结果所导出的类似度即可。此外,在将类似度作为相对评价来进行计算的情况下,使得与各经营商品的类似度的总和为1.0(100%)地进行计算。例如,设为在特征量文件361中记录了4个商品#1~#4。此时摄像得到的商品例如被计算为相对于商品#1的类似度为0.65,相对于商品#2的类似度为0.2,相对于商品#3的类似度为0.1,相对于商品#4的类似度为0.05等。
类似度判断部94按照图像取得部90所取入的每个帧图像,对商品的图像与记录在特征量文件361中的商品图像的类似度进行比较。在本实施方式中,关于经营商品的商品图像与商品的拍摄图像的类似度设置有多个条件。类似度判断部94根据这些被满足的条件来进行经营商品的确定或选定商品的候补。与类似度有关的条件虽然没有特别限定,但以下对使用条件X、Y、Z的情况进行说明。
在此,条件X以及条件Y是用于将帧图像上的物体确定为在特征量文件361中记录的经营商品的其中之一的条件。此外,条件Z是用于根据帧图像上的物体来提取记录在特征量文件361中的经营商品的候补的条件。
类似度判断部94例如将满足条件X或者/以及条件Y的经营商品判定为与帧图像上的物体一对一地对应的商品。此外,类似度判断部94将满足条件Z的经营商品判定为照相机27所摄像的商品的候补而并非确定商品。而且,类似度判断部94通过从记录在特征量文件361中的多个经营商品中提取满足条件Z的经营商品,来提取针对所拍摄到的商品的经营商品的候补。
条件X~Z只要根据类似度来阶段性地设定则其详情并无特别限定,但作为一例,可以通过预先设定的多个阈值来设置条件X~Z。在此,对通过阈值Tx~Tz来设定条件X~Z的情况进行说明。另外,设为按照阈值Tx~Tz的顺序减小。
类似度判断部94对与经营商品的类似度成为预先决定的阈值Tx以上的次数进行计数,在该次数成为给定次数以上的情况下判定为满足条件X。
此外,类似度判断部94在与经营商品的类似度不足阈值Tx、并且成为阈值Ty以上的情况下,判定为满足条件Y。然后,将满足条件Y的经营商品判定为虽然是确定商品但需要操作人员所进行的确认操作。
进而,类似度判断部94在与经营商品的类似度不足阈值Ty、并且为阈值Tz以上的情况下,判定为满足条件Z。
另外,各条件X~Z能够根据类似度的大小等来适当设定,并不限定于所述的例子。
确定通知部95通过图像输出、声音输出等来向操作人员、顾客通知由照相机27摄像的商品被唯一地确定为满足条件X或者/以及条件Y的经营商品。
更详细来说,确定通知部95使显示器221显示表示满足了条件X的经营商品被唯一地确定为由照相机27摄像的商品(确定商品)的确定画面,并将与确定商品有关的信息输出到扬声器28。扬声器28通过对所输入的信息进行输出,来将表示确定商品的信息通知给操作人员、顾客。
此外,确定通知部95在显示器221上显示对满足了条件Y的经营商品(确定商品)是否为由照相机27摄像的商品的最终确认操作进行受理的确认画面。
另外,确定通知部95配合显示确认画面的定时,将与确定商品有关的信息向扬声器28输出声音。
候补商品提示部96使显示器221显示与满足了条件Z的经营商品有关的信息作为商品候补。更详细来说,候补商品提示部96从特征量文件361中读出满足了条件Z的经营商品的照片图像以及商品名,并从由类似度运算部93所计算出的类似度高的经营商品起依次输出到显示器221。在显示器221上从类似度高的商品候补起依次显示商品候补的照片图像以及商品名。
另外,在即使在显示器221上显示了商品候补的照片图像,也未受理针对这些商品候补的选择操作的情况下,图像取得部90所进行的图像的取得处理、物体检测部91所进行的物体的检测处理、以及类似度运算部93所进行的类似度的运算处理继续。
输入取得部97经由触摸面板222或键盘23来受理与显示器221的显示相对应的各种输入操作。例如输入取得部97受理对所显示的照片图像所涉及的商品为确定商品进行了最终确认的意思的输入操作(确认操作)。确定通知部95在由输入取得部97受理了确认操作的情况下将确定画面显示于显示器221。
输入取得部97受理从显示于显示器221的商品候补的照片图像中对任意1个照片图像的选择操作。输入取得部97将所选择的照片图像的经营商品作为针对商品的确定商品来受理。另外,在物体检测部91能够检测多个商品的情况下,输入取得部97也可以受理从商品候补中选择多个商品候补的选择操作。确定通知部95在由输入取得部97受理了选择操作的情况下,使显示器221显示将所受理的商品候补显示为确定商品的确定画面。
信息输出部98针对如上述那样确定的确定商品,将表示该商品的信息(例如商品ID、商品名、减价信息等)经由接口25输出到POS终端3。
另外,信息输出部98也可以将经由触摸面板222或键盘23而另外输入的销售个数与商品ID等一起输出到POS终端3。此外,作为信息输出部98输出到POS终端3的信息,既可以直接通知由信息输出部98从特征量文件361中读出的商品ID,也可以将能够确定商品ID的商品名、或者商品图像、照片图像的文件名通知给POS终端3。
POS终端3的销售额登录部991基于从信息输出部98输出的商品ID和销售个数,来进行对应的商品的销售额登录。具体来说,销售额登录部991参照特征量文件361,将所通知的商品ID以及与其对应的商品分类、商品名、单价、销售个数记录到销售额主文件等中来进行销售额登录(临时登录)。
POS终端3的销售额取消部992基于从信息输出部98输出的商品ID和销售个数来进行对应的商品的销售额登录的取消。具体来说,销售额取消部992参照特征量文件361,从销售额主文件中检索并删除所通知的商品ID以及与其对应的商品分类、商品名、单价、销售个数。由此,销售额取消部992能够取消1次交易内的销售额登录(临时登录),也能够处理交易后(结算后)的退货。
图4是第1实施方式中的商品辨别装置2的主视图。
商品辨别装置2设置于清点台5。商品辨别装置2包含薄型的矩形状的外壳51、在该外壳51的上部安装的显示/操作部22、和在显示/操作部22的左内侧朝向背面设置的顾客用显示器24而构成。
在该外壳51的正面设置读取窗52。
在读取窗52配置照明271和照相机27(摄像单元)。识别区域8M是照相机27对物体进行拍摄,并对该物体进行探测来确定商品的区域。
在读取窗52的左侧,配置有左光电传感器26L(第1探测单元)。在读取窗52的右侧,配置有右光电传感器26R(第2探测单元)。区域8L(第1区域)在识别区域8M的一侧,是左光电传感器26L探测物体的区域。区域8R(第2区域)在识别区域8M的另一侧,是右光电传感器26R探测物体的区域。
左光电传感器26L(第1探测单元)对商品的识别区域8M的一侧的区域8L中的物体的有无进行探测。左光电传感器26L在给定进深范围内对物体的有无进行探测。
右光电传感器26R(第2探测单元)对该识别区域8M的另一侧的区域8R中的物体的有无进行探测。右光电传感器26R在给定进深范围内对物体的有无进行探测。另外,也可以左光电传感器26L是第2探测单元,右光电传感器26R是第1探测单元。
在操作人员将第1购物筐4L的商品遮在读取窗52上时,操作人员能够以直观且自然的操作使左光电传感器26L探测商品。在操作人员将由商品辨别装置2识别后的商品移动到第2购物筐4R时,操作人员能够以直观且自然的操作使右光电传感器26R探测商品。
该商品辨别装置2根据左光电传感器26L、右光电传感器26R、和基于照相机27的物体的探测结果的时间序列,使POS终端3进行商品登录处理和商品登录的取消处理中的任意一者。
图5(a)、(b)是表示第1实施方式中的商品登录操作和商品登录的取消操作的说明图。
图5(a)是商品登录操作的说明图。
在商品登录操作时,操作人员取出第1购物筐4L的商品,遮在读取窗52的照相机27上,之后放入第2购物筐4R。该操作与现有的商品登录装置同样,是直观且自然的操作。
此时,商品辨别装置2在由左光电传感器26L探测到物体之后从照相机27的拍摄图像中探测物体来确定商品。此时商品辨别装置2在即将确定商品之前由左光电传感器26L探测到物体,因此进行该商品的临时登录。
这样,商品辨别装置2能够根据右光电传感器26R的探测结果、基于照相机27的拍摄图像的物体的探测结果、和左光电传感器26L的探测结果的时间序列,来确定商品登录操作。
图5(b)是商品登录的取消操作的说明图。
在商品登录的取消操作时,操作人员取出第2购物筐4R的商品,遮在读取窗52的照相机27上,之后返回第1购物筐4L。该操作是商品登录操作的相反顺序,是直观且自然的操作。
此时,商品辨别装置2在右光电传感器26R探测到物体之后从照相机27的拍摄图像中探测物体来确定商品。此时商品辨别装置2在即将确定商品之前由右光电传感器26R探测到物体,因此进行该商品登录的取消。
这样,商品辨别装置2能够根据右光电传感器26R的探测结果、基于照相机27的拍摄图像的物体的探测结果、和左光电传感器26L的探测结果的时间序列,来确定商品登录的取消操作。
另外,商品辨别装置2也可以通过照相机27所进行的商品确定、和光电传感器所进行的物体的移动方向的判别,来区分并确定商品登录操作和商品登录的订正操作,对商品登录处理和商品登录的取消处理进行切换。
图6是表示第1实施方式中的商品登录处理的流程图。
第1实施方式的商品登录处理是例如操作人员(店员)取出第1购物筐4L(参照图1)的商品,遮在读取窗52的照相机27上,之后放入第2购物筐4R为止的一系列的处理。
在步骤S10中,商品辨别装置2的CPU211判断左光电传感器26L是否已开启。CPU211若未判断为左光电传感器26L已开启(否),则返回到步骤S10的处理,若判断为左光电传感器26L已开启(是),则前进到步骤S11的处理。具体来说,左光电传感器26L的开启是识别区域8M的一侧的区域8L中的物体的探测,意味着操作人员从第1购物筐4L取出商品,并要遮在读取窗52的照相机27上。
在步骤S11中,图像取得部90向照相机27输出摄像开启信号来开始照相机27对商品图像的捕捉(摄像)。图像取得部90取入由照相机27摄像并保存在RAM213中的帧图像(摄像图像)。
在步骤S12中,物体检测部91对图像取得部90所取入的帧图像进行对象识别处理,尝试作为商品的物体的全部或一部分的识别(检测)。
在步骤S13中,物体检测部91判断作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若作为商品的物体的识别成功(是),则前进到步骤S14的处理,若作为商品的物体的识别没有成功(否),则返回到步骤S11的处理。步骤S11~S13具体来说是操作人员将商品遮在读取窗52的照相机27上,商品辨别装置2对作为该商品的物体的检测成功的一系列的处理。
在步骤S14中,类似度运算部93从商品的全部或一部分图像中读取商品的特征量。进而类似度判断部94判定特征量文件361中是否存在类似度为给定阈值以上的经营商品,并对该商品的商品名和商品单价进行检索和调用。由此,商品辨别装置2能够确定该商品。
在步骤S15中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3来使POS终端3进行临时登录。POS终端3的销售额登录部991基于该商品ID,对商品进行临时登录。此时确定通知部95使显示器221显示包含确定商品的照片图像的确定画面,并且用声音来通知确定商品的商品名。若步骤S15的处理结束,则图6的处理结束。
通过该商品登录处理,操作人员无需进行键盘操作就能够进行商品登录。此外商品辨别装置2根据各区域中的物体的有无的探测结果来进行判断,因此与基于图像的对象识别相比误检测较少,能够稳定地操作。
图7是表示第1实施方式中的商品登录的取消处理的流程图。
第1实施方式的商品登录的取消处理是例如操作人员(店员)取出已移动到第2购物筐4R(参照图1)的临时登录完成的商品,遮在读取窗52的照相机27上,之后放回到第1购物筐4L为止的一系列的处理。或者是操作人员将结算完成的商品遮在读取窗52的照相机27来进行退货的处理。
在步骤S20中,商品辨别装置2的CPU211判断右光电传感器26R是否已开启。CPU211若未判断为右光电传感器26R已开启(否),则返回到步骤S20的处理,若判断为右光电传感器26R已开启(是),则前进到步骤S21的处理。具体来说,右光电传感器26R的开启是识别区域8M(参照图4)的另一侧的区域8R中的物体的探测,意味着操作人员从第2购物筐4R取出商品,并要遮在读取窗52的照相机27上。
在步骤S21中,图像取得部90向照相机27输出摄像开启信号来开始照相机27对商品图像的捕捉(摄像)。图像取得部90取入由照相机27摄像并保存在RAM213中的帧图像(摄像图像)。
在步骤S22中,物体检测部91对图像取得部90所取入的帧图像进行对象识别处理,尝试作为商品的物体的全部或一部分的识别(检测)。
在步骤S23中,物体检测部91判断作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若作为商品的物体的识别成功(是),则前进到步骤S24的处理,若作为商品的物体的识别没有成功(否),则返回到步骤S21的处理。步骤S21~S23具体来说是操作人员将商品遮在读取窗52的照相机27上,商品辨别装置2对作为该商品的物体的检测成功为止的一系列的处理。
在步骤S24中,类似度运算部93从商品的全部或一部分图像中读取商品的特征量。进而类似度判断部94判定特征量文件361中是否存在类似度为给定阈值以上的经营商品,并对该商品的商品名和商品单价进行检索和调用。由此,商品辨别装置2能够确定该商品。
在步骤S25中,确定通知部95判断所确定的商品与当前交易中临时登录中的商品是否一致。确定通知部95若判断为所确定的商品与当前交易中临时登录中的商品一致(是),则前进到步骤S26的处理,若未判断为一致(否),则前进到步骤S27的处理。
在步骤S26中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3订正商品的临时登录。POS终端3的销售额取消部992基于该商品ID,对商品的临时登录进行订正(取消)。此时确定通知部95使显示器221显示包含确定商品的照片图像的画面,并且用声音来通知确定商品的商品名和将其取消的意思。若步骤S26的处理结束,则图7的处理结束。
在步骤S27中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3进行商品的退货处理。POS终端3的销售额取消部992基于该商品ID,进行商品的退货处理。此时确定通知部95使显示器221显示包含确定商品的照片图像的画面,并且用声音来通知确定商品的商品名和将其退货的意思。若步骤S27的处理结束,则图7的处理结束。
通过该商品登录的取消处理,操作人员无需进行键盘操作就能够取消商品登录。此外,商品辨别装置2根据各区域中的物体的有无的探测结果来进行判断,因此与基于图像的对象识别相比误检测较少,能够稳定地操作。
图8是表示第1实施方式的第1变形例的商品登录处理的流程图。
第1实施方式的第1变形例的商品登录处理是例如操作人员将第1购物筐4L(参照图1)的商品遮在读取窗52的照相机27上之后,移动到第2购物筐4R的一系列的处理。此时,若对商品赋予了红色价签,则自动执行减价处理。
在步骤S30中,商品辨别装置2的CPU211判断左光电传感器26L是否检测到了粘贴于商品的红色价签。CPU211在左光电传感器26L探测到红色时,判断为检测到了红色价签。对于CPU211而言,若左光电传感器26L检测到了红色价签(是),则前进到步骤S31的处理,若左光电传感器26L未检测到红色价签(否),则前进到步骤S32的处理。
在步骤S31中,商品辨别装置2的CPU211使减价标志有效。此时,商品上粘贴有红色价签,成为减价对象。
在步骤S32中,商品辨别装置2的CPU211判断左光电传感器26L是否已开启。CPU211若未判断为左光电传感器26L已开启(否),则返回到步骤S30的处理,若判断为左光电传感器26L已开启(是),则前进到步骤S33的处理。具体来说,左光电传感器26L的开启是识别区域8M的一侧的区域8L中的物体的探测,意味着操作人员从第1购物筐4L取出商品,并要遮在读取窗52的照相机27上。
步骤S33~S36的处理与图6所示的步骤S11~S14的处理同样。
在步骤S37中,商品辨别装置2的CPU211判断减价标志是否有效。对于CPU211而言,若减价标志并非有效(否),则前进到步骤S38的处理,若减价标志有效(是),则前进到步骤S39的处理。
在步骤S38中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3来使POS终端3进行临时登录。POS终端3的销售额登录部991基于该商品ID,对商品进行临时登录。此时确定通知部95使显示器221显示包含确定商品的照片图像的确定画面,并且用声音来通知确定商品的商品名。若该步骤S38的处理结束,则图8的处理结束。
在步骤S39中,信息输出部98将所确定的经营商品的商品ID等和减价信息输出到POS终端3来使POS终端3进行临时登录。POS终端3的销售额登录部991,基于该商品ID,对商品7进行减价后进行临时登录。此时确定通知部95使显示器221显示包含确定商品的照片图像的确定画面,并且用声音来通知确定商品的商品名和进行了减价的意思。若该步骤S39的处理结束,则图8的处理结束。
像这样,左光电传感器26L能够与物体的有无一起探测颜色。商品辨别装置2将粘贴于商品的减价贴纸等设为特征性的颜色,通过对该颜色进行探测,能够无需进行键盘操作就执行伴随商品登录处理的减价处理等。
图9是表示第1实施方式的第2变形例的商品登录方向决定处理的流程图。
可以想象顾客一边从图1的右侧向左侧移动,一边接受商品的登录处理。即是将未结算的购物筐4配置在右侧,将临时登录后的商品或销售额登录完成的商品所涉及的购物筐4配置在左侧的情况。为了实现这种情况,例如,只要判断各交易中的最初的商品是由左光电传感器26L和右光电传感器26R中的哪个检测到的即可。
在步骤S50中,商品辨别装置2的CPU211判断右光电传感器26R是否已开启。CPU211若未判断为右光电传感器26R已开启(否),则前进到步骤S56的处理,若判断为右光电传感器26R已开启(是),则前进到步骤S51的处理。
在步骤S51中,CPU211判断是否为该交易的最初的商品。CPU211若判断为是该交易的最初的商品(是),则前进到步骤S52的处理,若未判断为是该交易的最初的商品(否),则前进到步骤S54的处理。
在步骤S52中,CPU211将从右到左定义为商品的登录方向。以后,在该交易中,在右光电传感器26R最初开启之后,对在帧图像中对象识别出的商品进行商品登录处理。
在步骤S53中,CPU211进行该商品所涉及的商品登录处理。所谓商品登录处理是例如图6的步骤S11以后所示那样的处理,是在当前交易中,对该商品进行临时登录的处理。若步骤S53的商品登录处理结束,则CPU211结束图9的处理。
在步骤S54中,CPU211判断商品的登录方向是否被定义为从右到左。对于CPU211而言,若商品的登录方向被定义为从右到左(是),则前进到步骤S53的处理,若商品的登录方向未被定义为从右到左(否),则前进到步骤S55的处理。
在步骤S55中,CPU211进行该商品所涉及的取消处理。所谓取消处理是例如图7的步骤S21以后所示那样的处理,例如是在当前交易中,若该商品与临时登录中的商品一致,则取消其临时登录的处理。若步骤S55的取消处理结束,则CPU211结束图9的处理。
在步骤S56中,商品辨别装置2的CPU211判断左光电传感器26L是否已开启。对于CPU211而言,若未判断为左光电传感器26L已开启(否),则返回到步骤S50的处理,若判断为右光电传感器26R已开启(是),则前进到步骤S57的处理。
在步骤S57中,CPU211判断是否为该交易的最初的商品。CPU211若判断为是该交易的最初的商品(是),则前进到步骤S58的处理,若未判断为是该交易的最初的商品(否),则前进到步骤S60的处理。
在步骤S58中,CPU211将从左到右定义为商品的登录方向。以后,在该交易中,在左光电传感器26L最初开启之后,对在帧图像中对象识别出的商品进行商品登录处理。
在步骤S59中,CPU211进行该商品所涉及的商品登录处理。所谓商品登录处理是例如图6的步骤S11以后所示那样的处理,是在当前交易中,对该商品进行临时登录的处理。此时的商品的移动方向与步骤S53中的商品的移动方向相反。
若步骤S59的商品登录处理结束,则CPU211结束图9的处理。
在步骤S60中,CPU211判断商品的登录方向是否被定义为从左到右。对于CPU211而言,若商品的登录方向被定义为从左到右(是),则前进到步骤S59的处理,若商品的登录方向未被定义为从左到右(否),则前进到步骤S61的处理。
在步骤S61中,CPU211进行该商品所涉及的取消处理。所谓取消处理是例如图7的步骤S21以后所示那样的处理,例如是在当前交易中,若该商品与临时登录中的商品一致,则取消其临时登录的处理。此时的商品的移动方向与步骤S55中的商品的移动方向相反。若步骤S61的取消处理结束,则CPU211结束图9的处理。
通过像这样进行处理,商品辨别装置2能够按照如下方式执行动作:以各交易中的最初的商品的移动方向来进行商品登录处理,以其相反方向来进行商品登录的取消处理。由此,能够不受商品辨别装置2的朝向制约地对店铺进行布局。
另外,在步骤S51、S57中,通过探测到各交易中的最初的商品的传感器,来定义了商品登录方向,但也可以是商品登录装置1的电源接通后的最初的商品的移动方向、或该商品登录装置1的使用开始时的最初的商品的移动方向,并不作限定。
(第2实施方式)
图10是第2实施方式中的商品辨别装置2A的主视图。对与图4所示的第1实施方式的商品辨别装置2相同的要素赋予了相同的标号。
第2实施方式的商品辨别装置2A与第1实施方式的商品辨别装置2不同,并未配置右光电传感器26R(第2探测单元)。除此以外,与第1实施方式的商品辨别装置2同样地构成。
第2实施方式的商品登录处理与第1实施方式同样。但是,第2实施方式的商品登录的取消处理是例如操作人员(店员)取出已移动到第2购物筐4R(参照图1)的登录完成的商品,遮在读取窗52的照相机27上之后,使左光电传感器26L探测来进行取消,并放回到第1购物筐4L为止的一系列处理。
图11是表示第2实施方式中的商品登录的取消处理的流程图。
步骤S40~S42的处理与第1实施方式的步骤S21~S23(参照图7)的处理同样地是对商品进行拍摄来进行对象识别的处理。
在步骤S43中,商品辨别装置2的CPU211判断左光电传感器26L是否已开启。CPU211若未判断为左光电传感器26L已开启(否),则返回到步骤S43的处理,若判断为左光电传感器26L已开启(是),则前进到步骤S44的处理。具体来说,左光电传感器26L的开启是与识别区域8M(参照图4)相邻的区域8L中的物体的探测,意味着操作人员从第2购物筐4R取出商品,遮在读取窗52的照相机27上之后,要放回到第1购物筐4L。
在步骤S44中,类似度运算部93从商品的全部或一部分图像中读取商品的特征量。进而类似度判断部94判定特征量文件361中是否存在类似度为给定阈值以上的经营商品,并对该商品的商品名和商品单价进行检索和调用。由此,商品辨别装置2能够确定该商品。
在步骤S45中,确定通知部95判断所确定的商品与当前交易中临时登录中的商品是否一致。确定通知部95若判断为所确定的商品与当前交易中临时登录中的商品一致(是),则前进到步骤S46的处理,若未判断为一致(否),则前进到步骤S47的处理。
在步骤S46中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3订正商品的临时登录。POS终端3的销售额取消部992基于该商品ID,对商品的临时登录进行订正(取消)。此时确定通知部95使显示器221显示包含确定商品的照片图像的画面,并且用声音来通知确定商品的商品名和将其取消的意思。若步骤S46的处理结束,则图11的处理结束。
在步骤S47中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,来进行商品的退货处理。POS终端3的销售额取消部992基于该商品ID,对商品进行退货处理(取消)。此时确定通知部95使显示器221显示包含确定商品的照片图像的画面,并且用声音来通知确定商品的商品名和对其进行退货处理的意思。若步骤S47的处理结束,则图11的处理结束。在此,所谓商品的退货处理,是指在对已经进行临时登录的商品进行正式登录并结算之后,将该商品所涉及的交易进行取消的处理。
这样,即使不设置2个光电传感器,而是通过在单侧设置1个光电传感器,操作人员也无需进行键盘操作就能够对商品进行登录,并能够对该商品登录进行取消。
(第3实施方式)
图12是表示第3实施方式中的商品登录装置1B的概略的构成图。对与图2所示的第1实施方式的商品登录装置1相同的要素赋予了相同的标号。
第3实施方式的商品登录装置1B具备与第1实施方式不同的商品辨别装置2B。该商品辨别装置2B与第1实施方式的商品辨别装置2(参照图2)不同,不具备右光电传感器26R和左光电传感器26L。除此以外,与第1实施方式的商品辨别装置2同样地构成。
第3实施方式的商品辨别装置2B在读取窗52的左右的区域对物体进行探测,在读取窗52的中央的识别区域,对该物体进行识别来确定商品。由此,不需要右光电传感器26R和左光电传感器26L。即,第3实施方式中的照相机27是对包含商品的识别区域、该识别区域的一侧的第1区域、和该识别区域的另一侧的第2区域的图像进行摄像的摄像单元。
CPU211从照相机27摄像得到的图像中的左右的区域中探测物体的有无,并通过中央的识别区域的图像来探测物体从而确定商品。CPU211还根据这些探测结果的时间序列,来使POS终端3进行商品登录处理和商品登录的取消处理中的任意一者。
另外,第3实施方式的商品辨别装置2B在左侧区域探测到物体,并在读取窗52的中央的识别区域对该物体进行识别而确定了商品时,对该商品进行临时登录。相反地,在右侧区域探测到物体,并在读取窗52的中央的识别区域对该物体进行识别而确定了商品时,对该商品的临时登录进行订正(取消)。
图13(a)、(b)是表示第3实施方式中的商品登录操作及其订正操作的说明图。
图13(a)是商品登录操作的说明图。
如图13所示,读取窗52的前方被划分为左侧的区域8L(第1区域)、中央的识别区域8M、和右侧的区域8R(第2区域)。商品辨别装置2B能够探测区域8L、8R的物体。
在商品登录操作时,操作人员将第1购物筐4L的商品遮在读取窗52的照相机27上之后,移动到第2购物筐4R。该操作与现有的商品登录装置同样,是直观且自然的操作。
此时,商品辨别装置2B从照相机27的拍摄图像中探测物体。商品辨别装置2B在左侧的区域8L探测到物体之后,在识别区域8M对物体进行探测来确定商品,然后在右侧的区域8R对物体进行探测。
这样,根据区域8L、8R中的物体的探测结果、和识别区域8M中的物体的探测结果的时间序列,能够确定商品登录操作。
图13(b)是紧接着商品的临时登录之后的订正操作的说明图。
在商品的临时登录操作时,操作人员将第1购物筐4L的商品遮在读取窗52的照相机27上来确定商品。紧接着,操作人员将该商品放回到第1购物筐4L来取消临时登录。该操作是直观且自然的操作。
此时,商品辨别装置2B从照相机27的拍摄图像中探测物体。商品辨别装置2B在左侧的区域8L探测到物体之后,在识别区域8M对物体进行探测来确定商品,并再次在左侧的区域8L对物体进行探测。
这样,根据区域8L、8R中的物体的探测结果、和识别区域8M中的物体的探测结果的时间序列,能够确定紧接着商品的临时登录之后的订正操作。
图14是表示第3实施方式中的商品登录订正操作和再登录操作的说明图。
图14(a)是商品登录订正操作的说明图。
在此所说的商品登录订正操作是对已放入第2购物筐4R的临时登录完成的商品进行订正(取消)的操作。与紧接着登录之后进行订正的图13(b)所示的操作不同。
在商品登录订正操作时,操作人员将第2购物筐4R的商品遮在读取窗52的照相机27上之后,放回到第1购物筐4L。该操作是商品的临时登录操作的逆序,是直观且自然的操作。
此时,商品辨别装置2B从照相机27的拍摄图像中探测物体。商品辨别装置2B在右侧的区域8R探测到物体之后,在识别区域8M对物体进行探测来确定商品,然后在左侧的区域8L对物体进行探测。
这样,根据区域8L、8R中的物体的探测结果、和识别区域8M中的物体的探测结果的时间序列,能够确定商品登录订正操作。
图14(b)是紧接着商品登录订正操作之后的再登录操作的说明图。
在商品登录订正操作时,操作人员将第2购物筐4R的商品遮在读取窗52的照相机27上。操作人员中止该订正而放回到第2购物筐4R,对该商品再次进行临时登录。该操作是商品临时登录操作的取消的逆序,是直观且自然的操作。
此时,商品辨别装置2B从照相机27的拍摄图像中探测物体。商品辨别装置2B在右侧的区域8R探测到物体之后,在识别区域8M对物体进行探测来确定商品,并再次在右侧的区域8R对物体进行探测。
这样,根据区域8L、8R中的物体的探测结果、和识别区域8M中的物体的探测结果的时间序列,能够确定商品登录订正操作后的再登录操作。
图15是表示第3实施方式中的商品登录/订正处理的流程图(其1)。
在步骤S70中,图像取得部90向照相机27输出摄像开启信号来开始照相机27对商品图像的捕捉(摄像)。图像取得部90取入由照相机27摄像并保存在RAM213中的帧图像(摄像图像)。
在步骤S71中,物体检测部91对图像取得部90所取入的帧图像进行对象识别处理,尝试作为商品的物体的全部或一部分的识别(检测)。
在步骤S72中,物体检测部91判断在区域8L、8R中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若在左侧的区域8L中物体的识别成功(左区域),则前进到步骤S73的处理,若在右侧的区域8R中物体的识别成功(右区域),则前进到步骤S74的处理,若物体的识别没有成功(非探测),则返回到步骤S70的处理。
在步骤S73中,CPU211对在左侧的区域8L中首先探测到了该物体的情况进行存储,并前进到步骤S75的处理。此时操作人员取出第1购物筐4L的商品,使其移动到了左侧的区域8L。
在步骤S74中,CPU211对在右侧的区域8R中首先探测到了该物体的情况进行存储。此时操作人员取出第2购物筐4R的商品,使其移动到了右侧的区域8R。
步骤S75、S76的处理与步骤S70、S71的处理同样。
在步骤S77中,物体检测部91判断在识别区域8M中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若作为商品的物体的识别成功(是),则前进到步骤S78的处理,若物体的识别没有成功(否),则返回到步骤S75的处理。
在步骤S78中,类似度运算部93从商品的全部或一部分图像中读取商品的特征量。进而类似度判断部94判定特征量文件361中是否存在类似度为给定阈值以上的经营商品,并对该商品的商品名和商品单价进行检索和调用。由此,商品辨别装置2B能够确定该商品。
在步骤S79中,CPU211判断首先探测到该物体的区域是区域8L、8R中的哪一个。对于CPU211而言,若首先探测到该物体的区域是左侧的区域8L(左区域),则前进到步骤S80的处理,若首先探测到该物体的区域是右侧的区域8R(右区域),则前进到步骤S81的处理。
在步骤S80中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3来使POS终端3进行临时登录。POS终端3的销售额登录部991基于该商品ID,对商品进行临时登录。此时操作人员取出第1购物筐4L的商品,使其经由左侧的区域8L移动到识别区域8M,并遮在照相机27上。
在步骤S80的处理后,经由节点A前进到图16(a)的步骤S83的处理。
在步骤S81中,确定通知部95判断所确定的商品与当前交易中临时登录中的商品是否一致。确定通知部95若判断为所确定的商品与当前交易中临时登录中的商品一致(是),则前进到步骤S82的处理,若未判断为一致(否),则结束图15的处理。
在步骤S82中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3订正临时登录。POS终端3的销售额取消部992基于该商品ID,对商品的临时登录进行订正(取消)。此时操作人员取出第2购物筐4R的商品,使其经由右侧的区域8R移动到识别区域8M,并遮在照相机27上。
在步骤S82的处理后,经由节点B前进到图16(b)的步骤S87的处理。
图16(a)、(b)是表示第3实施方式中的商品登录/订正处理的流程图(其2)。
图16(a)示出了图15的步骤S80的处理后的一系列处理。
步骤S83、S84的处理与步骤S70、S71(参照图15)的处理同样。
在步骤S85中,物体检测部91判断在区域8L、8R中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若在左侧的区域8L中物体的识别成功(左区域),则前进到步骤S86的处理,若在右侧的区域8R中物体的识别成功(右区域),则结束图16(a)的处理,若物体的识别没有成功(非探测),则返回到步骤S83的处理。
在步骤S86中,信息输出部98将在步骤S78(参照图15)中确定的经营商品的商品ID等输出到POS终端3,使POS终端3订正临时登录。POS终端3的销售额取消部992,基于该商品ID,对商品的临时登录进行订正(取消)。此时操作人员取出第1购物筐4L的商品,使其经由左侧的区域8L移动到识别区域8M并遮在照相机27上之后,再次放回到第1购物筐4L(参照图13(b))。
若步骤S86的处理结束,则结束图16(a)的处理。
图16(b)示出了图15的步骤S81的处理后的一系列处理。
步骤S87、S88的处理与步骤S70、S71(参照图15)的处理同样。
在步骤S89中,物体检测部91判断在区域8L、8R中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若在左侧的区域8L中物体的识别成功(左区域),则前进到步骤S90的处理,若在右侧的区域8R中物体的识别成功(右区域),则结束图16(b)的处理,若物体的识别没有成功(非探测),则返回到步骤S87的处理。
在步骤S90中,信息输出部98将在步骤S78(参照图15)中确定的经营商品的商品ID等输出到POS终端3,使POS终端3进行临时登录。POS终端3的销售额登录部991基于该商品ID,对商品进行临时登录。此时操作人员取出第2购物筐4R的商品,使其经由右侧的区域8R移动到识别区域8M并遮在照相机27上之后,再次放回第2购物筐4R(参照图14(b))。
若步骤S90的处理结束,则结束图16(b)的处理。
图17是表示第3实施方式的变形例的商品登录/取消处理的流程图。
该变形例根据在识别区域8M确定了商品之后,操作人员将该商品放入左右哪一个购物筐4,来执行商品登录处理和商品登录的取消处理中的任意一者。在该变形例中,不限定使商品从左右哪一侧移动到识别区域8M。
步骤S100、S101的处理与步骤S70、S71(参照图15)的处理同样。
在步骤S102中,物体检测部91判断在识别区域8M中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若作为商品的物体的识别成功(是),则前进到步骤S103的处理,若物体的识别没有成功(否),则返回到步骤S100的处理。
在步骤S103中,物体检测部91对识别区域8M中的物体的识别结果进行存储。
步骤S104、S105的处理与步骤S70、S71(参照图15)的处理同样。
在步骤S106中,物体检测部91判断在区域8L、8R中作为商品的物体的全部或一部分的识别是否成功。对于物体检测部91而言,若在右侧的区域8R中物体的识别成功(右区域),则前进到步骤S107的处理,若在左侧的区域8L中物体的识别成功(左区域),则前进到步骤S109的处理,若物体的识别没有成功(非探测),则返回到步骤S104的处理。
在步骤S107中,类似度运算部93从在步骤S102中识别成功时的图像中读取商品的特征量。进而类似度判断部94判定特征量文件361中是否存在类似度为给定阈值以上的经营商品,并对该商品的商品名和商品单价进行检索和调用。由此,商品辨别装置2B能够确定该商品。
在步骤S108中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3进行临时登录。POS终端3的销售额登录部991基于该商品ID,对商品进行临时登录。若步骤S108的处理结束,则结束图17的处理。
步骤S109的处理与步骤S107的处理同样。
在步骤S110中,确定通知部95判断所确定的商品与当前交易中临时登录中的商品是否一致。对于确定通知部95而言,若判定为所确定的商品与当前交易中临时登录中的商品一致(是),则前进到步骤S111的处理,若未判断为一致(否),则结束图17的处理。
在步骤S111中,信息输出部98将所确定的经营商品的商品ID等输出到POS终端3,使POS终端3订正临时登录。POS终端3的销售额取消部992基于该商品ID,对商品的临时登录进行订正(取消)。若步骤S111的处理结束,则结束图17的处理。
这样,操作人员在使商品辨别装置2B识别了商品之后,使商品通过左右的区域8L、8R中的任意一方,由此也能够执行商品登录处理和商品登录订正处理(取消处理)中的任意一者。因此,商品辨别装置2B无需进行键盘操作,就能够执行直观且误操作少的商品登录处理及其取消处理。
(变形例)
本发明不限定于上述实施方式,在不脱离本发明的宗旨的范围内能够实施变更,例如,存在如下(a)~(d)。
(a)商品的确定不限定于对象识别。例如,也可以在读取窗装入条形码扫描器或条形码读取器等,读取印刷于商品的条形码等来确定商品。
(b)传感器的位置不限定于识别区域(读取窗)的左右,例如也可以上下设置。此外,也可以设置于与读取窗(照相机)接近的位置和远离的位置。此时,被两传感器的探测区域夹着的区域成为基于照相机的商品的识别区域。
(c)左右的区域的探测单元不限定于光电传感器,可以是能够探测物体的任意的传感器,例如也可以为超声波传感器、激光传感器,红外线传感器等。
(d)各区域中的商品的探测结果的时间序列、与商品登录处理和商品登录的取消处理的对应可以任意,例如,也可以首先在右侧的区域中探测到物体之后,在识别区域中识别出商品时,使POS终端进行商品登录处理。也可以首先在左侧的区域中探测到物体之后,在识别区域中识别出商品时,使POS终端进行商品登录的取消处理。

Claims (18)

1.一种商品登录装置,其特征在于,具备:
探测单元,其探测与商品的识别区域相邻的探测区域中的物体的有无;
摄像单元,其对所述识别区域的图像进行摄像;和
控制单元,其从所述摄像单元摄像得到的所述识别区域的图像中探测物体并确定商品,并且根据所述探测区域和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
2.根据权利要求1所述的商品登录装置,其特征在于,
所述探测单元还能够探测给定颜色,
若所述探测单元探测到给定颜色,则所述控制单元在商品登录处理时同时对商品进行减价。
3.根据权利要求1所述的商品登录装置,其特征在于,
所述探测单元包含:
第1探测单元,其探测所述识别区域的一侧的第1区域中的物体的有无;和
第2探测单元,其探测所述识别区域的另一侧的第2区域中的物体的有无。
4.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元,若在所述第1区域和第2区域的任意一方中探测到物体之后,从所述摄像单元摄像得到的所述识别区域的图像中探测到物体并确定了商品,则根据所述第1区域、所述第2区域、和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
5.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元,若在从所述摄像单元摄像得到的所述识别区域的图像中探测到物体并确定了商品之后在所述第1区域和第2区域的任意一方中探测到物体,则根据所述第1区域、所述第2区域、和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
6.根据权利要求1所述的商品登录装置,其特征在于,
所述取消处理是一次交易内的登录的取消、或者交易结束后的退货处理。
7.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元,若在所述第1区域中探测到所述物体之后在所述识别区域中探测到所述物体,则根据所述第1区域和所述识别区域的探测结果的时间序列来进行商品登录处理或商品登录订正处理,
然后,若在所述第1区域中再次探测到物体,则取消根据所述第1区域和所述识别区域的探测结果的时间序列而实施的商品登录处理或商品登录订正处理。
8.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元针对与最初的商品的移动方向相同方向的商品,进行商品登录处理,针对与该移动方向相反地移动的商品,进行商品登录订正处理。
9.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元,
通过从所述摄像单元摄像得到的所述识别区域的图像中对对象进行识别来检测物体,
并根据表示所述摄像单元摄像得到的所述识别区域的图像、和记录在辞典中的各经营商品的基准图像在多大程度上类似的类似度来确定该物体是哪个商品。
10.根据权利要求3所述的商品登录装置,其特征在于,
所述控制单元通过所述摄像单元摄像得到的所述识别区域的图像中包含的数据代码来对作为所述物体的商品进行探测和确定。
11.一种商品登录装置,其特征在于,具备:
摄像单元,其对包含商品的识别区域以及与该识别区域相邻的探测区域的图像进行摄像;和
控制单元,其从所述摄像单元摄像得到的图像中的所述探测区域中探测物体的有无,并通过所述识别区域的图像来探测物体并确定商品,并且根据所述探测区域和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
12.根据权利要求11所述的商品登录装置,其特征在于,
所述探测区域构成为包含该识别区域的一侧的第1区域、和该识别区域的另一侧的第2区域。
13.根据权利要求12所述的商品登录装置,其特征在于,
所述控制单元,若在所述第1区域和第2区域的任意一方中探测到物体之后从所述摄像单元摄像得到的所述识别区域的图像中探测到物体并确定了商品,则根据所述第1区域、所述第2区域、和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
14.根据权利要求12所述的商品登录装置,其特征在于,
所述控制单元,若在所述摄像单元摄像得到的所述识别区域的图像中探测到物体并确定了商品之后在所述第1区域和第2区域的任意一方中探测到物体,则根据所述第1区域、所述第2区域、和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
15.根据权利要求12所述的商品登录装置,其特征在于,
所述控制单元,若在所述第1区域中探测到所述物体之后在所述识别区域中探测到所述物体,则根据所述第1区域和所述识别区域的探测结果的时间序列来进行商品登录处理或商品登录订正处理,
然后,若在所述第1区域中再次探测到物体,则取消根据所述第1区域和所述识别区域的探测结果的时间序列而实施的商品登录处理或商品登录订正处理。
16.根据权利要求12所述的商品登录装置,其特征在于,
所述控制单元,
通过从所述摄像单元摄像得到的所述识别区域的图像中对对象进行识别来检测物体,
根据表示所述摄像单元摄像得到的所述识别区域的图像、和记录在辞典中的各经营商品的基准图像在多大程度上类似的类似度来确定该物体是哪个商品。
17.根据权利要求12所述的商品登录装置,其特征在于,
所述控制单元通过所述摄像单元摄像得到的所述识别区域的图像中包含的数据代码来对作为所述物体的商品进行探测和确定。
18.一种商品登录装置的商品登录/取消方法,所述商品登录装置具备:
探测单元,其探测与商品的识别区域相邻的探测区域中的物体的有无;
摄像单元,其对所述识别区域的图像进行摄像;和
控制单元,其进行商品登录处理或取消处理,
所述商品登录/取消方法的特征在于,
所述控制单元,
从所述摄像单元摄像得到的所述识别区域的图像中探测物体,
确定作为所述物体的商品,
并根据所述探测区域和所述识别区域的各探测结果的时间序列,来进行商品登录处理和取消处理中的任意一者。
CN201510594363.7A 2014-09-22 2015-09-17 商品登录装置、商品登录方法以及存储介质 Expired - Fee Related CN105448000B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-192528 2014-09-22
JP2014192528A JP6369258B2 (ja) 2014-09-22 2014-09-22 商品登録装置、商品登録方法およびプログラム

Publications (2)

Publication Number Publication Date
CN105448000A true CN105448000A (zh) 2016-03-30
CN105448000B CN105448000B (zh) 2018-12-11

Family

ID=55526094

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510594363.7A Expired - Fee Related CN105448000B (zh) 2014-09-22 2015-09-17 商品登录装置、商品登录方法以及存储介质

Country Status (3)

Country Link
US (1) US10169752B2 (zh)
JP (1) JP6369258B2 (zh)
CN (1) CN105448000B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108320403A (zh) * 2017-01-16 2018-07-24 东芝泰格有限公司 商品识别装置及控制方法、终端设备
CN109472953A (zh) * 2017-09-08 2019-03-15 东芝泰格有限公司 读取装置及控制方法、终端设备
CN110956459A (zh) * 2019-11-28 2020-04-03 浙江由由科技有限公司 一种商品处理方法及系统

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6428240B2 (ja) * 2014-12-17 2018-11-28 カシオ計算機株式会社 商品登録装置、商品認識方法、およびプログラム
JP6193897B2 (ja) * 2015-01-05 2017-09-06 東芝テック株式会社 情報処理装置、店舗システム及びプログラム
JP6302849B2 (ja) * 2015-01-23 2018-03-28 東芝テック株式会社 物品認識装置、販売データ処理装置および制御プログラム
JP6316245B2 (ja) * 2015-07-22 2018-04-25 東芝テック株式会社 情報処理装置およびプログラム
JP6272810B2 (ja) * 2015-09-30 2018-01-31 東芝テック株式会社 情報処理装置およびプログラム
EP3173821B1 (en) * 2015-11-30 2023-04-19 Signify Holding B.V. Distinguishing devices having positions and directions
US20170193290A1 (en) * 2016-01-06 2017-07-06 Toshiba Tec Kabushiki Kaisha Commodity registration apparatus and commodity registration method
WO2017126256A1 (ja) * 2016-01-21 2017-07-27 日本電気株式会社 情報処理装置、制御方法、及びプログラム
US10331969B2 (en) * 2016-10-28 2019-06-25 Ncr Corporation Image processing for scale zero validation
JP7085393B2 (ja) * 2018-04-12 2022-06-16 東芝テック株式会社 読取装置およびプログラム
CN112424681B (zh) * 2018-08-30 2022-03-11 富士胶片株式会社 摄像装置、摄像方法及记录介质
JP7221722B2 (ja) * 2019-02-19 2023-02-14 東芝テック株式会社 物品情報読取装置およびプログラム
JP2022139457A (ja) * 2021-03-12 2022-09-26 東芝テック株式会社 情報処理システム、情報端末、及び情報処理装置並びにその制御プログラム
US11928660B2 (en) * 2022-03-18 2024-03-12 Toshiba Global Commerce Solutions Holdings Corporation Scanner swipe guidance system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06243282A (ja) * 1993-02-19 1994-09-02 Casio Comput Co Ltd 読取データ処理装置
US20090188981A1 (en) * 2008-01-24 2009-07-30 Hitoshi Iizaka Datacode reading apparatus
JP2010026745A (ja) * 2008-07-18 2010-02-04 Ishida Co Ltd Pos端末装置
CN103208154A (zh) * 2012-01-16 2013-07-17 东芝泰格有限公司 信息处理装置、店铺系统及信息处理方法
CN103577515A (zh) * 2012-07-23 2014-02-12 东芝泰格有限公司 商品识别装置及识别词库追加方法
CN103794008A (zh) * 2012-10-31 2014-05-14 东芝泰格有限公司 商品读取装置、商品销售数据处理装置及商品读取方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5965861A (en) * 1997-02-07 1999-10-12 Ncr Corporation Method and apparatus for enhancing security in a self-service checkout terminal
US6369709B1 (en) * 1998-04-10 2002-04-09 3M Innovative Properties Company Terminal for libraries and the like
JP4460084B2 (ja) * 1999-06-04 2010-05-12 富士通株式会社 バーコード読取装置及び計量方法
JP5194078B2 (ja) * 2010-08-31 2013-05-08 東芝テック株式会社 情報コード読取装置、商品販売情報処理装置、およびプログラム
JP5567606B2 (ja) * 2012-01-31 2014-08-06 東芝テック株式会社 情報処理装置及びプログラム
JP5518918B2 (ja) 2012-02-29 2014-06-11 東芝テック株式会社 情報処理装置、店舗システム及びプログラム
JP5572651B2 (ja) 2012-03-02 2014-08-13 東芝テック株式会社 商品読取装置および商品読取プログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06243282A (ja) * 1993-02-19 1994-09-02 Casio Comput Co Ltd 読取データ処理装置
US20090188981A1 (en) * 2008-01-24 2009-07-30 Hitoshi Iizaka Datacode reading apparatus
JP2010026745A (ja) * 2008-07-18 2010-02-04 Ishida Co Ltd Pos端末装置
CN103208154A (zh) * 2012-01-16 2013-07-17 东芝泰格有限公司 信息处理装置、店铺系统及信息处理方法
CN103577515A (zh) * 2012-07-23 2014-02-12 东芝泰格有限公司 商品识别装置及识别词库追加方法
CN103794008A (zh) * 2012-10-31 2014-05-14 东芝泰格有限公司 商品读取装置、商品销售数据处理装置及商品读取方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108320403A (zh) * 2017-01-16 2018-07-24 东芝泰格有限公司 商品识别装置及控制方法、终端设备
CN109472953A (zh) * 2017-09-08 2019-03-15 东芝泰格有限公司 读取装置及控制方法、终端设备
CN109472953B (zh) * 2017-09-08 2021-11-23 东芝泰格有限公司 读取装置及控制方法、终端设备
CN110956459A (zh) * 2019-11-28 2020-04-03 浙江由由科技有限公司 一种商品处理方法及系统

Also Published As

Publication number Publication date
JP6369258B2 (ja) 2018-08-08
JP2016062547A (ja) 2016-04-25
CN105448000B (zh) 2018-12-11
US10169752B2 (en) 2019-01-01
US20160086148A1 (en) 2016-03-24

Similar Documents

Publication Publication Date Title
CN105448000A (zh) 商品登录装置以及商品登录方法
JP6555866B2 (ja) 商品登録装置及びプログラム
US9245424B2 (en) Store system and sales registration method
US11494573B2 (en) Self-checkout device to which hybrid product recognition technology is applied
JP6348827B2 (ja) 情報処理装置、店舗システムおよびプログラム
KR20190096975A (ko) 자동 상점 내 등록 시스템
CN107798268B (zh) 物品读取装置及控制方法、终端设备、计算机可读存储介质
JP2016115282A (ja) 商品識別装置および商品認識ナビゲーション方法
US10482447B2 (en) Recognition system, information processing apparatus, and information processing method
CN112567419A (zh) 使用计算机视觉和人工智能进行的自助产品退还
US20180068534A1 (en) Information processing apparatus that identifies an item based on a captured image thereof
JP6208091B2 (ja) 情報処理装置およびプログラム
JP5865316B2 (ja) 商品登録装置およびプログラム
US20160180174A1 (en) Commodity registration device and commodity registration method
US20190385141A1 (en) Check-out system with merchandise reading apparatus and pos terminal
KR102120092B1 (ko) 인공 지능을 이용하는 쇼핑 카트 및 상품 인식 방법
JP2019028908A (ja) 商品登録装置及びそのプログラム
JP6503670B2 (ja) 商品登録装置、商品登録方法、および商品登録プログラム
JP6295944B2 (ja) 商品識別装置および商品認識ナビゲーション方法
US20170083891A1 (en) Information processing apparatus and information processing method
JP6610724B2 (ja) 商品登録装置、およびプログラム
US20190370774A1 (en) Information processing apparatus and method of controlling an information processing apparatus
US10360690B2 (en) Information processing apparatus and information processing method
US20240193995A1 (en) Non-transitory computer-readable recording medium, information processing method, and information processing apparatus
US20240211952A1 (en) Information processing program, information processing method, and information processing device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181211

Termination date: 20210917