CN103310561A - 商品读取装置及商品读取方法 - Google Patents

Abstract

本发明公开一种商品读取装置及商品读取方法，即便使商品和优惠券分别通过摄像部摄像也能够给予优惠券的优惠，该商品读取装置，包括：图像识别部，从通过摄像部摄像的图像中识别物品；物品识别部，识别通过图像识别部识别出的物品是商品还是优惠券；以及信息输出部，在通过物品识别部识别出的商品成为通过物品识别部识别出的优惠券的对象时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

Description

商品读取装置及商品读取方法

本申请主张申请日为2012年12月19日、申请号为JP2012-277161、以及申请日为2012年3月5日、申请号为JP2012-047826的日本申请为优先权，并引用上述申请的内容。

技术领域

本发明涉及一种采用摄像部的商品读取装置及基于所述商品读取装置进行商品读取的商品读取方法。

背景技术

有这样一种商品读取装置，从通过CCD摄像头等的摄像单元摄像的图像中，识别附在商品等上的码符号。已公知有这样一种技术，当采用这种商品读取装置从摄像图像中识别附在商品上的码符号的同时，识别折扣券、优待券等的优惠券时，则将与优惠券有关的信息和与所述商品有关的信息一起输出给POS（Point Of Sales：销售点）终端等。

在现有技术中，需要使附在商品上的码符号和优惠券同时通过摄像单元摄像来图像识别。

发明内容

鉴于上述问题，本发明的目的在于提供一种即便使商品和优惠券分别通过摄像部摄像也能够给予优惠券的优惠的商品读取装置及商品读取方法。

本发明涉及的商品读取装置，包括：图像识别部、物品识别部及信息输出部。图像识别部从通过摄像部摄像的图像中识别物品。物品识别部识别通过图像识别部识别出的物品是商品还是优惠券。信息输出部在通过物品识别部识别出的商品成为通过物品识别部识别出的优惠券的对象时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

本发明所涉及的基于上述的商品读取装置的商品读取方法，包括以下步骤：图像识别步骤，从通过摄像部摄像的图像中识别物品；物品识别步骤，识别通过该图像识别步骤识别出的物品是商品还是优惠券；以及信息输出步骤，在通过该物品识别步骤识别出的商品成为通过所述物品识别步骤识别出的优惠券的对象时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

附图说明

图1是第一实施例中的自助POS终端的功能框图。

图2是该实施例中的自助POS终端的外观立体图。

图3是表示该实施例中的自助POS终端的硬件构成的框图。

图4是表示在该实施例中蓄积在商品数据库中的商品数据记录的数据构造的示意图。

图5是表示在该实施例中蓄积在优惠券数据库中的优惠券数据记录的数据构造的示意图。

图6是表示在该实施例中蓄积在图像数据库中的图像数据记录的数据构造的示意图。

图7是表示在该实施例中保持在优惠券保持存储器中的优惠券信息文件的数据构造的示意图。

图8是表示在该实施例中自助POS终端的CPU按照读取处理程序进行动作的信息处理次序的流程图。

图9是具体地表示图8的信息处理次序中的优惠券读取处理次序的流程图。

图10是具体地表示图8的信息处理次序中的商品读取处理次序的流程图。

图11是表示在该实施例中向读取窗举起了购入商品“リンゴ（苹果）”时的操作员用显示器的显示画面的一例图。

图12是表示在图11的画面中商品“ＡＡ産リンゴ（AA产苹果）”被择了时的画面的一例图。

图13是表示在该实施例中向读取窗举起了优惠券“リンゴ10％引き（苹果九折）”时的操作员用显示器的显示画面的一例图。

图14是表示在图13的画面中优惠券“苹果九折”被选择了时的画面的一例图。

图15是表示在图14的画面中优惠券“苹果九折”被选择了后，向读取窗举起了购入商品“苹果”时的画面的一例图。

图16是表示在图15的画面中购入商品“苹果”是优惠券“苹果九折”的优惠券对象时的画面的一例图。

图17是表示从图16的画面过渡的画面的一例图。

图18是表示在该实施例中优惠券“苹果九折”未被使用时的告知画面的一例图。

图19是第二实施例中的自助POS终端的功能框图。

图20是表示在该实施例中优惠券保持存储器所保持的优惠券信息文件的示意图。

图21是表示在该实施例中自助POS终端的CPU按照读取处理程序进行动作的商品读取处理次序的流程图。

图22是表示在该实施例中向读取窗举起了购入商品“苹果”时的画面的一例图。

图23是表示在图22的画面中优惠券“苹果九折”被选择了时的画面的一例图。

图24是表示在第三实施例中商品保持存储器所保持的商品信息文件的示意图。

图25是表示在该实施例中自助POS终端的CPU按照读取处理程序进行动作的信息处理次序的流程图。

图26是具体地表示图25的信息处理次序中的商品读取处理的次序的流程图。

图27是具体地表示图25的信息处理次序中的优惠券读取处理的次序的流程图。

图28是表示在第四实施例中自助POS终端的CPU按照读取处理程序进行动作的信息处理次序的流程图。

图29是具体地表示图28的信息处理次序中的核对处理的次序的流程图。

图30是具体地表示第五实施例中的核对处理的次序的流程图。

具体实施方式

下面，参照附图，对商品读取装置的实施例进行说明。另外，该实施例是应用于自助POS终端的商品读取部的情况。

第一实施例

图1是第一实施例中的自助POS终端1的功能框图。如图1所示，自助POS终端1包括作为摄像单元的摄像部11、存储部12、显示部13、从通过所述摄像部11摄像的图像中读取商品的商品读取部14、对在该商品读取部14中所读取的商品的销售数据进行登记处理的销售登记部15、以及根据在该销售登记部15中所登记处理的商品销售数据对商品交易的结算进行处理的结算处理部16。

商品读取部14具有作为图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H、结束确认单元14I及未使用优惠券告知单元14J的功能。

图像识别单元14A从通过摄像部11摄像的图像中识别物品。候补物品显示单元14B从预先登记的物品组中抽取与通过图像识别单元14A识别出的物品相似的候补物品并使其可选择地显示在显示部13上。物品识别单元14C识别从显示部13所显示的候补物品中选择出的物品是商品还是优惠券。信息保持单元14D当通过物品识别单元14C识别出优惠券时，通过存储部12保持与所述优惠券有关的信息（优惠券信息保持单元）。信息确认单元14E当通过物品识别单元14C识别出商品时，确认在存储部12中是否保持有与所述商品成为对象的优惠券有关的信息（优惠券信息确认单元）。信息输出单元14F当通过信息确认单元14E确认为未保持有与所述商品成为对象的优惠券有关的信息时，将与所述商品有关的信息单独输出给销售登记部15，当确认为保持有时，将与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息输出给销售登记部15。信息删除单元14G当通过信息输出单元14F输出有与优惠券有关的信息时，则从存储部12中删除与所述优惠券有关的信息（优惠券信息删除单元）。保持显示单元14H在存储部12中保持有与优惠券有关的信息的期间，使该信息所涉及的优惠券的图像显示在显示部13上（保持优惠券显示单元）。结束确认单元14I确认作为一交易被处理的商品是否读取结束。未使用优惠券告知单元14J当在通过结束确认单元14I确认了读取结束时，在存储部12中保持有与优惠券有关的信息时，则告知该信息所涉及的优惠券为未使用的情况。

图2是自助POS终端1的外观立体图。如图2所示，自助POS终端1在本体21的正表面上部具备操作员用显示器22、所述摄像部11的读取窗23、读写器24及票据发放口25。此外，在本体21的正表面中央部形成有硬币投入口26、硬币支付口27、纸币投入口28及纸币支付口29。而且，在隔着本体2的一侧设置有用于放置尚未结算的商品的商品载置台30，在另一侧设置有用于放置已结算的商品的商品载置台31。

操作员用显示器22是通过画面的触摸操作可输入信息的带触摸面板的显示器。而且，该操作员用显示器22显示有通过摄像部11摄像的图像、作为候补物品被抽取的物品的图像。也就是说，操作员用显示器22具有作为显示部13的功能。此外，显示有通过销售登记部15销售登记的商品的品名、单价、销售件数、销售金额等的登记画面及显示有在结算处理部16中所结算处理的商品交易的合计金额、找零金额等的结算画面等也被显示在操作员用显示器22上。

读写器24对电子货币卡、积分卡等的卡介质61（参照图3）进行数据的写入及读出。票据发放口25是通过本体21所内置的打印机63（参照图3）在结账处理结束时所打印的票据的发放口。硬币投入口26是结账用硬币的投入口。硬币支付口27是找零硬币的返还口。纸币投入口28是结账用纸币的投入口。纸币支付口29是找零纸币的返还口。

图3是表示自助POS终端1的硬件构成的框图。如图3所示，自助POS终端1装载CPU（Central Processing Unit：中央处理器）41，作为控制部主体。而且，在该CPU41上通过地址总线、数据总线等的总线42，连接ROM（Read Only Memory：只读存储器）43、RAM（Random Access Memory：随机存取存储器）44、辅助存储部45、时钟部46、通信接口47、读写器接口48、硬币投入/支付单元49、纸币投入/支付单元50、摄像头控制器51、触摸面板控制器52、打印机控制器53及计量单元54的A/D（模拟/数字）转换器541的各部。

时钟部46计时当前的日期及时间。通信接口47掌管通过网络连接的存储服务器及服务终端之间的数据通信。读写器接口48采集读写器24所读取的卡介质61的数据。此外，读写器接口48将应写入到卡介质61的数据输出给读写器24。

硬币投入/支付单元49按面值计数从硬币投入口26投入的硬币并计算出投入金额，而且将该投入硬币按面值收容到未图示的金库中。此外，硬币投入/支付单元49按照来自CPU41给出的找零支付指令，从所述金库取出作为找零所需的硬币，并向硬币支付口27支付。纸币投入/支付单元50按面值计数从纸币投入口28投入的纸币并计算出投入金额，而且将该投入纸币按面值收容到未图示的金库中。此外，纸币投入/支付单元50按照来自CPU41给出的找零支付指令，从所述金库取出作为找零所需的纸币，并向纸币支付口29支付。

摄像头控制器51控制摄像头62的摄像动作。摄像头62被内置在本体21中的读取窗23的里侧附近，并具备作为区域图像传感器的CCD（Charge Coupled Device：电荷耦合器件）摄像元件及其驱动电路、用于使摄像区域S的图像在CCD摄像元件中成像的摄像透镜。摄像区域S指的是从读取窗23通过摄像透镜在CCD摄像元件的区域上成像的帧图像的区域。摄像头62将通过摄像透镜在CCD摄像元件上已成像的摄像区域S的图像输出给摄像头控制器51。在这里，摄像头62和摄像头控制器51构成摄像部11。

触摸面板控制器52控制构成所述操作员用显示器22的面板显示器221和触摸面板传感器222。作为面板显示器221诸如采用液晶显示器。触摸面板传感器222重叠配置在面板显示器221的画面上。触摸面板控制器52使面板显示器221显示图像并监视触摸面板传感器222的检测信号，并当检测信号被输入时，则根据其信号识别已触摸的区域的图像数据。

打印机控制器53控制用于对票据进行打字的打印机63。计量单元54由设置在商品载置台32上的测力传感器542和将从该测力传感器542输出的模拟重量信号转换成数字重量数据的A/D转换器541构成。

辅助存储部45诸如由HDD（Hard Disk Drive：硬盘驱动器）或SSD（Solid State Drive：固态硬盘）等构成，并至少具备商品数据库451、优惠券数据库452及图像数据库453。

如图4所示，商品数据库451对于在店铺中销售的各种商品，与预先设定的商品固有的商品代码关联，蓄积保存记录了用该商品代码指定的商品的属性、商品名、单价、单位重量等的商品数据的商品数据记录451R。属性是指定用所对应的商品代码指定的商品属于在诸如蔬菜、水果、上等肉、鲜鱼、加工品、点心、饮料等的商品分类中的哪种分类的信息。单位重量是用所对应的商品代码指定的商品的每件商品的平均重量，CPU41对在销售登记部15中所登记处理的商品的单位重量和通过计量单元54测定的重量进行比较，判定已登记的商品是否已正确地放置在商品载置台32上。

如图5所示，优惠券数据库452对于可在店铺中使用的各种优惠券（折扣券、优待券、商品券、金券等），与预先设定的优惠券固有的优惠券代码关联，蓄积保存记录了用该优惠券代码指定的优惠券的名称（优惠券名）、对象商品信息及优惠信息等的优惠券数据的优惠券数据记录452R。对象商品信息是指定成为用所对应的优惠券代码指定的优惠券的对象的商品的信息，诸如设置有商品代码、所述属性。另外，诸如当是不论商品分类都为九折那样的不指定商品的优惠券时，作为对象商品信息设置有表示不指定商品的数据诸如“00”。优惠信息是指定通过用所对应的优惠券代码指定的优惠券提供给顾客的优惠内容诸如九折、减价10日元等的信息。

如图6所示，图像数据库453与唯一的图像ID关联，蓄积保存记录了外观图像数据、外观特征参数、物品分类、识别代码等的数据的图像数据记录453R。外观图像数据是表示用所述商品数据库451所保存的商品数据记录451R指定的各种商品及用所述优惠券数据库452所保存的优惠券数据记录452R指定的各种优惠券的外观图像的数据。外观特征参数是对应每个物品将从附有所对应的图像ID的外观图像获得的物品（商品或优惠券）的形状、表面的色彩、图案、凹凸状况等那样的物品的外观的特征量进行数值化的数据。物品分类是识别附有所对应的图像ID的外观图像的物品是商品还是优惠券的信息。在本实施例中，将识别商品的分类信息视为“1”、将识别优惠券的分类信息视为“2”。识别代码是指定附有所对应的图像ID的外观图像的物品的代码，当物品为商品时设置有商品代码，当为优惠券时设置有优惠券代码。

RAM44具有用于暂时存储可变数据的各种存储区域。尤其本实施例在RAM44中形成有优惠券保持存储器M1。如图7所示，优惠券保持存储器M1是用于保持优惠券信息文件F1的区域，该优惠券信息文件F1包含优惠券代码、优惠券名、对象商品信息、优惠信息及优惠券的外观图像数据。

ROM43是用于存储程序等固定数据的区域。本实施例在ROM43中至少存储有读取处理程序P1。该程序P1使作为计算机的CPU41实现具有作为商品读取部14所具有的图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H、结束确认单元14I及未使用优惠券告知单元14J的功能。

图8至图10是表示CPU41按照读取处理程序P1进行动作的信息处理次序的流程图。通过这些流程图，作为上述图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H、结束确认单元14I及未使用优惠券告知单元14J的功能被说明。

图8的流程图所示出的次序的信息处理诸如当操作员用显示器22所显示的开始按钮被触摸时被开始。当开始时，则首先CPU41向摄像头控制器51输出摄像导通信号（ST1）。通过该摄像导通信号，摄像头62开始摄像区域的摄像。通过摄像头62摄像的摄像区域的帧图像依次被保存到RAM44中。

CPU41采集RAM44所保存的帧图像的数据（ST2）。而且，CPU41识别该帧图像所包含的物品（ST3：图像识别单元14A）。具体地说，CPU41首先从将帧图像进行二值化的图像中抽取轮廓线等。通过这样，CPU41对帧图像所映出的物体的轮廓抽取进行尝试。当物体的轮廓被抽取时，则CPU41从其轮廓内的图像中读取物品的形状、表面的色彩、图案、凹凸状况等的特征量。

这样，识别图像中所包含的物品的技术被称为一般物体识别（generic object recognition：一般物体识别）。关于该一般物体识别的技术在下述的文献中各种识别技术被说明。

柳井啓司，“一般物体認識の現状と今後”，情報処理学会論文誌，Ｖｏｌ．48，Ｎｏ．ＳＩＧ16[平成22年8月10日検索]，インターネット<URL:http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf>（柳井启司，“一般物体识别的现状与未来”，信息处理学会论文志，Vol.48，No.SIG16“2010年8月10日检索”，互联网＜URL：http：//mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf＞）

此外，通过对应每个目的物对图像进行区域分割，进行一般物体识别的技术在下述的文献中被说明。

Jamie Shottonら，“Semantic Texton Forests forImage Categorization and Segmentation”，[平成22年8月10日検索]，インターネット<URL:http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=rep1&type=pdf>（Jamie Shottonら（杰米肖顿等人），“Semantic Texton Forests for Image Categorization andSegmentation：”，“2010年8月10日检索”，互联网＜URL：http：//citeseerx.ist.psu.edu/viewdoc/download？doi＝10.1.1.145.3036&rep＝rep1&type＝pdf＞）

CPU41确认是否能够从图像中识别出物品（ST4）。当未识别有物品时（ST4的否），CPU41确认是否宣告了读取结束（ST5：结束确认单元14I）。读取结束诸如当操作员用显示器22所显示的结账按钮被触摸时被宣告。当未宣告读取结束时（ST5的否），CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

当识别出物品时（ST4的是），CPU41将该物品的特征量数据与图像数据库453所保存的各种物品的外观特征参数依次进行核对，对应每个外观特征参数计算出相对于特征量数据的相似度（ST6）。相似度越高，用设置有所述外观特征参数的图像数据记录453R的识别代码指定的物品是在步骤ST3的处理中从图像识别出的物品的可能性越高。

CPU41确认有无相似度为大于等于预先设定的阈值的外观特征参数、即确认有无能成为从图像识别出的物品的候补的候补物品（ST7）。当没有候补时（ST7的否），CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

当候补物品至少有一个时（ST7的是），CPU41抽取该候补物品的图像数据、即抽取设置有与从摄像图像识别出的物品的特征量数据的相似度成为大于等于预先规定的阈值的外观特征参数的图像数据记录453R的外观图像数据。而且，CPU41使所抽取的候补物品的图像显示在操作员用显示器22上。这时，候补物品的图像分别作为触摸开关可选择地被显示（ST8：候补物品显示单元14B）。

CPU41确认是否从候补物品中选择了任一物品（ST9）。例如，在显示有候补物品的图像的画面中显示有宣告没有符合的物品的情况的触摸开关，CPU41当该触摸开关被输入时，则视为无选择物品。当物品未被选择时（ST9的否），CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

当通过触摸面板传感器222的信号，确认从候补物品中选择了任一物品时（ST9的是），则CPU41检查设置有该已选择的物品的图像数据的图像数据记录453R的物品分类（ST10：物品识别单元14C）。在这里，当物品分类为“2”、即已选择的物品是优惠券时，CPU41执行通过图9的流程图具体地示出的次序的优惠券读取处理（ST11）。

也就是说，CPU41检测出包含有已选择的物品的图像数据的图像数据记录453R的识别代码，作为优惠券代码。而且，CPU41用该优惠券代码检索优惠券数据库452，从包含所述优惠券代码的优惠券数据记录452R中取得优惠券代码、优惠券名、对象商品信息及优惠信息的优惠券信息（ST21）。

如果取得了优惠券信息，则CPU41用该优惠券信息和该优惠券的图像数据编制优惠券信息文件F1。而且，CPU41将优惠券信息文件F1存储到优惠券保持存储器M1中（ST22：信息保持单元14D）。此外，CPU41使所述优惠券的图像显示在操作员用显示器22上（ST23：保持显示单元14H）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

另一方面，当在步骤ST10中，物品分类为“1”、即已选择的物品是商品时，CPU41执行通过图10的流程图具体地示出的次序的商品读取处理（ST12）。

也就是说，CPU41检测出包含有已选择的物品的图像数据的图像数据记录453R的识别代码，作为商品代码。而且，CPU41用该商品代码检索商品数据库451，从包含所述商品代码的商品数据记录451R中取得商品代码、属性、商品名、单价、单位重量等的商品信息（ST31）。

如果取得了商品信息，则CPU41确认在优惠券保持存储器M1中是否存储有优惠券信息文件F1、即确认是否保持有优惠券信息（ST32：信息确认单元14E）。当保持有时（ST32的是），CPU41从该优惠券信息中读出对象商品信息，并与已取得的商品信息的商品代码、属性等进行核对，确认所述商品信息的商品是否为优惠券保持存储器M1所保持的优惠券信息的优惠券优惠对象（ST33：信息确认单元14E）。

当是优惠券优惠对象时（ST33的是），CPU41将所取得的商品信息与优惠券保持存储器M1所保持的优惠券信息一起输出给销售登记部15（ST34：信息输出单元14F）。而且，在输出后，CPU41从优惠券保持存储器M1中删除优惠券信息文件F1（ST35：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述优惠券的图像（ST36）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

另一方面，当在优惠券保持存储器M1中未保持有优惠券信息时（ST32的否），或者当保持有但所取得的商品信息的商品不是所述优惠券信息的优惠券优惠对象时（ST33的否），CPU41将所取得的商品信息单独输出给销售登记部15（ST37：信息输出单元14F）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

这样，CPU41在步骤ST3的物品识别处理中每识别有物品（ST4的是），都重复所述步骤ST6～ST12的处理。而且，当宣告读取结束时（ST5的是），则CPU41向摄像头控制器51输出摄像截止信号（ST13）。通过该摄像截止信号，摄像头62停止摄像。

在输出了摄像截止信号后，CPU41确认在优惠券保持存储器M1中是否保持有优惠券信息（ST14）。当未保持有时（ST14的否），结束此次的程序处理。

针对于此，当保持有优惠券信息时（ST14的是），CPU41使向用户告知有未使用的优惠券的情况的信息显示在操作员用显示器22上（ST15：未使用优惠券告知单元14J），以上，结束此次的程序处理。

利用涉及的构成的自助POS终端1的顾客首先触摸开始按钮。接着，向读取窗23一件一件举起购入的商品。此外，当关于购入商品有优惠券时，先向读取窗23举起优惠券，之后向读取窗23举起成为优惠券的优惠对象的购入商品。

图11及图12是在购入商品“リンゴ（苹果）”不是优惠券的对象时的操作员用显示器22的显示画面例。当顾客向读取窗23举起购入商品“リンゴ（苹果）”时，则如图11所示，在占据操作员用显示器22的画面中央部的摄像图像显示区域71中显示有通过摄像头62摄像的商品“苹果”的图像。

这时，当通过图像识别单元14A从摄像图像中将商品“苹果”作为物品识别时，则通过候补物品显示单元14B抽取具有相对于商品“苹果”的特征量数据相似度高的外观特征参数的候补物品（在图11中，有“ＡＡ産リンゴ（AA产苹果）”、“ＢＢ産リンゴ（BB产苹果）”、“ＣＣ産リンゴ（CC产苹果）”的三个品种）。而且，这些候补物品的图像作为触摸开关72A、72B、72C被显示在画面右侧的候补物品显示区域72中。此外，操作员用显示器22也显示非符合按钮73，作为宣告在候补物品中没有符合的物品的情况的触摸开关。

在这里，当触摸开关72A所显示的“AA产苹果”是购入商品时，如在图12中用影线所示，顾客触摸触摸开关72A。通过这样做，通过物品识别单元14C、信息确认单元14E及信息输出单元14F，将通过触摸操作选择的商品“AA产苹果”的商品信息单独输出给销售登记部15。其结果，在销售登记部15中，商品“AA产苹果”的销售数据用定价被登记处理。此外，商品“AA产苹果”的品名、销售件数及销售价格被显示在操作员用显示器22的画面下侧。

图13至图17是在购入商品“苹果”成为对象的优惠券“リンゴ10％引き（苹果九折）”被使用时的操作员用显示器22的显示画面例。顾客首先向读取窗23举起优惠券“苹果九折”。通过这样做，如图13所示，在摄像图像显示区域71中显示有通过摄像头62摄像的优惠券“苹果九折”的图像。

这时，当通过图像识别单元14A从摄像图像中将优惠券“苹果九折”作为物品识别时，则通过候补物品显示单元14B抽取具有相对于优惠券“苹果九折”的特征量数据相似度高的外观特征参数的候补物品（在图13中，有“苹果九折”及“リンゴ10円引き（苹果减价10日元）”的两个品种）。而且，这些候补物品的图像作为触摸开关72A、72B被显示在候补物品显示区域72中。

在这里，当触摸开关72A所显示的优惠券“苹果九折”是使用优惠券时，如在图14中用影线所示，顾客触摸触摸开关72A。通过这样做，通过物品识别单元14C及信息保持单元14D，优惠券“苹果九折”的优惠券信息被保持在优惠券保持存储器M1中。而且，通过保持显示单元14H，将优惠券“苹果九折”的图像74显示在操作员用显示器22的画面下侧。

接着，顾客向读取窗23举起了购入商品“苹果”。通过这样做，如图15所示，在操作员用显示器22的摄像图像显示区域71中显示有通过摄像头62摄像的商品“苹果”的图像，在候补物品显示区域72中候补物品（“AA产苹果”、“BB产苹果”、“CC产苹果”）的图像作为触摸开关72A、72B、72C被显示。

在这里，如在图15中用影线所示，当顾客触摸触摸开关72A时，则通过物品识别单元14C、信息确认单元14E及信息输出单元14F，将通过触摸操作选择出的商品“AA产苹果”的商品信息和优惠券保持存储器M1所保持的优惠券信息输出给销售登记部15。其结果，在销售登记部15中，商品“AA产苹果”的销售数据用九折被登记处理。

这时，如图16所示，在操作员用显示器22中，已使用的优惠券“苹果九折”的图像74移动到摄像图像显示区域71内，画面下侧的优惠券“苹果九折”的图像74被消去。此外，在自助POS终端1中，通过信息删除单元14G的功能，从优惠券保持存储器M1中删除优惠券信息。而且，在删除了优惠券信息后，如图17所示，在画面下侧显示有通过优惠券“苹果九折”折扣的商品“AA产苹果”的品名、销售件数及销售价格。

另外，顾客在举起购入商品“苹果”之前诸如举起了其他商品“バナナ（香蕉）”。商品“香蕉”不是优惠券保持存储器M1所保持的优惠券信息的优惠券对象。在这样情况下，通过物品识别单元14C、信息确认单元14E及信息输出单元14F，将商品“香蕉”的商品信息单独输出给销售登记部15，并登记处理销售数据。这时，不删除优惠券保持存储器M1所保持的优惠券信息。此外，在操作员用显示器22的画面下侧暂时地显示有商品“香蕉”的品名、销售件数及销售价格，之后，返回到优惠券“苹果九折”的图像74。

因此，接着，当顾客举起购入商品“苹果”时，则如用图15至图17所说明的那样，商品“AA产苹果”的商品信息和优惠券“苹果九折”的优惠券信息被输出给销售登记部15，商品“AA产苹果”的销售数据用九折被登记处理。

不过，在顾客中虽然向读取窗23举起手持的优惠券并被识别了，但是往往存在有在购入商品中未包含有优惠券对象的商品的情况。例如，在用图13至图17所说明的具体例中，虽然从摄像图像中识别出优惠券“苹果九折”，但是之后往往存在有优惠券对象的商品“苹果”不被识别而触摸结账按钮的情况。这时，自助POS终端1在优惠券保持存储器M1中一直保持着优惠券“苹果九折”的优惠券信息读取结束。在这样的情况下，自助POS终端1通过结束确认单元14I及未使用优惠券告知单元14J，如图18所示那样将向顾客告知优惠券“苹果九折”为未使用的情况的信息75显示在操作员用显示器22上。

这样，根据第一实施例的自助POS终端1，只要顾客亲自将商品和优惠券分别向读取窗23举起，就能够正确地接受该优惠券的优惠。

此外，根据本实施例的自助POS终端1，直到从摄像图像识别出的优惠券被使用之前，所述优惠券的图像74被显示在操作员用显示器22的画面上，所以顾客能够容易识别优惠券尚未被使用的情况。此外，当未被使用而到达到结账时，由于在操作员用显示器22上显示有向顾客告知优惠券“苹果九折”为未使用的情况的信息75，所以顾客能够容易识别优惠券“苹果九折”为未使用的情况。

第二实施例

接着，参照图19至图23，对第二实施例进行说明。另外，对与第一实施例相同部分附加相同符号，并省略详细的说明。

图19是第二实施例中的自助POS终端100的功能框图。如图19所示，自助POS终端100具有摄像部11、存储部12、显示部13、商品读取部140、销售登记部15及结算处理部16。

商品读取部140不仅具有图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H、结束确认单元14I及未使用优惠券告知单元14J，还具有选择接受单元14K。

选择接受单元14K当通过信息确认单元14E确认为与所述商品成为对象的优惠券有关的信息被保持在存储部12中时，则接受是否使用该信息所涉及的优惠券的选择输入。然后，信息输出单元14F在确认为在存储部12中保持有与所述商品成为对象的优惠券有关的信息的情况下，通过选择接受单元14K接受了不使用优惠券的旨意的输入时，单独输出与所述商品有关的信息，在接受了使用优惠券的旨意的输入时，输出与所述商品有关的信息和与选择了使用的旨意的优惠券有关的信息。

自助POS终端100的外观构成及硬件构成基本与第一实施例的自助POS终端1相同。不过，在自助POS终端1中，虽然示出了RAM44所形成的优惠券保持存储器M1仅保存一个优惠券信息文件F1的情况，但是在自助POS终端100中，如图20所示，优惠券保持存储器M1可保存多个优惠券信息文件F1。

此外，在自助POS终端100中，CPU41按照读取处理程序P1执行的信息处理次序也基本与第一实施例的自助POS终端1相同。不过，在图8的步骤ST12中执行的商品读取处理的一部分在自助POS终端100和自助POS终端1之间不同。

图21是表示自助POS终端100中的CPU41的商品读取处理的次序的流程图，对与表示第一实施例的该处理次序的图10通用的部分附加相同符号。

也就是说，第二实施例中的自助POS终端100的CPU41当从候补物品中选择出的物品是商品时，从商品数据库451中取得该商品的商品代码、属性、商品名、单价、单位重量等的商品信息（ST31）。此外，CPU41确认在优惠券保持存储器M1中是否保持有优惠券信息（ST32：信息确认单元14E），当保持有时（ST32的是），确认所述商品信息的商品是否为优惠券保持存储器M1所保持的优惠券信息的优惠券优惠对象（ST33：信息确认单元14E）。

当在优惠券保持存储器M1中未保持有优惠券信息时（ST32的否），或者当保持有却没有所取得的商品信息的商品成为对象的优惠券的信息时（ST33的否），与第一实施例同样，CPU41单独向销售登记部15输出所取得的商品信息（ST37：信息输出单元14F）。

针对于此，当所取得的商品信息的商品成为优惠对象的优惠券的信息在优惠券保持存储器M1中至少保持有一个时（ST33的是），CPU41在操作员用显示器22所显示的优惠券的图像中，能够识别成为优惠对象的优惠券的图像与未成为优惠对象的优惠券的图像（ST41）。而且，CPU41待机到选择一个成为优惠对象的优惠券（ST42：选择接受单元）。

在这里，当没有选择成为优惠对象的优惠券时（ST42的否），CPU41单独向销售登记部15输出所取得的商品信息（ST37：信息输出单元14F）。

针对于此，当通过触摸面板传感器222的信号确认了选择有成为优惠对象的优惠券的情况时（ST42的是），CPU41将所取得的商品信息与已选择的优惠券信息一起输出给销售登记部15（ST34：信息输出单元14F）。而且，在输出后，CPU41从优惠券保持存储器M1中删除已选择的优惠券信息的优惠券信息文件F1（ST35：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述优惠券的图像（ST36）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

图22及图23是顾客在向读取窗23举起3种优惠券“水果九折”、“飲料10％引き（饮料九折）”、“果物10円引き（水果减价10日元）”并使自助POS终端100读取后，向读取窗23举起了购入商品“苹果”时的操作员用显示器22的显示画面例。当顾客从购入商品“苹果”的候补商品中选择“AA产苹果”时，则通过选择接受单元14K，如图22所示那样将在3种优惠券“水果九折”、“饮料九折”、“水果减价10日元”的各图像74A、74B、74C中的苹果未成为优惠券的对象的优惠券“饮料九折”的图像74B变浅（在图22中用虚线示出）。其结果，在操作员用显示器22上以引人注意的方式显示有苹果成为优惠券的对象的2种优惠券“水果九折”、“水果减价10日元”的图像74A、74C。

在这里，如在图23中用影线所示，当顾客触摸选择优惠券“水果九折”的图像74A时，则已选择的优惠券“水果九折”的图像74A移动到摄像图像显示区域71内，画面下侧的优惠券“水果九折”的图像74A被消去。而且，在自助POS终端1中，通过信息输出单元14F将商品“AA产苹果”的商品信息和优惠券保持存储器M1所保持的优惠券“水果九折”的优惠券信息输出给销售登记部15，从而商品“AA产苹果”的销售数据用九折被登记处理。

这样，在第二实施例的自助POS终端100中，也只要顾客亲自将商品和优惠券分别向读取窗23举起，就能够正确地接受该优惠券的优惠。

并且，当具有多个优惠券时，顾客可按先向读取窗23举起所有的优惠券，之后，向读取窗23举起购入商品的次序操作。这样的操作次序效率好，实用性高。

第三实施例

接着，参照图24至图27，对第三实施例进行说明。另外，对与第一实施例相同部分附加相同符号，并省略详细的说明。

在所述第一实施例及第二实施例中，例示出了先向读取窗23举起优惠券，之后向读取窗23举起商品的情况。第三实施例先向读取窗23举起商品，之后向读取窗23举起该商品成为对象的优惠券。

第三实施例中的自助POS终端200（未图示）的功能框图、外观立体图及硬件构成图与第一实施例的自助POS终端1通用。因此，共用图1至图6。

但是，在自助POS终端200中，信息保持单元14D当通过物品识别单元14C识别出商品时，通过存储部12保持与所述商品有关的信息（商品信息保持单元）。信息确认单元14E当通过物品识别单元14C识别出优惠券时，确认在存储部12中是否保持有与所述优惠券成为对象的商品有关的信息（商品信息确认单元）。信息删除单元14G当通过信息输出单元14E输出与商品有关的信息时，则从存储部12中删除与所述商品有关的信息（商品信息删除单元）。保持显示单元14H在存储部12中保持有与商品有关的信息的期间，使该信息所涉及的商品的图像显示在所述显示部上（保持商品显示单元）。信息输出单元14F当通过信息确认单元14E确认为保持有与所述优惠券成为对象的商品有关的信息时，输出与所述优惠券有关的信息和与所述优惠券成为对象的商品有关的信息。此外，信息输出单元14F当在通过结束确认单元14I确认了读取结束时，在存储部12中保持有与商品有关的信息时，单独输出与所述商有关的信息。另外，未使用优惠券告知单元14J被省略。

第一实施例在RAM44中形成有优惠券保持存储器M1。第三实施例在RAM44中形成有商品保持存储器M2。如图24所示，商品保持存储器M2是用于保持多个包含商品代码、商品名、单价及商品图像数据的商品信息文件F2的区域。

在第一实施例中，CPU41通过自助POS终端1所安装的读取处理程序P1执行了图8至图10的流程图所示出的信息处理次序。在第三实施例中，CPU41通过自助POS终端200所安装的读取处理程序P1执行图25至图27的流程图所示出的信息处理次序。通过这些流程图，作为上述图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H及结束确认单元14I的功能被说明。

通过图25的流程图所示出的次序的信息处理与在第一实施例中用图8所说明的信息处理次序大部分通用。因此，对与图8相同的处理步骤附加相同符号并省略其说明。

在所述信息处理的次序中，第三实施例与第一实施例的一不同点是在步骤ST10的判断处理（物品识别单元14C）中物品分类为“1”、即已选择的物品为商品时的商品读取处理（ST41）和物品分类为“2”、即已选择的物品为优惠券时的优惠券读取处理（ST42）。

当进入到商品读取处理时，则CPU41开始通过图26的流程图所示出的次序的处理。首先，CPU41检测出包含有已选择的优惠券的图像数据的图像数据记录453R的识别代码，作为商品代码。而且，CPU41用该商品代码检索商品数据库451，从包含所述商品代码的商品数据记录451R中取得商品代码、属性、商品名、单价、单位重量等的商品信息（ST51）。

如果取得了商品信息，则CPU41用该商品信息和该商品的图像数据编制商品信息文件F2。而且，CPU41将商品信息文件F2存储在商品保持存储器M2中（ST52：信息保持单元14D）。此外，CPU41使所述商品的图像显示在操作员用显示器22上（ST53：保持显示单元14H）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

当进入到优惠券读取处理时，则CPU41开始通过图27的流程图所示出的次序的处理。首先，CPU41检测出包含有已选择的物品的图像数据的图像数据记录453R的识别代码，作为优惠券代码。而且，CPU41用该优惠券代码检索优惠券数据库452，从包含所述优惠券代码的优惠券数据库452R中，取得优惠券代码、优惠券名、对象商品信息及优惠信息的优惠券信息（ST61）。

如果取得了优惠券信息，则CPU41确认在商品保持存储器M2中是否存储有商品信息文件F2、即确认是否保持有商品信息（ST62：信息确认单元14E）。当保持有商品信息时（ST62的是），CPU41依次读出商品保持存储器M2所保持的各商品信息文件F2。而且，CPU41每读出商品信息文件F2都将其商品信息文件F2所存储的商品代码、属性等与在步骤ST61中已取得的优惠券信息的对象商品信息进行核对。也就是说，CPU41确认成为所述优惠券信息的优惠券优惠对象的商品的商品信息文件F2是否保持在商品保持存储器M1中（ST63：信息确认单元14E）。

当确认了保持有成为优惠券优惠对象的商品的商品信息文件F2时（ST63的是），CPU41将该商品信息文件F2的商品信息与所取得的优惠券信息一起输出给销售登记部15（ST64：信息输出单元14F）。而且，在输出后，CPU41从商品保持存储器M2中删除所述商品信息文件F2（ST65：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述商品的图像（ST66）。之后，CPU41返回到步骤ST2，采集接着的图像数据并对物品识别进行尝试。

另一方面，当在商品保持存储器M2中未保持有商品信息文件F2时（ST62的否），或者当保持有却不是成为所取得的优惠券信息的优惠券优惠对象的商品的商品信息文件F2时（ST63的否），CPU41使不存在有成为优惠券对象的商品的旨意的信息显示在显示部13上（ST67）。此外，CPU41取消所取得的优惠券信息（ST68）。

此外，在所述信息处理的次序中，第三实施例与第一实施例的另一不同点是在步骤ST5的判断处理中宣告了读取结束后的处理。也就是说，例如，当操作员用显示器22所显示的结账按钮被触摸并宣告读取结束时（ST5的是），则CPU41在向摄像头控制器51输出了摄像截止信号后（ST13），确认在商品保持存储器M2中是否保持有商品信息文件F2（ST43）。当未保持有商品信息文件F2时（ST43的否），结束此次的程序处理。

当保持有商品信息文件F2时（ST43的是），CPU41从该商品信息文件F2中读出商品代码、商品名、属性、单价等的商品信息，并将该商品信息单独输出给销售登记部15（ST44：信息输出单元14F），以上，结束此次的程序处理。

利用涉及的构成的自助POS终端200的顾客首先触摸开始按钮。接着，将购入的商品一件一件向读取窗23举起。此外，当具有优惠券时，将优惠券一张一张向读取窗23举起。

当向读取窗23举起了商品时，包含该商品的商品代码、属性等的商品信息文件F2被存储到商品保持存储器M2中。当向读取窗23举起了优惠券时，在作为该优惠券的对象的商品的商品信息文件F2在商品保持存储器M2中被保持时和未被保持时处理不同。当保持有优惠券对象商品的商品信息文件F2时，将优惠券的信息和成为该优惠券的对象的商品的信息成对地输出给销售登记部15。而且，已输出给销售登记部15的商品信息从商品保持存储器M2中被删除。当未保持有优惠券对象商品的商品信息文件F2时，取消优惠券信息。

如果将商品及优惠券全都向读取窗23举起过了，则顾客触摸结账按钮。当在结账按钮被触摸了时，在商品保持存储器M2中残留有商品信息文件F2时，该商品信息文件F2的商品信息单独被输出给销售登记部15。

因此，在第三实施例的自助POS终端200中，也与第一实施例及第二实施例同样，只要顾客亲自将商品和优惠券分别向读取窗23举起，就能够正确地接受该优惠券的优惠。

另外，在本实施例中，当在商品保持存储器M2中未保持有商品信息文件F2时（ST62的否），或者当保持有却不是成为所取得的优惠券信息的优惠券优惠对象的商品的商品信息文件F2时（ST63的否），CPU41取消所取得的优惠券信息（ST68）。

作为其他实施例，CPU41也可以不取消优惠券信息，而在优惠券保持存储器M1中保持优惠券信息。这时，如果在商品读取处理中取得了商品信息，则CPU41确认是否为所保持的优惠券信息的优惠对象。而且，当是优惠对象时，象第二实施例那样将商品信息与优惠券信息一起输出给销售登记部15。当不是优惠对象时，象第三实施例那样编制商品信息文件F2并存储到商品保持存储器M2中。

只要是这样的其他实施例，则即使向读取窗23先举起了优惠券，也不取消该优惠券信息。

第四实施例

接着，参照图28及图29，对第四实施例进行说明。另外，对与第一实施例及第三实施例相同部分附加相同符号，并省略详细的说明。

在所述第一实施例及第二实施例中，例示出了先向读取窗23举起优惠券，之后向读取窗23举起商品的情况。此外，在第三实施例中例示出了先向读取窗23举起商品，之后向读取窗23举起优惠券的情况。第四实施例对向读取窗23举起商品和优惠券的顺序没有限制。

第四实施例中的自助POS终端300（未图示）的功能框图、外观立体图及硬件构成图与第一实施例的自助POS终端1通用。因此，共用图1至图6。

但是，信息保持单元14D包括当通过物品识别单元14C识别出商品时通过第一存储部保持与所述商品有关的信息的商品信息保持单元、当通过物品识别单元14C识别出优惠券时通过第二存储部保持与所述优惠券有关的信息的优惠券信息保持单元。信息确认单元14E在通过结束确认单元14I确认了读取结束时，确认用第一存储部所存储的商品信息指定的商品成为对象的优惠券的信息是否存储在第二存储部中。信息输出单元14F在用第一存储部所存储的商品信息指定的商品成为对象的优惠券的信息存储在第二存储部中时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息，当未被存储有时，单独输出与所述商品有关的信息。

第一实施例在RAM44中形成有优惠券保持存储器M1，第三实施例形成有商品保持存储器M2。第四实施例在RAM44中形成有商品保持存储器M2（第一存储部）和优惠券保持存储器M1（第二存储部）。

在第一实施例中，CPU41通过自助POS终端1所安装的读取处理程序P1执行了图8至图10的流程图所示出的信息处理次序。在第四实施例中，CPU41通过读取处理程序P1执行图28及图29的流程图所示出的信息处理次序。通过这些流程图，作为上述图像识别单元14A、候补物品显示单元14B、物品识别单元14C、信息保持单元14D、信息确认单元14E、信息输出单元14F、信息删除单元14G、保持显示单元14H、结束确认单元14I及告知单元14J的功能被说明。

通过图28的流程图所示出的次序的信息处理与第一实施例中用图8所说明的信息处理次序大部分通用。因此，对与图8相同的处理步骤附加相同符号并省略其说明。

在所述信息处理的次序中，第四实施例与第一实施例一不同点是在步骤ST10的判断处理（物品识别单元14C）中当物品分类为“1”、即已选择的物品为商品时所执行的商品读取处理（ST71）。另外，当物品分类为“2”、即已选择的物品为优惠券时所执行的优惠券读取处理（ST11）与第一实施例是通用的。因此，参照图9并省略详细的说明。此外，商品读取处理与第三实施例中的商品读取处理（ST41）是通用的。因此，参照图26并省略详细的说明。

在所述信息处理的次序中，第四实施例与第一实施例另一不同点是宣告了读取结束后的处理。当宣告读取结束时（ST5的是），则CPU41在向摄像头控制器51输出了摄像截止信号后（ST13），执行通过图29的流程图具体地示出的核对处理（ST72）。

当进入到核对处理时，则CPU41确认在商品保持存储器M2中是否存储有商品信息文件F2（ST81）。当存储有商品信息文件F2时（ST81的是），CPU41从该商品信息文件F2中取得商品代码、属性等的商品信息（ST82）。

接着，CPU41确认在优惠券保持存储器M1中是否存储有优惠券信息文件F1（ST83）。当存储有优惠券信息文件F1时（ST83的是），CPU41从所有的优惠券信息文件F1中取得优惠券代码、对象商品信息、优惠信息等的优惠券信息。而且，CPU41确认是否存在有用在步骤ST82的处理中所取得的商品信息指定的商品成为对象的优惠券信息（ST84：信息确认单元14E）。

当所述商品是优惠券优惠对象时（ST84的是），CPU41将所述商品的商品信息与成为优惠对象的优惠券信息一起输出给销售登记部15（ST85：信息输出单元14F）。而且，在输出后，CPU41从商品保持存储器M2和优惠券保持存储器M1中删除已输出给销售登记部15的信息的商品信息文件F2及优惠券信息文件F1（ST86：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述商品和所述优惠券的图像（ST87）。之后，CPU41返回到步骤ST81，确认在商品保持存储器M2中是否还存储有商品信息文件F2。

另一方面，当在优惠券保持存储器M1中未保持有优惠券信息时（ST83的否），或者当保持有却不是所述商品成为对象的优惠券的信息时（ST84的否），CPU41将所述商品的商品信息单独输出给销售登记部15（ST88：信息输出单元14F）。而且，在输出后，CPU41从商品保持存储器M2中删除已输出给销售登记部15的商品信息文件F2（ST89：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述商品的图像（ST90）。之后，CPU41返回到步骤ST81，确认在商品保持存储器M2中是否还存储有商品信息文件F2。

当在商品保持存储器M2中未存储有商品信息文件F2时（ST81的否），CPU41确认在优惠券保持存储器M1中是否存储有优惠券信息文件F1（ST91）。当未存储有优惠券信息文件F1时（ST91的否），结束此次的程序处理。

针对于此，当存储有优惠券信息时（ST91的是），CPU41使向用户告知有未使用的优惠券的情况的信息显示在操作员用显示器22上（ST92：未使用优惠券告知单元14J），以上，结束此次的程序处理。

利用涉及的构成的自助POS终端300的顾客首先触摸开始按钮。接着，将购入的商品一件一件向读取窗23举起。此外，当有优惠券时，向读取窗23一张一张举起优惠券。

当向读取窗23举起了商品时，包含该商品的商品代码、属性等的商品信息的文件F2被存储到商品保持存储器M2中。当向读取窗23举起了优惠券时，包含该优惠券的优惠券代码、对象商品信息、优惠信息等的优惠券信息的文件F1被存储到优惠券保持存储器M1中。

当结束商品及优惠券的读取时，则顾客触摸结账按钮宣告读取结束。当宣告读取结束时，则检索在商品保持存储器M2中存储有信息的商品成为对象的优惠券的信息是否存储在优惠券保持存储器M1中。当存储有时，将该商品的信息和优惠券的信息成对地输出给销售登记部15。当未存储有时，仅将商品信息单独输出给销售登记部15。

商品信息已被输出给销售登记部15的商品信息文件F2从商品保持存储器M2中被删除。即便所有的商品信息文件F2被删除而当在优惠券保持存储器M1中残留有优惠券信息文件F1时，则将向用户告知有未使用的优惠券的情况的信息显示在操作员用显示器22上。

因此，在第四实施例的自助POS终端300中，也与第一实施例至第三实施例同样，只要顾客亲自将商品和优惠券分别向读取窗23举起，就能够正确地接受该优惠券的优惠。

第五实施例

接着，参照图30对第五实施例进行说明。第五实施例是在第四实施例中用图29所说明的核对处理的其他实施例。因此，对与第四实施例通用的部分附加相同符号，并省略其详细的说明。

当进入到核对处理时，则在第五实施例中首先确认在优惠券保持存储器M1中是否存储有优惠券信息文件F1（ST101）。当存储有优惠券信息文件F1时（ST101的是），CPU41从该优惠券信息文件F1中取得优惠券代码、对象商品信息、优惠信息等的优惠券信息（ST102）。

接着，CPU41确认在商品保持存储器M2中是否存储有商品信息文件F2（ST103）。当存储有商品信息文件F2时（ST103的是），CPU41从所有的商品信息文件F2中取得商品代码、属性等的商品信息。而且，CPU41确认是否存在有在步骤ST102的处理中所取得的优惠券信息的优惠券成为优惠对象的商品（ST104：信息确认单元14E）。

当存在有所述优惠券的对象商品时（ST104的是），CPU41将所述商品的商品信息与成为优惠对象的优惠券的优惠券信息一起输出给销售登记部15（ST105：信息输出单元14F）。而且，在输出后，CPU41从商品保持存储器M2和优惠券保持存储器M1中删除已输出给销售登记部15的信息的商品信息文件F2及优惠券信息文件F1（ST106：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述商品和所述优惠券的图像（ST107）。之后，CPU41返回到步骤ST101，确认在优惠券保持存储器M1中是否还存储有优惠券信息文件F1。

另一方面，当在商品保持存储器M2中未保持有商品信息时（ST103的否），或者当保持有却不存在有所述优惠券的对象商品时（ST104的否），CPU41从优惠券保持存储器M1中删除所述优惠券的优惠券信息文件F1（ST108：信息删除单元14G）。此外，CPU41从操作员用显示器22中消去所述优惠券的图像（ST109）。之后，CPU41返回到步骤ST101，确认在优惠券保持存储器M1中是否还存储有优惠券信息文件F1。

当在优惠券保持存储器M1中未存储有优惠券信息文件F1时（ST101的否），CPU41确认在商品保持存储器M2中是否存储有商品信息文件F2（ST110）。当未存储有商品信息文件F2时（ST110的否），结束此次的程序处理。

针对于此，当存储有商品信息文件F2时，CPU41单独向销售登记部15输出该商品信息文件F2的商品信息（ST111：信息输出单元14F）。以上，结束此次的程序处理。

涉及的构成的第五实施例也能够获得与第四实施例同样的效果。

另外，本发明并不限定于上述各实施例。

例如，上述各实施例在CPU41按照读取处理程序P1进行动作的信息处理次序中，将在该步骤ST7中相似度大于等于预先规定的阈值的物品视为能成为从图像中识别出的物品的候补的候补物品，并显示该候补物品的图像（ST8），待机到选择任意物品（ST9）。而且，当物品被选择时，则识别该物品的分类是优惠券还是商品（ST10）。

在其他实施例中，不接受来自操作员的候补选择的操作而自动地指定具有相似度最高的外观特征参数的物品，作为从图像中识别出的物品。而且，识别该指定出的物品的分类是优惠券还是商品。对于采用这样次序的自助POS终端、即不具有候补物品显示单元14B的自助POS终端，本发明也可以适用。

此外，在上述各实施例中，虽然在图11至图18、图22及图23中分别示出了画面例，但是画面的布局并不限定于此。此外，未使用优惠券告知单元14J并不限定于显示，诸如也可以通过来自语音合成器的音频输出等来告知未使用优惠券。

此外，上述各实施例虽然应用于了自助POS终端1、100、200、300，但是应用事例并不限定于此。摄像部11及商品读取部14（140）、销售登记部15及结算处理部16也可以为分体的构成。例如，也可以应用于收银员所对应的结账台的商品读取装置。总之，可应用于具备商品读取装置和POS终端的结账系统。这时，辅助存储部45所存储的商品数据库451、优惠券数据库452及图像数据库453也可以不设置在商品读取装置侧，而设置在POS终端侧。

此外，上述实施例在装置内部的作为程序存储部的ROM 43中预先存储有实现发明的功能的商品读取程序P1。不过，不限定于此，也可以将同样的程序P1从网络下载到装置中。或者，也可以将存储介质所存储的同样程序P1安装到装置中。存储介质只要是象CD-ROM、存储卡等那样能够存储程序且装置可读取的，则其形态不限。此外，通过程序的安装、下载获得的功能也可以与装置内部的OS（操作系统）等协作来实现其功能。

此外，虽然对本发明的几个实施例进行了说明，但是这些实施例是作为例子提出的，并不意图限定发明的范围。这些新颖的实施例可以用其他各种形式来实施，只要在不脱离发明的要旨的范围内可以进行各种省略、替换、变更。这些实施例及其变形均被包含在发明的范围或要旨中，而且，包含在权利要求的范围所记载的发明和其均等的范围内。

附图标记说明

1、100、200、300    自助POS终端

11                  摄像部                12             存储部

13                  显示部                14、140        商品读取部

15                  销售登记部            16             结算处理部

41                  CPU                   451            商品数据库

452                 优惠券数据库          453            图像数据库

P1                  商品读取程序          M1             优惠券保持存储器

Claims (10)

1.一种商品读取装置，其特征在于，包括：

图像识别部，从通过摄像部摄像的图像中识别物品；

物品识别部，识别通过该图像识别部识别出的物品是商品还是优惠券；以及

信息输出部，在通过该物品识别部识别出的商品成为通过所述物品识别部识别出的优惠券的对象时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

2.根据权利要求1所述的商品读取装置，其特征在于，还包括：

优惠券信息保持部，当通过所述物品识别部识别出所述优惠券时，通过存储部保持与所述优惠券有关的信息；以及

优惠券信息确认部，当通过所述物品识别部识别出所述商品时，确认在所述存储部中是否保持有与所述商品成为对象的优惠券有关的信息，

其中，所述信息输出部当通过所述优惠券信息确认部确认为保持有与所述商品成为对象的优惠券有关的信息时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

3.根据权利要求2所述的商品读取装置，其特征在于，还包括：

优惠券信息删除部，当通过所述信息输出部输出了与所述优惠券有关的信息时，从所述存储部中删除与所述优惠券有关的信息；以及

保持优惠券显示单元，在所述存储部中保持有与优惠券有关的信息的期间，使该信息所涉及的优惠券的图像显示在所述显示部上。

4.根据权利要求3所述的商品读取装置，其特征在于，还包括：

选择接受部，当通过所述优惠券信息确认部确认为与所述商品成为对象的优惠券有关的信息被保持在存储部中时，接受是否使用该信息所涉及的优惠券的选择输入，

其中，所述信息输出部当确认为在所述存储部中保持有与所述商品成为对象的优惠券有关的信息时，通过所述选择接受部接受了使用优惠券的旨意的输入时，输出与所述商品有关的信息和与选择了所述进行使用的旨意的优惠券有关的信息。

5.根据权利要求2至4中任一项所述的商品读取装置，其特征在于，还包括：

结束确认部，确认是否作为一交易被处理的商品的读取结束；以及

未使用优惠券告知部，当在通过该结束确认部确认了读取结束时，在所述存储部中保持有与优惠券有关的信息时，告知所述信息所涉及的优惠券为未使用的情况。

6.根据权利要求1所述的商品读取装置，其特征在于，还包括：

商品信息保持部，当通过所述物品识别部识别出所述商品时，通过存储部保持与所述商品有关的信息；以及

商品信息确认部，当通过所述物品识别部识别出所述优惠券时，确认在所述存储部中是否保持有与所述优惠券成为对象的商品有关的信息，

其中，所述信息输出部当通过所述商品信息确认部确认为保持有与所述优惠券成为对象的商品有关的信息时，输出与所述优惠券有关的信息和与所述优惠券成为对象的商品有关的信息。

7.根据权利要求6所述的商品读取装置，其特征在于，还包括：

结束确认部，确认是否作为一交易被处理的商品的读取结束，

其中，所述信息输出部在通过所述结束确认部确认了读取结束时，当在所述存储部中保持有与商品有关的信息时，单独输出与所述商品有关的信息。

8.根据权利要求1所述的商品读取装置，其特征在于，还包括：

商品信息保持部，当通过所述物品识别部识别出所述商品时，通过第一存储部保持与所述商品有关的信息；

优惠券信息保持部，当通过所述物品识别部识别出所述优惠券时，通过第二存储部保持与所述优惠券有关的信息；

结束确认部，确认是否作为一交易被处理的商品的读取结束；以及

信息确认部，在通过该结束确认部确认了读取结束时，确认用所述第一存储部所存储的商品信息指定的商品成为对象的优惠券的信息是否存储在所述第二存储部中，

其中，所述信息输出部在用所述第一存储部所存储的商品信息指定的商品成为对象的优惠券的信息被存储在所述第二存储部中时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息，当未被存储有时，单独输出与所述商品有关的信息。

9.根据权利要求1至8中任一项所述的商品读取装置，其特征在于，还包括：

候补物品显示部，从预先登记的物品组中抽取与通过所述图像识别部识别出的物品相似的物品，并使其可选择地显示在显示部上，

其中，所述物品识别部识别从所述显示部所显示的候补物品中已选择的物品是商品还是优惠券。

10.一种基于商品读取装置的商品读取方法，包括以下步骤：

图像识别步骤，从通过摄像部摄像的图像中识别物品；

物品识别步骤，识别通过该图像识别步骤识别出的物品是商品还是优惠券；以及

信息输出步骤，在通过该物品识别步骤识别出的商品成为通过所述物品识别步骤识别出的优惠券的对象时，输出与所述商品有关的信息和与所述商品成为对象的优惠券有关的信息。

Images