CN116745826A - 显示装置以及显示方法 - Google Patents

显示装置以及显示方法 Download PDF

Info

Publication number
CN116745826A
CN116745826A CN202280010898.3A CN202280010898A CN116745826A CN 116745826 A CN116745826 A CN 116745826A CN 202280010898 A CN202280010898 A CN 202280010898A CN 116745826 A CN116745826 A CN 116745826A
Authority
CN
China
Prior art keywords
cash register
display
unit
display device
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280010898.3A
Other languages
English (en)
Inventor
阿部元树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Publication of CN116745826A publication Critical patent/CN116745826A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/01—Details for indicating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/209—Specified transaction journal output feature, e.g. printed receipt or voice output
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0018—Constructional details, e.g. of drawer, printing means, input means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader

Landscapes

  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

本发明的显示装置具有显示部、获取部和控制部，显示部向收银机的读取部显示包含购买商品的识别信息的显示图像，获取部获取收银机的外部输出信息，控制部基于外部输出信息控制显示部的显示，而且，在控制部基于收银机的第一购买商品的外部输出信息，判定为收银机进行了第一购买商品的识别处理的情况下，控制部使显示部显示包含第二购买商品的识别信息的显示图像。

Description

显示装置以及显示方法
相关申请的相互参照
本申请要求2021年1月20日在日本提交的日本专利申请2021-007244的优先权，在此引入该在先申请的全部公开内容作为参照。
技术领域
本发明涉及显示装置以及显示方法。
背景技术
例如在专利文献1中公开了在零售店等中，购买者能够自己进行精算处理而无需工作人员的介入的自助收银机系统。
现有技术文献
专利文献
专利文献1：日本特开2016-194959号公报
发明内容
作为本发明的一个方面的显示装置具有显示部、获取部以及控制部。显示部向收银机的读取部显示包含购买商品的识别信息的显示图像。获取部获取收银机的外部输出信息。控制部基于外部输出信息控制显示部的显示。而且，在控制部基于收银机的第一购买商品的外部输出信息，判定为收银机进行了第一购买商品的识别处理的情况下，控制部使显示部显示包含第二购买商品的识别信息的显示图像。
另外，作为本发明的一个方面的显示方法包括：向收银机的读取部显示包含第一购买商品的识别信息的显示图像；获取收银机的外部输出信息；以及在基于收银机的第一购买商品的外部输出信息判定为收银机进行了第一购买商品的识别处理的情况下，显示包含第二购买商品的识别信息的显示图像。
附图说明
图1是第一至第三实施方式中的精算处理系统的功能框图。
图2是第一至第三实施方式中的精算处理系统的外观图。
图3是第一至第三实施方式中的显示装置的功能框图。
图4是第一实施方式中的显示装置的外部输出信息的获取示意图。
图5是第一实施方式中的显示装置获取的外部输出信息的更新前示意图。
图6是第一实施方式中的显示装置获取的外部输出信息的更新后示意图。
图7是第一实施方式中的显示装置的更新显示处理的流程图。
图8是第二实施方式中的显示装置的外部输出信息的获取示意图。
图9是第二实施方式中的显示装置的更新显示处理的流程图。
图10是第三实施方式中的显示装置的更新显示处理的流程图。
具体实施方式
在导入专利文献1那样的自助收银机系统的情况下，大多伴随着与现有的收银机系统的替换。鉴于设备投资的成本，希望不伴随与现有的收银机系统的替换而导入自助收银机系统。根据本发明，能够构筑与现有的收银机系统连接的方式的自助收银机系统。
以下，参照附图对应用了本发明的显示装置和显示方法的实施方式进行说明。
[第一实施方式]
图1以及图2分别是精算处理系统的第一实施方式的功能框图以及外观图。
如图1所示，本发明的第一实施方式的精算处理系统构成为包括拍摄装置1、显示装置2和收银机3。
在以后的图中，连结各功能块的实线的箭头表示控制信号或被通信的信息的流向。实线的箭头所示的通信可以是有线通信，也可以是无线通信，也可以是两者的组合。在通过无线进行通信的情况下，拍摄装置1、显示装置2或收银机3也可以构成为包含用于进行基于例如包含Bluetooth(注册商标)IEEE802.3或IEEE802.11的各种有线/无线通信标准的通信的通信模块。另外，无线通信也可以是光通信。
另外，在以后的图中，连接各功能块的虚线箭头表示位于终点侧的功能块获取例如位于箭头的起点侧的功能块的信息这样的信息的流向。
如图1所示，拍摄装置1构成为包括拍摄部11、提取部12以及输出部13。
拍摄部11对拍摄对象进行拍摄，生成拍摄到拍摄对象的拍摄图像。
拍摄部11构成为包括照相机。照相机构成为包括拍摄光学系统及拍摄元件。拍摄光学系统例如包括一个以上的镜头及光圈等光学部件。镜头不限于焦距，可以是任意的镜头，例如，可以是一般的镜头、包括鱼眼镜头的广角镜头或焦距可变的变焦镜头。拍摄光学系统使被摄体像成像在拍摄元件的受光面上。拍摄元件例如包括CCD(Charge CoupledDevice：电荷耦合器件)图像传感器或CMOS(Complementary Metal-Oxide Semiconductor：互补金属氧化物半导体)图像传感器等。拍摄元件对在受光面上成像的被摄体像进行拍摄而生成拍摄图像。拍摄部11也可以以任意的帧速率连续地拍摄静态图像。连续地拍摄静态图像也可以说是拍摄动态图像。
提取部12从拍摄部11拍摄到的拍摄图像中提取用于识别拍摄对象的类别的识别信息。
识别信息例如可以是包含JAN(Japan Article Number)码的一维条形码，也可以是包含QR码(注册商标)的二维条形码。一般而言，通过使用识别信息来指定拍摄对象的品名或金额，能够进行精算处理、营业额管理以及库存采购管理等。
提取部12为了提取识别信息，例如可以使用基于模式匹配或者机器学习的物体识别方法。作为用于提取识别信息的物体识别方法，提取部12例如也可以使用检测网络(DetectionNetwork)或者滑动窗口检测(Sliding Window Detection)等公知的方法。
为了提取部12提取识别信息，提取部12例如也可以通过从第一图像中执行修剪处理以包含识别信息，从而生成新的图像。
提取部12构成为包括处理器和存储器。处理器可以包括CPU(Centra1 ProcessingUnit：中央处理单元)、GPU(Graphics Processing Unit：图形处理单元)、FPGA(Field-Programmable Gate Array：现场可编程门阵列)等。存储器可以包括半导体存储器、磁存储器或光存储器等。半导体存储器可以包括易失性存储器或非易失性存储器等。磁存储器例如可以包括硬盘或磁带等。光存储器例如可以包括CD(Compact Disc)、DVD(DigitalVersatile Disc)、BD(Blu-ray(注册商标)Disc)等。
提取部12具有的存储器可以存储与拍摄装置1的操作有关的各种信息或参数。存储器可以存储由提取部12执行的程序。存储器也可以用作提取部12的工作存储器。存储器可以存储第一图像或识别信息等。
输出部13将提取部12所获取的识别信息输出到显示装置2所具有的输入部21。
在图2中，示出了在输出部13与输入部21之间不是有线连接而是无线连接的例子，但也可以如上面所记载的那样，在输出部13与输入部21之间有线连接。
图3是精算处理系统的第一实施方式中包含的显示装置2的功能框图。
显示装置2构成为包括输入部21、控制部22、显示部23以及获取部24。
输入部21接受拍摄装置1所具有的输出部13输出的识别信息的输入。然后，输入部21将接收到的识别信息发送至后述的控制部22。
如图3所示，控制部22构成为包括判定部221和存储器222。
判定部221进行后述的各种判定处理。
判定部221构成为包含处理器。处理器可以包括CPU(Central ProcessingUnit：中央处理单元)、GPU(Graphics Processing Unit：图形处理单元)、FPGA(Field-Programmable Gate Array：现场可编程门阵列)等。
存储器222例如存储与显示装置2的操作相关的各种信息或参数。即，与显示装置2的功能相关的全部内容、输入输出到控制部22的各种信息全部经由存储器222进行处理。存储器222可以存储由判定部221执行的程序。存储器222也可以用作判定部221的工作存储器。存储器222可以存储拍摄图像、识别信息或后述的显示图像等。
存储器222可以包括半导体存储器、磁存储器或光存储器等。半导体存储器可以包括易失性存储器或非易失性存储器等。磁存储器例如可以包括硬盘或磁带等。光存储器例如可以包括CD(Compact Disc)、DVD(Digital Versatile Disc)、BD(Blu-ray(注册商标)Disc)等。
判定部221基于从后述的获取部24输入的收银机3的外部输出信息，生成包含从输入部21发送的识别信息的显示图像，并判定是否将其更新显示在显示部23上。更新显示是指，在显示部23中已经显示了显示图像的情况下，将该显示图像更新为新的显示图像。即，在对判定部221发送了2个以上的识别信息的情况下，最初将包含第一识别信息的显示图像显示在显示部23上，之后显示包含第二识别信息的识别信息，进而，其后显示包含第三识别信息的识别信息这样的显示处理也可以说是更新显示。关于外部输出信息的详细说明与后述的获取部24一起在后面叙述。
为了使后述的收银机3所具有的读取部31容易读取识别信息，显示图像也可以在进行了例如修剪处理或识别信息的再配置这样的修正处理之后生成。
为了使判定部221在显示部23上更新显示显示图像，要求后述的收银机3检测识别信息，识别/登记拍摄对象。即，换言之，判定部221基于外部输出信息，判定后述的收银机3是否检测出识别信息并识别/登记了拍摄对象。
在判定部221判定为收银机3检测出显示图像中包含的识别信息并识别出拍摄对象的情况下，判定部221在后述的显示部23上进行显示图像的更新显示。
更新显示例如也可以包括在显示更新后的显示图像之前，停止更新前的显示图像，显示进行了白化的图像或者不包含其他识别信息的图像。
显示部23经由控制部22对读取部31显示显示图像。
显示部23构成为包括例如液晶显示器、有机EL(Emitting Diode：发光二极管)显示器或者无机EL显示器等显示设备。
获取部24获取收银机3的外部输出信息，并发送至判定部221。关于获取部24的详细说明在后面叙述。
如图1所示，收银机3构成为包括读取部31、识别部32、计算处理部33、操作画面34以及扬声器35。但是，也可以省略操作画面34和扬声器35中的任意一方。
读取部31读取并解析显示装置2所具有的显示部23所显示的识别信息，获取用于识别拍摄对象的类别的管理代码。管理代码是指，与拍摄对象的品名关联的代码，例如也可以是JAN代码。读取部31将获取的管理代码发送至识别部32。
读取部31例如也可以是光学式读取器。光学式读取器可以是例如笔读取器、CCD触摸读取器、激光扫描仪、二维条形码读取器或固定条形码读取器中的任意一个。
识别部32基于由读取部31获取的管理代码来识别拍摄对象。识别拍摄对象是指，包括确定拍摄对象的品名或金额。
计算处理部33基于识别部32识别出的拍摄对象的品名或金额等进行登记/精算处理。登记处理例如可以是计算识别部32识别出的一个拍摄对象的金额并登记在列表上。此时，计算处理部33可以计算登记在列表上的拍摄对象的金额的合计值。精算处理可以是基于在执行精算处理时登记在列表上的一个以上的拍摄对象的合计值来进行精算。
识别部32和计算处理部33构成为包括处理器和存储器。处理器可以包括CPU(Central Processing Unit：中央处理单元)、GPU(Graphics Processing Unit：图形处理单元)、FPGA(Field-Programmable Gate Array：现场可编程门阵列)等。存储器可以包括半导体存储器、磁存储器或光存储器等。半导体存储器可以包括易失性存储器或非易失性存储器等。磁存储器例如可以包括硬盘或磁带等。光存储器例如可以包括CD(Compact Disc)、DVD(Digital Versatile Disc)、BD(Blu-ray(注册商标)Disc)等。
识别部32和计算处理部33具有存储器可以存储与收银机3的操作相关的各种信息或参数。存储器可以存储由识别部32和计算处理部33执行的程序。存储器可以用作识别部32和计算处理部33的工作存储器。
另外，识别部32和计算处理部33可以共用处理器和存储器的一部分或全部，也可以分别具有。
操作画面34显示与由识别部32和计算处理部33进行了识别、登记或精算处理的拍摄对象相关的数据，对此作为用户操作收银机3时的界面发挥作用。用户经由操作画面34向收银机3进行的操作是指，例如包括计算处理部33进行的登记/精算处理的结果的修正、以及结算处理的结果的确定等。
操作画面34构成为例如包括液晶显示器、有机EL(Emitting Diode：发光二极管)显示器或无机EL显示器等显示设备。另外，在操作画面34上显示的画面的操作可以包括触摸操作、键盘操作、鼠标操作或轨迹球操作中的任意一个。在操作画面34的操作中包含触摸操作的情况下，操作画面34也可以具有感压式或静电式的触摸面板。在操作画面34的操作中包括键盘操作、鼠标操作或轨迹球操作的情况下，也可以与操作画面34分开地具有输入键盘、鼠标或轨迹球。
扬声器35在由计算处理部33识别拍摄对象并进行了登记处理的情况下，输出读取音。
扬声器35构成为例如包含压电扬声器。扬声器35输出的读取音例如也可以是蜂鸣音或广播音等。并且，读取音例如也可以根据计算处理部33的登记处理的成功与否等而不同。
在此，使用图4至图6，对第一实施方式中的获取部24获取的外部输出信息以及判定部221的判定处理方法进行说明。
图4是由获取部24获取外部输出信息的示意图。如图4所示，获取部24将对包含操作画面34的拍摄范围IR进行拍摄而获取的拍摄图像作为收银机3的外部输出信息，发送至判定部221。判定部221基于所获取的拍摄图像进行判定。
在第一实施方式中，获取部24构成为包含照相机。照相机构成为包含拍摄光学系统及拍摄元件。拍摄光学系统例如包括一个以上的镜头及光圈等光学部件。镜头不限于焦距，可以是任何镜头，例如，可以是一般的镜头、包括鱼眼镜头的广角镜头或焦距可变的变焦镜头。拍摄光学系统使被摄体像成像在拍摄元件的受光面上。拍摄元件例如包括CCD(Charge Coupled Device：电荷耦合器件)图像传感器或CMOS(Complementary Metal-Oxide Semiconductor：互补金属氧化物半导体)图像传感器等。拍摄元件对在受光面上成像的被摄体像进行拍摄而生成拍摄图像。拍摄部11也可以以任意的帧速率连续地拍摄静态图像。连续地拍摄静态图像也可以说是拍摄动态图像。
图5和图6分别是显示装置获取的外部输出信息的更新前和更新后的操作画面的示意图。作为图5与图6的差异，可以举出如图6中由框包围的部分所示，新追加了商品EEE，并更新合计金额。
判定部221经由获取部24获取的拍摄图像来检测图5和图6所示那样的操作画面34的变化。
在获取部24通过连续地拍摄静态图像而生成拍摄图像的情况下，如图6所示，存在追加登记的拍摄对象或更新合计金额的情况。在该情况下，判定部221也可以根据所生成的拍摄图像中的变化的发生，判定为收银机3检测出识别信息并识别/登记了拍摄对象。
接下来，使用图7，一边涉及拍摄装置1和收银机3的处理，一边说明第一实施方式中的显示装置2的更新显示处理的流程。在本说明中，将两个拍摄对象分别设为第一购买商品和第二购买商品，并对拍摄对象为两个的情况进行说明。另外，也可以基于本记载构筑处理流程，使得即使在拍摄对象为三个以上的情况下也能够进行同样的处理。这对于第二实施方式和第三实施方式中的更新显示处理流程所涉及的说明也是同样的。
<S001>
拍摄装置1通过拍摄部11拍摄第一购买商品而生成拍摄图像，并且通过提取部12从拍摄图像中提取第一购买商品的识别信息。然后，处理进入到<S002>。
<S002>
在通过提取部12提取出第一购买商品的识别信息之后，拍摄装置1经由输出部13将第一购买商品的识别信息发送至显示装置2。然后，处理进入到<S003>。
<S003>
在通过输出部13将第一购买商品的识别信息发送至显示装置2之后，显示装置2将从拍摄装置1发送至输入部21的第一购买商品的识别信息存储在存储器222中。然后，处理进入到<S004>。
<S004>
在存储器222存储第一购买商品的识别信息之后，显示装置2确认在当前时刻显示部23没有显示任何图像，然后判定部221生成包含第一购买商品的识别信息的显示图像，并使显示部23显示包含第一购买商品的识别信息的显示图像。然后，处理进入到<S005>。
<S005>
在显示部23显示包含第一购买商品的识别信息的显示图像之后，拍摄装置1通过拍摄部11对第二购买商品进行拍摄而生成拍摄图像，进而通过提取部12从拍摄图像中提取第二购买商品的识别信息。然后，处理进入到<S006>。
<S006>
在通过提取部12提取第二购买商品的识别信息之后，拍摄装置1经由输出部13将第二购买商品的识别信息发送至显示装置2。然后，处理进入到<S007>。
<S007>
在通过输出部13将第二购买商品的识别信息发送至显示装置2之后，显示装置2将从拍摄装置1发送至输入部21的第二购买商品的识别信息存储在存储器222中。然后，处理进入到<S008>。
<S008>
在存储器222存储第二购买商品的识别信息之后，显示装置2经由获取部24开始获取对收银机3所具有的操作画面34进行拍摄而得到的拍摄图像。在此得到的操作画面34的拍摄图像被依次发送至判定部221。然后，处理进入到<S009>。
<S009>
在通过获取部24开始获取对收银机3所具有的操作画面34进行拍摄而得到的拍摄图像之后，收银机3经由读取部31读取第一购买商品的显示图像所包含的识别信息，并经由识别部32和计算处理部33进行第一购买商品的识别/登记处理。然后，处理进入到<S010>。
<S010>
在通过识别部32和计算处理部33进行第一购买商品的识别/登记处理之后，收银机3在操作画面34上反映出与识别/登记处理后的第一购买商品有关的更新。然后，处理进入<S011>。
<S011>
在操作画面34上反映出与登记处理后的第一购买商品有关的更新之后，或者在<S012>中判定为在操作画面34上没有与第一购买商品有关的更新的情况下，显示装置2经由获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的最新的拍摄图像。此时，显示装置2由于在<S008>中开始了拍摄图像的获取，因此满足至少获取了两张以上的拍摄图像。然后，处理进入到<S012>。另外，也可以将所获取的拍摄图像在一定期间内存储在存储器222中，之后删除。
<S012>
在由获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的最新的拍摄图像之后，显示装置2经由判定部221根据由获取部24拍摄的操作画面34的拍摄图像来判定在操作画面34上是否有与登记处理过的第一购买商品有关的更新。换言之，基于由获取部24拍摄的操作画面34的拍摄图像，判定部221判定收银机3是否检测出第一购买商品的识别信息，并对其进行了识别/登记。在判定为存在与第一购买商品有关的更新的情况下，进入到<S013>。在判定为没有与第一购买商品有关的更新的情况下，返回到<S011>。
<S013>
在判定为在操作画面34上存在与第一购买商品有关的更新的情况下，显示装置2经由判定部221判定为收银机3检测出第一购买商品的识别信息，并对其进行了识别/登记。然后，处理进入到<S014＞。
<S014>
在由判定部221判定为收银机3检测出第一购买商品的识别信息并对其进行了识别/登记的情况下，显示装置2经由判定部221生成包含第二购买商品的识别信息的显示图像，并使其代替包含第一购买商品的识别信息的显示图像而显示在显示部23上。
[第二实施方式]
在第一实施方式中，基于收银机3的操作画面34的变化，进行显示部23的显示图像的更新。在第二实施方式中，基于收银机3的扬声器35的输出声音，进行显示部23的显示图像的更新。
以下，在第二实施方式的说明中，重点说明与第一实施方式的不同点。
使用图8以及图9，对第二实施方式中的、获取部24取得的外部输出信息以及判定部221的判定处理方法进行说明。
图8是获取部24获取外部输出信息的获取示意图。如图8所示，获取部24在能够收集收银机3的输出声音的状态下，收集声音作为收银机3的外部输出信息，并将获取到的声音发送至判定部221。输出声音例如也可以包含扬声器35输出的读取音。判定部221基于所取得的声音进行判定。
在第二实施方式中，获取部24构成为包括一个以上麦克风。麦克风例如可以是电容器麦克风或动态麦克风。麦克风也可以是具有指向性的麦克风，以便能够更精确地收集扬声器35输出的读取音。
判定部221事先对与读取音对应的声音波形进行学习，针对获取部24获取的声音，尝试与读取音对应的声音波形的检测。判定部221进行的声音波形的检测方法例如可以是以DP(Dynamic Programming：动态规划)匹配为代表的模式匹配方法，也可以使用其他公知的声音认证/对照技术。
在判定部221判定为进行了与读取音对应的声音波形的检测的情况下，判定部221也可以判定为收银机3检测出识别信息，并对拍摄对象进行了识别/登记。
接下来，使用图9，一边涉及拍摄装置1和收银机3的处理，一边说明第二实施方式中的显示装置2的更新显示处理的流程。
<S101>至<S107>
该范围的步骤分别相当于第一实施方式中的<S001>至<S007>，因此，在此省略说明。在步骤S107中存储器222存储第二购买商品的识别信息之后，处理进入到<S108>。
<S108>
在存储器222存储第二购买商品的识别信息之后，显示装置2经由获取部24开始获取声音。在此得到的声音被依次发送至判定部221，还一并进行声音波形的解析。然后，处理进入到<S 109>。
<S109>
在开始由获取部24获取声音以及由判定部221解析声音波形之后，收银机3经由读取部31读取第一购买商品的显示图像所包含的识别信息，并经由识别部32和计算处理部33进行第一购买商品的识别/登记处理。然后，处理进入到<S110>。
<S110>
在通过识别部32和计算处理部33进行第一购买商品的识别/登记处理之后，收银机3从扬声器35输出表示第一购买商品被识别/登记处理的读取音。然后，处理进入到<S111>。
<S111>
在从扬声器35输出读取音之后，或者在<S112>中判定为没有检测出与读取音对应的声音波形之后，显示装置2经由获取部24获取最新的声音，进而发送至判定部221，并在判定部221中进行声音波形的解析。然后，处理进入到<S112>。
<S112>
在由获取部24获取最新的声音以及由判定部221解析声音波形之后，显示装置2通过判定部221判定是否检测出与读取音对应的声音波形。换言之，基于由获取部24获取的声音，判定部221判定收银机3是否检测出第一购买商品的识别信息，并对其进行了识别/登记。在判定为检测出与读取音对应的声音波形的情况下，处理进入到<S113>。在判定为没有检测出与读取音对应的声音波形的情况下，处理返回到<S111>。
<S113>
在判定为检测出与读取音对应的声音波形的情况下，显示装置2经由判定部221判定为收银机3检测出第一购买商品的识别信息，并对其进行了识别/登记。然后，处理进入到<S114>。
<S114>
在由判定部221判定为收银机3检测出第一购买商品的识别信息并对其进行了识别/登记的情况下，显示装置2经由判定部221生成包含第二购买商品的识别信息的显示图像，并使其代替包含第一购买商品的识别信息的显示图像而显示在显示部23上。
[第三实施方式]
在第二实施方式中，基于收银机3的扬声器35的输出声音进行显示部23的显示图像的更新。在第三实施方式中，基于收银机3的操作画面34的变化及扬声器35的输出声音进行显示部23的显示图像的更新。换句话说，第三实施方式是第一和第二实施方式的组合。
在第三实施方式中，获取部24构成为包括照相机和麦克风。另外，关于照相机和麦克风的结构，请参照第一和第二实施方式的说明中的记载。
判定部221判定获取部24有没有在大致同一时刻检测出操作画面34的变化和扬声器35的输出声音。这里的大致同一时刻是指，收银机3在同一拍摄对象的登记处理中输出的时刻的容许范围内。即，判定部221也可以根据所使用的收银机3的规格适当调整大致同一时刻的容许范围。
在判定部221判定为获取部24在大致同一时刻检测出操作画面34的变化和扬声器35的输出声音的情况下，判定部221也可以判定为收银机3检测出识别信息，并对拍摄对象进行了识别/登记。
接下来，使用图10，一边涉及接触拍摄装置1和收银机3的处理，一边说明第三实施方式中的显示装置2的更新显示处理的流程。
<S201>至<S207>
该范围的步骤分别相当于第一实施方式中的<S001>至<S007>，因此，此省略说明。在步骤S207中存储器222存储第二购买商品的识别信息之后，处理进入到<S208>。
<S208>
在存储器222存储第二购买商品的识别信息之后，显示装置2经由获取部24开始获取声音。在此得到的声音被依次发送至判定部221，还一并进行声音波形的解析。然后，处理进入到<S209>。
<S209>
在开始由获取部24获取声音以及由判定部221解析声音波形之后，显示装置2开始经由获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的拍摄图像。然后，处理进入到<S210>。
<S210>
在开始获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的拍摄图像之后，收银机3经由读取部31读取包含在第一购买商品的显示图像中的识别信息，并经由识别部32和计算处理部33进行第一购买商品的识别/登记处理。然后，处理进入到<S211>。
<S211>
在通过识别部32和计算处理部33进行第一购买商品的识别/登记处理之后，收银机3从扬声器35输出表示第一购买商品被登记处理的读取音。然后，处理进入到<S212>。
<S212>
在从扬声器35输出读取音之后，收银机3在操作画面34上反映出与登记处理的第一购买商品有关的更新。然后，处理进入到<S213>。
<S213>
在从扬声器35输出读取音之后，或者在<S214>、<S216>或<S217>中分别判定为没有检测出与读取音对应的声音波形、在操作画面34上没有与第一购买商品有关的更新、或者读取音的输出和操作画面34的更新时刻不是大致相同之后，显示装置2经由获取部24获取最新的声音，进而发送至判定部221，并在判定部221中进行声音波形的解析。然后，处理进入到<S214>。
<S214>
在由获取部24获取最新的声音以及由判定部221解析声音波形之后，显示装置2通过判定部221判定是否检测出与读取音对应的声音波形。换言之，基于由获取部24获取的声音，判定部221判定收银机3是否检测出第一购买商品的识别信息，并对其进行了识别/登记。在判定为检测出与读取音对应的声音波形的情况下，处理进入到<S215>。在判定为没有检测出与读取音对应的声音波形的情况下，处理返回到<S213>。
<S215>
在判定部221中判定为检测出与读取音对应的声音波形的情况下，显示装置2经由获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的最新的拍摄图像。此时，显示装置2由于在<S209>中开始了拍摄图像的获取，因此，满足至少获取了两张以上的拍摄图像。然后，处理进入到<S216>。另外，也可以将所获取的拍摄图像在一定期间存储在存储器222中，之后删除。
<S216>
在由获取部24获取对收银机3所具有的操作画面34进行拍摄而得到的最新的拍摄图像之后，显示装置2经由判定部221根据由获取部24拍摄的操作画面34的拍摄图像，来判定在操作画面34上是否有与登记处理过的第一购买商品有关的更新。换言之，基于由获取部24拍摄的操作画面34的拍摄图像，判定部221判定收银机3是否检测出第一购买商品的识别信息，并对其进行了识别/登记。在判定为存在与第一购买商品有关的更新的情况下，处理进入到<S217>。在判定为没有与第一购买商品有关的更新的情况下，处理返回到<S213>。
<S217>
在判定为在操作画面34上存在与第一购买商品有关的更新的情况下，显示装置2经由判定部221根据由获取部24拍摄的操作画面34的拍摄图像，判定在与检测出与读取音对应的声音波形大致同一时刻的范围内在操作画面34上是否存在与登记处理过的第一购买商品有关的更新。在判定为在与检测出与读取音对应的声音波形大致同一时刻的范围内存在与第一购买商品有关的更新的情况下，处理进入到<S218>。在判定为在与检测出与读取音对应的声音波形大致同一时刻的范围内没有与第一购买商品有关的更新的情况下，处理返回到<S213>。
<S218>
在判定为在与检测出与读取音对应的声音波形大致同一时刻范围内存在与读取音对应的声音波形的情况下，显示装置2经由判定部221判定为收银机3检测出第一购买商品的识别信息，并对其进行了识别/登记。然后，处理进入到<S219>。
<S219>
在由判定部221判定为收银机3检测出第一购买商品的识别信息并对其进行了识别/登记的情况下，显示装置2经由判定部221生成包含第二购买商品的识别信息的显示图像，并使其代替包含第一购买商品的识别信息的显示图像而显示在显示部23上。
至此，关于显示装置和显示方法，基于各附图和各实施方式对本发明进行了说明，但应注意，只要是本领域技术人员，就容易基于本发明进行各种变形和修正。
例如，各实施例中记载的功能、机构及步骤等能够以在逻辑上不矛盾的方式重新配置，并且能够将多个机构或步骤等组合成一个或进行分割。
此外，关于在上面记载的显示装置2所具有的显示部23的更新显示，在第一购买商品和第二购买商品是相同物品的情况下，由于连续地显示包含相同识别信息的显示图像，因此，根据收银机3的规格，在更新显示时有可能发生问题。因此，例如，在判定部221中，可以判定第一购买商品和第二购买商品是否相同，在相同的情况下，在显示部23上的更新显示中，在显示更新后的显示图像之前设定规定时长的待机时间。在待机时间的期间，显示部23也可以显示白化的显示图像或不包含识别信息的显示图像。
另外，如上所述，将本发明的解决手段作为显示装置及显示方法进行了说明，但本发明也可以作为包含这些的方式来实现，另外，也可以作为实质上相当于这些的系统、程序及记录有程序的存储介质来实现，应理解为这些也包含在本发明的范围内。
附图标记的说明：
1拍摄装置
11拍摄部
12提取部
13输出部
2显示装置
21输入部
22控制部
221判定部
222存储器
23显示部
24获取部
3收银机
31读取部
32识别部
33计算处理部
34操作画面
35扬声器

Claims (11)

1.一种显示装置，其中，
具有：
显示部，向收银机的读取部显示包含购买商品的识别信息的显示图像；
获取部，获取所述收银机的外部输出信息；以及
控制部，基于所述外部输出信息控制所述显示部的显示，
在所述控制部基于所述收银机的第一购买商品的所述外部输出信息，判定为所述收银机进行了所述第一购买商品的识别处理的情况下，所述控制部使所述显示部显示包含第二购买商品的所述识别信息的所述显示图像。
2.根据权利要求1所述的显示装置，其中，
所述识别信息是一维条形码或二维条形码中的任一种。
3.根据权利要求1或2所述的显示装置，其中，
所述获取部包括照相机，
所述获取部获取所述照相机拍摄的拍摄图像作为所述外部输出信息。
4.根据权利要求3所述的显示装置，其中，
所述拍摄图像包括所述收银机的操作画面。
5.根据权利要求4所述的显示装置，其中，
所述控制部在检测出所述操作画面的变化的情况下，判定为所述收银机进行了第一购买商品的识别处理。
6.根据权利要求1或2所述的显示装置，其中，
所述获取部包括麦克风，
所述获取部获取所述麦克风获取到的声音作为所述外部输出信息。
7.根据权利要求6所述的显示装置，其中，
所述声音包括所述收银机的输出声音。
8.根据权利要求7所述的显示装置，其中，
所述控制部在检测出所述收银机的读取音作为所述输出声音的情况下，判定为所述收银机进行了第一购买商品的识别处理。
9.根据权利要求1或2所述的显示装置，其中，
所述获取部包括照相机和麦克风，
所述控制部判定所述获取部基于包含所述照相机所拍摄的拍摄图像和所述麦克风所获取的声音的所述外部输出信息的获取的检测。
10.根据权利要求9所述的显示装置，其中，
在所述获取部在大致同一时刻检测出所述拍摄图像即所述收银机的操作画面的变化以及所述声音即所述收银机输出的读取音的情况下，所述控制部判定为所述收银机进行了第一购买商品的登记处理。
11.一种显示方法，其中，
包括：
向收银机的读取部显示包含第一购买商品的识别信息的显示图像；
获取所述收银机的外部输出信息；以及
在基于所述收银机的第一购买商品的所述外部输出信息判定为所述收银机进行了所述第一购买商品的识别处理的情况下，显示包含第二购买商品的识别信息的显示图像。
CN202280010898.3A 2021-01-20 2022-01-19 显示装置以及显示方法 Pending CN116745826A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021-007244 2021-01-20
JP2021007244 2021-01-20
PCT/JP2022/001844 WO2022158494A1 (ja) 2021-01-20 2022-01-19 表示装置及び表示方法

Publications (1)

Publication Number Publication Date
CN116745826A true CN116745826A (zh) 2023-09-12

Family

ID=82549455

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280010898.3A Pending CN116745826A (zh) 2021-01-20 2022-01-19 显示装置以及显示方法

Country Status (4)

Country Link
US (1) US20240087428A1 (zh)
JP (1) JPWO2022158494A1 (zh)
CN (1) CN116745826A (zh)
WO (1) WO2022158494A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000231669A (ja) * 1999-02-09 2000-08-22 Elex Kk カードシステム
JP3982329B2 (ja) * 2002-05-30 2007-09-26 カシオ計算機株式会社 印刷販売システム
JP4655018B2 (ja) * 2006-04-03 2011-03-23 ソニー株式会社 表示装置及びこの表示装置を用いたデータ処理方法並びにデータ処理システム
JP6081861B2 (ja) * 2013-05-14 2017-02-15 株式会社ジャックス 支払支援システム、支払支援方法及び支払支援プログラム
JP2020184141A (ja) * 2019-05-07 2020-11-12 共同印刷株式会社 端末装置、会計処理方法および会計処理プログラム、並びに、会計処理システム

Also Published As

Publication number Publication date
JPWO2022158494A1 (zh) 2022-07-28
US20240087428A1 (en) 2024-03-14
WO2022158494A1 (ja) 2022-07-28

Similar Documents

Publication Publication Date Title
US7733412B2 (en) Image pickup apparatus and image pickup method
US9330325B2 (en) Apparatus and method for reducing noise in fingerprint images
EP3425590B1 (en) Image processing apparatus, image processing method, and storage medium
JP5784867B2 (ja) 画像スキャニング装置及び画像スキャニング方法
WO2016203698A1 (ja) 顔検出装置、顔検出システム、及び顔検出方法
JP6951796B1 (ja) 画像認識装置、認証システム、画像認識方法及びプログラム
EP3098751A1 (en) Depth-based image element removal
JP6374849B2 (ja) ユーザ端末、色彩補正システム及び色彩補正方法
JP2005341017A (ja) カメラ装置およびプログラム
CN116745826A (zh) 显示装置以及显示方法
WO2017163283A1 (ja) 監視装置及び監視システム
JP2011120076A (ja) 画像検出装置及び画像検出方法
JP5791361B2 (ja) パターン識別装置、パターン識別方法およびプログラム
US20170083891A1 (en) Information processing apparatus and information processing method
JP2006270137A (ja) 撮像装置
WO2021131563A1 (ja) 画像データ登録システム、画像データ登録方法
CN116457848A (zh) 结算处理系统、显示装置以及显示方法
JP6471924B2 (ja) 顔認証装置及び顔認証方法
EP4120195A1 (en) A method, a computer program and a system for calibrating at least one camera
JP2024024076A (ja) 情報処理システム、情報処理装置、情報処理方法
JP7290842B2 (ja) 情報処理システム、情報処理システムの制御方法、プログラム
US11985432B2 (en) Image processing device and image processing method suitably applied to biometric authentication
JP2001012912A (ja) 視差画像撮像装置、視差画像処理装置、視差画像撮像方法、及び視差画像処理方法
JP6833558B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP2006086887A (ja) 画像情報処理装置およびデジタルカメラ

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination