WO2022158494A1 - 表示装置及び表示方法 - Google Patents

表示装置及び表示方法 Download PDF

Info

Publication number
WO2022158494A1
WO2022158494A1 PCT/JP2022/001844 JP2022001844W WO2022158494A1 WO 2022158494 A1 WO2022158494 A1 WO 2022158494A1 JP 2022001844 W JP2022001844 W JP 2022001844W WO 2022158494 A1 WO2022158494 A1 WO 2022158494A1
Authority
WO
WIPO (PCT)
Prior art keywords
cash register
display
unit
display device
purchased product
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2022/001844
Other languages
English (en)
French (fr)
Inventor
元樹 阿部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Corp
Original Assignee
Kyocera Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Corp filed Critical Kyocera Corp
Priority to CN202280010898.3A priority Critical patent/CN116745826A/zh
Priority to JP2022576723A priority patent/JPWO2022158494A1/ja
Priority to US18/262,009 priority patent/US20240087428A1/en
Publication of WO2022158494A1 publication Critical patent/WO2022158494A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/01—Details for indicating
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/209—Specified transaction journal output feature, e.g. printed receipt or voice output
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0018—Constructional details, e.g. of drawer, printing means, input means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader

Definitions

  • the present disclosure relates to a display device and a display method.
  • Patent Document 1 discloses a self-cash register system that enables purchasers themselves to process payments without the intervention of employees at retail stores.
  • a display device that is one aspect of the present disclosure includes a display unit, an acquisition unit, and a control unit.
  • the display unit displays a display image including identification information of the purchased product to the reading unit of the cash register.
  • the acquisition unit acquires the external output information of the cash register.
  • the control unit controls display on the display unit based on the external output information. Further, when the control unit determines that the cash register has performed identification processing of the first purchased product based on the external output information of the first purchased product by the cash register, the control unit outputs the identification information of the second purchased product is displayed on the display unit.
  • a display method which is one aspect of the present disclosure, displays a display image including identification information of a first purchased product to a reading unit of a cash register, acquires external output information of the cash register, When the cash register determines that the identification process of the first purchased product has been performed based on the external output information of the first purchased product, a display image including the identification information of the second purchased product is displayed.
  • FIG. 1 is a functional block diagram of a payment processing system according to the first to third embodiments.
  • FIG. 2 is an external view of the settlement processing system according to the first to third embodiments.
  • FIG. 3 is a functional block diagram of the display device according to the first to third embodiments.
  • FIG. 4 is an image diagram of acquisition of external output information by the display device in the first embodiment.
  • FIG. 5 is a pre-update image diagram of the external output information acquired by the display device in the first embodiment.
  • FIG. 6 is an image diagram after updating the external output information acquired by the display device in the first embodiment.
  • FIG. 7 is a flowchart relating to update display processing of the display device in the first embodiment.
  • FIG. 8 is an image diagram of acquisition of external output information by a display device in the second embodiment.
  • FIG. 9 is a flowchart relating to update display processing of the display device in the second embodiment.
  • FIG. 10 is a flowchart relating to update display processing of the display device in the third embodiment.
  • First embodiment 1 and 2 are a functional block diagram and an external view, respectively, of the first embodiment of the settlement processing system.
  • the settlement processing system includes an imaging device 1, a display device 2, and a cash register 3.
  • solid arrows connecting functional blocks indicate the flow of control signals or communicated information.
  • Communication indicated by solid arrows may be wired communication, wireless communication, or a combination of both.
  • the imaging device 1, the display device 2, or the cash register 3 performs communication in compliance with various wired/wireless communication standards including, for example, Bluetooth (registered trademark) IEEE802.3 or IEEE802.11. communication module.
  • the wireless communication may be optical communication.
  • dashed arrows connecting functional blocks mean an information flow in which, for example, the information of the functional block located on the starting point side of the arrow is acquired by the functional block located on the ending point side.
  • the imaging device 1 includes an imaging unit 11, an extraction unit 12, and an output unit 13.
  • the imaging unit 11 captures an image of an imaging target and generates a captured image in which the imaging target is captured.
  • the imaging unit 11 is configured including a camera.
  • a camera includes an imaging optical system and an imaging device.
  • the imaging optical system includes, for example, optical members such as one or more lenses and a diaphragm. Any lens may be used regardless of the focal length. For example, a general lens, a wide-angle lens including a fisheye lens, or a zoom lens with a variable focal length may be used.
  • the imaging optical system forms a subject image on the light receiving surface of the imaging device.
  • the imaging device includes, for example, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) image sensor.
  • the imaging device captures a subject image formed on the light receiving surface to generate a captured image.
  • the imaging unit 11 may continuously capture still images at an arbitrary frame rate. Capturing still images continuously can be rephrased as capturing moving images.
  • the extraction unit 12 extracts identification information for identifying the type of the imaging target from the captured image captured by the imaging unit 11 .
  • the identification information may be, for example, a one-dimensional barcode including a JAN (Japan Article Number) code, or a two-dimensional barcode including a QR code (registered trademark).
  • a one-dimensional barcode including a JAN (Japan Article Number) code or a two-dimensional barcode including a QR code (registered trademark).
  • QR code registered trademark
  • the extraction unit 12 may use an object recognition method based on pattern matching or machine learning, for example, to extract identification information.
  • the extraction unit 12 may use a known technique such as Detection Network or Sliding Window Detection as an object recognition technique for extracting identification information.
  • the extraction unit 12 may generate a new image by, for example, trimming the first image so as to include the identification information.
  • the extraction unit 12 is configured including a processor and memory.
  • the processor may include a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), or an FPGA (Field-Programmable Gate Array).
  • the memory may include semiconductor memory, magnetic memory, optical memory, or the like.
  • Semiconductor memory may include volatile memory, non-volatile memory, and the like.
  • Magnetic memory may include, for example, a hard disk or magnetic tape.
  • the optical memory may include, for example, a CD (Compact Disc), a DVD (Digital Versatile Disc), or a BD (Blu-ray (registered trademark) Disc).
  • the memory included in the extraction unit 12 may store various information or parameters regarding the operation of the imaging device 1 .
  • the memory may store programs to be executed by the extraction unit 12 .
  • the memory may function as a work memory for the extraction unit 12 .
  • the memory may store the first image, identification information, or the like.
  • the output unit 13 outputs the identification information acquired by the extraction unit 12 to the input unit 21 included in the display device 2 .
  • FIG. 2 shows an example in which the output unit 13 and the input unit 21 are not wired but wirelessly connected. may be connected by wire.
  • FIG. 3 is a functional block diagram of the display device 2 included in the first embodiment of the settlement processing system.
  • the display device 2 includes an input unit 21, a control unit 22, a display unit 23 and an acquisition unit 24.
  • the input unit 21 accepts input of identification information output by the output unit 13 included in the imaging device 1 . After that, the input unit 21 transmits the received identification information to the control unit 22, which will be described later.
  • control unit 22 is configured including a determination unit 221 and a memory 222.
  • the determination unit 221 performs various determination processes, which will be described later.
  • the determination unit 221 includes a processor.
  • the processor may include a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), or an FPGA (Field-Programmable Gate Array).
  • the memory 222 stores various information or parameters related to the operation of the display device 2, for example. That is, all the information relating to the functions of the display device 2 and all the various information input/output to/from the control section 22 are processed via the memory 222 .
  • the memory 222 may store programs executed by the determination unit 221 .
  • the memory 222 may function as a work memory for the determination section 221 .
  • the memory 222 may store a captured image, identification information, a display image described later, or the like.
  • the memory 222 may include semiconductor memory, magnetic memory, optical memory, or the like.
  • Semiconductor memory may include volatile memory, non-volatile memory, and the like.
  • Magnetic memory may include, for example, a hard disk or magnetic tape.
  • the optical memory may include, for example, a CD (Compact Disc), a DVD (Digital Versatile Disc), or a BD (Blu-ray (registered trademark) Disc).
  • the determination unit 221 generates a display image including the identification information transmitted from the input unit 21 based on the external output information of the cash register 3 input from the acquisition unit 24 described later, and updates this on the display unit 23. Determine whether to display. Updating display means that when a display image is already displayed on the display unit 23, this display image is updated to a new one. That is, when two or more pieces of identification information are transmitted to the determination unit 221, the display unit 23 first displays the display image including the first identification information, and then displays the identification information including the second identification information. In other words, the display processing of displaying the identification information including the third identification information after that is the update display. A detailed description of the external output information will be given later together with the acquisition unit 24, which will be described later.
  • the display image may be generated after performing correction processing such as trimming processing or rearrangement of the identification information so that the identification information can be easily read by the reading unit 31 provided in the cash register 3, which will be described later.
  • the determination unit 221 In order for the determination unit 221 to update and display the display image on the display unit 23, it is required that the cash register 3, which will be described later, detects identification information and identifies/registers the imaging target. In other words, the determination unit 221 determines whether or not the cash register 3, which will be described later, has detected the identification information and identified/registered the imaging target based on the external output information.
  • the determination unit 221 determines that the cash register 3 has detected the identification information included in the display image and has identified the imaging target, the determination unit 221 updates and displays the display image on the display unit 23, which will be described later.
  • the update display may include, for example, stopping the display image before the update before displaying the display image after the update and displaying a white-out image or an image that does not contain other identification information.
  • the display unit 23 displays the display image on the reading unit 31 via the control unit 22.
  • the display unit 23 includes a display device such as a liquid crystal display, an organic EL (Emitting Diode) display, or an inorganic EL display.
  • a display device such as a liquid crystal display, an organic EL (Emitting Diode) display, or an inorganic EL display.
  • the acquisition unit 24 acquires the external output information of the cash register 3 and transmits it to the determination unit 221 . A detailed description of the acquisition unit 24 will be given later.
  • the cash register 3 includes a reading unit 31, an identification unit 32, a calculation processing unit 33, an operation screen 34, and a speaker 35.
  • the operation screen 34 and the speaker 35 may be omitted.
  • the reading unit 31 reads and analyzes the identification information displayed by the display unit 23 included in the display device 2, and acquires a management code used to identify the type of imaging target.
  • the management code is associated with the product name of the object to be imaged, and may be, for example, a JAN code.
  • the reading unit 31 transmits the acquired management code to the identifying unit 32 .
  • the reading unit 31 may be an optical reader, for example.
  • the optical reader can be, for example, either a pen reader, a CCD touch reader, a laser scanner, a two dimensional barcode reader or a stationary barcode reader.
  • the identification unit 32 identifies the imaging target based on the management code acquired by the reading unit 31 . Identifying the object to be imaged includes specifying the product name or price of the object to be imaged.
  • the calculation processing unit 33 performs registration/settlement processing based on the item name or amount of money of the imaging target identified by the identification unit 32 .
  • the registration processing may be, for example, calculating the amount of money for one imaging target identified by the identifying unit 32 and registering it on the list.
  • the calculation processing unit 33 may calculate the sum of the prices of the imaging targets registered on the list.
  • the settlement process may be performed based on the total value of one or more imaging targets registered on the list when the settlement process is executed.
  • the identification unit 32 and calculation processing unit 33 are configured including a processor and a memory.
  • the processor may include a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), or an FPGA (Field-Programmable Gate Array).
  • the memory may include semiconductor memory, magnetic memory, optical memory, or the like.
  • Semiconductor memory may include volatile memory, non-volatile memory, and the like.
  • Magnetic memory may include, for example, a hard disk or magnetic tape.
  • the optical memory may include, for example, a CD (Compact Disc), a DVD (Digital Versatile Disc), or a BD (Blu-ray (registered trademark) Disc).
  • the memory included in the identification unit 32 and the calculation processing unit 33 may store various information or parameters regarding the operation of the cash register 3 .
  • the memory may store programs executed by the identification unit 32 and the calculation processing unit 33 .
  • the memory may function as a work memory for the identification section 32 and the calculation processing section 33 .
  • the identification unit 32 and the calculation processing unit 33 may share part or all of the processor and memory, or may be provided separately.
  • the operation screen 34 displays data related to imaging targets that have been identified, registered, or settled by the identification unit 32 and the calculation processing unit 33, and functions as an interface for the user to operate the cash register 3.
  • the operation performed by the user on the cash register 3 via the operation screen 34 includes, for example, correction of the result of registration/settlement processing performed by the calculation processing unit 33, confirmation of the result of settlement processing, and the like.
  • the operation screen 34 includes a display device such as a liquid crystal display, an organic EL (Emitting Diode) display, or an inorganic EL display.
  • the operation of the screen displayed on the operation screen 34 may include any one of touch operation, keyboard operation, mouse operation, and trackball operation.
  • the operation screen 34 may be provided with a pressure-sensitive or electrostatic touch panel.
  • operations on the operation screen 34 include keyboard operations, mouse operations, or trackball operations, an input keyboard, mouse, or trackball may be provided separately from the operation screen 34 .
  • the speaker 35 identifies the object to be imaged by the calculation processing unit 33, and outputs a reading sound when the registration processing is performed.
  • the speaker 35 includes, for example, a piezoelectric speaker.
  • the reading sound output by the speaker 35 may be, for example, a buzzer sound or an announcement sound. Further, the reading sound may differ according to the success or failure of the registration processing of the calculation processing unit 33, for example.
  • FIG. 4 is an image diagram of acquisition of external output information by the acquisition unit 24.
  • the acquiring unit 24 captures an imaging range IR including the operation screen 34 as the external output information of the cash register 3 and transmits the acquired captured image to the determining unit 221 .
  • the determination unit 221 performs determination based on the acquired captured image.
  • the acquisition unit 24 is configured including a camera.
  • a camera includes an imaging optical system and an imaging device.
  • the imaging optical system includes, for example, optical members such as one or more lenses and a diaphragm. Any lens may be used regardless of the focal length. For example, a general lens, a wide-angle lens including a fisheye lens, or a zoom lens with a variable focal length may be used.
  • the imaging optical system forms a subject image on the light receiving surface of the imaging device.
  • the imaging device includes, for example, a CCD (Charge Coupled Device) image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) image sensor.
  • the imaging device captures a subject image formed on the light receiving surface to generate a captured image.
  • the imaging unit 11 may continuously capture still images at an arbitrary frame rate. Capturing still images continuously can be rephrased as capturing moving images.
  • FIG. 5 and 6 are image diagrams of the operation screen before and after updating the external output information acquired by the display device, respectively.
  • the product EEE is newly added as shown in the framed portion in FIG. 6, and the total price is updated.
  • the determination unit 221 detects changes in the operation screen 34 as shown in FIGS. 5 and 6 via the captured image acquired by the acquisition unit 24 .
  • the determination unit 221 may determine that the cash register 3 has detected the identification information and has identified/registered the imaging target based on the occurrence of a change in the generated captured image.
  • the flow relating to the update display processing of the display device 2 in the first embodiment will be described while touching on the processing of the imaging device 1 and the cash register 3 as well.
  • the two imaging targets are the first purchased product and the second purchased product, respectively, and the case where there are two imaging targets will be described.
  • a processing flow may be constructed so that similar processing can be performed even when there are three or more imaging targets. This also applies to the description of the update display processing flow in the second and third embodiments.
  • the imaging device 1 captures an image of the first purchased product by the imaging unit 11 to generate a captured image, and extracts the identification information of the first purchased product from the captured image by the extraction unit 12 . After that, the process proceeds to ⁇ S002>.
  • the imaging device 1 After extracting the identification information of the first purchased product by the extraction unit 12 , the imaging device 1 transmits the identification information of the first purchased product to the display device 2 via the output unit 13 . After that, the process proceeds to ⁇ S003>.
  • the display device 2 After the memory 222 stores the identification information of the first purchased product, the display device 2 confirms that the display unit 23 is not displaying any image at this time, and then the determination unit 221 displays the first product. A display image including the identification information of the purchased product is generated, and the display image including the identification information of the first purchased product is displayed on the display unit 23 . After that, the process proceeds to ⁇ S005>.
  • the imaging device 1 captures the second purchased product by the imaging unit 11 to generate a captured image.
  • the identification information of the second purchased product is extracted from the captured image. After that, the process proceeds to ⁇ S006>.
  • the imaging device 1 After the extraction unit 12 extracts the identification information of the second purchased product, the imaging device 1 transmits the identification information of the second purchased product to the display device 2 via the output unit 13 . After that, the process proceeds to ⁇ S007>.
  • the display device 2 After the memory 222 stores the identification information of the second purchased product, the display device 2 starts acquiring a captured image of the operation screen 34 of the cash register 3 via the acquisition unit 24 .
  • the captured images of the operation screen 34 obtained here are sequentially transmitted to the determination unit 221 . After that, the process proceeds to ⁇ S009>.
  • the cash register 3 After the acquiring unit 24 starts acquiring the captured image of the operation screen 34 of the cash register 3, the cash register 3 acquires the identification information included in the display image of the first purchased product via the reading unit 31. Identification/registration processing of the first purchased commodity is performed via the reading/identifying section 32 and the calculation processing section 33 . After that, the process proceeds to ⁇ S010>.
  • ⁇ S011> Displayed after the update related to the first purchased product registered on the operation screen 34 is reflected, or when it is determined in ⁇ S012> that there is no update related to the first purchased product on the operation screen 34.
  • the device 2 acquires the latest captured image of the operation screen 34 of the cash register 3 via the acquisition unit 24 .
  • the display device 2 since the display device 2 has started acquiring captured images in ⁇ S008>, it is assumed that at least two or more captured images have been acquired. After that, the process proceeds to ⁇ S012>. Note that the acquired captured image may be stored in the memory 222 for a certain period of time and then deleted.
  • the acquisition unit 24 acquires the latest captured image of the operation screen 34 included in the cash register 3, the display device 2, via the determination unit 221, extracts the captured image of the operation screen 34 captured by the acquisition unit 24. , it is determined whether or not there has been an update related to the first purchase product registered on the operation screen 34 .
  • the determination unit 221 determines whether the cash register 3 has detected the identification information of the first purchased product and identified/registered it. determine whether If it is determined that there has been an update related to the first purchased product, proceed to ⁇ S013>. If it is determined that there is no update related to the first purchased product, the process returns to ⁇ S011>.
  • the display device 2 causes the cash register 3 to detect the identification information of the first purchased product via the determination unit 221. It is determined that it has been identified/registered. After that, the process proceeds to ⁇ S014>.
  • the display device 2 identifies the second purchased product via the determination unit 221.
  • a display image containing the information is generated and displayed on the display unit 23 in place of the display image containing the identification information of the first purchased product.
  • the display image on the display unit 23 is updated based on changes in the operation screen 34 of the cash register 3 .
  • the display image on the display unit 23 is updated based on the sound output from the speaker 35 of the cash register 3 .
  • FIG. 8 The external output information acquired by the acquisition unit 24 and the determination processing method of the determination unit 221 in the second embodiment will be described with reference to FIGS. 8 and 9.
  • FIG. 8 The external output information acquired by the acquisition unit 24 and the determination processing method of the determination unit 221 in the second embodiment will be described with reference to FIGS. 8 and 9.
  • FIG. 8 is an image diagram of acquisition of external output information by the acquisition unit 24.
  • the acquisition unit 24 collects the output sound of the cash register 3 as the external output information of the cash register 3 in a state where it can be collected, and transmits the acquired sound to the determination unit 221 .
  • the output sound control may include reading sound output by the speaker 35, for example.
  • the determination unit 221 makes a determination based on the acquired voice.
  • the acquisition unit 24 is configured including one or more microphones.
  • the microphone may be, for example, a condenser microphone or a dynamic microphone.
  • the microphone may have directivity so that the reading sound output by the speaker 35 can be more pinpointed.
  • the determination unit 221 learns beforehand about the voice waveform corresponding to the reading sound, and tries to detect the voice waveform corresponding to the reading sound from the voice acquired by the acquisition unit 24 .
  • the speech waveform detection method performed by the determination unit 221 may be, for example, a pattern matching technique typified by DP (Dynamic Programming) matching, or may use other known speech authentication/verification techniques.
  • the determination unit 221 may determine that the cash register 3 has detected the identification information and has identified/registered the imaging target.
  • the display device 2 After the memory 222 stores the identification information of the second purchased product, the display device 2 starts acquiring voice via the acquisition unit 24 .
  • the voice obtained here is sequentially transmitted to the determination unit 221, and the voice waveform is also analyzed. After that, the process proceeds to ⁇ S109>.
  • the cash register 3 After the voice acquisition by the acquisition unit 24 and the analysis of the voice waveform by the determination unit 221 are started, the cash register 3 reads the identification information included in the display image of the first purchased product via the reading unit 31, and performs identification. Identification/registration processing of the first purchased product is performed via the unit 32 and the calculation processing unit 33 . After that, the process proceeds to ⁇ S110>.
  • the cash register 3 After identification/registration processing of the first purchase product is performed by the identification unit 32 and the calculation processing unit 33, the cash register 3 outputs a reading sound to the speaker indicating that the first purchase product has been identified/registered. Output from 35. After that, the process proceeds to ⁇ S111>.
  • the display device 2 After the read sound is output from the speaker 35, or after it is determined in ⁇ S112> that the sound waveform corresponding to the read sound is not detected, the display device 2 acquires the latest sound via the acquisition unit 24. , and further to the determination unit 221, where the voice waveform is analyzed. After that, the process proceeds to ⁇ S112>.
  • the display device 2 determines whether the determination unit 221 has detected a voice waveform corresponding to the reading sound. In other words, based on the voice acquired by the acquisition unit 24, the determination unit 221 determines whether the cash register 3 has detected the identification information of the first purchased product and identified/registered it. If it is determined that the voice waveform corresponding to the reading sound has been detected, the process proceeds to ⁇ S113>. If it is determined that the sound waveform corresponding to the reading sound has not been detected, the process returns to ⁇ S111>.
  • the display device 2 determines that the cash register 3 has detected the identification information of the first purchased product via the determination unit 221 and has identified/registered it. to decide. After that, the process proceeds to ⁇ S114>.
  • the display device 2 identifies the second purchased product via the determination unit 221.
  • a display image containing the information is generated and displayed on the display unit 23 in place of the display image containing the identification information of the first purchased product.
  • the display image on the display unit 23 is updated based on the sound output from the speaker 35 of the cash register 3 .
  • the display image on the display unit 23 is updated based on changes in the operation screen 34 of the cash register 3 and the output sound of the speaker 35 .
  • the third embodiment is a combination of the first and second embodiments.
  • the acquisition unit 24 is configured including a camera and a microphone.
  • the configuration of the camera and microphone please refer to the descriptions of the first and second embodiments.
  • the determination unit 221 determines whether or not the acquisition unit 24 has detected a change in the operation screen 34 and the output sound of the speaker 35 at substantially the same timing.
  • substantially the same timing means within the permissible range of the timing output by the cash register 3 in the registration processing of the same imaging target. That is, the determination unit 221 may appropriately adjust the allowable range of approximately the same timing according to the specifications of the cash register 3 to be used.
  • the determination unit 221 determines that the acquisition unit 24 has detected the change in the operation screen 34 and the output sound of the speaker 35 at substantially the same timing, the determination unit 221 determines that the cash register 3 detects the identification information, may be determined to have identified/registered.
  • the display device 2 After the memory 222 stores the identification information of the second purchased product, the display device 2 starts acquiring voice via the acquisition unit 24 .
  • the voice obtained here is sequentially transmitted to the determination unit 221, and the voice waveform is also analyzed. After that, the process proceeds to ⁇ S209>.
  • ⁇ S209> After the acquisition of voice by the acquisition unit 24 and the analysis of the voice waveform by the determination unit 221 are started, the display device 2 starts acquiring a captured image of the operation screen 34 provided in the cash register 3 via the acquisition unit 24. do. After that, the process proceeds to ⁇ S210>.
  • the cash register 3 After the acquiring unit 24 starts acquiring the captured image of the operation screen 34 of the cash register 3, the cash register 3 acquires the identification information included in the display image of the first purchased product via the reading unit 31. Identification/registration processing of the first purchased commodity is performed via the reading/identifying section 32 and the calculation processing section 33 . Thereafter, the process proceeds to ⁇ S211>.
  • ⁇ S213> After the reading sound is output from the speaker 35, or when the sound waveform corresponding to the reading sound is not detected in ⁇ S214>, ⁇ S216> or ⁇ S217> respectively, on the operation screen 34, After determining that there was no update or that the output of the reading sound and the timing of updating the operation screen 34 were not substantially the same, the display device 2 acquires the latest voice via the acquisition unit 24, and furthermore, the determination unit 221, and the determination unit 221 analyzes the speech waveform. Thereafter, the process proceeds to ⁇ S214>.
  • the display device 2 determines whether the determination unit 221 has detected a voice waveform corresponding to the reading sound. In other words, based on the voice acquired by the acquisition unit 24, the determination unit 221 determines whether the cash register 3 has detected the identification information of the first purchased product and identified/registered it. If it is determined that the voice waveform corresponding to the reading sound has been detected, the process proceeds to ⁇ S215>. If it is determined that the sound waveform corresponding to the reading sound has not been detected, the process returns to ⁇ S213>.
  • the display device 2 acquires the latest captured image of the operation screen 34 of the cash register 3 via the acquisition unit 24 . At this time, since the display device 2 has started acquiring captured images in ⁇ S209>, it is assumed that at least two or more captured images have been acquired. After that, the process proceeds to ⁇ S216>. Note that the acquired captured image may be stored in the memory 222 for a certain period of time and then deleted.
  • the acquisition unit 24 acquires the latest captured image of the operation screen 34 included in the cash register 3, the display device 2, via the determination unit 221, extracts the captured image of the operation screen 34 captured by the acquisition unit 24. , it is determined whether or not there has been an update related to the first purchase product registered on the operation screen 34 .
  • the determination unit 221 determines whether the cash register 3 has detected the identification information of the first purchased product and identified/registered it. determine whether If it is determined that there is an update related to the first purchased product, the process proceeds to ⁇ S217>. If it is determined that there is no update related to the first purchased product, the process returns to ⁇ S213>.
  • the display device 2 updates the operation screen 34 from the captured image of the operation screen 34 captured by the acquisition unit 24 via the determination unit 221 . It is determined whether or not the update related to the first purchase product registered above was within the range of substantially the same timing as the sound waveform corresponding to the reading sound was detected. If it is determined that the first purchased product has been updated within substantially the same timing as when the voice waveform corresponding to the reading sound was detected, the process proceeds to ⁇ S218>. If it is determined that there was no update related to the first purchased product within the range of substantially the same timing as when the voice waveform corresponding to the reading sound was detected, the process returns to ⁇ S213>.
  • the display device 2 sends the cash register 3 via the determination unit 221. detects the identification information of the first purchased item and determines that it has identified/registered it. After that, the process proceeds to ⁇ S219>.
  • the display device 2 identifies the second purchased product via the determination unit 221.
  • a display image containing the information is generated and displayed on the display unit 23 in place of the display image containing the identification information of the first purchased product.
  • the determination unit 221 determines whether or not the first purchased product and the second purchased product are the same. may be set to a predetermined length of waiting time. During the standby time, the display unit 23 may display a white-out display image or a display image that does not contain identification information.
  • the solution means of the present disclosure has been described as a display device and a display method, but the present disclosure can also be implemented as aspects including these, and It should be understood that the scope of the present disclosure also includes a system, a program, and a storage medium that records the program.
  • imaging device 11 imaging unit 12 extraction unit 13 output unit 2 display device 21 input unit 22 control unit 221 determination unit 222 memory 23 display unit 24 acquisition unit 3 cash register 31 reading unit 32 identification unit 33 calculation processing unit 34 operation screen 35 speaker

Landscapes

  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

表示部と、取得部と、制御部とを備える表示装置であって、表示部は、購買商品の識別情報を含む表示画像をキャッシュレジスタの読取部に対して表示し、取得部は、キャッシュレジスタの外部出力情報を取得し、制御部は、外部出力情報に基づいて表示部の表示を制御し、さらに、キャッシュレジスタによる第１の購買商品の外部出力情報に基づいてキャッシュレジスタが第１の購買商品の識別処理を行ったと制御部が判定した場合、制御部は、第２の購買商品の識別情報を含む表示画像を表示部に表示させる。

Description

表示装置及び表示方法 関連出願の相互参照
　本出願は、２０２１年１月２０日に日本国に特許出願された特願２０２１－００７２４４の優先権を主張するものであり、この先の出願の開示全体をここに参照のために取り込む。
　本開示は、表示装置及び表示方法に関するものである。
　小売店等において、従業員の介在なく購買者自らが精算処理を行うことができるセルフキャッシュレジスタシステムが、例えば特許文献１に開示されている。
特開２０１６－１９４９５９号公報
　本開示の一側面である表示装置は、表示部と、取得部と、制御部とを備える。表示部は、購買商品の識別情報を含む表示画像をキャッシュレジスタの読取部に対して表示する。取得部は、キャッシュレジスタの外部出力情報を取得する。制御部は、外部出力情報に基づいて表示部の表示を制御する。さらに、キャッシュレジスタによる第１の購買商品の外部出力情報に基づいてキャッシュレジスタが第１の購買商品の識別処理を行ったと制御部が判定した場合、制御部は、第２の購買商品の識別情報を含む表示画像を表示部に表示させる。
　また、本開示の一側面である表示方法は、第１の購買商品の識別情報を含む表示画像をキャッシュレジスタの読取部に対して表示し、キャッシュレジスタの外部出力情報を取得し、キャッシュレジスタによる第１の購買商品の外部出力情報に基づいて、キャッシュレジスタが第１の購買商品の識別処理を行ったと判定した場合、第２の購買商品の識別情報を含む表示画像を表示する。
図１は、第１から第３の実施形態における、精算処理システムの機能ブロック図である。 図２は、第１から第３の実施形態における、精算処理システムの外観図である。 図３は、第１から第３の実施形態における、表示装置の機能ブロック図である。 図４は、第１の実施形態における、表示装置による外部出力情報の取得イメージ図である。 図５は、第１の実施形態における、表示装置が取得する外部出力情報の更新前イメージ図である。 図６は、第１の実施形態における、表示装置が取得する外部出力情報の更新後イメージ図である。 図７は、第１の実施形態における、表示装置の更新表示処理に係るフローチャートである。 図８は、第２の実施形態における、表示装置による外部出力情報の取得イメージ図である。 図９は、第２の実施形態における、表示装置の更新表示処理に係るフローチャートである。 図１０は、第３の実施形態における、表示装置の更新表示処理に係るフローチャートである。
　特許文献１のようなセルフキャッシュレジスタシステムを導入する場合、既存のキャッシュレジスタシステムとの入れ替えを伴うことが多い。設備投資のコストを鑑みると、既存のキャッシュレジスタシステムとの入れ替えを伴わずにセルフキャッシュレジスタシステムを導入することが望ましい。本開示によれば、既存のキャッシュレジスタシステムに接続する形態のセルフキャッシュレジスタシステムを構築することができる。
　以下、本開示を適用した表示装置及び表示方法の実施形態について、図面を参照しながら説明する。
　［第１の実施形態］
　図１及び図２は、精算処理システムの第１の実施形態のそれぞれ機能ブロック図及び外観図である。
　図１に示すように、本開示の第１の実施形態に係る精算処理システムは、撮像装置１、表示装置２及びキャッシュレジスタ３を含んで構成されている。
　以後の図において、各機能ブロックを結ぶ実線の矢印は、制御信号または通信される情報の流れを示す。実線の矢印が示す通信は有線通信であってもよいし、無線通信であってもよいし、両者の組合せであってもよい。無線によって通信が行われる場合、撮像装置１、表示装置２またはキャッシュレジスタ３は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）ＩＥＥＥ８０２．３またはＩＥＥＥ８０２．１１を含む各種の有線／無線通信規格に準拠する通信を行うための通信モジュールを含んで構成されてもよい。また、無線通信は、光通信であってもよい。
　また、以後の図において、各機能ブロックを結ぶ破線矢印は、例えば矢印の起点側に位置する機能ブロックの情報を、終点側に位置する機能ブロックが取得するといった情報の流れを意味する。
　図１に示すように、撮像装置１は、撮像部１１、抽出部１２及び出力部１３を含んで構成されている。
　撮像部１１は、撮像対象を撮像し、撮像対象が写った撮像画像を生成する。
　撮像部１１は、カメラを含んで構成されている。カメラは、撮像光学系及び撮像素子を含んで構成されている。撮像光学系は、例えば、１個以上のレンズ及び絞りなどの光学部材を含む。レンズは、焦点距離に囚われずどのようなものであってもよく、例えば、一般的なレンズ、魚眼レンズを含む広角レンズまたは焦点距離が可変であるズームレンズであってもよい。撮像光学系は、被写体像を撮像素子の受光面に結像させる。撮像素子は、例えば、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサまたはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ－Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどを含む。撮像素子は、受光面上に結像された被写体像を撮像して撮像画像を生成する。撮像部１１は任意のフレームレートで連続的に静止画を撮像してもよい。連続的に静止画を撮像するということは、動画を撮像すると換言できる。
　抽出部１２は、撮像部１１が撮像した撮像画像から、撮像対象の種別を識別するための識別情報を抽出する。
　識別情報とは、例えばＪＡＮ（Ｊａｐａｎ　Ａｒｔｉｃｌｅ　Ｎｕｍｂｅｒ）コードを含む１次元バーコードであってもよいし、ＱＲコード（登録商標）を含む２次元バーコードであってもよい。一般に、識別情報を用いることで撮像対象の品名または金額を特定し、精算処理、売上管理及び在庫仕入管理などが可能となる。
　抽出部１２は、識別情報を抽出するために、例えばパターンマッチングまたは機械学習に基づく物体認識手法を用いてもよい。抽出部１２は、識別情報を抽出するための物体認識手法として、例えばＤｅｔｅｃｔｉｏｎ　ＮｅｔｗｏｒｋまたはＳｌｉｄｉｎｇ　Ｗｉｎｄｏｗ　Ｄｅｔｅｃｔｉｏｎ等といった公知の手法を用いてもよい。
　抽出部１２が識別情報を抽出するために、抽出部１２は、例えば第１の画像から識別情報を含むようトリミング処理を実行することで新たな画像を生成してもよい。
　抽出部１２は、プロセッサ及びメモリを含んで構成されている。プロセッサは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）またはＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）などを含んでもよい。メモリは、半導体メモリ、磁気メモリまたは光メモリなどを含んでもよい。半導体メモリは、揮発性メモリまたは不揮発性メモリなどを含んでもよい。磁気メモリは、例えばハードディスクまたは磁気テープ等を含んでもよい。光メモリは、例えばＣＤ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ）、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｃ）またはＢＤ（Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ）などを含んでもよい。
　抽出部１２が備えるメモリは、撮像装置１の動作に関する各種情報またはパラメータを格納してもよい。メモリは、抽出部１２で実行されるプログラムを格納してもよい。メモリは、抽出部１２のワークメモリとして機能してもよい。メモリは、第１の画像または識別情報等を格納してもよい。
　出力部１３は、抽出部１２が取得した識別情報を表示装置２が備える入力部２１に出力する。
　図２において、出力部１３と入力部２１との間では有線接続ではなく無線接続されている例を示しているが、段落［００１２］に記載しているように、出力部１３と入力部２１との間で有線接続されてもよい。
　図３は、精算処理システムの第１の実施形態に含まれる表示装置２の機能ブロック図である。
　表示装置２は、入力部２１、制御部２２、表示部２３及び取得部２４を含んで構成されている。
　入力部２１は、撮像装置１が備える出力部１３が出力した識別情報の入力を受け付ける。その後、入力部２１は、受け付けた識別情報を後述する制御部２２に送信する。
　図３に示すように、制御部２２は判定部２２１及びメモリ２２２を含んで構成されている。
　判定部２２１は、後述する各種判定処理を行う。
　判定部２２１は、プロセッサを含んで構成されている。プロセッサは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）またはＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）などを含んでもよい。
　メモリ２２２は、例えば、表示装置２の動作に関する各種情報またはパラメータを格納する。即ち、表示装置２の機能に係るもの全て、制御部２２に入出力される各種情報全てがメモリ２２２を介して処理される。メモリ２２２は、判定部２２１で実行されるプログラムを格納してもよい。メモリ２２２は、判定部２２１のワークメモリとして機能してもよい。メモリ２２２は、撮像画像、識別情報または後述する表示画像等を格納してもよい。
　メモリ２２２は、半導体メモリ、磁気メモリまたは光メモリなどを含んでもよい。半導体メモリは、揮発性メモリまたは不揮発性メモリなどを含んでもよい。磁気メモリは、例えばハードディスクまたは磁気テープ等を含んでもよい。光メモリは、例えばＣＤ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ）、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｃ）、またはＢＤ（Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ）などを含んでもよい。
　判定部２２１は、後述する取得部２４から入力される、キャッシュレジスタ３の外部出力情報に基づき、入力部２１から送信された識別情報を含む表示画像を生成し、これを表示部２３上に更新表示するか否かを判定する。更新表示とは、表示部２３で既に表示画像が表示されている場合、この表示画像を新たなものに更新することを意味する。即ち、判定部２２１に２つ以上の識別情報が送信された場合、最初に第一の識別情報を含む表示画像を表示部２３に表示し、その後第二の識別情報を含む識別情報を表示し、さらにその後第三の識別情報を含む識別情報を表示するといった表示処理が更新表示であると換言できる。外部出力情報についての詳細な説明は、後述する取得部２４と併せて後段で述べる。
　表示画像は、後述するキャッシュレジスタ３が備える読取部３１が識別情報を読み取りやすいように、例えばトリミング処理または識別情報の再配置といった補正処理を行ったうえで生成されてもよい。
　判定部２２１が表示部２３に表示画像を更新表示させるためには、後述するキャッシュレジスタ３が識別情報を検出し、撮像対象を識別／登録することが求められる。即ち、判定部２２１は、外部出力情報に基づき、後述するキャッシュレジスタ３が識別情報を検出し、撮像対象を識別／登録したか否かを判定すると換言できる。
　判定部２２１が、キャッシュレジスタ３が表示画像に含まれる識別情報を検出し、撮像対象を識別したと判定した場合、判定部２２１は、後述する表示部２３に表示画像の更新表示を行う。
　更新表示は、例えば更新後の表示画像を表示する前に更新前の表示画像を停止しホワイトアウトした画像もしくはその他の識別情報を含まない画像を表示することを含めてもよい。
　表示部２３は、表示画像を、制御部２２を介して読取部３１に対して表示する。
　表示部２３は、例えば液晶ディスプレイ、有機ＥＬ（Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）ディスプレイまたは無機ＥＬディスプレイ等の表示デバイスを含んで構成されている。
　取得部２４は、キャッシュレジスタ３の外部出力情報を取得し、判定部２２１に送信する。取得部２４についての詳細な説明は後段で述べる。
　図１に示すように、キャッシュレジスタ３は、読取部３１、識別部３２、計算処理部３３、操作画面３４及びスピーカ３５を含んで構成されている。ただし、操作画面３４及びスピーカ３５については、何れか一方を省略してもよい。
　読取部３１は、表示装置２が備える表示部２３が表示した識別情報を読み取って解析し、撮像対象の種別の識別に用いる管理コードを取得する。管理コードとは、撮像対象の品名に紐づけられるもので、例えばＪＡＮコードであってもよい。読取部３１は、取得した管理コードを識別部３２に送信する。
　読取部３１は、例えば光学式リーダであってもよい。光学式リーダは、例えばペンリーダ、ＣＣＤタッチリーダ、レーザスキャナ、２次元バーコードリーダまたは定置式バーコードリーダの何れかであってもよい。
　識別部３２は、読取部３１が取得した管理コードに基づいて撮像対象を識別する。撮像対象を識別するとは、撮像対象の品名または金額を特定することを含む。
　計算処理部３３は、識別部３２が識別した撮像対象の品名または金額等に基づいて登録／精算処理を行う。登録処理とは、例えば識別部３２が識別した１つの撮像対象の金額を算出し、リスト上に登録することであってもよい。このとき、計算処理部３３は、リスト上に登録された撮像対象の金額の合算値を算出してもよい。精算処理とは、精算処理実行時にリスト上に登録された１つ以上の撮像対象の合算値に基づき、精算を行うことであってもよい。
　識別部３２及び計算処理部３３は、プロセッサ及びメモリを含んで構成されている。プロセッサは、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）またはＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）などを含んでもよい。メモリは、半導体メモリ、磁気メモリまたは光メモリなどを含んでもよい。半導体メモリは、揮発性メモリまたは不揮発性メモリなどを含んでもよい。磁気メモリは、例えばハードディスクまたは磁気テープ等を含んでもよい。光メモリは、例えばＣＤ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ）、ＤＶＤ（Ｄｉｇｉｔａｌ　Ｖｅｒｓａｔｉｌｅ　Ｄｉｓｃ）またはＢＤ（Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ）などを含んでもよい。
　識別部３２及び計算処理部３３が備えるメモリは、キャッシュレジスタ３の動作に関する各種情報またはパラメータを格納してもよい。メモリは、識別部３２及び計算処理部３３で実行されるプログラムを格納してもよい。メモリは、識別部３２及び計算処理部３３のワークメモリとして機能してもよい。
　なお、識別部３２及び計算処理部３３は、プロセッサ及びメモリの一部または全部を共有としてもよいし、別個に備えてもよい。
　操作画面３４は、識別部３２及び計算処理部３３で識別、登録または精算処理を行った撮像対象に関するデータを表示し、これに対してユーザがキャッシュレジスタ３を操作する際のインタフェースとして機能する。ユーザが操作画面３４を介してキャッシュレジスタ３へ行う操作とは、例えば計算処理部３３が行った登録／精算処理の結果の修正、及び、清算処理の結果の確定等を含む。
　操作画面３４は、例えば液晶ディスプレイ、有機ＥＬ（Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）ディスプレイまたは無機ＥＬディスプレイ等の表示デバイスを含んで構成されている。なお、操作画面３４上に表示される画面の操作は、タッチ操作、キーボード操作、マウス操作またはトラックボール操作の何れかを含んでよい。操作画面３４の操作にタッチ操作が含まれる場合、操作画面３４は感圧式または静電式のタッチパネルを備えてもよい。操作画面３４の操作にキーボード操作、マウス操作またはトラックボール操作が含まれる場合、操作画面３４とは別に入力キーボード、マウスまたはトラックボールが備えられてもよい。
　スピーカ３５は、計算処理部３３にて撮像対象を識別し、登録処理を行った場合、読取音を出力する。
　スピーカ３５は、例えば圧電スピーカを含んで構成されている。スピーカ３５が出力する読取音は、例えばブザー音またはアナウンス音等であってもよい。さらに、読取音は、例えば計算処理部３３の登録処理の成否等に応じて異なるものであってもよい。
　ここで、図４から６を用いて、第１の実施形態における、取得部２４が取得する外部出力情報及び判定部２２１の判定処理方法について説明する。
　図４は、取得部２４による外部出力情報の取得イメージ図である。図４で示されるように、取得部２４は、キャッシュレジスタ３の外部出力情報として操作画面３４を含む撮像範囲ＩＲを撮像し、取得した撮像画像を判定部２２１に送信する。判定部２２１は、取得した撮像画像に基づいて判定を行う。
　第１の実施形態において、取得部２４は、カメラを含んで構成されている。カメラは、撮像光学系及び撮像素子を含んで構成されている。撮像光学系は、例えば、１個以上のレンズ及び絞りなどの光学部材を含む。レンズは、焦点距離に囚われずどのようなものであってもよく、例えば、一般的なレンズ、魚眼レンズを含む広角レンズまたは焦点距離が可変であるズームレンズであってもよい。撮像光学系は、被写体像を撮像素子の受光面に結像させる。撮像素子は、例えば、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサまたはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ－Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサなどを含む。撮像素子は、受光面上に結像された被写体像を撮像して撮像画像を生成する。撮像部１１は任意のフレームレートで連続的に静止画を撮像してもよい。連続的に静止画を撮像するということは、動画を撮像すると換言できる。
　図５及び図６は、それぞれ表示装置が取得する外部出力情報の更新前及び更新後の操作画面のイメージ図である。図５と図６の差分として、図６において枠で囲っている部分に示すように商品ＥＥＥが新たに追加され、合計金額が更新されていることが挙げられる。
　判定部２２１は、図５及び図６に示したような操作画面３４の変化を取得部２４が取得する撮像画像を介して検出する。
　取得部２４が連続的に静止画を撮像することで撮像画像を生成する場合、図６に示すように登録された撮像対象が追加されたり合計金額が更新されたりする場合がある。この場合、生成した撮像画像のなかでの変化の発生を以て、判定部２２１は、キャッシュレジスタ３が識別情報を検出し、撮像対象を識別／登録したと判定してもよい。
　次に、図７を用いて、第１の実施形態における、表示装置２の更新表示処理に係るフローを、撮像装置１及びキャッシュレジスタ３の処理にも触れながら説明する。本説明において、２つの撮像対象をそれぞれ第１の購買商品及び第２の購買商品とし、撮像対象が２つの場合として説明を行う。なお、本記載に基づいて撮像対象が３つ以上の場合においても同様の処理を行えるように処理フローを構築してもよい。このことは第２の実施形態及び第３の実施形態における更新表示処理フローに係る説明についても同様である。
　＜Ｓ００１＞
　撮像装置１は、撮像部１１によって第１の購買商品を撮像して撮像画像を生成し、さらに抽出部１２によって撮像画像から第１の購買商品の識別情報を抽出する。その後、処理は、＜Ｓ００２＞に進む。
　＜Ｓ００２＞
　抽出部１２によって第１の購買商品の識別情報を抽出した後、撮像装置１は、出力部１３を介して表示装置２に第１の購買商品の識別情報を送信する。その後、処理は、＜Ｓ００３＞に進む。
　＜Ｓ００３＞
　出力部１３によって第１の購買商品の識別情報を表示装置２に送信した後、表示装置２は、撮像装置１から入力部２１に送信された第１の購買商品の識別情報をメモリ２２２に格納する。その後、処理は、＜Ｓ００４＞に進む。
　＜Ｓ００４＞
　メモリ２２２が第１の購買商品の識別情報を格納した後、表示装置２は、現時点で表示部２３が何れの画像も表示していないことを確認した上で、判定部２２１は、第１の購買商品の識別情報を含む表示画像を生成し、第１の購買商品の識別情報を含む表示画像を表示部２３に表示させる。その後、処理は、＜Ｓ００５＞に進む。
　＜Ｓ００５＞
　表示部２３が第１の購買商品の識別情報を含む表示画像を表示した後、撮像装置１は、撮像部１１によって第２の購買商品を撮像して撮像画像を生成し、さらに抽出部１２によって撮像画像から第２の購買商品の識別情報を抽出する。その後、処理は、＜Ｓ００６＞に進む。
　＜Ｓ００６＞
　抽出部１２によって第２の購買商品の識別情報を抽出した後、撮像装置１は、出力部１３を介して表示装置２に第２の購買商品の識別情報を送信する。その後、処理は、＜Ｓ００７＞に進む。
　＜Ｓ００７＞
　出力部１３によって第２の購買商品の識別情報を表示装置２に送信した後、表示装置２は、撮像装置１から入力部２１に送信された第２の購買商品の識別情報をメモリ２２２に格納する。その後、処理は、＜Ｓ００８＞に進む。
　＜Ｓ００８＞
　メモリ２２２が第２の購買商品の識別情報を格納した後、表示装置２は、取得部２４を介してキャッシュレジスタ３が備える操作画面３４を撮像した撮像画像の取得を開始する。ここで得られた操作画面３４の撮像画像は、逐次判定部２２１に送信される。その後、処理は、＜Ｓ００９＞に進む。
　＜Ｓ００９＞
　取得部２４によってキャッシュレジスタ３が備える操作画面３４を撮像した撮像画像の取得が開始された後、キャッシュレジスタ３は、読取部３１を介して第１の購買商品の表示画像に含まれる識別情報を読み取り、識別部３２及び計算処理部３３を介して第１の購買商品の識別／登録処理を行う。その後、処理は、＜Ｓ０１０＞に進む。
　＜Ｓ０１０＞
　識別部３２及び計算処理部３３によって第１の購買商品の識別／登録処理を行われた後、キャッシュレジスタ３は、操作画面３４上で識別／登録処理された第１の購買商品に係る更新が反映される。その後、処理は、＜Ｓ０１１＞に進む。
　＜Ｓ０１１＞
　操作画面３４上で登録処理された第１の購買商品に係る更新が反映された後、または＜Ｓ０１２＞において操作画面３４上で第１の購買商品に係る更新がなかったと判定された場合、表示装置２は、取得部２４を介してキャッシュレジスタ３が備える操作画面３４を撮像した最新の撮像画像を取得する。このとき、表示装置２は、＜Ｓ００８＞で撮像画像の取得を開始していることから、少なくとも２枚以上の撮像画像を取得していることを満たしているものとする。その後、処理は、＜Ｓ０１２＞に進む。なお、取得した撮像画像は一定期間メモリ２２２に格納され、その後削除されてもよい。
　＜Ｓ０１２＞
　取得部２４によってキャッシュレジスタ３が備える操作画面３４を撮像した最新の撮像画像が取得された後、表示装置２は、判定部２２１を介して取得部２４によって撮像された操作画面３４の撮像画像から、操作画面３４上で登録処理された第１の購買商品に係る更新があったか否かを判定する。換言すれば、取得部２４によって撮像された操作画面３４の撮像画像に基づいて、判定部２２１は、キャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したか否かを判定する。第１の購買商品に係る更新があったと判定された場合、＜Ｓ０１３＞に進む。第１の購買商品に係る更新がなかったと判定された場合、処理は、＜Ｓ０１１＞に戻る。
　＜Ｓ０１３＞
　操作画面３４上で第１の購買商品に係る更新があったと判定された場合、表示装置２は、判定部２２１を介してキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断する。その後、処理は、＜Ｓ０１４＞に進む。
　＜Ｓ０１４＞
　判定部２２１によってキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断された場合、表示装置２は、判定部２２１を介して第２の購買商品の識別情報を含む表示画像を生成し、第１の購買商品の識別情報を含む表示画像に替わって表示部２３に表示させる。
　［第２の実施形態］
　第１の実施形態においては、キャッシュレジスタ３の操作画面３４の変化に基づいて表示部２３の表示画像の更新を行った。第２の実施形態においては、キャッシュレジスタ３のスピーカ３５の出力音に基づいて表示部２３の表示画像の更新を行う。
　以下、第２の実施形態の説明においては、第１の実施形態との相違点に重点を置いて説明を行う。
　図８及び図９を用いて、第２の実施形態における、取得部２４が取得する外部出力情報及び判定部２２１の判定処理方法について説明を行う。
　図８は、取得部２４による外部出力情報の取得イメージ図である。図８で示されるように、取得部２４は、キャッシュレジスタ３の外部出力情報としてキャッシュレジスタ３の出力音声を集音できる状態で集音を行い、取得した音声を判定部２２１に送信する。出力音制とは、例えばスピーカ３５が出力する読取音を含んでもよい。判定部２２１は、取得した音声に基づいて判定を行う。
　第２の実施形態において、取得部２４は、１つ以上のマイクを含んで構成されている。マイクは、例えば、コンデンサマイクまたはダイナミックマイクであってもよい。マイクは、スピーカ３５が出力する読取音をよりピンポイントで集音できるように指向性を有するものであってもよい。
　判定部２２１は、事前に読取音に対応する音声波形について学習を行い、取得部２４が取得した音声に対して、読取音に対応する音声波形の検出を試みる。判定部２２１が行う音声波形の検出方法は、例えばＤＰ（Ｄｙｎａｍｉｃ　Ｐｒｏｇｒａｍｍｉｎｇ）マッチングに代表されるようなパターンマッチング手法であってもよいし、その他公知の音声認証／照合技術を用いてもよい。
　判定部２２１が読取音に対応する音声波形の検出をしたと判定した場合、判定部２２１は、キャッシュレジスタ３が識別情報を検出し、撮像対象を識別／登録したと判定してもよい。
　次に、図９を用いて、第２の実施形態における、表示装置２の更新表示処理に係るフローを、撮像装置１及びキャッシュレジスタ３の処理にも触れながら説明する。
　＜Ｓ１０１＞から＜Ｓ１０７＞
　当該範囲のステップは、第１の実施形態における＜Ｓ００１＞から＜Ｓ００７＞にそれぞれ相当するため、ここでは説明を省略する。＜Ｓ１０７＞においてメモリ２２２が第２の購買商品の識別情報を格納した後、処理は、＜Ｓ１０８＞に進む。
　＜Ｓ１０８＞
　メモリ２２２が第２の購買商品の識別情報を格納した後、表示装置２は、取得部２４を介して音声の取得を開始する。ここで得られた音声は、逐次判定部２２１に送信され、音声波形の解析も併せて行う。その後、処理は、＜Ｓ１０９＞に進む。
　＜Ｓ１０９＞
　取得部２４による音声の取得及び判定部２２１による音声波形の解析が開始された後、キャッシュレジスタ３は、読取部３１を介して第１の購買商品の表示画像に含まれる識別情報を読み取り、識別部３２及び計算処理部３３を介して第１の購買商品の識別／登録処理を行う。その後、処理は、＜Ｓ１１０＞に進む。
　＜Ｓ１１０＞
　識別部３２及び計算処理部３３によって第１の購買商品の識別／登録処理を行われた後、キャッシュレジスタ３は、第１の購買商品が識別／登録処理されたことを意味する読取音をスピーカ３５から出力する。その後、処理は、＜Ｓ１１１＞に進む。
　＜Ｓ１１１＞
　スピーカ３５から読取音が出力された後、または＜Ｓ１１２＞において読取音に対応する音声波形が検出されなかったと判定された後、表示装置２は、取得部２４を介して最新の音声を取得し、さらに、判定部２２１に送信し、判定部２２１において音声波形の解析を行う。その後、処理は、＜Ｓ１１２＞に進む。
　＜Ｓ１１２＞
　取得部２４によって最新の音声の取得及び判定部２２１による音声波形の解析がされた後、表示装置２は、判定部２２１によって読取音に対応する音声波形が検出されたか否かを判定する。換言すれば、取得部２４によって取得された音声に基づいて、判定部２２１は、キャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したか否かを判定する。読取音に対応する音声波形が検出されたと判定された場合、処理は、＜Ｓ１１３＞に進む。読取音に対応する音声波形が検出されなかったと判定された場合、処理は、＜Ｓ１１１＞に戻る。
　＜Ｓ１１３＞
　読取音に対応する音声波形が検出されたと判定された場合、表示装置２は、判定部２２１を介してキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断する。その後、処理は、＜Ｓ１１４＞に進む。
　＜Ｓ１１４＞
　判定部２２１によってキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断された場合、表示装置２は、判定部２２１を介して第２の購買商品の識別情報を含む表示画像を生成し、第１の購買商品の識別情報を含む表示画像に替わって表示部２３に表示させる。
　［第３の実施形態］
　第２の実施形態においては、キャッシュレジスタ３のスピーカ３５の出力音に基づいて表示部２３の表示画像の更新を行った。第３の実施形態においては、キャッシュレジスタ３の操作画面３４の変化及びスピーカ３５の出力音に基づいて表示部２３の表示画像の更新を行う。換言すれば、第３の実施形態は、第１及び第２の実施形態の組合せである。
　第３の実施形態において、取得部２４は、カメラ及びマイクを含んで構成されている。なお、カメラ及びマイクの構成については、第１及び第２の実施形態の説明に係る記載を参照されたい。
　判定部２２１は、取得部２４が操作画面３４の変化及びスピーカ３５の出力音を略同一のタイミングでの検出の有無の判定を行う。ここでの略同一のタイミングとは、キャッシュレジスタ３が同一の撮像対象の登録処理において出力するタイミングの許容範囲内を意味する。即ち、判定部２２１は、使用するキャッシュレジスタ３の仕様に応じて略同一のタイミングの許容範囲を適宜調整してもよい。
　判定部２２１が、取得部２４が操作画面３４の変化及びスピーカ３５の出力音を略同一のタイミングで検出したと判定した場合、判定部２２１は、キャッシュレジスタ３が識別情報を検出し、撮像対象を識別／登録したと判定してもよい。
　次に、図１０を用いて、第２の実施形態における、表示装置２の更新表示処理に係るフローを、撮像装置１及びキャッシュレジスタ３の処理にも触れながら説明する。
　＜Ｓ２０１＞から＜Ｓ２０７＞
　当該範囲のステップは、第１の実施形態における＜Ｓ００１＞から＜Ｓ００７＞にそれぞれ相当するため、ここでは説明を省略する。＜Ｓ２０７＞においてメモリ２２２が第２の購買商品の識別情報を格納した後、処理は、＜Ｓ２０８＞に進む。
　＜Ｓ２０８＞
　メモリ２２２が第２の購買商品の識別情報を格納した後、表示装置２は、取得部２４を介して音声の取得を開始する。ここで得られた音声は、逐次判定部２２１に送信され、音声波形の解析も併せて行う。その後、処理は、＜Ｓ２０９＞に進む。
　＜Ｓ２０９＞
　取得部２４による音声の取得及び判定部２２１による音声波形の解析が開始された後、表示装置２は、取得部２４を介してキャッシュレジスタ３が備える操作画面３４を撮像した撮像画像の取得を開始する。その後、処理は、＜Ｓ２１０＞に進む。
　＜Ｓ２１０＞
　取得部２４によってキャッシュレジスタ３が備える操作画面３４を撮像した撮像画像の取得が開始された後、キャッシュレジスタ３は、読取部３１を介して第１の購買商品の表示画像に含まれる識別情報を読み取り、識別部３２及び計算処理部３３を介して第１の購買商品の識別／登録処理を行う。その後、処理は、＜Ｓ２１１＞に進む。
　＜Ｓ２１１＞
　識別部３２及び計算処理部３３によって第１の購買商品の識別／登録処理を行われた後、キャッシュレジスタ３は、第１の購買商品が登録処理されたことを意味する読取音をスピーカ３５から出力する。その後、処理は、＜Ｓ２１２＞に進む。
　＜Ｓ２１２＞
　スピーカ３５から読取音が出力された後、キャッシュレジスタ３は、操作画面３４上で登録処理された第１の購買商品に係る更新が反映される。その後、処理は、＜Ｓ２１３＞に進む。
　＜Ｓ２１３＞
　スピーカ３５から読取音が出力された後、または＜Ｓ２１４＞、＜Ｓ２１６＞または＜Ｓ２１７＞においてそれぞれ読取音に対応する音声波形が検出されなかった、操作画面３４上で第１の購買商品に係る更新がなかった、または読取音の出力と操作画面３４の更新タイミングが略同一ではなかったと判定された後、表示装置２は、取得部２４を介して最新の音声を取得し、さらに、判定部２２１に送信し、判定部２２１において音声波形の解析を行う。その後、処理は、＜Ｓ２１４＞に進む。
　＜Ｓ２１４＞
　取得部２４による最新の音声の取得及び判定部２２１による音声波形の解析がされた後、表示装置２は、判定部２２１によって読取音に対応する音声波形が検出されたか否かを判定する。換言すれば、取得部２４によって取得された音声に基づいて、判定部２２１は、キャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したか否かを判定する。読取音に対応する音声波形が検出されたと判定された場合、処理は、＜Ｓ２１５＞に進む。読取音に対応する音声波形が検出されなかったと判定された場合、処理は、＜Ｓ２１３＞に戻る。
　＜Ｓ２１５＞
　判定部２２１において読取音に対応する音声波形が検出されたと判定された場合、表示装置２は、取得部２４を介してキャッシュレジスタ３が備える操作画面３４を撮像した最新の撮像画像を取得する。このとき、表示装置２は、＜Ｓ２０９＞で撮像画像の取得を開始していることから、少なくとも２枚以上の撮像画像を取得していることを満たしているものとする。その後、処理は、＜Ｓ２１６＞に進む。なお、取得した撮像画像は一定期間メモリ２２２に格納され、その後削除されてもよい。
　＜Ｓ２１６＞
　取得部２４によってキャッシュレジスタ３が備える操作画面３４を撮像した最新の撮像画像が取得された後、表示装置２は、判定部２２１を介して取得部２４によって撮像された操作画面３４の撮像画像から、操作画面３４上で登録処理された第１の購買商品に係る更新があったか否かを判定する。換言すれば、取得部２４によって撮像された操作画面３４の撮像画像に基づいて、判定部２２１は、キャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したか否かを判定する。第１の購買商品に係る更新があったと判定された場合、処理は、＜Ｓ２１７＞に進む。第１の購買商品に係る更新がなかったと判定された場合、処理は、＜Ｓ２１３＞に戻る。
　＜Ｓ２１７＞
　操作画面３４上で第１の購買商品に係る更新があったと判定された場合、表示装置２は、判定部２２１を介して取得部２４によって撮像された操作画面３４の撮像画像から、操作画面３４上で登録処理された第１の購買商品に係る更新が、読取音に対応する音声波形が検出されたのと略同一のタイミングの範囲内であったか否かを判定する。読取音に対応する音声波形が検出されたのと略同一のタイミングの範囲内で第１の購買商品に係る更新があったと判定された場合、処理は、＜Ｓ２１８＞に進む。読取音に対応する音声波形が検出されたのと略同一のタイミングの範囲内で第１の購買商品に係る更新がなかったと判定された場合、処理は、＜Ｓ２１３＞に戻る。
　＜Ｓ２１８＞
　読取音に対応する音声波形が検出されたのと略同一のタイミングの範囲内で読取音に対応する音声波形があったと判定された場合、表示装置２は、判定部２２１を介してキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断する。その後、処理は、＜Ｓ２１９＞に進む。
　＜Ｓ２１９＞
　判定部２２１によってキャッシュレジスタ３が第１の購買商品の識別情報を検出し、これを識別／登録したと判断された場合、表示装置２は、判定部２２１を介して第２の購買商品の識別情報を含む表示画像を生成し、第１の購買商品の識別情報を含む表示画像に替わって表示部２３に表示させる。
　ここまで、表示装置及び表示方法について、本開示を諸図面及び諸実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。
　例えば、諸実施例に記載の機能、手段及びステップ等は、論理的に矛盾しないように再配置可能であり、複数の手段またはステップ等を１つに組み合わせたり、あるいは分割したりすることが可能である。
　また、段落［００３７］等に記載した表示装置２が備える表示部２３の更新表示について、第１の購買商品と第２の購買商品が同一の物であった場合、同一の識別情報を含む表示画像を連続して表示することになるため、キャッシュレジスタ３の仕様によっては更新表示の際に問題が発生する可能性がある。そのため、例えば判定部２２１において、第１の購買商品と第２の購買商品が同一か否かを判定し、同一であった場合、表示部２３における更新表示において更新後の表示画像を表示するまでに所定の長さの待機時間を設定してもよい。待機時間の間、表示部２３はホワイトアウトした表示画像または識別情報を含まない表示画像を表示してもよい。
　さらに、これまでに述べたように、本開示の解決手段を表示装置、及び表示方法として説明してきたが、本開示は、これらを含む態様としても実現し得るものであり、また、これらに実質的に相当する、システム、プログラム及びプログラムを記録した記憶媒体としても実現し得るものであり、本開示の範囲にはこれらも包含されるものと理解されたい。
　１　　　　撮像装置
　１１　　　撮像部
　１２　　　抽出部
　１３　　　出力部
　２　　　　表示装置
　２１　　　入力部
　２２　　　制御部
　２２１　　判定部
　２２２　　メモリ
　２３　　　表示部
　２４　　　取得部
　３　　　　キャッシュレジスタ
　３１　　　読取部
　３２　　　識別部
　３３　　　計算処理部
　３４　　　操作画面
　３５　　　スピーカ
 

Claims (11)

  1. 　購買商品の識別情報を含む表示画像をキャッシュレジスタの読取部に対して表示する表示部と、
    　前記キャッシュレジスタの外部出力情報を取得する取得部と、
    　前記外部出力情報に基づいて前記表示部の表示を制御する制御部とを備え、
    　前記キャッシュレジスタによる第１の購買商品の前記外部出力情報に基づいて、前記キャッシュレジスタが前記第１の購買商品の識別処理を行ったと前記制御部が判定した場合、前記制御部は、第２の購買商品の前記識別情報を含む前記表示画像を前記表示部に表示させる、
    表示装置。
  2. 　前記識別情報は、１次元バーコードまたは２次元バーコードの何れかである、請求項１に記載の表示装置。
  3. 　前記取得部は、カメラを含み、
    　前記取得部は、前記外部出力情報として前記カメラが撮像した撮像画像を取得する、請求項１または２に記載の表示装置。
  4. 　前記撮像画像は、前記キャッシュレジスタの操作画面を含む、請求項３に記載の表示装置。
  5. 　前記制御部は、前記操作画面の変化を検出した場合、
    　前記キャッシュレジスタが第１の購買商品の識別処理を行ったと判断する、請求項４に記載の表示装置。
  6. 　前記取得部は、マイクを含み、
    　前記取得部は、前記外部出力情報として前記マイクが取得した音声を取得する、請求項１または２に記載の表示装置。
  7. 　前記音声は、前記キャッシュレジスタの出力音声を含む、請求項６に記載の表示装置。
  8. 　前記制御部は、前記出力音声として前記キャッシュレジスタの読取音を検出した場合、前記キャッシュレジスタが第１の購買商品の識別処理を行ったと判断する、請求項７に記載の表示装置。
  9. 　前記取得部は、カメラ及びマイクを含み、
    　前記制御部は、前記取得部が、前記カメラが撮像した撮像画像及び前記マイクが取得した音声を含む前記外部出力情報に基づいての取得の検出を判断する、請求項１または２に記載の表示装置。
  10. 　前記制御部は、前記取得部が前記撮像画像である前記キャッシュレジスタの操作画面の変化及び前記音声である前記キャッシュレジスタが出力する読取音を略同一のタイミングで検出した場合、前記キャッシュレジスタが第１の購買商品の登録処理を行ったと判断する、請求項９に記載の表示装置。
  11. 　第１の購買商品の識別情報を含む表示画像をキャッシュレジスタの読取部に対して表示し、
    　前記キャッシュレジスタの外部出力情報を取得し、
    　前記キャッシュレジスタによる第１の購買商品の前記外部出力情報に基づいて、前記キャッシュレジスタが前記第１の購買商品の識別処理を行ったと判定した場合、
    　第２の購買商品の前記識別情報を含む前記表示画像を表示する、
    表示方法。
     
PCT/JP2022/001844 2021-01-20 2022-01-19 表示装置及び表示方法 Ceased WO2022158494A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202280010898.3A CN116745826A (zh) 2021-01-20 2022-01-19 显示装置以及显示方法
JP2022576723A JPWO2022158494A1 (ja) 2021-01-20 2022-01-19
US18/262,009 US20240087428A1 (en) 2021-01-20 2022-01-19 Display device and display method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021007244 2021-01-20
JP2021-007244 2021-01-20

Publications (1)

Publication Number Publication Date
WO2022158494A1 true WO2022158494A1 (ja) 2022-07-28

Family

ID=82549455

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/001844 Ceased WO2022158494A1 (ja) 2021-01-20 2022-01-19 表示装置及び表示方法

Country Status (4)

Country Link
US (1) US20240087428A1 (ja)
JP (1) JPWO2022158494A1 (ja)
CN (1) CN116745826A (ja)
WO (1) WO2022158494A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021103442A (ja) * 2019-12-25 2021-07-15 京セラ株式会社 画像データ登録システム、画像データ登録方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000231669A (ja) * 1999-02-09 2000-08-22 Elex Kk カードシステム
JP2004005064A (ja) * 2002-05-30 2004-01-08 Casio Comput Co Ltd 印刷販売システム
WO2007116888A1 (ja) * 2006-04-03 2007-10-18 Sony Corporation 表示装置及びこの表示装置を用いたデータ処理方法並びにデータ処理システム
JP2014222441A (ja) * 2013-05-14 2014-11-27 株式会社ジャックス 支払支援システム、支払支援方法及び支払支援プログラム
JP2020184141A (ja) * 2019-05-07 2020-11-12 共同印刷株式会社 端末装置、会計処理方法および会計処理プログラム、並びに、会計処理システム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5444656B2 (ja) * 2008-07-31 2014-03-19 株式会社寺岡精工 Ｐｏｓシステム
JP5476808B2 (ja) * 2009-06-17 2014-04-23 株式会社寺岡精工 Ｐｏｓレジスタ
US20180144379A1 (en) * 2016-11-22 2018-05-24 Kabushiki Kaisha Toshiba Image forming apparatus and sales support system
JP2019164501A (ja) * 2018-03-19 2019-09-26 日本電気株式会社 情報処理装置、情報処理方法、プログラム及び携帯端末用プログラム
JP7166178B2 (ja) * 2019-01-21 2022-11-07 東芝テック株式会社 購買支援装置、店舗システム及び制御プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000231669A (ja) * 1999-02-09 2000-08-22 Elex Kk カードシステム
JP2004005064A (ja) * 2002-05-30 2004-01-08 Casio Comput Co Ltd 印刷販売システム
WO2007116888A1 (ja) * 2006-04-03 2007-10-18 Sony Corporation 表示装置及びこの表示装置を用いたデータ処理方法並びにデータ処理システム
JP2014222441A (ja) * 2013-05-14 2014-11-27 株式会社ジャックス 支払支援システム、支払支援方法及び支払支援プログラム
JP2020184141A (ja) * 2019-05-07 2020-11-12 共同印刷株式会社 端末装置、会計処理方法および会計処理プログラム、並びに、会計処理システム

Also Published As

Publication number Publication date
US20240087428A1 (en) 2024-03-14
JPWO2022158494A1 (ja) 2022-07-28
CN116745826A (zh) 2023-09-12

Similar Documents

Publication Publication Date Title
JP7710056B2 (ja) 情報処理システム、情報処理装置、情報処理方法
US9792692B2 (en) Depth-based image element removal
JP7715251B2 (ja) 情報処理システム、顧客特定装置、情報処理方法及びプログラム
CN110088813A (zh) 信息处理系统、顾客识别装置、信息处理方法和程序
JP6885814B2 (ja) 商品読取装置および商品読取プログラム
JP2024012188A (ja) 商品損失防止のための映像分析基盤のセルフチェックアウト装置及びその制御方法
WO2022158494A1 (ja) 表示装置及び表示方法
WO2021251280A1 (ja) 情報処理装置、情報処理方法、情報処理プログラム及び情報処理システム
JP7235119B2 (ja) 処理装置、会計装置、処理方法及びプログラム
US11144897B2 (en) Methods and systems to detect items left in merchandise carriers
JP2023037716A (ja) プログラム、電子機器の制御方法、電子機器
US20170083891A1 (en) Information processing apparatus and information processing method
US20250037419A1 (en) Object recognition device and object recognition method
JP7578205B2 (ja) 処理システム、処理方法及びプログラム
WO2022092240A1 (ja) 精算処理システム、表示装置及び表示方法
KR102810148B1 (ko) 무인점포에 비치된 상품의 도난을 방지하는 전자장치 및 이의 동작방법
EP4083950A1 (en) Image data registration system and image data registration method
JP7810875B2 (ja) 情報処理装置、情報処理装置の制御方法、プログラム
JP7290842B2 (ja) 情報処理システム、情報処理システムの制御方法、プログラム
JP7704267B2 (ja) 処理装置、処理方法及びプログラム
JP2025537556A (ja) 走査型イメージング装置を備えた光学イメージングシステム、方法、システムおよびコンピュータプログラム
KR20240151444A (ko) 문서에 대한 정보를 제공하는 방법 및 디바이스
JP6361302B2 (ja) 情報処理装置、制御方法、及びプログラム
JP2021103405A (ja) 画像データの登録システム、画像データの登録方法及び精算システム
WO2021171553A1 (ja) 処理装置、処理方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22742616

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18262009

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2022576723

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 202280010898.3

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22742616

Country of ref document: EP

Kind code of ref document: A1