WO2016002695A1 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
WO2016002695A1
WO2016002695A1 PCT/JP2015/068632 JP2015068632W WO2016002695A1 WO 2016002695 A1 WO2016002695 A1 WO 2016002695A1 JP 2015068632 W JP2015068632 W JP 2015068632W WO 2016002695 A1 WO2016002695 A1 WO 2016002695A1
Authority
WO
WIPO (PCT)
Prior art keywords
symbol
detected
product
product information
information
Prior art date
Application number
PCT/JP2015/068632
Other languages
English (en)
French (fr)
Inventor
裕康 山口
元子 三浦
卓郎 佐久間
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2016531353A priority Critical patent/JPWO2016002695A1/ja
Publication of WO2016002695A1 publication Critical patent/WO2016002695A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated

Definitions

  • the present invention relates to a technique for associating product information and service information.
  • POS Point Of Sale
  • An operator of a POS terminal causes the POS terminal to read a bar code attached to a product, and then performs a discount operation by visually observing a discount sticker attached to the product.
  • Patent Document 1 proposes a POS terminal that performs settlement of a product with a barcode representing product information and a barcode representing discount information. This POS terminal performs a discount on the target product by further reading not only the barcode representing the product information but also the barcode representing the discount information.
  • the POS terminal detects a product information symbol (a bar code representing product information) and a service information symbol (a bar code representing discount information).
  • the detection order of the product information symbol and the service information symbol may not be constant.
  • the product information symbol may be detected first and the service information symbol may be detected later.
  • the service information symbol may be detected first and the product information symbol may be detected later.
  • Such a phenomenon is caused by the fact that the operator holds the product over the scanning device of the POS terminal in a non-constant manner and the arrangement of each symbol is not constant in each product.
  • it is desired that the product information of the target product and the service information provided to the product are accurately associated with each other at the POS terminal.
  • the present invention provides a technique for accurately associating product information of a product with service information assigned to the product.
  • the first aspect relates to an information processing apparatus.
  • the information processing apparatus includes a product detection unit that detects a product information symbol, a service detection unit that detects a service information symbol, and after detecting one of the product information symbol and the service information symbol, An association means for associating product information obtained using each detected symbol with service information when the other symbol is detected before the predetermined time elapses; Then, the association means uses the previously detected product information symbol when the service information symbol is not detected and the next product information symbol is detected before the predetermined time elapses after the product information symbol is detected. It is determined that there is no service information associated with the product information obtained.
  • the second aspect relates to an information processing method executed by at least one computer.
  • the computer detects the product information symbol, detects the service information symbol, and after the detection of either the product information symbol or the service information symbol, a predetermined time has elapsed.
  • a process of associating the product information obtained using each detected symbol with the service information is executed, and in the process of associating the product information with the service information, the product information symbol is detected. If the service information symbol is not detected before the predetermined time elapses and the next product information symbol is detected, it is determined that there is no service information associated with the product information obtained using the previously detected product information symbol. Including.
  • another aspect of the present invention is a program that causes at least one computer to execute the method of the second aspect, and is a computer-readable recording medium that records such a program.
  • This recording medium includes a non-transitory tangible medium.
  • product information of a product and service information assigned to the product can be associated with each other accurately.
  • FIG. 6 is a flowchart showing a flow of the information processing apparatus in the first embodiment when a service information symbol is detected as a first symbol in FIG. 5. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part. It is a figure which illustrates the information stored in a matching storage part, and the screen displayed on a display part.
  • FIG. 1 is a diagram conceptually showing the processing configuration of the information processing apparatus in the first embodiment.
  • the information processing apparatus 10 includes a product detection unit 110, a service detection unit 120, an association unit 130, an association storage unit 132, a monitoring unit 140, a display processing unit 150, and an output. Part 160.
  • the product detection unit 110 detects a product information symbol from a product label or the like.
  • a “product label” is a member (a seal or the like) that displays a product information symbol attached to a product or a product packaging material, or an area where the product information symbol is printed on the product or the product packaging material. is there.
  • “Product information symbol” means a shape in which product information can be acquired, and includes a one-dimensional code or a two-dimensional code in which a product code is encoded, or a character string symbol (character string shape) representing product information. It is. “Product information” is some information related to the product, such as the name, price, or product code of the product.
  • the “product code” is product identification data formed from letters, numbers, symbols, and the like that are predetermined to specify each product.
  • a PLU (Price Look Up) code for example, a JAN (Japan Article Number) code
  • a Non-PLU code can be used.
  • product information such as the name and price of the product is acquired by referring to a storage unit (not shown) in which product information is stored based on the detected PLU code. If the product code is a Non-PLU code, product information is acquired from the detected Non-PLU code.
  • the “character string symbol representing product information” is a symbol from which some product information can be obtained by analyzing the symbol, for example, a product written on a packaging material or a sticker attached to the packaging material, etc.
  • the character string etc. which represent the name and price of are mentioned.
  • the character string symbol representing the product information is not limited to these examples.
  • the product detection unit 110 detects a product information symbol by analyzing an image in which the appearance of the product is captured using, for example, a known image analysis algorithm.
  • the commodity detection unit 110 can also detect a commodity information symbol based on the result of detecting the reflected light of the light irradiated to the commodity packaging material or the like using the light source and the light receiving element.
  • the product information symbol is a character string symbol, a known character recognition method is used.
  • the product detection unit 110 always operates asynchronously with the service detection unit 120 described later. However, the product detection unit 110 may periodically operate at a time interval shorter than a first predetermined time described later. In addition, since the product detection unit 110 and the service detection unit 120 operate asynchronously with each other, in this embodiment, the detection order of the product information symbol and the service information symbol is not constant. For example, for a product in which both a product information symbol and a service information symbol exist, the product information symbol may be detected first, or the service information symbol may be detected first.
  • the product detection unit 110 Since the product detection unit 110 always operates as described above, the product information symbol of the same product may be detected multiple times depending on how the product is held over the reading unit 108 described later. Therefore, when the product detection unit 110 detects a new product information symbol (current product information symbol) after the first predetermined time has elapsed from the timing when the previous product information symbol was detected, the product detection symbol 110 Treated as the next product information symbol. In other words, if a later product information symbol is detected before the first predetermined time has elapsed since the previous product information symbol was detected, the product detection unit 110 sets the subsequent product information symbol as the next product information symbol. Discard without treating as product information symbol.
  • the detection of the product information symbol by the product detection unit 110 means detection performed by the product detection unit 110 as a product information symbol of a different product among all the detection of the product information symbol.
  • the “first predetermined time” used here is calculated empirically or theoretically based on, for example, an actual product checkout operation such as how to hold the product over the reading unit 108 described later by the operator, and the product detection unit 110 is preset. Further, the “predetermined time” may be a time that differs for each operator.
  • the predetermined time can be optimized for each operator.
  • a different “predetermined time” is set in the information processing apparatus 10 (POS terminal or the like), and the predetermined time can be switched by the operator selecting an optimal time.
  • the optimum predetermined time may be derived from the learning result by the learning unit (not shown) of the information processing apparatus 10 based on the actual processing time, or the actual processing time. It may be calculated using an average value or an intermediate value.
  • the service detection unit 120 detects a service information symbol from the service label.
  • a “service label” is a member that displays a service information symbol attached to a product or a packaging material of the product.
  • Service information symbol means a figure in which service information can be acquired, and includes a one-dimensional code or a two-dimensional code in which a service code is encoded, or a character string symbol (character string figure) representing service information. It is.
  • the “service code” is service identification data formed from letters, numbers, symbols, and the like that are predetermined to identify each service.
  • Service information is information indicating the contents of all services given to each product.
  • the service information includes, for example, discount information such as “20 yen discount”, discount information such as “30% discount”, point premium information such as “5 times point grant”, and a service code that can specify each service.
  • the “character string symbol representing service information” is a symbol from which some service information can be obtained by analyzing the symbol, and is described on, for example, a product packaging material or a seal attached to a product packaging material And a character string representing a discount amount and a discount rate. Note that character string symbols representing service information are not limited to these examples.
  • the service detection unit 120 detects a service information symbol by analyzing an image in which the appearance of a product is captured using, for example, a known image analysis algorithm.
  • the service detection unit 120 can also detect a service information symbol based on a result of detecting reflected light of light irradiated on a product packaging material or the like using a light source and a light receiving element.
  • the service information symbol is a character string symbol, a known character recognition method is used.
  • the service detection unit 120 always operates asynchronously with the product detection unit 110. However, the service detection unit 120 may periodically operate at a time interval shorter than a second predetermined time described later.
  • the service detection unit 120 may detect the service information symbol of the same product multiple times. Therefore, when the service detection unit 120 detects a new service information symbol (current service information symbol) after the second predetermined time has elapsed since the timing at which the previous service information symbol was detected, the service detection symbol 120 continues to the new service information symbol. Service information symbol. In other words, if a later service information symbol is detected before the second predetermined time has elapsed since the previous service information symbol was detected, the service detection unit 120 changes the subsequent service information symbol to the next service information symbol. Discard instead of treating as a service information symbol.
  • detection of service information symbols by the service detection unit 120 means detection performed by the service detection unit 120 as a service information symbol of a different product among all detections of service information symbols.
  • the “second predetermined time” used here is, for example, empirical based on an actual commodity checkout operation such as how the operator holds the commodity over the reading unit 108 described later. Alternatively, it is theoretically calculated and preset in the service detection unit 120.
  • the association unit 130 is obtained using each detected symbol when the other symbol is detected before the third predetermined time elapses after the detection of one of the product information symbol and the service information symbol. Correlate product information with service information.
  • the “third predetermined time” used here is calculated empirically or theoretically based on, for example, an actual product checkout operation such as how to hold the product over the reading unit 108 described later by the operator. 130 is preset.
  • the association unit 130 uses each detected symbol when the other symbol is detected after the elapse of the third predetermined time after either one of the product information symbol and the service information symbol is detected. The product information obtained in this way is not associated with the service information.
  • the associating unit 130 displays the previously detected product information symbol. It is determined that there is no service information associated with the product information obtained by use. That is, the associating unit 130 determines the correspondence relationship between the product information obtained using each symbol detected by the product detecting unit 110 or the service detecting unit 120 and the service information. The association unit 130 of the present embodiment also associates product information and service information obtained using each symbol detected by the product detection unit 110 or the service detection unit 120 based on the correspondence relationship. 132. When the association unit 130 determines that there is no service information associated with the product information, the association unit 130 stores only the product information in the association storage unit 132 without associating the product information with the service information.
  • the association storage unit 132 stores product information and service information obtained using each symbol so that the correspondence can be determined.
  • FIG. 2 is a diagram illustrating an example of information stored in the association storage unit 132.
  • the “settlement product ID” indicates the registration order of the products registered by the operator to the settlement target, that is, the order in which the operator holds the products over the reading unit 108 described later.
  • the product information related to the same product and the service information are associated with each other by the “settlement product ID”.
  • the first line of FIG. 2 shows an example of information stored as a result of associating product information and service information with the association unit 130.
  • the association storage unit 132 may be provided in the information processing apparatus 10 or may be provided in another apparatus that is connected to the information processing apparatus 10 so as to be communicable.
  • the monitoring unit 140 monitors the elapsed time after detection of either the product information symbol or the service information symbol in order to determine whether the above-described third predetermined time has elapsed. For example, when each symbol is detected by the product detection unit 110 or the service detection unit 120, the monitoring unit 140 activates a timer for determining the elapsed time since the detection of each symbol. For example, the monitoring unit 140 holds the time when each symbol is detected by the product detection unit 110 or the service detection unit 120, and monitors the elapsed time by comparing the held time with the current time. You can also However, the monitoring method of the elapsed time by the monitoring unit 140 is not limited to these examples.
  • the association unit 130 of the present embodiment can determine whether or not the above-described third predetermined time has elapsed since each symbol was detected based on the elapsed time monitoring result by the monitoring unit 140.
  • the monitoring unit 140 stops monitoring the elapsed time after the detection of the previous product information symbol and starts monitoring the elapsed time after the detection of the next product information symbol. For example, in such a case, the monitoring unit 140 stops the timer that manages the elapsed time after the detection of the previous product information symbol, and further sets the timer that manages the elapsed time after the detection of the next product information symbol. Start.
  • the display processing unit 150 of the present embodiment causes the display unit (not shown) to display the product information or service information for which the association has been determined.
  • the display processing unit 150 causes the display unit to display the information stored in the association storage unit 132 as information with which association has been established.
  • the confirmation state of the association is not limited to this example, and it is determined that the association unit 130 has determined the association between the product information and the service information or that there is no service information associated with the product information.
  • the determined state may be an association determination state.
  • the display processing unit 150 causes the display unit (not shown) to display the product information and service information associated by the association unit 130.
  • the display processing unit 150 causes the display unit to display the product information determined by the associating unit 130 when there is no service to be associated before the next product information obtained using the next product information symbol.
  • the sound output unit (not shown) further outputs a predetermined sound indicating that the association has been executed (or Alternatively, it may be output.
  • a predetermined sound indicating that the association has been executed (or Alternatively, it may be output.
  • the display processing unit 150 refers to the association storage unit 132 to grasp the correspondence relationship between the product information obtained from each symbol and the service information, and displays, for example, a screen as shown in FIG. Display on the screen.
  • FIG. 3 is a diagram illustrating an example of a screen displayed by the display processing unit 150 based on the information in the association storage unit 132 illustrated in FIG.
  • the first line of FIG. 3 shows a screen display example regarding the product information and service information (for example, the first line of FIG. 2) associated by the associating unit 130.
  • the second line of FIG. 3 shows a screen display example related to product information (for example, the second line of FIG. 2) determined to have no associated service information.
  • the operator of the information processing apparatus 10 can easily grasp the correspondence between the product information and the service information.
  • the product name “ABC” is associated with service information “10% discount”.
  • the product with the product name “DEF” is not associated with service information.
  • the screen displayed by the display processing unit 150 is not limited to FIG.
  • the product information and the service information may be displayed separately on the preceding and following rows in a predetermined order (for example, the order of product information and service information) instead of the same row.
  • the display processing unit 150 adds the same color or the same mark to the corresponding product information and service information among the product information and service information displayed on the screen, and identifies the correspondence relationship. You may make it display as possible.
  • the output unit 160 performs a predetermined output for notifying an operator or the like of the information processing apparatus 10 that the product information symbol to be detected is not detected in response to an instruction from the association unit 130. At least, the associating unit 130 executes a predetermined output when the product information symbol is not detected and the next service information symbol is detected before the third predetermined time elapses after the service information symbol is detected. An instruction is issued to the output unit 160.
  • the output unit 160 receives an instruction from the association unit 130 and performs a predetermined output. For example, the output unit 160 causes the display unit to display a message indicating that a product information symbol detection error has occurred, a message prompting reading of the product information symbol, and the like.
  • the output unit 160 may output a predetermined warning sound or the like, for example, to notify the operator that the product information symbol is not detected.
  • FIG. 21 is a diagram illustrating a product image 2 in which one product 20 is captured.
  • a product image 2 as shown in FIG. 21 is captured by an imaging unit (not shown).
  • a bar code 22 and a discount sticker 24 are attached to the merchandise 20 shown in the merchandise image 2 shown in the example of FIG.
  • the bar code 22 is a form of product information symbol
  • the discount sticker 24 is a form of service information symbol.
  • the product detection unit 110 detects the barcode 22 from the product image 2 using, for example, a known image processing algorithm.
  • the service detection unit 120 detects the discount sticker 24 from the product image 2 using a known image processing algorithm or the like.
  • a plurality of products 20 may appear in one product image 2.
  • the product detection unit 110 and the service detection unit 120 specify the product region 26 indicating the product 20 from the product image 2, and display a bar from the specified product region 26.
  • the code 22 and the discount seal 24 are detected.
  • the product area 26 represents an area in which the entire product 20 is shown, but is not limited thereto, and may be an area in which a part of the product 20 is shown.
  • the product detection unit 110 can be referred to as a first detection unit that detects a first display that can indicate information (first information: product information, for example) belonging to the first type from a certain image.
  • the service detection unit 120 may be referred to as a second detection unit that detects a second display that can indicate information (second information: service information, for example) belonging to a second type different from the first type. it can.
  • the association unit 130 uses the first display when one of the first display and the second display is detected and the other display is detected before the predetermined time has elapsed. The first information obtained in this way is associated with the second information obtained using the second display.
  • the association unit 130 can also be referred to as an output unit by further outputting the associated first information and second information.
  • the association unit 130 output unit
  • the association unit 130 after detecting the first display, before the predetermined time elapses, if the second display is not detected and the next first display is detected, It is determined that there is no second information associated with the first information obtained using the detected first display.
  • FIG. 4 is a diagram conceptually illustrating a hardware configuration example of the information processing apparatus according to the first embodiment.
  • the information processing apparatus 10 includes a central processing unit (CPU) 101, a memory 102, an input / output interface (I / F) 103, a communication unit 104, and the like.
  • the CPU 101 is connected to other units via communication lines such as the bus 105.
  • the memory 102 is a RAM (Random Access Memory), a ROM (Read Only Memory), a flash memory, or the like.
  • the communication unit 104 exchanges signals with other devices and devices. A portable recording medium or the like can be connected to the communication unit 104.
  • the input / output I / F 103 is connected to the display unit 106, the input unit 107, the reading unit 108, and the like.
  • the display unit 106 displays a screen corresponding to drawing data processed by the CPU 101 or a GPU (Graphics Processing Unit) (not shown) such as an LCD (Liquid Crystal Display) or CRT (Cathode Ray Tube) display. Is a unit.
  • the input unit 107 is a unit that receives an input of a user operation, and is realized as a hardware button unit, a touch sensor, or the like, for example.
  • the display unit 106 and the input unit 107 may be integrated and realized as a touch panel.
  • the reading unit 108 is a camera formed of a lens, an image sensor, and the like, and generates one still image that captures a certain moment or a plurality of still images that are captured over a certain period of time.
  • the plurality of still images captured over a certain period of time may be so-called moving images, or may simply be obtained by capturing still images at a plurality of timings.
  • the reading unit 108 may be a symbol reading device such as a barcode reader formed from a light source, a light receiving element, and the like.
  • the product detection unit 110 and the service detection unit 120 described above use the information acquired from the reading unit 108 to detect a product information symbol and a service information symbol.
  • the hardware configuration of the information processing apparatus 10 is not limited to the configuration shown in FIG.
  • the information processing apparatus 10 may further have a configuration other than the configuration shown in FIG.
  • the information processing apparatus 10 may not include the display unit 106, the input unit 107, and the reading unit 108.
  • the information processing apparatus 10 communicates with other external devices via the communication unit 104 to display drawing data on the display unit of the other device, or from the user via the input unit of the other device.
  • An input operation is accepted, and information read by a reading unit of another device is acquired.
  • the information acquired by the information processing apparatus 10 from the reading unit of another apparatus may be information indicating the product information symbol and the service information symbol itself, or a product obtained using the product information symbol and the service information symbol. It may be information and service information.
  • Each processing unit (the product detection unit 110, the service detection unit 120, the association unit 130, the monitoring unit 140, the display processing unit 150, and the output unit 160) of the information processing apparatus 10 described above is stored in the memory 102 by the CPU 101, for example. This is realized by executing a stored program.
  • the program is installed from a portable recording medium such as a CD (Compact Disc) or a memory card, or another computer on the network via the communication unit 104 or the like, and stored in the memory 102.
  • the CPU 101 executes each program that realizes the functions of the product detection unit 110, the service detection unit 120, the association unit 130, the monitoring unit 140, the display processing unit 150, and the output unit 160 stored in the memory 102.
  • the association storage unit 132 is realized by a storage (not shown) such as an HDD (Hard Disk Drive) or an SSD (Solid State Drive).
  • FIG. 5 is a flowchart illustrating a flow of processing in which the information processing apparatus according to the first embodiment detects the first symbol.
  • FIG. 6 is a flowchart showing the flow of processing of the information processing apparatus in the first embodiment when the product information symbol is detected as the first symbol in FIG.
  • FIG. 7 is a flowchart showing the flow of the information processing apparatus in the first embodiment when the service information symbol is detected as the first symbol in FIG.
  • detection processing of each symbol is executed asynchronously in parallel by the product detection unit 110 and the service detection unit 120.
  • Information about each symbol detected by either the product detection unit 110 or the service detection unit 120 is sequentially transmitted to the association unit 130.
  • the associating unit 130 determines whether or not the first symbol is detected by receiving information on each symbol from the product detecting unit 110 or the service detecting unit 120 (S101).
  • the first symbol is a symbol detected first out of two symbols to be determined for association in this process. Specifically, if the product information symbol is detected first by the product detection unit 110 before the service information symbol is detected by the service detection unit 120, the product information symbol becomes the first symbol.
  • the service information symbol becomes the first symbol. If a product information symbol is detected as the first symbol (S101: product information symbol), the process transitions to A. On the other hand, when a service information symbol is detected as the first symbol (S101: service information symbol), the process transitions to B.
  • the associating unit 130 stores the product information obtained from the first symbol (product information symbol) detected in S101 in the associating storage unit 132 (S102).
  • FIG. 8 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the association unit 130 stores the product information obtained from the first symbol detected in S101 in the association storage unit 132 as illustrated in FIG.
  • the service information associated with the product information at this time is “not detected”, and the association of the product information has not been determined. Therefore, as shown in FIG. 8B, the product information obtained from the first symbol detected in S101 is not displayed on the screen at this time.
  • the monitoring unit 140 starts a process (elapsed time management process) for managing an elapsed time after the first symbol is detected (S103). Specifically, the monitoring unit 140, for example, starts a timer for determining the elapse of the third predetermined time in response to the detection of the first symbol, and the elapsed time since the first symbol is detected. Manage.
  • the associating unit 130 determines whether the second symbol is detected by either the product detection unit 110 or the service detection unit 120 until the third predetermined time elapses after the first symbol is detected (S104: NO). It is determined whether or not it has been detected (S105).
  • the second symbol is a symbol detected later among the two symbols to be determined for association in this process.
  • a merchandise information symbol or a service information symbol detected from the detection of the first symbol until the third predetermined time elapses is treated as the second symbol. Further, whether or not the third predetermined time has elapsed since the first symbol was detected can be determined by referring to the elapsed time managed by the monitoring unit 140, for example. Not limited to this, the monitoring unit 140 outputs a notification indicating that the third predetermined time has elapsed to the associating unit 130 when the managed elapsed time becomes equal to or longer than the third predetermined time. It may be.
  • the associating unit 130 can estimate that the next product is a processing target when a next product information symbol is detected after a certain product information symbol is detected.
  • the service information symbol is not detected and the next product information symbol is detected before the third predetermined time elapses after a certain product information symbol is detected.
  • the associating unit 130 determines that the processing target has moved to the next product, and can estimate that there is a high possibility that the corresponding product information symbol does not exist in the previously detected product information symbol. . Therefore, when a product information symbol is detected as the second symbol (S105: product information symbol), the associating unit 130 has no service information associated with the product information obtained from the product information symbol that is the first symbol. Judgment is made (S106). Then, the associating unit 130 updates the associating storage unit 132 based on the determination in S106 and the product information obtained from the second symbol detected in S105 (S107). Then, the display processing unit 150 updates the display content of the display unit 106 based on the information stored in the association storage unit 132 (S108).
  • FIG. 9 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the association unit 130 updates the information in the association storage unit 132 as illustrated in FIG. Specifically, the association unit 130 newly stores the product information obtained from the product information symbol detected in S106 in the association storage unit 132, as shown in the second line of FIG. As in the case of FIG. 8, the service information associated with the new product information at this time is “undetected”, and the association of the product information is not confirmed.
  • the associating unit 130 for the product information previously stored in S102 information indicating that there is no associated service information (“ "No service information" is added.
  • the display processing unit 150 causes the display unit 106 to display a screen as shown in FIG. 9B, for example, based on the information as shown in FIG.
  • the previous merchandise information whose association has been confirmed is displayed on the display unit 106.
  • the associating unit 130 sets the product information symbol that is the second symbol as a new first symbol (S109), returns to the process of S103, and repeats the above-described process.
  • the monitoring unit 140 manages the elapsed time with reference to the timing at which the second symbol (that is, the new first symbol) is detected. Accordingly, the elapsed time management process related to the previous first symbol is stopped.
  • the “timing close to a certain degree” is a timing that serves as an index for determining the third predetermined time, and can be calculated empirically or theoretically. That is, when the product information symbol and the service information symbol are detected within the third predetermined time, it can be said that the product information and service information obtained from each symbol are highly likely to correspond.
  • the associating unit 130 obtains product information and service information obtained from each symbol. (S110). Then, the associating unit 130 updates the associating storage unit 132 based on the result of the associating process in S110 (S111). Then, the display processing unit 150 updates the display content of the display unit 106 based on the association information stored in the association storage unit 132 (S112).
  • FIG. 10 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the association unit 130 updates the information in the association storage unit 132 based on the result of the association process of S110, as shown in FIG. Specifically, the associating unit 130 associates the service information obtained from the second symbol (service information symbol) with the product information stored in S102. Thereby, the association between the product information obtained from the first symbol detected in S101 and the service information obtained from the second symbol detected in S105 is determined. Then, the display processing unit 150 causes the display unit 106 to display the merchandise information and the service information for which the association has been determined, for example, as illustrated in FIG.
  • the associating unit 130 associates with the product information obtained from the product information symbol that is the first symbol. It is determined that there is no service information to be received (S113). This is based on the above-described idea that “the product information symbol and the service information symbol attached to the same product are likely to be detected at a timing close to a certain degree”. Then, the association unit 130 updates the association storage unit 132 based on the determination in S113 (S111). Then, the display processing unit 150 updates the display content of the display unit 106 based on the association information stored in the association storage unit 132 (S112).
  • FIG. 11 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the associating unit 130 updates the information in the associating storage unit 132 based on the determination in S113. Specifically, the associating unit 130 adds information indicating that there is no service information to be associated (“no service information”) to the product information previously stored in S102. Thereby, the association of the product information obtained from the first symbol detected in S101 is determined. Then, the display processing unit 150 causes the display unit 106 to display, for example, a screen as illustrated in FIG. 11B based on the information as illustrated in FIG.
  • the next detection is performed.
  • the symbol to be used is the first symbol. Therefore, if it is determined in S110 that the product information and service information are associated with each other, or if it is determined in S113 that there is no service information associated with the product information obtained from the product information symbol that is the first symbol. Returns to S101. This series of processing is repeated until the product checkout for a certain customer is completed.
  • the associating unit 130 stores the service information obtained from the first symbol (service information symbol) detected in S101 in the associating storage unit 132 (S116).
  • FIG. 12 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the association unit 130 stores the service information obtained from the first symbol detected in S101 in the association storage unit 132, as shown in FIG. Note that, as shown in FIG. 12A, the product information associated with the service information at this time is “not detected”, and the association of the service information is not confirmed. Therefore, as shown in FIG. 12B, the service information obtained from the first symbol detected in S101 is not displayed on the screen at this point.
  • the monitoring unit 140 starts a process (elapsed time management process) for managing an elapsed time after the first symbol is detected (S116). Specifically, the monitoring unit 140, for example, activates a timer for determining the elapse of the third predetermined time in response to the detection of the first symbol, so that the elapsed time after the first symbol is detected is determined. to manage. Then, associating unit 130 determines whether the second symbol is detected by either one of product detection unit 110 or service detection unit 120 until the third predetermined time elapses after the first symbol is detected (S117: NO). It is determined whether or not it has been detected (S118). These processes are the same as those in the process A described above.
  • the associating unit 130 obtains product information and service information obtained from each symbol.
  • the association process is executed (S124).
  • the associating unit 130 updates the associating storage unit 132 based on the result of the associating process in S124 (S125).
  • the display processing unit 150 updates the display content of the display unit 106 based on the association information stored in the association storage unit 132 (S126).
  • FIG. 13 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the associating unit 130 updates the information in the associating storage unit 132 based on the result of the associating process in S124. Specifically, the associating unit 130 associates the product information obtained from the second symbol (product information symbol) with the service information stored in S115. As a result, the association between the service information obtained from the first symbol detected in S101 and the product information obtained from the second symbol detected in S118 is determined. Then, the display processing unit 150 causes the display unit 106 to display the service information and the product information for which the association has been determined, for example, as illustrated in FIG.
  • the product information symbol and the service information symbol are sequentially detected for each product.
  • the service information there must be a product to which the service is applied. Therefore, when the next service information symbol is detected, it can be determined that the next product is a processing target and no product information symbol related to the product with the previous service information symbol is detected.
  • the associating unit 130 determines that a product information symbol detection failure has occurred, and outputs a predetermined value to the output unit 160. An instruction to output is sent (S119).
  • the output unit 160 causes the display unit 106 to display, for example, a message indicating that a merchandise information symbol detection error has occurred, a message prompting reading of the merchandise information symbol, and the like.
  • the output unit 160 displays a message as shown in FIG. FIG. 14 is a diagram illustrating a predetermined output by the output unit 160.
  • the output of the output unit 160 in S119 is not limited to the above example.
  • information that leads to detection of the product information symbol corresponding to the service information symbol may be output.
  • the output unit 160 may notify the operator that the product information symbol is not detected by outputting a predetermined warning sound.
  • the associating unit 130 associates the service information obtained from the service information symbol that is the first symbol with the product information obtained from the product information symbol read according to the output of S119 (S120). Then, the associating unit 130 is based on the association information indicating that the service information obtained from the first symbol and the product information obtained from the product information symbol read according to the output of S119 are associated with each other. 132 is updated (S121). Then, the display processing unit 150 updates the display content of the display unit 106 based on the association information stored in the association storage unit 132 (S122).
  • FIG. 15 is a diagram illustrating information stored in the association storage unit and a screen displayed on the display unit.
  • the association unit 130 updates the information in the association storage unit 132 as illustrated in FIG. Specifically, the association unit 130 newly stores the service information obtained from the service information symbol detected in S118 in the association storage unit 132, as shown in the second line of FIG. As in the case of FIG. 12, the product information associated with the new service information at this time is “not detected”, and the association of the service information has not been determined. On the other hand, for the service information previously stored in S115, the associating unit 130 is obtained from the product information symbol read by the output of S119 as shown in the first line of FIG. Associate product information.
  • the display processing unit 150 causes the display unit 106 to display a screen as shown in FIG. 15B, for example, based on the information as shown in FIG.
  • the service information and the product information of the destination for which the association has been confirmed are displayed on the display unit 106.
  • the associating unit 130 sets the service information symbol, which is the second symbol, as a new first symbol (S123), returns to the process of S116, and repeats the above process.
  • the monitoring unit 140 manages the elapsed time with reference to the timing at which the second symbol (that is, the new first symbol) is detected. Accordingly, the elapsed time management process related to the previous first symbol is stopped.
  • the associating unit 130 outputs a service information symbol after a certain service information symbol is detected and before the elapse of the third predetermined time, as in the case where the product information symbol is not detected and the next service information symbol is detected.
  • An instruction to perform a predetermined output is transmitted to the unit 160 (S127). Then, the product information symbol corresponding to the service information symbol which is the first symbol is read by the operator who has confirmed the output from the output unit 160.
  • the associating unit 130 associates the service information obtained from the first symbol with the product information obtained from the product information symbol read in S127 (S124). Then, the associating unit 130 stores the association based on the service information obtained from the first symbol and the association information indicating that the product information obtained from the product information symbol read in response to the output of S127 is associated.
  • the unit 132 is updated (S125). Then, the display processing unit 150 updates the display content of the display unit 106 based on the association information stored in the association storage unit 132 (S126). Specifically, the same processing as in the example of FIG. 13 is executed using the product information obtained from the product information symbol read by the output of S127.
  • each detection process of the product information symbol and the service information symbol is asynchronously executed in parallel. This makes it easier for the operator to hold the product information symbol and service information symbol over the reading unit 108 than when detecting the service information symbol after detecting the product information symbol, and until both symbols are detected. Can be shortened. However, the order of detection of the product information symbol and the service information symbol is not constant.
  • the product information symbol and the service information symbol when one of the product information symbol and the service information symbol is detected and the other symbol is detected before the third predetermined time elapses, it is obtained using each detected symbol.
  • Product information to be associated with service information an operator who performs a product checkout operation usually performs an operation for reading a product information symbol or a service information symbol for each product. For this reason, the product information symbol and the service information symbol attached to the same product are highly likely to be detected at a timing close to a certain degree, that is, within the third predetermined time. In other words, when the product information symbol and the service information symbol are detected within the third predetermined time, it can be said that the product information and the service information obtained from each symbol are highly likely to correspond. Therefore, according to the present embodiment, even when the detection order of the product information symbol and the service information symbol is not constant, the product information and service information related to the same product can be accurately associated.
  • next product information symbol is detected without detecting the service information symbol before the third predetermined time has elapsed after the previous product information symbol is detected, the product obtained from the previous product information symbol It is determined that there is no service information associated with the information symbol.
  • an operator who performs a product checkout operation in a store usually performs an operation for reading a product information symbol or a service information symbol for each product. Therefore, there is a high possibility that the product information symbol and the service information symbol are sequentially detected for each product. That is, when the next product information symbol is detected, it can be estimated that the next product is a processing target, and that a product with the previous product information symbol is not attached with a service information symbol.
  • the previously detected product information symbol includes It can be determined that there is no corresponding service information symbol. Therefore, according to the present embodiment, product information that does not correspond to service information can be accurately determined.
  • the product information and service information for which the association has been determined are displayed on the display unit.
  • the operator who performs goods checkout work can grasp
  • the output unit 160 performs a predetermined output. For example, the output unit 160 outputs a message for notifying the operator of the information processing apparatus 10 that a product information symbol to be detected has not been detected. Thereby, it is possible to notify the operator of the information processing apparatus 10 that the product information symbol has not been detected, and the accuracy of associating the product information with the service information can be expected.
  • the information processing apparatus 10 is not limited to the configuration of the first embodiment, and may include at least the product detection unit 110, the service detection unit 120, and the association unit 130.
  • Each processing unit (the product detection unit 110, the service detection unit 120, and the association unit 130) of the information processing apparatus 10 causes the CPU 101 to execute a program that realizes the function of each processing unit, as in the first embodiment. It is realized by.
  • the association storage unit 132 is realized by a storage (not shown) such as an HDD or an SSD, as in the first embodiment.
  • FIG. 16 is a diagram conceptually showing the processing configuration of the information processing apparatus in the second embodiment.
  • the information processing apparatus 10 includes a product detection unit 110, a service detection unit 120, and an association unit 130.
  • the product detection unit 110 detects a product information symbol
  • the service detection unit 120 detects a service information symbol. Since the operations of the product detection unit 110 and the service detection unit 120 are the same as those in the first embodiment, detailed description thereof is omitted.
  • the associating unit 130 determines the correspondence between the product information obtained using each symbol detected by the product detecting unit 110 or the service detecting unit 120 and the service information. In the present embodiment, the associating unit 130 manages whether or not the third predetermined time has elapsed since the detection of each symbol. Specifically, the associating unit 130 of the present embodiment compares the detection times of the two symbols detected in succession until the next symbol is detected after the previous symbol is detected. Determine the elapsed time. In addition, when the next symbol is not detected after the previous symbol is detected, the associating unit 130 compares the current time with the detection time of the previous symbol, and the elapsed time since the previous symbol was detected. Judging.
  • the associating unit 130 determines whether or not the third predetermined time has elapsed by comparing the elapsed time determined as described above with a preset threshold time Tth .
  • the method by which the association unit 130 manages the passage of the third predetermined time is not limited to this method.
  • FIG. 17 is a flowchart showing the flow of processing of the information processing apparatus in the second embodiment when the product information symbol is detected as the first symbol in FIG.
  • FIG. 18 is a flowchart showing the flow of processing of the information processing apparatus in the second embodiment when the service information symbol is detected as the first symbol in FIG. Note that the processing shown in FIG. 5 described in the first embodiment is common to this embodiment.
  • Associating unit 130 in response to detection of the first symbol (product information symbol), obtains the detection time T 1 of the said first symbol (S201).
  • the associating unit 130 further acquires, for example, the product information symbol detection time T 1 from the product detection unit 110.
  • the associating unit 130 can also determine the detection time T 1 based on the timing at which information related to the product information symbol is received from the product detection unit 110. Then, the associating unit 130 determines whether the second symbol is detected by either the product detection unit 110 or the service detection unit 120 (S202).
  • an operator who performs a product checkout operation in a store usually performs an operation for reading a product information symbol or a service information symbol for each product. Therefore, there is a high possibility that the product information symbol and the service information symbol are sequentially detected for each product. That is, when the next product information symbol is detected, it can be estimated that the next product is a processing target, and that a product with the previous product information symbol is not attached with a service information symbol. Therefore, after a certain product information symbol is detected, when the next product information symbol is detected without detecting the service information symbol, the previously detected product information symbol (that is, the first symbol) is handled. There is a high possibility that no service information symbol exists.
  • the associating unit 130 associates with the product information obtained from the product information symbol that is the first symbol. It is determined that there is no information (S203). Then, the association unit 130 updates the association storage unit 132 based on the determination in S203 and the product information obtained from the second symbol detected in S202 (S204). Specifically, the same processing as in the example of FIG. 9 described in the first embodiment is executed.
  • the associating unit 130 sets the merchandise information symbol, which is the second symbol, as a new first symbol (S205), returns to the process of S202, and repeats the above process.
  • an operator who performs a product checkout operation usually performs an operation for reading a product information symbol or a service information symbol for each product. Therefore, it is considered that there is a high possibility that the product information symbol and the service information symbol attached to the same product will be detected at a timing close to some extent. That is, when the product information symbol and the service information symbol are detected within the third predetermined time, it can be said that the product information and service information obtained from each symbol are highly likely to correspond. Based on this idea, when the service information symbol is detected as the second symbol (S202: service information symbol), the associating unit 130 determines whether or not the second symbol has been acquired within the third predetermined time. .
  • the association unit 130 obtains the detection time T 2 of the second symbol (S206), the difference between the detection time T 1 of the detection time T 2 and the first symbol of the second symbol, is set in advance It is determined whether it is less than or equal to the threshold time T th (S207).
  • the association unit 130 from each symbol The association processing between the product information and the service information to be executed is executed (S208). Specifically, the associating unit 130 associates the product information obtained from the product information symbol that is the first symbol with the service information obtained from the service information symbol that is the second symbol. Then, the associating unit 130 updates the associating storage unit 132 based on the result of the associating process in S208 (S209). Specifically, the same processing as in the example of FIG. 10 described in the first embodiment is executed.
  • the association unit 130 similarly to S203 Execute the process. That is, the associating unit 130 determines that there is no service information associated with the product information obtained from the product information symbol that is the first symbol (S210). Then, the association unit 130 updates the association storage unit 132 based on the determination in S210 (S211). Specifically, the same processing as in the example of FIG. 11 described in the first embodiment is executed.
  • the associating unit 130 sets the product information symbol that is the second symbol as a new first symbol (S212). In this case, since the service information symbol is the first symbol, the process transitions to B.
  • an operator who performs a product checkout operation usually performs an operation for reading a product information symbol or a service information symbol for each product. Therefore, it is considered that there is a high possibility that the product information symbol and the service information symbol attached to the same product will be detected at a timing close to some extent. That is, when the product information symbol and the service information symbol are detected within the third predetermined time, it can be said that the product information and service information obtained from each symbol are highly likely to correspond. Based on this idea, when a product information symbol is detected as the second symbol (S214: product information symbol), the associating unit 130 determines whether or not the second symbol has been acquired within the third predetermined time. .
  • the association unit 130 obtains the detection time T 2 of the second symbol (S215), the difference between the detection time T 1 of the detection time T 2 and the first symbol of the second symbol, is set in advance It is determined whether it is less than or equal to the threshold time T th (S216).
  • the association unit 130 from each symbol The association processing between the product information and the service information to be executed is executed (S217). Specifically, the associating unit 130 associates service information obtained from the service information symbol that is the first symbol and product information obtained from the product information symbol that is the second symbol. Then, the association unit 130 updates the association storage unit 132 based on the result of the association process in S217 (S218). Specifically, the same processing as in the example of FIG. 13 described in the first embodiment is executed.
  • the association unit 130 determines that an error has occurred in such a case, and issues an error processing execution instruction to an error processing unit (not shown) of the information processing apparatus 10 (S219).
  • the error process executed in S219 is a process of notifying the operator that the product information symbol is not detected with a message or a warning sound as described in the first embodiment, and reading the product information symbol. Note that error processing is not limited to this example.
  • the product information symbol and the service information symbol are sequentially detected for each product.
  • the service information there must be a product to which the service is applied. Therefore, when the next service information symbol is detected, it can be determined that the next product is a processing target and no product information symbol related to the product with the previous service information symbol is detected. Based on this idea, even when a service information symbol is detected as the second symbol (S214: service information symbol), the associating unit 130 causes a product information symbol detection failure (error) in such a case. Judge. Then, the associating unit 130 issues an error processing execution instruction to an error processing unit (not shown) of the information processing apparatus 10 (S219).
  • the same effect as that of the first embodiment can be obtained. Specifically, when one of the product information symbol and the service information symbol is detected and the other symbol is detected before the third predetermined time elapses, the product information obtained using each detected symbol Symbols and service information symbols are associated with each other. In addition, if a service information symbol is not detected and a next product information symbol is detected after a certain product information symbol has been detected but before the third predetermined time has elapsed, it is obtained from the previously detected product information symbol. It is determined that there is no service information associated with the product information to be associated. Thereby, also by this embodiment, merchandise information and service information can be matched correctly.
  • FIG. 19 is a diagram showing a configuration example of the POS register device.
  • the first embodiment illustrates an example in which the information processing apparatus 10 and the information processing method described above are applied to a POS (Point Of Sale) register apparatus 30.
  • the POS register device 30 according to the first embodiment includes a checker device 31 and a cashier device 41.
  • the checker device 31 registers the product as a payment target, and sends information on the payment target product to the cashier device 41.
  • the cashier apparatus 41 performs a settlement process for a product to be settled.
  • the payment target can be registered in both the checker device 31 and the cashier device 41.
  • the checker device 31 and the cashier device 41 include a CPU 101, a memory 102, an input / output I / F 103, a communication unit 104, and the like, as in FIG.
  • the information processing apparatus 10 described above can be applied to both the checker apparatus 31 and the cashier apparatus 41, and the information processing method described above can be executed in either the checker apparatus 31 or the cashier apparatus 41.
  • the above-described display unit 106 corresponds to at least one of the display unit 32a and the display unit 42 of the touch panel unit 32.
  • the input unit 107 described above corresponds to at least one of the touch panel 32 b, the keyboard 33, and the keyboard 43 of the touch panel unit 32.
  • the above-described reading unit 108 corresponds to the scanner device 34 and the scanner device 44.
  • the scanner device 34 captures a product image that reflects the appearance of the product held over the reading window 35. By processing the image captured by the scanner device 34, product information symbols and service information symbols are detected, and product information and service information can be acquired.
  • the scanner device 44 has a light source (not shown), and reads product information and service information by detecting reflected light of light irradiated on a product packaging material or the like using a light receiving element (not shown). be able to.
  • the display processing unit 150 displays a screen as shown in FIG. 8B to FIG. 15B on the touch panel unit 32 or the display unit 42. Then, the operator of the POS register device 30 easily grasps whether or not the product information and the service information are accurately associated with each other based on the screen displayed on the touch panel unit 32 or the display unit 42 as described above. be able to.
  • the POS register device 30 includes the checker device 31 and the cashier device 41, but the POS register device 30 may be configured by only the cashier device 41. In this case, the cashier device 41 only needs to have the scanner device 34.
  • FIG. 20 is a diagram illustrating a configuration example of a POS system.
  • Example 2 illustrates an example in which the information processing apparatus 10 and the product image presentation method described above are applied to a POS system 50.
  • the POS system 50 according to the second embodiment includes a server device 51 and a store side configuration 52, and the server device 51 and the store side configuration 52 are communicably connected via a communication network 53.
  • the store-side configuration 52 includes a store terminal 54, a stand 55, and the like that can be connected to the communication network 53 via a communication relay device.
  • the stand 55 is a device for connecting the store terminal 54 and other devices (such as a handy scanner, a cash drawer, a receipt printer, etc.) in a communicable manner.
  • the store terminal 54 is a general-purpose computer such as a PC (Personal Computer), a notebook PC, a tablet terminal, a smartphone, and the like, and exchanges data with the server device 51, thereby the above-described POS register device 30. A similar function is realized.
  • the store terminal 54 includes a touch panel unit 56, an imaging unit 57, and the like.
  • the display unit 106 described above corresponds to the display unit of the touch panel unit 56.
  • the input unit 107 described above corresponds to the touch panel of the touch panel unit 56.
  • the above-described reading unit 108 corresponds to the imaging unit 57.
  • the server device 51 is a general server computer and is realized as a WEB server, an application server, or the like.
  • the store terminal 54 and the server device 51 include a CPU 101, a memory 102, an input / output I / F 103, a communication unit 104, and the like, as in FIG.
  • the information processing apparatus 10 described above can be realized as only the server apparatus 51, only the shop terminal 54, or both.
  • the information processing method described above can be executed by only the server device 51, only the shop terminal 54, or both.
  • the WEB system when used as an interface between the server device 51 and the store terminal 54, all the processing units described above are realized by the server device 51, and the store terminal 54 may operate as a mere display unit. .
  • the entire processing unit may be realized in the store terminal 54.
  • a part of the processing units may be realized by the server device 51 and the remaining processing units may be realized by the store terminal 54.
  • the association unit 130 may be realized by the server device 51 and the other processing unit may be realized by the store terminal 54.
  • the operator of the shop terminal 54 shows, for example, from FIG. 8A to FIG. 15A according to the detection timing of each symbol by the scanner device connected to the imaging unit 57 and the stand 55.
  • the association between product information and service information is managed.
  • merchandise information and service information can be matched correctly.
  • the display processing unit 150 displays a screen as shown in FIG. 8B to FIG. 15B on the touch panel unit 56. Then, the operator of the shop terminal 54 can easily grasp whether or not the product information and the service information are correctly associated based on the screen displayed on the touch panel unit 56 in this way.
  • the information processing device 10 and the information processing method described above are not applicable only to the POS register device 30 and the POS system 50, but can be applied to any device that supports the determination of a product.
  • the information processing apparatus 10 and the information processing method described above may be applied to general-purpose computers such as PCs and smart devices used by general users.
  • the information processing apparatus is realized by a plurality of apparatuses (a plurality of computers, a casing having a plurality of CPUs). Moreover, each above-mentioned embodiment can be combined in the range in which the content does not conflict.
  • the product information and the service information are displayed on the display unit 106 when the correspondence is determined.
  • the present invention is not limited to this, and product information and service information obtained from each symbol may be displayed at the timing when each symbol is detected by the product detection unit 110 and the service detection unit 120.
  • the display content of the display unit 106 is updated according to the result of the associating unit 130 associating process based on the passage of the third predetermined time, the detection order of symbols, and the like.
  • the association unit 130 the detection time T 1 of the first symbol to calculate the elapsed time based on the current time, the during the elapsed time is within the threshold time T th
  • the association process may be executed when two symbols are detected.
  • Product detection means for detecting product information symbols Service detection means for detecting service information symbols; If one of the product information symbol and the service information symbol is detected and the other symbol is detected before the predetermined time has elapsed, the product information obtained using each detected symbol is associated with the service information. Association means; With When the service information symbol is not detected and the next product information symbol is detected before the elapse of a predetermined time after the product information symbol is detected, the association unit uses the previously detected product information symbol. It is determined that there is no service information associated with the product information obtained, Information processing device. 2.
  • Display processing means for displaying product information and service information associated by the association means on a display unit; Further comprising The display processing means causes the display unit to display the product information determined by the association means when there is no service information to be associated before the next product information obtained using the next product information symbol.
  • the association means instructs the output unit to perform a predetermined output when a product information symbol is not detected and a next service information symbol is detected before the predetermined time elapses after the service information symbol is detected. , 1. Or 2.
  • the current service information symbol is determined as a symbol detected next to the previous service information symbol, If the service information symbol is not detected and the next product information symbol is detected before the elapse of a predetermined time after the product information symbol is detected, the monitoring means determines the elapsed time after the detection of the product information symbol. Stop monitoring and start monitoring elapsed time after detection of the next product information symbol, 1. To 3. The information processing apparatus according to any one of the above. 5.
  • First detection means for detecting a first display
  • Second detection means for detecting a second display
  • the other display is detected after the detection of one of the first display and the second display before the predetermined time has elapsed, the product information obtained using the first display and the first display
  • Output means for associating and outputting service information obtained using the second display; With If the second display is not detected and the next first display is detected before the predetermined time has elapsed after detection of the first display, the output means detects the first display detected previously. Determine that there is no service information associated with the product information obtained using Information processing device. 6).
  • An information processing method executed by at least one computer The computer is Detect product information symbols, Detect service information symbols If one of the product information symbol and the service information symbol is detected and the other symbol is detected before the predetermined time has elapsed, the product information obtained using each detected symbol is associated with the service information. Execute the process, In the above process, when the service information symbol is not detected and the next product information symbol is detected before the predetermined time elapses after the product information symbol is detected, it is obtained using the previously detected product information symbol. Determining that there is no service information associated with product information, Information processing method including the above. 7).
  • the computer is The product information and service information associated by the association means are further displayed on the display unit, The product information determined by the associating means if there is no service information to be associated is displayed on the display unit before the next product information obtained using the next product information symbol. Including. Information processing method described in 1. 8).
  • the computer is When the product information symbol is not detected and the next service information symbol is detected after the service information symbol is detected and before a predetermined time has elapsed, the output unit is instructed to perform a predetermined output. Including. Or 7. Information processing method described in 1. 9.
  • the computer is Monitor the elapsed time after detection of either the product information symbol or the service information symbol, If the product information corresponding to the product information symbol detected this time is different from the product information corresponding to the product information symbol detected last time, or the current product information symbol is detected after a predetermined time has elapsed since the detection of the previous product information symbol.
  • the current product information symbol is the symbol detected next to the previous product information symbol, If the service information corresponding to the service information symbol detected this time is different from the service information corresponding to the service information symbol detected last time, or after a predetermined time has elapsed since the detection of the previous service information symbol, this service information symbol Is detected, the current service information symbol is the symbol detected next to the previous service information symbol, If the service information symbol is not detected and the next product information symbol is detected before the predetermined time elapses after detection of the product information symbol, monitoring of the elapsed time after detection of the product information symbol is stopped, and Start monitoring the elapsed time after detecting the next product information symbol, Including.
  • the information processing method as described in any one of these. 10. 6).
  • a program that causes at least one computer to execute the information processing method according to any one of the above.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

　情報処理装置（１０）は、商品情報シンボルを検出する商品検出部（１１０）と、サービス情報シンボルを検出するサービス検出部（１２０）と、商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける対応付け部（１３０）と、を備える。対応付け部（１３０）は、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する。

Description

情報処理装置
　本発明は、商品情報とサービス情報とを対応付ける技術に関する。
　店舗に陳列される商品の中には、商品を識別するためのバーコードと共に、その商品の値引き情報を表すシールが貼付された商品がある。ＰＯＳ（Point Of Sale）端末のオペレータは、商品に付与されたバーコードをＰＯＳ端末に読み取らせた後、その商品に貼付された値引きシールを目視して、値引き操作を行う。
　下記特許文献１には、商品情報を表すバーコードと値引き情報を表すバーコードとが付された商品の精算を行うＰＯＳ端末が提案されている。このＰＯＳ端末は、商品情報を表すバーコードのみでなく、値引き情報を表すバーコードを更に読み取ることで、対象商品の値引きを行う。
特開２００３－８５６５７号公報
　上述の提案手法では、ＰＯＳ端末が商品情報シンボル（商品情報を表すバーコード）及びサービス情報シンボル（値引き情報を表すバーコード）を検出する。ところが、このようなＰＯＳ端末において、商品情報シンボルとサービス情報シンボルとの検出順が一定とならない場合がある。或る商品では、商品情報シンボルが先に、サービス情報シンボルが後に検出され、次の商品では、サービス情報シンボルが先に検出され、商品情報シンボルが後に検出される可能性がある。ＰＯＳ端末のスキャン装置に対するオペレータによる商品のかざし方が一定ではないこと、各シンボルの配置が各商品で一定でないこと等がそのような現象発生の一因となる。加えて、サービス情報が付与された商品とそうでない商品とが存在するため、ＰＯＳ端末において、対象商品の商品情報とその商品に付与されたサービス情報とを正確に対応付けることが望まれる。
　本発明は、商品の商品情報とその商品に付与されたサービス情報とを正確に対応付ける技術を提供する。
　本発明の各側面では、上述した課題を解決するために、それぞれ以下の構成を採用する。
　第１の側面は、情報処理装置に関する。第１の側面に係る情報処理装置は、商品情報シンボルを検出する商品検出手段と、サービス情報シンボルを検出するサービス検出手段と、商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける対応付け手段と、を備える。そして、対応付け手段は、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する。
　第２の側面は、少なくとも１つのコンピュータにより実行される情報処理方法に関する。第２の側面に係る情報処理方法は、コンピュータが、商品情報シンボルを検出し、サービス情報シンボルを検出し、商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける処理を実行し、商品情報とサービス情報とを対応付ける処理において、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する、ことを含む。
　なお、本発明の他の側面は、上記第２の側面の方法を少なくとも１つのコンピュータに実行させるプログラムであり、このようなプログラムを記録したコンピュータが読み取り可能な記録媒体である。この記録媒体は、非一時的な有形の媒体を含む。
　本発明によれば、商品の商品情報とその商品に付与されたサービス情報とを正確に対応付けることができる。
　上述した目的、およびその他の目的、特徴および利点は、以下に述べる好適な実施の形態、およびそれに付随する以下の図面によってさらに明らかになる。
第１実施形態における情報処理装置の処理構成を概念的に示す図である。 対応付け格納部に格納される情報の一例を示す図である。 図２に示される対応付け格納部の情報に基づいて表示処理部が表示する画面の一例を示す図である。 第１実施形態における情報処理装置のハードウェア構成例を概念的に示す図である。 第１実施形態における情報処理装置が第１シンボルを検出する処理の流れを示すフローチャートである。 図５において商品情報シンボルが第１シンボルとして検出された場合の、第１実施形態における情報処理装置の処理の流れを示すフローチャートである。 図５においてサービス情報シンボルが第１シンボルとして検出された場合の、第１実施形態における情報処理装置の流れを示すフローチャートである。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 出力部による所定の出力を例示する図である。 対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。 第２実施形態における情報処理装置の処理構成を概念的に示す図である。 図５において商品情報シンボルが第１シンボルとして検出された場合の、第２実施形態における情報処理装置の処理の流れを示すフローチャートである。 図５においてサービス情報シンボルが第１シンボルとして検出された場合の、第２実施形態における情報処理装置の処理の流れを示すフローチャートである。 ＰＯＳレジスタ装置の構成例を示す図である。 ＰＯＳシステムの構成例を示す図である。 １つの商品が撮像されている商品画像を例示する図である。
　以下、本発明の実施の形態について説明する。なお、以下に挙げる各実施形態はそれぞれ例示であり、本発明は以下の各実施形態の構成に限定されない。
［第１実施形態］
　〔処理構成〕
　図１は、第１実施形態における情報処理装置の処理構成を概念的に示す図である。図１に示されるように、本実施形態の情報処理装置１０は、商品検出部１１０、サービス検出部１２０、対応付け部１３０、対応付け格納部１３２、監視部１４０、表示処理部１５０、及び出力部１６０を有する。
　商品検出部１１０は、商品ラベル等から商品情報シンボルを検出する。「商品ラベル」とは、商品または商品の包装材等に付された、商品情報シンボルを表示する部材（シール等）、或いは、商品または商品の包装材等において商品情報シンボルが印刷される領域である。「商品情報シンボル」とは、商品情報を取得し得る形象を意味し、商品コードがエンコードされた１次元コードや２次元コード、または、商品情報を表す文字列シンボル（文字列形象）等が含まれる。「商品情報」とは、例えば、商品の名称、価格、または商品コードといった、商品に関する何らかの情報である。「商品コード」とは、各商品を特定するために予め決められた、文字、数字、記号等から形成される商品識別データである。商品コードには、ＰＬＵ（Price Look Up）コード（例えば、ＪＡＮ（Japan Article Number）コード等）、またはＮｏｎ－ＰＬＵコード等が利用され得る。商品コードがＰＬＵコードである場合、検出されたＰＬＵコードを基に商品情報が記憶されている記憶部（図示せず）を参照することにより、商品の名称や価格といった商品情報が取得される。また、商品コードがＮｏｎ－ＰＬＵコードである場合、検出されたＮｏｎ－ＰＬＵコードから商品情報が取得される。「商品情報を表す文字列シンボル」とは、当該シンボルを解析することによって何らかの商品情報を得られるシンボルであり、例えば、商品の包装材または包装材に付されたシール等に記載される、商品の名称や価格を表す文字列等が挙げられる。但し、商品情報を表す文字列シンボルはこれらの例に制限されない。
　商品検出部１１０は、例えば、既知の画像解析アルゴリズム等を用いて、商品の外観が撮像された画像を解析することにより、商品情報シンボルを検出する。また、商品検出部１１０は、光源と受光素子とを用いて商品の包装材等に照射した光の反射光を検知した結果を基に、商品情報シンボルを検出することもできる。商品情報シンボルが文字列シンボルの場合には、既知の文字認識手法が利用される。
　商品検出部１１０は、後述のサービス検出部１２０とは非同期に、常時、動作する。但し、商品検出部１１０は、後述の第１所定時間よりも短い時間間隔で周期的に動作してもよい。また、商品検出部１１０とサービス検出部１２０とが相互に非同期に動作するため、本実施形態では、商品情報シンボルとサービス情報シンボルとの検出順は一定とはならない。例えば、商品情報シンボルとサービス情報シンボルとが共に存在する商品に関しては、先に商品情報シンボルが検出される場合もあれば、先にサービス情報シンボルが検出される場合もある。
　商品検出部１１０は、上述のように常時動作するため、後述の読取部１０８への商品のかざし方等によっては、同一商品の商品情報シンボルを重複して複数回検出する場合がある。そこで、商品検出部１１０は、前回の商品情報シンボルが検出されたタイミングから第１所定時間経過後に、新たな商品情報シンボル（今回の商品情報シンボル）を検出した場合、当該新たな商品情報シンボルを次の商品情報シンボルとして扱う。言い換えれば、商品検出部１１０は、先の商品情報シンボルが検出されてから第１所定時間が経過する前に、後の商品情報シンボルが検出された場合には、後の商品情報シンボルを次の商品情報シンボルとして扱わず、廃棄する。但し、商品検出部１１０は、先の商品情報シンボルの検出から第１所定時間の経過前に検出されたとしても、各品情報シンボルが示す商品情報が互いに異なる場合には、後の商品情報シンボルを次の商品情報シンボルとして扱ってもよい。以降、「商品検出部１１０による商品情報シンボルの検出」とは、商品検出部１１０により行われる、商品情報シンボルの全ての検出の中の、異なる商品の商品情報シンボルとして扱われる検出を意味するものとする。ここで用いられる「第１所定時間」は、例えば、オペレータによる後述の読取部１０８への商品のかざし方等の実際の商品精算業務を基に、経験的又は理論的に算出され、商品検出部１１０に予め設定される。また、「所定時間」は、オペレータごとに異なる時間であってもよい。これにより、オペレータごとに所定時間を最適化できる。この場合、異なる「所定時間」が情報処理装置１０（ＰＯＳ端末など）に設定されており、オペレータが最適な時間を選択する等して、所定時間が切り替えらえる。また、この最適な所定の時間は、実際にかかった処理時間に基づいて、情報処理装置１０の学習部（図示せず）による学習結果から導出されてもよいし、実際にかかった処理時間の平均値や中間値などを用いて算出されてもよい。
　サービス検出部１２０は、サービスラベルからサービス情報シンボルを検出する。「サービスラベル」とは、商品または商品の包装材等に付された、サービス情報シンボルを表示する部材である。「サービス情報シンボル」とは、サービス情報を取得し得る形象を意味し、サービスコードがエンコードされた１次元コードや２次元コード、または、サービス情報を表す文字列シンボル（文字列形象）等が含まれる。「サービスコード」とは、各サービスを特定するために予め決められた、文字、数字、記号等から形成されるサービス識別データである。「サービス情報」とは、各商品に付与されるあらゆるサービスの内容を示す情報である。サービス情報には、例えば、「２０円引き」といった値引き情報、「３０％引き」といった割引き情報、「５倍ポイント付与」といったポイント割増情報、及び各サービスを特定可能なサービスコード等が含まれる。「サービス情報を表す文字列シンボル」とは、当該シンボルを解析することによって何らかのサービス情報を得られるシンボルであり、例えば、商品の包装材または商品の包装材に付されたシール等に記載される、値引き額や割引率を表す文字列等が挙げられる。なお、サービス情報を表す文字列シンボルはこれらの例に制限されない。
　サービス検出部１２０は、例えば、既知の画像解析アルゴリズム等を用いて、商品の外観が撮像された画像を解析することにより、サービス情報シンボルを検出する。また、サービス検出部１２０は、光源と受光素子とを用いて商品の包装材等に照射した光の反射光を検知した結果を基に、サービス情報シンボルを検出することもできる。サービス情報シンボルが文字列シンボルの場合には、既知の文字認識手法が利用される。
　また、上述したように、サービス検出部１２０は、商品検出部１１０とは非同期に、常時、動作する。但し、サービス検出部１２０は、後述の第２所定時間よりも短い時間間隔で周期的に動作してもよい。
　サービス検出部１２０についても、商品検出部１１０と同様に、同一商品のサービス情報シンボルを重複して複数回検出する場合がある。そこで、サービス検出部１２０は、前回のサービス情報シンボルが検出されたタイミングから第２所定時間経過後に新たなサービス情報シンボル（今回のサービス情報シンボル）を検出した場合、当該新たなサービス情報シンボルを次のサービス情報シンボルとする。言い換えれば、サービス検出部１２０は、先のサービス情報シンボルが検出されてから第２所定時間が経過する前に、後のサービス情報シンボルが検出された場合には、後のサービス情報シンボルを次のサービス情報シンボルとして扱わず、廃棄する。但し、サービス検出部１２０は、先のサービス情報シンボルの検出から第２所定時間の経過前に検出されたとしても、各サービス情報シンボルが示すサービス情報が互いに異なる場合には、後のサービス情報シンボルを次のサービス情報シンボルとして扱ってもよい。以降、「サービス検出部１２０によるサービス情報シンボルの検出」とは、サービス検出部１２０により行われる、サービス情報シンボルの全ての検出の中の、異なる商品のサービス情報シンボルとして扱われる検出を意味するものとする。ここで用いられる「第２所定時間」は、商品検出部１１０の場合と同様に、例えば、オペレータによる後述の読取部１０８への商品のかざし方等の実際の商品精算業務を基に、経験的又は理論的に算出され、サービス検出部１２０に予め設定される。
　対応付け部１３０は、商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、第３所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける。ここで用いられる「第３所定時間」は、例えば、オペレータによる後述の読取部１０８への商品のかざし方等の実際の商品精算業務を基に、経験的又は理論的に算出され、対応付け部１３０に予め設定される。また、対応付け部１３０は、商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルが検出されてから第３所定時間経過後に、他方のシンボルが検出された場合は、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付けない。また、対応付け部１３０は、商品情報シンボルの検出後、第３所定時間前に、サービス情報が検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する。すなわち、対応付け部１３０は、商品検出部１１０またはサービス検出部１２０によって検出された各シンボルを用いて得られる商品情報とサービス情報との対応関係を判断する。また、本実施形態の対応付け部１３０は、商品検出部１１０またはサービス検出部１２０によって検出された各シンボルを用いて得られる商品情報とサービス情報とを、その対応関係に基づいて対応付け格納部１３２に格納する。対応付け部１３０は、商品情報と対応付けるサービス情報がないと判断した場合には、その商品情報のみをサービス情報と対応付けることなく、対応付け格納部１３２に格納する。
　対応付け格納部１３２は、各シンボルを用いて得られる商品情報とサービス情報とを、対応関係を判別可能に記憶する。図２は、対応付け格納部１３２に格納される情報の一例を示す図である。「精算商品ＩＤ」は、オペレータが精算対象へ登録した商品の登録順、即ち、オペレータが後述の読取部１０８に商品をかざした順番を示す。図２の例では、この「精算商品ＩＤ」によって、同一商品に関する商品情報とサービス情報とを対応付けている。詳細には、図２の１行目には、商品情報およびサービス情報が対応付け部１３０で対応付けられた結果として格納される情報の例が示されている。図２の２行目には、対応付け部１３０で商品情報に対応付けられるサービス情報がないと判断された結果として格納される情報の例が示されている。なお、図２はあくまで一例であり、対応付け格納部１３２に格納される情報は、図２の例に制限されない。また、対応付け格納部１３２は、情報処理装置１０に備えられていてもよいし、情報処理装置１０と通信可能に接続された他の装置に備えられていてもよい。
　監視部１４０は、上述の第３所定時間が経過したかを判断するために、商品情報シンボル及びサービス情報シンボルのいずれか一方の検出後の経過時間を監視する。例えば、監視部１４０は、商品検出部１１０又はサービス検出部１２０によって各シンボルが検出された場合に、各シンボルの検出からの経過時間を判断するためのタイマーを起動させる。また、監視部１４０は、例えば、商品検出部１１０又はサービス検出部１２０によって各シンボルが検出された時間を保持しておき、保持された時間と現在の時間と比較することで経過時間を監視することもできる。但し、監視部１４０による経過時間の監視方法は、これらの例に制限されない。本実施形態の対応付け部１３０は、監視部１４０による経過時間の監視結果に基づいて、各シンボルが検出されてから上述の第３所定時間が経過したか否かを判断することができる。
　ここで、ある商品情報シンボルの検出後、第３所定時間の経過前にサービス情報シンボルが検出されず次の商品情報シンボルが検出されたとする。この場合、監視部１４０は、先の商品情報シンボルの検出後の経過時間の監視を止め、次の商品情報シンボルの検出後の経過時間の監視を開始する。例えば、監視部１４０は、このような場合に、先の商品情報シンボルの検出後の経過時間を管理するタイマーを停止させ、さらに、次の商品情報シンボルの検出後の経過時間を管理するタイマーを起動させる。
　本実施形態の表示処理部１５０は、対応付けが確定した商品情報またはサービス情報を表示部（図示せず）に表示させる。本実施形態では、表示処理部１５０は、対応付け格納部１３２に格納された情報を対応付けが確定した情報として、表示部に表示させる。但し、対応付けの確定状態は、この例に限定されず、対応付け部１３０によって、商品情報とサービス情報との対応付けが決定された状態、又は、商品情報と対応付けるサービス情報がないと判断された状態が、対応付けの確定状態とされてもよい。これにより、表示処理部１５０は、対応付け部１３０によって対応付けられた商品情報及びサービス情報を表示部（図示せず）に表示させる。また、表示処理部１５０は、対応付けるサービスがないと対応付け部１３０により判断された商品情報を、次の商品情報シンボルを用いて得られる次の商品情報よりも前に表示部に表示させる。
　また、対応付け部１３０による商品情報とサービス情報シンボルとの対応付け処理の実行に応じて、音出力部（図示せず）が、対応付けが実行されたことを示す所定の音を更に（或いは代わりに）出力してもよい。音出力部が音を出力することにより、オペレータは対応付け処理が実行されたことを容易に把握できる。
　具体的には、表示処理部１５０は、対応付け格納部１３２を参照して各シンボルから得られる商品情報とサービス情報との対応関係を把握し、例えば、図３に示されるような画面を表示部に表示させる。図３は、図２に示される対応付け格納部１３２の情報に基づいて表示処理部１５０が表示する画面の一例を示す図である。図３の１行目には、対応付け部１３０によって対応付けられた商品情報とサービス情報（例：図２の１行目）に関する画面表示例が示されている。また、図３の２行目には、対応付けられるサービス情報がないと判断された商品情報（例：図２の２行目）に関する画面表示例が示されている。図３に示されるような画面を確認することで、情報処理装置１０のオペレータは、商品情報とサービス情報との対応関係を容易に把握することができる。例えば、図３において、商品名が「ＡＢＣ」の商品には「１０％引き」のサービス情報が対応付けられていることが容易に判断できる。また、図３において、商品名「ＤＥＦ」の商品には、サービス情報が対応付けられていないことが容易に判断できる。但し、図３はあくまで一例であり、表示処理部１５０によって表示される画面は図３に制限されない。例えば、商品情報とサービス情報は、同一の行ではなく、決められた順序（例えば、商品情報、サービス情報の順）で前後の行に分けて表示されてもよい。また、例えば、表示処理部１５０は、画面上に表示される商品情報とサービス情報のうち、対応する商品情報とサービス情報に同一の色や同一の印等を付して、その対応関係を識別可能に表示するようにしてもよい。
　出力部１６０は、対応付け部１３０からの指示に応じて、検出されるべき商品情報シンボルが検出されていない旨を情報処理装置１０のオペレータ等に通知するための所定の出力を行う。少なくとも、対応付け部１３０は、サービス情報シンボルの検出後、第３所定時間経過前に、商品情報シンボルが検出されず次のサービス情報シンボルが検出された場合に、所定の出力を実行する旨の指示を出力部１６０に出す。出力部１６０は、対応付け部１３０からの指示を受け、所定の出力を行う。例えば、出力部１６０は、商品情報シンボルの検出漏れが発生している旨を示すメッセージや商品情報シンボルの読取りを促すメッセージ等を表示部に表示させる。これにより、情報処理装置１０のオペレータに対して、商品情報シンボルの検出漏れを通知することができる。また、これに限らず、出力部１６０は、例えば所定の警告音等を出力して、商品情報シンボルの検出漏れをオペレータに通知するようにしてもよい。
　ここで、図２１を用いて、商品検出部１１０により検出される商品情報シンボルおよびサービス検出部１２０により検出されるサービス情報シンボルについて説明する。図２１は、１つの商品２０が撮像されている商品画像２を例示する図である。図２１に示されるような商品画像２は、図示しない撮像部において撮像される。図２１の例で示される商品画像２に写っている商品２０には、バーコード２２及び値引きシール２４が付されている。バーコード２２は商品情報シンボルの一形態であり、値引きシール２４はサービス情報シンボル一形態である。商品検出部１１０は、例えば、既知の画像処理アルゴリズム等を用いて、商品画像２の中からバーコード２２を検出する。また、サービス検出部１２０も同様に、既知の画像処理アルゴリズム等を用いて、商品画像２の中から値引きシール２４を検出する。ここで、１枚の商品画像２の中に複数の商品２０が写ることもある。この場合は、図２１に示されるように、商品検出部１１０及びサービス検出部１２０は、商品画像２から商品２０を示す商品領域２６を特定し、当該特定された各商品領域２６の中からバーコード２２及び値引きシール２４をそれぞれ検出する。なお、図２１の例では、商品領域２６が商品２０の全体が写っている領域を表しているが、これに限らず、商品２０の一部が写っている領域であってもよい。
　このように、商品検出部１１０は、ある画像から、第１の種類に属する情報（第１情報：例えば商品情報）を示し得る第１の表示を検出する第１の検出手段と呼ぶことができる。また、サービス検出部１２０は、第１の種類とは異なる第２の種類に属する情報（第２情報：例えばサービス情報）を示し得る第２の表示を検出する第２の検出手段と呼ぶことができる。この場合、対応付け部１３０は、第１の表示及び第２の表示のいずれか一方の表示の検出後、所定時間経過前に、他方の表示が検出された場合、当該第１の表示を用いて得られる第１情報と、当該第２の表示を用いて得られる第２情報とを対応付ける。対応付け部１３０は、この対応付けた第１情報と第２情報とを更に出力することで出力手段と呼ぶこともできる。また、対応付け部１３０（出力手段）は、第１の表示の検出後、所定時間経過前に、第２の表示が検出されず次の第１の表示が検出された場合には、前に検出された第１の表示を用いて得られる第１情報と対応付ける第２情報がないと判断する。
　〔ハードウェア構成〕
　図４は、第１実施形態における情報処理装置のハードウェア構成例を概念的に示す図である。図４に示されるように、情報処理装置１０は、ＣＰＵ（Central Processing Unit）１０１、メモリ１０２、入出力インタフェース（Ｉ／Ｆ）１０３、通信部１０４等を有する。ＣＰＵ１０１は、他の各部とバス１０５等の通信線により接続される。メモリ１０２は、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ等である。通信部１０４は、他の装置や機器と信号をやり取りする。通信部１０４には、可搬型記録媒体等も接続され得る。入出力Ｉ／Ｆ１０３は、表示部１０６、入力部１０７、読取部１０８等と接続される。
　表示部１０６は、ＬＣＤ（Liquid Crystal Display）やＣＲＴ（Cathode Ray Tube）ディスプレイのような、ＣＰＵ１０１やＧＰＵ（Graphics Processing Unit）（図示せず）等により処理された描画データに対応する画面を表示するユニットである。入力部１０７は、ユーザ操作の入力を受け付けるユニットであり、例えば、ハードウェアボタンユニット、タッチセンサ等として実現される。表示部１０６及び入力部１０７は一体化され、タッチパネルとして実現されていてもよい。読取部１０８は、レンズ、撮像素子等から形成されるカメラであり、ある瞬間を撮像した１つの静止画像または一定時間に亘って撮像された複数の静止画像を生成する。一定時間に亘って撮像された複数の静止画像は、いわゆる動画であってもよいし、単に静止画像を複数のタイミングで撮像したものであってもよい。また、読取部１０８は、光源、受光素子等から形成されるバーコードリーダーといったシンボル読取装置であってもよい。上述の商品検出部１１０およびサービス検出部１２０は、読取部１０８から取得された情報を用いて、商品情報シンボルおよびサービス情報シンボルを検出する。
　情報処理装置１０のハードウェア構成は、図４に示される構成に限定されない。情報処理装置１０は、図４に示される構成以外の構成を更に有してもよい。また、情報処理装置１０は、表示部１０６、入力部１０７、読取部１０８を有していなくてもよい。この場合、情報処理装置１０は、通信部１０４を介して外部の他の装置と通信し、他の装置の表示部へ描画データを表示させたり、他の装置の入力部を介してユーザからの入力操作を受け付けたり、他の装置の読取部により読み取れられた情報を取得したりする。また、情報処理装置１０が他の装置の読取部から取得する情報は、商品情報シンボルおよびサービス情報シンボルそのものを示す情報であってもよいし、商品情報シンボルおよびサービス情報シンボルを用いて得られる商品情報およびサービス情報であってもよい。
　先に説明した情報処理装置１０の各処理部（商品検出部１１０、サービス検出部１２０、対応付け部１３０、監視部１４０、表示処理部１５０、出力部１６０）は、例えば、ＣＰＵ１０１によってメモリ１０２に格納されるプログラムが実行されることにより実現される。当該プログラムは、例えば、ＣＤ（Compact Disc）やメモリカード等のような可搬型記録媒体、あるいはネットワーク上の他のコンピュータから通信部１０４等を介してインストールされ、メモリ１０２に格納される。そして、ＣＰＵ１０１が、メモリ１０２に格納された、商品検出部１１０、サービス検出部１２０、対応付け部１３０、監視部１４０、表示処理部１５０、出力部１６０の機能を実現する各プログラムを実行することにより、商品検出部１１０、サービス検出部１２０、対応付け部１３０、監視部１４０、表示処理部１５０、出力部１６０がそれぞれ実現される。また、対応付け格納部１３２は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などのストレージ（図示せず）により実現される。
　〔動作例〕
　図５から図７を用いて、本実施形態における情報処理装置の動作例を説明する。図５は、第１実施形態における情報処理装置が第１シンボルを検出する処理の流れを示すフローチャートである。図６は、図５において商品情報シンボルが第１シンボルとして検出された場合の、第１実施形態における情報処理装置の処理の流れを示すフローチャートである。図７は、図５においてサービス情報シンボルが第１シンボルとして検出された場合の、第１実施形態における情報処理装置の流れを示すフローチャートである。
　まず、商品検出部１１０およびサービス検出部１２０によって各シンボルの検出処理が、並列して非同期に実行されている。商品検出部１１０またはサービス検出部１２０のいずれか一方によって検出された各シンボルに関する情報は、対応付け部１３０に向けて逐次送信される。対応付け部１３０は、商品検出部１１０またはサービス検出部１２０から各シンボルに関する情報を受信することにより、第１シンボルが検出されたか否かを判断する（Ｓ１０１）。ここで、第１シンボルとは、本処理において対応付けの判断対象となる２つのシンボルのうち、先に検出されたシンボルである。具体的には、サービス検出部１２０でサービス情報シンボルが検出される前に、商品検出部１１０で商品情報シンボルが先に検出された場合、当該商品情報シンボルが第１シンボルとなる。また、商品検出部１１０で商品情報シンボルが検出される前に、サービス検出部１２０で商品情報シンボルが先に検出された場合、当該サービス情報シンボルが第１シンボルとなる。第１シンボルとして商品情報シンボルが検出された場合（Ｓ１０１：商品情報シンボル）、処理はＡに遷移する。一方、第１シンボルとしてサービス情報シンボルが検出された場合（Ｓ１０１：サービス情報シンボル）、処理はＢに遷移する。
　＜処理Ａ＞
　対応付け部１３０は、Ｓ１０１で検出された第１シンボル（商品情報シンボル）から得られる商品情報を対応付け格納部１３２に格納する（Ｓ１０２）。
　この具体的な例を、図８を用いて説明する。図８は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図８（ａ）に示されるように、Ｓ１０１で検出された第１シンボルから得られる商品情報を対応付け格納部１３２に格納する。なお、図８（ａ）に示されるように、この時点で商品情報に対応付けられるサービス情報は「未検出」であり、当該商品情報の対応付けは確定していない。そのため、図８（ｂ）に示されるように、Ｓ１０１で検出された第１シンボルから得られる商品情報は、この時点では画面に表示されない。
　監視部１４０は、第１シンボルの検出に応じて、当該第１シンボルが検出されてからの経過時間を管理する処理（経過時間管理処理）を開始する（Ｓ１０３）。具体的には、監視部１４０は、例えば、第３所定時間の経過を判断するためのタイマーを第１シンボルの検出に応じて起動する等して、第１シンボルが検出されてからの経過時間を管理する。そして、対応付け部１３０は、第１シンボルが検出されてから第３所定時間が経過するまでに（Ｓ１０４：ＮＯ）、商品検出部１１０またはサービス検出部１２０のいずれか一方によって、第２シンボルが検出されたか否かを判断する（Ｓ１０５）。ここで、第２シンボルとは、本処理で対応付けの判断対象となる２つのシンボルのうち、後に検出されたシンボルである。具体的には、第１シンボルの検出から第３所定時間が経過するまでの間に検出された商品情報シンボルあるいはサービス情報シンボルが、第２シンボルとして扱われる。また、第１シンボルが検出されてから第３所定時間が経過したか否かは、例えば、監視部１４０で管理される経過時間を参照することにより判断できる。また、これに限らず、監視部１４０は、管理している経過時間が第３所定時間以上となった時点で、第３所定時間が経過した旨を示す通知を対応付け部１３０に出力するようにしてもよい。
　ここで、店舗において商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、商品情報シンボルやサービス情報シンボルは商品ごとに逐次検出される可能性が高い。すなわち、対応付け部１３０は、ある商品情報シンボルが検出された後、次の商品情報シンボルが検出された時点で、次の商品が処理対象となっていると推定できる。ここで、ある商品情報シンボルが検出された後、第３所定時間の経過前に、サービス情報シンボルが検出されずに次の商品情報シンボルが検出されたとする。この場合、対応付け部１３０は、処理対象が次の商品に移っていると判断して、先に検出された商品情報シンボルには、対応するサービス情報シンボルが存在しない可能性が高いと推定できる。そこで、第２シンボルとして商品情報シンボルが検出された場合（Ｓ１０５：商品情報シンボル）、対応付け部１３０は、第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断する（Ｓ１０６）。そして、対応付け部１３０は、Ｓ１０６における判断とＳ１０５で検出された第２シンボルから得られる商品情報とに基づいて、対応付け格納部１３２を更新する（Ｓ１０７）。そして、表示処理部１５０は、対応付け格納部１３２に格納されている情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１０８）。
　この具体的な例を、図９を用いて説明する。図９は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図９（ａ）に示されるように、対応付け格納部１３２の情報を更新する。詳細には、対応付け部１３０は、図９（ａ）の２行目に示されるように、Ｓ１０６で検出された商品情報シンボルから得られる商品情報を対応付け格納部１３２に新たに格納する。なお、図８の場合と同様に、この時点で新たな商品情報に対応付けられるサービス情報は「未検出」であり、当該商品情報の対応付けは確定していない。一方、Ｓ１０２で先に格納された商品情報に対しては、対応付け部１３０は、図９（ａ）の１行目に示されるように、対応付けられるサービス情報がない旨を示す情報（「サービス情報なし」）を付加する。これにより、Ｓ１０１で検出された第１シンボルから得られる先の商品情報の対応付けが確定する。そのため、２つの商品情報シンボルの双方に対して第３所定時間以内のタイミングでサービス情報シンボルが後に検出されたとしても、当該サービス情報シンボルから得られるサービス情報は、後の商品情報シンボルから得られる商品情報に対応付けられる。そして、表示処理部１５０は、図９（ａ）に示されるような情報を基に、例えば図９（ｂ）に示されるような画面を表示部１０６に表示させる。ここでは、対応付けが確定した先の商品情報が表示部１０６上に表示される。
　また、第２シンボルである商品情報シンボルから得られる商品情報（例：図９（ａ）の２行目）に関しては、後にサービス情報シンボルが検出されて、対応付け処理が実行される可能性がある。そのため、対応付け部１３０は、第２シンボルである商品情報シンボルを新たな第１シンボルとし（Ｓ１０９）、Ｓ１０３の処理へ戻り上述の処理を繰り返す。上述の処理を繰り返す際、監視部１４０は、第２シンボル（すなわち、新たな第１シンボル）が検出されたタイミングを基準として経過時間を管理する。また、これに伴い、前の第１シンボルに関する経過時間管理処理は停止される。
　また、商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、同一商品に付された商品情報シンボル及びサービス情報シンボルはある程度近いタイミングで検出される可能性が高いと考えられる。ここでいう「ある程度近いタイミング」は、第３所定時間を定める指標となるタイミングであり、経験的又は理論的に算出できる。つまり、商品情報シンボルおよびサービス情報シンボルが第３所定時間以内に検出された場合、当該各シンボルから得られる商品情報およびサービス情報は対応付く可能性が高いと言える。この考えに基づいて、第３所定時間の経過前に第２シンボルとしてサービス情報シンボルが検出された場合（Ｓ１０５：サービス情報シンボル）、対応付け部１３０は、各シンボルから得られる商品情報とサービス情報との対応付け処理を実行する（Ｓ１１０）。そして、対応付け部１３０は、Ｓ１１０の対応付け処理の結果に基づいて、対応付け格納部１３２を更新する（Ｓ１１１）。そして、表示処理部１５０は、対応付け格納部１３２に格納されている対応付け情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１１２）。
　この具体的な例を、図１０を用いて説明する。図１０は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図１０（ａ）に示されるように、Ｓ１１０の対応付け処理の結果に基づいて対応付け格納部１３２の情報を更新する。詳細には、対応付け部１３０は、Ｓ１０２で格納された商品情報に対して、第２シンボル（サービス情報シンボル）から得られるサービス情報を対応付ける。これにより、Ｓ１０１で検出された第１シンボルから得られる商品情報と、Ｓ１０５で検出された第２シンボルから得られるサービス情報との対応付けが確定する。そして、表示処理部１５０は、対応付けが確定した商品情報とサービス情報とを、例えば図１０（ｂ）に示されるように、表示部１０６に表示させる。
　また、第２シンボルが検出されないまま（Ｓ１０５：ＮＯ）第３所定時間が経過した場合（Ｓ１０４：ＹＥＳ）、対応付け部１３０は、第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断する（Ｓ１１３）。これは、上述した「同一商品に付された商品情報シンボルとサービス情報シンボルはある程度近いタイミングで検出される可能性が高い」という考えに基づくものである。そして、対応付け部１３０は、Ｓ１１３における判断に基づいて、対応付け格納部１３２を更新する（Ｓ１１１）。そして、表示処理部１５０は、対応付け格納部１３２に格納されている対応付け情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１１２）。
　この具体的な例を、図１１を用いて説明する。図１１は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図１１（ａ）に示されるように、Ｓ１１３の判断に基づいて対応付け格納部１３２の情報を更新する。詳細には、対応付け部１３０は、Ｓ１０２で先に格納された商品情報に対して、対応付けられるサービス情報がない旨を示す情報（「サービス情報なし」）を付加する。これにより、Ｓ１０１で検出された第１シンボルから得られる商品情報の対応付けが確定する。そして、表示処理部１５０は、図１１（ａ）に示されるような情報を基に、例えば図１１（ｂ）に示されるような画面を表示部１０６に表示させる。
　Ｓ１１０で商品情報とサービス情報との対応付け処理が実行されるか、Ｓ１１３で第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断された場合、次に検出されるシンボルは第１シンボルとなる。そのため、Ｓ１１０で商品情報とサービス情報との対応付け処理が実行されるか、Ｓ１１３で第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断された場合、処理はＳ１０１に戻る。なお、この一連の処理の流れは、ある顧客に対する商品精算業務が完了するまで繰り返される。
　＜処理Ｂ＞
　対応付け部１３０は、Ｓ１０１で検出された第１シンボル（サービス情報シンボル）から得られるサービス情報を対応付け格納部１３２に格納する（Ｓ１１６）。
　この具体的な例を、図１２を用いて説明する。図１２は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図１２（ａ）に示されるように、Ｓ１０１で検出された第１シンボルから得られるサービス情報を対応付け格納部１３２に格納する。なお、図１２（ａ）に示されるように、この時点でサービス情報に対応付けられる商品情報は「未検出」であり、当該サービス情報の対応付けは確定していない。そのため、図１２（ｂ）に示されるように、Ｓ１０１で検出された第１シンボルから得られるサービス情報は、この時点では画面に表示されない。
　監視部１４０は、第１シンボルの検出に応じて、当該第１シンボルが検出されてからの経過時間を管理する処理（経過時間管理処理）を開始する（Ｓ１１６）。具体的には、監視部１４０は、例えば第３所定時間の経過を判断するためのタイマーを第１シンボルの検出に応じて起動する等して、第１シンボルが検出されてからの経過時間を管理する。そして、対応付け部１３０は、第１シンボルが検出されてから第３所定時間が経過するまでに（Ｓ１１７：ＮＯ）、商品検出部１１０またはサービス検出部１２０のいずれか一方によって、第２シンボルが検出されたか否かを判断する（Ｓ１１８）。これらの処理は、上述の処理Ａの場合と同様である。
　ここで、上述したように、商品情報シンボルおよびサービス情報シンボルが第３所定時間以内に検出された場合、当該各シンボルから得られる商品情報およびサービス情報は対応付く可能性が高いと考えられる。この考えに基づいて、第３所定時間の経過前に第２シンボルとして商品情報シンボルが検出された場合（Ｓ１１８：商品情報シンボル）、対応付け部１３０は、各シンボルから得られる商品情報とサービス情報との対応付け処理を実行する（Ｓ１２４）。そして、対応付け部１３０は、Ｓ１２４の対応付け処理の結果に基づいて、対応付け格納部１３２を更新する（Ｓ１２５）。そして、表示処理部１５０は、対応付け格納部１３２に格納されている対応付け情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１２６）。
　この具体的な例を、図１３を用いて説明する。図１３は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図１３（ａ）に示されるように、Ｓ１２４の対応付け処理の結果に基づいて対応付け格納部１３２の情報を更新する。詳細には、対応付け部１３０は、Ｓ１１５で格納されたサービス情報に対して、第２シンボル（商品情報シンボル）から得られる商品情報を対応付ける。これにより、Ｓ１０１で検出された第１シンボルから得られるサービス情報と、Ｓ１１８で検出された第２シンボルから得られる商品情報との対応付けが確定する。そして、表示処理部１５０は、対応付けが確定したサービス情報と商品情報とを、例えば図１３（ｂ）に示されるように、表示部１０６に表示させる。
　また、上述したように、商品情報シンボルやサービス情報シンボルは商品ごとに逐次検出される。さらに、サービス情報に対しては、サービス適用対象の商品が必ず存在するはずである。そのため、次のサービス情報シンボルが検出された時点で、次の商品が処理対象となっており、前のサービス情報シンボルが付されている商品に関する商品情報シンボルが検出されていないと判断できる。この考えに基づいて、第２シンボルとしてサービス情報シンボルが検出された場合（Ｓ１１８：サービス情報シンボル）、対応付け部１３０は、商品情報シンボルの検出漏れが発生したと判断し、出力部１６０に所定の出力を行う旨の指示を送信する（Ｓ１１９）。
　Ｓ１１９における所定の出力として、出力部１６０は、例えば、商品情報シンボルの検出漏れが発生している旨を示すメッセージや商品情報シンボルの読取りを促すメッセージ等を表示部１０６に表示させる。具体的な例として、出力部１６０は図１４に示されるようなメッセージを表示部１０６に表示させる。図１４は、出力部１６０による所定の出力を例示する図である。このようなメッセージ等の出力により、情報処理装置１０のオペレータが商品情報の検出漏れが発生していることを認知できる。そして、このメッセージを確認したオペレータによって、第１シンボルとして検出されたサービス情報シンボルに対応する商品情報シンボルの読取操作が実行される。このようにして、第１シンボルとして検出されたサービス情報シンボルから得られるサービス情報に対応付けられる商品情報が正しく取得される。但し、Ｓ１１９における出力部１６０の出力は、上述の例に制限されない。Ｓ１２０では、サービス情報シンボルに対応する商品情報シンボルの検出につながるような情報が出力されればよい。例えば、出力部１６０は、所定の警告音を出力する等して、商品情報シンボルの検出漏れをオペレータに通知するようにしてもよい。
　そして、対応付け部１３０は、第１シンボルであるサービス情報シンボルから得られるサービス情報と、Ｓ１１９の出力に応じて読み取られた商品情報シンボルから得られる商品情報とを対応付ける（Ｓ１２０）。そして、対応付け部１３０は、第１シンボルから得られるサービス情報およびＳ１１９の出力に応じて読み取られた商品情報シンボルから得られる商品情報が対応付くこと示す対応付け情報に基づいて、対応付け格納部１３２を更新する（Ｓ１２１）。そして、表示処理部１５０は、対応付け格納部１３２に格納されている対応付け情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１２２）。
　この具体的な例を、図１５を用いて説明する。図１５は、対応付け格納部に格納される情報および表示部に表示される画面を例示する図である。対応付け部１３０は、図１５（ａ）に示されるように、対応付け格納部１３２の情報を更新する。詳細には、対応付け部１３０は、図１５（ａ）の２行目に示されるように、Ｓ１１８で検出されたサービス情報シンボルから得られるサービス情報を対応付け格納部１３２に新たに格納する。なお、図１２の場合と同様に、この時点で新たなサービス情報に対応付けられる商品情報は「未検出」であり、当該サービス情報の対応付けは確定していない。一方、Ｓ１１５で先に格納されたサービス情報に対しては、対応付け部１３０は、図１５（ａ）の１行目に示されるように、Ｓ１１９の出力により読み取られた商品情報シンボルから得られる商品情報を対応付ける。これにより、Ｓ１０１で検出された第１シンボルから得られる先のサービス情報の対応付けが確定する。そして、表示処理部１５０は、図１５（ａ）に示されるような情報を基に、例えば図１５（ｂ）に示されるような画面を表示部１０６に表示させる。ここでは、対応付けが確定した先のサービス情報と商品情報とが表示部１０６上に表示される。
　また、第２シンボルであるサービス情報シンボルから得られるサービス情報に関しては、後も商品情報シンボルが検出されて、対応付け処理が実行される可能性がある。そのため、対応付け部１３０は、第２シンボルであるサービス情報シンボルを新たな第１シンボルとし（Ｓ１２３）、Ｓ１１６の処理へ戻り上述の処理を繰り返す。上述の処理を繰り返す際、監視部１４０は、第２シンボル（すなわち、新たな第１シンボル）が検出されたタイミングを基準として経過時間を管理する。また、これに伴い、前の第１シンボルに関する経過時間管理処理は停止される。
　また、第２シンボルが検出されないまま（Ｓ１１８：ＮＯ）第３所定時間が経過した場合も（Ｓ１１７：ＹＥＳ）、第１シンボルとして検出されたサービス情報シンボルに対する商品情報シンボルの検出漏れが発生していると考えられる。よって、対応付け部１３０は、あるサービス情報シンボルが検出された後、第３所定時間の経過前に、商品情報シンボルが検出されずに次のサービス情報シンボルが検出された場合と同様に、出力部１６０に所定の出力を行う旨の指示を送信する（Ｓ１２７）。そして、出力部１６０による出力を確認したオペレータによって、第１シンボルであるサービス情報シンボルに対応する商品情報シンボルが読み込まれる。そして、商品情報シンボルの読取りに応じて、対応付け部１３０が、第１シンボルから得られるサービス情報とＳ１２７で読み取られた商品情報シンボルから得られる商品情報とを対応付ける（Ｓ１２４）。そして、対応付け部１３０は、第１シンボルから得られるサービス情報とＳ１２７の出力に応じて読み取られた商品情報シンボルから得られる商品情報が対応付くこと示す対応付け情報とに基づいて、対応付け格納部１３２を更新する（Ｓ１２５）。そして、表示処理部１５０が、対応付け格納部１３２に格納されている対応付け情報に基づいて、表示部１０６の表示内容を更新する（Ｓ１２６）。具体的には、Ｓ１２７の出力により読み取られた商品情報シンボルから得られる商品情報を用いて、図１３の例と同様の処理が実行される。
　Ｓ１２４で商品情報とサービス情報との対応付け処理が実行された場合、次に検出されるシンボルは第１シンボルとなる。そのため、Ｓ１２４で商品情報とサービス情報との対応付け処理が実行された場合、処理はＳ１０１に戻る。なお、この一連の処理の流れは、ある顧客に対する商品精算業務が完了するまで繰り返される。
　上述のように、本実施形態では、商品情報シンボル及びサービス情報シンボルの各検出処理が非同期に並列に実行される。これにより、商品情報シンボルの検出後にサービス情報シンボルを検出する形態に比べ、オペレータによる商品情報シンボル及びサービス情報シンボルの読取部１０８へのかざし作業を容易化でき、かつ、両シンボルが検出されるまでの時間を短縮することができる。但し、これにより、商品情報シンボルとサービス情報シンボルとの検出順が一定とならない。
　そこで、本実施形態では、商品情報シンボルとサービス情報シンボルのいずれか一方が検出されてから第３所定時間が経過する前に他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とが対応付けられる。ここで、商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、同一商品に付された商品情報シンボル及びサービス情報シンボルはある程度近いタイミング、すなわち第３所定時間以内で検出される可能性が高い。言い換えると、商品情報シンボルおよびサービス情報シンボルが第３所定時間以内に検出された場合、当該各シンボルから得られる商品情報およびサービス情報は対応付く可能性が高いと言える。従って、本実施形態によれば、商品情報シンボルとサービス情報シンボルとの検出順が一定とならない場合でも、同一の商品に関する商品情報とサービス情報とを正確に対応付けることができる。
　また、前の商品情報シンボルが検出された後、第３所定時間の経過前に、サービス情報シンボルが検出されずに次の商品情報シンボルが検出された場合、前の商品情報シンボルから得られる商品情報シンボルには、対応付けられるサービス情報がないと判断される。ここで、店舗において商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、商品情報シンボルやサービス情報シンボルは商品ごとに逐次検出される可能性が高い。すなわち、次の商品情報シンボルが検出された時点で、次の商品が処理対象となっており、前の商品情報シンボルが付されている商品にはサービス情報シンボルが付されていないと推定できる。よって、ある商品情報シンボルが検出された後、第３所定時間の経過前に、サービス情報シンボルが検出されずに次の商品情報シンボルが検出された場合、先に検出された商品情報シンボルには対応するサービス情報シンボルが存在しないと判断できる。従って、本実施形態によれば、サービス情報が対応付かない商品情報を精度よく判断することができる。
　また、本実施形態では、対応付けが確定した商品情報およびサービス情報が、表示部に表示される。これにより、本実施形態によれば、商品精算業務を行うオペレータは、商品情報とサービス情報とが正確に対応付けられているか否かを容易に把握することができる。
　また、本実施形態では、あるサービス情報シンボルの検出後、商品情報シンボルが検出されずに次のサービス情報シンボルが検出された場合、出力部１６０により所定の出力がなされる。例えば、検出されるべき商品情報シンボルが検出されていない旨を情報処理装置１０のオペレータ等に通知するためのメッセージ等が出力部１６０により出力される。これにより、情報処理装置１０のオペレータに商品情報シンボルが検出されていないことを通知することができ、商品情報とサービス情報とを対応付ける精度の向上が見込める。
［第２実施形態］
　上述した課題の解決手段として、情報処理装置１０は、第１実施形態の構成に限らず、少なくとも商品検出部１１０、サービス検出部１２０、及び対応付け部１３０を備えていればよい。情報処理装置１０の各処理部（商品検出部１１０、サービス検出部１２０、対応付け部１３０）は、第１実施形態と同様に、ＣＰＵ１０１が各処理部の機能を実現するプログラムをそれぞれ実行することにより実現される。また、対応付け格納部１３２は、第１実施形態と同様に、ＨＤＤやＳＳＤなどのストレージ（図示せず）により実現される。
　〔処理構成〕
　図１６は、第２実施形態における情報処理装置の処理構成を概念的に示す図である。図１６に示されるように、第２実施形態の情報処理装置１０は、商品検出部１１０と、サービス検出部１２０と、対応付け部１３０とを有する。
　商品検出部１１０は商品情報シンボルを検出し、サービス検出部１２０はサービス情報シンボルを検出する。商品検出部１１０およびサービス検出部１２０の動作は、第１実施形態と同様であるため、詳細な説明は省略する。
　対応付け部１３０は、第１実施形態と同様に、商品検出部１１０またはサービス検出部１２０によって検出された各シンボルを用いて得られる商品情報とサービス情報との対応関係を判断する。本実施形態では、対応付け部１３０によって、各シンボルの検出から第３所定時間が経過したか否かが管理される。具体的には、本実施形態の対応付け部１３０は、続けて検出された２つのシンボルそれぞれの検出時間を比較することにより、先のシンボルが検出されてから次のシンボルが検出されるまでの経過時間を判断する。また、対応付け部１３０は、先のシンボルが検出されてから次のシンボルが検出されない場合、現在時刻と先のシンボルの検出時刻とを比較して、先のシンボルが検出されてからの経過時間を判断する。そして、対応付け部１３０は、上述したように判断された経過時間と、予め設定されている閾値時間Ｔｔｈとを比較することにより、第３所定時間が経過したか否かを判断する。但し、対応付け部１３０が第３所定時間の経過を管理する方法は、この方法に制限されない。
　〔動作例〕
　図１７及び図１８を用いて、本実施形態における情報処理装置の動作例を説明する。図１７は、図５において商品情報シンボルが第１シンボルとして検出された場合の、第２実施形態における情報処理装置の処理の流れを示すフローチャートである。図１８は、図５においてサービス情報シンボルが第１シンボルとして検出された場合の、第２実施形態における情報処理装置の処理の流れを示すフローチャートである。なお、第１実施形態で説明した、図５に示される処理は、本実施形態においても共通である。
　＜処理Ａ＞
　対応付け部１３０は、第１シンボル（商品情報シンボル）の検出に応じて、当該第１シンボルの検出時間Ｔ１を取得する（Ｓ２０１）。対応付け部１３０は、例えば、商品検出部１１０から当該商品情報シンボルの検出時間Ｔ１をさらに取得する。これに限らず、対応付け部１３０は、商品検出部１１０から商品情報シンボルに関する情報を受信したタイミングを基に、検出時間Ｔ１を判断することもできる。そして、対応付け部１３０は、商品検出部１１０またはサービス検出部１２０のいずれか一方によって、第２シンボルが検出されたか否かを判断する（Ｓ２０２）。
　第１実施形態で説明したように、店舗において商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、商品情報シンボルやサービス情報シンボルは商品ごとに逐次検出される可能性が高い。すなわち、次の商品情報シンボルが検出された時点で、次の商品が処理対象となっており、前の商品情報シンボルが付されている商品にはサービス情報シンボルが付されていないと推定できる。よって、ある商品情報シンボルが検出された後、サービス情報シンボルが検出されずに次の商品情報シンボルが検出された場合、先に検出された商品情報シンボル（すなわち、第１シンボル）には、対応するサービス情報シンボルが存在しない可能性が高い。この考えに基づいて、第２シンボルとして商品情報シンボルが検出された場合（Ｓ２０２：商品情報シンボル）、対応付け部１３０は、第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断する（Ｓ２０３）。そして、対応付け部１３０は、Ｓ２０３における判断とＳ２０２で検出された第２シンボルから得られる商品情報とに基づいて、対応付け格納部１３２を更新する（Ｓ２０４）。具体的には、第１実施形態で説明した、図９の例と同様の処理が実行される。
　また、第２シンボルである商品情報シンボルから得られる商品情報に関しては、後にサービス情報シンボルが検出されて、対応付け処理が実行される可能性がある。そのため、対応付け部１３０は、第２シンボルである商品情報シンボルを新たな第１シンボルとし（Ｓ２０５）、Ｓ２０２の処理へ戻り上述の処理を繰り返す。
　また、第１実施形態で説明したように、商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、同一商品に付された商品情報シンボル及びサービス情報シンボルはある程度近いタイミングで検出される可能性が高いと考えられる。つまり、商品情報シンボルおよびサービス情報シンボルが第３所定時間以内に検出された場合、当該各シンボルから得られる商品情報およびサービス情報は対応付く可能性が高いと言える。この考えに基づいて、第２シンボルとしてサービス情報シンボルが検出された場合（Ｓ２０２：サービス情報シンボル）、対応付け部１３０は、第２シンボルが第３所定時間内に取得されたか否かを判定する。詳細には、対応付け部１３０は、第２シンボルの検出時間Ｔ２を取得し（Ｓ２０６）、第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈ以下であるか否かを判定する（Ｓ２０７）。
　第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈ以下である場合（Ｓ２０７：ＹＥＳ）、対応付け部１３０は、各シンボルから得られる商品情報とサービス情報との対応付け処理を実行する（Ｓ２０８）。具体的には、対応付け部１３０は、第１シンボルである商品情報シンボルから得られる商品情報と、第２シンボルであるサービス情報シンボルから得られるサービス情報とを対応付ける。そして、対応付け部１３０は、Ｓ２０８の対応付け処理の結果に基づいて、対応付け格納部１３２を更新する（Ｓ２０９）。具体的には、第１実施形態で説明した、図１０の例と同様の処理が実行される。
　Ｓ２０８で商品情報とサービス情報との対応付け処理が実行された場合、次に検出されるシンボルは第１シンボルとなる。そのため、Ｓ２０８で商品情報とサービス情報との対応付け処理が実行された場合、処理は図５のＳ１０１に戻る。なお、この一連の処理の流れは、ある顧客に対する商品精算業務が完了するまで繰り返される。
　一方、第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈを超える場合（Ｓ２０７：ＮＯ）、対応付け部１３０は、Ｓ２０３と同様の処理を実行する。すなわち、対応付け部１３０は、第１シンボルである商品情報シンボルから得られる商品情報に対応付けられるサービス情報がないと判断する（Ｓ２１０）。そして、対応付け部１３０は、Ｓ２１０における判断に基づいて、対応付け格納部１３２を更新する（Ｓ２１１）。具体的には、第１実施形態で説明した、図１１の例と同様の処理が実行される。
　また、第２シンボルであるサービス情報シンボルから得られるサービス情報に関しては、後に商品情報シンボルが検出されて、対応付け処理が実行される可能性がある。そのため、対応付け部１３０は、第２シンボルである商品情報シンボルを新たな第１シンボルとし（Ｓ２１２）。この場合、サービス情報シンボルが第１シンボルとなるため、処理はＢへ遷移する。
　＜処理Ｂ＞
　対応付け部１３０は、第１シンボル（サービス情報シンボル）の検出に応じて、当該第１シンボルの検出時間Ｔ１を取得する（Ｓ２１３）。対応付け部１３０は、例えば、サービス検出部１２０から当該サービス情報シンボルの検出時間Ｔ１をさらに取得する。これに限らず、対応付け部１３０は、サービス検出部１２０からサービス情報シンボルに関する情報を受信したタイミングを基に、検出時間Ｔ１を判断することもできる。そして、対応付け部１３０は、商品検出部１１０またはサービス検出部１２０のいずれか一方によって、第２シンボルが検出されたか否かを判断する（Ｓ２１４）。これらの処理は、上述の処理Ａの場合と同様である。
　また、第１実施形態で説明したように、商品精算業務を行うオペレータは、通常、商品情報シンボルやサービス情報シンボルを読ませる操作を１つの商品ごとに行う。そのため、同一商品に付された商品情報シンボル及びサービス情報シンボルはある程度近いタイミングで検出される可能性が高いと考えられる。つまり、商品情報シンボルおよびサービス情報シンボルが第３所定時間以内に検出された場合、当該各シンボルから得られる商品情報およびサービス情報は対応付く可能性が高いと言える。この考えに基づいて、第２シンボルとして商品情報シンボルが検出された場合（Ｓ２１４：商品情報シンボル）、対応付け部１３０は、第２シンボルが第３所定時間内に取得されたか否かを判定する。詳細には、対応付け部１３０は、第２シンボルの検出時間Ｔ２を取得し（Ｓ２１５）、第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈ以下であるか否かを判定する（Ｓ２１６）。
　第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈ以下である場合（Ｓ２１６：ＹＥＳ）、対応付け部１３０は、各シンボルから得られる商品情報とサービス情報との対応付け処理を実行する（Ｓ２１７）。具体的には、対応付け部１３０は、第１シンボルであるサービス情報シンボルから得られるサービス情報と、第２シンボルである商品情報シンボルから得られる商品情報とを対応付ける。そして、対応付け部１３０は、Ｓ２１７の対応付け処理の結果に基づいて、対応付け格納部１３２を更新する（Ｓ２１８）。具体的には、第１実施形態で説明した、図１３の例と同様の処理が実行される。
　Ｓ２１７で商品情報とサービス情報との対応付け処理が実行された場合、次に検出されるシンボルは第１シンボルとなる。そのため、Ｓ２１７で商品情報とサービス情報との対応付け処理が実行された場合、処理は図５のＳ１０１に戻る。なお、この一連の処理の流れは、ある顧客に対する商品精算業務が完了するまで繰り返される。
　一方、第２シンボルの検出時間Ｔ２と第１シンボルの検出時間Ｔ１との差分が、予め設定された閾値時間Ｔｔｈを超える場合（Ｓ２１６：ＮＯ）、第１実施形態で説明したように、商品情報シンボルの検出漏れ（エラー）が発生している可能性が高いと考えられる。そこで、対応付け部１３０は、このような場合はエラーが発生したと判断し、情報処理装置１０のエラー処理部（図示せず）にエラー処理の実行指示を出す（Ｓ２１９）。Ｓ２１９で実行されるエラー処理は、例えば第１実施形態で説明したような、メッセージや警告音等で商品情報シンボルの検出漏れをオペレータに通知し、商品情報シンボルを読み取らせる、といった処理である。なお、エラー処理はこの例に制限されない。
　また、第１実施形態で説明したように、商品情報シンボルやサービス情報シンボルは商品ごとに逐次検出される。さらに、サービス情報に対しては、サービス適用対象の商品が必ず存在するはずである。そのため、次のサービス情報シンボルが検出された時点で、次の商品が処理対象となっており、前のサービス情報シンボルが付されている商品に関する商品情報シンボルが検出されていないと判断できる。この考えに基づいて、第２シンボルとしてサービス情報シンボルが検出された場合（Ｓ２１４：サービス情報シンボル）も、対応付け部１３０は、このような場合は商品情報シンボルの検出漏れ（エラー）が発生したと判断する。そして、対応付け部１３０は、情報処理装置１０のエラー処理部（図示せず）にエラー処理の実行指示を出す（Ｓ２１９）。
　以上、本実施形態によっても、第１実施形態と同様の効果を得ることができる。詳細には、商品情報シンボルとサービス情報シンボルのいずれか一方が検出されてから第３所定時間が経過する前に他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報シンボルとサービス情報シンボルが対応付けられる。また、ある商品情報シンボルが検出された後、第３所定時間の経過前に、サービス情報シンボルが検出されずに次の商品情報シンボルが検出された場合、先に検出された商品情報シンボルから得られる商品情報には、対応付けられるサービス情報がないと判断される。これにより、本実施形態によっても、商品情報とサービス情報とを正確に対応付けることができる。
　以下に複数の実施例を挙げ、上述の各実施形態を更に詳細に説明する。本発明は以下の各実施例から何ら限定を受けない。
　図１９は、ＰＯＳレジスタ装置の構成例を示す図である。図１９に示されるように、実施例１は、上述の情報処理装置１０及び情報処理方法が、ＰＯＳ（Point Of Sale）レジスタ装置３０に適用された例を示す。実施例１におけるＰＯＳレジスタ装置３０は、チェッカ装置３１及びキャッシャ装置４１から構成される。チェッカ装置３１は、商品を精算対象に登録し、精算対象商品の情報をキャッシャ装置４１に送る。キャッシャ装置４１は、精算対象の商品の決済処理を行う。精算対象は、チェッカ装置３１及びキャッシャ装置４１のいずれにおいても登録可能である。
　実施例１におけるチェッカ装置３１及びキャッシャ装置４１は、図４と同様に、ＣＰＵ１０１、メモリ１０２、入出力Ｉ／Ｆ１０３及び通信部１０４等を有する。上述の情報処理装置１０は、チェッカ装置３１及びキャッシャ装置４１のいずれにも適用可能であり、上述の情報処理方法は、チェッカ装置３１及びキャッシャ装置４１のいずれでも実行可能である。
　上述の表示部１０６は、タッチパネルユニット３２の表示部３２ａ及び表示部４２の少なくとも一方に相当する。上述の入力部１０７は、タッチパネルユニット３２のタッチパネル３２ｂ及びキーボード３３、並びに、キーボード４３の少なくとも１つに相当する。上述の読取部１０８は、スキャナ装置３４およびスキャナ装置４４に相当する。スキャナ装置３４は、読取窓３５にかざされた商品の外観を映し出す商品画像を撮像する。スキャナ装置３４で撮像された画像を処理することにより、商品情報シンボルやサービス情報シンボルが検知され、商品情報やサービス情報を取得することができる。スキャナ装置４４は、光源（不図示）を有しており、商品の包装材等に照射した光の反射光を受光素子（不図示）を用いて検知することで、商品情報やサービス情報を読み取ることができる。
　実施例１によれば、スキャナ装置３４やスキャナ装置４４による商品情報シンボルおよびサービス情報シンボルの検出タイミングに応じて、例えば図８（ａ）から図１５（ａ）に示すように商品情報とサービス情報との対応付けが管理される。これにより、本実施形態によれば、商品情報とサービス情報とを正確に対応付けることができる。また、このように管理される情報を基に、表示処理部１５０により図８（ｂ）から図１５（ｂ）のような画面がタッチパネルユニット３２または表示部４２に表示される。そして、ＰＯＳレジスタ装置３０のオペレータは、このようにタッチパネルユニット３２や表示部４２に表示された画面に基づいて、商品情報とサービス情報とが正確に対応付けられているか否かを容易に把握することができる。
　実施例１では、図７に示されるように、ＰＯＳレジスタ装置３０がチェッカ装置３１及びキャッシャ装置４１を有したが、ＰＯＳレジスタ装置３０は、キャッシャ装置４１のみで構成されてもよい。この場合、キャッシャ装置４１が、スキャナ装置３４を有していればよい。
　図２０は、ＰＯＳシステムの構成例を示す図である。図２０に示されるように、実施例２は、上述の情報処理装置１０及び商品画像提示方法が、ＰＯＳシステム５０に適用された例を示す。実施例２におけるＰＯＳシステム５０は、サーバ装置５１及び店舗側構成５２から構成され、サーバ装置５１と店舗側構成５２とは、通信網５３により通信可能に接続される。店舗側構成５２には、通信中継装置を介して通信網５３に接続可能な店舗端末５４、スタンド５５等が含まれる。スタンド５５は、店舗端末５４と、他の機器（ハンディスキャナ、キャッシュドロア、レシートプリンタ等）とを通信可能に接続するための機器である。
　店舗端末５４は、ＰＣ（Personal Computer）、ノートＰＣ、タブレット型端末、スマートフォン等のような汎用コンピュータであり、サーバ装置５１との間でデータのやり取りをすることにより、上述のＰＯＳレジスタ装置３０と同様の機能を実現する。店舗端末５４は、タッチパネルユニット５６、撮像部５７等を有する。上述の表示部１０６は、タッチパネルユニット５６の表示部に相当する。上述の入力部１０７は、タッチパネルユニット５６のタッチパネルに相当する。上述の読取部１０８は、撮像部５７に相当する。
　サーバ装置５１は、一般的なサーバコンピュータであり、ＷＥＢサーバ、アプリケーションサーバ等として実現される。店舗端末５４及びサーバ装置５１は、図４と同様に、ＣＰＵ１０１、メモリ１０２、入出力Ｉ／Ｆ１０３及び通信部１０４等を有する。
　上述の情報処理装置１０は、サーバ装置５１のみ、店舗端末５４のみ、又は、それら両方として実現され得る。同様に、上述の情報処理方法は、サーバ装置５１のみ、店舗端末５４のみ、又は、それら両方により実行可能である。例えば、サーバ装置５１と店舗端末５４との間のインタフェースとしてＷＥＢシステムが利用される場合、上述の全処理部がサーバ装置５１で実現され、店舗端末５４は、単なる表示部として動作してもよい。逆に、店舗端末５４において全処理部が実現されてもよい。また、一部の処理部がサーバ装置５１で実現され、残りの処理部が店舗端末５４で実現されてもよい。例えば、対応付け部１３０がサーバ装置５１で実現され、その他の処理部が店舗端末５４で実現されてもよい。
　実施例２によれば、店舗端末５４のオペレータは、撮像部５７やスタンド５５に接続されるスキャナ装置による各シンボルの検出タイミングに応じて、例えば図８（ａ）から図１５（ａ）に示すように商品情報とサービス情報との対応付けが管理される。これにより、本実施形態によれば、商品情報とサービス情報とを正確に対応付けることができる。また、このように管理される情報を基に、表示処理部１５０により図８（ｂ）から図１５（ｂ）のような画面がタッチパネルユニット５６に表示される。そして、店舗端末５４のオペレータは、このようにタッチパネルユニット５６に表示された画面に基づいて、商品情報とサービス情報とが正確に対応付けられているか否かを容易に把握することができる。
　上述の情報処理装置１０及び情報処理方法は、ＰＯＳレジスタ装置３０及びＰＯＳシステム５０のみに適用可能なわけではなく、商品の判断を支援するあらゆる装置に適用可能である。例えば、上述の情報処理装置１０及び情報処理方法は、一般ユーザに利用されるＰＣやスマートデバイスのような汎用コンピュータに適用されてもよい。
　このように、本発明における情報処理装置は、複数の装置（複数のコンピュータ、複数のＣＰＵを持つ筐体）で実現されることを排除するものではない。また、上述の各実施形態は、内容が相反しない範囲で組み合わせることができる。
　以上、図面を参照して本発明の実施形態および実施例について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
　例えば、第１実施形態では、商品情報およびサービス情報は、対応関係が確定した時点で表示部１０６に表示される例を示した。しかし、これに限らず、商品検出部１１０およびサービス検出部１２０で各シンボルが検出されたタイミングで、各シンボルから得られる商品情報およびサービス情報を表示してもよい。この場合、第３所定時間の経過やシンボルの検出順序等に基づく対応付け部１３０対応付け処理の結果に応じて、表示部１０６の表示内容が更新される。
　また、例えば、第２実施形態において、対応付け部１３０は、第１シンボルの検出時間Ｔ１と現在時刻とに基づいて経過時間を算出し、その経過時間が閾値時間Ｔｔｈ以内の間に第２シンボルが検出された場合に対応付け処理を実行するようにしてもよい。
　また、上述の説明で用いた複数のフローチャートでは、複数の工程（処理）が順番に記載されているが、各実施形態で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態では、図示される工程の順番を内容的に支障のない範囲で変更することができる。
　以下、参考形態の例を付記する。
１．商品情報シンボルを検出する商品検出手段と、
　サービス情報シンボルを検出するサービス検出手段と、
　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける対応付け手段と、
　を備え、
　前記対応付け手段は、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する、
　情報処理装置。
２．前記対応付け手段により対応付けられた商品情報及びサービス情報を表示部に表示させる表示処理手段、
　を更に備え、
　前記表示処理手段は、対応付けるサービス情報がないと前記対応付け手段により判断された商品情報を、前記次の商品情報シンボルを用いて得られる次の商品情報よりも前に前記表示部に表示させる、
　１．に記載の情報処理装置。
３．前記対応付け手段は、サービス情報シンボルの検出後、所定時間経過前に、商品情報シンボルが検出されず次のサービス情報シンボルが検出された場合には、所定の出力を行うよう出力部に指示する、
　１．又は２．に記載の情報処理装置。
４．商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後の経過時間を監視する監視手段、
　を更に備え、
　前記商品検出手段は、今回検出された商品情報シンボルに対応する商品情報が前回検出された商品情報シンボルに対応する商品情報と異なる場合、又は、今回の商品情報シンボルが前回の商品情報シンボルの検出後所定時間経過後に検出されている場合、今回の商品情報シンボルを前回の商品情報シンボルの次に検出されたシンボルとし、
　前記サービス検出手段は、今回検出されたサービス情報シンボルに対応するサービス情報が前回検出されたサービス情報シンボルに対応するサービス情報と異なる場合、又は、前回のサービス情報シンボルの検出後、所定時間経過後に、今回のサービス情報シンボルが検出された場合、今回のサービス情報シンボルを前回のサービス情報シンボルの次に検出されたシンボルとし、
　前記監視手段は、商品情報シンボルの検出後、所定時間の経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、当該商品情報シンボルの検出後の経過時間の監視を止め、当該次の商品情報シンボルの検出後の経過時間の監視を開始する、
　１．から３．のいずれか１つに記載の情報処理装置。
５．　画像から、
　　第一の表示を検出する第一の検出手段と、
　　第二の表示を検出する第二の検出手段と、
　第一の表示及び第二の表示のいずれか一方の表示の検出後、所定時間経過前に、他方の表示が検出された場合、当該第一の表示を用いて得られる商品情報と、当該第二の表示を用いて得られるサービス情報とを関連付けて出力する出力手段と、
　を備え、
　前記出力手段は、第一の表示の検出後、所定時間経過前に、第二の表示が検出されず次の第一の表示が検出された場合には、前に検出された第一の表示を用いて得られる商品情報と対応付けるサービス情報がないと判断する、
　情報処理装置。
６．　少なくとも１つのコンピュータにより実行される情報処理方法であって、
　前記コンピュータが、
　商品情報シンボルを検出し、
　サービス情報シンボルを検出し、
　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける処理を実行し、
　前記処理において、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する、
　ことを含む情報処理方法。
７．前記コンピュータが、
　前記対応付け手段により対応付けられた商品情報及びサービス情報を表示部に更に表示させ、
　対応付けるサービス情報がないと前記対応付け手段により判断された商品情報を、前記次の商品情報シンボルを用いて得られる次の商品情報よりも前に前記表示部に表示させる、
　ことを含む６．に記載の情報処理方法。
８．前記コンピュータが、
　サービス情報シンボルの検出後、所定時間経過前に、商品情報シンボルが検出されず次のサービス情報シンボルが検出された場合には、所定の出力を行うよう出力部に指示する、
　ことを含む６．又は７．に記載の情報処理方法。
９．前記コンピュータが、
　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後の経過時間を監視し、
　今回検出された商品情報シンボルに対応する商品情報が前回検出された商品情報シンボルに対応する商品情報と異なる場合、又は、今回の商品情報シンボルが前回の商品情報シンボルの検出後所定時間経過後に検出されている場合、今回の商品情報シンボルを前回の商品情報シンボルの次に検出されたシンボルとし、
　今回検出されたサービス情報シンボルに対応するサービス情報が前回検出されたサービス情報シンボルに対応するサービス情報と異なる場合、又は、前回のサービス情報シンボルの検出後、所定時間経過後に、今回のサービス情報シンボルが検出された場合、今回のサービス情報シンボルを前回のサービス情報シンボルの次に検出されたシンボルとし、
　商品情報シンボルの検出後、所定時間の経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、当該商品情報シンボルの検出後の経過時間の監視を止め、当該次の商品情報シンボルの検出後の経過時間の監視を開始する、
　ことを含む６．から８．のいずれか１つに記載の情報処理方法。
１０．　６．から９．のいずれか１つに記載の情報処理方法を少なくとも１つのコンピュータに実行させるプログラム。
　この出願は、２０１４年７月１日に出願された日本出願特願２０１４－１３６１６３号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (6)

  1. 　商品情報シンボルを検出する商品検出手段と、
    　サービス情報シンボルを検出するサービス検出手段と、
    　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける対応付け手段と、
    　を備え、
    　前記対応付け手段は、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する、
    　情報処理装置。
  2. 　前記対応付け手段により対応付けられた商品情報及びサービス情報を表示部に表示させる表示処理手段、
    　を更に備え、
    　前記表示処理手段は、対応付けるサービス情報がないと前記対応付け手段により判断された商品情報を、前記次の商品情報シンボルを用いて得られる次の商品情報よりも前に前記表示部に表示させる、
    　請求項１に記載の情報処理装置。
  3. 　前記対応付け手段は、サービス情報シンボルの検出後、所定時間経過前に、商品情報シンボルが検出されず次のサービス情報シンボルが検出された場合には、所定の出力を行うよう出力部に指示する、
    　請求項１又は２に記載の情報処理装置。
  4. 　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後の経過時間を監視する監視手段、
    　を更に備え、
    　前記商品検出手段は、今回検出された商品情報シンボルに対応する商品情報が前回検出された商品情報シンボルに対応する商品情報と異なる場合、又は、今回の商品情報シンボルが前回の商品情報シンボルの検出後所定時間経過後に検出されている場合、今回の商品情報シンボルを前回の商品情報シンボルの次に検出されたシンボルとし、
    　前記サービス検出手段は、今回検出されたサービス情報シンボルに対応するサービス情報が前回検出されたサービス情報シンボルに対応するサービス情報と異なる場合、又は、前回のサービス情報シンボルの検出後、所定時間経過後に、今回のサービス情報シンボルが検出された場合、今回のサービス情報シンボルを前回のサービス情報シンボルの次に検出されたシンボルとし、
    　前記監視手段は、商品情報シンボルの検出後、所定時間の経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、当該商品情報シンボルの検出後の経過時間の監視を止め、当該次の商品情報シンボルの検出後の経過時間の監視を開始する、
    　請求項１から３のいずれか１項に記載の情報処理装置。
  5. 　少なくとも１つのコンピュータにより実行される情報処理方法であって、
    　前記コンピュータが、
    　商品情報シンボルを検出し、
    　サービス情報シンボルを検出し、
    　商品情報シンボル及びサービス情報シンボルのいずれか一方のシンボルの検出後、所定時間経過前に、他方のシンボルが検出された場合、検出された各シンボルを用いて得られる商品情報とサービス情報とを対応付ける処理を実行し、
    　前記処理において、商品情報シンボルの検出後、所定時間経過前に、サービス情報シンボルが検出されず次の商品情報シンボルが検出された場合には、前に検出された商品情報シンボルを用いて得られる商品情報と対応付けるサービス情報がないと判断する、
    　ことを含む情報処理方法。
  6. 　請求項５に記載の情報処理方法を少なくとも１つのコンピュータに実行させるプログラム。
PCT/JP2015/068632 2014-07-01 2015-06-29 情報処理装置 WO2016002695A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016531353A JPWO2016002695A1 (ja) 2014-07-01 2015-06-29 情報処理装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-136163 2014-07-01
JP2014136163 2014-07-01

Publications (1)

Publication Number Publication Date
WO2016002695A1 true WO2016002695A1 (ja) 2016-01-07

Family

ID=55019231

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/068632 WO2016002695A1 (ja) 2014-07-01 2015-06-29 情報処理装置

Country Status (2)

Country Link
JP (1) JPWO2016002695A1 (ja)
WO (1) WO2016002695A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019181028A1 (ja) * 2018-03-19 2019-09-26 日本電気株式会社 精算システム、精算方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04306793A (ja) * 1991-04-03 1992-10-29 Tokyo Electric Co Ltd 商品販売データ処理装置
JP2011186649A (ja) * 2010-03-05 2011-09-22 Toshiba Tec Corp コード読取装置、プログラム及び商品登録システム
JP2012053781A (ja) * 2010-09-02 2012-03-15 Toshiba Tec Corp コード読取装置、情報処理装置、およびプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4976512B2 (ja) * 2010-01-25 2012-07-18 東芝テック株式会社 コード読取装置、販売登録システムおよびプログラム
JP5228010B2 (ja) * 2010-09-02 2013-07-03 東芝テック株式会社 商品情報処理装置及びプログラム
JP5457312B2 (ja) * 2010-09-03 2014-04-02 東芝テック株式会社 商品情報処理装置及びプログラム
JP5463248B2 (ja) * 2010-09-03 2014-04-09 東芝テック株式会社 商品情報処理装置及びプログラム
JP2012058790A (ja) * 2010-09-03 2012-03-22 Toshiba Tec Corp 商品コード読取装置、商品情報処理装置及びプログラム
JP5651043B2 (ja) * 2011-02-24 2015-01-07 富士通フロンテック株式会社 情報変換装置、情報変換方法及びｐｏｓシステム
JP5651048B2 (ja) * 2011-03-07 2015-01-07 富士通フロンテック株式会社 Ｐｏｓ端末装置、値引情報特定プログラム、および値引情報特定方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04306793A (ja) * 1991-04-03 1992-10-29 Tokyo Electric Co Ltd 商品販売データ処理装置
JP2011186649A (ja) * 2010-03-05 2011-09-22 Toshiba Tec Corp コード読取装置、プログラム及び商品登録システム
JP2012053781A (ja) * 2010-09-02 2012-03-15 Toshiba Tec Corp コード読取装置、情報処理装置、およびプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019181028A1 (ja) * 2018-03-19 2019-09-26 日本電気株式会社 精算システム、精算方法及びプログラム
JP2019164418A (ja) * 2018-03-19 2019-09-26 日本電気株式会社 精算システム、精算方法及びプログラム
JP7200487B2 (ja) 2018-03-19 2023-01-10 日本電気株式会社 精算システム、精算方法及びプログラム

Also Published As

Publication number Publication date
JPWO2016002695A1 (ja) 2017-04-27

Similar Documents

Publication Publication Date Title
US8856034B2 (en) Intelligent point of sale system
US10372998B2 (en) Object recognition for bottom of basket detection
US8503795B2 (en) Store system, reading apparatus, and sales registration apparatus
JP2014197369A (ja) 情報処理装置及びプログラム
US20150186862A1 (en) Information processing apparatus, information processing system, unregistered product lookup method, and unregistered product lookup program
JP2014167749A (ja) 商品情報表示装置及びコンピュータプログラム
JP5865316B2 (ja) 商品登録装置およびプログラム
JP6835158B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP5681682B2 (ja) 情報処理装置及びプログラム
JP5848734B2 (ja) 商品登録装置
JP7242763B2 (ja) 携帯端末及びプログラム
US20170186294A1 (en) Register system that deactivates a security tag attached to a product
US9406059B1 (en) Checkout imaging mechanism
US20180308084A1 (en) Commodity information reading device and commodity information reading method
JP6319440B2 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2016002695A1 (ja) 情報処理装置
JP6365667B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP6398331B2 (ja) 情報処理装置、制御方法、及びプログラム
JP2022127312A (ja) 情報処理装置及び情報処理システム
JP2013069306A (ja) 商品情報読取装置、商品情報処理装置及びプログラム
JP7200487B2 (ja) 精算システム、精算方法及びプログラム
JP2016024601A (ja) 情報処理装置、情報処理システム、情報処理方法、商品推薦方法、およびプログラム
WO2016052229A1 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6361302B2 (ja) 情報処理装置、制御方法、及びプログラム
US20220092573A1 (en) Portable terminal and information processing method for a portable terminal

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15814554

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016531353

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15814554

Country of ref document: EP

Kind code of ref document: A1