JP2021174381A - 精算決済装置および精算決済システム - Google Patents

精算決済装置および精算決済システム Download PDF

Info

Publication number
JP2021174381A
JP2021174381A JP2020079427A JP2020079427A JP2021174381A JP 2021174381 A JP2021174381 A JP 2021174381A JP 2020079427 A JP2020079427 A JP 2020079427A JP 2020079427 A JP2020079427 A JP 2020079427A JP 2021174381 A JP2021174381 A JP 2021174381A
Authority
JP
Japan
Prior art keywords
settlement
product
user
age
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020079427A
Other languages
English (en)
Other versions
JP7526924B2 (ja
JP2021174381A5 (ja
Inventor
宣義 村上
Noriyoshi Murakami
めぐみ 山岡
Megumi Yamaoka
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2020079427A priority Critical patent/JP7526924B2/ja
Priority to PCT/JP2021/014190 priority patent/WO2021220714A1/ja
Priority to CN202180031618.2A priority patent/CN115516533A/zh
Priority to US17/921,776 priority patent/US20230169508A1/en
Publication of JP2021174381A publication Critical patent/JP2021174381A/ja
Publication of JP2021174381A5 publication Critical patent/JP2021174381A5/ja
Application granted granted Critical
Publication of JP7526924B2 publication Critical patent/JP7526924B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/18—Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/206—Point-of-sale [POS] network systems comprising security or operator identification provisions, e.g. password entry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/34—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using cards, e.g. integrated circuit [IC] cards or magnetic cards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/407—Cancellation of a transaction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/026—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/01—Details for indicating
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G3/00—Alarm indicators, e.g. bells
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G3/00—Alarm indicators, e.g. bells
    • G07G3/006—False operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

【課題】無人店舗でも年齢制限商品を販売できるように、利用者への年齢制限商品の販売の可否を判定する年齢確認を確実に行えるようにする。【解決手段】商品撮影用のカメラ４１の撮影で取得した商品画像に基づいて、利用者が購入する商品を認識して精算及び決済に関する処理を行うと共に、決済対象者となる利用者を特定するために、顔認証用のカメラ４６の撮影で取得した利用者の顔画像に基づいて顔認証に関する処理を行う制御部と、この制御部で取得した商品認識結果、精算結果及び顔認証結果を表示するタッチパネルディスプレイ４５と、を備え、制御部は、認識された商品に年齢制限商品が含まれる場合には、顔認証により利用者が特定されると、その利用者の年齢情報に基づいて、その利用者が年齢制限対象者であるか否かを判定する年齢照合に関する処理を行う。【選択図】図５

Description

本発明は、利用者が売場から選択した商品を認識して、その代金の精算及び決済を行う精算決済装置および精算決済システムに関するものである。
近年、コンビニエンスストアを始めとする小売店舗では、顧客が購入する商品を登録する作業を顧客自らが行う、所謂、セルフレジの導入が進んでいる。一方、酒類などの年齢制限商品は、年齢制限対象者に販売することができないため、セルフレジにおいても、顧客が年齢制限対象者であるか否かに応じて、年齢制限商品の販売の可否を判定する年齢確認が必要になる。
このようなセルフレジでの年齢制限商品に関する年齢確認に関する技術として、従来、セルフレジを利用している顧客の顔を撮影して、その撮影画像を店員が使用する端末に表示することで、店員が目視で年齢確認を行えるようにした技術が知られている（特許文献１参照）。
特開２０１６−０５３９０８号公報
さて、近年、人材不足などの理由で、常駐する店員がいない無人店舗が提案されている。このような無人店舗でも年齢制限商品を販売できるようにすると、利用者の利便性を高めることができる。しかしながら、従来の技術では、顧客が年齢制限対象者であるか否かの年齢確認を、店舗に常駐する店員が行うことから、この従来の技術を無人店舗に適用することはできない。また、従来の技術では、店員が目視で年齢確認を行うため、年齢確認が必ずしも正確に行われるとは限らないという問題があった。
そこで、本発明は、無人店舗でも年齢制限商品を販売できるように、利用者への年齢制限商品の販売の可否を判定する年齢確認を確実に行うことができる精算決済装置および精算決済システムを提供することを主な目的とする。
本発明の精算決済装置は、利用者が売場から選択した商品を認識して、その代金の精算及び決済を行う精算決済装置であって、利用者が購入する商品を撮影する第１のカメラと、利用者の顔を撮影する第２のカメラと、前記第１のカメラの撮影で取得した商品画像に基づいて、利用者が購入する商品を認識して精算及び決済に関する処理を行うと共に、決済対象者となる利用者を特定するために、前記第２のカメラの撮影で取得した顔画像に基づいて顔認証に関する処理を行う制御部と、この制御部で取得した商品認識結果、精算結果及び顔認証結果を表示する表示部と、を備え、前記制御部は、認識された商品に年齢制限商品が含まれる場合には、前記顔認証により利用者が特定されると、その利用者の年齢情報に基づいて、その利用者が年齢制限対象者であるか否かを判定する年齢照合に関する処理を行う構成とする。
また、本発明の精算決済システムは、前記精算決済装置を有する精算決済システムであって、前記精算決済装置とネットワークを介して接続されたサーバ装置を有し、前記精算決済装置は、前記顔認証に関する処理として、前記顔画像を前記サーバ装置に送信し、前記サーバ装置は、前記精算決済装置から受信した前記顔画像に基づいて顔認証処理を実行して、顔認証結果を前記精算決済装置に送信する構成とする。
本発明によれば、利用者が年齢制限対象者であるか否かに応じて、利用者への年齢制限商品の販売の可否を判定する年齢確認（年齢照合）が、顔認証による人物同定と登録者の年齢情報とにより行われる。これにより、無人店舗でも年齢制限商品を販売できるように、年齢確認を確実に行うことができる。
本実施形態に係る精算決済システムの全体構成図 精算台１の全体斜視図 精算台１の要部側面図 精算台１の天板部３３を上方から見た平面図 精算台１の概略構成を示すブロック図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図 精算台１における確定待ち時間および休止状態を示す説明図 精算台１のタッチパネルディスプレイ４５に表示されるテンキー１３３のキー配列パターンの変更状況の一例を示す説明図 ユーザ登録時におけるユーザ端末１１の動作手順を示すフロー図 精算台１の動作手順を示すフロー図 精算台１の動作手順を示すフロー図
前記課題を解決するためになされた第１の発明は、利用者が売場から選択した商品を認識して、その代金の精算及び決済を行う精算決済装置であって、利用者が購入する商品を撮影する第１のカメラと、利用者の顔を撮影する第２のカメラと、前記第１のカメラの撮影で取得した商品画像に基づいて、利用者が購入する商品を認識して精算及び決済に関する処理を行うと共に、決済対象者となる利用者を特定するために、前記第２のカメラの撮影で取得した顔画像に基づいて顔認証に関する処理を行う制御部と、この制御部で取得した商品認識結果、精算結果及び顔認証結果を表示する表示部と、を備え、前記制御部は、認識された商品に年齢制限商品が含まれる場合には、前記顔認証により利用者が特定されると、その利用者の年齢情報に基づいて、その利用者が年齢制限対象者であるか否かを判定する年齢照合に関する処理を行う構成とする。
これによると、利用者が年齢制限対象者であるか否かに応じて、利用者への年齢制限商品の販売の可否を判定する年齢確認（年齢照合）が、顔認証による人物同定と登録者の年齢情報とにより行われる。これにより、無人店舗でも年齢制限商品を販売できるように、年齢確認を確実に行うことができる。
なお、年齢照合は、精算決済装置で行うことができるが、サーバ装置で行うようにしてもよい。この場合、精算決済装置は、年齢照合に関する処理として、年齢照合をサーバ装置に指示して、サーバ装置から年齢照合結果を取得する。
また、第２の発明は、前記制御部は、認識された商品に年齢制限商品が含まれ、かつ、前記顔認証により特定された利用者が年齢制限対象者である場合には、決済を行わない構成とする。
これによると、利用者が年齢制限対象者である場合に、年齢制限商品を販売しないようにすることができる。
また、第３の発明は、前記制御部は、年齢制限により決済を行わない場合には、年齢制限商品の販売が禁止されている旨を、前記表示部に表示する構成とする。
これによると、年齢制限商品の販売ができないことを利用者に通知することができる。
また、第４の発明は、前記制御部は、年齢制限により決済を行わない場合には、商品認識、精算及び決済に関する処理の再実行を指示する操作部を、前記表示部に表示する構成とする。
これによると、利用者が、年齢制限商品を除外して処理をやり直すことができる。
また、第５の発明は、第１の発明に係る精算決済装置を有する精算決済システムであって、前記精算決済装置とネットワークを介して接続されたサーバ装置を有し、前記精算決済装置は、前記顔認証に関する処理として、前記顔画像を前記サーバ装置に送信し、前記サーバ装置は、前記精算決済装置から受信した前記顔画像に基づいて顔認証処理を実行して、顔認証結果を前記精算決済装置に送信する構成とする。
これによると、第１の発明と同様に、無人店舗でも年齢制限商品を販売できるように、利用者への年齢制限商品の販売の可否を判定する年齢確認を確実に行うことができる。
以下、本発明の実施の形態を、図面を参照しながら説明する。
図１は、本実施形態に係る精算決済システムの全体構成図である。
精算決済システムは、オフィスビルや駅などの施設内に設置される小規模な店舗（売店）において、顧客が購入する商品の精算および決済（会計）を、店員を介さずに行うことができるようにしたものである。なお、この精算決済システムは、店員が常駐しない無人店舗を対象としてもよいが、有人店舗において店員の負担を軽減するものであってもよい。
この精算決済システムは、店舗に設置された精算台１（精算決済装置）と、ユーザ端末１１と、決済サーバ１２と、ユーザ管理サーバ１３と、商品学習サーバ１４と、顔認証サーバ１５（サーバ装置）と、ＤＢサーバ１６と、分析サーバ１７と、を備えている。
ユーザ端末１１、決済サーバ１２、ユーザ管理サーバ１３、商品学習サーバ１４、顔認証サーバ１５、ＤＢサーバ１６、および分析サーバ１７と、店舗に設けられた精算台１とは、インターネットやＬＡＮなどのネットワークを介して相互に接続されている。
なお、ユーザ管理サーバ１３、商品学習サーバ１４、顔認証サーバ１５、ＤＢサーバ１６、および分析サーバ１７は、店舗内、例えば売場に併設されたバックヤードに設置するようにしてもよいが、店舗とは離れた場所、例えば店舗の運営者の本部などに設置するようにしてもよい。
精算台１は、利用者が店舗の売場から選択した商品を認識して、その代金の精算及び決済（支払い）を行うものである。本実施形態では、商品の撮影画像から物体認識により商品を識別して（商品認識処理）、各商品の価格（単価）および数量から支払い代金の総額を算出する（精算処理）。また、商品を購入する利用者を特定するために、顔認証サーバ１５に対して顔認証処理を要求し（顔認証に関する処理）、顔認証が成功すると、決済サーバ１２に対して決済処理を要求する（決済に関する処理）。
ユーザ端末１１は、本システムを利用者が利用するために必要なユーザ登録（会員情報や顔画像の登録）に関する操作を行い、また、購入履歴（レシート情報）を管理するものであり、スマートフォンやタブレット端末などで構成され、ユーザ用のアプリケーションがインストールされている。
決済サーバ１２は、決済サービスの事業者（クレジット会社など）が運営するものである。この決済サーバ１２は、精算台１からの決済の要求に応じて、利用者が購入する商品の代金に関する決済処理を実行する。なお、決済サーバ１２は、決済代行サービスの事業者が運営するもの（決済代行サーバ）であってもよい。
ユーザ管理サーバ１３は、ユーザ管理サーバ１３は、ユーザのログインを管理するログインサーバとして機能し、パスワード認証を実行する。また、ユーザ管理サーバ１３は、精算台１と決済サーバ１２との間を中継する決済インタフェイスサーバとして機能する。
商品学習サーバ１４は、精算台１に搭載される商品認識エンジンを、ディープラーニングなどの機械学習により構築する。この商品学習サーバ１４では、予め登録対象となる商品を撮影することで取得した商品画像を入力情報とし、商品ごとの商品識別情報（商品の名称など）を出力情報として機械学習が行われ、商品認識用のデータベースが構築される。
顔認証サーバ１５は、顔管理サーバ２５と、顔照合サーバ２６とを備えている。顔管理サーバ２５は、登録された利用者の名前や顔情報（顔ＩＤ、顔画像）などの情報を蓄積して管理する。顔照合サーバ２６は、精算台１からの顔認証の要求に応じて顔認証を実行する。この顔認証では、精算台１から対象者の顔画像を取得して、その顔画像から対象者の顔特徴量を生成して、その対象者の顔特徴量と、自装置に保管された登録者（登録済みの利用者）の顔特徴量とを比較することによる顔照合を行って、対象者が登録者か否かを判定する（１対Ｎ認証）。なお、ユーザ管理サーバ１３で管理される入店者リストを取得して、入店者に絞り込んだ上で顔認証を行うようにしてもよい。
ＤＢサーバ１６は、各種の情報を蓄積して管理する。具体的には、ユーザ管理情報として、ユーザごとの決済ＩＤ、顔ＩＤ、ユーザＩＤ、パスワード、オフィスコードなどの情報がデータベースに登録される。また、商品マスタ情報として、商品の識別情報（商品名や商品コードなど）などの情報がデータベースに登録される。なお、この商品を管理するデータベースには、年齢制限商品に関する情報も登録される。また、購入ログ情報として、ユーザごとのユーザＩＤ、購入した商品の名称および金額などの情報がデータベースに登録される。
分析サーバ１７は、ＤＢサーバ１６に蓄積された情報に基づいて、各種の分析処理を行う。具体的には、来店した利用者ごとの商品の購入および未購入の別に応じた分析処理を行う。例えば、購入者と未購入者との割合を所定の基準（曜日、時間帯など）で集計する。
なお、本実施形態では、小規模な店舗（売店）で、周囲に仕切りがないか、または利用者が自由に出入りできる状態で、利用者が自由に陳列棚から商品を取り出して購入できる店舗を対象にしているが、この他に、店舗に設置スペースの余裕があれば、ゲートやチェッカー（顔認証機）を設置するようにしてもよい。例えば、入店チェッカーが、利用者の入店を許可するための顔認証に関する処理を行い、顔認証結果に応じて、入店ゲートの開閉を制御する。また、退店チェッカーが、利用者の退店を確認するための顔認証に関する処理を行い、顔認証結果に応じて、退店ゲートの開閉を制御する。また、店舗に設置スペースの余裕があれば、ユーザ端末１１と同様のユーザ登録に関する操作を利用者が行うレジスターを、店舗に設置するようにしてもよい。
次に、精算台１について説明する。図２は、精算台１の全体斜視図である。図３は、精算台１の要部側面図である。図４は、精算台１の天板部３３を上方から見た平面図である。
図２に示すように、精算台１の本体３１は、箱状部３２と天板部３３と上壁部３４と後壁部３５とを備えている。天板部３３は、箱状部３２の上側に設けられている。後壁部３５は、箱状部３２の後側から上向きに突出した状態で設けられている。上壁部３４は、後壁部３５の上端から前向きに庇状に突出した状態で設けられている。
天板部３３には、利用者が購入する商品（売場で選択した商品）を置く載置部３７が設けられている。利用者は、載置部３７に商品を並べて置くだけで、物体認識により、置かれた商品が識別されて、商品の単価から支払う代金を算出する精算が行われる。なお、載置部３７は、皿状に凹設されており、商品を置く範囲を利用者が容易に把握することができる。
上壁部３４には、商品撮影用のカメラ４１（第１のカメラ）が設けられている。この商品撮影用のカメラ４１は、天板部３３の載置部３７に置かれた商品を撮影する。なお、商品撮影用のカメラ４１を複数設けるようにしてもよい。この場合、１つのカメラ４１が、載置部３７に置かれた商品を真上から撮影し、その撮影画像は、載置部３７に置かれた商品の位置を検出する用途に用いられるようにするとよい。また、別のカメラ４１が、載置部３７に置かれた商品を斜め上方から撮影し、その撮影画像は、載置部３７に置かれた商品（商品名）を認識する用途に用いられるようにするとよい。
また、上壁部３４には、プロジェクタ４２が設けられている。このプロジェクタ４２は、商品が置かれる載置部３７に対してプロジェクションマッピングを行うものであり、載置部３７に真上から所定画像を投影する。本実施形態では、図４に示すように、載置部３７に置かれた商品を取り囲む枠画像５５を投影する。特に、商品認識が成功した商品を取り囲むように枠画像５５を投影する。これにより、商品認識が成功した商品を利用者に知らせることができ、利用者は、認識できなかった商品だけを置き直したり並び替えたりすればよい。
また、図２に示すように、上壁部３４には、ライト４３が設けられている。このライト４３は、載置部３７に置かれた商品を照明する。これにより、商品認識処理の認識精度を高めることができる。
後壁部３５には、タッチパネルディスプレイ４５（表示部）が設けられている。このタッチパネルディスプレイ４５には、商品認識結果、すなわち、載置部３７に置かれた商品が表示され、商品認識結果に誤りがなければ、利用者が、顔認証およびパスワード認証に関する操作を行うことができる。また、商品認識結果に誤りがある場合には、利用者が、誤りがある商品を修正する操作を行うことができる。
また、後壁部３５には、顔認証用のカメラ４６（第２のカメラ）が設けられている。この顔認証用のカメラ４６は、タッチパネルディスプレイ４５の近傍に配置されると共に、精算台１の前に立つ利用者に対峙するように配置されているため、タッチパネルディスプレイ４５を目視する利用者の顔を正面から撮影することができる。この顔認証用のカメラ４６で取得した顔画像は、決済のための顔認証の用途に用いられる。
また、後壁部３５には、スピーカ４７が設けられている。このスピーカ４７は、利用者に応対する音声を出力する。例えば、操作要領を案内するガイド音声がスピーカ４７から出力される。
また、後壁部３５には、マイク４８が設けられている。このマイク４８は、利用者が発話する音声を収音する。例えば、タッチパネルディスプレイ４５の画面に表示された操作部（ボタンなど）の文字を利用者が発話することで、その操作部を操作することができる。
箱状部３２には、前側が開放された第１の収納部５１（棚部）と、前側が扉５３で閉鎖された第２の収納部５２とが設けられている。第１の収納部５１には、商品の付属品が収納される。この付属品は、無償で利用者に提供されるものであり、利用者が自由に持ち帰ることができる。具体的には、買い物袋やカトラリー（スプーンやフォークなど）などである。第２の収納部５２には、商品撮影用のカメラ４１やタッチパネルディスプレイ４５や顔認証用のカメラ４６などを制御するコントローラー５４（ＰＣ）が収納される。
ここで、図３に示すように、載置部３７に対向するように上壁部３４に設置された商品撮影用のカメラ４１により、載置部３７に載置された商品が上方から撮影される。このとき、利用者が、タッチパネルディスプレイ４５を操作するために、タッチパネルディスプレイ４５に手を近づけると、利用者の手が商品撮影用のカメラ４１の撮影エリアに入る。
一方、精算台１では、商品撮影用のカメラ４１の撮影画像に基づいて、載置部３７に載置された商品を認識する商品認識処理が行われる。このため、利用者が、タッチパネルディスプレイ４５を操作すると、載置部３７に載置された商品の誤認識や認識漏れが発生する。
また、精算台１では、商品認識処理の認識結果がタッチパネルディスプレイ４５に表示される。特に、商品認識処理は定期的に行われ、その商品認識結果がリアルタイムに反映されるように、タッチパネルディスプレイ４５の画面が更新される。このため、利用者が、タッチパネルディスプレイ４５を操作すると、タッチパネルディスプレイ４５に表示された商品認識結果が不自然に変化し、利用者に違和感を与える。特に、決済（会計）を指示する操作の途中で、商品認識結果が変化すると、誤った商品認識結果で決済が行われるという問題がある。
そこで、本実施形態では、タッチパネルディスプレイ４５の画面が不自然に変化して利用者に違和感を与えることを抑制することができ、さらに、誤った商品認識結果で精算および決済が行われることを避けることができる構成を備えている。
次に、精算台１の概略構成について説明する。図５は、精算台１の概略構成を示すブロック図である。
精算台１は、商品撮影用のカメラ４１、プロジェクタ４２、ライト４３、タッチパネルディスプレイ４５、顔認証用のカメラ４６、スピーカ４７、マイク４８（図２，図３参照）の他に、通信部６１と、記憶部６２と、制御部６３と、を備えている。なお、通信部６１、記憶部６２、および制御部６３は、コントローラー５４（図２参照）を構成するものである。
通信部６１は、決済サーバ１２、ユーザ管理サーバ１３、商品学習サーバ１４、および顔認証サーバ１５との間でネットワークを介して通信を行う。
記憶部６２は、制御部６３を構成するプロセッサで実行されるプログラムを記憶する。また、記憶部６２は、商品マスタ情報を記憶する。具体的には、商品の識別情報（商品名や商品コードなど）や、商品認識処理に用いられる情報、すなわち、商品ごとの商品識別情報（商品の名称など）や、精算処理に用いられる情報、すなわち、商品ごとの金額（単価）に関する情報や、年齢制限商品に関する情報などを記憶する。
制御部６３は、商品検知部７１と、商品認識部７２と、精算処理部７３と、状態制御部７４と、認証指示部７５と、年齢照合部７６と、決済指示部７７と、を備えている。この制御部６３は、プロセッサで構成され、制御部６３の各部は、記憶部６２に記憶されたプログラムをプロセッサで実行することで実現される。
商品検知部７１は、載置部３７を撮影する商品撮影用のカメラ４１の撮影画像に基づいて、載置部３７に商品が置かれたことを検知する。また、商品検知部７１は、載置部３７に商品が置かれた場合に、商品撮影用のカメラ４１の撮影画像に基づいて、商品の位置を検出する。
商品認識部７２は、商品撮影用のカメラ４１の撮影画像に基づいて、載置部３７に置かれた商品を認識する。本実施形態では、ディープラーニングなどの機械学習により構築された物体認識エンジンを用いて、商品撮影用のカメラ４１の撮影画像から切り出された商品画像から商品識別情報（商品の名称など）を取得する。
精算処理部７３は、商品認識部７２による商品認識結果に基づいて、載置部３７に置かれた商品の代金を精算する。すなわち、載置部３７に置かれた各商品の金額（単価）を取得して、その各商品の金額を集計して、代金の総額を算出する（集計処理）。
状態制御部７４は、商品認識部７２による商品認識結果を確定する利用者の操作が行われると、所定の確定待ち時間（例えば数秒間）を設定して、商品認識処理および精算処理を継続させる。その際、その商品認識結果および精算結果をリアルタイムに画面表示処理に反映させない制御を行うことができる。
また、状態制御部７４は、所定の待ち時間が経過すると、休止状態に遷移するように制御する。この休止状態では、商品認識処理および精算処理を一時的に停止する制御が行われる。ここで、商品認識処理および精算処理を継続させた上で、その商品認識結果および精算結果を決済に反映させない制御を行うようにしてもよい。
認証指示部７５は、決済対象者となる利用者を特定するために、顔認証サーバ１５に対して顔認証の実行を指示し、また、ユーザ管理サーバ１３に対してパスワード認証の実行を指示する。本実施形態では、セキュリティ強化のため、顔認証とパスワード認証との２要素認証が採用され、顔認証およびパスワード認証の両方が成功した場合に決済を許可する。なお、顔認証時には、顔認証用のカメラ４６の撮影画像から顔画像を切り出して、その顔画像を顔認証サーバ１５に送信する。また、パスワード認証時には、利用者が入力したユーザＩＤおよびパスワードをユーザ管理サーバ１３に送信する。
年齢照合部７６は、顔認証により特定された利用者の年齢情報（生年月日、または現在の年齢）を、ユーザ管理サーバ１３から取得して、その年齢情報に基づいて、顔認証で特定された利用者が年齢制限対象者であるか否か、すなわち、利用者が成年（下限年齢）に達しているか否かを判定する（年齢確認）。この年齢照合処理は、商品認識部７２で認識された商品の中に、酒類などの年齢制限商品が含まれる場合に行われる。
決済指示部７７は、顔認証により特定された利用者（決済対象者）を対象にして、精算処理で算出された代金に関する決済処理の実行を、決済サーバ１２に対して指示する。
なお、精算台１の制御部６３では、この他に、商品検知部７１で取得した商品の位置情報に基づいて、プロジェクタ４２を制御して、枠画像５５（図４参照）を載置部３７に投影する処理（プロジェクションマッピング）が行われる。また、制御部６３では、マイク４８により収音された利用者の発話音声に対して音声認識が行われる。これにより、利用者が音声入力による画面操作を行うことができる。
また、制御部６３では、載置部３７を照明するライト４３の光量が制御される。載置部３７では、日照条件などに応じて、載置された商品の明るさが変化する。そこで、商品撮影用のカメラ４１の撮影画像や、図示しない照度センサの出力などに基づいて、載置部３７の明るさを検出して、その検出結果に基づいて、ライト４３の光量が制御される。
また、本実施形態では、精算台１が商品認識処理を行うようにしたが、この商品認識処理が外部のサーバで行われるようにしてもよい。
また、本実施形態では、精算台１が、顔認証により特定された利用者の年齢情報をユーザ管理サーバ１３から取得して、その年齢情報に基づいて年齢照合を行うようにしたが、この年齢照合が顔認証サーバ１５で行われるようにしてもよい。この場合、精算台１が、顔認証のリクエストに年齢照合の指示を付加して顔認証サーバ１５に送信し、顔認証サーバ１５が、年齢照合結果を含む顔認証のレスポンスを精算台１に送信すればよい。
次に、精算台１のタッチパネルディスプレイ４５に表示される画面について説明する。図６、図７、図８、図９、図１０、図１１は、精算台１のタッチパネルディスプレイ４５に表示される画面を示す説明図である。
精算台１のタッチパネルディスプレイ４５では、まず、図６（Ａ）に示す精算案内画面が表示される。この精算案内画面では、精算台１の載置部３７に商品を置くように利用者を促す案内メッセージ１０１と、商品の載せ方の要領を説明する案内画像１０２（イラストなど）とが表示される。ここで、利用者が載置部３７に商品を載せると、精算台１において、商品認識および精算の処理が行われて、未確定状態の購入商品確認画面（図６（Ｂ）参照）に遷移する。
また、精算案内画面では、発話による画面操作（音声入力）に関する案内メッセージ１０３が表示される。本実施形態では、タッチパネルディスプレイ４５の画面に表示された操作部（ボタンなど）の文字を利用者が発話することで、その操作部を操作することができる。
図６（Ｂ）に示す未確定状態の購入商品確認画面では、商品を確認するように利用者を促す案内メッセージ１０４が表示される。また、この未確定状態の購入商品確認画面には、認識結果一覧表示部１０５が設けられている。この認識結果一覧表示部１０５には、商品の名称および金額が記載された商品ボックス１１５（商品表示部）が表示される。この商品ボックス１１５は、利用者が載置部３７に置いた商品、特に商品認識により認識された商品に関するものであり、複数の商品ボックス１１５が並べて表示される。
また、この未確定状態の購入商品確認画面には、精算結果表示部１１６が設けられている。この精算結果表示部１１６には、精算結果、すなわち、載置部３７に載せた商品の総数および合計金額が表示される。
また、この未確定状態の購入商品確認画面には、「確定する」のボタン１１７と、「会計をやめる」のボタン１１９とが設けられている。ここで、「確定する」のボタン１１７を操作すると、案内画面（図６（Ｃ）参照）に遷移する。なお、「確定する」のボタン１１７は、初期状態では青色で表示され、操作後はグレーに変化する。また、「会計をやめる」のボタン１１９を操作すると、キャンセル画面（図８（Ｄ）参照）に遷移する。また、載置部３７から商品を取り除いた場合にも、キャンセル画面に遷移する。
図６（Ｃ）に示す案内画面では、スキャン中のためにタッチパネルディスプレイ４５から手を離すように利用者を促す案内メッセージ１０１と、タッチパネルディスプレイ４５から手を離した状態を表す案内画像１０２（イラストなど）とが表示される。このとき、タッチパネルディスプレイ４５から手を離すように利用者を促すガイド音声がスピーカ４７から出力される。
図６（Ｄ）に示す確定状態の購入商品確認画面（決済指示受付画面）には、「会計をする」のボタン１１７（決済に関する処理の実行を指示する操作部）と、「再スキャン」のボタン１１８とが設けられている。その他は、未確定状態の購入商品確認画面（図６（Ｂ）参照）と同様である。
ここで、「会計をする」のボタン１１７を利用者が操作すると、顔認証画面（図７（Ａ）参照）に遷移する。
一方、「再スキャン」のボタン１１８を利用者が操作すると、再スキャン処理、すなわち、商品認識処理および精算処理が再度実行され、未確定状態の購入商品確認画面（図６（Ｂ）参照）に戻る。具体的には、商品認識処理で誤認識が発生して、認識結果一覧表示部１０５に表示された商品認識結果に誤りがある場合には、「再スキャン」のボタン１１８を利用者が操作すればよい。また、利用者が、未確定状態の購入商品確認画面（図６（Ｂ）参照）で「確定する」のボタン１１２を操作した後に、載置部３７に置かれた商品の入れ替え（追加や除外）を行う、すなわち、置き忘れていた商品を後から載置部３７に置いたり、購入を取りやめた商品を載置部３７から取り出したりした場合、「再スキャン」のボタン１１８を利用者が操作すればよい。なお、商品認識結果に誤りが改善されない場合、商品の置き方の変更を促すガイダンス情報を表示するようにしてもよい。
また、この確定状態の購入商品確認画面において、認識結果一覧表示部１０５に表示された商品の修正（削除、変更）を行いたい場合には、誤りのある商品に関する商品ボックス１１５を利用者が操作する。これにより、修正内容選択画面（図１０（Ａ）参照）に遷移する。
図７（Ａ）に示す顔認証画面では、利用者の撮影画像１２１と、利用者の顔が所定の撮影範囲に入っていない場合に顔の位置の調整を促す案内メッセージ１２２とが表示される。ここで、利用者は、画面に表示される自分の撮影画像１２１を見ながら、自分の顔の位置を調整し、顔が適切に撮影できると、顔認証サーバ１５に対して顔画像を送信して顔認証が開始される。このとき、顔認証中の顔認証画面（図７（Ｂ）参照）に遷移する。
図７（Ｂ）に示す顔認証画面では、利用者の撮影画像から抽出した顔画像１２３と、顔認証の進捗状況を可視化したプリローダー１２４が表示される。
ここで、顔認証が成功すると、顔認証結果確認画面（図７（Ｃ）参照）に遷移する。一方、顔認証が失敗した場合、顔画像を再取得して、顔認証が所定回数繰り返され、所定回数連続して顔認証が失敗すると、顔認証を中止して、パスワード認証のみで決済を行うモードに移行して、ユーザＩＤ選択画面（図９（Ａ）参照）に遷移する。
図７（Ｃ）に示す顔認証結果確認画面では、利用者の顔画像１２３と、利用者の名前に誤りがないかを問い合わせる案内メッセージ１２６と、が表示される。また、この顔認証結果確認画面では、「はい」のボタン１２７と「違います」のボタン１２８とが設けられている。ここで、「違います」のボタン１２８を操作すると、ユーザＩＤ選択画面（図９（Ａ）参照）に遷移する。
また、顔認証結果確認画面において、「はい」のボタン１２７を操作すると、利用者が購入する商品の中に年齢制限商品がない場合には、パスワード認証画面（図８（Ａ）参照）に遷移する。一方、利用者が購入する商品の中に年齢制限商品がある場合には、顔認証で特定された利用者に関する年齢照合処理が行われる。ここで、利用者が成年（下限年齢）に達している場合には、パスワード認証画面（図８（Ａ）参照）に遷移する。一方、利用者が成年（下限年齢）に達していない場合には、エラー画面（図７（Ｄ）参照）に遷移する。
図７（Ｄ）に示すエラー画面では、利用者が年齢制限対象者である、すなわち、利用者が成年に達していないため、酒類や煙草などの年齢制限商品を販売できないことを表す画像１３７と案内メッセージ１３８とが表示される。また、このエラー画面には、「戻る」のボタン１２９が設けられている。この「戻る」のボタン１２９を操作すると、未確定状態の購入商品確認画面（図６（Ｂ）参照）に戻る。これにより、利用者が、年齢制限商品を除外して処理をやり直すことができる。
なお、図７（Ａ），（Ｂ），（Ｃ），（Ｄ）に示す画面に表示される精算結果表示部１１６および「会計をやめる」のボタン１１９は、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様である。
図８（Ａ）に示すパスワード認証画面では、パスワードとしての暗証番号の入力を促す案内メッセージ１３１と、暗証番号の入力状況を表す画像１３２と、テンキー１３３とが設けられている。ここで、所定桁数の暗証番号の入力が終了すると、パスワード認証が実行され、パスワード認証が成功すると、決済確認画面（図８（Ｂ）参照）に遷移する。一方、パスワード認証が失敗すると、再入力状態のパスワード認証画面（図９（Ｃ）参照）に遷移する。
また、このパスワード認証画面には、「支払う」のボタン１３５と、「戻る」のボタン１２９とが設けられている。ここで、「戻る」のボタン１２９を操作すると、暗証番号の未入力状態に戻る。また、「支払う」のボタン１３５は、グレーアウト表示で操作不能状態となっている。
図８（Ｂ）に示す決済確認画面では、「支払う」のボタン１３５が操作可能状態となり、この「支払う」のボタン１３５を操作すると、決済完了画面（図８（Ｃ）参照）に遷移する。
なお、図８（Ａ），（Ｂ）に示す画面に表示される精算結果表示部１１６および「会計をやめる」のボタン１１９は、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様である。
図９（Ａ）に示すユーザＩＤ選択画面では、利用者が自分のユーザＩＤを選択するように促す案内メッセージ１４１と、ユーザＩＤのボタン１４２とが設けられている。ユーザＩＤのボタン１４２は、ユーザＩＤの候補ごとに複数並べて表示される。また、このユーザＩＤ選択画面には、「候補がない」のボタン１４３が設けられている。ここで、利用者が自分のユーザＩＤのボタン１４２を操作すると、パスワード認証画面（図８（Ａ）参照）に遷移する。「候補がない」のボタン１４３を操作すると、決済不可のエラー画面（図９（Ｂ）参照）に遷移する。
なお、本実施形態では、ユーザＩＤの候補を表示して、利用者に選択させるようにしたが、キーボードを表示して、利用者が自分のユーザＩＤを入力するようにしてもよい。
また、本実施形態では、ユーザＩＤの候補ごとのボタン１４２が表示されるが、このユーザＩＤの候補は、顔認証サーバ１５において顔認証処理で取得した顔照合スコアの高い人物である。顔認証サーバ１５では、顔照合スコアが所定のしきい値以上となる人物がいない場合に、顔照合が失敗したものと判定されるが、このとき、顔照合スコアがしきい値未満となる人物のうち、顔照合スコアの高い方から所定数の人物が候補として抽出される。
図９（Ｃ）に示す再入力状態のパスワード認証画面では、暗証番号が不正であることを表す案内メッセージ１４５が表示される。その他は、パスワード認証画面（図８（Ａ）参照）と同様である。ここで、利用者はパスワードを再入力し、パスワード認証が成功すると、決済確認画面（図８（Ｂ）参照）に遷移する。一方、再度、パスワード認証が失敗すると、パスワード不正のエラー画面（図９（Ｄ）参照）に遷移する。
なお、図９（Ａ），（Ｃ）に示す画面に表示される精算結果表示部１１６および「会計をやめる」のボタン１１９は、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様である。
図１０（Ａ）に示す修正内容選択画面では、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様に、認識結果一覧表示部１０５に商品ボックス１１５が並べて表示されるが、特に、確定状態の購入商品確認画面において利用者が選択した商品ボックス１１５は、商品ボックス１５２に変更される。この他は、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様である。
この商品ボックス１５２には、「削除」のボタン１５３と、「変更」のボタン１５４とが設けられている。ここで、「削除」のボタン１５３を操作すると、削除確認画面（図１１（Ｂ）参照）に遷移する。また、「変更」のボタン１５４を操作すると、カテゴリー選択画面（図１０（Ｂ）参照）に遷移する。
図１０（Ｂ）に示すカテゴリー選択画面には、商品（カテゴリー）の選択を促す案内メッセージ１５６と、変更元の商品の情報（名称および金額）を表示する変更元商品表示部１５７と、カテゴリーごとのボタン１５８とが設けられている。また、このカテゴリー選択画面では、「戻る」のボタン１２９が設けられている。ここで、カテゴリーのボタン１５８を操作すると、変更先商品選択画面（図１０（Ｃ）参照）に遷移する。また、「戻る」のボタン１２９を操作すると、１つ前の画面、すなわち修正内容選択画面（図１０（Ａ）参照）に戻る。
図１０（Ｃ）に示す商品選択画面には、カテゴリー選択画面（図１０（Ｂ）参照）で選択したカテゴリーに含まれる商品ごとのボタン１６０が設けられている。ここで、商品のボタン１６０を操作すると、商品変更確認画面（図１０（Ｄ）参照）に遷移する。なお、案内メッセージ１５６、変更元商品表示部１５７、および「戻る」のボタン１２９は、カテゴリー選択画面（図１０（Ｂ）参照）と同様である。
図１０（Ｄ）に示す商品変更確認画面では、商品の変更を行う旨の案内メッセージ１６１と、変更前の商品の情報（名称および金額）を表示する変更前商品表示部１６２と、変更後の商品の情報（名称および金額）を表示する変更後商品表示部１６３とが設けられている。また、この変更確認画面には、「はい」のボタン１６５と「いいえ」のボタン１６６とが設けられている。ここで、「はい」のボタン１６５を操作すると、修正内容確認画面（図１１（Ａ）参照）に遷移する。また、「いいえ」のボタン１６６を操作すると、商品選択画面（図１０（Ｃ）参照）に戻る。
図１１（Ａ）に示す修正内容確認画面は、確定状態の購入商品確認画面（図６（Ｄ）参照）と略同様であるが、特にここでは、変更した商品に関する商品ボックス１１５が最初（最上部）に表示され、かつ、他の商品ボックス１１５とは異なる色で強調表示される。
図１１（Ｂ）に示す削除確認画面には、商品の削除を行う旨の案内メッセージ１７１と、削除対象となる商品の情報（名称および金額）を表示する削除商品表示部１７２とが設けられている。また、この変更確認画面には、「はい」のボタン１７３と「いいえ」のボタン１７４とが設けられている。ここで、「はい」のボタン１７３を操作すると、修正内容確認画面（図１１（Ｃ）参照）に遷移する。「いいえ」のボタン１７４を操作すると、修正内容選択画面（図１０（Ａ）参照）に戻る。
図１１（Ｃ）に示す修正内容確認画面では、認識結果一覧表示部１０５の商品ボックス１５２が、削除の操作が反映された状態で表示される。具体的には、削除の操作が行われた商品ボックス１１５がグレーアウトで表示される。また、図１１（Ｄ）に示す修正内容確認画面を表示するようにしてもよい。この修正内容確認画面では、商品ボックス１１５内に「戻す」のボタンが設けられている。この「戻す」のボタンを利用者が操作すると、修正内容選択画面（図１０（Ａ）参照）に戻る。
なお、図１１（Ａ），（Ｂ），（Ｃ），（Ｄ）に示す画面に表示される精算結果表示部１１６および「会計をやめる」のボタン１１９は、確定状態の購入商品確認画面（図６（Ｄ）参照）と同様である。
次に、精算台１における確定待ち時間および休止状態について説明する。図１２は、精算台１における確定待ち時間および休止状態を示す説明図である。
図１２（Ａ）に示すように、本実施形態では、未確定状態の購入商品確認画面（図６（Ｂ）参照）において、認識結果一覧表示部１０５に表示された商品認識結果に誤りがないことを利用者が確認すると、利用者が、商品認識結果を確定する操作、具体的には、「確定する」のボタン１１７を操作すると、確定待ち時間が設定される。この確定待ち時間には、「確定する」のボタン１１７の操作後に手を戻す利用者の一部の操作時間が含まれる。
この確定待ち時間では、商品認識処理および精算処理は継続される。この確定待ち時間において、商品認識結果をリアルタイムに精算処理および画面表示処理に反映させない制御を行い、認識結果一覧表示部１０５の表示内容が更新されないようにすることができる。
なお、商品認識結果を確定する操作を利用者が行うまでは、商品認識処理が常時定期的に行われるため、利用者は、載置部３７に置かれた商品の入れ替え（追加や除外）を行う、具体的には、置き忘れていた商品を後から載置部３７に置いたり、購入を取りやめた商品を載置部３７から取り出したりすることができ、利用者が商品の入れ替えを行うと、タッチパネルディスプレイ４５に表示された商品認識結果が変化する。
確定待ち時間は、商品認識結果を確定する操作が行われてから所定の時間（例えば数秒間）である。この確定待ち時間は、商品認識処理が正常に戻るまでの復帰時間であり、具体的には、利用者が、タッチパネルディスプレイ４５から手を離して、商品撮影用のカメラ４１の撮影エリアから利用者の手がなくなるのに要する時間（操作時間）に相当する。これにより、利用者がタッチパネルディスプレイ４５から手を離す際に、タッチパネルディスプレイ４５の画面が不自然に変化しても、すぐに商品認識処理が正常に復帰するので、利用者に違和感を与えることを抑制することができる。
次に、確定待ち時間が経過すると、商品認識結果および精算結果が、確定状態の購入商品確認画面（図６（Ｄ）参照）に反映される。このとき、画面に表示された商品認識結果および精算結果は、確定情報であり、以降は、休止状態となる。この休止状態では、商品認識処理および精算処理を停止する制御が行われる。なお、休止状態において、商品認識処理および精算処理を停止する制御は行わず、商品認識結果をリアルタイムに精算処理および画面表示処理に反映させない制御を行ってもよい。
ここで、利用者が、確定状態の購入商品確認画面に表示された商品認識結果に誤りがないことを確認すると、決済（会計）を指示する操作、具体的には、「会計をする」のボタン１１７を操作する。このとき、休止状態で、商品認識処理および精算処理を停止する制御が行われ、あるいは、商品認識結果をリアルタイムに精算処理および画面表示処理に反映させない制御が行われるため、画面に表示された商品認識結果および精算結果が変化したり、誤った商品認識結果で精算および決済が行われたりすることを避けることができる。
なお、未確定状態の購入商品確認画面が表示されている状態では、商品認識処理が常時定期的に行われる。このため、利用者が、載置部３７に置かれた商品の入れ替え（追加や除外）を行う、すなわち、置き忘れていた商品を後から載置部３７に置いたり、購入を取りやめた商品を載置部３７から取り出したりすると、その商品の入れ替え状況に応じて、認識結果一覧表示部１０５の表示が更新される。
また、確定状態の購入商品確認画面に遷移した後に、利用者が、載置部３７に置かれた商品の入れ替え（追加や除外）を行いたい場合がある。この場合、確定状態の購入商品確認画面において「再スキャン」のボタン１１８を操作すれば、商品認識処理のやり直しを行うことができる。
また、図１２（Ｂ）に示すように、未確定状態の購入商品確認画面（図６（Ｂ）参照）に遷移したタイミングで、確定待ち時間を設定するようにしてもよい。この場合、確定待ち時間は、利用者が、未確定状態の購入商品確認画面を閲覧して、利用者が「確定する」のボタン１１２を操作し、さらに、タッチパネルディスプレイ４５から手を離して、商品撮影用のカメラ４１の撮影エリアから利用者の手がなくなるのに要する時間（操作時間）に相当する。
これにより、利用者が、未確定状態の購入商品確認画面において「確定する」のボタン１１２を操作するために、タッチパネルディスプレイ４５に手を伸ばした際に、タッチパネルディスプレイ４５の画面が不自然に変化しても、すぐに商品認識処理が正常に復帰するので、利用者に違和感を与えることを避けることができる。
次に、精算台１のタッチパネルディスプレイ４５に表示されるテンキー１３３のキー配列パターンの変更について説明する。図１３は、テンキー１３３のキー配列パターンの変更状況の一例を示す説明図である。
本実施形態では、パスワード認証画面（図８（Ａ）参照）において、利用者が、テンキー１３３を用いてパスワード（暗証番号）を入力する。このとき、精算台１の正面にタッチパネルディスプレイ４５が配置されているため、利用者の背後にいる別人が利用者の指の動きを目視することができ、パスワードを盗み取られるおそれがある。
そこで、本実施形態では、利用者が代わる度に、例えば、図１３（Ａ）〜（Ｄ）に示すように、パスワード認証画面のテンキー１３３のキー配列パターン、すなわち、「１」から「９」の数字キーの配列パターンが変更される。図１３（Ａ）〜（Ｄ）に示す例では、利用者が代わる度に、４通りのキー配列パターンがランダムに選択される。
また、本実施形態では、パスワード認証画面（図８（Ａ）参照）で利用者が入力したパスワード（暗証番号）が不正である場合には、再入力状態のパスワード認証画面（図９（Ｃ）参照）に遷移するが、この再入力状態のパスワード認証画面では、最初のパスワード認証画面（図８（Ａ）参照）からキー配列パターンが変更される。
なお、図１３（Ａ）〜（Ｄ）に示す例では、数字キーの３×３の並び規則が変更されているが、この他に、例えば、数字キーの配置がランダムに変更されるようにしてもよい。また、テンキー１３３の全体的なレイアウトが変更されるようにしてもよい。
次に、ユーザ登録時におけるユーザ端末１１の動作手順について説明する。図１４は、ユーザ登録時におけるユーザ端末１１の動作手順を示すフロー図である。
ユーザ端末１１では、アプリケーションをインストールして最初に起動した際に、まず、個人情報確認画面を表示する（ＳＴ１０１）。この個人情報確認画面では、個人情報の取り扱いに関する同意書が表示される。この個人情報確認画面において、同意書を承認する操作をユーザが行うと、認証情報入力画面を表示する（ＳＴ１０２）。
次に、認証情報入力画面において、ユーザＩＤおよびパスワードを入力する操作をユーザが行うと、ユーザＩＤおよびパスワードをユーザ管理サーバ１３に送信する（ＳＴ１０３）。
次に、個人情報入力画面を表示する（ＳＴ１０４）。この個人情報入力画面では、生年月日などの個人情報をユーザが入力することができる。この個人情報入力画面において、個人情報を入力する操作をユーザが行うと、生年月日などを含む個人情報をユーザ管理サーバ１３に送信する（ＳＴ１０５）。
次に、顔撮影画面を表示する（ＳＴ１０４）。この顔撮影画面において、ユーザが自分の顔を撮影する操作を行うと、撮影画像から顔画像を抽出して、その顔画像をユーザ管理サーバ１３に送信する（ＳＴ１０７）。
このとき、ユーザ管理サーバ１３では、ユーザ端末１１から取得したユーザＩＤおよびパスワードを登録する処理を行う。また、ユーザ管理サーバ１３では、ユーザ端末１１から取得した顔画像を顔認証サーバ１５に送信し、顔認証サーバ１５において、顔画像を登録する処理を行う。
次に、クレジット情報入力画面を表示する（ＳＴ１０８）。このクレジット情報入力画面において、ユーザがクレジット情報を入力する操作を行うと、そのクレジット情報を決済サーバ１２に送信する（ＳＴ１０９）。決済サーバ１２では、ユーザ端末１１から取得したクレジット情報を登録する処理を行う。
次に、クレジット情報登録の完了通知を決済サーバ１２から受信すると、登録完了画面を表示する（ＳＴ１１０）。
次に、精算台１の動作手順について説明する。図１５、図１６は、精算台１の動作手順を示すフロー図である。
精算台１では、まず、商品撮影用のカメラ４１の撮影画像に基づいて、載置部３７に物体が置かれたことを検知すると（ＳＴ２０１でＹｅｓ）、載置部３７に置かれた物体の位置を検出する（ＳＴ２０２）。次に、載置部３７に置かれた物体がどの商品であるかを識別する（ＳＴ２０３）。次に、載置部３７に置かれた商品の代金を精算する（ＳＴ２０４）。次に、未確定状態の購入商品確認画面（図６（Ｂ）参照）を表示する（ＳＴ２０５）。
次に、未確定状態の購入商品確認画面（図６（Ｂ）参照）において、「確定する」のボタン１１２を利用者が操作すると（ＳＴ２０６で「確定」）、案内画面（図６（Ｃ）参照）を表示する（ＳＴ２０７）。このとき、タッチパネルディスプレイ４５から手を離すように促すガイド音声、例えば「手を離してください」の音声がスピーカ４７から出力される。
次に、確定状態の購入商品確認画面（決済指示画面）（図６（Ｄ）参照）を表示する（ＳＴ２０８）。そして、確定状態の購入商品確認画面において、決済を指示する操作、具体的には「会計をする」のボタン１１７を利用者が操作すると（ＳＴ２０９で「決済」）、顔認証に進み、顔認証画面（図７（Ａ）参照）を表示する（ＳＴ２２１）。このとき、購入商品に年齢制限商品が含まれているか否かを判定し、年齢制限商品が含まれている場合には、年齢制限フラグをオンとする処理を行う。
また、中止を選択する操作、具体的には「会計をやめる」のボタン１１９を利用者が操作すると（ＳＴ２０９で「中止」）、キャンセル画面（図８（Ｄ）参照）に遷移する（ＳＴ２１２）。また、「再スキャン」のボタン１１８を利用者が操作すると（ＳＴ２０９で「再スキャン」）、ＳＴ２０１に戻り、商品認識処理が再度行われる。
一方、誤りのある商品を選択する操作、具体的には、誤りのある商品に関する商品ボックス１１５を利用者が操作すると（ＳＴ２０９で「商品選択」）、修正内容選択画面（図１０（Ａ）参照）に遷移する（ＳＴ２１０）。
次に、修正内容選択画面（図１０（Ａ）参照）において、「変更」のボタン１５４を操作すると（ＳＴ２１１で「変更」）、カテゴリー選択画面（図１０（Ｂ）参照）に遷移する。また、「削除」のボタン１５３を操作すると（ＳＴ２１１で「削除」）、削除確認画面（図１１（Ｂ）参照）に遷移する。その後、所要の操作を行うと、修正内容確認画面（図１１（Ａ），（Ｃ），（Ｄ）参照）に遷移する（ＳＴ２１０）。このとき、修正内容確認画面は、操作内容が反映された状態で表示される。
また、中止を選択する操作、具体的には「会計をやめる」のボタン１１９を操作すると（ＳＴ２１１で「中止」）、キャンセル画面（図８（Ｄ）参照）に遷移する（ＳＴ２１２）。また、決済を選択する操作、具体的には「会計をする」のボタン１１７を操作すると（ＳＴ２１１で「決済」）、顔認証に進み、顔認証画面（図７（Ａ）参照）を表示する（ＳＴ２２１）。また、「再スキャン」のボタン１１８を利用者が操作すると（ＳＴ２１１で「再スキャン」）、ＳＴ２０１に戻り、商品認識処理が再度行われる。
一方、顔認証画面（図７（Ａ）参照）を表示すると（ＳＴ２２１）、次に、顔認証用のカメラ４６の撮影画像から顔画像を抽出して、その顔画像を含む顔認証のリクエストを顔認証サーバ１５に送信する（ＳＴ２２２）。このとき、顔認証サーバ１５では、顔認証のリクエストに応じて、精算台１から取得した顔画像に基づいて顔認証を実施し、認証結果を含む顔認証のレスポンスを精算台１に送信する。
次に、顔認証のレスポンスを顔認証サーバ１５から受信し（ＳＴ２２３）、その顔認証のレスポンスに含まれる認証結果が成功である場合には（ＳＴ２２４でＹｅｓ）、次に、購入商品に年齢制限商品が含まれている場合に、顔認証により特定された利用者の年齢照合が行われ、年齢制限対象者であるか否か、すなわち、利用者が成年（下限年齢）に達しているか否かを判定する（ＳＴ２２５）。このとき、年齢制限商品フラグに基づいて、購入商品に年齢制限商品が含まれていることを確認する。また、顔認証のレスポンスに含まれる年齢情報（生年月日、または現在の年齢）に基づいて、年齢制限対象者であるか否かを判定する。
ここで、顔認証により特定された利用者が年齢制限対象者でない、すなわち、利用者が成年に達している場合には（ＳＴ２２５でＮｏ）、パスワード認証に進み、パスワード認証画面（図８（Ａ）参照）を表示する（ＳＴ２２６）。
次に、パスワード認証画面（図８（Ａ）参照）において、利用者がパスワード（暗証番号）を入力すると、パスワード認証のリクエストをユーザ管理サーバ１３に送信する（ＳＴ２２７）。このとき、ユーザ管理サーバ１３では、パスワード認証のリクエストに応じて、精算台１から取得した顔画像に基づいて顔認証を実施し、認証結果を含む顔認証のレスポンスを精算台１に送信する。
次に、パスワード認証のレスポンスをユーザ管理サーバ１３から受信し（ＳＴ２２８）、そのパスワード認証のレスポンスに含まれる認証結果が成功である場合には（ＳＴ２２９でＹｅｓ）、決済のリクエストを、ユーザ管理サーバ１３を介して決済サーバ１２に送信する（ＳＴ２３０）。決済サーバ１２では、決済のリクエストを受信すると、決済処理を実行して、決済のレスポンスを、ユーザ管理サーバ１３を介して精算台１に送信する。
次に、決済のレスポンスを決済サーバ１２から受信すると（ＳＴ２３１）、決済完了画面（図８（Ｃ）参照）を表示する（ＳＴ２３２）。次に、レシート発行処理を行い（ＳＴ２３３）、レシート情報を、ユーザ管理サーバ１３を介してユーザ端末１１に送信する（ＳＴ２３４）。ユーザ端末１１では、レシート情報を受信すると、自装置の記憶部６２に記憶する。
一方、認証結果が失敗である場合には（ＳＴ２２４でＮｏ）、ユーザＩＤ選択画面（図９（Ａ）参照）を表示する（ＳＴ２３５）。
次に、ユーザＩＤ選択画面（図９（Ａ）参照）において、ユーザＩＤ選択の操作、具体的にはユーザＩＤのボタン１４２を利用者が操作すると（ＳＴ２３６で「ユーザＩＤ選択」）、パスワード認証に進み、パスワード認証画面（図８（Ａ）参照）を表示する（ＳＴ２２６）。また、候補なしの操作、具体的には「候補がない」のボタン１４３をユーザが操作すると（ＳＴ２３６で「候補なし」）、エラー画面（図９（Ｂ）参照）を表示する（ＳＴ２３７）。また、中止の操作、具体的には「会計をやめる」のボタン１１９をユーザが操作すると（ＳＴ２３６で「中止」）、キャンセル画面（図８（Ｄ）参照）に遷移する（ＳＴ２１２）。
また、利用者が年齢制限対象者である、すなわち、利用者が成年に達していない場合には（ＳＴ２２５でＹｅｓ）、エラー画面（図７（Ｄ）参照）を表示する（ＳＴ２３８）。
次に、エラー画面（図７（Ｄ）参照）において、中止の操作、具体的には「会計をやめる」のボタン１１９を利用者が操作すると（ＳＴ２３９で「中止」）、キャンセル画面（図８（Ｄ）参照）に遷移する（ＳＴ２１２）。また、復帰の操作、具体的には「戻る」のボタン１２９を利用者が操作すると（ＳＴ２３９で「復帰」）、ＳＴ２０１に戻り、商品検知処理（ＳＴ２０２）、商品認識処理（ＳＴ２０３）、および精算処理（ＳＴ２０４）が行われて、未確定状態の購入商品確認画面（図６（Ｂ）参照）に遷移する。これにより、利用者が、年齢制限商品を除外して処理をやり直すことができる。
また、パスワード認証の認証結果が失敗である場合には（ＳＴ２２９でＮｏ）、次に、パスワード認証が所定回数連続して失敗したか否かを判定する（ＳＴ２４０）。ここで、パスワード認証が所定回数連続して失敗していない場合には（ＳＴ２４０でＮｏ）、再度、パスワード認証に進み、再入力状態のパスワード認証画面（図９（Ｃ）参照）を表示する（ＳＴ２２６）。一方、パスワード認証が所定回数連続して失敗した場合には（ＳＴ２４０でＹｅｓ）、エラー画面（図９（Ｄ）参照）を表示する（ＳＴ２４１）。
なお、本実施形態では、セキュリティ強化のため、顔認証とパスワード認証との２要素認証が採用されており、顔認証が成功した場合でもパスワード認証を行うが、パスワード認証を省略して顔認証のみとしてもよい。
以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。
本発明に係る精算決済装置および精算決済システムは、無人店舗でも年齢制限商品を販売できるように、利用者への年齢制限商品の販売の可否を判定する年齢確認を確実に行うことができる効果を有し、利用者が売場から選択した商品を認識して、その代金の精算及び決済を行う精算決済装置および精算決済システムなどとして有用である。
１ 精算台（精算決済装置）
１５ 顔認証サーバ（サーバ装置）
３７ 載置部
４１ 商品撮影用のカメラ（第１のカメラ）
４５ タッチパネルディスプレイ（表示部）
４６ 顔認証用のカメラ（第２のカメラ）
１１２ 「確定する」のボタン（操作部）
１１７ 「会計をする」のボタン（操作部）

Claims (5)

  1. 利用者が売場から選択した商品を認識して、その代金の精算及び決済を行う精算決済装置であって、
    利用者が購入する商品を撮影する第１のカメラと、
    利用者の顔を撮影する第２のカメラと、
    前記第１のカメラの撮影で取得した商品画像に基づいて、利用者が購入する商品を認識して精算及び決済に関する処理を行うと共に、決済対象者となる利用者を特定するために、前記第２のカメラの撮影で取得した顔画像に基づいて顔認証に関する処理を行う制御部と、
    この制御部で取得した商品認識結果、精算結果及び顔認証結果を表示する表示部と、
    を備え、
    前記制御部は、
    認識された商品に年齢制限商品が含まれる場合には、前記顔認証により利用者が特定されると、その利用者の年齢情報に基づいて、その利用者が年齢制限対象者であるか否かを判定する年齢照合に関する処理を行うことを特徴とする精算決済装置。
  2. 前記制御部は、
    認識された商品に年齢制限商品が含まれ、かつ、前記顔認証により特定された利用者が年齢制限対象者である場合には、決済を行わないことを特徴とする請求項１に記載の精算決済装置。
  3. 前記制御部は、
    年齢制限により決済を行わない場合には、年齢制限商品の販売が禁止されている旨を、前記表示部に表示することを特徴とする請求項２に記載の精算決済装置。
  4. 前記制御部は、
    年齢制限により決済を行わない場合には、商品認識、精算及び決済に関する処理の再実行を指示する操作部を、前記表示部に表示することを特徴とする請求項２に記載の精算決済装置。
  5. 請求項１に記載の精算決済装置を有する精算決済システムであって、
    前記精算決済装置とネットワークを介して接続されたサーバ装置を有し、
    前記精算決済装置は、
    前記顔認証に関する処理として、前記顔画像を前記サーバ装置に送信し、
    前記サーバ装置は、
    前記精算決済装置から受信した前記顔画像に基づいて顔認証処理を実行して、顔認証結果を前記精算決済装置に送信することを特徴とする精算決済システム。
JP2020079427A 2020-04-28 2020-04-28 精算決済装置および精算決済システム Active JP7526924B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020079427A JP7526924B2 (ja) 2020-04-28 2020-04-28 精算決済装置および精算決済システム
PCT/JP2021/014190 WO2021220714A1 (ja) 2020-04-28 2021-04-01 精算決済装置および精算決済システム
CN202180031618.2A CN115516533A (zh) 2020-04-28 2021-04-01 结账支付装置和结账支付系统
US17/921,776 US20230169508A1 (en) 2020-04-28 2021-04-01 Checkout-payment device and checkout-payment system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020079427A JP7526924B2 (ja) 2020-04-28 2020-04-28 精算決済装置および精算決済システム

Publications (3)

Publication Number Publication Date
JP2021174381A true JP2021174381A (ja) 2021-11-01
JP2021174381A5 JP2021174381A5 (ja) 2023-04-28
JP7526924B2 JP7526924B2 (ja) 2024-08-02

Family

ID=78280159

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020079427A Active JP7526924B2 (ja) 2020-04-28 2020-04-28 精算決済装置および精算決済システム

Country Status (4)

Country Link
US (1) US20230169508A1 (ja)
JP (1) JP7526924B2 (ja)
CN (1) CN115516533A (ja)
WO (1) WO2021220714A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7531175B2 (ja) * 2020-04-28 2024-08-09 パナソニックＩｐマネジメント株式会社 精算決済装置および精算決済システム
US11989763B1 (en) * 2021-12-09 2024-05-21 Inmar Clearing, Inc. Self-checkout verification system and related methods
WO2023167256A1 (ja) * 2022-03-01 2023-09-07 京セラ株式会社 情報処理装置及び情報処理方法
WO2024057430A1 (ja) * 2022-09-14 2024-03-21 日本電気株式会社 決済端末、システム及び方法、並びに、コンピュータ可読媒体
EP4432196A1 (en) * 2023-03-16 2024-09-18 Glory Ltd. Commodity sales system and commodity sales method
US20240311824A1 (en) * 2023-03-16 2024-09-19 Glory Ltd. Commodity sales system and commodity sales method

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030018897A1 (en) * 2001-07-20 2003-01-23 Psc Scanning, Inc. Video identification verification system and method for a self-checkout system
JP2011070293A (ja) * 2009-09-24 2011-04-07 Toshiba Tec Corp 商品販売データ処理装置及びその制御プログラム
US20110320037A1 (en) * 2010-06-25 2011-12-29 Jose Frugone Biometric payment and identification system and method
JP2014032538A (ja) * 2012-08-03 2014-02-20 Toshiba Tec Corp 商品販売データ処理装置
JP6310234B2 (ja) * 2013-11-18 2018-04-11 株式会社イシダ 会員管理システム
US9665896B2 (en) * 2015-03-10 2017-05-30 Wal-Mart Stores, Inc. System and method for age verification over mobile app for purchasing age-restricted items
US20170372553A1 (en) * 2016-06-24 2017-12-28 Brett Gray Single Cigarrette Vending Machine
CA3086414A1 (en) * 2017-12-21 2019-06-27 Juul Labs, Inc. Vaporizer controls
JP6884719B2 (ja) * 2018-02-23 2021-06-09 ソフトバンク株式会社 情報処理装置、情報処理装置の制御方法、及び情報処理装置の制御プログラム
JP7163604B2 (ja) 2018-03-22 2022-11-01 日本電気株式会社 精算システム、精算方法及びプログラム
WO2019217936A1 (en) * 2018-05-10 2019-11-14 Civic Technologies, Inc. Eligibility for access to restricted goods and services using zero-knowledge proofs
GB201810639D0 (en) * 2018-06-28 2018-08-15 Yoti Holding Ltd Age verification
US11481751B1 (en) * 2018-08-28 2022-10-25 Focal Systems, Inc. Automatic deep learning computer vision based retail store checkout system
US11410496B2 (en) * 2018-09-21 2022-08-09 Scientific Games, Llc System and method for collecting and using filtered facial biometric data
JP7267709B2 (ja) * 2018-10-09 2023-05-02 東芝テック株式会社 無人店舗システムおよびサーバ
US10726246B1 (en) * 2019-06-24 2020-07-28 Accenture Global Solutions Limited Automated vending machine with customer and identification authentication

Also Published As

Publication number Publication date
JP7526924B2 (ja) 2024-08-02
WO2021220714A1 (ja) 2021-11-04
CN115516533A (zh) 2022-12-23
US20230169508A1 (en) 2023-06-01

Similar Documents

Publication Publication Date Title
WO2021220714A1 (ja) 精算決済装置および精算決済システム
WO2020203381A1 (ja) 精算決済装置および無人店舗システム
WO2020203378A1 (ja) 無人店舗システムおよび無人店舗管理方法
WO2021220713A1 (ja) 精算決済装置および精算決済システム
WO2020203380A1 (ja) 精算決済装置および無人店舗システム
JP2020123225A (ja) 情報管理装置、情報管理方法及びプログラム
JP2016126414A (ja) 顔照合システムおよび娯楽施設のサービス提供方法
WO2020203379A1 (ja) 精算決済装置および無人店舗システム
JP6680399B2 (ja) 施設利用管理システム、施設利用管理方法、及びプログラム
KR20210129924A (ko) 상품 제공용 스마트 픽업 박스
US20210182842A1 (en) Information processing device and control program for information processing device
WO2024024208A1 (ja) 情報処理端末及び記録媒体
US20240152590A1 (en) Server device, authentication terminal, system, control method of server device, and storage medium
JP7290842B2 (ja) 情報処理システム、情報処理システムの制御方法、プログラム
WO2022180970A1 (ja) 精算決済装置、精算決済システムおよび精算決済方法
JP2023152431A (ja) 飲食店の客数算出システムならびに方法およびプログラム
JP2023177975A (ja) 情報端末及びそのプログラム
JP2023037714A (ja) 情報処理装置、情報処理装置の制御方法、プログラム
JP2020181497A (ja) 入場管理システム及び入場管理方法
JP2023037716A (ja) プログラム、電子機器の制御方法、電子機器
JP2020008991A (ja) 送金管理システムおよび送金管理方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230420

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240304

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240708

R150 Certificate of patent or registration of utility model

Ref document number: 7526924

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150