JP6760767B2 - 販売データ処理装置およびプログラム - Google Patents

販売データ処理装置およびプログラム Download PDF

Info

Publication number
JP6760767B2
JP6760767B2 JP2016109176A JP2016109176A JP6760767B2 JP 6760767 B2 JP6760767 B2 JP 6760767B2 JP 2016109176 A JP2016109176 A JP 2016109176A JP 2016109176 A JP2016109176 A JP 2016109176A JP 6760767 B2 JP6760767 B2 JP 6760767B2
Authority
JP
Japan
Prior art keywords
customer
information
product
unit
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016109176A
Other languages
English (en)
Other versions
JP2017215776A (ja
Inventor
高橋 潤
潤 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Priority to JP2016109176A priority Critical patent/JP6760767B2/ja
Priority to CN201710364387.2A priority patent/CN107452162A/zh
Priority to EP17172815.7A priority patent/EP3252693A1/en
Priority to US15/603,590 priority patent/US20170344973A1/en
Publication of JP2017215776A publication Critical patent/JP2017215776A/ja
Application granted granted Critical
Publication of JP6760767B2 publication Critical patent/JP6760767B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/12Cash registers electronically operated
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/12Hotels or restaurants
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • G06Q20/209Specified transaction journal output feature, e.g. printed receipt or voice output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/0018Constructional details, e.g. of drawer, printing means, input means
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07GREGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00Cash registers
    • G07G1/0036Checkout procedures
    • G07G1/0045Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明の実施形態は、販売データ処理装置およびプログラムに関する。
店内で飲食をするファーストフード等の店舗では、注文を受けた商品の調理に時間がかかる場合、例えば番号札を顧客に渡して店内の席で待ってもらい、店舗の店員は、番号札を頼りに顧客を探して、出来上がった商品を届けていた。
しかしながら、店内が混雑している場合や店舗内が広い場合等には、店員は、商品を届ける顧客を探すのに時間がかかることがある。
本発明が解決しようとする課題は、該当する顧客の早期の発見を支援することが可能な販売データ処理装置およびプログラムを提供することである。
実施形態の販売データ処理装置は、顧客が注文した商品の売上登録処理を行う販売データ処理装置であって、商品を注文する顧客の全身を撮像するカメラと、最初の前記商品に係る前記売上登録処理の開始に伴って前記カメラによる前記顧客の撮像を開始し、前記商品の決済処理の終了に伴って前記カメラによる前記顧客の撮像を終了する撮像制御手段と、前記撮像制御手段によって撮像された前記顧客の撮像画像に基づいて前記顧客の全身の写真を示す特徴情報を生成する生成手段と、前記生成手段が生成した前記特徴情報を前記顧客が注文した商品を当該顧客に届けるための用紙に印字させる印字制御手段と、を備える。
図1は、実施形態に係る店舗のレイアウトを平面的に見た概略図である。 図2は、POS端末を含む会計部付近を上方から見た平面図である。 図3は、POS端末を含む会計部付近を斜めから見た斜視図である。 図4は、POS端末のハードウェア構成を示すブロック図である。 図5は、POS端末の顔マスタの一例を示す図である。 図6は、プリンタのハードウェア構成を示すブロック図である。 図7は、POS端末の機能構成を示す機能ブロック図である。 図8は、POS端末の制御処理の流れを示すフローチャートである。 図9は、プリンタの制御処理の流れを示すフローチャートである。 図10は、プリンタが印字した用紙の一例を示す図である。 図11は、プリンタが印字した用紙の他の一例を示す図である。
以下、図1〜図11を参照して、実施形態に係る販売データ処理装置およびプログラムを詳細に説明する。実施形態では、POS端末を販売データ処理装置の一例として説明する。なお、以下に説明する実施形態によりこの発明が限定されるものではない。
図1は、実施形態の店舗Tにおける各部のレイアウトを上方から示す平面図である。図1において、店舗Tは、例えばハンバーガー等の商品を販売して店内で飲食が可能なファーストフード店である。店舗Tは、商品の会計をする会計部TS、商品を調理する調理部TC、購入した商品を顧客Cが飲食するためのテーブルや椅子が設置されたAゾーンおよびBゾーンを有する。Aゾーンは例えば喫煙可能スペースであり、Bゾーンは例えば禁煙スペースである。AゾーンとBゾーンは、壁やガラス等のパーテーションTPで区切られている。
店舗Tの入口TEから来店した顧客Cは、会計部TSにおいて商品を注文する。店員CHは、顧客Cが注文した商品の代金を受け取る(商品を販売する)。注文した商品をすぐ顧客Cに渡せる場合は、店員CH(図2を参照)は顧客Cに対して商品を手渡す。商品を受け取った顧客Cは、矢印Y1または矢印Y2の方向に進む。矢印Y1の方向に移動した顧客CはAゾーンで飲食をする。矢印Y2の方向に移動した顧客CはBゾーンで飲食をする。
一方、顧客Cが注文した商品の調理に時間がかかる場合は、店員CHは、番号が印字された番号札を顧客Cに手渡す。顧客Cは、AゾーンまたはBゾーンに移動して、商品が出来上がるのを待つ。注文した商品が調理されたら、店員CHは、AゾーンまたはBゾーンにいる顧客Cの席まで商品を届ける。
図2は、店舗T内の会計部TSに設置されたPOS端末1を示す平面模式図である。店舗T内には、店舗T内に陳列された商品を販売する会計部TSが設けられている。会計部TSには、長尺状のカウンタ6が設置されている。このカウンタ6は、上面に平坦状の平面7が形成されている。
この平面7には、POS端末1が設置されている。POS端末1は、店員CHが操作するキーボード等の操作部17、店員CHに対して情報を表示する店員用表示部18、顧客Cに対して情報を表示する顧客用表示部19を備えている。操作部17には、操作することで商品を指定する商品キーや締めキー(図4を参照)が設けられている。
顧客用表示部19の外枠上部には、カメラ191が設けられている。カメラ191は、CCD(Charge Coupled Device)イメージセンサ等で構成されている。カメラ191は、商品を注文する顧客C側に向けて設置されている。カメラ191は、POS端末1の顧客C側のC1で囲まれたエリアに位置する顧客Cが商品を注文する際に、顧客Cが顧客用表示部19の表示を見ると、ほぼ顧客Cの正面になる位置に設けられている。
カメラ191は、商品を注文する顧客C等の全身の動画または連続静止画(総称して「画像」という)を撮像する。実施形態では、例えば1秒間に10枚の顧客Cの連続画像を撮像する。撮像された画像には、顧客Cの顔の他、顧客Cが着ている服装(上着、ズボン、スカート、帽子、眼鏡等)が写る。
カウンタ6を挟んで、POS端末1の操作側に店員CHが位置し、反対の通路側に顧客Cが位置している。顧客Cは、メニューを見ながら商品を注文する。店員CHは、POS端末1に設けられた商品キーを操作することで、POS端末1は当該商品の売上登録処理を実行する。売上登録処理は次の処理を含む。すなわち、売上登録処理は、顧客Cが注文した商品の情報が入力されると、当該商品の商品名や単価等(これらを総称して商品情報という)を表示する処理を含む。また、売上登録処理は、当該商品の商品情報等を商品情報部131(図4を参照)に記憶する処理を含む。
また店員CHは、顧客Cからすべての注文を受けると、締めキーを操作する。するとPOS端末1は、売上登録処理した商品について、決済処理を実行する。決済処理は、次の処理を含む。すなわち、決済処理は、商品情報部131に記憶された商品情報に基づいて、売上登録処理された商品の金額を合計した総額を表示する処理を含む。また、決済処理は、顧客Cから預かった預り金に基づいて釣銭を計算して表示する処理、釣銭の発行を釣銭機に指示する処理、商品情報や決済情報(合計金額、税額、預り金額、釣銭額等)を印字したレシートを発行する処理等を含む。なお、一人の顧客Cに対する売上登録処理の開始から決済処理の終了までを一取引という。
また、カウンタ6の平面7上には、プリンタ8が設置されている。プリンタ8は、熱転写型の印字ヘッドを搭載している。また、プリンタ8は、ロール状に巻回された長尺用紙(感熱紙)を収納する収納部を備えている。またプリンタ8は、収納された長尺用紙の先端を引き出して、印字ヘッドの位置に搬送する搬送部を備えている(いずれも図6を参照)。
このようなプリンタ8は、通信回線9を介して、POS端末1と電気的に接続している。プリンタ8は、POS端末1からの印字情報を受信する。印字情報は、顧客Cに渡した番号札の番号、当該顧客Cの特徴情報(実施形態では当該顧客Cの属性情報(性別、年齢層等))、当該顧客Cの移動情報(AゾーンかBゾーンかの情報を含む)を含む。また、印字情報は、当該顧客Cの服装情報(服の種類、色等)を含む。
プリンタ8は、POS端末1から印字情報を受信すると、長尺用紙の先端を印字ヘッド方向に搬送する。また、プリンタ8は、印字ヘッドを発熱して、印字情報を長尺用紙に印字した用紙Pを作成する。そしてプリンタ8は、印字情報を印字した用紙Pを、発行口811から発行する。用紙Pは、注文した商品を顧客Cに届けるために店員CHが見る用紙である。
図3は、実施形態のPOS端末1を顧客C側から見た外観を示す斜視図である。図3において、POS端末1は、本体2と金銭収納箱3とを有する。金銭収納箱3は、ドロワを有し、顧客Cから預かった紙幣や貨幣の金銭や商品券等の有価証券類、および顧客Cに手渡す釣銭等を収納している。
本体2は、情報を入力するキーボード等の操作部17、液晶表示器等で構成され操作者である店員CHに情報を表示する店員用表示部18、液晶表示器等で構成され、顧客Cに情報を表示する顧客用表示部19を設置している。また、本体2は、商品に付されたバーコードや二次元コード等のコードを読取る読取部20を備えている。読取部20は、CCDイメージセンサ等で商品に付されたコードを読取って入力する。また、本体2は、内部に、POS端末1の制御部100(図4を参照)や、商品情報を印字してレシートを発行する印字部21を備えている。
また、POS端末1の顧客用表示部19の表示面側の上部中央部には、カメラ191が設けられている。カメラ191は、顧客Cの顔を含む全身画像を撮像する。カメラ191は、顧客Cが着ている服装を撮像する。
次に、POS端末1のハードウェアについて説明する。図4は、POS端末1のハードウェア構成を示すブロック図である。図4において、POS端末1は、CPU(Central Processing Unit)11、ROM(Read Only Memory)12、RAM(Random Access Memory)13、メモリ部14等を備えている。CPU11は制御主体となる。ROM12は各種プログラムを記憶する。RAM13はプログラムや各種データを展開する。メモリ部14は各種プログラムを記憶する。CPU11、ROM12、RAM13、メモリ部14は、互いにデータバス15を介して接続されている。CPU11とROM12とRAM13が、制御部100を構成する。すなわち、制御部100は、CPU11がROM12やメモリ部14の制御プログラム部141に記憶されRAM13に展開された制御プログラムに従って動作することによって、後述する制御処理を実行する。
RAM13は、商品情報部131と画像記憶部132を備えている。商品情報部131は、売上登録処理された商品の商品情報(商品コード、商品名、商品の価格、等)を記憶する。画像記憶部132は、カメラ191が撮像した画像を記憶する。具体的には、画像記憶部132は、カメラ191が撮像した顧客Cの全身画像を記憶する。また、画像記憶部132は、カメラ191が撮像した顧客Cが着ている服装を記憶する。POS端末1の制御部100は、画像記憶部132に記憶された全身画像に基づいて、当該顧客Cの顔を検出する顔検出を実行する。顔検出技術は、カメラ191が撮像した画像から後述する各顔パーツ(目、鼻、口、耳、顎等)のすべてを検出することで、人物の顔であることを検出する公知の技術である。
メモリ部14は、電源を切っても記憶情報が保持されるHDD(Hard Disc Drive)やフラッシュメモリ等の不揮発性メモリで構成され、制御プログラム部141に記憶された制御プログラム等を記憶する。また、メモリ部14は、顔マスタ142(図5を参照)、服装マスタ143、ゾーンマスタ144を備えている。服装マスタ143は、服装の種類と服装の種類別の特徴とを対応付けて記憶している。制御部100は、カメラ191が撮像した服装の画像から服装の特徴を抽出する。そして制御部100は、抽出した服装の特徴と服装マスタ143に記憶された特徴とを比較し、当該特徴を備えた服装の種類を特定する。ゾーンマスタ144は、顧客CがPOS端末1の位置から移動する方向に対応させて、当該顧客Cが向かったゾーンを記憶する。顧客Cが、POS端末1の位置から左方向(矢印Y1方向)に移動したことに対応して、Aゾーンを記憶する。また、顧客Cが、POS端末1の位置から右方向(矢印Y2方向)に移動したことに対応して、Bゾーンを記憶する。制御部100は、カメラ191が撮像し、画像記憶部132が記憶している連続画像から、当該顧客Cの移動方向を判断する。例えば、顧客Cが左方向に移動する連続画像を記憶している場合、制御部100は、ゾーンマスタ144に基づいて、当該顧客CはAゾーンに移動したと判断する。顧客Cが右方向に移動する連続画像を記憶している場合、制御部100は、ゾーンマスタ144に基づいて、当該顧客CはBゾーンに移動したと判断する。
また、データバス15には、操作部17、店員用表示部18、顧客用表示部19、読取部20、印字部21、カメラ191が、コントローラ16を介して接続されている。コントローラ16は、制御部100からの指示を受けて、操作部17、店員用表示部18、顧客用表示部19、読取部20、印字部21、カメラ191を制御する。ただ、説明を簡略化するため、コントローラ16が行う制御を制御部100が行うとして説明する。
操作部17は、商品を指定する商品キー171および締めキー172を含む種々のキーを備えている。商品キー171は、店舗Tが販売する商品を特定するキーである。商品キー171は、一つの商品に一つ用意されている。ある商品の商品キー171が操作されると、当該商品が特定され、制御部100は、当該商品に係る売上登録処理を実行する。締めキー172は、取引の終了を宣言するとともに、決済処理を実行するためのキーである。
読取部20は、CCDイメージセンサ等で構成され、バーコードや二次元コード等のコードシンボルをCCDで読取って、商品コードを取得する。読取部20は、コードシンボルが付してある商品(すなわち、商品キー171の操作によって指定できない商品)を指定する場合に用いる。
印字部21は、本体2内に収納されたロール状のレシート用紙を引き出して、例えば熱転写型の印字ヘッドを備えたサーマルプリンタ等で商品情報や決済情報等を印字し、レシートとして発行する。
また、制御部100は、データバス15を介して通信I/F(Interface)24と電気的に接続している。通信I/F24は、通信回線9を介してプリンタ8と接続している。
図5は、メモリ部14の顔マスタ142を示すメモリマップである。図5において、顔マスタ142は、10歳代から70歳以上までの性別毎・年齢層毎に顔パーツ情報を記憶する顔パーツ情報部1421を備えている。各顔パーツ情報部1421は、それぞれの属性(年齢層や性別)を特定できる顔パーツ情報を記憶している。
顔パーツ情報とは、人の顔をパーツや特徴に合わせて分類した、属性毎の各パーツや特徴を示すデータであり、例えば、人の目、鼻、口、耳、顎といったパーツの特徴や、笑顔、真面目顔、目を閉じている、目を開いている、といった顔の変形特徴を表すデータをいう。属性毎に記憶した顔パーツ情報は、他の属性とは異なるその属性の特徴を表す情報である。例えば、10歳代(男)の顔パーツ情報部1421には、10歳代男性の特徴を示す目、鼻、口、耳の情報、10歳代男性の特徴を示す笑顔、真面目顔の情報が記憶されている。この属性別の顔パーツ情報は、多数の統計データに基づいて作成された、その属性を顕著に表す情報である。
次に、プリンタ8のハードウェアについて説明する。図6は、プリンタ8のハードウェア構成を示すブロック図である。図6において、プリンタ8は、CPU81、ROM82、RAM83、メモリ部84等を備えている。CPU81は制御主体となる。ROM82は各種プログラムを記憶する。RAM83はプログラムや各種データを展開する。メモリ部84は各種プログラムを記憶する。CPU81、ROM82、RAM83、メモリ部84は、互いにデータバス85を介して接続されている。CPU81とROM82とRAM83が、制御部800を構成する。すなわち、制御部800は、CPU81がROM82やメモリ部84の制御プログラム部841に記憶されRAM83に展開された制御プログラムに従って動作することによって、後述する制御処理を実行する。
RAM83は、情報記憶部831を備えている。情報記憶部831は、POS端末1から受信した印字情報を一時的に記憶する。メモリ部84は、電源を切っても記憶情報が保持されるHDDやフラッシュメモリ等の不揮発性メモリで構成され、制御プログラム部841に記憶された制御プログラム等を記憶する。
また、制御部800は、データバス85を介して、操作部87、熱転写型の印字ヘッド88、搬送部89が、コントローラ86を介して接続されている。コントローラ86は、制御部800からの指示を受けて、操作部87、印字ヘッド88、搬送部89を制御する。ただ、説明を簡略化するため、コントローラ86が行う制御を制御部800が行うとして説明する。
また、制御部800は、データバス85を介して通信I/F90を接続している。通信I/F90は、通信回線9を介してPOS端末1と接続している。
ここからは、POS端末1およびプリンタ8の制御処理について説明する。図7は、POS端末1の機能構成を示す機能ブロック図である。制御部100が、ROM12やメモリ部14に記憶された制御プログラムを含む各種プログラムに従って動作することで、生成手段101、印字制御手段102、属性判断手段103、服装判断手段104、移動方向判断手段105として機能する。
生成手段101は、商品を注文する顧客Cを撮像して得られた撮像画像に基づいて顧客の特徴を示す特徴情報を生成する機能を有する。
印字制御手段102は、生成手段101が生成した特徴情報を顧客が注文した商品を当該顧客に届けるための用紙に印字させる機能を有する。
属性判断手段103は、撮像画像に基づいて顧客Cの属性を判断する機能を有する。
服装判断手段104は、撮像画像に基づいて顧客Cが着ている服装の種類を判断する機能を有する。
移動方向判断手段105は、撮像画像である連続画像から当該顧客の移動方向を判断する機能を有する。
続いて、POS端末1の制御処理について説明する。図8は、顧客Cが注文した商品を店員CHが届ける場合の、POS端末1の制御処理の流れを示すフローチャートである。図8において、制御部100は、商品キー171が操作されたか否かを判断する(S11)。操作されたと判断した場合には(S11のYes)、制御部100は、当該取引における最初の商品の注文であるか否かを判断する(S12)。制御部100は、商品情報部131に商品情報が記憶されていない場合に、当該取引における最初の商品の注文であると判断する。当該取引における最初の商品の注文であると判断した場合には(S12のYes)、制御部100は、カメラ191を起動して顧客Cの撮像を開始する(S13)。また制御部100は、カメラ191が撮像した撮像画像の画像記憶部132への記憶を開始する(S14)。そして制御部100は、操作された商品キー171に対応した商品について、売上登録処理を実行する(S15)。すなわち、制御部100は、店員用表示部18および顧客用表示部19に商品情報(商品名、単価等)を表示するとともに、当該商品情報を商品情報部131に記憶する。そして制御部100は、S11に戻る。なお、当該取引における最初の商品の注文ではないと判断した場合には(S12のNo)、制御部100は、S15の処理を実行する。
一方、商品キー171は操作されていないと判断した場合には(S11のNo)、制御部100は、締めキー172が操作されたか否かを判断する(S21)。締めキー172が操作されたと判断した場合には(S21のYes)、制御部100は、商品情報部131に記憶されている商品情報に基づいて、当該取引に係る決済処理を実行する(S22)。次に制御部100は、カメラ191が撮像している撮像画像において人(顧客C)を検出しているか否かを判断する(S23)。画像記憶部132に記憶した最後の撮像画像において人の顔を検出している場合には、制御部100は、人を検出していると判断する。なお、制御部100は、画像記憶部132に記憶した撮像画像において、注文をしている顧客C(カメラ191に一番近い位置に位置する顧客C)以外の人の顔については、写っている顔の大きさ等から判断して、顔検出をしない。
人を検出していると判断した場合には(S23のYes)、S23の処理を繰り返す。人を検出していないと判断した場合には(S23のNo)、制御部100は、カメラ191による撮像を終了する(S24)。また制御部100は、撮像した撮像画像の画像記憶部132への記憶を終了する(S25)。
次に制御部100は、画像記憶部132に記憶した撮像画像に基づいて顧客Cの顔検出をして、検出した顔から当該顔の顔パーツ情報を抽出する(S26)。そして制御部100(属性判断手段104)は、抽出した顔パーツ情報に基づいて顔マスタ142を検索して、当該顔の属性を判断する。実施形態では、当該顔の性別と年齢層を判断する。そして制御部100(生成手段101)は、判断した属性を示す属性情報(特徴情報)を生成する(S27)。
次に制御部100は、画像記憶部132に記憶した撮像画像に基づいて、顧客Cが着ていた服装の特徴的形と服装の色を抽出する。そして制御部100(服装判断手段105)は、抽出した服装の形に基づいて服装マスタ143を検索して、当該服装の種類を判断する。すなわち、服装マスタ143は、服装が他の服装と見分けられる当該服装の特徴を、服装の種類別に記憶している。制御部100は、撮像画像から得られた服装の特徴と、服装マスタ143に記憶されている服装の特徴とを照合し、該当する種類の服装を判断する。そして制御部100(生成手段101)は、判断した服装の種類と色から服装情報(特徴情報)を生成する(S28)。
次に制御部100(移動方向判断手段106)は、画像記憶部132に記憶した画像に基づいて、顧客Cの移動方向を判断する。すなわち、顧客が左方向に移動したか右方向に移動したかを判断する。顧客Cが左方向に移動したと判断した場合には、制御部100は、顧客Cの移動方向を示す情報と移動先(Aゾーン)を示す情報とを含む移動情報を生成する(S29)。一方、顧客Cが右方向に移動したと判断した場合には、制御部100は、顧客Cの移動方向を示す情報と移動先(Bゾーン)を示す情報とを含む移動情報を生成する(S29)。
次に制御部100は、顧客Cに付与する番号の番号情報を生成する(S30)。顧客Cに付与する番号は、顧客Cに手渡す番号札に表示されている番号と同一番号である。顧客Cに付与する番号は、例えば、操作部17から店員CHによって入力される。制御部100は、入力された番号に基づいて番号情報を生成する。
次に制御部100(印字制御手段102)は、S27で生成した属性情報、S28で生成した服装情報、S29で生成した移動情報、S30で生成した番号情報に基づいて、これらの情報を表す印字情報を生成して、プリンタ8に送信(出力)する(S31)。属性情報、服装情報、移動情報、番号情報に基づく印字情報は、いずれも用紙Pに印字する情報である。換言すると、制御部100は、属性情報、服装情報、移動情報、番号情報に基づく印字情報をプリンタ8に送信して、かつ印字コマンドをプリンタ8に送信することで、プリンタ8に、これらの情報を用紙Pに印字させる。そして制御部100は、S11に戻る。実施形態では、制御部100が属性情報、服装情報、移動情報、番号情報をプリンタ8に送信する場合、印字情報に変換してから送信している。しかしながら、制御部100は、属性情報、服装情報、移動情報、番号情報を印字情報に変換することなくプリンタ8に送信して、プリンタ8に、これらの情報を用紙Pに印字させるようにしてもよい。この場合、制御部100は、属性情報、服装情報、移動情報、番号情報をプリンタ8に送信するとともに、プリンタ8に、これらの情報を印字情報に変換させてから印字させる。なお、S21において、締めキー172は操作されていないと判断した場合には(S21のNo)、制御部100はS11に戻る。
ここからは、プリンタ8の制御処理について説明する。図9は、プリンタ8の制御処理の流れを示すフローチャートである。図9において、制御部800は、POS端末1から印字情報を受信したか否かを判断する(S41)。印字情報を受信したと判断した場合には(S41のYes)、制御部800は、受信した印字情報を情報記憶部831に記憶する(S42)。
そして制御部800は、記憶した印字情報に基づいて、用紙Pを印字して発行する(S43)。すなわち、制御部800は、搬送部89を制御して、ロール状の長尺用紙の先端部を印字ヘッド88に向けて搬送する。同時に制御部800は、印字ヘッド88を用いて、情報記憶部831に記憶されている印字情報を長尺用紙に印字する。そして制御部800は、印字した長尺用紙を用紙Pとして発行口811から発行する。そして制御部800は、S41に戻る。なお、POS端末1から印字情報を受信していないと判断した場合には(S41のNo)、制御部800はS41に戻る。
ここで、S43で発行された用紙Pの印字例について説明する。図10は、プリンタ8が印字した用紙Pの一例を示す図である。図10において、用紙Pは、番号部P1、商品情報部P2、属性情報部P3、服装情報部P4、方向情報部P5を有する。番号部P1には、顧客Cに渡した番号札と同じ番号が印字される。商品情報部P2には、顧客Cが注文した商品の商品情報の一部である例えば商品名が印字される。属性情報部P3には、S27で生成した顧客Cの属性情報が印字される。実施形態では、顧客Cが男性である性別と40歳代である年齢層の属性情報が印字されている。服装情報部P4には、S28で生成した顧客Cの服装情報が印字される。実施形態では、顧客Cは眼鏡をかけており、灰色のスーツを着ているとする服装情報が印字される。方向情報部P5には、S29で生成した顧客Cの移動情報が印字される。実施形態では、顧客Cが左方向に移動し、Aゾーンにいるとする移動情報が印字される。
店員CHは、商品の調理が完成すると、当該商品と用紙Pを持って、方向情報部P5に印字された方向情報基づいて、Aゾーンに向かう。そして店員CHは、属性情報部P3に印字された顧客Cの属性情報と、服装情報部P4に印字された服装情報に基づいて、顧客Cを探す。この場合、例えばAゾーンが混雑していても、またAゾーンが広い場合であっても、店員CHは、顧客Cの属性と服装とに基づいて容易に該当する人物を探すことができる。そして該当する人物を発見した場合には、店員CHは、当該人物に近づいて、人物が持っている番号札に表示されている番号と番号部P1に印字されている番号とを照合する。そして、両番号が一致している場合に、店員CHはその人物が探している顧客Cであることを確認することができる。このように、店員CHは、まずは用紙Pに印字された属性情報および服装情報に基づいて、該当する人物を探す。そして該当する人物が見つかったら、次に店員CHは、番号札の番号と用紙Pの番号とを照合して、該当する顧客Cを確認することができる。そのため、店員CHは、該当する顧客Cの早期に発見をすることができる。
次に、図11は、プリンタ8が印字した用紙の他の一例を示す図である。図11において、用紙Pは、番号部P1、商品情報部P2、写真情報部P6、方向情報部P5を有す。番号部P1、商品情報部P2、方向情報部P5は、図10の例と同様である。そして図11の例の場合、制御部100(生成手段101)は、S27およびS28において、画像記憶部132に記憶した画像に基づいて、用紙Pに印字するための写真情報を属性情報および服装情報(いずれも特徴情報)として生成する。この場合、写真情報は、顧客Cの顔と判断した情報を除く全身画像の情報であることが望ましい。顔の写真は個人情報保護の観点から写真情報から除く。そして、写真情報部P6には、S27で生成した顔を除く写真情報の印字情報が印字される。すなわち、写真情報部P6には、顧客Cの顔を除く顧客Cの写真情報が印字される。この写真情報から、顧客Cの性別と顧客Cが着ている服装が分かる。
店員CHは、用紙Pの方向情報部P5に印字された方向情報基づいて、Aゾーンに向かう。そして店員CHは、写真情報部P6に印字された顧客Cの写真情報に基づいて顧客Cを探す。この場合、例えばAゾーンが混雑していても、またAゾーンが広い場合であっても、店員CHは、顧客Cの性別と顧客Cが着ている服装に基づいて容易に該当する人物を探すことができる。そして該当する人物を発見した場合には、店員CHは、当該人物に近づいて、人物が持っている番号札に表示されている番号と番号部P1に印字されている番号とを照合する。そして、両番号が一致している場合に、店員CHはその人物が探している顧客Cであることを確認することができる。このように、店員CHは、まずは用紙Pに印字された写真情報に基づいて、該当する人物を探す。そして該当する人物が見つかったら、次に店員CHは、番号札の番号と用紙Pの番号とを照合して、該当する顧客Cを確認することができる。そのため、店員CHは、該当する顧客Cの早期に発見をすることができる。
以上、本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更、組み合わせを行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
例えば実施形態では、プリンタ8をPOS端末1とは別体のプリンタとしたが、これに限らず、プリンタ8は印字部21が兼用してもよい。この場合、印字部21が用紙Pを印字して発行する。
また、実施形態では、プリンタ8に、属性情報と服装情報を特徴情報として送信するようにしたが、これに限らず、いずれか一方の特徴情報をプリンタ8に送信するようにしてもよい。また、移動情報や番号情報の送付は必須の要件ではない。
また、実施形態では、移動方向と移動先を示す移動情報を生成したが、移動方向と移動先のいずれか一方を移動情報としてもよい。
また、実施形態では、顧客Cが注文した商品を顧客Cに届ける前に、当該商品の売上登録処理を実行したが、例えば店員CHが顧客Cに商品を届けた時、または届けた後に、当該商品の売上登録処理を実行するようにしてもよい。
また、実施形態では、用紙Pに顧客Cが注文した商品の商品情報を表す商品情報部P2を印字するようにしたが、商品情報部P2は印字しなくてもよい。
また、実施形態では、連続画像として、1秒間に10枚撮像した画像を使用したが、これに限らず、所定の時間間隔で撮像された画像であればいい。また、連続画像は、動画であってもよい。
なお、実施形態のPOS端末1で実行されるプログラムは、インストール可能な形式または実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
また、実施形態のPOS端末1で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、実施形態のPOS端末1で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
また、実施形態のPOS端末1で実行されるプログラムを、ROM等に予め組み込んで提供するように構成してもよい。
1 POS端末
8 プリンタ
100 制御部
101 生成手段
102 印字制御手段
103 属性判断手段
104 服装判断手段
105 移動方向判断手段
132 画像情報部
142 顔マスタ
143 服装マスタ
144 ゾーンマスタ
191 カメラ
800 制御部
特開2004−206641号公報

Claims (4)

  1. 顧客が注文した商品の売上登録処理を行う販売データ処理装置であって、
    商品を注文する顧客の全身を撮像するカメラと、
    最初の前記商品に係る前記売上登録処理の開始に伴って前記カメラによる前記顧客の撮像を開始し、前記商品の決済処理の終了に伴って前記カメラによる前記顧客の撮像を終了する撮像制御手段と、
    前記撮像制御手段によって撮像された前記顧客の撮像画像に基づいて前記顧客の全身の写真を示す特徴情報を生成する生成手段と、
    前記生成手段が生成した前記特徴情報を前記顧客が注文した商品を当該顧客に届けるための用紙に印字させる印字制御手段と、
    た販売データ処理装置。
  2. 前記撮像画像に基づいて前記顧客の属性を判断する属性判断手段、
    をさらに備え、
    前記生成手段は、前記属性判断手段が判断した当該顧客の属性に対応した属性情報および前記顧客の顔を除いた前記顧客の全身写真を示す前記特徴情報生成する、
    請求項1に記載の販売データ処理装置。
  3. 前記撮像画像は、前記顧客を撮像した連続画像であり、
    当該連続画像から当該顧客の移動方向を判断する移動方向断手段、
    をさらに備え、
    前記生成手段は、前記移動方向判断手段が判断した顧客の移動方向に基づく移動情報を生成する、
    請求項1または2に記載の販売データ処理装置。
  4. 商品を注文する顧客の全身を撮像するカメラを備え、当該顧客が注文した商品の売上登録処理を行う販売データ処理装置としてのコンピュータを、
    最初の前記商品に係る前記売上登録処理の開始に伴って前記カメラによる前記顧客の撮像を開始し、前記商品の決済処理の終了に伴って前記カメラによる前記顧客の撮像を終了する撮像制御手段と、
    前記撮像制御手段によって撮像された前記顧客の撮像画像に基づいて前記顧客の全身の写真を示す特徴情報を生成する生成手段と、
    前記生成手段が生成した前記特徴情報を前記顧客が注文した商品を当該顧客に届けるための用紙に印字させる印字制御手段と、
    して機能させるためのプログラム。
JP2016109176A 2016-05-31 2016-05-31 販売データ処理装置およびプログラム Expired - Fee Related JP6760767B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2016109176A JP6760767B2 (ja) 2016-05-31 2016-05-31 販売データ処理装置およびプログラム
CN201710364387.2A CN107452162A (zh) 2016-05-31 2017-05-22 销售数据处理装置及其控制方法、终端设备
EP17172815.7A EP3252693A1 (en) 2016-05-31 2017-05-24 Sales data processing apparatus and method for easily finding customer
US15/603,590 US20170344973A1 (en) 2016-05-31 2017-05-24 Sales data processing apparatus and method for easily finding customer

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016109176A JP6760767B2 (ja) 2016-05-31 2016-05-31 販売データ処理装置およびプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2020147705A Division JP2020201983A (ja) 2020-09-02 2020-09-02 販売データ処理装置およびプログラム

Publications (2)

Publication Number Publication Date
JP2017215776A JP2017215776A (ja) 2017-12-07
JP6760767B2 true JP6760767B2 (ja) 2020-09-23

Family

ID=59021242

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016109176A Expired - Fee Related JP6760767B2 (ja) 2016-05-31 2016-05-31 販売データ処理装置およびプログラム

Country Status (4)

Country Link
US (1) US20170344973A1 (ja)
EP (1) EP3252693A1 (ja)
JP (1) JP6760767B2 (ja)
CN (1) CN107452162A (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7265391B2 (ja) * 2019-03-22 2023-04-26 東芝テック株式会社 販売データ処理装置、プログラムおよび販売データ処理システム
JP7468022B2 (ja) 2020-03-18 2024-04-16 日本電気株式会社 物品管理システム及び方法、並びに、ラベル照合装置、方法及びプログラム
CN111951499B (zh) * 2020-07-28 2022-05-31 银盛支付服务股份有限公司 一种基于智能pos终端实时推送打印方法及系统
JP2020201983A (ja) * 2020-09-02 2020-12-17 東芝テック株式会社 販売データ処理装置およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030195821A1 (en) * 2002-04-12 2003-10-16 Kennamer Jack J. QSR ordering system and method for drive thru operations
US8010402B1 (en) * 2002-08-12 2011-08-30 Videomining Corporation Method for augmenting transaction data with visually extracted demographics of people using computer vision
JP3756483B2 (ja) * 2002-12-25 2006-03-15 東芝テック株式会社 注文端末及び注文システム
JP5528151B2 (ja) * 2010-02-19 2014-06-25 パナソニック株式会社 対象物追跡装置、対象物追跡方法、および対象物追跡プログラム
JP2012198707A (ja) * 2011-03-18 2012-10-18 Toshiba Tec Corp 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
US20130030875A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation System and method for site abnormality recording and notification
JP5674708B2 (ja) * 2012-05-23 2015-02-25 東芝テック株式会社 注文端末およびコンピュータプログラム
JP5509354B1 (ja) * 2013-02-01 2014-06-04 パナソニック株式会社 商品状況分析装置、商品状況分析システムおよび商品状況分析方法
US10290031B2 (en) * 2013-07-24 2019-05-14 Gregorio Reid Method and system for automated retail checkout using context recognition
US10115094B2 (en) * 2013-12-20 2018-10-30 Ncr Corporation Visual customer identification

Also Published As

Publication number Publication date
US20170344973A1 (en) 2017-11-30
JP2017215776A (ja) 2017-12-07
EP3252693A1 (en) 2017-12-06
CN107452162A (zh) 2017-12-08

Similar Documents

Publication Publication Date Title
JP6141218B2 (ja) 商品販売データ処理装置及びプログラム
JP6138068B2 (ja) 商品販売データ処理装置及びプログラム
JP5349554B2 (ja) 情報処理装置及びプログラム
JP6760767B2 (ja) 販売データ処理装置およびプログラム
CN106056397B (zh) 销售数据处理装置及其控制方法、服务器
US10902435B2 (en) Checkout system
US20150242833A1 (en) Information processing device and screen setting method
US20160300249A1 (en) Sales data processing apparatus and method for inputting attribute information
US10963896B2 (en) Sales data processing apparatus, server and method for acquiring attribute information
US20170345027A1 (en) Sales data processing apparatus and method for acquiring attribute information of customer
JP2020201983A (ja) 販売データ処理装置およびプログラム
JP6401333B2 (ja) 商品販売データ処理装置及びプログラム
JP6580224B2 (ja) 商品販売データ処理装置及びプログラム
JP6200339B2 (ja) 商品データ登録装置、チェックアウトシステムおよびプログラム
JP2001157201A (ja) 試着姿確認装置およびこの試着姿確認装置を備えた商品販売データ処理システム
US20160300248A1 (en) Server and method for acquiring attribute information
JP7021313B2 (ja) 商品販売データ処理装置及びプログラム
JP6357558B2 (ja) 商品販売データ処理装置及びプログラム
JP6761088B2 (ja) 商品販売データ処理装置及びプログラム
JP7304447B2 (ja) 商品販売データ処理装置及びプログラム
JP6247245B2 (ja) 販売データ処理装置およびプログラム
JP6392930B2 (ja) 商品販売データ処理装置及びプログラム
JP6196252B2 (ja) 販売データ処理装置、サーバおよびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190416

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200306

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200512

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200710

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200804

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200903

R150 Certificate of patent or registration of utility model

Ref document number: 6760767

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees