JP2022062248A - 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム - Google Patents

端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム Download PDF

Info

Publication number
JP2022062248A
JP2022062248A JP2022021762A JP2022021762A JP2022062248A JP 2022062248 A JP2022062248 A JP 2022062248A JP 2022021762 A JP2022021762 A JP 2022021762A JP 2022021762 A JP2022021762 A JP 2022021762A JP 2022062248 A JP2022062248 A JP 2022062248A
Authority
JP
Japan
Prior art keywords
information
terminal device
target
customer service
store
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022021762A
Other languages
English (en)
Other versions
JP7439844B2 (ja
Inventor
和義 割田
Kazuyoshi Katsuta
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2022021762A priority Critical patent/JP7439844B2/ja
Publication of JP2022062248A publication Critical patent/JP2022062248A/ja
Application granted granted Critical
Publication of JP7439844B2 publication Critical patent/JP7439844B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/01Customer relationship services
    • G06Q30/015Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G06Q30/016After-sales
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Figure 2022062248000001
【課題】店員等の案内する者に対し、顧客等の案内される者の移動履歴に基づく情報を提供する端末装置、情報処理装置、情報出力方法、接客支援方法及びプログラムを提供する。
【解決手段】情報処理装置210は、位置を示す第1の情報を取得する取得部211と、位置から所定の範囲に存在する対象を取得部211により取得された第1の情報を用いて特定する特定部212と、特定部212により特定された対象に関する第2の情報を、対象の移動履歴を示す第3の情報を用いて生成する生成部213と、生成部213により生成された第2の情報を出力する出力部214と、を含む。
【選択図】図13

Description

本開示は、端末装置等に関する。
店舗等を訪れた顧客の動線を生成又は分析するさまざまな技術が知られている(例えば、特許文献1~3参照)。これらの文献に記載された技術は、動線を記録し、記録された動線から得られる情報を事後的に活用するものである。例えば、特許文献1に記載された技術は、店舗における顧客の全体的な傾向を把握し、売り場のレイアウト等に役立てるための技術である。特許文献1に記載された技術は、複数の顧客の動線を統計的に利用している、ともいえる。
特開2014-067225号公報 特開2005-071252号公報 特開2006-185293号公報
ところで、店舗を訪れる顧客の目的は、全体的な一定の傾向があるとしても、人それぞれに異なり得る。店員は、何らかの目的を以て(すなわち購買意欲を有して)来店している顧客に対し、統計的な情報に基づいて接客すると、個々の顧客のニーズを必ずしも満たすことができず、その顧客を実際の購買行為に誘引することが困難な場合があった。
本開示の例示的な目的は、店員等の案内する者に対し、顧客等の案内される者の移動履歴に基づく情報を提供することにある。
一の態様における端末装置は、店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得手段と、前記取得された接客情報と前記対象とを関連付けて出力する出力手段と、を備え、前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、前記出力手段は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
別の態様における情報処理装置は、店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得する取得手段と、前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定手段と、特定された前記対象の移動履歴を示す動線情報を含む接客情報を生成する生成手段と、生成された前記接客情報を前記端末装置に出力する出力手段と、を備え、前記生成手段は、店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
さらに別の態様における情報出力方法は、コンピュータが、店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得処理と、取得された前記接客情報と前記対象とを関連付けて出力する出力処理とを実行し、前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、前記出力処理では、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
さらに別の態様における情報処理方法は、コンピュータが、店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得し、前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定し、当該対象の移動履歴を示す動線情報を含む接客情報を生成し、前記生成された接客情報を出力する処理を実行し、前記生成する処理では、店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、前記端末装置は、前記店舗内の地図における前記接客情報に含まれる前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
さらに別の態様における接客支援方法は、コンピュータが、店員により所持される端末装置から、店舗における当該端末装置の位置を示す位置情報を取得し、前記店舗において前記位置から所定の範囲に存在する顧客を、前記位置情報と、当該顧客の当該店舗における移動履歴を示す動線情報とを用いて特定し、前記動線情報を含む接客情報を生成し、前記生成された接客情報を前記端末装置に出力する処理を実行し、前記生成する処理では、前記店舗における複数のエリアのうち、特定された前記顧客が所定の時間以上存在し、又は、特定された前記顧客が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、特定された前記顧客が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
さらに別の態様におけるプログラムは、コンピュータに、店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得処理と、前記取得された接客情報と前記対象とを関連付けて出力する出力処理とを実行させ、前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、前記出力処理では、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
さらに別の態様におけるプログラムは、コンピュータに、店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得する取得処理と、前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定処理と、当該対象の移動履歴を示す動線情報を含む接客情報を生成する生成処理と、前記生成された接客情報を出力する出力処理とを実行させ、前記生成処理では、店舗における複数のエリアのうち、前記対象が所定の時間以上存在し、又は前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる。
本開示によれば、店員等の案内する者に対し、顧客等の案内される者の移動履歴に基づく情報が提供される。
図1は、接客支援システムの構成の一例を示すブロック図である。 図2は、サーバ装置のハードウェア構成の一例を示すブロック図である。 図3Aは、マップ情報及びレイアウト情報の一例を示す模式図である。 図3Bは、マップ情報及びレイアウト情報の別の例を示す模式図である。 図4は、端末装置のハードウェア構成の一例を示すブロック図である。 図5は、接客支援システムの機能的構成を示すブロック図である。 図6は、動線情報のデータ構造の一例を示す。 図7は、動線情報のデータ構造の別の例を示す。 図8は、サーバ装置及び記録装置の動作の一例を示すシーケンスチャートである。 図9は、サーバ装置及び端末装置の動作の一例を示すシーケンスチャートである。 図10Aは、接客情報に基づく画像の第1の例を示す図である。 図10Bは、接客情報に基づく画像の第2の例を示す図である。 図11は、接客情報に基づく画像の第3の例を示す図である。 図12は、接客情報に基づく画像の第4の例を示す図である。 図13は、情報処理装置の構成の一例を示すブロック図である。 図14は、情報処理装置の動作の一例を示すフローチャートである。 図15は、端末装置の構成の一例を示すブロック図である。 図16は、端末装置の動作の一例を示すフローチャートである。 図17は、コンピュータ装置のハードウェア構成の一例を示すブロック図である。
[1.1:第1実施形態]
図1は、一実施形態に係る接客支援システム110の構成を示すブロック図である。接客支援システム110は、店員による店舗での接客を支援するための情報処理システムである。接客支援システム110は、1以上のサーバ装置111と、1以上の端末装置112と、1以上の記録装置113とを少なくとも含む。サーバ装置111、端末装置112及び記録装置113は、インターネット、無線LAN(Local Area Network)等のネットワーク114を介して他の装置と通信してもよいが、ネットワーク114を介さず他の装置と直接通信してもよい。
本実施形態において、店舗とは、商品を販売し、又はサービスを提供する空間をいう。ここでいう店舗は、ショッピングモールのように複数の小売店からなる複合的な商業施設であってもよい。また、本実施形態でいう店員とは、店舗において、顧客に対して商品を販売し、又はサービスを提供する者をいう。店員は、店舗において顧客を案内する者であるともいえる。また、本実施形態でいう顧客とは、店舗に来訪し、商品の販売又はサービスの提供を受ける者をいう。顧客は、店舗において店員に案内される者であるともいえる。なお、ここでいう顧客は、過去又は来訪時において商品又はサービスを実際に購入したか否かを問わない。また、店員及び顧客の人数は、特に限定されない。
サーバ装置111は、店員による接客を支援するための情報(以下「接客情報」ともいう。)を端末装置112に供給する。ここでいう接客は、顧客に対する各種の案内と言い換えてもよい。サーバ装置111は、例えば、アプリケーションサーバ、メインフレーム、パーソナルコンピュータ等のコンピュータ装置である。ただし、サーバ装置111は、ここに例示されたコンピュータ装置に限定されない。
端末装置112は、サーバ装置111により供給された情報を提示する。ここでいう提示とは、情報を知覚可能に出力することをいう。知覚可能な出力は、例えば、文字又は画像による表示を含むが、視覚以外の聴覚、触覚などによる知覚を含み得る。また、端末装置112は、店員により使用される。端末装置112は、店員により所持され、又は装着される電子機器であってもよい。端末装置112は、例えば、スマートフォン、タブレット端末、ウェアラブルデバイス等のコンピュータ装置である。ただし、端末装置112は、ここに例示されたコンピュータ装置に限定されない。
端末装置112と店員とは、所定の方法で対応付けられる。例えば、端末装置112と店員の対応付けは、あらかじめ決められていてもよい。あるいは、端末装置112は、周知の認証方法(パスワード認証、生体認証等)によって特定の店員と対応付けられてもよい。また、店員は、端末装置112とは別に電子機器又は無線タグを所持し、この電子機器又は無線タグが端末装置112と対応付けられてもよい。
記録装置113は、人物(顧客及び店員)の位置を測定するための電子機器である。本実施形態において、記録装置113は、店舗の天井等に設けられ、画像(すなわち静止画)を記録する監視カメラ等の撮影装置である。この場合、記録装置113は、撮影された画像を表す画像データをサーバ装置111に送信する。記録装置113は、所定の時間間隔で撮影を実行し、画像データを繰り返しサーバ装置111に送信する。この画像データにより表される画像は、モノクロ画像とカラー画像のいずれでもよく、その解像度も限定されない。記録装置113は、所定の時間間隔で撮影された静止画により構成される映像(すなわち動画)を表す映像データをサーバ装置111に送信しているともいえる。
サーバ装置111、端末装置112及び記録装置113のそれぞれの総数は、特に限定されない。例えば、端末装置112は、店員の人数と同数が接客支援システム110に備わっていてもよく、これより少なくてもよい。また、サーバ装置111は、少なくとも1台あれば足りるが、端末装置112の数又はその他の要因に応じて異なってもよい。記録装置113の数は、店舗の面積や内部構造によって異なり得る。
図2は、サーバ装置111のハードウェア構成を示すブロック図である。サーバ装置111は、制御部121と、記憶部122と、通信部123とを含む。サーバ装置111は、入力装置(キーボード等)や表示装置のような他の構成要素を含んでもよい。
制御部121は、サーバ装置111の動作を制御する。制御部121は、例えば、1以上のプロセッサ及び1以上のメモリを含んで構成される。制御部121は、所定のプログラムを実行することにより、後述される機能を実現することができる。
記憶部122は、データを記憶する。記憶部122は、例えば、ハードディスクドライブ、フラッシュメモリ等の記憶装置を含む。記憶部122は、光ディスク等の着脱可能な記憶媒体のリーダ又はライタを含んで構成されてもよい。記憶部122は、制御部121により参照されるデータを記憶することができる。記憶部122に記憶されるデータには、マップ情報が含まれる。記憶部122は、制御部121により実行されるプログラムを記憶してもよい。
マップ情報は、店舗の内部構造(特に、顧客が行き来する場所)を表し、店舗に対して座標系を定義するデータである。例えば、マップ情報は、店舗の所定の位置を原点とする直交座標系によって店舗の各位置の座標を示す。また、マップ情報は、レイアウト情報を含んでもよい。レイアウト情報は、店舗における物体の配置を定義するデータである。レイアウト情報は、例えば、店舗内の壁や商品棚の位置を示す。ある観点において、レイアウト情報は、店員による顧客の視認を妨げる障害物の存在を示しているともいえる。
図3Aは、マップ情報及びレイアウト情報の一例を示す模式図である。マップ情報130は、フロアが長方形である店舗に対し、図中のx軸とy軸によって定義される2次元直交座標系を定義する。例えば、マップ情報130は、図中のP0=(0,0)、P1=(x1,y1)、P2=(x2,y2)、P3=(x3,y3)を示す座標情報によって店舗の2次元構造を表す。レイアウト情報は、この店舗内の売り場や商品棚のレイアウトをこの直交座標系のx座標とy座標とによって表すことができる。
図3Aの例において、マップ情報300によって表される店舗のフロアは、エリア131、132、133、134、135、136及び137に区分されている。エリア131~137は、例えば、エリア131は食品の売り場を表し、エリア132は酒類の売り場を表す、といった具合に、異なるカテゴリの商品の売り場を表す。この場合、レイアウト情報は、エリア131~137を2次元直交座標系によって表す。レイアウト情報は、エリア131~137の頂点又は境界の座標を含んでよい。
図3Bは、レイアウト情報の別の例を示す模式図である。この例において、エリア136には、商品棚1361、1362及び壁1363が含まれる。商品棚1361、1362及び壁1363は、ここでは、店員の目線の高さよりも十分に高いものとする。この場合、壁1363は、エリア136とエリア137とを隔てている。この例において、店員は、エリア136からエリア137を見通すことができない。この場合、レイアウト情報は、商品棚1361、1362及び壁1363をエリア131~137と同様の2次元直交座標系によって表す。
なお、店舗の構造及びレイアウトは、この例示に限定されず、より複雑であってもよい。また、マップ情報は、店舗の(全体ではなく)一部を表すデータであってもよい。レイアウト情報は、マップ情報の一部ではなく、マップ情報とは別のデータであってもよい。
通信部123は、端末装置112及び記録装置113との間でデータを送受信する。通信部123は、ネットワークアダプタ、アンテナ等の通信装置(又は回路)を含む。通信部123は、端末装置112及び記録装置113と無線で接続される。通信部123は、無線LANにおけるアクセスポイントのような、他の無線機を介して端末装置112及び記録装置113と通信してもよい。通信部123は、端末装置112との通信と記録装置113との通信とに異なる通信方式を用いてもよい。
図4は、端末装置112のハードウェア構成を示すブロック図である。端末装置112は、制御部141と、記憶部142と、通信部143と、入力部144と、出力部145とを含む。また、端末装置112は、カメラ部146及びセンサ部147を含んでもよい。端末装置112は、他の構成要素を含んでもよい。
制御部141は、端末装置112の動作を制御する。制御部141は、例えば、1以上のプロセッサ及び1以上のメモリを含んで構成される。制御部141は、所定のプログラムを実行することにより、後述される機能を実現することができる。
記憶部142は、データを記憶する。記憶部142は、例えば、フラッシュメモリ等の記憶装置を含む。記憶部142は、メモリカード等の着脱可能な記憶媒体のリーダ又はライタを含んで構成されてもよい。記憶部142は、制御部141により参照されるデータを記憶することができる。記憶部142は、制御部141により実行されるプログラムを記憶してもよい。
通信部143は、サーバ装置111との間でデータを送受信する。通信部143は、アンテナ、RF(Radio Frequency)処理部、ベースバンド処理部などを含む。通信部143は、サーバ装置111と無線で接続される。通信部143は、無線LANにおけるアクセスポイントのような、他の無線機を介してサーバ装置111と通信してもよい。
入力部144は、ユーザ(ここでは店員)の入力を受け付ける。入力部144は、例えば、キー、スイッチ、マウス等の入力装置を含む。また、入力部144は、タッチスクリーンディスプレイを含んでもよく、音声入力用のマイクを含んでもよい。入力部144は、ユーザの入力に応じたデータを制御部141に供給する。
出力部145は、情報を出力する。出力部145は、例えば、液晶ディスプレイ等の表示装置を含む。以下においては、端末装置112は、入力部144及び出力部145としてタッチスクリーンディスプレイを含むものとするが、必ずしもこれに限定されない。また、出力部145は、情報を音声により出力するスピーカを含んでもよい。出力部145は、ユーザに情報を通知するためのLED(Light Emitting Diode)又はバイブレータを含んでもよい。
カメラ部146は、物体を撮影し、画像データを生成する。カメラ部146は、例えば、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等の撮像機器を含む。カメラ部146は、撮影された画像を表す画像データを制御部141に供給する。この画像データにより表される画像は、モノクロ画像とカラー画像のいずれでもよく、その解像度も限定されない。以下においては、カメラ部146により撮影された画像を、他の画像と区別する目的で「撮影画像」という場合がある。
センサ部147は、端末装置112の測位に利用可能な物理量を計測する。センサ部147は、例えば、PDR(Pedestrian Dead-Reckoning:歩行者自律航法)による測位に必要な、加速度、角速度、磁気、気圧などを計測するためのセンサを含む。あるいは、センサ部147は、地磁気に基づいて方位を計測する、いわゆる電子コンパスを含んでもよい。本実施形態において、センサ部147により計測された物理量を示すデータ(以下「センサデータ」ともいう。)は、端末装置112の位置の精度向上又は補正にも利用可能である。
図5は、接客支援システム110の機能的構成を示すブロック図である。なお、このブロック図におけるブロック間の矢印は、情報の流れを例示的に示している。したがって、接客支援システム110における情報の流れは、図示された矢印が示す方向のみに限定されない。
サーバ装置111は、情報取得部151と、位置特定部152と、顧客特定部153と、動線記録部154と、情報生成部155と、情報出力部156とを含む。サーバ装置111は、制御部121がプログラムを実行することでこれらの各部の機能を実現する。端末装置112は、測位部157と、情報出力部158と、情報取得部159と、情報表示部150とを含む。端末装置112は、制御部141がプログラムを実行することでこれらの各部の機能を実現する。
情報取得部151は、端末装置112及び記録装置113から情報を取得する。より詳細には、情報取得部151は、端末装置112の位置を示す位置情報を端末装置112から取得し、画像データを記録装置113から取得する。本実施形態において、端末装置112は、店員によって所持されている。したがって、端末装置112の位置は、ここでは店員の位置と実質的に同一であるといえる。
位置特定部152は、人物の位置を特定する。位置特定部152は、少なくとも顧客の位置を特定する。位置特定部152は、顧客だけでなく、店員の位置も特定してもよい。位置特定部152は、情報取得部151により取得された画像データに基づいて、店舗における人物の位置を特定する。
例えば、位置特定部152は、画像データが表す画像から移動する物体を検出し、検出された物体を人物であると認識してもよい。あるいは、位置特定部152は、画像から人物らしい特徴を有する領域(頭部、顔、人体等)を検出し、検出された領域に人物が存在すると認識してもよい。位置特定部152は、このようにして認識された人物の画像における位置とマップ情報とに基づいて、当該人物の店舗における位置を特定することができる。
位置特定部152は、周知の人体検出技術を用いて人物を認識することができる。例えば、種々の画像特徴量や機械学習を用いることによって画像に含まれる人体又はその一部(顔、手等)を検出する技術が、一般に知られている。位置特定部152により特定された人物の位置のマップ情報の座標系へのマッピングも、周知の手法によって実現可能である。なお、店舗の床面等には、画像データの座標系とマップ情報の座標系とを対応付けるための基準(マーカ等)が設けられていてもよい。
位置特定部152は、店員の位置を特定する場合、端末装置112から送信された位置情報に基づいて位置特定の精度を向上させることができる。例えば、位置特定部152は、画像データに基づいて特定された位置を位置情報に基づいて補正してもよい。
顧客特定部153は、端末装置112の位置に基づいて、所定の条件を満たす顧客を特定する。いくつかの場合において、顧客特定部153は、端末装置112の位置から所定の範囲に存在する顧客を特定する。ここでいう所定の範囲は、特に限定されないが、例えば、端末装置112を所持する店員が比較的容易に到達又は視認することができる範囲である。具体的には、ここでいう所定の範囲は、端末装置112の位置から半径5m以内等である。所定の範囲を定めるパラメータは、店舗の面積や店員の数に応じて異なってもよく、店員自身によって設定可能であってもよい。
ここでいう所定の条件は、位置的条件、すなわち端末装置112又は顧客の位置に依存する条件であるともいえる。したがって、この条件は、マップ情報又はレイアウト情報に応じて異なってもよい。例えば、顧客特定部153は、レイアウト情報に基づいて、端末装置112を所持する店員が見通すことができない範囲を、上述の所定の範囲から除外してもよい。具体的には、顧客特定部153は、端末装置112の位置が壁の近傍である場合に、壁の向こう側(すなわち壁より遠い側)を所定の範囲から除外してもよい。
顧客特定部153は、端末装置112から送信される位置情報に基づいて特定され、又は位置特定部152により特定された端末装置112の位置に基づいて、所定の条件を満たす顧客を特定する。例えば、顧客特定部153は、端末装置112の位置と、位置特定部152により特定された顧客の位置とを比較することにより、端末装置112の位置から所定の範囲に存在する顧客を特定する。
動線記録部154は、人物の動線を記録する。ここにおいて、動線とは、人物の移動の軌跡をいう。動線は、人物の移動履歴であるともいえる。移動履歴は、ロケーション履歴、通行履歴、歩行履歴、行動履歴などと言い換えてもよい。動線記録部154は、位置特定部152により特定された人物の位置の推移を記録する。動線記録部154は、少なくとも顧客の動線を記録し、店員の動線をさらに記録してもよい。以下においては、動線記録部154により記録された動線を示す情報を「動線情報」ともいう。動線記録部154は、動線情報を記憶部122に記録するとともに、位置特定部152により人物が特定される毎に動線情報を更新する。
なお、動線情報により示されるある人物のある時刻における位置は、位置特定部152により当該時刻において特定された当該人物の位置と同一であるといえる。換言すれば、位置特定部152によりある時刻において特定されたある人物の位置は、当該時刻において動線情報に記録されている当該人物の最新の位置に相当するといえる。
図6は、動線情報のデータ構造の一例を示す。この例において、動線情報160は、時刻161、座標162及びID(identifier)163を含む。時刻161は、位置特定部152により座標162が特定された時刻を示す。座標162は、位置特定部152により特定された位置を示す。ID163は、動線を区別するために割り当てられる識別子である。ID163は、例えば、動線毎にユニークな所定の桁数の数値である。
動線記録部154は、時刻t1において位置特定部152により特定された位置のそれぞれに対してユニークなIDを割り当てることにより、時刻t1における動線情報を記録する。次いで、動線記録部154は、時刻t1に連続する時刻t2において、位置特定部152により特定された位置と時刻t1における動線情報とを比較する。
一般に、人間が歩行する速さは、一定のスピード(およそ時速4~5km)以下であり、これより極端に速いことはない。したがって、動線情報に時刻t1において記録された人物が時刻t2までに移動する範囲は、実質的には一定の範囲に限られるといえる。動線記録部154は、位置特定部152により時刻t1において特定された座標(第1の座標)と時刻t2において特定された座標(第2の座標)とが一定の範囲内である場合に、これらの座標が同一の人物の軌跡であるとみなす(以下これを「同定」ともいう。)。動線記録部154は、時刻t2にこのような座標で人物が特定されている場合に、第1の座標に割り当てられたIDと同一のIDを第2の座標に割り当てる。動線記録部154は、位置特定部152により人物が特定される毎にこのような処理を繰り返すことで、動線情報を逐次更新することができる。
なお、店舗が混雑している場合のように、複数の人物が接近している場合には、上述の方法での人物の同定ができない(あるいは、同定を誤る)可能性がある。このような場合、動線記録部154は、他の方法により人物を同定してもよい。例えば、動線記録部154は、動線により表される人物の移動方向に基づいて座標にIDを割り当ててもよい。あるいは、動線記録部154は、画像データから得られる他の特徴(人物の髪、肌又は衣服の色、顔の特徴、性別など)に基づいて座標にIDを割り当ててもよい。
図7は、動線情報のデータ構造の別の例を示す。この例において、動線情報170は、動線情報160と同様の時刻161、座標162及びID163に加え、店員フラグ171を含む。店員フラグ171は、店員の動線と顧客の動線とを区別するためのフラグである。店員フラグ171は、例えば、店員の動線に対しては「1」、顧客の動線に対しては「0」が割り当てられる。
動線記録部154は、端末装置112から送信された位置情報に基づいて店員と顧客とを判別することが可能である。例えば、位置特定部152により特定される位置には、店員の位置と顧客の位置とが含まれる。一方、位置情報が示す位置は、店員の位置を表している。ゆえに、動線記録部154は、位置特定部152により特定された位置のうち、位置情報が示す位置と一致し、又はこれらの位置の間の距離が所定の閾値以下(すなわち誤差の範囲内)であるものを、店員の位置であると判断することができる。あるいは、店員が特定のアイテム(制服、名札等)を身に付けている場合には、動線記録部154は、画像データからこのようなアイテムの画像特徴を認識することで店員と顧客を判別することが可能である。
なお、動線記録部154は、動線情報として記録されている時刻の全てにおいて店員か顧客かを判別する必要はない。すなわち、動線記録部154は、動線情報において共通のIDで記録されている時刻の少なくともいずれかにおいて店員か顧客かを判別すれば足りる。例えば、図7の例において、動線記録部154は、時刻「t1」においてID「001」が割り当てられた動線について店員フラグ「1」が割り当てられた場合、時刻「t2」においては、ID「001」が割り当てられた動線について店員か顧客かを判別することなく店員フラグ「1」を割り当ててもよい。あるいは、動線記録部154は、人物が店員か顧客かを各時刻において判別し、判別結果を参照してIDを割り当ててもよい。
情報生成部155は、接客情報を生成する。接客情報は、店員による接客を支援するための情報である。接客情報は、顧客特定部153により特定された顧客に関する情報を少なくとも含む。より詳細には、接客情報は、動線情報に含まれ、又は動線情報に基づいて特定される情報を含み得る。情報生成部155は、位置情報が送信された端末装置112のそれぞれについて、当該装置から所定の範囲に存在する顧客に関する情報を含む接客情報を生成する。
以下においては、端末装置112から所定の範囲に存在する顧客のことを、「端末装置112(又はこれを所持する店員)の近傍の顧客」ともいう。すなわち、ここでいう「近傍」の範囲は、必ずしも一定の範囲ではなく、顧客特定部153による顧客の特定に適用される条件に応じて異なり得る。
情報生成部155は、動線記録部154により記録された動線情報を用いて接客情報を生成する。例えば、情報生成部155は、端末装置112の近傍の顧客の移動履歴を示す接客情報を生成する。換言すれば、接客情報は、端末装置112の近傍にいる顧客がどの売り場(エリア)を経て端末装置112の近傍に至ったかを示す。
情報生成部155は、動線情報に基づいて、端末装置112の近傍の顧客のエリア(売り場)毎の滞在時間を算出してもよい。あるいは、情報生成部155は、端末装置112の近傍の顧客が移動する速さ(以下「移動速度」ともいう。)を動線情報に基づいて算出し、算出された移動速度が他のエリアよりも低下したエリアを特定してもよい。例えば、情報生成部155は、顧客の移動速度が当該顧客の平均値以下(又は所定の閾値以下)となったエリアを特定してもよい。顧客が長時間滞在し、又は移動速度が低下したエリアは、その顧客が興味を示した可能性が高いエリアであると推定することができる。情報生成部155は、このようにして算出された滞在時間又は特定されたエリアを示す接客情報を生成してもよい。
情報出力部156は、情報生成部155により生成された接客情報を出力する。より詳細には、情報出力部156は、接客情報を端末装置112あてに出力する。情報出力部156により出力された接客情報は、通信部123を介して、サーバ装置111から端末装置112に送信される。
測位部157は、端末装置112の位置を測定する。測位部157に適用される測位方法は、周知のいずれの方法であってもよい。例えば、端末装置112の通信が無線LANにより行われる場合、測位部157は、複数のアクセスポイントから受信したそれぞれの電波の強度に基づいて端末装置112の位置を測定することができる。このような測位方法は、Wi-Fi(登録商標)測位又はWPS(Wi-Fi Positioning System)とも呼ばれる。測位部157は、測定された位置を示す位置情報を情報出力部158に供給する。
情報出力部158は、測位部157から供給された位置情報を出力する。より詳細には、情報出力部158は、位置情報をサーバ装置111あてに出力する。情報出力部158により出力された位置情報は、通信部143を介して、端末装置112からサーバ装置111に送信される。
情報取得部159は、サーバ装置111から送信された接客情報を取得する。より詳細には、情報取得部159は、情報出力部156から出力された接客情報を、通信部143を介して取得する。
情報表示部150は、情報取得部159により取得された接客情報に基づく表示処理を実行する。ここでいう表示処理は、情報を出力部145に表示させる処理を指す。例えば、情報表示部150による表示処理の結果、出力部145は、端末装置112の近傍の顧客と当該顧客の接客情報とを関連付けた画像を表示する。また、出力部145は、端末装置112の近傍の顧客と当該顧客の接客情報とを関連付けた画像を、カメラ部146により撮影された撮像画像とともに表示してもよい。
接客支援システム110の構成は、以上のとおりである。このような構成において、接客支援システム110は、接客情報を生成及び表示することにより、店員による接客の支援を可能にする。具体的には、サーバ装置111、端末装置112及び記録装置113は、以下のように動作する。
図8は、サーバ装置111及び記録装置113の動作を示すシーケンスチャートである。ステップS111において、記録装置113は、撮影画像を表す画像データを生成する。ステップS112において、記録装置113は、ステップS111において生成された画像データをサーバ装置111に送信する。サーバ装置111は、記録装置113により送信された画像データを受信する。
ステップS113において、サーバ装置111は、ステップS112において送信された画像データに基づいて、人物の店舗における位置を特定する。より詳細には、サーバ装置111は、所定の座標系により人物の位置を示す座標を特定する。ステップS114において、サーバ装置111は、ステップS113において特定された位置に基づいて動線情報を記録する。
サーバ装置111は、繰り返し供給される画像データに基づいてステップS113、S114の処理を繰り返すことにより、動線情報を更新する。動線情報は、このように更新されることで、人物の位置の推移を表す。すなわち、動線情報は、ある時刻とこれに続く時刻とで人物の位置がどのように変化したかを表す。
図9は、サーバ装置111及び端末装置112の動作を示すシーケンスチャートである。サーバ装置111は、以下の処理を図8の処理と並行して実行する。ステップS121において、端末装置112は、サーバ装置111に位置情報を送信する。端末装置112は、サーバ装置111に対し、位置情報を所定の時間間隔で定期的に送信してもよく、店員からの要求(すなわち操作)があったタイミングで位置情報を送信してもよい。サーバ装置111は、端末装置112により送信された位置情報を受信する。
ステップS122において、サーバ装置111は、ステップS121において送信された位置情報により示される位置から所定の範囲に存在する顧客を特定する。すなわち、サーバ装置111は、端末装置112の近傍の顧客を特定する。サーバ装置111は、図8の処理により記録される動線情報に基づいて、顧客の位置を特定する。
ステップS123において、サーバ装置111は、接客情報を生成する。サーバ装置111は、ステップS122において特定された顧客の動線情報を用いて接客情報を生成する。なお、ステップS122において複数の顧客が特定された場合、サーバ装置111は、それぞれの顧客の接客情報を生成する。
ステップS124において、サーバ装置111は、ステップS123において生成された接客情報を端末装置112に送信する。端末装置112は、サーバ装置111により送信された接客情報を受信する。ステップS125において、端末装置112は、接客情報に基づく画像を表示する。端末装置112のユーザである店員は、接客情報に基づく画像を参考に接客活動(セールストーク等)を行うことができる。
図10Aは、接客情報に基づく画像の第1の例を示す図である。この例において、画像180Aは、店員の位置を示すマーク181と、当該店員の近傍の顧客の位置を示すマーク182と、当該顧客の動線183とを店舗のフロアマップに重畳した画像を示す。動線183は、接客情報の表示の一例に相当する。第1の例によれば、店員は、近傍にいる顧客がどのようなエリアを通行してきたかを知ることができる。
図10Bは、接客情報に基づく画像の第2の例を示す図である。この例において、画像180Bは、マーク181、182及び動線183に加え、吹き出し184、185を含む。吹き出し184は、マーク182により示される顧客が通ったエリアのうちの特定のエリアに関する情報を表示する。吹き出し184は、接客情報の表示の一例に相当する。
例えば、吹き出し184は、顧客が長時間滞在し、又は移動速度が低下したエリア、すなわち当該顧客が興味を示した可能性が高いエリアを表示する。あるいは、吹き出し184、185は、このような特定のエリアにおける顧客の滞在時間を表示してもよい。第2の例によれば、店員は、動線183のみからは知り得ない情報、例えば、顧客の滞在時間が長かったエリアや、顧客が立ち止まったり商品を手に取って検討したりしたエリアを知ることができる。
なお、情報表示部150は、吹き出し184、185の表示態様、すなわち外観を接客情報に基づいて決定してもよい。例えば、情報表示部150は、吹き出し184、185のサイズ又は色を、滞在時間及び移動速度の少なくともいずれかに基づいて決定してもよい。図10Bの例において、情報表示部150は、「売り場B」の滞在時間が「売り場G」の滞在時間よりも長いため、吹き出し184のサイズを吹き出し185よりも大きくしている。このようにすれば、店員は、接客情報をより直感的に把握することが可能である。
端末装置112は、接客情報に基づく画像として、第1の例と第2の例のいずれを表示してもよい。あるいは、端末装置112は、画像180Aを表示した後、店員の所定の操作(例えば、マーク182又は動線183をタップする操作)に応じて画像180Bを表示するように画面を遷移させてもよい。なお、第1の例及び第2の例は、店員の近傍に複数名の顧客がいた場合にも適用可能である。
図11は、接客情報に基づく画像の第3の例を示す図である。この例において、画像190は、店員の位置を示すマーク191と、当該店員の近傍にいる2名の顧客の位置を示すマーク192、193とを店舗のフロアマップに重畳して表示するとともに、この2名の顧客に関する付加情報194、195を表示する画像を示す。付加情報194、195は、接客情報の一例に相当する。
この例において、付加情報194は、マーク192の位置にいる顧客の滞在時間が長かったエリアが「売り場C」であったことを示している。付加情報195は、マーク193の位置にいる顧客の滞在時間が長かったエリアが「売り場B」であったことを示している。
マーク192及び付加情報194は、互いに視覚的に関連付けられている。例えば、付加情報194には、マーク192と同じマークが含まれている。この場合、マーク193及び付加情報195も、同様の関連付けを有する。あるいは、マーク192及び付加情報194とマーク193及び付加情報195とは、マーク192及び付加情報194が赤で表示され、マーク193及び付加情報195が青で表示される、といったように、色によって関連付けられてもよい。
第3の例によれば、接客情報をフロアマップと分けて表示することができる。これにより、店員は、フロアマップの視認を妨げることなく接客情報を確認することができる。また、店員は、マーク192、193と付加情報194、195とが近接していなくても、それぞれの関連付けを容易に認識することができる。
以上のとおり、本実施形態に係る接客支援システム110は、顧客の位置情報に基づくサービス(location-based service)を店員に提供することにより、店員の接客活動を支援することが可能である。より詳細には、接客支援システム110は、端末装置112の近傍の顧客の動線情報に基づく接客情報を端末装置112に供給することが可能である。これにより、端末装置112を所持する店員には、顧客の移動履歴に基づく情報が提供される。
一般に、店員は、目の前にいる顧客の来店の目的を接客前に知ることが困難である。また、店員は、目の前にいる顧客の嗜好を知ることも、通常は困難である。一方、接客支援システム110によれば、店員は、端末装置112を介して、近傍の顧客の移動履歴に基づく情報を得ることができる。このような情報に基づく接客活動は、統計的な情報に基づく接客活動に比べ、個々の顧客のニーズを満たせる可能性が高いといえる。また、このような情報に基づく接客活動は、店員の経験や勘のみに基づく接客活動に比べ、判断基準に客観性を与えることが可能である。
したがって、店員は、接客支援システム110を用いることにより、このようなシステムを用いない場合に比べ、目の前にいる顧客に対してより効果的な(すなわち、購買行為に誘引し、顧客満足度を高める)接客活動を行うことができる。例えば、店員は、目の前にいる顧客に対して、その顧客が興味を有している可能性が高い商品を勧めることができる。また、店員は、目の前に複数の顧客がいる場合において、それぞれの顧客に対し、その顧客の移動履歴に即した異なる観点で声をかけることが可能である。
一例として、電化製品の販売店のテレビ(テレビジョン受像機)売り場において、顧客が店員の近傍にいたとする。市販されているテレビは、一般に、そのメーカーや機種によって特徴が異なり得る。例えば、ある型のテレビは画質に特徴がある一方で、別の型のテレビは音質に特徴がある、といった相違がある。このような場合において、顧客がテレビ売り場に来る前にカメラ等の光学機器の売り場に長時間滞在していた場合、その顧客は他の特徴よりも画質に関心がある顧客である、という推測が成り立ち得る。したがって、この場合店員は、画質に特徴があるテレビを勧めた方が、他の特徴を有するテレビを勧めるよりも顧客のニーズを満たす可能性が高まる。一方、顧客がテレビ売り場に来る前にオーディオ製品の売り場に長時間滞在していた場合であれば、店員は、音質に特徴があるテレビを勧めた方が、顧客のニーズを満たす可能性が高まる。
[1.2:第1実施形態の変形例]
本実施形態に係る接客支援システム110に対しては、以下の変形例が適用可能である。これらの変形例は、必要に応じて組み合わせて適用されてもよい。また、これらの変形例は、本実施形態だけでなく、後述される他の実施形態に適用されてもよい。
(1)顧客特定部153は、端末装置112の位置に基づいて、店員の近傍にいる顧客を特定することができる。この場合において、顧客特定部153は、決められた人数(例えば、1名)以上の顧客が店員から所定の範囲(例えば、半径3m)にいるかを判断してもよい。ここで、顧客特定部153は、決められた人数以上の顧客が店員から所定の範囲にいない場合には、ここでいう近傍の範囲を、例えば「半径3m」から「半径5m」に拡張してもよい。すなわち、この例において、「近傍」の具体的な範囲は、可変である。
あるいは、顧客特定部153は、店員との距離が最も近い1名の顧客のみを特定してもよい。この場合、接客情報は、この1名の顧客に関する情報を含み、他の顧客に関する情報を含まなくてもよい。
(2)顧客特定部153は、端末装置112の位置と、端末装置112の向きとに基づいて端末装置112の近傍の顧客を特定してもよい。この場合、情報取得部151は、端末装置112の位置を示す位置情報と、端末装置112の向きを示す情報とを取得する。端末装置112の向きを示す情報は、例えば、センサ部147により出力されるセンサデータである。
なお、以下においては、説明の便宜上、端末装置112の向きと店員の向きとが一定の関係にあるものとする。例えば、端末装置112がスマートフォンである場合、店員は、端末装置112の前面(ディスプレイがある面)と対向する。この場合、店員にとっての正面の向きは、端末装置112の背面の向きと概ね一致する。したがって、顧客特定部153は、この場合、端末装置112の背面の向きが店員にとっての正面の向きに相当するとみなす。
顧客特定部153は、ここでいう近傍の範囲を、端末装置112の向きに基づいて決定してもよい。例えば、店員は、後方にいる顧客には気付かない可能性が高い。よって、顧客特定部153は、ここでいう近傍の範囲を、店員の前方に限定してもよい。例えば、顧客特定部153は、ここでいう近傍の範囲を、端末装置112の位置を中心とした半径3mの円のうちの前方側の半分(すなわち半円)の範囲としてもよい。
なお、店員の向きは、記録装置113から供給される画像データに基づいて特定されてもよい。この場合、位置特定部152は、店員の位置を特定するとともに、当該店員の向きを特定する。この場合における店員の向きは、店員の顔の向きであってもよく、店員の視線の向きであってもよい。位置特定部152は、周知の顔検出技術又は視線検出技術を用いて店員の向きを特定することができる。
(3)動線情報に顧客の動線情報と店員の動線情報とが含まれる場合、顧客特定部153は、端末装置112を所持する店員と異なる店員(以下「他の店員」ともいう。)との位置関係が所定の条件を満たす顧客を除外して近傍の顧客を特定してもよい。ここでいう所定の条件は、例えば、他の店員と顧客との距離が所定の閾値以下になることや、他の店員と顧客との距離が端末装置112を所持する店員とその顧客との距離よりも小さい(すなわち近い)ことである。
このような条件を満たす場合、顧客の近くには他の店員がいるといえる。したがって、この顧客は、他の店員による接客を受けているか、あるいは他の店員に比較的容易に声をかけることができる可能性が高いといえる。顧客特定部153は、このような顧客を接客対象から除外し、他の店員が近くにいない顧客を特定してもよい。
(4)測位部157は、屋内又は屋外向けの他の測位システムを用いて端末装置112の位置を測定してもよい。例えば、測位部157は、GPS(Global Positioning System)等のGNSS(Global Navigation Satellite System)を用いてもよい。また、屋内向けの測位システムとしては、IMES(Indoor MEssaging System)、Bluetooth(登録商標)を用いた測位システム、地磁気を用いた測位システムなどが知られている。また、測位部157は、センサ部127により出力されたセンサデータを用いて位置を測定してもよい。測位部157は、複数の測位システムを併用して位置を測定してもよい。例えば、測位部157は、Wi-Fi測位とPDRを併用した測位を実行してもよい。
(5)端末装置112は、測位部157を含まなくてもよい。この場合、情報出力部158は、位置情報に代えて、端末装置112の測位に必要な情報を出力するように構成される。端末装置112の測位に必要な情報は、例えばWi-Fi測位においては、複数のアクセスポイントから受信したそれぞれの電波の強度を示す情報である。あるいは、端末装置112の測位に必要な情報は、センサ部127から出力されるセンサデータを含み得る。
この変形例において、サーバ装置111は、端末装置112の測位に必要な情報に基づいて端末装置112の位置を特定する。すなわち、この場合、測位部157に相当する機能(端末装置112の位置を特定する機能)は、サーバ装置111が有するともいえる。
あるいは、端末装置112の測位に必要な情報は、サーバ装置111及び端末装置112のいずれとも異なる測位装置に送信されてもよい。この測位装置は、端末装置112の測位に必要な情報に基づいて端末装置112の位置を特定し、特定された位置を表す位置情報をサーバ装置111に送信する。この場合、サーバ装置111は、測位部157に相当する機能を有する必要はなく、測位装置から位置情報を受信するだけでよい。
(6)情報表示部150は、端末装置112の近傍の顧客の接客情報を、カメラ部146により撮影された画像(すなわち撮影画像)とともに表示してもよい。例えば、情報表示部150は、撮影画像から顧客が認識された場合に、当該顧客の接客情報を当該画像に重畳させて表示してもよい。
図12は、接客情報に基づく画像の第4の例を示す図である。この例において、画像100は、撮影画像101と、吹き出し102とを含む。撮影画像101は、カメラ部146により撮影された画像であり、その撮影範囲に顧客を含んでいる。吹き出し102は、ここでは、顧客が長時間存在していたエリアを表示している。吹き出し102は、図10Bの吹き出し184と同様に、接客情報の表示の一例に相当する。つまり、この例は、店員が端末装置112のカメラ部146を顧客に向けて撮影すると、撮影画像に接客情報を重畳表示する例である。
例えば、情報表示部150は、人体検出技術及びAR(Augmented Reality)技術を用いて画像100を表示することが可能である。具体的には、情報表示部150は、撮影画像から人物らしい特徴を有する領域を検出する。この検出は、位置特定部152による人物の検出と同様の要領で実行されてもよい。次いで、情報表示部150は、撮影画像から検出された人物の位置、すなわち店舗における座標を特定する。情報表示部150は、例えば、センサ部127から出力されるセンサデータと測位部157から出力される位置情報とに基づいて人物の位置を特定してもよい。
撮影画像から人物の位置が特定されると、情報表示部150は、当該特定された位置と接客情報により示される位置とを比較する。情報表示部150は、これらの位置が一致し、又はこれらの位置の間の距離が所定の閾値以下(すなわち誤差の範囲内)である場合に、特定された人物と接客情報とを関連付ける。情報表示部150は、このように関連付けられた接客情報に対応する吹き出し102を、撮影画像中の顧客と対応付けて(例えば、顧客の近傍に)表示する。
(7)動線情報は、図6又は図7に例示された情報に加え、移動履歴に関連付けることが可能な他の情報を含んでもよい。例えば、動線情報は、人物の属性を示す属性情報や、人物の行動を示す行動情報を含んでもよい。属性情報及び行動情報は、顧客の動線情報のみに含まれてもよく、顧客の動線情報と店員の動線情報の双方に含まれてもよい。
属性情報は、例えば、記録装置113により撮影された画像から認識可能な人物の特徴を示す。具体的には、属性情報は、人物の性別、年齢層(子供、成人等)、衣服の色などを示してもよい。また、図7の店員フラグ171は、人物が「店員」と「顧客」という複数のグループのいずれに属するかを示す情報であるともいえる。したがって、店員フラグ171は、属性情報の一例に相当するともいえる。
行動情報は、例えば、人物のジェスチャ又は棚前行動を示す。ここにおいて、棚前行動とは、顧客による商品棚の周囲における特徴的な行動をいう。棚前行動は、例えば、商品棚から商品を手に取る動作、商品棚の前で立ち止まる動作、商品棚の前で行ったり来たりする動作などである。また、ジェスチャには、店員及び顧客のいずれか一方に特有のジェスチャが含まれ得る。例えば、お辞儀をする仕草は、店員に特有のジェスチャであるといえる。行動情報は、例えば、記録装置113により撮影された画像から認識可能である。
店員は、属性情報を含む接客情報を参照することで、例えば、当該店員の近傍に複数の顧客がいる場合に、顧客と接客情報の対応関係をより容易に判断することが可能である。また、店員は、行動情報を含む接客情報を参照することで、顧客に応じた接客活動を行うことが可能である。例えば、店員は、顧客が手に取った商品や立ち止まったエリアを知ることで、その顧客の興味や関心を知るための手がかりを得ることができる。
(8)図10A、図10B又は図11に例示された画像に対応する画像データは、サーバ装置111と端末装置112のいずれによって生成されてもよい。すなわち、サーバ装置111から送信される接客情報は、顧客の位置を示す座標情報や滞在時間を含んでもよく、端末装置112において表示される画像を表す画像データを含んでもよい。また、端末装置112は、このような画像データを生成する場合には、マップ情報を記憶部122にあらかじめ記憶してもよく、マップ情報をサーバ装置111から受信してもよい。
(9)記録装置113は、人物の位置が測定可能な他の装置(以下「測定装置」ともいう。)と置換可能である。例えば、ここでいう測定装置は、所定の信号(ビーコン等)を発信する発信機を顧客が所持する場合であれば、当該信号を受信する受信機であってもよい。あるいは、測定装置は、レーザ光や赤外線により人物の位置を測定する光学的なセンサであってもよく、いわゆる距離画像センサを含んでもよい。また、測定装置は、店舗の床面に対する圧力の変化(すなわち重量)を検知する圧力センサを含み、圧力センサの出力に基づいて人物の位置を測定してもよい。さらに、測定装置は、複数の測定方法を組み合わせて人物の位置を測定してもよい。
(10)出力部145は、端末装置112の近傍に顧客がいることを表示以外の方法で店員に通知してもよい。例えば、出力部145は、端末装置112の近傍に顧客がいる場合にアラーム音を出力してもよい。また、出力部145は、端末装置112の近傍に顧客がいる場合にバイブレータを振動させてもよい。
(11)位置情報は、端末装置112に代えて、店員に所持され、端末装置112と対応付けられた電子機器又は無線タグから送信されてもよい。端末装置112が店員に所持されている場合、このような位置情報は、端末装置112の位置を示しているともいえ、これを所持する店員の位置を示しているともいえる。
(12)マップ情報や動線情報のデータ構造は、例示されたものに限定されない。マップ情報及び動線情報は、周知又は類似の他のデータ構造であってもよい。また、マップ情報におけるエリアは、商品棚、展示台等の什器の配置に基づいて定義されてもよいし、商品そのものの配置に基づいて定義されてもよい。
(13)サーバ装置111は、端末装置112に代えて、他の特定の装置に案内情報を送信してもよい。ここでいう特定の装置は、接客を行う店員に対して遠隔から指示を行う者(以下「指示者」ともいう。)に用いられる。この場合、指示者は、案内情報に基づく画像を参照しながら、トランシーバ等の無線機を用いて、店舗内の店員に対して指示を行う。
[2:第2実施形態]
図13は、別の実施形態に係る情報処理装置210の構成を示すブロック図である。情報処理装置210は、店員による店舗での接客を支援するためのコンピュータ装置である。情報処理装置210は、クライアントサーバモデルにおけるサーバ装置であるともいえる。情報処理装置210は、取得部211と、特定部212と、生成部213と、出力部214とを含む。
なお、以降の実施形態及び変形例において使用される用語のうち、第1実施形態においても使用された用語は、特に断りがある場合を除き、第1実施形態において使用された用語と同じ意味で用いられる。
取得部211は、位置を示す情報(以下「第1の情報」ともいう。)を取得する。第1の情報は、例えば、端末装置の位置を示す。ここにおいて、第1の情報は、端末装置の位置を明示的又は非明示的に示す。換言すれば、第1の情報は、端末装置の位置そのものを表す(すなわち明示的に示す)情報であってもよく、所定の演算や処理の結果として端末装置の位置が特定される(すなわち非明示的に示す)情報であってもよい。例えば、第1実施形態における「位置情報」又は「端末装置112の測位に必要な情報」は、第1の情報の一例に相当し得る。第1の情報は、位置を何らかの方法により特定することが可能であれば、位置情報に限定されない。よって、第1の情報は、位置を特定するための情報、位置を特定可能な情報などと言い換えてもよい。
なお、第1の情報は、端末装置のユーザの位置を示す情報であってもよい。例えば、端末装置のユーザの位置を画像解析により特定する場合であれば、画像データが第1の情報に相当し得る。この場合、画像データは、端末装置のユーザの位置を非明示的に示しているともいえる。取得部211は、例えば位置情報と画像データ、といったように、複数種類の第1の情報を取得してもよい。
特定部212は、取得部211により取得された第1の情報により示される位置から所定の範囲に存在する対象を当該第1の情報を用いて特定する。特定部212による対象の特定方法は、特に限定されない。例えば、特定部212は、画像データに基づいて対象を特定してもよく、他の情報に基づいて対象を特定してもよい。
ここにおいて、対象とは、端末装置のユーザ(例えば、店員)がアプローチする相手(例えば、顧客)又はこれに付随する物をいう。例えば、店舗において、顧客は、ショッピングカートを押しながら買い物する場合がある。このような場合において、特定部212は、顧客そのものを特定するのではなく、顧客が押しているショッピングカートを特定してもよい。この場合、ショッピングカートは、ビーコンを発信する発信機が取り付けられていてもよく、ショッピングカート毎に異なるマーカが貼付されていてもよい。あるいは、ここでいう対象は、顧客により所持され、かつ各々の判別が可能な特定の機器又は物品であってもよい。
また、ここでいう対象は、複数のグループに分類されてもよい。例えば、第1実施形態は、ここでいう対象を人物とした例である。第1実施形態において、人物は、「店員」と「顧客」に分類可能である。
対象が複数のグループに分類される場合、特定部212は、取得部211により取得された第1の情報により示される位置から所定の範囲に存在し、かつ複数のグループのうち特定のグループに属する対象を特定してもよい。例えば、第1実施形態のように対象が「店員」と「顧客」に分類される場合、特定部212は、取得部211により取得された第1の情報により示される位置から所定の範囲に存在する対象(人物)のうち、顧客のみを選択的に特定することが可能である。
生成部213は、特定部212により特定された対象に関する情報(以下「第2の情報」ともいう。)を生成する。第2の情報は、例えば、第1実施形態における接客情報である。生成部213は、特定部212により特定された対象の移動履歴を示す情報(以下「第3の情報」ともいう。)を用いて第2の情報を生成する。第3の情報は、複数の対象の位置の推移を示す情報を含んでもよい。第3の情報は、例えば、第1実施形態における動線情報である。
第2の情報は、複数のエリアのうち、特定部212により特定された対象が所定の時間以上存在し、又は当該対象の移動速度が低下したエリアを示す情報を含んでもよい。また、第2の情報は、特定部212により特定された対象があるエリアに存在した時間を示す情報(例えば、滞在時間)を含んでもよい。
第3の情報は、生成部213による第2の情報の生成に加え、特定部212による位置の特定にも用いられてもよい。第3の情報は、過去のある時刻から最新の時刻(以下便宜的に「現在」ともいう。)までの対象の位置の推移を示しているともいえる。生成部213は、第3の情報のうち、特に過去の位置に基づいて第2の情報を生成する。一方、特定部212は、第3の情報のうち、特に現在(最新)の位置に基づいて、端末装置の位置から所定の範囲に存在する対象の位置を特定することが可能である。
出力部214は、生成部213により生成された第2の情報を出力する。出力部214は、その位置が第1の情報によって示されている端末装置あてに第2の情報を出力する。第2の情報は、情報処理装置210から端末装置に直接供給されてもよいが、他の装置を介して(すなわち中継して)供給されてもよい。
図14は、情報処理装置210の動作を示すフローチャートである。ステップS211において、取得部211は、第1の情報を取得する。ステップS212において、特定部212は、ステップS211において取得された第1の情報により示される位置から所定の範囲に存在する対象を特定する。ステップS213において、生成部213は、ステップS212において特定された対象に関する第2の情報を、第3の情報を用いて生成する。ステップS214において、出力部214は、ステップS213において生成された第2の情報を出力する。
本実施形態に係る情報処理装置210によれば、第1の情報により示される位置から所定の範囲に存在する対象に関する第2の情報が、当該対象の移動履歴に基づいて生成される。したがって、情報処理装置210は、第1実施形態の接客支援システム110と同様の作用効果を奏し得る。
なお、情報処理装置210は、第1実施形態のサーバ装置111に対応する。具体的には、取得部211は、情報取得部151に対応する。特定部212は、顧客特定部153に対応する。生成部213は、情報生成部155に対応する。出力部214は、情報出力部156に対応する。また、情報処理装置210は、サーバ装置111の位置特定部152及び動線記録部154に相当する構成をさらに含むように構成されてもよい。
なお、取得部211は、第4の情報として、端末装置又はそのユーザの向きを示す情報を取得してもよい。この場合、特定部212は、第1の情報により示される位置と、第4の情報により特定される向きとに基づいて対象を特定する。例えば、第1実施形態におけるセンサデータは、第4の情報の一例に相当し得る。
[3:第3実施形態]
図15は、さらに別の実施形態に係る端末装置310の構成を示すブロック図である。端末装置310は、店員による店舗での接客を支援するためのコンピュータ装置である。例えば、第1実施形態の端末装置112は、端末装置310の一例に相当する。端末装置310は、第2実施形態の情報処理装置210と協働し、互いにデータを授受するように使用されてもよい。端末装置310は、クライアントサーバモデルにおけるクライアント装置であるともいえる。端末装置310は、取得部311と、出力部312とを少なくとも含む。
取得部311は、端末装置310又はそのユーザの位置から所定の範囲に存在する対象に関する情報を取得する。この情報は、第2実施形態における第2の情報に対応し、例えば端末装置310又はそのユーザの位置から所定の範囲に存在する対象の移動履歴に基づいて生成される。
出力部312は、取得部311により取得された情報と端末装置310又はそのユーザの位置から所定の範囲に存在する対象とを関連付けて出力する。いくつかの場合において、出力部312は、取得部311により取得された情報を対象とともに表示する。ただし、ここでいう出力は、第1実施形態と同様に、表示以外の知覚可能な出力を含み得る。取得部311により取得された情報と対象との関連付けは、例えば、当該情報に記述されていてもよい。出力部312は、情報と対象との関連付けを当該情報に基づいて特定してもよく、他の方法により特定してもよい。
なお、出力部312は、端末装置310又はそのユーザの位置を示す情報を出力してもよい。この情報は、第2実施形態における第1の情報に対応し、端末装置310又はそのユーザの位置を明示的又は非明示的に示す。この場合、出力部312は、第2の情報を生成する装置(例えば、情報処理装置210)あてに情報(第1の情報)を出力する。また、取得部311は、出力部312により出力された情報(第1の情報)により示される位置から所定の範囲に存在する対象に関する情報(第2の情報)を取得する。
図16は、端末装置310の動作を示すフローチャートである。ステップS311において、取得部311は、端末装置310又はそのユーザの位置から所定の範囲に存在する対象に関する情報を取得する。ステップS312において、出力部312は、ステップS311において取得された情報と対象とを関連付けて出力する。例えば、出力部312は、ステップS311において取得された情報を、対象を含んで撮影された画像とともに表示してもよい。
本実施形態に係る端末装置310によれば、当該装置又はそのユーザの位置から所定の範囲に存在する対象に関する情報と対象とを関連付けて出力することができる。したがって、端末装置310は、第1実施形態の接客支援システム110と同様の作用効果を奏し得る。
なお、端末装置310は、第1実施形態の端末装置112に対応する。具体的には、取得部311は、情報取得部159に対応する。出力部312は、情報表示部150又は情報出力部158に対応する。また、端末装置310は、端末装置112の測位部157に相当する構成をさらに含むように構成されてもよい。
[4:変形例]
上述された第1~第3実施形態は、例えば、以下のような変形を適用することができる。これらの変形例は、必要に応じて適宜組み合わせることも可能である。
(1)本開示に係る装置(サーバ装置111、端末装置112、情報処理装置210及び端末装置310)の具体的なハードウェア構成は、さまざまなバリエーションが含まれ、特定の構成に限定されない。例えば、本開示に係る装置は、ソフトウェアを用いて実現されてもよく、複数のハードウェアを用いて各種処理を分担するように構成されてもよい。
図17は、本開示に係る装置を実現するコンピュータ装置400のハードウェア構成の一例を示すブロック図である。コンピュータ装置400は、CPU(Central Processing Unit)401と、ROM(Read Only Memory)402と、RAM(Random Access Memory)403と、記憶装置404と、ドライブ装置405と、通信インタフェース406と、入出力インタフェース407とを含んで構成される。
CPU401は、RAM403を用いてプログラム408を実行する。通信インタフェース406は、ネットワーク410を介して外部装置とデータをやり取りする。入出力インタフェース407は、周辺機器(入力装置、表示装置など)とデータをやり取りする。通信インタフェース406及び入出力インタフェース407は、データを取得又は出力するための構成要素として機能することができる。
なお、プログラム408は、ROM402に記憶されていてもよい。また、プログラム408は、メモリカード等の記録媒体409に記録され、ドライブ装置405によって読み出されてもよいし、外部装置からネットワーク410を介して送信されてもよい。
本開示に係る装置は、図17に示される構成(又はその一部)によって実現され得る。例えば、サーバ装置111の場合、制御部121は、CPU401、ROM402及びRAM403に対応する。記憶部122は、記憶装置404又はドライブ装置405に対応する。通信部123は、通信インタフェース406に対応する。
また、端末装置112の場合、制御部141は、CPU401、ROM402及びRAM403に対応する。記憶部142は、記憶装置404又はドライブ装置405に対応する。通信部143は、通信インタフェース406に対応する。入力部144、出力部145、カメラ部146及びセンサ部147は、入出力インタフェースを介して接続される周辺機器に対応する。
なお、本開示に係る装置の構成要素は、単一の回路(プロセッサ等)によって構成されてもよいし、複数の回路の組み合わせによって構成されてもよい。ここでいう回路(circuitry)は、専用又は汎用のいずれであってもよい。例えば、本開示に係る装置は、一部が専用のプロセッサによって実現され、他の部分が汎用のプロセッサによって実現されてもよい。
上述された実施形態において単体の装置として説明された構成は、複数の装置に分散して設けられてもよい。例えば、サーバ装置111又は情報処理装置210は、クラウドコンピューティング技術などを用いて、複数のコンピュータ装置の協働によって実現されてもよい。
(2)本開示の適用範囲は、店舗における接客支援に限定されない。例えば、本開示は、博物館、美術館、展示会などへの来訪者に対する、学芸員又は出展者による展示品に関する案内を支援するためのシステムに応用することも可能である。このようなシステムは、何らかの目的を以て所定の施設を訪れたユーザに対するアテンド(随行、付き添いなどと言い換えてもよい。)を支援するともいえる。この場合、接客情報は、案内情報、応対情報、アテンド情報などと言い換えてもよい。
(3)以上、本発明は、上述された実施形態及び変形例を模範的な例として説明された。しかし、本発明は、これらの実施形態及び変形例に限定されない。本発明は、本発明のスコープ内において、いわゆる当業者が把握し得るさまざまな変形又は応用を適用した実施の形態を含み得る。また、本発明は、本明細書に記載された事項を必要に応じて適宜に組み合わせ、又は置換した実施の形態を含み得る。例えば、特定の実施形態を用いて説明された事項は、矛盾を生じない範囲において、他の実施形態に対しても適用し得る。
[5:付記]
本開示の一部又は全部は、以下の付記のようにも記載され得る。ただし、本発明は、必ずしもこの付記の態様に限定されない。
(付記1)
位置を示す第1の情報を取得する取得手段と、
前記第1の情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定手段と、
前記特定された対象に関する第2の情報を、当該対象の移動履歴を示す第3の情報を用いて生成する生成手段と、
前記生成された第2の情報を出力する出力手段と
を備える情報処理装置。
(付記2)
前記第3の情報は、複数の対象のそれぞれの移動履歴を示す情報を含み、
前記特定手段は、前記第3の情報を用いて前記所定の範囲に存在する対象を特定する
付記1に記載の情報処理装置。
(付記3)
前記特定手段は、前記第3の情報により示される前記複数の対象の最新の位置に基づいて、前記所定の範囲に存在する対象を特定し、
前記生成手段は、前記第3の情報により示される前記特定された対象の過去の位置の推移に基づいて、前記第2の情報を生成する
付記2に記載の情報処理装置。
(付記4)
前記第1の情報は、端末装置又はそのユーザの位置を示し、
前記取得手段は、前記第1の情報と、前記端末装置又は前記ユーザの向きを示す第4の情報とを取得し、
前記特定手段は、前記取得された第1の情報により示される位置と、前記取得された第4の情報により特定される向きとに基づいて前記対象を特定する
付記1ないし付記3のいずれかに記載の情報処理装置。
(付記5)
前記対象は、複数のグループのいずれかに属し、
前記特定手段は、前記所定の範囲に存在し、かつ前記複数のグループのうち特定のグループに属する対象を特定する
付記1から付記4までのいずれかに記載の情報処理装置。
(付記6)
前記特定手段は、前記特定のグループに属する対象のうち、当該特定のグループと異なるグループに属する対象との位置関係が所定の条件を満たす対象を除外して前記所定の範囲に存在する対象を特定する
付記5に記載の情報処理装置。
(付記7)
前記第2の情報は、前記第3の情報に基づいて特定される情報を含む
付記1から付記6までのいずれかに記載の情報処理装置。
(付記8)
前記生成手段は、複数のエリアのうち、前記対象が所定の時間以上存在し、又は前記対象が移動する速さが他のエリアより低下したエリアを前記第3の情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記第2の情報を生成する
付記7に記載の情報処理装置。
(付記9)
前記生成手段は、あるエリアに前記対象が存在した時間を前記第3の情報に基づいて特定し、当該特定された時間を示す情報を含む前記第2の情報を生成する
付記7又は付記8に記載の情報処理装置。
(付記10)
前記第3の情報は、前記移動履歴に関連付けられる前記対象の属性を示す属性情報を含み、
前記生成手段は、前記特定された対象の前記属性情報を含む前記第2の情報を生成する
付記1から付記9までのいずれかに記載の情報処理装置。
(付記11)
前記第3の情報は、前記移動履歴に関連付けられる前記対象の行動を示す行動情報を含み、
前記生成手段は、前記特定された対象の前記行動情報を含む前記第2の情報を生成する
付記1から付記10までのいずれかに記載の情報処理装置。
(付記12)
コンピュータに、
端末装置又はそのユーザの位置から所定の範囲に存在する対象の移動履歴を用いて生成された情報であって当該対象に関する情報を取得する取得処理と、
前記取得された情報と前記対象とを関連付けて出力する出力処理と
を実行させるためのプログラム。
(付記13)
前記出力処理は、前記情報を、前記対象を含んで撮影された画像とともに表示する処理を含む
付記12に記載のプログラム。
(付記14)
前記出力処理は、前記画像から前記対象を認識し、前記情報を当該画像とともに表示する
付記13に記載のプログラム。
(付記15)
前記出力処理は、前記情報を、ある空間における前記対象の位置を示す画像とともに表示する処理を含む
付記12ないし付記14のいずれかに記載のプログラム。
(付記16)
前記出力処理は、前記情報を、前記端末装置と前記対象との距離に応じた表示態様で表示する処理を含む
付記12から付記15までのいずれか1項に記載のプログラム。
(付記17)
前記出力処理は、前記情報を、あるエリアに前記対象が存在した時間に応じた表示態様で表示する処理を含む
付記12から付記16までのいずれか1項に記載のプログラム。
(付記18)
端末装置又はそのユーザの位置から所定の範囲に存在する対象の移動履歴を用いて生成された情報であって当該対象に関する情報を取得する取得手段と、
前記取得された情報と前記対象とを関連付けて出力する出力手段と
を備える端末装置。
(付記19)
コンピュータに、
位置を示す第1の情報を取得する取得処理と、
前記第1の情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定処理と、
前記特定された対象に関する第2の情報を、当該対象の移動履歴を示す第3の情報を用いて生成する生成処理と、
前記生成された第2の情報を出力する出力処理と
を実行させるためのプログラム。
(付記20)
位置を示す第1の情報を取得し、
前記第1の情報を用いて、前記位置から所定の範囲に存在する対象を特定し、
前記特定された対象に関する第2の情報を、当該対象の移動履歴を示す第3の情報を用いて生成し、
前記生成された第2の情報を出力する
情報処理方法。
(付記21)
端末装置又はそのユーザの位置から所定の範囲に存在する対象の移動履歴を用いて生成された情報であって当該対象に関する情報を取得し、
前記取得された情報と前記対象とを関連付けて出力する
情報出力方法。
(付記22)
前記出力において、前記情報を、前記対象を含んで撮影された画像とともに表示する
付記21に記載の情報出力方法。
(付記23)
前記出力において、前記画像から前記対象を認識し、前記情報を当該画像とともに表示する
付記22に記載の情報出力方法。
(付記24)
前記出力において、前記情報を、ある空間における前記対象の位置を示す画像とともに表示する
付記21から付記23までのいずれか1項に記載の情報出力方法。
(付記25)
前記出力において、前記情報を、前記端末装置と前記対象との距離に応じた表示態様で表示する
付記21から付記24までのいずれか1項に記載の情報出力方法。
(付記26)
前記出力において、前記情報を、あるエリアに前記対象が存在した時間に応じた表示態様で表示する
付記21から付記25までのいずれか1項に記載の情報出力方法。
(付記27)
店員により所持される端末装置から、店舗における当該端末装置の位置を示す位置情報を取得し、
前記店舗において前記位置から所定の範囲に存在する顧客を、前記位置情報と、当該顧客の当該店舗における移動履歴を示す動線情報とを用いて特定し、
前記特定された顧客に関する接客情報を、前記動線情報を用いて生成し、
前記生成された接客情報を前記端末装置に出力する
接客支援方法。
110 接客支援システム
111 サーバ装置
112 端末装置
113 記録装置
114 ネットワーク
210 情報処理装置
211 取得部
212 特定部
213 生成部
214 出力部
310 端末装置
311 取得部
312 出力部
400 コンピュータ装置

Claims (17)

  1. 店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得手段と、
    前記取得された接客情報と前記対象とを関連付けて出力する出力手段と
    を備え、
    前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、
    前記出力手段は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    端末装置。
  2. 前記出力手段は、前記接客情報を、前記対象を含んで撮影された画像とともに表示する処理を含む
    請求項1に記載の端末装置。
  3. 前記出力手段は、前記画像から前記対象を認識し、前記接客情報を当該画像とともに表示する
    請求項2に記載の端末装置。
  4. 前記出力手段は、前記接客情報を、前記店舗における前記対象の位置を示す画像とともに表示する
    請求項1から請求項3までのいずれか1項に記載の端末装置。
  5. 前記出力手段は、前記接客情報を、前記端末装置と前記対象との距離に応じた表示態様で表示する
    請求項1から請求項4までのいずれか1項に記載の端末装置。
  6. 店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得する取得手段と、
    前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定手段と、
    特定された前記対象の移動履歴を示す動線情報を含む接客情報を生成する生成手段と、
    生成された前記接客情報を前記端末装置に出力する出力手段と、
    を備え、
    前記生成手段は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は、前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、
    前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    情報処理装置。
  7. 前記動線情報は、複数の対象のそれぞれの移動履歴を示す情報を含み、
    前記特定手段は、前記動線情報を用いて前記所定の範囲に存在する対象を特定する
    請求項6に記載の情報処理装置。
  8. 前記取得手段は、前記位置情報と、前記端末装置又は前記ユーザの向きを示す向き情報とを取得し、
    前記特定手段は、取得された前記位置情報により示される位置から、取得された前記向き情報により特定される向きの前記所定の範囲に存在する前記対象を特定する
    請求項6又は請求項7に記載の情報処理装置。
  9. 前記対象は、人物であり、顧客のグループと店員のグループとのいずれかに属し、
    前記特定手段は、前記所定の範囲に存在し、かつ前記顧客のグループに属する対象を特定する
    請求項6から請求項8までのいずれか1項に記載の情報処理装置。
  10. 前記特定手段は、前記顧客のグループに属する対象のうち、前記店員のグループに属する対象との間の距離が所定の閾値以下である対象と、当該距離が前記ユーザとの距離よりも小さい対象と、の少なくともいずれかを除外して前記所定の範囲に存在する対象を特定する
    請求項9に記載の情報処理装置。
  11. 前記動線情報は、前記移動履歴に関連付けられる前記対象の属性を示す属性情報を含み、
    前記生成手段は、特定された前記対象の前記属性情報を含む前記接客情報を生成する
    請求項6から請求項10までのいずれか1項に記載の情報処理装置。
  12. 前記動線情報は、前記移動履歴に関連付けられる前記対象の行動を示す行動情報を含み、
    前記生成手段は、特定された前記対象の前記行動情報を含む前記接客情報を生成する
    請求項6から請求項11までのいずれか1項に記載の情報処理装置。
  13. コンピュータが、
    店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得処理と、
    取得された前記接客情報と前記対象とを関連付けて出力する出力処理と
    を実行し、
    前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、
    前記出力処理では、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    情報出力方法。
  14. コンピュータが、
    店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得し、
    前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定し、
    当該対象の移動履歴を示す動線情報を含む接客情報を生成し、
    前記生成された接客情報を出力する
    処理を実行し、
    前記生成する処理では、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、
    前記端末装置は、前記店舗内の地図における前記接客情報に含まれる前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    情報処理方法。
  15. コンピュータが、
    店員により所持される端末装置から、店舗における当該端末装置の位置を示す位置情報を取得し、
    前記店舗において前記位置から所定の範囲に存在する顧客を、前記位置情報と、当該顧客の当該店舗における移動履歴を示す動線情報とを用いて特定し、
    前記動線情報を含む接客情報を生成し、
    前記生成された接客情報を前記端末装置に出力する
    処理を実行し、
    前記生成する処理では、前記店舗における複数のエリアのうち、特定された前記顧客が所定の時間以上存在し、又は、特定された前記顧客が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、
    前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、特定された前記顧客が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    接客支援方法。
  16. コンピュータに、
    店舗における端末装置又は前記端末装置のユーザの位置から所定の範囲に存在する対象の移動履歴を示す動線情報を含む接客情報を取得する取得処理と、
    前記取得された接客情報と前記対象とを関連付けて出力する出力処理と
    を実行させ、
    前記動線情報は、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在したエリア、又は前記対象が移動する速さが他のエリアより低下したエリアを示す情報を含み、
    前記出力処理では、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    プログラム。
  17. コンピュータに、
    店舗における端末装置又は前記端末装置のユーザの位置を示す位置情報を取得する取得処理と、
    前記位置情報を用いて、前記位置から所定の範囲に存在する対象を特定する特定処理と、
    当該対象の移動履歴を示す動線情報を含む接客情報を生成する生成処理と、
    前記生成された接客情報を出力する出力処理と
    を実行させ、
    前記生成処理では、前記店舗における複数のエリアのうち、前記対象が所定の時間以上存在し、又は前記対象が移動する速さが他のエリアより低下したエリアを前記動線情報に基づいて特定し、当該特定されたエリアを示す情報を含む前記接客情報を生成し、
    前記端末装置は、前記店舗内の地図における前記情報が示すエリアに、前記対象が当該エリアに滞在した時間を、当該時間に応じた表示態様で表示させる、
    プログラム。
JP2022021762A 2017-03-03 2022-02-16 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム Active JP7439844B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022021762A JP7439844B2 (ja) 2017-03-03 2022-02-16 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017040660A JP7081081B2 (ja) 2017-03-03 2017-03-03 情報処理装置、端末装置、情報処理方法、情報出力方法、接客支援方法及びプログラム
JP2022021762A JP7439844B2 (ja) 2017-03-03 2022-02-16 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017040660A Division JP7081081B2 (ja) 2017-03-03 2017-03-03 情報処理装置、端末装置、情報処理方法、情報出力方法、接客支援方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2022062248A true JP2022062248A (ja) 2022-04-19
JP7439844B2 JP7439844B2 (ja) 2024-02-28

Family

ID=63370401

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017040660A Active JP7081081B2 (ja) 2017-03-03 2017-03-03 情報処理装置、端末装置、情報処理方法、情報出力方法、接客支援方法及びプログラム
JP2022021762A Active JP7439844B2 (ja) 2017-03-03 2022-02-16 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2017040660A Active JP7081081B2 (ja) 2017-03-03 2017-03-03 情報処理装置、端末装置、情報処理方法、情報出力方法、接客支援方法及びプログラム

Country Status (3)

Country Link
US (1) US20200005331A1 (ja)
JP (2) JP7081081B2 (ja)
WO (1) WO2018159736A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110443655A (zh) * 2019-08-14 2019-11-12 北京市商汤科技开发有限公司 信息处理方法、装置及设备
CN110765984A (zh) * 2019-11-08 2020-02-07 北京市商汤科技开发有限公司 一种移动状态信息展示方法、装置、设备及存储介质
JP6954687B1 (ja) * 2020-06-17 2021-10-27 Necプラットフォームズ株式会社 接客管理システム、接客管理方法、管理サーバ及びプログラム
CN112365281B (zh) * 2020-10-28 2024-05-14 国网冀北电力有限公司计量中心 电力客户服务需求分析方法及装置
JP2022144490A (ja) * 2021-03-19 2022-10-03 東芝テック株式会社 店舗システム及びプログラム
JPWO2023007649A1 (ja) * 2021-07-29 2023-02-02
JP2023105741A (ja) * 2022-01-19 2023-07-31 株式会社Ridge-i 情報処理装置、情報処理方法及び情報処理プログラム
JP7315049B1 (ja) * 2022-02-22 2023-07-26 富士通株式会社 情報処理プログラム、情報処理方法、および情報処理装置
JPWO2023209822A1 (ja) * 2022-04-26 2023-11-02

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007133461A (ja) * 2005-11-08 2007-05-31 Fujitsu Ltd 販売支援システム,販売支援装置,販売支援方法および販売支援プログラム
JP2009134688A (ja) * 2007-11-28 2009-06-18 Fuji Xerox Co Ltd センサデータ内の活動の地理分布に基づく時間のセグメント化
JP2009238044A (ja) * 2008-03-27 2009-10-15 Brother Ind Ltd 接客支援システム
JP2010049494A (ja) * 2008-08-21 2010-03-04 Brother Ind Ltd 接客支援システム
JP2011008719A (ja) * 2009-06-29 2011-01-13 Yahoo Japan Corp 販売支援サーバ、販売支援システム及び販売支援方法
JP2015141572A (ja) * 2014-01-29 2015-08-03 富士通株式会社 商品情報提供方法、商品情報提供装置および商品情報提供プログラム
JP2016114270A (ja) * 2014-12-12 2016-06-23 ジョンソンコントロールズ ヒタチ エア コンディショニング テクノロジー(ホンコン)リミテッド 空気調和機、空気調和機の制御方法、及びプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008052532A (ja) * 2006-08-25 2008-03-06 Nec Corp 顧客管理システム、顧客管理方法、端末装置、プログラム
JP2008198087A (ja) * 2007-02-15 2008-08-28 Fuji Xerox Co Ltd 接客支援システム
JP5879616B1 (ja) * 2014-10-07 2016-03-08 パナソニックIpマネジメント株式会社 活動状況分析システム、活動状況分析装置、活動状況分析方法、活動状況分析プログラムおよびそのプログラムを格納する記憶媒体

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007133461A (ja) * 2005-11-08 2007-05-31 Fujitsu Ltd 販売支援システム,販売支援装置,販売支援方法および販売支援プログラム
JP2009134688A (ja) * 2007-11-28 2009-06-18 Fuji Xerox Co Ltd センサデータ内の活動の地理分布に基づく時間のセグメント化
JP2009238044A (ja) * 2008-03-27 2009-10-15 Brother Ind Ltd 接客支援システム
JP2010049494A (ja) * 2008-08-21 2010-03-04 Brother Ind Ltd 接客支援システム
JP2011008719A (ja) * 2009-06-29 2011-01-13 Yahoo Japan Corp 販売支援サーバ、販売支援システム及び販売支援方法
JP2015141572A (ja) * 2014-01-29 2015-08-03 富士通株式会社 商品情報提供方法、商品情報提供装置および商品情報提供プログラム
JP2016114270A (ja) * 2014-12-12 2016-06-23 ジョンソンコントロールズ ヒタチ エア コンディショニング テクノロジー(ホンコン)リミテッド 空気調和機、空気調和機の制御方法、及びプログラム

Also Published As

Publication number Publication date
JP7081081B2 (ja) 2022-06-07
JP7439844B2 (ja) 2024-02-28
US20200005331A1 (en) 2020-01-02
JP2018147175A (ja) 2018-09-20
WO2018159736A1 (ja) 2018-09-07

Similar Documents

Publication Publication Date Title
JP7439844B2 (ja) 端末装置、情報処理装置、情報出力方法、情報処理方法、接客支援方法及びプログラム
US11614803B2 (en) Individually interactive multi-view display system for non-stationary viewing locations and methods therefor
JP6562077B2 (ja) 展示装置、表示制御装置および展示システム
US9824384B2 (en) Techniques for locating an item to purchase in a retail environment
US8954276B1 (en) System and method for managing indoor geolocation conversions
KR101894021B1 (ko) Vr 공간에서 컨텐트를 제공하는 방법, 디바이스 및 기록매체
US10664879B2 (en) Electronic device, apparatus and system
US20200250736A1 (en) Systems, method and apparatus for frictionless shopping
JP7347480B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2017174272A (ja) 情報処理装置及びプログラム
EP3909267B1 (en) A controller, system and method for providing a location-based service to an area
WO2015195413A1 (en) Systems and methods for presenting information associated with a three-dimensional location on a two-dimensional display
JP7404809B2 (ja) 位置検出システム、位置検出装置及び位置検出方法
US20220027952A1 (en) Sales support system
TWI747333B (zh) 基於光通信裝置的交互方法、電子設備以及電腦可讀取記錄媒體
EP3962118A1 (en) Interaction method employing optical communication apparatus, and electronic device
US20240070608A1 (en) Resolving misplaced items in physical retail stores
JP2024060933A (ja) 端末装置、情報処理方法、及び情報処理プログラム
JP2021131770A (ja) 表示制御装置、表示制御システムおよび表示制御方法
JP2021067985A (ja) 情報処理装置、情報処理方法および情報処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230425

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230621

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230912

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231031

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240116

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240129

R151 Written notification of patent or utility model registration

Ref document number: 7439844

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151