JP2011237966A - 接客支援装置、接客支援方法およびプログラム - Google Patents
接客支援装置、接客支援方法およびプログラム Download PDFInfo
- Publication number
- JP2011237966A JP2011237966A JP2010108061A JP2010108061A JP2011237966A JP 2011237966 A JP2011237966 A JP 2011237966A JP 2010108061 A JP2010108061 A JP 2010108061A JP 2010108061 A JP2010108061 A JP 2010108061A JP 2011237966 A JP2011237966 A JP 2011237966A
- Authority
- JP
- Japan
- Prior art keywords
- customer
- customer service
- section
- conversation
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000001514 detection method Methods 0.000 claims abstract description 143
- 238000012544 monitoring process Methods 0.000 claims description 40
- 230000008859 change Effects 0.000 claims description 31
- 238000004364 calculation method Methods 0.000 claims description 29
- 238000003384 imaging method Methods 0.000 claims description 20
- 230000009471 action Effects 0.000 claims description 17
- 230000033001 locomotion Effects 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 8
- 239000000284 extract Substances 0.000 claims description 4
- 238000007726 management method Methods 0.000 description 91
- 238000010586 diagram Methods 0.000 description 35
- 230000006870 function Effects 0.000 description 26
- 238000013500 data storage Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 18
- 230000008909 emotion recognition Effects 0.000 description 16
- 238000013523 data management Methods 0.000 description 15
- 238000005259 measurement Methods 0.000 description 15
- 238000006243 chemical reaction Methods 0.000 description 13
- 230000008451 emotion Effects 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 7
- 238000012549 training Methods 0.000 description 7
- 230000001815 facial effect Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000006399 behavior Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000002349 favourable effect Effects 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 235000013372 meat Nutrition 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】接客対象となる顧客別に接客区間を特定可能な接客支援装置、接客支援方法およびプログラムを提供する。
【解決手段】店員と顧客の会話を取得する会話取得部102と、取得した会話に含まれる店員および顧客の少なくとも一方の音声に基づいて、店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出部171と、店員を識別する店員識別情報と、接客切替検出部171の検出時刻と、を関連付け、切替検出データとして管理サーバー用データベースDB3に記録する切替検出データ記録部172と、を備えた。
【選択図】図24
【解決手段】店員と顧客の会話を取得する会話取得部102と、取得した会話に含まれる店員および顧客の少なくとも一方の音声に基づいて、店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出部171と、店員を識別する店員識別情報と、接客切替検出部171の検出時刻と、を関連付け、切替検出データとして管理サーバー用データベースDB3に記録する切替検出データ記録部172と、を備えた。
【選択図】図24
Description
マーケティングデータとして接客に関するデータを収集し、接客スキルの向上に役立てる接客支援装置、接客支援方法およびプログラムに関するものである。
近年、販売促進に活用するためのマーケティングデータとして、顧客データや売り上げデータを収集する試みが行われている。例えば、特許文献1では、POSデータを分析して消費者の併売傾向を数量的に把握し、販売促進に反映させるマーケティングデータ収集分析技術が提案されている。
一方、会話状況を推定する技術として、人物の音声に基づいて感情を認識する感情認識技術が知られている。例えば、特許文献2では、被験者が入力した音声信号から、音声の強度、テンポおよび抑揚などの変化量を、「怒り」、「悲しみ」および「喜び」などそれぞれの感情状態に対応付けて感情認識を行っている。
ところで、マーケティングの分野では、生産性や効率を多少犠牲にしてでも顧客満足度を高めた方が、消費者のリピーター化などを通じて結果的には良いと言われている。また、小売店を初めとするホスピタリティを重視する店舗では、売り上げと顧客満足度には密接な関連性があるため、顧客満足度を高めるために、接客スキルのトレーニングや、顧客に対する印象を良くするための笑顔や挨拶のトレーニングを行っている。中でも、接客スキルの一つである会話テクニックは重要視され、顧客との会話比率に着目したトレーニングが行われている。一般的に、店員と顧客の会話比率は、顧客の割合が大きい方が好ましいとされており(例えば、2:8など)、これを維持することで、顧客満足度に好影響を与えると言われている。
ところが、接客に好ましいとされる会話比率が分かっていても、会話比率を測定する方法が無いため、各店員がそれを実践できているか否かは不明である。また、会話比率を測定・算出するためには、接客対象となる顧客ごとに測定・算出することが好ましい。これは、接客対象に関係なく店員の会話比率を測定した場合(ある店員の1日における総合的な会話比率を測定するなど)、どの接客が良く、どの接客が悪かったかを判別できず、接客スキルの向上に役立てられないためである。したがって、接客対象となる顧客別に接客区間を特定し、当該接客区間ごとに会話比率を測定することが望ましいが、当該接客区間を特定する方法は、未だ提案されていない。
本発明は、上記の問題点に鑑み、接客対象となる顧客別に接客区間を特定可能な接客支援装置、接客支援方法およびプログラムを提供することを目的とする。
本発明の接客支援装置は、店員および顧客の少なくとも一方を監視する監視部と、監視部の監視結果に基づいて、店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出部と、店員を識別する店員識別情報と、接客切替検出部の検出時刻と、を関連付け、切替検出データとしてデータベースに記録する切替検出データ記録部と、を備えたことを特徴とする。
本発明の接客支援方法は、コンピューターが、店員および顧客の少なくとも一方を監視する監視ステップと、監視ステップによる監視結果に基づいて、店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出ステップと、店員を識別する店員識別情報と、接客切替検出ステップによる検出時刻と、を関連付け、切替検出データとしてデータベースに記録する切替検出データ記録ステップと、を実行することを特徴とする。
これらの構成によれば、店員および顧客の少なくとも一方の監視結果から、接客対象となっている対象顧客の切り替わりを検出し、その検出時刻を店員識別情報と関連付け、切替検出データとして記録しておくため、当該切替検出データから、顧客別の接客区間を特定できる。また、接客区間の特定結果を、マーケティングデータとして収集することで、接客スキルの向上に役立てることができる。
上記に記載の接客支援装置において、監視部は、店員と顧客の会話を取得する会話取得部を含み、接客切替検出部は、会話に含まれる店員および顧客の少なくとも一方の音声に基づいて、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、天井、机、店員などに取り付けられたマイクにより、店員および顧客の少なくとも一方の音声を取得することで、対象顧客の切り替わりを検出できる。
上記に記載の接客支援装置において、接客切替検出部は、顧客の音声に対して、定期的に声紋認証を行い、当該声紋認証結果の変化により、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、声紋認証技術を用いて、対象顧客の切り替わりを正確に検出できる。
上記に記載の接客支援装置において、接客切替検出部は、所定時間内における同一声紋の出現率が所定値以下となったことにより、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、接客対象が家族連れの場合など、対象顧客が一人であるとは限らないため、所定時間内における同一声紋の出現率に応じて、対象顧客の切り替わりを検出することで、対象顧客別の接客区間を正確に特定できる。例えば、同一人物の声紋が1分間に1回以上認識できている間は、対象顧客の切り替わりを検出しない、などが考えられる。
なお、所定時間内における同一声紋の出現率に応じて、対象顧客の切り替わりを検出するのではなく、所定時間以上継続して同一声紋を検出しない場合、対象顧客が切り替わったと判定しても良い。
なお、所定時間内における同一声紋の出現率に応じて、対象顧客の切り替わりを検出するのではなく、所定時間以上継続して同一声紋を検出しない場合、対象顧客が切り替わったと判定しても良い。
上記に記載の接客支援装置において、接客切替検出部は、店員の音声に対して、音声認識を行い、当該音声認識によって所定のキーワードを検出することにより、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、所定のキーワードを検出することにより、対象顧客の切り替わりを容易に検出できる。
なお、所定のキーワードとしては、接客区間の開始を示す「いらっしゃいませ」、並びに接客区間の終了を示す「またのご来店をお待ちしております」、「お買い上げありがとうございます」、「少々お待ちください」などが考えられる。また、店舗ごとに、接客終了時に発声するキーワードを決めておき、そのキーワードの検出により、対象顧客の切り替わりを検出しても良い。この場合のキーワードとしては、例えば「終わり」、「バイバイ」など、通常接客時に使用しないキーワードが考えられる。
なお、所定のキーワードとしては、接客区間の開始を示す「いらっしゃいませ」、並びに接客区間の終了を示す「またのご来店をお待ちしております」、「お買い上げありがとうございます」、「少々お待ちください」などが考えられる。また、店舗ごとに、接客終了時に発声するキーワードを決めておき、そのキーワードの検出により、対象顧客の切り替わりを検出しても良い。この場合のキーワードとしては、例えば「終わり」、「バイバイ」など、通常接客時に使用しないキーワードが考えられる。
上記に記載の接客支援装置において、店員に取り付けられ、当該店員が発話したことを検出する発話検出部をさらに備え、接客切替検出部は、発話検出部の検出結果に基づいて、会話に含まれる音声が、店員の音声であるか顧客の音声であるかを判別することが好ましい。
この構成によれば、発話検出部を用いることで、正確に店員と顧客の音声を判別し、ひいては、より正確に接客区間を特定できる。
なお、発話検出部としては、例えば、人物の音声が骨や肉を伝わって体表に届く体導音を検出する体導音センサーが挙げられる。この場合、体導音センサーは、頭頚部の体表に装着されることが好ましい。
なお、発話検出部としては、例えば、人物の音声が骨や肉を伝わって体表に届く体導音を検出する体導音センサーが挙げられる。この場合、体導音センサーは、頭頚部の体表に装着されることが好ましい。
上記に記載の接客支援装置において、監視部は、店員と顧客の接客状況を撮像する接客撮像部を含み、接客切替検出部は、接客撮像部により撮像された映像に基づいて、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、天井、机、店員などに取り付けられたカメラにより、接客状況を撮像することで、対象顧客の切り替わりを検出できる。
上記に記載の接客支援装置において、接客切替検出部は、映像の画像認識により、店員を特定し、当該店員の所定の行動を検出することにより、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、店員の所定の行動を検出することにより、対象顧客の切り替わりを容易に検出できる。
なお、所定の行動としては、接客終了時に行うお辞儀など、自然発生するアクションが考えられる。また、店舗ごとに、接客終了時に行うアクション(合図)を決めておき、そのアクションの検出により、対象顧客の切り替わりを検出しても良い。この場合のアクションとしては、例えば「カメラに向かいVサインを行う」、「所定の場所に移動する」など、通常接客時に行わないアクションが考えられる。
なお、所定の行動としては、接客終了時に行うお辞儀など、自然発生するアクションが考えられる。また、店舗ごとに、接客終了時に行うアクション(合図)を決めておき、そのアクションの検出により、対象顧客の切り替わりを検出しても良い。この場合のアクションとしては、例えば「カメラに向かいVサインを行う」、「所定の場所に移動する」など、通常接客時に行わないアクションが考えられる。
上記に記載の接客支援装置において、監視部は、店員に取り付けられ、当該店員の動作を検出する動作検出部を含み、接客切替検出部は、動作検出部の検出結果に基づいて、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、角度センサー、重力センサー、ジャイロセンサー、接触センサー、赤外線センサーなど、店員に取り付けられた各種センサーにより、店員の動作を検出することで、対象顧客の切り替わりを検出できる。
なお、各種センサー以外に、店員によって操作されるタッチ式ボタンなど、各種操作手段を、動作検出部として用いても良い。
なお、各種センサー以外に、店員によって操作されるタッチ式ボタンなど、各種操作手段を、動作検出部として用いても良い。
上記に記載の接客支援装置において、接客切替検出部は、動作検出部により店員の上半身が傾く動作を検出したことにより、対象顧客の切り替わりを検出することが好ましい。
この構成によれば、店員の上半身が傾く動作により、接客終了時に行うお辞儀が行われたと判定できるため、当該動作検出により、対象顧客の切り替わりを正確に検出できる。
なお、店員の動作としては、上記のような、自然発生する動作の他、店舗ごとに、接客終了時に行う動作を決めておき、その動作の検出により、対象顧客の切り替わりを検出しても良い。この場合の動作としては、例えば「店員カードをさわる」、「ポケットをたたく」など、通常接客時に行わない動作が考えられる。
なお、店員の動作としては、上記のような、自然発生する動作の他、店舗ごとに、接客終了時に行う動作を決めておき、その動作の検出により、対象顧客の切り替わりを検出しても良い。この場合の動作としては、例えば「店員カードをさわる」、「ポケットをたたく」など、通常接客時に行わない動作が考えられる。
上記に記載の接客支援装置において、店員と顧客の会話に基づく音声データを録音する音声データ録音部と、切替検出データに基づいて、検出開始からN番目(但し、NはN≧1となる整数)の検出時刻を区間開始時刻とし、且つN+1番目の検出時刻を区間終了時刻とする接客切替区間を特定する接客切替区間特定部と、店員識別情報に、接客切替区間特定部により特定された接客切替区間に相当する音声データである録音データを関連付け、接客データとしてデータベースに記録する接客データ記録部と、をさらに備えたことが好ましい。
上記に記載の接客支援装置において、接客切替区間に含まれる、店員による各話し掛け区間の長さの合計であるΣLa(但し、ΣLaはΣLa≧0となる変数)と、顧客による各話し掛け区間の長さの合計であるΣLb(但し、ΣLbはΣLb≧0となる変数)と、を算出し、ΣLaとΣLbの比率、若しくはΣLaまたはΣLbの(ΣLa+ΣLb)に対する比率である会話比率を算出する会話比率算出部をさらに備え、接客データ記録部は、店員識別情報および録音データに、会話比率を関連付け、接客データとしてデータベースに記録することが好ましい。
これらの構成によれば、切替検出データに基づいて接客切替区間(顧客別の接客区間)を特定し、当該接客切替区間の録音データを、接客データとして記録するため、これを有用なマーケティングデータとして利用できる。また、顧客別の接客切替区間を特定することで、当該接客切替区間ごとに会話比率を算出できる。また、算出した会話比率は、接客データの一部として記録されるため、これを接客手法の教材として利用できると共に、各接客(接客データ)について良い接客であったか否かを判別できる。これにより、例えば、会話比率から良い接客と考えられる接客状況を、各店員に示すなど、接客スキルの水平展開に役立てることができる。
上記に記載の接客支援装置において、店員と顧客の会話に基づく音声データを録音する音声データ録音部と、切替検出データに基づいて、検出開始からN番目(但し、NはN≧1となる整数)の検出時刻を区間開始時刻とし、且つN+1番目の検出時刻を区間終了時刻とする接客切替区間を特定する接客切替区間特定部と、録音された音声データから、店員の話し掛けによる音声区間である店員話し掛け区間と、顧客の話し掛けによる音声区間である顧客話し掛け区間と、を抽出する話し掛け区間抽出部と、店員と顧客による話し掛け区間が所定時間以上途切れないまま交互に繰り返される話し掛け区間の集合体を1会話区間、所定時間以上途切れないまま繰り返される会話区間の集合体を1接客会話区間、としたとき、当該接客会話区間を特定する接客会話区間特定部と、接客会話区間特定部により特定された接客会話区間と、接客切替区間特定部により特定された接客切替区間とを、比較演算することにより、接客区間を特定する接客区間特定部と、店員識別情報に、接客区間特定部により特定された接客区間に相当する音声データである録音データを関連付け、接客データとしてデータベースに記録する接客データ記録部と、をさらに備えたことが好ましい。
上記に記載の接客支援装置において、接客区間に含まれる、店員による各話し掛け区間の長さの合計であるΣLa(但し、ΣLaはΣLa≧0となる変数)と、顧客による各話し掛け区間の長さの合計であるΣLb(但し、ΣLbはΣLb≧0となる変数)と、を算出し、ΣLaとΣLbの比率、若しくはΣLaまたはΣLbの(ΣLa+ΣLb)に対する比率である会話比率を算出する会話比率算出部をさらに備え、接客データ記録部は、店員識別情報および録音データに、会話比率を関連付け、接客データとしてデータベースに記録することが好ましい。
これらの構成によれば、切替検出データに基づいて特定した接客切替区間と、音声データによって特定した接客会話区間とを、比較演算(and演算またはor演算など)することにより、正確な接客区間を特定できる。また、当該接客区間の録音データを、接客データとして記録するため、これを有用なマーケティングデータとして利用できる。また、正確な接客区間を特定することで、信頼性の高い会話比率を算出できる。また、算出した会話比率は、接客データの一部として記録されるため、これを接客手法の教材として利用できると共に、各接客(接客データ)について良い接客であったか否かを判別できる。これにより、例えば、会話比率から良い接客と考えられる接客状況を、各店員に示すなど、接客スキルの水平展開に役立てることができる。
本発明のプログラムは、コンピューターに、上記に記載の接客支援方法における各ステップを実行させることを特徴とする。
このプログラムを用いることにより、接客対象となる顧客別に接客区間を特定可能な接客支援方法を実現できる。
[第1実施形態]
以下、添付の図面を参照し、本発明の会話比率算出装置、接客データ記録装置、会話比率算出方法およびプログラムについて説明する。なお、以下に示す各実施形態では、本発明の会話比率算出装置を、接客支援システムSYに適用した場合について例示する。当該接客支援システムSYは、小売業、飲食業およびサービス業などに関する店舗や会場内において、人物(顧客,来場者)の音声を取得し、その結果を顧客満足度の向上や接客スキルの向上に生かすべく構築されたものである。そこで、以下の各実施形態では、アパレル店や宝飾品店などの小売店舗内に、接客支援システムSYを導入する場合を例示する。
以下、添付の図面を参照し、本発明の会話比率算出装置、接客データ記録装置、会話比率算出方法およびプログラムについて説明する。なお、以下に示す各実施形態では、本発明の会話比率算出装置を、接客支援システムSYに適用した場合について例示する。当該接客支援システムSYは、小売業、飲食業およびサービス業などに関する店舗や会場内において、人物(顧客,来場者)の音声を取得し、その結果を顧客満足度の向上や接客スキルの向上に生かすべく構築されたものである。そこで、以下の各実施形態では、アパレル店や宝飾品店などの小売店舗内に、接客支援システムSYを導入する場合を例示する。
図1は、第1実施形態に係る接客支援システムSY1のシステム構成図である。同図に示すように、接客支援システムSY1は、店員に装着された体導音センサー1、音声取得用マイク2および店員用端末5と、店舗の入り口および店内各所に配置された店内カメラ11(同図では、1台のみ図示)と、レジカウンター14に設置されたPOS(Point Of Sales)端末12およびレシートプリンター13と、店舗のバックヤードに設置された管理サーバー15および表示端末16と、から成る。なお、請求項におけるコンピューターは、体導音センサー1以外の各装置から成る。
体導音センサー1は、店員の頭頚部に装着され、店員の音声が骨や肉を伝わって体表に届く体導音を検出する。本実施形態では、音声取得用マイク2により取得された音声が、店員(人物A)のものであるか顧客(人物B)のものであるかを識別するために用いられる。音声取得用マイク2は、店員の制服(胸元近傍)に取り付けられ、店員および顧客の音声を取得する。なお、体導音センサー1および音声取得用マイク2に代えて、店員と顧客に対してそれぞれ指向性を有するマイクを用いても良い。すなわち、店員音声取得用と顧客音声取得用との2つのマイクを使用し、いずれのマイクで取得されたかによって、店員の音声と顧客の音声を識別しても良い。
店員用端末5は、店員の制服(ベルトなど)に取り付けられ、専用ケーブルを介して体導音センサー1および音声取得用マイク2と接続されている。また、レシートプリンター13との無線通信機能を有しており、当該レシートプリンター13を介して、管理サーバー15と情報の授受を行う。店内カメラ11は、店内各所の天井や壁に設けられ、来店した顧客、並びに接客中の店員および顧客を撮像する。なお、店内カメラ11としては、CCDカメラやPTZ(Pan Tilt Zoom)カメラを採用可能である。
POS端末12は、一般的なレジスターの構成を有しており、POSアプリケーションにしたがって会計処理を行う。また、不図示のバーコードスキャナーまたはキーボードから商品コードを取得し、商品マスタ18を参照して、会計レシートR(図3参照)に印刷するためのレシートデータを生成する。なお、商品マスタ18は、POS端末12に接続されたPOSサーバー(図示省略)内に備えても良い。
レシートプリンター13は、POS端末12と専用ケーブルを介して接続され、POS端末12から取得したレシート印刷データをレシート用紙に印刷する。また、レシートプリンター13は、店員用端末5との無線通信機能および管理サーバー15との有線通信機能を有している。このように、レシートプリンター13を主幹として各種情報の入出力を行うことで(レシートプリンター13が、取得した各種情報をフィルタリングして必要な情報を出力することで)、POS基幹ネットワーク(POS端末12を主幹としたネットワーク)のトラフィックに影響を与えることがない。また、既存のPOSシステムに本発明を適用する際、POS基幹ネットワーク自体の変更が不要となる。
管理サーバー15は、レシートプリンター13と、イントラネット等のネットワーク19を介して接続されており、当該レシートプリンター13を介して、店員用端末5と各種情報の授受を行う。また、店員用端末5から取得した音声データに基づいて、音声データの録音、会話比率の算出および重複回数の計測などを行う。また、管理サーバー15は、算出した会話比率や、録音した音声データを確認するためのビューアー画面D(図16等参照)を、表示端末16の表示画面16aに表示する。
次に、図2ないし図4を参照し、店員用端末5、レシートプリンター13および管理サーバー15のハードウェア構成について説明する。図2は、店員用端末5の制御ブロック図である。店員用端末5は、レシートプリンター13との無線通信機能を実現するための無線LANアンテナ21、無線LANRF(Radio Frequency)部22、無線LAN変復調部23および無線LANベースバンド部24を有している。無線LANベースバンド部24は、店員用端末5を識別するためのMACアドレスを記憶している。また、店員用端末5は、体導音センサー1の検出結果を取得するためのアンプ部28およびA/Dコンバータ29と、音声取得用マイク2から音声データを取得するためのアンプ部32およびA/Dコンバータ33と、を有している。
また、店員用端末5は、各部の統括制御を行う制御部25と、ファームウェアを初めとする各種データ(音声取得用マイク2から音声データも含む)を記憶するメモリ26と、店員用端末5に電力供給を行うバッテリー34と、を有している。制御部25は、A/Dコンバータ29およびA/Dコンバータ33から取得した検出データおよび音声データに基づいて、店員の発話区間(連続する音声の時間帯)を特定する店員発話区間特定機能と、音声データに基づいて、音声レベルを判定する音声レベル判定機能と、を有している。
図3は、レシートプリンター13の制御ブロック図である。レシートプリンター13は、店員用端末5との無線通信機能を実現するための無線LANアンテナ41、無線LANRF部42、無線LAN変復調部43および無線LANベースバンド部44を有している。無線LANベースバンド部44は、レシートプリンター13を識別するためのMACアドレスを記憶している。また、レシートプリンター13は、POS端末12からレシートデータが入力される入力インターフェイス部45と、文字パターンを記憶するCG−ROM46と、各部の統括制御を行う制御部47と、印刷ヘッド、ヘッド駆動機構およびレシート用紙搬送機構などを含む印刷機構48と、管理サーバー15と有線LANを介して接続される有線LANインターフェイス部49と、を有している。
制御部47は、所定のコマンドを含むレシートデータの解析や、会計レシートRに印刷するための印刷データの生成などを行うメイン処理部47aと、本実施形態特有の構成であるレシートデータ意味解析部47bと、を有している。レシートデータ意味解析部47bは、レシートデータから、POS端末12の端末番号、レシート番号、商品コード、商品名称、商品単価、金額、オペレーター氏名などを認識し、上位システムとなる管理サーバー15が解釈可能な所定のデータ形式(例えば、XML形式)に変換する。なお、当該レシートデータの認識結果を所定のデータ形式に変換したものを、以下「変換データ」と称する。また、制御部47は、店員用端末5から無線LANを介して受信した音声データ(無線LANベースバンド部44から取得した音声データ)を、有線LANインターフェイス部49を介して、管理サーバー15に転送する。
図4は、管理サーバー15の制御ブロック図である。管理サーバー15は、レシートプリンター13から、音声データおよび変換データを取得すると共に、店内カメラ11から映像データを取得するための有線LANインターフェイス部51と、表示端末16に各種情報を表示させるための表示処理部52と、マウスやキーボードなどの入力装置55から入力データを取得すると共に各部の統括制御を行う制御部53と、各種情報を記憶する記憶部54と、を有している。制御部53は、取得した音声データに基づいて、接客区間(店員が顧客に対して接客を行っている時間帯)を特定する接客区間特定機能と、接客区間あたりの店員と顧客の会話比率を算出する会話比率算出機能と、接客区間あたりの会話の重複回数を計測する重複回数計測機能と、入力装置55からの情報入力に基づいてビューアー画面D(図16等参照)の表示制御を行うビューアー画面表示制御機能と、を有している。また、記憶部54は、ハードディスクにより実現され、音声抽出プログラムや会話比率算出プログラムなどの各種制御プログラムを記憶する他、後述する管理サーバー用データベースDB1として機能する。
次に、図5を参照し、音声区間の定義について説明する。まず、同一人物(店員または顧客)により連続して発声される音声の区間、つまりブレスなどが入らない1フレーズの区間を「発話区間」と称する。本実施形態では、当該発話区間単位で、感情認識や音声認識を行う。また、図5(a)に示すように、所定時間以上途切れないまま繰り返される店員または顧客の発話区間の集合体を「話し掛け区間」と称する。つまり、インターバルが所定時間X未満となる1以上の発話区間の集合体を言う(但し、XはX>0となる定数)。同図の例は、店員の話し掛け区間(以下、「店員話し掛け区間」と称する)、並びに当該店員の話し掛け区間に前後する2つの顧客の話し掛け区間(以下、「顧客話し掛け区間」と称する)が、全て2つの発話区間から成る場合を示している。
また、同じく図5(a)に示すように、店員と顧客の話し掛け区間が所定時間以上途切れないまま交互に繰り返される話し掛け区間の集合体を「会話区間」と称する。つまり、インターバルが所定時間Y未満となる1以上の話し掛け区間の集合体を言う(但し、YはY≧Xとなる定数)。なお、本実施形態では、店員話し掛け区間を中心とした前後の顧客話し掛け区間の集合体(すなわち最低1つ、最大3つの話し掛け区間の集合体)を「1会話パターン」=「1会話区間」と定義する。
また、図5(b)に示すように、所定時間以上途切れないまま繰り返される会話区間の集合体を「接客区間」と称する。つまり、インターバルが所定時間Z未満となる1以上の会話区間の集合体を言う(但し、ZはZ>Yとなる定数)。同図の例は、2つの会話区間から成る接客区間1と、3つの会話区間から成る接客区間2と、を示している。このように、接客区間に含まれる会話区間の数は任意である。なお、Zの値は、数分〜数十分程度など、XやYの値と比較して明らかに大きな値とすることが好ましい。
次に、図6および図7を参照し、第1実施形態に係る接客支援システムSY1の機能構成について説明する。図6は、接客支援システムSY1のブロック図である。店内カメラ11は、主な機能構成として、接客撮像部111を有している。接客撮像部111は、店員および顧客を含む接客状況を撮像する。本実施形態において、接客撮像部111は常時撮像を行っており、その映像データは、随時管理サーバー15に出力される。
体導音センサー1は、主な機能構成として、発話検出部101を有している。発話検出部101は、体導音に基づいて、店員が発話したこと、およびその発話区間を検出する。音声取得用マイク2は、主な機能構成として、会話取得部102を有している。会話取得部102は、店員および顧客の会話に基づく音声(音声信号)を取得する。店員用端末5は、主な機能構成として、音声データ送信部105を有している。音声データ送信部105は、音声レベル判定機能にあるパワーフィルターにより音声の有無を判定し、所定の音声レベル以上(例えば、アンプ増幅後1.5v以上など)の音声データを管理サーバー15に送信する。また、発話検出部101の検出結果および会話取得部102の音声取得結果に基づいて店員発話区間を特定し(店員発話区間特定機能)、当該店員発話区間の発生を管理サーバー15に通知する。なお、店員用端末5と管理サーバー15は、レシートプリンター13を介して通信を行う。
レシートプリンター13は、主な機能構成として、変換データ送信部113を有している。変換データ送信部113は、POS端末12から出力されたレシートデータをXML形式に変換した変換データを、管理サーバー15に送信する。
管理サーバー15は、主な機能構成として、映像記録部151、人物識別部152、音声データ録音部153、音声抽出部154、会話比率算出部155、重複回数計測部156、変換データ取得部157、接客データ記録部158、画面表示部159および管理サーバー用データベースDB1を有している。
映像記録部151は、接客撮像部111から、映像データを取得し、これを管理サーバー用データベースDB1に記録する。人物識別部152は、映像データに含まれる顔特徴量に基づいて店員および顧客を識別する。例えば、店員については、予め店員識別情報と店員の顔特徴量とを関連付けて管理サーバー用データベースDB1内に記憶しておく(図7の店員情報記憶部82参照)。また、店内カメラ11の撮像結果を解析して顔検出を行い、検出した当該顔部分の画像を正規化して算出された顔特徴量と、管理サーバー用データベースDB1に記憶されている店員の顔特徴量とを照合し、それらの中から最も類似度の高い店員であると判定する。同様に、顧客についても、予め顧客識別情報と顧客の顔特徴量とを関連付けて管理サーバー用データベースDB1内に記憶しておき(図7の顧客情報記憶部81参照)、算出された顧客の顔特徴量と、管理サーバー用データベースDB1に記憶されている多数の顧客の顔特徴量とを照合し、それらの中から最も類似度の高い顧客であると判定する。なお、人物識別部152の識別結果である店員識別情報と顧客識別情報は紐付けされ、後述する接客データ記憶部88に記憶される。
音声データ録音部153は、店員と顧客の会話、すなわち音声データ送信部105から送信された音声データを録音する(管理サーバー用データベースDB1に記録する)。音声抽出部154は、取得した会話(音声データ)から、店員音声と顧客音声をそれぞれ抽出する。具体的には、発話検出部101の検出結果に基づいて、会話に含まれる音声が店員音声であるか顧客音声であるかを判別し、当該判別結果に基づいて各音声を抽出する。なお、各音声は、発話区間単位または話し掛け区間単位で抽出する。詳細については後述する。
会話比率算出部155は、制御部53の会話比率算出機能を指すものであり、店員と顧客の会話比率を算出する。具体的には、会話区間ごとに会話比率を算出し、当該会話区間ごとの算出結果に基づいて、接客区間ごとの会話比率(平均会話比率)を算出する。算出された会話比率は、接客データの一部として、接客データ記憶部88に記憶される。なお、会話比率の算出アルゴリズムについては後述する。
重複回数計測部156は、制御部53の重複回数計測機能を指すものであり、接客区間において、店員の音声と顧客の音声とが重複した回数(重複区間の個数)である重複回数を計測する。計測された重複回数は、接客データの一部として、接客データ記憶部88に記憶される。なお、重複区間の検出方法および重複区間の計測方法についても後述する。
変換データ取得部157は、レシートプリンター13の変換データ送信部113から送信された変換データを取得し、管理サーバー用データベースDB1に記録する。なお、変換データは、上記の接客データの一部として記録する、売り上げ情報を得るために用いられる。なお、変換データの記録は、変換データに含まれる情報の中から、顧客識別情報(会員番号など)、レシート番号(売り上げNo.)および合計金額など、売り上げの有無や売り上げ金額を特定可能な情報のみを抽出し、これを売り上げ情報として記録しても良いし、変換データの全てを管理サーバー用データベースDB1に記録しても良い。
接客データ記録部158は、接客区間ごとに、人物識別部152の識別結果である店員識別情報および顧客識別情報、並びに会話比率算出部155の算出結果などを含む接客データを紐付けして、管理サーバー用データベースDB1に記録する。なお、顧客識別情報および店員識別情報は、上記のとおり顔特徴量から特定される。また、店員識別情報と、店員用端末5のMACアドレスとは、対応付けて記憶されており(図7の店員情報記憶部82参照)、管理サーバー15が取得した映像データと音声データの紐付けができるようになっている。
画面表示部159は、記録した接客データを確認するためのビューアー画面D(図16等参照)を表示画面16a上に表示する。なお、ビューアー画面Dについても、具体例を挙げて後に詳述する。
図7は、第1実施形態に係る管理サーバー用データベースDB1の説明図である。管理サーバー用データベースDB1は、顧客情報記憶部81、店員情報記憶部82、音声データ記憶部83、映像データ記憶部84、音声データ管理テーブル85、店員発話区間管理テーブル86、顧客発話区間管理テーブル87および接客データ記憶部88として機能する。なお、管理サーバー用データベースDB1は、店舗ごとに設けても良いし、複数店舗で共有しても良い。
顧客情報記憶部81は、顧客識別情報(顧客IDなど)と、顧客の顔特徴量と、顧客データ(氏名、住所、電話番号、生年月日、性別などの個人情報を含む)と、を関連付けて記憶する。また、店員情報記憶部82は、店員識別情報(店員IDなど)と、店員の顔特徴量と、店員用端末5のMACアドレスと、を関連付けて記憶する。また、音声データ記憶部83は、音声データ録音部153により常時録音された音声データをタイムスタンプと共に記憶する。また、映像データ記憶部84は、接客撮像部111により常時撮像された映像データをタイムスタンプと共に記憶する。
また、音声データ管理テーブル85は、店員と顧客を区別することなく、取得した音声データを、連続する音声の区間(以下、「連続発話区間」と称する)ごとに記録したテーブルである(図9(a)参照))。また、店員発話区間管理テーブル86は、店員の発話区間を記録したテーブルである(図9(b)参照)。また、顧客発話区間管理テーブル87は、顧客の発話区間を記録したテーブルである(図9(c)参照)。
また、接客データ記憶部88は、人物識別部152の識別結果である顧客識別情報および店員識別情報と、音声データ記憶部83に記憶された音声データのうち、接客区間分の音声データに相当する録音データと、映像データ記憶部84に記憶された映像データのうち、接客区間分の映像データに相当する撮像データと、会話比率算出部155の算出結果である、当該接客区間の会話比率と、重複回数計測部156の計測結果である、当該接客区間の重複回数と、当該接客による(接客区間内または接客区間終了後所定時間以内に発生した)売り上げの有無および売り上げ金額を示す売り上げ情報と、接客日並びに接客開始時刻および接客終了時刻を示す接客日時と、を関連付けて記憶する。なお、売り上げ情報については、精算場所に設置された店内カメラ11により撮影された顧客の映像から算出された顧客の顔特徴量と、予め管理サーバー用データベースDB1内に記憶されている多数の顧客の顔特徴量とを照合し、それらの中から最も類似度の高い顧客の顧客識別情報によって、紐付けされる接客データを特定可能である。また、レシートプリンター13から送信された変換データに含まれる顧客識別情報によって、紐付けされる接客データを特定することも可能である。また、変換データに店員識別情報(オペレーター氏名または店員番号など)が含まれる場合は、顧客識別情報および店員識別情報の両方が合致する接客データに、紐付けされることが好ましい。
次に、図8を参照し、各種会話比率の算出アルゴリズム(計算式)について説明する。図8(a)に示すように、会話区間における会話比率としては、「店員:顧客の相対会話比率」、「店員の会話比率」および「顧客の会話比率」の3つのパターンを算出可能である。例えば、「店員:顧客の相対会話比率」は、会話区間に含まれる各店員話し掛け区間の長さの合計をLa、会話区間に含まれる各顧客話し掛け区間の長さの合計をLbとしたとき、La:Lbの値を指す。また、「店員の会話比率」は、La/(La+Lb)の値を指し、顧客の会話比率は、「Lb/(La+Lb)」の値を指す。ここで、「話し掛け区間の長さ」とは、話し掛け区間の開始時刻から終了時刻までの長さを言う。
なお、Laを、会話区間に含まれる各店員発話区間の長さの合計として規定しても良い。つまり、図5(a)に示すように、話し掛け区間には、インターバルXが含まれる場合があるが、そのインターバルの長さを差し引いた長さとしてLaを規定しても良い。例えば、図5(a)に示す顧客話し掛け区間Aの場合、Laは、発話区間1の開始時刻から終了時刻までの長さと、発話区間2の開始時刻から終了時刻までの長さの合計となる。Lbについても同様である。
一方、図8(b)に示すように、接客区間における会話比率は、接客区間に含まれる各会話区間の会話比率の平均値によって算出可能である。なお、各会話区間の会話比率の平均値に代えて、最高値、最低値、中間値などの各種統計量を、接客区間における会話比率として算出しても良い。また、接客区間における会話比率も、会話区間における会話比率(図8(a)参照)としてどのパターンを採用したかに応じて、「店員:顧客の相対会話比率」、「店員の会話比率」および「顧客の会話比率」の3つのパターンを算出可能である。
また、接客区間における会話比率の算出方法の変形例として、図8(c)のアルゴリズムを用いても良い。この場合、「店員:顧客の相対会話比率」は、接客区間に含まれる各店員話し掛け区間の長さの合計をΣLa、接客区間に含まれる各顧客話し掛け区間の長さの合計をΣLbとしたとき、ΣLa:ΣLbの値を指す。また、「店員の会話比率」は、ΣLa/(ΣLa+ΣLb)の値を指し、「顧客の会話比率」は、ΣLb/(ΣLa+ΣLb)の値を指す。
なお、Laを、会話区間に含まれる各店員発話区間の長さの合計として規定したのと同様に、ΣLaを、接客区間に含まれる各店員発話区間の長さの合計として規定しても良い。ΣLbについても同様である。
次に、図9を参照し、音声データ管理テーブル85、店員発話区間管理テーブル86および顧客発話区間管理テーブル87について説明する。図9(a)は、音声データ管理テーブル85の一例を示す図である。音声データ管理テーブル85は、店員と顧客の音声を区別しない連続する音声の区間である連続発話区間(少なくとも1の発話区間が含まれる区間)ごとに付与される「音声データNo.」と、連続発話区間の開始時間に相当する「録音開始時間」と、連続発話区間の終了時間に相当する「録音終了時間」と、顧客の発声に基づく音声データか、店員の発声に基づく音声データか、または両方の発声に基づく音声データかを示す「重複フラグ」と、音声データを保存する「音声データ保存先アドレス」と、を関連付けたものである。例えば、「音声データNo.:201」の音声データは、12時36分03秒を開始時間とし12時36分16秒を終了時間とする連続発話区間であり、少なくとも一部の区間において、顧客の音声と店員の発声が重複していることを示している。
図9(b)は、店員発話区間管理テーブル86の一例を示す図である。店員発話区間管理テーブル86は、店員発話区間ごとに付与される「店員発話No.」と、店員発話区間の開始時間である「店員発話開始時間」と、店員発話区間の終了時間である「店員発話終了時間」と、どの店員話し掛け区間に属するかを示す「話し掛けNo.」と、顧客の発声との重複区間の開始時間である「重複開始時間」と、顧客の発声との重複区間の終了時間である「重複終了時間」と、を関連付けたものである。例えば、「店員発話No.:100」と「店員発話No.:101」の発話区間は、インターバルが所定時間X(例えば、3秒)未満であるため、一連の話し掛け区間と看做され、同一の話し掛けNo.が付加されている。また、「店員発話No.:100」の発話区間は、その区間全体が顧客の発声と重複していることを示している。
図9(c)は、顧客発話区間管理テーブル87の一例を示す図である。顧客発話区間管理テーブル87は、顧客発話区間ごとに付与される「顧客発話No.」と、顧客発話区間の開始時間である「顧客発話開始時間」と、顧客発話区間の終了時間である「顧客発話終了時間」と、どの顧客話し掛け区間に属するかを示す「話し掛けNo.」と、店員の発声との重複区間の開始時間である「重複開始時間」と、店員の発声との重複区間の終了時間である「重複終了時間」と、を関連付けたものである。例えば、「顧客発話No.:101」と「顧客発話No.:102」の発話区間は、インターバルが所定時間X(例えば、3秒)を超えているため、異なる話し掛け区間と看做され、異なる話し掛けNo.が付与されている。また、「顧客発話No.:100」の発話区間は、13秒の区間長さのうち6秒間が店員の発声と重複していることを示している。
次に、図10のフローチャートを参照し、音声データ保存処理について説明する。なお、上記のとおり、店員用端末5と管理サーバー15は、レシートプリンター13を介して通信を行うが、レシートプリンター13は単に情報を経由しているだけなので、図示を省略する。
店員用端末5(制御部25)は、音声取得用マイク2から音声信号(音声)を取得すると(S11)、音声レベル判定機能のパワーフィルターにより音声レベルを判定する(S12)。ここで、音声レベルが所定レベル以上の場合、音声「有」と判定し、メモリ26内の音声データ保存領域(図示省略)に音声データのバッファリングを開始する(S13)。また、このとき、音声データ保存領域に録音開始時間を記録する。
続いて、音声信号を受信しなくなると、録音終了時間を確定して音声データ保存領域に記録すると共に、バッファリングを終了する(S14)。その後、管理サーバー15に対して、音声データの送信を宣言し(S15)、音声データ保存領域にバッファリングされた音声データを、録音開始時間および録音終了時間と共に送信する(S16)。
管理サーバー15(制御部53)は、店員用端末5から音声データを受信すると(S17)、音声データ管理テーブル85(図9(a)参照)に、一意に定めた音声データNo.と、録音開始時間および録音終了時間を登録する(S18)。また、音声データ管理テーブル85で指定された音声データ保存先(所定のフォルダ)に、音声データを保存する(S19)。
次に、図11ないし図14のフローチャートを参照し、接客区間特定処理の一連の流れについて説明する。図11は、メイン処理(接客区間特定処理)を示すフローチャートであり、図12ないし図14は、そのサブルーチンを示すフローチャートである。図11に示すように、管理サーバー15(制御部53)は、まず店員話し掛け区間を特定した後(S21)、店員話し掛け区間の後に発生した顧客話し掛け区間Bを特定する(S22)と共に、店員話し掛け区間の前に発生した顧客話し掛け区間Aを特定する(S23)。その後、これらS21〜S23の工程により特定された話し掛け区間に基づいて、会話区間を特定する(S24,図5(a)参照)。また、S21〜S24の工程を繰り返すことにより、接客区間を特定する(S25,図5(b)参照)。
次に、図12のフローチャートを参照し、図11のS21に相当する店員話し掛け区間特定処理について説明する。店員用端末5は、体導音センサー1からその検出データを取得すると(S31)、店員発話区間特定機能のパワーフィルターにより検出レベルを判定し、所定レベル以上の場合、その検出時間を店員発話開始時間として確定し、メモリ26内に記録する(S32)。続いて、店員発話区間特定機能のパワーフィルターにより検出レベルを判定し、一定時間以上所定レベル未満の状態が保持された場合(無信号区間が発生した場合)、所定レベル以上の検出レベルがあった最後の検出時間を店員発話区間終了時間として確定し、メモリ26内に記録する(S33)。その後、管理サーバー15に対して、店員発話区間の発生通知を行う(S34)。このとき、メモリ26内に記録されている店員発話開始時間および店員発話終了時間も送信する。
一方、管理サーバー15(制御部53)は、店員用端末5から店員発話区間の発生通知を受信すると(S35)、店員発話区間管理テーブル86(図9(b)参照)に、一意に定めた店員発話データNo.と、店員話し掛け区間ごとに定めた店員話し掛けNo.と、店員発話開始時間および店員発話終了時間を登録する(S36)。その後、所定時間内に次の店員発話区間の発生通知を受信したか否かを判別し(S37)、受信した場合は(S37:Yes)、一意に定めた店員発話データNo.と、上記と同じ店員話し掛けNo.と、店員発話開始時間および店員発話終了時間を登録する(S36)。これにより、前に発生した店員発話区間と今回発生した店員発話区間とを、一連の話し掛け区間として定義することができる。なお、所定時間内に次の店員発話区間の発生通知を受信しなかった場合は(S37:No)、店員による一連の話し掛け区間が終了したとして、処理を終了する。
次に、図13のフローチャートを参照し、図11のS22に相当する顧客話し掛け区間B特定処理について説明する。管理サーバー15(制御部53)は、店員による一連の話し掛け区間の特定が終了した後、音声データ管理テーブル85を参照し、最後の店員発話区間の店員発話終了時間から所定時間内に音声データが存在するか否かを判別する(S41)。ここで、音声データが存在しない場合は(S41:No)、顧客話し掛け区間Bは存在しないものとして処理を終了する。また、音声データが存在する場合は(S41:Yes)、音声データ管理テーブル85から、その音声データの録音開始時間と録音終了時間を読み込み、一意に定めた顧客発話No.と、顧客話し掛け区間ごとに定めた顧客話し掛けNo.と、顧客発話開始時間および顧客発話終了時間を顧客発話区間管理テーブル87に登録する(S42)。
その後、音声データ管理テーブル85を参照し、最後の顧客発話区間の顧客発話終了時間から所定時間内に音声データが存在するか否かを判別し(S43)、存在する場合は(S43:Yes)、一意に定めた顧客発話No.と、上記と同じ顧客話し掛けNo.と、顧客発話開始時間および顧客発話終了時間を登録する(S42)。これにより、前に発生した顧客発話区間と今回発生した顧客発話区間とを、一連の話し掛け区間として定義することができる。なお、最後の顧客発話区間の顧客発話終了時間から所定時間内に音声データが存在しない場合は(S43:No)、顧客によるその後の話し掛け区間は存在しないものとして、処理を終了する。
次に、図14のフローチャートを参照し、図11のS23に相当する顧客話し掛け区間A特定処理について説明する。管理サーバー15は、顧客話し掛け区間Bの特定が終了した後、音声データ管理テーブル85を参照し、店員発話区間の店員発話開始時間から所定時間前までに、顧客の発声に基づく未処理の音声データが存在するか否かを判別する(S51)。ここで、未処理の音声データが存在しない場合は(S51:No)、顧客話し掛け区間Aが存在しないものとして、処理を終了する。また、未処理の音声データが存在する場合は(S51:Yes)、その音声データの録音開始時間と録音終了時間を読み込み、一意に定めた顧客発話No.と、顧客話し掛け区間ごとに定めた顧客話し掛けNo.と、顧客発話開始時間および顧客発話終了時間を顧客発話区間管理テーブル87に登録する(S52)。
その後、音声データ管理テーブル85を参照し、登録した顧客発話区間の顧客発話開始時間から所定時間前までに未処理の音声データが存在するか否かを判別し(S53)、存在する場合は(S53:Yes)、その音声データの録音開始時間と録音終了時間を読み込み、一意に定めた顧客発話No.と、上記と同じ顧客話し掛けNo.と、顧客発話開始時間および顧客発話終了時間を登録する(S52)。これにより、前に登録した顧客発話区間と今回特定した顧客発話区間とを、一連の話し掛け区間として定義することができる。なお、登録した顧客発話区間の顧客発話開始時間から所定時間前までに未処理の音声データが存在しない場合は(S53:No)、顧客によるそれ以前の話し掛け区間は存在しないものとして、処理を終了する。
以上、図10ないし図14に示した各処理により、音声データ管理テーブル85、店員発話区間管理テーブル86および顧客発話区間管理テーブル87への登録を行い、店員話し掛け区間、その前後における顧客話し掛け区間Aおよび顧客話し掛け区間Bを特定することができる。ここで、店員話し掛け区間と顧客話し掛け区間との重複区間の検出について簡単に説明する。管理サーバー15は、各話し掛け区間を特定した後、店員発話区間管理テーブル86および顧客発話区間管理テーブル87を参照し、重複区間の検出と、各テーブル85,86,87への記録を行う。具体的には、まず、店員発話区間管理テーブル86を参照し、同一話し掛けNo.の最も早い店員発話開始時間と最も遅い店員発話終了時間を、店員話し掛け区間の開始時間と終了時間に設定する。同様に、顧客発話区間管理テーブル87を参照し、同一話し掛けNo.の最も早い顧客発話開始時間と最も遅い顧客発話終了時間を、顧客話し掛け区間の開始時間と終了時間に設定する。そして、店員話し掛け区間と顧客話し掛け区間とに重複区間が存在しないかを判定し、存在する場合は、店員発話区間管理テーブル86および顧客発話区間管理テーブル87に、重複区間(重複開始時間および重複終了時間)を登録すると共に、音声データ管理テーブル85に重複フラグを立てる(図9(a)の重複フラグ欄における「客・店」に相当)。
次に、図15を参照し、重複回数の計測方法について説明する。図15(a)に示す例では、店員話し掛け区間と顧客話し掛け区間とが重複する重複区間が、4つ存在している。但し、2つ目の重複区間は、短い発話区間(所定時間以下の話し掛け区間)であるため、重複計測の対象とならない。したがって、同図の例では、重複計測区間(1)〜(3)の3回が、重複回数として計測される。
なお、重複計測区間(2),(3)は、1話し掛け区間に含まれる区間であるため、これを1重複計測区間として計測しても良い。この場合、図15(a)に示す例では、重複回数が2回と計測される。
また、所定時間以下の話し掛け区間についても、全ての重複区間を重複計測の対象としても良い。この場合、図15(a)に示す例では、重複回数が4回と計測される。
また、図15(b)に示す例のように、店員側からの話し掛けにより重複した区間のみを重複計測の対象としても良い。同図の例では、店員話し掛け区間と顧客話し掛け区間とが重複する重複区間が、4つ存在している。但し、2つ目と4つ目の重複区間は、顧客側からの話し掛けにより重複した区間であるため、重複計測の対象とならない。つまり、店員話し掛け区間が先行して開始されている状態で顧客の話し掛けが開始したような場合は、重複区間が発生しても、それを重複計測の対象としない。したがって、同図の例では、重複計測区間(1),(2)の2回が、重複回数として計測される。このように、店員側からの話し掛けにより重複した区間のみを重複計測の対象とすることで、店員の接客手法が良否を正確に判定することができる。
次に、図16および図17を参照し、接客データを確認するためのビューアー画面Dについて説明する。なお、ビューアー画面Dは、表示端末16の表示画面16aに表示される。図16は、会話比率一覧表のビューアー画面D01を示す図である。当該ビューアー画面D01には、照会条件を選択する照会条件選択領域E11と、会話比率の一覧を表示する一覧表示領域E12と、接客データに含まれる録音データの再生操作を行うための再生操作領域E13と、が含まれる。
照会条件選択領域E11は、「店舗」、「日付」、「店員(人物識別情報)」を選択(入力)可能となっている。ここで選択(入力)された条件に合致する接客データが、一覧表示領域E12に表示される。なお、「店員」ではなく、「顧客(人物識別情報)」を選択(入力)可能とし、当該顧客に関連付けられた接客データを、一覧表示領域E12に表示させても良い。また、「店員」と「顧客」の両方を選択(入力)可能とし、これらのand条件またはor条件を満たす接客データを、一覧表示領域E12に表示させても良い。
一覧表示領域E12は、接客データごとに、「店舗」、「日付」、「店員」、「接客区間No.」、「接客開始」、「接客終了」、「相対会話比率」、「重複回数」、「顧客」、「売り上げ金額」、「売り上げNo.」を関連付け、表形式で表示する。なお、「接客区間No.」は、接客区間ごとに自動付与される識別番号であり、「接客開始」および「接客終了」は、接客区間の開始時刻および終了時刻を指す。また、「相対会話比率」および「重複回数」は、当該接客区間における相対会話比率および重複回数を指す。また、「顧客」としては、当該接客の対象となった顧客氏名を表示し、「売り上げ金額」および「売り上げNo.」は、変換データから得られた、会計レシートRの合計金額およびレシートNo.を指す。なお、一覧表示領域E12では、いずれか1の接客データ(行)を選択可能となっており(枠211参照)、選択した接客データに含まれる録音データを、再生操作領域E13により再生可能である。
再生操作領域E13は、接客区間における録音データおよび撮像データの再生操作を行うためのボタン群212と、再生位置を示すプログレスバー213と、音量調節スライダ214と、を表示する。なお、特に図示しないが、管理サーバー15は、再生操作領域E13の操作にしたがって、録音データおよび撮像データを再生するための再生部(スピーカー等の音声出力部を含む)を備えている。プログレスバー213は、横軸方向に分単位の時間目盛りが記されている。また、プログレスバー213は、店員話し掛け区間と、顧客話し掛け区間と、重複区間と、これらいずれにも該当しない非会話区間と、を区別して表示する。同図では、異なるハッチと空白によって、これらを識別可能としているが、色分け表示、マーク付加表示、テキスト付加表示など、ユーザーが各区間を識別できれば、その表示形態を問わない。なお、プログレスバー213の目盛りは、分単位ではなく時間単位としても良い。また、接客データ内の録音データ全体の再生状況を把握できるように、録音データの長さに応じて、目盛りの単位および目盛り間隔を可変しても良い。
図17は、会話比率−売り上げ実績相関図のビューアー画面D02を示す図である。当該ビューアー画面D02には、照会条件を選択する照会条件選択領域E21と、会話比率と売り上げ実績(売り上げ情報)の相関図を表示する相関図表示領域E22と、が含まれる。
照会条件選択領域E21は、「店舗」、「日付区間」、「店員(人物識別情報)」を選択(入力)可能となっている。また、「店員」は、「ALL(全ての店員)」を選択可能となっている。ここで選択(入力)された条件に合致する接客データに基づいて、相関図表示領域E22が表示される。
相関図表示領域E22は、横軸を顧客会話比率(単位:%)、縦軸を客単価(単位:円)とした散布図である。ここでは、全店員の3月5日に接客した全ての接客データに基づいて、平均会話比率と売り上げ情報(客単価)の交点となる「点」がプロットされている。これにより、ユーザーは、その店舗にとって、会話比率をどの程度にすれば売り上げが向上するかを一目で把握できる。例えば、同図の例では、顧客会話比率を70%程度にすることにより、売り上げ向上に繋がると推測できる。
以上説明したとおり、第1実施形態に係る接客支援システムSY1によれば、店員と顧客の会話比率を算出することにより、これを収集して経営戦略に役立てたり、接客スキルのトレーニングに利用したりすることができる。また、接客データには、店員識別情報および顧客識別情報が関連付けられるため、算出された会話比率が、どの店員のどの顧客に対する接客であったかを特定できる。これにより、個々の店員に対して適切な接客トレーニングを行うことができる。さらに、接客データには、売り上げ情報が関連付けられるため、会話比率と売り上げとの相関関係を、マーケティングデータとして収集できる。
また、接客区間ごとに会話比率を算出し、これをビューアー画面Dに表示するため、各接客について、総合的に好ましい接客であったか否か(例えば、店員音声の長さ:顧客音声の長さが2:8に近い値となったか否か)を把握できる。また、接客データには、録音データが関連付けられるため、例えば、好ましい会話比率が関連付けられた録音データを抽出して再生することで、接客トレーニングの教材として利用できる。つまり、会話スキルの高い店員の接客状況を、それ以外の店員に対して効率的に示すことができるため、会話スキルの水平展開に役立つ。
また、接客データには、重複回数が関連付けられるため、会話比率だけでなく、当該重複回数からも、好ましい接客であったか否かを推測できる。例えば、重複回数が多い場合は、会話比率が好ましい値であったとしても、好ましい接客ではなかったと判断できる。
なお、第1実施形態の変形例として、会話比率と重複回数とに基づく接客点数を算出し、これをビューアー画面Dに表示させても良い。以下、図18を参照し、当該変形例について説明する。図18(a)に示すように、接客点数は、“会話比率レベル”および“重複回数レベル”をパラメーターとして算出される。また、“会話比率レベル”および“重複回数レベル”には、それぞれ重み付けP1およびP2が乗算され、それらの合計値が、接客点数となる。なお、一般的に重み付けは、0≦P2≦P1≦1となり、P2よりもP1の方が大きな値となる。つまり、接客点数は、“会話比率レベル”の方が“重複回数レベル”よりも重み付けを大きくして算出される。但し、利用される店舗の状況により、利用者が任意に設定できることが好ましい。
ここで、“会話比率レベル”とは、店員と顧客の会話比率が2:8に近いほど高い値となる。つまり、図18(b)に示すように、“会話比率レベル”は、顧客会話比率に応じて「0〜3」のいずれかの数値となる。また、“重複回数レベル”とは、重複回数が少ないほど高い値となる。つまり、図18(c)に示すように、“重複回数レベル”は、重複回数に応じて「0〜3」のいずれかの数値となる。
このように、接客点数を算出することで、接客についての判定を客観的に行うことができる。また、その判定結果や接客点数を、接客データの一部として記録してビューアー画面Dに表示することで、店長やマネージャーなどの管理者が、一目で接客結果を確認することができる。
なお、会話区間の終了ごと、若しくは接客区間の終了ごとに、好ましい接客であったか否かの判定結果および/または接客点数を、対象となる店員に対して通知しても良い。この場合、管理サーバー15によって、接客の判定および接客点数の算出を行い、レシートプリンター13および店員用端末5を介して、店員に装着された音声指示用イヤホン(図示省略)から、それらの情報を通知することが好ましい。この構成によれば、店員自身が接客中に、好ましい接客を行っているか否かを把握できるため、接客手法の向上が期待できる。
また、上記の実施形態では、店員話し掛け区間を中心とした前後の顧客話し掛け区間の集合体(すなわち最低1つ、最大3つの話し掛け区間の集合体)を「1会話区間」と定義したが、「1会話区間」に含まれる話し掛け区間の数の制限を無くしても良い。すなわち、店員と顧客の話し掛け区間が所定時間(インターバルY)以上途切れないまま交互に繰り返される話し掛け区間の集合体を「1会話区間」としても良い。
また、上記の実施形態では、店員と顧客の会話比率を算出する場合を例示したが、人物間の関係は、これに限定されるものではない。つまり、会社の上司と部下、夫婦やカップル、友人同士などであっても良い。
また、上記の実施形態では、会話区間または接客区間ごとに会話比率を算出したが、所定時間内における会話比率を算出しても良い。例えば、所定時間10分間の間に発声された店員と顧客の音声に基づいて会話比率を算出しても良い。また、店員の1日の勤務における会話比率を算出しても良い。
また、上記の実施形態では、会話区間ごと、または接客区間ごとに会話比率を算出したが、単純に、隣り合う店員と顧客の話し掛け区間に基づいて(2つの話し掛け区間の比に基づいて)、会話比率を算出しても良い。
また、上記の実施形態において、人物識別部152は、顔認識技術を用いて顧客を識別したが、他の方法を採用しても良い。例えば、無線IC(RFID:Radio Frequency Identificationなど)が組み込まれた会員カードを各顧客が所持し、これを店舗の入り口に設置したICリーダーで読み取って顧客識別情報を取得することで、顧客を識別しても良い。また、店員にも無線ICが組み込まれた店員カードの所持を義務付け、当該店員カードを読み取ることで店員を識別可能としても良い。この方法により、読み取った店員カードと会員カードを同時期に読み取った場合、当該店員が当該顧客を接客しているものとして、両者を紐付けることができる。また、磁気情報が記録された会員カード(磁気カード)を、POS端末12に付属の磁気カードリーダーで読み取ることで、顧客を識別しても良い。この場合は、接客を担当する店員が、同時に自分の店員カードを読み取らせることで、顧客と店員を紐付けることができる。なお、磁気カードリーダーは、管理サーバー15に直接接続しても良い。さらに、顔認識技術ではなく音声認識技術を用いても良い。この場合、顧客情報記憶部81および店員情報記憶部82は、顔特徴量に代えて、声紋を記憶する必要がある。
また、上記の実施形態では、店内カメラ11の撮像結果を、有線LANを介して直接管理サーバー15に送信する構成としたが、レシートプリンター13を介して管理サーバー15に送信しても良い。逆に、店員用端末5は、レシートプリンター13を介して管理サーバー15に音声データを送信する構成としたが、店員用端末5から直接管理サーバー15に送信しても良い。また、管理サーバー15の各機能を、POSシステムやWWWサーバーで実現しても良い。
[第2実施形態]
次に、図19ないし図23を参照し、本発明の接客データ記録装置、接客データ記録方法およびプログラムについて、第2実施形態として説明する。本実施形態に係る接客支援システムSY2は、会話比率データと満足度データとを関連付けた接客データを記録し、これをマーケティングデータとして利用することを特徴とする。そこで、第1実施形態と異なる点のみ説明する。なお、本実施形態において、第1実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、第1実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
次に、図19ないし図23を参照し、本発明の接客データ記録装置、接客データ記録方法およびプログラムについて、第2実施形態として説明する。本実施形態に係る接客支援システムSY2は、会話比率データと満足度データとを関連付けた接客データを記録し、これをマーケティングデータとして利用することを特徴とする。そこで、第1実施形態と異なる点のみ説明する。なお、本実施形態において、第1実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、第1実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
図19は、第2実施形態に係る接客支援システムSY2の機能ブロック図である。本実施形態に係る管理サーバー15は、第1実施形態と比較して、話し掛け区間抽出部161、顧客感情認識部162および顧客満足度算出部163が追加されている。
話し掛け区間抽出部161は、第1実施形態の音声抽出部154に相当し、取得した会話(音声データ)から、店員話し掛け区間および顧客話し掛け区間を抽出する。
顧客感情認識部162は、録音データ(接客区間に相当する音声データ)から抽出した顧客話し掛け区間に対し、音声の強度、音声の発生速度(単位時間当たりのモーラ数など)、単語別の強度、音量、音声スペクトルなどの変化量に基づいて、感情認識を行う。具体的には、録音データに含まれる顧客の発話区間ごとに感情認識を行う。このように、1フレーズごとに感情認識を行うことで、高精度な感情データを得ることができる。さらに、顧客感情認識部162は、図15)に示したように、顧客話し掛け区間と店員話し掛け区間とが時間軸上で重複する重複区間を特定し、当該重複区間を「感情認識非対象区間」として、当該重複区間を除く顧客話し掛け区間に対して感情認識を行う。このように、顧客の音声と店員の音声が混合しており正確な感情認識を行うことができない重複区間を除いて感情認識を行うことで、誤認識を防止することができる。
顧客満足度算出部163は、顧客感情認識部162の認識結果に基づいて、顧客満足度を算出する。また、顧客感情認識部162が発話区間ごとに感情認識を行うことに伴い、顧客満足度算出部163も、発話区間ごとに顧客満足度を算出する。なお、顧客満足度の具体的な算出方法については、後述する。
本実施形態の接客データ記録部158は、会話比率算出部155により算出された会話比率に基づく会話比率データ、および顧客満足度算出部163により算出された顧客満足度に基づく満足度データを関連付け、接客データの一部として管理サーバー用データベースDB2に記録する。
図20は、第2実施形態に係る管理サーバー用データベースDB2の説明図である。管理サーバー用データベースDB2は、第1実施形態と比較して、接客データ記憶部91の記憶内容が異なる。本実施形態の接客データ記憶部91は、顧客識別情報、店員識別情報、録音データ、撮像データ、売り上げ情報および接客日時の他、会話比率算出部155の算出結果に基づく会話比率データと、顧客満足度算出部163の算出結果に基づく満足度データと、を関連付けて記憶する。ここで、会話比率データとは、接客区間における会話比率と、各会話区間における会話比率と、を指す。また、満足度データとは、接客区間における顧客満足度と、各会話区間における顧客満足度と、を指す。
次に、図21を参照し、顧客満足度の算出アルゴリズム(計算式)について説明する。同図に示すように、顧客満足度は、発話区間、会話区間、接客区間の順に算出される。まず、発話区間別満足度は、図21(a)に示すように、計算式「“発話区間別満足度”=“喜データ”+“笑データ”×A」により算出される。ここで、“喜データ”は「喜び」の感情データ(例えば、0〜50までの数値、以下同様)、“笑データ”は「笑い」の感情データ、Aは0≦A≦1となる定数を意味する。なお、当該算出アルゴリズムは、人物の満足度が、「快」の心理状態と、その心理的強度の乗算結果とに基づくという発想から導き出したものである。
また、図21(b)に示すように、発話区間別実満足度は、計算式「“発話区間別実満足度”=“発話区間別満足度”−“発話区間別不満足度”×C」、すなわち「(“喜データ”+“笑データ”×A)−(“怒データ”+“悲データ”×B)×C」により算出される。ここで、“怒データ”は「怒り」の感情データ、“悲データ”は「悲しみ」の感情データ、Bは0≦B≦1となる定数、Cは0≦C≦1となる定数を意味する。このように、「喜び」および「笑い」の他に、「怒り」および「悲しみ」の感情データを用いることで、複雑な感情を考慮した、より信頼度の高い満足度を算出することができる。なお、当該算出アルゴリズムは、人物の不満足度が、「不快」の心理状態と、その心理的強度の乗算結果とに基づくという発想と、実満足度が、「快」および「不快」の心理状態に基づくという発想から導き出したものである。
また、図21(c)に示すように、会話区間別満足度は、「“会話区間別満足度”=会話区間に含まれる各顧客発話区間の“発話区間別実満足度”の平均値」から得られる。また、図21(d)に示すように、接客区間別満足度は、「“接客区間別満足度”=接客区間に含まれる各会話区間の“会話区間別満足度”の平均値」から得られる。
次に、図22および図23を参照し、第2実施形態に係るビューアー画面Dについて説明する。図22は、満足度−会話比率一覧表のビューアー画面D03を示す図である。当該ビューアー画面D03は、例えば図16に示したビューアー画面D01から、「満足度−会話比率一覧表」を表示するための不図示のボタン操作により表示されるものであり、接客区間No.を示す区間No.表示領域E31と、顧客満足度と顧客会話比率とを関連付けた一覧を表示する一覧表示領域E32とが含まれる。一覧表示領域E32は、接客区間の開始時刻および終了時刻を示す「時刻」の他、接客区間に含まれる各会話区間の「会話区間No.」、各会話区間の「顧客満足度」および各会話区間の「顧客会話比率」を関連付け、表形式で表示している。ここで、各会話区間の「顧客満足度」とは、図21(c)に示した会話区間別満足度を指す。
図23は、満足度−会話比率重ね合わせグラフのビューアー画面D04を示す図である。当該ビューアー画面D04は、例えば図16または図22に示したビューアー画面D01,D03から、「満足度−会話比率重ね合わせグラフ」を表示するための不図示のボタン操作により表示されるものであり、接客データに含まれる一部の情報を表示する接客データ表示領域E41と、顧客満足度と会話比率との関係をグラフ化したグラフ表示領域E42と、が含まれる。
接客データ表示領域E41は、「日付」、「店員」、「顧客」、「接客時間」、「売り上げNo.」、「売り上げ金額」、「顧客の平均会話比率」、「平均顧客満足度」および「接客区間No.」を表示する。ここで、「接客時間」とは、接客開始時刻および接客終了時刻を指す。また、「平均顧客満足度」とは、図21(d)に示した接客区間別満足度を指す。
グラフ表示領域E42は、横軸を「会話区間No.」、縦軸を「顧客満足度」とした第1の折れ線グラフ(実線、黒丸にて図示)と、横軸を「会話区間No.」、縦軸を「会話比率」とした第2の折れ線グラフ(破線、白丸にて図示)と、を重ね合わせた重ね合わせグラフを表示する。ここで、横軸の「会話区間No.」は、時系列に並べられている。なお、「会話区間No.」に代えて、横軸を時間(時刻)としても良い。また、「顧客満足度」は、0〜100の数値で表されるように、感情データおよび定数A,B,Cの値が定められているものとする。また、「会話比率」は、顧客会話比率を単位%で示したものであり、0〜100%で表される。このように、接客区間内の、各会話区間における顧客満足度の推移と、各会話区間における会話比率の推移とを、共通する時間軸上でグラフ化して表示することにより、ユーザーは、1接客内における会話状況の変化や顧客の感情の変化、並びにそれらの相関関係を一目で把握することができる。
以上説明したとおり、第2実施形態に係る接客支援システムSY2によれば、会話比率データと満足度データとを関連付け、接客データとして記録するため、これをマーケティングデータとして利用することができる。また、当該接客データにより、会話比率がどの程度顧客満足度に影響するかを推定でき、会話トレーニングの成果を証明できる。また、会話比率データとして各会話区間における会話比率を記録すると共に、満足度データとして各会話区間における顧客満足度を記録し、これらをビューアー画面D03,D04に表示することで、1接客内における会話状況の変化や顧客の感情の変化を確認できる。さらに、接客データとして、各接客区間における平均会話比率および平均顧客満足度を記録・表示するため(図23のE41参照)、各接客の総合的な評価を容易に把握することができる。
なお、上記の実施形態では、接客管理を目的として、店員と顧客の会話比率および顧客満足度を算出したが、個人で利用しても良い。これにより、収集した会話比率データや満足度データを、個人間の会話スキル(会話テクニック)の向上に役立てることができる。
[第3実施形態]
次に、図24ないし図31を参照し、本発明の接客支援装置、接客支援方法およびプログラムについて、第3実施形態として説明する。本実施形態に係る接客支援システムSY3は、店員や顧客を監視する監視部の監視結果に基づいて、接客対象となる顧客別に接客区間を特定することを特徴とする。そこで、上記の各実施形態と異なる点のみ説明する。なお、本実施形態において、上記の各実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、上記の各実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
次に、図24ないし図31を参照し、本発明の接客支援装置、接客支援方法およびプログラムについて、第3実施形態として説明する。本実施形態に係る接客支援システムSY3は、店員や顧客を監視する監視部の監視結果に基づいて、接客対象となる顧客別に接客区間を特定することを特徴とする。そこで、上記の各実施形態と異なる点のみ説明する。なお、本実施形態において、上記の各実施形態と同様の構成部分については同様の符号を付し、詳細な説明を省略する。また、上記の各実施形態と同様の構成部分について適用される変形例は、本実施形態についても同様に適用される。
図24は、第3実施形態に係る接客支援システムSY3の機能ブロック図である。本実施形態では、音声取得用マイク2が監視部として機能する。つまり、監視部は、会話取得部102を含んでおり(監視部の他の例については後述する)、会話取得部102は、店員と顧客の会話を取得する。
また、本実施形態に係る管理サーバー15は、第2実施形態と比較し、接客切替検出部171、切替検出データ記録部172、接客切替区間特定部173、接客会話区間特定部174および接客区間特定部175が追加されている。
接客切替検出部171は、監視部の監視結果、すなわち会話取得部102によって取得した会話に含まれる顧客の音声に基づいて、店員の接客対象となっている対象顧客の切り替わりを検出する。本実施形態では、顧客の音声に対して、定期的に声紋認証を行い、当該声紋認証結果の変化により、対象顧客の切り替わりを検出する。なお、顧客の音声から、声紋以外の声の特徴量(声の高さや早さなど)を判別し、当該特徴量の変化によって、対象顧客の切り替わりを検出しても良い。
切替検出データ記録部172は、店員を識別する店員識別情報と、接客切替検出部171の検出時刻(タイムスタンプ)と、を関連付け、切替検出データとして管理サーバー用データベースDB3に記録する。
接客切替区間特定部173は、記録した切替検出データに基づいて、検出開始からN番目(但し、NはN≧1となる整数)の検出時刻を区間開始時刻とし、且つN+1番目の検出時刻を区間終了時刻とする接客切替区間を特定する。つまり、「接客切替区間」は、切替検出データに基づいて特定される区間である。
接客会話区間特定部174は、話し掛け区間抽出部161により抽出された話し掛け区間に基づいて、接客会話区間を特定する。なお、第1実施形態および第2実施形態に係る「接客区間」は、本実施形態に係る「接客会話区間」に相当する。前述の通り、会話区間は、店員と顧客による話し掛け区間が所定時間以上途切れないまま交互に繰り返される話し掛け区間の集合体であるから、所定時間以上途切れないまま繰り返される会話区間の集合体を、1接客会話区間として特定する。つまり、「接客会話区間」は、接客データに含まれる録音データに基づいて特定される区間である。
また、接客区間特定部175は、接客切替区間特定部173により特定された接客切替区間と、接客会話区間特定部174により特定された接客会話区間と、に基づいて接客区間を特定する。具体的には、接客会話区間と接客切替区間とを、and演算またはor演算することにより、接客区間を特定する。なお、接客区間特定部175は、店員識別情報によって、任意の切替検出データと、録音データを紐付けし、比較演算を行う。接客区間特定部175による接客区間の特定方法については、後に詳述する。
上記の構成により、本実施形態の会話比率算出部155は、接客区間特定部175により特定された接客区間における会話比率を算出する。また、本実施形態の接客データ記録部158は、接客区間特定部175により特定された接客区間に相当する音声データである録音データや、同じく接客区間特定部175により特定された接客区間に相当する映像データである撮像データを、接客データとして記録する。また、本実施形態の画面表示部159は、ユーザーの操作に基づいて、接客切替区間特定部173により特定された接客切替区間、接客会話区間特定部174により特定された接客会話区間、および接客区間特定部175により特定された接客区間を、ビューアー画面Dに表示する(例えば、図26ないし図30参照)。また、ユーザーの操作に基づき、ビューアー画面D上で、接客区間の開始時間および終了時間の修正ができるようになっている。
図25は、第3実施形態に係る管理サーバー用データベースDB3の説明図である。管理サーバー用データベースDB3は、第1実施形態および第2実施形態で示した各部の他に、さらに切替検出データ記憶部93として機能する。当該切替検出データ記憶部93は、切替検出データ記録部172により記録された切替検出データを記憶する。また、本実施形態の接客データ記憶部94は、顧客識別情報、店員識別情報、接客区間分の音声データに相当する録音データ、接客区間分の映像データに相当する撮像データ、接客区間における会話比率の他、接客区間データを記憶する。当該接客区間データは、接客区間の区間開始時刻および区間終了時刻を含むデータを指す。
次に、図26を参照し、切替検出データおよび切替検出期間について説明する。図26(a)に示すように、切替検出データは、「店員識別情報」、「日付」および「切替検出時刻」が関連付けられた情報である。なお、「切替検出時刻」は、接客切替検出部171により、対象顧客の切り替わりが検出された時刻を指す。本実施形態では、顧客の音声に対して、定期的に声紋認証を行い、当該声紋認証結果が変化したとき(異なる顧客の声紋を認識したとき)、対象顧客が切り替わったと判定する。
図26(b)は、接客切替区間を時間軸上で示したイメージ図である。接客切替区間は、切替検出ごとに新たな区間が発生するものとして定義されるため、同図に示すように、隣り合う区間の間に間隙が生じることがなく、連続した区間となる。
次に、図27を参照し、接客会話区間について説明する。図27(a)は、接客会話区間特定結果の一例を示す図である。なお、接客会話区間は、第1実施形態で示した接客区間の特定方法によって特定される。ここでは、特定結果として、「店員識別情報」、「日付」、「顧客識別情報」および「接客会話区間」を示している。また、接客会話区間のインターバルの基準長さ(図5(b)におけるインターバルZ)は、1分30秒であるものとする。
図27(b)は、接客会話区間を時間軸上で示したイメージ図である。接客会話区間は、所定時間以上途切れないまま繰り返される会話区間の集合体として定義されるため、同図に示すように、隣り合う区間の間に間隙が生じる。
次に、図28ないし図30を参照し、接客区間の特定方法について説明する。接客区間の特定方法として、ここでは3つのパターン(接客区間特定パターンA〜C)を例示する。図28は、接客区間特定パターンAを示す図である。接客区間特定パターンAは、接客会話区間を基準にして接客区間を特定する。但し、複数の連続する接客会話区間が、1の接客切替区間に含まれる場合(接客会話区間(1),(2)と接客切替区間(1)の関係)、当該複数の接客会話区間の開始時刻から終了時刻までを、1接客区間とする(接客区間(1))。また、接客会話区間の途中で、接客切替区間が途切れる場合(接客会話区間(3)と接客切替区間(2),(3)の関係)、当該接客切替区間が途切れた時刻によって接客区間を分割する。つまり、同図の例では、接客会話区間(3)の開始時刻から接客切替期間(2)の終了時刻までを、接客区間(2)とし、接客切替区間(2)の終了時刻(接客会話区間(3)の開始時刻)から接客会話区間(3)の終了時刻までを、接客区間(3)とする。なお、これらの特定方法によって特定された接客区間の区間長が、所定時間未満の場合、その区間を接客区間として特定しない(無視する)ことが好ましい。
このように接客区間特定パターンAでは、本実施形態のように、顧客の声紋の変化によって対象顧客の切り替わりを検出する構成において、顧客別の接客区間を、正確に特定することができる。例えば、接客切替区間のみによって接客区間を特定する(接客切替区間=接客区間とする)と、既に対象顧客が切り替わっているが、顧客の発声がないために前の接客が続いていると誤判定される可能性がある(例えば、接客切替区間(1)で接客会話区間(2)がないケースでは、接客会話区間(2)に相当する時間が接客会話区間(1)に加算されてしまう)。したがって、接客会話区間を基準に接客区間を特定することで、接客区間終了時刻の誤差を無くすことができる。
また、接客会話区間のみによって接客区間を特定する(接客会話区間=接客区間とする)と、同じ対象顧客であるにも拘らず、会話が所定時間以上途切れたために、異なる接客であると誤判定されてしまう(例えば、接客会話区間(1),(2)と接客切替区間(1)の関係)。また、逆に、対象顧客が切り替わったにも拘らず、会話が所定時間以上途切れなかったために、同じ接客であると誤判定されることもある(例えば、接客会話区間(3)と接客切替区間(2),(3)の関係)。したがって、接客会話区間と接客切替区間のいずれか一方のみではなく、両方を比較演算して接客区間を特定することで、正確な接客区間を特定できる。
なお、本実施形態の接客切替検出部171は、定期的に声紋認証を行い、当該声紋認証結果が変化したとき、対象顧客が切り替わったと判定するものとしたが、所定時間内における同一声紋の出現率が所定値以下となったことにより、対象顧客の切り替わりを検出しても良い。この構成によれば、接客対象が家族連れの場合など、対象顧客が一人であるとは限らないため、所定時間内における同一声紋の出現率に応じて、対象顧客の切り替わりを検出することで、対象顧客別の接客区間を正確に特定することができる。例えば、同一人物の声紋が1分間に1回以上認識できている間は、対象顧客の切り替わりを検出しない、などが考えられる。なお、所定時間内における同一声紋の出現率に応じて、対象顧客の切り替わりを検出するのではなく、所定時間以上継続して同一声紋を検出しない場合、対象顧客が切り替わったと判定しても良い。
続いて、図29を参照し、接客区間特定パターンBについて説明する。接客区間特定パターンBは、接客会話区間と接客切替区間とが重複する区間を抽出して(and条件で比較演算を行い)、接客区間を特定する。例えば、接客区間(1),(2)については、いずれも接客切替区間(1)に含まれる区間であるため、接客会話区間(1),(2)と同じ区間となる。また、接客切替区間(2)は、接客会話区間(3)に含まれる区間であるため、接客切替区間(2)が接客区間(3)となる。さらに、接客会話区間(3)と接客切替区間(3)とを比較し、その重複部分を抽出して接客区間(4)とする。なお、本例においても、区間長が所定時間未満の接客区間を特定しないことが好ましい。
続いて、図30を参照し、接客区間特定パターンCについて説明する。接客区間特定パターンCは、接客切替区間を基準にして接客区間を特定する。例えば、接客区間(1)については、接客切替区間(1)と同じ区間となる。但し、接客切替区間よりも接客会話区間が長い場合は(接客会話区間(3)と接客切替区間(2)との関係)、当該接客切替区間の終了時刻を接客区間の切替時刻としない。つまり、同図の例では、接客切替区間(2),(3)を合計した区間を接客区間(2)とする(接客区間(2)の開始時刻は、接客切替区間(2)の開始時刻となり、接客区間(2)の終了時刻は、接客切替区間(3)の終了時刻となる)。なお、本例においても、区間長が所定時間未満の接客区間を特定しないことが好ましい。
次に、図31を参照し、接客区間設定(本実施形態の変形例)について説明する。本実施形態では、監視手段を音声取得用マイク2とし、顧客の声紋の変化を検出したとき、対象顧客が切り替わったと判定した。つまり、監視手段(監視内容)として、同図(a−1)を採用した。また、この場合、接客区間特定方法としては、接客区間特定パターンAを採用することが好ましいと記載したが(同図(b−1))、他の特定パターンを採用しても良い。つまり、接客区間特定パターンB(同図(b−2))や、接客区間特定パターンC(同図(b−3))を採用しても良い。さらに、その他の接客区間特定方法として、接客切替区間=接客区間とする方法(同図(b−4))や、接客会話区間=接客区間とする方法(同図(b−5))を採用しても良い。
また、同図(a−2)に示すように、監視内容として、店員のキーワードを監視しても良い。この場合、接客切替検出部171は、店員の音声に対して、音声認識を行い、当該音声認識によって所定のキーワードを検出することにより、対象顧客の切り替わりを検出する。また、管理サーバー15は、音響分析部、音響モデル、言語モデル、単語辞書およびテキスト変換部を含む音声認識部を備えることが前提となる。なお、音声認識部は、録音データに含まれる店員の音声を、発話区間ごとに認識することが好ましい。この構成によれば、所定のキーワードを検出することにより、対象顧客の切り替わりを容易に検出できる。例えば、接客区間の開始を示す「いらっしゃいませ」を検出した時刻を切替検出時刻としても良い。また、接客区間の終了を示す「またのご来店をお待ちしております」、「お買い上げありがとうございます」、「少々お待ちください」を検出した時刻を切替検出時刻としても良い。また、店舗ごとに、接客終了時に発声するキーワードを決めておき、そのキーワードを検出した時刻を切替検出時刻としても良い。この場合のキーワードとしては、例えば「終わり」、「バイバイ」など、通常接客時に使用しないキーワードを採用することが好ましい。さらに、接客区間の開始を示す開始キーワードと、接客区間の終了を示す終了キーワードとの両方を検出することにより、対象顧客の切り替わりをより正確に検出しても良い。つまり、「いらっしゃいませ」キーワード検出によって接客切替区間の開始と看做し、「またのご来店をお待ちしております」のキーワード検出によって接客切替区間の終了と看做しても良い。この場合、上記の実施形態の例とは異なり、隣り合う接客切替区間の間に、間隙が生じることとなる。
また、同図(a−3)に示すように、監視手段として店内カメラ11を利用し、店員の行動を監視しても良い。この場合、店員と顧客の接客状況を撮像する接客撮像部111が監視部として機能し、接客切替検出部171は、接客撮像部111により撮像された映像に基づいて、対象顧客の切り替わりを検出する。具体的には、映像の画像認識により、店員を特定し、当該店員の所定の行動を検出することにより、対象顧客の切り替わりを検出する。なお、店内カメラ11は、天井や机に取り付けても良いし、店内カメラ11に代えて、店員の服や体に小型カメラを装着しても良い。また、所定の行動としては、接客終了時に行うお辞儀など、自然発生するアクションが考えられ、この場合の、お辞儀の検出時刻を切替検出時刻としても良い。また、店舗ごとに、接客終了時に行うアクション(合図)を決めておき、そのアクションの検出により、対象顧客の切り替わりを検出しても良い。この場合のアクションとしては、例えば「カメラに向かいVサインを行う」、「所定の場所に移動する」など、通常接客時に行わないアクションを採用することが好ましい。さらに、接客区間の開始を示す開始アクションと、接客区間の終了を示す終了アクションとの両方を検出することにより、対象顧客の切り替わりをより正確に検出しても良い。つまり、「カメラに向かいVサインを行う」行動の検出によって接客切替区間の開始と看做し、「お辞儀」の行動検出によって接客切替区間の終了と看做しても良い。この場合も、隣り合う接客切替区間の間に、間隙が生じることとなる。
また、同図(a−4)に示すように、監視手段として角度センサー(図示省略)を利用し、店員の動作を監視しても良い。この場合、店員に取り付けられ、当該店員の動作を検出する動作検出部(図示省略)が監視部として機能し、接客切替検出部171は、動作検出部の検出結果に基づいて、対象顧客の切り替わりを検出する。なお、動作検出部は、店員の上半身に取り付けられることが好ましい。また、角度センサーに代えて、重力センサーやジャイロセンサーを採用しても良い。また、動作検出部は、店員用端末5にその検出結果を出力し、店員用端末5から管理サーバー15に出力結果が送信されることが好ましい。この場合、接客切替検出部171は、動作検出部により店員の上半身が傾く動作を検出したことにより、対象顧客の切り替わりを検出する。この構成によれば、店員の上半身が傾く動作により、接客終了時に行うお辞儀が行われたと判定できるため、当該動作検出により、対象顧客の切り替わりを正確に検出できる。
なお、店員の動作としては、上記のような、自然発生する動作の他、店舗ごとに、予め接客終了時に行う動作を決めておき、その動作の検出により、対象顧客の切り替わりを検出しても良い。この場合の動作としては、例えば「店員カードをさわる」、「ポケットをたたく」など、通常接客時に行わない動作が考えられる。また、動作検出部としては、接触センサーや赤外線センサーなど他のセンサーを採用しても良い。また、センサー以外にも、店員によって操作されるタッチ式ボタンなど、各種操作手段を、動作検出部として用いても良い。さらに、接客区間の開始を示す開始動作と、接客区間の終了を示す終了動作との両方を検出することにより、対象顧客の切り替わりをより正確に検出しても良い。つまり、「店員カードをさわる」動作の検出によって接客切替区間の開始と看做し、「お辞儀」の動作検出によって接客切替区間の終了と看做しても良い。この場合も、隣り合う接客切替区間の間に、間隙が生じることとなる。
このように、ユーザーは、管理サーバー15に備えられた入力装置55等により、監視手段および接客区間特定方法として、複数の選択肢から任意の候補を選択可能となっている。また、監視手段と接客区間特定方法の組み合わせは任意であり、使用状況やユーザーのニーズに応じて変更可能である。
以上説明したとおり、第3実施形態に係る接客支援システムSY3によれば、店員および顧客の少なくとも一方の監視結果から、接客対象となっている対象顧客の切り替わりを検出し、その検出時刻を店員識別情報と関連付け、切替検出データとして記録しておくため、当該切替検出データから、接客切替区間を特定できる。また、切替検出データを記録しておくため、これをマーケティングデータとして集計し、各店員の接客スキルの向上に役立てることができる。
また、切替検出データに基づいて特定した接客切替区間と、録音データに基づいて特定した接客会話区間とを、比較演算して接客区間を特定するため、接客対象となる顧客別の接客区間を正確に特定することができる。また、正確な接客区間を特定することで、信頼性の高い会話比率を算出できる。また、算出した会話比率は、接客データの一部として記録されるため、これを接客手法の教材として利用できると共に、各接客(接客データ)について良い接客であったか否かを判別できる。これにより、例えば、会話比率から良い接客と考えられる接客状況を、各店員に示すなど、接客スキルの水平展開に役立てることができる。
なお、上記の実施形態では、接客区間特定部175により特定された接客区間における会話比率を算出したが、当該接客区間における顧客満足度を算出し、これらに基づく会話比率データと満足度データとを関連付け、接客データとして記録しても良い。つまり、第2実施形態と第3実施形態を組み合わせた構成としても良い。
以上、第1実施形態ないし第3実施形態を示したが、これらの各実施形態に示した接客支援システムSY1,SY2,SY3の各処理をプログラムとして提供することが可能である。また、そのプログラムを各種記録媒体(CD−ROM、フラッシュメモリー等)に格納して提供することも可能である。すなわち、コンピューターを、接客支援システムSY1,SY2,SY3の各構成要素として機能させるためのプログラム、およびそれを記録した記録媒体も、本発明の権利範囲に含まれるものである。その他、上述した実施例によらず、各接客支援システムSY1,SY2,SY3のシステム構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。
1…体導音センサー 2…音声取得用マイク 5…店員用端末 6…ビューアー画面 11…店内カメラ 12…POS端末 13…レシートプリンター 14…レジカウンター 15…管理サーバー 16…表示端末 16a…表示画面 18…商品マスタ 19…ネットワーク 212…ボタン群 213…プログレスバー 214…音量調節スライダ D…ビューアー画面 DB…管理サーバー用データベース E11…照会条件選択領域 E12…一覧表示領域 E13…再生操作領域 E21…照会条件選択領域 E22…相関図表示領域 E32…一覧表示領域 E41…接客データ表示領域 E42…グラフ表示領域 R…会計レシート SY…接客支援システム
Claims (16)
- 店員および顧客の少なくとも一方を監視する監視部と、
前記監視部の監視結果に基づいて、前記店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出部と、
前記店員を識別する店員識別情報と、前記接客切替検出部の検出時刻と、を関連付け、切替検出データとしてデータベースに記録する切替検出データ記録部と、を備えたことを特徴とする接客支援装置。 - 前記監視部は、
前記店員と前記顧客の会話を取得する会話取得部を含み、
前記接客切替検出部は、前記会話に含まれる前記店員および前記顧客の少なくとも一方の音声に基づいて、前記対象顧客の切り替わりを検出することを特徴とする請求項1に記載の接客支援装置。 - 前記接客切替検出部は、前記顧客の音声に対して、定期的に声紋認証を行い、当該声紋認証結果の変化により、前記対象顧客の切り替わりを検出することを特徴とする請求項2に記載の接客支援装置。
- 前記接客切替検出部は、所定時間内における同一声紋の出現率が所定値以下となったことにより、前記対象顧客の切り替わりを検出することを特徴とする請求項3に記載の接客支援装置。
- 前記接客切替検出部は、前記店員の音声に対して、音声認識を行い、当該音声認識によって所定のキーワードを検出することにより、前記対象顧客の切り替わりを検出することを特徴とする請求項2に記載の接客支援装置。
- 前記店員に取り付けられ、当該店員が発話したことを検出する発話検出部をさらに備え、
前記接客切替検出部は、前記発話検出部の検出結果に基づいて、前記会話に含まれる音声が、前記店員の音声であるか前記顧客の音声であるかを判別することを特徴とする請求項2ないし5のいずれか1項に記載の接客支援装置。 - 前記監視部は、
前記店員と前記顧客の接客状況を撮像する接客撮像部を含み、
前記接客切替検出部は、前記接客撮像部により撮像された映像に基づいて、前記対象顧客の切り替わりを検出することを特徴とする請求項1に記載の接客支援装置。 - 前記接客切替検出部は、前記映像の画像認識により、前記店員を特定し、当該店員の所定の行動を検出することにより、前記対象顧客の切り替わりを検出することを特徴とする請求項7に記載の接客支援装置。
- 前記監視部は、
前記店員に取り付けられ、当該店員の動作を検出する動作検出部を含み、
前記接客切替検出部は、前記動作検出部の検出結果に基づいて、前記対象顧客の切り替わりを検出することを特徴とする請求項1に記載の接客支援装置。 - 前記接客切替検出部は、前記動作検出部により前記店員の上半身が傾く動作を検出したことにより、前記対象顧客の切り替わりを検出することを特徴とする請求項9に記載の接客支援装置。
- 前記店員と前記顧客の会話に基づく音声データを録音する音声データ録音部と、
前記切替検出データに基づいて、検出開始からN番目(但し、NはN≧1となる整数)の検出時刻を区間開始時刻とし、且つN+1番目の検出時刻を区間終了時刻とする接客切替区間を特定する接客切替区間特定部と、
前記店員識別情報に、前記接客切替区間特定部により特定された前記接客切替区間に相当する前記音声データである録音データを関連付け、接客データとして前記データベースに記録する接客データ記録部と、をさらに備えたことを特徴とする請求項1ないし10のいずれか1項に記載の接客支援装置。 - 前記接客切替区間に含まれる、前記店員による各話し掛け区間の長さの合計であるΣLa(但し、ΣLaはΣLa≧0となる変数)と、前記顧客による各話し掛け区間の長さの合計であるΣLb(但し、ΣLbはΣLb≧0となる変数)と、を算出し、ΣLaとΣLbの比率、若しくはΣLaまたはΣLbの(ΣLa+ΣLb)に対する比率である会話比率を算出する会話比率算出部をさらに備え、
前記接客データ記録部は、前記店員識別情報および前記録音データに、前記会話比率を関連付け、前記接客データとして前記データベースに記録することを特徴とする請求項11に記載の接客支援装置。 - 前記店員と前記顧客の会話に基づく音声データを録音する音声データ録音部と、
前記切替検出データに基づいて、検出開始からN番目(但し、NはN≧1となる整数)の検出時刻を区間開始時刻とし、且つN+1番目の検出時刻を区間終了時刻とする接客切替区間を特定する接客切替区間特定部と、
録音された前記音声データから、前記店員の話し掛けによる音声区間である店員話し掛け区間と、前記顧客の話し掛けによる音声区間である顧客話し掛け区間と、を抽出する話し掛け区間抽出部と、
前記店員と前記顧客による前記話し掛け区間が所定時間以上途切れないまま交互に繰り返される前記話し掛け区間の集合体を1会話区間、所定時間以上途切れないまま繰り返される前記会話区間の集合体を1接客会話区間、としたとき、当該接客会話区間を特定する接客会話区間特定部と、
前記接客会話区間特定部により特定された前記接客会話区間と、前記接客切替区間特定部により特定された前記接客切替区間とを、比較演算することにより、接客区間を特定する接客区間特定部と、
前記店員識別情報に、前記接客区間特定部により特定された前記接客区間に相当する前記音声データである録音データを関連付け、接客データとして前記データベースに記録する接客データ記録部と、をさらに備えたことを特徴とする請求項1ないし10のいずれか1項に記載の接客支援装置。 - 前記接客区間に含まれる、前記店員による各話し掛け区間の長さの合計であるΣLa(但し、ΣLaはΣLa≧0となる変数)と、前記顧客による各話し掛け区間の長さの合計であるΣLb(但し、ΣLbはΣLb≧0となる変数)と、を算出し、ΣLaとΣLbの比率、若しくはΣLaまたはΣLbの(ΣLa+ΣLb)に対する比率である会話比率を算出する会話比率算出部をさらに備え、
前記接客データ記録部は、前記店員識別情報および前記録音データに、前記会話比率を関連付け、前記接客データとして前記データベースに記録することを特徴とする請求項13に記載の接客支援装置。 - コンピューターが、
店員および顧客の少なくとも一方を監視する監視ステップと、
前記監視ステップによる監視結果に基づいて、前記店員の接客対象となっている対象顧客の切り替わりを検出する接客切替検出ステップと、
前記店員を識別する店員識別情報と、前記接客切替検出ステップによる検出時刻と、を関連付け、切替検出データとしてデータベースに記録する切替検出データ記録ステップと、を実行することを特徴とする接客支援方法。 - コンピューターに、請求項15に記載の接客支援方法における各ステップを実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010108061A JP2011237966A (ja) | 2010-05-10 | 2010-05-10 | 接客支援装置、接客支援方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010108061A JP2011237966A (ja) | 2010-05-10 | 2010-05-10 | 接客支援装置、接客支援方法およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2011237966A true JP2011237966A (ja) | 2011-11-24 |
Family
ID=45325885
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010108061A Pending JP2011237966A (ja) | 2010-05-10 | 2010-05-10 | 接客支援装置、接客支援方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2011237966A (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016051693A1 (ja) * | 2014-09-30 | 2016-04-07 | パナソニックIpマネジメント株式会社 | 接客モニタリングシステム及び接客モニタリング方法 |
JP2016071867A (ja) * | 2014-09-30 | 2016-05-09 | パナソニックIpマネジメント株式会社 | 接客モニタリングシステム及び接客モニタリング方法 |
WO2018025492A1 (ja) * | 2016-08-02 | 2018-02-08 | パナソニックIpマネジメント株式会社 | 接客モニタリング装置、接客モニタリングシステム、及び接客モニタリング方法 |
JP6454807B1 (ja) * | 2018-04-20 | 2019-01-16 | 株式会社野村総合研究所 | 音声認証決済システム |
CN112309398A (zh) * | 2020-09-30 | 2021-02-02 | 音数汇元(上海)智能科技有限公司 | 工作时长监控方法、装置、电子设备和存储介质 |
WO2022264220A1 (ja) * | 2021-06-14 | 2022-12-22 | 株式会社I’mbesideyou | 動画像分析システム |
CN117153185A (zh) * | 2023-10-31 | 2023-12-01 | 建信金融科技有限责任公司 | 通话处理方法、装置、计算机设备和存储介质 |
JP7501065B2 (ja) | 2020-04-13 | 2024-06-18 | 大日本印刷株式会社 | 行動管理装置、行動管理プログラム、行動管理システム及び行動分析装置 |
-
2010
- 2010-05-10 JP JP2010108061A patent/JP2011237966A/ja active Pending
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016051693A1 (ja) * | 2014-09-30 | 2016-04-07 | パナソニックIpマネジメント株式会社 | 接客モニタリングシステム及び接客モニタリング方法 |
JP2016071867A (ja) * | 2014-09-30 | 2016-05-09 | パナソニックIpマネジメント株式会社 | 接客モニタリングシステム及び接客モニタリング方法 |
US10706448B2 (en) | 2014-09-30 | 2020-07-07 | Panasonic Intellectual Property Management Co., Ltd. | Service monitoring system and service monitoring method |
WO2018025492A1 (ja) * | 2016-08-02 | 2018-02-08 | パナソニックIpマネジメント株式会社 | 接客モニタリング装置、接客モニタリングシステム、及び接客モニタリング方法 |
JP6454807B1 (ja) * | 2018-04-20 | 2019-01-16 | 株式会社野村総合研究所 | 音声認証決済システム |
JP2019191716A (ja) * | 2018-04-20 | 2019-10-31 | 株式会社野村総合研究所 | 音声認証決済システム |
JP7501065B2 (ja) | 2020-04-13 | 2024-06-18 | 大日本印刷株式会社 | 行動管理装置、行動管理プログラム、行動管理システム及び行動分析装置 |
CN112309398A (zh) * | 2020-09-30 | 2021-02-02 | 音数汇元(上海)智能科技有限公司 | 工作时长监控方法、装置、电子设备和存储介质 |
WO2022264220A1 (ja) * | 2021-06-14 | 2022-12-22 | 株式会社I’mbesideyou | 動画像分析システム |
CN117153185A (zh) * | 2023-10-31 | 2023-12-01 | 建信金融科技有限责任公司 | 通话处理方法、装置、计算机设备和存储介质 |
CN117153185B (zh) * | 2023-10-31 | 2024-01-30 | 建信金融科技有限责任公司 | 通话处理方法、装置、计算机设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5477153B2 (ja) | 接客データ記録装置、接客データ記録方法およびプログラム | |
JP5533219B2 (ja) | 接客データ記録装置 | |
US20110282662A1 (en) | Customer Service Data Recording Device, Customer Service Data Recording Method, and Recording Medium | |
JP2011237966A (ja) | 接客支援装置、接客支援方法およびプログラム | |
JP2011210133A (ja) | 満足度算出方法、満足度算出装置およびプログラム | |
JP6596899B2 (ja) | 接客データ処理装置及び接客データ処理方法 | |
US20170154293A1 (en) | Customer service appraisal device, customer service appraisal system, and customer service appraisal method | |
JP2011210100A (ja) | 接客データ記録装置、接客データ記録方法およびプログラム | |
JP2011221891A (ja) | キーワード記録装置、接客支援装置、キーワード記録方法およびプログラム | |
JP2011221683A (ja) | 接客支援装置、接客支援方法およびプログラム | |
JP4778532B2 (ja) | 顧客情報収集管理システム | |
JP2011118583A (ja) | 不正度算出装置、不正度算出装置の制御方法およびプログラム | |
JP5874886B1 (ja) | 接客モニタリング装置、接客モニタリングシステムおよび接客モニタリング方法 | |
WO2016088369A1 (ja) | 情報処理装置、言動評価方法およびプログラム記憶媒体 | |
US20140019199A1 (en) | Automatically evaluating customer satisfaction | |
JP5540645B2 (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
JP5499616B2 (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
JP2011237957A (ja) | 満足度算出装置、満足度算出方法およびプログラム | |
JP2016218911A (ja) | 接客評価装置およびこれを備えた接客評価システムならびに接客評価方法 | |
JP2011221627A (ja) | 接客支援装置、接客支援方法およびプログラム | |
JP2011237965A (ja) | 会話比率算出装置、接客データ記録装置、会話比率算出方法およびプログラム | |
JP2011113442A (ja) | 会計処理判定装置、会計処理判定装置の制御方法およびプログラム | |
JP5482079B2 (ja) | レシートプリンター、レシートプリンターの制御方法およびプログラム | |
JP7092035B2 (ja) | 情報処理装置および情報処理方法 | |
JP2011118653A (ja) | 不正度記録装置、不正度記録装置の制御方法およびプログラム |