JP2022071401A - 情報処理システム、情報処理方法及びプログラム - Google Patents

Abstract

【課題】インターネットを介した面談に複数のユーザーを接続させる情報処理システム、情報処理方法及びプログラムを提供する。【解決手段】情報処理システム１０００は、システム構成として、サーバ装置１００と、クライアント装置１１０と、クライアント装置１２０と、を含む。面談主催者とは、面談を主催した者であり、ホスト側である。面談相手とは、面談主催者の面談の相手であり、ゲスト側である。ホスト側又はゲスト側は、予め定められたＵＲＬにアクセスすることで、インターネット上でＷｅｂ会議を実施することができる。【選択図】図１

Description

本発明は、情報処理システム、情報処理方法及びプログラムに関する。

顧客に対して、遠隔で営業活動を行うインサイドセールスという手法がある。
特許文献１には、インサイドセールスにも使用可能な有望顧客予測装置が開示されている。

特許第６０３１１６５号公報

しかし、従来の技術では、面談の際の話の内容に応じて適切な資料を素早く用意して提示することはできない問題があった。

本発明の一態様によれば、情報処理システムが提供される。この情報処理システムは、制御部を有する。制御部は、インターネットを介した面談に複数のユーザーを接続させる。面談中に複数のユーザーによる音声を受け付ける。受け付けた音声から設定されたキーワードの組み合わせが検出された場合には、キーワードの組み合せに関連する資料を、複数のユーザーのうちの少なくとも１人が把握可能な態様で出力する。

図１は、情報処理システムのシステム構成の一例を示す図である。 図２は、サーバ装置のハードウェア構成の一例を示す図である。 図３は、クライアント装置のハードウェア構成の一例を示す図である。 図４は、サーバ装置の機能構成の一例を示す図である。 図５は、設定部によって設定されたキーワードの組み合わせ等の一例を示す図である。 図６は、資料が表示された面談画面の一例を示す図（その１）である。 図７は、資料が表示された面談画面の一例を示す図（その２）である。 図８は、サーバ装置におけるキーワード設定に関する情報処理の一例を示すアクティビティ図である。 図９は、サーバ装置における資料の出力に関する情報処理の一例を示すアクティビティ図である。 図１０は、変形例１の設定部によって設定されたキーワードの組み合わせ等の一例を示す図である。 図１１は、資料が表示された面談画面の一例を示す図（その３）である。 図１２は、資料が表示された面談画面の一例を示す図（その４）である。 図１３は、変形例２の設定部によって設定されたキーワードの組み合わせの一例を示す図である。 図１４は、変形例４の設定部によって設定されたキーワードの組み合わせの一例を示す図である。

以下、図面を用いて本発明の実施形態について説明する。以下に示す実施形態中で示した各種特徴事項は、互いに組み合わせ可能である。

本明細書において「部」とは、例えば、広義の回路によって実施されるハードウェア資源と、これらのハードウェア資源によって具体的に実現されうるソフトウェアの情報処理とを合わせたものも含みうる。また、本実施形態においては様々な情報を取り扱うが、これら情報は、０又は１で構成される２進数のビット集合体として信号値の高低によって表され、広義の回路上で通信・演算が実行されうる。

また、広義の回路とは、回路（Ｃｉｒｃｕｉｔ）、回路類（Ｃｉｒｃｕｉｔｒｙ）、プロセッサ（Ｐｒｏｃｅｓｓｏｒ）、及びメモリ（Ｍｅｍｏｒｙ）等を少なくとも適当に組み合わせることによって実現される回路である。すなわち、特定用途向け集積回路（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ：ＡＳＩＣ）、プログラマブル論理デバイス（例えば、単純プログラマブル論理デバイス（Ｓｉｍｐｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＳＰＬＤ）、複合プログラマブル論理デバイス（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＣＰＬＤ）、及びフィールドプログラマブルゲートアレイ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ：ＦＰＧＡ））等を含むものである。

＜実施形態１＞
１．システム構成
図１は、情報処理システム１０００のシステム構成の一例を示す図である。図１に示されるように、情報処理システム１０００は、システム構成として、サーバ装置１００と、クライアント装置１１０と、クライアント装置１２０と、を含む。クライアント装置１１０は、面談主催者のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等である。クライアント装置１２０は、面談相手のＰＣ等である。面談主催者とは、面談を主催した者であり、ホスト側である。面談相手とは、面談主催者の面談の相手であり、ゲスト側である。ホスト側又はゲスト側が、例えば予め定められたＵＲＬにアクセスすることで、インターネット上でＷｅｂ会議が実施されうる。例えば、面談主催者は、Ｗｅｂ会議のＵＲＬをコピーし、Ｅメール等でゲストに共有する。
面談が商談の場合、面談主催者は営業担当者であり、面談相手は営業を受けるお客様である。面談が採用面接の場合は、面談主催者は採用面接を行う企業等の面接担当者であり、面談相手はその企業の採用に応募している応募者である。なお、面談はこれらに限られず、インターネットを介して複数のユーザーが画面及び音声を介してやり取りを行うものは面談に含まれる。また、面談主催者及び面談相手は１人に限られない。面談主催者及び面談相手は複数のユーザーの一例である。

サーバ装置１００と、クライアント装置１１０と、クライアント装置１２０とは、ネットワーク１５０を介して通信可能に接続されている。
図１では、説明の簡略化のため、情報処理システム１０００において、クライアント装置１１０、クライアント装置１２０はそれぞれ１台ずつしか図示していないが、それぞれ複数台、情報処理システム１０００に含まれてもよい。また、クライアント装置は、ＰＣに限定されるものではなく、スマートフォン、タブレット型コンピュータ等であってもよい。情報処理システム１０００における面談は、画像等は、インターネットを介してやり取りされ、音声は、電話網を介してやり取りされるが、これに限定されるものではない。

特許請求の範囲の情報処理システムは、複数の装置（例えば、サーバ装置とクライアント装置又は複数のサーバ装置）から構成されてもよいし、単体の装置（例えば、サーバ装置）から構成されてもよい。

２．ハードウェア構成
（１）サーバ装置１００のハードウェア構成
図２は、サーバ装置１００のハードウェア構成の一例を示す図である。サーバ装置１００は、ハードウェア構成として、制御部２０１と、記憶部２０２と、通信部２０３と、を含む。制御部２０１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等であって、サーバ装置１００の全体を制御する。記憶部２０２は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等であって、プログラム及び制御部２０１がプログラムに基づき処理を実行する際に利用するデータ等を記憶させる。制御部２０１が、記憶部２０２に記憶されているプログラムに基づき、処理を実行することによって、後述する図４のサーバ装置１００の機能構成及び後述する図６、図７、図７のアクティビティ図の処理が実現される。通信部２０３は、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等であって、サーバ装置１００をネットワーク１５０に接続し、他の装置（例えば、クライアント装置１１０、クライアント装置１２０等）との通信を司る。記憶部２０２は、記憶媒体の一例である。

（２）クライアント装置１１０のハードウェア構成
図３は、クライアント装置１１０のハードウェア構成の一例を示す図である。クライアント装置１１０は、ハードウェア構成として、制御部３０１と、記憶部３０２と、撮像部３０３と、入力部３０４と、出力部３０５と、通信部３０６と、を含む。制御部３０１は、ＣＰＵ等であって、クライアント装置１１０の全体を制御する。記憶部３０２は、ＨＤＤ、ＲＯＭ、ＲＡＭ等であって、プログラム、制御部３０１がプログラムに基づき処理を実行する際に利用するデータ等を記憶させる。制御部３０１が、記憶部３０２に記憶されているプログラムに基づき、処理を実行することによって、クライアント装置１１０の機能が実現される。撮像部３０３は、カメラ等であって、クライアント装置１１０の利用者を撮像する。入力部３０４は、マウス及びキーボード等であって、ユーザー操作を制御部３０１に入力する。更に入力部３０４は、マイク等であって、ユーザーの音声を制御部３０１に入力する。出力部３０５は、ディスプレイ及びスピカー等であって、制御部２０１の処理の結果等を表示したり、音声で出力したりする。通信部３０６は、ＮＩＣ等であって、クライアント装置１１０をネットワーク１５０に接続し、他の装置（例えば、サーバ装置１００、クライアント装置１２０等）との通信を司る。

クライアント装置１２０のハードウェア構成は、クライアント装置１１０のハードウェア構成と同様でもよい。クライアント装置１２０の制御部がクライアント装置１２０の記憶部に記憶されたプログラムに基づき処理を実行することによって、クライアント装置１２０の機能が実現される。同様に、クライアント装置１３０の制御部がクライアント装置１３０の記憶部に記憶されたプログラムに基づき処理を実行することによって、クライアント装置１３０の機能が実現される。

３．機能構成
図４は、サーバ装置１００の機能構成の一例を示す図である。図４に示されるように、サーバ装置１００は、機能構成として、設定部４０１と、面談制御部４０２と、音声認識部４０３と、検索部４０４と、出力制御部４０５と、記憶処理部４０６と、を含む。

（設定部４０１）
設定部４０１は、例えば、管理者権限を有するクライアント装置の入力部等を介した設定操作に応じて、キーワードの組み合わせを記憶部２０２等に記憶させることでキーワードの組み合わせを設定する。記憶部２０２は、記憶領域の一例である。なお、設定部４０１が設定するキーワードの組み合わせは、面談で出てくる可能性があるキーワードの組み合わせであり、面談で用いられる資料を表示するためのトリガーとなるキーワードの組み合わせである。
図５は、設定部４０１によって設定されたキーワードの組み合わせ等の一例を示す図である。図５に示されるようなテーブルは、例えば、記憶部２０２に記憶される。なお、図５ではキーワードの組み合わせの例として２つのキーワードを例に説明を行っているが、キーワードの組み合わせは２つのキーワードに限られない、２つ以上のキーワードであれば幾つであってもよい。また、キーワードに関連する資料に応じて、２つのキーワード、３つのキーワードと、キーワードの数が変わってもよい。図５において、項目５１０には、１つ目のキーワードが設定される。項目５２０には、１つ目のキーワードとセットになる２つ目のキーワードが設定される。項目５３０には、該当するキーワードの組み合わせが出現した場合に、表示させたい資料が設定される。なお、項目５３０には、資料自体が設定されてもよいし、その資料が保存されている保存先のＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）等が設定されてもよい。すなわち、設定部４０１は、キーワードの組み合わせと、資料と、を関連付けて記憶部２０２等に記憶させる。

（面談制御部４０２）
面談制御部４０２は、ネットワーク１５０を介した面談に面談主催者及び面談相手を接続させる。ネットワーク１５０は、インターネットの一例である。また、面談制御部４０２は、面談主催者と面談相手とのネットワーク１５０を介した面談を制御する。例えば、面談制御部４０２は、面談主催者のクライアント装置１１０と、面談相手のクライアント装置１２０とを、ネットワーク１５０を介して接続し、面談に関する画像データ、音声データの受け渡し等を制御する。

（音声認識部４０３）
音声認識部４０３は、面談中に面談主催者及び面談相手による音声を受け付ける。また、音声認識部４０３は、面談主催者と面談相手との面談の音声データに基づき音声認識を行い、テキスト化し、テキストデータを生成する。音声認識部４０３は、面談における音声の波形に基づき、面談における話者（例えば、営業を行っている営業担当者か、営業を受けているお客様か）を分類し、話者ごとの文字列（テキスト化）に変換する。更に、音声認識部４０３は、変換した文字列を解析し、解析結果に基づき、面談における話者を分類してもよい。音声認識部４０３は、生成したテキストデータを記憶部２０２等に記憶させる。
他の例として、音声認識部４０３は、面談主催者のクライアント装置と面談相手のクライアント装置が分かっている場合は、どのクライアント装置から送信された音声データかに基づき、話者を分類してもよい。更に他の例として、音声認識部４０３は、面談主催者の声の周波数等の物理量を記憶しておき、記憶されているデータと、クライアント装置から送信された音声データとを比較し、面談主催者を特定し、話者を分類してもよい。更に他の例として、音声認識部４０３は、面談主催者が面談にて話しそうな内容を予め学習させた学習済みモデルに音声データを入力し、その音声データが面談主催者か否かの出力に基づき、話者を分類してもよい。

（検索部４０４）
検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させたテキストデータの中から面談主催者と面談相手との面談において設定部４０１で設定されたキーワードの組み合わせを検索する。検索部４０４のこの処理は、受け付けた音声から設定されたキーワードの組み合わせを検出する処理の一例である。キーワードの組み合わせが出てきた場合は、検索部４０４は、キーワードの組み合わせに関連する資料を取得する。より具体的に説明すると、検索部４０４は、音声認識部４０３で逐次、生成されているテキストデータの同じ文の中に設定部４０１で設定されたキーワードの組み合わせが含まれていないか検索し、同じ文の中に設定部４０１で設定されたキーワードの組み合わせが含まれていた場合には、キーワードの組み合わせに関連する資料を取得する。例えば音声認識部４０３で逐次、生成されているテキストデータの同じ文の中に「営業」と「移動」が出てきた場合には、検索部４０４は、「営業」と「移動」に関連する、「営業工数の新規創出．ｐｄｆ」を資料として取得する。

（出力制御部４０５）
出力制御部４０５は、面談時における面談主催者のクライアント装置１１０及び面談相手のクライアント装置１２０への画面の表示を制御する。例えば、出力制御部４０５は、ライブ映像の表示、資料の表示、Ｗｅｂサイトの表示、議事録の表示等を制御する。また、受け付けた音声から設定されたキーワードの組み合わせが検出された場合には、出力制御部４０５は、キーワードの組み合せに関連する資料を、複数のユーザーのうちの少なくとも１人が把握可能な態様で出力する。より具体的に説明すると、検索部４０４が資料を取得した場合、出力制御部４０５は、検索部４０４が取得した資料を、面談主催者と面談相手との面談の画面に表示するよう制御する。すなわち、面談主催者と面談相手とのインターネットを介した面談において、キーワードの組み合わせが検出された場合、出力制御部４０５は、キーワードの組み合わせに関連する資料を面談中の画面に表示するよう制御する。

図６は、資料が表示された面談画面の一例を示す図（その１）である。図６の面談画面は、面談主催者のクライアント装置１１０の出力部３０５に表示されている面談画面の一例である。面談主催者側の面談画面は、領域６１０と、領域６２０と、を含む。領域６１０には、面談相手のクライアント装置１２０の撮像部で撮像された面談相手の映像が表示される。領域６２０には、面談主催者のクライアント装置１１０の撮像部３０３で撮像された面談主催者の映像が表示される。また、図６の面談画面には、資料６３０と、資料６４０と、が出力制御部４０５によって表示されている。資料６３０、資料６４０は、アイコンであって、選択されると、出力制御部４０５は、アイコンに対応する資料の内容を表示する。出力制御部４０５は、所定の時間、資料６３０、資料６４０を面談画面にて表示すると、資料６３０、資料６４０の表示を終了する。

図７は、資料が表示された面談画面の一例を示す図（その２）である。図７の面談画面は、面談相手のクライアント装置１２０の出力部に表示されている面談画面の一例である。面談相手の面談画面は、領域７１０と、領域７２０と、を含む。領域７１０には、面談主催者のクライアント装置１１０の撮像部３０３で撮像された面談主催者の映像が表示される。領域７２０には、面談相手のクライアント装置１２０の撮像部で圧造された面談相手の映像が表示される。また、図７の面談画面には、図６の面談画面と同様の資料６３０と、資料６４０と、が出力制御部４０５によって表示されている。資料６３０、資料６４０は、アイコンであって、選択されると、出力制御部４０５は、アイコンに対応する資料の内容を表示する。出力制御部４０５は、所定の時間、資料６３０、資料６４０を面談画面にて表示すると、資料６３０、資料６４０の表示を終了する。

（記憶処理部４０６）
記憶処理部４０６は、面談の動画データと、面談の音声データをテキスト化したテキストデータと、を関連付けて面談データとして記憶部２０２等の記憶領域に記憶させる。なお、記憶処理部４０６は、その他にも、面談が行われた日時情報、面談主催者の情報、面談相手の情報等を面談データに付加して記憶部２０２等に記憶させる。また、面談中にポップアップ表示された資料が選択され、その資料が選択された側のクライアント装置の出力部に表示された場合、記憶処理部４０６は、面談の動画データと、面談の音声データをテキスト化したテキストデータと、選択された資料を識別する識別情報と、資料が選択され表示された時間情報と、を関連付けて面談データとして記憶部２０２等に記憶させる。

４．情報処理
（１）キーワード設定に関する情報処理
図８は、サーバ装置１００におけるキーワード設定に関する情報処理の一例を示すアクティビティ図である。
Ａ８０１において、設定部４０１は、クライアント装置の入力部等を介して設定操作が行われたか否かを判定する。設定部４０１は、設定操作が行われたと判定した場合、処理をＡ８０２に進める。設定部４０１は、設定操作が行われていないと判定した場合、Ａ８０１の処理を繰り返す。
Ａ８０２において、設定部４０１は、管理者権限を有するクライアント装置の入力部等を介して設定操作等に応じて、キーワードの組み合わせを設定する。

（２）資料の出力に関する情報処理
図９は、サーバ装置１００における資料の出力に関する情報処理の一例を示すアクティビティ図である。
Ａ９０１において、検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させたテキストデータの中から面談主催者と面談相手との面談において設定部４０１で設定されたキーワードの組み合わせを検索し、キーワードの組み合わせが出てきたか否かを判定する。検索部４０４は、テキストデータの中からキーワードの組み合わせが出てきたと判定した場合、処理をＡ９０２に進める。検索部４０４は、テキストデータの中から設定されているキーワードの組み合わせが出てこなかったと判定した場合、Ａ９０１の処理を繰り返す。

図５を用いて説明すると、検索部４０４は、テキストデータの同じ文の中に「営業」、「移動」が出てきたか否かを判定する。検索部４０４は、テキストデータの同じ文の中に「営業」、「移動」が出てきたと判定した場合、処理をＡ９０２に進める。検索部４０４は、テキストデータの同じ文の中に「営業」、「移動」が出てこなかったと判定した場合、テキストデータの同じ文の中に「地方」、「営業」が出てきたか否かを判定する。検索部４０４は、テキストデータの同じ文の中に「地方」、「営業」が出てきたと判定した場合、処理をＡ９０２に進める。検索部４０４は、テキストデータの同じ文の中に「地方」、「営業」が出てなかったと判定した場合、処理をＡ９０１に戻し、音声認識部４０３が生成した次のテキストデータに対して、キーワードの組み合わせが出てきたか否かを判定する。

Ａ９０２において、検索部４０４は、テキストデータの同じ文の中に出てきたキーワードに関連する資料を取得する。
Ａ９０３において、出力制御部４０５は、検索部４０４が取得した資料を、該当する面談主催者と面談相手との面談の画面に表示するよう制御する。

実施形態１によれば、面談中に設定されたキーワードの組み合わせが出てきた場合、そのキーワードに関連する資料を面談中の画面に表示することができる。したがって、面談をしながらその面談の内容に合わせた資料を探して表示する手間をかけずに必要な資料を素早く取得し、面談においてその資料を使ってより詳細に説明等を行うことができる。

＜変形例１＞
実施形態１では、サーバ装置１００は、面談主催者及び面談相手に対して同じ資料を表示するよう説明を行った。しかし、変形例１の出力制御部４０５は、キーワードの組み合わせに応じて、キーワードの組み合わせに関連する資料を、面談主催者側の面談中の画面だけに表示するか、面談相手側の面談中の画面だけに表示するか、を制御する。

図１０は、変形例１の設定部４０１によって設定されたキーワードの組み合わせ等の一例を示す図である。図１０に示されるようなテーブルは、例えば、記憶部２０２に記憶される。図１０のテーブルは、実施形態１の図５のテーブルに比べて、項目として項目１０１０が追加されている。項目１０１０には、例えば、１、２、３等が設定される。１は、関連する資料を面談主催者に表示することを示す。２は、関連する資料を面談相手に表示することを示す。３は、関連する資料を面談主催者及び面談相手に表示することを示す。すなわち、設定部４０１は、キーワードの組み合わせと、面談においてキーワードの組み合わせが出てきた場合に表示する資料と、表示先と、を関連付けて設定する。

変形例１の検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させたテキストデータの中から面談主催者と面談相手との面談において設定部４０１で設定されたキーワードの組み合わせを検索し、キーワードの組み合わせが出てきた場合は、キーワードの組み合わせに関連する資料を取得する。また、検索部４０４は、キーワードの組み合わせに関連する資料の出力先の情報（上述した、１、又は２、又は３等の情報）を取得する。検索部４０４が資料を取得した場合、出力制御部４０５は、検索部４０４が取得した資料を、検索部４０４が取得した出力先の情報に基づき面談の画面に表示するよう制御する。すなわち、出力制御部４０５は、キーワードの組み合わせに応じて、キーワードの組み合わせに関連する資料を面談主催者のクライアント装置１１０の画面に表示するか、面談相手のクライアント装置１２０の画面に表示するか、面談主催者のクライアント装置１１０及び面談相手のクライアント装置１２０の画面に表示するかを制御する。

図１１は、資料が表示された面談画面の一例を示す図（その３）である。図１２は、資料が表示された面談画面の一例を示す図（その４）である。図１１の面談画面は、面談主催者のクライアント装置１１０の出力部３０５に表示されている面談画面の一例である。図１２の面談画面は、面談相手のクライアント装置１２０の出力部に表示されている面談画面の一例である。図１１及び図１２の面談画面は同時刻におけるそれぞれのクライアント装置の出力部に表示されている面談画面である。図１１の面談画面には資料１２１０が出力制御部４０５によって表示されている。図１２の面談画面には資料１３１０が出力制御部４０５によって表示されている。

変形例１によれば、キーワードの組み合わせに応じて、資料の出力先を変更することができる。

＜変形例２＞
実施形態１では、サーバ装置１００は、面談主催者と面談相手との面談の音声データに基づき生成されたテキストデータにキーワードの組み合わせが含まれていた場合、キーワードの組み合わせに関連する資料を出力した。変形例２のサーバ装置１００は、キーワードの組み合わせと、キーワードの組み合わせが面談主催者から出てきたか、面談相手から出てきたかの情報と、によって、面談中の画面に表示する資料を変更するよう制御する。

図１３は、変形例２の設定部４０１によって設定されたキーワードの組み合わせの一例を示す図である。図１３に示されるテーブル１１００は、面談主催者用のキーワードの組み合わせ等を設定するテーブルである。テーブル１１５０は、面談相手のキーワードの組み合わせ等を設定するテーブルである。テーブル１１００は、項目として、項目１１１０と、項目１１２０と、項目１１３０と、を含む。項目１１１０には、１つ目のキーワードが設定される。項目１１２０には、１つ目のキーワードとセットになる２つ目のキーワードが設定される。項目１１３０には、該当するキーワードの組み合わせが出現した場合に、表示させたい資料が設定される。なお、項目１１３０には、資料自体が設定されてもよいし、その資料が保存されている保存先のＵＲＬ等が設定されてもよい。テーブル１１５０の項目も、テーブル１１００の項目と同様である。

変形例２の音声認識部４０３は、面談における音声の波形に基づき、面談における話者（例えば、営業を行っている営業担当者か、営業を受けているお客様か）を分類し、話者ごとの文字列（テキスト化）に変換する。より具体的に説明すると、音声認識部４０３は、面談における音声の波形に基づき、話者を分離し、面談主催者のテキストデータと、面談相手のテキストデータを生成する。変形例２の検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させた面談主催者のテキストデータの中の同じ文の中にテーブル１１００に設定されているキーワードの組み合わせを検索し、キーワードの組み合わせが出てきた場合は、キーワードの組み合わせに関連する資料を取得する。同様に、検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させた面談相手のテキストデータの中の同じ文の中にテーブル１１５０に設定されているキーワードの組み合わせを検索し、キーワードの組み合わせが出てきた場合は、キーワードの組み合わせに関連する資料を取得する。すなわち、変形例２の出力制御部４０５は、キーワードの組み合わせと、キーワードの組み合わせが面談主催者の音声から求められたテキストデータに含まれていたか、面談相手の音声から求められたテキストデータに含まれていたかの情報と、によって、面談中の画面に表示する資料を変更するよう制御する。より具体的に説明すると、出力制御部４０５は、キーワードの組み合わせと、キーワードの組み合わせが面談主催者の音声から求められたテキストデータに含まれていたか、面談相手の音声から求められたテキストデータに含まれていたかの情報と、によって、キーワードの組み合わせに関連する資料を、面談主催者のクライアント装置１１０の画面に表示するか、面談相手のクライアント装置１２０の画面に表示するかを切り替えるよう制御する。また、出力制御部４０５は、キーワードの組み合わせと、キーワードの組み合わせが面談主催者の音声から求められたテキストデータに含まれていたか、面談相手の音声から求められたテキストデータに含まれていたかの情報と、によって、キーワードの組み合わせに関連する資料を、面談主催者のクライアント装置１１０の画面に表示するか、面談相手のクライアント装置１２０の画面に表示するか、面談主催者のクライアント装置１１０及び面談相手のクライアント装置１２０の両方の画面に表示するかを切り替えるよう制御するようにしてもよい。

変形例２によれば、面談主催者が面談中に面談主催者のキーワードの組み合わせを言った場合、面談主催者のキーワードの組み合わせに関連する資料が面談中に表示される。また、面談相手が面談中に面談相手のキーワードの組み合わせを言った場合、面談相手のキーワードの組み合わせに関連する資料が面談中に表示される。よって、変形例２によれば、より適切な資料を表示するよう制御することができる。
なお、変形例２では、テーブルを２つ設けた例を用いて説明を行ったが、面談主催者から出てきたキーワードの組み合わせ及び資料を設定しているのか、面談相手から出てきたキーワードの組み合わせ及び資料を設定しているのかを区別可能であればテーブルは１つであってもよい。

＜変形例３＞
上述した実施形態では、検索部４０４は、テキストデータの同じ文の中に設定部４０１で設定されたキーワードの組み合わせが含まれていないか検索した。しかし、検索部４０４は、テキストデータのうち、第１のキーワードが出てから所定文字数（例えば、２０文字）以内に第２のキーワードが出てきたか否かを判定するようにしてもよい。このような構成の場合、検索部４０４は、テキストデータのうち、第１のキーワードが出てから所定文字数（例えば、２０文字）以内に第２のキーワードが出てきた場合、キーワードの組み合わせに関連する資料を取得する。
また、検索部４０４は、テキストデータのうち、第１のキーワードが出てから所定時間（例えば、１分）以内の音声データに関するテキストデータに第２のキーワードが出てきたか否かを判定するようにしてもよい。このような構成の場合、検索部４０４は、テキストデータのうち、第１のキーワードが出てから所定時間（例えば、１分）以内の音声データに関するテキストデータに第２のキーワードが出てきた場合、キーワードの組み合わせに関連する資料を取得する。

変形例３によっても上述した実施形態１と同様の効果を得ることができる。

＜変形例４＞
上述した実施形態では、例えば、図５のテーブルを例に説明すると、検索部４０４は、テキストデータにおいてキーワード１に続いて、キーワード２が出てきた場合、キーワードの組み合わせに関連する資料を取得した。しかし、変形例４の検索部４０４は、テキストデータにおいてキーワード１、キーワード２の順番だけではなく、キーワード２、キーワード１の順番でキーワードの組み合わせが出てきた場合もキーワードの組み合わせに関連する資料を取得するようにしてもよい。

図１４は、変形例４の設定部４０１によって設定されたキーワードの組み合わせの一例を示す図である。図１４に示されるテーブルは、例えば、記憶部２０２に記憶される。図１４のテーブルは、実施形態１の図５のテーブルに比べて、項目として項目１４１０が追加されている。項目１４１０には、例えば、１、２等が設定されている。１は、キーワード１、キーワード２の順番を守って検索を行うことを示している。２は、キーワード１、キーワード２の順番を問わずに検索を行うことを示している。

変形例２の検索部４０４は、音声認識部４０３が生成し、記憶部２０２等に記憶させたテキストデータの中から面談主催者と面談相手との面談において設定部４０１で設定されたキーワードの組み合わせを検索する際に、項目１４１０の値が１の場合は、キーワード１、キーワード２の順になっているキーワードの組み合わせを検索する。また、検索部４０４は、項目１４１０の値が２の場合は、キーワード１、キーワード２の順となっているキーワードの組み合わせも、キーワード２、キーワード１の順になっているキーワードの組み合わせも検索する。

変形例４によれば、キーワードの順になっているキーワードの組み合わせを検索するか、キーワードの順は問わないキーワードの組み合わせを検索するかを設定することができる。

＜変形例５＞
上述した実施形態等では、設定部４０１は、例えば、管理者権限を有するクライアント装置の入力部等を介した設定操作に応じて、キーワードの組み合わせを設定するものとして説明を行った。しかし、変形例５の設定部４０１は、面談の音声データに基づきテキスト化されたテキストデータと、面談において表示された資料と、に基づき、資料が表示された際のキーワードの組み合わせを学習させ、学習させた学習済みモデルを生成するようにしてもよい。そして、設定部４０１は、学習済みモデルに基づき、キーワードの組み合わせと、面談においてキーワードの組み合わせが出てきた場合に表示する資料と、を関連付けて設定するようにしてもよい。

変形例５によれば、自動的にキーワードの組み合わせと、資料とを関連付けて設定することができる。また、繰り返し学習させることによって、出力する資料の精度を向上させることができる。

＜変形例６＞
上述した実施形態では、１つの装置である、サーバ装置１００が処理を行うものとして説明を行った。しかしながら、上述した機能及び処理は、サーバ装置１００の処理を複数の装置、例えば、複数のサーバ装置から構成される情報処理システムのそれぞれのサーバ装置の制御部がそれぞれのサーバ装置の記憶部に記憶されたプログラムに基づき処理を実行することでも実現される。

＜付記＞
発明は、次に記載の各態様で提供されてもよい。
前記情報処理システムにおいて、前記制御部は、前記キーワードの組み合せが検出された場合に、前記キーワードの組み合せに関連する資料を面談中の画面に表示させる、情報処理システム。
前記情報処理システムにおいて、前記制御部は、受け付けた前記音声を音声認識し、テキストデータを生成し、生成したテキストデータに設定されたキーワードの組み合わせが検出された場合には、前記キーワードの組み合せに関連する資料を、面談中の画面に表示させる、情報処理システム。
前記情報処理システムにおいて、前記制御部は、キーワードの組み合わせを記憶領域に記憶させることで、キーワードの組み合わせを設定する、情報処理システム。
前記情報処理システムにおいて、前記制御部は、キーワードの組み合わせと、資料と、を関連付けて前記記憶領域に記憶させる、情報処理システム。
前記情報処理システムにおいて、前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、前記制御部は、前記キーワードの組み合わせに応じて、前記キーワードの組み合わせに関連する資料を、面談主催者側の面談中の画面に表示するか、面談相手側の面談中の画面に表示するかを制御する、情報処理システム。
前記情報処理システムにおいて、前記制御部は、前記キーワードの組み合わせに応じて、前記キーワードの組み合わせに関連する資料を、面談主催者側の面談中の画面に表示するか、面談相手側の面談中の画面に表示するか、面談主催者側及び面談相手側の面談中の画面に表示するかを制御する、情報処理システム。
前記情報処理システムにおいて、前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、前記制御部は、前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、面談中の画面に表示する資料を変更する、情報処理システム。
前記情報処理システムにおいて、前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、前記制御部は、前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、前記キーワードの組み合わせに関連する資料を、面談主催者側の画面に表示するか、面談相手側の画面に表示するかを制御する、情報処理システム。
前記情報処理システムにおいて、前記制御部は、前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、前記キーワードの組み合わせに関連する資料を、面談主催者側の画面に表示するか、面談相手側の画面に表示するか、前記面談主催者側の画面及び前記面談相手側の画面に表示するかを制御する、情報処理システム。
情報処理システムが実行する情報処理方法であって、インターネットを介した面談に複数のユーザーを接続させ、面談中に前記複数のユーザーによる音声を受け付け、受け付けた前記音声から設定されたキーワードの組み合わせが検出された場合には、前記キーワードの組み合せに関連する資料を、前記複数のユーザーのうちの少なくとも１人が把握可能な態様で出力する、情報処理方法。
プログラムであって、コンピュータを、前記情報処理システムの制御部として機能させるためのプログラム。
もちろん、この限りではない。

例えば、上述のプログラムを記憶させる、コンピュータ読み取り可能な非一時的な記憶媒体として提供してもよい。
また、上述した実施形態及び変形例を任意に組み合わせて実施するようにしてもよい。
また、上述した実施形態等では、サーバ装置１００が画面を生成してクライアント装置に送信する例を示した。しかし、サーバ装置１００は、画面を生成するためのデータをクライアント装置に送信し、そのデータを受け取ったクライアント装置がデータに基づき画面を生成するようにしてもよい。

最後に、本発明に係る種々の実施形態を説明したが、これらは、例として提示したものであり、発明の範囲を限定することは意図していない。新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。実施形態やその変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１００ ：サーバ装置
１１０ ：クライアント装置
１２０ ：クライアント装置
１３０ ：クライアント装置
１５０ ：ネットワーク
２０１ ：制御部
２０２ ：記憶部
２０３ ：通信部
３０１ ：制御部
３０２ ：記憶部
３０３ ：撮像部
３０４ ：入力部
３０５ ：出力部
３０６ ：通信部
４０１ ：設定部
４０２ ：面談制御部
４０３ ：音声認識部
４０４ ：検索部
４０５ ：出力制御部
４０６ ：記憶処理部
５１０ ：項目
５２０ ：項目
５３０ ：項目
６１０ ：領域
６２０ ：領域
６３０ ：資料
６４０ ：資料
７１０ ：領域
７２０ ：領域
１０００ ：情報処理システム
１０１０ ：項目
１１００ ：テーブル
１１１０ ：項目
１１２０ ：項目
１１３０ ：項目
１１５０ ：テーブル
１２１０ ：資料
１３１０ ：資料
１４１０ ：項目

Claims (12)

1. 情報処理システムであって、
   制御部を有し、
   前記制御部は、
   インターネットを介した面談に複数のユーザーを接続させ、
   面談中に前記複数のユーザーによる音声を受け付け、
   受け付けた前記音声から設定されたキーワードの組み合わせが検出された場合には、前記キーワードの組み合せに関連する資料を、前記複数のユーザーのうちの少なくとも１人が把握可能な態様で出力する、
   情報処理システム。
2. 請求項１に記載の情報処理システムにおいて、
   前記制御部は、
   前記キーワードの組み合せが検出された場合に、前記キーワードの組み合せに関連する資料を面談中の画面に表示させる、
   情報処理システム。
3. 請求項１又は請求項２に記載の情報処理システムにおいて、
   前記制御部は、
   受け付けた前記音声を音声認識し、テキストデータを生成し、生成したテキストデータに設定されたキーワードの組み合わせが検出された場合には、前記キーワードの組み合せに関連する資料を、面談中の画面に表示させる、
   情報処理システム。
4. 請求項１から請求項３までの何れか１項に記載の情報処理システムにおいて、
   前記制御部は、
   キーワードの組み合わせを記憶領域に記憶させることで、キーワードの組み合わせを設定する、
   情報処理システム。
5. 請求項４に記載の情報処理システムにおいて、
   前記制御部は、
   キーワードの組み合わせと、資料と、を関連付けて前記記憶領域に記憶させる、
   情報処理システム。
6. 請求項１から請求項５までの何れか１項に記載の情報処理システムにおいて、
   前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、
   前記制御部は、
   前記キーワードの組み合わせに応じて、前記キーワードの組み合わせに関連する資料を、面談主催者側の面談中の画面に表示するか、面談相手側の面談中の画面に表示するかを制御する、
   情報処理システム。
7. 請求項６に記載の情報処理システムにおいて、
   前記制御部は、
   前記キーワードの組み合わせに応じて、前記キーワードの組み合わせに関連する資料を、面談主催者側の面談中の画面に表示するか、面談相手側の面談中の画面に表示するか、面談主催者側及び面談相手側の面談中の画面に表示するかを制御する、
   情報処理システム。
8. 請求項１から請求項７までの何れか１項に記載の情報処理システムにおいて、
   前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、
   前記制御部は、
   前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、面談中の画面に表示する資料を変更する、
   情報処理システム。
9. 請求項１から請求項８までの何れか１項に記載の情報処理システムにおいて、
   前記複数のユーザーには、面談主催者側のユーザーと、面談相手側のユーザーとが含まれ、
   前記制御部は、
   前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、前記キーワードの組み合わせに関連する資料を、面談主催者側の画面に表示するか、面談相手側の画面に表示するかを制御する、
   情報処理システム。
10. 請求項９に記載の情報処理システムにおいて、
    前記制御部は、
    前記キーワードの組み合わせと、前記キーワードの組み合わせが前記面談主催者側の音声に含まれていたか、前記面談相手側の音声に含まれていたかの情報と、によって、前記キーワードの組み合わせに関連する資料を、面談主催者側の画面に表示するか、面談相手側の画面に表示するか、前記面談主催者側の画面及び前記面談相手側の画面に表示するかを制御する、
    情報処理システム。
11. 情報処理システムが実行する情報処理方法であって、
    インターネットを介した面談に複数のユーザーを接続させ、
    面談中に前記複数のユーザーによる音声を受け付け、
    受け付けた前記音声から設定されたキーワードの組み合わせが検出された場合には、前記キーワードの組み合せに関連する資料を、前記複数のユーザーのうちの少なくとも１人が把握可能な態様で出力する、
    情報処理方法。
12. プログラムであって、
    コンピュータを、請求項１から請求項１０までの何れか１項に記載の情報処理システムの制御部として機能させるためのプログラム。

Images